A Meta-Analysis of ChatGPT’s Influence on Learning Achievement
Links to claims
Supports (1)
| Claim | Basis |
|---|---|
| K17 (candidate) | Note carries the bank kill sentence behind K17 (group K17); no change in review |
Challenges (1)
| Claim | Basis |
|---|---|
| C2 | Positive pooled effect on achievement; closed-book follow-up absent or mixed. Open test for C2. |
Review state: first-pass draft, pending human review.
Source note (Swedish, verbatim from the Kunskapsbank)
Syntes: Doo & Park (2026) — Meta-analys av ChatGPT och learning achievement
ID: AI-004
Tier: meta
Closed-book follow-up: nej / blandat (många studier mäter achievement med verktygsaccess)
HE vs K–12: mest HE; inkl. middle/high
Novelty decay: sannolik novelty-komponent i tidiga ChatGPT-studier
Utfallslabel: prestation, inte lärande
Metadata
- ID:
AI-004 - Tier: meta
- N: se METADATA / artikel
- Population: övergripande (mest HE)
- Country: blandad
- Subject: ChatGPT achievement
- Duration: kort–medel
Finding
Meta positiv effekt av ChatGPT på learning achievement (g i spannet ~0,5-klass). Closed-book follow-up: nej/blandat → prestation, inte lärande om retention utan verktyg saknas.
Mechanism
Ospecificerad i snitt — blandar tutor-liknande och answer-giving uses.
Limits
HE-tung; novelty; mätbias risk (Deng flaggar liknande).
This claim dies if …
När analyser begränsas till closed-book retention försvinner positiv g.
Swedish implication
Stop policy utifrån open-book ChatGPT-gains; start kräva closed-book i lokal utvärdering.
Links
- DOI: se METADATA
- Relaterade: AI-002, AI-005, AI-007, AI-003
Metadata as recorded
- ID
- AI-004
- Tier
- meta
- Closed-book follow-up
- nej / blandat
- HE vs K–12
- mest HE; inkl. middle/high
- Titel
- A Meta-Analysis of ChatGPT’s Influence on Learning Achievement
- Författare
- Doo, Min Young; Park, Yeonjeong
- År
- 2026 (IRRODL Vol. 27, No. 1, februari 2026)
- Källa/DOI
- (öppen IRRODL-artikel; PDF nedladdad från tidskriften)
- URL
- https://www.irrodl.org/index.php/irrodl/article/download/8775/6389/51538
- Typ
- meta-analys (peer-reviewed, open access)
- Åldersgrupp
- övergripande (mest undergrad; inkluderar middle/high school)
- Teman
- ai-och-larande
- Sparade fil
- Doo-Park-2026-ChatGPT-Meta-IRRODL.pdf
- Hämtad
- 2026-09-07
- Nyckeltal
- 22 publikationer, k=86 effektstorlekar, N≈6 992; overall g = 0,573; middle/high school g = 0,928 (ns skillnad vs undergrad)
Original files held in the project (not published): Doo-Park-2026-ChatGPT-Meta-IRRODL.pdf