Aan de studie deden 1.763 leerlingen uit de eerste twee klassen van het voortgezet onderwijs (leeftijd 13 jaar en ouder) mee, verdeeld over 48 wiskundeklassen . Binnen elke school en elk leerjaar werden klassen willekeurig toegewezen aan de interventiegroep, die met Gemini werkte, of de controlegroep, die standaard les kreeg. Om het effect van de AI-tool niet te verwarren met de kwaliteit van de docent, kregen alle docenten dezelfde training van 5 tot 6 uur .
Het streefdoel was dat leerlingen de tool tijdens twee van hun vier wekelijkse wiskundelessen zouden gebruiken. Dat komt neer op 12 uur Guided Learning over de gehele periode van acht weken .
De interventie was niet zomaar een chatbot die aan leerlingen werd gegeven. Het volgde een strak pedagogisch kader, ontworpen om de AI een partner te maken in een gezamenlijk leerproces:
Ter voorbereiding definieerden docenten lesdoelen, schreven ze startprompts en ontwierpen ze vraagstructuren op het bord om te sturen hoe leerlingen met Gemini omgingen .
Het onderzoek leverde statistisch significante verbeteringen op, maar de grootte van het effect hing sterk af van hoe vaak de tool werd gebruikt en van het startniveau van de leerling.
| Maatstaf | Bevinding |
|---|---|
| Intention-to-treat (ITT) | Leerlingen die aan de AI-groep waren toegewezen, zagen gemiddeld een verbetering van +0,258 standaarddeviatie (SD). Dit staat gelijk aan een leerling die van het 50e naar het 60e percentiel gaat . |
| Doserings-effectrelatie | De 69% van de leerlingen die het volledige streefdoel van 12 uur of meer haalden, boekten een veel groter effect van +0,380 SD. Elk extra uur van gebruik was geassocieerd met een winst van +0,016 SD . |
| Basisniveau wiskunde | De meest kritische bevinding: leerlingen met een sterkere basis in wiskunde profiteerden aanzienlijk meer. Het behandeleffect nam toe met 0,195 SD voor elke extra standaarddeviatie van hun wiskundeniveau bij de start . |
| Subgroepanalyse | Er werden geen significante verschillen gevonden in het effect van de AI als er gekeken werd naar het leesniveau, geslacht of de leeftijd van de leerlingen . |
Het meest onthullende onderdeel van de studie was de analyse van meer dan 113.000 interacties tussen leerlingen en Gemini. Het schetste een beeld van de AI die niet als antwoordmachine fungeerde, maar als tutor.
Het overgrote deel van de gesprekken – 91,4% – was gericht op wiskundig begrip . Gemini's gedrag werd zorgvuldig gestuurd door de Guided Learning-modus: het stelde coachende vragen in 76,4% van zijn berichten, waardoor leerlingen zelf moesten nadenken. Slechts in 2,1% van de gevallen werd een direct antwoord van de AI, zoals een 'directe oplossing', gezien .
Het feit dat de aanvankelijk beter presterende leerlingen het meest profiteerden, noemden de onderzoekers een reëel punt van zorg. Zonder bewuste strategieën om lager presterende leerlingen te ondersteunen, dreigt de interventie de bestaande prestatiekloven te vergroten in plaats van te dichten .
Kwalitatieve feedback uit focusgroepen met docenten voegde een extra dimensie toe. Docenten rapporteerden een opvallende toename in de betrokkenheid van leerlingen en een actievere deelname aan de les . Velen gebruikten Gemini ook voor hun lesvoorbereiding en ontdekten nieuwe manieren om complexe onderwerpen zoals breuken uit te leggen .
Cruciaal was dat docenten een verschuiving in hun eigen professionele identiteit beschreven. Ze ervoeren dat hun rol evolueerde van 'docent' naar 'facilitator', die door het klaslokaal liep om de tweetallen te ondersteunen .
Niet alle feedback was positief. Sommige leraren meldden dat Gemini soms off-topic inhoud introduceerde of de voortgang van de klas door de geplande lesstof vertraagde .
Hoewel de resultaten positief zijn, benadrukken de onderzoekers een aantal beperkingen die de bevindingen in perspectief plaatsen:
De proef in Sierra Leone is nog maar het begin. Het is de eerste in een geplande internationale reeks van vooraf geregistreerde studies van Google DeepMind en Fab AI om Guided Learning in verschillende onderwijssystemen te onderzoeken . In een stap richting transparantie en schaalbaarheid maakten de partners tegelijk met de resultaten hun docententrainingsmateriaal en een praktijkhandleiding voor snelle RCT's openbaar. Dit dient als blauwdruk voor andere onderzoekers en onderwijssystemen .
Aan de studie deden 1.763 leerlingen uit de eerste twee klassen van het voortgezet onderwijs (leeftijd 13 jaar en ouder) mee, verdeeld over 48 wiskundeklassen . Binnen elke school en elk leerjaar werden klassen willekeurig toegewezen aan de interventiegroep, die met Gemini werkte, of de controlegroep, die standaard les kreeg. Om het effect van de AI-tool niet te verwarren met de kwaliteit van de docent, kregen alle docenten dezelfde training van 5 tot 6 uur .
Het streefdoel was dat leerlingen de tool tijdens twee van hun vier wekelijkse wiskundelessen zouden gebruiken. Dat komt neer op 12 uur Guided Learning over de gehele periode van acht weken .
De interventie was niet zomaar een chatbot die aan leerlingen werd gegeven. Het volgde een strak pedagogisch kader, ontworpen om de AI een partner te maken in een gezamenlijk leerproces:
Ter voorbereiding definieerden docenten lesdoelen, schreven ze startprompts en ontwierpen ze vraagstructuren op het bord om te sturen hoe leerlingen met Gemini omgingen .
Het onderzoek leverde statistisch significante verbeteringen op, maar de grootte van het effect hing sterk af van hoe vaak de tool werd gebruikt en van het startniveau van de leerling.
| Maatstaf | Bevinding |
|---|---|
| Intention-to-treat (ITT) | Leerlingen die aan de AI-groep waren toegewezen, zagen gemiddeld een verbetering van +0,258 standaarddeviatie (SD). Dit staat gelijk aan een leerling die van het 50e naar het 60e percentiel gaat . |
| Doserings-effectrelatie | De 69% van de leerlingen die het volledige streefdoel van 12 uur of meer haalden, boekten een veel groter effect van +0,380 SD. Elk extra uur van gebruik was geassocieerd met een winst van +0,016 SD . |
| Basisniveau wiskunde | De meest kritische bevinding: leerlingen met een sterkere basis in wiskunde profiteerden aanzienlijk meer. Het behandeleffect nam toe met 0,195 SD voor elke extra standaarddeviatie van hun wiskundeniveau bij de start . |
| Subgroepanalyse | Er werden geen significante verschillen gevonden in het effect van de AI als er gekeken werd naar het leesniveau, geslacht of de leeftijd van de leerlingen . |
Het meest onthullende onderdeel van de studie was de analyse van meer dan 113.000 interacties tussen leerlingen en Gemini. Het schetste een beeld van de AI die niet als antwoordmachine fungeerde, maar als tutor.
Het overgrote deel van de gesprekken – 91,4% – was gericht op wiskundig begrip . Gemini's gedrag werd zorgvuldig gestuurd door de Guided Learning-modus: het stelde coachende vragen in 76,4% van zijn berichten, waardoor leerlingen zelf moesten nadenken. Slechts in 2,1% van de gevallen werd een direct antwoord van de AI, zoals een 'directe oplossing', gezien .
Het feit dat de aanvankelijk beter presterende leerlingen het meest profiteerden, noemden de onderzoekers een reëel punt van zorg. Zonder bewuste strategieën om lager presterende leerlingen te ondersteunen, dreigt de interventie de bestaande prestatiekloven te vergroten in plaats van te dichten .
Kwalitatieve feedback uit focusgroepen met docenten voegde een extra dimensie toe. Docenten rapporteerden een opvallende toename in de betrokkenheid van leerlingen en een actievere deelname aan de les . Velen gebruikten Gemini ook voor hun lesvoorbereiding en ontdekten nieuwe manieren om complexe onderwerpen zoals breuken uit te leggen .
Cruciaal was dat docenten een verschuiving in hun eigen professionele identiteit beschreven. Ze ervoeren dat hun rol evolueerde van 'docent' naar 'facilitator', die door het klaslokaal liep om de tweetallen te ondersteunen .
Niet alle feedback was positief. Sommige leraren meldden dat Gemini soms off-topic inhoud introduceerde of de voortgang van de klas door de geplande lesstof vertraagde .
Hoewel de resultaten positief zijn, benadrukken de onderzoekers een aantal beperkingen die de bevindingen in perspectief plaatsen:
De proef in Sierra Leone is nog maar het begin. Het is de eerste in een geplande internationale reeks van vooraf geregistreerde studies van Google DeepMind en Fab AI om Guided Learning in verschillende onderwijssystemen te onderzoeken . In een stap richting transparantie en schaalbaarheid maakten de partners tegelijk met de resultaten hun docententrainingsmateriaal en een praktijkhandleiding voor snelle RCT's openbaar. Dit dient als blauwdruk voor andere onderzoekers en onderwijssystemen .