Un'analisi rigorosa con un risultato positivo

Oggi siamo lieti di condividere i risultati e il rapporto tecnico di uno studio sperimentale randomizzato (RCT), condotto in collaborazione con Fab AI e con il supporto del Ministero dell’Educazione della Sierra Leone. In otto settimane, abbiamo valutato come Guided Learning in Gemini ha influenzato il progresso matematico di 1.763 studenti delle scuole secondarie inferiori in 12 scuole del distretto di Port Loko in Sierra Leone.

Collaborazione e innovazione a supporto dell'educazione

La collaborazione tra tecnologia e insegnanti è fondamentale per il successo di questo progetto. Il nostro obiettivo era migliorare la consegna del servizio educativo attraverso l’innovazione. “Siamo felici di disporre ora di prove forti che dimostrano che una AI progettata con cura può aiutare a migliorare i risultati di apprendimento,” ha commentato un rappresentante del ministero.

Guidata e non sostitutiva

I risultati di questo studio sperimentale suggeriscono che l’AI può diventare un potente aiuto pedagogico — non per sostituire gli insegnanti, ma per ampliare il loro raggio d’azione. Questo studio fa parte del nostro sforzo per costruire una base globale di prove sull'impatto dell’AI sull'insegnamento e l'apprendimento.

Un comune problema è che l’AI generativa potrebbe diventare una scorciatoia per gli studenti, bypassando sforzi cognitivi necessari per l’apprendimento profondo. Guided Learning è stato progettato per affrontare esattamente questa preoccupazione: si basa anni di ricerca, inclusi i nostri sforzi LearnLM, per garantire che l’AI sia fondata pedagogicamente e mirata a favorire la comprensione piuttosto che fornire risposte dirette.

Un rapporto costruttivo: l’AI come socratico

I dati da Sierra Leone suggeriscono che ciò funzioni. Un’analisi di oltre 113.000 interazioni ricevute durante il nostro trial ha rivelato che gli studenti utilizzavano lo strumento per costruire la comprensione concettuale in circa il 91,4% delle conversazioni, piuttosto che solo cercando soluzioni. Gemini ha risposto ponendo domande di supporto nel 76% dei messaggi, fornendo soluzioni dirette in soli il 2% dei casi. Queste interazioni socratiche assicurano che lo sforzo cognitivo resti con lo studente.

Insegnanti al centro del successo

Il successo di questo trial è stato costruito su una partnership tra AI ed educatori, dove gli insegnanti rimanevano al centro dell’esperienza. I docenti hanno progettato le lezioni, stabilito gli obiettivi e facilitato le discussioni di classe che guidavano l’apprendimento.

Nelle discussioni焦点, gli insegnanti hanno riportato che Gemini ha in realtà supportato anche la loro crescita professionale. Utilizzando lo strumento per la preparazione delle lezioni, hanno scoperto nuovi modi per spiegare argomenti familiari come le frazioni. Molti hanno sperimentato un cambiamento dal ruolo di "docente" a "facilitatore", spostandosi tra i banchi per supportare coppie di studenti man mano che affrontavano i propri percorsi di apprendimento.

Premi educativi e coinvolgimento

Gli esiti quantitativi sono stati significativi. Gli studenti che utilizzavano Guided Learning hanno ottenuto un incremento di +0.258 di deviazione standard nei loro punteggi matematici rispetto al gruppo di controllo. In termini pratici, ciò rappresenta un progresso di circa 1.2 a 1.7 anni normali di apprendimento raggiunto in otto settimane.

Gli studenti in classi dove i loro insegnanti integravano Gemini al 50% delle loro lezioni (con un obiettivo di 12 ore durante il trial) hanno registrato ulteriori progressi, stimati a 1.8 a 2.5 anni. L’engagement è stato estremamente alto: il 69% degli studenti ha raggiunto o superato i target di utilizzo, di gran lunga superando il cinque percento tipico per tecnologie educative volontarie (“Il Problema del Cinque Percento”). Questo significa che gli studenti erano non solo coinvolti, ma entusiasti di partecipare alle classi.

Un cambiamento nel comportamento degli studenti

Al di là dei dati, abbiamo osservato una profonda trasformazione nel comportamento. Gli studenti hanno riferito di apprezzare di più le matematica e di interagire attivamente con l’apprendimento al di fuori delle lezioni formali. Importanti è stato notare che nel corso del tempo, le loro domande e conversazioni si sono spostate da una ricerca di soluzioni dirette verso un’attenzione crescente per l’acquisizione di competenze.

Nelle ultime settimane, le richieste di costruzione di abilità sono salite al 90% dal 68% iniziale.

In parallelo, le domande mirate a soluzioni specifiche sono calate dal 25% all’10%.

Questo dimostra che gli studenti non stavano cercando semplicemente risposte, ma desideravano capire come arrivarci.

Direzioni future e studi a livello globale

Gli sforzi per capire l’impatto di Guided Learning sull’apprendimento proseguiranno con una serie di nuovi RCT globali registrati in anticipo. In un interesse per la scienza aperta e la condivisione di insight rilevanti, rilasciamo anche una guida su come condurre questi RCT con Fab AI, per fornire a altri un'accelerazione nello svolgere studio scalabili in base alle loro esigenze e contesto — per scoprire prove robuste localizzate.

L’impegno globale e il divario di conoscenza

I risultati fin qui ottenuti sollevano un problema importante: il divario di prestazione. Gli studenti con competenze matematiche più forti hanno tratto vantaggio maggiore dal trial. Questo sottolinea l'esigenza urgente di fornire strumenti che generino i benefici massimi per coloro che ne hanno più bisogno.

Piani futuri e sostenibilità globale

Guardando al futuro, abbiamo intenzione di espandere i trial in altri Paesi, indagando in modo più approfondito su aspetti come l’apprendimento metacognitivo e l'intelligenza relazionale, per ottenere una visione completa che esplori le complessità sfumate dell’apprendimento. Unendo il fondamento relazionale garantito da una classe gestita dagli insegnanti e le capacità personalizzabili e di supporto offerti dall’AI, possiamo assicurarci che la tecnologia rappresenti un ponte verso opportunità di apprendimento significative per tutti.

Collaboratori e finanziatori

Il trial è stato anche sostenuto da Google.org e la Fondazione Gates. Inolt