Midiendo el impacto del aprendizaje con IA en Sierra Leona y más allá
Hoy compartimos los resultados y el informe técnico de un ensayo controlado aleatorizado (RCT), realizado en asociación con Fab AI y con el apoyo del Ministerio de Educación de Sierra Leona. Durante ocho semanas, evaluamos cómo el Aprendizaje Guiado en Gemini afectó el progreso en matemáticas de 1.763 estudiantes de educación secundaria básica en 12 escuelas del Distrito de Port Loko, en Sierra Leona.
Los resultados de este ensayo pre-registrado sugieren que la IA puede ser un poderoso socio pedagógico, no reemplazando a los docentes, sino ampliando su alcance. Este estudio es parte de nuestro esfuerzo continuo para construir una base de evidencia global sobre el impacto de la IA en la enseñanza y el aprendizaje.
Más allá del motor de respuestas: ¿cómo proteger el pensamiento crítico?
Una preocupación común es que la IA generativa pueda convertirse en un atajo para los estudiantes, evitando el esfuerzo cognitivo necesario para un aprendizaje profundo. El Aprendizaje Guiado está diseñado para abordar esto: se basa en años de investigación en nuestros esfuerzos LearnLM para priorizar la construcción de la comprensión sobre la entrega de respuestas directas.
Los datos de Sierra Leona sugieren que este enfoque funciona. Un análisis de más de 113.000 interacciones reveló que los estudiantes usaron la herramienta para construir comprensión conceptual en el 91,4% de las conversaciones, en lugar de simplemente buscar soluciones. Gemini respondió planteando preguntas de andamiaje en el 76% de sus mensajes, proporcionando soluciones directas solo en el 2% de los casos. Esta interacción "socrática" asegura que el trabajo cognitivo pesado permanezca en el estudiante.
Una intervención liderada por docentes
El éxito de este ensayo se basó en una asociación entre la IA y los educadores, donde los maestros permanecieron en el centro de la experiencia. Los docentes diseñaron las lecciones, establecieron los objetivos y facilitaron las discusiones en el aula que impulsaron el aprendizaje.
En grupos focales, los profesores informaron que Gemini también apoyó su propio crecimiento profesional. Al usar la herramienta para la preparación de lecciones, descubrieron nuevas formas de explicar temas familiares como las fracciones. Muchos describieron un cambio de "conferencistas" a "facilitadores", moviéndose por el salón para apoyar a parejas de estudiantes mientras navegaban en sus propios viajes de aprendizaje.
Para ayudar a otros a implementar programas similares, estamos lanzando una guía de capacitación docente con materiales creados en colaboración con Fab AI, incluyendo los protocolos específicos utilizados para este estudio.
¿Cuáles fueron los resultados cuantitativos del estudio?
Los resultados cuantitativos fueron significativos. Los estudiantes que utilizaron el Aprendizaje Guiado vieron una ganancia de +0,258 desviaciones estándar en sus puntajes de matemáticas en comparación con el grupo de control. En términos prácticos, esto representa aproximadamente de 1,2 a 1,7 años de progreso de aprendizaje típico logrado dentro de las ocho semanas del ensayo.
Los estudiantes en aulas donde sus profesores incorporaron Gemini en aproximadamente la mitad de sus lecciones para cumplir un objetivo de 12 horas durante el ensayo, vieron ganancias aún mayores: aproximadamente 1,8 a 2,5 años de progreso. La participación fue notablemente alta: el 69% de los estudiantes cumplió o superó los objetivos de uso, superando por mucho el cinco por ciento típico de la tecnología educativa voluntaria (conocido como "El problema del cinco por ciento"). Eso significa que los estudiantes no solo estaban comprometidos, sino que disfrutaban más de asistir a clase.
Más allá de los números, observamos un cambio profundo en el comportamiento. Los estudiantes reportaron disfrutar más de las matemáticas y se involucraron activamente con el aprendizaje más allá de la instrucción regular. Crucialmente, con el tiempo, sus conversaciones y preguntas se orientaron más hacia el aprendizaje, enfocándose en el desarrollo de habilidades en lugar de buscar soluciones directas. Específicamente, las consultas de desarrollo de habilidades aumentaron al 90% en la semana final (frente al 68% en la primera semana), mientras que las preguntas de búsqueda de soluciones cayeron del 25% al 10%, demostrando que los estudiantes no solo querían respuestas, sino entender cómo llegaron a ellas.
Para comprender mejor el impacto del Aprendizaje Guiado, estamos realizando una serie de RCTs pre-registrados adicionales a nivel mundial. Con el fin de promover la ciencia abierta, también estamos lanzando un manual sobre nuestro enfoque de RCTs con Fab AI para ayudar a otros a realizar estudios más rápidos y escalables. Continuaremos publicando nuestros resultados para construir una base de evidencia transnacional que informe el desarrollo responsable de la IA. Además, nuestro apoyo a la Global AI for Learning Alliance (GAILA) acelerará estos compromisos a través de la acción colectiva.
El camino a seguir
Aunque estos resultados son prometedores, también resaltaron el desafío de la "brecha de rendimiento". Si bien la mayoría de los estudiantes se benefició, aquellos que ingresaron al ensayo con habilidades matemáticas más fuertes obtuvieron mayores ventajas. Esto subraya una necesidad importante: ofrecer herramientas que brinden los mayores beneficios a los estudiantes que más las necesitan.
Mirando hacia el futuro, planeamos expandir estos ensayos a otros países y profundizar en áreas como la metacognición y la inteligencia relacional. Al combinar la base relacional de un aula liderada por docentes con las capacidades de andamiaje de la IA, podemos ayudar a asegurar que la tecnología sirva como un puente hacia oportunidades de aprendizaje significativas para todos.
1 También recibimos apoyo de Google.org y la Gates Foundation para realizar el ensayo. EducAid, Laterite y Oxford MeasurEd también colaboraron con nosotros.
Vía Google DeepMind.
