Un essai aléatoire par grappes de deux ans dans 18 collèges du Tennessee a testé Khanmigo, un tuteur IA de Khan Academy, lors des séances quotidiennes de mathématiques de rattrapage. Les élèves utilisant Khanmigo ont montré des gains en réussite mathématique de 1,3 percentile national par trimestre, soit de 0,06 à 0,08 écarts-types annuellement. Un engagement sur l'année complète a permis une amélioration pouvant atteindre 0,14 écarts-types.
Ces gains correspondaient étroitement à la pratique de Khan Academy sans assistance d'IA. L'analyse a révélé un faible engagement : bien que 96 % des élèves aient essayé Khanmigo, l'élève médian ne lui a envoyé des messages que sur un tiers des jours de pratique et dans seulement 17 % des séances d'exercices où ils commettaient des erreurs. La plupart des interactions étaient minimales : les élèves envoyaient des réponses brutes ou cliquaient sur des suggestions proposées plutôt que de s'engager dans un dialogue substantiel.
L'étude conclut que réaliser le potentiel du tutorat par IA dépend moins de l'accès et plus de renforcer l'engagement des élèves. Les mots-clés incluent : intelligence artificielle, tutorat par IA, Khanmigo, apprentissage assisté par ordinateur et technologie éducative.
Source: Hacker News · Résumé par HeadlinesBriefing