TACIT: An Adaptive Assessment and Learning Tool for Teaching Reading Comprehension
TACIT : Un outil d'évaluation et d'apprentissage adaptatif pour l'enseignement de la compréhension écrite
Résumé
The latest results of the PISA survey (2023) show that the level of reading comprehension in France is heterogeneous and declining. Theoretical models of reading comprehension hypothesize that inferential processes are one of the keys to integrating information into a coherent representation (McNamara & Magliano, 2009), and training these processes could improve overall reading comprehension levels (Elleman, 2017). To address this, the TACIT platform was developed to adapt the difficulty of exercises targeting inferential processes for students. The platform accounts for heterogeneity within each class and is suitable for students of all levels, from elementary to middle school. We will present the creation of the exercise difficulty scale using an item response theory model (IRT; Rasch, 1960) and the development of the assessments necessary to measure students' levels and progress. We will also present progress results based on user data from three groups of 6th-grade students: 129 untrained students formed the control group (CG), 129 trained students who completed an average of 179 exercises formed the trained group (TG), and 183 students from SEGPA classes who completed an average of 188 exercises formed a second trained group (SGTG). The results show that the TG made significantly more progress than the CG, and the SGTG made significantly more progress than both the TG and CG. In conclusion, the work conducted demonstrates the relevance of IRT in the context of adaptive evaluation and training for teaching that requires strong pedagogical differentiation with a solid psychometric foundation. We demonstrate the effectiveness of TACIT training in improving the acquisition of inferential processes in reading comprehension. Finally, we highlight significant progress among students with the greatest difficulties.
Les derniers résultats de l’enquête PISA (2023) montrent que le niveau en compréhension écrite est hétérogène et est en baisse en France. Les modèles théoriques de la compréhension écrite émettent l’hypothèse que les processus inférentiels sont une des clefs de l’intégration des informations au sein d’une représentation cohérente (McNamara & Magliano, 2009) et leur entraînement permettrait d’améliorer le niveau global en compréhension écrite (Elleman, 2017). Ainsi, la plateforme TACIT a été développée afin de pouvoir adapter la difficulté des exercices visant des processus inférentiels proposés aux élèves. La plateforme permet de prendre en compte l'hétérogénéité au sein de chaque classe et est utilisable par les élèves de tous niveaux, scolarisés en élémentaire et au collège. Nous présenterons la création de l’échelle de difficulté des exercices grâce à un modèle de réponse à l’item (MRI ; Rasch, 1960) et la création des évaluations nécessaires pour mesurer le niveau et la progression des élèves. Nous présenterons également des résultats de progression grâce aux données utilisateurs de 3 groupes d’individus scolarisés en 6ème : 129 élèves non-entraînés constituent le groupe contrôle (GC), 129 élèves entraînés avec en moyenne 179 exercices constituent le groupe entrainé (GE) et 183 élèves de classes SEGPA entraînés avec en moyenne 188 exercices constituent un second groupe entraîné (GES). Les résultats montrent que le GE progresse significativement plus que le GC et que le GES progresse significativement plus que le GE et le GC. En conclusion, le travail réalisé montre la pertinence des MRI dans le cadre de l'évaluation et de l'entraînement adaptatif pour l'enseignement nécessitant une forte différenciation pédagogique avec un bon fondement psychométrique. Nous montrons l’efficacité de l’entraînement TACIT pour améliorer l’acquisition des processus inférentiels de la compréhension écrite. Enfin, nous montrons des progrès importants chez les élèves avec les difficultés les plus importantes.
| Origine | Fichiers produits par l'(les) auteur(s) |
|---|---|
| Licence |
