L’IA dans le TCF
Que savons-nous de l’intelligence artificielle utilisée dans TCF ?
Depuis mai 2024 — un an déjà — un système d’évaluation automatique, FIDELIA, est progressivement intégré à l’épreuve d’expression écrite du TCF sur ordinateur. Il ne remplace pas l’évaluation humaine, mais complète la double correction habituelle : l’une des deux notes peut désormais être attribuée par l’intelligence artificielle.
Qu'est-ce que le FIDELIA ?
FIDELIA est un système automatisé d'aide à la vérification développé par France Éducation international en collaboration avec le laboratoire scientifique CENTAL (Université de Louvain-la-Neuve, Belgique). Le système appartient exclusivement à FEI.
FIDELIA utilise un modèle d'IA dirigé et non génératif. Cela signifie, comme l'indiquent les compilateurs, que pour le même travail, cela donnera toujours le même résultat, sans écarts aléatoires. Le modèle est stable, reproductible et n’est affecté ni par la fatigue ni par l’humeur. Nous espérons 😂
Comment fonctionne le nouveau système d’évaluation ?
📍Le principe des tests en double aveugle, en vigueur depuis 2014, demeure.
📍Si le travail est soumis sur un ordinateur, il sera alors vérifié par un relecteur humain et le système FIDELIA.
📍L'évaluation finale repose sur deux résultats.
📍En cas de divergences entre les évaluations, un troisième contrôle humain est effectué.
Ainsi, l’évaluation repose sur la coopération de l’homme et de la machine.
Le site Web dit que
📌dans 70% des cas, les évaluations du FIDELIA et du correcteur humain coïncident ;
📌Cependant, le système peut avoir des difficultés à évaluer des textes atypiques qui ne figuraient pas dans sa base de données ;
📌Dans de telles situations, le rôle d'un correcteur humain est particulièrement important, car seule une personne est capable d'interpréter avec flexibilité des structures linguistiques inconnues.
Le FIDELIA, quant à lui, est toujours stable, ne se fatigue pas et ne commet pas d'erreurs par inattention. Nous avons déjà entendu cela quelque part. Cela garantit un contrôle uniforme, comme si le travail était vérifié par tout un groupe de correcteurs.
Comment a été créé le FIDELIA : principales étapes
Le développement du FIDELIA est le résultat de nombreuses années de travail. Voici les étapes clés suivies par les développeurs :
1 ️⃣ Il y a encore 10 ans, la double vérification des travaux écrits était introduite - elle est devenue une condition préalable nécessaire à l'émergence d'un système d'évaluation automatique.
2️⃣France Éducation international a créé une large base de données d'œuvres écrites TCF, déjà vérifiées par les examinateurs. À partir de cette base de données, 27 000 textes ont été sélectionnés, en veillant à ce que le corpus soit diversifié et ne favorise aucun groupe de candidats.
3️⃣Tous ces textes ont été revérifiés par 55 correcteurs certifiés TCF afin de clarifier et consolider les niveaux.
4️⃣Ensuite, les experts ont identifié 48 caractéristiques linguistiques - non dupliquées, clairement mesurables - qui aident réellement à distinguer un niveau de compétence linguistique d'un autre.
5️⃣Le modèle a été entraîné à évaluer le niveau d’un texte à partir du niveau qui lui avait déjà été attribué et de ces 48 paramètres.
Si mon avis intéresse quelqu'un, pour moi, l'introduction de l'intelligence artificielle dans le système d'évaluation TCF est une étape logique et logique. Personnellement, cette innovation n’a fait qu’une nouvelle fois me convaincre d’une pensée que je partage depuis longtemps : réussir un examen n’est pas la même chose que « apprendre tout le français ».
C’est pourquoi dans mon travail je privilégie l’approche corpus, je ne savais tout simplement pas qu’on l’appelait ainsi, et j’enseigne comment répondre à des attentes précises du format et du niveau requis. Apparemment, je continuerai à le faire à l'avenir - en gardant désormais un œil sur les voitures. Mes plans immédiats sont d'écrire environ +100 500 lettres à FEI pour aller au fond de certains problèmes. Je vous tiendrai au courant.
Lisez d'autres articles intéressants:
Formation de consultant terminée