Invitation aux enseignantes et aux enseignants de français langue seconde · Hiver 2027
La notation d'une IA concorde-t-elle avec la notation de la personne enseignante lors de l'évaluation d'une interaction orale ?
Je cherche des enseignantes et des enseignants de français langue seconde, auprès d'adultes, qui évaluent l'oral et qui accepteraient d'essayer NOVA avec un groupe à l'hiver 2027.
L'outil
NOVA fait débattre l'étudiant à l'oral contre une IA, sur le sujet que vous choisissez. L'IA observe le débat selon une grille de critères et produit un rapport. Rien n'est montré à l'étudiant tant que vous n'avez pas validé.
La grille est la vôtre. Si vous n'en avez pas, celle de l'étude est fournie.
J'ai conçu et codé l'outil moi-même. Tout s'ajuste à votre cours : sujets, consignes, grille, comportement de l'IA.
Le projet
Des tests automatisés de l'oral ont déjà été comparés à des évaluateurs humains. À ma connaissance, personne ne l'a encore fait en français pour une IA qui observe un débat en classe selon la grille de l'enseignant. C'est ce que cette étude veut établir, avec ses limites : transcription de la voix, accents, niveau des étudiants.
Elle est menée par ELBO, avec la collaboration de Christophe Chénier, professeur agrégé en évaluation des apprentissages et des compétences. Il y collabore à titre de consultant indépendant ; ce n'est pas une étude de l'Université de Montréal.
Ce que ça vous demande
Mise en place. Environ 30 minutes avec moi pour créer votre classe et y mettre votre grille, ou celle de l'étude.
Les débats. Vos étudiants font 2 à 4 débats pendant la session, en classe ou en devoir.
Votre note, à l'aveugle. Vous notez ces débats avec la même grille, sans voir ce que l'outil a observé. Environ 10 minutes par débat.
Le fichier. Vous transmettez vos notes sans nom d'étudiant : des codes seulement. Le chercheur compare.
Pour vos étudiants
- Aucun compte à créer : un code de classe et un prénom ou un pseudonyme.
- Participation volontaire, avec un consentement simple.
- Anonyme pour l'étude : le chercheur ne reçoit que des codes.
- La voix n'est pas enregistrée par défaut. La base de données est à Montréal.
- Adultes seulement (17 ans accepté au collégial).
Ce que vous recevez
- L'outil à titre d'essai pour la durée de l'étude, avec mon accompagnement.
- Les résultats de votre groupe et les conclusions de l'étude.
- Un mot à dire sur l'outil : vos remarques entrent dans le code.
Le cadre, en clair
Ce n'est pas une démonstration commerciale : si l'outil ne concorde pas avec vos notes, c'est ce que l'étude dira.
Ce n'est pas non plus une recherche universitaire : elle est menée par une entreprise et ne relève pas d'un comité d'éthique de la recherche. Si votre établissement veut l'avis de son propre comité, je fournis le dossier.
Vous restez seul responsable de l'évaluation de vos étudiants.
Pour participer
Pour une question : Mathieu Blanchet-Asselin, ELBO Technologies inc., mathieu@elbo.world, 418 209-6867.
Un document qui décrit le parcours des données (hébergement, fournisseurs, conservation) est disponible sur demande.