Stylo@ DEFT 2022 : Notation automatique de copies d’étudiant·e·s par combinaisons de méthodes de similarité (Stylo@ DEFT 2022 : Automatic short answer grading by combinations of similarity methods ) (2022)

Abstract: Cet article présente la participation de l’équipe STyLO (STIH, L3I, OBTIC) au DÉfi Fouille de Textes 2022 (DEFT 2022). La tâche proposée consiste en une évaluation automatique des questions à réponses courtes (EAQRC) de devoirs d’étudiant·e·s avec le corrigé de l’enseignant comme ressource pour chaque question. Nous exploitons dans notre approche une combinaison de différentes méthodes de représentation des données (corrigés et réponses) : mots, n-grammes de caractères (avec et sans frontières de mots), word pieces] et sentence embeddings ainsi que de différents algorithmes pour calculer la note (régression linéaire et régression logistique). Les méthodes sont évaluées en termes d’exactitude et de corrélation de Spearman.

## description des jeux de données la tâche de base demandée dans le cadre de cette édition du défi est une tâche de poursuite automatique de l'évaluation @xcite réponses d'étudiant•e•s à partir de premières corrections par l'enseignant pour chaque énoncé. le corpus d'entraînement de deft 2022 se compose des corpus d'entraînement et de test de l'édition deft 2021. le nouveau corpus de test 2022https ://deft.lisn.upsaclay . fr/2022/ est similaire du point de vue du contenu à celui de 2021. les tableaux 1 et 2 représentent respectivement des exemples de questions et de réponses à la tâche de base. id question note n°question correction enseignant 1001 1 1 qu'est-ce que le world wide web ? système hypertexte fonctionnant sur @xmath0, comme courrier électronique, messagerie instantanée...