Amélioration de la traduction automatique d’un corpus annoté (Improvement of the automatic translation of an annotated corpus) (2016)

Abstract: Dans cet article, nous présentons une méthode pour améliorer la traduction automatique d’un corpus annoté et porter ses annotations de l’anglais vers une langue cible. Il s’agit d’améliorer la méthode de (Nasiruddin et al., 2015) qui donnait de nombreux segments non traduits, des duplications et des désordres. Nous proposons un processus de pré-traitement du SemCor anglais, pour qu’il soit adapté au système de traduction automatique statistique utilisé, ainsi qu’un processus de post-traitement pour la sortie. Nous montrons une augmentation de 2,9 points en terme de score F1 sur une tâche de désambiguïsation lexicale ce qui prouve l’efficacité de notre méthode.

## introduction le manque de corpus libres de droit annotés en sens pour la plupart des langues pose un problème crucial pour diverses applications et tâches du traitement automatique des langues. c'est évidemment le cas pour la désambiguïsation lexicale qui est la tâche qui consiste à déterminer quel est le sens le plus approprié pour chaque mot d'un texte dans un inventaire prédéfini. dans cet article, nous reprenons les travaux décrits dans @xcite qui portent sur la construction de corpus annotés par traduction automatique afin de créer rapidement un système de désambiguïsation lexicale supervisée. l'approche, illustrée avec le français et le bengali, présentait certaines limites liées en particulier à l'absence de normalisation des données. dans cet article, nous expliquons pourquoi et comment nous avons amélioré cette méthode en l'enrichissant de traitements génériques, c'est-à-dire utilisables quelle que soit la langue cible sans adaptation particulière et de traitements facultatifs spécifiques c'est-à-dire à la fois optionnels et adaptés à la langue cible. nous évaluons chacune des étapes et comparons notre méthode à celle de @xcite en l'appliquant au français et sur une tâche de désambiguïsation lexicale. ## méthode mise en oeuvre dans cette section nous présentons la méthode mise en oeuvre afin d'avoir une meilleure traduction possible du semcor et porter ses annotations de l'anglais vers le français. la méthode de portage des annotations proposée par @xcite est très proche de celle de @xcite dont nous avons eu connaissance plus tard. de plus, notre approche traite aussi le problème d'alignement en mots lié au transfert d'annotation. comme nous le verrons dans la section 3.3 , elle est composée de trois étapes principales : le pré-traitement du semcor anglais, la traduction et le portage de ses annotations vers le français, ainsi que le post-traitement appliqué sur les traductions produites. chacune correspond à un script écrit en python. les corpus et les scripts qui ont rendu possibles les travaux décrits dans cet article sont disponibles à l'adresse https://github.com/ getalp/wsd-taln2016-hadjsalahetal . ## évaluation nous effectuons une évaluation similaire à celle de @xcite , c'est-à-dire en se basant sur une tâche de désambiguïsation lexicale et en reprenant le même protocole : les mêmes attributs (collocations locales, catégories grammaticales, mots du cotexte sur la même fenêtre de -3, 3) et le même classifieur, un classifieur bayésien naïf. en revanche, notre méthode d'évaluation est plus générique car elle est basée sur la forme de surface de mots et non pas sur les lemmes. en effet, il est plus simple de désambiguïser des textes bruts sans exiger qu'ils soient lemmatisés. ## conclusion et perspectives dans cet article, nous avons présenté notre méthode pour améliorer la traduction d'un corpus annoté en sens vers une autre langue, méthode qui améliore fortement celle de @xcite . ensuite nous avons évalué nos résultats grâce à une méthode de désambiguïsation automatique supervisée. dans l'avenir, nous envisageons d'utiliser cette méthode pour la création de corpus annotés pour différentes langues, en traduisant des corpus annotés et en portant leurs annotations, l'ensemble de ces corpus et les scripts permettant de les réaliser seront disponibles pour la communauté. enfin, nous envisageons de mener une étude contrastive des attributs pertinents pour la désambiguïsation d'une langue (français, arabe), étude qu'il n'était pas possible de mener avant l'existence de ces corpus pour autant de langues.