Le corpus « Machine Translation » : une exploration diachronique des (méta)données Istex (2023)

Abstract: Le corpus Machine Translation se compose de publications scientifiques issues du réservoir Istex. Conçu comme un cas d’usage, il permet d’explorer l’histoire de la traduction automatique au travers des métadonnées et des textes intégraux disponibles pour chacun de ses documents. D’une part, les métadonnées permettent d’apporter un premier regard sur le paysage de la traduction automatique grâce à des tableaux de bord bibliométriques. D’autre part, l’utilisation d’outils de fouille de textes sur le texte intégral rend saillantes des informations inaccessibles sans une lecture approfondie des articles. L’exploration du corpus est réalisée grâce à Lodex, logiciel open source dédié à la valorisation de données structurées.

## introduction l'atelier que nous proposons poursuit deux objectifs : (i) présenter la ressource istex 1 (initiative d'excellence en information scientifique et technique), qui permet de construire des corpus de publications scientifiques, et (ii) montrer que les formats et outils accessibles depuis istex offrent des solutions profitables pour la fouille de textes. notre démonstration trouve son origine dans la dynamique nationale (ex. anr-22-matos-0033 2 ; @xcite et européenne actuelle (ex. operas 3 ; helsinki-initiative, 2019) autour des nouvelles méthodes de traduction automatique (désormais ta). istex renfermant plus de sept siècles d'archives scientifiques, nous avons choisi d'explorer l'aspect diachronique de la ta à travers un corpus. nous montrons, d'une part, comment l'analyse des métadonnées des publications donne accès à un panorama des travaux réalisés dans ce domaine et, d'autre part, en quoi l'analyse du texte intégral contribue à retracer l'histoire des méthodes et des approches mises en oeuvre en ta. notre article s'organise comme suit. en 2, nous présentons le contenu d'istex et les outils que nous manipulons. en 3, nous expliquons la méthodologie appliquée pour constituer le corpus et présentons quelques-uns des résultats obtenus. ## l'écosystème istex le réservoir istex contient plus de 27 millions de publications scientifiques dans toutes les disciplines et dans plus de 50 langues. il est alimenté en continu au travers des acquisitions pérennes des licences nationales 4 et de celles du gis collex-persée 5 . en 2023, il regroupe plus de 9 000 revues et 430 000 ebooks de 41 éditeurs différents, publiés entre le xiv e siècle et aujourd'hui. ces documents sont accessibles depuis l'interface istex-dl 6 (istex download), connectée à une api 7 , qui permet de télécharger les publications et de choisir les formats appropriés. en effet, si le réservoir constitue d'abord une ressource documentaire, istex n'est pas exclusivement un outil de consultation. il offre la possibilité de constituer des corpus à des fins de fouille de textes et d'analyse de contenu (ex. @xcite . dans ce cas, il s'agit non seulement de rechercher des documents, mais aussi de vérifier leurs propriétés, de les télécharger massivement, pour finalement effectuer des traitements seuls ou les intégrer dans des outils. tous les documents istex sont disponibles à la fois sous forme de métadonnées et dans leur version en texte intégral, et ce, dans différents formats soit d'origine, soit convertis dans des standards (xml mods et xml tei) pour faciliter leur exploitation dans les outils de fouille ou de textométrie (ex. @xcite . les documents istex ont également été enrichis grâce à des outils, développés ou adaptés pour istex @xcite . parmi ces enrichissements, nous exploiterons ( §3.2) plus particulièrement la structuration des références bibliographiques obtenue avec l'outil grobid 8 (generation of bibliographic data). lors du téléchargement, istex-dl propose une passerelle vers l'outil lodex 9 (linked open data experiment), que nous utiliserons pour naviguer dans le contenu du corpus. lodex est un logiciel open source 10 créé pour les besoins du projet istex afin de valoriser ses données structurées @xcite . il permet de concevoir des sites web offrant des interfaces pour explorer visuellement un jeu de données (csv, json, etc.) au travers de tableaux de bord dynamiques présentant des indicateurs bibliométriques. lodex offre également la possibilité d'utiliser des services web 11 afin d'enrichir les documents à l'aide de programmes d'analyse, de curation, d'annotation et d'indexation. ## conclusion à travers un cas d'usage, notre atelier montre qu'istex est une ressource puissante pour créer des corpus de publications scientifiques et pour exploiter toute la richesse des métadonnées et du texte intégral des publications. l'écosystème istex, dans sa globalité, offre une boîte à outils pour transformer, nettoyer, enrichir et visualiser ses données en vue de les analyser plus finement. pour aller plus loin, le corpus machine translation pourra (i) être enrichi avec des documents provenant d'autres sources, afin d'étoffer sa couverture chronologique, et (ii) être utilisé pour repérer automatiquement des définitions afin de compléter la ressource terminologique sur la ta.