Lost In Variation : extraction non-supervisée de motifs lexico-syntaxiques dans des textes en moyen arabe (2025)

Abstract: Contrairement à l’arabe standard moderne ou à certains dialectes de l’arabe, le moyen arabe a peu été étudié en TAL. Pourtant, cette famille de variétés présente un défi majeur : elle mêle des traits de standard et des traits de dialecte en plus de posséder des caractéristiques qui lui sont propres. Nous présentons ici une méthode pour identifier, extraire et classer les variantes de 13 formules du moyen arabe, relevées manuellement. Ces formules proviennent des neuf premiers tomes du corpus SIRAT AL-MALIK AL-ZAHIR BAYBARS, un corpus de littérature populaire rédigé dans une variété de moyen arabe proche du dialecte damascène. Nous classons 20 386 séquences en se fondant sur leur similarité à plusieurs niveaux avec les formules étudiées. Ce classement nous permet d’observer que ces formules varient sur les plans lexical, morphologique et graphique tout en restant strictement invariables sémantiquement et syntaxiquement.

## introduction trois variétés principales d'arabe ont été étudiées en tal : l'arabe classique, l'arabe standard moderne (msa) et certains dialectes. l'arabe classique a fait l'objet de quelques travaux, mais les recherches en tal se sont concentrées sur le msa et les dialectes. à notre connaissance, le moyen arabe n'a jamais été étudié dans une perspective de tal. pourtant, aborder le moyen arabe par le prisme du tal est intéressant à bien des égards. le moyen arabe est « [...] un ensemble de registres linguistiques, qui s'inscrivent dans le continuum linguistique arabe, borné par deux pôles de statut différent, la langue dialectale d'une part, la langue standard d'autre part, et qui se caractérisent par le fait qu'ils ne sont ni dialectaux, ni standard » @xcite . cette famille de registres est marquée par la variation linguistique @xcite . étudier le moyen arabe en tal permet de traiter conjointement plusieurs variétés, ce qui est utile pour le traitement d'autres états de langue puisque les textes écrits en arabe sont rarement rédigés dans une seule variété @xcite . la nature mixte du moyen arabe et sa propension à la variation offrent des défis originaux pour la linguistique et le tal (section 2). ainsi, des formules comme « » (il se redressa en bondissant sur ses pieds) peuvent aussi s'écrire « » (il se leva en bondissant sur ses pieds) ou avec la variation graphique « » (où fzz est remplacé par fd ¯d ¯). à cela s'ajoutent d'autres enjeux de tal arabe plus généraux : l'ambiguïté orthographique, la richesse morphologique et le bruit @xcite . nous proposons ici une méthode pour étudier des corpus comprenant plusieurs variétés de langue, avec l'objectif d'identifier les variations d'une même formule. nous travaillons sur le corpus s īrat al-malik al-z . āhir baybars . , composé de 53 843 phrases. nous y recherchons les variantes de 13 formules relevées par une linguiste afin d'analyser leurs variantes. pour ce faire, nous utilisons de l'alignement au grain token pour repérer des motifs lexico-syntaxiques et des mesures de similarité pour détecter les variations de nos formules. notre travail se rapproche de l'identification d'expressions multi-mots (emm) telle que définie dans @xcite en ce sens que les emm sont des séquences conventionnelles et idiomatiques @xcite . nous approfondissons la méthodologie @xcite pour identifier et extraire des emm et des emm défigées. nous présentons le moyen arabe dans la section 2 puis le corpus textuel et les formules analysées dans la section 3. ces formules sont des séquences de mots fréquentes qui apparaissent régulièrement dans le corpus. nous présentons notre méthode d'identification et d'extraction des variantes de ces formules dans la section 4. enfin, nous analysons des variantes observées dans la section 5. ## le moyen arabe : une langue non standardisée la langue arabe est souvent divisée en deux variétés : le standard et les dialectes. cette situation linguistique, appelée diglossie, a été théorisée par charles ferguson : la variété dite « haute » fait référence au standard, par opposition aux dialectes, la variété « basse » @xcite . en réalité, cette catégorisation n'est pas aussi binaire : ferguson avait déjà reconnu l'existence de variétés intermédiaires. des recherches ultérieures définissent ces variétés situées entre les deux pôles de la diglossie sous le terme de moyen arabe @xcite . cette famille de variétés regroupe l'ensemble des registres intermédiaires mêlant des traits standards, des traits dialectaux ainsi que des traits qui leur sont propres -ni standards ni dialectaux -et qui appartiennent à un troisième pôle @xcite . tout un pan de la littérature arabe a été rédigé en moyen arabe et a fortiori la littérature populaire, comme c'est le cas pour les mille et une nuits @xcite . la recension damascène de s īrat baybars . , sur laquelle nous travaillons, en est un autre exemple. elle est rédigée dans un état de langue très proche des dialectes levantins, mais présente des traits propres au standard ainsi que des traits qui ne relèvent d'aucun des deux pôles. par exemple, le relatif « allad ¯ī » au masculin singulier demeure invariable quels que soient le genre et le nombre de son antécédent @xcite . le caractère mixte et hybride du moyen arabe rend difficile l'utilisation d'outils tels que les étiqueteurs morphosyntaxiques, généralement conçus pour une variante particulière (standard ou dialecte). il existe en effet une grande variété d'outils pour le msa, tels que des outils de segmentation @xcite ou des étiqueteurs morphosyntaxiques @xcite . il existe aussi des outils spécifiques à des dialectes, tels que l'égyptien @xcite ou les dialectes du golfe @xcite . nous recensons également des outils pouvant traiter simultanément plusieurs dialectes @xcite . en revanche, il n'existe pas d'outils dédiés au moyen arabe. nous utiliserons ici cameltools @xcite , un outil multi-dialectal qui couvre le msa, l'égyptien, les dialectes du golfe et le levantin, pour étiqueter et lemmatiser notre corpus (section 4). a défaut d'un traitement parfait du moyen arabe, nous pensons que cet outil devrait être capable d'identifier correctement ce qui se rapproche du msa et des dialectes susmentionnés. ## discussion les variations relevées apparaissent principalement à trois niveaux. au niveau graphique, certaines lettres et diacritiques ne sont pas toujours présentes. par exemple, la hamza dans d . yā (3) est absente la plupart du temps, bien qu'elle soit indiquée dans d'autres variantes. ce trait avait déjà été repéré par jérôme lentin @xcite : « la hamza finale est généralement absente » 6 . cette fluidité graphique est aussi visible dans la préposition fī, tantôt écrite avec les deux points du yā tantôt sans, 6. "final hamza is generally absent" @xcite mais aussi sur la voyelle du tanwīn dans la formule (1), qui n'est pas systématiquement indiquée. sur le plan morphologique, un des éléments les plus variables est le verbe, qui peut être conjugué à toutes les personnes, genres et nombres, comme dans la formule (2) où sm ↩ dépend du sujet et peut aussi bien se trouver sous la forme sm ↩ t que celle de sm ↩ ū. c'est également le cas dans la formule (3) où l'on trouve ġd . b aussi bien que ġd . bū et ġd . bt. nous avons trouvé plusieurs variantes de la formule (3) avec le duel ↩ ynīh à la place du singulier ↩ ynh (voir section 6). enfin, les variations se produisent au niveau lexical et affectent le verbe ou le nom, remplacés par un synonyme ou une image très proche de celle de la formule d'origine. dans la formule (3), ↩ yn (oeil) devient wjh (visage) ; on trouve aussi s . ār (devenir) à la place de qlb (se transformer), de même que ġd . b (se mettre en colère) à la place de frh . (se mettre en joie) dans la formule (1). pour ces deux derniers exemples, on pourrait avancer que les deux lexèmes ne sont pas synonymes. en réalité, ils appartiennent toujours au même champ lexical, celui des émotions : ils ne modifient pas le sens profond de la formule, et il nous semble que l'effet de repère produit par celle-ci (expliqué en section 3.2) reste intact. toutefois, certaines variations modifient complètement le sens de la formule, au point d'en constituer une nouvelle. ainsi, si sm ↩ (entendre) et fhm (comprendre), présent dans l'une des variantes de la formule (2), sont substituables, c'est parce que leur signification est très proche. en revanche, la variante avec frġ mn dans « » (et lorsqu'il eut exprimé ces paroles) semble être une formule à part entière. nous avons remarqué que la formule (2) est systématiquement utilisée dans un contexte de dialogue, après qu'un personnage a tenu des propos en affectant un autre. or, la variante avec le verbe frġ mn a son propre contexte d'utilisation : elle est employée après une déclamation de vers. dans cette optique, ġd . b peut être remplacé par frh . dans la formule (1), car les deux dénotent une émotion forte ressentie par le personnage. en revanche, la variante avec qātl « » (et les musulmans menèrent un combat acharné) ne fait pas référence à une émotion, et donne une autre signification à la formule. elle a son propre contexte d'utilisation dans la s īra, qui est celui des scènes de bataille. ces exemples montrent que la variation linguistique dans ce corpus et dans les formules ne se produit pas de manière aléatoire. certaines variantes dépassent le seuil de compréhension de la formule, ce qui indique qu'elles ne sont plus des variantes mais plutôt qu'elles constituent une autre formule. le fait qu'elles aient leur propre contexte d'utilisation vient appuyer cet argument. certains éléments sont strictement invariables sur les plans syntaxique et sémantique. la structure syntaxique de la formule reste intacte : dans la formule (1), malgré toutes les variations possibles, la présence du maf ↩ ul mut . laq est constante et n'admet aucun type de variation. nous pouvons aussi remarquer qu'il y a, dans chacune des formules, au moins un mot à position fixe qui ne semble changer sur aucun plan -graphique, morphologique ou lexical -et qui est rarement utilisé en dehors du style formulaire. par exemple, on trouve 75 occurrences de l'adjectif šdīd dans la formule (1), et seulement 8 en dehors de ce contexte. de la même manière, on trouve 47 occurrences du nom z . lām dans la formule (3), et seulement 5 en dehors. les formules suivent aussi un schéma sémantique : la formule (2) a son propre contexte d'apparition qui ne peut être remplacé sans modifier un élément important de la formule (comme sm ↩ qui devient frġ). toutes les variations de la formule (1) décrivent un sentiment fort : la colère (ġd . b), la joie (frh . ), l'amour (h . bb) ou le tourment ( ↩ d ¯b). lorsque la variation lexicale dépasse le sens, comme c'est le cas pour la variante avec qātl (tuer), le sens de la formule n'est pas atteint, et ce tournant sémantique provoque un processus de défigement, comme défini par @xcite . bien que nous n'ayons trouvé aucune variante qui souligne un processus de défigement dans la formule (3), on peut penser qu'une variation lexicale qui implique un tournant sémantique ne sera pas considérée comme faisant partie de la même formule. ## conclusion nous avons présenté une méthode d'identification et d'extraction de formules et de leurs variantes dans un corpus en moyen arabe. nous avons extrait 20 386 séquences plus ou moins proches de ces formules. ces séquences ont ensuite été classées en calculant une similarité entre plusieurs couches d'informations linguistiques. au total, 813 séquences avec un score supérieur ou égal à 0,7 ont été trouvées. nous avons également proposé une analyse qualitative des variantes obtenues pour trois formules. cette analyse révèle que les variations se produisent principalement aux niveaux lexical, morphologique et graphique, mais jamais aux niveaux syntaxique et sémantique. de fait, toute variation affectant ces deux derniers niveaux forme en réalité une formule d'un nouveau type. pour améliorer la chaîne de traitement présentée, nous envisageons de développer des outils de tal dédiés au moyen arabe. nous prévoyons également l'annotation d'une partie des séquences extraites pour analyser plus finement les performances de notre approche.