Approche Hybride pour la translitération de l’ A rabizi Algérien : une étude préliminaire (A hybrid approach for the transliteration of A lgerian A rabizi: A primary study) (2018)

Abstract: Dans cet article, nous présentons une approche hybride pour la translitération de l’arabizi algérien. Nous avons élaboré un ensemble de règles permettant le passage de l’arabizi vers l’arabe. Á partir de ces règles nous générons un ensemble de candidats pour la translitération de chaque mot en arabizi vers l’arabe, et un parmi ces candidats sera ensuite identifié et extrait comme le meilleur candidat. Cette approche a été expérimentée en utilisant trois corpus de tests. Les résultats obtenus montrent une amélioration du score de précision qui était pour le meilleur des cas de l’ordre de 75,11%. Ces résultats ont aussi permis de vérifier que notre approche est très compétitive par rapport aux travaux traitant de la translitération de l’arabizi en général.

## introduction l'arabizi est une orthographe spontanée utilisée pour s'exprimer en dialecte arabe combinant lettres latines, chiffres et autres symboles tels que les signes de ponctuations @xcite . l'arabizi est généralement utilisé par les locuteurs arabes pour les échanges dans les réseaux sociaux, les chats voir les sms. néanmoins, comme la plupart des outils de traitement des dialectes arabes, et du dialecte algérien (dalg) en particulier, sont dédiés aux messages écrits en lettres arabes, par conséquent l'arabizi ne peut donc être traité comme tel. la plupart des recherches s'oriente vers la transformation de l'arabizi vers l'arabe. cette transformation est nommée la translitération. la translitération est un processus de passage d'un texte écrit en un script ou alphabet donné vers un autre @xcite @xcite . la translitération de l'arabizi vers l'arabe fait cependant face à un ensemble de problématiques : ## état de l'art le problème de la translittération a suscité l'intérêt des spécialistes dans plusieurs langues. cet intérêt récent est lié au développement croissant de l'utilisation d'internet @xcite trois approches sont couramment évoquées dans la littérature pour réaliser la translittération: 1) a base de règles. 2) statistiques et 3) hybrides combinant les deux précédentes @xcite . @xcite , ont proposé un ensemble de règles permettant le passage de l'arabizi vers l'arabe. ils ont signalé un nombre d'exceptions et de défis reliés aux traitements des voyelles. rosca&breuel (2016) ont abordé l'approche statistique où ils ont présenté un modèle basé sur les réseaux de neurones pour effectuer la translitération entre plusieurs paires de langues dont l'arabe et l'anglais. l'approche hybride est utilisée dans les travaux de @xcite @xcite @xcite @xcite . tous ces travaux suivent la même idée générale, à savoir générer un ensemble de possibilités de translittération, appelés candidats, pour ensuite déterminer le meilleur candidat à l'aide d'un modèle de translitération ou autre. pour ce faire, darwish (2013) construit manuellement un ensemble contenant 3452 mots arabizi (extrait de twitter) translitéré vers l'arabe. une partie de ce corpus arabizi-arabe a été utilisée dans le travail de @xcite . les auteurs de ce travail font cependant appel à un automate d'état fini pour le passage de l'arabizi vers l'arabe. dans les travaux de @xcite , les auteurs analysent également les résultats de la traduction après la phase de translitération. enfin, les travaux de @xcite @xcite constituent les 1 translittération arabe présentée dans schemehabash-soudi-buckwalter (hsb) (habash et al., 2007) 2 3 positionnement de notre approche par rapport aux travaux étudiés nous présentons dans cet article une approche de translitération de l'arabizi algérien vers l'arabe. pour définir cette approche, nous nous sommes appuyés sur plusieurs travaux comme suit : 1) nous avons utilisé une table de passage de l'arabizi vers l'arabe similaire à celle présentée dans les travaux de van der wees et al., (2016), qui est extraite de wikipédia 3 . cependant, nous avons défini en plus des règles de passage ainsi que nos propres règles dédiées au traitement de l'arabizi algérien, notamment les différentes ambiguïtés de translitération. pour ce faire, nous nous sommes inspirés des travaux de (guellil et al., 2017) décrivant les caractéristiques de l'arabizi algérien. 2) les travaux de al-badrashiny et al., (2014); darwish (2013); guellilet al., (2017a); guellil, et al., (2017b); may et al., (2014); van der wees et al.,(2016) génèrent un ensemble de candidats pour la translitération d'un mot arabizi en arabe. par exemple, les candidats générés des travaux de ces auteurs pour le mot '3afsa' (une astuce) sont : ‫'عافسة'‬ ςaafsaħ , ' ‫'عافسا‬ ςaafsaa, ‫'عافزة'‬ ςaafzaħ, '‫'عافزا‬ςaafzaa, etc. néanmoins nous ne trouvons aucun candidat sous la forme de ‫'عفسة'‬ qui est la translitération correcte de ce mot. la valeur ajoutée de notre travail est que notre algorithme est capable de générer de tels candidats en remplaçant les voyelles par le caractère vide (null). 3) les travaux de (darwish 2013; guellil et al., 2017a; guellilet al., 2017b) qui font appel à un modèle de translitération pour déterminer le meilleur candidat. cependant, ces approches dépendent d'un corpus parallèle, correspondant à la translitération d'un ensemble de messages de l'arabizi vers l'arabe, en plus du coût élevé de la réalisation de ces même corpus. pour notre part, au lieu de construire des corpus parallèles arabizi-arabe, nous appliquons un modèle de translitération sur un corpus arabe assez volumineux extrait des médias sociaux (par nos soin) et comparant ainsi les résultats obtenus. 4 approche de translitération de l'arabizi algérien vers l'arabe notre approche se compose de quatre phases importantes : 1) extraction et prétraitement du corpus arabe et des messages. 2) proposition et application des règles pour l'arabizi algérien. 3) génération des différents candidats et 4) extraction du meilleur candidat. nous présentons dans la figure 1 l'architecture générale de notre approche. 4.1 extraction et prétraitement du corpus arabe et du message arabizi nous commençons tout d'abord par l'extraction d'un corpus arabe issu des réseaux sociaux et contenant un ensemble de commentaires de locuteurs algériens. pour ce faire, nous avons ciblé un ensemble de pages très populaires en algérie comme la page ooredoo foot_1 (opérateur téléphonique). après l'extraction de ce corpus, nous nous sommes focalisés sur les messages écrits uniquement en caractères arabes. nous supprimons ensuite l'exagération (par exemple, le mot hiaaaaati-ma vie-est transformé en hiati) de ce corpus et nous remplaçons les différents caractères arabes par leurs unicodes. nous procédons ensuite aux mêmes prétraitements sur le message arabizi figure 1: architecture générale de notre approche 4.2 proposition et application des règles pour l'arabizi algérien nous présentons dans le tableau 1, les différentes possibilités de remplacement de chaque lettre en arabizi algérien. en plus de ce tableau, nous définissons un ensemble de règles de passage de l'arabizi vers l'arabe. par exemple : la voyelle 'a' est remplacée par la lettre ‫'أ'‬ au début. au milieu du mot, cette lettre peut être remplacée soit par le caractère arabe ‫'ا'‬ ou encore par le caractère vide. ## conclusion et perspectives dans cet article, nous avons présenté une approche hybride de translitération de l'arabizi algérien vers l'arabe. cette approche est basée sur la combinaison entre règles et modèles statistiques pour déterminer le meilleur candidat répondant à la translitération d'un mot en arabizi. notre approche pourrait cependant être améliorée en y intégrant les points suivants : enfin, nous signalons que les corpus développés dans le cadre de cette étude seront bientôt mis à la disposition de la communauté scientifique.