ymoslem/acl-abstracts huggingface dataset:
\'Evaluation de m\'ethodes et d`outils pour la lemmatisation automatique du fran\ccais m\'edi\'eval (Evaluation of methods and tools for automatic lemmatization in Old French) (2021)

Pour les langues historiques non stabilis{\'e}es comme le fran{\c{c}}ais m{\'e}di{\'e}val, la lemmatisation automatique pr{\'e}sente toujours des d{\'e}fis, car cette langue conna{\^i}t une forte variation graphique. Dans cet article, nous dressons un {\'e}tat des lieux de la lemmatisation automatique pour cette langue en comparant les performances de quatre lemmatiseurs existants sur un m{\^e}me jeu de donn{\'e}es. L`objectif est d'{\'e}valuer o{\`u} se situent les nouvelles techniques de l`apprentissage automatique par rapport aux techniques plus traditionnelles s`appuyant sur des syst{\`e}mes de r{\`e}gles et lexiques, en particulier pour la pr{\'e}diction des mots inconnus.
Extraction automatique de relations s\'emantiques d`hyperonymie et d`hyponymie dans un corpus m\'etier (Automatic extraction of hypernym and hyponym relations in a professional corpus) (2021)

Nous nous int{\'e}ressons dans cet article {\`a} l`extraction automatique de relations s{\'e}mantiques d`hyperonymie et d`hyponymie {\`a} partir d`un corpus de sp{\'e}cialit{\'e}s m{\'e}tier. Le corpus regroupe des ouvrages et articles en fran{\c{c}}ais d`expertise juridique et a {\'e}t{\'e} partiellement annot{\'e} en termes-cl{\'e}s par des experts. Nous pr{\'e}traitons ces annotations afin de pouvoir les retrouver dans ce corpus et obtenir un concept g{\'e}n{\'e}ral pour extraire les relations entre ces termes. Nous d{\'e}crivons une {\'e}tude exp{\'e}rimentale qui compare plusieurs m{\'e}thodes de classification appliqu{\'e}es sur des vecteurs de relations construits {\`a} partir d`un mod{\`e}le Word2Vec. Nous comparons les r{\'e}sultats obtenus gr{\^a}ce {\`a} un jeu de donn{\'e}es construit {\`a} partir de relations d`hyperonymie tir{\'e}es d`un r{\'e}seau lexico-s{\'e}mantique fran{\c{c}}ais que nous inversons pour obtenir les relations d`hyponymie. Nos r{\'e}sultats montrent que nous obtenons une classification pouvant atteindre un taux d`exactitude de 92 {\%}.
Formalisation de la relation entre les verbes imperfectifs et perfectifs en ukrainien (In the Slavic linguistic tradition, perfective and imperfective forms of verbs are traditionally entered independently in dictionaries) (2021)

Dans la tradition linguistique slave, les formes perfectives et imperfectives des verbes sont traditionnellement inscrites s{\'e}par{\'e}ment dans les dictionnaires. Cependant, il existe de forts liens morphologiques et s{\'e}mantiques entre les deux formes verbales. Nous pr{\'e}sentons une formalisation qui nous a permis de lier les deux formes. Nous avons construit un dictionnaire {\'e}lectronique qui contient plus de 13 000 entr{\'e}es verbales associ{\'e}es {\`a} plus de 300 paradigmes morphologiques, qui peut {\^e}tre utilis{\'e} pour automatiquement lemmatiser les formes verbales dans les textes ukrainiens et relier les formes perfectives et imperfectives.
Int\'er\^et des mod\`eles de caract\`eres pour la d\'etection d'\'ev\'enements (The interest of character-level models for event detection) (2021)

Cet article aborde la t{\^a}che de d{\'e}tection d'{\'e}v{\'e}nements, visant {\`a} identifier et cat{\'e}goriser les mentions d'{\'e}v{\'e}nements dans les textes. Une des difficult{\'e}s de cette t{\^a}che est le probl{\`e}me des mentions d'{\'e}v{\'e}nements correspondant {\`a} des mots mal orthographi{\'e}s, tr{\`e}s sp{\'e}cifiques ou hors vocabulaire. Pour analyser l`impact de leur prise en compte par le biais de mod{\`e}les de caract{\`e}res, nous proposons d`int{\'e}grer des plongements de caract{\`e}res, qui peuvent capturer des informations morphologiques et de forme sur les mots, {\`a} un mod{\`e}le convolutif pour la d{\'e}tection d'{\'e}v{\'e}nements. Plus pr{\'e}cis{\'e}ment, nous {\'e}valuons deux strat{\'e}gies pour r{\'e}aliser une telle int{\'e}gration et montrons qu`une approche de fusion tardive surpasse {\`a} la fois une approche de fusion pr{\'e}coce et des mod{\`e}les int{\'e}grant des informations sur les caract{\`e}res ou les sous-mots tels que ELMo ou BERT.
Lemmatization of Historical Old Literary Finnish Texts in Modern Orthography (2021)

Texts written in Old Literary Finnish represent the first literary work ever written in Finnish starting from the 16th century. There have been several projects in Finland that have digitized old publications and made them available for research use. However, using modern NLP methods in such data poses great challenges. In this paper we propose an approach for simultaneously normalizing and lemmatizing Old Literary Finnish into modern spelling. Our best model reaches to 96.3{\%} accuracy in texts written by Agricola and 87.7{\%} accuracy in other contemporary out-of-domain text. Our method has been made freely available on Zenodo and Github.
M\'eta-apprentissage : classification de messages en cat\'egories \'emotionnelles inconnues en entra\^inement (Meta-learning : Classifying Messages into Unseen Emotional Categories) (2021)

Dans cet article nous reproduisons un sc{\'e}nario d`apprentissage selon lequel les donn{\'e}es cibles ne sont pas accessibles et seules des donn{\'e}es connexes le sont. Nous utilisons une approche par m{\'e}ta-apprentissage afin de d{\'e}terminer si les m{\'e}ta-informations apprises {\`a} partir de messages issus de m{\'e}dias sociaux, finement annot{\'e}s en {\'e}motions, peuvent produire de bonnes performances une fois utilis{\'e}es sur des messages issus de conversations, {\'e}tiquet{\'e}s en {\'e}motions avec une granularit{\'e} diff{\'e}rente. Nous mettons {\`a} profit l`apprentissage sur quelques exemples (few-shot learning) pour la mise en place de ce sc{\'e}nario. Cette approche se montre efficace pour capturer les m{\'e}ta-informations d`un jeu d'{\'e}tiquettes {\'e}motionnelles pour pr{\'e}dire des {\'e}tiquettes jusqu`alors inconnues au mod{\`e}le. Bien que le fait de varier le type de donn{\'e}es engendre une baisse de performance, notre approche par m{\'e}ta-apprentissage atteint des r{\'e}sultats d{\'e}cents compar{\'e}s au r{\'e}f{\'e}rentiel d`apprentissage supervis{\'e}.
Pr\'edire l`aspect linguistique en anglais au moyen de transformers (Classifying Linguistic Aspect in English with Transformers ) (2021)

L`aspect du verbe d{\'e}crit la mani{\`e}re dont une action, un {\'e}v{\'e}nement ou un {\'e}tat exprim{\'e} par un verbe est li{\'e} au temps ; la t{\'e}licit{\'e} est la propri{\'e}t{\'e} d`un syntagme verbal qui pr{\'e}sente une action ou un {\'e}v{\'e}nement comme {\'e}tant men{\'e} {\`a} son terme ; la dur{\'e}e distingue les verbes qui expriment une action (dynamique) ou un {\'e}tat (statique). Ces caract{\'e}ristiques essentielles {\`a} l`interpr{\'e}tation du langage naturel, sont {\'e}galement difficiles {\`a} annoter et {\`a} identifier par les m{\'e}thodes de TAL. Dans ce travail, nous estimons la capacit{\'e} de diff{\'e}rents mod{\`e}les de type transformers pr{\'e}-entra{\^i}n{\'e}s (BERT, RoBERTa, XLNet, ALBERT) {\`a} pr{\'e}dire la t{\'e}licit{\'e} et la dur{\'e}e. Nos r{\'e}sultats montrent que BERT est le plus performant sur les deux t{\^a}ches, tandis que les mod{\`e}les XLNet et ALBERT sont les plus faibles. Par ailleurs, les performances de la plupart des mod{\`e}les sont am{\'e}lior{\'e}es lorsqu`on leur fournit en plus la position des verbes. Globalement, notre {\'e}tude {\'e}tablit que les mod{\`e}les de type transformers captent en grande partie la t{\'e}licit{\'e} et la dur{\'e}e.
Sifting French Tweets to Investigate the Impact of Covid-19 in Triggering Intense Anxiety (2021)

Sifting French Tweets to Investigate the Impact of Covid-19 in Triggering Intense Anxiety. Social media can be leveraged to understand public sentiment and feelings in real-time, and target public health messages based on user interests and emotions. In this paper, we investigate the impact of the COVID-19 pandemic in triggering intense anxiety, relying on messages exchanged on Twitter. More specifically, we provide : i) a quantitative and qualitative analysis of a corpus of tweets in French related to coronavirus, and ii) a pipeline approach (a filtering mechanism followed by Neural Network methods) to satisfactory classify messages expressing intense anxiety on social media, considering the role played by emotions.
Strat\'egie Multit\^ache pour la Classification Multiclasse (A Multitask Strategy for Multiclass Classification) (2021)

Nous proposons une id{\'e}e originale pour exploiter les relations entre les classes dans les probl{\`e}mes multiclasses. Nous d{\'e}finissons deux architectures multit{\^a}ches de type one-vs-rest qui combinent des ensembles de classifieurs appris dans une configuration multit{\^a}che en utilisant des r{\'e}seaux de neurones. Les exp{\'e}riences men{\'e}es sur six jeux de donn{\'e}es pour la classification des sentiments, des {\'e}motions, des th{\'e}matiques et des relations lexico-s{\'e}mantiques montrent que nos architectures am{\'e}liorent constamment les performances par rapport aux strat{\'e}gies de l'{\'e}tat de l`art de type one-vsrest et concurrencent fortement les autres strat{\'e}gies multiclasses.
TREMoLo : un corpus multi-\'etiquettes de tweets en fran\ccais pour la caract\'erisation des registres de langue (TREMoLo : a Multi-Label Corpus of French Tweets for Language Register Characterization) (2021)

Des registres tels que familier, courant et soutenu sont un ph{\'e}nom{\`e}ne imm{\'e}diatement perceptible par tout locuteur d`une langue. Ils restent encore peu {\'e}tudi{\'e}s en traitement des langues (TAL), en particulier en dehors de l`anglais. Cet article pr{\'e}sente un large corpus de tweets en fran{\c{c}}ais annot{\'e}s en registres de langue. L`annotation int{\`e}gre des marqueurs propres {\`a} ce type de textes (tels que les {\'e}motic{\^o}nes ou les hashtags) et habituellement {\'e}vinc{\'e}s dans les travaux en TAL. {\`A} partir d`une graine annot{\'e}e manuellement en proportion d`appartenance aux registres, un classifieur de type CamemBERT est appris et appliqu{\'e} sur un large ensemble de tweets. Le corpus annot{\'e} en r{\'e}sultant compte 228 505 tweets pour un total de 6 millions de mots. Des premi{\`e}res analyses statistiques sont men{\'e}es et permettent de conclure {\`a} la qualit{\'e} du corpus pr{\'e}sent{\'e}. Le corpus ainsi que son guide d`annotation sont mis {\`a} la disposition de la communaut{\'e} scientifique.
Un mod\`ele Transformer G\'en\'eratif Pr\'e-entrain\'e pour le\_\_\_\_\_\_ fran\ccais (Generative Pre-trained Transformer in\_\_\_\_\_\_ (French) We introduce a French adaptation from the well-known GPT model) (2021)

Nous proposons une adaptation en fran{\c{c}}ais du fameux mod{\`e}le Generative Pre-trained Transformer (GPT). Ce dernier appartient {\`a} la cat{\'e}gorie des architectures transformers qui ont significativement transform{\'e} les m{\'e}thodes de traitement automatique du langage. Ces architectures sont en particulier pr{\'e}-entra{\^i}n{\'e}es sur des t{\^a}ches auto-supervis{\'e}es et sont ainsi sp{\'e}cifiques pour une langue donn{\'e}e. Si certaines sont disponibles en fran{\c{c}}ais, la plupart se d{\'e}clinent avant tout en anglais. GPT est particuli{\`e}rement efficace pour les t{\^a}ches de g{\'e}n{\'e}ration de texte. Par ailleurs, il est possible de l`appliquer {\`a} de nombreux cas d`usages. Ses propri{\'e}t{\'e}s g{\'e}n{\'e}ratives singuli{\`e}res permettent de l`utiliser dans des conditions originales comme l`apprentissage sans exemple qui ne suppose aucune mise {\`a} jour des poids du mod{\`e}le, ou modification de l`architecture.
Une \'etude des avis en ligne : g\'en\'eralisabilit\'e d`un mod\`ele d'\'evaluation (A Study of Online Reviews : Generalizability of the Evaluation Model) (2021)

Ce travail se situe dans la continuit{\'e} de nos travaux ant{\'e}rieurs proposant le mod{\`e}le d'{\'e}valuation portant sur des avis en ligne sur des restaurants. Le mod{\`e}le est compos{\'e} de quatre cat{\'e}gories : l`opinion (positive, n{\'e}gative, mixte), la suggestion, l`intention et la description. Cet article vise {\`a} tester la g{\'e}n{\'e}ralisabilit{\'e} du mod{\`e}le en l`appliquant sur deux corpus suppl{\'e}mentaires : un corpus relevant d`un autre domaine (celui de l`h{\^o}tellerie) et un corpus {\'e}crit dans une autre langue (le cor{\'e}en). Nous avons pr{\'e}sent{\'e} l`annotation manuelle et la d{\'e}tection automatique de ces cat{\'e}gories en nous appuyant sur diff{\'e}rents mod{\`e}les de l`apprentissage de surface (SVM) et l`apprentissage profond (LSTM).
Extraction d`arguments bas\'ee sur les transformateurs pour des applications dans le domaine de la sant\'e (Transformer-based Argument Mining for Healthcare Applications) (2021)

Nous pr{\'e}sentons des r{\'e}sum{\'e}s en fran{\c{c}}ais et en anglais de l`article (Mayer et al., 2020) pr{\'e}sent{\'e} {\`a} la conf{\'e}rence 24th European Conference on Artificial Intelligence (ECAI-2020) en 2020.
Int\'egration de t\^aches: \'etiquetage morpho-syntaxique, analyse syntaxique et analyse s\'emantique trait\'es comme une t\^ache unique (Multiple Tasks Integration: Tagging, Syntactic and Semantic Parsing as a Single Task ) (2021)

Nous pr{\'e}sentons des r{\'e}sum{\'e}s en fran{\c{c}}ais et en anglais de l`article (Bernard, 2021), pr{\'e}sent{\'e} lors de la conf{\'e}rence 16th Conference of the European Chapter of the Association for Computational Linguistics (EACL 2021). L`article d{\'e}crit l`int{\'e}gration de t{\^a}ches, un ensemble de principes orthogonaux au partage de param{\`e}tres dont le but est de maximiser l`interaction entre diff{\'e}rentes t{\^a}ches. L`int{\'e}gration de t{\^a}ches est illustr{\'e}e avec un syst{\`e}me analysant de mani{\`e}re jointe les niveaux morpho-syntaxiques, syntaxiques et s{\'e}mantiques. La strat{\'e}gie adopt{\'e}e par ce syst{\`e}me, entra{\^i}n{\'e} par renforcement, est aussi analys{\'e}e.
Mod\'eliser la perception des genres musicaux \`a travers diff\'erentes cultures \`a partir de ressources linguistiques (Modeling the Music Genre Perception across Language-Bound Cultures ) (2021)

Nous r{\'e}sumons nos travaux de recherche, pr{\'e}sent{\'e}s {\`a} la conf{\'e}rence EMNLP 2020 et portant sur la mod{\'e}lisation de la perception des genres musicaux {\`a} travers diff{\'e}rentes cultures, {\`a} partir de repr{\'e}sentations s{\'e}mantiques sp{\'e}cifiques {\`a} diff{\'e}rentes langues.
Revitalisation des langues autochtones via le pr\'etraitement et la traduction automatique neuronale: le cas de l`inuktitut (Revitalization and Preservation of Indigenous Languages through Natural Language Processing ) (2021)

Nous pr{\'e}sentons des r{\'e}sum{\'e}s en fran{\c{c}}ais et en anglais de l`article (Tan Le {\&} Sadat, 2020) pr{\'e}sent{\'e} {\`a} la 28{\`e}me conf{\'e}rence internationale sur les linguistiques computationnelles (the 28th International Conference on Computational Linguistics) en 2020.
Simplification automatique de textes biom\'edicaux en fran\ccais: lorsque des donn\'ees pr\'ecises de petite taille aident (French Biomedical Text Simplification : When Small and Precise Helps ) (2021)

Nous pr{\'e}sentons un r{\'e}sum{\'e} en fran{\c{c}}ais et un r{\'e}sum{\'e} en anglais de l`article (Cardon {\&} Grabar, 2020), publi{\'e} dans les actes de la conf{\'e}rence 28th International Conference on Computational Linguistics (COLING 2020).
Tabouid: un jeu de langage et de culture g\'en\'erale g\'en\'er\'e \`a partir de Wikip\'edia (Tabouid: a Wikipedia-based word guessing game) (2021)

Nous pr{\'e}sentons des r{\'e}sum{\'e}s en fran{\c{c}}ais et en anglais de l`article (Bernard, 2020), pr{\'e}sent{\'e} lors de la conf{\'e}rence 58th Annual Meeting of the Association for Computational Linguistics (ACL 2020). L`article d{\'e}taille comment un {\'e}ventail de techniques relativement simples de TAL et d`apprentissage automatique peuvent {\^e}tre combin{\'e}es pour g{\'e}n{\'e}rer {\`a} partir de Wikip{\'e}dia le contenu d`un jeu de langage et de culture g{\'e}n{\'e}rale. L`article peut {\^e}tre vu comme d{\'e}finissant un projet stimulant pour des {\'e}tudiant{\textperiodcentered}e{\textperiodcentered}s en TAL et le jeu lui-m{\^e}me a effectivement {\'e}t{\'e} impl{\'e}ment{\'e} sous la forme de Tabouid, une application Android et iOS.
Am\'eliorer un agent conversationnel : prendre en compte \`a la vol\'ee des retours utilisateurs (Improve a conversational agent : considering on the fly user feedback) (2021)

Nous pr{\'e}sentons une approche am{\'e}liorant la pertinence des r{\'e}ponses d`un syst{\`e}me conversationnel de question-r{\'e}ponse en profitant de l`exp{\'e}rience pass{\'e}e du syst{\`e}me. Un agent conversationnel d{\'e}ploy{\'e} au contact d`utilisateurs peut en effet profiter de retours afin d`am{\'e}liorer la validit{\'e} de ces futures r{\'e}ponses. Les syst{\`e}mes de question-r{\'e}ponse fonctionnent g{\'e}n{\'e}ralement autour d`un mod{\`e}le rapprochant s{\'e}mantiquement une question {\`a} une ou plusieurs r{\'e}ponses potentielles. Ici, nous prenons en compte le cas o{\`u} le mod{\`e}le de correspondance rapproche une question {\`a} une liste de r{\'e}ponses associ{\'e}es {\`a} un score de pertinence. Une approche classique pour prendre en compte les retours d`utilisateurs, est de les utiliser pour augmenter le nombre de donn{\'e}es de r{\'e}entrainement du mod{\`e}le de rapprochement s{\'e}mantique. Nous proposons une approche diff{\'e}rente, impactant le score des r{\'e}ponses potentielles, o{\`u} nous prenons en compte {\guillemotleft} {\`a} la vol{\'e}e {\guillemotright} les retours utilisateurs : entre le moment o{\`u} l`utilisateur pose une nouvelle question et celui o{\`u} le syst{\`e}me lui r{\'e}pond.
Extraction de fragments syntaxiques en fran\ccais \`a partir d`une mesure d`autonomie bas\'ee sur l`entropie (Mining French syntactic fragments using an entropy-based autonomy measure) (2021)

Dans cet article nous nous int{\'e}ressons {\`a} la pr{\'e}diction du caract{\`e}re syntaxique ou non d`une s{\'e}quence de tokens dans des corpus du fran{\c{c}}ais. En particulier, nous comparons une m{\'e}thode d`extraction de fragments syntaxiques identifi{\'e}s au moyen d`une mesure d`autonomie bas{\'e}e sur l`entropie {\`a} une m{\'e}thode de r{\'e}f{\'e}rence qui extrait des fragments al{\'e}atoires. Les r{\'e}sultats semblent indiquer que les fragments ainsi extraits sont bien plus souvent des unit{\'e}s syntaxiques que les fragments al{\'e}atoires. Une telle m{\'e}thode pourrait {\^e}tre utilis{\'e}e dans des travaux ult{\'e}rieurs afin de proposer une induction non-supervis{\'e}e de structures de d{\'e}pendances syntaxiques.
Les lettres et la machine : un \'etat de l`art en traduction litt\'eraire automatique (Machines in the humanities: current state of the art in literary machine translation) (2021)

{\'E}tant donn{\'e} la r{\'e}cente vague d`int{\'e}r{\^e}t pour la traduction litt{\'e}raire automatique, cet article vise {\`a} recenser les travaux d{\'e}j{\`a} parus sur le sujet, tout en partageant quelques prises de position sur ce th{\`e}me. Nous commencerons par pr{\'e}senter les travaux pr{\'e}curseurs qui ont motiv{\'e} ces diff{\'e}rentes recherches, ainsi que les r{\'e}sultats obtenus plus r{\'e}cemment dans divers sc{\'e}narios et pour diverses paires de langues. Pour terminer ce tour d`horizon, nous exposerons les d{\'e}buts de nos travaux pour la paire anglaisfran{\c{c}}ais, avant d'{\'e}voquer les pr{\'e}occupations et les avantages {\`a} prendre en compte dans les discussions autour de cette technologie.
Adaptation de ressources en langue anglaise pour interroger des donn\'ees tabulaires en fran\ccais (Adaptation of resources in English to query French tabular data) (2021)

Les r{\'e}cents d{\'e}veloppements des approches d`apprentissage neuronal profond ont permis des avanc{\'e}es tr{\`e}s significatives dans le domaine de l`interrogation des syst{\`e}mes d`information en langage naturel. Cependant, pour le fran{\c{c}}ais, les ressources {\`a} disposition ne permettent de consid{\'e}rer que les requ{\^e}tes sur des donn{\'e}es stock{\'e}es sous forme de texte. Or, aujourd`hui la majorit{\'e} des donn{\'e}es utilis{\'e}es en entreprise sont stock{\'e}es sous forme tabulaire. Il est donc int{\'e}ressant d'{\'e}valuer si les ressources anglophones associ{\'e}es (jeux de donn{\'e}es tabulaires et mod{\`e}les) peuvent {\^e}tre adapt{\'e}es au fran{\c{c}}ais tout en conservant de bons r{\'e}sultats.
Enjeux li\'es \`a la d\'etection de l`ironie (Challenges of automatic irony detection ) (2021)

L`ironie verbale est un type de discours difficile {\`a} d{\'e}tecter automatiquement. En cr{\'e}ant des ponts entre les recherches en linguistique et en informatique sur cette question, il est possible de souligner des caract{\'e}ristiques importantes permettant de faciliter ce type de t{\^a}che. Dans cet article, il sera question du rapport entre la d{\'e}finition de ce ph{\'e}nom{\`e}ne et son ad{\'e}quation avec l'{\'e}laboration de corpus d`entra{\^i}nement..
Etat de l`art en compression multi-phrases pour la synth\`ese de documents (State-of-the-art of multi-sentence compression for document summarization) (2021)

La compression multi-phrases est utilis{\'e}e dans diff{\'e}rentes t{\^a}ches de r{\'e}sum{\'e} (microblogs, opinions, r{\'e}unions ou articles de presse). Leur objectif est de proposer une reformulation compress{\'e}e et grammaticalement correcte des phrases sources tout en gardant les faits principaux. Dans cet article, nous pr{\'e}sentons l'{\'e}tat de l`art de la compression multi-phrases en mettant en avant les diff{\'e}rents corpus et outils {\`a} disposition. Nous axons notre analyse principalement sur la qualit{\'e} grammaticale et informative plus que sur le taux de compression.
Modification d`une mod\`ele de liage d`entit\'es nomm\'ees end-to-end par l`ajout d`embeddings contextuels (Modifying an end-to-end named entity linking model by adding contextual embeddings ) (2021)

Cet article pr{\'e}sente les exp{\'e}riences effectu{\'e}es sur un syst{\`e}me de liage d`entit{\'e}s nomm{\'e}es. Cette t{\^a}che se d{\'e}coupe en deux principales parties que sont la d{\'e}tection de mentions m{\'e}ritant d'{\^e}tre li{\'e}es {\`a} la base de connaissance et la d{\'e}sambigu{\"i}sation qui permet de s{\'e}lectionner l`entit{\'e} finale {\`a} lier {\`a} chaque mention. Deux approches existent pour r{\'e}soudre cette t{\^a}che. Il y a celle de d{\'e}sambigu{\"i}sation seule et celle end-to-end qui effectue les deux sous-t{\^a}ches simultan{\'e}ment. Nous nous sommes int{\'e}ress{\'e}s au mod{\`e}le end-to-end atteignant l'{\'e}tat de l`art. Le c{\oe}ur de ces exp{\'e}riences {\'e}tait d`exploiter des embeddings contextuels afin d`am{\'e}liorer les performances. Trois approches ont {\'e}t{\'e} test{\'e}es afin d`int{\'e}grer ces embeddings et de remplacer les embeddings de mots. Les diff{\'e}rentes versions atteignent au mieux l'{\'e}tat de l`art. L`article pr{\'e}sente quelques pistes d{\'e}j{\`a} {\'e}tudi{\'e}es expliquant les raisons pour lesquelles les exp{\'e}riences test{\'e}es ne d{\'e}passent pas le mod{\`e}le initial et ouvrent des possibilit{\'e}s d`am{\'e}lioration.