S yl N ews, un agréfilter multilingue ( S yl N ews, a multilingual aggrefilter) (2019)

Abstract: Depuis plusieurs années, Syllabs intègre de nombreux composants au sein d’un agréfilter, utilisant des technologies d’extraction d’information développées en interne et dans un contexte multilingue. Originellement conçu pour agréger des contenus issus de la presse, SylNews peut être utilisé à des fins de veille, pour explorer des contenus, ou pour identifier d’une manière plus globale les sujets chauds de l’ensemble ou d’une partie des contenus stockés.

## introduction en 2015, syllabs a développé un agréfilter pour le média les échos. après une refonte globale, cet outil de filtrage et d'agrégation (c.-à-d. agréfilter) de contenus n'a cessé d'évoluer, guidé par les besoins de nos clients. ces évolutions incluent l'apport de nouveaux composants, le passage au multilingue, ou encore le développement d'une interface spécifique en cours de développement. sylnews permet principalement de : • collecter des contenus à partir de sources locales ou en ligne ; • fournir différents types d'annotations automatiques pour chaque contenu (entités nommées, sujets, thèmes, etc.) ; • filtrer par thématique ; • regrouper les contenus par sujet ou par événement ; • appliquer les technologies précédentes à plusieurs langues. ## technologies et approche de sylnews la première étape lors du déploiement d'un sylnews concerne la collecte des contenus. cela peut être réalisé via des sources en ligne comme des flux rss, ou bien des fichiers locaux. ces contenus sont pré-traités (lemmatisation, tokenisation, statistiques, etc.), puis différentes annotations sont appliquées. parmi elles, nous pouvons citer la reconnaissance d'entités nommées @xcite , la catégorisation iptc foot_0 utilisant une méthode d'amorçage @xcite , le lien vers des articles wikipédia, etc. ces technologies d'extraction d'informations sont régulièrement adaptées en fonction des besoins des projets successifs. ensuite, les pré-traitements et annotations sont utilisés afin de regrouper des contenus à l'aide de l'algorithme @xcite qui permet de regrouper des documents présents dans un espace vectoriel.. nous avons également ajouté le regroupement multilingue des contenus sur cinq langues (de, en, es, fr et it) en utilisant comme pivot les entités nommées extraites et leur traduction via wikipédia. chaque nouveau contenu est ainsi annoté, et l'ensemble des contenus sont régulièrement regroupés, d'après une fréquence et un volume donné. les regroupements obtenus étant eux-mêmes annotés par combinaison, il nous est possible de recueillir des caractéristiques notables, telles que des « sujets chauds » sur l'actualité. le déploiement d'un sylnews est flexible et automatisé. il permet ainsi d'effectuer les traitements selon différentes sources, projets ou thématiques. ## utilisation sylnews a été utilisé par le passé et encore aujourd'hui dans le cadre de plusieurs projets de recherche et clients. son utilisation principale concerne le regroupement de contenus, et surtout l'analyse de ces regroupements pour obtenir les « sujets chauds » de l'actualité. c'est également un bon moyen pour disposer, rapidement, d'annotations sur des volumes de données importants, telle que pourrait le faire une plateforme d'annotation.