FR 3151934 A1 20250207 FR 2308400 A 20230802 L'invention porte sur une solution applicative utilisable sur appareils mobiles (smartphone, tablette) qui se caractérise par la traduction instantanée d’une reconnaissance vocale (analyse des signaux acoustiques entrants et conversion en audio) ou d’un texte écrit, en langue des signes française restituée sous forme de vidéo. (1) A l’inverse, la solution traduit les signes filmés par les appareils mobiles en texte écrits ou en audio en français. (1) Cette solution est réalisée sur base d’intelligence artificielle (2) avec accès en temps réel à des bases de données Cloud (des serveurs informatiques à distance hébergé sur Internet) (3) Elle détecte, identifie et interprète instantanément les gestes de l’utilisateur, ses paroles ou ses textes écrits. La solution comporte un système de correction basé sur les règles d’orthographe, de grammaire et les usages courants pour obtenir un texte ou un signe parfait de façon à éviter une influence défavorable sur la précision. La solution intègre, par ailleurs, un apprentissage automatique (Machine Learning) qui permet de suivre les évolutions de la langue et d’améliorer ses résultats en permanence (4) PROCÉDÉ ET DISPOSITIF INNOVANT POUR LA TRADUCTION INSTANTANÉE DE LA LANGUE DES SIGNES, ET VICE VERSA BASÉS SUR L'INTELLIGENCE ARTIFICIELLE Un dispositif permettant de traduire les langages gestuelles et oraux grâce à l’intelligence artificielle, celui-ci détecte les mouvements gestuels puis convertie en version orale ou lisible. Et concernant les langages oraux celui-ci est convertie en version gestuelle sous forme de vidéo. De plus elle dispose d’un apprentissage automatique de ses langages donc la traduction sera plus fiable et plus constructive avec l’évolution de son apprentissage. Grâce à cette invention la communication entre les individus utilisant la langue des signes et les personnes utilisant les langages oraux sera plus accessible. Cette figure représente le dispositif permettant de traduire les langages gestuels et oraux grâce à l’intelligence artificielle. L’IA déployée remplit plusieurs objectifs : -> Détecter les signes du langage gestuel instantanément en se servant des données récoltées via la caméra des appareils mobiles. -> Corriger instantanément les erreurs issues du langage oral. Le Machine Learning intervient lors de cette phase : Lorsqu'un message présente une erreur après traduction, le dispositif la constate et la compense. -> Traduire les langages Le cloud est l’élément permettant de stocker les données de langage recueillies pour réaliser la traduction. Exemple de la procédure de traduction d’un langage gestuel en un langage oral : L'IA commence par détecter les signes (gestuels) réalisé par l'individu pour les enregistrer. En se basant sur les données stockées dans le cloud (qui joue le rôle d'un dictionnaire), l'IA propose une traduction du message signé. La fonctionnalité issue du machine Learning prend alors le relais pour constater et compenser d'éventuelles erreurs. Par exemple, si l'individu signe « Quel âge tu ? », le Machine Learning devra renvoyé le message corrigé suivant : « Quel âge as-tu ? ». De plus, la prochaine fois que le message « Quel âge tu ? » sera signé, l'outil aura appris cette erreur et la corrigera automatiquement. Une fois la traduction réalisée, l'IA générera une version audio du message. Au fur et à mesure de l'utilisation du dispositif, l'IA apprendra de nouvelles traductions de messages (en les stockant dans le cloud) pour les réinvestir ultérieurement. 1) L’intégration de l’apprentissage automatique instantané (Machine Learning) lors de la traduction d’un texte ou d’un audio en langue des signes en format vidéo 2) L’intégration de l’intelligence artificielle lors de la traduction d’un texte en langue des signes et vice versa 2.1) Utilisation de l’intelligence artificielle pour la reconnaissance gestuelle instantanée 2.2) Utilisation de l’intelligence artificielle pour la correction instantanée des données 3) Générer sous forme de vidéo la traduction en langue des signes