Brevet FR2955962A1 — publié le 20110805

La présente invention concerne un procédé permettant à une personne sourde ou malentendante, oralisante et apte à la lecture labiale, ci-après la personne HANDI, de communiquer, via un réseau de télécommunication, avec au moins un interlocuteur entendant ou non, ci-après l'interlocuteur INTER, et vice versa, avec interposition entre ladite personne HANDI et ledit interlocuteur INTER d'une interface capable de communiquer, par transcription écrite, à la personne HANDI, les informations reçues de l'interlocuteur INTER. Pour les personnes HANDI, oralisantes et aptes à la lecture labiale, cette technique connue est frustrante lorsqu'elles se trouvent en "réception" dans la mesure où, au lieu de lire sur les lèvres comme elles le feraient face à un interlocuteur, elles sont contraintes à lire un texte, perdant ainsi le bénéficie des informations non verbales que peuvent communiquer les mimiques et attitudes de l'interlocuteur. Il serait donc souhaitable qu'en réception, les personnes HANDI, oralisantes et aptes à la lecture labiale, exploitent leur capacité de lire sur les lèvres et puissent n'avoir recours à la lecture de l'écrit (sous-titres) que pour pallier un défaut ou un doute de compréhension, si nécessaire. Cet objectif est atteint par l'invention qui, d'une manière connue en soi, prévoit, entre ladite personne HANDI et ledit interlocuteur INTER, une plateforme où intervient au moins une interface, ladite personne HANDI et l'interlocuteur INTER étant, chacun, munis d'un équipement de communication adéquat susceptible d'être connecté, via un réseau approprié, à un équipement de communication également adéquat au niveau de la plateforme, ladite interface étant capable de communiquer, par transcription écrite, à la personne HANDI, les informations reçues de l'interlocuteur INTER, le procédé étant caractérisé en ce qu'il consiste à associer, à ladite transcription écrite, l'image de l'interlocuteur INTER, ou d'une personne substituée, et à synchroniser, en temps réel, lesdites images et ladite transcription écrite, laquelle forme sous-titre instantané aux images. Cette synchronisation est réalisée en insérant des marqueurs temporels dans les images et dans les écrits et en mettant en oeuvre une technologie de compression et de tampon pour caler la correspondance entre "paquets" d'image et "paquets" d'écrit. Par temps réel, on entend que le décalage entre le 10 sous-titrage et l'image ne doit pas excéder 2 secondes, et de préférence 1 seconde. Pour ce faire, le moyen utilisé pour la transcription de la parole en écrit dépendra de la qualité de l'élocution de "l'émetteur". Si cette élocution est claire, il sera 15 utilisé un logiciel, tel qu'un logiciel de dictée, pour transcrire directement les paroles en écrit. Par contre, si l'élocution est incertaine, il sera nécessaire qu'une interface humaine intervienne. A cette fin, l'interface humaine, plus apte qu'un 20 logiciel à comprendre ce que dit un locuteur à l'élocution incertaine, se substituera à ce dernier en répétant clairement ses paroles, lesquelles seront transformées en écrit par le logiciel. Le mode d'échange entre la personne HANDI et 25 l'interlocuteur INTER dépendra de l'équipement de communication dont dispose l'interlocuteur INTER et des capacités de celui-ci, puisqu'il peut s'agir d'un entendant, ou d'un sourd ou malentendant oralisant et apte à la lecture labiale, ou d'un sourd ou malentendant 30 oralisant mais inapte à la lecture labiale (par exemple, une personne devenue sourde avec l'âge et n'ayant jamais appris à compenser), ou d'un sourd ou malentendant nonoralisant, utilisant la langue des signes. L'invention sera mieux comprise à la lecture de la 35 description suivante qui envisage sensiblement tous les cas susceptibles raisonnablement d'être rencontrés, y compris ceux qui ne nécessitent pas le recours à la présente invention, mais qui pourraient éventuellement en tirer avantage. Dans tous les cas, la personne HANDI sera équipée de moyens de communication lui permettant d'être entendue par l'interlocuteur INTER et/ou par une interface humaine et/ou logicielle, ainsi que de voir l'interlocuteur INTER et/ou l'interface humaine, même si certaines de ces possibilités ne sont pas exploitées, en particulier lorsque l'interlocuteur INTER ne dispose, lui, que d'une liaison téléphonique. Au niveau de la plateforme, il est prévu, de même, des moyens de communication permettant à l'interface humaine d'être entendue et vue par l'interlocuteur INTER, et vue par la personne HANDI, ainsi que de les entendre et de les voir, même si certaines de ces possibilités ne sont pas exploitées, en particulier lorsque l'interlocuteur INTER ne dispose, lui, que d'une liaison téléphonique. Quant à l'interlocuteur INTER, il peut n'être muni que d'une liaison téléphonique s'il est entendant, ou être muni des mêmes moyens que la personne HANDI, en particulier, s'il est lui-même sourd ou malentendant et oralisant, ou des mêmes moyens sans le microphone s'il n'est pas oralisant. Une interface logicielle inclut un logiciel de reconnaissance vocale de la parole qui permet d'analyser un mot ou une phrase captée au moyen d'un microphone pour la transcrire sous la forme d'un texte exploitable par une machine. Comme indiqué plus haut, différents cas de figures peuvent être rencontrés avec les personnes oralisantes, HANDI ou pas, et ces cas sont identifiés ci-dessous avec le moyen qui sera utilisé pour transcrire leurs paroles en écrits. HANDI oralisant élocution claire élocution non claire HANDI->INTER INTER->HANDI HANDI->INTER INTER->HANDI INTER élocution claire logiciel logiciel interf. humaine logiciel + oralisant logiciel (entendan élocution non claire logiciel interf. humaine interf. humaine interf. humaine t ou non) + + + logiciel logiciel logiciel Dans la suite et pour ne pas compliquer inutilement, on considèrera qu'un entendant a une élocution suffisamment claire pour que ses paroles soient reconnaissables par un logiciel ad hoc et qu'une personne HANDI a, par contre, une élocution insuffisamment claire. On considèrera donc que la transcription des paroles d'un entendant en écrit se fera directement au moyen du logiciel (interface logicielle) sauf dans le cas particulier signalé plus loin, tandis que la transcription des paroles d'une personne HANDI en écrit nécessitera que ses paroles soient répétées par une interface humaine pour pouvoir être traitées par le logiciel. Le lecteur comprendra facilement comment doit se faire la transposition des exemples donnés au cas d'un entendant ayant une élocution obscure et/ou d'une personne HANDI ayant une élocution claire. Dans un premier temps, on examinera le cas où l'interlocuteur est entendant et est équipé des moyens de communication lui permettant d'être entendu et vu, ainsi que d'entendre et de voir, la personne HANDI et/ou une interface humaine et/ou d'être mis en relation avec une interface logicielle, même si certaines de ces possibilités ne sont pas exploitées. C'est ce que signifie "équipé" dans les tableaux ci-dessous. Tableau 1 Entendant Interface Sourd ou malentendant Observations HANDI 1 (équipé) (équipé) ENTENDANT E-inutileF bon oralisant et lisant sur les en réception*- : lèvres : entend directement (--en émission HANDI 1 parle en émission-3 : ->parole -*en réception nécessité de parle INTERFACE logicielle lit sur les lèvres de synchroniser sous-titrage -3 ENTENDANT image et + sous-titre complète avec les sous- titres entrés par l'interface logicielle Comme il ressort du tableau ci-dessus, dans le cas où HANDI 1, bon oralisant et apte à la lecture labiale, désire communiquer avec un interlocuteur entendant, il parle tout simplement et l'ENTENDANT l'entend directement, aucune intervention de l'interface n'étant nécessaire. Lorsque l'ENTENDANT lui répond, il parle et HANDI 1 voit son image à l'écran. Il lit sur ses lèvres tandis que, simultanément, l'image de l'ENTENDANT est sous-titrée par une interface logicielle. Les tableaux 2, 3 et 4 illustrent des situations qui n'entrent pas dans la portée de l'invention, dans la mesure où il n'y a pas de nécessité de synchroniser image et sous-titre. Tableau 2 Entendant Interface Sourd ou malentendant Observations HANDI 1 (équipé) (équipé) ENTENDANT bon oralisant et mais ne lisant pas de pas sur les lèvres et ne nécessité de pratiquant pas la LS : synchroniser en réception'-: F-inutiles (--en émission image et texte entend directement parle puisque HANDI 1 HANDI 1 ne lit pas sur les lèvres ENTENDANT -parole -*en réception en émission-> : INTERFACE logicielle lit les sous-titres parle sous-titrage --> Comme il ressort du tableau 2 ci-dessus, dans le cas où HANDI 1, bon oralisant, mais inapte aussi bien à la lecture labiale qu'à la pratique de la langue des signes (LS), désire communiquer avec un interlocuteur entendant, il parle et l'ENTENDANT l'entend directement, aucune intervention de l'interface n'étant nécessaire. Lorsque l'ENTENDANT lui répond, il parle et HANDI 1 voit son image à l'écran, mais sans que cela lui soit utile pour la compréhension de la réponse (abstraction faite des informations non verbales que constituent les expressions du visage et les gestes de l'ENTENDANT). L'image de l'ENTENDANT est sous-titrée, au niveau de la plateforme, par une interface logicielle. Tableau 3 Entendant Interface Sourd ou malentendant Observations HANDI 1 (équipé) (équipé) ENTENDANT pratiquant la peu ou pas oralisant : pas de LS : nécessité de en réception+-: +-inutile(- (-en émission synchroniser "lit" les signes s'exprime en utilisant la LS image et texte ENTENDANT pratiquant la LS -*inutile-, -en réception en émissions "lit" les signes s'exprime en utilisant la LS Comme il ressort du tableau 3 ci-dessus, dans le cas où HANDI 1, qui n'est pas oralisant et s'exprime par la langue des signes (LS), désire communiquer avec un interlocuteur entendant pratiquant la langue des signes, il s'exprime en signant et l'ENTENDANT, qui le voit à l'écran, le comprend directement et lui répond en LS, aucune intervention de l'interface n'étant nécessaire. Dans ce cas de figure, le sous-titrage est généralement superflu. Rien n'empêche cependant d'y procéder et, dans un tel cas, c'est une interface humaine qui s'en chargerait, sauf si l'ENTENDANT parle en même temps qu'il signe, auquel cas le sous-titrage peut être fait par une interface logicielle. Tableau 4 Entendant Interface Sourd ou malentendant Observations HANDI 1 (équipé) (équipé) ENTENDANT ne pratiquant peu ou pas oralisant : pas de nécessité pas la LS : LSï-- '-en émission de synchroniser en réception'-: •I. s'exprime en utilisant la LS image et texte entend INTERFACE humaine +-parole ENTENDANT ne pratiquant parole ->en réception pas la LS : en émission-3 INTERFACE humaine lit les signes de l'interface parle LS-* humaine Comme il ressort du tableau 4 ci-dessus, dans le cas où HANDI 1, qui n'est pas oralisant et s'exprime par la langue des signes, désire communiquer avec un interlocuteur entendant ne pratiquant pas la langue des signes, il s'exprime en signant et l'intervention d'une interface humaine est nécessaire : cette interface humaine va traduire en paroles, pour l'ENTENDANT, ce que HANDI 1 dit en signes. Lorsque l'ENTENDANT veut répondre, il parle et l'interface humaine traduit, en signes, pour HANDI 1 ce que dit l'ENTENDANT. Dans ce cas de figure, le sous-titrage est généralement superflu. Rien n'empêche cependant d'y procéder et, dans un tel cas, ce serait les paroles de l'ENTENDANT qui seraient traitées par une interface logicielle. Les cas exposés dans les tableaux 5, 6 et 7 ci-dessous se rapportent à des situations dans lesquelles 20 l'interlocuteur entendant ne dispose que d'un téléphone. Tableau 5 Entendant Interface Sourd ou malentendant Observations HANDI 1 (seulement téléphone) (équipé) ENTENDANT +-inutile f-- bon oralisant et lisant sur en réception'- : les lèvres : entend directement i-en émission HANDI 1 parle en émission--> : -*parole -*en réception nécessité de parle INTERFACE humaine lit sur les lèvres de synchroniser parole ~ l'interface humaine image et sous- INTERFACE logicielle + titre .1, complète avec les sous- sous-titrage -+ titres entrés par l'interface logicielle à partir des paroles de l'interface humaine Comme dans le cas schématisé au Tableau 1, lorsque HANDI 1, bon oralisant et apte à la lecture labiale, désire communiquer avec un interlocuteur entendant, il parle et l'ENTENDANT l'entend directement, aucune intervention de l'interface n'étant nécessaire. Par contre, lorsque l'ENTENDANT lui répond, HANDI 1 ne peut voir son image à l'écran puisque l'ENTENDANT n'est muni que d'un téléphone. Dans ce cas, l'intervention de la plateforme est nécessaire : HANDI 1 reçoit l'image d'une interface humaine qui répète ce que dit l'ENTENDANT et c'est sur les lèvres de l'interface humaine ("personne substituée" à l'interlocuteur) que lit HANDI 1. Simultanément, l'image est sous-titrée par une interface logicielle à partir des paroles de l'interface humaine. C'est là l'exception dont il est question plus haut : bien que, d'après le postulat de départ, l'ENTENDANT soit réputé avoir une élocution claire, il n'est pas possible actuellement que sa voix, transmise par téléphone, puisse incrémenter une interface logicielle, pour une discussion. La technique existante en la matière n'est, en effet, utilisable que pour traiter des informations simples (serveurs vocaux), pas les échanges complexes d'une discussion. Il n'est cependant pas exclu qu'à l'avenir, cela soit possible, et cette évolution ne doit pas être exclue de la portée de l'invention. Tableau 6 Entendant Interface Sourd ou malentendant Observations HANDI 1 (seulement téléphone) (équipé) ENTENDANT F-inutiles bon oralisant et mais ne pas de nécessité en réception*û: pratiquant ni lecture sur de synchroniser les lèvres ni la langue des image et texte signes : .,--en émission entend directement parle HANDI 1 ENTENDANT ùparole men réception en émissionù : INTERFACE humaine "lit" les sous-titres parle parole INTERFACE logicielle sous-titrage --> Comme il ressort du tableau 6 ci-dessus, dans le cas où HANDI 1, bon oralisant, mais inapte aussi bien à la lecture labiale qu'à la pratique de la langue des signes, 15 désire communiquer avec un interlocuteur entendant, il parle et l'ENTENDANT l'entend directement, aucune intervention de l'interface n'étant nécessaire. Lorsque l'ENTENDANT lui répond, l'intervention de la plateforme est indispensable : l'interface humaine répète ce que dit 20 l'ENTENDANT et ses paroles sont transformées en écrit par l'interface logicielle.10 Tableau 7 Entendant Interface Sourd ou malentendant Observations HANDI 1 (seulement téléphone) (équipé) ENTENDANT si peu ou pas oralisant : pas de nécessité .,-en émission de synchroniser s'exprime en utilisant la LS image et texte en réception#-: LS4- entend INTERFACE humaine 4, 4-parole ENTENDANT -*parole ->en réception en émission- 4, "lit" les signes parle INTERF. humaine 4, LS-> Comme il ressort du tableau 7 ci-dessus, dans le cas où HANDI 1, qui n'est pas oralisant et s'exprime par la langue des signes, désire communiquer avec un interlocuteur entendant qui ne dispose que d'un téléphone, il s'exprime en signant et l'intervention d'une interface humaine est nécessaire : cette interface humaine va traduire en paroles, pour l'ENTENDANT, ce que HANDI 1 dit en signes. Lorsque l'ENTENDANT veut répondre, il parle et l'interface humaine traduit, en signes, pour HANDI 1 ce que dit l'ENTENDANT. Dans ce cas de figure, le sous-titrage est généralement superflu. Rien n'empêche cependant d'y procéder mais il faudrait alors que l'interface humaine répète les paroles de l'ENTENDANT en même temps qu'elle signe, une interface logicielle transformant en écrit les paroles de l'interface humaine. . 12 Les tableaux 8 à 10 se rapportent à des cas où l'interlocuteur INTER, désigné par HANDI 2, est également sourd ou malentendant. Tableau 8 Sourd ou malentendant Interface Sourd ou malentendant Observations HANDI 2 HANDI (équipé) bon (équipé) oralisant, pratiquant la lecture labiale, ne pratiquant pas la LS peu ou par oralisant parole LS réception nécessité de s'exprime en utilisant la LS INTERFACE humaine lit sur les lèvres de synchroniser parole -> l'interface humaine image et sous- INTERFACE logicielle + titre sous-titrage complète avec les sous- titres entrés par Ilnterfac logicielle Comme il ressort du tableau 8 ci-dessus, dans le cas où HANDI 1, bon oralisant et apte à la lecture labiale, mais ne pratiquant pas la langue des signes, désire 10 communiquer avec un interlocuteur HANDI 2 peu ou pas oralisant, pratiquant la langue des signes, l'intervention d'une interface humaine est nécessaire. Cette interface humaine traduira en signes, pour HANDI 2, les paroles de HANDI 1. Lorsque HANDI 2 répond, l'interface humaine 15 traduira en paroles, pour HANDI 1, les signes de HANDI 2, paroles que HANDI 1 n'entendra évidemment pas, mais l'interface humaine étant à l'écran, cela lui permettra de lire les paroles sur les lèvres de ladite interface humaine. Simultanément, l'image de l'interface humaine est5 sous-titrée par une interface logicielle à partir des paroles de l'interface humaine. Tableau 9 Sourd ou malentendant Interface Sourd ou malentendant Observations HANOI 2 FiANDI 1 (éqnipé) ban (équipé) oralisant, pratiquant la lecture labiale oralisant, pratiquant la lecture parole -en émission nécessité de labiale INTERFACE humaine vers HAN& 2 synchroniser en réceptionï-: (ùparole parle image et sous- lit sur les lèvres de HANDI 1 INTERFACE logicielle titre + en réception nécessité de parle NTERFACE humaine lit sur les lèvres de synchroniser parole HANDI 2 image et sous- INTERFACE logicielle + titre sous-titrage complète avec les sous- titres entrés par l'interface Enfin, comme il ressort du tableau 10, dans le cas où HANDI 1, bon oralisant et apte à la lecture labiale, désire communiquer avec un interlocuteur HANDI 2, également bon oralisant mais inapte aussi bien à la lecture labiale qu'à la langue des signes, il parle mais l'intervention de la plateforme est nécessaire : HANDI 2 reçoit à l'écran la transcription écrite de ce que dit l'ENTENDANT, transcription faite par une interface logicielle à partir de la répétition par l'interface humaine des paroles de HANDI 1. Lorsque HANDI 2 répond à HANDI 1, il parle et HANDI 1 lit sur ses lèvres, à l'écran, avec sous-titrage par l'interface L'invention n'est pas limitée aux modes de mise en oeuvre décrits ci-dessus. Ainsi, la transcription des paroles en écrit pourrait être faite par une interface humaine, non au moyen d'un logiciel ad hoc, mais En variante, l'interface humaine pourra ne pas répéter les paroles mais, en ayant recours au prt cédé de transcription instantanée de la parole faisant l'objet d'une autre demande de brevet déposée ce jour par la même déposante. Ce procédé consiste à saisir, à l'aide d'une sténotype, les paroles sous foiiiie de syllabes phonétiques en combinant, au processus classique de codage manuel de sténotypie, des frappes spécifiques qui débouchent sur une forme pseudophonétique augmentée définissant, sans ambiguïté, ce que devra être chaque mot et son orthographe, et à comparer la saisie ou la suite de saisies ainsi effectuées et les entrées d'une liste de correspondance entre saisies pseudophonétiques augmentées et mots correctement orthographiés, sans interprétation, liste de correspondance qui est mémorisée dans un ordinateur auquel est connectée la sténotype, la transcription se faisant mot par mot au fur et à mesure que ladite comparaison identifie le mot correspondant à une saisie ou à une suite de saisies. Naturellement, le recours à ce procédé est incompatible avec une traduction de paroles en langue des signes par une seule et unique interface humaine, celle-ci ne pouvant simultanément signer et saisir au clavier d'une sténotype. REVENDICATIONS1. Procédé permettant à une personne sourde ou malentendante, ci-après la personne HANDI, de communiquer, via un réseau de télécommunication, avec au moins un interlocuteur entendant ou non, ci-après l'interlocuteur INTER, et vice versa, ledit procédé comprenant la prévision entre ladite personne HANDI et ledit interlocuteur INTER d'une plateforme où intervient au moins une interface, ladite personne HANDI et l'interlocuteur INTER étant, chacun, munis d'un équipement de communication adéquat susceptible d'être connecté, via un réseau approprié, à un équipement de communication également adéquat au niveau de la plateforme, ladite interface étant capable de communiquer, par transcription écrite, à la personne HANDI, les informations reçues de l'interlocuteur INTER, caractérisé en ce qu'il consiste à associer, à ladite transcription écrite, l'image de l'interlocuteur INTER, ou d'une personne substituée, et à synchroniser, en temps réel, lesdites images et ladite transcription écrite, laquelle forme sous-titre instantané aux images. 2. Procédé selon la revendication 1, caractérisé en ce qu'il consiste à insérer des marqueurs temporels dans les images et dans les écrits et à mettre en oeuvre une technologie de compression et de tampon pour caler la correspondance entre "paquets" d'image et "paquets" d'écrit. 3. Procédé selon la revendication 1 ou 2, caractérisé en ce que lesdites images sont celles de l'interlocuteur INTER. 4. Procédé selon la revendication 1 ou 2, caractérisé en ce que lesdites images sont celles d'une interface humaine. 5. Procédé selon l'une quelconque des revendications 1 à 4, caractérisé en ce que les sous-titres résultent d'un traitement direct des paroles de l'interlocuteur INTER par un logiciel de reconnaissance vocale. 6. Procédé selon l'une quelconque des revendications 1 à 4, caractérisé en ce que les sous-titres résultent d'un traitement, par un logiciel de reconnaissance vocale, des paroles d'une interface humaine répétant les paroles de l'interlocuteur INTER. 7. Procédé selon l'une quelconque des revendications 1 à 6, caractérisé en ce qu'il consiste, en outre, à transmettre à l'interlocuteur INTER l'image de la personne HANDI. 10 8. Procédé selon la revendication 7, caractérisé en ce qu'il consiste, en outre, à sous-titrer les images reçues par l'interlocuteur INTER à partir de la parole de la personne HANDI traitées directement par un logiciel de reconnaissance vocale. 15 9. Procédé selon la revendication 7, caractérisé en ce qu'il consiste, en outre, à sous-titrer les images reçues par l'interlocuteur INTER à partir de paroles de l'interface humaine répétant les paroles de la personne HANDI, paroles répétées qui sont traitées par un logiciel 20 de reconnaissance vocale. 10. Procédé selon l'une quelconque des revendications 1 à 4 et 7, caractérisée en ce que les sous-titres résultent de. la transcription instantanée la parole par sténotype au niveau de la plateforme.