Brevet FR3117659A1 — publié le 20220617

Procédé et dispositif d’enrichissement sonore, procédé de fourniture de service de réalité sonore augmentée, et périphérique de reproduction L'invention concerne l’enrichissement sonore et la fourniture de service de réalité sonore augmentée. En particulier, l’invention concerne des périphériques de reproduction de réalité augmentée tels que des casques de réalité augmentée ou des enceintes connectées permettant la mise en œuvre d’une réalité sonore augmentée. Un objet de l’invention est un procédé d’enrichissement sonore comportant une génération d’un son virtuel généré en fonction d’un son réel d’un environnement sonore réel, le son virtuel étant apte à être reproduit en superposition du son réel. Ainsi, ce n’est plus seulement l’environnement visuel réel qui est augmenté d’une information visuelle ou sonore mais l’environnement sonore lui-même qui est augmenté d’une information sonore virtuelle. Par exemple, un son réel sera identifié et l’information concernant l’identification de ce son réel sera ajoutée à l’environnement sonore : tel que la source du son, le type de son, etc. Figure pour l’abrégé : Figure 1 Procédé et dispositif d’enrichissement sonore, procédé de fourniture de service de réalité sonore augmentée, et périphérique de reproduction L'invention concerne l’enrichissement sonore et la fourniture de service de réalité sonore augmentée. En particulier, l’invention concerne des périphériques de reproduction de réalité augmentée tels que des casques de réalité augmentée ou des enceintes connectées permettant la mise en œuvre d’une réalité sonore augmentée. État de la technique Le principe de la réalité augmentée consiste à combiner le réel avec des éléments virtuels de façon transparente pour l’utilisateur. Par exemple, la réalité augmentée est obtenue par superposition d’éléments virtuels sur un environnement réel. Ces éléments virtuels sont produits par des traitements notamment mis en œuvre par un système informatique. Aujourd’hui, la réalité augmentée évoque surtout la réalité visuelle augmentée pour la majeure partie du public. Cette réalité visuelle augmentée a fait l’objet de nombreuses recherches ayant aboutis à divers produits allant de lunettes ou casques de réalité visuelle augmentée : Googleglass TM , HoloLens TM à diverses applications : jeux vidéo tels que PokemonGo TM , applications professionnelles… La réalité augmentée visuelle permet d’incruster alors de manière réaliste des objets virtuels dans une séquence d’images. Ces éléments virtuels ou ajouts d’informations visuelles sont reproduit, notamment, par un écran transparent positionné devant les yeux de l’utilisateur. En revanche, en ce qui concerne le son ou la musique, les projets autour de la réalité sonore augmentée son beaucoup plus rares. Sur le modèle de la réalité visuelle augmentée, la réalité sonore augmenté enrichi un environnement sonore déjà présent avec des objets sonores virtuels telles que des informations pertinentes pour l’auditeur. Par exemple, le dispositif captera la position de la tête de l’auditeur afin d’adapter les contenus sonores à ajouter en fonction de ce que l’auditeur regarde. Dans ce cas, la vue et l’ouïe doivent être synchronisées pour permettre à l’auditeur de recevoir l’information sonore de réalité augmentée correspondant à l’objet qu’il regarde. Ainsi, Imayana TM est un produit de visite virtuelle mobile en réalité augmentée. Il propose un parcours pédestre dans une ville historique, en l’occurrence Bordeaux propose non seulement une réalité visuelle augmentée proposant des images du Bordeaux du XVIIIe à partir de la position du piéton mais aussi une réalité sonore augmentée en réanimant des statues présentes à proximité de l’utilisateur, celles-ci raconteront alors le passé de la ville. La société BOSE TM quant à elle a dévoilé en 2018 des lunettes de réalité augmentée se concentrant sur l’audio point fort de cette firme. Leur idée était de venir palier à l’absence du son dans la réalité augmentée en augmentant ce que l’utilisateur entend et non ce que l’utilisateur voie en proposant d’apporter une information supplémentaire (par rapport à l’environnement réel) non plus visuelle mais audio. Néanmoins, le point de départ de la réalité augmentée qu’elle soit visuelle ou sonore reste limité à ce que l’utilisateur regarde ou du moins sa position dans l’environnement réel, c’est-à-dire à l’environnement réel visuel. Un des buts de la présente invention est d'apporter des améliorations par rapport à l'état de la technique. Un objet de l’invention est un procédé d’enrichissement sonore comportant une génération d’un son virtuel généré en fonction d’un son réel d’un environnement sonore réel, le son virtuel étant apte à être reproduit en superposition du son réel. Ainsi, ce n’est plus seulement l’environnement visuel réel qui est augmenté d’une information visuelle ou sonore mais l’environnement sonore lui-même qui est augmenté d’une information sonore virtuelle. Par exemple, un son réel sera identifié et l’information concernant l’identification de ce son réel sera ajoutée à l’environnement sonore : tel que la source du son, par exemple un « nom d’oiseaux », « nom de personne», « type d’objet source »… ; le type de son, par exemple « chant d’oiseaux », « accident », « claquement de porte », « bris de glace », « aboiement »… ; etc. Avantageusement, la génération du son virtuel comporte une conversion audio conversion audio d’au moins un contenu fonction du son réel. Ainsi, le procédé d’enrichissement peut utiliser une base de données existante dans lequel des sons sont associé à des contenus non audio, par exemple des contenus textuels ou images. En outre, l’avantage d’une base de données dans laquelle les sons sont associés à des contenus textuels allant d’un simple nom à un texte comportant un ou plusieurs paragraphes est qu’elle est moins volumineuse qu’une base de données de contenus audio. Avantageusement, la génération du son virtuel comporte une identification du son réel par reconnaissance sonore. Avantageusement, la génération du son virtuel est fonction d’une commande d’interaction avec l’environnement sonore réel. Ainsi, l’utilisateur ne sera pas pollué par des informations audio virtuelles systématiques mais les obtiendra uniquement sur demande. Cela évitera des surcouts en termes de calcul de la part du procédé d’enrichissement et des erreurs humaines liées à une surcharge sonore virtuelle. Avantageusement, le son virtuel comporte des données de spatialisation fonction d’une position d’une source sonore du son réel, les données de spatialisation permettant une reproduction spatialisée du son virtuel. Ainsi, le son virtuel est synchronisé avec la position de la source sonore dont il est fonction permettant à l’utilisateur de mieux associer l’information virtuelle supplémentaire à la source sonore. Cela permettra éventuellement d’éviter des erreurs humaines liées à l’association de l’information sonore virtuelle à la mauvaise source sonore ou des retards de réactions humaines en raison du temps nécessaire à l’utilisateur pour positionner la source sonore identifiée par le son virtuel. Un autre objet de l’invention est un dispositif d’enrichissement sonore comportant un générateur d’un son virtuel en fonction d’un son réel d’un environnement sonore réel, le son virtuel étant apte à être reproduit en superposition du son réel. Un objet de l’invention est également un procédé de fourniture d’un service de réalité sonore augmentée comportant une reproduction d’un son virtuel en superposition d’un son réel de l’environnement réel, le son virtuel étant généré en fonction d’un son réel d’un environnement sonore réel. Avantageusement, le procédé de fourniture comporte une spatialisation du son virtuel en fonction d’une position d’une source sonore du son réel. Avantageusement, le procédé de fourniture comporte : - un mixage du son virtuel généré et du son réel, et - une reproduction du son mixé. Avantageusement, selon une implémentation de l'invention, les différentes étapes du procédé selon l'invention sont mises en œuvre par un logiciel ou programme d'ordinateur, ce logiciel comprenant des instructions logicielles destinées à être exécutées par un processeur de données d'un dispositif faisant partie d’un dispositif d’enrichissement sonore et/ou d’un périphérique de reproduction de réalité sonore augmentée et étant conçus pour commander l'exécution des différentes étapes de ce procédé. L'invention vise donc aussi un programme comprenant des instructions de code de programme pour l’exécution des étapes du procédé d’enrichissement et/ou d’un procédé de fourniture de service de réalité sonore augmentée lorsque ledit programme est exécuté par un processeur. Ce programme peut utiliser n'importe quel langage de programmation et être sous la forme de code source, code objet ou code intermédiaire entre code source et code objet tel que dans une forme partiellement compilée ou dans n'importe quelle autre forme souhaitable. Un objet de l’invention est encore un périphérique de reproduction de réalité sonore augmentée comportant au moins un haut-parleur reproduisant un son virtuel en superposition d’un son réel, le son virtuel étant généré en fonction d’un son réel d’un environnement sonore réel. Avantageusement, le périphérique de reproduction comporte au moins un capteur sonore captant au moins le son réel de l’environnement. Avantageusement, le périphérique de reproduction est un dispositif parmi les suivants : - un casque de réalité sonore augmentée comportant au moins deux haut-parleurs implémentés sur le casque pour être placés au niveau des oreilles d’un utilisateur portant le casque ; et - une enceinte connectée. Avantageusement, le casque comportant au moins deux capteurs sonores implémentés sur le casque pour être placés au niveau des oreilles d’un utilisateur portant le casque, un capteur sonore captant le son réel perçu par une oreille de l’utilisateur portant le casque. Avantageusement, le casque comporte, lorsque les haut-parleurs recouvrent les oreilles empêchant toute perception directe par l’utilisateur de l’environnement sonore réel, un mixeur sonore agrégeant au moins un son réel de l’environnement sonore réel avec le son virtuel généré en fonction d’un des sons réels de l’environnement réel. Les caractéristiques et avantages de l’invention apparaîtront plus clairement à la lecture de la description, faite à titre d'exemple, et des figures s’y rapportant qui représentent : , un schéma simplifié d’un procédé d’enrichissement sonore selon l’invention, , une architecture de réalité sonore augmentée selon l’invention, , un schéma simplifié de procédé de fourniture de service de réalité sonore augmentée selon l’invention, , un schéma simplifié des procédés d’enrichissement sonore et de fourniture de service de réalité sonore selon l’invention, , un schéma simplifié d’un premier mode de réalisation d’un casque de réalité sonore augmentée selon l’invention, , un schéma simplifié d’un deuxième mode de réalisation d’un casque de réalité sonore augmentée selon l’invention, , un schéma simplifié d’un mode de réalisation d’une enceinte de réalité sonore augmentée selon l’invention. Procédé d’enrichissement sonore comportant une génération d’un son virtuel généré en fonction d’un son réel d’un environnement sonore réel, le son virtuel étant apte à être reproduit en superposition du son réel. Procédé d’enrichissement sonore selon l’une quelconque des revendications précédentes, dans lequel la génération du son virtuel comporte une conversion audio d’au moins un contenu fonction du son réel. Procédé d’enrichissement sonore selon l’une quelconque des revendications précédentes, dans lequel la génération du son virtuel comporte une identification du son réel par reconnaissance sonore. Procédé d’enrichissement sonore selon l’une quelconque des revendications précédentes, dans lequel la génération du son virtuel est fonction d’une commande d’interaction avec l’environnement sonore réel. Procédé d’enrichissement sonore selon l’une quelconque des revendications précédentes, dans lequel le son virtuel comporte des données de spatialisation fonction d’une position d’une source sonore du son réel, les données de spatialisation permettant une reproduction spatialisée du son virtuel. Dispositif d’enrichissement sonore comportant un générateur d’un son virtuel en fonction d’un son réel d’un environnement sonore réel, le son virtuel étant apte à être reproduit en superposition du son réel. Procédé de fourniture d’un service de réalité sonore augmentée comportant une reproduction d’un son virtuel en superposition d’un son réel de l’environnement réel, le son virtuel étant généré en fonction d’un son réel d’un environnement sonore réel. Procédé de fourniture d’un service de réalité sonore augmentée selon la revendication précédente dans lequel le procédé de fourniture comporte une spatialisation du son virtuel en fonction d’une position d’une source sonore du son réel. Procédé de fourniture d’un service de réalité sonore augmentée selon l’une quelconques des revendications 7 ou 8 dans lequel le procédé de fourniture comporte : - un mixage du son virtuel généré et du son réel, et - une reproduction du son mixé. Programme comprenant des instructions de code de programme pour l’exécution des étapes du procédé d’enrichissement selon l’une quelconque des revendications 1 à 5 et/ou d’un procédé de fourniture de service de réalité sonore augmentée selon l’une quelconque des revendications 7 à 9 lorsque ledit programme est exécuté par un processeur. Périphérique de reproduction de réalité sonore augmentée comportant au moins un haut-parleur reproduisant un son virtuel en superposition d’un son réel, le son virtuel étant généré en fonction d’un son réel d’un environnement sonore réel. Périphérique de reproduction de réalité sonore augmentée selon la revendication précédente, dans lequel le périphérique de reproduction comporte au moins un capteur sonore captant au moins le son réel de l’environnement. Périphérique de reproduction de réalité sonore augmentée selon l’une quelconque des revendications précédentes, dans lequel le périphérique de reproduction est un dispositif parmi les suivants : - un casque de réalité sonore augmentée comportant au moins deux haut-parleurs implémentés sur le casque pour être placés au niveau des oreilles d’un utilisateur portant le casque ; et - une enceinte connectée. Périphérique de reproduction de réalité sonore augmentée selon la revendication précédente, dans lequel le casque comportant au moins deux capteurs sonores implémentés sur le casque pour être placés au niveau des oreilles d’un utilisateur portant le casque, un capteur sonore captant le son réel perçu par une oreille de l’utilisateur portant le casque. Périphérique de reproduction de réalité sonore augmentée selon l’une quelconque des revendications 13 ou 14, dans lequel le casque comporte, lorsque les haut-parleurs recouvrent les oreilles empêchant toute perception directe par l’utilisateur de l’environnement sonore réel, un mixeur sonore agrégeant au moins un son réel de l’environnement sonore réel avec le son virtuel généré en fonction d’un des sons réels de l’environnement réel.