Brevet FR3154671A1 — publié le 20250502

Système et procédé d’affichage enrichi pour véhicule automobile Ce système d’affichage enrichi pour véhicule automobile comporte une surface d’affichage tête haute, permettant de visualiser l’extérieur du véhicule, une première caméra positionnée vers l’extérieur du véhicule, au moins une deuxième caméra positionnée vers l’intérieur du véhicule et associée à une unité de détection d’une direction du regard d’un occupant du véhicule, et un dispositif électronique programmable configuré pour mettre en œuvre des modules de : -réception (30) de premières images captées par ladite première caméra et d’une direction du regard dudit occupant du véhicule, la direction du regard étant obtenue par mise en œuvre de ladite unité de détection d’une direction du regard à partir de deuxièmes images captées par la deuxième caméra, -identification (32) d’un objet placé dans la direction du regard détectée dans lesdites premières images, -obtention (34) d’une information relative à l’objet identifié, et -affichage (36) sur ladite surface d’affichage de l’information relative à l’objet identifié. Figure pour l'abrégé : Figure 1 Système et procédé d’affichage enrichi pour véhicule automobile La présente invention concerne un système d’affichage enrichi pour véhicule automobile et un véhicule automobile comportant un tel système d’affichage enrichi. Elle concerne également un procédé d’affichage enrichi associé et un programme d’ordinateur associé. L’invention se situe dans le domaine des véhicules automobiles équipés de fonctionnalités améliorées, en particulier pour augmenter la sécurité et la satisfaction des utilisateurs. Les véhicules automobiles sont de plus en plus équipés de divers capteurs et de dispositifs électroniques de calcul permettant d’ajouter diverses fonctionnalités, notamment des fonctionnalités permettant d’augmenter le confort et la sécurité des occupants des véhicules, qu’il s’agisse du conducteur ou des passagers. La présente invention s’inscrit dans ce contexte technologique et a pour but d’améliorer l’expérience des occupants d’un véhicule automobile. A cet effet, l’invention a pour objet un système d’affichage enrichi pour véhicule automobile, le système d’affichage comportant une surface d’affichage tête haute, permettant de visualiser l’extérieur du véhicule, le système comportant une première caméra positionnée vers l’extérieur du véhicule, au moins une deuxième caméra positionnée vers l’intérieur du véhicule et associée à une unité de détection d’une direction du regard d’un occupant du véhicule, et un dispositif électronique programmable configuré pour mettre en œuvre des modules de : -réception de premières images captées par ladite première caméra et d’une direction du regard dudit occupant du véhicule, la direction du regard étant obtenue par mise en œuvre de ladite unité de détection d’une direction du regard à partir de deuxièmes images captées par la deuxième caméra, -identification d’un objet placé dans la direction du regard détectée dans lesdites premières images, -obtention d’au moins une information relative à l’objet identifié, et -affichage sur ladite surface d’affichage d’une information relative à l’objet identifié. Avantageusement, le système d’affichage enrichi proposé permet de détecter la direction du regard d’un ou de plusieurs occupants du véhicule automobile, et d’apporter alors des informations supplémentaires relatives aux objets regardés par l’occupant ou les occupants du véhicule dont la direction du regard a été détectée. Suivant d’autres aspects avantageux de l’invention, le d’affichage enrichi comprend une ou plusieurs des caractéristiques suivantes, prises isolément ou suivant toutes les combinaisons techniquement possibles. Le dispositif électronique programmable comporte un module d’amélioration configuré pour calculer un niveau de luminosité dans au moins une desdites premières images, et lorsque le niveau de luminosité est inférieur à un premier seuil, appliquer un traitement d’augmentation du niveau de luminosité desdites premières images pour obtenir de premières images de niveau de luminosité supérieur audit premier seuil et affichage sur ladite surface d’affichage desdites premières images de niveau de luminosité supérieur audit premier seuil. Le dispositif électronique programmable est en outre configuré pour calculer un niveau de luminosité dans au moins une desdites premières images, et lorsque le niveau de luminosité est supérieur à un deuxième seuil, appliquer un traitement de diminution du niveau de luminosité desdites premières images pour obtenir de premières images de niveau de luminosité inférieur audit deuxième seuil et affichage sur ladite surface d’affichage desdites premières images de niveau de luminosité inférieur audit deuxième seuil. La surface d’affichage est formée d’une vitre transparente sur laquelle est ajouté un film réfléchissant. La deuxième caméra est orientée vers le conducteur du véhicule. Le système comporte en outre un récepteur de géolocalisation, et l’identification d’un objet placé dans la direction du regard détectée est effectuée utilisant une première position de géolocalisation du véhicule au moment de la capture desdites premières images et une base de données de terrain, l’identification comportant une détermination d’une deuxième position de géolocalisation correspondant à la direction du regard détectée, et une extraction de ladite base de données de terrain d’un identifiant d’objet placé à ladite deuxième position de géolocalisation. L’au moins une information relative audit objet identifié est obtenue d’une base de données externe, en fonction dudit identifiant d’objet. L’invention concerne également un procédé d’affichage enrichi mis en œuvre dans un système d’affichage enrichi tel que brièvement décrit ci-dessus, comportant des étapes de : -réception de premières images captées par ladite première caméra et d’une direction du regard dudit occupant du véhicule, la direction du regard étant obtenue à partir de deuxièmes images captées par la deuxième caméra, -identification d’un objet placé dans la direction du regard détectée dans lesdites premières images, -obtention d’une information relative à l’objet identifié, et -commande d’affichage sur ladite surface d’affichage d’une information relative à l’objet identifié. L’invention concerne également un programme d’ordinateur comportant des instructions logicielles qui, lorsqu’elles sont exécutées par un ordinateur, mettent en œuvre un procédé d’affichage enrichi tel que défini ci-dessus. L’invention concerne également un véhicule automobile comportant un système d’affichage enrichi tel que brièvement décrit ci-dessus. L’invention apparaîtra plus clairement à la lecture de la description qui va suivre, donnée uniquement à titre d’exemple non limitatif, et faite en référence aux dessins dans lesquels : FIG. 1 la FIG. 1 est une représentation schématique d’un système d’affichage enrichi selon un mode de réalisation ; FIG. 2 la FIG. 2 est un exemple d’affichage enrichi ; FIG. 3 la FIG. 3 est un synoptique des principales étapes d’un procédé d’affichage enrichi selon un mode de réalisation. L’invention s’applique pour tout type de véhicule automobile, et plus généralement pour tout type de véhicule comportant un habitacle adapté pour recevoir des personnes (conducteur et passagers), l’espace à l’intérieur de l’habitacle étant l’espace intérieur du véhicule, et comportant au moins une surface d’affichage permettant de visualiser l’extérieur du véhicule. L’habitacle comporte de manière connue des sièges destinés à recevoir respectivement le conducteur et les passagers. La FIG. 1 illustre schématiquement un système d’affichage 2 dit système d’affichage enrichi, selon un mode de réalisation. Le système d’affichage 2 est adapté pour être embarqué par un véhicule 4. Le système d’affichage 2 comporte une surface d’affichage 6 dite « tête haute » ou HUD (pour « Head-Up Display » en anglais), permettant de visualiser l’extérieur du véhicule. Par exemple la surface d’affichage 6 est formée d’une vitre transparente, par exemple le pare-brise du véhicule 4, classiquement destiné à la visualisation de l’extérieur avant du véhicule, sur laquelle est ajouté un film réfléchissant permettant alors de former une surface d’affichage 6 sur laquelle il est possible d’afficher des images. Le système d’affichage enrichi 2 comporte en outre une première caméra 8 de prise de vue, par exemple une caméra optique, positionnée sur ou dans le véhicule et orientée de manière à capter des premières images de l’extérieur du véhicule. Les premières images sont des images numériques, et elles sont captées en continu avec une fréquence de prise de vue donnée, par exemple de l’ordre de 50 images par seconde. Dans un mode de réalisation, la première caméra 8 est orientée de manière à capter, dans son champ de prise de vue, avec un angle de prise de vue donné, l’extérieur avant du véhicule. Dans ce cas, le champ de prise de vue de la première caméra 8 correspond au champ de vision du conducteur du véhicule. Dans la suite, on considère qu’une seule première caméra 8 est présente, mais un fonctionnement analogue est envisagé pour une pluralité de premières caméras positionnées vers l’extérieur du véhicule, de manière à élargir le champ de prise de vue, des premières images combinées de champ de prise de vue élargi étant alors obtenues. De plus, le système d’affichage enrichi 2 comporte au moins une deuxième caméra 10 de prise de vue, par exemple une caméra optique, positionnée à l’intérieur de l’habitacle du véhicule et orientée vers l’intérieur de l’habitacle du véhicule. Dans l’exemple de la FIG. 1 , deux telles deuxièmes caméras 10 sont représentées. Chaque deuxième caméra 10 est associée à ou comporte une unité 12 de détection de la direction du regard d’un occupant du véhicule situé dans le champ de prise de vue de la deuxième caméra. Chaque deuxième caméra 10 associée à une unité 12 de détection de la direction du regard forme un dispositif de détection de la direction du regard. De tels dispositifs de détection de la direction du regard du conducteur sont connus, par exemple dans le domaine des systèmes de supervision du conducteur ou DMS (pour « Driver Monitoring Systems » en anglais). Le système d’affichage enrichi 2 comporte en outre un dispositif électronique programmable 14, configuré pour contrôler un affichage de données sur la surface d’affichage 6 et connecté respectivement à la première caméra 8 et à la ou chaque deuxième caméra 10 via des bus de communication internes 16. Le dispositif électronique programmable 14 est par exemple une unité électronique de calcul embarquée ECU. Le dispositif électronique programmable 14 comporte au moins un processeur de calcul 18 et une mémoire électronique 20. Le système d’affichage enrichi 2 comporte ou est configuré pour communiquer avec un récepteur de géolocalisation embarqué 22, par exemple un récepteur GPS. De manière connue, un récepteur de géolocalisation est capable de fournir une position de géolocalisation du véhicule, dans un référentiel terrestre fixé, par exemple de fournir des coordonnées du véhicule dans ce référentiel terrestre. Un tel récepteur de géolocalisation est par exemple utilisé pour afficher, sur un écran d’affichage supplémentaire (non représenté) un symbole représentant le véhicule sur une carte, la carte étant obtenue à partir d’une base de données de terrain 24. La base de données de terrain 24 peut être mémorisée localement ou distante et accessible via un protocole de communication sans fil. En outre, le système d’affichage enrichi 2 comporte ou est configuré pour communiquer avec une interface de communication 26. L’interface de communication 26 met en œuvre un protocole de communication sans fil, permettant de communiquer avec des serveurs de données distants, notamment avec une ou plusieurs bases de données 28 externes. Le dispositif électronique programmable 14 comporte un module 30 de réception qui est configuré pour recevoir des premières images captées par la première caméra 8 et d’une direction du regard d’un occupant du véhicule, la direction du regard étant obtenue par mise en œuvre de l’unité de détection d’une direction du regard à partir de deuxièmes images captées par la deuxième caméra 10. De préférence, les deuxièmes images sont captées sensiblement en même temps que les premières images. Par exemple, la direction du regard est exprimée par un vecteur 3D dans un référentiel spatial associé au véhicule. Dans le cas où plusieurs deuxièmes caméras 10 et unités de détection de la direction du regard 12 associées sont présentes, le module 30 est configuré pour recevoir une direction du regard par deuxième caméra 10. Le dispositif électronique programmable 14 comporte en outre un module 32 d’identification d’un objet placé dans les premières images en fonction de la direction du regard détectée, un module 34 d’obtention d’au moins une information relative à l’objet identifié et un module 36 d’affichage sur la surface d’affichage 6 de l’information relative à l’objet identifié. De plus, le dispositif électronique programmable 14 comporte, optionnellement, un module 38 d’amélioration de la luminosité des premières images, et d’affichage des premières images améliorées sur la surface d’affichage 6, permettant alors d’améliorer le confort visuel des occupants, ainsi que la visibilité de l’extérieur du véhicule, dans le champ de prise de vue de la première caméra 8. En particulier, le module 38 est configuré pour calculer un niveau de luminosité dans au moins une des premières images, et lorsque le niveau de luminosité est inférieur à un premier seuil S1, appliquer un traitement d’augmentation du niveau de luminosité desdites premières images pour obtenir des premières images de niveau de luminosité supérieur au premier seuil et commander un affichage sur la surface d’affichage 6 des premières images de niveau de luminosité supérieur au premier seuil. De plus, le module 38 est en outre configuré pour, et lorsque le niveau de luminosité calculé est supérieur à un deuxième seuil S2, appliquer un traitement de diminution du niveau de luminosité des premières images pour obtenir de premières images de niveau de luminosité inférieur au deuxième seuil S2 et commander affichage sur la surface d’affichage 6 des premières images de niveau de luminosité inférieur au deuxième seuil. Le processeur 18 est configuré pour mettre en œuvre les modules 30, 32, 34, 36 et 38 lorsque le dispositif électronique programmable 14 est mis sous tension. Dans un mode de réalisation, les modules 30, 32, 34, 36 et 38 sont réalisés sous forme d’instructions logicielles formant un programme d’ordinateur, qui, lorsqu’il est exécuté par un ordinateur, met en œuvre un procédé d’affichage enrichi selon l’invention. Le programme d’ordinateur comportant des instructions logicielles est en outre apte à être enregistré sur un support non transitoire lisible par ordinateur. Le support lisible par ordinateur est par exemple, un médium apte à mémoriser les instructions électroniques et à être couplé à un bus d’un système informatique. A titre d’exemple, le support lisible est un disque optique, un disque magnéto-optique, une mémoire ROM, une mémoire RAM, tout type de mémoire non-volatile (par exemple EPROM, EEPROM, FLASH, NVRAM), une carte magnétique ou une carte optique. En variante non représentée, les modules 30, 32, 34, 36 et 38 sont réalisés chacun sous forme de composants logiques programmables, tels que des FPGA (de l’anglais Field Programmable Gate Array ), des microprocesseurs, des composants GPGPU (de l’anglais General-purpose processing on graphics processing ), ou encore de circuits intégrés dédiés, tels que des ASIC (de l’anglais Application Specific Integrated Circuit ). La FIG. 2 illustre schématiquement un exemple de surface d’affichage 6 comportant un affichage enrichi. Dans cet exemple schématique, l’occupant du véhicule concerné est le conducteur C, qui est assis dans l’habitacle, derrière le volant. On a également représenté schématiquement la deuxième caméra 10 qui permet, en collaboration avec l’unité de détection de la direction du regard, de détecter la direction du regard du conducteur C. Le champ de prise de vue de la caméra 10 est représenté par les axes A1, A2. Un champ de vision du conducteur se situe entre les axes A3 et A4. La direction du regard du conducteur est représentée par le vecteur V. Dans la première image 40 qui est visible sur la surface d’affichage 6, le vecteur V intercepte un objet 42. L’objet 42 est par exemple un bâtiment, et plus spécifiquement un monument, l’environnement extérieur étant une ville dans l’exemple illustré. Dans d’autres exemple, il peut s’agir d’un élément remarquable du paysage, par exemple une portion de relief (colline, montagne), un bâtiment lointain etc. Une information ‘XXX’ relative à l’objet 42 identifié est affichée à l’intérieur d’une petite fenêtre superposée 44, qui s’affiche en superposition de la première image 40. Par exemple la fenêtre 44 est une fenêtre surgissante (ou fenêtre « pop-up »), affichée temporairement. Par exemple l’information ‘XXX’ est une information textuelle, et représente un nom identifiant l’objet 42 identifié, par exemple le nom du monument ou de l’élément remarquable du paysage. En alternative ou en complément, des informations de sécurité sont également affichées, par exemple des informations relatives à des dangers potentiels, travaux en cours etc. Par exemple la fenêtre 44 est affichée en lien avec l’objet 42 identifié, et donc sa position sur la surface d’affichage 6 se déplace, lorsque le véhicule est en déplacement, de manière à demeurer dans la même position relative par rapport à l’objet 42, et n’est plus affichée lorsque l’objet 42 sort du champ de prise de vue de la première caméra. Ainsi, avantageusement, des informations relatives aux objets sont affichées sur la surface d’affichage 6, formant alors un affichage enrichi d’informations complémentaires. La FIG. 3 est un synoptique des principales étapes d’un procédé d’affichage enrichi, mis en œuvre par un système d’affichage enrichi tel que décrit ci-dessus, selon un mode de réalisation. Le procédé comporte des étapes 50 de capture de premières images par la première caméra et 52 de capture de deuxièmes images par la ou chaque deuxième caméra, et une étape 54 de détection d’une direction du regard d’un occupant du véhicule à partir de chaque deuxième image. Le procédé comprend la réception 56 des premières images et des vecteurs 3D indiquant chaque direction du regard d’un occupant du véhicule. Le procédé comprend également, une étape 58 d’identification, pour chaque direction du regard détectée, représentée par un vecteur V, d’un objet placé dans la première image dans la direction V. Dans un mode de réalisation l’étape 58 comprend une détection 60 d’une première position de géolocalisation P1 du véhicule au moment de la capture de la première image considérée, une détermination 62 d’une deuxième position de géolocalisation P2 correspondant à la direction du regard détectée. La première position de géolocalisation P1 et la deuxième position de géolocalisation P2 sont toutes deux représentées dans un référentiel terrestre fixe. Par exemple, l’étape de détermination 62 d’une deuxième position de géolocalisation P2 met en œuvre une troisième position spatiale P3 d’intersection de la direction du regard et de la première image considérée, la troisième position spatiale étant exprimée par exemple dans un référentiel spatial associé au véhicule, et un calcul de la deuxième position de géolocalisation P2 en fonction de la troisième position spatiale P3 et de la première position P1 de géolocalisation du véhicule. L’étape 58 d’identification comprend en outre une extraction 64 d’une base de données de terrain d’un identifiant d’objet situé à la deuxième position de géolocalisation P2. Le procédé comprend en outre une étape 66 d’obtention d’une information relative à l’objet identifié par l’identifiant d’objet. Par exemple, l’étape 66 met en œuvre une base de données externe, pour extraire une information textuelle relative à l’objet identifié, par exemple le nom d’un monument etc. Enfin, le procédé comprend une étape 68 de commande d’affichage de l’information relative à l’objet identifié, par exemple sous forme d’un texte dans une fenêtre de type « pop-up ». Comme indiqué, l’affichage relatif à un même objet est par exemple maintenu tant que l’objet est identifié dans une première image. Optionnellement, le procédé comporte également des étapes relatives à l’amélioration de la luminosité des premières images, permettant alors un affichage amélioré permettant d’améliorer la sécurité de conduite. Le procédé comprend alors un calcul d’un niveau de luminosité d’une ou plusieurs premières images successives. Toute méthode classique de calcul de niveau de luminosité est applicable. Le procédé comprend ensuite une comparaison du niveau de luminosité calculé à un premier seuil S1. Si le niveau de luminosité est inférieur au premier seuil S1, le procédé comprend une étape de traitement des premières images pour augmenter le niveau de luminosité desdites premières images et obtenir des premières images de niveau de luminosité supérieur au premier seuil S1. Ensuite, le procédé comprend un affichage sur la surface d’affichage 6 des premières images de niveau de luminosité supérieur au premier seuil. Le procédé comprend également, si le niveau de luminosité calcul n’est pas inférieur au premier seuil, une comparaison du niveau de luminosité calculé à un deuxième seuil S2. Le deuxième seuil S2 est supérieur ou égal, de préférence supérieur, au premier seuil S1. Si le niveau de luminosité est supérieur au deuxième seuil S2, le procédé comprend une étape de traitement des premières images pour diminuer le niveau de luminosité desdites premières images et obtenir des premières images de niveau de luminosité inférieur au deuxième seuil S2. Les premier seuil S1 et deuxième seuil S2 sont choisis en fonction de conditions externes, par exemple jour/nuit, conditions météorologiques (nuages, pluie, soleil etc), présence ou absence d’éclairage externe. En complément optionnel, d’autres traitements d’images permettant d’améliorer en temps réel la qualité des premières images captés sont appliqués, les premières images améliorées étant affichées sur la surface d’affichage, ce qui permet d’augmenter la visibilité de l’extérieur par le conducteur et donc d’améliorer la sécurité. Avantageusement, l’affichage enrichi proposé permet d’améliorer l’expérience des occupants du véhicule, en apportant des informations complémentaires et une amélioration de la sécurité. Système d’affichage enrichi pour véhicule automobile, le système d’affichage comportant une surface d’affichage (6) tête haute, permettant de visualiser l’extérieur du véhicule, le système comportant une première caméra (8) positionnée vers l’extérieur du véhicule, au moins une deuxième caméra (10) positionnée vers l’intérieur du véhicule et associée à une unité (12) de détection d’une direction du regard d’un occupant du véhicule, et un dispositif électronique programmable (14) caractérisé en ce qu’il est configuré pour mettre en œuvre des modules de : -réception (30) de premières images captées par ladite première caméra (8) et d’une direction du regard dudit occupant du véhicule, la direction du regard étant obtenue par mise en œuvre de ladite unité (12) de détection d’une direction du regard à partir de deuxièmes images captées par la deuxième caméra (10), -identification (32) d’un objet placé dans la direction du regard détectée dans lesdites premières images, -obtention (34) d’au moins une information relative à l’objet identifié, et -affichage (36) sur ladite surface d’affichage (6) d’une information relative à l’objet identifié. Système d’affichage selon la revendication 1, dans lequel le dispositif électronique programmable comporte un module d’amélioration (38) configuré pour calculer un niveau de luminosité dans au moins une desdites premières images, et lorsque le niveau de luminosité est inférieur à un premier seuil, appliquer un traitement d’augmentation du niveau de luminosité desdites premières images pour obtenir de premières images de niveau de luminosité supérieur audit premier seuil et affichage sur ladite surface d’affichage desdites premières images de niveau de luminosité supérieur audit premier seuil. Système d’affichage selon l’une des revendications 1 ou 2, dans lequel le dispositif électronique programmable est en outre configuré pour calculer un niveau de luminosité dans au moins une desdites premières images, et lorsque le niveau de luminosité est supérieur à un deuxième seuil, appliquer un traitement de diminution du niveau de luminosité desdites premières images pour obtenir de premières images de niveau de luminosité inférieur audit deuxième seuil et affichage sur ladite surface d’affichage desdites premières images de niveau de luminosité inférieur audit deuxième seuil. Système d’affichage selon l’une quelconque des revendications 1 à 3, dans lequel ladite surface d’affichage est formée d’une vitre transparente sur laquelle est ajouté un film réfléchissant. Système d’affichage selon l’une quelconque des revendications 1 à 4, dans lequel ladite deuxième caméra est orientée vers le conducteur du véhicule. Système d’affichage selon l’une quelconque des revendications 1 à 5, comportant en outre un récepteur de géolocalisation (22), et dans lequel l’identification d’un objet placé dans la direction du regard détectée est effectuée utilisant une première position de géolocalisation du véhicule au moment de la capture desdites premières images et une base de données de terrain (24), l’identification comportant une détermination d’une deuxième position de géolocalisation correspondant à la direction du regard détectée, et une extraction de ladite base de données de terrain (24) d’un identifiant d’objet placé à ladite deuxième position de géolocalisation. Système selon la revendication 6, dans lequel l’au moins une information relative audit objet identifié est obtenue d’une base de données externe (28), en fonction dudit identifiant d’objet. Véhicule automobile comportant un système d’affichage enrichi conforme à l’une quelconque des revendications 1 à 7. Procédé d’affichage enrichi mis en œuvre dans un système d’affichage enrichi conforme aux revendications 1 à 7, comportant des étapes de : -réception (56) de premières images captées par ladite première caméra et d’une direction du regard dudit occupant du véhicule, la direction du regard étant obtenue à partir de deuxièmes images captées par la deuxième caméra, -identification (58) d’un objet placé dans la direction du regard détectée dans lesdites premières images, -obtention (66) d’au moins une information relative à l’objet identifié, et -commande d’affichage (68) sur ladite surface d’affichage d’une information relative à l’objet identifié. Programme d’ordinateur comportant des instructions logicielles qui, lorsqu’elles sont exécutées par un dispositif électronique programmable, mettent en œuvre un procédé d’affichage enrichi pour véhicule automobile conforme à la revendication 9.