FR 3099753 A1 20210212 FR 1909040 A 20190807 Description Titre de l'invention : PROCEDE DE SURVEILLANCE, PRODUIT PROGRAMME D'ORDINATEUR, SYSTEME DE SUR- VEILLANCE ET AERONEF ASSOCIES Domaine technique 100011 La présente invention concerne un procédé de surveillance d'un organe d'un aéronef. 100021 L'invention concerne également un produit programme d'ordinateur, un système de surveillance et un aéronef embarquant un tel système de surveillance. 100031 L'invention s'applique au domaine de la surveillance d'organes d'aéronefs, en par- ticulier à la détection d'anomalies touchant lesdits organes. Technique antérieure [0004] Il est connu d'équiper des aéronefs avec des caméras destinées à fournir, dans le cockpit, des flux vidéo d'organes à surveiller, par exemple un moteur ou un train d'atterrissage. De telles images sont susceptibles de permettre à l'équipage de détecter des anomalies. [0005] Toutefois, de tels systèmes ne donnent pas entière satisfaction. [0006] En effet, l'interprétation de telles images requiert une très grande expertise afin de détecter et caractériser la gravité d'une éventuelle anomalie. [0007] Parmi de telles anomalies, il est possible de citer : le dysfonctionnement d'un moteur (fuite d'huile et/ou de carburant, arrêt du moteur suite à l'extinction de la chambre de combustion, dit «J'aine out», fumées, flammes, etc.), le dysfonctionnement d'un organe de la nacelle (inverseur de poussée, par exemple), le dysfonctionnement des commandes de vols ou des trains d'atterrissage, ou encore un impact suite à l'ingestion d'un corps étranger. [0008] En outre, de tels systèmes ne sont pas satisfaisants dans la mesure où ils requièrent une surveillance continue de la part de l'équipage (surveillance manuelle ou précisément à l'oeil), ce qui n'est pas possible. Il en résulte la possibilité de ne pas détecter l'occurrence d'un problème du moteur, du train d'atterrissage, de l'inverseur de poussée, etc. [0009] Un but de l'invention est donc de proposer un système de surveillance qui permette une détection et unc analyse plus simples et plus efficaces d'anomalies touchant un organe surveillé d'un aéronef, et qui ne nécessite pas une intervention permanente de la part de l'équipage. Exposé de l'invention [0010] A cet effet, l'invention a pour objet un procédé du type précité, comprenant les étapes : 2 [0011] - réception, en provenance d'un dispositif d'acquisition vidéo, d'un flux vidéo repré- sentatif d'au moins une partie de l'organe ; [0012] - en cas de détection de la réalisation d'une condition prédéterminée, extraction d'une partie du flux vidéo pour former une séquence d'intérêt ; [0013] - identification, dans la séquence d'intérêt extraite, d'au moins une image d'intérêt ; [0014] - comparaison d'une signature, obtenue à partir de chaque image d'intérêt, à au moins une signature prédéterminée d'une librairie de signatures ; et [0015] - génération d'un signal de détection d'anomalie si le résultat de la comparaison satisfait un critère prédéterminé. [0016] En effet, grâce à l'élaboration d'une signature à partir d'au moins une image d'intérêt du flux vidéo, le procédé selon l'invention autorise une détection et une analyse d'anomalie qui ne dépend pas de l'expertise d'un opérateur. En outre, le recours à une bibliothèque de signatures confère une grande souplesse au procédé de surveillance, dans la mesure où la détection de nouvelles anomalies est susceptible d'être mise en oeuvre simplement et rapidement par l'enregistrement des nouvelles signatures correspondantes. [0017] Suivant d'autres aspects avantageux de l'invention, le procédé comporte une ou plusieurs des caractéristiques suivantes, prise(s) isolément ou suivant toutes les combinaisons techniquement possibles : [0018] - l'organe est associé à au moins un capteur pour générer, au cours du temps, un signal de mesure représentatif d'un fonctionnement de l'organe, le tlux vidéo et chaque signal de mesure étant synchronisés ; [0019] - la condition prédéterminée est réalisée si, dans le signal de mesure généré par au moins un capteur, une anomalie est détectée ; [0020] - l'étape d'identification comprend un prétraitement destiné à rejeter des images ex- trapolées du flux vidéo ; [0021] - le procédé de surveillance comprend, en outre, un diagnostic, à partir du flux vidéo, du dispositif d'acquisition vidéo ; [0022] - le diagnostic du dispositif d'acquisition vidéo comprend : [0023] - la sélection d'au moins deux images témoins du flux vidéo, séparées dans le temps par une durée prédéterminée ; et [0024] - l'évaluation, à partir du résultat de la comparaison des au moins deux images témoins, d'un niveau de qualité et/ou d'une défaillance du dispositif d'acquisition vidéo. [0025] En outre, l'invention a pour objet un produit programme d'ordinateur comportant des instructions de code de programme qui, lorsqu'elles sont exécutées par un ordinateur, mettent en oeuvre le procédé tel que défini ci-dessus. [0026] En outre, l'invention a pour objet un système de surveillance comprenant un 3 dispositif d'acquisition vidéo et un dispositif de traitement, dans lequel [0027] le dispositif d'acquisition vidéo est configuré pour générer un flux vidéo représentatif d'au moins une partie d'un organe à surveiller d'un aéronef, et [0028] le dispositif de traitement est configuré pour : [0029] - extraire une partie du flux vidéo pour former une séquence d'intérêt, en cas de détection de la réalisation d'une condition prédéterminée ; [0030] - identifier, dans la séquence d'intérêt extraite, au moins une image d'intérêt ; [0031] - comparer une signature, obtenue à partir de l'au moins une image d'intérêt, à au moins une signature prédéterminée d'une librairie de signatures ; et [0032] - générer d'un signal de détection d'anomalie si le résultat de la comparaison satisfait un critère prédéterminé. [0033] En outre, l'invention a pour objet un aéronef embarquant un système de surveillance tel que défini ci-dessus. Brève description des dessins [0034] L'invention sera mieux comprise à l'aide de la description qui va suivre, donnée uniquement à titre d'exemple non limitatif et faite en se référant aux dessins annexés sur lesquels : [0035] [fig.1[ - la figure 1 est une représentation schématique d'un système de surveillance selon l'invention ; et [0036] [fig.2[ - la figure 2 est un ordinogramme du déroulement du procédé de surveillance mis en oeuvre par le système de surveillance de la figure I. Description des modes de réalisation 100371 Un système de surveillance 2 selon l'invention, embarqué à bord d'un aéronef (non représenté), est illustré par la figure 1. 100381 Le système de surveillance 2 comprend au moins un dispositif d'acquisition vidéo 4 et un dispositif de traitement 6. 100391 Chaque dispositif d'acquisition vidéo 4 est configuré pour générer un flux vidéo re- présentatif d'au moins une partie d'un organe de l'aéronef associé au dispositif d'acquisition, dit « organe surveillé ». En outre, le dispositif de traitement 6 est configuré pour traiter chaque flux vidéo et pour délivrer, le cas échéant, un signal de détection représentatif de la détection d'une anomalie au niveau d'un organe surveillé. 100401 L'organe surveillé est, par exemple, un moteur, une nacelle, un volet, un train d'atterrissage, un actionneur ou encore une pièce mécanique des commandes de vol de l'aéronef. 100411 Chaque dispositif d'acquisition vidéo 4 comporte une caméra 8 et une chaîne d'acquisition 10, la caméra étant disposée, à bord de l'aéronef, en fonction de l'organe surveillé. [0042] La caméra 8 est agencée, à bord de l'aéronef, de sorte que son champ de vision in- tercepte au moins une partie de l'organe surveillé. [0043] Par exemple, la caméra 8 est agencée, à bord de l'aéronef, de sorte que son champ de vision intercepte la partie arrière d'un moteur ou d'une nacelle, ou encore des becs ou des volets. Selon un autre exemple, la caméra 8 est agencée, à bord de l'aéronef, de sorte que son champ de vision intercepte la partie avant d'un moteur ou d'une nacelle, en particulier des aubes du moteur. Selon encore un autre exemple, la caméra 8 est agencée, à bord de l'aéronef, de sorte que son champ de vision intercepte l'intérieur d'une nacelle ou d'un moteur. [0044] De façon classique, la camera 8 est configurée pour générer un signal électrique re- présentatif des éléments détectés dans son champ de vision, la chaîne d'acquisition 10 étant contigu& pour délivrer, au cours du temps, le flux vidéo représentatif de chaque partie de l'organe surveillé correspondant. [0045] Avantageusement, dans le cas où l'organe surveillé est associé à au moins un capteur configuré pour générer, au cours du temps, un signal de mesure représentatif d'un fonctionnement de l'organe surveillé, la chaîne d'acquisition 10 est configurée pour synchroniser, avec chaque signal de mesure, le flux vidéo qu'elle délivre. [0046] Le dispositif de traitement 6 est configuré pour recevoir le flux vidéo et pour en extraire, en cas de détection de la réalisation d'une condition prédéterminée, une partie du flux vidéo pour former une séquence d'intérêt. [0047] Une telle condition prédéterminée est, par exemple, la détection d'une anomalie dans le signal de mesure généré par au moins un capteur. [0048] En variante, une telle condition prédéterminée est, par exemple, la présence de l'aéronef dans une phase prédéterminée, telle qu'une phase d'arrêt au sol, une phase de roulage (encore désignée sous l'appellation anglais « taxiing »), une phase de décollage, une phase de croisière, ou encore une phase d'atterrissage. [0049] Le dispositif de traitement 6 est également configuré pour identifier, dans la séquence d'intérêt extraite, au moins une image d'intérêt. [0050] De façon avantageuse, si la chaîne d'acquisition 10 est configurée de sorte que le flux vidéo qu'elle délivre est un flux vidéo compressé, le dispositif de traitement 6 est configuré pour mettre en oeuvre un prétraitement de chaque séquence d'intérêt extraite pour écarter, c'est-à-dire rejeter, des images du flux vidéo obtenues par extrapolation. [0051] Par exemple, un tel prétraitement consiste à rejeter les images dites à codage prédictif image inter (c'est-à-dire des images à codage prédictif ou encore des images à codage prédictif bidirectionnel), qui sont des images extrapolées à partir d'images dites à codage interne (ou encore « images intra », ou « images de référence »). De telles appellations sont couramment utilisées dans le domaine du codage vidéo, en référence à des structures dites « groupe d'images » (ou encore GOP, de l'anglais « group of pictures »). Par conséquent, les images d'intérêt sont des images intra. [0052] A titre d'exemple, dans le cas où le flux vidéo est obtenu par codage selon la norme H.264, les images de référence, susceptibles de constituer des images d'intérêts, présentent une fréquence d'une image sur quatre dans le flux vidéo, deux images de référence successives étant séparées par trois images à codage prédictif, qui seront rejetées par le dispositif de traitement 6 lors de l'exécution du prétraitement. [0053] Le prétraitement décrit ci-dessus est avantageux, dans la mesure où les images à codage prédictif, qui sont des images extrapolées à partir des images intra, sont susceptibles d'engendrer de l'imprécision et/ou des mauvaises interprétations dans la mise en oeuvre du procédé de surveillance selon l'invention. [0054] Le dispositif de traitement 6 est, en outre, configuré pour générer, à partir d'au moins une image d'intérêt identifiée, une signature correspondante. [0055] De préférence, pour la génération d'une telle signature, le dispositif de traitement 6 est configuré pour appliquer, à chaque image d'intérêt, un conditionnement prédéterminé. [0056] Un tel conditionnement comprend, par exemple, un filtrage et/ou un ajustement de contraste et/ou un ajustement de couleurs et/ou une détection de contours. [0057] Un tel filtrage comprend, par exemple, une réduction de bruit optique et/ou d'encodage, un traitement de défaillances (décrites ultérieurement) du dispositif d'acquisition vidéo 4, une correction de flou, une suppression de la contribution de défauts, gouttes d'eau, poussières, etc. [0058] Un tel ajustement de contraste comporte, par exemple, un ajustement de l'exposition, notamment de sorte à ce qu'une zone-témoin de la zone surveillée conserve une luminosité constante au cours du temps. Une telle zone-témoin est, par exemple une portion d'aile. Ceci réduit l'impact des variations de luminosité de l'environnement sur la détection d'anomalies. [0059] Un tel ajustement de couleurs se fonde, par exemple, sur une mire agencée dans le champ de vision de la caméra 8. [0060] Une telle détection de contours consiste en la détection de contours d'objets présents sur chaque image d'intérêt, de préférence après la mise en oeuvre du filtrage et/ou de l'ajustement de contraste. [0061] La signature est, par exemple, représentative de contours d'éléments présents sur l'image d'intérêt, par exemple des contours de l'organe surveillé. [0062] Selon un autre exemple, une telle signature est représentative de variations entre images successives dans le temps, notamment dues à l'apparition d'éléments entre images successives, ou encore à des mouvements. Dans ce cas, le dispositif de traitement 6 est, par exemple, configuré pour mettre en oeuvre une méthode utilisant des ondelettes ou des approches hiérarchiques pour détecter de telles variations. 6 [0063] A titre d'exemple, le dispositif de traitement 6 est configuré pour générer, à partir de deux images d'intérêt successives, une signature correspondante par une différence entre les deux images d'intérêt. En d'autres termes, la signature est le résultat de la soustraction, pixel par pixel, de la valeur d'un pixel d'une image d'intérêt à la valeur du même pixel de l'autre image d'intérêt. [0064] Le dispositif de traitement 6 est également configuré pour comparer chaque signature obtenue à au moins une signature prédéterminée d'une librairie de signatures. [0065] Une telle librairie est, par exemple, une librairie de défauts. Une telle librairie est, par exemple, mise à jour par apprentissage lors de l'occurrence d'évènements considérés comme des anomalies. Pour cela, un réseau de neurones, éventuellement aidé d'un expert, est susceptible d'être utilisé. Une telle librairie est, par exemple, augmentée, au cours du temps, par les contributions de l'ensemble des aéronefs embarquant le système de surveillance 2. [0066] En outre, le dispositif de traitement 6 est configuré pour générer un signal de détection d'anomalie si le résultat de la comparaison satisfait un critère prédéterminé. [0067] Par exemple, un critère prédéterminé est un degré de similitude supérieur à un seuil prédéterminé entre la signature obtenue et une signature de la bibliothèque. [0068] Un tel signal de détection d'anomalie est, par exemple, destiné à déclencher une alerte. [0069] Selon un autre exemple, un tel signal de détection d'anomalie est utilisé pour la mise à jour de compteurs d'usage, notamment la mise à jour d'un compteur d'usage associé à l'organe surveillé. [0070] Selon encore un autre exemple, un tel signal de détection d'anomalie est utilisé pour le calcul d'un estimateur de sévérité opérationnelle. [0071] 11 en résulte qu'un tel signal de détection est susceptible d'être mis en oeuvre dans le diagnostic et le pronostic de pannes touchant, notamment, le ou chaque organe surveillé. [0072] De façon avantageuse, le dispositif de traitement 6 est configuré pour établir, à partir du flux vidéo, un diagnostic du dispositif d'acquisition vidéo 4. [0073] Par exemple, le dispositif de traitement 6 est configuré pour, à partir d'au moins une image issue du flux vidéo qui est généré par le dispositif d'acquisition vidéo 4, dite image témoin », déterminer, en particulier au cours d'une mise en route du système de surveillance 2, un diagnostic portant sur une mise au point et un étalonnage de couleurs du dispositif d'acquisition vidéo 4. Un tel diagnostic est avantageusement réalisé sur la base d'une mire agencée dans le champ de vision de la caméra 8. [0074] En variante, pour un diagnostic sur l'étalonnage des couleurs, notamment sur la balance des blancs, le dispositif de traitement 6 est configuré pour détecter un élément prédéterminé dans l'image témoin, par exemple par l'identification d'un élément pré- 7 déterminé (par exemple, une portion prédéterminée de l'organe surveillé), notamment après la mise en oeuvre d'une détection de contours, et pour comparer une homogénéité de l'image au niveau dudit élément prédéterminé à un seuil d'homogénéité prédéterminé. La détermination de l'homogénéité met, par exemple, en oeuvre un filtre médian. [0075] De préférence, dans ce cas, si l'homogénéité de l'image au niveau de l'élément pré- déterminé est supérieure ou égale au seuil d'homogénéité prédéterminé, alors le dispositif de traitement 6 détermine le diagnostic selon lequel une balance des blancs peut être réalisée. Sinon, le dispositif de traitement 6 détermine le diagnostic selon lequel une balance des blancs ne peut pas être réalisée, et, par exemple, utilise, pour le traitement des images d'intérêt, un réglage par défaut ou un réglage précédemment utilisé. [0076] Selon un autre exemple, un tel diagnostic comporte l'évaluation, à partir du résultat de la comparaison d'au moins deux images témoins extraites du flux vidéo, d'un niveau de qualité et/ou d'une défaillance du dispositif d'acquisition vidéo. Une telle évaluation est, par exemple, réalisée au cours d'une phase de croisière de l'aéronef. [0077] Par « niveau de qualité », il est entendu, au sens de la présente demande, une capacité du dispositif d'acquisition vidéo 4 à réaliser une discrimination entre des éléments présents dans le champ dc vision dc la caméra 8. [0078] De telles défaillances du dispositif d'acquisition vidéo 4 se traduisent notamment par des invariants dans le flux vidéo. De tels invariants sont, par exemple, des pixels morts d'un capteur de la caméra 8, ou encore des salissures d'objectifs de la caméra 8. De tels invariants sont, de préférence, mémorisés dans le dispositif de traitement 6, en particulier pour une mise en oeuvre lors de la génération de signatures précédemment décrite. [0079] Le fonctionnement du système de surveillance 2 va maintenant être décrit en référence à la figure 2. [0080] Suite à la mise en route du système de surveillance 2, le dispositif d'acquisition vidéo 4 transmet, à destination du dispositif de traitement 6, un flux vidéo représentatif d'au moins une partie de l'organe surveillé correspondant. [0081] Avantageusement, au cours d'une étape d'initialisation, le dispositif de traitement 6 établit, à partir du flux vidéo, un premier diagnostic 20 du dispositif d'acquisition vidéo 4. [0082] En particulier, le dispositif de traitement 6 détermine un premier diagnostic portant sur la mise au point et/ou l'étalonnage de couleurs (ou la balance des blancs) du dispositif d'acquisition vidéo 4, à partir de l'au moins une image témoin issue du flux vidéo généré par le dispositif d'acquisition vidéo 4. [0083] Notamment, le dispositif de traitement 6 compare l'homogénéité de l'image, au 8 niveau de l'élément prédéterminé, au seuil d'homogénéité prédéterminé, et réalise la balance des blancs sur la base du résultat de la comparaison. [0084] Avantageusement, le dispositif de traitement 6 établit, à partir du flux vidéo, un deuxième diagnostic 22 du dispositif d'acquisition vidéo 4, ultérieur au premier diagnostic, par exemple à plusieurs reprises dans le temps (notamment pendant la phase de croisière de l'aéronef). [0085] En particulier, le dispositif de traitement 6 détermine un deuxième diagnostic comportant l'évaluation, à partir du résultat de la comparaison d'au moins deux images témoins extraites du flux vidéo, du niveau de qualité et/ou d'une défaillance du dispositif d'acquisition vidéo. [0086] Puis, au cours d'une étape d'extraction 24, en cas de détection de la réalisation d'une condition prédéterminée, le dispositif de traitement 6 extrait une séquence d'intérêt du flux vidéo. [0087] Puis, au cours d'une étape d'identification 26, le dispositif de traitement 6 identifie, dans la séquence d'intérêt extraite, au moins une image d'intérêt. [0088] Puis, au cours d'une étape de comparaison 28, le dispositif de traitement 6 compare la signature obtenue à partir de l'au moins une image d'intérêt identifiée à au moins une signature prédéterminée de la librairie de signatures. [0089] De préférence, pour la génération d'une telle signature, le dispositif de traitement 6 applique d'abord, à chaque image d'intérêt, un conditionnement prédéterminé, par exemple un filtrage et/ou un ajustement de contraste et/ou un ajustement de couleurs et/ou une détection de contours. Par exemple, le conditionnement prédéterminé se fonde, au moins en partie, sur le résultat du deuxième diagnostic lorsque celui-ci est mis en oeuvre. [0090] Puis, si le résultat de la comparaison satisfait un critère prédéterminé, le dispositif de traitement 6 génère le signal de détection d'anomalie, au cours d'une étape de génération 30 de signal de détection d'anomalie. [0091] En variante, le deuxième diagnostic 22 est susceptible d'être réalisé à tout moment au cours du fonctionnement du système de surveillance 2. 9 REVENDICATIONS[Revendication I] Procédé de surveillance d'un organe d'un aéronef, comprenant les étapes : - réception, en provenance d'un dispositif d'acquisition vidéo, d'un flux vidéo représentatif d'au moins une partie de l'organe ; - en cas de détection de la réalisation d'une condition prédéterminée, extraction (24) d'une partie du flux vidéo pour former une séquence d'intérêt ; - identification (26), dans la séquence d'intérêt extraite, d'au moins une image d'intérêt ; - comparaison (28) d'une signature, obtenue à partir de chaque image d'intérêt, à au moins une signature prédéterminée d'une librairie de signatures ; et - génération (30) d'un signal de détection d'anomalie si le résultat de la comparaison satisfait un critère prédéterminé. [Revendication 2] Procédé de surveillance selon la revendication 1, dans lequel l'organe est associé à au moins un capteur pour générer, au cours du temps, un signal de mesure représentatif d'un fonctionnement de l'organe, le flux vidéo et chaque signal de mesure étant synchronisés. [Revendication 3] Procédé de surveillance selon la revendication 2, dans lequel la condition prédéterminée est réalisée si, dans le signal de mesure généré par au moins un capteur, une anomalie est détectée. [Revendication 4] Procédé de surveillance selon l'une quelconque des revendications 1 à 3, dans lequel l'étape d'identification comprend un prétraitement destiné à rejeter des images extrapolées du flux vidéo. [Revendication 5] Procédé de surveillance selon l'une quelconque des revendications 1 à 4, comprenant, en outre, un diagnostic, à partir du flux vidéo, du dispositif d'acquisition vidéo. [Revendication 6] Procédé de surveillance selon la revendication 5, dans lequel le diagnostic du dispositif d'acquisition vidéo comprend : - la sélection d'au moins deux images témoins du flux vidéo, séparées dans le temps par une durée prédéterminée ; et - l'évaluation, à partir du résultat de la comparaison des au moins deux images témoins, d'un niveau de qualité et/ou d'une défaillance du dispositif d'acquisition vidéo. [Revendication 7] Produit programme d'ordinateur comportant des instructions de code de programme qui, lorsqu'elles sont exécutées par un ordinateur, mettent 10 [Revendication 8] [Revendication 9] en oeuvre le procédé selon l'une quelconque des revendications 1 à 6 Système de surveillance comprenant un dispositif d'acquisition vidéo (4) et un dispositif de traitement (6), dans lequel le dispositif d'acquisition vidéo (4) est configure pour générer un flux vidéo représentatif d'au moins une partie d'un organe à surveiller d'un aéronef, et le dispositif de traitement (6) est configure pour : - extraire une partie du flux vidéo pour former une séquence d'intérêt, en cas de détection de la réalisation d'une condition prédéterminée ; - identifier, dans la séquence d'intérêt extraite, au moins une image d'intérêt ; - comparer une signature, obtenue à partir de l'au moins une image d'intérêt, à au moins une signature prédéterminée d'une librairie de signatures ; et - générer d'un signal de détection d'anomalie si le résultat de la comparaison satisfait un critère prédéterminé. Aéronef embarquant un système de surveillance (2) selon la revendication 8.