Brevet FR3035726A1 — publié le 20161104

PROCEDE DE DETECTION DE POSITION DE GARDE-CORPS DE NACELLES DE TELESIEGE PAR ANALYSE D'IMAGE Domaine technique L'invention est relative aux télésièges et notamment à un système de détection de la position d'un garde-corps assurant la sécurité des passagers du télésiège. Arrière-plan Dans une gare d'embarquement de télésiège, on souhaite assurer que les garde-corps soient abaissés à bref délai afin de garantir la sécurité des passagers sur l'ensemble du 10 parcours. Généralement, la surveillance des garde-corps est assurée par du personnel présent en permanence dans la station d'embarquement. Une détection automatisée de la position du garde-corps est ainsi souhaitée. Cependant, une telle détection présente des difficultés liées au fait que les nacelles sont dépourvues d'alimentation électrique. 15 La demande de brevet W02012-172198 propose de détecter la position du garde-corps à l'aide d'une caméra reliée à un système de reconnaissance d'image. Plus spécifiquement, la caméra est installée pour capturer individuellement chaque nacelle de profil à sa sortie de la gare, à un emplacement où le garde-corps est censé avoir été abaissé. La nacelle est éclairée à contre-jour à l'aide d'une source de lumière infrarouge, 20 et le système est configuré pour analyser la silhouette de la nacelle avec ses passagers, et reconnaître le contour du garde-corps abaissé. Une telle solution peut présenter des défauts dans une situation réelle. Résumé On prévoit de façon générale un procédé de détection de position d'un garde-corps sur 25 une nacelle de télésiège, comprenant les étapes consistant à installer une caméra pour capturer dans son champ de vision simultanément plusieurs nacelles consécutives sensiblement de face ou de dos, et de manière que les nacelles ne se chevauchent pas ; analyser les images produites par la caméra avec un système de reconnaissance de forme pour localiser individuellement les nacelles et déterminer les positions de leurs 30 garde-corps respectifs ; et en cas d'ambigüité sur la détermination de la position d'un garde-corps, utiliser les résultats d'analyse d'une image précédente. 3035726 2 Selon une alternative le procédé peut comprendre les étapes consistant à installer une caméra pour capturer dans son champ de vision une nacelle sensiblement de face ou de dos ; analyser les images produites par la caméra avec un système de reconnaissance de forme ; opérer une reconnaissance de la nacelle sans tenir compte de son garde-corps ; 5 associer à la nacelle une zone de présence du garde-corps ; et analyser la zone de présence pour déterminer la position du garde-corps. Le procédé peut comprendre en outre les étapes consistant à créer un catalogue de masques de nacelle correspondant à des positions possibles d'une nacelle sur son parcours dans le champ de vision de la caméra ; opérer la reconnaissance de la nacelle courante dans une image courante en identifiant le masque le plus proche de l'image courante ; associer à chaque masque de nacelle un masque correspondant au garde-corps en configuration fermée ou ouverte ; et opérer la reconnaissance du garde-corps dans l'image courante dans la zone délimitée par le masque de garde-corps associé au masque de nacelle identifié. Le procédé peut comprendre en outre les étapes consistant à estimer la vitesse de déplacement des nacelles ; et limiter le nombre de masques de nacelle pour la reconnaissance à un sous-ensemble de candidats probables compte tenu de la vitesse estimée et de la fréquence de prise de vue des images. Le procédé peut comprendre en outre les étapes consistant à opérer la reconnaissance des nacelles en évaluant un critère basé sur des points d'intérêt calculés sur les masques de nacelle et les zones correspondantes de l'image courante ; et opérer la reconnaissance du garde-corps sur une transformée de détection de formes géométriques opérée sur l'image délimitée par le masque de garde-corps. Description sommaire des dessins Des modes de réalisation seront exposés dans la description suivante, faite à titre non limitatif en relation avec les figures jointes parmi lesquelles : - la figure 1 illustre un exemple d'image du champ de vision d'une caméra reliée à un système de détection de position de garde-corps selon l'invention ; - la figure 2 illustre des images gabarit stockées dans un catalogue du système de détection ; et - les figures 3A à 3C illustrent des étapes d'un exemple de mise en oeuvre de détection de position de garde-corps. 3035726 3 Description de modes de réalisation Un système de détection de position de garde-corps de télésiège du type décrit dans la demande de brevet W02012-172198 peut présenter certains défauts en pratique. Par exemple, le système est conçu pour déterminer l'angle de la partie arrière du garde- 5 corps, qui dépasse de l'arrière de la nacelle. Cette partie arrière est en théorie libre de parasites visuels que peuvent provoquer les passagers. En pratique, la nacelle passe rapidement dans le champ de vision de la caméra, juste après l'embarquement des passagers, de sorte que la nacelle oscille et que les passagers ne sont pas encore bien installés. Il existe une certaine probabilité pour que les 10 passagers fassent dépasser leurs bras ou leurs bâtons de ski à l'arrière de la nacelle en cherchant à s'installer, durant le bref intervalle où la nacelle passe devant la caméra, provoquant une ambiguïté quant à la détection. En outre, la caméra étant installée dans la gare d'embarquement, les passagers ont très peu de temps pour abaisser le garde-corps et atteindre une configuration stable au 15 moment de passer devant la caméra. En règle générale, le garde-corps peut être abaissé un certain temps après que la nacelle a quitté la gare, sans que cela n'impacte la sécurité des passagers. Le système peut ainsi s'avérer trop contraignant pour les passagers. On propose ci-après un système de détection de position de garde-corps basé sur la reconnaissance et le suivi en temps réel d'une nacelle balayant le champ de vision d'une 20 caméra, sur une distance relativement longue permettant aux passagers d'adopter une position stable après l'embarquement et de lever des ambiguïtés transitoires sur la durée. Pour suivre une nacelle sur une relativement longue distance dans un champ de vision restreint, il est préférable d'observer la nacelle de face ou de dos. Dans ces conditions, 25 plusieurs nacelles consécutives se trouvent dans le champ de vision de la caméra. Il est alors préférable que ces nacelles soient observées dans une configuration où elles ne se chevauchent pas dans le champ de vision, c'est-à-dire que chaque nacelle soit observable intégralement. Chaque nacelle peut alors être reconnue et suivie individuellement par le système d'analyse. 30 La figure 1 illustre un exemple de champ de vision 10 d'une caméra conforme à ces contraintes. La caméra peut être fixée sur le premier pylône à la sortie de la gare d'embarquement 12, et être orientée vers la gare 12 pour capturer dans son champ de 3035726 4 vision simultanément plusieurs nacelles consécutives 14 sensiblement de face, et de manière que les nacelles ne se chevauchent pas. A la figure 1, la caméra est orientée pour capturer quatre nacelles partant de la gare 12. Les deux nacelles au premier plan ont leur garde-corps 18 abaissé, et les deux nacelles à 5 l'arrière-plan, qui viennent de sortir de la gare, ont leur garde-corps levé. En plaçant la caméra sur le pylône, c'est-à-dire entre les nacelles partant de la gare et les nacelles retournant dans la gare, et en ajustant l'orientation, la hauteur, et éventuellement la focale de la caméra, on peut obtenir une vue intégrale de chaque nacelle sortante sur une partie de son parcours, comme cela est représenté. 10 La caméra produit un flot d'images du type de la figure 1, figeant les nacelles à des positions successives dans leur parcours. En principe, on souhaite, dans chaque image, reconnaître la nacelle du premier plan et déterminer la position de son garde-corps. Alors, si la nacelle se trouve au-delà d'une position d'avertissement et que son garde-corps n'est pas détecté en position abaissée, le système signale l'absence du garde- 15 corps. Ce signalement, complété par une détection de présence de passagers, peut être utilisé pour émettre un signal d'alarme. Il suffirait pour cela, en théorie, de n'analyser que la partie de l'image contenant la dernière nacelle. On se heurte alors, en pratique, comme dans le système de la demande de brevet W02012-172198, à un manque de robustesse de la reconnaissance lié au fait 20 que la fenêtre d'analyse est très courte et sujette à des parasites visuels fortuits pouvant fausser la reconnaissance. La robustesse de la reconnaissance peut être améliorée en utilisant des critères multiples. Par exemple, au lieu de chercher seulement à reconnaître une nacelle avec le garde-corps abaissé, on peut chercher également à reconnaître une nacelle avec le 25 garde-corps levé. Alors, l'absence de reconnaissance du garde-corps abaissé peut être confirmée par la reconnaissance du garde-corps levé, et inversement. Le fait que le système d'analyse soit configuré pour suivre chaque nacelle pendant une durée relativement longue peut améliorer davantage la robustesse. En effet, on peut alors extrapoler des configurations de nacelle qui n'ont pas pu être reconnues du fait de 30 parasites visuels transitoires. Pour cela, on peut exploiter l'historique de la configuration de la nacelle compte tenu que l'évolution la plus probable est que la nacelle démarre avec le garde-corps levé et termine avec le garde-corps abaissé. 3035726 5 Par exemple, le système reconnaîtra au début de la progression d'une nacelle la configuration garde-corps levé. A un moment donné, les passagers abaissent le garde-corps, mais le système ne parvient pas à reconnaître la position abaissée pour diverses raisons, par exemple car les passagers cachent la majorité du garde-corps avec leurs 5 bras et jambes sur tout le reste de la progression dans le champ de vision de la caméra. Le système ne reconnaît plus la position levée, puisque le garde-corps est effectivement abaissé. Le système pourra confirmer que le garde-corps est abaissé, car il y a eu une évolution de configuration de la nacelle à partir de la configuration avec le garde-corps levé et que l'évolution la plus probable est vers l'abaissement du garde-corps. En fait la 10 même confirmation peut être établie si la dernière configuration reconnue est celle avec le garde-corps abaissé. Selon une première approche, si les ressources de calcul sont suffisantes, le système d'analyse peut être programmé pour mettre en oeuvre une reconnaissance de forme complète sur chaque image, du type reconnaissance de visages, basée sur un 15 apprentissage préalable de différentes configurations de nacelle avec le garde-corps abaissé et le garde-corps levé, et différentes configurations de passagers. Pour diminuer les ressources de calcul, on peut limiter la zone d'analyse dans les images. Dans l'image de la figure 1, le déplacement des nacelles est limité à une zone trapézoïdale 20 dimensionnée pour tenir compte des oscillations du câble et des 20 nacelles. Cette zone exclut des éléments du paysage et les nacelles retournant dans la gare qui pourraient parasiter l'analyse. L'arrière-plan du télésiège étant en règle générale invariable, on pourra appliquer de façon efficace des techniques de soustraction de fond avant de procéder à la reconnaissance de forme. 25 Une nacelle présente généralement des caractéristiques constantes faciles à reconnaître et à suivre, ce qui n'est pas le cas du garde-corps, dont l'image peut être brouillée par la présence des bras et jambes des passagers. Ainsi, on peut utiliser des techniques simples pour reconnaître les nacelles indépendamment de la position du garde-corps. Une fois qu'une nacelle est reconnue et 30 située dans l'image, on peut situer les zones où le garde-corps peut être trouvé en position abaissée et en position levée. On peut alors appliquer dans ces zones restreintes des techniques de reconnaissance plus sophistiquées, par exemple basées sur un apprentissage. 3035726 6 La figure 2 illustre un exemple d'une série de masques de nacelle que l'on peut utiliser dans une technique simple de reconnaissance de nacelles. Ces masques forment un catalogue qui peut être stocké par le système de détection. On peut prévoir un masque par position distincte que la nacelle peut assumer dans l'image saisie par la caméra. 5 Ainsi, en pratique, les masques peuvent être décalés selon un pas d'un pixel de la résolution de la caméra. On a représenté des exemples de masques 14' correspondant aux quatre nacelles de l'image de la figure 1. Chaque masque peut être sous la forme d'une silhouette reproduisant un ensemble de caractéristiques remarquables des nacelles, comme des 10 contours et des coins. Le catalogue peut stocker en outre deux masques de garde-corps associés à chaque masque de nacelle, l'un 18a délimitant la zone dans laquelle peut se trouver le garde-corps abaissé, et l'autre 18b délimitant la zone dans laquelle peut se trouver le garde-corps levé. 15 Le catalogue peut être construit dans une phase de paramétrage, par exemple manuellement, pour tenir compte des spécificités de l'installation (configuration de la caméra, modèle de nacelle et de garde-corps). Les figures 3A à 3C illustrent des étapes mises en oeuvre dans un exemple de phase opérationnelle de reconnaissance et de suivi de nacelles utilisant un catalogue de 20 masques du type de la figure 2. Le système d'analyse est conçu, dans cet exemple, pour accrocher et suivre chaque nouvelle nacelle apparaissant à la sortie de la gare 12 (figure 1), dans la partie de droite du trapèze 20. Par « accrochage » on peut entendre une première reconnaissance de nacelle opérée dans une zone probable d'apparition de la nacelle dans l'image. Par 25 « suivi » on peut entendre la reconnaissance d'une nacelle dans un sous-ensemble de positions pouvant être atteintes par la nacelle depuis sa position reconnue dans l'image précédente. Une reconnaissance pour l'accrochage ou pour le suivi peut être effectuée en comparant un sous-ensemble de masques de nacelle candidats du catalogue à l'image courante. On utilisera ci-après également le terme « position » pour désigner un masque 30 de nacelle, puisque chaque masque de nacelle correspond à une position possible de nacelle. La figure 3A illustre cette opération de comparaison. Le catalogue contenant en principe des positions théoriques ou nominales, la nacelle en situation réelle est susceptible de 3035726 7 présenter des variations par rapport à sa positions nominale - elle peut être plus haute ou plus basse du fait d'oscillations du câble ou de variations de charge, et elle peut être inclinée, comme cela est représenté, du fait d'oscillations ou de passagers mal répartis. Il n'est pas nécessaire que le catalogue contienne toutes les variations possibles autour 5 des positions nominales. Les techniques de reconnaissance utilisées pouvant tolérer des variations, il suffit de trouver le candidat le « plus proche » dans le sous-ensemble défini. Si la similitude n'est pas satisfaisante, on pourra confirmer le candidat le plus proche en testant une série de transformations opérées sur le candidat, comme des translations verticales et éventuellement des rotations. Alternativement, pour éviter 10 d'appliquer des transformations aux positions nominales stockées, le catalogue peut être complété par un ensemble de positions décalées et pivotées pour chaque position nominale. Plus spécifiquement, une opération de comparaison peut être basée sur l'utilisation de points d'intérêt, par exemple selon la méthode de Harris. Des points d'intérêt sont alors 15 calculés sur le masque de nacelle candidat et sur une zone correspondante de l'image courante. La zone de l'image servant au calcul déborde en règle générale des bords du masque candidat, puisque le calcul peut nécessiter un certain nombre de pixels de part et d'autre des contours. Alors, le système sélectionne le candidat fournissant les points d'intérêt les « plus 20 proches » de ceux de l'image courante selon un critère de proximité choisi, par exemple en minimisant la somme des distances absolues (critère SAD). Si la proximité n'est pas suffisante, c'est-à-dire si la somme minimale trouvée est supérieure à un seuil, on peut procéder à des transformations incrémentales du masque dans une certaine marge, et réévaluer la proximité pour chaque incrément. Si on parvient ainsi à rendre la proximité 25 satisfaisante, la transformation est mémorisée pour l'appliquer également aux masques de garde-corps, utilisés plus loin. Dans le cas contraire, la reconnaissance échoue. Dans la phase d'accrochage, le sous-ensemble de candidats correspond aux premières positions du catalogue, notamment toutes les positions pouvant être assumées par la nacelle dans l'intervalle séparant deux prises d'image par la caméra (typiquement 30 1/30 s). Dans la phase de suivi, le sous-ensemble de candidats peut être déterminé à la suite d'une estimation de vitesse de déplacement, par exemple selon la méthode de Kalmann. Connaissant la vitesse de prise de vue des images et la vitesse de déplacement, on trouve la position probable de la nacelle d'une image courante à partir de sa position 3035726 8 dans l'image précédente. Le sous-ensemble de candidats est formé de quelques positions autour de la position probable, avec une marge d'erreur correspondant à l'incertitude sur l'estimation de vitesse. Le nombre de candidats à évaluer est alors particulièrement faible, ce qui accélère l'opération de reconnaissance. 5 On peut alternativement définir un sous-ensemble de candidats en absence d'estimation de vitesse. On peut alors prendre toutes les positions entre la position trouvée dans l'image précédente et la position qui serait atteinte à la vitesse maximale du télésiège. En cas d'échec de reconnaissance pendant la phase de suivi, lié par exemple à des oscillations trop importantes de la nacelle ou à des conditions de prise de vue aléatoires, 10 on sait néanmoins que la nacelle est présente. Dans l'image suivante, une nouvelle tentative peut être faite à l'aide d'un sous-ensemble de positions défini à partir de la dernière position reconnue de la nacelle. Une fois qu'on a reconnu une nacelle dans une image, on peut procéder à la reconnaissance du garde-corps à l'aide des deux masques de garde-corps définis dans le 15 catalogue pour le candidat de nacelle retenu par la reconnaissance. Si une transformation a été appliquée au candidat pour la reconnaissance, cette transformation peut également être appliquée aux masques de garde-corps. La reconnaissance du garde-corps peut en principe n'être effectuée que pour les dernières positions de la nacelle, à partir d'une position limite où le garde-corps est 20 censé être abaissé. Cependant, comme on l'a précédemment indiqué, le procédé de détection peut être rendu plus robuste en observant l'évolution de la position du garde-corps sur le parcours de la nacelle. La figure 3B illustre une première étape dans la reconnaissance du garde-corps, utilisant par exemple le masque de garde-corps abaissé 18a associé au candidat de nacelle 25 retenu. Les mêmes opérations peuvent être réalisées avec le masque de garde-corps levé (18b). On suppose que la proximité obtenue dans l'étape de reconnaissance de la figure 3A est satisfaisante, malgré que la nacelle de l'image soit légèrement inclinée. Le garde-corps 18 à reconnaître, ici en position abaissée, a subi la même inclinaison, mais le masque 30 18a est suffisamment étendu pour contenir malgré cela une partie significative de l'image du garde-corps. 3035726 9 La figure 3C illustre une autre étape dans la reconnaissance du garde-corps. Comme on l'a précédemment indiqué, l'image du garde-corps peut être brouillée de façon aléatoire par la présence des bras et des jambes des passagers, plus ou moins nombreux. On préfère alors utiliser des techniques de reconnaissance plus sophistiquées et plus 5 robustes que celles employées pour la reconnaissance de nacelles. On peut utiliser, dans la zone délimitée par le masque, une technique générique de reconnaissance de formes basée sur un apprentissage préalable, par exemple la méthode de Viola Jones. L'apprentissage peut être effectué sur un grand nombre d'images prises en situation, incluant un échantillon significatif de combinaisons possibles de 10 configurations de passagers et de conditions météorologiques. La technique de reconnaissance peut toutefois être simplifiée et rendue plus robuste en utilisant des caractéristiques remarquables du garde-corps. Le garde-corps présente des formes géométriques caractéristiques, notamment des contours droits horizontaux et verticaux. Ainsi, on peut appliquer sur l'image délimitée par le masque de garde-corps 15 une extraction de contours, par exemple selon la méthode de Canny, et appliquer aux contours une détection de formes géométriques, par exemple une transformée de Hough qui isole les droites. La figure 3C illustre un exemple d'image obtenue à l'aide d'une extraction de droites. Comme cela est représenté, les droites peuvent comporter des lacunes du fait que des 20 parties du garde-corps sont masquées par les passagers, mais on parvient à reconnaître de façon globale la présence d'un garde-corps. Un système à apprentissage qu'on aura alimenté avec de nombreux échantillons d'images sous cette forme transformée aura également une telle capacité de reconnaissance « globale », et pourra être plus robuste qu'un système qu'on aurait alimenté avec des images brutes, puisque les images 25 transformées ne contiennent que des formes caractéristiques. En outre, la base d'apprentissage sera moins volumineuse et demandera moins de ressources à l'exploitation, puisque les images sont monochromes et de faible complexité. Dans ce qui précède, on a décrit le procédé de détection à l'aide d'une caméra observant les nacelles sensiblement de face. Alternativement, la caméra peut être fixée au niveau 30 de la station d'embarquement pour observer les nacelles sensiblement de dos. Le garde-corps peut, de dos, également présenter des caractéristiques visuelles différentiables dans ses deux positions. En outre, l'image du garde-corps de dos est susceptible d'être moins parasitée par les passagers. 3035726 10 De nombreuses variantes et modification des modes de réalisation décrits ici apparaîtront à l'homme du métier. Des exemples particuliers de méthodes de calcul ont été cités pour les opérations de reconnaissance de formes, comme le calcul de points d'intérêt selon la méthode de Harris pour comparer les masques de nacelle à l'image 5 courante. Des méthodes connues différentes peuvent aboutir à des résultats équivalents, comme le calcul de régions d'intérêt selon la méthode SURF. REVENDICATIONS1. Procédé de détection de position d'un garde-corps sur une nacelle de télésiège, comprenant les étapes suivantes : - installer une caméra pour capturer dans son champ de vision (10) une nacelle (14) sensiblement de face ou de dos ; - produire un flot d'images par la caméra ; - analyser les images produites par la caméra avec un système de reconnaissance de forme ; - opérer une reconnaissance de la nacelle (14) sans tenir compte de son garde- corps (18) ; - associer à la nacelle une zone de présence (18a, 18b) du garde-corps ; et - analyser la zone de présence pour déterminer la position du garde-corps. 2. Procédé selon la revendication 1, comprenant les étapes suivantes : - installer la caméra pour capturer dans son champ de vision simultanément plusieurs nacelles consécutives, et de manière que les nacelles ne se chevauchent pas ; - opérer une reconnaissance de chaque nacelle dans le champ de vision de la caméra et déterminer la position de son garde-corps (18) ; et - en cas d'ambigüité sur la détermination de la position d'un garde-corps, utiliser les résultats d'analyse d'une image précédente. Procédé selon la revendication 2, comprenant les étapes suivantes : - créer un catalogue de masques de nacelle (14') correspondant à des positions possibles d'une nacelle sur son parcours dans le champ de vision de la caméra ; - opérer la reconnaissance de la nacelle courante dans une image courante en identifiant le masque le plus proche de l'image courante ; 3035726 12 - associer à chaque masque de nacelle un masque (18a, 18b) correspondant au garde-corps en configuration fermée ou ouverte ; et - opérer la reconnaissance du garde-corps dans l'image courante dans la zone délimitée par le masque de garde-corps associé au masque de nacelle identifié. 5 4. Procédé selon la revendication 3, comprenant les étapes suivantes : - estimer la vitesse de déplacement des nacelles ; et - limiter le nombre de masques de nacelle pour la reconnaissance à un sous-ensemble de candidats probables compte tenu de la vitesse estimée et de la fréquence de prise de vue des images. 10 5. Procédé selon la revendication 3, comprenant les étapes suivantes : - opérer la reconnaissance des nacelles en évaluant un critère basé sur des points d'intérêt calculés sur les masques de nacelle et les zones correspondantes de l'image courante ; et - opérer la reconnaissance du garde-corps sur une transformée de détection de 15 formes géométriques opérée sur l'image délimitée par le masque de garde- corps.