(57)【要約】【課題】乗客コンベアにおいて、乗客に応じて適切に注意を喚起する。【解決手段】本実施形態に係る注意喚起システムは、情報提供装置と、処理装置と、注意喚起装置とを備える。情報提供装置は、１台以上の乗客コンベアの乗客が身に着ける物体それぞれと、物体それぞれの画像の特徴量と、乗客コンベアにおいて物体が原因となって発生し得る故障の内容とを対応付けて含む特徴量情報を提供する。処理装置は、提供された特徴量情報と、乗客コンベアにおける物体の撮影により得られた画像情報とを処理し、撮影された物体と、乗客コンベアにおいて、撮影された物体が原因となって発生し得る故障の内容とを特定する。注意喚起装置は、物体が撮影された乗客コンベアにおいて、処理装置により特定された物体と、物体が原因となって発生し得る故障の内容とに応じて、特定された物体を身に着ける乗客ごとの注意喚起を行う。【選択図】図１
2019206419.tif 000002
【特許請求の範囲】
【請求項１】
１台以上の乗客コンベアの乗客が身に着ける物体それぞれと、前記物体それぞれの画像の特徴量と、前記乗客コンベアにおいて前記物体が原因となって発生し得る故障の内容とを対応付けて含む特徴量情報を提供する情報提供装置と、
前記情報提供装置により提供された前記特徴量情報と、前記乗客コンベアにおける前記物体の撮影により得られた画像情報とを処理し、撮影された前記物体と、前記乗客コンベアにおいて、撮影された前記物体が原因となって発生し得る前記故障の内容とを特定する処理装置と、
前記物体が撮影された前記乗客コンベアにおいて、前記処理装置により特定された前記物体と、前記物体が原因となって発生し得る前記故障の内容とに応じて、特定された前記物体を身に着ける前記乗客ごとの注意喚起を行う注意喚起装置と
を備える注意喚起システム。
【請求項２】
前記処理装置は、
前記乗客コンベアにおける前記物体の撮影により得られた画像情報から、撮影された前記物体の特徴量を抽出する抽出装置と、
前記抽出装置により抽出された前記物体の特徴量と、提供された前記特徴量情報に含まれる特徴量とを比較し、これらが一致又は類似すると判定したときに、前記特徴量情報に含まれ、前記抽出装置により抽出された前記物体の特徴量と一致又は類似すると判定された特徴量に対応付けられた前記物体と、前記物体が原因となって発生し得る前記故障の内容とを特定する特定装置と
を備える請求項１に記載の注意喚起システム。
【請求項３】
前記物体が撮影された前記乗客コンベアにおいて前記故障が発生したときに、前記故障の内容と、前記故障が発生したときに前記物体が撮影された前記乗客コンベアにおいて特定されている前記物体とを対応付けて含む故障情報を生成し、前記情報提供装置に出力する情報生成装置
をさらに有し、
前記情報提供装置は、前記情報生成装置から出力された前記故障情報に基づいて、前記特徴量情報を更新する
請求項１又は２に記載の注意喚起システム。
【請求項４】
前記情報提供装置は、前記情報生成装置から出力された前記故障情報と、前記特徴量情報とを用いて深層学習を行うことにより、前記特徴量情報を更新する
請求項３に記載の注意喚起システム。
【請求項５】
前記注意喚起装置は、前記乗客コンベアにおいて、前記物体が撮影された位置と、前記物体が原因となる前記故障が発生する位置とに基づいて、前記物体を身に着けた乗客が、前記物体によって前記故障が発生する位置に達するタイミングで、前記乗客への注意喚起を行う
請求項１〜４のいずれか１項に記載の注意喚起システム。
【請求項６】
前記物体は、前記乗客コンベアの乗客が身に着ける複数の種類の衣服及び複数の種類の履物である
請求項１〜５のいずれか１項に記載の注意喚起システム。
【請求項７】
前記物体は、前記乗客コンベアの乗客が身に着ける複数の種類の衣服及び複数の種類の履物において、前記乗客コンベアに触れる可能性がある部分である
請求項１〜５のいずれか１項に記載の注意喚起システム。
【請求項８】
前記処理装置及び前記注意喚起装置は、前記乗客コンベアと一体に構成される
請求項１〜７のいずれか１項に記載の注意喚起システム。
【請求項９】
前記情報提供装置、前記処理装置及び前記注意喚起装置は一体に構成される
請求項１〜７のいずれか１項に記載の注意喚起システム。
【請求項１０】
前記乗客コンベアは、エスカレータである
請求項１〜９のいずれか１項に記載の注意喚起システム。
【請求項１１】
１台以上の乗客コンベアの乗客が身に着ける物体それぞれが原因となって発生し得る故障の内容とを、前記乗客コンベアに提供し、
前記乗客コンベアにおいて撮影により得られた前記物体の画像に基づいて、撮影された前記物体が原因となって発生し得る前記故障の内容を特定し、
前記物体が撮影された前記乗客コンベアにおいて特定された前記故障の内容に応じて、撮影された前記物体を身に着ける前記乗客ごとに注意喚起を行う
注意喚起方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、注意喚起システム及び注意喚起方法に関する。
【背景技術】
【０００２】
事故、故障、不具合などの発生を抑制するために、例えば、スピーカを用いてアナウンスを行うことで、エスカレータに乗降する乗客に注意を喚起する機能を有するエスカレータや移動歩道などの乗客コンベアが運用されている。しかしながら、乗客コンベアにおいては、身に着けている服装や履物など物体によって、乗客が注意を向けるべきところが異なる。そのため、不特定多数に向けた単なるアナウンスでは、乗客それぞれの適切な注意を喚起することはできない。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１６−９４２６２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
本発明の実施形態は、乗客コンベアにおいて、乗客に応じて適切に注意を喚起することを目的とする。
【課題を解決するための手段】
【０００５】
上記課題を解決するため、本実施形態に係る注意喚起システムは、情報提供装置と、処理装置と、注意喚起装置とを備える。情報提供装置は、１台以上の乗客コンベアの乗客が身に着ける物体それぞれと、物体それぞれの画像の特徴量と、乗客コンベアにおいて物体が原因となって発生し得る故障の内容とを対応付けて含む特徴量情報を提供する。処理装置は、提供された特徴量情報と、乗客コンベアにおける物体の撮影により得られた画像情報とを処理し、撮影された物体と、乗客コンベアにおいて、撮影された物体が原因となって発生し得る故障の内容とを特定する。注意喚起装置は、物体が撮影された乗客コンベアにおいて、処理装置により特定された物体と、物体が原因となって発生し得る故障の内容とに応じて、特定された物体を身に着ける乗客ごとの注意喚起を行う。
【図面の簡単な説明】
【０００６】
【図１】本実施形態に係るエスカレータシステムを示す図である。
【図２】本実施形態に係る乗客コンベアとしてのエスカレータを示す図である。
【図３】制御装置の構成を示す図である。
【図４】情報サーバ及び処理装置の構成を示す図である。
【図５】制御装置において実行される注意喚起プログラムを示す図である。
【図６】情報サーバにより制御装置に送信される特徴量情報を示す図である。
【図７】乗客への注意喚起のために用いられる注意喚起情報を示す図である。
【図８】故障情報を示す図である。
【図９】情報サーバにおいて実行される情報提供プログラムを示す図である。
【図１０】制御装置の処理を示すフローチャートである。
【発明を実施するための形態】
【０００７】
［エスカレータシステム１］
以下、実施形態を、図面を用いて説明する。なお、説明には、適宜、相互に直交するＸ軸、Ｙ軸、Ｚ軸からなるＸＹＺ座標系を用いる。また、各図において、実質的に同じ構成要素には同じ符号を付す。
【０００８】
図１は、本実施形態に係るエスカレータシステム１を示す図である。エスカレータシステム１は、情報サーバ５と、ｎ（ｎ≧１）台の乗客コンベアとしてのエスカレータ１０−１〜１０−ｎとを備える。情報サーバ５とエスカレータ１０−１〜１０−ｎとは、ネットワーク２を介して相互に通信可能に接続される。
【０００９】
情報サーバ５は、エスカレータ１０それぞれに、乗客へ安全を呼びかけるための処理において用いられる特徴量情報を提供する。ネットワーク２は、インターネット(Internet)、ＷＡＮ(Wide Area Network)、ＶＰＮ(Virtual Private Network)などであって、情報サーバ５とエスカレータ１０との間で情報を伝送する。
【００１０】
［エスカレータ１０］
図２は、本実施形態に係る乗客コンベアとしてのエスカレータ１０を示す図である。エスカレータ１０は、フロアＦ１とフロアＦ２とに跨って架設され、フロアＦ１からフロアＦ２に乗客を移動させる。エスカレータ１０は、トラス１１、トラス１１の内部に配置された一対のスプロケット２１，２２、スプロケット２１，２２に巻回された移動チェーン２３、移動チェーン２３に連結された複数の踏み段２５、スプロケット２１を駆動する駆動装置３０、駆動装置３０の制御などを行う制御装置３４、トラス１１に沿って設けられるケーシング１２、ケーシング１２に設けられるガイド１３、ガイド１３に沿って移動する手摺ベルト１４を備える。ケーシング１２は、フロアＦ１の乗り場及びフロアＦ２の降り場の付近に、スピーカ４０−１，４０−２、カメラ４２−１，４２−２及び安全装置４６−１，４６−２を備え、中央部分にカメラ４４を備える。
【００１１】
トラス１１は、フロアＦ１とフロアＦ２わたって設けられるエスカレータ１０の土台である。トラス１１の側面及び下面は、鋼板によってカバーされる。また、トラス１１の両端部上面にはそれぞれ乗降板が固定される。ケーシング１２は、踏み段２５の両側に設けられ、手摺ベルト１４の下側の部分などを収容する。ガイド１３は、ケーシング１２に設けられ、手摺ベルト１４を支持する。手摺ベルト１４は、スプロケット２１，２２により駆動されることにより、ガイド１３に沿って周回する。
【００１２】
スプロケット２１，２２は、トラス１１内部のＸ軸方向両端に配置される歯車である。スプロケット２１，２２は、それぞれＹ軸に平行な軸Ｐ１，Ｐ２を中心に回転可能に支持される。
【００１３】
駆動装置３０は、駆動チェーン３３を介してスプロケット２１を駆動する。駆動装置３０は、スプロケット２１の近傍に配置される。
【００１４】
制御装置３４は、駆動装置３０によるスプロケット２１の駆動を制御し、また、情報サーバ５により提供される特徴量情報を用いて乗客の足元の画像を処理し、事故、故障、不具合など（以下、「故障」）について、乗客に注意を呼びかける。制御装置３４は、無線通信回線を介してネットワーク２に接続され、さらに、ネットワーク２を介して情報サーバ５に接続される。
【００１５】
スプロケット２１，２２には、移動チェーン２３が懸架される。移動チェーン２３は、スプロケット２１，２２により駆動され、踏み段２５を移動させるループ状のチェーンである。移動チェーン２３には、複数の踏み段２５が連結される。スプロケット２１が、駆動装置３０によって駆動されると、移動チェーン２３がスプロケット２１，２２を周回する。これにより、移動チェーン２３の上方に位置する踏み段２５が、トラス１１の上方から露出した状態で、フロアＦ１とフロアＦ２の間を移動する。
【００１６】
また、スプロケット２１，２２は、不図示のチェーンやスプロケットなどを介して、ガイド１３に移動可能に支持される手摺ベルト１４に連結される。このため、駆動装置３０によってスプロケット２１が駆動されることで、踏み段２５がフロアＦ１，Ｆ２の間を移動するとともに、手摺ベルト１４もガイド１３を周回する。手摺ベルト１４は、上半分がケーシング１２から露出した状態になる。ケーシング１２から露出した手摺ベルト１４は、踏み段２５と同期してフロアＦ１とフロアＦ２の間を移動する。
【００１７】
スピーカ４０は、制御装置３４から入力された音声情報を出力することで、エスカレータ１０の乗客に注意を喚起する。
【００１８】
カメラ４２，４４は、乗客の足元、つまり、乗客の履物、ズボン、スカートなどの衣服の裾など、エスカレータ１０のケーシング１２及び踏み段２５に触れる可能性がある部分の画像を撮影し、撮影の結果として得られた画像情報を制御装置３４に出力する。安全装置４６は、非常停止用ボタン及び検出装置（不図示）などを備え、エスカレータ１０の故障の発生を検出し、故障の発生を制御装置３４に通知する。エスカレータ１０の故障情報は、ケーシング１２が乗客のスカートを挟んだこと、踏み段２５におけるインレットの部分が乗客の履物を挟んだこと、踏み段２５が浮き上ったことなどが検出装置により検出されたこと、及び非常停止用ボタンが押下されたことなど、故障の内容を示す。
【００１９】
［制御装置３４及び情報サーバ５］
図３は、エスカレータ１０の制御装置３４の構成を示す図である。制御装置３４は、処理装置３４０、駆動ユニット３４２から構成される。
【００２０】
駆動ユニット３４２は、駆動装置３０に電力を供給するための電源や、インバータなどを備える。駆動ユニット３４２は、処理装置３４０からの指示に基づいて、駆動装置３０を駆動する。
【００２１】
図４は、情報サーバ５及び処理装置３４０の構成を示す図である。情報サーバ５及び処理装置３４０は、ＣＰＵ（Central Processing Unit）３４８、主記憶部３５０、補助記憶部３５２、操作パネル３５４、インタフェース部３５６、及び上記各部を接続するバス３４６を有するコンピュータである。
【００２２】
ＣＰＵ３４８は、補助記憶部３５２に記憶されるプログラムに従って、上記各部を制御する。
【００２３】
主記憶部３５０は、ＲＡＭ（Random Access Memory）等を有する。主記憶部３５０は、ＣＰＵ３４８の作業領域として用いられる。
【００２４】
補助記憶部３５２は、ＲＯＭ（Read Only Memory）、半導体メモリ等の不揮発性メモリを有する。補助記憶部３５２は、ＣＰＵ３４８が実行するプログラム、及び各種パラメータなどを記憶する。また、補助記憶部３５２は、ＣＰＵ３４８の処理結果としてのデータなどを記憶する。
【００２５】
操作パネル３５４は、例えば、押しボタンやＧＵＩ（Graphical User Interface）を備える。エスカレータ１０の管理者や作業者は、操作パネル３５４を介して、ＣＰＵ３４８に各種指令や各種情報を入力することができる。
【００２６】
インタフェース部３５８は、シリアルインタフェース、パラレルインタフェース、ネットワークインタフェースなどを有する。制御装置３４において、スピーカ４０，カメラ４２−１，４２−２，４４、安全装置４６及びネットワーク２は、インタフェース部３５８を介して、ＣＰＵ３４８に接続される。情報サーバ５において、ネットワーク２は、インタフェース部３５８を介して、ＣＰＵ３４８に接続される。
【００２７】
［プログラム］
図５は、図２に示された制御装置３４において実行される注意喚起プログラム３６を示す図である。なお、図５には、駆動装置３０を制御するための構成要素は示されない。注意喚起プログラム３６の命令コードは、制御装置３４において、処理装置３４０の補助記憶部３５２（図３を参照）に記憶され、ＣＰＵ３４８により実行される。制御装置３４においてＣＰＵ３４８により実行される注意喚起プログラム３６は、通信処理部３６０、特徴量記憶部３６２、カメラ制御部３６４、特徴量抽出部３６６、特徴量比較部３６８、注意喚起部３７０、故障特定部３７２及び故障情報生成部３７４としての処理を行う。
【００２８】
注意喚起プログラム３６において、通信処理部３６０は、ネットワーク２を介した情報サーバ５との間の通信処理を行う。また、通信処理部３６０は、故障情報生成部３７４から入力された故障情報を情報サーバ５に送信する。また、通信処理部３６０は、情報サーバ５により予め決められたタイミングで、又は不定期に送信された特徴量情報を受信し、特徴量記憶部３６２に出力する。特徴量記憶部３６２は、通信処理部３６０から入力された特徴量情報を、主記憶部３５０又は補助記憶部３５２に記憶する。
【００２９】
図６は、図１に示された情報サーバ５により制御装置３４に送信される特徴量情報を示す図である。特徴量情報は、情報サーバ５において、オペレータにより操作パネル３５４などを介して入力された情報から生成され、複数のエントリを含む。図６に示されるように、制御装置３４において情報サーバ５から受信された特徴量情報の各エントリには、エスカレータ１０の乗客が身に着ける衣服や履物の種類、及び乗客の属性を示すインデックスを示す情報と、画像処理に用いられる特徴量（特徴量１〜６）と、故障発生の可能性の大きさ（大、中、小）と、発生しうる故障の内容を示す情報とが対応付けられて含まれる。
【００３０】
なお、図６において、インデックスには、「男性大人用紐靴１」、「女性大人用紐なし革靴２」、「樹脂製サンダル３」、「スカート４」、「男性用ズボン５」及び「女性子供用靴６」を示す情報が含まれる。また、図６において、故障内容には、靴の紐のケーシングへの挟み込み、衣服又は履物の一部のケーシングへの挟み込みを示す情報が含まれる。
【００３１】
インデックスは、乗客の属性（男性、女性、大人、子供）と、衣服の種類（スカート、ズボンなど）又は履物の種類（紐靴、紐なし靴、サンダルなど）と、衣服などの部分とを示す情報を含む。故障発生の可能性及び発生しうる故障の内容を示す情報は、過去において集計されたインデックスごとの故障の発生頻度、故障内容などから生成される。
【００３２】
カメラ制御部３６４は、カメラ４２，４４を制御し、エスカレータ１０の乗客の足元、つまり、故障の原因となり得る乗客の衣服の裾や、履物及びその状態を撮影させ、これらの画像を示す画像情報を生成させる。カメラ制御部３６４は、カメラ４２，４４により生成された画像情報を受信し、特徴量抽出部３６６に出力する。特徴量抽出部３６６は、カメラ制御部３６４から受信した画像情報から、乗客の衣服の裾を示す部分や、履物及びその状態を示す特徴量を検出する。特徴量抽出部３６６は、乗客の衣服の裾の部分などを検出するたびに、検出した衣服の裾などに対応する特徴量を画像情報から取り出し、特徴量比較部３６８に出力する。
【００３３】
特徴量比較部３６８は、特徴量抽出部３６６から入力された特徴量と、特徴量記憶部３６２に記憶された特徴量情報のエントリに含まれる特徴量の全てとを比較し、予め決められた割合以上で一致するか否かを判断し、エントリを特定する。つまり、特徴量比較部３６８は、特徴量抽出部３６６から入力された特徴量と、特徴量情報のいずれのエントリに含まれる特徴量とが一致又は類似するかを判断する。さらに、特徴量比較部３６８は、特徴量抽出部３６６から入力された特徴量と同一又は類似すると判断した特徴量を含むエントリを特定する。特徴量比較部３６８は、この判断において、一致又は類似すると判断した特徴量を含む特徴量情報のエントリと、この判断に用いられた画像情報を生成したカメラ４２，４４を示す情報とを、故障情報生成部３７４及び注意喚起部３７０に出力する。
【００３４】
故障特定部３７２は、安全装置４６により検出されたエスカレータ１０の故障内容を特定し、特定した故障を注意喚起部３７０及び故障情報生成部３７４に出力する。つまり、故障特定部３７２は、非常停止用ボタンが押下されたこと、ケーシング１２が乗客のスカートを挟んだこと、踏み段２５におけるインレットの部分が乗客の履物を挟んだこと、踏み段２５が浮き上ったことなどのいずれが安全装置４６により検出されたかを特定する。
【００３５】
図７は、図５に示された注意喚起部３７０において記憶され、乗客への注意喚起のために用いられる注意喚起情報を示す図である。図７に示されるように、注意喚起部３７０は、予め、特徴量情報（図６を参照）のインデックスと、乗客ごとの個別の注意喚起に用いられる音声を示す注意喚起情報とを対応付けて記憶する。注意喚起部３７０は、特徴量比較部３６８から入力された特徴量情報に含まれるインデックスに対応する注意喚起情報を示す音声を、スピーカ４０から乗客に出力する。なお、図７に示される注意喚起情報には、図６に示された注意喚起情報は、「お履物にご注意ください」、「お召し物に注意ください」、「お子様にご注意ください」、「急停止します」などの音声を示す。
【００３６】
なお、注意喚起部３７０は、特徴量比較部３６８により特定された特徴量情報のエントリに含まれるインデックスに対応する注意喚起情報を、スピーカ４０−１，４０−２のいずれから音声として出力するかを決める。また、注意喚起部３７０は、既知のエスカレータ１０の踏み段２５の移動速度と、特徴量比較部３６８によるエントリの特定のために用いられた画像情報を生成したカメラ４２，４４の位置と、音声を出力するスピーカ４０の位置とを考慮して、どのようなタイミングで注意喚起情報が示す音声を出力するかを調整する。
【００３７】
つまり、例えば、注意喚起部３７０は、カメラ４２−２により得られた画像情報を処理して得られた特徴量情報のエントリに含まれる故障内容が、ケーシング１２への挟み込みを示すときには、注意喚起情報が示す音声を、スピーカ４０−２から直ちに出力する。また、例えば、注意喚起部３７０は、カメラ４２−２，４４により得られた画像情報を処理して得られた特徴量情報のエントリに含まれる故障内容が、インレットへの挟み込みを示すときには、注意喚起情報が示す音声を、カメラ４２−２，４４の位置からスピーカ４０−１の位置までの乗客の移動に要する時間だけ遅延して、スピーカ４０−１から出力する。このように、注意喚起部３７０は、乗客が、故障の発生の可能性がある位置に達するタイミングで、注意喚起情報により示される音声を出力する。
【００３８】
また、注意喚起部３７０は、予めなされる設定に従い、特徴量情報に含まれ、故障発生の可能性を示す情報が、大きいか、中程度か、小さいかに応じて、注意喚起情報が示す音声を出力したりしなかったりする。つまり、例えば、注意喚起部３７０は、故障発生の可能性を示す情報が、「大」のときにのみ同じエントリに含まれる注意喚起情報が示す音声を出力する。あるいは、例えば、注意喚起部３７０は、故障発生の可能性を示す情報が、「大」又は「中」のときにのみ、同じエントリに含まれる注意喚起情報が示す音声を出力する。
【００３９】
図８は、図５に示された故障情報生成部３７４により生成される故障情報を示す図である。図８に示されるように、事故情報は、故障内容と、この特定の時点で把握されている特徴量を含むエントリのインデックスの全てを含む。故障情報生成部３７４は、任意の時点において、エスカレータ１０に乗っている乗客全員が身に着けている履物などの画像情報から得られた特徴量と、特徴量情報のエントリに含まれる特徴量とが一致又は類似するかを常に把握する。故障情報生成部３７４は、故障内容が特定されたときに、図８に示された故障情報を生成する。故障情報生成部３７４は、生成した故障情報を、通信処理部３６０及びネットワーク２を介して情報サーバ５に出力する。
【００４０】
図９は、図１に示された情報サーバ５において実行される情報提供プログラム５２を示す図である。情報提供プログラム５２の命令コードは、情報サーバ５の補助記憶部３５２（図３を参照）に記憶され、ＣＰＵ３４８により実行される。情報サーバ５において実行される情報提供プログラム５２は、通信処理部３６０、特徴量学習部５２０、特徴量データベース（ＤＢ；Data Base）５２２、情報入力部５２４及び特徴量提供部５２６としての処理を行う。
【００４１】
情報提供プログラム５２において、通信処理部３６０は、ネットワーク２（図１を参照）を介した制御装置３４の注意喚起プログラム３６（図５を参照）との間の通信処理を行う。また、通信処理部３６０は、特徴量提供部５２６から予め決められたタイミングで、又は不定期に入力される特徴量情報（図６を参照）を、制御装置３４の注意喚起プログラム３６に送信する。また、通信処理部３６０は、制御装置３４の注意喚起プログラム３６から入力された故障情報（図８を参照）を、特徴量学習部５２０に出力する。
【００４２】
情報入力部５２４は、オペレータにより操作パネル３５４（図４を参照）に入力された特徴量情報、及び、ネットワーク２及び通信処理部３６０を介して制御装置３４の注意喚起プログラム３６から入力された故障情報を受け入れる。情報入力部５２４は、受け入れられた特徴量情報を特徴量ＤＢ５２２に出力する。また、情報入力部５２４は、受け入れられた故障情報を、特徴量学習部５２０に出力する。
【００４３】
特徴量ＤＢ５２２は、特徴量学習部５２０及び情報入力部５２４から入力される特徴量情報を、主記憶部３５０又は補助記憶部３５２に記憶する。また、特徴量ＤＢ５２２は、記憶した特徴量情報を、特徴量学習部５２０及び特徴量提供部５２６からの要求に応じて、これらに出力する。
【００４４】
特徴量学習部５２０は、情報入力部５２４及び通信処理部３６０から入力された故障情報を、特徴量ＤＢ５２２に、順次、出力する。また、特徴量学習部５２０は、特徴量ＤＢ５２２に記憶された特徴量情報、及び故障情報を用いて深層学習を行い、特徴量情報の内容を更新する。
【００４５】
つまり、特徴量学習部５２０は、特徴量ＤＢ５２２から得られた特徴量情報、及び故障情報からインデックス及び故障内容を取り出す。特徴量学習部５２０は、取り出したインデックスと故障内容との相関関係を求めるなどの学習処理を行い、学習処理の結果に基づいて、新たな特徴量情報を生成する。特徴量学習部５２０は、生成した特徴量情報を特徴量ＤＢ５２２に出力し、更新させる。
【００４６】
特徴量提供部５２６は、特徴量ＤＢ５２２から特徴量情報を読み出して、通信処理部３６０に出力し、エスカレータシステム１に含まれる全てのエスカレータ１０−１〜１０−ｎ（図１を参照）に出力させる。特徴量提供部５２６による特徴量情報の通信処理部３６０への出力は、予め決められたタイミングで、又は、特徴量ＤＢ５２２に記憶された特徴量情報が更新されるたびに行われる。つまり、特徴量提供部５２６は、エスカレータシステム１に含まれる全てのエスカレータ１０−１〜１０−ｎに、注意喚起のための処理に用いられる特徴量情報を共有させる。
【００４７】
［エスカレータシステム１の動作］
以下、エスカレータシステム１の全体的な動作を説明する。
【００４８】
エスカレータシステム１において、エスカレータ１０−１〜１０−ｎ（図１を参照）それぞれにおいて、制御装置３４（図５などを参照）は、故障が検出されるたびに、故障情報（図８を参照）を生成する。エスカレータ１０−１〜１０−ｎそれぞれの制御装置３４は、生成した故障情報を、ネットワーク２を介して情報サーバ５（図９などをさらに参照）に、順次、出力する。
【００４９】
情報サーバ５は、オペレータにより入力された特徴量情報（図６を参照）、及びエスカレータ１０−１〜１０−ｎから入力された故障情報を用いて深層学習を行い、特徴量情報を更新する。更新された特徴量情報は、エスカレータ１０−１〜１０−ｎ全ての制御装置３４に、予め決められたタイミングで、又は不定期に、ネットワーク２を介して出力される。
【００５０】
図１０は、図２に示された制御装置３４の処理を示すフローチャートである。図１０に示されるように、エスカレータ１０−１〜１０−ｎそれぞれにおいて、注意喚起プログラム３６が実行される制御装置３４は、ステップＳ１００において、情報サーバ５からネットワーク２を介して特徴量情報を受信する処理を行う。
【００５１】
ステップＳ１０２において、制御装置３４は、特徴量情報を受信したか否かを判断する。制御装置３４は、特徴量情報を受信したとき（Ｓ１０２の処理においてＹＥＳ）にはＳ１０４の処理に進み、受信しなかったとき（Ｓ１０２の処理においてＮＯ）にはＳ１０６の処理に進む。
【００５２】
ステップＳ１０４の処理において、制御装置３４は、Ｓ１００の処理において受信した特徴量情報を記憶し、特徴量情報を更新する。
【００５３】
ステップＳ１０６において、制御装置３４は、カメラ４２，４４を制御して、エスカレータ１０の乗客の足元の画像を撮影させる。さらに、制御装置３４は、撮影の結果として得られた画像情報を、カメラ４２，４４から取り込む。
【００５４】
ステップＳ１０８において、制御装置３４は、取り込まれた画像情報から、乗客が身に着ける履物などの特徴量を抽出する。
【００５５】
ステップＳ１１０において、制御装置３４は、情報サーバ５からネットワーク２を介して入力され、記憶された最新の特徴量情報と、Ｓ１０８の処理において抽出した特徴量とを比較する。
【００５６】
ステップＳ１１２において、制御装置３４は、Ｓ１１０の処理における比較の結果として、特徴量情報に、抽出した特徴量と同一又は類似の特徴量を含むエントリがあるか否かを判断する。制御装置３４は、特徴量情報に、抽出した特徴量と同一又は類似の特徴量情報の本体を含むエントリがあるとき（Ｓ１１２の処理においてＹＥＳ）にはＳ１１４の処理に進む。制御装置３４は、このようなエントリがないとき（Ｓ１１２の処理においてＮＯ）にはＳ１００の処理に戻る。
【００５７】
ステップＳ１１４において、制御装置３４は、抽出した特徴量と同一又は類似の特徴量を含むエントリの情報、及び注意喚起情報（図７を参照）を用いて、エスカレータ１０の乗客ごとの注意喚起を行う。
【００５８】
ステップＳ１１６において、制御装置３４は、安全装置４６により故障の発生が検出されたか否かを判断する。制御装置３４は、故障の発生が検出されたとき（Ｓ１１６の処理においてＹＥＳ）にはＳ１１８の処理に進む。制御装置３４は、故障の発生が検出されなかったとき（Ｓ１１６の処理においてＮＯ）にはＳ１００の処理に戻る。
【００５９】
ステップＳ１１８において、制御装置３４は、Ｓ１１６の処理において検出されたと判断された故障の内容を特定し、故障の内容を示す故障情報（図８を参照）を生成する。制御装置３４は、生成した故障情報を、ネットワーク２を介して情報サーバ５に出力する。
【００６０】
以上説明されたエスカレータシステム１においては、乗客それぞれが、どのような衣服や履物などを身に着けているかが判断され、乗客ごとに、この判断に応じた内容で注意の呼びかけが行われる。従って、エスカレータシステム１によれば、乗客に応じて適切に注意を喚起することができる。
【００６１】
なお、以上、エスカレータ１０−１〜１０−ｎそれぞれにおいて特徴量の抽出及び注意喚起のための処理が行われる場合が説明されたが、エスカレータ１０−１〜１０−ｎにおいて注意喚起プログラム３６により行われる処理は、情報サーバ５において行われてもよい。つまり、注意喚起プログラム３６と情報提供プログラム５２とは一体に構成されてもよい。また、特徴量情報及び故障情報には、必要に応じて、図６，図８に示された情報以外の情報が含まれてもよい。
【００６２】
以上説明された本発明の実施形態は、例として提示され、発明の範囲の限定を意図しない。これら新規な実施形態は、その他の様々な形態で実施され得、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更がなされ得る。これらの実施形態やその変形は、発明の範囲や要旨に含まれ、また、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【符号の説明】
【００６３】
１  エスカレータシステム
２  ネットワーク
５  情報サーバ
５２  情報提供プログラム
５２０  特徴量学習部
５２２  特徴量ＤＢ
５２４  情報入力部
５２６  特徴量提供部
１０  エスカレータ
１１  トラス
１２  ケーシング
１３  ガイド
１４  手摺ベルト
２１，２２  スプロケット
２３  移動チェーン
２５  踏み段
３０  駆動装置
３４  制御装置
３４０  処理装置
３６  注意喚起プログラム
３６０  通信処理部
３６２  特徴量記憶部
３６４  カメラ制御部
３６６  特徴量抽出部
３６８  特徴量比較部
３７０  注意喚起部
３７２  故障特定部
３７４  故障情報生成部
４０  スピーカ
４２，４４  カメラ
４６  安全装置
【図１】
2019206419.tif 000003
【図２】
2019206419.tif 000004
【図３】
2019206419.tif 000005
【図４】
2019206419.tif 000006
【図５】
2019206419.tif 000007
【図６】
2019206419.tif 000008
【図７】
2019206419.tif 000009
【図８】
2019206419.tif 000010
【図９】
2019206419.tif 000011
【図１０】
2019206419.tif 000012
【手続補正書】
【提出日】令和1年7月22日(2019.7.22)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】０００５
【補正方法】変更
【補正の内容】
【０００５】
上記課題を解決するため、本実施形態に係る注意喚起システムは、情報提供装置と、処理装置と、注意喚起装置と、情報生成装置とを備える。情報提供装置は、１台以上の乗客コンベアの乗客が身に着ける物体それぞれと、物体それぞれの画像の特徴量と、乗客コンベアにおいて物体が原因となって発生し得る故障の内容とを対応付けて含む特徴量情報を提供する。処理装置は、提供された特徴量情報と、乗客コンベアにおける物体の撮影により得られた画像情報とを処理し、撮影された物体と、乗客コンベアにおいて、撮影された物体が原因となって発生し得る故障の内容とを特定する。注意喚起装置は、物体が撮影された乗客コンベアにおいて、処理装置により特定された物体と、物体が原因となって発生し得る故障の内容とに応じて、特定された物体を身に着ける乗客ごとの注意喚起を行う。情報生成装置は、物体が撮影された乗客コンベアにおいて故障が発生したときに、故障の内容と、故障が発生したときに物体が撮影された乗客コンベアにおいて特定されている物体とを対応付けて含む故障情報を生成し、情報提供装置に出力する。情報提供装置は、情報生成装置から出力された故障情報に基づいて、特徴量情報を更新する。
【手続補正２】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
１台以上の乗客コンベアの乗客が身に着ける物体それぞれと、前記物体それぞれの画像の特徴量と、前記乗客コンベアにおいて前記物体が原因となって発生し得る故障の内容とを対応付けて含む特徴量情報を提供する情報提供装置と、
前記情報提供装置により提供された前記特徴量情報と、前記乗客コンベアにおける前記物体の撮影により得られた画像情報とを処理し、撮影された前記物体と、前記乗客コンベアにおいて、撮影された前記物体が原因となって発生し得る前記故障の内容とを特定する処理装置と、
前記物体が撮影された前記乗客コンベアにおいて、前記処理装置により特定された前記物体と、前記物体が原因となって発生し得る前記故障の内容とに応じて、特定された前記物体を身に着ける前記乗客ごとの注意喚起を行う注意喚起装置と、
前記物体が撮影された前記乗客コンベアにおいて前記故障が発生したときに、前記故障の内容と、前記故障が発生したときに前記物体が撮影された前記乗客コンベアにおいて特定されている前記物体とを対応付けて含む故障情報を生成し、前記情報提供装置に出力する情報生成装置と
を備え、
前記情報提供装置は、前記情報生成装置から出力された前記故障情報に基づいて、前記特徴量情報を更新する
注意喚起システム。
【請求項２】
１台以上の乗客コンベアの乗客が身に着ける物体それぞれと、前記物体それぞれの画像の特徴量と、前記乗客コンベアにおいて前記物体が原因となって発生し得る故障の内容とを対応付けて含む特徴量情報を提供する情報提供装置と、
前記情報提供装置により提供された前記特徴量情報と、前記乗客コンベアの複数の位置に配置されたカメラによる前記乗客コンベアにおける前記物体の撮影により得られた画像情報とを処理し、撮影された前記物体と、前記乗客コンベアにおいて、撮影された前記物体が原因となって発生し得る前記故障の内容とを特定する処理装置と、
前記物体が撮影された前記乗客コンベアにおいて、前記処理装置により特定された前記物体と、前記物体が原因となって発生し得る前記故障の内容とに応じて、特定された前記物体を身に着ける前記乗客ごとの注意喚起を行う注意喚起装置と
を備え、
前記注意喚起装置は、前記乗客コンベアにおいて、前記物体が撮影された位置と、前記物体が原因となる前記故障が発生する位置とに基づいて、前記物体を身に着けた乗客が、複数の前記カメラのいずれかにより撮影された前記物体による前記故障が発生する位置に達するタイミングで、前記乗客への注意喚起を行う
注意喚起システム。
【請求項３】
前記処理装置は、
前記乗客コンベアにおける前記物体の撮影により得られた画像情報から、撮影された前記物体の特徴量を抽出する抽出装置と、
前記抽出装置により抽出された前記物体の特徴量と、提供された前記特徴量情報に含まれる特徴量とを比較し、これらが一致又は類似すると判定したときに、前記特徴量情報に含まれ、前記抽出装置により抽出された前記物体の特徴量と一致又は類似すると判定された特徴量に対応付けられた前記物体と、前記物体が原因となって発生し得る前記故障の内容とを特定する特定装置と
を備える請求項１または２に記載の注意喚起システム。
【請求項４】
前記情報提供装置は、前記情報生成装置から出力された前記故障情報と、前記特徴量情報とを用いて深層学習を行うことにより、前記特徴量情報を更新する
請求項１に記載の注意喚起システム。
【請求項５】
前記物体は、前記乗客コンベアの乗客が身に着ける複数の種類の衣服及び複数の種類の履物である
請求項１〜４のいずれか１項に記載の注意喚起システム。
【請求項６】
前記物体は、前記乗客コンベアの乗客が身に着ける複数の種類の衣服及び複数の種類の履物の前記乗客コンベアに触れる可能性がある部分である
請求項１〜４のいずれか１項に記載の注意喚起システム。
【請求項７】
前記処理装置及び前記注意喚起装置は、前記乗客コンベアと一体に構成される
請求項１〜６のいずれか１項に記載の注意喚起システム。
【請求項８】
前記情報提供装置、前記処理装置及び前記注意喚起装置は一体に構成される
請求項１〜６のいずれか１項に記載の注意喚起システム。
【請求項９】
前記乗客コンベアは、エスカレータである
請求項１〜８のいずれか１項に記載の注意喚起システム。
【請求項１０】
１台以上の乗客コンベアの乗客が身に着ける物体それぞれと、前記物体それぞれの画像の特徴量と、前記乗客コンベアにおいて前記物体が原因となって発生し得る故障の内容とを対応付けて含む特徴量情報を提供し、
提供された前記特徴量情報と、前記乗客コンベアにおいて撮影により得られた前記物体の画像に基づいて、撮影された前記物体と、前記乗客コンベアにおいて、撮影された前記物体が原因となって発生し得る前記故障の内容とを特定し、
前記物体が撮影された前記乗客コンベアにおいて特定された前記故障の内容に応じて、撮影された前記物体を身に着ける前記乗客ごとに注意喚起を行い、
前記物体が撮影された前記乗客コンベアにおいて前記故障が発生したときに、前記故障の内容と、前記故障が発生したときに前記物体が撮影された前記乗客コンベアにおいて特定されている前記物体とを対応付けて含む故障情報を生成し、
生成された前記故障情報に基づいて、前記特徴量情報を更新する
注意喚起方法。
【請求項１１】
１台以上の乗客コンベアの乗客が身に着ける物体それぞれと、前記物体それぞれの画像の特徴量と、前記乗客コンベアにおいて前記物体が原因となって発生し得る故障の内容とを対応付けて含む特徴量情報を提供し、
提供された前記特徴量情報と、前記乗客コンベアの複数の位置に配置されたカメラによる前記乗客コンベアにおける撮影により得られた前記物体の画像に基づいて、撮影された前記物体と、前記乗客コンベアにおいて、撮影された前記物体が原因となって発生し得る前記故障の内容とを特定し、
前記乗客コンベアにおいて、前記物体が撮影された位置と、前記物体が原因となる前記故障が発生する位置とに基づいて、前記物体を身に着けた乗客が、複数の前記カメラのいずれかにより撮影された前記物体による前記故障が発生する位置に達するタイミングで、前記物体が撮影された前記乗客コンベアにおいて特定された前記故障の内容に応じて、撮影された前記物体を身に着ける前記乗客ごとに注意喚起を行う
注意喚起方法。