(57)【要約】  列車ドアの監視において、車両ドアにおける挟み込み検知の精度を向上させる技術を提供する。サーバは、予めサーバ内で所有している各監視カメラの車両ドアに何も挟み込んでいない正常な状態の静止画（基準画像９１）と、所定の取得時間で最初に取得した静止画（観測画像９２）との差分比較を行う。差分がある場合、取得時間内において取得した観測画像９２と基準画像９１との差分（差分画像９４）を取得する。次にその差分となる物体の四辺を覆う四角形Ｆを描画し、その中心点を求めて中心座標Ｃ１、Ｃ２、・・・Ｃｎの動き、すなわち中心座標Ｃの差分が所定の閾値を下回った場合、挟み込みが発生していると判断し、モニタへ該当映像の赤枠描画を指示する。
2018180311.tif 000002
【特許請求の範囲】
【請求項１】
列車のドアを撮影する監視カメラと、前記監視カメラの映像をもとに前記ドアの挟み込み検知を行う制御装置とを備える監視システムであって、
前記制御装置は、前記ドアが開いた状態から閉じた状態になったときに、前記監視カメラが撮影した基準画像と、前記基準画像を撮影してから所定時間が経過後、前記監視カメラが撮影した観測画像と、の差分画像から前記ドアに挟み込みが発生していると判断することを特徴とする監視システム。
【請求項２】
前記監視カメラは、前記基準画像を撮影後、複数の前記観測画像を撮影し、
前記制御装置は、前記基準画像と、各観測画像と、の差分画像を取得し、複数の前記差分画像の中心座標から前記中心座標の動きを求め、前記中心座標が動いていないと判断した場合に、前記ドアに挟み込みが発生していると判断することを特徴とする請求項１に記載の監視システム。
【請求項３】
列車のドアを撮影する監視カメラの映像をもとに前記ドアの挟み込み検知を行う監視方法であって、
前記ドアが開いた状態から閉じた状態になったときに、前記監視カメラが撮影した基準画像と、前記基準画像を撮影してから所定時間が経過後、前記監視カメラが撮影した観測画像と、の差分を算出する差分算出工程と、
前記差分に基づいて前記ドアに挟み込みが発生していると判断する挟み込み判定工程とを備えることを特徴とする監視方法。
【請求項４】
前記挟み込み判定工程は、前記差分算出工程で算出した前記差分の中心座標の動きを求め、前記中心座標が動いていないと判断した場合に、前記ドアに挟み込みが発生していると判断することを特徴とする請求項３に記載の監視方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、監視システム及び監視方法に係り、例えば、鉄道の車両のドアの監視システム及び監視方法に関する。
【背景技術】
【０００２】
鉄道監視において、駅のプラットホーム（以下、「ホーム」という）や車両内外の安全性確保の観点で、監視カメラを用いたシステムが知られている（例えば特許文献１及び２参照）。また、近年、鉄道監視システムでは車両内外やホームの監視に加えて、ホームに停車し車両ドアを開閉する際に、人や異物の挟み込みなど車両ドアに異常がないかどうか確認を行う車両ドア挟込検知技術が求められている。【０００３】
挟み込み検知の主な方式として、車両ドアに人や物を挟み込んだ場合、圧力や赤外線などを利用した物理的なセンサを用いて検知する手法が主に利用されていた。【０００４】
しかし最近では、ベビーカーの前輪部のように薄い部品などが挟まった際に、物理的なセンサでは検知出来ない場合があり、そのまま列車が走りだしてしまう事例が発生している。このため、物理的なセンサの代わり或いは併用で、監視映像の画像処理判定を用いた挟み込み検知技術への要望が高まっている。【０００５】
また、正常に挟み込み検知されず人や物が挟み込まれた状態で電車が走り出した場合、それを確認したホーム側の人間が緊急停止ボタンを押すことで、通知を受けた乗務員が電車の緊急停止操作を行う。これに関して、緊急停止ボタンが押されたにも関わらず、乗務経験の浅い乗務員が対応の優先順位を誤り、電車の走行を続けるおそれもある。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特許開２０１４−１８４８０３号公報
【特許文献２】特許第５７４８４６８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
ところで、前述の通り、現在主に利用される物理的なセンサによる車両ドアの挟み込み検知は、検知対象に大きさの制限がある。すなわち、薄かったり細かったりするものに対して、検知できない可能性がある。また、挟み込み検知の誤検知（未検知）が有り、一度走行を始めてしまった列車に関しては、乗務員が停車措置を行うが、これについても人為的なミスが起こりうる可能性がある。これら観点から、監視カメラで監視し画像処理判定を用いて車両ドア付近の安全確認を行うことができる技術が求められていた。【０００８】
本発明は、このような状況に鑑みなされたもので、上記課題を解決することを目的とする。
【課題を解決するための手段】
【０００９】
本発明は、列車のドアを撮影する監視カメラと、前記監視カメラの映像をもとに前記ドアの挟み込み検知を行う制御装置とを備える監視システムであって、前記制御装置は、前記ドアが開いた状態から閉じた状態になったときに、前記監視カメラが撮影した基準画像と、前記基準画像を撮影してから所定時間が経過後、前記監視カメラが撮影した観測画像と、の差分画像から前記ドアに挟み込みが発生していると判断する。
前記監視カメラは、前記基準画像を撮影後、複数の前記観測画像を撮影し、前記制御装置は、前記基準画像と、各観測画像と、の差分画像を取得し、複数の前記差分画像の中心座標から前記中心座標の動きを求め、前記中心座標が動いていないと判断した場合に、前記ドアに挟み込みが発生していると判断してもよい。
本発明は、列車のドアを撮影する監視カメラの映像をもとに前記ドアの挟み込み検知を行う監視方法であって、前記ドアが開いた状態から閉じた状態になったときに、前記監視カメラが撮影した基準画像と、前記基準画像を撮影してから所定時間が経過後、前記監視カメラが撮影した観測画像と、の差分を算出する差分算出工程と、前記差分に基づいて前記ドアに挟み込みが発生していると判断する挟み込み判定工程とを備える。
前記挟み込み判定工程は、前記差分算出工程で算出した前記差分の中心座標の動きを求め、前記中心座標が動いていないと判断した場合に、前記ドアに挟み込みが発生していると判断してもよい。
【発明の効果】
【００１０】
本発明によると、監視映像の画像処理判定を用いた挟み込み検知を、物理的なセンサによる検知の代わり或いは併用で利用することで、挟み込む物の種類に関わらない、より正確な挟み込み検知を行うことができる。また、別の観点では、物理的なセンサや監視映像の画像処理判定を用いた挟み込み検知方法に加えて、乗務員がホームの状況を乗務室内に取り付けられている監視用モニタから映像で確認できるようにし、挟み込みを検知した際にアラームを鳴動させるなど乗務員の注意を促すことで、より容易で信頼性のある監視を実現する技術を提供できる。
【図面の簡単な説明】
【００１１】
【図１】実施形態に係る、列車の監視カメラシステムの配置例の概要を模式的に示す図である。
【図２】実施形態に係る、監視カメラシステムを構成する各機器の接続を中心として説明するための図である。
【図３】実施形態に係る、第１〜第４監視カメラの映像のモニタへの表示例を示した図である。
【図４】実施形態に係る、二つの車両の各第１〜第４監視カメラの映像のモニタへの表示を監視方向を統一させた例を示した図である。
【図５】実施形態に係る、挟み込み判定処理時の差分取得手順を示す図である。
【図６】実施形態に係る、挟み込み判定処理時の差分の動き検出の観測手順を示す図である。
【図７】実施形態に係る、「挟み込み有り」と判断した場合の監視映像の表示例を示す図である。
【図８】実施形態に係る、挟み込み判定解除操作を可能に表示するモニタの表示例を示す図である。
【図９】実施形態に係る、駅停車後、車両ドア開による監視開始までの処理を示すシーケンス図である。
【図１０】実施形態に係る、車両ドアを閉めた際の挟み込み判定の処理を含むシーケンス図である。
【図１１】実施形態に係る、挟み込み判定解除処理のシーケンス図である。
【図１２】実施形態に係る、挟み込み判定処理のフローチャートである。
【発明を実施するための形態】
【００１２】
次に、本発明を実施するための形態（以下、単に「実施形態」という）を、図面を参照して具体的に説明する。本実施形態の概要は次の通りである。（１）車両ドアを監視する監視カメラの映像を元に画像処理を行い、車両ドア付近にある物体が近くを通過しているだけなのか或いは車両ドアに挟み込まれているのか区別する。（２）監視カメラの映像は、電車がホームに停車しドアが開いた時点などの所定のタイミングで、乗務室内に取り付けられている監視用モニタに対し割り付ける。（３）車両ドアが閉められた時点で画像処理による挟み込み検知を行い、挟み込みが発生した場合監視モニタの該当映像を、注目を引きやすい表示態様、例えば赤色枠で囲んで表示し、更にアラーム音を鳴動させるなどの処理を行う。
【００１３】
これらによって、次の効果が得られる。（１）車両ドアの挟みこみ検知において、物理的なセンサの代わり或いは併用で、監視映像の画像処理判定を用いることで、監視システムの可用性、信頼性が向上する。（２）車両ドアの監視映像を監視モニタに自動で割り付けることで、乗務員自身が車両ドアの映像を見て状況を確認することができ、監視システムの利便性が向上する。（３）車両ドアの監視映像を監視モニタに割り付けている際に、挟み込みを検知した場合、監視モニタの該当映像を注目を引きやすい表示態様で表示され、アラーム音を鳴動させることで、乗務員の注意を促し作業効率、監視の容易性、信頼性が向上する。
【００１４】
図１は、１編成の列車に搭載した鉄道向け監視カメラシステム１００であり、列車内から乗降口（車両ドア）付近を監視する監視カメラシステム１００の配置例の概要を模式的に示す。図１（ａ）は第１〜第４車両１〜４の４両編成の列車と各種の搭載機器の配置概要を示している。図１（ｂ）は、一つの車両４０に着目し、第１〜第４監視カメラ１１とその撮影は対象である第１〜第４車両ドア７１〜７４の関係を示している。
【００１５】
また、図２は、監視カメラシステム１００の構成の一実施例を説明するためのブロック図である。なお、図１は監視カメラシステム１００の列車への搭載及び配置を中心として、図２は監視カメラシステム１００を構成する各機器の接続を中心として説明するための図である。図２の破線の枠は、図１（ａ）の第１〜第４車両１〜４を示しており、監視カメラシステム１００を構成する全ての機器は、例えば有線接続であればネットワークケーブルで接続されている。
【００１６】
図１（ａ）に示すように、列車は、先頭の第１車両１、中間の第２車両２及び第３車両３、最後尾の第４車両４の４両編成であって、鉄道向けの監視カメラシステム１００が列車内の車両に搭載されている。このとき列車の進行方向は、第１車両１を先頭車両として進む方向として説明する。
【００１７】
各車両（第１〜第４車両１〜４）は、片側４ドア（両側で８ドア）の車両である。各車両の一方の側（例えば進行方向の左側）において、進行方向側から第１車両ドア７１、第２車両ドア７２、第３車両ドア７３及び第４車両ドア７４を備える。他方の側（例えば進行方向の右側）にも、進行方向側から第１車両ドア７１、第２車両ドア７２、第３車両ドア７３及び第４車両ドア７４を備える。
【００１８】
乗客は、駅のホーム９９に合わせて開く左側若しくは右側のどちらか片側の扉から、または両側の扉から、車両への乗り降りを行う。
【００１９】
第１〜第４車両ドア７１〜７４のそれぞれに対して、それぞれ第１〜第４監視カメラ１１〜１４が、乗降監視のために取り付けられている。第１〜第４監視カメラ１１〜１４は、例えば、ＩＰカメラであって、車両外側（側面）の所定の位置に取り付けられている。また、図１では、車両の左右にある乗降用の扉の、左側の扉とその左側の扉に関わる監視カメラだけを図示し、反対側（右側）の扉及びその扉に関わる監視カメラを図示していない。監視カメラ以外の他の構成は、左右の扉に関係なく共通である。
【００２０】
先頭の第１車両１には、監視用のモニタＰＣ１４０が設けられており、また、最後尾の第４車両４にも、監視用のモニタＰＣ１４２が設けられている。モニタＰＣ１４０、１４２は、それぞれ複数で構成されてもよい。
【００２１】
運転手は、全ての第１〜第４監視カメラ１１〜１４が撮像した映像を、モニタＰＣ１４０、１４２によって確認することができる。表示される映像は、例えば、１つの車両の監視カメラについて複数に分割された表示領域で示し、順次別の車両の監視カメラの映像に切り替わるように表示されてもよい。
【００２２】
図２は、図１と同様に、車両の左右にある乗降用の扉の、左側の扉とその片側の扉に関わる監視カメラだけを図示し、反対側の扉及びその扉に関わる監視カメラを図示していない。その他の構成は、左右の扉に関係なく共通である。
【００２３】
モニタリングシステム１００は、図１または図２に示すように、第１〜第４車両１〜４を連結した列車に設置される。監視カメラシステム１００は、第１〜第４監視カメラ１１〜１４、モニタＰＣ１４０、１４２、Ｌ２−ＳＷ（レイヤ２スイッチ）１４４〜１４７、サーバ５０（制御装置）、録画装置５１、上位サーバ５２、警報器５３、非常停止装置５５を備える。なお、図示しない電源供給ケーブルが、各機器に第１〜第４車両１〜４の電源供給部（図示しない）から電源を供給する。
【００２４】
先頭の第１車両１には、サーバ５０と録画装置５１、上位サーバ５２、警報器５３、非常停止装置５５、第１〜第４監視カメラ１１〜１４（１１ａ〜１４ａ及び１１ｂ〜１４ｂ）、モニタＰＣ１４０、１４２１、及びＬ２−ＳＷ１４４が設置されている。
【００２５】
サーバ５０、録画装置５１、モニタＰＣ１４０、１４２、警報器５３、非常停止装置５５及び第１〜第４監視カメラ１１〜１４は、それぞれＬ２−ＳＷ１４４に接続され、上位サーバ５２は、サーバ５０に接続されている。また、Ｌ２−ＳＷ１４４は、後の第２車両２に設置されたＬ２−ＳＷ１４５と接続されている。
【００２６】
最後尾の第４車両４には、第１〜第４監視カメラ１１〜１４（１１ａ〜１４ａ及び１１ｂ〜１４ｂ）、モニタＰＣ１４２、警報器５３、非常停止装置５５及びＬ２−ＳＷ１４７が設置されている。第１〜第４監視カメラ１１〜１４、警報器５３、非常停止装置５５及びモニタＰＣ１４２は、それぞれＬ２−ＳＷ１４７に接続されている。また、Ｌ２−ＳＷ１４７は、前の第３車両３に設置されたＬ２−ＳＷ１４６と接続されている。
【００２７】
なお、上位サーバ５２は、例えば、列車の運行を管理する装置であり、例えば、ＴＭＳ（Train Management System）である。上位サーバ５２は、列車運行中には、列車の運行情報をサーバ５０に所定の周期で出力している。列車の運行情報は、少なくとも、列車の速度情報、乗降扉開閉情報（乗降用の扉が開いているか、閉じているかの情報）、次に停車する駅若しくは現在停車中の駅のホームにおける乗降口の情報（例えば、左側の扉が乗降口であるか、右側の扉が乗降口であるかの情報）、車両数である。
【００２８】
中間の第２車両２には、第１〜第４監視カメラ１１〜１４（１１ａ〜１４ａ及び１１ｂ〜１４ｂ）、及びＬ２−ＳＷ１４５が設置されている。Ｌ２−ＳＷ１４５は、前の第１車両１に設置されたＬ２−ＳＷ１４４、及び後の第３車両３に設置されたＬ２−ＳＷ１４６とそれぞれネットワークケーブルで接続されている。また第３車両３は、第２車両２と同様に、第１〜第４監視カメラ１１〜１４（１１ａ〜１４ａ及び１１ｂ〜１４ｂ）、及びＬ２−ＳＷ１４６が設置されており、Ｌ２−ＳＷ１４６は、前の第２車両２に設置されたＬ２−ＳＷ１４５、及び後の第４車両４に設置されたＬ２−ＳＷ１４７とそれぞれネットワークケーブルで接続されている。
【００２９】
このように、先頭の第１車両１と中間の第２車両２、中間の第２車両２と第３車両３同士、中間の第３車両３と最後尾の第４車両４は、それぞれ隣り合う車両に搭載されたＬ２−ＳＷ同士をネットワークケーブル等で接続することで、列車内で１つのネットワークを構築している。
【００３０】
図１、図２の監視カメラシステム１００では、先頭の第１車両１に運転手（乗務員）が搭乗し、列車の運行（運転や、乗降口の開閉等）の操作を１人で行うことができる。第１〜第４監視カメラ１１の映像から列車を停止すべきと判断した場合に、運転手等は、非常停止装置５５を操作することで列車を緊急停止させることができる。また、警報器５３からは緊急時である旨のアラーム等が出力される。
【００３１】
全ての第１〜第４監視カメラ１１〜１４（１１ａ〜１４ａ及び１１ｂ〜１４ｂ）は、予め定められた視野内をそれぞれ所定の撮像フレームレートで撮像する。そして、第１〜第４監視カメラ１１〜１４は、撮像した映像（ライブ映像）をH.264/MPEG4/JPEG等の形式で圧縮し、Ｌ２−ＳＷとネットワークケーブルを経由して、録画装置５１及びモニタＰＣ１４０、１４２に送信する。
【００３２】
録画装置５１は、入力された映像を、撮像した監視カメラ及び撮像時刻と関連付けて常時記録している。モニタＰＣ１４０、１４２は、全ての第１〜第４監視カメラ１１〜１４のライブ映像及び録画映像をサーバ５０の指示により、伸張及び切り出し等の映像処理を施して画面に表示する。
【００３３】
なお、録画映像は、主に事故や犯罪の発生等の有事の際に、解析資料や証拠映像として使用される。また、サーバ５０やモニタＰＣ１４０、１４２や第１〜第４監視カメラ１１〜１４（１１ａ〜１４ａ及び１１ｂ〜１４ｂ）や録画装置５１の主な設定は、操作者が、予めシステム運用開始時に設定する。
【００３４】
また、第１〜第４監視カメラ１１〜１４（１１ａ〜１４ａ及び１１ｂ〜１４ｂ）は、録画装置５１及びモニタＰＣ１４０、１４２に、所定の送信フレームレートで映像を送信する。または、第１〜第４監視カメラ１１〜１４（１１ａ〜１４ａ及び１１ｂ〜１４ｂ）は、モニタＰＣ１４０、１４２からＬ２−ＳＷを介して送信される送信要求に応じて、録画装置５１及びモニタＰＣ１４０、１４２に所定の送信フレームレートで映像を送信する。
【００３５】
なお、第１〜第４監視カメラ１１〜１４（１１ａ〜１４ａ及び１１ｂ〜１４ｂ）の映像を、監視カメラが自動的に所定のフレームレートで送信するか、モニタＰＣ１４０、１４２からの送信要求に応じて送信するかは、予め操作者が、予めシステム運用開始時に設定することが可能であるし、また、運転手がサーバ５０を操作して切り替えることが可能である。
【００３６】
また、サーバ５０は、第１〜第４監視カメラ１１〜１４（１１ａ〜１４ａ及び１１ｂ〜１４ｂ）の画角や撮影方向を制御することができる。また、サーバ５０は、取得した映像に対して画像処理を施し、監視対象領域に警告事由が発生したか否かを判断する。ここでは、警告事由とは、例えば、第１〜第４車両ドア７１〜７４に何らかの物体（人の腕やカバン、傘、ベビーカーの車輪等）が挟まった状態を想定する。なお、警告事由の判定は、画像処理の他に、第１〜第４車両ドア７１〜７４に設けられた物理センサ（赤外線センサや圧力センサ）の検知結果が用いられてもよい。それらを併用することで、検知確度が高まる。
【００３７】
ここで、図１（ｂ）を参照して、第１〜第４監視カメラ１１〜１４による運用形態について説明する。駅のホーム９９に停車中の１つの車両４０（４ドア構成）を表している。第１監視カメラ１１は、第１車両ドア７１の前方側上方に取り付けられ、後方下側を撮像方向に設定されている。第２監視カメラ１２は、第２車両ドア７２の後方側上方に取り付けられ、前方下側を撮像方向に設定されている。第３監視カメラ１３は、第３車両ドア７３の前方側上方に取り付けられ、後方下側を撮像方向に設定されている。第４監視カメラ１４は、第４車両ドア７４の後方側上方に取り付けられ、前方下側を撮像方向に設定されている。
【００３８】
第１〜第４監視カメラ１１〜１４はそれぞれ第１〜第４車両ドア７１〜７４を監視しており、第１車両ドア７１と第２車両ドア７２、また、第３車両ドア７３と第４車両ドア７４とはそれぞれ対となる組合せであることとする。
【００３９】
図３に第１〜第４車両ドア７１〜７４の映像をモニタ８０の４分割表示に割り付けた例を示す。図３（ａ）は映像の向き（監視方向）を調整しない状態で表示した例であり、図３（ｂ）は映像の向きを全てのカメラで統一して表示した例である。モニタ８０への映像割り付けは、車両ドア（第１〜第４車両ドア７１〜７４）が開いてから全ての車両ドアについて挟み込み無く正常に閉じるまでの間行われる。
【００４０】
なお、図示の形態のモニタ８０では、一つのモニタ８０で１車両分すなわち４映像が最大となるが、監視モニタ画面にページ送り機能を加えて、複数車両分の映像を表示するようにしてもよい。
【００４１】
また、図４に示すように、モニタ８０において、最低限必要な映像範囲を切り出して、一つの監視モニタ画面に２車両分の８映像以上の映像を表示してもよい。例えば、上段８５は、第１車両１の監視映像で、下段８６は第２車両２の監視映像である。
【００４２】
つづいて、車両ドア（第１〜第４車両ドア７１〜７４）を閉じた時の挟み込み判定処理について説明する。乗客の乗り降りが完了したのち乗務員９８は、車両ドア（第１〜第４車両ドア７１〜７４）を閉じる。この時、車両ドア（第１〜第４車両ドア７１〜７４）を閉める指示を、サーバ５０でも受け取り、定期周期での車両ドア（第１〜第４車両ドア７１〜７４）の監視映像の静止画取得を開始する。
【００４３】
なお、静止画の取得は、動画である映像からそれを構成する画像フレームを所定のタイミング（例えば、０．５秒ごと）で抽出することで行ってもよい。また、静止画は取得開始してから一定時間の間だけ取得する。
【００４４】
次に、挟み込み判定処理を具体的に説明する。挟み込み判定処理では、監視対象エリアの差分画像をもとに判定を行う。図５は、挟み込み判定処理時の差分取得手順を示す図である。
【００４５】
ここで、第１監視カメラ１１が監視する第１車両ドア７１に、人の手が挟まっているかどうか判定する場合を例示する、他の監視カメラ（第２〜第４監視カメラ１２〜１４）についても同様の処理がなされる。サーバ５０には、予め何も挟み込んでいない正常に閉じた第１車両ドア７１を映す第１監視カメラ１１の静止画（以下、「基準画像９１」という）が記憶されている。また、挟み込み判定処理中に撮影した画像を「観測画像９２」という。
【００４６】
挟み込み判定処理を行うために、第１車両ドア７１が閉じてから最初に取得した第１車両ドア７１の観測画像９２と、基準画像９１を重ねて差分（差分画像９４）を取得し、差分が無ければ「挟み込み無し」と判断する。差分を取得する画像処理については、一般的な技術を用いることができる。
【００４７】
図６は挟み込み判定処理時の差分の動き検出の観測手順を示す図である。この時、図５の手順で差分が取得できた場合、次は正常な静止画と定期的に取得している第１車両ドア７１の静止画を順に比較し、前述で差分として捉えた物体の動きを観測する。
【００４８】
まず、基準画像９１と定期的に取得している第１車両ドア７１の観測画像９２を順に比較し、それぞれ取得した差分（差分画像９４）の外枠を四角形Ｆで囲み、中心座標Ｃを求める。なお、最初の差分画像９４の中心座標を「Ｃ１」とし、順次「Ｃ２」、「Ｃ３」・・・、「Ｃｎ」とし、区別しない場合は「Ｃ」と表記する。
【００４９】
次に最初に求めた差分画像９４の中心座標Ｃ１に対する、以降の中心座標Ｃ２、Ｃ３、・・・「Ｃｎ」の差分を求め、その差分が一定の閾値を上回った場合、差分として捉えた物体は車両ドアに挟みこまれているのではなく、移動している物体（例えば、歩行者等）であるとし、「挟み込み無し」と判断する。
【００５０】
中心座標Ｃの差分が一定の閾値を下回った場合、すなわち中心座標Ｃの動きが小さい場合、差分として捉えた物体はドア付近に滞留している物体であり、第１車両ドア７１に挟み込まれている、すなわち「挟み込み有り」と判断する。
【００５１】
次に、挟み込み確定時の処理を説明する。図７は、「挟み込み有り」と判断した場合の監視映像の表示例である。通常、モニタ８０には、駅停車後に車両ドア（第１〜第４車両ドア７１〜７４）を開けた時点より車両ドア（第１〜第４車両ドア７１〜７４）の監視映像が割り付けられ表示されている。
【００５２】
ただし、前述で挟み込みが発生していると判断した監視カメラの映像について、図７のように赤枠Ｆ１００等で囲んだり明るく表示させたり枠を点滅表示させるなど、注意を引きやすい強調した表示態様で表示する。注意の引きやすさを時間の経過と共に強めても良い。
【００５３】
また、サーバ５０は、挟み込みが１件以上発生した場合、警報器５３でアラーム音を鳴動する。このとき、表示態様と同じように、挟み込みを認識時点から時間が経つにしたがって、アラーム音を大きくする等の処理を行ってもよい。
【００５４】
つづいて、挟み込み判定解除処理を説明する。挟み込みが解除されたかどうかの判定は、モニタ８０の映像を確認する乗務員９８の判断とする。図８は、挟み込み判定解除操作を可能に表示するモニタ８０の表示例を示す。表示領域の下部に、タッチ操作（又は外部入力インタフェイス等からの操作）する十字入力ボタンＢ１２、や解除ボタンＢ１１等を用意する。乗務員９８は、挟み込みが解消された映像を十字入力ボタンＢ１２で選択して、解除ボタンＢ１１を押下することで、挟み込み判定状態を解除する。
【００５５】
選択中の映像に対しては青枠Ｆ１０１を描画し、解除された映像については赤枠Ｆ１００の描画を削除する。全ての車両ドアの監視映像が挟み込み無しの状態となった場合、電車の走行開始指示（列車発車許可）を待ち、走行開始後監視モニタの映像表示を全て終了する。また、挟み込みが０件になった場合アラーム音の鳴動を停止する。
【００５６】
図９は、駅停車後、車両ドア開による監視開始までの処理について、乗務員９８、サーバ５０、モニタ８０及び監視カメラ（第１〜第４監視カメラ１１〜１４）に着目したシーケンス図である。図１０は、車両ドアを閉めた際のシーケンス図である。図１１は、挟み込み判定解除処理のシーケンス図である。図１２は、監視カメラシステム１００による駅停車から発車までの概略を示すフローチャートである。図９のシーケンスは図１２のフローチャートのＳ１１〜Ｓ１３に対応し、図１０のシーケンスは図１２のフローチャートのＳ１４〜Ｓ２２に対応し、図１１のシーケンスは図１２のフローチャートのＳ２２、Ｓ２３に対応する。
【００５７】
サーバ５０は、列車が駅に停車しドアが開いたか否かを監視し（Ｓ１１）、ドアが開いていない場合（Ｓ１１のＮ）は映像表示を停止状態にして（Ｓ１２）、停車監視を継続する（Ｓ１１）。列車が駅に停車し車両ドア（第１〜第４車両ドア７１〜７４）が開いた旨を検知すると（Ｓ１１のＹ）、サーバ５０は、第１〜第４監視カメラ１１〜１４の監視映像を乗務員室等に設定されているモニタ８０へ順次割り付け表示処理を開始する（Ｓ１３）。
【００５８】
つぎに、乗務員９８等の操作により車両ドア（第１〜第４車両ドア７１〜７４）が閉まると（Ｓ１４）、サーバ５０は挟み込み判定（Ｓ１５〜）を行う。
【００５９】
まずサーバ５０は、監視カメラ（第１〜第４監視カメラ１１〜１４）のＩＤを示す変数Ｎを初期化（Ｎ＝０）する（Ｓ１５）。つづいて、変数Ｎをインクリメントし（Ｓ１６）、カメラＮ（Ｎ＝１〜４の場合に第１監視カメラ１１〜第４監視カメラ１４のそれぞれに対応する）の映像をもとに、図６で説明した挟み込み判定処理を行う（Ｓ１７）。
【００６０】
サーバ５０は、挟み込みありの場合（Ｓ１８のＹ）、その映像を表示する際のフレーム（枠）を赤に設定し（Ｓ１９）、挟み込み無しの場合（Ｓ１８Ｎ）、フレームを無しに設定する（Ｓ２０）。
【００６１】
つづいて、サーバ５０は、変数Ｎが所定数（Ｊ）を超えているかをチェックすることで全ての監視カメラ（第１〜第４監視カメラ１１〜１４）について挟み込み判定を行ったか判断する（Ｓ２１）。挟み込み判定が残っていれば（Ｓ２１のＮ）、Ｓ１６の処理に戻る。
【００６２】
ここで図１０のシーケンスを参照して、挟み込み判定のより具体的な手順を説明する。図１０のシーケンスに示すように、取得時間分取得が完了すると（Ｓ１００）、次に予めサーバ５０内で所有している、各監視カメラの車両ドアに何も挟み込んでいない正常な状態の静止画（基準画像９１）と、上記の取得時間で最初に取得した静止画（観測画像９２）との差分比較を行う（Ｓ１０１）。
【００６３】
この時差分が見られた監視カメラについてのみ、差分が有ることを示すフラグを立てる（Ｓ１０２）。次に差分が見られた監視カメラの監視映像について、挟み込み判定処理を行う（Ｓ１０３）。
【００６４】
差分が見られる場合、中心座標Ｃの差分判定処理を行う（Ｓ１０３）。すなわち、今度は取得した静止画（観測画像９２）と基準画像９１との差分を取得する。次にその差分となる物体の四辺を覆う四角形Ｆを描画し、その中心点を求めて中心座標Ｃとする。
【００６５】
サーバ５０は、この中心座標Ｃを予め閾値として定める値と比較し、閾値を下回った場合、Ｓ１０４の処理として、挟み込みが発生していると判断し、モニタ８０へ該当映像の赤枠描画指示、該当映像を映す監視カメラの挟み込み発生フラグ立て、全体の挟み込み発生件数のインクリメントを実施する。
【００６６】
また、挟み込み発生時はアラーム鳴動処理を行う（Ｓ１０５）。挟み込み発生件数のインクリメントの際に、アラーム鳴動フラグが立っていない場合、アラームの鳴動開始指示とアラーム鳴動フラグのインクリメントも実施する。
【００６７】
なお、静止画の差分の閾値チェックは、静止画枚数分実施するのではなく、閾値を超えた場合はその時点で次の監視カメラの静止画の閾値チェックに移行する。上記を、全ての監視カメラの静止画について閾値チェックが完了するまで実施する。
【００６８】
図１２の説明に戻る。
全ての挟み込み判定が終了すると（Ｓ２１のＹ）、挟み込みの発生件数が１件以上あるか否かを判断する（Ｓ２２）。
【００６９】
挟み込みの発生件数が１件以上あれば（Ｓ２２のＹ）、サーバ５０は、例えば図８のモニタ８０の表示例に示したような解除ボタンＢ１１の操作によって挟み込み判定が解除されたかどうか判断する（Ｓ２３）。解除ボタンＢ１１の操作によって挟み込み判定が解除された場合、サーバ５０は、挟み込み発生件数が１件以上あるか否かを再度判定する（Ｓ２２）。
【００７０】
サーバ５０は、挟み込み件数が０になったと判断すると、すなわち、挟み込み状態が解消されたと判断すると（Ｓ２２のＮ）、列車発車許可の状態にする（Ｓ２４）。この後、乗務員９８の操作によって、列車は走行を開始するが、モニタ８０への第１〜第４監視カメラ１１〜１４の映像の表示は、所定条件の間、例えば、列車速度が所定以上（例えば３ｋｍ／ｈ以上）となるまで継続する。また、列車走行開始後、挟み込み判定処理を継続した場合に、挟み込みが検知された場合、サーバ５０は、非常停止装置５５に列車停止を指示してもよい。
【００７１】
ここで、図１１を参照して挟み込み判定解除処理を具体的な手順を説明する。図８等で説明したように、挟み込み判定の解除は乗務員９８の確認をもって行う。
【００７２】
乗務員９８は、サーバ５０は車両ドアが閉められたという通知を受けると、まず挟み込み判定処理の完了を待つ（Ｓ２０１）。完了後、挟み込み発生件数が１件も無い場合はそのまま乗務員の走行指示を待ち、走行を開始したらモニタ８０の映像表示を全て終了する（Ｓ２０２）。
【００７３】
挟み込み発生件数が１件以上有る場合、乗務員９８の確認作業後終了を待つ（Ｓ２０３）。乗務員は挟み込みが発生している全ての車両ドアについて確認作業を行い、問題無いと判断した場合、映像を選択し解除ボタンを押下する（Ｓ２０４）。
【００７４】
解除ボタンが押下されたら、サーバ５０はモニタ８０へ該当映像の赤枠描画削除指示、該当映像を映す監視カメラの挟み込み発生フラグ削除、挟み込み発生件数のデクリメントを実施する（Ｓ２０５）。挟み込み発生件数がまだ１件以上存在する場合は、挟み込み発生件数が０になるまで上記処理を繰り返す。
【００７５】
また、挟み込み発生件数のデクリメントの際に、挟み込み発生件数が０になった場合、アラームの鳴動停止指示、アラーム鳴動フラグの削除を実施し（Ｓ２０６）、乗務員の走行指示を待つ（Ｓ２０７）。走行を開始したらモニタ８０の映像表示を全て終了する（Ｓ２０８）。
【００７６】
以上、本実施形態によると、次の効果が得られる。（１）車両ドア（第１〜第４車両ドア７１〜７４）の挟みこみ検知において、物理的なセンサの代わり或いは併用で、監視映像の画像処理判定を用いることで、監視カメラシステム１００の可用性、信頼性を向上させることができる。（２）車両ドア（第１〜第４車両ドア７１〜７４）の監視映像をモニタ８０に自動で割り付けることで、乗務員９８自身が車両ドア（第１〜第４車両ドア７１〜７４）の映像を見て状況を確認することができ、監視カメラシステム１００の利便性が向上する。（３）車両ドア（第１〜第４車両ドア７１〜７４）の監視映像をモニタ８０に割り付けている際に、挟み込みを検知した場合、モニタ８０の該当映像を注目を引きやすい表示態様で表示し警報器５３でアラーム音を鳴動させることで、乗務員９８の注意を促し作業効率、監視の容易性、信頼性を向上させることができる。
【００７７】
以上、本発明を実施形態をもとに説明した。この実施形態は例示であり、それらの各構成要素の組み合わせにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。
【００７８】
例えば、上述の実施形態の処理に合わせて次の機能が追加・変更されてもよい。（１）監視カメラシステム１００に振動計測装置が取り付けられる場合であって、何かしらを挟み込んだまま列車が走行開始した場合、通常の走行開始時より振動が過剰に発生すると想定できる。その振動情報を用いた挟み込み検知と併用することで、検知精度が向上する。（２）監視カメラシステム１００に騒音計測装置が取り付けられる場合、何かしらを挟み込んだまま列車が走行開始した場合、通常の走行開始時より騒音が過剰に発生すると想定できる。その騒音情報を用いた挟み込み検知と併用することで、検知精度が向上する。（３）第１〜第４車両ドア７１〜７４の開状態から、乗務員９８の状況確認作業→確認後削除ボタンで赤枠削除→挟み込み件数が０になるまで映像表示を続けているが、「削除ボタンを押下することで、選択した映像そのものの表示を終了する。」または「全ての映像表示が終了したら、乗務員による走行開始が可能となる。」といった処理としてもよい。選択した映像を削除し表示終了したら、残っている映像を詰めて表示することで操作性が向上する。
【符号の説明】
【００７９】
１〜４  第１〜第４車両１１〜１４、１１ａ〜１４ａ、１１ｂ〜１４ｂ  第１〜第４監視カメラ４０  車両５０  サーバ５１  録画装置５２  上位サーバ５３  警報器５５  非常停止装置７１〜７４  第１〜第４車両ドア８０  モニタ９８  乗務員９９  ホーム１００  監視カメラシステム１４０、１４２  モニタＰＣ１４４〜１４７  Ｌ２−ＳＷ
【図１】
2018180311.tif 000003
【図２】
2018180311.tif 000004
【図３】
2018180311.tif 000005
【図４】
2018180311.tif 000006
【図５】
2018180311.tif 000007
【図６】
2018180311.tif 000008
【図７】
2018180311.tif 000009
【図８】
2018180311.tif 000010
【図９】
2018180311.tif 000011
【図１０】
2018180311.tif 000012
【図１１】
2018180311.tif 000013
【図１２】
2018180311.tif 000014
【手続補正書】
【提出日】令和1年7月24日(2019.7.24)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
列車のドアを撮影する監視カメラと、前記監視カメラの映像をもとに前記ドアの挟み込み検知を行う制御装置と、前記監視カメラの映像を表示するモニタと、を備える監視システムであって、 
前記制御装置は、前記ドアが開いた状態から閉じた状態になったときに、前記監視カメラが撮影した基準画像と、前記基準画像を撮影してから所定時間が経過後、前記監視カメラが撮影した観測画像と、の差分画像から前記ドアに挟み込みが発生していると判断し、
前記モニタは、挟み込みが発生していると判断したドアを撮影する前記監視カメラの映像を強調して表示することを特徴とする監視システム。 
【請求項２】
前記監視カメラは、前記基準画像を撮影後、複数の前記観測画像を撮影し、 
前記制御装置は、前記基準画像と、各観測画像と、の差分画像を取得し、複数の前記差分画像の中心座標から前記中心座標の動きを求め、前記中心座標が動いていないと判断した場合に、前記ドアに挟み込みが発生していると判断することを特徴とする請求項１に記載の監視システム。 
【請求項３】
列車のドアを撮影する監視カメラの映像をもとに前記ドアの挟み込み検知を行う監視方法であって、 
前記ドアが開いた状態から閉じた状態になったときに、前記監視カメラが撮影した基準画像と、前記基準画像を撮影してから所定時間が経過後、前記監視カメラが撮影した観測画像と、の差分を算出する差分算出工程と、 
前記差分の中心座標の動きを求め、前記中心座標が動いていないと判断した場合に、前記ドアに挟み込みが発生していると判断する挟み込み判定工程とを備えることを特徴とする監視方法。 
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
本発明は、列車のドアを撮影する監視カメラと、前記監視カメラの映像をもとに前記ドアの挟み込み検知を行う制御装置と、前記監視カメラの映像を表示するモニタと、を備える監視システムであって、前記制御装置は、前記ドアが開いた状態から閉じた状態になったときに、前記監視カメラが撮影した基準画像と、前記基準画像を撮影してから所定時間が経過後、前記監視カメラが撮影した観測画像と、の差分画像から前記ドアに挟み込みが発生していると判断し、前記モニタは、挟み込みが発生していると判断したドアを撮影する前記監視カメラの映像を強調して表示する。 
前記監視カメラは、前記基準画像を撮影後、複数の前記観測画像を撮影し、前記制御装置は、前記基準画像と、各観測画像と、の差分画像を取得し、複数の前記差分画像の中心座標から前記中心座標の動きを求め、前記中心座標が動いていないと判断した場合に、前記ドアに挟み込みが発生していると判断してもよい。 
本発明は、列車のドアを撮影する監視カメラの映像をもとに前記ドアの挟み込み検知を行う監視方法であって、前記ドアが開いた状態から閉じた状態になったときに、前記監視カメラが撮影した基準画像と、前記基準画像を撮影してから所定時間が経過後、前記監視カメラが撮影した観測画像と、の差分を算出する差分算出工程と、前記差分の中心座標の動きを求め、前記中心座標が動いていないと判断した場合に、前記ドアに挟み込みが発生していると判断する挟み込み判定工程とを備える。
【国際調査報告】
2018180311.tif 000015
2018180311.tif 000016