(57)【要約】  【課題】各監視カメラからの画像を直感的に確認でき、監視地区の状況を容易に把握可能な監視画像表示装置を提供する。  【解決手段】カメラマーク部３７のカメラマーク位置決定部３８は、各監視カメラの位置情報に基づいて地図画像上での各監視カメラのカメラマークの位置を決定する。画像位置決定部４１は、各監視カメラの撮影方向情報に基づいて、当該カメラマークの位置に対して撮影方向側に監視画像の画像位置を決定する。合成部４７は、複数の監視カメラの各々について決定されたカメラマークの位置及び画像位置に応じて、地図画像に複数の監視カメラのカメラマーク及び監視画像を合成する。【選択図】  図１
2010268186.tif 000002
【特許請求の範囲】
【請求項１】
複数の監視カメラで撮像された監視画像を表示する監視画像表示装置であって、
前記複数の監視カメラにより監視される監視地区の地図画像を生成する地図生成部と、
各監視カメラの位置情報に基づいて前記地図画像上での前記各監視カメラのカメラマークの位置を決定するカメラマーク部と、
前記各監視カメラの撮影方向情報に基づいて、当該カメラマークの位置に対して撮影方向側に前記監視画像の画像位置を決定する画像位置決定部と、
決定された前記カメラマークの位置及び前記画像位置に応じて、前記地図画像に前記複数の監視カメラの当該カメラマーク及び前記監視画像を合成する合成部と、
を有することを特徴とする監視画像表示装置。
【請求項２】
カメラマーク部は、撮影方向情報に基づいて、監視カメラの撮影方向を表すカメラマークを生成することを特徴とする請求項１に記載の監視画像表示装置。
【請求項３】
監視カメラに関する異常検出を表すアラーム信号に基づいて、前記監視カメラの監視画像を拡大するか否かを判断する画像拡大判断部と、前記画像拡大判断部の判断結果に応じて前記監視画像を拡大する画像生成部とを有することを特徴とする請求項１に記載の監視画像表示装置。
【請求項４】
監視カメラに関する異常検出を表すアラーム信号に基づいて、前記監視カメラの監視画像をサブモニタに表示するか否かを判断するサブモニタ表示判断部を有することを特徴とする請求項１に記載の監視画像表示装置。
【請求項５】
複数の監視画像が地図画像上で重複するときに、重複した前記複数の監視画像を撮像した各監視カメラに関する異常検出を表すアラーム信号に基づいて前記複数の監視画像の画像位置を調整する重なり調整部を有することを特徴とする請求項１に記載の監視画像表示装置。
【請求項６】
重なり調整部は、アラーム信号に基づいて、重複した複数の監視画像の多くても２つを表示対象に残すことを特徴とする請求項５に記載の監視画像表示装置。
【請求項７】
アラーム信号は、監視画像の画像処理により検出される画像異常検出アラーム信号、監視カメラのアラーム操作部が手動操作されたことを示す手動アラーム信号、及び、前記監視カメラが当該位置情報に基づいて所定の重要場所を撮影することを検出する重要場所検出アラーム信号を含むことを特徴とする請求項３乃至６のいずれかに記載の監視画像表示装置。
【請求項８】
複数の監視カメラと、前記複数のカメラで撮像された監視画像を表示する監視画像表示装置とを有する監視画像表示システムであって、
前記複数の監視カメラは、
撮像部と、
当該監視カメラの位置を検出する位置検出部と、
撮影方向を検出する方向検出部とを有し、
前記監視画像表示装置は、
前記複数の監視カメラにより監視される監視地区の地図画像を生成する地図生成部と、
前記各監視カメラの位置情報に基づいて前記地図画像上での前記各監視カメラのカメラマークの位置を決定するカメラマーク部と、
前記各監視カメラの撮影方向情報に基づいて、前記カメラマークの位置に対して撮影方向側に前記監視画像の画像位置を決定する画像位置決定部と、
決定された前記カメラマークの位置及び前記画像位置に応じて、前記地図画像に前記複数の監視カメラの当該カメラマーク及び前記監視画像を合成する合成部と、
を有することを特徴とする監視画像表示システム。
【請求項９】
複数の監視カメラで撮像された監視画像を表示するための監視画像処理方法であって、
前記複数の監視カメラにより監視される監視地区の地図画像を生成し、
前記各監視カメラの位置情報に基づいて前記地図画像上での前記各監視カメラのカメラマークの位置を決定し、
前記各監視カメラの撮影方向情報に基づいて、当該カメラマークの位置に対して撮影方向側に前記監視画像の画像位置を決定し、
決定された前記カメラマークの位置及び前記画像位置に応じて、前記地図画像に前記複数の監視カメラの当該カメラマーク及び前記監視画像を合成することを特徴とする監視画像処理方法。
【請求項１０】
複数の監視カメラで撮像された監視画像を表示する監視画像表示方法であって、
前記複数の監視カメラにより監視される監視地区の地図画像上に、
前記各監視カメラの位置を示すカメラマーク及び、前記カメラマークに対して撮影方向側に前記監視画像を表示することを特徴とする監視画像表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数の監視カメラで撮像された監視画像を表示する監視画像表示装置に関する。
【背景技術】
【０００２】
従来、各種の施設などの監視地区を監視するために、複数の監視カメラが監視地区に設けられ、それら複数の監視カメラの画像を見るために監視画像表示装置が用いられる。監視画像表示装置は、例えば、監視地区または外部のモニタリングセンタに配置される。
【０００３】
このような監視画像表示装置については、複数の監視カメラの画像を表示するための代表的手法として、下記の３つの手法が提案されている。
【０００４】
第１の手法では、モニタの画面をスクロール又は切り換えることによって複数のカメラの画像が表示される（例えば、特許文献１）。
【０００５】
第２の手法では、モニタ画面が複数の領域に分割されて、それら複数の領域に複数のカメラの画像がそれぞれ表示される（例えば、特許文献２）。
【０００６】
第３の手法では、モニタに監視地区の地図が表示され、地図上に監視カメラの設置場所が示される。地図の外側には複数のウインドウが表示され、それら複数のウインドウに複数のカメラの画像がそれぞれ表示される（例えば、特許文献３）。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開平２−２８０４９１号公報
【特許文献２】特開２００７−５３５６８号公報
【特許文献３】特許第３９４６５９３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかしながら、上記第１の手法においては、１度に１つの監視カメラの画像しか見ることができない。すなわち、同時にすべての監視カメラの画面を確認できず、そのため、異常を見逃す可能性があるという問題がある。
【０００９】
これに対して、第２の手法では、モニタを複数の領域に分割することにより、複数の監視カメラの画像を同時に表示することができる。しかしながら、モニタを見ても、各々のカメラがどの場所を映したかが分からず、画像と撮影場所の関係を把握しにくいという問題がある。
【００１０】
また、第３の手法では、モニタにカメラ画像だけでなく、監視地区の地図が表示され、地図上にカメラ位置が示される。しかしながら、カメラ画像のウインドウは、地図の外側に設置されており、カメラ画像と地図は別々である。そのため、画像と撮影場所の関係を把握しにくいという問題は依然として残る。さらに、単にカメラ位置が地図上で示されても、ユーザは各カメラがどの場所でどの方向をどのように映したかを直感的に確認しにくく、また、監視地区全体の状況も把握しにくいという問題がある。
【００１１】
このような問題は、モバイル監視カメラを利用する場合に特に顕著になる。モバイル監視カメラは、小型の監視カメラであり、人やその他の移動体に取付可能である。例えば、モバイル監視カメラは、警備員のヘルメットに装着可能である。モバイル監視カメラは、任意の場所を監視するのに便利である。このようなモバイル監視カメラを用いる場合、カメラの位置及び方向は常に変化している。単に複数のカメラ画像を並べる従来技術では、刻々と変化するカメラ位置や方向をリアルタイムに分かりやすくユーザに伝えることはできない。そのため、各カメラの画像を直感的に確認しにくく、監視地区全体の状況の把握も容易でない。
【００１２】
上記の問題についてさらに言及すると、固定型の監視カメラを備えたシステムでは、オペレータは、カメラの場所を記憶できる。熟練したオペレータであれば、カメラ画像が単に並んでいるだけでも、監視地区の状況をある程度把握できる。しかしながら、モバイル監視カメラを用いる場合、カメラ位置及び方向が刻々と変化するので、熟練したオペレータといえども、単に並べられた画像を見ただけでは、各々の画像を確認したり、監視地区の状況を把握することは難しくなる。
【００１３】
本発明は、従来の問題を解決するためになされたものであり、その目的は、各監視カメラからの画像を直感的に確認でき、監視地区の状況を容易に把握可能な監視画像表示装置を提供することにある。
【課題を解決するための手段】
【００１４】
本発明は、複数の監視カメラで撮像された監視画像を表示する監視画像表示装置であって、前記複数の監視カメラにより監視される監視地区の地図画像を生成する地図生成部と、各監視カメラの位置情報に基づいて前記地図画像上での前記各監視カメラのカメラマークの位置を決定するカメラマーク部と、前記各監視カメラの撮影方向情報に基づいて、当該カメラマークの位置に対して撮影方向側に前記監視画像の画像位置を決定する画像位置決定部と、決定された前記カメラマークの位置及び前記画像位置に応じて、前記地図画像に前記複数の監視カメラの当該カメラマーク及び前記監視画像を合成する合成部とを有する。
【００１５】
この構成により、地図画像上にカメラ位置を表すカメラマークが表示される。更に、地図画像上でカメラマークから撮影方向側に監視画像が表示される。したがって、ユーザは、各々の監視カメラがどの場所をどの向きに映しているかを直感的に確認できる。また、複数の監視カメラが監視地区のどの場所をどの向きで映しているかが一目で分かるので、監視地区の状況を容易に把握することができる。
【００１６】
また、本発明の監視画像表示装置において、カメラマーク部は、撮影方向情報に基づいて、監視カメラの撮影方向を表すカメラマークを生成する。
【００１７】
この構成により、各監視カメラの撮影方向を表すマークを地図画像上のカメラ位置に表示することができ、監視カメラの位置と方向の確認が更に容易になる。
【００１８】
また、本発明の監視画像表示装置は、監視カメラに関する異常検出を表すアラーム信号に基づいて、前記監視カメラの監視画像を拡大するか否かを判断する画像拡大判断部と、前記画像拡大判断部の判断結果に応じて前記監視画像を拡大する画像生成部とを有する。
【００１９】
この構成により、異常検出に関わる監視カメラの監視画像が拡大表示されるので、異常確認が容易になる。また、地図画像上で監視画像を拡大表示するので、異常状況の把握が容易になる。
【００２０】
また、本発明の監視画像表示装置は、監視カメラに関する異常検出を表すアラーム信号に基づいて、前記監視カメラの監視画像をサブモニタに表示するか否かを判断するサブモニタ表示判断部を有する。
【００２１】
この構成により、異常検出に関わる監視カメラの監視画像が、地図画像を表示するメインモニタとは別のサブモニタに表示される。ユーザは、サブモニタを見て異常状況を詳細に把握できる。
【００２２】
また、本発明の監視画像表示装置は、複数の監視画像が地図画像上で重複するときに、重複した前記複数の監視画像を撮像した各監視カメラに関する異常検出を表すアラーム信号に基づいて前記複数の監視画像の画像位置を調整する重なり調整部を有する。
【００２３】
この構成により、画像位置を調整することにより、複数の監視画像の重複を避けることができる。アラーム信号に応じて画像位置を調整するので、異常検出に関わる重要な画像を固定して、他の画像を移動できる。これにより、異常に関する情報をより分かりやすく正確にユーザに提示することができる。
【００２４】
また、本発明の監視画像表示装置において、重なり調整部は、アラーム信号に基づいて、重複した複数の監視画像の多くても２つを表示対象に残す。
【００２５】
この構成により、一部の画像を表示対象から除外することにより、複数の監視画像の重複を避けることができる。アラーム信号を参照することにより、異常検出に関わる重要な画像を残し、他の画像を表示対象から除外できる。これにより、異常に関する情報をより分かりやすく正確にユーザに提示することができる。
【００２６】
また、本発明の監視画像表示装置において、アラーム信号は、監視画像の画像処理により検出される画像異常検出アラーム信号、監視カメラのアラーム操作部が手動操作されたことを示す手動アラーム信号、及び、前記監視カメラが当該位置情報に基づいて所定の重要場所を撮影することを検出する重要場所検出アラーム信号を含む。これにより、各種の異常に対して適切に対応することができる。
【００２７】
また、本発明の別の態様は、複数の監視カメラと、前記複数のカメラで撮像された監視画像を表示する監視画像表示装置とを有する監視画像表示システムであって、前記複数の監視カメラは、撮像部と、当該監視カメラの位置を検出する位置検出部と、撮影方向を検出する方向検出部とを有し、前記監視画像表示装置は、前記複数の監視カメラにより監視される監視地区の地図画像を生成する地図生成部と、前記各監視カメラの位置情報に基づいて前記地図画像上での前記各監視カメラのカメラマークの位置を決定するカメラマーク部と、前記各監視カメラの撮影方向情報に基づいて、前記カメラマークの位置に対して撮影方向側に前記監視画像の画像位置を決定する画像位置決定部と、決定された前記カメラマークの位置及び前記画像位置に応じて、前記地図画像に前記複数の監視カメラの当該カメラマーク及び前記監視画像を合成する合成部とを有する。この態様でも本発明の利点が同様に得られる。
【００２８】
また、本発明の別の態様は、複数の監視カメラで撮像された監視画像を表示するための監視画像処理方法であって、前記複数の監視カメラにより監視される監視地区の地図画像を生成し、前記各監視カメラの位置情報に基づいて前記地図画像上での前記各監視カメラのカメラマークの位置を決定し、前記各監視カメラの撮影方向情報に基づいて、当該カメラマークの位置に対して撮影方向側に前記監視画像の画像位置を決定し、決定された前記カメラマークの位置及び前記画像位置に応じて、前記地図画像に前記複数の監視カメラの当該カメラマーク及び前記監視画像を合成する。この態様でも本発明の利点が同様に得られる。
【００２９】
また、本発明の別の態様は、複数の監視カメラで撮像された監視画像を表示する監視画像表示方法であって、前記複数の監視カメラにより監視される監視地区の地図画像上に、前記各監視カメラの位置を示すカメラマーク及び、前記カメラマークに対して撮影方向側に前記監視画像を表示する。この態様でも本発明の利点が同様に得られる。
【発明の効果】
【００３０】
本発明は、地図画像上にカメラ位置を表すカメラマークを表示すると共に、地図画像上でカメラマークから撮影方向側に監視画像を表示する構成を設けたことにより、各監視カメラからの画像を直感的に確認でき、監視地区の状況を容易に把握可能になるという効果を有する監視画像表示装置を提供できる。
【図面の簡単な説明】
【００３１】
【図１】本発明の第１の実施の形態における監視画像表示部のブロック図
【図２】本発明の第１の実施の形態における監視画像表示システムの全体構成を示す図
【図３】監視画像表示システムの動作を示すフロー図
【図４】監視画像表示部の表示例を示す図
【図５】本発明の第２の実施の形態における監視画像表示部のブロック図
【図６】重なり調整部の動作を示すフロー図
【発明を実施するための形態】
【００３２】
以下、本発明の実施の形態の監視画像表示装置について、図面を用いて説明する。
【００３３】
本発明の第１の実施の形態に係る監視画像表示装置の構成を図１に示し、監視画像表示装置を含む監視画像表示システムを図２に示す。まず、図２を参照して全体構成を説明し、次に図１を参照して監視画像表示装置について説明する。
【００３４】
図２において、監視画像表示システム１は、複数の監視カメラ３と、情報処理部５と、監視画像表示部７とで構成される。監視画像表示部７は、情報処理部５を介して複数の監視カメラ３と接続される。監視画像表示部７が本発明の監視画像表示装置に相当する。
【００３５】
本実施の形態では、監視カメラ３がモバイル監視カメラである。モバイル監視カメラは小型のカメラで構成され、例えば、警備員のヘルメットなどに取り付けられる。監視カメラ３は、その他の移動物体に取り付けられてもよい。図２では２つの監視カメラ３が示されているが、実際にはより多くの監視カメラ３が監視地区に配備され、監視地区内を動き回ってよい。
【００３６】
各監視カメラ３は、図示のように、ＣＣＤカメラ１１、位置センサ１３、方向センサ１５及びアラームスイッチ１７を備える。
【００３７】
ＣＣＤカメラ１１は本発明の撮像部に相当し、画像情報を生成して情報処理部５へ出力する。以下、監視カメラ３で撮像される画像情報を、監視画像という。
【００３８】
位置センサ１３及び方向センサ１５は、それぞれ本発明の位置検出部及び方向検出部として機能し、監視カメラ３の位置情報及び撮影方向情報をリアルタイムで情報処理部５に出力する。位置情報は監視地区における監視カメラ３の位置であり、撮影方向情報は監視カメラ３のレンズの向きである。以下の説明では、図示のように、位置情報及び撮影方向情報をカメラ位置及びカメラ方向という。位置センサ１３は例えばＧＰＳで構成され、方向センサ１５は例えば地磁気センサで構成される。
【００３９】
アラームスイッチ１７は、本発明のアラーム操作部に相当し、手動で操作される。例えば、警備員に監視カメラ３が装着される場合、警備員は、監視地区を巡回中に異常を発見するとアラームスイッチ１７を操作する。アラームスイッチ１７は操作に反応して手動アラーム信号を情報処理部５に出力する。
【００４０】
情報処理部５は、監視カメラ３から入力される監視画像及びカメラ位置を処理して画像認識及び位置解析を行い、処理結果を監視画像表示部７に提供する。情報処理部５は監視画像表示部７に設けられてよい。また、情報処理部５の処理機能を各々の監視カメラ３に持たせることも可能である。
【００４１】
図２において、情報処理部５は、マルチプレクサ（ＭＵＸ）２１、画像認識ユニット２３、位置解析ユニット２５及びＯＲ処理部２７を備える。
【００４２】
ＭＵＸ２１には、各々の監視カメラ３から監視画像、カメラ位置、カメラ方向及び手動アラーム信号が入力される。監視画像は、ＭＵＸ２１から画像認識ユニット２３に供給されると共に、監視画像表示部７に出力される。また、カメラ位置、方向は、ＭＵＸ２１から位置解析ユニット２５に供給されると共に、監視画像表示部７に出力される。手動アラーム信号は、ＭＵＸ２１からＯＲ処理部２７に供給される。
【００４３】
画像認識ユニット２３は、各々の監視カメラ３からの監視画像に対して認識処理を行い、画像異常を検出する。例えば、画像認識ユニット２３は、監視画像中の人物を異常として検出する。画像認識ユニット２３は、画像認識により画像中の人物が不審人物か否かを判定してもよい。また例えば、画像認識ユニット２３は、移動物体を認識し、異常として検出してもよい。また例えば、画像認識ユニット２３は、予め登録されていない静止物体を認識して異常として検出してもよい。画像認識ユニット２３は、異常を検出すると、画像異常検出アラーム信号をＯＲ処理部２７に供給する。
【００４４】
位置解析ユニット２５は、各々の監視カメラ３のカメラ位置の情報を解析し、監視カメラ３が監視地区内の重要場所を撮影しているか否かを判定する。重要場所は、位置解析ユニット２５に登録されている。重要場所は、例えば、監視地区の入口などの異常が発生しやすい場所である。
【００４５】
位置解析ユニット２５は、監視カメラ３の位置が重要場所と一致するか否かを判定してよい。また、位置解析ユニット２５は、監視カメラ３から重要場所までの距離が所定の閾距離以下になった場合に、監視カメラ３が重要場所を撮影していると判定してよい。閾距離は、監視カメラ３が撮影可能な距離に応じて設定されてよい。撮影可能な距離とは、監視のために必要な解像度の画像を生成可能な距離である。また、位置解析ユニット２５は、監視カメラ３から重要場所までの距離が閾距離以下であり、かつ、カメラ方向が重要場所を向いているときに（重要場所が監視カメラ３の画角内であるときに）、監視カメラ３が重要場所を撮影していると判定してよい。これにより、監視カメラ３の向きも考慮して、確実に重要場所の情報を得ることができる。
【００４６】
位置解析ユニット２５は、監視カメラ３が重要場所を撮影していると判断すると、重要場所検出アラーム信号をＯＲ処理部２７に供給する。
【００４７】
ＯＲ処理部２７は、画像異常検出アラーム信号、手動アラーム信号、重要場所検出アラーム信号のいずれかが入力されると、アラーム信号を監視画像表示部７に出力する。アラーム信号には、該当する監視カメラ３の識別情報が付加される。また、上記３つのアラーム信号の種別も、アラーム信号に付加されて監視画像表示部７に出力されてよい。
【００４８】
次に、図１を参照し、監視画像表示部７の構成を説明する。前述したように、監視画像表示部７が本発明の監視画像表示装置に該当する。監視画像表示部７には、監視画像、カメラ位置、カメラ方向が各々の監視カメラ３から情報処理部５を経由して入力され、また、情報処理部５からアラーム信号が入力される。監視画像表示部７は、カメラ位置、カメラ方向及びアラーム信号を処理して、複数の監視カメラ３の監視画像を好適に表示する。
【００４９】
監視画像表示部７は、入力部３１、地図サーバ３３、地図生成部３５、カメラマーク部３７、画像位置決定部４１、画像拡大判断部４３、画像生成部４５、合成部４７、サブモニタ表示判断部４９、メインモニタ５１及びサブモニタ５３で構成されている。カメラマーク部３７は、カメラマーク位置決定部３８及びカメラマーク生成部３９を有する。
【００５０】
入力部３１は、監視画像、カメラ位置、カメラ方向及びアラーム信号を監視画像表示部７へと入力する。監視画像は、入力部３１から画像生成部４５に入力され、カメラ位置及びカメラ方向はカメラマーク位置決定部３８及び画像位置決定部４１に入力され、アラーム信号は画像拡大判断部４３及びサブモニタ表示判断部４９に入力される。
【００５１】
地図サーバ３３は地図記憶部であり、監視地区の地図データを記憶している。地図生成部３５は、地図データから監視地区の地図画像を生成する。地図画像は後述のようにメインモニタ５１に背景として表示される。
【００５２】
カメラマーク部３７のカメラマーク位置決定部３８は、カメラ位置のデータに基づいて、地図画像上での各監視カメラ３のカメラマーク位置を決定する。カメラマーク位置は、監視地区内のカメラ位置と対応するように定められる。本実施の形態では、監視カメラ３がモバイル監視カメラであり、カメラ位置が刻々と変化する。そこで、リアルタイムに入力されるカメラ位置に合わせて、カメラマーク位置も変更される。カメラマーク位置は具体的には、メインモニタ５１の画像上の座標データ（マーク座標）で表される。カメラマーク位置はカメラマーク位置決定部３８からカメラマーク生成部３９に供給される。
【００５３】
カメラマーク生成部３９は、カメラマーク位置決定部３８により決定されたカメラマーク位置にカメラマークの画像を生成する。予め登録されたカメラマークの画像が、カメラマーク位置に貼り付けられてよい。
【００５４】
カメラマークは、監視カメラ３の撮影方向も表す形状を有している。カメラマーク生成部３９は、カメラマーク位置決定部３８を介してカメラ方向の情報を取得し、カメラマークの方向を実際のカメラ方向に合わせる。
【００５５】
画像位置決定部４１は、各監視カメラ３のカメラ位置及びカメラ方向に基づいて、監視画像の画像位置を監視カメラ毎に決定する。画像位置とは、地図画像上で監視画像を貼り付ける位置である。画像位置は、地図上のカメラマーク位置の近傍であって、カメラマーク位置に対してカメラ方向側（撮影方向側）に定められる。カメラマーク位置と画像位置の距離は予め定められている。
【００５６】
ここでは、カメラ位置とカメラマーク位置が対応するので、カメラ位置から画像位置が決定されている。画像位置決定部４１は、カメラマーク位置決定部３８からカメラマーク位置を取得し、カメラマーク位置から画像位置を決定してもよい。いずれの処理においても、画像位置はカメラマーク位置の近傍であり、撮影方向側に定められる。
【００５７】
監視画像の画像位置は、カメラマーク位置と同様、具体的にはメインモニタ５１の画像上の座標データで表される。画像位置は、画像位置決定部４１から画像生成部４５へと供給される。
【００５８】
画像拡大判断部４３は、アラーム信号に基づいて、各監視カメラ３の監視画像を拡大するか否かを判断する。画像拡大判断部４３は、各々の監視カメラ３に関するアラーム信号が入力されたか否かを判定する。ある監視カメラ３のアラーム信号が入力された場合、画像拡大判断部４３は、該当する監視カメラ３の監視画像を拡大するように画像生成部４５に指示する。
【００５９】
画像拡大判断部４３は、具体的な処理としては、監視カメラ３毎に画像サイズを決定し、それら画像サイズを画像生成部４５に指示してよい。画像サイズは、地図画像内の監視画像のサイズである。監視画像を拡大しない場合には、比較的小さい所定の基準サイズが適用される。監視画像を拡大する場合には、基準値より大きな所定の拡大サイズが適用される。
【００６０】
画像生成部４５は、画像位置決定部４１と画像拡大判断部４３からの指示に従って、入力された各監視カメラ３の監視画像を変換し、表示用の画像データを生成する。画像生成部４５は、画像位置決定部４１により決定された画像位置へと、各監視カメラ３の監視画像を位置させる。また、監視画像は、画像生成部４５から指示された画像サイズへと変換される。したがって、画像を拡大しない場合は、基準サイズへと画像サイズへが変換される。画像拡大が指示された場合には、上述した所定の拡大サイズへと画像サイズが変換される。
【００６１】
合成部４７は、地図画像、カメラマーク及び監視画像を合成する。すなわち、合成部４７は、地図生成部３５により生成された地図画像と、カメラマーク部３７のカメラマーク生成部３９により生成されたカメラマークの画像と、画像生成部４５により処理された監視画像とを合成する。これにより、複数の監視カメラ３のカメラマーク及び監視画像が地図画像上に貼り付けられる。各カメラマーク及び各監視画像は、該当する監視カメラ３についてのカメラマーク部３７のカメラマーク位置決定部３８及び画像位置決定部４１での処理により決定されたカメラマーク位置及び画像位置へと貼り付けられる。また、監視画像は、画像拡大判断部４３の判断結果に応じて拡大される。合成画像は、合成部４７からメインモニタ５１に出力され、表示される。
【００６２】
サブモニタ表示判断部４９は、アラーム信号に基づいて、各監視カメラ３の監視画像をサブモニタ５３に表示するか否かを判断する構成である。サブモニタ表示判断部４９は、各々の監視カメラ３に関するアラーム信号が入力されたか否かを判定する。そして、ある監視カメラ３のアラーム信号が入力された場合、サブモニタ表示判断部４９は、該当する監視カメラ３の監視画像を画像生成部４５から取得し、そして、監視画像をサブモニタ５３に出力し、表示させる。
【００６３】
したがって、サブモニタ５３に表示される監視画像は、メインモニタ５１で拡大された監視画像と同じになる。すなわち、ある監視カメラ３のアラーム信号が入力されると、該当する監視カメラ３の監視画像は、メインモニタ５１上で拡大表示されると共に、サブモニタ５３にも表示される。
【００６４】
図１では、１つのサブモニタ５３が示されている。しかし、実際には複数のサブモニタ５３が好適に設けられる。複数の監視カメラ３に関してアラーム信号が生じた場合、それらの監視カメラ３の監視画像が、拡大表示され、かつ、サブモニタ５３に表示される。
【００６５】
以上に本実施の形態の監視画像表示システム１の構成について説明した。次に、監視画像表示システム１の動作を説明する。
【００６６】
図３は、監視画像表示システム１の動作を示すフロー図である。図３に示すように、ステップＳ１〜Ｓ７が主に監視カメラ３の動作であり、ステップＳ９〜Ｓ１９が主に情報処理部５の動作であり、ステップＳ２１〜Ｓ２７が主に監視画像表示部７の動作である。図３の処理が全部の監視カメラ３のために行われる。
【００６７】
図３に示すように、まず、監視カメラ３の電源がオンになり（Ｓ１）、ＣＣＤカメラ１１が監視画像を生成し、位置センサ１３及び方向センサ１５がカメラ位置及びカメラ方向を検出する。監視カメラ３は、監視画像を情報処理部５に出力し（Ｓ３）、また、カメラ位置及びカメラ方向も情報処理部５に出力する（Ｓ５）。また、監視カメラ３は、アラームスイッチ１７の状態を検出し（Ｓ７）、アラームスイッチ１７が押されると手動アラーム信号を情報処理部５に出力する。
【００６８】
監視画像は、情報処理部５から監視画像表示部７へ出力されると共に、情報処理部５の画像認識ユニット２３で処理される。画像認識ユニット２３は、監視画像の認識処理を行い、画像上の異常の有無を検出する（Ｓ９）。
【００６９】
また、カメラ位置及びカメラ方向は、情報処理部５から監視画像表示部７に供給されると共に、情報処理部５の位置解析ユニット２５で処理される。位置解析ユニット２５は、監視カメラ３が重要場所を撮影しているか否かを判定する（Ｓ１１）。
【００７０】
監視カメラ３から手動アラーム信号が入力された場合（Ｓ１３、Ｙｅｓ）、または画像認識ユニット２３が画像上の異常を検出した場合（Ｓ１５、Ｙｅｓ）、または位置解析ユニット２５により監視カメラ３が重要場所を撮影していると判断された場合（Ｓ１７、Ｙｅｓ）、情報処理部５はアラーム信号を監視画像表示部７へ出力する（Ｓ１９）。
【００７１】
監視画像表示部７では、アラーム信号が入力されなければ、メインモニタ５１の地図画像上に、監視カメラ３の位置及び向きを表すカメラマークを表示し（Ｓ２５）、地図画像上でカメラマークの前（カメラマークに対して撮像方向側）に監視画像を表示する（Ｓ２７）。より詳細には、図１を参照して説明したように、カメラマーク部３７のカメラマーク位置決定部３８がカメラマーク位置を決定し、カメラマーク生成部３９がカメラマーク位置にカメラマークの画像を生成する。また、画像位置決定部４１が画像位置を決定し、画像生成部４５が、画像位置に従って監視画像を変換する。そして、合成部４７がカメラマーク及び監視画像を地図画像に合成する。
【００７２】
一方、アラーム信号が情報処理部５から入力された場合は、監視画像表示部７は、該当監視カメラ３の監視画像をサブモニタ５３に表示する（Ｓ２１）。この処理は、サブモニタ表示判断部４９により行われる。また、画像拡大判断部４３の判断に従って、画像生成部４５が、メインモニタ５１に表示すべき監視画像のサイズを拡大する（Ｓ２３）。そして、上述と同様にカメラマークが地図画像上に表示され（Ｓ２５）、監視画像が地図画像上でカメラマークの前に表示される（Ｓ２７）。ここでは、ステップＳ２３の拡大画像が表示される。
【００７３】
図４は、本実施の形態における画面表示の例を示している。図４は、メインモニタ５１と２つのサブモニタ５３（第１サブモニタ、第２サブモニタ）を示している。
【００７４】
図４の例では、監視地区に４つの監視カメラ３（カメラＡ、Ｂ、Ｃ、Ｄ）が配備されている。メインモニタ５１には、背景画像として監視地区の地図画像を表示している。地図上には４台の監視カメラ３のカメラマークが表示されている。
【００７５】
各々のカメラマークは、監視地区内での各監視カメラ３の位置と方向を示している。カメラ方向は、マークに付された線の方向で示されている。図４の例では、４つのマークの形状が異なっている。しかし、実際には、マーク形状が同じで、色などが異なってもよい。もちろん、形状と色の両方が異なってよい。
【００７６】
また、各監視カメラ３のカメラマークの前（カメラ方向側）には、該当監視カメラ３の監視画像がリアルタイムで表示されている。
【００７７】
ここで、カメラＡ、カメラＢについてはアラーム信号が入力されていないとする。この場合、図示のように、比較的小さい基準サイズの監視画像が表示される。
【００７８】
一方、カメラＣは、監視地区のゲートの近くに位置しており、ゲートを向いて撮影している。このゲートは予め重要場所に登録されている。そのため、情報処理部５の位置解析ユニット２５は、カメラＣが重要場所を撮影していると判断し、アラーム信号を出力する。その結果、図４に示すように、カメラＣの画像はメインモニタ５１上で拡大されており、更に第１サブモニタに表示されている。
【００７９】
また、カメラＤについては、カメラＤの操作者が不審者を発見し、アラームスイッチ１７を操作したとする。操作者は例えば前述の通り警備員である。この場合、カメラＤのアラーム信号が監視カメラ３から情報処理部５を介して監視画像表示部７に入力される。その結果、図４に示すように、カメラＤの画像も、メインモニタ５１で拡大されており、更に第２サブモニタに表示されている。
【００８０】
また、画像認識ユニット２３がカメラＤの監視画像から画像異常として図４の不審者を検出した場合も、カメラＤのアラーム信号が情報処理部５から監視画像表示部７に入力される。そして、図４に示すように、カメラＤの画像がメインモニタ５１で拡大され、かつ、サブモニタ５３に表示される。
【００８１】
以上に本発明の第１の実施の形態について説明した。本実施の形態によれば、メインモニタ５１の地図画像上に各監視カメラ３のカメラ位置を表すカメラマークが表示される。更に、地図画像上でカメラマークから撮影方向側に監視画像が表示される。したがって、ユーザは、各々の監視カメラ３がどの場所をどの向きに映しているかを直感的に確認できる。また、複数の監視カメラ３が監視地区のどの場所をどの向きで映しているかが一目で分かるので、監視地区の状況を容易に把握することができる。
【００８２】
また、本実施の形態によれば、カメラマークが撮影方向を表す形状を有しており、監視カメラの位置と方向の確認が更に容易になる。
【００８３】
また、本実施の形態によれば、各監視カメラ３に関するアラーム信号に基づいて監視画像が拡大される。異常検出に関わる監視カメラ３の監視画像が拡大表示されるので、異常確認が容易になる。また、地図画像上で監視画像を拡大表示するので、異常状況の把握が容易になる。
【００８４】
また、本実施の形態によれば、各監視カメラ３のアラーム信号に基づいて監視画像がサブモニタ５３に表示される。異常検出に関わる監視カメラ３の監視画像が、地図画像を表示するメインモニタ５１とは別にサブモニタに表示される。ユーザは、サブモニタ５３を見て異常状況を詳細に把握できる。
【００８５】
また、本実施の形態によれば、各監視カメラのアラーム信号は、上記の画像異常検出アラーム信号、手動アラーム信号及び重要場所検出アラーム信号を含む。これにより、各種の異常に対して適切に対応することができる。
【００８６】
次に、本発明の第２の実施の形態について説明する。本実施の形態は、地図画像上で複数の監視画像が重なるのを好適に回避する技術を提供する。
【００８７】
上述の実施の形態では、監視カメラ３がモバイル監視カメラであり、監視地区内を任意に移動する。そのため、複数の監視カメラ３が接近し、その結果、監視画像同士が重なる可能性がある。例えば、２つの監視カメラ３が、同じ場所を挟んで両側に位置したとする。この場合、各々のカメラマークの前方に監視画像が配置されて、２つの監視画像が重なる可能性がある。
【００８８】
複数の監視画像が重なると、重要な情報が見逃される可能性がある。このような事態を避けるため、本実施の形態は、監視画像が重ならないように画像位置を調整する技術を提供する。本実施の形態は、特に、アラーム信号に基づいて好適な位置調整を行うように構成される。
【００８９】
図５は、本実施の形態における監視画像表示部の構成を示している。図５において、監視画像表示部７１は、重なり調整部７３を有している。その他の構成は、図１に示される前述の実施の形態と同様である。
【００９０】
重なり調整部７３には、画像位置決定部４１から各監視画像の画像位置が供給される。また、重なり調整部７３には、画像拡大判断部４３の判断結果が入力される。具体的には、各監視画像の画像サイズの情報が入力されてよい。また、重なり調整部７３には、アラーム信号が入力される。重なり調整部７３は、これらの情報を処理し、監視画像同士が重ならないように、監視画像の画像位置を調整するように構成されている。
【００９１】
図６は、重なり調整部７３の処理を示している。図６では、一つの監視カメラ３の監視画像が着目画像に設定され、他の一つの監視カメラ３の監視画像が相手画像に設定される。すべての監視画像の組合せが順次、着目画像と相手画像に設定される。１つの組合せでは、片方が着目画像に設定され、更にもう一方が着目画像に設定される。こうしてすべての組合せに対して図６の処理が行われる。
【００９２】
図６に示されるように、重なり調整部７３は、着目画像と相手画像が重なるか否かを判定する（Ｓ３１）。ここでは、着目画像及び相手画像の画像位置及び画像サイズが参照されて、重複の有無が判定される。画像サイズの代わりに、各監視画像のアラーム信号が参照されてよい。監視画像のアラーム信号とは、該当する監視画像を撮像した監視カメラ３に関して発生したアラーム信号である。アラーム信号が有れば監視画像が拡大されるので、拡大サイズを用いて重なりが判定される。
【００９３】
ステップＳ３１の判定がＹｅｓの場合、重なり調整部７３は、着目画像のアラーム信号の有無を判定する（Ｓ３３）。着目画像のアラーム信号が無ければ、重なり調整部７３は、相手画像のアラーム信号の有無を判定する（Ｓ３５）。ステップＳ３５がＹｅｓの場合、重なり調整部７３は、着目画像の位置を相手画像と反対方向にずらし（Ｓ３７）、ステップＳ３１へ戻る。ここでは、着目画像の中心位置が相手画像の中心位置から離れるように、重なりが無くなるまで、画像位置が調整される。すなわち、重なり幅と同じ量だけ、画像位置が変更される。
【００９４】
画像位置の調整方向は予め設定されてよく、例えば、画像位置が横方向にのみ調整されてよい。この場合、横方向の画像位置が、横方向の重なり幅だけ変更される。
【００９５】
また、ステップＳ３５がＮｏの場合も、重なり調整部７３は、着目画像の位置を相手画像と反対方向にずらし（Ｓ４１）、ステップＳ３１へ戻る。この処理は、ステップＳ３９と同様である。ただし、位置調整量は、重なり部分の幅の半分とされる。この場合、２つの画像位置が両方とも調整されて、重なりが解消される。
【００９６】
また、ステップＳ３３がＹｅｓの場合も、重なり調整部７３は、相手画像のアラーム信号の有無を判定する（Ｓ３７）。相手画像のアラーム信号が無ければ、重なり調整部７３は、着目画像の位置を変更せず（Ｓ４３）、ステップＳ３１へ戻る。
【００９７】
また、ステップＳ３７がＹｅｓの場合、重なり調整部７３は、ステップＳ４１に進む。重なり調整部７３は、前述したように、着目画像の位置を相手画像と反対方向に、重なり幅の半分だけずらし、ステップＳ３１へ戻る。
【００９８】
上記の処理によれば、着目画像にアラーム信号が無く、相手画像にアラーム信号が有れば、相手画像を避けるように着目画像の位置が調整される。
【００９９】
また、着目画像にアラーム信号が有り、相手画像にアラーム信号が無ければ、画像位置は変更されない。この場合は、相手画像の画像位置が調整されることになる。
【０１００】
また、着目画像と相手画像の両方にアラーム信号が無ければ、両方の画像位置が同じ量だけ調整される。着目画像と相手画像の両方にアラーム信号が有る場合も、両方の画像位置が同じ量だけ調整される。
【０１０１】
このようにして、本実施の形態によれば、アラーム信号が発生した監視カメラ３の監視画像は固定され、アラーム信号が発生していない監視カメラ３の監視画像がずらされる。また、２つの監視カメラ３にアラーム信号が発生していれば、両方の監視画像がずらされる。
【０１０２】
アラーム信号が発生しているということは、監視画像の確認が重要であることを意味する。上記の処理により、このような重要な監視画像を動かさないようにして、確認作業を容易にできる。
【０１０３】
「３つ以上の監視画像が重なる場合」
上記の処理では、２つの監視画像の重なりを解消するように画像位置が調整された。重なり調整部７３は、３つ以上の監視画像が重なるか否かも判定する。そして、重なり調整部７３は、３つ以上の監視画像が重なる場合、アラーム信号の重要度に応じて２つの監視画像を残し、残りの１以上の監視画像を表示対象から除外する。重なり調整部７３は、表示対象からの除外の指示を画像生成部４５に送る。画像生成部４５は、重なり調整部７３の指示に従い、指定された監視画像を合成部４７へ供給しないように動作する。
【０１０４】
上記の処理では、アラーム信号の重要度が高い２つの監視画像が残される。アラーム信号の重要度は、以下のように定められてよい。
【０１０５】
入力されるアラーム信号は、手動アラーム信号、画像異常検出アラーム信号、重要場所検出アラーム信号の種別を含んでいるとする。手動アラーム信号の重要度は一番高く設定される。手動アラーム信号は、操作者の判断によって発生しているからである。重要場所検出アラーム信号の重要度は一番低く設定される。
【０１０６】
また、画像異常検出アラーム信号に関しては、画像中の異常部分のサイズに応じて重要度が決定されてよい。この処理のために、アラーム信号と共に、異常部分のサイズの情報が情報処理部５から監視画像表示部７に供給される。異常部分は、例えば、画像認識により不審者として検出された部分である。異常部分が大きいほど、監視カメラ３が異常に接近していると考えられる。そこで、異常部分が大きいほど、アラーム信号の重要度が高いと判定される。
【０１０７】
また、重要場所検出アラーム信号に関しては、カメラ位置と重要場所の距離が近いほど、アラーム信号の重要度が高いと判定されてよい。この処理のために、カメラ位置と重要場所の距離が、アラーム信号と共に監視画像表示部７に供給される。
【０１０８】
重なり調整部７３は、上記の判定基準に基づき、アラーム信号の重要度が高い２つの監視画像を残し、残りの監視画像を表示対象から除外する。
【０１０９】
なお、重なった３つ以上の監視画像のうちで、２つの監視画像だけにアラーム信号だけが発生していたとする。この場合は、それら２つの監視画像が残される。
【０１１０】
また、１つの監視画像にだけアラーム信号が発生していたとする。この場合、適当なもう一つの監視画像が残されてよい。例えば、アラーム信号が生じた監視カメラ３に最も近い監視カメラ３が選ばれてよい。
【０１１１】
以上に本発明の第２の実施の形態について説明した。本実施の形態によれば、複数の監視画像が地図画像上で重複するときに、重複した複数の監視画像に関わるアラーム信号に基づいて複数の監視画像の画像位置が調整される。画像位置を調整することにより、複数の監視画像の重複を避けることができる。また、アラーム信号に応じて画像位置を調整するので、異常検出に関わる重要な画像を固定して、他の画像を移動できる。これにより、異常に関する情報をより分かりやすく正確にユーザに提示することができる。
【０１１２】
また、本実施の形態によれば、アラーム信号に基づいて、重複した複数の監視画像の多くても２つが表示対象に残される。一部の画像を表示対象から除外することにより、複数の監視画像の重複を避けることができる。また、アラーム信号を参照することにより、異常検出に関わる重要な画像を残し、他の画像を表示対象から除外できる。これにより、異常に関する情報をより分かりやすく正確にユーザに提示することができる。
【０１１３】
なお、上記の例では、３つ以上の監視画像が重複したときに、２つの監視画像が残され、残りが除外された。しかし、本発明は上記処理に限定されない。例えば３つの画像が残されてもよい。
【０１１４】
以上に本発明の好適な実施の形態を説明した。しかし、本発明は上述の実施の形態に限定されず、当業者が本発明の範囲内で上述の実施の形態を変形可能なことはもちろんである。
【産業上の利用可能性】
【０１１５】
以上のように、本発明にかかる監視画像表示装置は、各監視カメラからの画像を直感的に確認でき、監視地区の状況を容易に把握可能になる効果を有し、モバイル監視カメラ等の監視画像を表示するために有用である。
【符号の説明】
【０１１６】
１  監視画像表示システム
３  監視カメラ
５  情報処理部
７  監視画像表示部
１１  ＣＣＤカメラ
１３  位置センサ
１５  方向センサ
１７  アラームスイッチ
２３  画像認識ユニット
２５  位置解析ユニット
３１  入力部
３３  地図サーバ
３５  地図生成部
３７  カメラマーク部
３８  カメラマーク位置決定部
３９  カメラマーク生成部
４１  画像位置決定部
４３  画像拡大判断部
４５  画像生成部
４７  合成部
４９  サブモニタ表示判断部
５１  メインモニタ
５３  サブモニタ
【図１】
2010268186.tif 000003
【図２】
2010268186.tif 000004
【図３】
2010268186.tif 000005
【図４】
2010268186.tif 000006
【図５】
2010268186.tif 000007
【図６】
2010268186.tif 000008