(57)【要約】【課題】  複数からのカメラの映像をオペレータが監視を行うシステムにおいて、監視画面で同時に表示可能な映像数を超えるカメラが存在する場合、いかに全てのカメラからの映像を効率的に切換えながら監視して、発生した監視すべき事象を見逃さないような機能を実現する方法に関わる。【解決手段】  一定の時間間隔で表示すべき対象カメラを切換える切換手段と、カメラ毎に映像を常時蓄積する蓄積手段と、前記切換手段が働いて、あるカメラの映像を表示する際には、前回表示終了時刻から、今回表示終了予定時刻までの蓄積映像を、今回の表示時間間隔で表示可能なように再生制御を行う。また、前記蓄積映像の時間的変化を画像処理によって判断する変化検知手段と、変化の無い部分は取り除いて変化のある蓄積映像のみ切り出しを行う。【選択図】  図１
2005167439.tif 000002
【特許請求の範囲】
【請求項１】
一定の時間間隔で表示すべき対象カメラを切換える切換手段と、カメラ毎に映像を常時蓄積する蓄積手段と、前記切換手段が働いて、あるカメラの映像を表示する際には、前回表示終了時刻から、今回表示終了予定時刻までの蓄積映像を、今回の表示時間間隔で表示可能なように再生制御を行う複数カメラの巡回監視方法。
【請求項２】
前記、蓄積映像を表示時間間隔で表示可能なようにする再生制御は、再生予定の蓄積映像が前記表示時間に収まるように再生速度を決定する再生速度決定手段と、前記決定した再生速度で蓄積映像を再生する再生手段からなる請求項１に記載の複数カメラの巡回監視方法。
【請求項３】
前記蓄積映像の時間的変化を画像処理によって判断する変化検知手段と、変化の無い部分は取り除いて変化のある蓄積映像のみ切り出しを行う蓄積映像処理手段を具備し、変化のある部分を抽出した蓄積映像が、前記表示時間に収まるように再生速度を決定する再生速度決定手段と、前記決定した再生速度で蓄積映像を再生する再生手段からなる請求項１に記載の複数カメラの巡回監視方法。
【請求項４】
前記蓄積画像の再生中に現時刻に追いついた際には、カメラからのライブ映像に切換表示する表示制御手段を具備した請求項３に記載の複数カメラの巡回監視方法。
【請求項５】
前記請求項１〜４に記載のカメラ巡回方法を、監視オペレータが手動で開始・停止を行える操作手段を具備した監視装置。
【請求項６】
センサーからの入力を検知する入力手段を備え、センサー入力を検知した際には、前記請求項１〜４に記載のカメラ巡回方法を停止して、センサーに関連付けたカメラのライブ映像を表示する表示制御手段を備え、一定時間経過あるいは手動操作により、再度カメラ巡回を再開する制御手段を具備した監視装置。
【請求項７】
請求項１〜４に記載のカメラの巡回方法に基づき、蓄積映像をマルチ画面で表示する第一の画面構成と、ライブ映像及び蓄積映像をマルチ画面で表示する第二の画面構成を、切換えることで巡回自体は停止せずに、ライブ表示も行う、表示制御手段を具備した、監視装置。
【発明の詳細な説明】
【技術分野】
【０００１】
複数からのカメラの映像をオペレータが監視を行うシステムにおいて、監視画面で同時に表示可能な映像数を超えるカメラが存在する場合、いかに全てのカメラからの映像を効率的に切換えながら監視して、発生した監視すべき事象を見逃さないような機能を実現するかという方法に関わる。
【０００２】
本特許では監視システム側で自動的にカメラを一定時間毎に切換えることに加え、各カメラの映像を蓄積しておく蓄積機能を利用することにより、発生した監視すべき事象を見逃さないような監視を提供する方法を提案する。
【背景技術】
【０００３】
監視画面で同時に表示可能な映像数を超えるカメラが存在する場合、全てのカメラを同時表示することは出来ないので、同時表示可能なカメラ数毎に表示映像を一定時間ごとに、切換えながら監視を行う方法が存在する。
【０００４】
監視オペレータが自らカメラを切換えながら、全てのカメラからの映像を見ながら、異常が無いか監視を続けるのは、カメラの切換操作と、カメラの映像注視を同時に行わなければならず、監視オペレータにとっての負担が大きい。この切換作業を自動化すれば、監視オペレータはカメラからの映像を見ることに集中でき、注視したいときだけこの自動的なカメラ切換を停止させることが出来れば、より作業負担の少ない監視を実現できる（特許文献１参照）。
【０００５】
また、センサー入力などを利用して、侵入者などに対し、カメラを自動的に切換ることも従来行われている方法である。センサーの入力は監視すべき事象の発生を、高い確度で知らせるもので、それに基づくカメラ切換は確かに有効に働く。
【０００６】
但し、センサーからの入力は頻繁に起こることではないのが通常の状況なので、センサー入力が無い時には、上記のようなカメラ自動切換で監視を行うなど、上記の２つの従来方法は、組み合わせて利用される場合もある。
【特許文献１】特開２００１−２２４０１２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
しかしながら、カメラの自動切換を一定間隔毎に行う場合に、あるカメラに関して注目すると、そのカメラは定期的にある一定間隔で監視されるものの、監視されない時間が定期的に存在するため、何か短時間での事象発生を監視オペレータが見逃してしまうことが考えられる。また、センサーからの入力をもとにカメラを自動切換えする方法もあるが、全てのカメラに関して、見逃しがないように保証できるものではない。
【０００８】
そこでカメラ毎に映像を蓄積し、対象カメラの表示の際には、過去に表示されていない蓄積映像の最初の部分から、表示終了予定時刻までの映像を早送り再生することで、全てのカメラの映像を抜けなく、ほぼリアルタイム（高々切換時間間隔の遅延あり）で確認できるようにしたカメラの巡回監視方式を提案する。全く表示されない時間区間があるより、早送りの再生速度でも全カメラの全時間帯の映像を確認出来る方が、監視としては有効性が高い。
【課題を解決するための手段】
【０００９】
一定の時間間隔で表示すべき対象カメラを切換える切換手段と、カメラ毎に映像を常時蓄積する蓄積手段と、前記切換手段が働いて、あるカメラの映像を表示する際には、前回表示終了時刻から、今回表示終了予定時刻までの蓄積映像を、今回の表示時間間隔で表示可能なように再生制御を行う。
【００１０】
即ち、２つのカメラグループを切換えて表示する場合は、そのカメラグループが選択されていない期間と、選択されている期間の映像を、連続して２倍速で再生することにより、選択されている期間で時間的に抜けがなく対象カメラの表示再生を行うことが出来る。同様に３つのカメラグループなら３倍速が基本となり、４つのカメラグループなら４倍速が基本となる。
【００１１】
また、前記蓄積映像の時間的変化を画像処理によって判断する変化検知手段と、変化の無い部分は取り除いて変化のある蓄積映像のみ切り出しを行う蓄積映像処理手段とを具備し、一定の倍速表示ではなく、変化の無い部分は同じ画像を見ることになるのだから、スキップして、なるべく通常速度に近い再生を行うなり、変化が無い時間がほとんどであれば、変化があった蓄積映像だけ見て確認した後、ライブの画像に切換えるなどを行う。
【発明の効果】
【００１２】
以上のように本発明によれば、全てのカメラからの映像を効率的に切換えながら監視して、発生した監視すべき事象を見逃さないような機能を実現することができる。
【発明を実施するための最良の形態】
【００１３】
（実施例１）
以下、図面に基づいて本発明の一実施例を説明する。
【００１４】
図１は本実施例のシステム全体の図面である。ネットワークに直結するカメラ１０１を複数配置して、ネットワーク上のある監視装置１０２で映像監視及び操作画面１０３を表示する監視システムを構成することを考える。従来の監視システムの例では、図2に示すようにアナログ信号でカメラからの映像を直接監視装置２０１に入力するタイプのものが多く、この場合は監視対象となるカメラは物理的な端子の数で制限され、端子数は多くて例えば１６などに上限が決まっており、その全ての映像をマルチ画面２０２で表示することは可能であった。
【００１５】
一方、図１のような構成では、ネットワーク上に配置できるカメラは、厳密な上限はなく多くのカメラを監視することが出来るようになる。この場合、１０３のようなマルチ画面においても、全てを表示できる保証はなく、設定カメラの数によっては、その一部しか同時に映像観察できない状況が考えられる。
【００１６】
但し、本提案のアイデアは、図１の構成のみではなく、図２の構成であっても、４×４の１６カメラ表示では全てを表示できるが、２×２の４カメラ表示では、切換表示が必要となり本発明の方式も適用可能である。監視画面の制約からの同時表示可能なカメラ数の制限より、監視対象となるカメラ数が多く、全てのカメラが同時に表示できない状況において、どのようにカメラ映像を表示するかの一方式を提案する。
【００１７】
尚、１０２や２０１の監視装置は専用の装置として実現される場合もあるし、汎用ＰＣに監視機能を実現するアプリケーションソフトウェアを動作させる場合も考えられる。また、図１の１０１のようにネットワークに直接接続できるカメラを用いる場合もあるし、１０４のようにカメラサーバ装置を使ってアナログ接続のカメラをネットワークに接続する場合も考えられる。カメラサーバ装置は専用装置となる場合も、映像キャプチャー機能を持った汎用ＰＣとなる場合も考えられる。
【００１８】
監視画面の制約からの同時表示可能なカメラ数の制限より、監視対象となるカメラ数が多く、全てのカメラが同時に表示できない状況において、監視対象とするカメラを同時表示可能なカメラグループに分類して、カメラグループをある時間間隔で切換ながら表示することを繰り返すことが、従来一つの監視支援方法として行われてきた。このカメラを一定間隔時間毎に自動的に切換わる方式を本提案書ではオートスイッチと呼ぶ。この方法をタイムチャートとして表したものが図３である。図では表示映像はある一定時間おきに切替り、その表示映像は、同一時間に対応するカメラから入力された現在の映像が表示されることを示している。即ち、カメラグループ１を表示している際に、カメラグループ２の同一時間の映像は見られることはない。図４のように、当然、カメラグループは２つに限定されるものではない。カメラの台数が多くカメラグループが３つ以上になっても、基本的にそのカメラグループが一定時間毎に切換わり、他のカメラグループが表示している場合のカメラからの入力映像は表示されない。もちろんこれはオートスイッチが動作しているときの状況で、オートスイッチを停止したり、手動でカメラグループを切換えたりはできるので、積極的に今現在見たいカメラを指定して映像を見ることは可能である。
【００１９】
図５は本発明の基本となる概念を説明するタイムチャートである。表示映像は一定時間間隔で対応するカメラグループに切換わるが、その時間で表示する映像は、例えば５０１で表示されるものは５０２の時間区間の映像となる。即ち、この図の例であれば２倍速の早送り再生を行うことで、全ての時間の映像を表示しようとする。当然、カメラ数が増えて、カメラグループが３つになれば基本的に３倍速で映像表示を行うことになるし、４つになれば４倍速となる。
【００２０】
早送り再生なので完全なライブ映像とはならないが、図５の５０１と５０２の時間関係を見たらわかるように、表示時間区間の最初の時点での再生画像は表示時間区間の時間単位だけ遅れており、再生が進むにつれ遅れが少なくなり、再生終了時において、現時刻映像に再生画像が追いつく形となる。
【００２１】
図６は本発明の基本的な構成図である。ライブ映像は蓄積手段６０１により常に蓄積されている。カメラ選択手段６０４により一定時間毎に自動的に表示対象カメラが複数選択される。６０４は全てのカメラの再生制御手段６０２に対し、カメラ選択通知あるいはカメラ非選択通知を行う。カメラ選択通知の際には、再生制御手段６０２に対して再生終了予定時刻を通知する。再生制御手段６０２は、前回に蓄積再生を行った映像の最後の時刻から、再生終了予定時刻までの映像を、今回の再生終了予定時刻から判断できる再生期間の時間に基づき、再生速度の算出を行い、その再生速度で蓄積映像の再生を開始する。
【００２２】
カメラ選択通知を受けたカメラからの蓄積映像の再生映像は映像切換手段６０３を通過してカメラ選択手段に供給される。映像切換手段６０３は再生制御手段が蓄積再生映像を供給している際には、その映像を出力し、蓄積再生映像が供給されない際には、ライブ映像を選択して出力する。
【００２３】
カメラ選択手段６０４は現在表示対象となっているカメラからの映像を受けて、映像表示手段６０５に対し、マルチ画面への映像表示を依頼する。
【００２４】
また、蓄積映像の再生に関しては、単純に早送りを行うだけでなく、映像の変化がない蓄積映像に関しては、省略することで、再生速度を制御したり、ライブを表示したりすることが考えられる。具体的には、蓄積手段６０１において画像の時系列の変化を検知する手段を組み入れる。映像を複数の矩形ブロックを分割し、ブロック単位で例えばヒストグラムなどのパラメータの値を比較して、パラメータが異なるブロックの数がある一定値を超えたら、変化を検知したことになる。変化が検出できない連続区間のテーブル情報も同時に蓄積映像に関連づけて記録する。
【００２５】
再生制御手段６０２は再生開始時点での再生対象となる図７の時間区間７０１における蓄積映像を前記、変化が検出できない連続区間のテーブルを参照しつつ、ある時間単位（例えば１秒程度）より大きい変化なし部分を抽出し、その変化なし部分は前記時間単位になるように間引き処理を行い、蓄積映像７０１をより時間区間の短い映像７０３に変換する。
【００２６】
再生制御手段６０２は、７０３と７０２を加えた蓄積映像が、表示時間区間で表示が行われるように、再生速度を決定する。時間区間７０２に関しては、同様に再生時に変化なし部分を間引くような処理を、蓄積再生を行いながら実行し、最終的に現時刻に再生画像が追いついた時点で、表示時間に余りがあればライブ映像に切換わる。実際には映像切換手段６０３に対し、再生制御手段からの映像が供給されなくなった時点で、ライブ映像に切換わることになる。
【００２７】
実際に本方式でのカメラ巡回を利用して監視を行う場合、この巡回方式を停止する手段を設けることが現実的である。実際にはオペレータにより、ＧＵＩによる指示が行われ、ライブ表示に切換わる操作手段を提供する。また、本方式での巡回方式を再開する操作手段を提供する。この際、停止から、再開までのライブ表示の区間では、全てのカメラのライブがオペレータによって確認されるわけではなく、一部のカメラが選択的に表示されることになる。この際のライブ映像表示区間では、カメラ選択手段６０４から映像切換手段６０３に対して、指示が出され強制的にライブ映像となる。この期間の映像は６０１によって蓄積されており、蓄積映像として保存される。
【００２８】
尚、蓄積映像は蓄積容量の関係から、古いものから自動で削除されるように実装される。しかし、本方式での巡回中において巡回が停止された場合には、停止された表示区間の蓄積映像は後に確認が出来るように、自動削除の対象にならないようにする。
【００２９】
また、監視ではセンサーなどを利用して、監視すべき状況であることを判断することが多い。センサーからの接点入力に基づき、予め対応付けたカメラの映像が表示されるということが従来から行われている。即ち、カメラ巡回などのカメラをスキャンする動作は、接点入力が発生した時点で、一時停止し、対応付けられたカメラの映像が表示されていない場合には、そのカメラのライブ映像がカメラ選択手段により選択される。
【００３０】
本方式を利用した巡回監視を行う監視システムにおいて、接点入力が発生した際の振る舞いについて説明する。接点入力が発生した時点で、手動で巡回状態を一旦停止するのと同様に、本巡回方式は自動的に一旦停止状態となる。接点入力が発生した場合には、予め接点に対応付けられたカメラが自動的にカメラ選択手段６０４により選択される。
【００３１】
（実施例２）
もう一つの実施形態として、センサー入力や手動操作により、あるカメラのライブ映像を表示すべき際にも、巡回が完全に停止しないような実現方法を説明する。図８は本実施例におけるカメラグループの概念を示す図である。画面に同時表示可能なカメラ数の半分でカメラグループを構成する。このようにすると２つのカメラグループが同時表示可能となり、巡回中は２つを単位にしてカメラグループを切換える。
【００３２】
巡回中にあるカメラに注目したい場合は、画面中の対応する映像をマウスなどのポインティングデバイスによりダブルクリックなどを使用して指示する、また、センサーなどの入力が発生した場合には、予め個々のセンサー毎に対応付けたカメラが指示されたことになる。このように注目すべきカメラが発生した時点で、画面の半分を利用して、カメラグループを１つ単位で切換える巡回に変更される。即ち、画面の全てを利用する巡回に比べて、画面の半分を利用する際には、再生速度は２倍になる。注目すべきライブ映像は、さらに画面のもう一方の半分に表示される。例えば図９のaまたはbの表示領域に表示される。図９ではライブの表示領域と巡回用の表示領域の映像表示サイズが、ライブ表示を注視して確認したいことを考慮して異なっているが、別に同じレイアウトであってもかまわない。手動で巡回モードを再開する前に、再度ライブ表示を行う操作やセンサー入力が発生すると、ライブ表示領域の最も古い時点でライブ表示を行った表示枠に順にカメラからのライブ映像が表示されることになる。
【図面の簡単な説明】
【００３３】
【図１】本実施例のシステム構成図
【図２】従来の監視システム構成図
【図３】従来例のタイムチャート
【図４】カメラグループの概念図
【図５】本発明のタイムチャート
【図６】本発明の構成図
【図７】本発明のタイムチャート（変化検知を行う場合）
【図８】実施例２のカメラグループの概念図（巡回中）
【図９】実施例２のカメラグループの概念図（ライブ表示）
【図１】
2005167439.tif 000003
【図２】
2005167439.tif 000004
【図３】
2005167439.tif 000005
【図４】
2005167439.tif 000006
【図５】
2005167439.tif 000007
【図６】
2005167439.tif 000008
【図７】
2005167439.tif 000009
【図８】
2005167439.tif 000010
【図９】
2005167439.tif 000011