(57)【要約】【課題】  各送信装置の映像の注目度に応じて、各送信装置の映像の表示と動き検出処理の実行間隔及びパラメータを制御することで、処理負荷を抑えつつも映像の表示と動き検出の精度のバランスを適切に保つことができる高機能な多画面映像監視装置を提供する。【解決手段】  映像入力部１０１は、入力される複数系統の映像データを後段に出力する。動き検出部１０２は、映像入力部１０１より各系統の映像データを入力し、系統毎に映像の動き検出を行ない検出結果を制御部１０４に通知する。映像出力部１０３は、映像入力部１０１からの複数系統の映像データや動き検出結果を入力し、各系統の映像データや動き検出結果をモニタ１０６へ出力する。制御部１０４は、映像入力部１０１、動き検出部１０２、映像出力部１０３をそれぞれ制御する。【選択図】  図１
2008252668.tif 000002
【特許請求の範囲】
【請求項１】
複数の映像信号を入力する映像入力手段と、
複数の映像信号を出力する映像出力手段と、
映像中の被写体の動きを検出する動き検出手段と、
それぞれの入力映像の注目度により、映像出力の実行タイミングと動き検出の実行タイミングを制御する制御手段と、
を備える多画面映像監視装置。
【請求項２】
前記制御手段はそれぞれの入力映像の注目度により、動き検出のパラメータも併せて制御することを特徴とする請求項１に記載の多画面映像監視装置。
【請求項３】
前記制御手段はそれぞれの入力映像の注目度により、映像出力のパラメータも併せて制御することを特徴とする請求項１または２に記載の多画面映像監視装置。
【請求項４】
前記映像入力手段に入力される映像信号は符号化されていることを特徴とし、符号化された映像信号の復号化を行なう映像復号手段を備える請求項１ないし３のいずれかに記載の多画面映像監視装置。
【請求項５】
複数の映像信号を入力する映像入力ステップ手段と、
複数の映像信号を出力する映像出力ステップと、
映像中の被写体の動きを検出する動き検出ステップと、
それぞれの入力映像の注目度により、映像出力の実行タイミングと動き検出の実行タイミングを制御する制御ステップと、
を備える多画面映像監視方法。
【請求項６】
前記制御ステップはそれぞれの入力映像の注目度により、動き検出のパラメータも併せて制御することを特徴とする請求項５に記載の多画面映像監視方法。
【請求項７】
前記制御ステップはそれぞれの入力映像の注目度により、映像出力のパラメータも併せて制御することを特徴とする請求項５または６に記載の多画面映像監視方法。
【請求項８】
前記映像入力ステップに入力される映像信号は符号化されていることを特徴とし、符号化された映像信号の復号化を行なう映像復号ステップを備える請求項５ないし７いずれかに記載の多画面映像監視方法。
【請求項９】
多画面映像監視制御用にコンピュータで実行されるプログラムであって、前記プログラムは複数の映像信号を入力し、複数の映像信号を出力し、映像中の被写体の動きを検出し、それぞれの入力映像の注目度により、映像出力の実行タイミングと動き検出の実行タイミングを制御するプログラム。
【請求項１０】
前記プログラムは、それぞれの入力映像の注目度により、動き検出のパラメータも併せて制御することを特徴とする請求項９に記載のプログラム。
【請求項１１】
前記プログラムは、それぞれの入力映像の注目度により、映像出力のパラメータも併せて制御することを特徴とする、請求項９または１０に記載のプログラム。
【請求項１２】
前記プログラムは、入力される映像信号は符号化されていることを特徴とし、符号化された映像信号の復号化を行なう請求項９ないし１１のいずれかに記載のプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像監視システム等に利用される多画面映像監視装置に関する。
【背景技術】
【０００２】
従来の多画面映像監視装置では、カメラで監視領域を撮像し、撮像データを符号化し、符号化データをネットワークに送信する送信装置と、１つまたは複数の送信装置の符号化データを受信し、符号化データを復号して、１つまたは複数のカメラ映像を表示する受信装置を利用して監視を行う技術が知られており、このような技術として特許文献１に示すようなものがある。
【０００３】
特許文献１は、優先度に応じて、送信装置毎に送信する映像の大きさとフレームレートを制御して送信し、受信した複数映像を同一画面上で合成して表示して監視を行なうものである。
【特許文献１】特開２００２−３５１４３８号公報（４−１０頁、第１図）
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来の多画面映像監視装置においては、複数の送信装置から送信される符号化データについて、受信装置ではデータの受信処理及び復号処理及び表示処理を時分割で行なう必要があるため処理負荷が高くなり、処理遅延の蓄積を起こしてしまうことで各カメラからの映像を滑らかに表示できなかったり、一部または全ての送信装置のデータが欠落してしまうことで映像を正常に表示できなかったりする可能性がある。
【０００５】
また、受信装置に送信装置毎に被写体の動きを検出する処理を行なう場合においては、特許文献１にもあるように、優先度に応じて送信装置毎に送信する映像の大きさとフレームレートを制御する方法では、注目している送信装置の映像については映像の大きさとフレームレートを上げ、注目していない送信装置の映像については映像の大きさとフレームレートを下げるということになるが、この時、動き検出処理の細かさと実施間隔は各送信装置の映像の大きさやフレームレートに依存するため、優先度が低い送信装置の映像の動き検出処理の検出精度は、優先度が高い送信装置の映像の動き検出処理の検出精度と比較して、悪くなる傾向にある。更には、優先度が低い送信装置の映像は先述のとおり注目されていないために、動き検出処理の精度が低く検出漏れを起こしたとしても、監視者はそれに気づかない可能性が考えられる。
【０００６】
本発明は、従来の問題を解決するためになされたもので、各送信装置の映像の注目度に応じて、各送信装置の映像の表示と動き検出処理の実行間隔及びパラメータを制御することで、処理負荷を抑えつつも映像の表示と動き検出の精度のバランスを適切に保つことができる高機能な多画面映像監視装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の多画面映像監視装置は、複数の映像信号を入力する映像入力手段と、複数の映像信号を出力する映像出力手段と、映像中の被写体の動きを検出する動き検出手段と、それぞれの入力映像の注目度により、映像出力の実行タイミングと動き検出の実行タイミングを制御する制御手段とを備え、各入力映像の注目度に応じて、映像の表示と動き検出処理の実行間隔を制御することで、処理負荷を抑えつつも映像の表示と動き検出の精度のバランスを適切に保つことが出来る。
【０００８】
本発明の多画面映像監視装置は、前記制御手段がそれぞれの入力映像の注目度により動き検出のパラメータも併せて制御することで、映像の表示と動き検出の精度のバランスをより適切に保つことが出来る。
【０００９】
本発明の多画面映像監視装置は、前記制御手段がそれぞれの入力映像の注目度により映像出力のパラメータも併せて制御することで、注目度に応じた映像表示を実現出来る。
【００１０】
本発明の多画面映像監視装置は、前記映像入力手段に入力される映像信号が符号化されていることを特徴とし、符号化された映像信号の復号化を行なう映像復号手段を備え、符号化された映像信号についても対応することで、映像の表示と動き検出の実行間隔を短縮することが出来る。
【発明の効果】
【００１１】
本発明によれば、各入力映像の注目度に応じて、映像の表示と動き検出処理の実行間隔を制御することで、処理負荷を抑えつつも映像の表示と動き検出の精度のバランスを適切に保つことが出来る多画面映像監視装置を提供することができるものである。
【発明を実施するための最良の形態】
【００１２】
以下、本発明の実施の形態について、図面を用いて説明する。
【００１３】
（実施の形態１）
図１は、本発明の第１の実施の形態の多画面映像監視装置の構成を示すブロック図である。図１において、多画面映像監視装置１０は、映像入力部１０１、動き検出部１０２、映像出力部１０３、制御部１０４を備えている。また、多画面映像監視装置１０には複数系統のアナログカメラ１０５、及びモニタ１０６が接続されている。
【００１４】
映像入力部１０１は、複数接続されたアナログカメラ１０５より入力される複数系統の映像データを後段に出力する。なお映像入力部１０１は、一時的に各系統の映像データを保存するバッファを備えており、複数系統のアナログカメラ１０５からの複数系統の映像データの取り込みと、後段への複数系統の映像データの出力を並行して行なう。動き検出部１０２は、一時的に各系統の映像データを保存するバッファを備えており、映像入力部１０１より各系統の映像データを入力し、系統毎に映像の動き検出を行ない検出結果を制御部１０４に通知する。映像出力部１０３は、一時的に各系統の映像データを保存するバッファを備えており、映像入力部１０１からの複数系統の映像データや動き検出結果を入力し、各系統の映像データや動き検出結果をモニタ１０６へ出力する。制御部１０４は、映像入力部１０１、動き検出部１０２、映像出力部１０３をそれぞれ制御する。アナログカメラ１０５は、映像を撮影して映像データを生成し、映像データを符号化を行なわずにそのまま出力する機器である。モニタ１０６は、ＰＤＰや液晶モニタやＣＲＴなどの映像データを表示できる機器である。
【００１５】
以上のように構成された多画面映像監視装置１０の動作について説明する。映像入力部１０１は制御部１０４から各系統毎にアナログカメラ１０５に関する設定を受け、複数系統のアナログカメラ１０５より映像データを取り込み、動き検出部１０２と映像出力部１０３に映像データを引き渡す。動き検出部１０２は、系統毎に動き検出処理を実施する間隔や空間解像度、演算方式や検出閾値などを制御部１０４から指示され、動き検出処理を行い、検出結果を制御部１０４へ通知する。動き検出部１０２における動き検出処理の例としては、映像データを時間的に連続する静止画データ群として扱い、それら静止画データ群より動き検出対象とする静止画データと、動き検出対象とする静止画データの時間帯から制御部１０４から指示される実施間隔だけ離れた時間帯の静止画データを抽出し、この２つの静止画データを制御部１０４から指示される空間解像度に変換し、両静止画デー
タの一部または全ての領域において制御部１０４から指示される演算方式により動き検出に必要な計算を行ない、その計算結果が制御部１０４から指示される閾値以上であった場合には動きがあると判定する方式が考えられる。なお制御部１０４から指示される演算方式の例としては、差分絶対値和などが考えられるが、本発明では特に制限を設けない。映像出力部１０３は、映像入力部１０１からの複数系統の映像データを入力し、各系統の映像データをモニタ１０６へ出力する。なお映像出力部１０３は、制御部１０４からの指示に応じて複数系統の映像データを縮小または拡大を行ない合成することで１つの映像データと見立てたり、制御部１０４より系統毎にモニタ１０６へ出力する映像データの更新間隔の指示を受け、系統毎に合成する映像データを選択したり、制御部１０４からの各系統の動き検出結果に応じて、系統毎に動き検出結果に関する情報をモニタに出力する。映像出力部１０３からモニタへの出力例について図２に示す。この例では、注目映像はカメラ２に設定されており、カメラ１及びカメラ３、カメラ４については非注目映像として扱われている。また、各カメラ毎に動き検出結果を示している。
【００１６】
続いて、図３のフロー図と図４の動き検出に設定するパラメータ例を用いて、制御部１０４が行なう処理について説明する。まず、映像入力部１０１に接続されるアナログカメラ１０５などの映像機器またはブロックに関する設定を行ない、映像入力部１０１に映像データを入力するよう指示する（ステップＳ１０１）。次に各系統の映像データの注目度に応じて、動き検出部１０２の動き検出に必要となるパラメータを図４より選択し、動き検出部１０２に指示する（ステップＳ１０２）。なお、各系統の映像データの注目度の選択は予め設定されたものを固定的に使用するのでもよいし、監視者が変更した設定を逐次反映するようにしてもよい。なお図４に示すパラメータは、注目度を２段階で設定することを前提としたものであるが、それぞれのパラメータは独立しており組合せを変えて設定することが出来る。これらのパラメータはそのまま使用してもよいし、制御部１０４が装置全体の処理負荷を考慮してこれらのパラメータを基準に修正を施して使用してもよい。続いて、動き検出部１０２による動き検出処理を実施させ動き検出結果を得る（ステップＳ１０３）。そして、各系統の映像データの注目度合いに応じて各系統の映像データ出力の調整を行なう（ステップＳ１０４）。具体的には、注目度の高い系統の映像データについては映像出力の更新間隔を高く、また高い解像度で出力するよう設定したり、注目度の低い系統の映像データについては映像出力の更新間隔を低く設定したり、また低い解像度で出力するよう設定したりすることなどが考えられる。最後に映像出力部１０３に映像データを出力するよう指示する（ステップＳ１０５）。
【００１７】
このような本発明の第１の実施の形態の多画面映像監視装置によれば、複数系統のアナログカメラの注目度に応じて、映像の表示と動き検出処理の実行間隔とパラメータを制御することで、処理負荷を抑えつつも映像の表示と動き検出の精度のバランスを適切に保つことができ、また注目度に応じた映像表示を実現することが出来る。
【００１８】
なお、本発明の第１の実施の形態においては、映像入力部１０１に接続される機器としてアナログカメラを例に挙げて説明したが、映像再生装置など映像データを出力できる機器を接続しても同様の効果が得られる。
【００１９】
またなお、本発明の第１の実施の形態においては、映像出力部１０３では各系統の映像データを合成してモニタ１０６に表示するよう図示されているが、各系統毎に個別のモニタに出力するようにしても同様の効果が得られる。
【００２０】
またなお、本発明の第１の実施の形態においては、映像出力部１０３にはモニタに映像データを表示するよう図示されているが、各系統の映像データを蓄積する機器に接続するようにしてもよい。なお、蓄積の際には映像データをそのまま蓄積する構成でもよいし、符号化して符号化データを蓄積する構成でも良い。
【００２１】
（実施の形態２）
図５は、本発明の第２の実施の形態の多画面映像監視装置の構成を示すブロック図である。なお図５において、図１に示した多画面映像監視装置１０と同一のブロックについて同一の番号を付し説明を省略する。多画面映像監視装置２０は、データ受信部２０１、デコード部２０２、図１に示した制御部１０４とは異なる機能を有する制御部２０３を備えている。また、多画面映像監視装置２０には複数系統のネットワークカメラ２０４がネットワーク２０５を介して接続されている。
【００２２】
データ受信部２０１はネットワークに接続されたネットワークカメラ２０５より入力される複数系統の符号化データを後段に出力する。なおデータ受信部２０１は、一時的に各系統の符号化データを保存するバッファを備えており、複数系統のネットワークカメラ２０５からの複数系統の符号化データの取り込みと、後段への複数系統の符号化データの出力を並行して行なう。デコード部２０２はデータ受信部２０１より入力される複数系統の符号化データを復号化し各系統毎の映像データを後段に出力する。なおデコード部２０２は、一時的に各系統の符号化データを保存するバッファを備えており、複数系統の符号化データの取り込みと、複数系統の復号化及び映像データの生成と、後段への複数系統の映像データの出力を並行して行なう。制御部２０３は、データ受信部２０１、デコード部２０２、映像入力部１０１、動き検出部１０２、映像出力部１０３をそれぞれ制御する。ネットワークカメラ２０４は、映像を撮影して映像データを生成し、映像データを符号化して符号化データを生成し、ネットワークに送信する機器である。ネットワーク２０５は、例えばＥｔｈｅｒｎｅｔ（登録商標）のような機器間でデータのやり取りができる通信網である。
【００２３】
以上のように構成された多画面映像監視装置２０の動作について説明する。データ受信部２０１は制御部２０３からネットワークを介するデータ受信に関する設定を受け、複数系統のネットワークカメラ２０４より符号化データを取り込み、デコード部２０２に複数系統の符号化データを引き渡す。デコード部は複数系統の符号化データを行ない映像データを生成し映像入力部１０１へ出力する。
【００２４】
続いて、図６のフロー図を用いて、制御部２０３が行なう処理について説明する。なお、制御部２０３は、図３に示したステップＳ１０１からステップＳ１０５の処理にステップＳ２０１とステップＳ２０２の処理を追加する構成であるため、同一のステップについては同一の番号を付し説明を省略する。まず、多画面映像監視装置２０に接続される複数系統のネットワークカメラとのデータの受信設定を行ない、データ受信部２０１に複数系統のネットワークカメラからの符号化データの受信を指示する（ステップＳ２０１）。データの受信設定としては、データ送信元の特定やデータ通信速度の設定などが考えられる。続いて、データ受信部２０１が受信した符号化データをデコード部２０２が復号化し映像データを生成するよう指示する（ステップＳ２０２）。
【００２５】
このような本発明の第２の実施の形態の多画面映像監視装置によれば、複数系統のネットワークカメラの注目度に応じて、映像の表示と動き検出処理の実行間隔とパラメータを制御することで、処理負荷を抑えつつも映像の表示と動き検出の精度のバランスを適切に保つことができ、また注目度に応じた映像表示を実現することが出来る。
【００２６】
なお、本発明の第２の実施においては、データ受信部２０１に接続される機器としてネットワークカメラを例に挙げて説明したが、蓄積符号化データ伝送装置など符号化データを出力できる機器を接続しても同様の効果が得られる。
【００２７】
またなお、本発明の第２の実施においては、映像出力部１０３では各系統の映像データ
を合成してモニタ１０６に表示するような図になっているが、各系統毎に個別のモニタに出力するようにしても同様の効果が得られる。
【００２８】
またなお、本発明の第２の実施おいては、映像出力部１０３にはモニタに映像データを表示するよう図示されているが、各系統の映像データを蓄積する機器に接続するようにしてもよい。なお、蓄積の際には映像データをそのまま蓄積する構成でもよいし、符号化して符号化データを蓄積する構成でも良い。
【産業上の利用可能性】
【００２９】
以上のように、本発明にかかる多画面映像監視装置は、複数系統のネットワークカメラの注目度に応じて、映像の表示と動き検出処理の実行間隔及びパラメータを制御することで、処理負荷を抑えつつも映像の表示と動き検出の精度のバランスを適切に保つことができ、また注目度に応じた映像表示を実現することが出来る効果を有し、映像監視システム等に利用される多画面映像監視装置として有用である。
【図面の簡単な説明】
【００３０】
【図１】本発明の第１の実施の形態における多画面映像監視装置のブロック図
【図２】本発明の第１の実施の形態における映像出力部１０３からモニタへの出力例を示す図
【図３】本発明の第１の実施の形態における制御部の動作説明のためのフロー図
【図４】本発明の第１の実施の形態における動き検出に設定するパラメータの例を示す図
【図５】本発明の第２の実施の形態における多画面映像監視装置のブロック図
【図６】本発明の第２の実施の形態における制御部の動作説明のためのフロー図
【符号の説明】
【００３１】
１０  多画面映像監視装置
１０１  映像入力部
１０２  動き検出部
１０３  映像出力部
１０４  制御部
１０５  アナログカメラ
１０６  モニタ
２０  多画面映像監視装置
２０１  データ受信部
２０２  デコード部
２０３  制御部
２０４  ネットワークカメラ
２０５  ネットワーク
【図１】
2008252668.tif 000003
【図２】
2008252668.tif 000004
【図３】
2008252668.tif 000005
【図４】
2008252668.tif 000006
【図５】
2008252668.tif 000007
【図６】
2008252668.tif 000008