(57)【要約】【課題】  映像監視ネットワークとセンサネットワークの独立性を維持しながら、効率的に画像を抽出することのできる画像管理システムを実現する。【解決手段】  画像記録手段２１−１〜２１−ｎがカメラ等撮像装置で撮影した画像を記録し、センサログ記録手段２２−１〜２２−ｎがセンサノードからのイベント情報を記録し、検索条件入力手段２３によって一次検索条件を入力すると、二次検索条件生成手段２６が該一次検索条件から二次検索条件を自動生成し、該二次検索条件に基づいて画像検索手段２５が画像記録手段２１−１〜２１−ｎから画像を検索し、画像表示手段２４が検索して抽出された画像を表示する。【選択図】  図１
2008078954.tif 000002
【特許請求の範囲】
【請求項１】
検索条件に合致した画像を検索して表示する画像管理システムにおいて、
画像を記録する画像記録手段と、
センサが検出したイベント情報を記録するセンサログ記録手段と、
検索条件を入力する検索条件入力手段と、
検索入力手段から入力された一次検索条件とセンサログ記録手段から二次検索条件を自動生成する二次検索条件生成手段と、
一次又は二次検索条件により画像記録手段から画像を検索する画像検索手段と、
画像を表示する画像表示手段と、
を備えることを特徴とする画像管理システム。
【請求項２】
請求項１に記載の画像管理システムにおいて、
前記二次検索条件には、カメラIDと時刻情報が含まれることを特徴とする画像管理システム。
【請求項３】
所定の領域を撮像する撮像手段と、
撮像手段から出力される画像を記録する画像記録手段と、
人物により保持される無線端末装置と、
無線端末装置から無線により送信される信号を受信する無線受信手段と、
無線受信手段により受信された信号に基づいて人物の入出域情報を管理する情報管理手段と、
を備える画像管理システムであって、
人物の入出域情報に基づいて、所望の人物が撮像されている画像のみを記録手段より抽出する、
ことを特徴とする画像管理システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例えば、監視カメラにより撮像された画像を管理する画像管理システムに関し、特に、撮像装置単位に時系列記録された画像から、検索条件に合致する画像のみを抽出する画像管理システムに関する。
【背景技術】
【０００２】
監視カメラの記録画像から特定の人や物の軌跡をたどるには、監視カメラ毎に時系列記録された画像から特定の人あるいは物が写った画像を選択し、これを対象となるすべてのカメラについておこなった後、抽出した画像を時系列に並べ変える作業を行うのが一般的である。
【０００３】
従来の技術は上記作業を効率的に実現するGUI環境を提供するものが主で、画像の選択については人が目視で確認して作業をおこなっていた。
【０００４】
なお、上記従来技術は、発明者が既に知られていることと認識して記述したものであるが、適切な文献が見出せなかったので、従来技術文献情報の記載をしていない。
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、上記画像の選択作業は、対象となるすべての記録画像を目視で確認するため、人手と時間がかかるという問題があった。
【０００６】
本発明は、このような従来の事情に鑑み為されたもので、効率的に画像を抽出することのできる画像管理システムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記目的を達成するため、本発明に係る画像管理システムは、検索条件に合致した画像を抽出する画像管理システムであって、画像を記録する画像記録手段と、センサが検出したイベント情報を記録するセンサログ記録手段と、検索条件を入力する検索条件入力手段と、検索入力手段から入力された一次検索条件とセンサログ記録手段から二次検索条件を自動生成する二次検索条件生成手段と、一次又は二次検索条件により画像記録手段から画像を検索する画像検索手段と、画像を表示する画像表示手段と、から構成される。
【０００８】
さらに、本発明に係る画像管理システムでは、前記二次検索条件には、カメラIDと時刻情報が含まれることを特徴とする。
【０００９】
また、上記目的を達成するため、本発明に係る画像管理システムは、所定の領域を撮像する撮像手段と、撮像手段から出力される画像を記録する画像記録手段と、人物により保持される無線端末装置と、無線端末装置から無線により送信される信号を受信する無線受信手段と、無線受信手段により受信された信号に基づいて人物の入出域情報を管理する情報管理手段と、から構成され、人物の入出域情報に基づいて、所望の人物が撮像されている画像のみを記録手段より抽出することができる。
【発明の効果】
【００１０】
以上説明したように、本発明に係る画像管理システムによると、従来人手が必要とされていた画像の選択作業を、センサを利用して自動で行うようにしたため、効率的に検索条件に合致する画像を抽出することができる。
【発明を実施するための最良の形態】
【００１１】
本発明に係る実施例について図面を参照して説明する。
【００１２】
図２は本発明の一実施例として入退室管理システムを説明するための図である。図２において、３つの部屋Ｒｏｏｍ１、Ｒｏｏｍ２、Ｒｏｏｍ３の出入り口には無線受信手段として、固定型センサノード５１，５２，５３が設置され、各部屋には内部を撮像する撮像手段として、カメラ１（ＩＤ番号１），カメラ２（ＩＤ番号２），カメラ３（ＩＤ番号３）が設置されている。また、人物は無線端末装置として、移動型ノード１０１，１０２，１０３を各々保持している。本実施例において、固定型センサノードは移動型ノードのIDを読取ることで、移動型ノードの入退室を検出することができる。このような公知例としてはＲＦ−ＩＤを利用した入退室管理システムがある。
【００１３】
移動型ノード１０１〜１０３には、各人物にユニークに割り当てられた識別情報（ＩＤデータ）がメモリに予め書き込まれている。
【００１４】
移動型ノード１０１〜１０３は、アンテナ部を有し、ＩＤデータを固定型センサノード５１〜５３に対して間欠的に無線送信する機能を有している。移動型ノードからの無線送信としては、例えば、パッシブ型ＲＦ−ＩＤのように固定型センサノードからの送信電波を利用する方式が使用されてもよく、或いは、アクティブ型ＲＦ−ＩＤやＺｉｇＢｅｅ端末のように電源を有した移動型ノードから電波を発する方式が使用されてもよい。また、移動型ノードからの送信のタイミングとしては、固定型センサノードからのリクエストに応答する受動的な方式が使用されてもよく、或いは、移動型ノードから能動的に送信を行う方式が使用されてもよい。
【００１５】
カメラ１〜３は、撮像部と映像データ出力部を有する装置である。カメラ１〜３としては、例えば、アナログタイプのカメラが用いられてもよく、或いは、撮像部と映像データ出力部に加えて、撮影した映像をデジタル化して必要に応じて圧縮処理を施す画像コーデックを備えたネットワークタイプのカメラが用いられてもよい。或いは、これらのカメラにおいて、更に、パン・チルト・ズームのいわゆるＰＴＺ制御部を備えた雲台付きカメラが用いられても良い。また、カメラの種類としては、特に限定はなく、例えば、赤外線カメラ等の特殊なカメラが用いられてもよい。
【００１６】
なお、本実施例では、３つの部屋の場合を示したが、部屋数は単数でも複数でもよい。また、１つの部屋に対して１台のカメラを設置した場合を示したが、１つの部屋に対して複数のカメラを設置してもよい。
【００１７】
以下、日時：２００６年７月２０日１０：００〜１０：３０、場所:Ｒｏｏｍ１、Ｒｏｏｍ２、Ｒｏｏｍ３における人物：日立花子の画像を検索する場合について従来技術との対比で説明する。
【００１８】
図３は従来の画像管理システムの構成例である。図３の画像管理システムは、カメラ等の撮像装置で撮影した画像を記録する画像記録手段２１−１〜２１−ｎと、検索条件を入力する検索条件入力手段２３と、画像記録手段から画像を検索する画像検索手段２５と、画像を表示する画像表示手段２４から構成される（図３に示される画像検索装置２００のことである）。
【００１９】
また他の構成例として、図３に示すように、カメラ等撮像装置１１−１〜１１−ｎも含めて画像管理システムとしてもよく、カメラ等撮像装置１１−１〜１１−ｎは、例えば、映像監視ネットワーク３１により、対応する画像記録手段２１−１〜２１−ｎに接続される。
【００２０】
図３において、検索条件は検索条件入力手段２３から入力され、入力された検索条件は画像検索手段２５に供給される。画像検索手段２５は、供給された検索条件に合致した画像を画像記録手段２５から読み出し、読出した画像を画像表示手段２４に供給する。画像表示手段２４は、供給された画像を表示する。従来の画像管理システムでは、カメラ等の撮像装置１１−１〜１１−ｎ毎に時刻を指定して画像を検索する方法が行われている。
【００２１】
図４は、図３の検索条件入力手段２３における検索画面６１の一例である。検索条件としてカメラＩＤと時刻が入力されている。
【００２２】
図５（ａ）は従来例の画像検索結果を表示したものである。従来では、図５（ａ）の示す画像から人が目視により人物：日立花子の画像を切り出し、図５（ｂ）のように編集する。
【００２３】
図１には、本発明の一実施例に係る画像管理システムの構成例が示される。
【００２４】
図１の画像管理システムは、カメラ等の撮像装置で撮影した画像を記録する画像記録手段２１−１〜２１−ｎと、センサノードからのイベント情報を記録するセンサログ記録手段２２−１〜２２−ｎと、検索条件を入力する検索条件入力手段２３と、検索条件入力手段２３から入力された一次検索条件から二次検索条件を生成する二次検索条件生成手段２６と、画像記録手段２１−１〜２１−ｎから画像を検索する画像検索手段２５と、画像を表示する画像表示手段２４から構成される（図３に示される画像検索装置１００のことである）。
【００２５】
また他の構成例として、図１に示されるように、映像監視ネットワークシステム３００も含めて画像管理システムとしてもよく、カメラ等撮像装置１１−１〜１１−ｎが、例えば、映像監視ネットワーク３１により、対応する画像記録手段２１−１〜２１−ｎに接続され映像監視ネットワークシステム３００を構築する。
【００２６】
さらに他の構成例として、図１に示されるように、センサネットワークシステム４００も含めて画像管理システムとしてもよく、センサノード１２−１〜１２−ｎが、例えば、センサネットワーク３２により、対応するセンサログ記録手段２２−１〜２２−ｎに接続されセンサネットワークシステム４００を構築する。
【００２７】
本実施例では、従来の画像管理システムの構成に加えて、二次検索条件生成手段２６、センサログ記憶手段２２−１〜２２−ｎを備えている。
【００２８】
図１において、検索条件は検索条件入力手段２３から入力され、入力された検索条件は画像検索手段２５に供給される。画像検索手段２５は必要に応じて、入力された検索条件である一次検索条件を二次検索条件生成手段２６に供給する。二次検索条件生成手段２６は、供給された一次検索条件をもとにセンサログ記録手段２２−１〜２２−ｎから記録情報を読出し、二次検索条件を自動生成し、自動生成した二次検索条件を画像検索手段２５に供給する。画像検索手段２５は、供給された検索条件に合致した画像を画像記録手段２１−１〜２１−ｎから読み出し、読出した画像を画像表示手段２４に供給する。画像表示手段２４は、供給された画像を表示する。
【００２９】
図６は本発明の一実施例に係る画像管理システムの検索条件入力手段２３における検索画面６２の一例である。ここに検索条件は、氏名が日立花子である人物の２００６年７月２０日１０：００−１０：３０でのＲｏｏｍ１、Ｒｏｏｍ２、Ｒｏｏｍ３における画像を検索するものである。上記検索条件は検索条件入力手段２３から画像検索手段２５に供給される。
【００３０】
ここで、図１０は本発明の特徴的な部分である二次検索条件生成手段２６（図１０（ａ））と画像検索部（図１０（ｂ））の処理フローである。
【００３１】
図１０（ａ）のステップＳ１１において、画像検索手段２５は供給された検索条件、氏名：日立花子、日時：２００６／７／２０ １０：００〜２００６／７／２０ １０：３０、場所：Ｒｏｏｍ１、Ｒｏｏｍ２、Ｒｏｏｍ３を解析する。ステップＳ１２で、画像検索手段２５は、画像記録手段２１−１〜２１−３を検索するのに必要なカメラIDが検索条件に含まれていないため画像の検索ができないと判断したとき、供給された検索条件を二次検索条件生成手段２６に供給する。
【００３２】
図１０（ｂ）のステップ１の処理で、二次検索条件生成手段２６は、供給された検索条件を解析し、検索条件に含まれる項目をセンサログ記録手段２２−１〜２２−３で使用している対応するＩＤに変換する。
【００３３】
ここで、図７（ａ）は、検索条件の項目と人物が保持する移動型ノードで使用しているID：１０１〜１０３の対応テーブル、図７（ｂ）は、センサログ記録手段２２−１〜２２−３で使用しているID：５１〜５３とロケーション情報の対応テーブル、図７(ｃ)は、画像検索手段２５で使用しているカメラＩＤ：１〜３とロケーション情報の対応テーブルの一例である。本実施例では対応テーブルは二次検索条件生成手段２６に備えられている。二次検索条件生成手段２６は対応テーブル図７（ａ）を使用して、氏名：日立花子を対応する移動型ノードのＩＤ：１０１に変換する。
【００３４】
図８はセンサログ記録手段２２−１〜２２−３に記録されているログの一例である。各センサノードからのイベントを時刻順に記録している。
【００３５】
次に図１０（ａ）のステップＳ２において、二次検索条件生成手段２６は、センサログ情報記録手段２２−１〜２２−３から、検索条件の日時に該当するログのなかから、ＩＤ：１０１を含むものを読み出す（図９（ａ））。
【００３６】
ステップＳ３の処理で、二次検索条件生成手段２６は、読み出したログ （図９（ａ））を対象として、対応テーブル図７（ｂ）を使用して、イベント発生元のセンサノードのロケーション情報を取得する。
【００３７】
ステップＳ４の処理で、二次検索条件生成手段２６は、センサノードのロケーション情報から、対応テーブル図7（ｃ）を使用して、対応するカメラIDを取得し、ログとカメラIDの対応したデータを作成する（図９（ｂ））。
【００３８】
さらに、二次検索条件生成手段２６は、ログとカメラIDの対応したデータを、画像検索手段２５が、検索に使用できる形式に変換し、これを二次検索条件として、画像検索手段２５に供給する（図９（ｃ））。
【００３９】
図１０（ｂ）のＳ１３において、画像検索手段２５は二次検索条件生成手段２６から供給された二次検索条件に合致した画像を画像記録手段２１−１〜２１−３から読み出し、読出した画像を画像表示手段２４に供給する。画像表示手段２４は、供給された画像を表示する。以上により、図５（ｂ）の画像が表示される。
【００４０】
図１１は本実施例の処理シーケンスの一例である。本発明の特徴的な部分である（Ａ）を従来シーケンスに追加することで、処理を実現している。
【００４１】
このように本実施例によれば、従来人手を必要としていた作業をおこなうことなく、所望の人物が撮像されている画像のみを記録手段より抽出して表示することが可能となる。
本発明は、映像監視ネットワークシステムとセンサネットワークシステムの独立性を維持しながら、画像検索において、双方の記録データを利用することにより、効率的な画像管理システムを実現するものである。
また、既存の画像管理システムからセンサ情報を利用した効率的な画像管理システムへの移行が低コストで可能となる。
そして、人にやさしいユーザインタフェースを提供できるので、画像検索作業において、ヒューマンエラーの発生抑止効果を期待できる。
【００４２】
さらに、独立した映像監視ネットワークシステムとセンサネットワークシステムに接続できる装置であるため、双方のシステムの追加・変更は各々独立しておこなえる利点がある。
【００４３】
また、上記装置における各手段は各々独立したハードウェアで実現されなくてもよく、それぞれ任意の組み合わせによって１つのハードウェアで複数の手段を実現してもよい。
【００４４】
なお、本実施例では、画像管理システムとして入退室管理システムの例を示してあり、画像検索対象として人物を用いており、人物により保持される移動型センサノード１０１〜１０３の無線端末装置から、無線によって送信される信号を受信する固定型センサノード５１〜５３の機能により無線受信手段が構成されており、所定の領域を撮像するカメラ１〜３の機能により撮像手段が構成されている。
【００４５】
また、本実施例では、画像検索対象として人物を設定したが、画像検索対象は人物ではなく、動物や物、車など移動する物体でもよい。
【００４６】
ここで、本発明に係るシステムや装置などの構成としては、必ずしも以上に示したものに限られず、様々な構成が用いられてもよい。また、また、本発明は、例えば、本発明に係る処理を実行する方法或いは方式や、このような方法や方式を実現するためのプログラムや当該プログラムを記録する記録媒体などとして提供することも可能であり、また、種々な装置やシステムとして提供することも可能である。
【００４７】
また、本発明の適用分野としては、必ずしも以上に示したものに限られず、本発明は、種々な分野に適用することが可能なものである。応用例として、物流や駐車場、道路などの管理システムや、子供や痴呆性徘徊者、試験会場などの監視システムとして実現することも可能である。
【００４８】
また、本発明に係るシステムや装置などにおいて行われる各種の処理としては、例えばプロセッサやメモリ等を備えたハードウェア資源においてプロセッサがＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）に格納された制御プログラムを実行することにより制御される構成が用いられてもよく、また、例えば当該処理を実行するための各機能手段が独立したハードウェア回路として構成されてもよい。
【００４９】
また、本発明は上記の制御プログラムを格納したフロッピー（登録商標）ディスクやＣＤ（Ｃｏｍｐａｃｔ  Ｄｉｓｃ）−ＲＯＭ等のコンピュータにより読み取り可能な記録媒体や当該プログラム（自体）として把握することもでき、当該制御プログラムを当該記録媒体からコンピュータに入力してプロセッサに実行させることにより、本発明に係る処理を遂行させることができる。
【図面の簡単な説明】
【００５０】
【図１】本発明の一実施例に係る画像管理システムの構成例を示す図である。
【図２】本発明の一実施例に係る画像管理システムの一例を説明するための図である。
【図３】画像管理システムの構成例を示す図である。
【図４】検索条件入力手段における検索画面の一例を示す図である。
【図５】検索条件入力手段における画像検索結果の一例を示す図である。
【図６】本発明の一実施例に係る検索条件入力手段における検索画面の一例を示す図である。
【図７】本発明の一実施例に係る画像検索に必要な対応テーブルを示す図である。
【図８】本発明の一実施例に係るセンサログ記録手段に記録されているログの一例を示す図である。
【図９】本発明の一実施例に係る二次検索条件生成手段を説明するための図である。
【図１０】本発明の一実施例に係る二次検索条件生成手段と画像検索部の処理フローを示す図である。
【図１１】本発明の一実施例に係る処理シーケンスの一例を示す図である。
【符号の説明】
【００５１】
１〜３：カメラ１〜３のＩＤ、１１−１〜１１−ｎ：カメラ等撮像装置、１２−１〜１２−ｎ：センサノード、２１−１〜２１−ｎ：画像記録手段、２２−１〜２２−ｎ：センサログ記録手段、２３：検索条件入力手段、２４：画像表示手段、２５：画像検索手段、２６：二次検索条件生成手段、３１：映像監視ネットワーク、３２：センサネットワーク、５１〜５３：固定型センサノードＩＤ、６１：従来例の検索画面、６２：本実施例の検索画面、１０１〜１０３：移動型ノードＩＤ、２００：画像検索装置、３００：映像監視ネットワークシステム、４００：センサネットワークシステム、Ｒｏｏｍ１〜Ｒｏｏｍ３：部屋
【図１】
2008078954.tif 000003
【図２】
2008078954.tif 000004
【図３】
2008078954.tif 000005
【図４】
2008078954.tif 000006
【図５】
2008078954.tif 000007
【図６】
2008078954.tif 000008
【図７】
2008078954.tif 000009
【図８】
2008078954.tif 000010
【図９】
2008078954.tif 000011
【図１０】
2008078954.tif 000012
【図１１】
2008078954.tif 000013