(57)【要約】【課題】  カメラ台数が数百台になるような、例えば複数の店舗からなるチェーンストア、またはコンビニエンスストアなどの遠隔監視システムや、道路・河川の遠隔監視システムなどでは、番号や名称によるカメラ選択の方法で、所望のカメラや映像を選択するのは困難である、という問題があった。【解決手段】  検索する映像の特徴情報と、監視カメラの映像の特徴情報を比較して、検索する映像に近似する映像を撮影した、監視カメラを特定するので、例えば、複数の店舗からなるチェーンストアや道路・河川を監視している多数の監視カメラの中から、所望する映像を撮影する監視カメラを特定することができる。【選択図】        図１
2014179740.tif 000002
【特許請求の範囲】
【請求項１】
映像が入力される映像入力手段、
該映像入力手段で入力された検索する映像が、解析されて得られた特徴情報と、監視する領域を撮影する、監視カメラの映像の特徴情報とを比較して、比較結果を出力する特徴比較手段、
該特徴比較手段から入力された比較結果に基づいて、前記検索する映像に近似する映像を撮影した、前記監視カメラを特定するカメラ特定手段、
を備えたことを特徴とする映像検索装置。
【請求項２】
前記映像入力手段で検索する映像が入力されると、前記監視カメラの映像の特徴情報を、前記監視カメラの映像を記録する記録装置から取得して、前記特徴比較手段に出力するデータ取得手段を更に備えたことを特徴とする請求項１に記載の映像検索装置。
【請求項３】
前記データ取得手段は、前記検索する映像の位置情報に近い位置情報をもつ、前記監視カメラの映像の特徴情報を取得することを特徴とする請求項２に記載の映像検索装置。
【請求項４】
前記映像入力手段で入力された映像を解析して、特徴情報を生成する特徴情報生成手段を更に備え、
前記特徴比較手段は、前記特徴情報生成手段で生成された、前記検索する映像の特徴情報と、前記監視カメラの映像の特徴情報とを比較することを特徴とする請求項１〜３のいずれかに記載の映像検索装置。
【請求項５】
前記特徴情報生成手段は、映像の背景部分の特徴情報を生成し、
前記特徴比較手段は、前記特徴情報生成手段で生成された、前記検索する映像の背景部分の特徴情報と、前記監視カメラの映像の背景部分の特徴情報とを比較して、比較結果を出力することを特徴とする請求項４に記載の映像検索装置。
【請求項６】
前記映像入力手段で入力された映像を解析して、特徴情報を生成する特徴情報生成手段、
前記映像入力手段に検索する映像が入力されると、監視する領域を撮影する監視カメラの映像を、前記監視カメラの映像を記録する記録装置から取得して、前記映像入力手段に出力するデータ取得手段を更に備え、
前記特徴比較手段は、前記特徴情報生成手段から入力された、前記検索する映像の特徴情報と、前記監視カメラの映像の特徴情報とを比較することを特徴とする請求項１記載の映像検索装置。
【請求項７】
前記映像入力手段に、検索する映像が入力されると、該検索する映像を解析して得られる特徴情報と、前記検索する映像の位置情報に近い位置情報をもち、監視する領域を撮影する監視カメラの映像の特徴情報とを、前記監視カメラの映像を記録する記録装置から取得するデータ取得手段を更に備え、
前記特徴比較手段は、前記データ取得手段が取得した、前記検索する映像の特徴情報と、前記監視カメラの映像の特徴情報とを比較することを特徴とする請求項１記載の映像検索装置。
【請求項８】
前記特徴比較手段は、検索する映像の特徴情報と、３６０度の全方位の領域を撮影する、３６０度監視カメラで撮影された映像に対して、歪み補正が行われた映像の特徴情報を比較して、比較結果を出力し、
前記カメラ特定手段は、前記検索する映像の特徴情報を用いて、前記歪み補正が行われた映像を、方位のずれも含めて特定することで、前記３６０度監視カメラを方位も含めて特定することを特徴とする請求項１〜７のいずれかに記載の映像検索装置。
【請求項９】
前記カメラ特定手段は、特定された前記監視カメラが撮影した映像を、前記監視カメラの映像を記録する記録装置から取得して、外部に出力することを特徴とする請求項１〜８のいずれかに記載の映像検索装置。
【請求項１０】
前記カメラ特定手段は、前記記録装置から取得した、特定された２以上の前記監視カメラの映像を合成することを特徴とする請求項９記載の映像検索装置。
【請求項１１】
監視する領域を撮影する、監視カメラの映像を記録する記録手段、
前記記録手段に記録される映像を解析して、特徴情報を生成する特徴情報生成手段、
を備えた記録装置、
映像が入力される映像入力手段、
前記映像入力手段に検索する映像が入力されると、前記検索する映像の特徴情報と、前記監視カメラの映像の特徴情報を、前記記録装置から取得するデータ取得手段、
該データ取得手段で取得された、前記検索する映像の特徴情報と、前記監視カメラの映像の特徴情報とを比較して、比較結果を出力する特徴比較手段、
該特徴比較手段から入力された比較結果に基づいて、前記検索する映像に近似する映像を撮影した、前記監視カメラを特定するカメラ特定手段、
を備えた映像検索装置、から構成されることを特徴とする映像検索システム。
【請求項１２】
複数の監視カメラから、検索する映像と近似する映像を撮影した、監視カメラを特定する映像検索装置の映像検索方法において、
映像が入力される映像入力ステップ、
該映像入力ステップで入力された検索する映像が、解析されて得られた特徴情報と、監視する領域を撮影する、監視カメラの映像の特徴情報とを比較して、比較結果を出力する特徴比較ステップ、
該特徴比較ステップから入力された比較結果に基づいて、前記検索する映像に近似する映像を撮影した、前記監視カメラを特定するカメラ特定ステップ、
を備えたことを特徴とする映像検索方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数のカメラで撮影される映像から、所望の映像を検索する映像検索装置、映像検索システム、および映像検索方法に関するものである。
【背景技術】
【０００２】
従来、複数のカメラが設置されている環境において、ユーザに特定の映像やカメラを選択させる場合、例えば、特開平８−２９７７９３に示されているように、セレクトスイッチを設けるか、あるいはコンピュータディスプレイ上に擬似的なボタンを表示するなどの選択方法を用いていた。
【０００３】
【特許文献１】特開平８−２９７７９３
【発明の概要】
【発明が解決しようとする課題】
【０００４】
カメラ台数が数台程度の環境では、セレクトスイッチによる選択方法で、ユーザが所望の映像やカメラを選択することは容易であった。また、カメラ台数が十数台程度の環境であっても、コンピュータのディスプレイ上の擬似的なボタンに、ユーザが任意に命名したカメラの名称を併せて表示することにより、カメラを選択することは容易であった。
しかし、カメラ台数が数百台になるような、例えば複数の店舗からなるチェーンストア、またはコンビニエンスストアなどの遠隔監視システムや、道路・河川の遠隔監視システムなどでは、番号や名称によるカメラ選択の方法で、所望のカメラや映像を選択することが困難である、という問題があった。
【課題を解決するための手段】
【０００５】
この発明に係る映像検索装置は、映像が入力される映像入力手段、該映像入力手段で入力された検索する映像が、解析されて得られた特徴情報と、監視する領域を撮影する、監視カメラの映像の特徴情報とを比較して、比較結果を出力する特徴比較手段、該特徴比較手段から入力された比較結果に基づいて、前記検索する映像に近似する映像を撮影した、前記監視カメラを特定するカメラ特定手段、を備えたものである。
【発明の効果】
【０００６】
この発明は、検索する映像の特徴情報と、監視カメラの映像の特徴情報を比較して、検索する映像に近似する映像を撮影した、監視カメラを特定するので、例えば、複数の店舗からなるチェーンストアや道路・河川を監視している多数の監視カメラの中から、所望する映像を撮影する監視カメラを特定することができる。
【図面の簡単な説明】
【０００７】
【図１】この発明の実施の形態１における、映像検索装置１の構成図である。
【図２】この発明の実施の形態１における、映像検索装置１の利用例を示す鳥瞰図である。
【図３】この発明の実施の形態１における、映像検索装置１の動作を示すフローチャートである。
【図４】この発明の実施の形態２における、映像検索装置１の構成図である。
【図５】この発明の実施の形態２における、映像検索装置１の動作を示すフローチャートである。
【図６】この発明の実施の形態３における、映像検索装置１の利用例を示す鳥瞰図である。
【図７】この発明の実施の形態４における、映像検索装置１の構成図である。
【図８】この発明の実施の形態４における、映像検索装置１の動作を示すフローチャートである。
【発明を実施するための形態】
【０００８】
実施の形態１．
図１は、この発明の実施の形態１における、映像検索装置１の構成図である。
映像検索装置１は、携帯端末２に内蔵されている。そして、携帯端末２は、スマートフォン、タブレット端末であり、ＬＡＮ（Local Area Network）、またはインターネットなどのネットワーク３を介して、映像監視レコーダ４に接続されている。映像監視レコーダ４には、監視する領域に設置された監視カメラ５が接続され、監視カメラ５で撮影された映像が記録されている。そして、携帯端末２の映像検索装置１は、ネットワーク３を介して、映像監視レコーダ４に記録された監視カメラ５の映像を受信する。
【０００９】
映像監視レコーダ４、および監視カメラ５は、図１には１つのみを示しているが、それぞれ複数あってもよい。映像監視レコーダ４と監視カメラ５は、専用回線、またはネットワークで接続されている。映像監視レコーダ４は、記録手段に相当する。
【００１０】
次に、各構成について詳細に説明する。
まず、携帯端末２の各構成について説明する。
携帯端末２は、映像検索装置１、通信手段６、カメラ７、タッチパネルディスプレイ８、位置情報取得手段９から構成されている。
【００１１】
映像検索装置１は、カメラ７で撮影された映像が、カメラ７から入力される。また、監視カメラ５で撮影され、映像監視レコーダ４に記録された映像が、映像監視レコーダ４から入力される。そして、カメラ７で撮影された映像と、監視カメラ５で撮影された映像を比較し、カメラ７で撮影した映像に最も近い映像を撮影した、監視カメラ５を特定する。そして、特定した監視カメラ５が撮影した映像を、映像監視レコーダ４から取得して、携帯端末２のタッチパネルディスプレイ８に出力して、表示する。映像検索装置１の詳細な構成、各構成の説明は後述する。
【００１２】
通信手段６は、ネットワーク３を介して、携帯端末２の外部と情報の送受信を行う。例えば、映像監視レコーダ４からの映像を受信して、映像検索装置１に出力する。また、映像検索装置１から入力された、携帯端末２の位置情報を、映像監視レコーダ４に送信する。
カメラ７は、映像を撮影し、撮影した映像を、映像検索装置１またはタッチパネルディスプレイ８に出力する。
【００１３】
タッチパネルディスプレイ８は、カメラ７で撮影された映像、または映像検索装置１から入力された映像を表示する。また、ユーザ操作の選択肢を表示し、ユーザの選択した入力を受け付ける。
位置情報取得手段９は、ＧＰＳ（Global Positioning System）から、携帯端末２の位置情報を取得し、取得した携帯端末２の位置情報を、映像検索装置１に出力する。
【００１４】
次に、映像監視レコーダ４と監視カメラ５について説明する。
映像監視レコーダ４は、監視カメラ５で撮影された映像が入力され、その映像を記録する。そして、記録している映像を、ネットワーク３を介して、携帯端末２に送信する。映像監視レコーダ４は、記録している映像に対応して、例えば、接続されている監視カメラ５のカメラ番号、ＩＰ（Internet Protocol）アドレス、位置情報を記録している。
監視カメラ５は、監視する領域を撮影し、撮影した映像を映像監視レコーダ４に出力する。監視カメラ５と映像監視レコーダ４は、ネットワーク（図示せず）を介して接続されている。
【００１５】
次に、映像検索装置１の各構成について説明する。
映像検索装置１は、映像入力手段１０、データ取得手段１１、特徴情報生成手段１２、特徴比較手段１３、カメラ特定手段１４から構成されている。
映像入力手段１０は、携帯端末２のカメラ７から、カメラ７で撮影された映像（検索する映像）が入力される。また、データ取得手段１１に、カメラ７で撮影された映像が入力された情報を出力し、携帯端末２の位置情報に近い位置情報をもつ、監視カメラ５で撮影された映像が、データ取得手段１１から入力される。そして、入力されたカメラ７で撮影された映像と、カメラ５で撮影された映像を、特徴情報生成手段１２に出力する。
尚、ここでは、携帯端末２の位置情報に近い、位置情報の監視カメラ５が、複数台あるとする。
【００１６】
データ取得手段１１は、映像入力手段１０から、カメラ７で撮影された映像が入力された情報が入力されると、携帯端末２の位置情報を、携帯端末２の位置情報取得手段９から取得する。そして、携帯端末２の通信手段６を介して、取得した携帯端末２の位置情報を映像監視レコーダ４に送信する。そして、携帯端末２の位置情報に近い位置情報をもつ、監視カメラ５のカメラ番号と、そのカメラ番号の監視カメラ５が撮影した映像を、映像監視レコーダ４から受信する。そして、受信した監視カメラ５の映像を、映像入力手段１０に出力する。
【００１７】
尚、ここでは、データ取得手段１１が、携帯端末２の位置情報に近い、位置情報をもつ監視カメラの、カメラ番号と映像を、映像監視レコーダ４から受信するとして説明するが、データ取得手段１１が、携帯端末２の位置情報に近い位置情報の監視カメラ５を選択して、その選択した監視カメラ５の映像を映像監視レコーダ４から受信してもよい。その場合は、データ取得手段１１が、監視カメラ５のカメラ番号、ＩＰアドレス、位置情報のリストを映像監視レコーダ４から、事前に受信して記憶する。
【００１８】
特徴情報生成手段１２は、映像入力手段６から入力された映像を解析して、特徴情報を生成する。そして、生成した特徴情報を特徴比較手段１３に出力する。
【００１９】
特徴比較手段１３は、特徴情報生成手段１２から入力された、カメラ７の映像の特徴情報と、携帯端末２の位置情報に近い位置情報をもつ、複数の監視カメラ５の映像の特徴情報を比較する。そして、比較結果をカメラ特定手段１４に出力する。
【００２０】
カメラ特定手段１４は、特徴比較手段１３から入力された比較結果に基づいて、カメラ７の映像の特徴情報に、最も近い特徴情報の映像を撮影した、監視カメラ５を特定する。そして、特定した監視カメラ５のカメラ番号を、通信手段６を介して、映像監視レコーダ４に送信し、特定した監視カメラ５の映像を、映像監視レコーダ４から受信する。そして、受信した監視カメラ５の映像を、タッチパネルディスプレイ８に出力する。
以上が、映像検索装置１の各構成の説明である。
【００２１】
次に、映像検索装置１の利用例について説明する。
図２は、この発明の実施の形態１における、利用例を示す鳥瞰図である。
図２において、コンビニエンスストアなどの店舗１５の中に、多数の什器が設置されている。多数の什器として、例えば、商品棚１６ａ，１６ｂ，１６ｃ，１６ｄ，１６ｅ，１６ｆ，１６ｇ，レジスタ（図示せず）などが配置されるカウンタ１７が設置されている。また、店舗１５の四隅には、監視カメラ５ａ，５ｂ，５ｃ，５ｄが設置されている。
【００２２】
また、携帯端末２を持った利用者１８が店内に入り、図中の左上方向を撮影している監視カメラ５ｄを特定し、その特定した監視カメラ５ｄが撮影している映像を、利用者１８の携帯端末２に表示したいとする。そのため、利用者１８は、図中の左上方向を、携帯端末２のカメラ７で撮影する。
ネットワーク３や映像監視レコーダ４については、図２に図示していないが、店舗１５の中、もしくは外のいずれに設置されていてもよい。
【００２３】
次に、実施の形態１における、映像検索装置１の動作について説明する。
図３は、この発明の実施の形態１における、映像検索装置１の動作を示すフローチャートである。
利用者１８が携帯端末２を持ち、店舗１５を訪れて、携帯端末２に内蔵されるカメラ７で、図２の左上方向（特定したい監視カメラ５が撮影する領域）を撮影する。
【００２４】
すると、カメラ７で撮影された映像（検索する映像）が、映像検索装置１の映像入力手段１０に入力される。この時、映像入力手段１０は、カメラ７で撮影された映像に、検索する映像であるという情報を付加する。また、映像入力手段１０は、カメラ７で撮影された映像が入力されたことを、データ取得手段１１に出力する。
そして、映像入力手段１０が、入力されたカメラ７の映像（検索する映像）を特徴情報生成手段１２に出力する（ステップ（以下Ｓ）１）。
そして、特徴情報生成手段１２は、入力されたカメラ７の映像に対して、人物等の動体を取り除き、背景情報のみとした映像を作成する。そして、背景情報のみとした映像を解析して、特徴情報を生成する。そして、生成したカメラ７の映像の特徴情報を、特徴比較手段１３に出力する（Ｓ２）。
【００２５】
一方、データ取得手段１１は、カメラ７の映像が入力された情報を、映像入力手段１０から受け取ると、携帯端末２の位置情報を、携帯端末２の位置情報取得手段９から取得する（Ｓ３）。
【００２６】
そして、データ取得手段１１は、取得した携帯端末２の位置情報を、通信手段６を介して、映像監視レコーダ４に送信する。すると、映像監視レコーダ４では、携帯端末２の位置情報に近い位置情報をもつ監視カメラ５が、複数台選択される。
ここでは、例えば、図２の店舗内に設置された監視カメラ５ａ〜５ｄが、携帯端末２の位置情報に近い位置情報をもつ監視カメラ５として選択されたとする。
そして、データ取得手段１１は、携帯端末２の位置情報に近い位置情報をもつ監視カメラ５の、複数の異なるカメラ番号（監視カメラ５ａ〜５ｄのカメラ番号）と、そのカメラ番号の監視カメラ５が撮影した映像を、映像監視レコーダ４から受信して、取得する（Ｓ４）。
【００２７】
尚、ここでは、映像監視レコーダ４が、携帯端末２の位置情報を受け取り、その位置情報に近い位置情報をもつ監視カメラ５を、複数台選択するとして説明するが、データ取得手段１１が、携帯端末２の位置情報に近い監視カメラ５を複数台選択してもよい。その場合、データ取得手段１１は、予め、監視カメラ５のカメラ番号、位置情報、ＩＰアドレスのリストを、映像監視レコーダ４から受信して、記憶しておく。そして、データ取得手段１１が、携帯端末２の位置情報に近い位置情報をもつ、監視カメラ５を複数台選択する。そして、データ取得手段１１は、選択した複数台の監視カメラ５のカメラ番号を、映像監視レコーダ４に送信して、そのカメラ番号の監視カメラ５が撮影した映像を、映像監視レコーダ５から受信する。
【００２８】
そして、データ取得手段１１は、映像監視レコーダ４から取得した、複数の監視カメラ５の映像を、映像入力手段１０に出力し、映像入力手段１０は、入力された複数の監視カメラ５の映像を特徴情報生成手段１２に出力する（Ｓ５）。
【００２９】
次に、特徴情報生成手段１２は、映像入力手段１０から入力された映像に対して、人物等の動体を取り除き、背景情報のみとした映像を作成する。そして、背景情報のみとした映像から、例えば、形状、色、ベクトルといった特徴情報を生成する。そして、生成した監視カメラ５の特徴情報を特徴比較手段１３に出力する（Ｓ６）。
【００３０】
次に、特徴比較手段１３は、カメラ７の映像の特徴情報と、携帯端末２の位置情報に近い、複数の監視カメラ５の映像の特徴情報を比較し、比較結果をカメラ特定手段１４に出力する（Ｓ７）。
この時、特徴比較手段１３は、複数の監視カメラ５のカメラ番号も、比較結果と共に、カメラ特定手段１４に出力している。
【００３１】
すると、カメラ特定手段１４は、特徴比較手段１３から入力された比較結果に基づいて、カメラ７の映像に、最も近似している監視カメラ５の映像を特定し、その映像を撮影している監視カメラ５を特定する（Ｓ８）。
そして、カメラ特定手段１４は、特定した１台の監視カメラ５のカメラ番号を、通信手段６を介して、映像監視レコーダ４に送信し、特定した１台の監視カメラ５が撮影した映像を、映像監視レコーダ４から受信する（Ｓ９）。
【００３２】
そして、カメラ特定手段１４は、映像監視レコーダ４から受信した、特定した監視カメラ５の映像を、携帯端末２のタッチパネルディスプレイ８に出力する（Ｓ１０）。
そして、タッチパネルディスプレイ８は、カメラ特定手段１４から入力された、特定された１台の監視カメラ５の映像を表示する（Ｓ１１）。
【００３３】
この時、ユーザ１８が、タッチパネルディスプレイ８から、再生したい映像の日時を入力して指定すると、その再生対象の日時の情報が、タッチパネルディスプレイ８からカメラ特定手段１４に出力される。そして、カメラ特定手段１４は、入力された再生対象の日時の情報を、映像監視レコーダ４に送信して、特定された監視カメラ５の、指定された日時の映像を、映像監視レコーダ４から受信する。そして、指定された日時の監視カメラ５の映像が、タッチパネルディスプレイ８に表示される。
【００３４】
尚、カメラ特定手段１４は、例えば、河川や道路の数百台の監視カメラ５から、監視カメラ５を特定する場合、カメラ７の映像の特徴情報に最も近い特徴情報をもつ監視カメラ５の映像だけでなく、２番目に近い特徴情報を持つ、映像を撮影する監視カメラ５や、３番目に近い特徴情報を持つ、映像を撮影する監視カメラ５や、…、ｎ番目に近い特徴情報を持つ、映像を撮影する監視カメラ５を候補として選択してもよい。そして、それら候補の監視カメラ５の映像と、候補の監視カメラ５のカメラ番号と位置情報を、タッチパネルディスプレイ８に出力して、タッチパネルパネルディスプレイが、候補の監視カメラ５のカメラ番号と位置情報を表示して、利用者１８に選択させるように構成してもよい。
【００３５】
また、本実施の形態では、映像検索装置１が携帯端末２に内蔵されているとして説明したが、映像検索装置１は、パソコンなどの据え置き型端末に内蔵されてもよい。その場合、携帯端末２とパソコン、パソコンと映像監視レコーダ４がネットワーク３で接続される。
【００３６】
以下、映像検索装置１が、パソコンなどの据え置き型端末に内蔵される場合の、動作の概略を説明する。
携帯端末２のカメラ７で撮影された映像と、携帯端末２の位置情報が、ネットワーク３を介して、パソコンの映像検索装置１に入力される。そして、パソコンの映像検索装置１から、携帯端末２の位置情報が、映像監視レコーダ４に送信される。そして映像監視レコーダ４で、携帯端末２の位置情報に近い位置情報の監視カメラ５が選択され、その選択された複数の監視カメラ５の、カメラ番号と映像が、映像監視レコーダ４からパソコンの映像検索装置１に入力される。
【００３７】
そして、パソコンの映像検索装置１で、カメラ７の映像に最も近似する、監視カメラ５の映像が特定され、その映像を撮影した監視カメラ５のカメラ番号が、映像監視レコーダ４に送信される。そして、パソコンの映像検索装置１が、特定した監視カメラ５の映像を、映像監視レコーダ４から受信して、受信した監視カメラ５の映像を携帯端末２に送信する。そして、携帯端末２のタッチパネルディスプレイ８に、特定した監視カメラ５が撮影した映像が表示される。
以上が、映像検索装置１が、パソコンなどの据え置き型端末に内蔵される場合の、動作の概要である。
【００３８】
また、ここでは、特定したい監視カメラ５が撮影している領域を、携帯端末２のカメラ７で撮影した映像が、映像入力手段６に入力される、として説明したが、監視する領域を映した写真のデータが、検索する映像として、映像入力手段１０に入力されても良い。その場合、検索する映像データの位置情報が、携帯端末２の位置情報の代わりに、映像検索装置１に入力される。
【００３９】
また、検索する映像は、カメラ７で撮影した映像ではなく、スキャナーなど画像読み取り装置から入力した画像でも良いし、別の手段で入手した静止画像ファイルであってもよい。この場合、映像検索装置１は、パソコンなどの据え置き型端末に内蔵されていて、パソコンの映像検索装置１で特定した監視カメラ５の映像を、携帯端末２に送信する。
【００４０】
また、本実施の形態では、カメラ７の映像、および監視カメラ５の映像から人物などの動体を取り除き、背景情報のみとした映像で特徴情報の生成を行ったが、反対に、背景を取り除き、人物などの動体のみとした映像から特徴情報の生成を行っても良い。
【００４１】
また、カメラ特定手段１４に、映像を合成する機能をもっていてもよい。例えば、図２の利用者１８が、カウンタ７の中央に向かっている人を撮影する、監視カメラ５の映像を必要とする場合に、カウンタ１７の中央から商品棚１６ｂの方向に向いて、カメラ７で撮影し、そのカメラ７の映像に近似する映像を撮影する、監視カメラ５を特定する。特定した監視カメラ５が、例えば、監視カメラ５ｂと監視カメラ５ｄであったとする。その時、カメラ特定手段１４は、監視カメラ５ｂと監視カメラ５ｄの映像を、映像監視レコーダ４から受信し、受信した監視カメラ５ｂと監視カメラ５ｄの映像を合成して、タッチパネルディスプレイ８に出力して、表示する。そうすることで、監視カメラ５ｂと監視カメラ５ｄそれぞれの画面では表示できない、カウンタ側から見た仮想の映像をタッチパネルディスプレイ８に表示することができる。
【００４２】
以上のように、カメラ７の映像の特徴情報と、監視カメラ５の映像の特徴情報を比較して、比較結果に基づいて、多数の監視カメラ５から、所望する監視カメラを特定するので、例えば、多数の店舗の監視カメラや、河川または道路に配置された多数の監視カメラ５について、位置情報だけでは特定できない監視カメラ５を、映像で特定して、特定した監視カメラ５の映像をタッチパネルディスプレイ８に表示することができる。
【００４３】
また、カメラ７の映像と、監視カメラ５の映像の、背景情報の映像から生成した特徴情報で、カメラ７の映像に近似する映像を撮影する、監視カメラ５を特定するので、店舗や河川、道路など、監視する領域の特徴のある情報、例えば、店舗の什器の直線のベクトル、店舗に特有の形状、色を利用して、より正確に監視カメラ５を特定することができる。
【００４４】
また、データ取得手段１１によって、携帯端末２の位置情報（カメラ７の映像の位置情報）に近い位置情報をもつ、監視カメラ５の映像を選択して、選択した監視カメラ５の映像を映像監視レコーダ４から取得して、特徴情報を比較するので、例えば、数百台の監視カメラ５から特定する処理時間を短縮することができる。
【００４５】
実施の形態２．
以上の実施の形態１では、カメラ７で撮影された映像と、映像監視レコーダ４から受信した映像を、映像検索装置１で解析して特徴情報を生成する例について説明した。次に、実施の形態２では、映像監視レコーダ４から、監視カメラ５の映像の特徴情報が、映像検索装置１に入力される例について説明する。
【００４６】
図４は、この発明の実施の形態２における、映像検索装置１の構成図である。
図４の映像検索装置１、携帯端末２、映像監視レコーダ４、および監視カメラ５の接続関係は、実施の形態１と同様であるが、映像検索装置１のデータ取得手段１１ｂと特徴比較手段１３ｂの機能は異なる。また、映像監視レコーダ４の構成を詳細に説明する。
【００４７】
映像検索装置１の実施の形態１と異なる機能の構成について、以下説明する。
データ取得手段１１ｂは、携帯端末２の位置情報を、映像監視レコーダ４に送信する。そして、携帯端末２の位置情報に近い位置情報をもつ、複数の監視カメラ５の映像の特徴情報を、映像監視レコーダ４から受信するところが、実施の形態１と異なる。
この時、映像監視レコーダ４では、監視カメラ５で撮影された映像から、人物などの動体を取り除き、背景の情報のみとした映像が作成されている。そして、背景の情報のみとした映像から生成された特徴情報が、映像監視レコーダ４から携帯端末２の映像検索装置１に送信される。
【００４８】
特徴比較手段１３ｂは、携帯端末２の位置情報に近い位置情報をもつ、監視カメラ５のカメラ番号と、監視カメラ５の映像の特徴情報が、データ取得手段１１ｂから入力されるところが、実施の形態１と異なる。そのため、特徴比較手段１３ｂは、特徴情報生成手段１２から入力される、カメラ７の映像の特徴情報と、データ取得手段１１ｂから入力される監視カメラ５の映像の特徴情報とを比較する。
【００４９】
次に、映像監視レコーダ４の構成について、詳細に説明する。
映像監視レコーダ４は、通信手段１９、カメラ選択手段２０、特徴情報生成手段２１、記録手段２２から構成されている。
映像監視レコーダ４の通信手段１９は、映像監視レコーダ４の外部と情報の送受信を行う。例えば、携帯端末２の通信手段６と、データの送受信を行う。
【００５０】
映像監視レコーダ４のカメラ選択手段２０は、映像検索装置１のデータ取得手段１１ｂから、携帯端末２の位置情報を受信する。すると、記録手段２２に記録されている映像に対応づけて記憶されている、監視カメラ５のカメラ番号と位置情報のリストを用いて、携帯端末２の位置情報に近い位置情報をもつ、監視カメラ５を選択する。そして、選択した監視カメラ５の映像の特徴情報を、特徴情報生成手段２１から取得する。そして、取得した監視カメラ５の映像の特徴情報を、映像検索装置１のデータ取得手段１１ｂに送信する。
また、カメラ選択手段２０は、映像検索装置１のカメラ特定手段１４から、特定した監視カメラ５のカメラ番号を受信すると、そのカメラ番号の監視カメラ５が撮影した映像を、記録手段２２から取得し、映像検索装置１のカメラ特定手段１４に送信する。
【００５１】
映像監視レコーダ４の特徴情報生成手段２１は、記録手段２２に記録されている監視カメラ５の映像から、人物などの動体を取り除き、背景の情報のみとした映像の特徴情報を生成する。
映像監視レコーダ４の記録手段２２は、監視カメラ５の映像を記録する。また、記録された映像に対応づけて、接続されている監視カメラ５のカメラ番号、ＩＰアドレス、位置情報のリストを記録している。
【００５２】
次に、実施の形態２における映像検索装置１の動作について説明する。
図５は、この発明の実施の形態２における、映像検索装置１の動作を示すフローチャートである。
実施の形態１の図３のＳ３、映像入力手段１０が、携帯端末２の位置情報を取得するまでの動作は同じであるため、説明を省略する。
【００５３】
Ｓ３の次に、データ取得手段１１は、取得した携帯端末２の位置情報を、携帯端末２の通信手段６、映像監視レコーダ４の通信手段１９を介して、映像監視レコーダ４のカメラ選択手段２０に送信する。
すると、映像監視レコーダ４のカメラ選択手段２０では、記録手段２２に記録されている、監視カメラ５のカメラ番号と位置情報のリストを用いて、携帯端末２の位置情報に近い位置情報をもつ、監視カメラ５を複数台選択する。
【００５４】
そして、映像監視レコーダ４の特徴情報生成手段２１で、選択された複数台の監視カメラ５の映像から、人物などの動体を取り除き、背景の情報のみとした映像が作成される。そして、作成した映像から特徴情報が生成される。
【００５５】
そして、映像監視レコーダ４のカメラ選択手段２０は、選択した複数の監視カメラ５の映像の特徴情報を、映像監視レコーダ４の特徴情報生成手段２１から取得し、映像監視レコーダ４の通信手段１９、携帯端末２の通信手段６を介して、映像検索装置１のデータ取得手段１１ｂに送信する。
【００５６】
すると、映像検索装置１のデータ取得手段１１ｂは、携帯端末２の位置情報に近い位置情報をもつ、複数の監視カメラ５のカメラ番号と、そのカメラ番号の監視カメラ５が撮影した映像の特徴情報を、映像監視レコーダ４から受信して取得する（Ｓ４）。
【００５７】
そして、データ取得手段１１ｂは、映像監視レコーダ４から取得した、複数の監視カメラ５の映像の特徴情報を、特徴比較手段１３ｂに出力する（Ｓ５）。
【００５８】
次に、特徴比較手段１３ｂは、特徴情報生成手段１２から入力された、カメラ７の映像の特徴情報と、データ取得手段１１から入力された、監視カメラ５の映像の特徴情報を比較し、比較結果をカメラ特定手段１４に出力する（Ｓ６）。
カメラ特定手段１４の動作（Ｓ７）以降は、実施の形態１の図３の、Ｓ８以降と同様である。
【００５９】
カメラ特定手段１４は、特徴比較手段１３から入力された比較結果に基づいて、カメラ７の映像の特徴情報に、最も近似している監視カメラ５の映像の特徴情報を特定し、その特定情報の映像を撮影している監視カメラ５を特定する（Ｓ７）。
【００６０】
そして、カメラ特定手段１４は、特定した１台の監視カメラ５のカメラ番号を、通信手段６を介して、映像監視レコーダ４に送信し、特定した１台の監視カメラ５の映像を、映像監視レコーダ４から受信する（Ｓ８）。
【００６１】
この時、映像監視レコーダ４のカメラ選択手段２０は、特定した１台の監視カメラ５のカメラ番号を、携帯端末２の通信手段６、映像監視レコーダ４の通信手段１９を介して、映像検索投資１のデータ取得手段１１ｂから受信する。
すると、映像監視レコーダ４のカメラ選択手段２０は、受信した監視カメラ５のカメラ番号の映像を、記録手段２２から取得する。そして、取得した監視カメラ５のカメラ番号の映像を、映像監視レコーダ４の通信手段１９、携帯端末２の通信手段６を介して、映像検索装置１のデータ取得手段１１ｂに送信する。
【００６２】
すると、映像検索装置１のカメラ特定手段１４は、映像監視レコーダ４から受信した、特定した監視カメラ５が撮影した映像を、携帯端末２のタッチパネルディスプレイ８に出力する（Ｓ９）。
そして、タッチパネルディスプレイ８は、特定された１台の監視カメラ５が撮影した映像を表示する（Ｓ１０）。
【００６３】
以上のように、データ取得手段１１ｂによって、監視カメラ５の映像の特徴情報を、映像監視レコーダ４から受信して、カメラ７の映像の特徴情報と比較し、監視カメラ５を特定するので、多数の店舗の監視カメラや河川、または道路に配置された多数の監視カメラ５から、監視カメラ５を特定する処理時間を短縮することができる。
【００６４】
実施の形態３．
次に、実施の形態２と同様の構成で、監視カメラ５の１台が、魚眼レンズを具備することにより、周囲３６０度の全方位の映像を撮影する例について説明する。
図６は、この発明の実施の形態３における、映像検索装置１の利用例を示す鳥瞰図である。
図６において、５ａ〜５ｄ、１５、１６ａ〜１６ｇ、１７は実施の形態１と同様であるため説明を省略する。
そして、利用者１８がカウンタの方向を向いて、携帯端末２のカメラ７で撮影するとする。
また、監視カメラ５ｅは、魚眼レンズを具備することにより、３６０度の全方位の映像を撮影可能な監視カメラであり、店舗１５の中央の天井に設置されているとする。
【００６５】
実施の形態３における、映像検索装置１の構成は、実施の形態２と同様であるが、カメラ特定手段１４の機能が異なる。
また、映像監視レコーダ４、または監視カメラ５ｅでは，監視カメラ５ｅが撮影した円形の映像に対して歪み補正の処理が行われ、方形の映像とされる。この時、方形の映像は、全方位の１の映像の場合もあり、異なる方位の複数の映像の場合もある。そして、その方形の映像に対して、人物等の動体を除去した上で特徴情報が生成されて、生成された特徴情報が、映像監視レコーダ４から映像検索装置１のデータ取得手段１１ｂに送信される。
【００６６】
尚、ここでは、周囲３６０度の範囲が撮影された、円形の映像として説明しているが、中央部分の映像がない円周の映像の場合もある。
ここでは、例えば、携帯端末２の位置情報に近い位置情報の監視カメラ５として、監視カメラ５ｅが選択され、データ取得手段１１ｂは、撮影された方位が異なり、歪み補正の処理が行われた、複数の方形の映像の特徴情報を、映像監視レコーダ４から取得するとする。
【００６７】
カメラ特定手段１４は、特徴比較手段１３ｂから入力された比較結果と、カメラ７で撮影された映像の特徴情報のうち、例えば、店舗の什器のベクトル情報を利用して、複数の方形の映像から、カメラ７で撮影した映像との方位のずれも含めて、カメラ７の映像に近似している１の方形の映像を特定する。１の方形の映像を、方位のずれも含めて特定することで、その方形の映像を撮影した監視カメラ５ｅを特定する。
その他の構成は、実施の形態２と同様であるため、説明を省略する。
【００６８】
次に、動作について、図３を用いて説明する。
図３のＳ３、映像入力手段１０が、携帯端末２の位置情報を取得するまでの動作は同じであるため、説明を省略する。
【００６９】
Ｓ３の次に、データ取得手段１１ｂは、取得した携帯端末２の位置情報を、通信手段６を介して、映像監視レコーダ４に送信する。すると、映像監視レコーダ４で、携帯端末２の位置情報に近い位置情報をもつ、店舗１５の監視カメラ５ａ〜５ｄと監視カメラ５ｅが選択されたとする。
そして、データ取得手段１１ｂは、携帯端末２の位置情報に近い位置情報をもつ、監視カメラ５ａ〜５ｄと監視カメラ５ｅの映像の特徴情報を、映像監視レコーダ４から受信する（Ｓ４）。
この時、データ取得手段１１ｂは、監視カメラ５ｅの映像については、歪み補正された、複数の方形の映像の特徴情報を、映像監視レコーダ４から受信する。
【００７０】
そして、データ取得手段１１ｂは、受信した監視カメラ５ａ〜５ｄと監視カメラ５ｅの映像の特徴情報を特徴比較手段１３ｂに出力する（Ｓ５）。
【００７１】
次に、特徴比較手段１３ｂは、特徴情報生成手段１２から入力された、カメラ７の映像の特徴情報と、データ取得手段１１ｂから入力された、監視カメラ５の映像の特徴情報を比較し、比較結果をカメラ特定手段１４に出力する（Ｓ６）。
【００７２】
次に、カメラ特定手段１４は、特徴比較手段１３ｂから入力された比較結果と、カメラ７の映像の特徴情報のうち、例えば、店舗の什器のベクトル情報を利用して、複数の方形の映像から、１の方形の映像を方位のずれも含めて特定する。そして、１の方形の映像を特定することで、３６０度を撮影する監視カメラ５ｅを特定する。（Ｓ７）。
【００７３】
そして、カメラ特定手段１４は、特定した監視カメラ５ｅのカメラ番号と、特定した１の方形の映像の、方位のずれの情報を、通信手段６を介して、映像監視レコーダ４に送信する。そして、特定した３６０度を撮影する監視カメラ５ｅの、円形の映像から、方位のずれが修正された映像を、映像監視レコーダ４から受信する（Ｓ８）。
【００７４】
尚、映像監視レコーダ４から受信する映像は、方向のずれの修正と共に、歪み補正の処理も行われている。また、ここでは、特定した１の方形の映像の、方位のずれの情報を、カメラ特定手段１４から、映像監視レコーダ４に送信するとしているが、カメラ特定手段１４が、特定した１の方形の映像の、方位のずれの情報から、元の円形の映像の方位を特定してもよい。そして、特定した方位の情報を、映像監視レコーダ４に送信し、特定した方位の方形の映像を、映像監視レコーダ４から受信してもよい。
【００７５】
そして、カメラ特定手段１４は、映像監視レコーダ４から受信した、特定した３６０度を撮影する監視カメラ５の、方位のずれが修正された映像（特定した方位の映像）を、携帯端末２のタッチパネルディスプレイ８に出力する（Ｓ９）。
そして、タッチパネルディスプレイ８は、特定された３６０度を撮影する監視カメラ５の、特定した方位の映像を表示する（Ｓ１０）。
【００７６】
尚、ここでは、実施の形態２の構成例で説明したが、実施の形態１の構成であってもよい。実施の形態１の構成の場合、３６０度の全方位の映像を撮影可能な監視カメラの映像は、映像検索装置１の特徴情報生成手段１２で、歪み補正が行われ、歪み補正が行われた映像の特徴情報が生成される。そして、生成された特徴情報が、特徴比較手段１３に出力される。
【００７７】
以上のように、カメラ特定手段１４は、歪み補正された映像に対して、カメラ７の映像の特徴情報の、例えばベクトル情報等を利用して、方位のずれも含めて方形の映像を特定するので、３６０度の全方位を撮影する監視カメラ５を特定することができる。そのため、多数の監視カメラから、３６０度の監視カメラも特定することができる。また、３６０度の監視カメラ５の円形の映像から、特定した方位の映像を取得して、表示することができる。
【００７８】
実施の形態４．
実施の形態１〜実施の形態３では、カメラ７で撮影された映像が、映像検索装置１に入力されて、映像検索装置１の特徴情報生成手段１２で、カメラ７の映像の特徴情報が生成されるとして説明した。次に、実施の形態４では、カメラ７の映像をデータ取得手段１１が映像監視レコーダ４に送信して、カメラ７の映像の特徴情報を、データ取得手段１１が、映像監視レコーダ４から受信して取得する例について説明する。
【００７９】
図７は、この発明の実施の形態４における、映像検索装置１の構成図である。
図７は、携帯端末２、映像監視レコーダ４、および監視カメラ５の接続関係は同様であるが、映像検索装置１の構成が異なる。
実施の形態４の映像検索装置１の構成は、映像入力手段１０ｃ、データ取得手段１１ｃ、特徴比較手段１３ｃ、カメラ特定手段１４から構成される。
【００８０】
実施の形態４における、映像検索装置１の構成について説明する。
映像入力手段１０ｃは、カメラ７からの映像が入力されると、入力されたカメラ７の映像を、データ取得手段１１ｃに出力する。
【００８１】
データ取得手段１１ｃは、映像入力手段１０ｃから入力されたカメラ７の映像を、映像監視レコーダ４に送信して、カメラ７の映像の特徴情報を映像監視レコーダ４から受信して、取得する。また、カメラ７の映像が映像入力手段１０ｃから入力されると、携帯端末２の位置情報を、携帯端末２の位置情報取得手段９から取得する。そして、取得した携帯端末２の位置情報を、映像監視レコーダ４に送信して、携帯端末２の位置情報に近い位置情報をもつ、監視カメラ５のカメラ番号と、監視カメラ５で撮影された映像の特徴情報を、映像監視レコーダ４から受信して取得する。そして、取得したカメラ７の映像の特徴情報と、監視カメラ５の映像の特徴情報を、特徴比較手段１３ｃに出力する。
【００８２】
特徴比較手段１３ｃは、データ取得手段１１ｃから入力された、カメラ７の映像の特徴情報と、監視カメラ５の映像の特徴情報を比較して、比較結果をカメラ特定手段１４に出力する。
【００８３】
カメラ特定手段１４は、実施の形態１〜実施の形態３と同様で、特徴比較手段９ｃから入力された比較結果に基づいて、カメラ７の映像に近似する映像を撮影した、監視カメラ５ｃを特定する。
また、映像監視レコーダ４の構成要素、各構成要素の機能は、実施の形態２と同様であるため、説明を省略する。。
【００８４】
次に、実施の形態４における映像検索装置１の動作について説明する。
図８は、この発明の実施の形態４における、映像検索装置１の動作を示すフローチャートである。
カメラ７で撮影された映像が、映像入力手段１０ｃに入力されると、映像入力手段１０ｃは、入力されたカメラ７の映像を、データ取得手段１１ｃに出力する（Ｓ１）。
【００８５】
そして、データ取得手段１１ｃは、映像入力手段１０ｃから、カメラ７の映像が入力されると、携帯端末２の位置情報を、携帯端末２の位置情報取得手段９から取得する（Ｓ２）。
【００８６】
そして、データ取得手段１１ｃは、カメラ７の映像と、携帯端末２の位置情報を、通信手段３を介して、映像監視レコーダ４に送信する（Ｓ３）。
【００８７】
そして、データ取得手段１１ｃは、カメラ７の映像の特徴情報と、携帯端末２の位置情報に近い位置情報をもつ、複数の監視カメラ５のカメラ番号と、そのカメラ番号の監視カメラ５で撮影された映像の特徴情報を、映像監視レコーダ４から受信して取得する（Ｓ４）。
この時、映像監視レコーダ４の特徴情報生成手段２１では、受信したカメラ７の映像と監視カメラ５の映像から、人物等の動体を取り除き、背景情報のみとした映像を作成して、特徴情報を生成している。
【００８８】
そして、データ取得手段１１ｃは、映像監視レコーダ４から取得した、カメラ７の映像の特徴情報と、監視カメラ５のカメラ番号と、そのカメラ番号の監視カメラ５が撮影した映像の特徴情報を、特徴比較手段１３ｃに出力する（Ｓ５）。
【００８９】
特徴比較手段１３ｃは、データ取得手段１１ｃから入力された、カメラ７の映像の特徴情報と、監視カメラ５の映像の特徴情報を比較して、比較結果をカメラ特定手段１４に出力する（Ｓ６）
【００９０】
カメラ特定手段１４は、特徴比較手段１３ｃから入力された比較結果に基づいて、カメラ７の映像に最も近似する映像を撮影する、監視カメラ５を特定する（Ｓ７）。
【００９１】
そして、カメラ特定手段１４は、特定した監視カメラ５のカメラ番号を、通信手段３を介して、映像監視レコーダ４に送信し、送信したカメラ番号の監視カメラ５の映像を、映像監視レコーダ４から受信する（Ｓ８）。
【００９２】
そして、カメラ特定手段１４は、受信した監視カメラ５の映像を、携帯端末２のタッチパネルディスプレイ８に出力する（Ｓ９）。
【００９３】
すると、タッチパネルディスプレイ８は、特定された監視カメラ５が撮影した映像を表示する（Ｓ１０）。
【００９４】
以上のように、映像入力手段１０ｃがカメラ７から入力された映像を、映像監視レコーダ４に送信して、カメラ７の映像の特徴情報を、映像監視レコーダ４から受信するので、特徴情報生成手段１２がなくても、カメラ７の映像に近似する映像を撮影する監視カメラ５を特定することができる。
【符号の説明】
【００９５】
１  映像検索装置、２  携帯端末、３  ネットワーク、４  映像監視レコーダ、５  監視カメラ、６  通信手段、７  カメラ、８  タッチパネルディスプレイ、９  位置情報取得手段、１０  映像入力手段、１１  データ取得手段、１２  特徴情報生成手段、１３  特徴比較手段、１４  カメラ特定手段、１５  店舗、１６  商品棚、１７  カウンタ、１８  利用者、１９  通信手段、２０  特徴情報生成手段、２１  記憶手段。
【図１】
2014179740.tif 000003
【図２】
2014179740.tif 000004
【図３】
2014179740.tif 000005
【図４】
2014179740.tif 000006
【図５】
2014179740.tif 000007
【図６】
2014179740.tif 000008
【図７】
2014179740.tif 000009
【図８】
2014179740.tif 000010