(57)【要約】【課題】よりシンプルな構成にて、死角となる領域をより低減してターゲットをより適切に追尾することが可能であり、目標動体が撮像されている画像データを適切に表示あるいは記録することができる、目標追尾システムを提供する。【解決手段】表示手段の画面は大画面領域と小画面領域に分割されており、処理手段は、録画データを記憶手段から順次読み出し、表示された画像の中から目標動体が指定されると、いずれかの限定エリアの録画データに目標動体が撮像されていると認識している場合は目標動体が撮像されている限定エリアの録画データを大画面領域に表示して他の録画データを小画面領域に表示し、いずれの限定エリアの録画データにも目標動体が撮像されていないと認識している場合は第１撮像装置からの録画データを大画面領域に表示して他の録画データを小画面領域に表示する。【選択図】図５
2014068057.tif 000002
【特許請求の範囲】
【請求項１】
対象エリアの全体の中央近傍における上方に配置されて下方に向けて半球状に広がる前記対象エリアの全体を撮像した画像データを次々と出力可能な第１撮像装置と、
前記対象エリアにおける単数または複数の限定エリアのそれぞれを撮像可能な位置に配置されて前記限定エリアのそれぞれを撮像した画像データを次々と出力可能な単数または複数の第２撮像装置と、
前記第１撮像装置及び前記第２撮像装置からの画像データを取り込んで画像処理を行う画像処理装置と、を備えた目標追尾システムであって、
前記画像処理装置は、処理手段と表示手段と記憶手段とを有しており、
前記表示手段に表示される画面は、大画面領域と単数または複数の小画面領域に分割されており、
前記記憶手段には、日時に対応した前記第１撮像装置及び前記第２撮像装置からのそれぞれの画像データが録画データとして記憶されており、
前記処理手段は、
画像認識手段を有しており、
日時範囲が指定されると、指定された日時範囲に対応する録画データを前記記憶手段から順次読み出して、撮像された時刻に対応させて、前記第１撮像装置からの録画データを前記大画面領域に表示し、前記第２撮像装置からの録画データを前記小画面領域のそれぞれに表示し、
表示された画像の中から目標動体が指定されると、
いずれかの前記限定エリアの録画データに前記目標動体が撮像されていると認識している場合は、録画された時刻に対応させて、当該目標動体が撮像されている限定エリアの録画データを前記大画面領域に表示して他の録画データを前記小画面領域のそれぞれに表示し、
いずれの前記限定エリアの録画データにも前記目標動体が撮像されていないと認識している場合は、録画された時刻に対応させて、前記第１撮像装置からの録画データを前記大画面領域に表示して他の録画データを前記小画面領域のそれぞれに表示する、
目標追尾システム。
【請求項２】
対象エリアの全体の中央近傍における上方に配置されて下方に向けて半球状に広がる前記対象エリアの全体を撮像した画像データを次々と出力可能な第１撮像装置と、
前記対象エリアにおける単数または複数の限定エリアのそれぞれを撮像可能な位置に配置されて前記限定エリアのそれぞれを撮像した画像データを次々と出力可能な単数または複数の第２撮像装置と、
前記第１撮像装置及び前記第２撮像装置からの画像データを取り込んで画像処理を行う画像処理装置と、を備えた目標追尾システムであって、
前記画像処理装置は、処理手段と表示手段と記憶手段とを有しており、
前記表示手段に表示される画面は、大画面領域と単数または複数の小画面領域に分割されており、
前記処理手段は、
画像認識手段を有しており、
前記第１撮像装置からの画像データをリアルタイムに前記大画面領域に表示し、前記第２撮像装置からの画像データをリアルタイムに前記小画面領域のそれぞれに表示し、
表示された画像の中から目標動体が指定されると、
いずれかの前記限定エリアの画像データに前記目標動体が撮像されていると認識している場合は、当該目標動体が撮像されている限定エリアの画像データをリアルタイムに前記大画面領域に表示し、他の画像データをリアルタイムに前記小画面領域のそれぞれに表示し、
いずれの前記限定エリアの画像データにも前記目標動体が撮像されていないと認識している場合は、前記第１撮像装置からの画像データをリアルタイムに前記大画面領域に表示し、他の画像データをリアルタイムに前記小画面領域のそれぞれに表示する、
目標追尾システム。
【請求項３】
請求項１または２に記載の目標追尾システムであって、
前記処理手段は、
前記目標動体が指定されて編集データの作成、あるいは編集データの作成と当該編集データの記憶先が指定されると、
前記表示手段に表示されている画像あるいは前記大画面領域に表示されている画像を編集データとして、前記記憶手段、あるいは指定された記憶先に記憶する、
目標追尾システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、対象エリア内を撮像して指定した動体である目標動体を追尾する目標追尾システムに関する。
【背景技術】
【０００２】
近年では、コンビニエンスストア等の店舗や、一部の街頭には、単数または複数の撮像装置を用いて特定のエリアを適宜撮像した画像データを記録する監視装置が設けられている。
当該監視装置は、例えば何らかの事件が発生した場合に、事件発生現場から所定エリア内に存在する監視装置における事件発生時刻の前後に記録されている画像データから不審者等を発見する際に利用される。
また人物が特定された場合は、所定エリア内の監視装置における事件発生時刻の前後に記録されている画像データの中から、特定人物が撮像されている画像データが集められて、事件の調査等に利用される。ここで、特定人物が撮像されている画像データを集める際、例えば所定エリア内のコンビニエンスストアの店舗では、指定された日時範囲に記録されている画像データの中から、特定人物が撮像されている画像データのみを抽出した特定画像データ群を作成して提出する場合がある。特定人物が撮像されている画像データのみを抽出する作業は、作業者が、記録されている複数の画像データをモニタ等に再生表示しながら、特定人物が撮像されているか否かを確認し、撮像されている画像データのみを抽出するという、単純な作業であるが非常に手間がかかる作業であり、見落としが発生する可能性も考えられる。
例えば特許文献１及び特許文献２に記載された従来技術には、広角カメラＡと、パン・チルト・ズーム可能なカメラＢとを用い、広角カメラＡの画像に基づいてターゲットを指定すると、カメラＢを制御してターゲットを追尾した画像データを得ることができる、画像監視装置（自動追尾撮影装置）が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−１８０１５７号公報
【特許文献２】特開２００４−１５５１６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１及び特許文献２に記載された従来技術では、リアルタイムの撮像時にターゲットを指定しないと、カメラＢをパン・チルト・ズーム制御しながらターゲットを追尾することができない。このため、例えば、リアルタイム撮像時にターゲットＸで記録した場合、既にターゲットＸを追尾して記録されている録画データを用いて、別のターゲットＹを指定しても、ターゲットＹをカメラＢで追尾した画像データを得ることはできない。なお、広角カメラＡの画像データに、運良くターゲットＹが記録されていても、広角レンズ（いわゆる魚眼レンズ）で撮像されているため、ターゲットＹが小さく且つ湾曲されて撮像されており、利用に適さない可能性がある。
また、カメラＢが、パン・チルト・ズームの動作が可能であるため、カメラＢの構造及び制御が複雑化する。しかも、１個のカメラＢでパン・チルト・ズームしながらターゲットを追尾しても、コンビニエンスストア等の店舗内では、カメラの死角が多く、期待する画像データが得られない可能性がある。
また、特定人物等の目標動体が撮像されている画像データの抽出作業には、作業者が画像データを表示し、表示内容を確認しながら抽出しなければならないので、非常に手間がかかるとともに、作業者の疲労等により見落としが発生する可能性がある。
本発明は、このような点に鑑みて創案されたものであり、よりシンプルな構成にて、死角となる領域をより低減してターゲットをより適切に追尾することが可能であり、目標動体が撮像されている画像データを適切に表示あるいは記録することができる、目標追尾システムを提供することを課題とする。
【課題を解決するための手段】
【０００５】
上記課題を解決するため、本発明に係る目標追尾システムは次の手段をとる。
まず、本発明の第１の発明は、対象エリアの全体の中央近傍における上方に配置されて下方に向けて半球状に広がる前記対象エリアの全体を撮像した画像データを次々と出力可能な第１撮像装置と、前記対象エリアにおける単数または複数の限定エリアのそれぞれを撮像可能な位置に配置されて前記限定エリアのそれぞれを撮像した画像データを次々と出力可能な単数または複数の第２撮像装置と、前記第１撮像装置及び前記第２撮像装置からの画像データを取り込んで画像処理を行う画像処理装置と、を備えた目標追尾システムである。
前記画像処理装置は、処理手段と表示手段と記憶手段とを有しており、前記表示手段に表示される画面は、大画面領域と単数または複数の小画面領域に分割されており、前記記憶手段には、日時に対応した前記第１撮像装置及び前記第２撮像装置からのそれぞれの画像データが録画データとして記憶されている。
そして、前記処理手段は、画像認識手段を有しており、日時範囲が指定されると、指定された日時範囲に対応する録画データを前記記憶手段から順次読み出して、撮像された時刻に対応させて、前記第１撮像装置からの録画データを前記大画面領域に表示し、前記第２撮像装置からの録画データを前記小画面領域のそれぞれに表示し、表示された画像の中から目標動体が指定されると、いずれかの前記限定エリアの録画データに前記目標動体が撮像されていると認識している場合は、録画された時刻に対応させて、当該目標動体が撮像されている限定エリアの録画データを前記大画面領域に表示して他の録画データを前記小画面領域のそれぞれに表示し、いずれの前記限定エリアの録画データにも前記目標動体が撮像されていないと認識している場合は、録画された時刻に対応させて、前記第１撮像装置からの録画データを前記大画面領域に表示して他の録画データを前記小画面領域のそれぞれに表示する。
【０００６】
この第１の発明によれば、第２撮像装置を適切な位置に配置することで、死角となる領域を低減することができる。また、第２撮像装置は、パン・チルト・ズームの機能は特に必要ないので、よりシンプルな構成とすることができる。
また、記憶手段には、過去に第１撮像装置及び第２撮像装置にて撮像された画像データが日時に対応した録画データとして記憶されている。
そして、作業者は、指定された日時範囲に対応する録画データの確認を開始した後、表示された画像の中から目標動体を指定すれば、それ以降は目標動体が撮像されている限定エリアの録画データが自動的に大画面領域に表示されるので、非常に便利であり、大画面領域に表示を変更する際の見落としも発生しない。
また、記憶手段に画像データ（録画データ）を記憶する際に特定の目標動体を追尾した画像データ（録画データ）を記憶しているのではなく、その時点でのそれぞれの限定エリアを撮像したそれぞれの画像データ（録画データ）を記憶しているので、記憶手段に記憶されている過去の録画データを用いて任意の目標動体を指定することが可能である。
【０００７】
次に、本発明の第２の発明は、対象エリアの全体の中央近傍における上方に配置されて下方に向けて半球状に広がる前記対象エリアの全体を撮像した画像データを次々と出力可能な第１撮像装置と、前記対象エリアにおける単数または複数の限定エリアのそれぞれを撮像可能な位置に配置されて前記限定エリアのそれぞれを撮像した画像データを次々と出力可能な単数または複数の第２撮像装置と、前記第１撮像装置及び前記第２撮像装置からの画像データを取り込んで画像処理を行う画像処理装置と、を備えた目標追尾システムである。
前記画像処理装置は、処理手段と表示手段と記憶手段とを有しており、前記表示手段に表示される画面は、大画面領域と単数または複数の小画面領域に分割されている。
そして、前記処理手段は、画像認識手段を有しており、前記第１撮像装置からの画像データをリアルタイムに前記大画面領域に表示し、前記第２撮像装置からの画像データをリアルタイムに前記小画面領域のそれぞれに表示し、表示された画像の中から目標動体が指定されると、いずれかの前記限定エリアの画像データに前記目標動体が撮像されていると認識している場合は、当該目標動体が撮像されている限定エリアの画像データをリアルタイムに前記大画面領域に表示し、他の画像データをリアルタイムに前記小画面領域のそれぞれに表示し、いずれの前記限定エリアの画像データにも前記目標動体が撮像されていないと認識している場合は、前記第１撮像装置からの画像データをリアルタイムに前記大画面領域に表示し、他の画像データをリアルタイムに前記小画面領域のそれぞれに表示する。
【０００８】
この第２の発明によれば、第２撮像装置を適切な位置に配置することで、死角となる領域を低減することができる。また、第２撮像装置は、パン・チルト・ズームの機能は特に必要ないので、よりシンプルな構成とすることができる。
そして、作業者は、リアルタイムに表示される画像データの確認を開始した後、表示された画像の中から目標動体を指定すれば、それ以降は目標動体が撮像されている限定エリアの画像データが自動的に大画面領域に表示されるので、非常に便利であり、大画面領域に表示を変更する際の見落としも発生しない。
そして、ターゲットである目標動体が撮像されているリアルタイムな画像データを大画面領域に表示することで、作業者等が適切に目標動体を確認することができる。
【０００９】
次に、本発明の第３の発明は、上記第１の発明または第２の発明に係る目標追尾システムであって、前記処理手段は、前記目標動体が指定されて編集データの作成、あるいは編集データの作成と当該編集データの記憶先が指定されると、前記表示手段に表示されている画像あるいは前記大画面領域に表示されている画像を編集データとして、前記記憶手段、あるいは指定された記憶先に記憶する。
【００１０】
この第３の発明によれば、第１撮像装置及び第２撮像装置にて録画データを再生表示している際、またはリアルタイムに対象エリア内を撮像している際に、指定した目標動体が認識された画像データを自動的に抽出しながら編集データとして記憶するので、手間なく且つ容易に、目標動体が認識された画像データを抽出することが可能であり、作業者の見落としも発生しない。
【図面の簡単な説明】
【００１１】
【図１】目標追尾システムを設けた店舗２内における第１撮像装置１０、第２撮像装置１１〜１４、画像処理装置２０、の配置の例を説明する斜視図である。
【図２】図１に示す店舗２内における第１撮像装置１０にて撮像する対象エリアＡ０、及び第２撮像装置１１〜１４のそれぞれが撮像する限定エリアＡ１〜Ａ４を説明する平面図である。
【図３】目標追尾システム１の構成を説明する図である。
【図４】画像処理装置２０の表示手段２１に表示される画面の例を説明する図である。
【図５】画像処理装置２０の処理手段の処理手順を説明するフローチャートである。
【図６】（Ａ）は人物Ｔ（目標動体）が店舗２内を移動した軌跡の例を説明する図であり、（Ｂ）は人物Ｔ（目標動体）を追尾した際の表示手段２１に表示される画面の例を説明する図である。
【図７】目標動体が撮像されている画像データを抽出した編集データを作成する様子を説明する図である。
【発明を実施するための形態】
【００１２】
以下に本発明を実施するための形態を図面を用いて説明する。
●［目標追尾システムの構成（図３）と、目標追尾システムの配置の例（図１）と、対象エリアＡ０、限定エリアＡ１〜Ａ４の例（図２）］
まず図３を用いて、目標追尾システム１の全体構成について説明する。
図３に示すように、目標追尾システム１は、第１撮像装置１０と、第２撮像装置１１〜１４と、画像処理装置２０と、にて構成されている。
なお、第２撮像装置は、限定エリアに応じて、単数または複数台が設定され、本実施の形態では４台の第２撮像装置を用いた例を説明するが、４台に限定されるものではない。
また、図３では、外部記憶装置３０を有する例を示しているが、外部記憶装置３０は省略してもよい。
【００１３】
第１撮像装置１０は、いわゆる全方位撮像装置（例えば３６０度カメラ）であり、対象エリアＡ０（図２参照）の全体の中央近傍における上方に配置され（図１、図２参照）、下方に向けて半球状に広がる対象エリアＡ０の全体を撮像した画像データを、次々と（例えば１秒毎に）画像処理装置２０に向けて出力する。
第２撮像装置１１〜１４は、一般的な（通常の）撮像装置（例えば一般的なＣＣＤカメラ）であり、対象エリアＡ０内における限定エリアＡ１〜Ａ４（図２参照）のそれぞれを撮像可能な位置に配置され（図１、図２参照）、限定エリアＡ１〜Ａ４のそれぞれを撮像した画像データを、次々と（例えば１秒毎に）画像処理装置２０に向けて出力する。
なお、第２撮像装置１１〜１４は、特にパン・チルト・ズーム等の機能を有していなくてもよい。
画像処理装置２０は、例えばパーソナルコンピュータであり、表示手段２１と処理手段と記憶手段とを有しており、第１撮像装置１０及び第２撮像装置１１〜１４からの画像データを取り込んで、記憶手段に記憶する。また、処理手段は、取り込んだ画像データをリアルタイムに表示手段２１に表示することや、記憶手段に記憶されている画像データ（録画データ）を読み出して表示手段２１に表示すること等が可能である。
なお、記憶手段は、画像処理装置２０に内蔵されていてもよいし、画像処理装置２０の外部に外部記憶装置３０として設けられていてもよい。外部記憶装置３０は、例えば図３に示すように画像処理装置２０に直接接続するタイプのものや、ネットワークを介して遠隔地に配置されるタイプのもの等、種々のものが存在する。
【００１４】
次に図１及び図２を用いて、店舗２を例とした目標追尾システムの配置の例と、対象エリア及び限定エリアの例について説明する。
図１は、店舗２内における第１撮像装置１０、第２撮像装置１１〜１４、画像処理装置２０、の配置の例を説明する斜視図である。また図２は、図１に示す店舗２内における第１撮像装置１０にて撮像する対象エリアＡ０、及び第２撮像装置１１〜１４のそれぞれが撮像する限定エリアＡ１〜Ａ４を説明する平面図である。
【００１５】
本実施の形態にて説明する店舗２は、コンビニエンスストアを例としており、顧客が入店して商品を購入可能な店舗部３と、従業員の控室や事務室等の隣接部４と、にて構成されている。
店舗部３には、出入口５０、レジスター５１、ＡＴＭ５２、コピー機５３、レジカウンター６１、商品棚６２〜６７等が配置されている。
そして、レジカウンター６１内の従業員が店舗部３内を見渡せるように、各商品棚やＡＴＭ等が配置されている。
しかし、レジカウンター６１から遠い位置や商品棚の背後等には、レジカウンター６１内の従業員から見えない死角が存在する。
そこで、図１及び図２の例では、商品棚６５、６６の死角を含む限定エリアＡ４を撮像可能となるように店舗部３の天井の隅に第２撮像装置１４を配置し、商品棚６７の死角を含む限定エリアＡ３を撮像可能となるように店舗部３の天井の隅に第２撮像装置１３を配置している。
【００１６】
また、出入口５０及びＡＴＭ５２の周囲を含む限定エリアＡ１を撮像可能となるように店舗部３の天井に第２撮像装置１１を配置し、レジスター５１の周囲を含む限定エリアＡ２を撮像可能となるように店舗部３の天井に第２撮像装置１２が配置されている。
なお、第２撮像装置１１は、出入口５０から入店してきた顧客の顔、及びＡＴＭ５２に向かって操作している顧客の顔が確認できる角度から撮像できるように配置されていることが好ましい。また、第２撮像装置１２は、レジスター５１を挟んで従業員と向き合っている顧客の顔が確認できる角度から撮像できるように配置されていることが好ましい。
また、第１撮像装置１０は、店舗部３内の全体となる対象エリアＡ０を撮像可能となるように、店舗部３の天井の中央近傍に配置されている。
また画像処理装置２０は、本実施の形態では、隣接部４に配置した例を示しているが、画像処理装置２０をレジカウンター６１に配置してもよい。
【００１７】
●［表示手段２１に表示される画面の例（図４）］
次に図４を用いて、画像処理装置２０の表示手段２１に表示される画面の例について説明する。
表示手段２１の画面は、大画面領域２２と、複数の小画面領域２３Ａ〜２３Ｈと、に分割されている。なお、本実施の形態の例では、大画面領域２２が１個の例を説明するが、大画面領域２２は小画面領域２３Ａ〜２３Ｈのそれぞれよりも広い領域であれば良く、単数でも複数でもよい。また小画面領域２３Ａ〜２３Ｈは、第２撮像装置の台数以上の単数または複数であり、８個に限定されるものではなく、また、図４の例に示す位置に限定されるものではない。
また、表示手段２１の画面における所定位置には、メニュー欄２２Ａが設けられており、作業者は、当該メニュー欄２２Ａに表示される各種のメニューの中から所望するメニューを選択することで、第１撮像装置１０及び第２撮像装置１１〜１４にて撮像したリアルタイムな画像データを表示手段２１に表示させることや、記憶手段に記憶されている録画データを表示手段２１に表示させること等ができる。
【００１８】
作業者がメニュー欄２２Ａからライブ表示（リアルタイム表示）を選択した場合（且つ目標動体が指定されていない場合）、画像処理装置２０の処理手段は、第１撮像装置１０からの（対象エリアＡ０の）画像データをリアルタイムに大画面領域２２に表示する。また処理手段は、第２撮像装置１１からの（限定エリアＡ１の）画像データをリアルタイムに小画面領域２３Ａに表示し、第２撮像装置１２からの（限定エリアＡ２の）画像データをリアルタイムに小画面領域２３Ｂに表示し、第２撮像装置１３からの（限定エリアＡ３の）画像データをリアルタイムに小画面領域２３Ｃに表示し、第２撮像装置１４からの（限定エリアＡ４の）画像データをリアルタイムに小画面領域２３Ｄに表示する。
【００１９】
また作業者がメニュー欄２２Ａから録画データ表示を選択して日時範囲が指定された場合（且つ目標動体が指定されていない場合）、画像処理装置２０の処理手段は、指定された日時範囲に対応する録画データを順次読み出して、録画された時刻に対応させて、各録画データを大画面領域２２及び小画面領域２３Ａ〜２３Ｄに表示する。
なお、録画データとは、各撮像装置及び撮像された（録画された）日時に対応させて記憶手段に記憶されている画像データである。
そして処理手段は、撮像された日時に対応させて、第１撮像装置１０からの（対象エリアＡ０の）録画データを大画面領域２２に表示し、第２撮像装置１１〜１４からの（限定エリアＡ１〜Ａ４の）録画データを小画面領域２３Ａ〜２３Ｄに表示する。
【００２０】
以上に説明したライブ表示（リアルタイム表示）、または録画データ表示では、既存の監視システムの表示と類似した表示であるが、本実施の形態にて説明する目標追尾システム１では、表示手段２１に表示されている画像の中から目標動体が指定されると、以下に説明する特徴ある動作を行う。
【００２１】
●［処理手段の処理手順（図５）］
次に図５に示すフローチャートを用いて、画像処理装置２０の処理手段による処理手順の例を説明する。図５に示すフローチャートの処理は、例えば画像処理装置２０が起動された際に実行される。
なお、画像処理装置２０には画像認識プログラムが備えられており、処理手段は、画像認識手段を有している。
【００２２】
画像処理装置２０が起動されると、ステップＳ１０にて、処理手段は、ライブ表示（リアルタイム表示）または録画データ表示のいずれの動作を行うか、作業者等に選択させる画面を表示手段に表示して、作業者等からの指示を待つ。
作業者等がライブ表示か録画データ表示かの指示を入力すると、処理手段は、ステップＳ１１にて、ライブ表示が選択されたか否かを判定する。ライブ表示が選択された場合（Ｙｅｓ）はステップＳ２０に進み、録画データ表示が選択された場合（Ｎｏ）はステップＳ３０に進む。
【００２３】
ステップＳ２０に進んだ場合、処理手段は、第１撮像装置１０からのリアルタイムの画像データ、及び第２撮像装置１１〜１４のリアルタイムの画像データを取り込み、各画像データを各撮像装置及び日時に対応させて記憶手段（外部記憶装置を含む）に記憶し、ステップＳ４０に進む。
ステップＳ３０に進んだ場合、処理手段は、日時範囲の指定が済んだか否かを判定する。録画データを読み出して表示する際、作業者等は、どの時点の録画データからどの時点の録画データまでを読み出せばよいか、処理手段に指示を入力する必要がある。日時範囲の指定が済んだ場合（Ｙｅｓ）はステップＳ３１に進み、日時範囲の指定が済んでいない場合（Ｎｏ）はステップＳ３０に戻り、日時範囲の指定を待つ。
ステップＳ３１では、処理手段は、記憶手段（外部記憶装置を含む）から、日時範囲に対応する録画データを読み出し、ステップＳ４０に進む。
【００２４】
ステップＳ４０にて、処理手段は、作業者等から目標動体が指定されているか否かを判定する。既に目標動体が指定されている場合（Ｙｅｓ）はステップＳ４１に進み、目標動体が指定されていない場合（Ｎｏ）はステップＳ４２Ｂに進む。
ステップＳ４１に進んだ場合、処理手段は、ステップＳ２０（またはステップＳ３１）にて読み出した、いずれかの限定エリア（この場合、限定エリアＡ１〜Ａ４）の画像データ（または録画データ）に、目標動体が撮像されているか否かを判定する。いずれかの限定エリアに目標動体が撮像されていると認識している場合（Ｙｅｓ）はステップＳ４２Ａに進み、いずれの限定エリアにも目標動体が撮像されていないと認識している場合（Ｎｏ）はステップＳ４２Ｂに進む。
例えば処理手段は、第１撮像装置からの画像データ（または録画データ）を用いて目標動体の認識と追尾を行い、認識している目標動体がいずれかの限定エリアに侵入したと判定した場合に、当該限定エリアに目標動体が撮像されていると認識する。
【００２５】
ステップＳ４２Ａに進んだ場合、処理手段は、目標動体が撮像されている限定エリアの画像データ（または録画データ）を、大画面領域２２に表示して、他の画面を小画面領域２３Ａ〜２３Ｄのそれぞれに表示して、ステップＳ４３に進む。
目標動体が撮像されている限定エリアの画像データ（または録画データ）の表示を大画面領域２２への表示に変更した場合、第１撮像装置からの画像データ（または録画データ）を、大画面領域への表示に変更された限定エリアに対応付けられている小画面領域に表示する。例えば、限定エリアＡ２に目標動体が撮像されており、限定エリアＡ２の画像データを大画面領域２２に表示した場合、限定エリアＡ２に対応付けられている小画面領域２３Ｂに第１撮像装置からの画像データ（対称エリアＡ０の画像データ）を表示する。この場合、小画面領域２３Ｂに表示されていた限定エリアＡ２の画像データと、大画面領域２２に表示されていた対象エリアＡ０の画像データとを入れ替えることになる。
ステップＳ４２Ｂに進んだ場合、処理手段は、第１撮像装置からの画像データ（または録画データ）を大画面領域２２に表示して、他の画像（第２撮像装置１１〜１４からの画像データまたは録画データ）を小画面領域２３Ａ〜２３Ｄのそれぞれに表示して、ステップＳ４３に進む。
【００２６】
ステップＳ４３にて、処理手段は、作業者等がメニュー欄から目標動体の指定を行ったか否かを判定する。例えば作業者等は、各画像の表示中に、メニュー欄から目標動体の指定を選択して画面に表示されている動体を指定することで、目標動体を指定することができる。目標動体が指定された場合（Ｙｅｓ）はステップＳ４４に進み、目標動体の指定がない場合（Ｎｏ）はステップＳ４５に進む。
例えば処理手段は、第１撮像装置からの画像データ（または録画データ）を大画面領域に表示している際、大画面領域に表示している画像の中から特定の動体（目標動体）が指定されたか否かを判定する。
ステップＳ４４に進んだ場合、処理手段は、それまでの目標動体を解除して、新たに設定された動体を目標動体に設定し、ステップＳ４５に進む。
ステップＳ４５では、処理手段は、作業者等がメニュー欄から編集の指示（あるいは編集の指示と記憶先の指示）を行ったか否かを判定する。例えば作業者等は、目標動体が撮像されている画像を抽出した編集データの作成を所望する場合、上記に説明した目標動体の指定を行った後、メニュー欄から編集の指示（あるいは編集の指示と記憶先の指示）を入力する。編集の指示（あるいは編集の指示と記憶先の指示）がある場合（Ｙｅｓ）はステップＳ４６に進み、編集の指示（あるいは編集の指示と記憶先の指示）がない場合（Ｎｏ）はステップＳ４７に進む。
ステップＳ４６に進んだ場合、処理手段は、表示手段２１に表示されている画像（大画面領域と小画面領域とを含んだ表示手段２１に表示されている画像そのもの）、または大画面領域に表示されている画像を、編集データとして記憶手段あるいは外部記憶装置等に記憶して、ステップＳ４７に進む。なお、特に記憶先の指示が無い場合、処理手段は画像処理装置２０が備えている記憶手段に編集データを記憶し、外部記憶装置等の記憶先の指示がある場合、処理手段は指示された記憶先に編集データを記憶する。
【００２７】
ステップＳ４７では、処理手段は、ステップＳ１１にてライブ表示が選択されているか否かを判定する。ライブ表示が選択されている場合（Ｙｅｓ）はステップＳ５０に進み、録画データ表示が選択されている場合（Ｎｏ）はステップＳ６０に進む。
ステップＳ５０に進んだ場合、処理手段は、作業者等がメニュー欄から編集の終了の指示を行ったか否かを判定する。例えば作業者等は、編集データの作成の終了を所望する場合、メニュー欄から編集の終了の指示を入力する。編集の終了の指示が行われた場合（Ｙｅｓ）はステップＳ５１に進み、編集の終了の指示が無い場合（Ｎｏ）はステップＳ５２に進む。
ステップＳ５１に進んだ場合、処理手段は、編集データの作成を終了して目標動体を解除してステップＳ５２に進む。
ステップＳ５２では、処理手段は、作業者等がメニュー欄からライブ表示の終了の指示を行ったか否かを判定する。例えば作業者等は、ライブ表示の終了を所望する場合、メニュー欄からライブ表示の終了の指示を入力する。ライブ表示の終了の指示が行われた場合（Ｙｅｓ）はステップＳ１０に戻り、ライブ表示の終了の指示が無い場合（Ｎｏ）はステップＳ２０に戻り、次のタイミングで表示する画像データを各撮像装置から取り込む。
【００２８】
ステップＳ６０に進んだ場合、処理手段は、作業者等がメニュー欄から編集の終了の指示を行ったか否かを判定する。例えば作業者等は、編集データの作成の終了を所望する場合、メニュー欄から編集の終了の指示を入力する。編集の終了の指示が行われた場合（Ｙｅｓ）はステップＳ６２に進み、編集の終了の指示が無い場合（Ｎｏ）はステップＳ６１に進む。
ステップＳ６１に進んだ場合、処理手段は、ステップＳ３０にて指定された日時範囲に対応する全ての録画データを表示したか否かを判定する。日時範囲に対応する全ての録画データの表示が終了した場合（Ｙｅｓ）はステップＳ６２に進み、日時範囲の対応する録画データがまだ残っている場合（Ｎｏ）はステップＳ３１に戻り、次のタイミングで表示する録画データを記憶手段または外部記憶装置から読み出す。
ステップＳ６２に進んだ場合、処理手段は、編集データの作成を終了して目標動体を解除してステップＳ１０に戻る（録画データ表示を終了する）。
【００２９】
●［目標動体を追尾した画像の例（図６）］
次に図６（Ａ）及び（Ｂ）を用いて、以上に説明したフローチャートの処理に基づいた、表示手段２１への表示の例を説明する。
図６（Ａ）は、人物Ｔが、店舗２に入店してから退出するまでの移動の軌跡の例を示しており、図６（Ｂ）は、人物Ｔを目標動体として追尾した際の各時刻（時刻ｔ０〜時刻ｔ８）において、人物Ｔがどのように表示手段２１に表示されているか、の例を示している。なお、対象エリアＡ０（全体）の画像については、詳細な画像の記載を省略している。
また、以下の説明では、ライブ表示中における例を説明するが、録画データ表示については、表示手段２１に表示する画像が、リアルタイムの画像データでなく、記憶手段（または外部記憶装置）に記憶されている録画データである点が異なるだけであるので、説明を省略する。
【００３０】
［時刻ｔ０における表示手段２１の表示状態］
時刻ｔ０では、人物Ｔは、店舗２に入店して限定エリアＡ１内に居ると仮定する。
作業者等（この場合、店員）は、人物Ｔが入店時、不審者かも知れないと判断した場合、メニュー欄から目標動体の指定を選択し、大画面領域２２に表示されている第１撮像装置からの対象エリアＡ０の画像から人物Ｔを指定し、目標動体の指定を行う。
なお、第１撮像装置からの対象エリアＡ０の画像を小画面領域に表示している際に当該小画面領域の対象エリアＡ０の画像から目標動体を指定してもよいし、第２撮像装置からの限定エリアの画像を大画面領域に表示している際に当該大画面領域の限定エリアの画像から目標動体を指定してもよいし、第２撮像装置からの限定エリアの画像を小画面領域に表示している際に当該小画面領域の限定エリアの画像から目標動体を指定できるようにしてもよい。
すると、処理手段は、第１撮像装置からの画像にて人物Ｔ（目標動体）の認識と追尾を行い、人物Ｔ（目標動体）が限定エリアＡ１に侵入していると判定し、人物Ｔ（目標動体）が撮像されていると認識している第２撮像装置１１からの限定エリアＡ１の画像データを大画面領域２２に表示し、他の画像データを小画面領域に表示する（ステップＳ４２Ａ）。
図６（Ｂ）の（時刻ｔ０）の例では、目標動体（人物Ｔ）が撮像されている限定エリアＡ１の画像データを大画面領域２２に表示し、大画面領域への表示に変更された限定エリアＡ１に対応付けられている小画面領域２３Ａに第１撮像装置からの対象エリアＡ０の画像データを表示した例を示している。
なお、第１撮像装置からの対象エリアＡ０（全体）の画像データを、限定エリアＡ１に対応付けられている小画面領域２３Ａに表示する代わりに、空いている小画面領域２３Ｅ〜２３Ｈのいずれかに表示するようにしてもよいし、第１撮像装置に対応する専用の小画面領域を用意して、その小画面領域に対象エリアＡ０の画像データを表示するようにしてもよい。
また、図６（Ｂ）の（時刻ｔ０）の図において、小画面領域２３Ａにおける「Ａ０」は対象エリアＡ０の画像が表示されていることを示し、小画面領域２３Ｂにおける「Ａ２」は限定エリアＡ２の画像が表示されていることを示し、小画面領域２３Ｃにおける「Ａ３」は限定エリアＡ３の画像が表示されていることを示し、小画面領域２３Ｄにおける「Ａ４」は限定エリアＡ４の画像が表示されていることを示している。
【００３１】
［時刻ｔ１における表示手段２１の表示状態］
時刻ｔ１では、人物Ｔは、限定エリアＡ１と限定エリアＡ３との間に居ると仮定する。
この場合、人物Ｔ（目標動体）は、限定エリアＡ１〜Ａ４の画像データのいずれにも撮像されていない。
この場合、処理手段は、第１撮像装置からの画像にて人物Ｔ（目標動体）の認識と追尾を行い、人物Ｔ（目標動体）がいずれの限定エリアＡ１〜Ａ４にも侵入していないと判定し、第１撮像装置からの画像データ（対象エリアＡ０（全体））を大画面領域２２に表示し、第２撮像装置１１〜１４からの限定エリアＡ１〜Ａ４の画像データを小画面領域２３Ａ〜２３Ｄに表示する（ステップＳ４２Ｂ）。
【００３２】
［時刻ｔ２における表示手段２１の表示状態］
時刻ｔ２では、人物Ｔは、限定エリアＡ３内に居ると仮定する。
この場合、処理手段は、第１撮像装置からの画像にて人物Ｔ（目標動体）の認識と追尾を行い、人物Ｔ（目標動体）が限定エリアＡ３に侵入していると判定し、人物Ｔ（目標動体）が撮像されていると認識している第２撮像装置１３からの限定エリアＡ３の画像データを大画面領域２２に表示し、他の画像データを小画面領域に表示する（ステップＳ４２Ａ）。
図６（Ｂ）の（時刻ｔ２）の例では、目標動体（人物Ｔ）が撮像されている限定エリアＡ３の画像データを大画面領域２２に表示し、大画面領域への表示に変更された限定エリアＡ３に対応付けられている小画面領域２３Ｃに第１撮像装置からの対象エリアＡ０の画像データを表示した例を示している。
なお、第１撮像装置からの対象エリアＡ０（全体）の画像データを、限定エリアＡ３に対応付けられている小画面領域２３Ｃに表示する代わりに、空いている小画面領域２３Ｅ〜２３Ｈのいずれかに表示するようにしてもよいし、第１撮像装置に対応する専用の小画面領域を用意して、その小画面領域に対象エリアＡ０の画像データを表示するようにしてもよい。
【００３３】
以下、同様に、人物Ｔ（目標動体）が限定エリアＡ１〜Ａ４の画像データ中に撮像されている場合は、人物Ｔ（目標動体）が撮像されている限定エリアの画像データを大画面領域に表示し、他の画像データ（対象エリアＡ０の画像データを含む）を小画面領域に表示する。
時刻ｔ３以降では、時刻ｔ４にて人物Ｔ（目標動体）が限定エリアＡ４の画像データ中に撮像されており、時刻ｔ６にて人物Ｔ（目標動体）が限定エリアＡ２の画像データ中に撮像されており、時刻ｔ８にて人物Ｔ（目標動体）が限定エリアＡ１の画像データ中に撮像されている例を示している。
また、人物Ｔ（目標動体）が限定エリアＡ１〜Ａ４の画像データのいずれにも撮像されていない場合は、対象エリアＡ０（全体）の画像データを大画面領域に表示し、他の画像データを小画面領域に表示する。
時刻ｔ３以降では、時刻ｔ３、時刻ｔ５、時刻ｔ７にて、人物Ｔ（目標動体）が限定エリアＡ１〜Ａ４のいずれの画像データ中にも撮像されていない例を示している。
【００３４】
●［目標動体が撮像されている画像データを抽出した編集データの例（図７）］
次に図７を用いて、図６（Ｂ）に示した表示手段２１への表示をした場合に、処理手段が、人物Ｔ（目標動体）が撮像されている画像データ（または録画データ）を自動的に抽出して編集データを作成する様子について説明する。
なお、以下の説明では、ライブ表示中における例を説明するが、録画データ表示については、表示手段２１に表示する画像が、リアルタイムの画像データでなく、記憶手段（または外部記憶装置）に記憶されている録画データである点が異なるだけであるので、説明を省略する。
【００３５】
処理手段は、時刻ｔ０のタイミングに対応する画像データ（または録画データ）として、目標動体（この場合、人物Ｔ）が撮像されて大画面領域に表示されている限定エリアＡ１の画像データ（または録画データ）を抽出して編集データとして記憶する。
処理手段は、時刻ｔ１のタイミングに対応する画像データ（または録画データ）として、目標動体（この場合、人物Ｔ）が限定エリアＡ１〜Ａ４のいずれにも撮像されていないので、大画面領域に表示されている対象エリアＡ０（全体）の画像データ（または録画データ）を抽出して編集データとして記憶する。
処理手段は、時刻ｔ２のタイミングに対応する画像データ（または録画データ）として、目標動体（この場合、人物Ｔ）が撮像されて大画面領域に表示されている限定エリアＡ３の画像データ（または録画データ）を抽出して編集データとして記憶する。
【００３６】
以降、同様に、時刻ｔ４、ｔ６、ｔ８のそれぞれのタイミングに対応する画像データ（または記録データ）としては、目標動体（この場合、人物Ｔ）が撮像されて大画面領域に表示されている限定エリアＡ４、Ａ２、Ａ１のそれぞれの画像データ（または録画データ）を抽出して編集データとして記憶する。
また、時刻ｔ３、ｔ５、ｔ７のそれぞれのタイミングに対応する画像データ（または記録データ）としては、目標動体（この場合、人物Ｔ）が限定エリアＡ１〜Ａ４のいずれにも撮像されていないので、大画面領域に表示されている対象エリアＡ０（全体）の画像データ（または録画データ）を抽出して編集データとして記憶する。
結果としては、大画面領域に表示されている画像データ（または録画データ）を、そのまま編集データとして作成して記憶する。
なお、大画面領域に表示されている画像データ（または録画データ）を編集データとするのでなく、表示手段２１に表示されている画像そのもの（大画面領域の画像及び小画面領域の画像）を編集データとして作成及び記憶するようにしてもよい。
このように、ライブ表示時または録画データ表示時において、目標動体が認識されている画像を抽出した編集データを自動的に作成することが可能であり、作業者の疲れ等による目標動体の見落としも発生しないので、非常に便利である。
【００３７】
本発明の目標追尾システム１は、本実施の形態で説明した外観、構成、処理、表示例等に限定されず、本発明の要旨を変更しない範囲で種々の変更、追加、削除が可能である。
また、本実施の形態の説明では、目標動体の指定を行う場合、第１撮像装置からの画像データ（または録画データ）を大画面領域に表示している際に、当該大画面領域に表示している第１撮像装置からの画像の中から目標動体を指定した。しかし、第１撮像装置からの画像データ（または録画データ）を小画面領域に表示している際に当該小画面領域に表示している第１撮像装置からの画像の中から目標動体を指定できるように構成してもよいし、第２撮像装置からの画像データ（または録画データ）を大画面領域または小画面領域に表示している際に、表示している第２撮像装置からの画像（大画面領域または小画面領域）の中から目標動体を指定できるように構成してもよい。目標動体を指定する画像は、第１撮像装置からの画像でもよいし、第２撮像装置からの画像でもよい。また、目標動体を指定する際、大画面領域から指定してもよいし、小画面領域から指定してもよい。
また、本実施の形態の説明では、第１撮像装置からの画像データ（または録画データ）を用いて目標動体の認識と追尾を行い、目標動体がいずれかの限定エリアに侵入したと判定した場合に当該限定エリアの画像を大画面領域に表示した。しかし、それぞれの第２撮像装置からのそれぞれの画像データ（または録画データ）にて目標動体が撮像されているか否かを認識させ、いずれかの第２撮像装置の画像データ（または録画データ）に目標動体が認識された場合に、目標動体が認識された第２撮像装置の画像データ（または録画データ）を大画面領域に表示するようにしてもよい。目標動体の認識を、第１撮像装置からの画像のみにて行ってもよいし、それぞれの第２撮像装置からの画像にて行ってもよい。
【符号の説明】
【００３８】
１        目標追尾システム
２        店舗
３        店舗部
４        隣接部
１０      第１撮像装置
１１〜１４    第２撮像装置
２０      画像処理装置
２１      表示手段
２２      大画面領域
２２Ａ    メニュー欄
２３Ａ〜２３Ｈ    小画面領域
３０      外部記憶装置
５０      出入口
５１      レジスター
６１      レジカウンター
６２〜６７    商品棚
Ａ０      対象エリア
Ａ１〜Ａ４    限定エリア
【図１】
2014068057.tif 000003
【図２】
2014068057.tif 000004
【図３】
2014068057.tif 000005
【図４】
2014068057.tif 000006
【図５】
2014068057.tif 000007
【図６】
2014068057.tif 000008
【図７】
2014068057.tif 000009