(57)【特許請求の範囲】
【請求項１】
施設内を複数のカメラにより撮影した映像に基づき、施設内で同伴者とはぐれた人物の捜索を支援する施設内人物捜索支援装置であって、
ユーザの入力操作に応じて、捜索対象者を特定するための検索条件を設定する検索条件設定部と、
施設内を撮影した映像に対する追尾処理により取得した追尾情報、および前記検索条件に基づき、施設内に滞在する人物の中から、捜索対象者である可能性が高い人物を検索する捜索対象検索部と、
この捜索対象検索部の検索結果に基づき、捜索対象者である可能性が高い人物の映像を、所定数抽出して、それらの映像を捜索対象の候補映像として提示する捜索対象候補提示部と、
捜索対象者が写る前記捜索対象の候補映像を選択するユーザの操作に応じて、その選択された前記捜索対象の候補映像に対応する人物を捜索対象に設定する捜索対象設定部と、
前記追尾情報に基づき、前記捜索対象に設定された人物の最新の追尾位置を取得して、その最新の追尾位置を、捜索対象者の最新の居場所として提示する最新位置提示部と、
を備えたことを特徴とする施設内人物捜索支援装置。
【請求項２】
前記最新位置提示部は、捜索対象者の最新の居場所に関する位置情報を提示すると共に、前記最新の追尾位置に対応する最新の追尾映像、および捜索対象者が最新の居場所に滞在する時刻に関する時間情報を提示することを特徴とする請求項１に記載の施設内人物捜索支援装置。
【請求項３】
前記最新位置提示部は、前記最新の追尾映像とともに、その最新の追尾映像を撮影するカメラのライブ映像を提示することを特徴とする請求項２に記載の施設内人物捜索支援装置。
【請求項４】
前記最新位置提示部は、前記ライブ映像を表示装置に表示させるとともに、前記ライブ映像の表示画面上に、前記ライブ映像のカメラを切り換える操作部を表示させることを特徴とする請求項３に記載の施設内人物捜索支援装置。
【請求項５】
更に、前記最新位置提示部により提示された捜索対象者の最新の居場所に誤りがある場合に、前記追尾情報に基づき、前記捜索対象に設定された人物と同一である可能性が、前記最新位置提示部で最新の居場所を提示した人物の次に高い人物の映像を、所定数抽出して、それらの映像を追尾修正の候補映像として提示する追尾修正候補提示部を備え、
前記最新位置提示部は、捜索対象者が写る前記追尾修正の候補映像を選択するユーザの操作に応じて、その選択された前記追尾修正の候補映像に対応する人物の最新の追尾位置を取得して、その最新の追尾位置を、捜索対象者の最新の居場所として提示することを特徴とする請求項１から請求項４のいずれかに記載の施設内人物捜索支援装置。
【請求項６】
更に、前記追尾修正候補提示部により提示された前記追尾修正の候補映像の全てに誤りがある場合に、前記捜索対象設定部において人物を捜索対象に設定した際の前記捜索対象の候補映像から、前記最新位置提示部により提示された前記最新の追尾映像に至るまでの間に、前記追尾情報に基づき、前記捜索対象に設定された人物と同一の可能性がある人物が写るカメラごとの映像を確認映像として提示する確認映像提示部を備え、
前記追尾修正候補提示部は、誤りがある前記確認映像を選択するユーザの操作に応じて、前記追尾情報に基づき、前記捜索対象に設定された人物と同一である可能性が、ユーザにより選択された前記確認映像に対応する人物の次に高い人物の映像を、所定数抽出して、それらの映像を前記追尾修正の候補映像として提示することを特徴とする請求項５に記載の施設内人物捜索支援装置。
【請求項７】
前記確認映像提示部は、複数の前記確認映像が撮影時刻順に並べて配置された時系列追跡画面を、表示装置に表示させることを特徴とする請求項６に記載の施設内人物捜索支援装置。
【請求項８】
前記確認映像提示部は、施設の状態を示す地図画像上に、複数の前記確認映像が、前記カメラの実際の配置状況に対応して配置されたマップ追跡画面を、表示装置に表示させることを特徴とする請求項６に記載の施設内人物捜索支援装置。
【請求項９】
前記検索条件設定部は、前記検索条件として、同伴者を撮影した画像、および捜索対象者の特徴に関する情報を検索条件として設定することを特徴とする請求項１から請求項８のいずれかに記載の施設内人物捜索支援装置。
【請求項１０】
施設内を複数のカメラにより撮影した映像に基づき、施設内で同伴者とはぐれた人物の捜索を支援する施設内人物捜索支援システムであって、
施設内を撮影する前記カメラと、
このカメラごとの映像を表示する表示装置と、
複数の情報処理装置と、
を有し、
前記複数の情報処理装置のいずれかが、
ユーザの入力操作に応じて、捜索対象者を特定するための検索条件を設定する検索条件設定部と、
施設内を撮影した映像に対する追尾処理により取得した追尾情報、および前記検索条件に基づき、施設内に滞在する人物の中から、捜索対象者である可能性が高い人物を検索する捜索対象検索部と、
この捜索対象検索部の検索結果に基づき、捜索対象者である可能性が高い人物の映像を、所定数抽出して、それらの映像を捜索対象の候補映像として提示する捜索対象候補提示部と、
捜索対象者が写る前記捜索対象の候補映像を選択するユーザの操作に応じて、その選択された前記捜索対象の候補映像に対応する人物を捜索対象に設定する捜索対象設定部と、
前記追尾情報に基づき、前記捜索対象に設定された人物の最新の追尾位置を取得して、その最新の追尾位置を、捜索対象者の最新の居場所として提示する最新位置提示部と、
を備えたことを特徴とする施設内人物捜索支援システム。
【請求項１１】
施設内を複数のカメラにより撮影した映像に基づき、施設内で同伴者とはぐれた人物の捜索を支援する処理を情報処理装置に行わせる施設内人物捜索支援方法であって、
ユーザの入力操作に応じて、捜索対象者を特定するための検索条件を設定するステップと、
施設内を撮影した映像に対する追尾処理により取得した追尾情報、および前記検索条件に基づき、施設内に滞在する人物の中から、捜索対象者である可能性が高い人物を検索するステップと、
このステップでの検索結果に基づき、捜索対象者である可能性が高い人物の映像を、所定数抽出して、それらの映像を捜索対象の候補映像として提示するステップと、
捜索対象者が写る前記捜索対象の候補映像を選択するユーザの操作に応じて、その選択された前記捜索対象の候補映像に対応する人物を捜索対象に設定するステップと、
前記追尾情報に基づき、前記捜索対象に設定された人物の最新の追尾位置を取得して、その最新の追尾位置を、捜索対象者の最新の居場所として提示するステップと、
を備えたことを特徴とする施設内人物捜索支援方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、施設内を複数のカメラにより撮影した映像に基づき、施設内で同伴者とはぐれた人物の捜索を支援する施設内人物捜索支援装置、施設内人物捜索支援システムおよび施設内人物捜索支援方法に関するものである。
【背景技術】
【０００２】
デパートやショッピングセンターなどの施設では、親とはぐれて迷子になった子供を保護する迷子センターが設けられているが、親とはぐれて迷子になった子供や、迷子になって保護された子供の親を捜索して、両者を迅速に引き合わせることが望まれる。
【０００３】
このような施設内での人物の捜索に関連するものとして、従来、施設内を撮影するカメラの映像に基づいて、捜索対象者を捜索する技術が知られている（特許文献１〜３参照）。特に、特許文献１，２に開示された技術では、捜索依頼者、すなわち、捜索対象者の同伴者の撮影画像を取得して、この撮影画像に基づいて、捜索依頼者の近傍に存在する捜索対象者をカメラの映像から発見して、その捜索対象者を追跡することで捜索対象者の最新の居場所を把握するようにしている。また、特許文献３に開示された技術では、捜索対象者の撮影画像を取得して、人物の顔画像を用いた人物照合により捜索対象者を捜索するようにしている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００４−２０６５８４号公報
【特許文献２】特開２００４−１５１８２０号公報
【特許文献３】特開２００４−１２６７１１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
さて、前記従来の技術では、カメラの映像から人物を検出する人物検出技術や、映像から検出された人物を識別する人物認識技術を用いて捜索対象者を捜索するものであり、このような人物検出技術や人物認識技術を用いた人物追尾により、捜索対象者を見つけ出すことができる。しかしながら、人物検出技術や人物認識技術には精度面での限界があり、必ずしも正しい結果が得られるものでなく、人物検出や人物認識が適切に行われないため、追尾情報の精度が低下して、捜索対象者の最新の居場所を確実に提示することができないという問題があった。
【０００６】
本発明は、このような従来技術の問題点を解消するべく案出されたものであり、その主な目的は、追尾情報の精度が低い場合でも、ユーザが適宜に選択や修正の操作を行うことで、捜索対象者の最新の居場所を確実に提示することができるように構成された施設内人物捜索支援装置、施設内人物捜索支援システムおよび施設内人物捜索支援方法を提供することにある。
【課題を解決するための手段】
【０００７】
本発明の施設内人物捜索支援装置は、施設内を複数のカメラにより撮影した映像に基づき、施設内で同伴者とはぐれた人物の捜索を支援する施設内人物捜索支援装置であって、ユーザの入力操作に応じて、捜索対象者を特定するための検索条件を設定する検索条件設定部と、施設内を撮影した映像に対する追尾処理により取得した追尾情報、および前記検索条件に基づき、施設内に滞在する人物の中から、捜索対象者である可能性が高い人物を検索する捜索対象検索部と、この捜索対象検索部の検索結果に基づき、捜索対象者である可能性が高い人物の映像を、所定数抽出して、それらの映像を捜索対象の候補映像として提示する捜索対象候補提示部と、捜索対象者が写る前記捜索対象の候補映像を選択するユーザの操作に応じて、その選択された前記捜索対象の候補映像に対応する人物を捜索対象に設定する捜索対象設定部と、前記追尾情報に基づき、前記捜索対象に設定された人物の最新の追尾位置を取得して、その最新の追尾位置を、捜索対象者の最新の居場所として提示する最新位置提示部と、を備えた構成とする。
【０００８】
また、本発明の施設内人物捜索支援システムは、施設内を複数のカメラにより撮影した映像に基づき、施設内で同伴者とはぐれた人物の捜索を支援する施設内人物捜索支援システムであって、施設内を撮影する前記カメラと、このカメラごとの映像を表示する表示装置と、複数の情報処理装置と、を有し、前記複数の情報処理装置のいずれかが、ユーザの入力操作に応じて、捜索対象者を特定するための検索条件を設定する検索条件設定部と、施設内を撮影した映像に対する追尾処理により取得した追尾情報、および前記検索条件に基づき、施設内に滞在する人物の中から、捜索対象者である可能性が高い人物を検索する捜索対象検索部と、この捜索対象検索部の検索結果に基づき、捜索対象者である可能性が高い人物の映像を、所定数抽出して、それらの映像を捜索対象の候補映像として提示する捜索対象候補提示部と、捜索対象者が写る前記捜索対象の候補映像を選択するユーザの操作に応じて、その選択された前記捜索対象の候補映像に対応する人物を捜索対象に設定する捜索対象設定部と、前記追尾情報に基づき、前記捜索対象に設定された人物の最新の追尾位置を取得して、その最新の追尾位置を、捜索対象者の最新の居場所として提示する最新位置提示部と、を備えた構成とする。
【０００９】
また、本発明の施設内人物捜索支援方法は、施設内を複数のカメラにより撮影した映像に基づき、施設内で同伴者とはぐれた人物の捜索を支援する処理を情報処理装置に行わせる施設内人物捜索支援方法であって、ユーザの入力操作に応じて、捜索対象者を特定するための検索条件を設定するステップと、施設内を撮影した映像に対する追尾処理により取得した追尾情報、および前記検索条件に基づき、施設内に滞在する人物の中から、捜索対象者である可能性が高い人物を検索するステップと、このステップでの検索結果に基づき、捜索対象者である可能性が高い人物の映像を、所定数抽出して、それらの映像を捜索対象の候補映像として提示するステップと、捜索対象者が写る前記捜索対象の候補映像を選択するユーザの操作に応じて、その選択された前記捜索対象の候補映像に対応する人物を捜索対象に設定するステップと、前記追尾情報に基づき、前記捜索対象に設定された人物の最新の追尾位置を取得して、その最新の追尾位置を、捜索対象者の最新の居場所として提示するステップと、を備えた構成とする。
【発明の効果】
【００１０】
本発明によれば、捜索対象者である可能性が高い人物の映像を、捜索対象の候補映像として複数提示して、ユーザに選択させるため、追尾情報の精度が低い場合でも、正しい人物が捜索対象に設定されて、捜索対象者の最新の居場所を確実に提示することができる。
【図面の簡単な説明】
【００１１】
【図１】本実施形態に係る施設内人物捜索支援システムの全体構成図
【図２】施設におけるカメラ１の設置状況を示す平面図
【図３】ＰＣ３の概略構成を示す機能ブロック図
【図４】モニタ７に表示される画面の遷移状況を示す説明図
【図５】各画面で行われる監視者の操作に応じてＰＣ３の各部で行われる処理の手順を示すフロー図
【図６】モニタ７に表示される検索条件入力画面を示す説明図
【図７】モニタ７に表示される捜索対象選択画面を示す説明図
【図８】モニタ７に表示される居場所表示画面を示す説明図
【図９】モニタ７に表示される候補選択画面を示す説明図
【図１０】モニタ７に表示される追尾過程確認画面を示す説明図
【図１１】モニタ７に表示されるマップ追跡画面を示す説明図
【図１２】追尾が失敗している場合のマップ追跡画面を示す説明図
【図１３】追尾が失敗している場合のマップ追跡画面を示す説明図
【発明を実施するための形態】
【００１２】
前記課題を解決するためになされた第１の発明は、施設内を複数のカメラにより撮影した映像に基づき、施設内で同伴者とはぐれた人物の捜索を支援する施設内人物捜索支援装置であって、ユーザの入力操作に応じて、捜索対象者を特定するための検索条件を設定する検索条件設定部と、施設内を撮影した映像に対する追尾処理により取得した追尾情報、および前記検索条件に基づき、施設内に滞在する人物の中から、捜索対象者である可能性が高い人物を検索する捜索対象検索部と、この捜索対象検索部の検索結果に基づき、捜索対象者である可能性が高い人物の映像を、所定数抽出して、それらの映像を捜索対象の候補映像として提示する捜索対象候補提示部と、捜索対象者が写る前記捜索対象の候補映像を選択するユーザの操作に応じて、その選択された前記捜索対象の候補映像に対応する人物を捜索対象に設定する捜索対象設定部と、前記追尾情報に基づき、前記捜索対象に設定された人物の最新の追尾位置を取得して、その最新の追尾位置を、捜索対象者の最新の居場所として提示する最新位置提示部と、を備えた構成とする。
【００１３】
これによると、捜索対象者である可能性が高い人物の映像を、捜索対象の候補映像として複数提示して、ユーザに選択させるため、追尾情報の精度が低い場合でも、正しい人物が捜索対象に設定されて、捜索対象者の最新の居場所を確実に提示することができる。
【００１４】
また、第２の発明は、前記最新位置提示部は、捜索対象者の最新の居場所に関する位置情報を提示すると共に、前記最新の追尾位置に対応する最新の追尾映像、および捜索対象者が最新の居場所に滞在する時刻に関する時間情報を提示する構成とする。
【００１５】
これによると、居場所に関する位置情報が提示されるため、捜索対象者の居場所をユーザが把握することができ、さらに、捜索対象者の最新の追尾映像が提示されるため、捜索対象者の最新の状況をユーザが把握することができ、さらに、捜索対象者が最新の居場所に滞在する時刻に関する時間情報が提示されるため、捜索対象者が最新の居場所に滞在してから現在までにどの程度の時間が経過しているかをユーザが把握することができる。
【００１６】
また、第３の発明は、前記最新位置提示部は、前記最新の追尾映像とともに、その最新の追尾映像を撮影するカメラのライブ映像を提示する構成とする。
【００１７】
これによると、最新の追尾映像の撮影時刻が比較的古い、すなわち、捜索対象者の追尾が終了してから長い時間が経過している場合でも、ライブ映像が提示されるため、最新の居場所の現在の状況をユーザが把握することができ、捜索対象者が移動していなければ、ライブ映像で捜索対象者を見つけ出すことができる。
【００１８】
また、第４の発明は、前記最新位置提示部は、前記ライブ映像を表示装置に表示させるとともに、前記ライブ映像の表示画面上に、前記ライブ映像のカメラを切り換える操作部を表示させる構成とする。
【００１９】
これによると、最新の追尾映像を撮影するカメラの近傍のカメラの撮影エリアに捜索対象者が移動して、ライブ映像に捜索対象者が写っていない場合に、ライブ映像のカメラを切り換えることで、捜索対象者を見つけ出すことができる。
【００２０】
また、第５の発明は、更に、前記最新位置提示部により提示された捜索対象者の最新の居場所に誤りがある場合に、前記追尾情報に基づき、前記捜索対象に設定された人物と同一である可能性が、前記最新位置提示部で最新の居場所を提示した人物の次に高い人物の映像を、所定数抽出して、それらの映像を追尾修正の候補映像として提示する追尾修正候補提示部を備え、前記最新位置提示部は、捜索対象者が写る前記追尾修正の候補映像を選択するユーザの操作に応じて、その選択された前記追尾修正の候補映像に対応する人物の最新の追尾位置を取得して、その最新の追尾位置を、捜索対象者の最新の居場所として提示する構成とする。
【００２１】
これによると、最新位置提示部により提示された捜索対象者の最新の居場所に誤りがある、すなわち、捜索対象者を捜索対象に設定してから以降の追尾情報に誤りがある場合に、追尾修正の候補映像を複数提示して、ユーザに選択させるため、追尾情報が適切に修正されて、捜索対象者の最新の居場所を確実に提示することができる。
【００２２】
また、第６の発明は、更に、前記追尾修正候補提示部により提示された前記追尾修正の候補映像の全てに誤りがある場合に、前記捜索対象設定部において人物を捜索対象に設定した際の前記捜索対象の候補映像から、前記最新位置提示部により提示された前記最新の追尾映像に至るまでの間に、前記追尾情報に基づき、前記捜索対象に設定された人物と同一の可能性がある人物が写るカメラごとの映像を確認映像として提示する確認映像提示部を備え、
前記追尾修正候補提示部は、誤りがある前記確認映像を選択するユーザの操作に応じて、前記追尾情報に基づき、前記捜索対象に設定された人物と同一である可能性が、ユーザにより選択された前記確認映像に対応する人物の次に高い人物の映像を、所定数抽出して、それらの映像を前記追尾修正の候補映像として提示する構成とする。
【００２３】
これによると、捜索対象に設定した際の候補映像から最新の追尾映像に至るまでのカメラごとの映像を確認映像として提示して、誤りがある確認映像、すなわち、捜索対象者が写っていない確認映像をユーザに選択させることで、追尾情報内の誤りがある箇所が明確になり、その追尾情報内の誤りがある箇所に対応する候補映像を提示して、適切な候補映像をユーザに選択させることで、追尾情報内の誤りがある箇所を確実に修正することができる。
【００２４】
また、第７の発明は、前記確認映像提示部は、複数の前記確認映像が撮影時刻順に並べて配置された時系列追跡画面を、表示装置に表示させる構成とする。
【００２５】
これによると、ユーザが撮影時刻順に並んだ確認映像を順次確認することで、誤りがある確認映像を見つけ出すことができるため、確認映像の確認作業を迅速に行うことができる。
【００２６】
また、第８の発明は、前記確認映像提示部は、施設の状態を示す地図画像上に、複数の前記確認映像が、前記カメラの実際の配置状況に対応して配置されたマップ追跡画面を、表示装置に表示させる構成とする。
【００２７】
これによると、カメラの実際の配置状況を見ながら確認映像を順次確認することで、捜索対象者の追尾がどこで失敗したかをユーザが容易に把握することができる。
【００２８】
また、第９の発明は、前記検索条件設定部は、前記検索条件として、同伴者を撮影した画像、および捜索対象者の特徴に関する情報を検索条件として設定する構成とする。
【００２９】
これによると、同伴者を撮影した画像、および捜索対象者の特徴に関する情報に基づいて捜索対象者を検索するため、捜索対象者の検索精度を高めることができる。
【００３０】
また、第１０の発明は、施設内を複数のカメラにより撮影した映像に基づき、施設内で同伴者とはぐれた人物の捜索を支援する施設内人物捜索支援システムであって、施設内を撮影する前記カメラと、このカメラごとの映像を表示する表示装置と、複数の情報処理装置と、を有し、前記複数の情報処理装置のいずれかが、ユーザの入力操作に応じて、捜索対象者を特定するための検索条件を設定する検索条件設定部と、施設内を撮影した映像に対する追尾処理により取得した追尾情報、および前記検索条件に基づき、施設内に滞在する人物の中から、捜索対象者である可能性が高い人物を検索する捜索対象検索部と、この捜索対象検索部の検索結果に基づき、捜索対象者である可能性が高い人物の映像を、所定数抽出して、それらの映像を捜索対象の候補映像として提示する捜索対象候補提示部と、捜索対象者が写る前記捜索対象の候補映像を選択するユーザの操作に応じて、その選択された前記捜索対象の候補映像に対応する人物を捜索対象に設定する捜索対象設定部と、前記追尾情報に基づき、前記捜索対象に設定された人物の最新の追尾位置を取得して、その最新の追尾位置を、捜索対象者の最新の居場所として提示する最新位置提示部と、を備えた構成とする。
【００３１】
これによると、第１の発明と同様に、追尾情報に誤りが発生した場合でも、ユーザが適切な捜索対象の候補映像を選択することで、捜索対象者の最新の居場所を確実に提示することができる。
【００３２】
また、第１１の発明は、施設内を複数のカメラにより撮影した映像に基づき、施設内で同伴者とはぐれた人物の捜索を支援する処理を情報処理装置に行わせる施設内人物捜索支援方法であって、ユーザの入力操作に応じて、捜索対象者を特定するための検索条件を設定するステップと、施設内を撮影した映像に対する追尾処理により取得した追尾情報、および前記検索条件に基づき、施設内に滞在する人物の中から、捜索対象者である可能性が高い人物を検索するステップと、このステップでの検索結果に基づき、捜索対象者である可能性が高い人物の映像を、所定数抽出して、それらの映像を捜索対象の候補映像として提示するステップと、捜索対象者が写る前記捜索対象の候補映像を選択するユーザの操作に応じて、その選択された前記捜索対象の候補映像に対応する人物を捜索対象に設定するステップと、前記追尾情報に基づき、前記捜索対象に設定された人物の最新の追尾位置を取得して、その最新の追尾位置を、捜索対象者の最新の居場所として提示するステップと、を備えた構成とする。
【００３３】
これによると、第１の発明と同様に、追尾情報に誤りが発生した場合でも、ユーザが適切な捜索対象の候補映像を選択することで、捜索対象者の最新の居場所を確実に提示することができる。
【００３４】
以下、本発明の実施の形態を、図面を参照しながら説明する。なお、本実施形態の説明では、「追跡」および「追尾」という同様の意味を持つ用語を使用しており、これは、単に説明の便宜上使い分けているに過ぎないが、「追跡」は、主として監視者の行為と関わりが強い場合に用いており、「追尾」は、主として装置で行われる処理と関わりが強い場合に用いている。
【００３５】
図１は、本実施形態に係る施設内人物捜索支援システムの全体構成図である。
【００３６】
この施設内人物捜索支援システムは、デパートやショッピングセンターなどの大規模な商業施設などを対象にして構築されるものであり、複数のカメラ１と、レコーダ（映像蓄積手段）２と、ＰＣ（施設内人物捜索支援装置）３と、カメラ内追尾処理装置４と、を備えている。
【００３７】
カメラ１は施設内の適所に設置され、カメラ１により施設内（監視エリア）が撮影され、このカメラ１で撮影された施設内の映像がレコーダ２に録画される。
【００３８】
ＰＣ３には、監視者が種々の入力操作を行うマウスなどの入力デバイス６と、監視画面を表示するモニタ（表示装置）７とが接続されている。このＰＣ３は、施設の警備室などに設置され、監視者（警備員）が、モニタ７に表示される監視画面で、カメラ１で撮影された施設内の映像をリアルタイムで閲覧することができ、また、レコーダ２に録画された過去の施設内の映像を閲覧することができる。
【００３９】
なお、本部に設けられたＰＣ１１にも図示しないモニタが接続され、カメラ１で撮影された施設内の映像をリアルタイムで閲覧し、また、レコーダ２に録画された過去の施設内の映像を閲覧して、本部で施設内の状況を確認することができる。
【００４０】
カメラ内追尾処理装置４では、カメラ１の映像から検出された人物（移動体）を追尾して、人物ごとにカメラ内追尾情報を生成する処理が行われる。このとき、人物ごとの位置情報を取得する他に、人物の特徴に関する情報、すなわち、人物の属性（年齢および性別など）や、人物の外観上の特徴（身長および上下の服装の色など）に関する情報も取得する。このカメラ内追尾処理には、公知の画像認識技術（人物検出技術および人物認識技術など）を利用すればよい。
【００４１】
なお、本実施形態では、カメラ内追尾処理装置４が、ＰＣ３とは独立して、カメラ内追尾処理を常時行うようにしているが、ＰＣ３からの指示に応じて追尾処理を実行するものとしてもよい。また、カメラ内追尾処理装置４では、映像から検出された全ての人物を対象にして追尾処理を行うことが望ましいが、追跡対象に指定された人物およびこれと関連度の高い人物に絞って追尾処理を行うようにしてもよい。
【００４２】
次に、図１に示したカメラ１の施設における設置状況について説明する。図２は、施設におけるカメラ１の設置状況を示す平面図である。
【００４３】
施設内（監視エリア）には、商品陳列エリアの間に通路が設けられており、この通路を主に撮影するように複数のカメラ１が設置されている。
【００４４】
施設内の通路を人物が移動すると、カメラ１のいずれか１つあるいは複数で人物が撮影され、人物が移動するのに応じて、人物の撮影が次のカメラ１に引き継がれる。このとき、人物の撮影を引き継ぐカメラ１は、施設内の通路の形態およびカメラ１の撮影エリアにより限定され、この人物の撮影が引き継がれる関係にあるカメラを、本実施形態では、連携関係を有するカメラと呼称する。このカメラの連携関係に関する情報は予め設定されて、カメラ連携情報としてＰＣ３に保持されている。なお、カメラの連携関係に関する情報は、カメラ１の台数や設置場所などの変更に備え、システムの起動時などに各カメラ１の設置情報などをＰＣ３により個別に取得し、各カメラの連携関係に関する情報を更新するようにしてもよい。
【００４５】
次に、図１に示したＰＣ３の概略構成について説明する。図３は、ＰＣ３の概略構成を示す機能ブロック図である。
【００４６】
ＰＣ３は、追尾情報蓄積部２１と、入力情報取得部２２と、検索条件設定部２３と、捜索対象検索部２４と、捜索対象候補提示部２５と、捜索対象設定部２６と、カメラ間追尾処理部２７と、最新位置提示部２８と、追尾修正候補提示部２９と、確認映像提示部３０と、画面生成部３１と、を備えている。
【００４７】
追尾情報蓄積部２１では、カメラ内追尾処理装置４で生成したカメラ内追尾情報が蓄積される。また、追尾情報蓄積部２１では、カメラ間追尾処理部２７で生成したカメラ間追尾情報が蓄積される。
【００４８】
入力情報取得部２２では、マウスなどの入力デバイス６を用いた監視者の入力操作に応じて、その入力操作に基づく入力情報を取得する処理が行われる。
【００４９】
検索条件設定部２３では、ユーザの入力操作に応じて、捜索対象者を特定するための検索条件を設定する処理が行われる。本実施形態では、検索条件入力画面（図６参照）をモニタ７に表示させて、この検索条件入力画面で、検索条件として、同伴者（捜索依頼者）を撮影した画像、捜索対象者の特徴に関する情報、具体的には、年齢、性別、および外観上の特徴（身長、上下の服装の色など）、ならびに、はぐれた時間および場所に関する情報をユーザに入力させる。
【００５０】
捜索対象検索部２４では、追尾情報蓄積部２１に蓄積された追尾情報（カメラ内追尾情報）、および検索条件設定部２３で設定された検索条件に基づき、施設内に滞在する人物の中から、捜索対象者である可能性が高い人物を検索する処理が行われる。追尾情報蓄積部２１には、施設内に滞在する各人物の特徴に関する情報が蓄積されており、この各人物の特徴に関する情報と、検索条件設定部２３で設定された検索条件とを比較照合することで、捜索対象者である可能性の高さを判定する。
【００５１】
この処理では、まず、検索条件として取得した同伴者の撮影画像から顔画像を切り出して、この同伴者の顔画像と施設内に滞在する各人物の顔画像との間の類似度に基づいて同一人物か否かを判定する人物照合が行われ、また、同伴者の色情報（服装の色）に基づく人物照合が行われ、この人物照合により、同伴者である可能性が高い人物を抽出する。なお、ここでは、同伴者の顔画像の類似度を優先し、同伴者の映像を抽出するようにしているが、これに限られず、服装の色情報など、他の特徴情報を優先する形で、同伴者の映像を抽出するようにしてもよい。
【００５２】
次に、同伴者である可能性が高い人物の近傍に存在する人物を対象にして、検索条件として取得した捜索対象者の特徴に関する情報（年齢、性別、身長、および上下の服装の色）に基づく人物照合により、捜索対象者である可能性が高い人物を抽出する。このとき、検索条件として取得した離別場所および離別時刻に基づいて検索対象を絞り込む。すなわち、離別場所に対応するカメラ１およびその近傍のカメラ１の映像から検出された人物を優先して検索を行い、また、離別時刻の近傍で検出された人物を優先して検索を行う。
【００５３】
捜索対象候補提示部２５では、捜索対象検索部２４の検索結果に基づき、捜索対象者である可能性が高い人物の映像を、上位から所定数抽出して、それらの映像を捜索対象の候補映像として提示する処理が行われる。本実施形態では、捜索対象の候補映像を表示する捜索対象選択画面（図７参照）をモニタ７に表示させ、この捜索対象選択画面に表示された候補映像の中から、捜索対象者が写る映像をユーザに選択させる。
【００５４】
なお、捜索対象候補提示部２５で提示する候補映像は、捜索対象者である可能性が高い各人物ごとに、最新の追尾映像、すなわち、捜索対象者である可能性が高い人物と、同伴者（捜索依頼者）である可能性が高い人物とが同時に検出された映像の中で最新のものを採用するとよく、この場合、捜索対象者が写る正しい候補映像には、捜索対象者が同伴者とはぐれる直前の状況が写っている。
【００５５】
捜索対象設定部２６では、捜索対象候補提示部２５により提示された捜索対象の候補映像の中から、捜索対象者が写る候補映像を選択するユーザの操作に応じて、その選択された捜索対象の候補映像に対応する人物を捜索対象に設定する処理が行われる。
【００５６】
カメラ間追尾処理部２７は、リンクスコア算出部４１と、追尾情報生成部４２と、を備えている。
【００５７】
リンクスコア算出部４１では、追尾情報蓄積部２１から各カメラ１に関するカメラ内追尾情報を取得して、各カメラ１に関するカメラ内追尾処理で検出追尾された人物同士で、同一人物である可能性の高さを表すリンクスコア（評価値）を算出する。この処理では、人物の検出時刻（フレームの撮影時刻）、人物の検出位置、人物の移動速度、人物像の色情報などに基づいてリンクスコアを算出する。
【００５８】
追尾情報生成部４２では、捜索対象設定部２６で捜索対象に設定された人物を起点にして、連携関係にあるカメラ１に関するカメラ内追尾で追尾された人物の中から、リンクスコアが最も高い、すなわち、同一人物である可能性が最も高い人物をカメラ１ごとに順次選択して、それらの人物を同一人物として対応づけた情報を生成する処理が行われる。
【００５９】
具体的には、まず、ユーザにより選択された捜索対象の候補映像を撮影したカメラ１と連携関係にあるカメラ１のカメラ内追尾で追尾された人物の中からリンクスコアが最も高い人物を選択し、次に、その選択された人物を撮影したカメラ１と連携関係にあるカメラ１のカメラ内追尾で追尾された人物の中からリンクスコアが最も高い人物を選択し、このような人物の選択を連携関係にあるカメラ１ごとに繰り返す。
【００６０】
このカメラ間追尾処理部２７のリンクスコア算出部４１で算出されたリンクスコアに関する情報と、追尾情報生成部４２で生成した人物の対応関係に関する情報は、カメラ間追尾情報として追尾情報蓄積部２１に蓄積される。
【００６１】
最新位置提示部２８では、追尾情報蓄積部２１に蓄積された追尾情報（カメラ間追尾情報）に基づき、捜索対象設定部２６で捜索対象に設定された人物の最新の追尾位置を取得して、その最新の追尾位置を、捜索対象者の最新の居場所として提示する処理が行われる。特に、最新位置提示部２８では、捜索対象者の最新の居場所に関する位置情報を提示すると共に、最新の追尾位置に対応する最新の追尾映像、すなわち、追尾処理において当該人物が検出された最新の映像、および捜索対象者が最新の居場所に滞在する時刻（追尾映像の撮影時刻）に関する時間情報を提示する。さらに、最新位置提示部２８では、最新の追尾映像を撮影するカメラのライブ映像（現在時の映像）を最新の追尾映像と同時に提示する。本実施形態では、最新の追尾映像およびライブ映像が並べて表示された居場所表示画面（図８参照）をモニタ７に表示させる。
【００６２】
追尾修正候補提示部２９では、最新位置提示部２８により提示された最新の追尾映像に誤りがある、すなわち、その最新の追尾映像に捜索対象者が写っていない場合に、追尾情報蓄積部２１に蓄積された追尾情報（カメラ間追尾情報）に基づき、捜索対象に設定された人物と同一である可能性が、最新位置提示部２８で提示した最新の追尾映像に対応する人物の次に高い人物の映像を、上位から所定数抽出して、それらの映像を追尾修正の候補映像として提示する処理が行われる。本実施形態では、追尾修正の候補映像を表示する候補選択画面（図９参照）をモニタ７に表示させ、この候補選択画面に表示された候補映像の中から、捜索対象者が写る映像をユーザに選択させる。
【００６３】
ここで、最新位置提示部２８では、リンクスコアに基づいて、捜索対象に設定された人物と同一である可能性が最も高い人物の映像が提示され、追尾修正候補提示部２９では、最新位置提示部２８で提示された映像に対応する人物よりリンクスコアが低い人物の中から、リンクスコアが高い人物を上位から所定数選択して、それらの人物の映像が提示される。
【００６４】
このようにして、追尾修正候補提示部２９により提示された追尾修正の候補映像の１つがユーザにより選択されると、最新位置提示部２８では、ユーザにより選択された候補映像に対応する人物の最新の追尾位置を取得して、その最新の追尾位置を、捜索対象者の最新の居場所として提示する、すなわち、最新の追尾位置に対応する最新の追尾映像が表示された居場所表示画面（図８参照）をモニタ７に表示させる処理が行われる。
【００６５】
なお、追尾修正候補提示部２９で提示される追尾修正の候補映像には、各人物の最新の追尾映像を提示するとよく、この場合、ユーザにより選択された候補映像がそのまま最新の追尾映像として最新位置提示部２８により提示される。
【００６６】
確認映像提示部３０では、追尾修正候補提示部２９により提示された追尾修正の候補映像の全てに誤りがある、すなわち、追尾修正の候補映像の全てに捜索対象者が写っていない場合に、追尾情報蓄積部２１に蓄積された追尾情報に基づき、捜索対象設定部２６で人物を捜索対象に設定した際の候補映像から、最新位置提示部２８により提示された最新の追尾映像に至るまでのカメラ１ごとの映像を確認映像として提示する処理が行われる。本実施形態では、確認映像が撮影時刻順に並べて表示された追尾過程確認画面（図１０参照）をモニタ７に表示させ、捜索対象者が写っていない確認映像をユーザに選択させる。なお、誤りがある確認映像が複数ある場合には、撮影時刻が最も古い確認映像をユーザに選択させる。
【００６７】
このようにして、確認映像提示部３０により提示された確認映像の１つがユーザにより選択されると、追尾修正候補提示部２９では、追尾情報蓄積部２１に蓄積された追尾情報に基づき、捜索対象に設定された人物と同一である可能性（リンクスコア）が、ユーザにより選択された確認映像に対応する人物の次に高い人物の映像を、上位から所定数抽出して、それらの映像を追尾修正の候補映像として提示する。
【００６８】
画面生成部３１は、モニタ７に表示させる画面を生成するものであり、具体的には、検索条件設定部２３からの指示に応じて検索条件入力画面（図６参照）の画面情報を生成し、捜索対象候補提示部２５からの指示に応じて捜索対象選択画面（図７参照）の画面情報を生成し、最新位置提示部２８からの指示に応じて居場所表示画面（図８参照）の画面情報を生成し、追尾修正候補提示部２９からの指示に応じて候補選択画面（図９参照）の画面情報を生成し、確認映像提示部３０からの指示に応じて追尾過程確認画面（図１０参照）の画面情報を生成する。
【００６９】
なお、図３に示したＰＣ３の各部は、ＰＣ３のプロセッサ（ＣＰＵ）にＨＤＤ等のメモリに保存した施設内人物捜索支援用のプログラム（インストラクション）を実行させることで実現される。これらのプログラムは、情報処理装置としてのＰＣ３に予め導入して専用の装置として構成する他、所定のＯＳ上で動作するアプリケーションプログラムとして適宜なプログラム記録媒体に記録して、またネットワークを介して、ユーザに提供されるようにしてもよい。
【００７０】
次に、図１に示したモニタ７に表示される各画面、および各画面で行われる監視者の操作に応じてＰＣ３の各部で行われる処理について説明する。図４は、モニタ７に表示される画面の遷移状況を示す説明図である。図５は、各画面で行われる監視者の操作に応じてＰＣ３の各部で行われる処理の手順を示すフロー図である。
【００７１】
まず、ＰＣ３において施設内人物捜索支援処理を開始する操作を行うと、捜索対象者を特定するための検索条件を入力する検索条件入力画面がモニタ７に表示される（ＳＴ１０１）。この検索条件入力画面で検索条件をユーザが入力すると（ＳＴ１０２でＹｅｓ）、検索条件設定部２３において、入力情報に基づいて検索条件を設定する処理が行われる。そして、捜索対象検索部２４において、検索条件に基づいて、施設内に滞在する人物の中から捜索対象者を検索する処理が行われる（ＳＴ１０３）。ついで、捜索対象候補提示部２５において、捜索対象の候補映像を表示する捜索対象選択画面をモニタ７に表示させる処理が行われる（ＳＴ１０４）。
【００７２】
次に、捜索対象選択画面で、捜索対象者が写る候補映像を選択する操作がユーザにより行われると（ＳＴ１０５でＹｅｓ）、捜索対象設定部２６において、ユーザにより選択された候補映像に対応する人物を捜索対象に設定する処理が行われる（ＳＴ１０６）。そして、最新位置提示部２８において、捜索対象に設定された人物の最新の追尾映像を表示する居場所表示画面をモニタ７に表示させる処理が行われる（ＳＴ１０７）。
【００７３】
この居場所表示画面に表示された最新の追尾映像に誤りがある、すなわち、最新の追尾映像に捜索対象者が写っていない場合には、候補選択画面を表示させる操作がユーザにより行われ（ＳＴ１０８でＹｅｓ）、追尾修正候補提示部２９において、追尾修正の候補映像を表示する候補選択画面をモニタ７に表示させる処理が行われる（ＳＴ１０９）。
【００７４】
この候補選択画面に表示された候補映像の中に捜索対象者が写る映像が見つかると、その候補映像を選択する操作がユーザにより行われ（ＳＴ１１０でＹｅｓ）、最新位置提示部２８において、ユーザにより選択された候補映像に対応する人物の最新の追尾映像を表示する居場所表示画面をモニタ７に表示させる処理が行われる（ＳＴ１０７）。
【００７５】
一方、候補選択画面に表示された候補映像の中に捜索対象者が写る映像が見つからない場合には、追尾過程確認画面を表示させる操作がユーザにより行われ（ＳＴ１１１でＹｅｓ）、確認映像提示部３０において、確認映像を撮影時刻順に並べて表示する追尾過程確認画面をモニタ７に表示させる処理が行われる（ＳＴ１１２）。
【００７６】
そして、この追尾過程確認画面に表示された確認映像の中から、誤りのある確認映像、すなわち、捜索対象者が写っていない確認映像を選択する操作がユーザにより行われ（ＳＴ１１３でＹｅｓ）、追尾修正候補提示部２９において、追尾修正の候補映像を表示する候補選択画面をモニタ７に表示させる処理が行われる（ＳＴ１０９）。
【００７７】
居場所表示画面の表示から以降の処理（ＳＴ１０７〜ＳＴ１１３）は、居場所表示画面に捜索対象者が写る最新の追尾映像が表示されるまで繰り返すことができ、これにより、捜索対象者が写る最新の追尾映像を居場所表示画面に表示させて、捜索対象者の最新の居場所をユーザが把握することができる。
【００７８】
以下に、図４に示した各画面について詳しく説明する。
【００７９】
まず、図４に示した検索条件入力画面について説明する。図６は、モニタ７に表示される検索条件入力画面を示す説明図である。
【００８０】
この検索条件入力画面は、捜索対象者を特定するための検索条件をユーザが入力するものであり、この検索条件入力画面には、日時、場所、捜索対象者の特徴に関する情報、および捜索依頼者の撮影画像の各入力部５１〜５４が設けられている。
【００８１】
日時の入力部５１では、捜索依頼者が捜索対象者（同伴者）とはぐれた時刻（離別時刻）をユーザが入力する。場所の入力部５２では、捜索依頼者が捜索対象者とはぐれた場所（離別場所）をユーザが入力する。この場所の入力部５２には、「マップ検索」のボタンが設けられており、このボタンを操作すると、図示しないマップ検索画面が表示され、このマップ検索画面に表示された地図上で離別場所を指定することができる。
【００８２】
捜索対象者の特徴に関する情報の入力部５３では、人物の属性（年齢および性別）、人物の外観上の特徴（身長および上下の服装の色）に関する情報をユーザが入力する。上下の服装の色は、プルダウンメニューにより選択することができる。また、この入力部５３には、「カラーパレット指定」のボタンが設けられており、このボタンを操作すると、図示しないカラーパレットが表示され、プルダウンメニューより詳細に服装の色を選択することができる。
【００８３】
これらの入力部５１〜５３に入力する情報は、捜索依頼者から聴取して入力すればよい。服装の色については、服装の色を色名では表現することが難しく、特に子供では色名が不正確であるが、プルダウンメニューやカラーパレットにより色を直接選択することで、服装の色を精度よく入力することができる。
【００８４】
捜索依頼者の撮影画像の入力部５４には、捜索依頼者を撮影した画像を入力するために、「画像取込」、「画像撮影」、および「やり直し」の各ボタンが設けられており、「画像取込」のボタンは、カメラで撮影された撮影画像をＰＣ３に取り込む場合に用いられ、「画像撮影」のボタンは、タブレット端末のようにＰＣ３自体がカメラを備えている場合に用いられ、「やり直し」のボタンは、撮影画像を入力し直す場合に用いられる。これらのボタンを操作して、捜索依頼者の撮影画像が入力されると、入力部５４に、その捜索依頼者の撮影画像が表示される。
【００８５】
この検索条件入力画面において、ユーザが、各入力部５１〜５４に所要の情報を入力して「検索」のボタンを操作すると、検索条件設定部２３において、入力情報に基づいて検索条件を設定する処理が行われる。
【００８６】
次に、図４に示した捜索対象選択画面について説明する。図７は、モニタ７に表示される捜索対象選択画面を示す説明図である。
【００８７】
この捜索対象選択画面は、捜索対象者である可能性が高い人物の映像を捜索対象の候補映像として複数表示して、捜索対象者が写る映像をユーザに選択させるものであり、この捜索対象選択画面には、候補映像が、捜索対象者である可能性が高いものから順に並べて表示されている。なお、この捜索対象選択画面に表示される候補映像は、捜索依頼者（同伴者）が捜索対象者とはぐれる直前の映像であり、捜索対象者が写る候補映像では、捜索対象者の隣に捜索依頼者が写っている。
【００８８】
この捜索対象選択画面において、ユーザが、捜索対象者が写る候補映像を選択して「決定」のボタンを操作すると、捜索対象設定部２６において、ユーザにより選択された候補映像に対応する人物を捜索対象に設定する処理が行われる。なお、ここでは候補映像のサムネイル画像を選択して決定するようにしているが、サムネイル画像に写る人物ごとに人物枠を表示させ、捜索対象者に該当する人物枠を選択した後、決定ボタンを操作するようにしてもよい。この場合、選択した人物枠の表示色や線種を変えるなどの強調表示を行うことで、ユーザは、捜索対象者が正しく選択されているかを確認することができる。また、この捜索対象選択画面に限らず、各種表示画面において、人物ごとに人物枠と、捜索対象者に該当する人物枠の強調表示を行うようにすれば、常に、捜索対象者の選択状況を識別することができる。
【００８９】
次に、図４に示した居場所表示画面について説明する。図８は、モニタ７に表示される居場所表示画面を示す説明図である。
【００９０】
この居場所表示画面は、捜索対象に設定された人物の最新の追尾位置に対応する最新の追尾映像を表示して、捜索対象者の最新の居場所をユーザに提示するものであり、この居場所表示画面には、追尾映像表示部６１と、位置・時間情報表示部６２と、再生操作部６３と、ライブ映像表示部６４と、カメラ切替部６５と、が設けられている。
【００９１】
追尾映像表示部６１では、捜索対象に設定された人物の最新の追尾位置に対応する最新の追尾映像、すなわち、追尾処理において当該人物が検出された最新の映像が表示される。人物の追尾が継続している場合には、現在の映像が表示され、人物の追尾が終了している場合には、追尾が終了した位置に対応する映像が表示される。また、捜索対象者の追尾が途中で失敗して別人との入れ替わりが発生していると、捜索対象者とは異なる人物の映像が表示される。また、追尾映像は動画で表示され、捜索対象者が別のカメラ１の撮像エリアに移動して、そのカメラ１の映像で検出されると、追尾映像は別のカメラ１のものに切り替わる。
【００９２】
位置・時間情報表示部６２では、捜索対象者が最新の居場所に滞在する時刻に関する時間情報として、最新の追尾映像の撮影時刻が表示されるとともに、捜索対象者の最新の居場所に関する位置情報として、最新の追尾映像を撮影するカメラの名称（カメラＩＤ）が表示される。
【００９３】
再生操作部６３では、追尾映像表示部６１に表示される映像の再生に関する操作を行うものであり、この再生操作部６３には、再生、逆再生、停止、早送り、および巻き戻しの各ボタンが設けられており、これらのボタンを操作することで、映像を効率的に閲覧することができる。
【００９４】
ライブ映像表示部６４では、追尾映像表示部６１に表示された最新の追尾映像と同一のカメラ１のライブ映像（現在の映像）が表示される。人物の追尾が継続している場合には、追尾映像表示部６１およびライブ映像表示部６４には同一の映像が表示され、人物の追尾が失敗している場合には、追尾映像表示部６１およびライブ映像表示部６４には異なる映像が表示される。
【００９５】
また、ライブ映像表示部６４では、ライブ映像上に、カメラ１を切り換えるための上下左右の方向指示マーク（操作部）６６が表示されており、この方向指示マーク６６を操作することで、その方向指示マーク６６に対応する方向に位置するカメラ１の映像に切り替えることができる。
【００９６】
カメラ切替部（操作部）６５では、ライブ映像表示部６４に映像を表示させるカメラ１をプルダウンメニューにより切り替えることができる。
【００９７】
次に、図４に示した候補選択画面について説明する。図９は、モニタ７に表示される候補選択画面を示す説明図である。
【００９８】
この候補選択画面は、居場所表示画面（図８参照）に表示された最新の追尾映像に誤りがある、すなわち、最新の追尾映像に捜索対象者が写っていない場合に、捜索対象に設定された人物と同一である可能性が、最新の追尾映像に写る人物の次に高い人物の映像を、追尾修正の候補映像として複数表示して、捜索対象者が写る映像をユーザに選択させるものであり、この候補選択画面には、追尾修正の候補映像が撮影時刻順に並べて表示されている。
【００９９】
この候補選択画面において、ユーザが、捜索対象者が写る候補映像を選択して「決定」のボタンを操作すると、最新位置提示部２８において、ユーザにより選択された候補映像に対応する人物の最新の追尾位置を取得して、その最新の追尾位置に対応する最新の追尾映像が表示された居場所表示画面（図８参照）をモニタ７に表示させる処理が行われる。
【０１００】
また、この候補選択画面において、捜索対象者が写る候補映像が見つからなかった場合には、ユーザは「経路確認」のボタンを操作して、追尾過程確認画面（図１０参照）に遷移させる。
【０１０１】
次に、図４に示した追尾過程確認画面（時系列追跡画面）について説明する。図１０は、モニタ７に表示される追尾過程確認画面を示す説明図である。
【０１０２】
この追尾過程確認画面は、候補選択画面（図９参照）に表示された候補映像に捜索対象者が写っていない場合に、捜索対象選択画面（図７参照）で人物を捜索対象に選択した際の映像から、居場所表示画面（図８参照）に表示された最新の追尾映像に至るまでのカメラ１ごとの映像を確認映像として表示して、捜索対象者が写っていない確認映像をユーザに選択させるものであり、この追尾過程確認画面には、カメラ１ごとの確認映像が撮影時刻順に並べて表示されている。また、各確認映像には、映像の撮影時刻およびカメラの名称（カメラＩＤ）が表示されている。この追尾過程確認画面は、候補選択画面（図９参照）の「経路確認」のボタンを操作することで表示される。
【０１０３】
居場所表示画面（図８参照）に表示された最新の追尾映像が別人のものである場合、すなわち、追尾情報に誤りがある場合には、この追尾過程確認画面では、ある時刻の確認映像から以降の全ての確認映像が別人のものに入れ替わっており、この別人のものに入れ替わった最初の確認映像をユーザに選択させる。これにより、追尾処理の過程で誤りが発生した映像を特定することができる。
【０１０４】
この追尾過程確認画面において、ユーザが、誤りがある確認映像を選択して「決定」のボタンを操作すると、追尾修正候補提示部２９において、捜索対象に設定された人物と同一である可能性が、ユーザにより選択された確認映像に対応する人物の次に高い人物の映像を、上位から所定数抽出して、それらの映像を追尾修正の候補映像として表示する候補選択画面（図９参照）をモニタ７に表示させる処理が行われる。
【０１０５】
次に、図１０に示した追尾過程確認画面の別例であるマップ追跡画面について説明する。図１１は、モニタ７に表示されるマップ追跡画面を示す説明図である。
【０１０６】
図１０に示した時系列追跡画面では、カメラ１ごとの確認映像が撮影時刻順に並べて表示されていたが、図１１に示すマップ追跡画面では、施設内のレイアウト（施設の状態）を示す地図画像７１上に、カメラ１ごとの確認映像をそれぞれ表示する複数の映像表示ウィンドウ（映像表示枠）７２が、カメラ１の実際の配置状況に対応して配置されている。また、映像表示ウィンドウ７２は、撮影時刻順に矢印で結ばれているため、カメラ１ごとの確認映像を撮影時刻順に確認することができる。
【０１０７】
なお、このマップ追跡画面は、図１０に示した時系列追跡画面の代わりに表示するようにしてもよいが、マップ追跡画面および時系列追跡画面をユーザが適宜に選択することができるようにしてもよい。
【０１０８】
図１２および図１３は、追尾処理が失敗している場合のマップ追跡画面を示す説明図である。図１１に示したマップ追跡画面は、追尾処理が成功している場合であり、追尾を開始したカメラ１の確認映像から最新の追尾位置のカメラ１の確認映像まで継続して捜索対象者が写っている。一方、図１２および図１３に示すように、追尾処理が失敗している場合には、追尾の途中のカメラ１の確認映像で捜索対象者が別人に入れ替わり、どこで捜索対象者の追尾が失敗したかを把握することができる。図１２および図１３に示した例では、施設の各階の地図画像７１上に確認映像が表示されており、図１２（Ｂ）に示す３階のフロアで捜索対象者の追尾が失敗している。
【０１０９】
以上のように本実施形態では、検索条件設定部２３において、ユーザの入力操作に応じて、捜索対象者を特定するための検索条件を設定し、捜索対象検索部２４において、施設内を撮影した映像に対する追尾処理により取得した追尾情報、および検索条件に基づき、施設内に滞在する人物の中から、捜索対象者である可能性が高い人物を検索し、捜索対象候補提示部２５において、この捜索対象検索部２４の検索結果に基づき、捜索対象者である可能性が高い人物の映像を、上位から所定数抽出して、それらの映像を捜索対象の候補映像として提示し、捜索対象設定部２６において、捜索対象者が写る捜索対象の候補映像を選択するユーザの操作に応じて、その選択された捜索対象の候補映像に対応する人物を捜索対象に設定し、最新位置提示部２８において、追尾情報に基づき、捜索対象に設定された人物の最新の追尾位置を取得して、その最新の追尾位置を、捜索対象者の最新の居場所として提示するものとした。
【０１１０】
これによると、捜索対象者である可能性が高い人物の映像を、捜索対象の候補映像として複数提示して、ユーザに選択させるため、追尾情報の精度が低い場合でも、正しい人物が捜索対象に設定されて、捜索対象者の最新の居場所を確実に提示することができる。
【０１１１】
また、本実施形態では、最新位置提示部２８において、捜索対象者の最新の居場所に関する位置情報を提示すると共に、最新の追尾位置に対応する最新の追尾映像、および捜索対象者が最新の居場所に滞在する時刻に関する時間情報を提示するものとした。これによると、居場所に関する位置情報が提示されるため、捜索対象者の居場所をユーザが把握することができ、さらに、捜索対象者の最新の追尾映像が提示されるため、捜索対象者の最新の状況をユーザが把握することができ、さらに、捜索対象者が最新の居場所に滞在する時刻に関する時間情報が提示されるため、捜索対象者が最新の居場所に滞在してから現在までにどの程度の時間が経過しているかをユーザが把握することができる。
【０１１２】
また、本実施形態では、最新位置提示部２８において、最新の追尾映像とともに、その最新の追尾映像を撮影するカメラのライブ映像を提示するものとした。これによると、最新の追尾映像の撮影時刻が比較的古い、すなわち、捜索対象者の追尾が終了してから長い時間が経過している場合でも、ライブ映像が提示されるため、最新の居場所の現在の状況をユーザが把握することができ、捜索対象者が移動していなければ、ライブ映像で捜索対象者を見つけ出すことができる。
【０１１３】
また、本実施形態では、最新位置提示部２８において、ライブ映像をモニタ７に表示させるとともに、ライブ映像の表示画面上に、ライブ映像のカメラを切り換えるカメラ切替部６５および方向指示マーク（操作部）を表示させるものとした。これにより、最新の追尾映像を撮影するカメラ１の近傍のカメラ１の撮影エリアに捜索対象者が移動して、ライブ映像に捜索対象者が写っていない場合に、ライブ映像のカメラ１を切り換えることで、捜索対象者を見つけ出すことができる。
【０１１４】
また、本実施形態では、追尾修正候補提示部２９において、最新位置提示部２８により提示された捜索対象者の最新の居場所に誤りがある場合に、追尾情報に基づき、捜索対象に設定された人物と同一である可能性が、最新位置提示部２８で最新の居場所を提示した人物の次に高い人物の映像を、上位から所定数抽出して、それらの映像を追尾修正の候補映像として提示し、最新位置提示部２８において、捜索対象者が写る追尾修正の候補映像を選択するユーザの操作に応じて、その選択された追尾修正の候補映像に対応する人物の最新の追尾位置を取得して、その最新の追尾位置を、捜索対象者の最新の居場所として提示するものとした。
【０１１５】
これによると、最新位置提示部２８により提示された捜索対象者の最新の居場所に誤りがある、すなわち、捜索対象者を捜索対象に設定してから以降の追尾情報に誤りがある場合に、追尾修正の候補映像を複数提示して、ユーザに選択させるため、追尾情報が適切に修正されて、捜索対象者の最新の居場所を確実に提示することができる。
【０１１６】
また、本実施形態では、確認映像提示部３０において、追尾修正候補提示部２９により提示された追尾修正の候補映像の全てに誤りがある場合に、捜索対象設定部２６において人物を捜索対象に設定した際の捜索対象の候補映像から、最新位置提示部２８により提示された最新の追尾映像に至るまでのカメラごとの映像を確認映像として提示し、追尾修正候補提示部２９において、誤りがある確認映像を選択するユーザの操作に応じて、追尾情報に基づき、捜索対象に設定された人物と同一である可能性が、ユーザにより選択された確認映像に対応する人物の次に高い人物の映像を、上位から所定数抽出して、それらの映像を追尾修正の候補映像として提示するものとした。
【０１１７】
これによると、捜索対象に設定した際の候補映像から最新の追尾映像に至るまでのカメラ１ごとの映像を確認映像として提示して、誤りがある確認映像、すなわち、捜索対象者が写っていない確認映像をユーザに選択させることで、追尾情報内の誤りがある箇所が明確になり、その追尾情報内の誤りがある箇所に対応する候補映像を提示して、適切な候補映像をユーザに選択させることで、追尾情報内の誤りがある箇所を確実に修正することができる。
【０１１８】
また、本実施形態では、確認映像提示部３０において、複数の確認映像が撮影時刻順に並べて配置された時系列追跡画面を、モニタ７に表示させるものとした。これにより、ユーザが撮影時刻順に並んだ確認映像を順次確認することで、誤りがある確認映像を見つけ出すことができるため、確認映像の確認作業を迅速に行うことができる。
【０１１９】
また、本実施形態では、確認映像提示部３０において、施設の状態を示す地図画像上に、複数の確認映像が、カメラ１の実際の配置状況に対応して配置されたマップ追跡画面を、モニタ７に表示させるものとした。これによると、カメラ１の実際の配置状況を見ながら確認映像を順次確認することで、捜索対象者の追尾がどこで失敗したかをユーザが容易に把握することができる。
【０１２０】
また、本実施形態では、検索条件設定部２３において、検索条件として、同伴者を撮影した画像、および捜索対象者の特徴に関する情報を検索条件として設定するものとした。これにより、同伴者を撮影した画像、および捜索対象者の特徴に関する情報に基づいて捜索対象者を検索するため、捜索対象者の検索精度を高めることができる。
【０１２１】
以上、本発明を特定の実施形態に基づいて説明したが、これらの実施形態はあくまでも例示であって、本発明はこれらの実施形態によって限定されるものではない。また、上記実施形態に示した本発明に係る施設内人物捜索支援装置、施設内人物捜索支援システムおよび施設内人物捜索支援方法の各構成要素は、必ずしも全てが必須ではなく、少なくとも本発明の範囲を逸脱しない限りにおいて適宜取捨選択することが可能である。
【０１２２】
例えば、前記の実施形態では、デパートやショッピングセンターなどの商業施設の例について説明したが、公共施設などの商業施設以外の施設にも適用することができる。
【０１２３】
また、本実施形態では、最新位置提示部２８において、捜索対象者の最新の追尾映像、この最新の追尾映像を撮影するカメラ１のライブ映像、捜索対象者が最新の居場所に滞在する時刻に関する時間情報、および捜索対象者の最新の居場所に関する位置情報を提示するようにしたが、位置情報（例えば何階のどの売場）のみを提示するようにしてもよい。また、居場所を文字で表示する他に、地図上に居場所を表示するようにしてもよい。
【０１２４】
また、前記の実施形態では、図１および図３に示したように、カメラ内追尾処理をカメラ内追尾処理装置４に行わせ、カメラ間追尾処理および施設内人物捜索支援処理をＰＣ３に行わせる例について説明したが、カメラ内追尾処理もＰＣ３に行わせる構成としてもよい。また、カメラ内追尾処理部をカメラ１に設ける構成も可能である。また、カメラ間追尾処理部２７の全部または一部をＰＣ３とは別の追尾処理装置で構成することも可能である。
【０１２５】
また、前記の実施形態では、図２に示したように、カメラ１を、視野角の限定される箱型カメラとしたが、これに限らず、広範囲の撮影が可能な全方位カメラを用いることもできる。
【０１２６】
また、本実施形態では、追尾処理および施設内人物捜索支援処理を、施設内に設置された装置に行わせるようにしたが、これらの必要な処理を、図１に示したように、本部に設けられたＰＣ１１や、クラウドコンピューティングシステムを構成するクラウドコンピュータ１２に行わせるようにしてもよい。また、必要な処理を複数の情報処理装置で分担し、ＩＰネットワークやＬＡＮなどの通信媒体、またはハードディスクやメモリカードなどの記憶媒体を介して、複数の情報処理装置の間で情報を受け渡すようにしてもよい。この場合、必要な処理を分担する複数の情報処理装置で追跡支援システムが構成される。
【０１２７】
特に、クラウドコンピュータ１２を含むシステム構成では、施設や本部に設けられたＰＣ３，１１の他に、クラウドコンピュータ１２にネットワーク接続されたスマートフォン１３やタブレット端末１４などの携帯型端末で、必要な情報を表示させることができるようにするとよく、これにより施設や本部の他に外出先などの任意の場所で必要な情報を確認することができる。
【０１２８】
また、前記の実施形態では、カメラ１の映像を蓄積するレコーダ２を施設に設置するようにしたが、施設内人物捜索支援に必要な処理を、本部に設置されたＰＣ１１やクラウドコンピュータ１２に行わせる場合には、カメラ１の映像を、本部や、クラウドコンピューティングシステムの運営施設などに送信して、そこに設置された装置にカメラ１の映像を蓄積するようにしてもよい。
【産業上の利用可能性】
【０１２９】
本発明に係る施設内人物捜索支援装置、施設内人物捜索支援システムおよび施設内人物捜索支援方法は、追尾情報の精度が低い場合でも、ユーザが適宜に選択や修正の操作を行うことで、捜索対象者の最新の居場所を確実に提示することができる効果を有し、施設内を複数のカメラにより撮影した映像に基づき、施設内で同伴者とはぐれた人物の捜索を支援する施設内人物捜索支援装置、施設内人物捜索支援システムおよび施設内人物捜索支援方法などとして有用である。
【符号の説明】
【０１３０】
１  カメラ
２  レコーダ
３  ＰＣ（施設内人物捜索支援装置）
４  カメラ内追尾処理装置
６  入力デバイス
７  モニタ
１１  ＰＣ
１２  クラウドコンピュータ
１３  スマートフォン
１４  タブレット端末
２１  追尾情報蓄積部
２２  入力情報取得部
２３  検索条件設定部
２４  捜索対象検索部
２５  捜索対象候補提示部
２６  捜索対象設定部
２７  カメラ間追尾処理部
２８  最新位置提示部
２９  追尾修正候補提示部
３０  確認映像提示部
３１  画面生成部
【図１】
0006593742.tif 000002
【図２】
0006593742.tif 000003
【図３】
0006593742.tif 000004
【図４】
0006593742.tif 000005
【図５】
0006593742.tif 000006
【図６】
0006593742.tif 000007
【図７】
0006593742.tif 000008
【図８】
0006593742.tif 000009
【図９】
0006593742.tif 000010
【図１０】
0006593742.tif 000011
【図１１】
0006593742.tif 000012
【図１２】
0006593742.tif 000013
【図１３】
0006593742.tif 000014