(57)【特許請求の範囲】
【請求項１】
映像蓄積手段に蓄積された複数のカメラごとの映像を表示装置に表示させて、追跡対象となる移動体を追跡する監視者の作業を支援する追跡支援装置であって、
ユーザの操作入力に応じて、追跡対象となる移動体の映像を探し出すための検索条件を設定する検索条件設定部と、
前記映像蓄積手段より前記検索条件に適合する映像を取得して追跡対象検索画面を前記表示装置に表示させて、その追跡対象検索画面において映像上に表示された追尾マークを選択する操作により追跡対象とする移動体を指定する監視者の操作入力に応じて、指定された移動体を前記追跡対象に設定する追跡対象設定部と、
前記映像蓄積手段に蓄積された映像に対する追尾処理により取得した追尾情報に基づいて、前記追跡対象に設定された移動体と同一である可能性が最も高い移動体の映像を前記カメラごとに抽出して、それらの映像のみが確認映像として表示された追跡対象確認画面を前記表示装置に表示させる確認映像提示部と、
前記追跡対象検索画面において追跡対象とする移動体に前記追尾マークが表示されない場合に、ユーザの操作入力に応じて、前記追跡対象に設定された移動体が映像に出現する映像表示期間を設定する映像表示期間設定部と、
前記映像表示期間に基づいて前記追跡対象確認画面において前記確認映像を表示させるように前記追尾情報を修正する追尾情報修正部と、
を備えたことを特徴とする追跡支援装置。
【請求項２】
前記映像表示期間設定部は、前記追跡対象検索画面に、前記映像表示期間の開始時刻および終了時刻をそれぞれ表す可動操作部を表示して、その可動操作部をずらすことで前記映像表示期間の範囲を調整する操作をユーザに行わせることを特徴とする請求項１に記載の追跡支援装置。
【請求項３】
前記映像表示期間設定部は、前記追跡対象検索画面において、前記カメラの映像を、その表示時刻を調整可能に表示して、追跡対象とする移動体が最初に出現した映像と、追跡対象とする移動体が消失する直前の映像とを選択する操作をユーザに行わせて、前記映像表示期間の開始時刻および終了時刻を取得することを特徴とする請求項１に記載の追跡支援装置。
【請求項４】
映像蓄積手段に蓄積された複数のカメラごとの映像を表示装置に表示させて、追跡対象となる移動体を追跡する監視者の作業を支援する追跡支援装置であって、
前記映像蓄積手段に蓄積された映像に対する追尾処理により取得した追尾情報に基づいて、追跡対象に設定された移動体と同一である可能性が最も高い移動体の映像を前記カメラごとに抽出して、それらの映像のみが確認映像として表示された追跡対象確認画面を前記表示装置に表示させる確認映像提示部と、
前記追跡対象確認画面に表示される前記カメラごとの前記確認映像に過不足がある場合に、追尾結果編集画面を前記表示装置に表示させて、前記追尾結果編集画面上でのユーザの操作入力に応じて、前記追跡対象に設定された移動体が映像に出現する映像表示期間を設定する映像表示期間設定部と、
前記映像表示期間に基づいて前記追跡対象確認画面において前記確認映像を表示させるように前記追尾情報を修正する追尾情報修正部と、
を備えたことを特徴とする追跡支援装置。
【請求項５】
前記映像表示期間設定部は、前記カメラごとの映像に対するカメラ内追尾処理により取得した追尾期間を初期の映像表示期間として前記追尾結果編集画面に表示して、その追尾結果編集画面において、前記初期の映像表示期間に対して部分的な削除および追加の少なくともいずれが行われるように、前記映像表示期間の範囲を調整する操作をユーザに行わせることを特徴とする請求項４に記載の追跡支援装置。
【請求項６】
前記映像表示期間設定部は、前記追尾結果編集画面に、前記映像表示期間の開始時刻および終了時刻をそれぞれ表す可動操作部を表示して、その可動操作部をずらすことで前記映像表示期間の範囲を調整する操作をユーザに行わせることを特徴とする請求項４に記載の追跡支援装置。
【請求項７】
前記映像表示期間設定部は、前記追尾結果編集画面において、前記カメラの映像を、その表示時刻を調整可能に表示して、追跡対象とした移動体が最初に出現した映像と、追跡対象とした移動体が消失する直前の映像との少なくともいずれかを選択する操作をユーザに行わせて、前記映像表示期間の開始時刻および終了時刻の少なくともいずれかを取得することを特徴とする請求項４に記載の追跡支援装置。
【請求項８】
前記映像表示期間設定部は、前記追尾結果編集画面において映像に現れる追跡対象となる移動体の追尾マークを選択する操作をユーザに行わせて、その選択された移動体の追尾期間を含むように前記映像表示期間を設定することを特徴とする請求項４に記載の追跡支援装置。
【請求項９】
さらに、前記追跡対象に設定された移動体、およびその移動体と同一として対応づけられた移動体に関する前記カメラごとの映像が撮影時刻順に並べて表示された連続再生画面を前記表示装置に表示させ、この連続再生画面において、前記カメラごとの映像を、時間の経過にしたがって順次動画で表示させる連続再生を行う映像再生部を備えたことを特徴とする請求項１から請求項８のいずれかに記載の追跡支援装置。
【請求項１０】
映像蓄積手段に蓄積された複数のカメラごとの映像を表示装置に表示させて、追跡対象となる移動体を追跡する監視者の作業を支援する追跡支援システムであって、
監視エリアを撮影する前記カメラと、
このカメラごとの映像を表示する前記表示装置と、
複数の情報処理装置と、
を有し、
前記複数の情報処理装置のいずれかが、
ユーザの操作入力に応じて、追跡対象となる移動体の映像を探し出すための検索条件を設定する検索条件設定部と、
前記映像蓄積手段より前記検索条件に適合する映像を取得して追跡対象検索画面を前記表示装置に表示させて、その追跡対象検索画面において映像上に表示された追尾マークを選択する操作により追跡対象とする移動体を指定する監視者の操作入力に応じて、指定された移動体を前記追跡対象に設定する追跡対象設定部と、
前記映像蓄積手段に蓄積された映像に対する追尾処理により取得した追尾情報に基づいて、前記追跡対象に設定された移動体と同一である可能性が最も高い移動体の映像を前記カメラごとに抽出して、それらの映像のみが確認映像として表示された追跡対象確認画面を前記表示装置に表示させる確認映像提示部と、
前記追跡対象検索画面において追跡対象とする移動体に前記追尾マークが表示されない場合に、ユーザの操作入力に応じて、前記追跡対象に設定された移動体が映像に出現する映像表示期間を設定する映像表示期間設定部と、
前記映像表示期間に基づいて前記追跡対象確認画面において前記確認映像を表示させるように前記追尾情報を修正する追尾情報修正部と、
を備えたことを特徴とする追跡支援システム。
【請求項１１】
映像蓄積手段に蓄積された複数のカメラごとの映像を表示装置に表示させて、追跡対象となる移動体を追跡する監視者の作業を支援する追跡支援システムであって、
監視エリアを撮影する前記カメラと、
このカメラごとの映像を表示する前記表示装置と、
複数の情報処理装置と、
を有し、
前記複数の情報処理装置のいずれかが、
前記映像蓄積手段に蓄積された映像に対する追尾処理により取得した追尾情報に基づいて、追跡対象に設定された移動体と同一である可能性が最も高い移動体の映像を前記カメラごとに抽出して、それらの映像のみが確認映像として表示された追跡対象確認画面を前記表示装置に表示させる確認映像提示部と、
前記追跡対象確認画面に表示される前記カメラごとの前記確認映像に過不足がある場合に、追尾結果編集画面を前記表示装置に表示させて、前記追尾結果編集画面上でのユーザの操作入力に応じて、前記追跡対象に設定された移動体が映像に出現する映像表示期間を設定する映像表示期間設定部と、
前記映像表示期間に基づいて前記追跡対象確認画面において前記確認映像を表示させるように前記追尾情報を修正する追尾情報修正部と、
を備えたことを特徴とする追跡支援システム。
【請求項１２】
映像蓄積手段に蓄積された複数のカメラごとの映像を表示装置に表示させて、追跡対象となる移動体を追跡する監視者の作業を支援する処理を情報処理装置に行わせる追跡支援方法であって、
ユーザの操作入力に応じて、追跡対象となる移動体の映像を探し出すための検索条件を設定し、
前記映像蓄積手段より前記検索条件に適合する映像を取得して追跡対象検索画面を前記表示装置に表示させて、その追跡対象検索画面において映像上に表示された追尾マークを選択する操作により追跡対象とする移動体を指定する監視者の操作入力に応じて、指定された移動体を前記追跡対象に設定し、
前記映像蓄積手段に蓄積された映像に対する追尾処理により取得した追尾情報に基づいて、前記追跡対象に設定された移動体と同一である可能性が最も高い移動体の映像を前記カメラごとに抽出して、それらの映像のみが確認映像として表示された追跡対象確認画面を前記表示装置に表示させ、
前記追跡対象検索画面において追跡対象とする移動体に前記追尾マークが表示されない場合に、ユーザの操作入力に応じて、前記追跡対象に設定された移動体が映像に出現する映像表示期間を設定し、
前記映像表示期間に基づいて前記追跡対象確認画面において前記確認映像を表示させるように前記追尾情報を修正することを特徴とする追跡支援方法。
【請求項１３】
映像蓄積手段に蓄積された複数のカメラごとの映像を表示装置に表示させて、追跡対象となる移動体を追跡する監視者の作業を支援する処理を情報処理装置に行わせる追跡支援方法であって、
前記映像蓄積手段に蓄積された映像に対する追尾処理により取得した追尾情報に基づいて、追跡対象に設定された移動体と同一である可能性が最も高い移動体の映像を前記カメラごとに抽出して、それらの映像のみが確認映像として表示された追跡対象確認画面を前記表示装置に表示させ、
前記追跡対象確認画面に表示される前記カメラごとの前記確認映像に過不足がある場合に、追尾結果編集画面を前記表示装置に表示させて、前記追尾結果編集画面上でのユーザの操作入力に応じて、前記追跡対象に設定された移動体が映像に出現する映像表示期間を設定し、
前記映像表示期間に基づいて前記追跡対象確認画面において前記確認映像を表示させるように前記追尾情報を修正することを特徴とする追跡支援方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像蓄積手段に蓄積された複数のカメラごとの映像を表示装置に表示させて、追跡対象となる移動体を追跡する監視者の作業を支援する追跡支援装置、追跡支援システムおよび追跡支援方法に関するものである。
【背景技術】
【０００２】
監視エリア内に複数のカメラを設置し、この複数のカメラごとの映像を表示する監視画面をモニタに表示して、監視者に監視させる監視システムが広く普及している。このような監視システムでは、カメラの映像をレコーダに蓄積することで、万引きなどの問題のある行為を行った人物が監視エリア内でどのような行動を行ったかを監視者が事後に確認することができる。
【０００３】
このように監視者が監視画面を見ながら人物の行動を追跡する場合、人物が監視エリア内を移動するのに応じて、その人物を撮影するカメラが次々と切り替わるため、カメラごとの映像を順次確認する必要がある。このとき、監視者が逐一カメラを選択しながら映像を確認するようにすると、非常に手間のかかる作業となることから、追跡対象とした人物が写るカメラごとの映像を時間の経過にしたがって順次表示されるようにすると、人物の行動を追跡する作業を効率よく行うことができる。
【０００４】
このような人物の行動を追跡する作業を効率よく行う技術とし、従来、監視者が日時およびカメラを指定して、追跡対象となる人物が写った映像を探し出して、追跡対象となる人物を指定し、この指定された人物に関する追尾情報に誤りがないかを監視者に確認させる追跡対象確認画面を表示させ、追尾情報に誤りがないことが確認されると、追尾情報に基づいて追跡対象とした人物が写るカメラごとの映像を時間の経過にしたがって連続再生する技術が知られている（特許文献１参照）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特許第５５０６９９０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
さて、前記従来の技術では、注目する日時およびカメラの映像で追跡対象とする人物を探し出す人物検索において、映像に表示させた人物枠を選択することで、追跡対象とする人物を指定するようにしている。ところが、混雑した環境などではカメラ内追尾で人物検知が失敗することがあり、人物検知が失敗した人物には人物枠が表示されないため、追跡対象とする人物が映像に写っていても、その人物を追跡対象として指定することができない場合がある。この場合、追跡対象確認画面に遷移することができないため、カメラを変更したり日時を変更したりして、追跡対象とする人物に人物枠が表示された映像を探し出すしかないため、手間を要する作業が必要になる。
【０００７】
また、追跡対象確認画面では、カメラ内追尾で取得したカメラ内追尾情報に基づいて、追跡対象とした人物が映像に現れてからその人物が映像からいなくなるまでの期間の映像を再生することで、注目するカメラの撮影エリアにおける人物の行動を漏れなく確認することができる。ところが、カメラ内追尾情報に誤りがあると、追跡対象とした人物の映像が一部欠落したり、追跡対象とした人物が写っていない映像が表示されたりする不具合が発生し、追跡対象とした人物の行動を確認する作業を円滑に行うことができなくなる。
【０００８】
そこで、本発明は、カメラ内追尾がいかなる結果になっても、監視者の負担を軽減する支援処理を適切に行って、追跡中の人物を見失うことなく円滑に追跡作業を進めることができるような追跡支援装置、追跡支援システムおよび追跡支援方法を提供することを主な目的とする。
【課題を解決するための手段】
【０００９】
本発明の追跡支援装置は、映像蓄積手段に蓄積された複数のカメラごとの映像を表示装置に表示させて、追跡対象となる移動体を追跡する監視者の作業を支援する追跡支援装置であって、ユーザの操作入力に応じて、追跡対象となる移動体の映像を探し出すための検索条件を設定する検索条件設定部と、前記映像蓄積手段より前記検索条件に適合する映像を取得して追跡対象検索画面を前記表示装置に表示させて、その追跡対象検索画面において映像上に表示された追尾マークを選択する操作により追跡対象とする移動体を指定する監視者の操作入力に応じて、指定された移動体を前記追跡対象に設定する追跡対象設定部と、前記映像蓄積手段に蓄積された映像に対する追尾処理により取得した追尾情報に基づいて、前記追跡対象に設定された移動体と同一である可能性が最も高い移動体の映像を前記カメラごとに抽出して、それらの映像のみが確認映像として表示された追跡対象確認画面を前記表示装置に表示させる確認映像提示部と、前記追跡対象検索画面において追跡対象とする移動体に前記追尾マークが表示されない場合に、ユーザの操作入力に応じて、前記追跡対象に設定された移動体が映像に出現する映像表示期間を設定する映像表示期間設定部と、前記映像表示期間に基づいて前記追跡対象確認画面において前記確認映像を表示させるように前記追尾情報を修正する追尾情報修正部と、を備えた構成とする。
【００１０】
また、本発明の追跡支援システムは、映像蓄積手段に蓄積された複数のカメラごとの映像を表示装置に表示させて、追跡対象となる移動体を追跡する監視者の作業を支援する追跡支援システムであって、監視エリアを撮影する前記カメラと、このカメラごとの映像を表示する前記表示装置と、複数の情報処理装置と、を有し、前記複数の情報処理装置のいずれかが、ユーザの操作入力に応じて、追跡対象となる移動体の映像を探し出すための検索条件を設定する検索条件設定部と、前記映像蓄積手段より前記検索条件に適合する映像を取得して追跡対象検索画面を前記表示装置に表示させて、その追跡対象検索画面において映像上に表示された追尾マークを選択する操作により追跡対象とする移動体を指定する監視者の操作入力に応じて、指定された移動体を前記追跡対象に設定する追跡対象設定部と、前記映像蓄積手段に蓄積された映像に対する追尾処理により取得した追尾情報に基づいて、前記追跡対象に設定された移動体と同一である可能性が最も高い移動体の映像を前記カメラごとに抽出して、それらの映像のみが確認映像として表示された追跡対象確認画面を前記表示装置に表示させる確認映像提示部と、前記追跡対象検索画面において追跡対象とする移動体に前記追尾マークが表示されない場合に、ユーザの操作入力に応じて、前記追跡対象に設定された移動体が映像に出現する映像表示期間を設定する映像表示期間設定部と、前記映像表示期間に基づいて前記追跡対象確認画面において前記確認映像を表示させるように前記追尾情報を修正する追尾情報修正部と、を備えた構成とする。
【００１１】
また、本発明の追跡支援方法は、映像蓄積手段に蓄積された複数のカメラごとの映像を表示装置に表示させて、追跡対象となる移動体を追跡する監視者の作業を支援する処理を情報処理装置に行わせる追跡支援方法であって、ユーザの操作入力に応じて、追跡対象となる移動体の映像を探し出すための検索条件を設定し、前記映像蓄積手段より前記検索条件に適合する映像を取得して追跡対象検索画面を前記表示装置に表示させて、その追跡対象検索画面において映像上に表示された追尾マークを選択する操作により追跡対象とする移動体を指定する監視者の操作入力に応じて、指定された移動体を前記追跡対象に設定し、前記映像蓄積手段に蓄積された映像に対する追尾処理により取得した追尾情報に基づいて、前記追跡対象に設定された移動体と同一である可能性が最も高い移動体の映像を前記カメラごとに抽出して、それらの映像のみが確認映像として表示された追跡対象確認画面を前記表示装置に表示させ、前記追跡対象検索画面において追跡対象とする移動体に前記追尾マークが表示されない場合に、ユーザの操作入力に応じて、前記追跡対象に設定された移動体が映像に出現する映像表示期間を設定し、前記映像表示期間に基づいて前記追跡対象確認画面において前記確認映像を表示させるように前記追尾情報を修正する構成とする。
【発明の効果】
【００１２】
本発明によれば、追跡対象とする移動体に追尾マークが表示されない、すなわち、追跡対象とする移動体の追尾ができていない場合に、追尾マークを選択して追跡対象とする移動体を指定する代わりに、追跡対象とする移動体の映像表示期間をユーザに指定させるため、あるカメラで追跡対象とする移動体の追尾ができていない場合でも、そのカメラの確認映像を適切に追跡対象確認画面に表示させることができる。これにより、カメラ内追尾がいかなる結果になっても、監視者の負担を軽減する支援処理を適切に行って、追跡中の人物を見失うことなく円滑に追跡作業を進めることができる。
【図面の簡単な説明】
【００１３】
【図１】本実施形態に係る追跡支援システムの全体構成図
【図２】店舗におけるカメラ１の設置状況を示す平面図
【図３】ＰＣ３の機能ブロック図
【図４】モニタ７に表示される人物検索画面を示す説明図
【図５】各画面で行われる監視者の操作に応じてＰＣ３の各部で行われる処理の手順を示すフロー図
【図６】各画面で行われる監視者の操作に応じてＰＣ３の各部で行われる処理の手順を示すフロー図
【図７】モニタ７に表示される人物検索画面を示す説明図
【図８】モニタ７に表示される確認映像表示状態のタイムライン画面を示す説明図
【図９】モニタ７に表示される連続再生状態のタイムライン画面を示す説明図
【図１０】モニタ７に表示される候補映像表示状態のタイムライン画面を示す説明図
【図１１】人物検索画面で映像表示期間を指定したときのタイムライン画面を示す説明図
【図１２】モニタ７に表示される追尾結果編集画面を示す説明図
【図１３】映像の遷移状況の一例を示す説明図
【図１４】追尾結果編集画面における編集操作時の状況を示す説明図
【図１５】映像の遷移状況の一例を示す説明図
【図１６】追尾結果編集画面における編集操作時の状況を示す説明図
【図１７】映像の遷移状況の一例を示す説明図
【図１８】追尾結果編集画面における編集操作時の状況を示す説明図
【発明を実施するための形態】
【００１４】
前記課題を解決するためになされた第１の発明は、映像蓄積手段に蓄積された複数のカメラごとの映像を表示装置に表示させて、追跡対象となる移動体を追跡する監視者の作業を支援する追跡支援装置であって、ユーザの操作入力に応じて、追跡対象となる移動体の映像を探し出すための検索条件を設定する検索条件設定部と、前記映像蓄積手段より前記検索条件に適合する映像を取得して追跡対象検索画面を前記表示装置に表示させて、その追跡対象検索画面において映像上に表示された追尾マークを選択する操作により追跡対象とする移動体を指定する監視者の操作入力に応じて、指定された移動体を前記追跡対象に設定する追跡対象設定部と、前記映像蓄積手段に蓄積された映像に対する追尾処理により取得した追尾情報に基づいて、前記追跡対象に設定された移動体と同一である可能性が最も高い移動体の映像を前記カメラごとに抽出して、それらの映像のみが確認映像として表示された追跡対象確認画面を前記表示装置に表示させる確認映像提示部と、前記追跡対象検索画面において追跡対象とする移動体に前記追尾マークが表示されない場合に、ユーザの操作入力に応じて、前記追跡対象に設定された移動体が映像に出現する映像表示期間を設定する映像表示期間設定部と、前記映像表示期間に基づいて前記追跡対象確認画面において前記確認映像を表示させるように前記追尾情報を修正する追尾情報修正部と、を備えた構成とする。
【００１５】
これによると、追跡対象とする移動体に追尾マークが表示されない、すなわち、追跡対象とする移動体の追尾ができていない場合に、追尾マークを選択して追跡対象とする移動体を指定する代わりに、追跡対象とする移動体の映像表示期間をユーザに指定させるため、あるカメラで追跡対象とする移動体の追尾ができていない場合でも、そのカメラの確認映像を適切に追跡対象確認画面に表示させることができる。これにより、カメラ内追尾がいかなる結果になっても、監視者の負担を軽減する支援処理を適切に行って、追跡中の人物を見失うことなく円滑に追跡作業を進めることができる。
【００１６】
また、第２の発明は、前記映像表示期間設定部は、前記追跡対象検索画面に、前記映像表示期間の開始時刻および終了時刻をそれぞれ表す可動操作部を表示して、その可動操作部をずらすことで前記映像表示期間の範囲を調整する操作をユーザに行わせる構成とする。
【００１７】
これによると、映像表示期間の開始時刻および終了時刻をそれぞれ表す可動部をずらす操作を行えばよいため、映像表示期間を適切な範囲に迅速に調整することができる。
【００１８】
また、第３の発明は、前記映像表示期間設定部は、前記追跡対象検索画面において、前記カメラの映像を、その表示時刻を調整可能に表示して、追跡対象とする移動体が最初に出現した映像と、追跡対象とする移動体が消失する直前の映像とを選択する操作をユーザに行わせて、前記映像表示期間の開始時刻および終了時刻を取得する構成とする。
【００１９】
これによると、映像表示期間の開始時刻および終了時刻にそれぞれ対応する映像を選択するため、映像表示期間を適切な範囲に正確に設定することができる。
【００２０】
また、第４の発明は、映像蓄積手段に蓄積された複数のカメラごとの映像を表示装置に表示させて、追跡対象となる移動体を追跡する監視者の作業を支援する追跡支援装置であって、前記映像蓄積手段に蓄積された映像に対する追尾処理により取得した追尾情報に基づいて、追跡対象に設定された移動体と同一である可能性が最も高い移動体の映像を前記カメラごとに抽出して、それらの映像のみが確認映像として表示された追跡対象確認画面を前記表示装置に表示させる確認映像提示部と、前記追跡対象確認画面に表示される前記カメラごとの前記確認映像に過不足がある場合に、追尾結果編集画面を前記表示装置に表示させて、前記追尾結果編集画面上でのユーザの操作入力に応じて、前記追跡対象に設定された移動体が映像に出現する映像表示期間を設定する映像表示期間設定部と、前記映像表示期間に基づいて前記追跡対象確認画面において前記確認映像を表示させるように前記追尾情報を修正する追尾情報修正部と、を備えた構成とする。
【００２１】
これによると、確認映像に過不足がある、すなわち、カメラ内追尾情報に誤りがある場合に、追跡対象とする移動体の映像表示期間をユーザに指定させるため、あるカメラで追跡対象とする移動体の追尾が適切にできていない場合でも、そのカメラの確認映像を適切に追跡対象確認画面に表示させることができる。これにより、カメラ内追尾がいかなる結果になっても、監視者の負担を軽減する支援処理を適切に行って、追跡中の人物を見失うことなく円滑に追跡作業を進めることができる。
【００２２】
また、第５の発明は、前記映像表示期間設定部は、前記カメラごとの映像に対するカメラ内追尾処理により取得した追尾期間を初期の映像表示期間として前記追尾結果編集画面に表示して、その追尾結果編集画面において、前記初期の映像表示期間に対して部分的な削除および追加の少なくともいずれが行われるように、前記映像表示期間の範囲を調整する操作をユーザに行わせる構成とする。
【００２３】
これによると、カメラ内追尾により取得した追尾期間を初期の映像表示期間として表示して、その初期の映像表示期間に対する部分的な削除や追加で映像表示期間の範囲を調整するため、映像表示期間を適切な範囲に容易に調整することができる。
【００２４】
また、第６の発明は、前記映像表示期間設定部は、前記追尾結果編集画面に、前記映像表示期間の開始時刻および終了時刻をそれぞれ表す可動操作部を表示して、その可動操作部をずらすことで前記映像表示期間の範囲を調整する操作をユーザに行わせる構成とする。
【００２５】
これによると、映像表示期間の開始時刻および終了時刻をそれぞれ表す可動部をずらす操作を行えばよいため、映像表示期間を適切な範囲に迅速に調整することができる。
【００２６】
また、第７の発明は、前記映像表示期間設定部は、前記追尾結果編集画面において、前記カメラの映像を、その表示時刻を調整可能に表示して、追跡対象とした移動体が最初に出現した映像と、追跡対象とした移動体が消失する直前の映像との少なくともいずれかを選択する操作をユーザに行わせて、前記映像表示期間の開始時刻および終了時刻の少なくともいずれかを取得する構成とする。
【００２７】
これによると、映像表示期間の開始時刻および終了時刻にそれぞれ対応する映像を選択するため、映像表示期間を適切な範囲に正確に設定することができる。
【００２８】
また、第８の発明は、前記映像表示期間設定部は、前記追尾結果編集画面において映像に現れる追跡対象となる移動体の追尾マークを選択する操作をユーザに行わせて、その選択された移動体の追尾期間を含むように前記映像表示期間を設定する構成とする。
【００２９】
これによると、追跡対象とした移動体が別の移動体として追尾されていた場合に、その移動体の追尾マークを選択することで、追跡対象とした移動体が別の移動体として追尾されていた追尾期間を映像表示期間に追加することができるため、映像表示期間を適切な範囲に容易に調整することができる。
【００３０】
また、第９の発明は、さらに、前記追跡対象に設定された移動体、およびその移動体と同一として対応づけられた移動体に関する前記カメラごとの映像が撮影時刻順に並べて表示された連続再生画面を前記表示装置に表示させ、この連続再生画面において、前記カメラごとの映像を、時間の経過にしたがって順次動画で表示させる連続再生を行う映像再生部を備えた構成とする。
【００３１】
これによると、追跡対象とした移動体を連続して追跡することができるため、追跡対象とした移動体が監視エリア内でどのような行動を行ったかを監視者が簡単に確認することができる。
【００３２】
また、第１０の発明は、映像蓄積手段に蓄積された複数のカメラごとの映像を表示装置に表示させて、追跡対象となる移動体を追跡する監視者の作業を支援する追跡支援システムであって、監視エリアを撮影する前記カメラと、このカメラごとの映像を表示する前記表示装置と、複数の情報処理装置と、を有し、前記複数の情報処理装置のいずれかが、ユーザの操作入力に応じて、追跡対象となる移動体の映像を探し出すための検索条件を設定する検索条件設定部と、前記映像蓄積手段より前記検索条件に適合する映像を取得して追跡対象検索画面を前記表示装置に表示させて、その追跡対象検索画面において映像上に表示された追尾マークを選択する操作により追跡対象とする移動体を指定する監視者の操作入力に応じて、指定された移動体を前記追跡対象に設定する追跡対象設定部と、前記映像蓄積手段に蓄積された映像に対する追尾処理により取得した追尾情報に基づいて、前記追跡対象に設定された移動体と同一である可能性が最も高い移動体の映像を前記カメラごとに抽出して、それらの映像のみが確認映像として表示された追跡対象確認画面を前記表示装置に表示させる確認映像提示部と、前記追跡対象検索画面において追跡対象とする移動体に前記追尾マークが表示されない場合に、ユーザの操作入力に応じて、前記追跡対象に設定された移動体が映像に出現する映像表示期間を設定する映像表示期間設定部と、前記映像表示期間に基づいて前記追跡対象確認画面において前記確認映像を表示させるように前記追尾情報を修正する追尾情報修正部と、を備えた構成とする。
【００３３】
これによると、第１の発明と同様に、カメラ内追尾がいかなる結果になっても、監視者の負担を軽減する支援処理を適切に行って、追跡中の人物を見失うことなく円滑に追跡作業を進めることができる。
【００３４】
また、第１１の発明は、映像蓄積手段に蓄積された複数のカメラごとの映像を表示装置に表示させて、追跡対象となる移動体を追跡する監視者の作業を支援する追跡支援システムであって、監視エリアを撮影する前記カメラと、このカメラごとの映像を表示する前記表示装置と、複数の情報処理装置と、を有し、前記複数の情報処理装置のいずれかが、前記映像蓄積手段に蓄積された映像に対する追尾処理により取得した追尾情報に基づいて、追跡対象に設定された移動体と同一である可能性が最も高い移動体の映像を前記カメラごとに抽出して、それらの映像のみが確認映像として表示された追跡対象確認画面を前記表示装置に表示させる確認映像提示部と、前記追跡対象確認画面に表示される前記カメラごとの前記確認映像に過不足がある場合に、追尾結果編集画面を前記表示装置に表示させて、前記追尾結果編集画面上でのユーザの操作入力に応じて、前記追跡対象に設定された移動体が映像に出現する映像表示期間を設定する映像表示期間設定部と、前記映像表示期間に基づいて前記追跡対象確認画面において前記確認映像を表示させるように前記追尾情報を修正する追尾情報修正部と、を備えた構成とする。
【００３５】
これによると、第４の発明と同様に、カメラ内追尾がいかなる結果になっても、監視者の負担を軽減する支援処理を適切に行って、追跡中の人物を見失うことなく円滑に追跡作業を進めることができる。
【００３６】
また、第１２の発明は、映像蓄積手段に蓄積された複数のカメラごとの映像を表示装置に表示させて、追跡対象となる移動体を追跡する監視者の作業を支援する処理を情報処理装置に行わせる追跡支援方法であって、ユーザの操作入力に応じて、追跡対象となる移動体の映像を探し出すための検索条件を設定し、前記映像蓄積手段より前記検索条件に適合する映像を取得して追跡対象検索画面を前記表示装置に表示させて、その追跡対象検索画面において映像上に表示された追尾マークを選択する操作により追跡対象とする移動体を指定する監視者の操作入力に応じて、指定された移動体を前記追跡対象に設定し、前記映像蓄積手段に蓄積された映像に対する追尾処理により取得した追尾情報に基づいて、前記追跡対象に設定された移動体と同一である可能性が最も高い移動体の映像を前記カメラごとに抽出して、それらの映像のみが確認映像として表示された追跡対象確認画面を前記表示装置に表示させ、前記追跡対象検索画面において追跡対象とする移動体に前記追尾マークが表示されない場合に、ユーザの操作入力に応じて、前記追跡対象に設定された移動体が映像に出現する映像表示期間を設定し、前記映像表示期間に基づいて前記追跡対象確認画面において前記確認映像を表示させるように前記追尾情報を修正する構成とする。
【００３７】
これによると、第１の発明と同様に、カメラ内追尾がいかなる結果になっても、監視者の負担を軽減する支援処理を適切に行って、追跡中の人物を見失うことなく円滑に追跡作業を進めることができる。
【００３８】
また、第１３の発明は、映像蓄積手段に蓄積された複数のカメラごとの映像を表示装置に表示させて、追跡対象となる移動体を追跡する監視者の作業を支援する処理を情報処理装置に行わせる追跡支援方法であって、前記映像蓄積手段に蓄積された映像に対する追尾処理により取得した追尾情報に基づいて、追跡対象に設定された移動体と同一である可能性が最も高い移動体の映像を前記カメラごとに抽出して、それらの映像のみが確認映像として表示された追跡対象確認画面を前記表示装置に表示させ、前記追跡対象確認画面に表示される前記カメラごとの前記確認映像に過不足がある場合に、追尾結果編集画面を前記表示装置に表示させて、前記追尾結果編集画面上でのユーザの操作入力に応じて、前記追跡対象に設定された移動体が映像に出現する映像表示期間を設定し、前記映像表示期間に基づいて前記追跡対象確認画面において前記確認映像を表示させるように前記追尾情報を修正する構成とする。
【００３９】
これによると、第４の発明と同様に、カメラ内追尾がいかなる結果になっても、監視者の負担を軽減する支援処理を適切に行って、追跡中の人物を見失うことなく円滑に追跡作業を進めることができる。
【００４０】
以下、本発明の実施の形態を、図面を参照しながら説明する。なお、本実施形態の説明では、「追跡」および「追尾」という同様の意味を持つ用語を使用しており、これは、単に説明の便宜上使い分けているに過ぎないが、「追跡」は、主として監視者の行為と関わりが強い場合に用いており、「追尾」は、主として装置で行われる処理と関わりが強い場合に用いている。
【００４１】
図１は、本実施形態に係る追跡支援システムの全体構成図である。この追跡支援システムは、スーパーマーケットやホームセンターなどの小売店舗などを対象にして構築されるものであり、カメラ１と、レコーダ（映像蓄積手段）２と、ＰＣ（追跡支援装置）３と、カメラ内追尾処理装置４と、を備えている。
【００４２】
カメラ１は店舗内の適所に設置され、カメラ１により店舗内（監視エリア）が撮影され、このカメラ１で撮影された店舗内の映像がレコーダ２に録画される。
【００４３】
ＰＣ３には、監視者（ユーザ）が種々の入力操作を行うマウスなどの入力デバイス６と、監視画面を表示するモニタ（表示装置）７とが接続されている。このＰＣ３は、店舗の警備室などに設置され、監視者（警備員）が、モニタ７に表示される監視画面で、カメラ１で撮影された店舗内の映像をリアルタイムで閲覧することができ、また、レコーダ２に録画された過去の店舗内の映像を閲覧することができる。
【００４４】
なお、本部に設けられたＰＣ１１にも図示しないモニタが接続され、カメラ１で撮影された店舗内の映像をリアルタイムで閲覧し、また、レコーダ２に録画された過去の店舗内の映像を閲覧して、本部で店舗内の状況を確認することができる。
【００４５】
カメラ内追尾処理装置４では、カメラ１の映像から検出された人物（移動体）を追尾して、人物ごとにカメラ内追尾情報を生成する処理が行われる。このカメラ内追尾処理には、公知の画像認識技術（人物検出技術および人物追跡技術など）を利用すればよい。
【００４６】
なお、本実施形態では、カメラ内追尾処理装置４が、ＰＣ３とは独立して、カメラ内追尾処理を常時行うようにしているが、ＰＣ３からの指示に応じて追尾処理を実行するものとしてもよい。また、カメラ内追尾処理装置４では、映像から検出された全ての人物を対象にして追尾処理を行うことが望ましいが、追跡対象に指定された人物およびこれと関連度の高い人物に絞って追尾処理を行うようにしてもよい。
【００４７】
次に、カメラ１の店舗での設置状況について説明する。図２は、店舗におけるカメラ１の設置状況を示す平面図である。
【００４８】
店舗内（監視エリア）には、商品陳列スペースの間に通路が設けられており、この通路を主に撮影するように複数のカメラ１が設置されている。
【００４９】
店舗内の通路を人物が移動すると、カメラ１のいずれか１つあるいは複数で人物が撮影され、人物が移動するのに応じて、人物の撮影が次のカメラ１に引き継がれる。このとき、人物の撮影を引き継ぐカメラは、店舗内の通路の形態およびカメラ１の撮影エリアにより限定され、この人物の撮影が引き継がれる関係にあるカメラを、本実施形態では、連携関係を有するカメラと呼称する。このカメラの連携関係に関する情報は予め設定されて、カメラ連携情報としてＰＣ３に保持されている。なお、カメラの連携関係に関する情報は、カメラ１の台数や設置場所などの変更に備え、システムの起動時などに各カメラ１の設置情報などをＰＣ３により個別に取得し、各カメラの連携関係に関する情報を更新するようにしてもよい。
【００５０】
次に、ＰＣ３の概略構成について説明する。図３は、ＰＣ３の概略構成を示す機能ブロック図である。
【００５１】
ＰＣ３は、追尾情報蓄積部２１と、カメラ間追尾処理部２２と、入力情報取得部２３と、追跡対象処理部２４と、映像提示部２５と、カメラ内追尾情報修正部２６と、映像再生部２７と、画面生成部２８と、を備えている。
【００５２】
追尾情報蓄積部２１では、カメラ内追尾処理装置４で生成したカメラ内追尾情報が蓄積される。また、追尾情報蓄積部２１では、カメラ間追尾処理部２２で生成したカメラ間追尾情報が蓄積される。
【００５３】
入力情報取得部２３では、マウスなどの入力デバイス６を用いた監視者の入力操作に応じて、その入力操作に基づく入力情報を取得する処理が行われる。
【００５４】
追跡対象処理部２４は、検索条件設定部３１と、追跡対象設定部３２と、映像表示期間設定部３３と、追跡対象追加設定部３４と、を備えている。
【００５５】
検索条件設定部３１では、監視者の入力操作に応じて、追跡対象となる人物が写った映像を探し出すための検索条件を設定する処理が行われる。本実施形態では、人物検索画面（追跡対象検索画面、図７参照）をモニタ７に表示させて、この人物検索画面で、検索条件として、撮影日時およびカメラ１に関する情報を監視者に入力させる。
【００５６】
追跡対象設定部３２では、検索条件設定部３１で設定された検索条件と、追尾情報蓄積部２１に蓄積されたカメラ内追尾情報とに基づいて、レコーダ２に蓄積された映像の中から検索条件に適合する日時およびカメラ１の映像を人物検索画面に表示させて、その人物検索画面において人物枠（追尾マーク）を選択することで追跡対象となる人物を監視者に指定させて、その指定された人物を追跡対象に設定する処理が行われる。
【００５７】
カメラ間追尾処理部２２は、リンクスコア算出部３５と、初期追尾情報生成部３６と、候補選択部３７と、カメラ間追尾情報修正部３８と、を備えている。
【００５８】
リンクスコア算出部３５では、追尾情報蓄積部２１から各カメラ１に関するカメラ内追尾情報を取得して、各カメラ１に関するカメラ内追尾処理で検出追尾された人物同士で、同一人物である可能性の高さを表すリンクスコア（評価値）を算出する。この処理では、人物の検出時刻（フレームの撮影時刻）、人物の検出位置、人物の移動速度、人物像の色情報などに基づいてリンクスコアを算出する。
【００５９】
初期追尾情報生成部３６では、追跡対象設定部３２で追跡対象に設定された人物を起点にして、連携関係にあるカメラ１に関するカメラ内追尾で追尾された人物の中から、リンクスコアが最も高い、すなわち、同一人物である可能性が最も高い人物をカメラ１ごとに順次選択して、それらの人物を同一人物として対応づけた初期追尾情報を生成する処理が行われる。
【００６０】
具体的には、まず、人物検索画面で人物を追跡対象に指定したときの映像（追跡対象指定映像）を撮影したカメラ１と連携関係にあるカメラ１のカメラ内追尾で追尾された人物の中からリンクスコアが最も高い人物を選択し、次に、その選択された人物を撮影したカメラ１と連携関係にあるカメラ１のカメラ内追尾で追尾された人物の中からリンクスコアが最も高い人物を選択し、このような人物の選択を連携関係にあるカメラ１ごとに繰り返す。このような人物を選択する処理は、追跡対象指定映像より時間的に前および後の双方で行われ、最も高いリンクスコアが所定のしきい値以下になった時点で、追跡対象とした人物が監視エリア内に存在しないものと判断して、人物の選択を終了する。
【００６１】
映像提示部２５は、確認映像提示部３９と、候補映像提示部４０と、を備えている。
【００６２】
確認映像提示部３９では、初期追尾情報生成部３６で生成した初期追尾情報に基づいて、リンクスコアが最も高い人物の映像、すなわち、追跡対象とした人物が写っている可能性が最も高い映像を確認映像としてカメラ１ごとに抽出して、その確認映像を提示する、具体的には、確認映像が撮影時刻順に並べて表示された確認映像表示状態のタイムライン画面（追跡対象確認画面、図８参照）をモニタ７に表示させる処理が行われる。
【００６３】
カメラ間追尾処理部２２の候補選択部３７では、確認映像提示部３９により提示された確認映像に誤りがある、すなわち、初期追尾情報生成部３６で生成した初期追尾情報に誤りがある場合に、その誤りがある確認映像に対応する期間においてカメラ内追尾で追尾された人物の中から、誤りがある確認映像に対応する人物よりリンクスコアが低い人物を候補人物として高い方から所定数選択する処理が行われる。
【００６４】
このとき、リンクスコアが所定のしきい値以上となり、かつ、誤りがあるものとして選択された確認映像に対応する人物の追尾期間（カメラ内追尾で追尾された期間）を基準にして設定された検索期間内に追尾期間が含まれる人物を対象にして候補人物が選択される。なお、リンクスコアのしきい値、および検索期間を設定する際の時間幅に関する設定情報が、ＰＣ３の設定情報保持部（図示せず）に保持されている。
【００６５】
候補映像提示部４０では、確認映像提示部３９により提示された確認映像に誤りがある場合に、候補選択部３７で選択した候補人物に関する映像、すなわち、追跡対象とした人物が写っている可能性が確認映像の次に高い映像を候補映像として抽出して、その候補映像を提示する、具体的には、所定数の候補映像が表示された候補映像表示状態のタイムライン画面（候補選択画面、図１０参照）をモニタ７に表示させて、その画面上で追跡対象とした人物が写った候補映像を監視者に選択させる処理が行われる。
【００６６】
カメラ間追尾情報修正部３８では、候補映像提示部４０により提示された候補映像の中に適切な候補映像がある場合に、その候補映像に対応する人物を追跡対象とした人物と対応づけるように、追跡対象とした人物に関する追尾情報を修正して、修正追尾情報を生成する処理が行われる。
【００６７】
このとき、カメラ間追尾情報修正部３８では、初期追尾情報を生成する処理と同様に、候補映像に対応する人物を起点にして、連携関係にあるカメラ１に関するカメラ内追尾で追尾された人物の中から、リンクスコアが最も高い、すなわち、同一人物である可能性が最も高い人物をカメラ１ごとに順次選択して、それらの人物を同一人物として対応づけた修正追尾情報を生成する。また、この追尾情報修正処理では、追跡対象設定部３２で設定した人物、監視者により確定の操作が行われた確認映像に対応する人物、および既に誤りがある確認映像と入れ替えられた候補映像に対応する人物が、修正対象から除外される。
【００６８】
追跡対象処理部２４の追跡対象追加設定部３４では、候補映像提示部４０により提示された候補映像の中に適切な候補映像がない場合に、レコーダ２に蓄積された映像を表示させた人物検索画面（追跡対象検索画面、図７参照）をモニタ７に表示させて、その人物検索画面において、誤りがある確認映像に対応する期間における映像の中から追跡対象とした人物を監視者に指定させて、その指定された人物を追跡対象に追加設定する処理が行われる。
【００６９】
カメラ間追尾情報修正部３８では、追跡対象追加設定部３４で追跡対象に設定された人物を、追跡対象設定部３２で追跡対象に設定した人物と対応づけて、追跡対象とした人物に関する追尾情報を修正して、修正追尾情報を生成する処理が行われる。
【００７０】
追跡対象処理部２４の映像表示期間設定部３３では、人物検索画面（追跡対象検索画面、図７参照）において追跡対象とする人物に人物枠が表示されない場合に、監視者の操作入力に応じて、追跡対象とした人物が映像に出現する映像表示期間を設定する処理が行われる。
【００７１】
また、映像表示期間設定部３３では、確認映像表示状態のタイムライン画面（追跡対象確認画面、図８参照）に表示されるカメラ１ごとの確認映像に過不足がある場合に、追尾結果編集を指示する監視者の操作に応じて、追尾結果編集画面（図１２参照）をモニタ７に表示させて、この追尾結果編集画面上でのユーザの操作入力に応じて、追跡対象とした人物が映像に出現する映像表示期間を設定する処理が行われる。
【００７２】
また、映像表示期間設定部３３では、候補映像提示部４０により提示された候補映像の中に適切な候補映像がない場合に、レコーダ２に蓄積された映像を表示させた人物検索画面をモニタ７に表示させて、その人物検索画面において、追跡対象とした人物が映像に写っている期間を監視者に指定させて、その期間を映像表示期間として設定する処理が行われる。
【００７３】
カメラ内追尾情報修正部２６では、映像表示期間設定部３３で設定された映像表示期間を、追跡対象とした人物に関する追尾情報に付加する修正を行って、修正追尾情報を生成する処理が行われる。したがって、カメラ内追尾情報は追尾期間と映像表示期間とを含むものとなる。
【００７４】
追跡対象処理部２４の追跡対象追加設定部３４では、映像表示期間設定部３３において映像表示期間が設定されて、その映像表示期間が設定されたカメラ１に隣接するカメラ１の確認映像がタイムライン画面においてブランク状態（映像が表示されない状態）となった場合に、レコーダ２に蓄積された映像を表示させた人物検索画面（追跡対象検索画面、図７参照）をモニタ７に表示させて、その人物検索画面において、ブランク状態の確認映像に対応する期間における映像の中から追跡対象とした人物を監視者に指定させて、その指定された人物を追跡対象に追加設定する処理が行われる。
【００７５】
映像再生部２７では、モニタ７に表示される画面上でカメラ１の映像を動画で表示させる処理が行われる。本実施形態では、連続再生状態のタイムライン画面（連続再生画面、図９参照）をモニタ７に表示させる処理が行われ、このタイムライン画面では、追跡対象となる人物が写ったカメラ１ごとの映像を、時間の経過にしたがって順次動画で表示させる連続再生が行われる。
【００７６】
画面生成部２８は、モニタ７に表示させる画面を生成するものであり、具体的には、追跡対象設定部３２からの指示に応じて人物検索画面（追跡対象検索画面、図７参照）を生成し、確認映像提示部３９からの指示に応じて確認映像表示状態のタイムライン画面（追跡対象確認画面、図８参照）を生成し、候補映像提示部４０からの指示に応じて候補映像表示状態のタイムライン画面（候補選択画面、図１０参照）を生成し、映像再生部２７からの指示に応じて連続再生状態のタイムライン画面（連続再生画面、図９参照）を生成する。
【００７７】
なお、図３に示したＰＣ３の各部は、ＰＣ３のプロセッサ（ＣＰＵ）にＨＤＤ等のメモリに保存した追跡支援用のプログラム（インストラクション）を実行させることで実現される。これらのプログラムは、情報処理装置としてのＰＣ３に予め導入して専用の装置として構成する他、所定のＯＳ上で動作するアプリケーションプログラムとして適宜なプログラム記録媒体に記録して、またネットワークを介して、ユーザに提供されるようにしてもよい。
【００７８】
次に、モニタ７に表示される各画面、および各画面で行われる監視者の操作に応じてＰＣ３の各部で行われる処理について説明する。図４は、モニタ７に表示される画面の遷移状況を示す説明図である。図５および図６は、各画面で行われる監視者の操作に応じてＰＣ３の各部で行われる処理の手順を示すフロー図である。
【００７９】
まず、ＰＣ３において追跡支援処理を開始する操作を行うと、人物検索画面（追跡対象検索画面、図７参照）がモニタ７に表示される（ＳＴ１０１）。
【００８０】
この人物検索画面は、追跡対象とする人物が万引きなどの問題のある行為を行った日時を指定するとともに、追跡したい人物が問題のある行為を行った場所や、その人物が通ったものと想定されるエリアを撮影するカメラ１を指定して、追跡対象とする人物が写った映像を探し出して、その映像上で追跡対象とする人物を指定するものであり、日時およびカメラ１を指定して表示された映像に追跡対象とする人物が写っていると、その人物に表示された人物枠を選択して、その人物を追跡対象に指定する操作が監視者により行われる（ＳＴ１０２でＹｅｓ）。
【００８１】
なお、人物検索画面には、単一カメラによる人物検索画面と複数カメラによる人物検索画面とがあり、単一カメラによる人物検索画面は、単一のカメラ１の映像を表示させて追跡対象とする人物が写った映像を探し出すものであり、複数カメラによる人物検索画面は、複数のカメラ１の映像を表示させて追跡対象とする人物が写った映像を探し出すものである。
【００８２】
人物検索画面で、カメラ選択の操作を行うと、カメラ選択画面（図示せず）に遷移する。このカメラ選択画面でカメラ１を選択すると、人物検索画面に戻り、その人物検索画面に選択されたカメラ１の映像が表示される。
【００８３】
なお、カメラ選択画面には、単一カメラ選択画面と複数カメラ選択画面とがある。単一カメラ選択画面では、人物検索画面に映像を表示させるカメラ１を監視者が１つ選択することができる。複数カメラ選択画面では、人物検索画面に映像を表示させるカメラ１を監視者が複数選択することができる。
【００８４】
人物検索画面で、監視者が追跡対象とする人物を指定すると、追跡対象設定部３２において、監視者が指定した人物を追跡対象に設定する処理が行われる（ＳＴ１０３）。ついで、初期追尾情報生成部３６において、各カメラ１に関するカメラ内追尾処理で検出追尾された人物の中からリンクスコアが最も高い人物をカメラごとに順次選択して、初期追尾情報を生成する処理が行われる（ＳＴ１０４）。そして、確認映像提示部３９において、初期追尾情報に基づいて、追跡対象とした人物が写っている可能性が最も高い映像を確認映像としてカメラ１ごとに抽出して、その確認映像が表示された確認映像表示状態のタイムライン画面（追跡対象確認画面、図８参照）をモニタ７に表示させる処理が行われる（ＳＴ１０５）。
【００８５】
一方、人物検索画面において、日時およびカメラ１を指定して表示された映像に追跡対象とする人物が写っていない場合には、人物枠を選択する操作を行うことができず（ＳＴ１０２でＮｏ）、その代わりに、追跡対象とする人物が映像に現れている期間（映像表示期間）を指定する操作が監視者により行われ（ＳＴ１０６でＹｅｓ）、映像表示期間設定部３３において、映像表示期間を設定する処理が行われる（ＳＴ１０７）。そして、確認映像提示部３９において、映像表示期間に対応する映像が確認映像として表示された確認映像表示状態のタイムライン画面（図１１参照）をモニタ７に表示させる処理が行われる（ＳＴ１０５）。
【００８６】
確認映像表示状態のタイムライン画面は、確認映像によってカメラ間追尾情報（初期追尾情報）に誤りがないかを監視者に確認させるものであり、人物検索画面で人物枠を選択して追跡対象とする人物を指定する操作が監視者により行われた場合には、カメラ間追尾により、追跡対象とする人物を指定したカメラ１の前後のカメラ１ごとの確認映像が表示される。
【００８７】
この確認映像表示状態のタイムライン画面に表示された全ての確認映像に誤りがない、すなわち、全ての確認映像に追跡対象とした人物が写っており、かつ、その人物に人物枠が表示されている場合には、連続再生を指示する操作が監視者により行われて（ＳＴ１０８でＹｅｓ）、連続再生状態のタイムライン画面（連続再生画面、図１１参照）に遷移する（ＳＴ１０９）。
【００８８】
この連続再生状態のタイムライン画面では、追跡対象が写ったカメラ１ごとの映像を、時間の経過にしたがって順次表示させる連続再生が行われる。
【００８９】
一方、確認映像表示状態のタイムライン画面に表示された複数の確認映像の中に適切でない確認映像が見つかった場合、すなわち、確認映像に追跡対象とした人物が写っているものの、確認映像を再生した際に、追跡対象でない人物のみが写る映像が表示されたり、追跡対象とした人物が写る映像が途中から開始されたり、追跡対象とした人物が写る映像が途中で終了したりして、追跡対象とした人物が映像に現れてからその人物が映像からいなくなるまでの期間の全体に渡って追跡対象とした人物が適切に写っていない場合には、その確認映像を選択して追尾結果編集を指示する操作が監視者により行われる（ＳＴ１１０でＹｅｓ）。そして、映像表示期間設定部３３において、追尾結果編集画面（図１２参照）をモニタ７に表示させる処理が行われる（ＳＴ１１１）。
【００９０】
この追尾結果編集画面では、映像表示期間の不要部分を削除したり、映像表示期間の不足部分を追加したりする編集操作が監視者により行われる。この編集操作が終了すると、カメラ内追尾情報修正部２６において、編集操作による入力情報に基づいて、カメラ内追尾情報を修正する処理が行われ、さらに必要に応じて、カメラ間追尾情報修正部３８において、カメラ内追尾情報に基づいてカメラ間追尾情報を修正する処理が行われる（ＳＴ１１２）。そして、確認映像提示部３９において、確認映像表示状態のタイムライン画面をモニタ７に表示させる処理が行われる（ＳＴ１０５）。
【００９１】
一方、確認映像表示状態のタイムライン画面に表示された複数の確認映像の中に誤りがある確認映像が見つかった場合、すなわち、いずれかの確認映像に、追跡対象とした人物が写っていないか、あるいは追跡対象とした人物が写っているものの、追跡対象を示す人物枠が追跡対象とした人物と異なる人物に表示されている場合には、その確認映像を選択して候補映像の表示を指示する操作が監視者により行われる（ＳＴ１１３でＹｅｓ）。
【００９２】
すると、候補選択部３７において、確認映像に対応する人物よりリンクスコアが低い人物を上位から所定数選択する処理が行われ、候補映像提示部４０において、候補選択部３７で選択された人物の映像を候補映像として抽出して、その候補映像が並べて表示された候補映像表示状態のタイムライン画面（候補選択画面、図１０参照）をモニタ７に表示させる処理が行われる（ＳＴ１１４）。
【００９３】
この候補映像表示状態のタイムライン画面では、追跡対象とした人物が写っている可能性が確認映像の次に高い映像が候補映像として上位のものから所定数だけ表示される。なお、リンクスコアが最も高い人物と次順位以降の人物とが同一のカメラ１で撮影されている場合もあり、候補映像は、確認映像と同じカメラ１である場合もある。
【００９４】
この候補映像表示状態のタイムライン画面に表示された候補映像の中に、適切な候補映像がある、すなわち、追跡対象とした人物が写った候補映像が見つかり、かつ、その人物に人物枠が表示されている場合には、その候補映像を選択する操作が監視者により行われる（ＳＴ１１５でＹｅｓ）。
【００９５】
すると、カメラ間追尾情報修正部３８において、候補映像表示状態のタイムライン画面で選択された候補映像に対応する人物を、最初に追跡対象に指定した人物と対応づけるように追尾情報を修正する処理が行われる（ＳＴ１１６）。そして、確認映像表示状態のタイムライン画面に戻り（ＳＴ１０５）、このタイムライン画面では、追尾情報を修正した結果が反映される、すなわち、タイムライン画面の確認映像が候補映像に置き換えられて表示される。
【００９６】
一方、候補映像表示状態のタイムライン画面に表示された候補映像の中に、適切な候補映像がない、すなわち、追跡対象とした人物が写った候補映像が見つからないか、または、追跡対象とした人物が写った候補映像が見つかったが、その人物に人物枠が表示されていない場合には、人物手動検索を選択する操作が監視者により行われて（ＳＴ１１７でＹｅｓ）、人物検索画面（追跡対象検索画面、図７参照）に遷移する（ＳＴ１１８）。この人物検索画面では、日時およびカメラ１を指定して追跡対象とした人物が写った映像を探し出す作業が監視者により行われる。
【００９７】
この人物検索画面で、追跡対象とした人物が写った映像が見つかり、かつ、その人物に人物枠が表示されている場合、すなわち、追跡対象とした人物に関するカメラ内追尾が成功している場合には、その人物枠を選択する操作が監視者により行われる（ＳＴ１１９でＹｅｓ）。すると、カメラ間追尾情報修正部３８において、人物検索画面で選択された人物を最初に追跡対象に指定した人物と対応づけるように追尾情報を修正する処理が行われる（ＳＴ１１６）。そして、確認映像表示状態のタイムライン画面に戻り（ＳＴ１０５）、このタイムライン画面では、追尾情報を修正した結果が反映される、すなわち、タイムライン画面の確認映像が、人物検索画面で指定した人物の映像に置き換えられて表示される。
【００９８】
一方、人物検索画面で、追跡対象とした人物が写った映像が見つかったが、その人物に人物枠が表示されていない、すなわち、追跡対象とした人物に関するカメラ内追尾が失敗している場合には、この人物検索画面で、追跡対象とした人物が映像に写っている期間を映像表示期間として指定する操作が監視者により行われる（ＳＴ１２０でＹｅｓ）。すると、映像表示期間設定部３３において、映像表示期間を設定する処理が行われ、ついで、カメラ間追尾情報修正部３８において、追跡対象とした人物に関する追尾情報に映像表示期間を付加する修正が行われる（ＳＴ１２１）。そして、確認映像表示状態のタイムライン画面に戻り（ＳＴ１０５）、このタイムライン画面では、追尾情報を修正した結果が反映される、すなわち、タイムライン画面の確認映像が、人物検索画面で指定した映像表示期間の映像に置き換えられて表示される。
【００９９】
以上のように、確認映像表示状態のタイムライン画面に表示される確認映像に不都合がある場合には、追跡対象とした人物が映像に写る映像表示期間を入力する操作や、候補映像を指定する操作や、追跡対象とした人物を探し出して指定する操作が、監視者により行われ、これらの操作が、誤りがある確認映像がなくなるまで繰り返される。そして、全ての確認映像に誤りがないことが確認されると、連続再生を指示する操作が監視者により行われて（ＳＴ１０８でＹｅｓ）、連続再生状態のタイムライン画面がモニタ７に表示される（ＳＴ１０９）。
【０１００】
なお、人物検索画面において人物の選択の代わりに映像表示期間を指定し、また、追尾結果編集画面において映像表示期間を指定することで、追跡対象とした人物のカメラ間追尾が途切れた状態となるが、人物検索画面や追尾結果編集画面で指定した映像表示期間がカメラ間追尾情報の欠落部分を補間する状態となるため、連続再生状態のタイムライン画面で連続再生を行う際に、追跡対象とした人物の映像を途切れることなく再生することができる。
【０１０１】
以下に、図４に示した各画面について詳しく説明する。
【０１０２】
まず、図４に示した人物検索画面（追跡対象検索画面）について説明する。図７は、モニタ７に表示される人物検索画面を示す説明図である。
【０１０３】
この人物検索画面（追跡対象検索画面）は、追跡したい人物が万引きなどの問題のある行為を行った日時を指定して、追跡対象とする人物が写った映像を探し出して、その映像上で追跡対象とする人物を指定するものであり、検索日時指定部４１と、検索カメラ指定部４２と、映像表示部４３と、再生操作部４４と、表示時刻調整部４５と、映像表示期間指定部４６と、調整範囲指定部４７と、選択解除ボタン４８と、設定完了ボタン４９と、が設けられている。
【０１０４】
検索日時指定部４１では、追跡対象とする人物が写っているものと想定される期間の中心となる日時を監視者が指定する。この検索日時指定部４１で日時を指定して検索ボタン（検索指示部）５１を操作すると、指定した日時の映像が映像表示部４３に表示される。
【０１０５】
検索カメラ指定部４２では、検索モード（単一カメラモードおよび複数カメラモード）に応じてカメラ１を監視者が選択する。単一カメラモードは、単一のカメラ１を指定して、その単一のカメラ１の映像から追跡対象とする人物が写った映像を探し出すものであり、複数カメラモードは、複数のカメラ１を指定して、その複数のカメラ１ごとの映像から追跡対象とする人物が写った映像を探し出すものである。
【０１０６】
この検索カメラ指定部４２には、検索モード選択部（ラジオボタン）５２と、カメラ選択部５３と、カメラ選択ボタン５４と、マップ表示ボタン５５と、が設けられている。
【０１０７】
検索モード選択部５２では、単一カメラモードおよび複数カメラモードのいずれかの検索モードを選択する。カメラ選択部５３では、プルダウンメニューにより単一のカメラ１を選択する。
【０１０８】
カメラ選択ボタン５４を操作すると、カメラ選択画面（図示せず）が表示され、このカメラ選択画面で複数のカメラ１を選択することができる。なお、カメラ選択画面は、店舗に設置されたカメラ１を一覧表示したものである。
【０１０９】
マップ表示ボタン５５を操作すると、カメラ位置確認画面（図示せず）が表示される。このカメラ位置確認画面によりカメラ１の位置を確認することができる。なお、カメラ位置確認画面は、店舗内のレイアウトを示す地図画像上にカメラ１の位置を示すカメラアイコンを重畳して表示したものであり、選択されたカメラ１の位置を確認することができ、さらに、カメラアイコンを選択することで別のカメラ１に変更することもできる。
【０１１０】
なお、検索モード（単一カメラモードおよび複数カメラモード）の選択状態およびカメラ１の選択状態に関する情報は、図示しない情報保持部に保持され、次回起動時に、前回終了時に選択されていた検索モードおよびカメラ１のままで人物検索画面が表示される。
【０１１１】
単一カメラモードを選択して、日時およびカメラ１を指定して、検索ボタン５１を操作すると、図７に示す単一カメラによる人物検索画面が表示され、この単一カメラによる人物検索画面では、映像表示部４３に、指定された単一のカメラ１の映像が表示される。一方、複数カメラモードを選択して、日時およびカメラ１を指定して、検索ボタン５１を操作すると、複数カメラによる人物検索画面（図示せず）が表示され、この複数カメラによる人物検索画面では、映像表示部４３に、指定された複数のカメラ１の映像が並べて表示される。
【０１１２】
映像表示部４３には、カメラ１の映像が表示される。この映像表示部４３では、ここに表示された映像から検出された人物、すなわち、カメラ内追尾処理の対象となった人物の画像領域に赤色の人物枠（追尾マーク）６１が表示され、この人物枠６１を選択する操作、具体的には人物枠６１上にポインタを合わせて左クリック操作を行うことで、その人物が追跡対象に設定される。また、映像表示部４３の近傍には、カメラ１の名称と、日時すなわち映像の撮影時刻と、が表示される。
【０１１３】
再生操作部４４は、映像表示部４３に表示される映像の再生に関する操作を行うものである。この再生操作部４４には、再生、逆再生、停止、早送り、および巻き戻しの各ボタン６２が設けられており、これらのボタン６２を操作することで、映像を効率的に閲覧することができ、追跡対象とする人物が写る映像を効率よく見つけ出すことができる。
【０１１４】
表示時刻調整部４５は、映像表示部４３に表示される映像の表示時刻を調整するものである。この表示時刻調整部４５は、いわゆるシークバーであり、スライダ６３がバー６４に沿って移動可能に設けられている。マウスなどの入力デバイス６を用いてスライダ６３をずらす操作（ドラッグ）を行うと、そのスライダ６３が指し示す時刻の映像が映像表示部４３に表示される。なお、バー６４は、検索日時指定部４１で指定された時刻を中心とした表示時刻の調整範囲を規定する。
【０１１５】
映像表示期間指定部４６は、追跡対象とした人物が映像に写っている期間を映像表示期間として監視者が操作入力するものである。この映像表示期間指定部４６は、いわゆるデュレーションバーであり、枠６５内に映像表示期間を表すバー（可動操作部）６６が表示されている。この映像表示期間指定部４６は、映像表示部４３に追跡対象とする人物が写った映像が表示されているが、その人物に人物枠６１が表示されていない場合に、人物枠６１の選択に代えて、追跡対象とする人物が映像に写っている期間を監視者が指定するものである。
【０１１６】
調整範囲指定部４７は、映像表示部４３に表示される映像の表示時刻の調整範囲（有効再生範囲）、すなわち、表示時刻調整部４５のバー６４で規定されるスライダ６３の移動範囲を指定するものである。この調整範囲指定部４７では、表示時刻の調整範囲をプルダウンメニューにより所定の時間（例えば、５分、１５分など）の中から選択することができる。
【０１１７】
選択解除ボタン４８を操作すると、映像表示期間指定部４６の指定内容が破棄され、映像表示期間（開始時刻および終了時刻）の指定をやり直すことができる。設定完了ボタン４９を操作すると、確認映像表示状態のタイムライン画面（図８参照）に遷移する。
【０１１８】
次に、図４に示した確認映像表示状態のタイムライン画面（追跡対象確認画面）について説明する。図８は、モニタ７に表示される確認映像表示状態のタイムライン画面を示す説明図である。
【０１１９】
図７に示した人物検索画面において、監視者が、映像表示部４３で人物枠６１を選択して追跡対象とする人物を指定した上で、設定完了ボタン４９を操作すると、図８に示す確認映像表示状態のタイムライン画面に遷移する。
【０１２０】
この確認映像表示状態のタイムライン画面は、人物検索画面で追跡対象に指定した人物が写っている可能性が最も高い各カメラ１の映像を確認映像として表示して、この確認映像によってカメラ間追尾情報（初期追尾情報）に誤りがないかを監視者に確認させるものであり、このタイムライン画面には、映像表示部７１と、再生操作部４４と、表示時刻調整部４５と、マップ表示ボタン７２と、が設けられている。
【０１２１】
再生操作部４４および表示時刻調整部４５は、人物検索画面（図７参照）と同様であるが、連続再生状態のタイムライン画面（図９参照）において映像を動画で表示させる際に使用されるものであり、後に詳しく説明する。
【０１２２】
マップ表示ボタン７２を操作すると、カメラ位置確認画面（図示せず）が表示される。このカメラ位置確認画面によりカメラの位置を確認することができる。なお、カメラ位置確認画面は、店舗内のレイアウトを示す地図画像上にカメラ１の位置を示すカメラアイコンを重畳して表示したものであり、確認映像を撮影したカメラ１の位置を確認することができる。
【０１２３】
なお、人物検索画面（図７参照）において、監視者が、映像表示期間指定部４６で映像表示期間を指定した上で、設定完了ボタン４９を操作した場合にも、確認映像表示状態のタイムライン画面に遷移するが、このときのタイムライン画面（図１１参照）については後に詳しく説明する。
【０１２４】
映像表示部７１には、確認映像表示部７３と、候補映像表示部７４と、が設けられている。なお、候補映像表示部７４は、候補映像表示状態のタイムライン画面（図１０参照）において映像が表示されるものであり、後に詳しく説明する。
【０１２５】
確認映像表示部７３には、所定数のカメラ別映像表示部８１が横方向に並べて設けられ、このカメラ別映像表示部８１の映像表示枠８２に、確認映像が撮影時刻順に並べて表示されており、監視エリア（店舗内）に進入して追尾が開始されてから、監視エリアを退出するまでの確認映像が、撮影時刻が古い順に左端から並べて表示されている。また、カメラ別映像表示部８１には、各確認映像の撮影時刻、および各確認映像を撮影したカメラ１の名称が表示されている。タイムライン画面を開いた際の初期状態では、カメラ１でカメラ内追尾が開始された追尾開始時刻の確認映像が静止画で表示される。確認映像に誤りがない場合には、再生操作部４４の操作にしたがって連続再生へと移行させることができる。なお、確認映像には、人物検索画面（図７参照）と同様に、その確認映像で検出追尾された人物に人物枠が表示される。
【０１２６】
カメラ別映像表示部８１には、拡大ボタン８３と、候補映像表示ボタン８４と、が設けられている。拡大ボタン８３を操作すると、確認映像を拡大して表示する拡大映像表示画面（図示せず）が別ウィンドウでホップアップ表示され、この画面で確認映像を詳細に観察することができる。候補映像表示ボタン８４を操作すると、候補映像表示状態のタイムライン画面（図１０参照）に遷移する。
【０１２７】
また、確認映像表示部７３では、追跡対象指定映像、すなわち、人物検索画面（図７参照）で人物を追跡対象に指定した映像も表示され、この追跡対象指定映像を表示するカメラ別映像表示部８１には、候補映像表示ボタン８４の代わりに、追跡対象指定映像を識別するためのマーク８５が表示される。なお、カメラ別映像表示部８１の映像表示枠８２に、追跡対象指定映像であることを表す枠画像が表示されるようにしてもよい。また、確定された確認映像に、確定状態を表す枠画像が表示されるようにしてもよい。
【０１２８】
また、映像表示部７１には、第１のスクロールバー（スクロール操作部）７５が設けられている。この第１のスクロールバー７５は、全ての確認映像が確認映像表示部（確認映像の表示領域）７３に収まりきらない場合に、確認映像の配列方向、すなわち横方向に確認映像をスライドさせて表示するものであり、ノブ７５ａをドラッグすると横方向に確認映像をスライドさせることができ、アロー（左右の矢印）７５ｂをクリックすることで、その方向に確認映像をノブ７５ａとともに一単位（確認映像１つ分）だけスライドさせることができる。
【０１２９】
このように構成された確認映像表示状態のタイムライン画面では、確認映像表示部７３に表示された確認映像が、追跡対象に指定した人物のものか否かを判断することで、追跡対象に指定した人物に関するカメラ間追尾情報（初期追尾情報）に誤りがないかを監視者が確認することができる。カメラ間追尾情報に誤りがある場合には、確認映像に、追跡対象とした人物が写っていないか、あるいは追跡対象とした人物が写っているものの、追跡対象とした人物と異なる人物に人物枠が表示されており、この確認映像を見ることで、カメラ間追尾情報に誤りがあるか否かを判断することができる。
【０１３０】
ここで、確認映像表示部７３に表示された全ての確認映像に誤りがない、すなわち、全ての確認映像に追跡対象とした人物が写っており、かつ、その人物に人物枠が表示されている場合には、連続再生を指示する操作、すなわち、再生操作部４４の再生のボタン６２を操作する。すると、図９に示す連続再生状態のタイムライン画面に遷移する。
【０１３１】
次に、図４に示した連続再生状態のタイムライン画面（連続再生画面）について説明する。図９は、モニタ７に表示される連続再生状態のタイムライン画面を示す説明図である。
【０１３２】
この連続再生状態のタイムライン画面は、確認映像表示状態のタイムライン画面（図８参照）と略同様の構成であるが、この連続再生状態のタイムライン画面では、確認映像表示部７３に表示された確認映像を、時間の経過にしたがって順次動画で表示させる連続再生が行われる。再生中の確認映像には、再生中であることを示す枠画像７６が表示される。
【０１３３】
なお、再生操作部４４において、確認映像表示部７３に表示される確認映像の表示時刻を調整するスライダ６３の移動範囲、すなわち、表示時刻の調整範囲を規定するバー６４の始点（左端）は、撮影時刻が最も古い確認映像の開始時刻となり、バー６４の終点（右端）は、撮影時刻が最も新しい確認映像の終了時刻となる。
【０１３４】
ここで、各カメラ１の映像が動画で表示される映像表示期間は、人物枠が表示されている期間、すなわち、各カメラ１に関するカメラ内追尾で人物が検出追尾されている期間となる。また、前後の映像で映像表示期間が整合しない、すなわち、前の映像の終了時刻と後の映像の開始時刻との間にタイムラグがある場合には、映像の再生が途切れないように、映像表示期間を前後に延長して映像表示期間を時間的につなぎ合わせる処理を行う。また、前後の映像で映像表示期間が重複している場合もあり、この場合には、前後の映像で並行して再生が行われる。これにより、連続再生時には、必ず１つまたは２つの映像が再生されている状態となる。
【０１３５】
なお、この連続再生状態のタイムライン画面では、撮影時刻が古いものから順に確認映像が左から並べて表示されているため、連続再生時には確認映像が左から順に再生されるが、全ての確認映像が確認映像表示部７３に収まりきらない場合には、確認映像を適宜なタイミングで自動でスライドさせる処理が行われ、これにより監視者が特別な操作を行うことなく、全ての確認映像が連続して再生される状況を閲覧することができる。
【０１３６】
また、カメラ別映像表示部８１の拡大ボタン８３を操作すると、確認映像を拡大して表示する拡大映像表示画面（図示せず）が別ウィンドウでホップアップ表示され、この画面において確認映像を拡大した状態で動画で表示させることができる。なお、連続再生中に拡大ボタン８３を操作した場合に、以降の全ての確認映像に対して、拡大表示を有効状態とし、１つまたは２つの別ウィンドウにて拡大映像が連続再生されるようにすると良い。
【０１３７】
次に、図４に示した候補映像表示状態のタイムライン画面（候補選択画面）について説明する。図１０は、モニタ７に表示される候補映像表示状態のタイムライン画面を示す説明図である。
【０１３８】
確認映像表示状態のタイムライン画面（図８参照）に表示された複数の確認映像の中に誤りがある確認映像が見つかった場合、すなわち、いずれかの確認映像に、追跡対象とした人物が写っていないか、あるいは追跡対象とした人物が写っているものの、追跡対象を示す人物枠が追跡対象とした人物と異なる人物に表示されている場合には、その確認映像に対応する候補映像表示ボタン８４を監視者が操作することで、図１０に示す候補映像表示状態のタイムライン画面に遷移する。
【０１３９】
この候補映像表示状態のタイムライン画面（候補選択画面）は、確認映像表示状態のタイムライン画面に表示された確認映像に誤りがある場合に、追跡対象とした人物が写っている可能性が確認映像の次に高い映像を候補映像として表示して監視者に選択させるものである。
【０１４０】
この候補映像表示状態のタイムライン画面は、確認映像表示状態のタイムライン画面（図８参照）と略同様であるが、候補映像表示部７４において、誤りがあるものとして選択された確認映像の下に、所定数のカメラ別映像表示部８１が縦方向に一列に並べて設けられ、このカメラ別映像表示部８１の映像表示枠８２に、候補映像がリンクスコアが高い順に上から並べて表示されている。なお、この候補映像表示状態のタイムライン画面では、候補映像に対応する確認映像の映像表示枠８２に、選択状態を示す枠画像７７が所定の表示色（例えば黄色）で表示される。
【０１４１】
また、映像表示部７１には、第２のスクロールバー（スクロール操作部）７８が設けられている。この第２のスクロールバー７８は、全ての候補映像が候補映像表示部（候補映像の表示領域）７４に収まりきらない場合に、候補映像の配列方向、すなわち縦方向に候補映像をスライドさせて表示するものであり、ノブ７８ａをドラッグすると縦方向に候補映像をスライドさせることができ、アロー（上下の矢印）７８ｂをクリックすることで、その方向に候補映像をノブ７８ａとともに一単位（候補映像１つ分）だけスライドさせることができる。
【０１４２】
なお、候補映像表示部７４におけるカメラ別映像表示部８１の拡大ボタン８３を操作すると、候補映像を拡大して表示する拡大映像表示画面（図示せず）が別ウィンドウでホップアップ表示され、この画面で候補映像を詳細に観察することができる。
【０１４３】
この候補映像表示状態のタイムライン画面において、候補映像表示部７４に表示された候補映像の中に、適切な候補映像がある、すなわち、追跡対象とした人物が写った候補映像が見つかり、かつ、その人物に人物枠が表示されている場合には、その候補映像を選択する操作（左クリック）が監視者により行われる。
【０１４４】
すると、カメラ間追尾情報修正部３８において、候補映像表示状態のタイムライン画面で選択された候補映像に対応する人物を、人物検索画面（図７参照）で追跡対象に指定した人物と対応づけるように追尾情報を修正する処理が行われる。そして、この追尾情報を修正した結果を反映させた状態で、確認映像表示状態のタイムライン画面（図８参照）がモニタ７に表示される。
【０１４５】
この確認映像表示状態のタイムライン画面では、追尾情報を修正した結果が反映される、すなわち、確認映像表示状態のタイムライン画面で誤りがあるものとして選択された確認映像が、候補映像表示状態のタイムライン画面で選択された候補映像に置き換えられて表示される。また、誤りがある確認映像を候補映像と入れ替えたことに伴って、その前後の確認映像が変更される場合もある。すなわち、カメラ間追尾情報修正部３８では、候補映像に対応する人物を起点にして、リンクスコアが最も高い人物をカメラ１ごとに順次選択する処理が行われ、ここで選択された人物が、確認映像に対応する人物と異なる場合には、人物の入れ替えが発生し、これに応じて確認映像が変更される。また、カメラ間追尾情報修正部３８において追尾情報を修正する際には、追跡対象設定部３２で設定した人物、監視者により確定の操作が行われた確認映像に対応する人物、および既に誤りがある確認映像と入れ替えられた候補映像に対応する人物は対象から除外されるため、それらの人物に関する確認映像は変更されない。
【０１４６】
なお、本実施形態では、候補映像表示状態のタイムライン画面で適切な候補映像を選択するようにしたが、候補映像上の人物枠を選択するようにしてもよい。このようにすると、誤った人物で追尾情報が修正されることを避けることができる。
【０１４７】
次に、図７に示した人物検索画面において追跡対象とする人物に人物枠６１が表示されない場合について説明する。
【０１４８】
本実施形態では、図７に示した人物検索画面において、追跡したい人物が万引きなどの問題のある行為を行った日時を指定すると共に、追跡したい人物が問題のある行為を行った場所を撮像するカメラ１を選択して、追跡対象とする人物が写った映像を探し出して、その映像上で追跡対象とする人物を指定することができるが、このような注目した日時およびカメラ１の映像で追跡対象とする人物の追尾ができていない場合がある。この場合、追跡対象とする人物には人物枠６１が表示されないため、人物枠６１の選択で追跡対象を指定することができない。
【０１４９】
このような場合、本実施形態では、人物枠６１の選択の代わりに、追跡対象とする人物が映像に写っている期間、すなわち、追跡対象とした人物が映像に現れてからその人物が映像からいなくなるまでの期間を、該当するカメラ１の映像表示期間として監視者が指定することができる。この映像表示期間の指定は、人物検索画面の映像表示期間指定部４６で行われる。
【０１５０】
人物検索画面の映像表示期間指定部４６では、枠６５内に映像表示期間を表すバー６６が表示されており、このバー６６で映像表示期間を調整することができる。映像表示期間は開始時刻および終了時刻により規定され、バー６６の左端および右端の位置がそれぞれ映像表示期間の開始時刻および終了時刻となる。
【０１５１】
映像表示期間の開始時刻を調整するには、開始時刻を表すバー６６の左端にポインタを合わせてドラッグ操作を行う。映像表示期間の終了時刻を調整するには、終了時刻を表すバー６６の右端にポインタを合わせてドラッグ操作を行う。なお、バー６６の左端または右端にポインタを合わせると、ポインタが両矢印形状のトリムポインタに変化する。このとき、監視者は、映像表示部４３に表示された映像を見ながら、追跡対象とした人物が映像に最初に現れた時刻またはその近傍の適切な時刻を、映像表示期間の開始時刻として指定すればよい。また、追跡対象とした人物が映像からいなくなる直前の時刻またはその近傍の適切な時刻を、映像表示期間の終了時刻として指定すればよい。
【０１５２】
また、開始時刻および終了時刻の映像を選択することでも、映像表示期間の開始時刻および終了時刻を指定することができる。すなわち、再生操作部４４や表示時刻調整部４５を操作して、該当する時刻（開始時刻または終了時刻）の映像を映像表示部４３に表示させる。そして、映像表示部４３の映像を選択する操作を行う。具体的には、映像表示部４３の映像にポインタを合わせて左クリック操作を行う。これにより、映像表示部４３に表示されている映像の撮影時刻が開始時刻または終了時刻に指定される。
【０１５３】
このようにして映像表示期間の開始時刻および終了時刻を指定して、設定完了ボタン４９を操作すると、タイムライン画面（図１１参照）に遷移する。
【０１５４】
次に、図７に示した人物検索画面で映像表示期間を指定したときのタイムライン画面について説明する。図１１は、人物検索画面で映像表示期間を指定したときのタイムライン画面を示す説明図である。
【０１５５】
タイムライン画面では、通常、カメラ間追尾情報に基づいてカメラ１ごとの確認映像が撮影時刻順に並べて表示されるが、人物検索画面において、人物枠６１の選択により追跡対象となる人物を指定する操作に代えて、映像表示期間を指定した場合、追跡対象となる人物のカメラ内追尾情報がないため、カメラ間追尾情報のリンクスコアで、隣接するカメラの映像で追尾された人物の中から追跡対象とした人物を特定することができない。このため、人物検索画面で映像表示期間を指定したときのタイムライン画面では、映像表示期間を指定したカメラ１の確認映像が１つだけ表示され、前後のカメラ１の映像表示枠８２はブランク状態（映像が表示されない状態）となる。そこで、隣接する前後のカメラ１で追跡対象となる人物を監視者が手動で選択する操作を行う。
【０１５６】
この場合、前後のカメラ１を選択した上で「人物手動検索」を選択する操作を行う。具体的には、ブランク状態の映像表示枠８２上にポインタを合わせて右クリックを行うことで表示されるメニューで「人物手動検索」を選択する。すると、図７に示した人物検索画面が表示される。
【０１５７】
このとき、最初に映像表示期間を指定したカメラ１より前のカメラ１を選択した場合には、人物検索画面に、指定した映像表示期間の直前の期間で、隣接するカメラ１の映像が表示される。最初に映像表示期間を指定したカメラ１より後のカメラ１を選択した場合には、人物検索画面に、指定した映像表示期間の直後の期間で、隣接するカメラ１の映像が表示される。そして、この人物検索画面に、追跡対象とした人物に人物枠６１が表示されていれば、その人物枠６１を選択して追跡対象とする人物を指定すればよい。
【０１５８】
このように人物枠６１を選択して追跡対象とする人物を指定して設定完了ボタン４９を操作すると、タイムライン画面に遷移する。ここで、カメラ間追尾により、追跡対象とした人物と同一人物である可能性が最も高い人物がカメラ１ごとに順次選択され、前のカメラ１の映像で追尾ができている場合には、タイムライン画面では、それ以前のカメラ１の確認映像が表示され、また、後のカメラ１で追尾ができている場合には、タイムライン画面では、それ以後のカメラ１の確認映像が表示される。
【０１５９】
また、最初に映像表示期間を指定したカメラ１の前後のカメラ１で、映像に追跡対象とした人物が写っている場合でも、その人物に人物枠６１が表示されていない場合には、人物枠６１の選択により追跡対象とする人物を指定することができない。この場合、再度、そのカメラ１に関して映像表示期間を指定すればよい。そして、隣接するカメラ１に関する人物検索画面を表示させて、人物枠６１の選択による追跡対象とする人物の指定、または映像表示期間の指定を行い、人物枠６１の選択による追跡対象とする人物の指定を行うことができた場合には、そのカメラ１より前または後のカメラ１の確認映像がタイムライン画面に表示される。
【０１６０】
このように、本実施形態では、注目する日時およびカメラ１の映像で、人物枠６１の選択による追跡対象とする人物の指定を行うことができなかった場合でも、そのカメラ１に関する映像表示期間を指定することにより、そのカメラ１がタイムライン画面の起点となって、隣接するカメラ１の映像が決定され、時系列的に連続するカメラ１ごとの映像をタイムライン画面に表示させることができる。これにより、各カメラ１の映像を順に確認しながら追跡対象とする人物の指定を行うのに比較して、ユーザの作業負担を軽減することができる。
【０１６１】
次に、タイムライン画面において確認映像が適切に再生されない場合について説明する。
【０１６２】
タイムライン画面では、カメラ内追尾で取得した追尾期間の映像が再生される。このとき、追跡対象とした人物を対象としたカメラ内追尾が、追跡対象とした人物が映像に現れてからその人物が映像からいなくなるまでの出現期間の全体に渡って成功していないと、カメラ内追尾で取得した追尾期間が不完全となり、タイムライン画面の確認映像に過不足が発生する。すなわち、追跡対象とした人物がいない映像が表示され、また、追跡対象とした人物が写る映像が途中で終了し、また、追跡対象とした人物が写る映像が途中から開始され、また、追跡対象とした人物が写る映像が連続していない状態で再生されるという不具合が発生する。
【０１６３】
そこで、本実施形態では、カメラ内追尾情報に誤りがあり、確認映像が適切に再生されない、すなわち、追跡対象とした人物が映像に現れてからその人物が映像からいなくなるまでの出現期間の全体に渡って再生されない場合に、図４に示した追尾結果編集画面を表示させて、この追尾結果編集画面で映像表示期間を適切な範囲、すなわち、出現期間に概ね一致する範囲に調整する編集操作を行うことができる。
【０１６４】
次に、図４に示した追尾結果編集画面について説明する。図１２は、モニタ７に表示される追尾結果編集画面を示す説明図である。
【０１６５】
図８に示した確認映像表示状態のタイムライン画面において、映像表示期間の編集を行いたいカメラ１の確認映像を選択して「追尾結果編集」を選択する、具体的には、確認映像上で右クリックを行うことで表示されるメニューで「追尾結果編集」を選択すると、図１２に示す追尾結果編集画面がポップアップ表示される。
【０１６６】
この追尾結果編集画面は、タイムライン画面に表示される確認映像に過不足がある場合に、確認映像の映像表示期間が適切な期間となるように監視者が編集操作を行うものであり、この追尾結果編集画面には、映像表示部９１と、初期映像表示期間表示部９２と、表示時刻調整部４５と、映像表示期間指定部９３と、再生操作部４４と、調整範囲指定部４７と、戻るボタン９５と、キャンセルボタン９６と、確定ボタン９７と、が設けられている。
【０１６７】
映像表示部９１には、タイムライン画面で選択されたカメラ１の映像が表示される。また、映像表示部９１の近傍には、映像を撮影したカメラ１の名称や設置場所と、日時すなわち映像の撮影時刻と、が表示される。
【０１６８】
初期映像表示期間表示部９２は、未編集の映像表示期間、すなわち、追跡対象とした人物のカメラ内追尾で取得した追尾期間を表示するものである。この初期映像表示期間表示部９２は、いわゆるデュレーションバーであり、枠６５内に初期の映像表示期間（追尾期間）を表すバー６６が表示されている。このバー６６では、左端および右端の位置がそれぞれ映像表示期間の開始時刻および終了時刻となる。バー６６は赤色で表示される。
【０１６９】
表示時刻調整部４５は、映像表示部９１に表示される映像の表示時刻を調整するものである。この表示時刻調整部４５は、いわゆるシークバーであり、スライダ６３がバー６４に沿って移動可能に設けられている。マウスなどの入力デバイス６を用いてスライダ６３をずらす操作（ドラッグ）を行うと、そのスライダ６３が指し示す時刻の映像が映像表示部９１に表示される。
【０１７０】
映像表示期間指定部９３は、監視者の編集操作により入力された映像表示期間を表示するものである。この映像表示期間指定部９３は、初期映像表示期間表示部９２と同様に、いわゆるデュレーションバーであり、枠６５内に映像表示期間を表すバー（可動操作部）６６が表示されている。バー６６では、左端および右端の位置がそれぞれ映像表示期間の開始時刻および終了時刻となる。編集可能状態では、バー６６の左端および右端の位置をドラッグ操作により移動させることができる。
【０１７１】
映像表示期間指定部９３のバー６６は、状態に応じて表示色が変化する。編集前の状態では、初期映像表示期間表示部９２と同様に、バー６６が赤色で表示される。編集可能状態とするとバー６６が黄色に変化する。また、映像表示部９１に表示された人物枠６１を選択してその人物枠６１の追尾期間を映像表示期間に追加した場合には、その追加部分が青色で表示される。
【０１７２】
再生操作部４４は、映像表示部９１に表示される映像の再生に関する操作を行うものである。この再生操作部４４には、再生、逆再生、停止、早送り、および巻き戻しの各ボタン６２が設けられており、これらのボタン６２を操作することで、映像を効率的に閲覧することができ、追跡対象とした人物が映像に写っている期間を効率よく把握することができる。
【０１７３】
調整範囲指定部４７は、映像表示部９１に表示される映像の表示時刻の調整範囲（有効再生範囲）、すなわち、表示時刻調整部４５のバー６４で規定されるスライダ６３の移動範囲を指定するものである。この調整範囲指定部４７では、表示時刻の調整範囲をプルダウンメニューにより所定の時間（例えば、５分、１５分など）の中から選択することができる。
【０１７４】
戻るボタン９５を操作すると、この追尾結果編集画面において編集を行なった最後の操作入力を破棄し、１つ前の状態に戻る。キャンセルボタン９６を操作すると、編集操作で入力された映像表示期間に関する編集内容を全て破棄して、タイムライン画面に戻る。確定ボタン９７を操作すると、編集操作で入力された映像表示期間を確定させることができる。
【０１７５】
以下に、この追尾結果編集画面において編集操作により映像表示期間を適切な範囲に調整する例について説明する。
【０１７６】
まず、初期の映像表示期間（追尾期間）の不要部分を削除する場合について説明する。図１３は、映像の遷移状況の一例を示す説明図である。図１４は、追尾結果編集画面における編集操作時の状況を示す説明図である。
【０１７７】
図１３に示す例では、追跡対象とした人物が映像に現れると追跡対象として適切に追尾され、時刻Ｔ１，Ｔ２の映像では、追跡対象とした人物に赤色の人物枠が表示されている。そして、追尾が失敗して追尾人物の入れ替わりが発生し、以降、追跡対象でない人物を追跡対象として追尾すると共に、追跡対象とした人物を別人として追尾され、時刻Ｔ３の映像では、追跡対象とした人物に追跡対象でないことを示す緑色の人物枠が表示され、追跡対象でない人物に追跡対象であることを示す赤色の人物枠が表示されている。その後、追跡対象とした人物が映像からいなくなるが、誤って追跡対象とした人物は映像に残り、時刻Ｔ４の映像では、追跡対象でない人物のみが現れている。
【０１７８】
このような場合、カメラ内追尾で取得した追尾期間（初期の映像表示期間）は、別人を追尾していた不要な期間が含まれたものとなり、タイムライン画面では、映像の再生時に、追跡対象とした人物が映像からいなくなった後の映像が表示される。
【０１７９】
また、追跡対象でない人物を追跡対象として追尾した後に、追尾人物の入れ替わりが発生して、以降、追跡対象とした人物が適切に追尾されていた場合にも、カメラ内追尾で取得した追尾期間は、別人を追尾していた不要な期間が含まれるものとなり、タイムライン画面では、映像の再生時に、追跡対象とした人物が写っていない不要な映像が最初に表示される。
【０１８０】
このように、カメラ内追尾で取得した追尾期間の最初や最後に不要部分がある場合には、本実施形態では、図１４に示すように、追尾結果編集画面において、映像表示期間の不要部分を削除する編集操作を行うことができる。
【０１８１】
この編集操作では、映像表示期間の開始時刻および終了時刻、すなわち映像表示期間指定部９３に表示されるバー６６の左端および右端の位置を調整する。
【０１８２】
具体的には、まず、バー６６上で右クリックを行うことで表示されるポップアップメニューで「部分編集」を選択してバー６６を編集可能状態にする。このとき、バー６６は全体的に編集可能状態を表す黄色に変化する。
【０１８３】
次に、映像表示期間の開始時刻を調整する場合には、開始時刻を表すバー６６の左端にポインタを合わせてドラッグ操作を行う。映像表示期間の終了時刻を調整するには、終了時刻を表すバー６６の右端にポインタを合わせてドラッグ操作を行う。なお、バー６６の左端または右端にポインタを合わせると、ポインタが両矢印形状のトリムポインタ９８に変化する。
【０１８４】
そして、バー６６上にポインタを合わせて左クリック操作を行う。これにより、映像表示期間が、追跡対象とした人物が映像に写らない不要部分を削除した状態で確定される。
【０１８５】
なお、ここではドラッグ操作で映像表示期間の不要部分を削除する例を示したが、ドラッグ操作で映像表示期間の不足部分を追加することも可能である。
【０１８６】
次に、追跡対象とした人物が別人として追尾されていた追尾期間を映像表示期間に追加する場合について説明する。図１５は、映像の遷移状況の一例を示す説明図である。図１６は、追尾結果編集画面における編集操作時の状況を示す説明図である。
【０１８７】
図１５に示す例では、追跡対象とした人物が映像に現れると追跡対象として適切に追尾され、時刻Ｔ１，Ｔ２の映像では、追跡対象とした人物に赤色の人物枠が表示されている。その後、追尾が失敗して追尾人物の入れ替わりが発生し、以降、追跡対象でない人物が追跡対象として追尾されると共に、追跡対象とした人物が別人として追尾され、時刻Ｔ３，Ｔ４の映像では、追跡対象とした人物に追跡対象でないことを示す緑色の人物枠が表示され、追跡対象ではない人物に追跡対象であることを示す赤色の人物枠が表示されている。
【０１８８】
このような場合、カメラ内追尾で取得した追尾期間は、未来側に不足部分がある不完全なものとなり、タイムライン画面では、映像の再生時に、追跡対象とした人物が写る映像が途中で途切れた状態となる。
【０１８９】
また、追跡対象でない人物を追跡対象として追尾すると共に、追跡対象とした人物を別人として追尾した後に、追尾が失敗して追尾人物の入れ替わりが発生し、以降、追跡対象とした人物を追跡対象として適切に追尾していた場合、カメラ内追尾で取得した追尾期間（初期の映像表示期間）は、過去側に不足部分がある不完全なものとなり、タイムライン画面では、映像の再生時に、追跡対象とした人物が写る映像が途中から表示される。
【０１９０】
このように、カメラ内追尾で取得した追尾期間の過去側や未来側に不足部分があり、追跡対象とした人物が別人として追尾されていた場合、本実施形態では、図１６に示すように、追尾結果編集画面において、追跡対象とした人物が別人として追尾されていた追尾期間を映像表示期間に追加する編集操作を行うことができる。
【０１９１】
この編集操作では、追跡対象とした人物が別人として追尾されていた期間の映像において、追跡対象となる人物に表示されている人物枠６１を選択する。このとき、追跡対象とした人物は別人として追尾されているため、追跡対象とした人物には緑色の人物枠６１が表示されるため、その緑色の人物枠６１を選択する。具体的には、まず、人物枠６１上にポインタを合わせて左クリック操作を行う。
【０１９２】
すると、映像表示部９１において、追跡対象となる人物に表示されていた緑色の人物枠６１が選択状態を表す青色に変化する。また、映像表示期間指定部９３のバー６６に、選択された人物枠６１の追尾期間が追加される。このとき、追加部分が青色で表示される。
【０１９３】
このように追跡対象となる人物に表示されていた緑色の人物枠６１を選択する操作を行なうことで、人物枠６１の色が青色に変化し、映像表示期間を確定させることができる。これにより、映像表示期間が、追跡対象とした人物が別人として追尾されていた期間を含む状態で確定される。
【０１９４】
ここで、追跡対象となる人物が複数の別人として追尾される場合がある。この場合、追跡対象となる人物に表示されている緑色の人物枠を順次選択すればよく、選択された複数の人物枠の追尾期間が映像表示期間指定部９３のバー６６に追加される。
【０１９５】
ところで、追跡対象となる人物を途中から別人として追尾し、その後、さらに追尾人物の入れ替わりが発生して、追跡対象ではない人物を同一人物として追尾する場合がある。この場合、映像表示期間に追加した追尾期間に追跡対象ではない別人の追尾期間が含まれ、この別人の追尾期間は不要であるため、この不要部分を削除する必要がある。
【０１９６】
この場合、映像表示期間指定部９３のバー６６内の青色で表示された追加部分を選択して「部分編集」を選択する。具体的には、青色で表示された追加部分上で右クリックを行うことで表示されるポップアップメニューで「部分編集」を選択する。すると、バー６６の追加部分が編集可能状態を表す黄色に変化し、図１４に示した例と同様に、ドラッグ操作により表示期間の開始時刻および終了時刻を調整する。
【０１９７】
ところで、このように追跡対象とした人物が別人として追尾されていたときの人物枠を選択して、その人物枠の追尾期間を映像表示期間に追加すると、その人物枠の人物を追跡対象とした人物に変更するように、追跡対象となる人物のカメラ内追尾情報を修正する。そして、隣接するカメラ１との間のカメラ間追尾をやり直して、カメラ間追尾情報も修正する。このとき、図１６に示した例のように、未来側で人物枠が選択されると、未来側のカメラ１でカメラ間追尾をやり直し、過去側で人物枠が選択されると、過去側のカメラ１でカメラ間追尾をやり直す。
【０１９８】
次に、映像表示期間の不足部分を追加する場合について説明する。図１７は、映像の遷移状況の一例を示す説明図である。図１８は、追尾結果編集画面における編集操作時の状況を示す説明図である。
【０１９９】
図１７に示す例では、カメラ内追尾において追跡対象とした人物の人物検知が最初から失敗して、時刻Ｔ１，Ｔ２の映像では、追跡対象とした人物に人物枠が表示されていない。そして、追跡対象とした人物のカメラ内追尾が途中から開始され、以降、追跡対象とした人物が映像からいなくなるまで、追跡対象とした人物が適切に追尾され、時刻Ｔ３，Ｔ４の映像では、追跡対象とした人物に赤色の人物枠が表示されている。
【０２００】
このような場合、カメラ内追尾で取得した追尾期間（初期の映像表示期間）は、過去側に不足部分がある不完全なものとなり、タイムライン画面では、映像の再生時に、追跡対象とした人物が写る映像が途中から表示される。
【０２０１】
また、追跡対象とした人物のカメラ内追尾が途中で失敗して、追跡対象とした人物のカメラ内追尾が途中で終了した場合、カメラ内追尾で取得した追尾期間（初期の映像表示期間）は、未来側に不足部分がある不完全なものとなり、タイムライン画面では、映像の再生時に、追跡対象とした人物が写る映像が途中で途切れた状態となる。
【０２０２】
このように、カメラ内追尾で取得した追尾期間の過去側や未来側に不足部分がある場合、本実施形態では、図１８に示すように、追尾結果編集画面において、映像表示期間の不足部分を追加する編集操作を行うことができる。
【０２０３】
この編集操作では、追尾期間の過去側に不足部分がある場合には、追跡対象とした人物が映像に最初に現れた時刻またはその近傍の適切な時刻を、映像表示期間の開始時刻として指定する。また、追尾期間の未来側に不足部分がある場合には、追跡対象とした人物が映像からいなくなる直前の時刻またはその近傍の適切な時刻を、映像表示期間の終了時刻として指定する。
【０２０４】
具体的には、まず、再生操作部４４や表示時刻調整部４５を操作して、該当する時刻（開始時刻または終了時刻）の映像を映像表示部９１に表示させる。そして、映像表示部９１の映像を選択する操作を行う。具体的には、映像表示部９１の映像上にポインタを合わせて左クリック操作を行う。
【０２０５】
これにより、開始時刻または終了時刻が入力され、映像表示期間指定部９３に、映像表示期間の不足部分が追加される。すなわち、追尾期間の過去側に不足部分がある場合には、開始時刻から初期の映像表示期間（追尾期間）までの期間が映像表示期間に追加される。また、追尾期間の未来側に不足部分がある場合には、初期の映像表示期間から終了時刻までの期間が映像表示期間に追加される。このとき、映像表示期間の追加部分は黄色で表示される。
【０２０６】
また、映像表示期間指定部９３で開始時刻や終了時刻を入力することもできる。すなわち、映像表示期間指定部９３の枠６５内で該当する時刻を指定する操作を行う。具体的には、枠６５内の該当する時刻の部分にポインタを合わせて左クリック操作を行う。これにより、開始時刻や終了時刻が入力され、映像表示期間指定部９３の映像表示期間に不足部分が追加される。
【０２０７】
なお、映像表示期間の範囲は、映像表示部９１の映像上にポインタを合わせて左クリック操作した時点で確定しており、再度、映像表示期間の範囲を調整する場合には、再度、追加された黄色のバー６６上で、右クリックにて部分編集を選択することで、編集可能状態とすることができる。
【０２０８】
このように、映像表示部９１に表示させた開始時刻や終了時刻の映像を選択する操作や、映像表示期間指定部９３で開始時刻や終了時刻を指定する操作により、開始時刻や終了時刻を入力することができるが、時刻の微調整などの目的で必要であれば、さらに、図１４に示した例と同様に、ドラッグ操作により映像表示期間の開始時刻および終了時刻を調整するようにしてもよい。
【０２０９】
以上のように、本実施形態では、前記のように、ドラッグ操作による映像表示期間の開始時刻および終了時刻の調整（不要部分の削除や不足部分の追加）や、人物枠の選択による追尾期間の映像表示期間への追加や、映像の選択による映像表示期間の開始時刻および終了時刻の指定などの各種の編集操作を行うことができ、これらの編集操作は、前記に例示した方法に限定されるものではなく、映像の状況に応じて各種の編集操作を適宜に組み合わせて行うこともできる。
【０２１０】
また、映像表示期間指定部９３においてバー６６で表される映像表示期間に関する編集内容は、必要に応じて、全て破棄することができる。
【０２１１】
具体的には、映像表示期間指定部９３のバー６６上で右クリックを行うことで表示されるポップアップメニューで「全削除」を選択する。また、映像表示部９１で人物枠を選択してその追尾期間を映像表示期間に追加した場合には、映像表示部９１に表示された人物枠上で右クリックを行うことで表示されるポップアップメニューで「全削除」を選択する。
【０２１２】
すなわち、この「全削除」を選択された場合には、追加にかかる映像表示期間の編集内容を全て破棄する全削除（部分全削除）が実行される。そして、映像表示期間に関する編集内容を全て破棄する場合には、キャンセルボタンを操作することにより、タイムライン画面に戻り、映像表示期間に関する編集をやり直すことができる。
【０２１３】
このように、追尾結果編集画面において映像表示期間を適切な期間に修正する編集操作を行うことができ、この編集操作を行って確定ボタン９７を操作すると、確認映像表示状態のタイムライン画面（追跡対象確認画面、図８参照）に戻る。このタイムライン画面では、追尾結果編集画面における編集結果が反映された状態で映像が適切に再生される。すなわち、追跡対象とした人物が映像に現れてからその人物が映像からいなくなるまでの出現期間の全体に渡って映像が再生される。
【０２１４】
以上のように、本出願において開示する技術の例示として、実施形態を説明した。しかしながら、本開示における技術は、これに限定されず、変更、置き換え、付加、省略などを行った実施形態にも適用できる。また、上記の実施形態で説明した各構成要素を組み合わせて、新たな実施形態とすることも可能である。
【０２１５】
例えば、前記の実施形態では、スーパーマーケットなどの小売店舗の例について説明したが、ファミリーレストランなどの飲食店など、小売店舗以外の業務形態の店舗に適用することも可能であり、さらに、事業所などの店舗以外の施設にも適用することができる。
【０２１６】
また、前記の実施形態では、移動体として人物を追跡する例について説明したが、人物以外の移動体、例えば自動車や自転車などの車両を追跡する構成も可能である。
【０２１７】
また、前記の実施形態では、追跡対象確認画面および候補選択画面として、カメラ１ごとの映像を撮影時刻順に並べて表示したタイムライン画面を表示するようにしたが、このタイムライン画面の代わりに、店舗内のレイアウトを示す地図画像上に、カメラ１ごとの映像をそれぞれ表示する複数の映像表示枠を、カメラ１の撮影領域に概ね対応する位置に配置したマップ画面を表示するようにしてもよい。また、追跡対象検索画面もマップ画面で表示することも可能である。
【０２１８】
また、前記の実施形態では、人物が追尾されていることを表す追尾マークとして矩形の人物枠を表示するようにしたが、追尾マークはこのような形態のものに限定されるものではなく、種々の形態のものを採用することができる。
【０２１９】
また、前記の実施形態では、追跡対象とした人物に関する追尾情報に基づいて確認映像提示部３９により提示された確認映像に対応する人物を、候補映像提示部４０により提示された候補映像に対応する人物や、監視者が映像上で指定した人物に置き換えるように追跡情報の修正が、カメラ内追尾情報修正部２６やカメラ間追尾情報修正部３８で行われるが、この追跡情報の修正には、誤った追跡情報を単に削除することも含まれる。すなわち、確認映像に誤りがあるものの、それに代わる適切な映像が見つからない場合には、誤りがある確認映像に対応する人物を追跡情報から削除する。
【０２２０】
また、前記の実施形態では、図１および図３に示したように、カメラ内追尾処理をカメラ内追尾処理装置４に行わせ、カメラ間追尾処理および追跡支援処理をＰＣ３に行わせる例について説明したが、カメラ内追尾処理もＰＣ３に行わせる構成としてもよい。また、カメラ内追尾処理部をカメラ１に設ける構成も可能である。また、カメラ間追尾処理部２２の全部または一部をＰＣ３とは別の追尾処理装置で構成することも可能である。
【０２２１】
また、前記の実施形態では、図２に示したように、カメラ１を、視野角の限定される箱型カメラとしたが、これに限らず、広範囲の撮影が可能な全方位カメラを用いることもできる。
【０２２２】
また、本実施形態では、カメラ内追尾処理および追跡支援処理を、店舗に設けられた装置に行わせるようにしたが、これらの必要な処理を、図１に示したように、本部に設けられたＰＣ１１や、クラウドコンピューティングシステムを構成するクラウドコンピュータ１２に行わせるようにしてもよい。また、必要な処理を複数の情報処理装置で分担し、ＩＰネットワークやＬＡＮなどの通信媒体、またはハードディスクやメモリカードなどの記憶媒体を介して、複数の情報処理装置の間で情報を受け渡すようにしてもよい。この場合、必要な処理を分担する複数の情報処理装置で追跡支援システムが構成される。
【０２２３】
特に、クラウドコンピュータ１２を含むシステム構成では、店舗や本部に設けられたＰＣ３，１１の他に、クラウドコンピュータ１２にネットワーク接続されたスマートフォン１３やタブレット端末１４などの携帯型端末で、必要な情報を表示させることができるようにするとよく、これにより店舗や本部の他に外出先などの任意の場所で必要な情報を確認することができる。
【０２２４】
また、前記の実施形態では、カメラ１の映像を蓄積するレコーダ２を店舗に設置するようにしたが、追跡支援に必要な処理を、本部に設置されたＰＣ１１やクラウドコンピュータ１２に行わせる場合には、カメラ１の映像を、本部や、クラウドコンピューティングシステムの運営施設などに送信して、そこに設置された装置にカメラ１の映像を蓄積するようにしてもよい。
【産業上の利用可能性】
【０２２５】
本発明に係る追跡支援装置、追跡支援システムおよび追跡支援方法は、カメラ内追尾がいかなる結果になっても、監視者の負担を軽減する支援処理を適切に行って、追跡中の人物を見失うことなく円滑に追跡作業を進めることができる効果を有し、映像蓄積手段に蓄積された複数のカメラごとの映像を表示装置に表示させて、追跡対象となる移動体を追跡する監視者の作業を支援する追跡支援装置、追跡支援システムおよび追跡支援方法などとして有用である。
【符号の説明】
【０２２６】
１  カメラ
２  レコーダ（映像蓄積手段）
３  ＰＣ（追跡支援装置）
４  カメラ内追尾処理装置
６  入力デバイス
７  モニタ
１１  ＰＣ
１２  クラウドコンピュータ
１３  スマートフォン
１４  タブレット端末
２１  追尾情報蓄積部
２２  カメラ間追尾処理部
２３  入力情報取得部
２４  追跡対象処理部
２５  映像提示部
２６  カメラ内追尾情報修正部
２７  映像再生部
２８  画面生成部
３１  検索条件設定部
３２  追跡対象設定部
３３  映像表示期間設定部
３４  追跡対象追加設定部
３５  リンクスコア算出部
３６  初期追尾情報生成部
３７  候補選択部
３８  カメラ間追尾情報修正部
３９  確認映像提示部
４０  候補映像提示部
４６  映像表示期間指定部
９３  映像表示期間指定部
６６  バー（可動操作部）
【図１】
0006284086.tif 000002
【図２】
0006284086.tif 000003
【図３】
0006284086.tif 000004
【図４】
0006284086.tif 000005
【図５】
0006284086.tif 000006
【図６】
0006284086.tif 000007
【図７】
0006284086.tif 000008
【図８】
0006284086.tif 000009
【図９】
0006284086.tif 000010
【図１０】
0006284086.tif 000011
【図１１】
0006284086.tif 000012
【図１２】
0006284086.tif 000013
【図１３】
0006284086.tif 000014
【図１４】
0006284086.tif 000015
【図１５】
0006284086.tif 000016
【図１６】
0006284086.tif 000017
【図１７】
0006284086.tif 000018
【図１８】
0006284086.tif 000019