(57)【要約】【課題】人の探索に非常に有用となる照会システムの実現。【解決手段】例えば警察官等がパトロール中などに撮像装置１を装着する。撮像装置１は例えば一定時間毎などとして撮像を行っていく。そして撮像した画像データに人の顔が映っている場合には、その顔画像から顔特徴データを生成し、顔特徴データを含む照会情報を照会装置５０に送信する。照会装置側では、照会情報を受信した場合、照会情報に含まれている顔特徴データを用いて顔データベースを検索する。そして検索された人物情報を含む照会結果情報を生成し、撮像装置１に送信する。撮像装置１では、照会結果情報を受信することで、それを所持する警察官等に照会結果の内容、例えば人物情報を提示する。【選択図】図１
2007219713.tif 000002
【特許請求の範囲】
【請求項１】
携帯型の撮像装置と、上記撮像装置と相互通信可能な照会装置とを有する照会システムであって、
上記撮像装置は、
画像撮像を行う撮像手段と、
上記照会装置との間で通信を行う通信手段と、
上記撮像手段で撮像された画像データ内における顔画像を抽出し、抽出した顔画像から顔特徴データを生成する顔特徴データ生成手段と、
上記顔特徴データを含む照会情報を生成し、該照会情報を上記通信手段により上記照会装置に送信させる送信情報生成手段と、
上記照会装置から送信されてくる照会結果情報を上記通信手段により受信することに応じて、照会結果情報に基づく提示処理を行う提示処理手段と、
を備え、
上記照会装置は、
上記撮像装置との間で通信を行う通信手段と、
人物情報を顔特徴データとともに登録した顔データベースと、
上記撮像装置から送信されてくる照会情報を上記通信手段により受信することに応じて、上記照会情報に含まれている上記顔特徴データを用いて上記顔データベースの検索を行う照会処理手段と、
上記照会処理手段によって上記顔データベースから検索された人物情報を含む照会結果情報を生成し、該照会結果情報を上記通信手段により上記撮像装置に送信させる送信情報生成手段と、
を備えることを特徴とする照会システム。
【請求項２】
携帯型に形成され、照会装置との間で相互通信可能とされる撮像装置であって、
画像撮像を行う撮像手段と、
上記照会装置との間で通信を行う通信手段と、
上記撮像手段で撮像された画像データ内における顔画像を抽出し、抽出した顔画像から顔特徴データを生成する顔特徴データ生成手段と、
上記顔特徴データを含む照会情報を生成し、該照会情報を上記通信手段により上記照会装置に送信させる送信情報生成手段と、
上記照会装置から送信されてくる照会結果情報を上記通信手段により受信することに応じて、照会結果情報に基づく提示処理を行う提示処理手段と、
を備えることを特徴とする撮像装置。
【請求項３】
上記顔特徴データは、顔の構成要素の相対位置情報であることを特徴とする請求項２に記載の撮像装置。
【請求項４】
上記送信情報生成手段は、上記顔特徴データ生成手段が顔画像を抽出した画像データに付与される画像識別情報を含む上記照会情報を生成することを特徴とする請求項２に記載の撮像装置。
【請求項５】
上記送信情報生成手段は、上記顔特徴データ生成手段が画像データから抽出した顔画像に付与される顔識別情報を、顔特徴データに対応させた状態で含むようにした上記照会情報を生成することを特徴とする請求項２に記載の撮像装置。
【請求項６】
位置情報を検出する位置検出手段を更に備え、
上記送信情報生成手段は、上記位置検出手段で検出された、上記画像データの撮像位置としての位置情報を含む上記照会情報を生成することを特徴とする請求項２に記載の撮像装置。
【請求項７】
人物情報を入力する人物情報入力手段を更に備え、
上記送信情報生成手段は、上記顔特徴データ生成手段で生成された上記顔特徴データと、上記人物情報入力手段で入力された人物情報とを含む登録情報を生成し、該登録情報を上記通信手段により上記照会装置に送信させることを特徴とする請求項２に記載の撮像装置。
【請求項８】
記録媒体に対して記録再生を行う記録再生手段を更に備え、
上記記録再生手段は、上記顔特徴データ生成手段が顔画像を抽出した画像データを上記記録媒体に記録することを特徴とする請求項２に記載の撮像装置。
【請求項９】
上記記録再生手段は、上記顔特徴データ生成手段が顔画像を抽出した画像データを、その画像データに付与される画像識別情報とともに、上記記録媒体に記録することを特徴とする請求項８に記載の撮像装置。
【請求項１０】
上記記録再生手段は、上記顔特徴データ生成手段が顔画像を抽出した画像データを、その画像データ内における顔画像に付与される顔識別情報と顔画像の画像データ内の位置を対応させた顔識別情報対応情報とともに、上記記録媒体に記録することを特徴とする請求項９に記載の撮像装置。
【請求項１１】
上記提示処理手段は、上記照会結果情報に含まれている人物情報の提示処理を行うことを特徴とする請求項２に記載の撮像装置。
【請求項１２】
上記提示処理手段は、上記照会結果情報に含まれている画像識別情報に基づいて上記記録再生手段により上記記録媒体から読み出された画像データの提示処理を行うことを特徴とする請求項９に記載の撮像装置。
【請求項１３】
上記提示処理手段は、上記照会結果情報に含まれている顔識別情報と上記顔識別情報対応情報に基づいて、上記記録再生手段により上記記録媒体から読み出された画像データ内で対象の顔画像を明示した状態で、上記画像データの提示処理を行うことを特徴とする請求項１０に記載の撮像装置。
【請求項１４】
上記提示処理手段は、上記照会結果情報に含まれている位置情報の提示処理を行うことを特徴とする請求項２に記載の撮像装置。
【請求項１５】
位置情報を検出する位置検出手段を更に備え、
上記提示処理手段は、上記位置検出手段で検出された現在の位置情報から、上記照会結果情報に含まれている位置情報で示される位置を示す相対位置情報を生成し、該相対位置情報の提示処理を行うことを特徴とする請求項２に記載の撮像装置。
【請求項１６】
上記通信手段が上記照会結果情報を受信したことを告知する受信告知手段を更に備え、
上記受信告知手段は、上記照会結果情報に含まれる登録種別情報に応じて、告知態様を選択して告知を行うことを特徴とする請求項２に記載の撮像装置。
【請求項１７】
撮像装置との間で相互通信可能とされる照会装置であって、
上記撮像装置との間で通信を行う通信手段と、
人物情報を顔特徴データとともに登録した顔データベースと、
上記撮像装置から送信されてくる照会情報を上記通信手段により受信することに応じて、上記照会情報に含まれている上記顔特徴データを用いて上記顔データベースの検索を行う照会処理手段と、
上記照会処理手段によって上記顔データベースから検索された人物情報を含む照会結果情報を生成し、該照会結果情報を上記通信手段により上記撮像装置に送信させる送信情報生成手段と、
を備えることを特徴とする照会装置。
【請求項１８】
上記顔特徴データは、顔の構成要素の相対位置情報であることを特徴とする請求項１７に記載の照会装置。
【請求項１９】
上記送信情報生成手段は、上記照会情報に含まれている画像識別情報を含む照会結果情報を生成することを特徴とする請求項１７に記載の照会装置。
【請求項２０】
上記送信情報生成手段は、受信した上記照会情報に含まれている顔識別情報に、上記照会処理手段が検索した上記人物情報を対応させた状態とする照会結果情報を生成することを特徴とする請求項１７に記載の照会装置。
【請求項２１】
地図情報を格納した地図データベースを更に備え、
上記送信情報生成手段は、受信した上記照会情報に含まれている位置情報を用いて上記地図データベースの検索を行い、検索結果に基づいて文字データ又は画像データとしての位置情報を生成し、該位置情報を含む照会結果情報を生成することを特徴とする請求項１７に記載の照会装置。
【請求項２２】
上記登録データベースには、上記人物情報及び顔特徴データとともに登録種別情報が記録されており、
上記送信情報生成手段は、上記登録種別情報を含む照会結果情報を生成することを特徴とする請求項１７に記載の照会装置。
【請求項２３】
上記通信手段により、上記顔特徴データと上記人物情報とを含む登録情報が受信されることに応じて、その登録情報に含まれる顔特徴データと人物情報を対応させて上記顔データベースに登録する登録処理手段を更に備えたことを特徴とする請求項１７に記載の照会装置。
【請求項２４】
携帯型に形成され、照会装置との間で相互通信可能とされる撮像装置の情報処理方法として、
画像撮像を行う撮像ステップと、
上記撮像ステップで撮像された画像データ内における顔画像を抽出し、抽出した顔画像から顔特徴データを生成する顔特徴データ生成ステップと、
上記顔特徴データを含む照会情報を生成し、該照会情報を上記照会装置に送信する照会情報送信ステップと、
上記照会装置から送信されてくる照会結果情報を受信することに応じて、照会結果情報に基づく提示処理を行う提示処理ステップと、
を備えることを特徴とする情報処理方法。
【請求項２５】
撮像装置との間で相互通信可能とされる照会装置の情報処理方法として、
上記撮像装置から送信されてくる照会情報を受信することに応じて、上記照会情報に含まれている上記顔特徴データを用いて、人物情報を顔特徴データとともに登録した顔データベースの検索を行う照会処理ステップと、
上記照会処理ステップによって上記顔データベースから検索された人物情報を含む照会結果情報を生成し、該照会結果情報を上記撮像装置に送信する照会結果情報送信ステップと、
を備えることを特徴とする情報処理方法。
【請求項２６】
携帯型に形成され、照会装置との間で相互通信可能とされる撮像装置の動作プログラムとして、
画像撮像を行う撮像ステップと、
上記撮像ステップで撮像された画像データ内における顔画像を抽出し、抽出した顔画像から顔特徴データを生成する顔特徴データ生成ステップと、
上記顔特徴データを含む照会情報を生成し、該照会情報を上記照会装置に送信する照会情報送信ステップと、
上記照会装置から送信されてくる照会結果情報を受信することに応じて、照会結果情報に基づく提示処理を行う提示処理ステップと、
を撮像装置に実行させるプログラム。
【請求項２７】
撮像装置との間で相互通信可能とされる照会装置の動作プログラムとして、
上記撮像装置から送信されてくる照会情報を受信することに応じて、上記照会情報に含まれている上記顔特徴データを用いて、人物情報を顔特徴データとともに登録した顔データベースの検索を行う照会処理ステップと、
上記照会処理ステップによって上記顔データベースから検索された人物情報を含む照会結果情報を生成し、該照会結果情報を上記撮像装置に送信する照会結果情報送信ステップと、
を照会装置に実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置と照会装置とが相互通信可能に構成される照会システム、及び撮像装置、照会装置に関する。また撮像装置、照会装置における情報処理方法とプログラムに関する。
【背景技術】
【０００２】
【特許文献１】特開２００３−２７４３５８号公報
【特許文献２】特開２００３−２７４３５９号公報
【特許文献３】特開２００３−２７４３６０号公報
【特許文献４】特開２００２−３１４９８４号公報
【０００３】
警察組織や警備会社、探偵会社などでは、人を捜すことや人に注意を向けることが重要な職務の一つとなっている。例えば指名手配者や行方不明者の探索や、不審者の判別などである。
【発明の開示】
【発明が解決しようとする課題】
【０００４】
例えば警察官等が警邏中に人を探すことを考えると、従来は次のような問題があった。
通常、警察官等は、行方不明者や指名手配者などの顔写真により、捜索しようとする顔を記憶したり、パトロール中に写真を持ち歩くなどする。
ところが顔の記憶には個人差があり、また記憶は曖昧なことが多い。また、写真を持ち歩くにしても、その数に限度がある。
特に警察官のパトロールは、特定の人捜しだけを目的とするものではなく地域の治安維持のための巡回ということもあり、必ずしも人捜しのみに集中しているわけではないことや、写真を持っていたとしても、そればかり注意しているわけにはいかない。
また人の風貌は、髪の長さやスタイル、眼鏡や帽子の使用有無などにより、かなり変化することもあるため、例えパトロール中に該当の人物に遭遇したとしても、警察官等が、その人物に気がつかないこともあり得る。
【０００５】
また、顔に記憶があったり、所持している写真に似ている人と遭遇したとしても、その判断は曖昧であって、確かに目的の人物であるかどうかを即座に判断できないことが多い。
【０００６】
ここで、或る人物について、行方不明者或いは指名手配者であるか否かを照会する手法として、カメラ装置を利用することが考えられる。例えば警察官等がパトロール中にカメラ装置を所持する。このカメラ装置はネットワーク通信機能を備え、警察署等の本部システムと通信可能とする。
そして警察官等は、パトロール中に人をカメラ装置で撮像し、その撮像画像データを本部システムに送信する。本部システム側では、送られてきた画像（顔写真）を、行方不明者や指名手配者として保持している写真等につきあわせて、該当する人物であるか否かを判断し、その結果を警察官等に伝えるようにする。
このようにすれば、パトロール中の警察官個人の記憶や判断能力のみに頼ることは無くなるため、該当者であるか否かの判断の正確性を高めることができる。
【０００７】
ところが、このようなシステムでも次のような問題が残されている。
まず通信機能を備えたカメラ装置のデータ処理能力や、使用する通信ネットワークの伝送能力、或いは混雑状況などにより、撮像した画像データを本部システムに送信することにかなり時間を要することとなったり、低画質な画像しか伝送できないといったことが生ずる。さらには良好な画像が伝送できずに、再度撮像して送り直すことが必要となる場合も想定される。
また本部システムでも、担当者が、伝送されてきた画像を写真等とつきあわせて目的の人物であるか否かを判断するため、時間がかかるとともに、必ずしも正確ではない。上記のように風貌の変化や画質によって判断が曖昧になることは、現場に居る警察官等の判断と同様である。
また伝送や判断に時間がかかることは、緊急性を要する場合には特に好ましくない。例えば逃走のおそれのある指名手配者の確認に時間がかかることは、非常に不都合である。
【０００８】
これらのことから、人の探索のための有効な手法やシステムは実現されていない。そこで本発明は、これらの問題点を解消でき、人の探索に非常に有用となる照会システムを提案する。
【課題を解決するための手段】
【０００９】
本発明の照会システムは、携帯型の撮像装置と、上記撮像装置と相互通信可能な照会装置とを有して構成される。
【００１０】
照会システムにおける構成要素となる上記撮像装置は、画像撮像を行う撮像手段と、上記照会装置との間で通信を行う通信手段と、上記撮像手段で撮像された画像データ内における顔画像を抽出し、抽出した顔画像から顔特徴データを生成する顔特徴データ生成手段と、上記顔特徴データを含む照会情報を生成し、該照会情報を上記通信手段により上記照会装置に送信させる送信情報生成手段と、上記照会装置から送信されてくる照会結果情報を上記通信手段により受信することに応じて、照会結果情報に基づく提示処理を行う提示処理手段とを備える。
また上記顔特徴データは、顔の構成要素の相対位置情報である。
また、上記送信情報生成手段は、上記顔特徴データ生成手段が顔画像を抽出した画像データに付与される画像識別情報を含む上記照会情報を生成する。
また上記送信情報生成手段は、上記顔特徴データ生成手段が画像データから抽出した顔画像に付与される顔識別情報を、顔特徴データに対応させた状態で含むようにした上記照会情報を生成する。
また位置情報を検出する位置検出手段を更に備え、上記送信情報生成手段は、上記位置検出手段で検出された、上記画像データの撮像位置としての位置情報を含む上記照会情報を生成する。
また人物情報を入力する人物情報入力手段を更に備え、上記送信情報生成手段は、上記顔特徴データ生成手段で生成された上記顔特徴データと、上記人物情報入力手段で入力された人物情報とを含む登録情報を生成し、該登録情報を上記通信手段により上記照会装置に送信させる。
また記録媒体に対して記録再生を行う記録再生手段を更に備え、上記記録再生手段は、上記顔特徴データ生成手段が顔画像を抽出した画像データを上記記録媒体に記録する。
この場合、上記記録再生手段は、上記顔特徴データ生成手段が顔画像を抽出した画像データを、その画像データに付与される画像識別情報とともに、上記記録媒体に記録する。
また上記記録再生手段は、上記顔特徴データ生成手段が顔画像を抽出した画像データを、その画像データ内における顔画像に付与される顔識別情報と顔画像の画像データ内の位置を対応させた顔識別情報対応情報とともに、上記記録媒体に記録する。
また上記提示処理手段は、上記照会結果情報に含まれている人物情報の提示処理を行う。
また上記提示処理手段は、上記照会結果情報に含まれている画像識別情報に基づいて上記記録再生手段により上記記録媒体から読み出された画像データの提示処理を行う。
また上記提示処理手段は、上記照会結果情報に含まれている顔識別情報と上記顔識別情報対応情報に基づいて上記記録再生手段により上記記録媒体から読み出された画像データ内で対象の顔画像を明示した状態で、上記画像データの提示処理を行う。
また上記提示処理手段は、上記照会結果情報に含まれている位置情報の提示処理を行う。
また上記提示処理手段は、上記位置検出手段で検出された現在の位置情報から、上記照会結果情報に含まれている位置情報で示される位置を示す相対位置情報を生成し、該相対位置情報の提示処理を行う。
また上記通信手段が上記照会結果情報を受信したことを告知する受信告知手段を更に備え、上記受信告知手段は、上記照会結果情報に含まれる登録種別情報に応じて、告知態様を選択して告知を行う。
【００１１】
照会システムにおける構成要素となる上記照会装置は、上記撮像装置との間で通信を行う通信手段と、人物情報を顔特徴データとともに登録した顔データベースと、上記撮像装置から送信されてくる照会情報を上記通信手段により受信することに応じて、上記照会情報に含まれている上記顔特徴データを用いて上記顔データベースの検索を行う照会処理手段と、上記照会処理手段によって上記顔データベースから検索された人物情報を含む照会結果情報を生成し、該照会結果情報を上記通信手段により上記撮像装置に送信させる送信情報生成手段とを備える。
また上記顔特徴データは、顔の構成要素の相対位置情報である。
また、上記送信情報生成手段は、上記照会情報に含まれている画像識別情報を含む照会結果情報を生成する。
また、上記送信情報生成手段は、受信した上記照会情報に含まれている顔識別情報に、上記照会処理手段が検索した上記人物情報を対応させた状態とする照会結果情報を生成する。
また地図情報を格納した地図データベースを更に備え、上記送信情報生成手段は、受信した上記照会情報に含まれている位置情報を用いて上記地図データベースの検索を行い、検索結果に基づいて文字データ又は画像データとしての位置情報を生成し、該位置情報を含む照会結果情報を生成する。
また上記登録データベースには、上記人物情報及び顔特徴データとともに登録種別情報が記録されており、上記送信情報生成手段は、上記登録種別情報を含む照会結果情報を生成する。
また、上記通信手段により、上記顔特徴データと上記人物情報とを含む登録情報が受信されることに応じて、その登録情報に含まれる顔特徴データと人物情報を対応させて上記顔データベースに登録する登録処理手段を更に備える。
【００１２】
本発明の情報処理方法として、上記撮像装置の情報処理方法は、画像撮像を行う撮像ステップと、上記撮像ステップで撮像された画像データ内における顔画像を抽出し、抽出した顔画像から顔特徴データを生成する顔特徴データ生成ステップと、上記顔特徴データを含む照会情報を生成し、該照会情報を上記照会装置に送信する照会情報送信ステップと、上記照会装置から送信されてくる照会結果情報を受信することに応じて、照会結果情報に基づく提示処理を行う提示処理ステップとを備える。
また本発明の情報処理方法として、上記照会装置の情報処理方法は、上記撮像装置から送信されてくる照会情報を受信することに応じて、上記照会情報に含まれている上記顔特徴データを用いて、人物情報を顔特徴データとともに登録した顔データベースの検索を行う照会処理ステップと、上記照会処理ステップによって上記顔データベースから検索された人物情報を含む照会結果情報を生成し、該照会結果情報を上記撮像装置に送信する照会結果情報送信ステップとを備える。
本発明のプログラムは、上記撮像装置の情報処理方法を実行させるプログラム、及び上記照会装置の情報処理方法を実行させるプログラムである。
【００１３】
以上の本発明では、例えば警察官等がパトロール中などに撮像装置を装着する。撮像装置は例えば一定時間毎などとして撮像を行っていく。そして撮像した画像データに人の顔が映っている場合には、その顔画像から顔特徴データを生成し、顔特徴データを含む照会情報を照会装置に送信する。
照会装置側では、照会情報を受信した場合、照会情報に含まれている顔特徴データを用いて顔データベースを検索する。そして検索された人物情報を含む照会結果情報を生成し、撮像装置に送信する。撮像装置では、照会結果情報を受信することで、それを所持する警察官等に、照会結果の内容、例えば人物情報を提示する。
このようなシステム動作においては、撮像装置と照会装置の間の通信データ内容には画像データ自体は含まれない。つまり通信データのデータサイズは、撮像した画像データを送信する場合に比べて遙かに小さくできる。また照会装置側では、顔特徴データに基づく自動検索を行うため、照会処理を正確かつ迅速に実行し、撮像装置側、つまり現場の警察官等に照会結果を通知できる。
照会処理に用いる顔特徴データは、例えば眼、鼻、口等の顔の構成要素の相対位置情報であるが、この相対位置は、個人毎に特有であって、髪型や眼鏡等の装着物によって変化するものではなく、しかも加齢によっても変化しないことが知られている。
【発明の効果】
【００１４】
本発明によれば、警察官等が、目的とする人の顔の記憶が曖昧であったり、写真を所持していなかったり、或いは該当人物か否かの判断が曖昧であったり、さらには人の探索を意識していなかったりしても、探索人物の情報を得ることができる。即ち携帯している撮像装置において、照会装置からの照会結果情報に基づく提示が行われるためである。これによって撮像装置を装着している人は適切な情報に基づく行動をとることができる。例えば警察官であれば、対応行動として行方不明者の保護や指名手配者の逮捕などを適切に行うことができる。
特に、撮像装置からは画像ではなく顔特徴データを含む小サイズの照会情報を伝送することや、照会装置側では照会処理として顔特徴データに基づく顔データベースの検索を行うことにより、撮像から照会結果情報に基づく提示までを非常に短時間で実現でき、パトロール現場での状況に迅速に対応できる。
さらには顔特徴データを用いることで、該当者か否かの正確な判断ができる。もちろん顔画像自体を伝送する場合のように、画質の問題や判断の困難性も生じない。
これらのことから本発明は、人物の捜索などに非常に有用となる。
【発明を実施するための最良の形態】
【００１５】
以下、本発明の実施の形態を次の順序で説明していく。
１．照会システムの概略構成
２．撮像装置の構成
３．照会装置の構成
４．顔データベースの登録処理
５．撮像装置の画像撮像及び照会情報送信処理
６．照会装置の照会処理
７．撮像装置の照会結果情報受信時の処理
８．実施の形態の効果及び変形例
【００１６】
１．照会システムの概略構成
図１に実施の形態の照会システムを概略的に示す。実施の形態では、照会システムを例えば警備・警察用途、特に行方不明者や指名手配者の捜索に適したシステムとして実現する例を示す。
本例の照会システムは、例えば警察官がパトロール中などに装着する撮像装置１と、警察署などの本部組織において使用される照会装置５０から成る。
【００１７】
撮像装置１は、カメラユニット２とコントロールユニット３が別体装置として構成されている。カメラユニット２とコントロールユニット３はケーブル４により信号伝送可能に接続される。
カメラユニット２は、図示するように使用者の肩に装着される。一方、コントロールユニット３は使用者の腰、或いは衣服のポケット等に装着又は保持される形態であり、即ち使用者が手を使用せずに、携帯しながらの撮像が可能な状態とされる。
【００１８】
撮像装置１（コントロールユニット３）は、ネットワーク９０を介して照会装置５０との間で相互に通信可能とされる。
ネットワーク９０としては、インターネットや携帯電話網などの公衆ネットワークが用いられても良いが、警察用途の場合、専用のネットワークを構築することも想定される。
図１では一人の警察官が装着する撮像装置１を示しているが、例えば撮像装置１は、多数の警察官がそれぞれ装着する。各撮像装置１は、それぞれネットワーク９０を介して照会装置５０と通信できる。
【００１９】
照会装置５０は、後述するが、行方不明者や指名手配者など、捜索を必要とする人物を登録した顔データベースを備え、その顔データベースを用いて照会処理を行う装置である。
【００２０】
この照会システムでは、次のような動作が行われる。
図のように警察官はパトロール中などに撮像装置１を装着している。撮像装置１は一定時間毎、例えば１〜数秒間隔などで、自動的に撮像を行っていく。なお、この一定時間毎の撮像とは、照会情報生成のための画像取得のことであり、実際の動作としては、動画撮像のように常時被写体の画像を撮像素子で検出しながら、一定時間毎の１フレーム画像を処理対象として取り込んでいくようにしてもよい。
撮像装置１は、撮像して取り込んだ画像データに人の顔が映っている場合には、その顔画像から顔特徴データを生成し、顔特徴データを含む照会情報を照会装置５０に送信する。
照会装置５０では、撮像装置１からの照会情報を受信した場合、その照会情報に含まれている顔特徴データを用いて顔データベースを検索する。顔データベースには顔特徴データに対応して人物情報が登録してある。顔データベースの検索により或る人物情報が検索されたら、照会装置５０は、検索された人物情報を含む照会結果情報を生成し、撮像装置１に送信する。
撮像装置１では、照会結果情報を受信することで、それを所持する警察官に、照会結果の内容として人物情報や関連する情報を提示する。例えばそれらの情報を表示出力して警察官に認識させる。
【００２１】
例えば図１に示しているように、警察官がパトロール中に子供に遭遇したとする。この場合、この子供の顔が撮像装置１によって撮像され、顔特徴データを含む照会情報が照会装置５０に送信される。
もし、この子供が行方不明者として登録されていた場合、照会装置５０は、その人物情報を含む照会結果情報を撮像装置１に送信してくる。そして撮像装置１では、照会結果情報に基づく表示を行う。これによって警察官は、その子供が行方不明者として捜索対象の人物であると知ることができ、保護や連絡など、適切な行動をとることができる。
【００２２】
２．撮像装置の構成
図２に実施の形態の撮像装置１の外観例を示す。
上述したように撮像装置１は、カメラユニット２とコントロールユニット３がケーブル４により信号伝送可能に接続される構成となる。そしてカメラユニット２は例えば図３に示すように使用者の肩に装着され、コントロールユニット３は使用者の腰、或いは衣服のポケット等に装着又は保持される。
カメラユニット２を肩に装着する手法は多様に考えられ、ここでは詳述しないが、使用者の衣服（警備用のジャケット等）に、カメラユニット２の台座部２３を保持する機構が形成されたり、或いは装着用ベルトなどによって肩部分に装着されるようにすればよい。
なお、カメラユニット２が例えば使用者がかぶるヘルメットの上部や側面に固定されたり、或いは胸部、腕部に装着されるなども考えられるが、肩部分は、使用者が歩行している場合でも最も揺れが少ない部分であり、従って撮像を行うカメラユニット２を装着する部位としては最適である。
【００２３】
図２に示すように、カメラユニット２には、前方カメラ部２１ａと後方カメラ部２１ｂの２つのカメラ部が設けられる。また前後のカメラ部２１ａ，２１ｂに対応して前方マイクロフォン２２ａ、後方マイクロフォン２２ｂも設けられる。
前方カメラ部２１ａは、図３の装着状態において使用者の前方の光景を撮像するものとされ、後方カメラ部２１ｂは使用者の後方の光景を撮像するものとされる。
前方カメラ部２１ａと後方カメラ部２１ｂは、それぞれ広角レンズを搭載しており、その撮像視野角は図４に示すように比較的広角とされ、前方カメラ部２１ａと後方カメラ部２１ｂを合わせることで、使用者の周囲をほぼ全周にわたって撮像できるようにしている。
前方マイクロフォン２２ａは、図３の状態で使用者の前方方向に高い指向性を有するマイクロフォンとされ、前方カメラ部２１ａで撮像する光景に対応する音声を集音する。
後方マイクロフォン２２ｂは、図３の状態で使用者の後方に高い指向性を有するマイクロフォンとされ、後方カメラ部２１ｂで撮像する光景に対応する音声を集音する。
【００２４】
なお、前方カメラ部２１ａと後方カメラ部２１ｂの各撮像範囲としての前方視野角及び後方視野角をどの程度とするかは、採用するレンズ系の設計などにより各種設定できることは言うまでもない。当該撮像装置１の使用が想定される状況に応じて視野角が設定されればよい。もちろん、前方視野角と後方視野角を同角度とする必要もなく、また機種によっては、視野角をあえて狭く設計することも考えられる。
前方マイクロフォン２２ａ、後方マイクロフォン２２ｂの指向性についても同様であり、用途に応じて各種の設計が考えられる。例えば無指向性のマイクロフォンを１つ配置するような構成も考えられる。
【００２５】
コントロールユニット３は、カメラユニット２で撮像された映像信号（及び音声信号）をメモリカード５に記録する記録機能や、照会装置５０との間でデータ通信を行う機能、さらに表示・操作などのユーザーインターフェース機能等を備える。
例えばコントロールユニット３の前面には、液晶パネル等による表示部１１が設けられる。
また所要位置に通信用のアンテナ１２が形成される。
またメモリカード５を装着するカードスロット１３が形成される。
さらに電子音や音声を出力する音声出力部（スピーカ）１４が設けられる。
さらに図示していないがヘッドホン端子や、例えばＵＳＢ、ＩＥＥＥ１３９４など、所定の伝送規格により情報機器との間でデータ伝送を行うためのケーブル接続端子などが設けられてもよい。
【００２６】
使用者が操作を行うための操作部１５としては、各種キーやスライドスイッチなどが設けられる。もちろんジョグダイヤルやトラックボール等の操作子が設けられても良い。
各種の形態の操作部１５によっては、例えばカーソルキー、エンターキー、キャンセルキーなどとして、表示部１１での表示上でカーソル操作を行って操作入力を行うものとして、多様な操作入力が可能なものとしてもよいし、撮像開始、停止、モード設定、電源オン／オフその他の基本操作のための専用キーが設けられても良い。
【００２７】
例えばこのようにカメラユニット２とコントロールユニット３によって形成される本例の撮像装置１を図３のように使用者が装着することで、ハンズフリーかつほぼ無意識での撮像が可能となる。従って、警備員や警察官が、何らかの作業をしながら周囲の光景を撮像したり、パトロール中に撮像を行うことに好適となる。
【００２８】
図５に撮像装置１の内部構成例を示す。
上述したようにカメラユニット２には前方カメラ部２１ａ、後方カメラ部２１ｂが設けられる。前方カメラ部２１ａ、後方カメラ部２１ｂは、それぞれ撮像光学レンズ系、レンズ駆動系、ＣＣＤセンサやＣＭＯＳセンサによる撮像素子部等が搭載されて形成されている。
そして前方カメラ部２１ａ、２１ｂによる撮像光は、それぞれ内部の撮像素子部によって撮像映像信号とされ、ゲイン調整などの所定の信号処理が行われて、ケーブル４によりコントロールユニット３に供給される。
また前方マイクロフォン２２ａ、後方マイクロフォン２２ｂによって得られた音声信号もケーブル４によりコントロールユニット３に供給される。
【００２９】
コントロールユニット３において、コントローラ（ＣＰＵ：Central Processing Unit）４０は全体の動作制御を行う。コントローラ４０は、後述する各種動作を実現するために、動作プログラムや操作部１５からのユーザーの操作に応じて各部を制御する。
メモリ部４１は、コントローラ４０において実行されるプログラムコードを格納したり、実行中の作業データを一時保管するために使用される記憶装置である。この図の場合、メモリ部４１は、揮発メモリ、不揮発性メモリの双方を含むものとして示している。例えばプログラムを格納するＲＯＭ（Read Only Memory）、演算ワーク領域や各種一時記憶のためのＲＡＭ（Random Access Memory）、ＥＥＰ−ＲＯＭ（Electrically Erasable and Programmable Read Only Memory）等の不揮発性メモリを含む。
【００３０】
ケーブル４によりカメラユニット２から伝送されてきた前方カメラ部２ａによる撮像映像信号、及び前方マイクロフォン３ａによる音声信号は、撮像／音声信号処理部３１ａに入力される。
また後方カメラ部２ｂによる撮像映像信号、及び後方マイクロフォン３ｂによる音声信号は、撮像／音声信号処理部３１ｂに入力される。
撮像／音声信号処理部３１ａ、３１ｂは、入力された撮像映像信号（及び音声信号）に対して映像信号処理（輝度処理、色処理、補正処理等）や音声信号処理（イコライジング、レベル調整等）を行い、カメラユニット２で撮像された信号としての撮像画像データ、オーディオデータを生成する。
【００３１】
なお撮像動作は、ユーザーの操作に応じていわゆる写真撮像のように１フレームの画像データを取り込む場合と、自動的に例えば所定時間間隔で１フレームの画像データを順次取り込んでいく場合がある。
撮像／音声信号処理部３１ａ、３１ｂで処理された撮像画像データは、例えば１フレームの画像データ（静止画データ）として、画像解析部３２及び記録再生処理部３３に供給されるが、画像解析部３２及び記録再生処理部３３に画像データが供給されるのは、ユーザーの操作（いわゆるシャッタ操作）に応じての場合もあれば、自動的に一定時間間隔で行われる場合もある。
後述する図１０の登録処理の場合には、ユーザー操作に応じて１枚（１フレーム）の撮像画像データが画像解析部３２に供給される。
また後述する図１１の照会情報送信処理は、警察官のパトロール中などに自動的に行われる処理であるが、このときは、一定時間間隔毎などに、１フレームづつ撮像画像データが画像解析部３２に供給される。なお、この場合、前方カメラ部２１ａによる撮像画像データと、後方カメラ部２１ｂによる撮像画像データが、一定時間間隔で交互に画像解析部３２に供給されるようにすることが考えられる。
【００３２】
画像解析部３２は、撮像／音声信号処理部３１ａ、３１ｂで処理されて供給される各撮像画像データについて解析処理を行う。
この画像解析部３２は、撮像画像データから人物の顔の画像を処理対象のオブジェクトとして抽出する処理と、抽出した顔画像から、顔特徴データを生成する処理を行う。
【００３３】
記録再生処理部３３は、コントローラ４０の制御に基づいて、撮像／音声信号処理部３１ａ、３１ｂで処理されて供給される各撮像画像データを記録メディア（図１に示したメモリカードスロット１３に装填されているメモリカード）５に画像ファイルとして記録する処理や、メモリカード５に記録されている画像ファイルを読み出す処理を行う。
記録の際には、撮像画像データに対して所定の圧縮方式によるデータ圧縮処理を施したり、メモリカード５に対して記録する際の記録フォーマットへのエンコード処理を行う。また、１枚の撮像画像データ毎に付与される画像ＩＤ（以下、ＰＩＤ：Picture ID）や、画像内の顔画像毎に付与される顔ＩＤ（以下、ＦＩＤ：Face ID）についての情報等を含めて画像ファイル化する。
再生の際には、記録された画像ファイルにおける各種情報の抽出や、画像のデコード処理を行う。
【００３４】
ＩＤ生成部４５は、上記のＰＩＤ、ＦＩＤを生成する。ＰＩＤは、画像解析部３２による解析結果（顔抽出結果）に従い、顔画像が抽出された画像データに対して固有の識別情報として発生させる。またＦＩＤは、画像データ内の各顔画像に対して、固有の識別情報として発生させる。
生成したＰＩＤ、ＦＩＤは記録再生処理部３３及び送信データ生成部４２に供給する。
【００３５】
送信データ生成部４２は、照会装置５０に対して送信するデータパケットを生成する。即ち登録情報や照会情報としてのデータパケットを生成する。これら登録情報や照会情報は、画像解析部３２で生成した顔特徴データやＰＩＤ、ＦＩＤなど含むものとして情報パケットを形成する。
そして登録情報や照会情報としてのデータパケットを送信処理のために通信部３４に供給する。
通信部３４は照会装置５０とのネットワーク９０を介した通信動作を行う。
通信部３４は、送信データ生成部４２で生成された登録情報や照会情報の送信処理として所要の変調処理や増幅処理を行い、アンテナ１２から無線送信させる。
また照会装置５０から送信されてくるデータの受信復調処理を行い、受信データを受信データ処理部４３に供給する。
受信データ処理部４３は、通信部３４で受信したデータのバファリングやパケットデコード、情報抽出等の処理を行い、受信したデータ内容をコントローラ４０に供給する。
【００３６】
表示データ生成部４４は、コントローラ４０の指示に応じて表示部１１に表示する内容としての表示データを生成する。
照会装置５０から照会結果情報が送信されてきた際には、コントローラ４０は、表示データ生成部４４に照会結果情報に基づいて表示する画像や文字としてのデータ内容を指示する。そして表示データ生成部４４は生成した表示データに応じて表示部１１を駆動し、表示動作を実行させる。
また表示データ生成部４４では、コントローラ４０の指示に応じて、操作メニュー表示や、動作状態の表示、メモリカード５から再生された画像の表示、さらには図５では信号経路の図示を省略したが、前方カメラ部２１ａ、後方カメラ部２１ｂで撮像された撮像映像信号のモニタ表示のための処理も行う。
【００３７】
音声出力部１４は、電子音やメッセージ音声等の音声信号生成部や増幅回路部及びスピーカを有し、コントローラ４０の指示に応じて所要の音声出力を行う。例えば各種動作時や操作時のメッセージ音声やアラーム音を出力したり、照会結果情報を受信したことをユーザーに告知する受信告知音を出力する。
また図５では信号経路の図示を省略したが、前方マイクロフォン２２ａ、後方マイクロフォン２２ｂで集音された音声信号が供給されて出力されることで、撮像時等の音声モニタ出力も可能である。
非音声通知部３５は、コントローラ４０の指示に応じて、例えば照会情報を受信したときの受信告知を音声以外の形態でユーザーに告知する。例えば非音声通知部３５はバイブレータで構成され、照会情報受信を受信したことを、機器の振動により当該撮像装置１を装着しているユーザー（警察官）に告知する。
【００３８】
操作部１５は、図２で説明したようにコントロールユニット３の筐体上に設けられる各種操作子である。例えばコントローラ４０は表示部１１に各種操作メニューを表示させ、使用者は操作部１５によるカーソル操作やエンター操作により、メニュー上で操作入力を行う。コントローラ４０は操作部１５を用いた使用者の操作に応じて所定の制御を行う。例えば撮像動作の開始／停止、動作モード、記録・再生、通信などのための各種制御を使用者の操作に応じて実行することができる。
もちろん操作部１５は表示部１１での操作メニューに対応する操作子でなくてもよく、例えば撮像キー、停止キー、モードキーなどとして用意されてもよい。
【００３９】
位置検出部３６は、ＧＰＳアンテナ及びＧＰＳデコーダが搭載され、ＧＰＳ（Global Positioning System）衛星からの信号を受信し、当該受信信号をデコードして、現在位置情報としての緯度、経度を出力する。
コントローラ４０は位置検出部３６からの緯度、経度のデータにより現在位置を把握でき、現在位置情報を送信データ生成部４２に供給して照会情報としてのデータパケットに含ませたり、照会結果情報に含まれる位置情報と現在位置情報の比較処理などを行うことができる。
【００４０】
外部インターフェースは、外部機器との各種接続・通信を行う。例えばＵＳＢ、ＩＥＥＥ１３９４などの所定のインターフェース規格により、外部機器との間でのデータ伝送が可能とされる。例えばコントローラ４０の動作プログラムのバージョンアップのためのアップロードや、メモリカード５から再生されるデータの外部機器への伝送、さらには後述する登録処理での各種情報の入力なども可能である。
【００４１】
以上の各構成により、撮像装置１では後述する登録処理や照会情報送信処理、照会結果情報受信処理を実現する。そのためコントローラ４０は、カメラユニット２及び撮像／音声信号処理部３１ａ、３１ｂによる撮像動作、記録再生処理部３３での記録再生動作、画像解析部３２での顔抽出及び顔特徴データ生成動作、送信データ生成部４２での登録情報や照会情報の生成動作、通信部３４の通信動作、表示データ生成部４４での表示データ生成動作、音声出力部１４や非音声通知部の動作のそれぞれの制御を行う。
【００４２】
なお本例の撮像装置１は例えば以上のように構成されるが、構成上の変形例は、以下のように多様に考えられる。
図５に示した構成要素としての各ブロックは、全てが必須のものではなく、またこれ以外に構成要素が追加されても良い。
画像解析部３２、ＩＤ生成部４５、送信データ生成部４２、受信データ処理部４３、表示データ生成部４４は、それぞれ図５のようにコントローラ４０（ＣＰＵ）とは別の回路部としてハードウエア的に構成されてもよいが、これらの各部の処理はいわゆるソフトウエア演算処理でも可能であり、コントローラ４０においてソフトウエアプログラムで実現される機能として実現されてもよい。
【００４３】
また、図２に示したようなカメラユニット２、コントロールユニット３の外観は一例であることはもちろんであり、実際のユーザインターフェースのための操作子や表示のための配置、筐体形状などは限定されない。もちろん構成の差異によっても多様な形状が想定される。
カメラユニット２とコントロールユニット３はケーブル４で接続されるものとしたが、電波或いは赤外線などを利用したトランスミッタにより撮像映像信号や音声信号が無線伝送されるようにしてもよい。
或いは、カメラユニット２とコントロールユニット３が図１のように別体ではなく、一体的に形成されてもよい。
さらには警察官等のユーザーの視認性を考えて、表示部１１を別体の筐体で生成し、例えば腕時計型の表示部を設けたり、或いはコントロールユニット３を腕時計型にすることも考えられる。
【００４４】
また本例では前方カメラ部２ａと後方カメラ部２ｂを有するものとしたが、少なくとも１つのカメラ部が設けられればよい。
また３つ以上のカメラ部が設けられてもよい。
マイクロフォンについては、２又は３以上の複数個設けられる各カメラ部に対応して、それぞれ設ける他、全部又は一部の各カメラ部に対して共通のマイクロフォンが設けられてもよ。もちろん最低限１つのマイクロフォンが設けられればよい。
また、１又は複数個設けられるカメラ部の全部又は一部に対しては、パン・チルト機構を形成し、撮像方向を上下左右に変更できるようにしてもよい。
パン・チルト動作はユーザーの操作に応じたものとしても良いし、コントローラ４０が自動制御するようにしてもよい。
【００４５】
本例では記録メディアの例としてメモリカード５を挙げているが、メモリカード５に限らず、例えば記録再生処理部３３にＨＤＤ（Hard Disc Drive）が搭載されたり、或いは光ディスク、光磁気ディスクなどのメディアが用いられるようにしても良い。もちろん記録媒体として磁気テープメディアを用いるようにしても良い。
【００４６】
３．照会装置の構成
照会装置５０の構成を図６，図７で説明する。照会装置５０は、ハードウエア的にはパーソナルコンピュータやワークステーションとしてのコンピュータシステムで実現できる。まず図６では照会装置５０として使用できるコンピュータシステム１００の構成を説明し、図７では照会装置５０としての機能構成を説明する。
【００４７】
図６はコンピュータシステム１００のハードウェア構成例を模式的に示している。図示するようにコンピュータシステム１００は、ＣＰＵ１０１、メモリ１０２、通信部（ネットワークインターフェース）１０３、ディスプレイコントローラ１０４、入力機器インターフェース１０５、外部機器インターフェース１０６、キーボード１０７、マウス１０８、ＨＤＤ（Hard Disc Drive）１０９、メディアドライブ１１０、バス１１１、表示装置１１２、スキャナ１１３、メモリカードスロット１１４を有する。
【００４８】
コンピュータシステム１００のメインコントローラであるＣＰＵ１０１は、オペレーティングシステム（ＯＳ）の制御下で、各種のアプリケーションを実行するようになっている。例えば照会装置５０として用いられる場合、図７で後述する受信データ処理部５１，登録データ生成部５２，登録処理部５３、照会処理部５４、送信データ生成部５５としての各機能を実現するアプリケーションがＣＰＵ１０１で実行される。
図示の通り、ＣＰＵ１０１は、バス１１１によって他の機器類（後述）と相互接続されている。バス１１１上の各機器にはそれぞれ固有のメモリアドレス又はＩ／Ｏアドレスが付与されており、ＣＰＵ１０１はこれらアドレスによって機器アクセスが可能となっている。バス１１１の一例はＰＣＩ（Peripheral Component Interconnect）バスである。
【００４９】
メモリ１０２は、ＣＰＵ１０１において実行されるプログラムコードを格納したり、実行中の作業データを一時保管するために使用される記憶装置である。この図の場合、メモリ１０２は、揮発メモリ、不揮発性メモリの双方を含むものとして示している。例えばプログラムを格納するＲＯＭ、演算ワーク領域や各種一時記憶のためのＲＡＭや、ＥＥＰ−ＲＯＭ等の不揮発性メモリを含むものとする。
【００５０】
通信部１０３は、イーサネット（Ethernet：登録商標）などの所定の通信プロトコルに従って、コンピュータシステム１００をインターネットやＬＡＮ（Local Area Network）あるいは専用回線などとして、撮像装置１と通信をおこなうネットワーク９０に接続することができる。ネットワークインターフェースとしての通信部１０３は、一般に、ＬＡＮアダプタカードという形態で提供され、マザーボード（図示しない）上のＰＣＩバススロットの装着して用いられる。但し、ネットワークインターフェースではなく、モデム（図示しない）経由で外部ネットワークに接続することもできる。
【００５１】
ディスプレイコントローラ１０４は、ＣＰＵ１０１が発行する描画命令を実際に処理するための専用コントローラであり、例えばＳＶＧＡ（Super Video Graphic Array）又はＸＧＡ（eXtended Graphic Array）相当のビットマップ描画機能をサポートする。ディスプレイコントローラ１０４において処理された描画データは、例えばフレームバッファ（図示しない）に一旦書き込まれた後、表示装置１１２に画面出力される。表示装置１１２は、例えば、ＣＲＴ（Cathode Ray Tube）ディスプレイや、液晶表示ディスプレイ（Liquid Crystal Display）などである。
【００５２】
入力機器インターフェース１０５は、キーボード１０７やマウス１０８などのユーザ入力機器をコンピュータシステム１００に接続するための装置である。即ち警察署等における照会装置５０を担当するオペレータの操作入力や、顔データベースの登録のための操作入力などがおこなわれるが、これらの必要な操作入力はコンピュータシステム１００上において、キーボード１０７及びマウス１０８を用いて行われる。
【００５３】
外部機器インターフェース１０６は、ハードディスクドライブ（ＨＤＤ）１０９、メディアドライブ１１０、スキャナ１１３、メモリカードスロット１１４などの外部装置をコンピュータシステム１００に接続するための装置である。外部機器インターフェース１０６は、例えば、ＩＤＥ（Integrated Drive Electronics）やＳＣＳＩ（Small Computer System Interface）などのインターフェース規格に準拠する。
【００５４】
ＨＤＤ１０９は、周知の通り記憶担体としての磁気ディスクを固定的に搭載した外部記憶装置であり、記憶容量やデータ転送速度などの点で他の外部記憶装置よりも優れている。ソフトウェアプログラムを実行可能な状態でＨＤＤ１０９上に置くことをプログラムのシステムへの「インストール」と呼ぶ。通常、ＨＤＤ１０９には、ＣＰＵ１０１が実行すべきオペレーティングシステムのプログラムコードや、アプリケーションプログラム、デバイスドライバなどが不揮発的に格納されている。
例えば、ＣＰＵ１０１で実行する各機能のためのアプリケーションプログラムがＨＤＤ１０９に格納される。また後述する顔データベース５７，地図データベース５８がＨＤＤ１０９上に構築される。
【００５５】
メディアドライブ１１０は、ＣＤ（Compact Disc）やＭＯ（Magneto-Optical disc）、ＤＶＤ（Digital Versatile Disc）などの可搬型メディア１２０を装填して、データ記録面にアクセスするための装置である。可搬型メディア１２０は、主として、ソフトウェアプログラムやデータファイルなどをコンピュータ可読形式のデータとしてバックアップすることや、これらをシステム間で移動（販売・流通・配布を含む）する目的で使用される。
例えば、図７で説明する各機能を実現するアプリケーションなどを、これら可搬型メディア１２０を利用して流通・配布することができる。
【００５６】
スキャナ１１３は画像読込を行う。例えば写真をスキャナ１１３にセットすることで、その写真としての画像データを取り込む。
メモリカードスロット１１４は、例えば上述したように撮像装置１で使用されるメモリカード５に対して記録再生を行うメモリカード記録再生部である。
【００５７】
例えばこのようなコンピュータシステム１００を用いて構築される照会装置５０の機能構成を図７に示す。
図７では、図６に示した通信部１０３、ＣＰＵ１０１、ＨＤＤ１０９を示しており、ＣＰＵ１０１として実行される処理機能と、ＨＤＤ１０９内に構築されるデータベースを示している。
ＣＰＵ１０１で実行される機能構成としては、受信データ処理部５１，登録データ生成部５２，登録処理部５３、照会処理部５４、送信データ生成部５５が設けられる。例えばこれらの機能を実現するアプリケーションプログラムがＣＰＵ１０１において実行されることで、これらの機能構成が実現される。
またＨＤＤ１０９内には顔データベース５７と地図データベース５８が構築される。
登録データ入力部５６は、顔データベース５７の登録情報を入力する部位を総括的に示しており、例えば図６のキーボード１０７，マウス１０８、スキャナ１１３，メモリカードスロット１１４、メディアドライブ１１０などを、登録データ入力部５６として用いることができる。
【００５８】
図７の各機能の説明に先だって、顔データベース５７の例を図８で説明しておく。図８（ａ）に顔データベース５７の構造例を示す。
顔データベース５７は、登録番号＃１、＃２・・・として、それぞれ捜索対象となっている人物が登録されるものである。
登録種別ＣＴ１，ＣＴ２・・・は、その登録の種別として、例えば行方不明者、指名手配者、参考人などの種別を示すものである。
各人物については、人物情報として、氏名、顔特徴データ、付加情報が登録される。
【００５９】
顔特徴データとは、顔の構成要素の相対位置情報であり、ここでは顔特徴データＦａ、Ｆｂの２つのデータを登録する例としている。
顔特徴データＦａは、図８（ｂ）に示す、目の中心と鼻との距離ＥＮと目の間隔の距離Ｅｄの比とする。例えばＦａ＝Ｅｄ／ＥＮとする。
顔特徴データＦｂは、目の中心と口との距離ＥＭと目の間隔の距離Ｅｄの比とする。例えばＦｂ＝Ｅｄ／ＥＭとする。
このような顔の構成要素の相対位置情報は、個人毎に特有となるとともに、髪型や眼鏡等の装着物などによる、外観上の変化の影響を受けない情報である。さらに加齢によっても変化しないことが知られている。
なお、顔データベース５７の登録情報としての顔特徴データが、このような顔特徴データＦａ、Ｆｂの場合、上述した撮像装置１における画像解析部３２で生成する顔特徴データも、顔特徴データＦａ、Ｆｂとなる。
【００６０】
付加情報は、登録する人物に関するその他の各種情報であるとする。例えば性別、生年月日、登録時年齢、身長、目の色、住所、登録に至った事情などである。さらには、犯罪履歴や指紋データ等のデータベースへのリンク情報などが含まれていても良い。
【００６１】
図７の照会装置５０は、このような顔データベース５７を用いた照会処理を行うための機能構成を備えるものとなる。
通信部１０３は、撮像装置１の通信部３４との間でのデータ通信を行う。通信部１０３は、撮像装置１から登録情報や照会情報が送信されてくることに応じて、その受信処理を行う。
また照会装置５０から撮像装置１に対しては照会結果情報の送信を行うが、通信部１０３は、ＣＰＵ１０１の指示に応じて照会結果情報の送信処理を行う。
【００６２】
受信データ処理部５１は、通信部１０３で受信した登録情報や照会情報としてのデータパケットのバッファリングや、情報内容の抽出処理を行う。
【００６３】
登録データ生成部５２は、顔データベース５７に登録する登録データを生成する。登録データとは、顔データベース５７において登録番号毎に記録する情報内容であり、即ち登録種別と人物情報（氏名、顔特徴データＦａ、Ｆｂ、付加情報）である。
登録種別や人物情報は、登録データ入力部５６から入力されたり、登録データ生成部５２で入力に基づいて生成する。
例えば登録種別や氏名、付加情報は、登録データ入力部５６から入力される情報を用いる。例えばキーボード１０７等の操作によって入力されたり、メモリカードや可搬性メディア１２０に記録されている人物情報等がメモリカードスロット１１４或いはメディアドライブ１１０で読み出されて入力される。
また登録データ入力部５６としてのスキャナ１１３、メモリカードスロット１１４（メモリカード）、或いはメディアドライブ１１０（可搬性メディア１２０）から顔の画像データが入力された場合、登録データ生成部５２は、その画像データの解析処理を行い、顔特徴データＦａ、Ｆｂを生成する。
そして登録データ生成部５２は、これらの情報を用いて顔データベース５７の登録情報を生成する。
【００６４】
登録処理部５３は、顔データベース５７への登録処理を行う。
登録データ生成部５２で登録情報が生成された場合、その登録情報が登録処理部５３によって顔データベース５７に書き込まれることで、１件の登録が行われる。また撮像装置１から登録情報が送信されてきた場合、受信データ処理部５１はその登録情報を登録処理部５３に供給する。その場合、その登録情報が登録処理部５３によって顔データベース５７に書き込まれることで、１件の登録が行われる。
【００６５】
照会処理部５４は、顔データベース５７の検索による照会処理を行う。撮像装置１から照会情報が送信されてきた場合、受信データ処理部５１はその照会情報を照会処理部５４に供給する。その場合、照会処理部５４は、その照会情報に含まれている顔特徴データＦａ、Ｆｂを用いて顔データベース５７の検索を行い、該当する顔特徴データＦａ、Ｆｂの有無の判別や該当者の登録種別や人物情報の読み出しを行う。
【００６６】
送信データ生成部５５は、照会処理部５４の照会処理に結果に応じて、照会結果情報の生成を行う。即ち検索された該当者についての人物情報や、撮像装置１から送信されてきた照会情報に含まれているＰＩＤ，ＦＩＤを含む照会結果情報を生成する。また照会結果情報には詳細位置情報を含むようにする。詳細位置情報は、照会情報に含まれている位置情報（緯度・経度）に基づいて地図データベース５８を検索し、その詳細な位置情報を読み出す。そして地図画像や文字による詳細位置情報を生成し、照会結果情報に含むようにする。
送信データ生成部５５が生成した照会結果情報は、通信部１０３によって撮像装置１に送信される。
【００６７】
４．顔データベースの登録処理
以下、撮像装置１と照会装置５０において行われる動作について説明していく。まずここでは、顔データベース５７の登録処理について説明する。
本例では、顔データベース５７への人物の登録は、照会装置５０において登録情報を入力して登録を行う処理例と、撮像装置１から登録情報を送信して照会装置５０で登録を行う処理例を説明する。
【００６８】
図９の登録処理Ｉは、照会装置５０でオペレータの操作に基づいて登録が行われる例である。
ステップＦ１０１は、登録データ入力部５６により登録する人物の顔写真データと、各種の人物情報、及び登録種別を入力する処理を示している。顔写真データは、例えば写真をスキャナ１１３で画像データとして取り込むことや、或いは可搬性メディア１２０やメモリカード５に記録された顔写真データを読み込むことなどにより行えばよい。さらには、通信部１０３による通信で外部のコンピュータシステムやデータベースから顔写真データをダウンロードするような手法も想定される。
登録種別や人物情報としての氏名、性別、年齢、住所などは、登録操作を行うオペレータがキーボード１０７やマウス１０８を用いた操作で入力する。もちろん外部データベースから取り込んでもよい。
【００６９】
ステップＦ１０２では登録データ生成部５２が、入力された顔写真データを解析して、顔特徴データＦａ、Ｆｂを生成する。即ち顔写真データ内で顔画像部分を抽出し、目の間隔の距離、目の中心と鼻の距離、目の中心と口の距離を判別して、これらの相対位置情報として顔特徴データＦａ、Ｆｂを求める。
そして登録データ生成部５２は、ステップＦ１０３で、登録情報を生成する。即ち入力された登録種別、人物情報としての氏名、性別、年齢、住所等、さらに生成した顔特徴データＦａ、Ｆｂを対にして、顔データベース５７の登録情報とする。そしてこの登録情報を登録処理部５３に受け渡す。
ステップＦ１０４では、登録処理部５３が、供給された登録情報を顔データベース５７に新たな登録番号を付して追加登録する。
以上の処理で、１件の登録が実行される。
【００７０】
次に図１０の登録処理IIは、撮像装置１から登録情報を送信する処理例であり、撮像装置１の処理と照会装置５０の処理を示している。
これは例えば行方不明者の捜索願いを受けたときに、警察官がその親族等から写真の提供をうけて、直ぐに顔データベース５７への登録を行う場合などに適した手法である。
【００７１】
図１０のステップＦ２０１は、撮像装置１で写真データを取り込む処理を示している。例えば警察官が、捜索願いとともに行方不明者の家族等から提供された写真を、撮像装置１で撮像することで行われる。警察官が撮像装置１で撮像操作を行うことで、顔写真データが取り込まれる。もちろん家族等がデジタルスチルカメラで撮像した行方不明者の写真データを所持していれば、その提供者のデジタルスチルカメラやパーソナルコンピュータ等の機器を外部インターフェース３７で接続し、写真データを取り込むようにしてもよい。さらには、メモリカード５を用いて写真データの提供を受けて、そのメモリカード５をメモリカードスロット１１４に装填して記録再生処理部３３で読み出すようにしてもよい。
【００７２】
ステップＦ２０２では、人物情報としての氏名、性別、年齢、住所等、及び登録種別を入力する処理を示している。例えば登録処理のためにコントローラ４０は表示部１１に登録用の入力画面を表示させる。警察官は、表示部１１の表示に従い、操作部１５を用いて登録種別や氏名等を入力していく。コントローラ４０は入力された氏名等を取り込む。もちろん、氏名等の人物情報も、外部インターフェース３７やメモリカード５から入力されてもよい。
【００７３】
ステップＦ２０３では、コントローラ４０の指示に応じて画像解析部３２で顔特徴データＦａ、Ｆｂを生成する処理が行なわれる。即ちステップＦ２０１で取り込まれた顔写真データは画像解析部３２に供給され、画像解析部３２は、その顔写真データ内で顔画像部分を抽出し、目の間隔の距離、目の中心と鼻の距離、目の中心と口の距離を判別して、これらの相対位置情報として顔特徴データＦａ、Ｆｂを求める。
次にステップＦ２０４で、送信データ生成部４２で登録情報が生成される。送信データ生成部４２は、ステップＦ２０３で画像解析部３２で生成された顔特徴データＦａ、Ｆｂと、ステップＦ２０２で入力された氏名、性別、年齢、住所等をまとめてデータパケットを生成し、照会装置５０に送信する登録情報を生成する。
コントローラ４０は、この登録情報をステップＦ２０５で通信部３４により照会装置５０に対して送信させる。
【００７４】
照会装置５０では、ステップＦ３０１で、撮像装置１からの登録情報が受信されたら、受信データ処理部５１は、その登録情報を登録処理部５３に受け渡す。
そしてステップＦ３０２では、登録処理部５３が、供給された登録情報を顔データベース５７に新たな登録番号を付して追加登録する。
以上の処理で、１件の登録が実行される。登録完了に応じて、ステップＦ３０３では、登録処理部５３は登録完了通知の送信要求と、登録情報の送信元の撮像装置１の情報を送信データ処理部５５に通知する。送信データ処理部５５は、それに応じて登録完了通知としての送信データを生成し、その登録完了通知を通信部１０３から撮像装置１に送信させる。
撮像装置１ではステップＦ２０６で登録完了通知を受信したら、コントローラ４０は表示データ生成部４４に指示して、表示部１１に、登録完了を使用者に提示する表示を実行させる。
【００７５】
以上の処理が行われることで、登録は警察官の活動する現場からでも可能であり、顔データベース５７への登録が迅速化できる。これによって行方不明者等の捜索に、後述する照会処理の効果をより有効に発現できるようになる。
【００７６】
５．撮像装置の画像撮像及び照会情報送信処理
以下、撮像装置１と照会装置５０において顔データベース５７を用いて人物照会を行うための処理を説明していく。
まず図１１〜図１６で、撮像装置１が照会装置５０に対して照会情報を送信するまでの処理を説明する。
図１１の処理は、警察官が撮像装置１を装着してパトロールを行うときなどに、例えば一定時間間隔で繰り返し自動的に行われるものである。例えば撮像装置１の動作が自動照会モードなどとされることで、図１１の処理（及び後述する図１９の処理）が実行される。
【００７７】
一定時間毎（例えば１秒〜数秒間隔）で、ステップＦ４０１の撮像画像データ取込が行われる。これは、カメラユニット２で撮像され、撮像／音声信号処理部３１ａ又は３１ｂで処理された撮像画像データとしての或る１フレームの画像データが、静止画データとして一定時間毎に画像解析部３２及び記録再生処理部３３に取り込まれる処理である。
【００７８】
撮像画像データが取り込まれることに応じて、画像解析部３２は、コントローラ４０の制御に基づいて、ステップＦ４０２の処理を行う。
ステップＦ４０２では、画像解析部３２では取り込まれた撮像画像データを解析し、処理対象のオブジェクトとして顔画像を抽出する。
例えばパトロール中などに一定時間間隔で逐次自動的に取り込まれる撮像画像データとしては多様な画像内容のものがある。例えば図１２（ａ）のように多数の人物の顔が映っている画像、図１２（ｂ）のように一人の人物の顔が映っている画像、図１２（ｃ）のように人物が写っていない画像など、多様である。
そこで、画像解析部３２では、まず撮像画像データにおいて顔画像が含まれているか否かを判断する。例えば図１２（ｃ）のような撮像画像データが取り込まれ、画像解析部３２が画像データを解析して顔画像が含まれていないと判断した場合は、ステップＦ４０３で処理対象のオブジェクト無しとして、その情報をコントローラ４０に伝える。コントローラ４０は、この時点で、撮像画像データに対する処理を終えさせ、処理をステップＦ４０１に戻す。そして一定時間後に再び撮像画像データの取込処理を実行させる。
【００７９】
取り込まれた撮像画像データが図１２（ａ）（ｂ）のような画像であって、１又は複数の顔画像が抽出された場合は、処理はステップＦ４０３からＦ４０４に進み、画像解析部３２に顔特徴データＦａ、Ｆｂの生成を行う。つまり画像解析部３２は、抽出した顔画像から、目の間隔の距離、目の中心と鼻の距離、目の中心と口の距離を判別して、これらの相対位置情報として顔特徴データＦａ、Ｆｂを求める。
この場合、抽出された顔画像毎に顔特徴データＦａ、Ｆｂを生成する。例えば図１２（ａ）の場合、５人の人物の顔が映っているため、各人物に対応してそれぞれの顔特徴データＦａ、Ｆｂが生成されることになる。
【００８０】
ステップＦ４０５では、画像解析部３２での顔画像抽出に応じて、ＩＤ生成部４５でＰＩＤ、ＦＩＤが生成される。
ＩＤ生成部４５で生成されたＰＩＤ、ＦＩＤは送信データ生成部４２及び記録再生処理部３３に供給される。
【００８１】
ＰＩＤ（画像ＩＤ）は、例えば顔画像を含む撮像画像データに対して固有に付与されるものであり、画像解析部３２が顔画像を含むと判断した撮像画像データが発生するたびに新たなＩＤコードが形成される。例えば図１２（ａ）の撮像画像データが処理された場合、図１３（ａ）のように、この撮像画像データに対応するＰＩＤとして「ＰＩＤ００１」という画像識別情報が発生される。また例えば別の時点で図１２（ｂ）の撮像画像データが処理された場合、図１３（ｂ）のように、この撮像画像データに対応するＰＩＤとして「ＰＩＤ００２」という画像識別情報が発生される。
実際のＰＩＤコードとしては、例えば撮像装置１に固有に与えられているシリアルナンバと、撮像時刻としての「年月日・時・分・秒・フレーム」などの値が合成されることなどで、ユニークなコードとして形成されればよい。
なお、ＰＩＤは後述するように照会情報に含まれて照会装置５０に送信されるため、撮像装置１のシリアルナンバ等、撮像装置１自体の識別情報を含むようにすれば、ＰＩＤは、撮像画像データを特定する識別情報であるだけでなく、撮像した撮像装置１（照会装置５０から見て照会情報送信元の撮像装置）を特定する情報としても使用できる。
【００８２】
ＦＩＤ（顔ＩＤ）は、画像解析部３２において１つの撮像画像データ内で抽出された顔画像毎に付与される。
例えば図１３（ａ）には、撮像画像データ内で抽出された顔画像部分に○を付しているが、これらの顔画像毎に、「ＦＩＤ００１」〜「ＦＩＤ００５」が付与される。また図１３（ｂ）のように、撮像画像データ内で一人の顔画像が抽出された場合、その顔画像に「ＦＩＤ００１」が付与される。
ＦＩＤは、実際には画像内の○で示す顔部分の中心画素座標や○の半径、つまり顔画像として抽出した範囲の情報などに対応してＦＩＤが付与されればよい。
【００８３】
ステップＦ４０６ではコントローラ４０は位置検出部３６で検出される現在位置情報としての緯度・経度の情報を取り込む。これは処理中の撮像画像データの撮像場所を示す位置情報となる。
ステップＦ４０７では、コントローラ４０は送信データ生成部４２に指示して照会情報を生成させる。送信データ生成部４２にはコントローラ４０から位置情報が供給されるとともに、画像解析部３２で生成された顔特徴データＦａ、Ｆｂと、ＩＤ生成部４５で生成されたＰＩＤ、ＦＩＤが供給される。
送信データ生成部４２は、これらの情報を用いて例えば図１４のような照会情報としてのデータパケットを生成する。
図１４に示すように照会情報は、処理中の撮像画像データに与えられたＰＩＤと、位置検出部３６で検出した位置情報（緯度・経度）が含まれる。またオブジェクト数として、撮像画像データで抽出された顔画像の数が示され、続いてＦＩＤと対応された顔特徴データＦａ、Ｆｂが含まれる。例えば図１３（ａ）のように５人の顔画像が含まれた撮像画像データの場合、オブジェクト数＝５となり、ＦＩＤ００１の顔特徴データＦａ、Ｆｂから、ＦＩＤ００５の顔特徴データＦａ、Ｆｂまでが照会情報に含まれることになる。また図１３（ｂ）のように１人の顔画像が含まれた撮像画像データの場合、オブジェクト数＝１となり、ＦＩＤ００１の顔特徴データＦａ、Ｆｂが照会情報に含まれる。
【００８４】
このような照会情報が送信データ生成部４２で生成されたら、ステップＦ４０８でコントローラ４０の制御により通信部３４から照会情報の送信が行われる。つまり図１４のような内容の照会情報が照会装置５０に送信される。
【００８５】
次にステップＦ４０９では、コントローラ４０は記録再生処理部３３に指示して、撮像画像データをファイル化して記録メディア（メモリカード５）に記録させる。
記録再生処理部３３では、処理中の撮像画像データに対して必要な圧縮処理やメモリカード５の記録フォーマットに応じたエンコード処理を行う。
またＩＤ生成部４５からＰＩＤ、ＦＩＤを取得する。ＦＩＤについては、画像内でＦＩＤが付加された顔画像部分を対応づけるＦＩＤ対応情報も取得する。
これらにファイル属性情報（ヘッダ情報）を付加して１つの画像ファイルを生成し、メモリカード５に記録する。
コントローラ４０は記録再生処理部３３での記録処理を指示した後、ステップＦ４０１に戻り、再び所定時間後にステップＦ４０１からの処理の制御を開始する。
【００８６】
ステップＦ４０９の動作により、１つの画像ファイルＦＬが記録されるが、図１１の処理が繰り返されることで、メモリカード５には、例えば図１５のような形態で画像ファイルＦＬ１、ＦＬ２・・・が記録されていくことになる。
１つの画像ファイルＦＬは、例えば図示するように、ＰＩＤ、属性情報、ＦＩＤ対応情報、画像データを含むものとされる。或いはこれらの情報がリンクされた管理状態で各情報が記録される。
画像データは、圧縮等のエンコードが行われた撮像画像データである。
ＰＩＤは画像ファイルＦＬのファイル名を兼ねても良い。
属性情報には、ファイル名、ファイルサイズ、画像形式、撮像日時、各情報のオフセットアドレスやリンク情報などが含まれる。ステップＦ４０６で取得した位置情報を含むようにしてもよい。
【００８７】
ＦＩＤ対応情報は、例えば図１６のような情報である。
上述したようにＦＩＤは、画像解析部３２において１つの撮像画像データ内で抽出された顔画像毎に付与されるものであり、図１６（ａ）のように○を付した画像部分に対して個別に付与される。
本例では、ＦＩＤを、各顔画像の撮像画像データ内での画素座標位置として管理しておく必要がある。このためには例えば図１６（ａ）の各○の領域を、各ＦＩＤに対応して管理しておけばよい。図１６（ａ）は、撮像画像データをｘｙ画素座標として捉えた場合において、ｘ、ｙ座標値で表される各顔部分としての○の中心座標をＣ１、Ｃ２、Ｃ３，Ｃ４，Ｃ５として示している。またその中心からの○の範囲、つまり抽出した顔部分の領域範囲を半径ｒ１、ｒ２，ｒ３，ｒ４，ｒ５で示している。
ＦＩＤ対応情報は、図１６（ｂ）のように、各ＦＩＤについて、中心座標と半径ｒの値を対応させたものとすればよい。
このＦＩＤ対応情報を記録しておけば、後にＰＩＤ００１の画像において、例えば「ＦＩＤ００２」の顔はどれであるかを示すことが可能となる。
このため上述のようにＩＤ生成部４５では、画像解析部３２の顔抽出結果から、抽出した領域の中心座標や画素範囲に応じた、このようなＦＩＤ対応情報を生成するようにし、記録再生処理部３３では、このＦＩＤ対応情報を記録するようにすればよい。
なお、ＦＩＤ対応情報の内容は中心座標や半径に限られず、顔画像の抽出処理や抽出範囲などの処理方式に応じて設定されればよい。
【００８８】
以上のように図１１の処理が撮像装置１で実行されることで、撮像装置１からは逐次自動的に照会装置５０に対して照会情報が送信されることになる。即ち警察官がパトロール中に出会ったことで自動的に撮像される多数の人物についての顔特徴データＦａ、Ｆｂが、逐次、照会装置５０に送信され、また、その画像が記録される。
【００８９】
６．照会装置の照会処理
上記のように撮像装置１は逐次照会情報を照会装置５０に送信するが、照会装置５０では、照会情報を受信することに応じて図１７の照会処理を行う。
ステップＦ５０１は、通信部１０３で照会情報を受信し、受信データ処理部５１がその照会情報を取り込む処理を示している。受信データ処理部５１は、図１４で説明した照会情報を取り込んだら、その照会情報に含まれているＦＩＤと顔特徴データＦａ、Ｆｂを照会処理部５４に受け渡す。
【００９０】
照会処理部５４は、１又は複数のＦＩＤと顔特徴データＦａ、Ｆｂについて、ステップＦ５０２〜Ｆ５０６の処理を行う。
まずステップＦ５０２で１つのＦＩＤを選択する。そしてステップＦ５０３で、選択したＦＩＤに対応づけられている顔特徴データＦａ、Ｆｂを用いて、顔データベース５７の検索処理を行う。顔データベース５７には図８のように、登録している各人物について顔特徴データＦａ、Ｆｂを記録しており、ここでの検索処理としては、顔特徴データＦａ、Ｆｂの両方が一致する人物（登録番号）を検索するものとなる。
或るＦＩＤに対応づけられた顔特徴データＦａ、Ｆｂと一致する顔特徴データＦａ、Ｆｂで顔データベース５７に登録されている人物が存在したら、ステップＦ５０４からＦ５０５に進み、その人物（登録番号）に対応して顔データベース５７に登録されている登録情報、即ち登録種別や、氏名、付加情報等の人物情報を読み出し、ＦＩＤに対応して記憶する。そしてステップＦ５０６に進む。
検索結果として該当無しとされれば、ステップＦ５０５を行わずにステップＦ５０６に進む。
【００９１】
ステップＦ５０６では、照会情報に含まれているＦＩＤの内で、まだ未検索のＦＩＤがあるか否かを判別し、未検索のＦＩＤがあれば、ステップＦ５０２に戻る。そして未検索のＦＩＤの１つを選択し、ステップＦ５０３で同様の検索処理を行う。
受信した照会情報に含まれていた全てのＦＩＤ（ＦＩＤに対応されている顔特徴データＦａ、Ｆｂ）についての検索処理を終えた時点で、ステップＦ５０６からＦ５０７に進む。もし、全てのＦＩＤについて検索結果が該当無しとなった場合は、ステップＦ５０７から照会処理を終える。
【００９２】
一方、１つでも該当があり、検索結果としてステップＦ５０５でＦＩＤに対応して登録情報が保持されている場合は、ステップＦ５０８に進む。
受信した照会情報には、図１４に示したように位置情報が含まれている。この位置情報は送信データ生成部５５に受け渡される。送信データ生成部５５はステップＦ５０８で、位置情報における緯度・経度の情報に基づいて地図データベース５８を検索し、その位置情報についての詳細な情報（詳細位置情報）を取得する。詳細位置情報とは、例えば当該緯度・経度の地点を含む地図画像データであったり、その緯度・経度の場所を説明するテキストデータなどである。例えば「××駅前の○○百貨店前」「△△町３丁目○×公園」などのテキストデータが考えられる。
そしてこの詳細位置情報は、今回処理している照会情報について、撮像装置１側で画像撮像を行った場所をわかりやすく示す情報である。
【００９３】
次に送信データ生成部４２はステップＦ５０９で、上記詳細位置情報と、ステップＦ５０５で記憶した検索結果を用いて、照会結果情報を生成する。
照会結果情報は例えば図１８（ａ）のような内容のパケットデータとする。
まず、紹介対象となったＰＩＤ、つまり今回処理した照会情報に含まれているＰＩＤを含む。
また、地図データベース５８を参照して得た詳細位置情報を含む。
また検索結果として、登録該当者のあったＦＩＤの数が示され、続いて検索結果として登録該当者があったＦＩＤとその登録内容（登録種別や氏名等の人物情報）が含まれるようにする。
【００９４】
このような照会結果情報の具体例を図１８（ｂ）に示している。
例えば撮像装置１からは、図１２（ａ）、図１３（ａ）に示した撮像画像データ（ＰＩＤ００１）に基づいて生成された照会情報が送信されてきたとする。
そして照会装置５０では図１７のステップＦ５０６までの処理で、ＦＩＤ００１〜ＦＩＤ００５までの各顔特徴データＦａ、Ｆｂに基づく検索を行った結果、ＦＩＤ００５の人物のみが顔特徴データＦａ、Ｆｂが一致する人物として顔データベース５７に登録されていたとする。
この場合、ステップＦ５０５では、ＦＩＤ００５に対応して、顔データベース５７に登録されている内容を保持する。例えば登録種別としての「行方不明」、人物情報としての「Ａ崎Ｂ子」「女性」「３０才」などの情報が顔データベース５７から読み出される。
このような場合の照会結果情報は、図１８（ｂ）のように、まずＰＩＤとして「ＰＩＤ００１」として処理対象の撮像画像に対応する識別情報が付加される。
また詳細位置情報が付加される。そして、登録該当者のあったＦＩＤの数として「１」が示され、続いて検索結果として登録該当者があったＦＩＤ「ＦＩＤ００５」とその登録内容「行方不明、Ａ崎Ｂ子、女性、３０才」というような情報を含むようにされる。
ステップＦ５０９で以上のような照会結果情報を生成したら、送信データ生成部５５は、ステップＦ５１０でそれを通信部１０３から撮像装置１に送信させる。
【００９５】
照会装置５０では、撮像装置１からの照会情報が受信されるたびに以上の図１７の処理を行う。
従って、もし撮像装置１で撮像した人物のうちに、顔データベース５７に登録されている人物が存在したら、その照会結果としての照会結果情報が照会装置５０から撮像装置１に送信されることになる。
【００９６】
７．撮像装置の照会結果情報受信時の処理
照会装置５０から照会結果情報が送信されたきたときの撮像装置１の処理を図１９に示す。
ステップＦ６０１は、通信部３４で照会装置５０からの照会結果情報を受信し、受信データ処理部４３がその照会結果情報を取り込む処理を示している。
ステップＦ６０１として照会結果情報が受信され、その情報内容を受信データ処理部４３から受け取ったら、コントローラ４０はステップＦ６０２で、その照会結果情報に含まれているＰＩＤ（図１８の対象ＰＩＤ）に基づいて、記録再生処理部３３に、メモリカード５からの画像ファイルの読み出しを指示する。
メモリカード５には図１５のように画像ファイルＦＬが記録されており、ＰＩＤによって、対象の画像ファイルＦＬを指定して読み出すことができる。即ち受信した照会結果情報が対応する、元々の画像データを読み出すものである。例えば図１８（ｂ）のような照会結果情報を受信した場合、ＰＩＤ「ＰＩＤ００１」に基づいて、図１２（ａ）の撮像画像データを含む画像ファイルＦＬを読み出すことになる。
【００９７】
コントローラ４０は次にステップＦ６０３で、読み出した画像データ上での、対象人物を判定する。この判定は照会結果情報に含まれているＦＩＤと、読み出した画像ファイルＦＬにおけるＦＩＤ対応情報を用いて行う。
例えば図１８（ｂ）の照会結果情報の場合、「ＦＩＤ００５」が該当人物として記されている。また読み出した画像ファイルＦＬには、図１６（ｂ）のようなＦＩＤ対応情報が含まれている。このＦＩＤ対応情報を参照すると、「ＦＩＤ００５」の人物の画像は、画像データのｘｙ座標において中心座標Ｃ５で、半径ｒ５の円の領域に写っている人物であることがわかる。
【００９８】
次にコントローラ４０はステップＦ６０４で、位置検出部３６から現在の位置情報としての緯度・経度の情報を取得し、対象としているＰＩＤ００１の画像データを撮像した場所と現在の場所との相対位置を算出する。相対位置とは、撮像した場所が、現在の場所から見てどの方向にどれくらいの距離であるかの情報であり、これは現在の緯度・経度と、照会結果情報の詳細位置情報に含まれている緯度・経度とを比較することで算出できる。またもし画像ファイルＦＬの記録時に、その撮像時の位置情報（緯度・経度）も属性情報などに含めて記録していれば、その緯度・経度と、現在の緯度・経度を比較しても良い。
【００９９】
ステップＦ６０５では、コントローラ４０は、受信した照会結果情報の内容や、照会結果情報に基づいてステップＦ６０２，Ｆ６０３，Ｆ６０４で得た情報を表示データ生成部４４に受け渡し、表示データを生成させる。
即ち、照会結果情報に含まれる詳細位置情報、人物情報、登録種別の情報、メモリカード５から読み出した画像データ、画像上での対象人物の顔画像の範囲の情報、相対位置情報などを用いた表示データを生成させる。
【０１００】
ステップＦ６０６では、コントローラ４０は撮像装置１のユーザー（警察官）に、照会結果情報を照会装置５０から受信したことの告知処理を行う。つまり表示部１１で照会結果を確認することを促す告知処理である。例えば音声出力部１４から受信告知音を出力させたり、或いは非音声通知部３５としてのバイブレータによる振動によって、ユーザーに受信告知を行う。
このときコントローラ４０は照会結果情報に含まれる登録種別に応じて、告知の態様を選択するようにするとよい。
例えば照会結果として通知される人物は、行方不明者の場合もあれば、指名手配者の場合もある。撮像装置１を装着した警察官は、照会結果情報を受信したときに、その照会結果情報にかかる撮像を行った場所とほぼ同じ場所にいる場合もある。特に照会装置５０での処理が迅速であるほど、照会結果情報を受信したときに、その警察官の近辺に実際に該当の人物が居ることも考えられる。
このようなことを考え、指名手配者などの逃走のおそれが強い人物については、音声による受信告知は不適切となることも予測される。
そこで、例えばコントローラ４０は、照会結果情報に、登録種別が指名手配などの逃走のおそれのある人物が含まれていたときは、非音声通知部３５で振動により受信告知を行い、それ以外のときには音声出力部１４から受信音を出力するようにすることが好適である。
【０１０１】
ステップＦ６０７では、ステップＦ６０５で照会結果情報に基づいて生成した表示データを表示部１１で表示させ、ユーザーである警察官に照会結果を提示する。図２０は表示例を示している。
図２０（ａ）は、メモリカード５から読み出したＰＩＤ００１の写真画像の画像表示７０と、その画像表示上で特定の人物を○で示す対象人物表示７１と、ステップＦ６０４で算出した相対位置として「北東５０ｍ」というような相対位置表示７２と、照会結果情報に含まれている情報として「行方不明、Ａ崎Ｂ子、女性、３０才」というような照会内容表示７３を行っている例である。もちろん詳細位置情報として、撮像位置を示すテキストデータが含まれていれば、それを表示に加えるようにもできる。
また図２０（ｂ）は、照会結果情報の詳細位置情報として地図画像が含まれていた場合に、その地図画像表示７４と、地図画像上で、その対象者を撮像した位置を示す対象者撮像位置表示と、現在位置表示７６を表示出力している例である。
図２０（ａ）（ｂ）の表示状態は、ユーザー操作に応じて切り換えられるようにすればよい。
もちろん、表示部１１の表示面積が広く、写真画像と地図画像を同時に表示できるのであれば、１画面で図２０（ａ）（ｂ）の表示内容をまとめて表示しても良い。
また、１つの画像内における複数の人物が捜索対象者として検索されて、その照会結果情報が送信されてきたときは、各人物の人物情報を同時に表示しても良いし、例えば対象人物表示７１と照会内容表示７３が、各人物毎に切換表示されるようにしても良い。
【０１０２】
これらのような表示を確認することで、警察官は、パトロール中に遭遇した捜索対象の人物を知ることができる。しかも、その警察官は、その時点で捜索対象人物の近辺に居ることになる。従って、表示内容を確認したうえで該当者を捜し、行方不明者の保護や指名手配者の逮捕など、即座に適切な行動をとることができる。
【０１０３】
８．実施の形態の効果及び変形例
以上のように実施の形態の照会システムでは、例えば警察官等がパトロール中などに撮像装置１を装着しており、撮像装置１は例えば一定時間毎などとして撮像を行っていく。そして撮像した画像データに人の顔が映っている場合には、その顔画像から顔特徴データＦａ、Ｆｂを生成し、その顔特徴データを含む照会情報を照会装置５０に送信する。
照会装置５０側では、照会情報を受信した場合、照会情報に含まれている顔特徴データＦａ、Ｆｂを用いて顔データベース５７を検索する。そして検索された人物情報を含む照会結果情報を生成し、撮像装置１に送信する。撮像装置１では、照会結果情報を受信することで、それを所持する警察官等に、図２０の例のように照会結果の内容、例えば人物情報や顔画像、位置情報などを表示する。
【０１０４】
これにより、警察官等が、目的とする人の顔の記憶が曖昧であったり、写真を所持していなかったり、或いは該当人物か否かの判断が曖昧であったり、さらには人の探索を意識していなかったり、捜索対象者に気づかなかったりしても、パトロール中などに近辺に居る捜索対象人物の情報を得ることができる。
従って警察官等は即座に、上述のように行方不明者の保護や指名手配者の逮捕などの適切な行動をとることができる。
【０１０５】
また、警察官が捜索対象人物の顔の記憶が曖昧であっても問題ないことや、パトロール中に写真を持ち歩く必要はないこと、さらには行方不明者や指名手配者の探索のみに集中することはないことで、負担が減る。パトロール中には、人の探索のみでなく、治安維持のための街の様子の観察や、人の案内、手助け等の多様な行動を伴うことになるが、それらを行いながらも、十分な人物捜索ができることになる。
【０１０６】
また本例のシステム動作においては、撮像装置１と照会装置５０の間の通信データには画像データ自体は含まれない。つまり通信データとしての照会情報や照会結果情報のデータサイズは、画像データの通信を行う場合に比べて遙かに小さくできる。このためネットワーク９０の伝送能力等が低くても、通信負荷は少なく、短時間で通信を行うことができる。
さらに、照会装置５０側では、顔特徴データＦａ、Ｆｂに基づく自動検索を行うため、照会処理は迅速かつ正確である。特に人が写真等を照らし合わせて目で見て判断することに比べて、照会処理は著しく短時間化できる。
通信時間や照会処理時間が迅速であることは、撮像装置１で撮像してからその結果として捜索対象人物の情報を警察官が知るまでの時間が短いということになり、つまり警察官は、捜索対象人物の近辺にいるときに、その人物の情報を得ることができる。これは警察官の適切な行動のためには非常に好適となる。
【０１０７】
また本例の人物照会は、写真を照らし合わせたり記憶に頼ったりして人が判断するものではない。特に照会処理に用いる顔特徴データとされる例えば眼、鼻、口等の顔の構成要素の相対位置情報は、個人毎に特有であって、髪型や眼鏡等の装着物によって変化するものではなく、しかも加齢によっても変化しない。
従って対象人物の照会結果はかなり正確なものとすることができる。もちろん顔画像自体を伝送して比較する場合のような、画質の問題や要望の変化による判断の困難性なども生じない。
【０１０８】
また照会装置５０では照会結果情報に人物情報や登録種別を含むようにし、撮像装置１では、照会結果情報に含まれている登録情報や人物情報を表示するようにしている。例えば氏名、年齢、性別などの人物情報や。「行方不明」などの登録種別である。
人物情報は、現場で警察官が対象人物を捜したり、職務質問をしたりする場合に好適な情報となる。また行方不明、指名手配、参考人などとしての登録種別が表示されることで、警察官はその人物を発見したときに適切な対応を取ることができる。
登録種別については、さらに詳細に、例えば犯罪毎に分けて、凶悪犯、窃盗犯、万引き常習者・・・などで分類しておき、その情報を表示するようにすれば、警察官の対応に好適である。
【０１０９】
また撮像装置１では、照会情報を送信するに至った撮像画像データを、ＰＩＤとともに記録再生処理部３３でメモリカード５に記録する。またＰＩＤは、照会情報や照会結果情報にも含まれているようにしている。
これにより、撮像装置１では照会結果情報を受信したときに、ＰＩＤによって対象の人物が写っている画像データをメモリカード５から読み出すことができ、図２０（ａ）のように表示できる。
さらにはＦＩＤを用いて画像内の人物を特定し、図２０（ａ）のように捜索対象人物を明示した状態で画像表示を行うことができる。
これらにより警察官は、撮像時の対象人物の顔や姿、さらには背景から推測できる場所、周囲の人物などを確認でき、捜索に非常に有用な情報となる。
【０１１０】
また相対位置情報を表示することや、地図画像やテキストデータによる詳細位置情報を表示することも、警察官が現在位置から撮像位置を推定することや、捜索対象人物の行動を予測することなどができ、適切な行動をとるための有用な情報表示となる。
照会結果情報の受信告知については、上述のように登録種別に応じて音声やバイブレーションを切り換えることで、周囲の対象人物を考慮した告知ができる。
【０１１１】
また本例の撮像装置１では図１０で説明したように、顔データベース５７への登録情報を送信できるものとしたが、これによって現場の警察官が即座に行方不明者等の登録を行うことができ、本システムを用いた捜索を利用できる状態とすることができる。
【０１１２】
以上の実施の形態の構成及び処理は、一例であり、本発明としては多様な変形例が考えられる。
実施の形態では撮像装置１と照会装置５０の間の通信による動作を述べたが、撮像装置１は多数の警察官等がそれぞれ装着して同様の通信を行うものである。ここで、照会装置５０は、或る撮像装置１からの照会情報に応じて捜索対象人物を検索した場合、その照会情報送信元の撮像装置１に、上記のように照会結果情報を送信するだけでなく、近辺の警察官、例えば該当地区を担当する複数の警察官の撮像装置１や、実際に該当場所の近辺にいる他の警察官の撮像装置１に照会結果情報や、応援要請を送信するようにしても良い。
例えば各撮像装置１からは位置情報を含む照会情報が逐次送信されてくるため、照会装置５０側では、各撮像装置１を所持する警察官の現在位置を確認できる。このため、現在近くにいる警察官に照会結果情報や応援要請を送信することも可能である。
【０１１３】
顔データベース５７への人物の登録は、撮像装置１からの登録情報の送信で可能としたが、例えば撮像装置１で生成した登録情報をメモリカード５に記録し、そのメモリカード５を照会装置５０に受け渡して登録情報を読み込ませ、登録を行うようにすることもできる。さらには、撮像装置１で生成した登録情報を、メモリカード５や外部インターフェース３７を用いて他の情報処理装置、例えば派出所のパーソナルコンピュータに転送し、そのパーソナルコンピュータ等からのネットワーク通信で登録情報を照会装置５０に送信することも想定できる。
【０１１４】
顔データベース５７には、撮像画像データそのものを登録しても良い。特には撮像装置１で撮像した画像データを、メモリカード５の受け渡しやパーソナルコンピュータ等による通信、或いは撮像装置１からの通信により照会装置５０に受け渡し、顔データベース５７に登録しても良い。
例えば、パトロール中の警察官が照会結果情報を受け取っても、対象人物を見つけられない場合もある。そのような場合、撮像装置１（メモリカード５）に記録している該当の画像ファイルを照会装置５０に受け渡して顔データベース５７に登録しておく。画像ファイルでは、撮像画像として、その撮像時点の捜索対象者の外観や様子が残されている。また撮像時点で、特定の位置にいたことの情報もある。これらの情報はその後の捜索に役立つものとなるため、顔データベース５７に撮像装置１で記録した画像ファイルを登録することが有用である。
【０１１５】
撮像装置１の照会情報の送信間隔、即ち図１１の処理の実行間隔は、任意に設定可能としてもよいし、操作で切り換えられるようにしてもよい。また衝撃センサ、音声センサなどで緊急事態を検出できるようにし、緊急事態が発生したときは、送信間隔を短くすることなども考えられる。
さらには地域毎に実行間隔を設定しておき、人の多い場所、治安の悪い場所などに居るときには、自動的に撮像及び照会情報の送信間隔が短くなるような処理も考えられる。
【０１１６】
また照会装置５０での図１７の処理例では、検索結果として該当者が無かった場合は、照会結果情報を送信しないで処理を終えている。これは、例えば多数の撮像装置１から逐次照会情報が送られてくる照会システムとしての通信負荷の低減や照会装置５０の送信処理付加の低減につながり、好適である。
ただし別の処理例として、該当無しの場合も、その通知を撮像装置１に対して実行しても良い。撮像装置１側では、該当無しの通知があった場合は、対応してメモリカード５に記憶されている画像ファイル（該当ＰＩＤの画像ファイル）を削除して、メモリカード５の容量を確保するような処理を行っても良い。
【０１１７】
また、実施の形態では、照会システムを警備・警察用途として述べたが、それ以外で利用されるシステムとしても適用できる。
例えば公共施設、遊園地などでの迷子の捜索のためなどに適用できる。
【０１１８】
本発明のプログラムは、撮像装置１のコントローラ４０に図１１の照会情報送信処理及び図１９の照会結果情報受信処理を実行させるプログラムとして実現できる。また本発明のプログラムは照会装置５０のＣＰＵ１０１に図１７の照会処理を実行させるプログラムとして実現できる。
【０１１９】
これらのプログラムは、コンピュータシステム等の情報処理装置における記録媒体としてのシステムＨＤＤや、ＣＰＵを有するマイクロコンピュータ内のＲＯＭ等に予め記録しておくことができる。
あるいはまた、プログラムは、フレキシブルディスク、ＣＤ−ＲＯＭ(Compact Disc Read Only Memory)、ＭＯ(Magnet optical)ディスク、ＤＶＤ(Digital Versatile Disc)、磁気ディスク、半導体メモリなどのリムーバブル記録媒体に、一時的あるいは永続的に格納（記録）しておくことができる。このようなリムーバブル記録媒体は、いわゆるパッケージソフトウェアとして提供することができる。例えばＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ等により提供されることで、コンピュータシステムにインストールできる。
またこのプログラムは、リムーバブル記録媒体からインストールする他、ダウンロードサイトから、ＬＡＮ(Local Area Network)、インターネットなどのネットワークを介してダウンロードすることもできる。
【図面の簡単な説明】
【０１２０】
【図１】本発明の実施の形態の照会システムの説明図である。
【図２】実施の形態の撮像装置の外観の説明図である。
【図３】実施の形態の撮像装置の使用態様の説明図である。
【図４】実施の形態の撮像装置の撮像視野角の説明図である。
【図５】実施の形態の撮像装置の構成のブロック図である。
【図６】実施の形態の照会装置を実現するコンピュータシステムのブロック図である。
【図７】実施の形態の照会装置の機能構成のブロック図である。
【図８】実施の形態の顔データベースの説明図である。
【図９】実施の形態の登録処理Ｉのフローチャートである。
【図１０】実施の形態の登録処理IIのフローチャートである。
【図１１】実施の形態の撮像装置の照会情報送信処理のフローチャートである。
【図１２】実施の形態の撮像装置の撮像画像の説明図である。
【図１３】実施の形態の撮像画像からの顔抽出の説明図である。
【図１４】実施の形態の照会情報の構造の説明図である。
【図１５】実施の形態の画像ファイル記録の説明図である。
【図１６】実施の形態のＦＩＤ対応情報の説明図である。
【図１７】実施の形態の照会装置の照会処理のフローチャートである。
【図１８】実施の形態の照会結果情報の構造の説明図である。
【図１９】実施の形態の撮像装置の照会結果情報受信処理のフローチャートである。
【図２０】実施の形態の照会結果情報に基づく表示の説明図である。
【符号の説明】
【０１２１】
１  撮像装置、２  カメラユニット、３  コントロールユニット、４  ケーブル、５  メモリカード、１１  表示部、１２  アンテナ、１３  メモリカードスロット、１４  音声出力部、１５  操作キー、２１ａ  前方カメラ部、２１ｂ  後方カメラ部、２２ａ  前方マイクロフォン、２２ｂ  後方マイクロフォン、３１ａ，３１ｂ  撮像／音声信号処理部、３２  画像解析部、３３  記録再生処理部、３４  通信部、３５  非音声通知部、３６  位置検出部、４０  コントローラ、４１  メモリ部、４２  送信データ生成部、４３  受信データ処理部、４４  表示データ生成部、５０  照会装置、５１  受信データ処理部、５２  登録データ生成部、５３  登録処理部、５４  照会処理部、５５  送信データ生成部、９０  ネットワーク、１０１  ＣＰＵ、１０３  通信部
【図１】
2007219713.tif 000003
【図２】
2007219713.tif 000004
【図３】
2007219713.tif 000005
【図４】
2007219713.tif 000006
【図５】
2007219713.tif 000007
【図６】
2007219713.tif 000008
【図７】
2007219713.tif 000009
【図８】
2007219713.tif 000010
【図９】
2007219713.tif 000011
【図１０】
2007219713.tif 000012
【図１１】
2007219713.tif 000013
【図１２】
2007219713.tif 000014
【図１３】
2007219713.tif 000015
【図１４】
2007219713.tif 000016
【図１５】
2007219713.tif 000017
【図１６】
2007219713.tif 000018
【図１７】
2007219713.tif 000019
【図１８】
2007219713.tif 000020
【図１９】
2007219713.tif 000021
【図２０】
2007219713.tif 000022