(57)【要約】【課題】適正な職務質問を行うためのヒントを提供する。【解決手段】情報処理装置であって、質問者が質問した際に取得された質問対象者の画像情報から特徴量を抽出する抽出手段と、前記質問者が質問した際に取得された音声情報および前記画像情報を、前記特徴量に対応付けて質問データとして記録する記録手段と、前記抽出手段によって抽出された特徴量を用いて前記記録手段内のデータを検索する検索手段と、前記検索手段によって導き出した前記音声情報および前記画像情報の少なくともいずれか一方を前記質問者が携帯する情報処理端末に提供する提供手段と、を備えた。【選択図】  図１
2017058924.tif 000002
【特許請求の範囲】
【請求項１】
質問者が質問した際に取得された質問対象者の画像情報から特徴量を抽出する抽出手段と、
前記質問者が質問した際に取得された音声情報および前記画像情報を、前記特徴量に対応付けて質問データとして記録する記録手段と、
前記抽出手段によって抽出された特徴量を用いて前記記録手段内のデータを検索する検索手段と、
前記検索手段によって導き出した前記音声情報および前記画像情報の少なくともいずれか一方を前記質問者が携帯する情報処理端末に提供する提供手段と、
を備えた情報処理装置。
【請求項２】
前記記録手段は、前記質問データに、さらに質問者識別情報を対応付けて記録し、
前記検索手段は、前記特徴量に基づいて、前記質問者識別情報を検索し、
前記提供手段は、前記質問者識別情報に対応する情報処理端末に対し、前記音声情報および前記画像情報の少なくともいずれか一方を提供する、
請求項１に記載の情報処理装置。
【請求項３】
前記提供手段は、前記質問者識別情報に対応する情報処理端末に対し、現在の質問者の質問者識別情報に対応する情報処理端末とのセッションを促す表示を提供する、
請求項２に記載の情報処理装置。
【請求項４】
前記提供手段は、前記セッションにおいて、前記質問者識別情報に対応する情報処理端末からコメント情報を受信し、前記現在の質問者の質問者識別情報に対応する情報処理端末に提供する請求項３に記載の情報処理装置。
【請求項５】
前記記録手段は、前記音声情報として、前記質問対象者に対する質問内容を記録し、
前記検索手段は、前記特徴量を用いて、前記記録手段に記録された前記質問内容を検索し、
前記提供手段は、さらに、前記検索手段による検索によって導き出した前記質問内容を前記現在の質問者の質問者識別情報に対応する情報処理端末に提供する請求項３または４に記載の情報処理装置。
【請求項６】
前記提供手段は、複数の前記質問データを前記現在の質問者の質問者識別情報に対応する情報処理端末に提供する請求項３乃至５のいずれか１項に記載の情報処理装置。
【請求項７】
前記提供手段は、現在の質問内容と、前記記録手段内の複数の前記質問内容との相違を前記現在の質問者の質問者識別情報に対応する情報処理端末に提供する請求項３乃至６のいずれか１項に記載の情報処理装置。
【請求項８】
前記提供手段は、前記質問者識別情報に対応する情報処理端末に対し、質問対象者情報および前記質問データの少なくともいずれか一方を提供する請求項２乃至７のいずれか１項に記載の情報処理装置。
【請求項９】
前記検索手段は、現在の時刻からの遡行時間および現在の位置からの離間距離の少なくともいずれか一方に基づいて、前記記録手段に記録された前記音声情報および前記画像情報の少なくともいずれか一方を検索する検索範囲を設定する請求項１乃至８のいずれか１項に記載の情報処理装置。
【請求項１０】
質問者が質問した際に取得された質問対象者の画像情報から特徴量を抽出する抽出ステップと、
前記質問者が質問した際に取得された音声情報および前記画像情報を、前記特徴量に対応付けて質問データとして記録する記録ステップと、
前記抽出ステップにおいて抽出された特徴量を用いて前記記録ステップで記録したデータを検索する検索ステップと、
前記検索ステップにおいて導き出した前記音声情報および前記画像情報の少なくともいずれか一方を前記質問者が携帯する情報処理端末に提供する提供ステップと、
を含む情報処理方法。
【請求項１１】
質問者が質問した際に取得された質問対象者の画像情報から特徴量を抽出する抽出ステップと、
前記質問者が質問した際に取得された音声情報および前記画像情報を、前記特徴量に対応付けて質問データとして記録する記録ステップと、
前記抽出ステップにおいて抽出された特徴量を用いて前記記録ステップで記録したデータを検索する検索ステップと、
前記検索ステップにおいて導き出した前記音声情報および前記画像情報の少なくともいずれか一方を前記質問者が携帯する情報処理端末に提供する提供ステップと、
をコンピュータに実行させる情報処理プログラム。
【請求項１２】
質問者が携帯可能な情報処理端末と、請求項１乃至９のいずれか１項に記載の情報処理装置とを含む情報処理システムであって、
前記情報処理端末は、
質問対象者を撮像するカメラと、
前記質問者に閲覧させる映像を表示するディスプレイと、
前記質問者および前記質問対象者の音声を収集するマイクと、
前記質問者に対し音声を出力するスピーカと、
前記カメラを用いて取得した画像情報および前記マイクを用いて取得した音声情報を前記情報処理装置に送信するため、無線通信を行う無線通信手段と、
を備えた情報処理システム。
【請求項１３】
前記情報処理端末は、前記カメラで撮像した画像中の質問対象者の占有領域の割合が所定値以上であることを契機として、前記情報処理装置との間の通信を開始する請求項１２に記載の情報処理システム。
【請求項１４】
前記情報処理端末は、
前記カメラで撮像した画像中の前記質問対象者の占有領域の割合が所定値以上であることを契機として、
前記カメラにより新たに取得した画像情報の特徴量を用いて、前記記録手段に記録された前記音声情報および前記画像情報の少なくともいずれか一方を前記検索手段に検索させ、
前記検索手段による検索によって導き出した、前記質問対象者の前記音声情報および前記画像情報の少なくともいずれか一方を、前記提供手段から前記情報処理端末に提供させる請求項１２または１３に記載の情報処理システム。
【請求項１５】
質問者が携帯可能な情報処理端末とサーバとを含む情報処理システムであって、
前記情報処理端末は、
質問対象者を撮像するカメラと、
前記質問者に閲覧させる映像を表示するディスプレイと、
前記質問者および前記質問対象者の音声を収集するマイクと、
前記質問者に対し音声を出力するスピーカと、
前記カメラを用いて取得した画像情報および前記マイクを用いて取得した音声情報を前記サーバに送信するため、無線通信を行う無線通信手段と、
を備え、
前記サーバは、
前記情報処理端末から受信した前記質問対象者の画像情報から前記質問対象者の特徴量を抽出する抽出手段と、
前記情報処理端末から受信した前記音声情報および前記画像情報を、前記特徴量に対応付けて過去の質問データとして将来の検索のために記録する記録手段と、
前記情報処理端末からの要求時に、前記カメラにより新たに取得した画像情報の特徴量を用いて、前記記録手段に記録された前記音声情報および前記画像情報の少なくともいずれか一方を検索する検索手段と、
前記記録手段に記録された過去の前記音声情報および前記画像情報と、前記情報処理端末で新たに取得した音声情報および画像情報との相違点を検出する検出手段と、
前記検出手段で検出した前記相違点を、前記情報処理端末に提供する提供手段と、
を備えた情報処理システム。
【請求項１６】
前記検索手段は、前記カメラにより新たに取得した画像情報の特徴量を用いて、前記質問対象者に対応して記録された過去の画像情報を検索し、
前記提供手段は、検索した過去の画像情報と前記新たに取得した画像情報との相違点を提供する請求項１５に記載の情報処理システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置、情報処理方法、情報処理プログラムおよび情報処理システムに関する。
【背景技術】
【０００２】
上記技術分野において、特許文献１には、ウェアラブル端末を利用してリアルタイムで人物の認識を行う技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−２１９７１３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記文献に記載の技術では、適正な職務質問を行うためのヒントを提供することができなかった。
【０００５】
本発明の目的は、上述の課題を解決する技術を提供することにある。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明に係る情報処理装置は、
質問者が質問した際に取得された質問対象者の画像情報から特徴量を抽出する抽出手段と、
前記質問者が質問した際に取得された音声情報および前記画像情報を、前記特徴量に対応付けて質問データとして記録する記録手段と、
前記抽出手段によって抽出された特徴量を用いて前記記録手段内のデータを検索する検索手段と、
前記検索手段によって導き出した前記音声情報および前記画像情報の少なくともいずれか一方を前記質問者が携帯する情報処理端末に提供する提供手段と、
を備えた情報処理装置である。
【０００７】
上記目的を達成するため、本発明に係る情報処理方法は、
質問者が質問した際に取得された質問対象者の画像情報から特徴量を抽出する抽出ステップと、
前記質問者が質問した際に取得された音声情報および前記画像情報を、前記特徴量に対応付けて質問データとして記録する記録ステップと、
前記抽出ステップにおいて抽出された特徴量を用いて前記記録ステップで記録したデータを検索する検索ステップと、
前記検索ステップにおいて導き出した前記音声情報および前記画像情報の少なくともいずれか一方を前記質問者が携帯する情報処理端末に提供する提供ステップと、
を含む情報処理方法である。
【０００８】
上記目的を達成するため、本発明に係る情報処理プログラムは、
質問者が質問した際に取得された質問対象者の画像情報から特徴量を抽出する抽出ステップと、
前記質問者が質問した際に取得された音声情報および前記画像情報を、前記特徴量に対応付けて質問データとして記録する記録ステップと、
前記抽出ステップにおいて抽出された特徴量を用いて前記記録ステップで記録したデータを検索する検索ステップと、
前記検索ステップにおいて導き出した前記音声情報および前記画像情報の少なくともいずれか一方を前記質問者が携帯する情報処理端末に提供する提供ステップと、
をコンピュータに実行させる情報処理プログラムである。
【０００９】
上記目的を達成するため、本発明に係る情報処理システムは、
質問者が携帯可能な情報処理端末とサーバとを含む情報処理システムであって、
前記情報処理端末は、
質問対象者を撮像するカメラと、
前記質問者に閲覧させる映像を表示するディスプレイと、
前記質問者および前記質問対象者の音声を収集するマイクと、
前記質問者に対し音声を出力するスピーカと、
前記カメラを用いて取得した画像情報および前記マイクを用いて取得した音声情報を前記サーバに送信するため、無線通信を行う無線通信手段と、
を備え、
前記サーバは、
前記情報処理端末から受信した前記質問対象者の画像情報から前記質問対象者の特徴量を抽出する抽出手段と、
前記情報処理端末から受信した前記音声情報および前記画像情報を、前記特徴量に対応付けて過去の質問データとして将来の検索のために記録する記録手段と、
前記情報処理端末からの要求時に、前記カメラにより新たに取得した画像情報の特徴量を用いて、前記記録手段に記録された前記音声情報および前記画像情報の少なくともいずれか一方を検索する検索手段と、
前記記録手段に記録された過去の前記音声情報および前記画像情報と、前記情報処理端末で新たに取得した音声情報および画像情報との相違点を検出する検出手段と、
前記検出手段で検出した前記相違点を、前記情報処理端末に提供する提供手段と、
を備えた情報処理システムである。
【発明の効果】
【００１０】
本発明によれば、適正な職務質問を行うためのヒントを提供できる。
【図面の簡単な説明】
【００１１】
【図１】本発明の第１実施形態に係る情報処理装置の構成を説明するブロック図である。
【図２Ａ】本発明の第２実施形態に係る情報処理システムの動作の概要を説明する図である。
【図２Ｂ】本発明の第２実施形態に係る情報処理システムの動作の概要を説明する図である。
【図２Ｃ】本発明の第２実施形態に係る情報処理システムの動作の概要を説明する図である。
【図３】本発明の第２実施形態に係る情報処理システムの構成を説明するブロック図である。
【図４Ａ】本発明の第２実施形態に係る情報処理システムの情報処理装置の備える質問データテーブルの構成の一例を説明する図である。
【図４Ｂ】本発明の第２実施形態に係る情報処理システムの情報処理装置の備える相違判定テーブルの構成の一例を説明する図である。
【図４Ｃ】本発明の第２実施形態に係る情報処理システムの情報処理装置の備える外見判定テーブルの構成の一例を説明する図である。
【図４Ｄ】本発明の第２実施形態に係る情報処理システムの情報処理端末の備える端末データテーブルの構成の一例を説明する図である。
【図５Ａ】本発明の第２実施形態に係る情報処理システムの情報処理装置のハードウェア構成を説明するブロック図である。
【図５Ｂ】本発明の第２実施形態に係る情報処理システムの情報処理端末のハードウェア構成を説明するブロック図である。
【図６Ａ】本発明の第２実施形態に係る情報処理システムの情報処理装置の処理手順を説明するフローチャートである。
【図６Ｂ】本発明の第２実施形態に係る情報処理システムの情報処理端末の処理手順を説明するフローチャートである。
【図７】本発明の第３実施形態に係る情報処理システムの情報処理装置の構成を説明するブロック図である。
【図８】本発明の第３実施形態に係る情報処理システムの情報処理装置の備える判断テーブルの構成の一例を説明する図である。
【図９】本発明の第３実施形態に係る情報処理システムの情報処理装置のハードウェア構成を説明するブロック図である。
【図１０】本発明の第３実施形態に係る情報処理システムの情報処理装置の処理手順を説明するフローチャートである。
【図１１】本発明の第４実施形態に係る情報処理システムの情報処理装置の構成を説明するブロック図である。
【図１２】本発明の第４実施形態に係る情報処理システムの情報処理装置の備える類似判定テーブルの構成の一例を説明する図である。
【図１３】本発明の第４実施形態に係る情報処理システムの情報処理装置のハードウェア構成を説明するブロック図である。
【図１４】本発明の第４実施形態に係る情報処理システムの情報処理装置の処理手順を説明するフローチャートである。
【発明を実施するための形態】
【００１２】
以下に、本発明を実施するための形態について、図面を参照して、例示的に詳しく説明記載する。ただし、以下の実施の形態に記載されている、構成、数値、処理の流れ、機能要素などは一例に過ぎず、その変形や変更は自由であって、本発明の技術範囲を以下の記載に限定する趣旨のものではない。
【００１３】
［第１実施形態］
本発明の第１実施形態としての情報処理装置１００について、図１を用いて説明する。情報処理装置１００は、画像情報の特徴量に基づいて、適正な職務質問を行うためのヒントなる音声情報や画像情報を提供する装置である。
【００１４】
図１に示すように、情報処理装置１００は、抽出部１０１と、記録部１０２と、検索部１０３と、提供部１０４とを含む。抽出部１０１は、質問者が質問した際に取得された質問対象者の画像情報から特徴量を抽出する。記録部１０２は、質問者が質問した際に取得された音声情報および画像情報を、特徴量に対応付けて質問データとして記録する。検索部１０３は、抽出部１０１によって抽出された特徴量を用いて記録部１０２内のデータを検索する。提供部１０４は、検索部１０３によって導き出した音声情報および画像情報の少なくともいずれか一方を質問者が携帯する情報処理端末に提供する。
【００１５】
本実施形態によれば、適正な職務質問を行うためのヒントを提供することができる。
【００１６】
［第２実施形態］
次に本発明の第２実施形態に係る情報処理システムについて、図２Ａ乃至図６Ｂを用いて説明する。図２Ａ〜図２Ｃは、本実施形態に係る情報処理システム２００の動作の概要を説明するための図である。情報処理システム２００は、警察官２３０が、不審者などの質問対象者２４０を発見し、職務質問を行う場合に、警察官２３０に対して、適正な職務質問を行うためのヒントやアドバイスなどを与えるシステムである。職務質問は、警察官職務執行法に基づいて行われる、不審者等に対する警察官が行う活動であり、職質（ショクシツ）などと略して呼ばれるものである。
【００１７】
図２Ａは、ウェアラブル端末などの携帯可能な情報処理端末２２０を装着した警察官２３０が、質問対象者２４０に対して職務質問を行う場面を示している。例えば、何らかの事件が発生し警戒中の警察官２３０が、犯人と思われる人物と人相や着衣が似ている人物を発見した場合や、通常の警邏中に不審人物を発見した場合などには、警察官２３０は、当該人物（質問対象者２４０）に対して職務質問を行う。
【００１８】
そして、警察官２３０が、質問対象者２４０を発見し、質問対象者２４０に近づいて、実際に職務質問を開始するまでの間、警察官２３０は、職務質問を確実に遂行するために様々なシチュエーションを想定し、あらゆる事態に対処できるように準備をしている。しかしながら、警察官２３０は、これから職務質問を行おうとしている質問対象者２４０が過去に職務質問を受けていたことがあるか否かの情報や、仮に過去に職務質問を受けていたとしてその時の言動や服装、外見などの情報を事前に知ることはできなかった。したがって、警察官２３０に対して、これらについてのヒントや情報などを提供することができれば、警察官２３０は、質問対象者２４０に対して適正な職務質問を行うことが可能となる。
【００１９】
例えば、何らかの事件が発生した後に警察官２３０が警戒または警備中の場合、質問対象者２４０が、警察官２３０から職務質問を受ける前に、別の警察官２３１から職務質問を受けている場合もある。そして、このような場合、質問対象者２４０は、以前の（例えば、最初の）職務質問では、疑惑をうまくかわして、職務質問を切り抜けられることがある。このような場合に、警察官２３１が行った職務質問の内容や質問対象者２４０の回答内容などの情報を警察官２３０に対して提供できれば、警察官２３０は、より適正な内容の職務質問を行うことが可能となる。
【００２０】
ここで、警察官２３１が、以前（過去）の職務質問を行ったとする。まず、情報処理装置２１０は、以前の職務質問の際に、警察官２３１の装着するウェアラブル端末２２１のカメラで撮像した質問対象者２４０の画像情報を受信する。そして、受信した質問対象者２４０の画像情報から当該画像の特徴量を抽出する。画像の特徴量としては、例えば、画像に映っている質問対象者２４０の顔から抽出しても、質問対象者２４０の全身から抽出しても、画像全体から抽出してもよく、特徴量の抽出対象は、これらには限定されない。そして、情報処理装置２１０は、抽出した特徴量と画像情報などとを対応付けたデータを質問データとして、将来の検索のために、情報処理装置２１０の内部または外部にある記録媒体に保存する。情報処理装置２１０は、質問対象者２４０以外の人物についても、同様に質問データを作成し、このような質問データを記録媒体に多数保存し、将来の検索に備えて蓄積している。
【００２１】
次に、警察官２３０が質問対象者２４０に対して、これから職務質問を行おうとしているとする。警察官２３０が、質問対象者２４０を発見し、質問対象者２４０に近づいていく間も、警察官２３０が装着している情報処理端末２２０は、カメラで質問対象者２４０を撮影し、撮影した映像を情報処理装置２１０へ送信している。情報処理装置２１０は、情報処理端末２２０から送信された映像などの画像情報から、その画像情報の特徴量を何点か抽出する。情報処理装置２１０は、抽出した特徴量に基づいて、記録媒体に記録されている質問データを検索して、抽出した特徴量のうち、例えば、あらかじめ定められた数の特徴量が一致する映像を検索する。
【００２２】
例えば、情報処理装置２１０が、受信した映像から１０個の特徴量を抽出する場合、抽出した１０個の特徴量のうち８個が一致する映像を検索することをあらかじめ定めておけば、情報処理装置２１０は、これに従ってデータを検索する。なお、情報処理装置２１０が、抽出する特徴量の数は１０個には限定されず、任意の個数とすることができる。また、情報処理装置２１０が映像を検索する場合に、例えば、抽出した全ての特徴量が一致する映像を検索してもよいし、抽出した特徴量のうち、一部が一致する映像を検索してもよい。これにより、質問対象者２４０が以前に職務質問を受けていれば、そのときの映像や画像情報、音声情報などの職務質問のヒントとなるような様々な情報を警察官２３０に対して提供することができる。また、過去に行われた職務質問が複数回ある場合は、過去の職務質問に関する情報を全て提供してもよいし、そのうち最新のものから所定の件数分の職務質問に関する情報を提供してもよい。
【００２３】
また、情報処理装置２１０は、警察官２３０が質問対象者２４０に対して職務質問を行っている状況をリアルタイムで警察官２３１やオペレーションルームにいるオペレータ２３２などに提供することができる。これにより、警察官２３０により実施されている職務質問の内容などの情報を警察官２３１やオペレータ２３２も共有することができる。さらに、警察官２３１やオペレータ２３２は、職務質問の内容などに応じて、警察官２３０に対してアドバイスを送ることもできる。なお、オペレータ２３２は、例えば、指導担当のベテラン警察官などであってもよい。また、過去に職務質問を実施した警察官２３１が複数人いる場合は、複数人いる警察官２３１の全員または一部に対して、警察官２３０が職務質問を行っている状況を提供することもできる。
【００２４】
このように、警察官２３０は、警察官２３１のした職務質問の内容をあらかじめ知ることができるので、質問対象者２４０に対して的確な質問をするこができ、犯罪の端緒を確実に掴むことができる。また、警察官２３１は、リアルタイムで共有した情報に基づいて、警察官２３０に対して、アドバイスやコメント情報、有利な情報を送ることができるので、警察官２３０は、的確な職務質問をすれば、犯罪の端緒をつかむことができる。
【００２５】
さらに、情報処理装置２１０は、警察官２３０と警察官２３１との間でセッション、つまり、リアルタイムでやり取りをすることを促すメッセージを情報処理端末２２０に提供してもよい。具体的には、警察官２３０に対して、警察官２３１とのセッションを行うか否かを問い合わせるメッセージを情報処理端末２２０のディスプレイに表示し、警察官２３０が、セッションを行うか否かを選択できるようにする。オペレータ２３２との間のセッションについても同様のメッセージを提供してもよい。また、セッションの方式は、警察官２３０と、警察官２３１およびオペレータ２３２などとの間の直接通話による方式であってもよいし、情報処理装置２１０を介した音声通話や、チャットなどであってもよいが、セッションが可能であればこれらの方式には限定されない。
【００２６】
情報処理装置２１０が、警察官２３０に情報を提供するタイミングは、警察官２３０が質問対象者２４０に対して所定の距離まで近づいたタイミングでもよいし、実際に職務質問が始まったタイミングでもよい。また、例えば、警察官２３０の視線が、質問対象者２４０に固定されから所定の時間経過したタイミングであってもよい。この場合、警察官２３０が、注目（注視）している質問対象者２４０に対して、職務質問する意思があると判断することができ、このタイミングで警察官２３０に対して情報を与えてもよい。さらに、警察官２３０から情報提供の要求があった場合であってもよく、情報処理装置２１０が、警察官２３０に情報を提供するタイミングは、これらには限定されない。
【００２７】
さらに、情報処理装置２１０は、過去の職務質問や、過去の職務質問に対する回答内容、発言内容などを情報処理端末２２０に提供してもよい。これらの情報については、情報処理端末２２０に対して、音声情報をそのまま提供してもよいし、これらの情報をテキスト化した文字情報として提供してもよい。そして、情報処理端末２２０は、ディスプレイにテキストを表示しても、スピーカから音声を出力してもよい。
【００２８】
また、情報処理装置２１０は、過去の職務質問に対する返答内容や発言内容などと、現在行われている職務質問に対する返答内容や発言内容などとの相違を判定して音声やテキストで情報処理端末２２０に提供することもできる。これにより、警察官２３０は、返答内容や回答内容などの違いや矛盾を知ることができ、質問対象者２４０が嘘をついているか否かを判断できるので、的確な職務質問を実施することができる。
【００２９】
次に、図２Ｂに示したように、警察官２３１による職務質問と警察官２３０による職務質問との間に、質問対象者２４０が、変装したり、服装を変えたりすることがある。つまり、警察官２３１が職務質問したときと、その後に警察官２３０が職務質問をしたときとでは、質問対象者２４０の外見や服装などが異なっていることがある。
【００３０】
そのため、情報処理装置２１０は、情報処理端末２２０に対して、質問対象者２４０の外見や服装などに関する情報を提供することができる。例えば、質問対象者２４０が、以前（過去）の職務質問についてはうまく切り抜けられた場合、その後にもう一度職務質問を受けるかもしれないと考え、変装などをすることがある。この場合に、情報処理装置２１０は、例えば、直前の職務質問ではどのような外見や服装であったかについての情報を情報処理端末２２０に提供する。なお、情報処理端末２２０に提供する外見や服装などに関する情報は、直前の職務質問のものには限られず、過去に行われた職務質問のものであればいつのものでもよい。
【００３１】
例えば、直前の職務質問では素顔をさらしていた質問対象者２４０が、次に職務質問を受けたときには、変装して人相や外見などが変わっている場合がある。例えば、図２Ｂに示したように、かつらをつけて髪型を変えたり、帽子をかぶって顔全体が判別できないようにしたり、メガネや付けひげを付けて見た目の印象を変えたりすることがある。その他にもマスクを付けたり、髪を切ったり、メイクをしたりして外見の印象をがらりと変えることがある。
【００３２】
このような場合に、直前の職務質問の際の外見や服装などと現在の職務質問における外見や服装などとが異なっていることを、警察官２３０が事前に知ることができれば、効果的な職務質問を実施することができる。つまり、警察官２３０は、あらかじめ質問対象者２４０が変装をしていることを知っているので、変装をしていることを前提に、質問の内容を検討でき、効果的な質問をすることが可能となり、その結果、犯罪の端緒を確実に掴むことができる。なお、変装は顔の変装には限定されず、例えば、服装などの変更であってもよい。服装とは、例えば、マスクやサングラス、アクセサリーなども含むものとするが、これらには限定されない。
【００３３】
なお、上述の説明では情報処理端末２２０、２２１としてウェアラブル端末を例にして説明をした。しかしながら、図２Ｃに示したように、耐刃防護衣（防刃チョッキ）にカメラ２２２とマイク付きスピーカ２２３とを取り付けて、これらを組み合わせたものを情報処理端末２２０としてもよい。
【００３４】
図３は、本実施形態に係る情報処理システム２００の構成を説明するブロック図である。情報処理システム２００は、情報処理装置２１０と情報処理端末２２０とを含む。
【００３５】
情報処理装置２１０は、抽出部３１１と、記録部３１２と、検索部３１３と、提供部３１４と、判定部３１５とを有する。情報処理端末２２０は、カメラ３２１と、ディスプレイ３２２と、マイク３２３と、スピーカ３２４と、無線通信部３２５とを有する。
【００３６】
抽出部３１１は、情報処理端末２２０のカメラ３２１で撮像した質問対象者２４０の映像などの画像情報から、その映像の特徴量を抽出する。抽出部３１１は、例えば、特徴量を１０点抽出するが、抽出する特徴量の数はこれに限定されず、情報処理システム２００のユーザが適宜設定できる。
【００３７】
抽出部３１１が、特徴量を抽出する映像中の領域は、例えば、質問対象者２４０の顔部分であってもよく、質問対象者２４０が映っている映像全体であってもよく、情報処理システム２００のユーザが適宜設定できる。例えば、質問対象者２４０の顔部分を特徴量抽出領域とする場合、通常の顔認識システムで用いられている手法、すなわち、顔のパーツの相対位置や大きさ、目、鼻、頬骨、あごの形などから特徴量を抽出する手法を用いてもよい。その他にも、３次元顔認識の手法を用いてもよく、映像などから特徴量が抽出できる手法であれば、これらには限定されない。
【００３８】
記録部３１２は、警察官２３０が職務質問した際に取得された画像情報および音声情報を、抽出部３１１で抽出した特徴量と対応付けて記録する記録媒体である。このように、特徴量と画像情報などとを対応付けて記録しておくことにより、特徴量をキーとした検索が容易になる。
【００３９】
検索部３１３は、抽出部３１１により抽出された特徴量を用いて、記録部３１２に記録されたデータを検索する。警察官２３０が職務質問をしているときに、警察官２３０が装着している情報処理端末２２０で取得した映像などの画像情報から特徴量を抽出し、その抽出した特徴量に一致する画像情報を記録部３１２から検索する。例えば、検索部３１３は、抽出した特徴量の全てが一致する画像情報を検索してもよいし、抽出した特徴量のうちの一部が一致する画像情報を検索してもよく、検索の手法はこれらには限定されない。
【００４０】
また、検索部３１３が記録部３１２に記録されたデータの検索を開始する契機（トリガー）は、警察官２３０からの要求時、例えば、警察官２３０が、情報処理端末２２０に設けられたスイッチを操作して、スイッチをＯＮした時でもよい。また、警察官２３０が質問対象者２４０に話しかけた時、つまり、情報処理端末２２０に設けられたマイク３２３によって、警察官２３０の声を検知した時や、警察官２３０が特定のキーワードを発した時などでもよい。さらに、情報処理端末２２０に設けられた測距センサなどにより測定した、警察官２３０と質問対象者２４０との間の距離が、所定の距離となった時でもよい。さらにまた、情報処理端末２２０の撮像部で撮像した画像中の質問対象者２４０の当該画像に対する占有領域の割合が所定値以上となったときでもよく、検索部３１３が、検索を開始するトリガーは、これらには限定されない。
【００４１】
提供部３１４は、検索部３１３によって検索された音声情報や画像情報、質問対象者２４０についての個人情報などである質問対象者情報などを、情報処理端末２２０に提供する。また、提供部３１４が提供する情報は、例えば、情報処理端末２２０を携帯する警察官２３０からの要求に基づいて、音声情報を提供したり、画像情報を提供したり、音声情報および画像情報を提供してもよい。さらに、警察官２３１やオペレータ２３２からのアドバイスなどを、警察官２３０に対して提供部３１４を介して提供してもよい。
【００４２】
また、提供部３１４が、警察官２３０へ画像情報や音声情報などを提供するタイミングは、警察官２３０が質問対象者２４０に対して職務質問を開始する前に提供するのが好ましいが、これには限定されない。例えば、検索部３１３による検索が終了した時であっても、警察官２３０に対して検索が終了した旨のメッセージを送っておき、警察官２３０が情報の提供を要求した時であってもよい。さらに、警察官２３０による職務質問が開始された後であっても、必要に応じて適宜提供してもよい。
【００４３】
判定部３１５は、検索部３１３により検索された画像情報などと、情報処理端末２２０のカメラ３２１により撮像された映像などの画像情報との間に相違があるか否かを判定する。判定部３１５は、例えば、これらの画像情報から、質問対象者２４０の外見や服装などに相違があるか否かを判定する。
【００４４】
検索部３１３により検索された画像情報、つまり、以前に行われた職務質問の際に取得された画像情報では、メガネやひげなどがなかった場合を想定する。この場合において、現在行われている職務質問では、質問対象者２４０がメガネをかけ、ひげを生やしていたとする。すなわち、情報処理端末２２０により取得した画像情報において、質問対象者２４０が、メガネをかけ、ひげを生やしていたとする。そうすると、現在と過去との職務質問において、質問対象者２４０の外見などに違いが存在することになる。このような場合に、判定部３１５は、例えば、以前はメガネをかけていなかったが、今はメガネをかけているということを判定する。そして、この判定結果を、例えば、提供部３１４などを介して、警察官２３０に提供すれば、警察官２３０は、外見などの相違点を考慮に入れた職務質問を実施することが可能となる。また、判定部３１５は、判定結果を、例えば、テキスト文字や音声、画像、映像などを用いて、警察官２３０に対して、提供することができるが、判定部３１５が判定結果を提供する方法はこれらには限定されない。さらに、テキストを用いて判定結果を提供する場合は、テキスト文字を強調したり、文字色を変えたりして提供してもよい。また、判定結果を画像などで提供する場合は、画像中の該当部分に色を付けたり、その部分を点滅させたり、その部分をカラー表示させたりして提供してもよい。職務質問を行っている警察官２３０が、どこに相違があるのかを容易に把握できる方法であればいずれの方法であってもよい。
【００４５】
また、提供部３１４は、警察官２３０と、警察官２３１およびオペレータ２３２との間のセッション、つまり、例えば、警察官２３０と警察官２３１との間で、リアルタイムでのやり取りをすることを促すメッセージを提供してもよい。警察官２３０が、セッションすることを承諾すれば、警察官２３１との間で、双方向でのやり取りすることができる。なお、セッションについては、警察官２３０と警察官２３１との間の他に、警察官２３０とオペレータ２３２との間、警察官２３０、２３１およびオペレータ２３２の３者間のセッションであってもよい。警察官２３０がセッションに参加することを承諾すれば、過去に職務質問を実施した警察官２３１と、現在職務質問を実施している警察官２３０とによる、複数の人間による職務質問を実施することが可能となり、より精度の高い職務質問を実施することができる。
【００４６】
情報処理端末２２０は、カメラ３２１と、ディスプレイ３２２と、マイク３２３と、スピーカ３２４と、無線通信部３２５とを備える。
【００４７】
カメラ３２１は、撮像用のデバイスであり、質問対象者２４０などを撮像する。カメラ３２１が撮像する画像は、動画などの映像や静止画などであってもよい。なお、カメラ３２１は、質問対象者２４０の他に周辺の風景や、質問対象者２４０以外の人物などを撮像してもよい。
【００４８】
ディスプレイ３２２は、例えば、警察官２３０が情報処理装置２１０から提供された映像やテキストなどを表示して、これらの情報を警察官２３０に閲覧させるデバイスである。また、ディスプレイ３２２は、質問対象者２４０に閲覧させる映像を表示してもよい。なお、ディスプレイに３２２は、その他に過去に取得した映像や画像などの情報をサムネイル表示して警察官２３０などに閲覧させてもよい。警察官２３０は、ディスプレイ３２２に表示されたサムネイルから閲覧したい画像を選択して、閲覧する。
【００４９】
マイク３２３は、職務質問を実施する警察官２３０および質問対象者２４０の音声を収集する音声収集用のデバイスである。マイク３２３は、警察官２３０および質問対象者２４０の音声を収集する他に、周囲の音声を収集してもよいし、また、マイク３２３に指向性を持たせて、特定の人物、例えば、警察官２３０や質問対象者２４０などの音声を収集してもよい。
【００５０】
スピーカ３２４は、質問対象者２４０に対して音声を出力する音声出力用のデバイスである。スピーカ３２４としては、警察官２３０の耳に装着するイヤホンが代表的であるが、これには限定されず、例えば、拡声器などであってもよく、拡声器から音声を出力することにより、警察官２３０および質問対象者２４０に音声を聞かせてもよい。
【００５１】
無線通信部３２５は、カメラ３２１を用いて取得した画像情報およびマイク３２３を用いて取得した音声情報などを情報処理装置２１０に送信するために無線通信を行う。また、無線通信部３２５は、情報処理装置２１０以外の他の機器との無線通信を行ってもよい。また、無線通信部３２５は、既知の無線通信方式を採用して、無線通信を行う。
【００５２】
図４Ａは、本実施形態に係る情報処理システム２００の情報処理装置２１０が備える質問データテーブル４０１の一例を示す図である。質問データテーブル４０１は、画像ＩＤ(Identifier)４１１に関連付けて警察官ＩＤ４１２と、音声ＩＤ４１３と、特徴量情報４１４と、日時情報４１５と、位置情報４１６と、音声テキスト４１７とを格納する。
【００５３】
画像ＩＤ４１１は、データベースなどに記録されている各画像情報に割り当てられた識別番号である。同様に、警察官ＩＤ４１２は、各警察官に割り当てられた識別番号などの番号であり、警察官の人事管理などにも利用可能な番号である。また、警察官ＩＤ４１２は、誰が質問対象者２４０に対して、現在職務質問を実施しているのか、または過去に職務質問を実施したのかを識別する、質問者識別情報とすることもできる。音声ＩＤ４１３は、画像と共に記録されている音声情報に割り当てられた識別番号である。特徴量情報４１４は、画像ＩＤ４１１に対応する画像情報から抽出された特徴量に関する情報であり、情報処理装置２１０は、この特徴量情報４１４を用いて、画像情報や音声情報などを検索することができる。
【００５４】
日時情報４１５は、画像ＩＤ４１１に対応する画像が撮像された日時や画像情報が取得された日時に関する情報であり、位置情報４１６は、画像ＩＤ４１１に対応する画像が撮像された場所や画像情報が取得された場所に関する情報である。例えば、情報処理装置２１０は、特徴量情報４１４の他に、日時情報４１５や位置情報４１６を用いて画像情報や音声情報を検索することもできる。また、情報処理装置２１０は、これらの情報、すなわち、特徴量情報４１４、日時情報４１５および位置情報４１６を組み合わせて、画像情報や音声情報を検索することもできる。音声テキスト４１７は、音声ＩＤ４１３に対応する音声情報を、例えば、テキスト化した情報である。情報処理装置２１０は、音声情報を音声として警察官２３０に伝えることもできるし、文字情報としてテキスト文字を提供することもできるし、音声情報と共に文字情報を提供することもできる。
【００５５】
図４Ｂは、本実施形態に係る情報処理システム２００の情報処理装置２１０が備える相違判定テーブル４０２の一例を示す図である。相違判定テーブル４０２は、画像ＩＤ４１１に関連付けて質問内容４２１と、回答内容４２２と、評価情報４２３とを格納する。質問内容４２１は、警察官２３０、２３１が、質問対象者２４０に職務質問を実施した際の質問内容などに関する情報であり、回答内容４２２は、質問に対する質問対象者２４０の回答に関する情報である。質問内容４２１および回答内容４２２は、音声をそのまま音声情報として記録しておいてもよいし、音声をテキスト化して文字情報として記録しておいてもよい。
【００５６】
評価情報４２３は、職務質問終了後に、職務質問を実施した警察官２３０、２３１が、職務質問に対する回答や質問対象者２４０の挙動などから、質問対象者２４０に対してした判断や評価などに関する情報である。また、この評価情報４２３には、警察官２３０、２３１が、自らの実施した職務質問に対して行った自己評価を加えてもよい。具体的には、質問対象者２４０の言動から犯罪などの兆候がないと判断すれば、警察官２３０、２３１は、例えば、「問題なし」の評価をする。同様に、犯罪の疑いはあるものの、証拠がない場合や、不審行動をしてはいるが確証がない場合など、職務質問に当たった警察官２３０、２３１は、様々な評価をすることができる。また、この評価情報４２３は、同じ質問対象者２４０に対して、次に職務質問をする警察官に提供されてもよい。
【００５７】
図４Ｃは、本実施形態に係る情報処理システム２００の情報処理装置２１０が備える外見判定テーブル４０３の一例を示す図である。外見判定テーブル４０３は、画像ＩＤ４１１に関連付けて、容姿情報４３１と服装情報４３２とを格納する。容姿情報４３１は、質問対象者２４０の容姿に関する情報であり、例えば、体型に関する情報の他に性別や見た目の年齢（実際の年齢とは異なる）などの情報が代表的であるが、これらには限定されない。また、服装情報４３２は、質問対象者２４０が職務質問を受けたときの服装に関する情報であり、着衣に限らず、例えば、メガネやアクセサリーなどの服飾品に関する情報を含んでいてもよい。情報処理装置２１０は、画像情報や音声情報の他に、これらの情報を警察官２３０に提供してもよい。これにより、警察官２３０は、着衣の変化や乱れ、身に着けているものの変化を確実にとらえることが可能となり、的確な職務質問を実行することができる。
【００５８】
図４Ｄは、本実施形態に係る情報処理システム２００の情報処理端末２２０が備える端末データテーブルの一例を示す図である。端末データテーブル４０４は、警察官ＩＤ４１２に関連付けて、機器ＩＤ４４１と、測距器情報４４２と、位置情報４４３と、日時情報４４４とを格納する。機器ＩＤ４４１は、警察官２３０、２３１が装着しているウェアラブル端末などの情報処理端末２２０の識別番号である。これにより、情報処理装置２１０は、誰がどの情報処理端末２２０を装着しているかを容易に特定することができる。
【００５９】
測距器情報４４２は、ウェアラブル端末が有する距離測定器に関する情報であり、この距離測定器により測った距離に関する情報を含んでいてもよい。距離測定器（測距器）は、例えば、赤外線センサや超音波センサなどにより距離を測定する機器であるが、距離の測定方式はこれらには限定されない。位置情報４４３は、ウェアラブル端末が有するＧＰＳ(Global Positioning System)により、測位された位置に関する情報であり、これにより、どの場所で職務質問を行ったかの情報を画像情報などに付加することができる。日時情報４４４は、警察官２３０、２３１が、質問対象者２４０に職務質問を行った日時に関する情報であり、ウェアラブル端末が有する時計などにより自動的に取得される情報である。なお、日時情報４４４は、職務質問を行った警察官２３０、２３１が、職務質問開始前または職務質問終了後手動で入力してもよい。
【００６０】
図５Ａは、本実施形態に係る情報処理システム２００の情報処理装置２１０のハードウェア構成を説明するブロック図である。情報処理装置２１０は、ＣＰＵ(Central Processing Unit)５１１、ＲＯＭ(Read Only Memory)５１２およびＲＡＭ(Random Access Memory)５１３を備えている。さらに、情報処理装置２１０は、ストレージ５１４と通信制御部５１５とを備えている。
【００６１】
ＣＰＵ５１１は、演算処理用のプロセッサであり、プログラムを実行することにより情報処理装置２１０の各機能構成部を実現する。なお、ＣＰＵ５１１は１つに限定されず、複数であってもよく、また、画像処理用のＧＰＵ(Graphics Processing Unit)を含んでもよい。ＲＯＭ５１２は、リードオンリメモリであり、初期データやファームウェアなどのプログラムを記憶する。通信制御部５１５は、例えば、情報処理装置２１０とその他の機器や装置などとの間の通信を制御する。また、通信制御部５１５は、ＣＰＵ５１１とは独立したＣＰＵを有して、ＲＡＭ５１３の領域に送受信データを書き込みまたは読み出しをするのが望ましい。さらに、ＲＡＭ５１３とストレージ５１４との間でデータを転送するＤＭＡＣ（Direct Memory Access Controller）を設けるのが望ましい（図示なし）。よって、ＣＰＵ５１１は、ＲＡＭ５１３がデータを受信したこと、またはＲＡＭ５１３にデータが転送されたこと、を認識してデータを処理する。また、ＣＰＵ５１１は、処理結果をＲＡＭ５１３に準備しておき、後に行われる送信または転送については、通信制御部５１５やＤＭＡＣに行わせる。
【００６２】
ＲＡＭ５１３は、ＣＰＵ５１１が一時記憶用のワークエリアとして使用するランダムアクセスメモリである。ＲＡＭ５１３には、本実施形態の実現に必要なデータを記憶する領域がある。このようなデータとして、ＲＡＭ５１３は、画像／抽出特徴量５１３１、検索画像５１３２、検索音声５１３３、位置／日時５１３４、外見／服装５１３５および回答内容／相違５１３６などを一時的に記憶する。画像／抽出特徴量５１３１は、質問データとして記録媒体に記録されているデータを展開して、生成したデータであり、画像情報とその画像情報から抽出した特徴量とを含むデータである。検索画像５１３２や検索音声５１３３は、検索部３１３により検索されたデータであり、情報処理端末２２０に提供されるデータである。位置／日時５１３４は、質問対象者２４０に職務質問を行った場所および日時に関するデータであり、画像情報に対応付けられているデータである。これらのデータや情報などを情報処理端末２２０に提供することにより、警察官２３０は、質問内容を適宜変更することができ、適正な職務質問を実施することが可能となる。外見／服装５１３５は、質問対象者２４０が過去に職務質問を受けたときの見た目や服装に関するデータであり、これらのデータを用いれば当時と現在との外見や服装の相違を判定することができる。回答内容／相違５１３６は、質問対象者２４０が以前に職務質問を受けた際に回答した回答内容のデータ、および、現在の職務質問に対する回答内容と以前の回答内容との違いを表すデータである。情報処理装置２１０は、情報処理端末２２０に対して、回答内容を提供しても、相違点を提供しても、回答内容および相違点の両者を提供してもよい。なお、回答内容／相違５１３６は、音声情報そのものであっても、テキスト化された文字情報であってもよい。送受信データ５１３７は、通信制御部５０５を介して送受信されるデータである。
【００６３】
ストレージ５１４は、データベースや各種パラメータ、本実施形態の実現に必要な以下のプログラムやデータなどを記憶する記憶デバイスである。ストレージ５１４は、質問データテーブル４０１と、相違判定テーブル４０２と、外見判定テーブル４０３とを格納する。
【００６４】
ストレージ５１４は、さらに、抽出モジュール５１４１と、記録モジュール５１４２と、検索モジュール５１４３と、提供モジュール５１４４とを格納する。抽出モジュール５１４１は、警察官２３０、２３１が質問した際に取得された質問対象者２４０の画像情報から、当該画像情報の特徴量を抽出するモジュールである。記録モジュール５１４２は、取得された音声情報および画像情報に、抽出した特徴量を対応付けて質問データとして記録するモジュールである。検索モジュール５１４３は、抽出された特徴量に基づいて、例えば、ストレージ５１４内に記録されているデータから、所定のデータを検索するモジュールである。提供モジュール５１４４は、検索モジュール５１４３により検索されたデータを情報処理端末２２０に提供するモジュールである。これらのモジュール５１４１〜５１４４は、ＣＰＵ５１１によりＲＡＭ５１３のアプリケーション実行領域５１３８に読み出され、実行される。制御プログラム５１４５は、情報処理装置２１０の全体を制御するためのプログラムである。なお、図５Ａに示したＲＡＭ５１３やストレージ５１４には、情報処理装置２１０が有する汎用の機能や他の実現可能な機能に関するプログラムやデータは図示されていない。
【００６５】
図５Ｂは、本実施形態に係る情報処理システム２００の情報処理端末２２０のハードウェア構成を説明するブロック図である。情報処理端末２２０は、ＣＰＵ５２１、ＲＯＭ５２２およびＲＡＭ５２３を備えている。さらに、情報処理端末２２０は、ストレージ５２４と、通信制御部５２５と、入出力インタフェース５２６とを備えている。
【００６６】
ＣＰＵ５２１は、演算処理用のプロセッサであり、プログラムを実行することにより情報処理端末２２０の各機能構成部を実現する。なお、ＣＰＵ５２１は１つに限定されず、複数であってもよく、また、画像処理用のＧＰＵを含んでもよい。ＲＯＭ５２２は、リードオンリメモリであり、初期データやファームウェアなどのプログラムを記憶する。通信制御部５２５は、例えば、情報処理端末２２０とその他の機器や装置などとの間の通信を制御する。また、通信制御部５２５は、ＣＰＵ５２１とは独立したＣＰＵを有して、ＲＡＭ５２３の領域に送受信データを書き込みまたは読み出しをするのが望ましい。さらに、ＲＡＭ５２３とストレージ５２４との間でデータを転送するＤＭＡＣを設けるのが望ましい（図示なし）。よって、ＣＰＵ５２１は、ＲＡＭ５２３がデータを受信したこと、またはＲＡＭ５２３にデータが転送されたこと、を認識してデータを処理する。また、ＣＰＵ５２１は、処理結果をＲＡＭ５２３に準備しておき、後に行われる送信または転送については、通信制御部５２５やＤＭＡＣに行わせる。
【００６７】
ＲＡＭ５２３は、ＣＰＵ５２１が一時記憶用のワークエリアとして使用するランダムアクセスメモリである。ＲＡＭ５２３には、本実施形態の実現に必要なデータを記憶する領域がある。このようなデータとして、ＲＡＭ５２３は、警察官ＩＤ５２３１、機器ＩＤ５２３２、測距データ（距離）５２３３、位置／日時５２３４、外見／服装５２３５、回答内容／相違５２３６などを一時的に記憶する。
【００６８】
警察官ＩＤ５２３１は、情報処理端末２２０を装着している警察官を識別するための識別子であり、機器ＩＤ５２３２は、情報処理端末２２０を識別するための識別子であり、いずれも情報処理端末２２０に一意に割り当てられた識別子である。測距データ（距離）５２３３は、情報処理端末２２０が備える距離測定器により測定した情報処理端末２２０と質問対象者２４０との間の距離を示すデータである。情報処理端末２２０は、この測距データ５２３３が所定の距離となった場合に、情報処理装置２１０に質問対象者２４０に関連する情報を提供するように要求してもよい。
【００６９】
位置／日時５２３４は、情報処理端末に内蔵されるＧＰＳおよび時計などにより測定した位置および時間に関する情報である。情報処理端末２２０は、例えば、情報処理端末２２０で取得した画像情報や音声情報を情報処理装置２１０にアップロードする際に、これらの情報を付加して情報処理装置２１０にアップロードする。
【００７０】
外見／服装５２３５は、情報処理装置２１０から提供された質問対象者２４０の外見および服装に関するデータであり、質問対象者２４０が以前に職務質問を受けた際の外見や服装に関するデータである。情報処理端末２２０は、これらのデータを情報処理端末２２０が備えるディスプレイ３２２などに表示して、情報処理端末２２０を装着している警察官２３０に提示する。
【００７１】
回答内容／相違５２３６は、情報処理装置２１０から提供された、過去になされた職務質問に対する質問対象者２４０の回答内容や、その回答内容と現在の回答内容との相違を表すデータである。情報処理端末２２０は、これらのデータを情報処理端末が有するディスプレイ３２２などに表示して、情報処理端末２２０を装着している警察官２３０に提示する。なお、回答内容／相違５２３６は、情報処理端末２２０の備えるスピーカ３２４から音声情報として出力してもよいし、テキスト化された文字情報としてディスプレイ３２２に表示してもよい。送受信データ５２３７は、通信制御部５０５を介して送受信されるデータである。
【００７２】
ストレージ５２４は、データベースや各種パラメータ、本実施形態の実現に必要な以下のプログラムやデータなどを記憶する記憶デバイスである。ストレージ５２４は、端末データテーブル４０４を格納する。
【００７３】
ストレージ５２４は、さらに、撮像モジュール５２４１と、表示モジュール５２４２と、収集モジュール５２４３と、通信モジュール５２４４とを格納する。撮像モジュール５２４１は、カメラ３２１などを用いて質問対象者２４０などを撮像するモジュールである。表示モジュール５２４２は、様々な情報をディスプレイ３２２などに表示するモジュールである。収集モジュール５２４３は、マイク３２３などを用いて、警察官２３０の声や、質問対象者２４０の声などを収集するモジュールであり、例えば、警察官２３０のした職務質問や質問対象者２４０の回答を音声情報として収集する。通信モジュール５２４４は、情報処理端末２２０と他の機器などとの間の通信を実行するモジュールである。これらのモジュール５２４１〜５２４４は、ＣＰＵ５２１によりＲＡＭ５２３のアプリケーション実行領域５２３８に読み出され、実行される。制御プログラム５２４５は、情報処理端末２２０の全体を制御するためのプログラムである。なお、図５Ｂに示したＲＡＭ５２３やストレージ５２４には、情報処理端末２２０が有する汎用の機能や他の実現可能な機能に関するプログラムやデータは図示されていない。
【００７４】
入出力インタフェース５２６は、入出力デバイスとのデータ入出力を制御するためのインタフェースを行なう。本実施形態においては、入出力インタフェース５２６には、カメラ３２１と、ディスプレイ３２２と、マイク３２３と、スピーカ３２４と、ＧＰＳ位置算出部５２６５などが接続される。
【００７５】
図６Ａは、本実施形態に係る情報処理システム２００の情報処理装置２１０の処理手順を説明するフローチャートである。このフローチャートは、図５ＡのＣＰＵ５１１がＲＡＭ５１３を使用して実行し、図３の情報処理装置２１０の機能構成部を実現する。
【００７６】
ステップＳ６０１において、情報処理装置２１０は、情報処理端末２２０から質問対象者２４０の画像情報を取得したか否かを判断する。情報処理端末２２０から画像情報を取得していない場合（ステップＳ６０１のＮＯ）、情報処理装置２１０は、画像情報を取得するまで待機する。情報処理端末２２０から画像情報を取得した場合（ステップＳ６０１のＹＥＳ）、情報処理装置２１０は、次のステップへ進む。
【００７７】
ステップＳ６０３において、情報処理装置２１０の抽出部３１１は、取得した画像情報から、その画像情報の特徴量を抽出する。ステップＳ６０５において、情報処理装置２１０は、抽出された特徴量と、警察官２３１が質問対象者２４０に職務質問した際に取得された音声情報および画像情報とを対応付けて質問データを生成する。記録部３１２は、生成した質問データをデータベース（ＤＢ：Database）などに記録する。
【００７８】
ステップＳ６０７において、情報処理装置２１０は、警察官２３０が質問対象者２４０に対して職務質問を開始したか否かを判断する。そして、情報処理装置２１０は、警察官２３０が職務質問を開始していなければ（ステップＳ６０７のＮＯ）、情報処理装置２１０は、職務質問が開始されるまで待機する。情報処理装置２１０は、警察官２３０が質問対象者２４０に対して職務質問を開始したら（ステップＳ６０７のＹＥＳ）、次のステップへ進む。
【００７９】
情報処理装置２１０が、職務質問が開始されたか否かを判断する方法は、例えば、情報処理端末２２０のマイク３２３で集音した音声を、受信した音声に基づいて判断する方法があるが、これには限定されない。なお、ステップＳ６０７においては、情報処理装置２１０は、警察官２３０が職務質問を開始したか否かを判断したが、警察官２３０からの検索要求、つまり、情報処理端末２２０から検索要求信号を受信したか否かを判断してもよい。さらに、ステップＳ６０７においては、情報処理装置２１０は、警察官２３０と質問対象者２４０との間の距離が、所定の距離になったか否かを判断してもよい。
【００８０】
ステップＳ６０９において、情報処理装置２１０は、情報処理端末２２０のカメラ３２１で撮像した、職務質問中の質問対象者２４０の画像情報から特徴量を抽出する。ステップＳ６１１において、検索部３１３は、抽出した特徴量に基づいて、データベースなどの記録媒体を検索して、記録されている過去の職務質問の際の質問対象者２４０の画像情報などを探して、選択する。ステップＳ６１３において、提供部３１４は、選択した画像情報や音声情報などの情報を情報処理端末２２０に送信などして、提供する。
【００８１】
ステップＳ６１５において、判定部３１５は、選択した画像情報と現在の画像情報とに相違があるか否かを判定する。そして、ステップＳ６１７において、情報処理装置２１０は、ステップＳ６１５で判定した相違を情報処理端末２２０に送信する。
【００８２】
図６Ｂは、本実施形態に係る情報処理システム２００の情報処理端末２２０の処理手順を説明するフローチャートである。このフローチャートは、図５ＢのＣＰＵ５２１がＲＡＭ５２３を使用して実行し、図３の情報処理端末２２０の機能構成部を実現する。
【００８３】
ステップＳ６４１において、情報処理端末２２０は、警察官２３０と質問対象者２４０との間の距離が所定の距離になったか否かを、情報処理端末２２０の備える距離測定器により測定した距離に基づいて判断する。所定の距離になっていなければ（ステップＳ６４１のＮＯ）、情報処理端末２２０は、所定の距離になるまで待機する。所定の距離になれば（ステップＳ６４１のＹＥＳ）、情報処理端末２２０は、次のステップに進む。なお、ステップＳ６４１においては、情報処理端末２２０は、例えば、警察官２３０が情報処理端末２２０に備えられた情報処理装置２１０との通信開始用のスイッチを操作してＯＮにしたか否かを判断してもよい。
【００８４】
ステップＳ６４３において、情報処理端末２２０は、カメラ３２１で撮影した質問対象者２４０の画像をサーバなどの情報処理装置２１０に送信する。ステップＳ６４５において、情報処理端末２２０は、情報処理装置２１０が検索した画像情報や音声情報などを受信し、ディスプレイ３２２に表示して、警察官２３０に提示する。
【００８５】
ステップＳ６４７において、情報処理端末２２０は、警察官２３０が職務質問を開始したか否かを判断する。職務質問が開始されていない場合（ステップＳ６４７のＮＯ）、情報処理端末２２０は、職務質問が開始されるまで待機する。職務質問が開始された場合（ステップＳ６４７のＹＥＳ）、情報処理端末２２０は、次のステップへ進む。
【００８６】
ステップＳ６４９において、情報処理端末２２０は、職務質問中の警察官２３０と質問対象者２４０との間の会話や、職務質問中の質問対象者２４０を撮影した映像などの画像情報を情報処理装置２１０に送信する。
【００８７】
ステップＳ６５１において、情報処理端末２２０は、情報処理装置２１０から送信された過去の職務質問と現在の職務質問とにおける質問対象者２４０の外見や服装、回答内容などの相違を受信し、ディスプレイ３２２に表示して、警察官２３０に提示する。
【００８８】
本実施形態によれば、職務質問の際に取得された画像情報から抽出した特徴量に関連付けて質問データを記録媒体に記録し、特徴量を用いて記録媒体中のデータを検索するので、適正な職務質問を行うためのヒントを提供できる。そして、職務質問にあたる警察官は、事前にヒントを入手できるので、適正な職務質問を行うことができる。
【００８９】
［第３実施形態］
次に本発明の第３実施形態に係る情報処理システムについて、図７乃至１０を用いて説明する。図７は、本実施形態に係る情報処理システム７００の構成を説明するためのブロック図である。本実施形態に係る情報処理システム７００は、上記第２実施形態と比べると、情報処理装置７１０が判断部７１１を有する点で異なる。その他の構成および動作は、第２実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。
【００９０】
判断部７１１は、判定部３１５で判定した相違について、論理的な説明がつくか否かを判断する。例えば、質問対象者２４０の服装が、以前に受けた職務質問のときと、今受けている職務質問とで異なっている場合を考える。検索部３１３で検索した画像情報が、例えば、前日に行われた職務質問の際に取得されたものであれば、服装が異なっていても不思議なことではなく、論理的な説明がつけられると判断できる。
【００９１】
しかしながら、検索部３１３で検索された画像情報が、同じ日の、例えば、現在の時刻から数分前や数十分前などに行われた職務質問の際に取得されたものであった場合、服装が異なっていることは、通常では考えにくく、論理的な説明はつかないと判断できる。このように、現在の職務質問と以前の職務質問との間の遡行時間を用いることにより、質問対象者２４０の服装などの相違について論理的な説明がつくか否かを判断することができる。
【００９２】
さらに、現在職務質問を受けている場所と、以前に職務質問を受けた場所との間の距離、つまり、離間距離が離れており、時間的にも十分な時間が経過していれば、質問対象者２４０の服装などが異なっていても、論理的な説明はつけられる。しかしながら、離間距離もそれほど大きくなく、遡行時間もそれほど長くない場合に、質問対象者２４０の服装や外見などが異なっていれば、論理的な説明はつけにくくなる。
【００９３】
したがって、論理的な説明がつけられない場合は、質問対象者２４０には、何らかの理由により、服装を変えなければならない事情があったものと判断できる。したがって、このように判断した結果や、服装が異なっているという情報を警察官２３０に提供すれば、警察官２３０が職務質問を行う場合に、職務質問の内容を検討する際の参考となる。これにより、警察官２３０は、効果的な職務質問を行うことが可能となり、例えば、犯罪の端緒を掴みやすくなる。また、検索部３１３は、遡行時間と離間距離とに基づいて検索範囲や検索対象などを絞り込めば、検索を高速化することが可能となる。
【００９４】
図８は、本実施形態に係る情報処理システム７００の情報処理装置７１０の備える判断テーブルの一例を説明する図である。判断テーブル８０１は、以前の職務質問８１０と現在の職務質問８１０とを格納する。以前（過去）の職務質問８１０には、警察官ＩＤ８１１、日時場所８１２、外見８１３、服装８１４および回答内容８１５などが格納されている。同様に、現在の職務質問８２０には、警察官ＩＤ８２１、日時場所８２２、外見８２３、服装８２４および回答内容８２５などが格納されている。
【００９５】
警察官ＩＤ８１１は、過去に質問対象者２４０に対して職務質問を行った警察官２３１のＩＤであり、警察官ＩＤ８２１は、今現在職務質問中の警察官２３０のＩＤである。日時場所８１２は、過去に質問対象者２４０に職務質問を行った時の日時および場所であり、日時場所８２２は、質問対象者２４０に現在職務質問を行っている日時および場所に関する情報である。外見８１３および服装８１４は、質問対象者２４０が過去に職務質問を受けた際の外見や服装であり、外見８２３および服装８２４は、現在職務質問を受けている質問対象者２４０の外見や服装である。回答内容８１５は、質問対象者２４０が、以前に受けた職務質問に対して回答した内容であり、回答内容８２５は、質問対象者２４０が、現在実施中の職務質問に対して回答している内容である。
【００９６】
質問対象者２４０が、過去に何度か職務質問を受けている場合には、判定部３１５は、過去から現在までの外見や服装、回答内容などの変遷を判定し、判断部７１１は、その変遷に対して論理的に説明がつくか否かを判断してもよい。
【００９７】
質問対象者２４０が、同じ日に何度か職務質問を受けている場合であって、例えば、１時間の間に数回職務質問を受けている場合、職務質問を受けるたびに服装が異なっていれば、判断部７１１は、服装の変化に論理的な説明がつかないと判断できる。また、１か月の間に数回職務質問を受けている場合であれば、職務質問を受けるたびに服装が異なっていても不思議なことはないので、判断部７１１は、服装の変化に論理的な説明がつくものと判断できる。
【００９８】
さらに、判断部７１１は、過去に職務質問を受けた場所の情報や、今現在職務質問を受けている場所の情報などを加味して、質問対象者２４０の回答内容の相違や嘘、矛盾を判断してもよい。
【００９９】
また、判断部７１１は、外見についても同様に判断することが可能であり、短期間で外見が著しく相違している場合、例えば、鼻が高くなったり、一重が二重になったりした場合などには、質問対象者２４０が整形手術を受けている可能性が高いと判断できる。警察官２３０が、質問対象者２４０に職務質問をする前に、これらの情報を知ることができれば、これらの情報に基づいた適切な職務質問を実施することが可能となる。
【０１００】
なお、回答内容８１５、８２５については、判断部７１１は、回答内容８１５、８２５がテキスト化されていれば、テキストマイニングなどにより、回答内容８１５、８２５の変遷や、回答内容８１５、８２５に矛盾が生じていることなどを判断することもできる。例えば、質問対象者２４０の住所や年齢などの違いを判断してもよい。さらに、質問対象者２４０が回答の全てではなく、回答の一部に嘘を含ませている場合、判断部７１１は、回答内容８１５、８２５に基づいて、質問対象者２４０の回答に含まれる嘘や矛盾を検出してもよい。
【０１０１】
そして、判断部７１１は、嘘や矛盾の内容をテキストとして、提供部３１４を介して情報処理端末２２０に提供する。嘘や矛盾の内容を受信した情報処理端末２２０は、ディスプレイ３２２に嘘や矛盾の内容を表示する。回答内容８１５、８２５の変遷や嘘、矛盾の判断には、データマイニングを用いる他に、例えば、人工知能（ＡＩ：Artificial Intelligence）などを用いてもよいが、これらには限定されない。
【０１０２】
図９は、本実施形態に係る情報処理システム７００の情報処理装置７１０のハードウェア構成を説明するブロック図である。ＲＡＭ７１３は、ＣＰＵ５１１が一時記憶用のワークエリアとして使用するランダムアクセスメモリである。ＲＡＭ７１３には、本実施形態の実現に必要なデータを記憶する領域がある。このようなデータとして、ＲＡＭ７１３は、判断内容７１３１を一時的に記憶する。判断内容７１３１は、判断部７１１により判断された内容であり、提供部３１４により情報処理端末２２０に提供される。警察官２３０は、提供された判断内容７１３１を利用することにより、適正な職務質問を実行することが可能となる。
【０１０３】
ストレージ７１４は、データベースや各種パラメータ、本実施形態の実現に必要なプログラムやデータなどを記憶する記憶デバイスである。ストレージ７１４は、判断テーブル８０１を格納する。判断テーブル８０１は、図８に示した構成のテーブルである。ストレージ７１４は、さらに、判断モジュール７１４１を格納する。判断モジュール７１４１は、過去に行われた職務質問と現在行っている職務質問との間の質問対象者２４０の外見や服装、回答内容などの相違について、論理的な説明がつくか否かを判断するモジュールである。このモジュール７１４１は、ＣＰＵ５１１によりＲＡＭ７１３のアプリケーション実行領域５１３８に読み出され、実行される。なお、図９に示したＲＡＭ７１３やストレージ７１４には、情報処理装置７１０が有する汎用の機能や他の実現可能な機能に関するプログラムやデータは図示されていない。
【０１０４】
図１０は、本実施形態に係る情報処理システム７００の情報処理装置７１０の処理手順を説明するフローチャートである。このフローチャートは、図９のＣＰＵ５１１がＲＡＭ５１３を使用して実行し、図７の情報処理装置７１０の機能構成部を実現する。ステップＳ９０１において、判断部７１１は、判定部３１５で判定された相違について、論理的な説明が可能か否かを判断する。ステップＳ９０３において、判断部７１１は、提供部３１４を介して、判断内容を情報処理端末２２０に提供する。
【０１０５】
本実施形態によれば、情報処理装置が相違について論理的に説明がつくか否かを判断するので、警察官に対して、さらに適正な職務質問を行うためのヒントを提供できる。また、職務質問に当たる警察官は、職務質問前や職務質問中などに、質問対象者についてのより詳細な情報を入手できるので、さらに適正な職務質問を行うことができる。
【０１０６】
［第４実施形態］
次に本発明の第４実施形態に係る情報処理システムについて、図１１乃至１４を用いて説明する。図１１は、本実施形態に係る情報処理システム１１００の情報処理装置１１１０の構成を説明するためのブロック図である。本実施形態に係る情報処理装置１１１０は、上記第３実施形態と比べると、類似判定部を有する点で異なる。その他の構成および動作は、第３実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。
【０１０７】
情報処理装置１１１０は、類似判定部１１１１を有する。類似判定部１１１１は、警察官２３０が職務質問している質問対象者２４０を撮像した映像などの画像情報から抽出した特徴量に基づいて、検索部３１３により検索された画像に含まれる人物が、質問対象者２４０とどの程度類似しているかを判定する。類似判定部１１１１は、例えば、特徴量の一致数や所定のアルゴリズムなどに基づいて、類似度を判定する。また、類似判定部１１１１は、判定した類似度をスコア化して、類似度のスコアを情報処理端末２２０に対して提供してもよい。
【０１０８】
図１２は、本実施形態に係る情報処理装置１１１０が備える類似判定テーブル１２０１の一例を説明する図である。類似判定テーブル１２０１は、画像ＩＤ１２１１に関連付けて、抽出特徴量１２１２、一致数１２１３および類似スコア１２１４を格納する。画像ＩＤ１２１１は、記録媒体に記録されている画像を識別するための識別子であり、各画像に一意に付与された識別番号である。
【０１０９】
抽出特徴量１２１２は、画像ＩＤに対応する画像から抽出された特徴量の数などに関する情報である。例えば、鮮明な画像であれば多くの特徴量を抽出することが可能であるが、解像度が低い画像の場合や、ブレている画像の場合、不鮮明な画像の場合などには、抽出できる特徴量の数が少なくなる。
【０１１０】
一致数１２１３は、特徴量がどのくらい一致しているかを、特徴量の一致数で表したデータである。そして、類似スコア１２１４は、特徴量が一致した数を例えば、一致した割合（％）で示した数字であるが、類似スコア１２１４の表し方はこれには限定されない。類似スコア１２１４は、一致した数を点数化して表しても、例えば、Ａランク、Ｂランク、Ｃランクなどのランクで表してもよい。
【０１１１】
図１３は、本実施形態に係る情報処理装置１１１０のハードウェア構成を説明するためのブロック図である。ＲＡＭ１３１３は、ＣＰＵ５１１が一時記憶用のワークエリアとして使用するランダムアクセスメモリである。ＲＡＭ１３１３には、本実施形態の実現に必要なデータを記憶する領域がある。このようなデータとして、ＲＡＭ１３１３は、類似スコア１３１３１を一時的に記憶する。類似スコア１３１３１は、類似判定部１１１１により判定された類似度をスコア化したものであり、例えば、提供部３１４により情報処理端末２２０に提供される。警察官２３０は、提供された類似スコア１３１３１により、検索部３１３により検索された画像情報が、質問対象者２４０とどの程度類似しているかを容易に判断することができる。つまり、類似スコア１３１３１を警察官２３０に提供することにより、検索部３１３により検索された画像情報のうち、どの画像情報が質問対象者２４０の過去の画像に対応するかの判断を手助けすることができる。これにより、警察官２３０は、例えば、サムネイル表示やリスト表示された画像情報から適切な画像を選択することができるので、質問対象者２４０に対して、適正な職務質問を実行することが可能となる。
【０１１２】
ストレージ１３１４は、データベースや各種パラメータ、本実施形態の実現に必要なプログラムやデータなどを記憶する記憶デバイスである。ストレージ１３１４は、類似判定テーブル１２０１を格納する。類似判定テーブル１２０１は、図１２に示したテーブルである。ストレージ１３１４は、さらに、類似判定モジュール１３１４１を格納する。類似判定モジュール１３１４１は、検索部３１３により検索された画像情報と、警察官２３０が現在職務質問を行っている質問対象者２４０の画像情報とがどの程度一致しているかを判定するモジュールである。このモジュール１３１４１は、ＣＰＵ５１１によりＲＡＭ１３１３のアプリケーション実行領域５１３８に読み出され、実行される。なお、図１３に示したＲＡＭ１３１３やストレージ１３１４には、情報処理装置１１１０が有する汎用の機能や他の実現可能な機能に関するプログラムやデータは図示されていない。
【０１１３】
図１４は、本実施形態に係る情報処理装置１１１０の処理手順を説明するフローチャートである。このフローチャートは、図１３のＣＰＵ５１１がＲＡＭ５１３を使用して実行し、図１１の情報処理装置１１１０の機能構成部を実現する。ステップＳ１４０１において、類似判定部１１１１は、以前に行われた職務質問の際に取得した画像情報から抽出した特徴量と、現在行われている職務質問の画像情報から抽出した特徴量との一致数を計数する。そして、ステップＳ１４０３において、類似判定部１１１１は、計数した特徴量の一致数に基づいて、類似度を数値化して表した類似スコアを情報処理端末２２０に対して提供する。
【０１１４】
本実施形態によれば、類似スコアを提供するので、これから職務質問を行おうとする警察官または職務質問を実施している警察官に対して、さらに適正な職務質問を行うためのヒントを提供できる。また、職務質問に当たる警察官は、職務質問前や職務質問中などに、過去の職務質問の情報を入手できるので、さらに適正な職務質問を行うことが可能となる。
【０１１５】
［他の実施形態］
以上、実施形態を参照して本願発明を説明したが、本願発明は上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。また、それぞれの実施形態に含まれる別々の特徴を如何様に組み合わせたシステムまたは装置も、本発明の範疇に含まれる。
【０１１６】
また、本発明は、複数の機器から構成されるシステムに適用されてもよいし、単体の装置に適用されてもよい。さらに、本発明は、実施形態の機能を実現する情報処理プログラムが、システムあるいは装置に直接あるいは遠隔から供給される場合にも適用可能である。したがって、本発明の機能をコンピュータで実現するために、コンピュータにインストールされるプログラム、あるいはそのプログラムを格納した媒体、そのプログラムをダウンロードさせるＷＷＷ(World Wide Web)サーバも、本発明の範疇に含まれる。特に、少なくとも、上述した実施形態に含まれる処理ステップをコンピュータに実行させるプログラムを格納した非一時的コンピュータ可読媒体（non-transitory computer readable medium）は本発明の範疇に含まれる。
【図１】
2017058924.tif 000003
【図２Ａ】
2017058924.tif 000004
【図２Ｂ】
2017058924.tif 000005
【図２Ｃ】
2017058924.tif 000006
【図３】
2017058924.tif 000007
【図４Ａ】
2017058924.tif 000008
【図４Ｂ】
2017058924.tif 000009
【図４Ｃ】
2017058924.tif 000010
【図４Ｄ】
2017058924.tif 000011
【図５Ａ】
2017058924.tif 000012
【図５Ｂ】
2017058924.tif 000013
【図６Ａ】
2017058924.tif 000014
【図６Ｂ】
2017058924.tif 000015
【図７】
2017058924.tif 000016
【図８】
2017058924.tif 000017
【図９】
2017058924.tif 000018
【図１０】
2017058924.tif 000019
【図１１】
2017058924.tif 000020
【図１２】
2017058924.tif 000021
【図１３】
2017058924.tif 000022
【図１４】
2017058924.tif 000023