(57)【要約】【課題】端末装置の不正な使用に対するセキュリティを高めることのできる端末装置、情報収集システム、情報収集方法、および、情報収集プログラムを提供する。【解決手段】端末装置１０は、端末装置の周辺を撮影する撮影部１４ｃと、撮影部１４ｃの撮影によって生成された撮影データを記憶する記憶部１３と、端末装置１０のロック状態の解除の要求が端末装置１０に入力されてからロック状態が解除されるまでに、撮影部１４ｃに周辺を撮影させて撮影部１４ｃの生成した撮影データを記憶部１３に記憶させる制御部１２ｂと、を備える。【選択図】図１
2015095856.tif 000002
【特許請求の範囲】
【請求項１】
端末装置の周辺を撮影する撮影部と、
前記撮影部の撮影によって生成された撮影データを記憶する記憶部と、
前記端末装置のロック状態の解除の要求が前記端末装置に入力されてから前記ロック状態が解除されるまでに、前記撮影部に前記周辺を撮影させて前記撮影部の生成した前記撮影データを前記記憶部に記憶させる制御部と、
を備える端末装置。
【請求項２】
前記端末装置は、ネットワークを介して記憶装置に接続され、
前記記憶部に記憶された前記撮影データを前記記憶装置に送信する送信部をさらに備え、
前記制御部は、前記送信部が前記撮影データの送信を完了するまで前記撮影データを前記記憶部に記憶させ、前記送信部が前記撮影データの送信を完了した後に前記撮影データを前記記憶部から消去する
請求項１に記載の端末装置。
【請求項３】
前記制御部の指示に基づいて、前記撮影部は、
前記ロック状態の解除に際して行われる認証処理に用いられる情報が、前記端末装置に入力されている間、前記端末装置の周辺を動画として撮影し続ける
請求項１または２に記載の端末装置。
【請求項４】
前記制御部の指示に基づいて、前記撮影部は、
前記ロック状態の解除に際して行われる認証処理に用いられる情報が、前記端末装置に入力されたとき、前記端末装置を操作している人の顔画像を撮影する
請求項１〜３のいずれか一項に記載の端末装置。
【請求項５】
端末装置と、
ネットワークを介して前記端末装置に接続される記憶装置と、を含む情報収集システムであって、
前記端末装置は、
前記端末装置の周辺を撮影する撮影部と、
前記端末装置のロック状態の解除の要求が前記端末装置に入力されてから前記ロック状態が解除されるまでに、前記撮影部に前記周辺を撮影させる制御部と、
前記撮影部の撮影によって生成された撮影データを前記記憶装置に送信する送信部と、を備え
前記記憶装置は、前記端末装置から送信された前記撮影データを記憶する
情報収集システム。
【請求項６】
端末装置の有する撮影部が、前記端末装置のロック状態の解除の要求が前記端末装置に入力されてから前記ロック状態が解除されるまでに、前記端末装置の周辺を撮影するステップと、
前記端末装置の有する記憶部が、前記撮影部の撮影によって生成された撮影データを記憶するステップと、
を含む情報収集方法。
【請求項７】
端末装置を、
前記端末装置のロック状態の解除の要求が前記端末装置に入力されてから前記ロック状態が解除されるまでに、前記端末装置が有する撮影部に、前記端末装置の周辺を撮影させる制御部と、
前記撮影部の撮影によって生成された撮影データを記憶する記憶部と、
として機能させる情報収集プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示の技術は、端末装置、情報収集システム、情報収集方法、および、情報収集プログラムに関する。
【背景技術】
【０００２】
近年、ユーザが所持するスマートフォン等の端末には、個人情報のみならず、高いセキュリティを必要とするアプリケーションソフトウェアも保存されている。こうしたアプリケーションソフトウェアとしては、例えば、銀行取引や決済処理等のサービスを、ネットワークを通じて利用するためのアプリケーションソフトウェア等が挙げられる。
【０００３】
そこで、ユーザが端末を使用する際に行われる認証処理を強化することによって、他人が端末を使用することを抑え、端末に保存されている情報の不正な利用に対するセキュリティを向上させる方法が提案されている（例えば特許文献１参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１３−１４０４１５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、例えば銀行取引が行われるとき、ＡＴＭ等の設置端末が利用される環境では、警備員の配置や監視カメラの設置等によって、犯罪行為や不正行為の抑止、あるいは、こうした行為の証拠の記録が可能である。これに対し、ユーザが所持する端末が用いられる環境では、端末が操作されているときの端末の周辺を監視するという観点でのセキュリティ対策は未だ講じられていない。
【０００６】
本開示の技術は、端末装置の不正な使用に対するセキュリティを高めることのできる端末装置、情報収集システム、情報収集方法、および、情報収集プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記課題を解決する端末装置は、端末装置の周辺を撮影する撮影部と、前記撮影部の撮影によって生成された撮影データを記憶する記憶部と、前記端末装置のロック状態の解除の要求が前記端末装置に入力されてから前記ロック状態が解除されるまでに、前記撮影部に前記周辺を撮影させて前記撮影部の生成した前記撮影データを前記記憶部に記憶させる制御部と、を備える。
【０００８】
上記課題を解決する情報収集システムは、端末装置と、ネットワークを介して前記端末装置に接続される記憶装置と、を含む情報収集システムであって、前記端末装置は、前記端末装置の周辺を撮影する撮影部と、前記端末装置のロック状態の解除の要求が前記端末装置に入力されてから前記ロック状態が解除されるまでに、前記撮影部に前記周辺を撮影させる制御部と、前記撮影部の撮影によって生成された撮影データを前記記憶装置に送信する送信部と、を備え前記記憶装置は、前記端末装置から送信された前記撮影データを記憶する。
【０００９】
上記課題を解決する情報収集方法は、端末装置の有する撮影部が、前記端末装置のロック状態の解除の要求が前記端末装置に入力されてから前記ロック状態が解除されるまでに、前記端末装置の周辺を撮影するステップと、前記端末装置の有する記憶部が、前記撮影部の撮影によって生成された撮影データを記憶するステップと、を含む。
【００１０】
上記課題を解決する情報収集プログラムは、端末装置を、前記端末装置のロック状態の解除の要求が前記端末装置に入力されてから前記ロック状態が解除されるまでに、前記端末装置が有する撮影部に、前記端末装置の周辺を撮影させる制御部と、前記撮影部の撮影によって生成された撮影データを記憶する記憶部として機能させる。
【００１１】
上記構成によれば、ロック状態の解除の要求が端末装置に入力されてからロック状態が解除されるまでに、撮影部によって端末装置の周辺が撮影され、生成された撮影データが記憶される。したがって、記憶された撮影データを用いて、端末装置が使用されようとしているときの端末装置の周辺に関する情報の確認が可能である。その結果、端末装置の不正な使用が抑止されること、あるいは、端末装置の不正な使用の証拠が記録されることが期待できるため、端末装置の不正な使用に対するセキュリティを高めることができる。
【００１２】
上記端末装置は、ネットワークを介して記憶装置に接続され、前記記憶部に記憶された前記撮影データを前記記憶装置に送信する送信部をさらに備え、前記制御部は、前記送信部が前記撮影データの送信を完了するまで前記撮影データを前記記憶部に記憶させ、前記送信部が前記撮影データの送信を完了した後に前記撮影データを前記記憶部から消去することが好ましい。
【００１３】
上記構成によれば、撮影部によって生成された撮影データが端末装置とは異なる装置である記憶装置に送信される。そして、送信された撮影データは端末装置の記憶部から消去される。したがって、端末装置に記憶されるデータの容量を抑えつつ、端末装置の周辺に関する情報の確認をすることが可能となる。
【００１４】
上記端末装置において、前記制御部の指示に基づいて、前記撮影部は、前記ロック状態の解除に際して行われる認証処理に用いられる情報が、前記端末装置に入力されている間、前記端末装置の周辺を動画として撮影し続けることが好ましい。
【００１５】
上記構成によれば、認証処理に用いられる情報が端末装置に入力されている間の端末装置の周辺が、撮影部によって撮影される。したがって、端末装置が使用されようとしているときの端末装置の周辺に関する情報の確認が可能となる。特に、端末装置の周辺が動画として記録されるため、端末装置の周辺に関する情報の情報量が多くなる。
【００１６】
上記端末装置において、前記制御部の指示に基づいて、前記撮影部は、前記ロック状態の解除に際して行われる認証処理に用いられる情報が、前記端末装置に入力されたとき、前記端末装置を操作している人の顔画像を撮影することが好ましい。
【００１７】
上記構成によれば、認証処理に用いられる情報が端末装置に入力されたとき、端末装置を操作している人の顔画像が、撮影部によって撮影される。したがって、端末装置が使用されようとしているときの端末装置の周辺に関する情報であって、特に、端末装置を操作している人物に関する情報の確認が可能となる。
【発明の効果】
【００１８】
本開示の技術によれば、端末装置の不正な使用に対するセキュリティを高めることができる。
【図面の簡単な説明】
【００１９】
【図１】本開示の技術における第１、第２の実施形態の情報収集システムの構成を示すシステム構成図である。
【図２】第１の実施形態の情報収集システムでの情報収集の手順を示すシーケンス図である。
【図３】第１の実施形態の情報収集システムにて、情報の収集の過程におけるユーザ端末の表示部の表示内容の推移例を示す画面図である。
【図４】第２の実施形態の情報収集システムでの情報収集の手順を示すシーケンス図である。
【発明を実施するための形態】
【００２０】
（第１の実施形態）
図１〜図３を参照して、端末装置、情報収集システム、情報収集方法、および、情報収集プログラムの第１の実施形態について説明する。
【００２１】
［情報収集システムの構成］
図１を参照して、情報収集システムの構成、および、情報収集システムに含まれる端末装置としてのユーザ端末１０の構成について説明する。
【００２２】
図１に示されるように、情報中継システムは、１以上のユーザ端末１０と、履歴データ記憶装置２０とを含む。ユーザ端末１０と履歴データ記憶装置２０とは、ネットワークに接続可能に構成され、ユーザ端末１０は、履歴データ記憶装置２０にデータを送信可能に構成されている。
【００２３】
ユーザ端末１０は、ネットワークへの接続機能と画像の撮影機能とを有するコンピータ端末であって、例えば、スマートフォンやタブレット端末やパーソナルコンピュータ等に具体化される。ユーザ端末１０は、ユーザ端末１０の識別情報として、端末ＩＤを割り当てられている。以下、ユーザ端末１０の具体的な構成例について説明する。
【００２４】
ユーザ端末１０は、通信部１１と、制御部１２と、記憶部１３と、入出力部１４とを備えている。
送信部の一例である通信部１１は、ユーザ端末１０と接続先の装置との接続処理を実行する。また、通信部１１は、接続先の装置との間でデータの送信および受信を行う。
【００２５】
入出力部１４は、外部からの情報を制御部１２にデータや信号として入力したり、制御部１２からのデータや信号を受けて外部へ情報を出力したりする入出力デバイスであって、例えばディスプレイ等に具体化される表示部１４ａと、例えばタッチパネルやキーボード等に具体化される操作部１４ｂと、例えばカメラ等に具体化される撮影部１４ｃとを備えている。
【００２６】
表示部１４ａは、制御部１２からのデータの一例である画像データを受けて、その画像データに基づき画像を表示する。操作部１４ｂは、ユーザの操作部１４ｂに対する操作を信号に変換して制御部１２に入力する。撮影部１４ｃは、制御部１２からの信号の一例である制御信号を受けて動画や静止画を撮影し、ユーザ端末１０の周辺を示す撮影データを生成して、その撮影データを制御部１２に入力する。撮影部１４ｃは、例えばスマートフォンに備えられているインカメラのように、操作部１４ｂを操作するユーザを撮影可能な位置から、ユーザ端末１０の周辺を撮影する。
【００２７】
制御部１２は、ユーザ端末１０が有する機能の統括的な制御を行う。このうち、情報収集システムによる情報収集に関する機能を実現する構成の一部として、制御部１２は、ロック制御部１２ａと撮影制御部１２ｂとを備えている。
【００２８】
ロック制御部１２ａは、ユーザ端末１０におけるロック状態の設定と解除とを制御する。ロック制御部１２ａは、例えば、操作部１４ｂに対して、特定のボタンの押下等の所定の操作が行われた場合や、操作部１４ｂが所定の時間操作されなかった場合等に、ユーザ端末１０をロック状態にする。ロック状態は、制御部１２が一定の機能の利用を禁止する状態である。ロック状態において制御部１２が禁止する機能は、例えば、通信部１１が担う通信機能の一部や入出力部１４が担う入出力機能の一部であってもよいし、記憶部１３の記憶するデータの中で一定の秘密レベルに設定されたデータを用いる機能であってもよい。
【００２９】
ユーザ端末１０がロック状態であるときに、ロック状態の解除の要求がユーザ端末１０に入力されると、ロック制御部１２ａは、ロック状態を解除するための認証処理に用いる情報の入力を促す表示を表示部１４ａに表示させる。そして、ロック制御部１２ａは、入力された情報に基づいて、ユーザの認証処理を行う。そして、認証処理が成功すると、ロック制御部１２ａは、ユーザ端末１０のロック状態を解除する。
【００３０】
撮影制御部１２ｂは、ロック状態の解除の要求がユーザ端末１０に入力されてからロック状態が解除されるまでに含まれる少なくとも１つの時点において、ユーザ端末１０の周辺の撮影を撮影部１４ｃに指示する。
【００３１】
ロック制御部１２ａによる認証結果と、撮影制御部１２ｂの指示に基づいて生成された撮影データとは、記憶部１３に一時的に記憶された後、通信部１１を介して履歴データ記憶装置２０に送信される。
【００３２】
記憶部１３は、端末ＩＤや、ロック制御部１２ａや撮影制御部１２ｂの処理に必要なデータや、ロック制御部１２ａによる認証結果および撮影部１４ｃが撮影した撮影データ等を、永続的あるいは一時的に記憶している。
【００３３】
なお、制御部１２の備える機能は、複数のＣＰＵやメモリ等の各種のハードウェアによって具体化されてもよく、共通する１つのハードウェアに複数の機能を与えるソフトウェアによって具体化されてもよい。こうしたソフトウェアは、情報収集プログラムとして、記憶部１３に記憶される。
【００３４】
記憶装置の一例である履歴データ記憶装置２０は、ユーザ端末１０から受信したデータを記憶し、ユーザ端末１０から受信したデータを蓄積していく。
［情報収集の手順］
図２および図３を参照して、情報収集システムによる情報収集の手順について説明する。
【００３５】
図２に示されるように、まず、ユーザ端末１０がロック状態であるときに、ユーザによって、ロック状態の解除を要求する操作がユーザ端末１０に対して行われる（ステップＳ１０）。ロック状態の解除を要求する操作は、例えば、任意のボタンの押下等の操作に具体化される。
【００３６】
ロック状態の解除の要求がユーザ端末１０に入力されると、ロック制御部１２ａの指示に基づき、表示部１４ａに暗証番号の入力画面が表示される（ステップＳ１１）。また、ロック状態の解除の要求がユーザ端末１０に入力されると、撮影制御部１２ｂは動画の撮影を撮影部１４ｃに指示し、撮影部１４ｃは、動画の撮影を開始する（ステップＳ１２）。
【００３７】
暗証番号の入力画面の指示に従い、ユーザが操作部１４ｂを操作して暗証番号を入力すると、操作部１４ｂからロック制御部１２ａに、ユーザが操作した番号に応じた信号が入力される（ステップＳ１３）。
【００３８】
ロック制御部１２ａは、記憶部１３に記憶されているデータに基づいて、入力された暗証番号が、ロック状態を解除する際の認証情報として登録されている番号と合致するか否かを判定する（ステップＳ１４）。
【００３９】
認証に成功した場合、すなわち、入力された暗証番号が正しい番号であった場合、撮影制御部１２ｂは顔画像の撮影を撮影部１４ｃに指示する。これにより、撮影部１４ｃは、ユーザの顔にピントを合わせて、ユーザの顔の位置を検出する。そして、撮影部１４ｃが撮影している領域にユーザの顔が捉えられている状態で、撮影制御部１２ｂは、動画として収集された撮影データの一部を静止画のデータとしてサンプリングする。これにより、ユーザ端末１０を操作しているユーザの顔画像を示す撮影データが生成される（ステップＳ１５）。このとき、表示部１４ａには、例えば、撮影部１４ｃが撮影している画像が表示され、ユーザに対して、撮影されている領域にユーザの顔が入るようにユーザとユーザ端末１０との位置を調整することを促すメッセージが示される。
【００４０】
顔画像が撮影されると、撮影制御部１２ｂは動画の撮影の停止を撮影部１４ｃに指示し、撮影部１４ｃは、動画の撮影を終了する（ステップＳ１６）。ロック制御部１２ａおよび撮影制御部１２ｂは、ロック制御部１２ａによる暗証番号の認証結果と、撮影部１４ｃが撮影した動画および顔画像の撮影データと、動画の撮影日時とを記憶部１３に一時的に記憶させる（ステップＳ１７）。そして、ロック制御部１２ａは、ロック状態を解除する（ステップＳ１８）。
【００４１】
ロック状態が解除されると、ユーザ端末１０の通信部１１と履歴データ記憶装置２０との通信が開始される。通信が確立されると、ユーザ端末１０は、記憶部１３に記憶されている暗証番号の認証結果と、動画および顔画像の撮影データと、撮影日時と、ユーザ端末１０の端末ＩＤとを、通信部１１を介して履歴データ記憶装置２０に送信する（ステップＳ１９）。なお、日時は、ロック制御部１２ａによる認証処理が行われた時刻や、撮影データが記憶部１３に記憶された時刻であってもよく、ステップＳ１０〜ステップＳ１７の処理が行われた日時を特定できる時刻であればよい。データの送信が完了すると、制御部１２は、記憶部１３に記憶されている暗証番号の認証結果と、動画および顔画像の撮影データと、撮影日時とを記憶部１３から消去する。
【００４２】
ユーザ端末１０からデータを受信すると、履歴データ記憶装置２０は、これらのデータ、すなわち、ユーザ端末１０での暗証番号の認証結果と、ユーザ端末１０にて撮影された動画および顔画像の撮影データと、動画の撮影日時と、ユーザ端末１０の端末ＩＤとを対応付けて、履歴データとして記憶する（ステップＳ２０）。
【００４３】
なお、認証に失敗した場合、すなわち、入力された暗証番号が誤った番号であった場合、表示部１４ａには、認証に失敗したことを示す通知が表示され、ロック状態は解除されない。このとき、ロック制御部１２ａによる認証結果と、ロック制御部１２ａによって認証が失敗であると判定されるまでに撮影された撮影データと、撮影日時とが記憶部１３に記憶されてもよい。そして、正当なユーザによって暗証番号が入力され、認証処理が成功してロック状態が解除されたときに、記憶部１３に記憶された上記のデータが履歴データ記憶装置２０に送信されてもよい。
【００４４】
また、暗証番号に基づく認証処理が失敗した場合に加えて、顔画像の撮影時にピントが合わない場合や顔の位置の検出ができない場合も、認証処理の失敗として処理されることが好ましい。すなわち、正しい暗証番号が入力されても、ピントが合わない場合や顔の位置の検出ができない場合には、表示部１４ａに、認証に失敗したことを示す通知が表示され、ロック状態は解除されない。この場合、ピントが合わないことや顔の位置の検出ができないことによって顔画像の撮影ができないと判定されたときまでに撮影された動画のデータと、顔画像の撮影に失敗したことを示す情報と、撮影日時とが、暗証番号の認証結果とともに記憶部１３に記憶されてもよい。そして、正当なユーザによって暗証番号が入力され、認証処理が成功してロック状態が解除されたときに、記憶部１３に記憶された上記のデータが履歴データ記憶装置２０に送信されてもよい。
【００４５】
また、顔画像の撮影時において、ピントが合うまでに要した時間が、認証処理の条件として用いられてもよい。例えば、ピントが合うまでに要した時間が、所定の設定時間を超えたとき、上記の場合と同様に認証処理の失敗として処理される。
【００４６】
なお、例えば、ユーザ端末１０が無線による通信網の圏外に位置する場合等、ユーザ端末１０と履歴データ記憶装置２０との通信が開始できない場合には、ロック制御部１２ａによってユーザ端末１０が再びロック状態に設定され、ステップＳ１１〜ステップＳ１８の処理が繰り返されてもよい。この処理の繰り返しは、ユーザ端末１０と履歴データ記憶装置２０との通信が可能となるまで行われ、通信が確立された後に、そのときまでに記憶部１３に記憶されたすべてのデータが履歴データ記憶装置２０に送信される。したがって、履歴データ記憶装置２０は、暗証番号の認証結果と、動画および顔画像の撮影データと、撮影日時と、端末ＩＤとを含む履歴データを複数、ユーザ端末１０から受信する。
【００４７】
ここで、図３を参照して、上述の手順で情報収集が行われる際のユーザ端末１０の表示部１４ａにおける画面の推移について説明する。なお、以下では、ユーザ端末１０をスマートフォンに具体化した例について説明する。
【００４８】
図３の画面Ａに示されるように、ユーザ端末１０に対してロック状態の解除を要求する操作が行われると、表示部１４ａには、暗証番号の入力画面が表示される。このとき、撮影部１４ｃによる撮影は既に開始されており、ユーザが暗証番号を入力する間も撮影は継続されている。撮影が行われていることは、ユーザに通知されてもよいし、通知されなくてもよい。ユーザへの通知が行われれば、ユーザ端末１０を操作している人物は、ユーザ端末１０の周辺の状況が記録されていることに気付くため、正当なユーザに成りすました他人がロック状態を解除してユーザ端末１０を使用することが抑止される。一方、ユーザへの通知が行われなければ、ユーザ端末１０を操作している人物は、ユーザ端末１０の周辺の状況が記録されていることに気付かないため、ユーザ端末１０を不正に使用しようとしている人の画像が、不正行為の証拠として記録されやすい。なお、後述の顔画像の撮影時には、撮影が行われていることがユーザに通知されるため、暗証番号の入力時には、撮影が行われていることがユーザに通知されない方が、不正行為の抑止と証拠の記録との両立を図る上で好ましい。
【００４９】
暗証番号の認証が成功すると、画面Ｂに示されるように、表示部１４ａには、顔画像の撮影画面が表示され、ユーザに対して、ユーザとユーザ端末１０との位置を調整することを促すメッセージが示される。そして、ユーザの顔にピントが合わされ、顔の位置が検出された状態で、顔画像が撮影される。これにより、ユーザ端末１０を操作している人物の顔が判別可能な画像として、顔画像が記録される。なお、このとき、顔画像のサンプリングが複数回行われ、顔画像が複数枚記録されてもよい。複数の顔画像データが履歴データ記憶装置２０に記憶されれば、画像に写っている人物の解析が行いやすくなる。
【００５０】
顔画像が撮影されると、撮影部１４ｃによる撮影は終了し、画面Ｃに示されるように、ユーザ端末１０のロック状態が解除されて、ユーザ端末１０における機能の利用の制限が解除される。
【００５１】
なお、撮影部１４ｃが撮影する画像の解像度は、画像解析に必要とする画像の鮮明さと通信や記憶に要するデータ容量とのバランスを考慮して決定される。例えば、解像度は、ピクセル数が４８０×６４０ｐｉｘ程度となるように設定される。また、撮影制御部１２ｂは、撮影された画像のサイズを縮小したり、画像の色数を削減したりして画像を加工することにより、画像のデータサイズを小さくしてもよい。これによれば、通信や記憶に要するデータ容量が削減できる。
【００５２】
また、撮影部１４ｃが撮影する動画のフレームレートは、滑らかな動画を得るためには３０ｆｐｓ程度が必要であるが、不正行為の証拠としての解析が目的であれば、１０〜２０ｆｐｓ程度、好ましくは１５ｆｐｓ程度であればよい。通常の動画よりもフレームレートを低く設定することによって、不正行為の証拠としての解析を可能としつつ、通信や記憶に要するデータ容量を削減することができる。また、撮影は高いフレームレートで行われ、撮影制御部１２ｂは、撮影されたデータからフレームを間引くことによって、動画のデータサイズを小さくしてもよい。これによっても、通信や記憶に要するデータ容量を削減することができる。
【００５３】
［情報収集システムの作用］
上述の実施形態がもたらす作用について説明する。
第１の実施形態では、ロック状態の解除に際しての認証処理に用いられる情報である暗証番号が、ユーザ端末１０に入力されている間、ユーザ端末１０の周辺が動画として撮影し続けられる。そして、撮影された動画のデータが、履歴データ記憶装置２０に記憶される。したがって、ユーザ端末１０が使用されようとしているときのユーザ端末１０の周辺の状況であって、特に、認証処理に用いられる情報が入力されているときのユーザ端末１０の周辺に関する情報が履歴データ記憶装置２０に集められる。このとき、ユーザ端末１０の周辺が動画として撮影されるため、収集される情報量が多くなる。
【００５４】
ユーザ端末１０の周辺に関する情報には、ユーザ端末１０を操作している人物の風貌や、その人物の挙動等に関する情報が含まれる。その結果、例えば、正当なユーザに成りすました他人によるユーザ端末１０の不正な使用が後で発覚した場合には、履歴データ記憶装置２０に蓄積されているデータを解析して、これらのデータを不正行為の証拠として利用することができる。この際、動画のデータとともに履歴データとして履歴データ記憶装置２０に記憶される撮影日時やユーザ端末１０の端末ＩＤ等は、解析が必要なデータの特定や解析の補助に用いられる。
【００５５】
また、上述のように、動画の撮影時に、撮影が行われていることをユーザに通知すれば、不正行為の抑止も可能となる。
また、第１の実施形態では、暗証番号がユーザ端末１０に入力され、ユーザ端末１０における認証処理が成功した場合に、ユーザ端末１０を操作している人の顔画像が撮影される。そして、撮影された顔画像のデータが、履歴データ記憶装置２０に記憶される。したがって、ユーザ端末１０が使用されようとしているときのユーザ端末１０の周辺の状況であって、特に、ユーザ端末１０を操作している人物に関する情報が履歴データ記憶装置２０に集められる。
【００５６】
顔画像のデータが履歴データ記憶装置２０に記憶されることによって、ユーザ端末１０を操作している人物の顔が判別可能な画像が記録されるため、これらのデータを不正行為の証拠として解析する場合には、解析が行いやすくなる。
【００５７】
また、ユーザに対して顔画像の撮影が要求されるため、不正行為の抑止が可能となる。
また、上述のように、顔画像のピントが合っているか否かや、ピントが合うまでに要した時間等の顔画像の撮影時の状況が認証処理に利用される場合には、認証のセキュリティが高められる。また、認証結果が失敗であるときの動画のデータが履歴データ記憶装置２０に記憶される場合には、このデータを解析することによって、ユーザ端末１０を不正に使用しようとする行為の発見やこうした行為の証拠の確保を行うことも可能となる。
【００５８】
このように、第１の実施形態によれば、ロック状態の解除の要求がユーザ端末１０に入力されてから、ロック状態が解除されるまでの間に、ユーザ端末１０の周辺が撮影され、撮影により生成された撮影データが履歴データ記憶装置２０に記憶される。したがって、ユーザ端末１０が使用されようとしているときのユーザ端末１０の周辺に関する情報の確認が可能となり、ユーザ端末１０の不正な使用に対するセキュリティを高めることができる。また、動画と静止画である顔画像との２種類の画像が撮影されるため、収集される情報の有用性が高められる。特に、撮影される画像が、撮影されていることをユーザが認識していない状態で撮影された画像である動画と、撮影されていることをユーザが認識している状態で撮影された画像である顔画像とを含むと、不正行為の抑止と証拠の記録との両立が図られるため、セキュリティがより高められる。
【００５９】
以上説明したように、第１の実施形態によれば、以下の効果が得られる。
（１）ロック状態の解除の要求がユーザ端末１０に入力されてから、ロック状態が解除されるまでの間に、ユーザ端末１０の周辺が撮影され、撮影データが履歴データ記憶装置２０に記憶される。したがって、ユーザ端末１０が使用されようとしているときのユーザ端末１０の周辺に関する情報の確認が可能となり、ユーザ端末１０の不正な使用に対するセキュリティを高めることができる。
【００６０】
（２）認証処理に用いられる情報がユーザ端末１０に入力されている間のユーザ端末１０の周辺が、動画として撮影されるため、収集される情報量が多くなる。
（３）認証処理に用いられる情報がユーザ端末１０に入力されたとき、ユーザ端末１０を操作している人の顔画像が撮影されるため、ユーザ端末１０を操作している人物に関する情報の確認が可能となる。
【００６１】
（４）撮影部１４ｃによって撮影された撮影データが、ユーザ端末１０とは異なる装置である履歴データ記憶装置２０に蓄積されるため、ユーザ端末１０に記憶されるデータの容量を抑えつつ、ユーザ端末１０の周辺に関する情報を確認することが可能となる。
【００６２】
（第２の実施形態）
図４を参照して、端末装置、情報収集システム、情報収集方法、および、情報収集プログラムの第２の実施形態について説明する。第２の実施形態は、第１の実施形態と比較して、ユーザ端末１０の周辺が静止画としてのみ撮影される点が異なる。以下では、第１の実施形態との相違点を中心に説明し、第１の実施形態と同様の構成については同じ符号を付してその説明を省略する。
【００６３】
［情報収集の手順］
図４を参照して、情報収集システムによる情報収集の手順について説明する。
図４に示されるように、まず、ユーザ端末１０がロック状態であるときに、ユーザによって、ロック状態の解除を要求する操作がユーザ端末１０に対して行われる（ステップＳ３０）。ロック状態の解除を要求する操作は、例えば、任意のボタンの押下等の操作に具体化される。
【００６４】
ロック状態の解除の要求がユーザ端末１０に入力されると、ロック制御部１２ａの指示に基づき、表示部１４ａに暗証番号の入力画面が表示される（ステップＳ３１）。暗証番号の入力画面の指示に従い、ユーザが操作部１４ｂを操作して暗証番号を入力すると、操作部１４ｂからロック制御部１２ａに、ユーザが操作した番号に応じた信号が入力される（ステップＳ３２）。
【００６５】
ロック制御部１２ａは、記憶部１３に記憶されているデータに基づいて、入力された暗証番号が、ロック状態を解除する際の認証情報として登録されている番号と合致するか否かを判定する（ステップＳ３３）。
【００６６】
認証に成功した場合、すなわち、入力された暗証番号が正しい番号であった場合、撮影制御部１２ｂは顔画像の撮影を指示する信号を撮影部１４ｃに入力する。これにより、撮影部１４ｃが起動し、ユーザの顔にピントを合わせて、顔の位置を検出する。そして、撮影部１４ｃが映している領域にユーザの顔が捉えられている状態で、撮影部１４ｃは、静止画を撮影する（ステップＳ３４）。これにより、ユーザ端末１０を操作しているユーザの顔画像を示す撮影データが生成される。このとき、表示部１４ａには、例えば、撮影部１４ｃが映している画像が表示され、ユーザに対して、撮影される領域にユーザの顔が入るようにユーザとユーザ端末１０との位置を調整することを促すメッセージが示される。なお、顔画像の撮影が終了すると、撮影部１４ｃは駆動を停止する。
【００６７】
顔画像が撮影されると、ロック制御部１２ａおよび撮影制御部１２ｂは、ロック制御部１２ａによる暗証番号の認証結果と、撮影部１４ｃが撮影した顔画像の撮影データと、顔画像の撮影日時とを記憶部１３に一時的に記憶させる（ステップＳ３５）。そして、ロック制御部１２ａは、ロック状態を解除する（ステップＳ３６）。
【００６８】
ロック状態が解除されると、ユーザ端末１０の通信部１１と履歴データ記憶装置２０との通信が開始される。通信が確立されると、ユーザ端末１０は、記憶部１３に記憶されている暗証番号の認証結果と、顔画像の撮影データと、撮影日時と、ユーザ端末１０の端末ＩＤとを、通信部１１を介して履歴データ記憶装置２０に送信する（ステップＳ３７）。データの送信が完了すると、制御部１２は、記憶部１３に記憶されている暗証番号の認証結果と、顔画像の撮影データと、撮影日時とを記憶部１３から消去する。
【００６９】
ユーザ端末１０からデータを受信すると、履歴データ記憶装置２０は、これらのデータ、すなわち、ユーザ端末１０での暗証番号の認証結果と、ユーザ端末１０にて撮影された顔画像の撮影データと、顔画像の撮影日時と、ユーザ端末１０の端末ＩＤとを対応付けて、履歴データとして記憶する（ステップＳ３８）。
【００７０】
なお、認証に失敗した場合、すなわち、入力された暗証番号が誤った番号であった場合、表示部１４ａには、認証に失敗したことを示す通知が表示され、ロック状態は解除されない。
【００７１】
また、暗証番号に基づく認証処理が失敗した場合に加えて、顔画像の撮影時にピントが合わない場合や顔の位置の検出ができない場合も、認証処理の失敗として処理されることが好ましい。すなわち、正しい暗証番号が入力されても、ピントが合わない場合や顔の位置の検出ができない場合には、表示部１４ａに、認証に失敗したことを示す通知が表示され、ロック状態は解除されない。なお、ピントが合わない場合や、顔の位置が検出できない場合であっても、所定の時間が経過した場合には、静止画が撮影されてもよい。静止画には、ユーザ端末１０を操作しているユーザの顔、もしくは、少なくともユーザ端末１０の周辺の様子が写る。この場合、撮影された静止画のデータと、顔画像の撮影に失敗したことを示す情報と、撮影日時とが、暗証番号の認証結果とともに記憶部１３に記憶される。そして、正当なユーザによって暗証番号が入力され、認証処理が成功してロック状態が解除されたときに、記憶部１３に記憶された上記のデータが履歴データ記憶装置２０に送信される。
【００７２】
また、顔画像の撮影時において、ピントが合うまでに要した時間が、認証処理の条件として用いられてもよい。例えば、ピントが合うまでに要した時間が、所定の設定時間を超えたとき、上記の場合と同様に認証処理の失敗として処理される。
【００７３】
なお、ユーザ端末１０と履歴データ記憶装置２０との通信が開始できない場合には、ロック制御部１２ａによってユーザ端末１０が再びロック状態に設定され、ステップＳ３１〜ステップＳ３６の処理が繰り返されてもよい。この処理の繰り返しは、ユーザ端末１０と履歴データ記憶装置２０との通信が可能となるまで行われ、通信が確立された後に、そのときまでに記憶部１３に記憶されたすべてのデータが履歴データ記憶装置２０に送信される。したがって、履歴データ記憶装置２０は、暗証番号の認証結果と、顔画像の撮影データと、撮影日時と、端末ＩＤとを含む履歴データを複数、ユーザ端末１０から受信する。
【００７４】
［情報収集システムの作用］
上述の実施形態がもたらす作用について説明する。
第２の実施形態では、暗証番号がユーザ端末１０に入力されたとき、ユーザ端末１０を操作している人の顔画像が撮影される。そして、撮影された顔画像のデータが、履歴データ記憶装置２０に記憶される。したがって、ユーザ端末１０が使用されようとしているときのユーザ端末１０の周辺に関する情報が、履歴データ記憶装置２０に記憶される。その結果、第１の実施形態と同様に、履歴データ記憶装置２０に蓄積されたデータを不正行為の証拠として利用することや、不正行為を抑止することが可能となる。
【００７５】
また、上述のように、顔画像のピントが合っているか否かや、ピントが合うまでに要した時間等の顔画像の撮影時の状況が認証処理に利用される場合には、認証のセキュリティが高められる。また、ピントが合わない場合や顔の位置の検出ができない場合にも、静止画が撮影されて、撮影されたデータが履歴データ記憶装置２０に記憶されると、こうした場合にも、ユーザ端末１０の周辺の様子は記録される。したがって、これらのデータを、ユーザ端末１０を不正に使用しようとする行為の証拠として解析する場合には、ユーザ端末１０の周辺の状況の把握に役立つ。
【００７６】
このように、第２の実施形態によれば、ロック状態の解除の要求がユーザ端末１０に入力されてから、ロック状態が解除されるまでの間に、ユーザ端末１０の周辺が静止画として撮影され、撮影により生成された撮影データが履歴データ記憶装置２０に記憶される。ユーザ端末１０の周辺が静止画としてのみ記録される場合であっても、上述のように、ユーザ端末１０が使用されようとしているときのユーザ端末１０の周辺に関する情報の確認が可能となり、ユーザ端末１０の不正な使用に対するセキュリティを高めることができる。
【００７７】
以上説明したように、第２の実施形態によれば、第１の実施形態の（１）、（３）、（４）の効果が得られる。
なお、上記の各実施形態は、以下のように変更して実施することが可能である。
【００７８】
・暗証番号がユーザ端末１０に入力される前に、顔画像の撮影が行われてもよい。また、暗証番号がユーザ端末１０に入力される前と後との双方において、顔画像の撮影が行われてもよい。撮影により生成された撮影データは、ユーザ端末１０と履歴データ記憶装置２０との通信の確立後に、履歴データ記憶装置２０に送信されて、履歴データ記憶装置２０に記憶される。暗証番号がユーザ端末１０に入力される前と後とに顔画像が撮影される場合、暗証番号の入力が完了する前にピントが合わなくなった場合には、ユーザ端末１０における認証処理の失敗として処理されてもよい。
【００７９】
また、第１の実施形態においては、暗証番号がユーザ端末１０に入力された後に、動画の撮影が開始されてもよい。あるいは、顔画像の撮影が行われず、動画のみが撮影されてもよい。また、撮影部１４ｃの撮影する画像は、ユーザ端末１０の周辺の状況を示す動画に限らず、ユーザ端末１０の周辺の状態を示す静止画であってもよく、この際に、所定の間隔で撮影される複数の静止画であってもよい。
【００８０】
また、第１および第２の実施形態において、撮影部１４ｃの撮影する画像は、ユーザ端末１０の周辺を示す画像であればよく、顔画像に限らず、顔画像を含まない周辺の画像であってもよく、この際に、被写体の位置の検出やピント合わせが行われなくともよい。
【００８１】
要は、画像が撮影されるタイミングに関わらず、また、撮影される画像が動画であるか静止画であるかに関わらず、ロック状態の解除の要求がユーザ端末１０に入力されてから、ロック状態が解除されるまでに含まれる少なくとも１つの時点において、撮影部１４ｃによる撮影が行われれば、そのユーザ端末１０の周辺を示す撮影データを生成することはできる。
【００８２】
・ユーザ端末１０における認証処理には、暗証番号を用いた認証に限らず、例えばパスワードや画像選択を利用した認証、あるいは、音声認証や生体認証等、公知の認証技術が用いられればよい。また、撮影部１４ｃが撮影した顔画像を用いて、ユーザ端末１０にて顔認証が行われてもよい。この場合、ユーザ端末１０には、予め、照合対象となるユーザの顔のデータが登録される、もしくは、その時点までのロック解除時に撮影された顔画像のデータがユーザ端末１０の記憶部１３に蓄積され、蓄積された顔画像が照合対象とされる。また、顔画像のピントが合っているか否かや、ピントが合うまでに要した時間等の顔画像の撮影時の状況が認証処理に利用される場合等、撮影部１４ｃの撮影に基づくデータが認証処理に利用される場合には、撮影部１４ｃの撮影に基づくデータとは異なるデータを用いた認証処理が行われなくてもよい。
【００８３】
・制御部１２が、撮影部１４ｃが撮影している画像を解析して、画像に写っている人物の帽子や眼鏡等の着用の有無を検出し、これらの着用が有ると判断される場合には、表示部１４ａに、帽子や眼鏡等を外すように促す催促や認証処理が正しく行われない可能性がある旨の警告等を表示してもよい。
【００８４】
・ユーザ端末１０での認証結果と、ユーザ端末１０にて生成された撮影データと、撮影日時とは、履歴データ記憶装置２０に送信されず、ユーザ端末１０に蓄積されてもよい。すなわち、記憶部１３は、これらのデータを一時的にではなく、永続的に記憶してもよい。この場合、例えば、任意のタイミングで、ユーザがユーザ端末１０を他の装置に接続したときに、記憶部１３に蓄積されているデータがユーザ端末１０と接続された装置に移されてもよい。
【００８５】
・ユーザ端末１０がロック状態であるときに、ユーザ端末１０の通信機能が制限されていない場合、すなわち、ロック状態であるときにユーザ端末１０と履歴データ記憶装置２０との通信が可能である場合には、ロック状態が解除される前に、記憶部１３に一時的に記憶されたデータが履歴データ記憶装置２０に送信されてもよい。
【００８６】
・履歴データ記憶装置２０は、ユーザ端末１０から受信したデータを蓄積する記憶部に加えて、蓄積されたデータの解析や利用を行う制御部を備えてもよい。履歴データ記憶装置２０における制御部は、例えば、ユーザ端末１０から受信した顔画像に写っている人物が、その時点までにそのユーザ端末１０から送信されたデータとして蓄積されている顔画像に写っている人物と同一人物であるか否かの判定を行う。
【００８７】
・ロック状態の解除を要求する操作は、任意のボタンを押下する操作に限らず、ロック状態の解除を要求する操作は、認証処理に用いられる情報の入力画面の表示を要求する操作等であってもよい。また、ロック状態の解除の要求は、ユーザ端末１０に対して行われる操作による操作信号の入力に限らず、例えば、ユーザ端末１０と外部との通信を開始するためのユーザ端末１０に対する通信開始要求の入力であってもよい。要は、ロック状態を解除するために最初に必要な処理がユーザ端末１０にて行われる契機となる入力であればよい。
【符号の説明】
【００８８】
１０…ユーザ端末、１１…通信部、１２…制御部、１２ａ…ロック制御部、１２ｂ…撮影制御部、１３…記憶部、１４…入出力部、１４ａ…表示部、１４ｂ…操作部、１４ｃ…撮影部、２０…履歴データ記憶装置。
【図１】
2015095856.tif 000003
【図２】
2015095856.tif 000004
【図３】
2015095856.tif 000005
【図４】
2015095856.tif 000006