(57)【要約】  利便性が高く精度の高い情報処理端末向けの顔認証を用いた機能ロック解除システムを提供する。この機能ロック解除システムでは、ユーザがキー入力手段によりキー入力を行うことをきっかけにして、顔認証手段が、撮像部で撮影したユーザの顔画像を用いて顔認証を行う。これとともに、キー入力内容判定手段が、入力されたキー入力のパターンが予め登録されているパターンと一致するか否かを判定する。そして、顔認証手段による顔認証結果と、キー入力内容判定手段３２によるキー入力判定結果とに基づいて、ロック解除判定手段がロックを解除するか否かを判定する。ロック解除判定手段によってロック解除と判定された場合には、機能ロック部がロックを解除する。
2007119818.tif 000002
【特許請求の範囲】
【請求項１】
情報処理端末の機能をロックした状態であるロック状態を解除する機能ロック解除システムであって、
認証対象のユーザを撮影した画像と、予め登録されている顔の特徴を示す顔データとに基づいて一致度を計算することによって、認証処理を実行する顔認証手段と、
ユーザの操作に応じて入力される情報を検出すると、前記顔認証手段による顔認証を開始する認証開始手段と、
前記認証開始手段が検出した情報で示されるユーザ操作のパターンが、予め登録されているパターンと一致するか否かを判定するパターン判定手段と、
前記顔認証手段による認証結果と、前記パターン判定手段による判定結果とに基づいて、当該情報処理端末のロック状態を解除するか否かを判定するロック解除判定手段とを備えたことを特徴とする機能ロック解除システム。
【請求項２】
前記ロック解除判定手段によって機能ロックを解除しないことが決定された場合に、前記顔認証手段が認証に用いた画像を、ログ画像として記憶するログ画像記憶手段を備えた請求項１記載の機能ロック解除システム。
【請求項３】
前記顔認証手段は、
画像中の顔の位置を特定する顔検出手段と、
前記顔検出手段によって特定された顔の位置から顔の特徴を示す顔データを作成する顔データ作成手段と、
前記顔データ作成手段によって作成された顔データと、予め登録されている顔データとの一致度を判定する顔照合手段とを含む請求項１または請求項２記載の機能ロック解除システム。
【請求項４】
前記ログ画像記憶手段は、前記顔検出手段によって特定された顔の位置に基づいて抽出される顔領域の画像を、ログ画像として記憶する請求項３記載の機能ロック解除システム。
【請求項５】
前記認証開始手段は、ユーザのキー入力操作に応じて入力される情報を検出した場合に、顔認証手段による顔認証を開始し、
前記パターン判定手段は、前記前記認証開始手段が検出した情報で示されるキー入力のパターンが、予め登録されているキーパターンと一致するか否かを判定する請求項１から請求項４のうちのいずれか１項に記載の機能ロック解除システム。
【請求項６】
前記パターン判定手段が判定に用いるキーパターンは、１桁の数字、文字またはファンクションキーである請求項５記載の機能ロック解除システム。
【請求項７】
前記パターン判定手段が判定に用いるキーパターンは、複数回連続する同一の数字、文字、またはファンクションキーである請求項５記載の機能ロック解除システム。
【請求項８】
前記パターン判定手段が判定に用いるキーパターンは、所定の長さの数字、文字、またはファンクションキーの入力列である請求項５記載の機能ロック解除システム。
【請求項９】
情報処理端末の機能をロックした状態であるロック状態を解除する機能ロック解除システムであって、
ユーザの操作に応じて入力される情報を検出すると、複数の方式によるユーザ認証を開始する認証開始手段と、
所定の方式を用いて、操作を行った前記ユーザが当該情報処理端末の使用を許可された正規ユーザであるか否かを判定する認証処理を実行する複数の認証実行手段と、
前記認証開始手段によって開始された前記複数の認証実行手段による認証結果に基づいて、当該情報処理端末のロック状態を解除するか否かを判定するロック解除判定手段とを備えたことを特徴とする機能ロック解除システム。
【請求項１０】
前記ロック解除判定手段は、前記認証開始手段が開始した全ての認証実行手段によって認証対象のユーザが正規ユーザであると判定されると、当該情報処理端末のロック状態を解除することを決定する請求項９記載の機能ロック解除システム。
【請求項１１】
情報処理端末の機能をロックした状態であるロック状態を解除する機能ロック解除方法であって、
前記情報処理端末が、ユーザの操作に応じて入力される情報を検出すると、認証対象のユーザを撮影する開始ステップと、
前記認証対象のユーザを撮影した画像と、予め登録されている顔の特徴を示す顔データとに基づいて一致度を計算することによって、認証処理を実行する顔認証ステップと、
前記開始ステップで検出された情報で示されるユーザ操作のパターンが、予め登録されているパターンと一致するか否かを判定するパターン判定ステップと、
前記顔認証ステップにおける認証結果と、前記パターン判定ステップにおける判定結果とに基づいて、当該情報処理端末のロック状態を解除するか否かを判定するロック解除判定ステップとを含むことを特徴とする機能ロック解除方法。
【請求項１２】
情報処理端末の機能をロックした状態であるロック状態を解除する機能ロック解除方法であって、
前記情報処理端末が、ユーザの操作に応じて入力される情報を検出すると、複数の方式によるユーザ認証を開始するステップと、
所定の方式を用いて、操作を行った前記ユーザが当該情報処理端末の使用を許可された正規ユーザであるか否かを判定する認証処理を実行する複数のステップと、
前記複数の方式による認証結果に基づいて、当該情報処理端末のロック状態を解除するか否かを判定するステップとを含むことを特徴とする機能ロック解除方法。
【請求項１３】
情報処理端末の機能をロックした状態であるロック状態を解除するための機能ロック解除用プログラムであって、
コンピュータに、
ユーザの操作に応じて入力される情報を検出すると、認証対象のユーザを撮影する開始処理、
前記認証対象のユーザを撮影した画像と、予め登録されている顔の特徴を示す顔データとに基づいて一致度を計算することによって、認証処理を実行する顔認証処理、
前記開始処理で検出された情報で示されるユーザ操作のパターンが、予め登録されているパターンと一致するか否かを判定するパターン判定処理、および
前記顔認証処理における認証結果と、前記パターン判定処理における判定結果とに基づいて、当該情報処理端末のロック状態を解除するか否かを判定するロック解除判定処理
を実行させるための機能ロック解除用プログラム。
【請求項１４】
情報処理端末の機能をロックした状態であるロック状態を解除するための機能ロック解除用プログラムであって、
コンピュータに、
ユーザの操作に応じて入力される情報を検出すると、複数の方式によるユーザ認証を開始する処理、
所定の方式を用いて、操作を行った前記ユーザが当該情報処理端末の使用を許可された正規ユーザであるか否かを判定する認証処理を実行する複数の処理、および
前記複数の方式による認証結果に基づいて、当該情報処理端末のロック状態を解除するか否かを判定する処理
を実行させるための機能ロック解除用プログラム。
【請求項１５】
請求項１から請求項１０までのいずれか１項に記載の機能ロック解除システムを用いたことを特徴とする情報処理端末。
【請求項１６】
請求項１から請求項１０までのいずれか１項に記載の機能ロック解除システムを用いたことを特徴とする携帯電話機。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理端末のロック状態を解除する機能ロック解除システム、機能ロック解除方法、および機能ロック解除用プログラムに関し、特に、複数の認証方式を用いてロック状態を解除する機能ロック解除システム、機能ロック解除方法、および機能ロック解除用プログラムに関する。
【背景技術】
【０００２】
例えば、顔認証を用いて情報処理端末のロック状態の解除を行うものとして、非特許文献１に記載されているスクリーンセーバによるロック解除機能がある。非特許文献１に記載のスクリーンセーバによるロック解除機能は、パーソナルコンピュータ（ＰＣ）のユーザが、一定時間ＰＣに対して操作を行っていない場合に、スクリーンセーバを起動させて、画面に表示されている情報を隠蔽し、かつ、キーボードやマウスなどの入力インタフェースを無効とする機能である。ユーザは、ＰＣを再起動する際には、スクリーンセーバ起動中に常時起動しているＰＣに取り付けられたカメラを用いて、顔を撮影し、顔認証を行わせることで、スクリーンセーバによるロック機能を解除する。【０００３】
また、非特許文献２には、顔認証を用いた機能ロック解除システムを適用した携帯電話機の操作方法が記載されている。非特許文献２に記載された操作方法で示される携帯電話機の処理フローを図８に示す。【０００４】
図８に示すように、非特許文献２に記載の携帯電話機は、ユーザがロックの解除キーを押下すると（ステップＣ１）、顔認証処理を起動し、予めユーザの顔を撮影した登録画像を用いて顔認証を実行する（ステップＣ２）。顔認証の結果、登録画像の人物（登録人物）と、現在カメラの前にいるユーザ（被認証者）とが同一人物でないと判断された場合には（ステップＣ３のＮｏ）、ロックを解除せずに、そのまま処理を終了する。一方、顔認証の結果、登録人物とユーザとが同一人物であると判断された場合には（ステップＣ３のＹｅｓ）、更に、暗証番号の入力を要求する（ステップＣ４）。携帯電話機は、入力された暗証番号と予め登録されている暗証番号とが一致するか否かを判定し、一致しなかった場合には（ステップＣ５のＮＧ）、ロックを解除せずに、そのまま処理を終了する。一方、暗証番号が一致した場合には（ステップＣ５のＯＫ）、ロックを解除して処理を終了する（ステップＣ６）。【０００５】
また、特許文献１には、使用中のユーザの入れ替わりによる不正アクセス等を防止するために、本人認証を使用中に間欠的に実行する本人認証装置が記載されている。また、特許文献１に記載の本人認証装置では、複数の方式の本人認証を選択的に実行する例として、顔画像並びにキー入力特性（例えば、タイミング等）を用いたバイオメトリクス方式とパスワード方式とを組み合わせた例が挙げられている。【０００６】
【特許文献１】特開２００２−０５５９５６号公報（段落００３１−００３４）
【非特許文献１】鈴木政弘，“離籍管理システム「FaceMonitor」顔検出／顔照合エンジン「NeoFace」”，画像ラボ，２００５年３月号，日本，２００５年，ｐ５４−５７
【非特許文献２】”ＦＯＭＡ  Ｐ９０１ｉＳ  取扱説明書”，ＮＴＴ  ＤｏＣｏＭｏ，２００５年１１月，ｐ．３４２−３４４
【発明の開示】
【発明が解決しようとする課題】
【０００７】
第１の問題点は、ロック状態の解除に顔認証だけを用いると、正しくロック解除できる精度が低いという点である。顔認証処理は、登録していない人物を登録人物であるとして受理してしまう他人受入率を０％とすることができず、また、他人受入率を低下させると、登録している人物を登録人物であるとして受理する本人受入率が低下してしまう性質がある。また、被認証者の顔が撮影された環境や向きが、登録人物の登録時と異なる場合、認証精度が低下する傾向にある。そのため、例えばロック解除に多く用いられている４桁のＰＩＮ（Personal Identification Number）コードと同程度の認証精度を出すのが困難となっている。従って、ロック状態の解除に顔認証だけを用いると、ロック解除の精度が、顔認証処理の精度だけで決まってしまうため、ＰＩＮコードによるロック解除に比べて、低くなってしまう。【０００８】
第２の問題点は、非特許文献１に記載のスクリーンセーバによるロック機能のように、常時カメラを起動しておくと、電力消費が大きいという点である。非特許文献１に記載のスクリーンセーバによるロック機能では、被認証者がロック解除を行うタイミングを特定する方法がないために、常にロック解除を行うためのカメラを起動しておかなければならず、電力消費が大きくなってしまう。【０００９】
第３の問題点は、非特許文献２に記載の携帯電話機のように、顔認証と他の認証とを併用してロック解除の精度を高めると、ユーザの利便性が損なわれるという点である。非特許文献２に記載の携帯電話機では、ロック解除の精度を改善するために、ユーザに対し、顔認証を開始する際のボタン押下の作業以外にも、ＰＩＮコードの入力作業を要求する。すなわち、ロックを解除するまでに、ユーザに複数回の作業を要求しなければならず、ユーザの利便性が損なわれてしまう。【００１０】
また、特許文献１に記載の本人認証装置を機能ロック解除システムに適用した場合、複数の本人認証方式を選択的に実行することによって、使用許可までの時間を短縮しユーザの利便性を向上することができるが、ある方式で肯定的である場合に以後の本人認証を省略したのでは、ロック解除の精度が低くなってしまうという点で、第１の問題点と同様である。【００１１】
そこで、本発明は、ユーザの利便性を損なわずに、機能ロックの解除を精度高く実現できる機能ロック解除システム、機能ロック解除方法、および機能ロック解除用プログラムを提供することを目的とする。
【課題を解決するための手段】
【００１２】
本発明による機能ロック解除システムは、情報処理端末の機能をロックした状態であるロック状態を解除する機能ロック解除システムであって、認証対象のユーザを撮影した画像と、予め登録されている顔の特徴を示す顔データとに基づいて一致度を計算することによって、認証処理を実行する顔認証手段（例えば、顔認証手段３３）と、ユーザの操作に応じて入力される情報を検出すると、顔認証手段による顔認証を開始する認証開始手段（例えば、キー入力検知手段３１）と、認証開始手段が検出した情報で示されるユーザ操作のパターンが、予め登録されているパターンと一致するか否かを判定するパターン判定手段（例えば、キー入力内容判定手段３２）と、顔認証手段による認証結果と、パターン判定手段による判定結果とに基づいて、当該情報処理端末のロック状態を解除するか否かを判定するロック解除判定手段（例えば、ロック解除判定手段３４）とを備えたことを特徴とする。【００１３】
また、ロック解除判定手段によって機能ロックを解除しないことが決定された場合に、顔認証手段が認証に用いた画像を、ログ画像として記憶するログ画像記憶手段（例えば、ログ画像保存手段３５）を備えていてもよい。【００１４】
また、顔認証手段は、画像中の顔の位置を特定する顔検出手段（例えば、顔検出手段３３１）と、顔検出手段によって特定された顔の位置から顔の特徴を示す顔データを作成する顔データ作成手段（例えば、顔データ作成手段３３２）と、顔データ作成手段によって作成された顔データと、予め登録されている顔データとの一致度を判定する顔照合手段（例えば、顔照合手段３３３）とを含んでいてもよい。【００１５】
また、ログ画像記憶手段は、顔検出手段によって特定された顔の位置に基づいて抽出される顔領域の画像を、ログ画像として記憶してもよい。【００１６】
また、認証開始手段は、ユーザのキー入力操作に応じて入力される情報を検出した場合に、顔認証手段による顔認証を開始し、パターン判定手段は、認証開始手段が検出した情報で示されるキー入力のパターンが、予め登録されているキーパターンと一致するか否かを判定してもよい。【００１７】
また、パターン判定手段が判定に用いるキーパターンは、１桁の数字、文字またはファンクションキーであってもよい。【００１８】
また、パターン判定手段が判定に用いるキーパターンは、複数回連続する同一の数字、文字、またはファンクションキーであってもよい。【００１９】
また、パターン判定手段が判定に用いるキーパターンは、所定の長さの数字、文字、またはファンクションキーの入力列であってもよい。【００２０】
また、機能ロック解除システムは、情報処理端末の機能をロックした状態であるロック状態を解除する機能ロック解除システムであって、ユーザの操作に応じて入力される情報を検出すると、複数の方式によるユーザ認証を開始する認証開始手段（例えば、キー入力検知手段３１）と、所定の方式を用いて、操作を行ったユーザが当該情報処理端末の使用を許可された正規ユーザであるか否かを判定する認証処理を実行する複数の認証実行手段（例えば、キー入力内容判定手段３２，顔認証手段３３）と、認証開始手段によって開始された複数の認証実行手段による認証結果に基づいて、当該情報処理端末のロック状態を解除するか否かを判定するロック解除判定手段（例えば、ロック解除判定手段３４）とを備えていてもよい。【００２１】
また、ロック解除判定手段は、認証開始手段が開始した全ての認証実行手段によって認証対象のユーザが正規ユーザであると判定されると、当該情報処理端末のロック状態を解除することを決定してもよい。【００２２】
また、本発明による機能ロック解除方法は、情報処理端末の機能をロックした状態であるロック状態を解除する機能ロック解除方法であって、情報処理端末が、ユーザの操作に応じて入力される情報を検出すると、認証対象のユーザを撮影する開始ステップと、認証対象のユーザを撮影した画像と、予め登録されている顔の特徴を示す顔データとに基づいて一致度を計算することによって、認証処理を実行する顔認証ステップと、開始ステップで検出された情報で示されるユーザ操作のパターンが、予め登録されているパターンと一致するか否かを判定するパターン判定ステップと、顔認証ステップにおける認証結果と、パターン判定ステップにおける判定結果とに基づいて、当該情報処理端末のロック状態を解除するか否かを判定するロック解除判定ステップとを含むことを特徴とする。【００２３】
また、機能ロック解除方法は、情報処理端末の機能をロックした状態であるロック状態を解除する機能ロック解除方法であって、情報処理端末が、ユーザの操作に応じて入力される情報を検出すると、複数の方式によるユーザ認証を開始するステップと、所定の方式を用いて、操作を行ったユーザが当該情報処理端末の使用を許可された正規ユーザであるか否かを判定する認証処理を実行する複数のステップと、複数の方式による認証結果に基づいて、当該情報処理端末のロック状態を解除するか否かを判定するステップとを含んでいてもよい。【００２４】
また、本発明による機能ロック解除用プログラムは、情報処理端末の機能をロックした状態であるロック状態を解除するための機能ロック解除用プログラムであって、コンピュータに、ユーザの操作に応じて入力される情報を検出すると、認証対象のユーザを撮影する開始処理、認証対象のユーザを撮影した画像と、予め登録されている顔の特徴を示す顔データとに基づいて一致度を計算することによって、認証処理を実行する顔認証処理、開始処理で検出された情報で示されるユーザ操作のパターンが、予め登録されているパターンと一致するか否かを判定するパターン判定処理、および顔認証処理における認証結果と、パターン判定処理における判定結果とに基づいて、当該情報処理端末のロック状態を解除するか否かを判定するロック解除判定処理を実行させることを特徴とする。【００２５】
また、機能ロック解除用プログラムは、情報処理端末の機能をロックした状態であるロック状態を解除するための機能ロック解除用プログラムであって、コンピュータに、ユーザの操作に応じて入力される情報を検出すると、複数の方式によるユーザ認証を開始する処理、所定の方式を用いて、操作を行ったユーザが当該情報処理端末の使用を許可された正規ユーザであるか否かを判定する認証処理を実行する複数の処理、および複数の方式による認証結果に基づいて、当該情報処理端末のロック状態を解除するか否かを判定する処理を実行させてもよい。
【発明の効果】
【００２６】
本発明によれば、ユーザが特定の操作を行うだけで、認証開始手段によって、例えば顔認証とパターン認証とが実行され、ロック解除判定手段が、複数の方式による認証機能の結果を総合して機能ロックを解除するか否かを判断するので、１つの方式で判断する場合に比べてロック解除の精度を改善することができる。また、複数の方式による認証機能の開始トリガを共通化することによって、ユーザに、複数の方式に応じた入力操作を要しない。従って、ユーザの利便性を損なわずに、精度の高いロック解除を実行することができる。
【図面の簡単な説明】
【００２７】
【図１】本発明の第１の実施の形態による機能ロック解除システムの構成例を示すブロック図である。
【図２】本発明の第１の実施の形態による機能ロック解除システムで用いる顔認証手段の構成例を示すブロック図である。
【図３】本発明の第１の実施の形態による機能ロック解除システムの動作例を示すフローチャートである。
【図４】本発明の第２の実施の形態による機能ロック解除システムの構成例を示すブロック図である。
【図５】本発明の第２の実施の形態による機能ロック解除システムの動作例を示すフローチャートである。
【図６】本発明の第３の実施の形態による機能ロック解除システムの構成例を示すブロック図である。
【図７】本発明の実施例による機能ロック解除システムを適用した携帯電話機の構成例を示す説明図である。
【図８】従来の顔認証を用いた機能ロック解除システムを適用した携帯電話機の動作例を示すフローチャートである。
【符号の説明】
【００２８】
１  キー入力手段
２  撮像部
３  データ処理装置
３１  キー入力検知手段
３２  キー入力内容判定手段
３３  顔認証手段
３４  ロック解除判定手段
３５  ログ画像保存手段
４  記憶装置
４１  キーパターン記憶部
４２  登録顔データ記憶部
４３  解除失敗画像記憶部
５  機能ロック部
【発明を実施するための最良の形態】
【００２９】
（第１の実施の形態）
以下、本発明の第１の実施の形態を図面を参照して説明する。図１は、本実施の形態による機能ロック解除システムの構成例を示すブロック図である。図１に示す機能ロック解除システムは、キー入力手段１と、撮像部２と、データ処理装置３と、記憶装置４と、機能ロック部５とを備える。また、データ処理装置３は、プログラムに従って動作するＣＰＵ等の処理装置であって、キー入力検知手段３１と、キー入力内容判定手段３２と、顔認証手段３３と、ロック解除判定手段３４とを含む。また、記憶装置４は、メモリ等であって、キーパターン記憶部４１と、登録顔データ記憶部４２とを含む。図１に示すロック解除システムは、具体的には、パーソナルコンピュータや携帯電話機等の情報処理端末によって実現される。【００３０】
キー入力手段１は、例えばキーボードやマウスなど、ユーザ操作の入力デバイスである。なお、本システムが携帯電話機に適用される場合には、例えばテンキーやダイヤルボタン、ニューロポインタ（登録商標）などの携帯電話機が備える入力デバイスとなる。キー入力手段１は、ユーザの操作に応じて、キー情報を入力する。なお、キー入力手段１は、キー入力デバイスだけに限らない。従って、ここでいうキー情報とは、キー操作を示す情報（押されたキーの情報や、押されたタイミング、離されたタイミング等）だけでなく、マウス操作を示す情報（クリックのタイミングや、移動方向、移動速度、移動始終点座標等）や、他の入力デバイス操作（例えば、開閉操作）を示す情報を含む。【００３１】
撮像部２は、例えばＣＣＤカメラやＣＭＯＤカメラ、ビデオカメラ等の画像入力デバイスである。撮像部２は、データ処理装置３からの指示に従って、ユーザの顔を撮影し、撮影した画像データを入力する。なお、撮像部２がユーザの顔を撮影するとは、例えば、現在の操作者の顔が映るように予め定められた制御パラメータを用いる等により、ユーザの顔が撮影されるよう制御されるという意味であり、必ずユーザの顔を撮影することまでは要しない。【００３２】
機能ロック部５は、情報処理端末全体や、電話帳、メール保存領域などの情報を表示する等の特定機能に対し、ロックの設定や解除を行うことによって、ロック状態を制御する。機能ロック部５は、例えば画面をロックするためのディスプレイ装置等、機能ロックを実現するためのハードウェア装置と、プログラムに従って動作するＣＰＵとによって実現される。なお、図１では、機能ロック部５をデータ処理装置３とは異なる処理部として示しているが、例えば、機能ロックがソフトウェア制御のみによって実施される場合等、データ処理装置３が機能ロック部５を内包する場合もある。【００３３】
キーパターン記憶部４１は、キーパターン判定によるロック解除用として、予め設定されているキーパターンを記憶する。キーパターン記憶部４１が記憶するキーパターン（以下、登録キーパターンという。）は、情報処理端末の使用を許可された人物が任意に設定する、キー入力手段１から入力されるキー情報で示されるユーザ操作の組み合わせである。例えば、キー入力手段１がダイヤルボタンであれば、「０」〜「９」の数字や「＃」，「＊」などの特殊文字、また、キーボードであれば、「ａ」〜「ｚ」の文字や数字、「！」，「（」などの特殊文字キーの押された回数や順序、タイミングなどを含めた、キー操作の組み合わせである。また、例えば、キー入力手段１がマウスを含むのであれば、クリックのタイミングや、移動方向を含めた組み合わせであってもよい。例えば、マウスの移動方向を含むキーパターンとして、「右・左・右・左」などのマウスを左右に２度振る動きや、時計回りに円を描くなどの単純な操作でできる動きなどであってもよい。【００３４】
登録顔データ記憶部４２は、顔認証によるロック解除用として、予め設定されている登録画像の顔データを記憶する。登録顔データ記憶部４２が記憶する顔データ（以下、登録顔データという。）は、情報処理端末の使用を許可された人物の顔を撮影した登録画像の画像データ、または、その画像データから作成される登録人物の顔の特徴を示すデータ（例えば、特徴量）である。【００３５】
キー入力検知手段３１は、キー入力手段１を介してユーザが入力操作を行ったか否かを検知し、必要に応じて他の処理手段に通知する。本実施の形態では、ロック状態においてユーザからの入力操作を検知した場合には、少なくともキー入力内容判定手段３２と顔認証手段３３とにその旨出力する。【００３６】
キー入力内容判定手段３２は、キー入力検知手段３１からの通知を受けて、入力キーパターンと登録キーパターンとが同一であるか否かを判定するキーパターン判定を行う。また、キー入力内容判定手段３２は、キーパターン判定の結果をロック解除判定手段３４に出力する。【００３７】
顔認証手段３３は、キー入力検知手段３１からの通知を受けて、撮像部２を起動し、撮像部２から入力される画像で示される入力操作を行った人物と登録人物とが同一人物であるか否かを判定する顔認証を行う。また、顔認証手段３３は、顔認証の結果をロック解除判定手段３４に出力する。図２は、顔認証手段３３の構成例を示すブロック図である。図２に示すように、顔認証手段３３は、顔検出手段３３１と、顔データ作成手段３３２と、顔照合手段３３３とを含む。【００３８】
顔検出手段３３１は、撮像部２より入力された画像（被認証画像）から顔の位置を特定する顔検出処理を行う。顔検出手段３３１が行う顔検出処理として、例えば、文献「鈴木，細井，櫻井，佐藤，”リングフィルタを用いた高速顔検出処理の開発”，２００３年電子情報通信学会総合大会予稿集，ｐ．２５１」（非特許文献３）に記載されている高速顔検出処理を用いることができる。非特許文献３に記載の高速顔検出処理は、中心が周囲よりも暗い領域を目として検出するリングフィルタを用いて目の候補を検出し、その目の候補の組み合わせが人の顔であるか否かを予め顔の特徴を学習した辞書を用いて判別を行うことによって、顔を検出する顔検出手法である。顔データ作成手段３３２は、顔検出手段３３１によって特定された顔の位置に基づいて、被認証画像から顔照合に必要な顔データ（以下、被認証顔データという。）を作成する。顔照合手段３３３は、顔データ作成手段３３２によって作成された被認証顔データと、登録顔データ記憶部４２に記憶されている登録顔データとを照合して、入力操作を行った人物と登録人物とが同一人物であるか否かを判定する。【００３９】
なお、顔データ作成手段３３２は、顔照合手段３３３で用いられる顔照合に必要な顔データを作成するものとする。例えば、顔照合手段３３３は、文献「特開２００３−３２３６２２号公報」（特許文献２）に記載されている照合手法を用いてもよい。特許文献２記載の照合手法は、入力された顔画像を複数の領域に分割し、分割した領域ごとに予め登録されている顔画像の対応する領域との類似度（パターン間距離）を求め、得られた類似度を統合した結果が、しきい値以下であれば、２つの顔画像に映る人物が同一人物であると認識する手法である。なお、顔照合手段３３３が特許文献２記載の照合手法を用いる場合には、データ作成手段３３２は、この手法に必要な顔データとして、例えば、被認証画像を部分領域に分割した特徴量を作成する。【００４０】
ロック解除判定手段３４は、キー入力内容判定手段３２による判定結果と、顔認証手段３３による判定結果とに基づいて、ロックを解除するか否かを判定する。具体的には、ロック解除判定手段３４は、キー入力内容判定手段３２によるキーパターン判定と、顔認証手段３３による顔認証との両方で本人認証がとれた場合に、ロックを解除することを決定する。なお、ロック解除判定手段３４は、どちらか一方でも本人認証がとれなかった場合には、ロックを解除しないことを決定する。【００４１】
次に、本実施の形態の動作について説明する。図３は、本実施の形態による機能ロック解除システムの動作例を示すフローチャートである。ここで、機能ロック解除システムが適用された情報処理端末は、現在ロック状態にあるものとする。図３に示すように、まず、ユーザ（被認証者）からキー入力手段１を介して任意のキーパターンが入力される（ステップＡ１）。キー入力手段１は、ユーザ操作に応じて、キー情報を入力する。キー入力検知手段３１は、キー入力手段１から入力されるキー情報に基づいて、ユーザがキーパターンの入力操作を行ったことを検知する。キー入力検知手段３１は、ユーザのキーパターンの入力操作を検知すると、キー入力内容判定手段３２および顔認証手段３３に、その旨出力する。キー入力検知手段３１は、例えば、一連の入力操作を検出し、入力されたキーパターンを示す情報を含む認証動作の開始信号として出力してもよい。なお、キー入力内容判定手段３２には、キー情報が入力される度に、キー情報を含むキー入力の通知信号として出力してもよい。【００４２】
次に、顔認証手段３３は、キーパターンが入力されたことがキー入力検知手段３１により検知されると、撮像部２を起動、制御してユーザの顔画像を撮影する（ステップＡ２）。顔認証手段３３は、例えば、キー入力検知手段３１からの開始信号を受けて、被認証者の顔が映るよう定められた制御パラメータとともに、撮像部２に撮影の指示を出力する。撮像部２は、顔認証手段３３からの指示に従って、被認証者の顔を撮影し、撮影した画像データを入力する。【００４３】
顔認証手段３３は、撮像部２から画像データが入力されると、その画像データを用いて、顔認証を行う（ステップＡ３）。例えば、顔検出手段３３１が、入力された画像データを用いて画像中の顔の位置を特定する。そして、顔データ作成手段３３２が、顔検出手段３３１によって特定された顔の位置に基づいて、入力画像データから顔照合に必要な顔データ（被認証顔データ）を作成する。そして、顔照合手段３３３が、顔データ作成手段３３２によって作成された被認証顔データと、登録顔データ記憶部４２に記憶されている登録顔データとを照合して、被認証者と登録人物とが同一人物であるか否かを判定する。【００４４】
また、キー入力内容判定手段３２は、キーパターンが入力されたことがキー入力検知手段３１により検知されると、入力されたキーパターンを用いて、キーパターン判定を行う（ステップＡ４）。キー入力内容判定手段３２は、例えば、キー入力検知手段３１からの開始信号または通知信号を受けて、キー入力検知手段３１から入力される情報で示される入力キーパターンと、キーパターン記憶部４１に記憶されている登録キーパターンとが同一か否かを判定する。【００４５】
次に、ロック解除判定手段３４は、ステップＡ３にて得られる顔認証結果と、ステップＡ４にて得られるキーパターン判定結果とに基づいて、ロック解除の可否を判定する（ステップＡ５）。ロック解除判定手段３４は、顔認証手段３３によって被認証画像の人物と登録画像の人物とが同一人物でないと判定された場合、または、キー入力内容判定手段３２によって入力キーパターンと登録キーパターンとが同一でないと判定された場合には、ロック解除不可として、そのまま処理を終了する（ステップＡ５のＮｏ）。【００４６】
一方、顔認証手段３３によって被認証画像の人物と登録画像の人物とが同一人物であると判定され、かつ、キー入力内容判定手段３２によって入力キーパターンと登録キーパターンとが同一であると判定された場合には、ロック解除判定手段３４は、ロック解除可として、機能ロック部５にその旨出力し、機能ロック部５がロックを解除する（ステップＡ６）。機能ロック部５は、例えば、画面表示を行わないようディスプレイ装置のライトがＯＦＦされている場合には、ディスプレイ装置のライトをＯＮしたり、他の処理部が通常動作を行うよう内部で保持しているロック状態を更新することによって、ロックを解除する。【００４７】
なお、図３では、画像撮影（ステップＡ２），顔認証（ステップＡ３），キーパターン判定（ステップＡ４）の順番で処理を行う例を示したが、顔認証が画像撮影を行った後に実行されること以外は、いずれの順番であってもよい。また、顔認証とキーパターン判定とを並列処理することも可能である。【００４８】
以上のように、本実施の形態によれば、特定パターン判定と顔認証の２つの判定結果を総合してロック解除の可否を判断するよう構成されているため、１つの方式で判断する場合に比べてロック解除の精度を改善することができる。また、特定パターン判定の開始トリガであるキー入力を、顔認証処理の開始トリガとしても用いることによって、従来のように、複数の方式に応じたキー操作をユーザに要求することなく、精度の高いロック解除を実行することができる。従って、ユーザの利便性を損なわずに、精度の高いロック解除システムを実現することができる。【００４９】
なお、起動タイミングをユーザから取得しないために常にカメラ装置等を駆動させている場合に比べ、本実施の形態では、必要な場合にのみ撮像部２を駆動させるので、消費電力を抑えることが可能である。【００５０】
また、被認証者に失敗要因を通知しない場合には、不正アクセス者に対し、正規認証方法の推定を困難にすることができる。不正アクセス者は、失敗要因が通知されないことによって、どの方式で失敗したかが判断できず、登録キーパターンの推定や登録人物の顔写真等を用いてなりすますことを困難にすることができる。【００５１】
（第２の実施の形態）
次に、本発明の第２の実施の形態について図面を参照して説明する。図４は、本実施の形態による機能ロック解除システムの構成例を示すブロック図である。図４に示す機能ロック解除システムは、図１に示す第１の実施の形態と比べて、データ処理装置３がログ画像保存手段３５を含む点、および記憶装置４が解除失敗画像記憶部４３を含む点が異なる。【００５２】
ログ画像保存手段３５は、ロック解除判定手段３４によってロック解除不可と判定された場合に、撮像部２が撮影した被認証画像を不正アクセスログ画像として解除失敗画像記憶部４３に記憶する。解除失敗画像記憶部４３は、例えば、撮像部２が撮影した画像だけでなく、認証を行った時刻や、その際入力されたキーパターン等を含めて記憶してもよい。また、顔認証手段３３によって顔領域が特定された場合には、撮像部２が撮影した画像そのままではなく、顔領域のみを切り取った画像を、不正アクセスログ画像として記憶することも可能である。【００５３】
次に、本実施の形態の動作について説明する。図５は、本実施の形態によるロック解除システムの動作例を示すフローチャートである。図５に示すフローチャートは、図３に示す第１の実施の形態におけるフローチャートと比べ、ステップＡ５において、ロック解除不可と判定された場合の動作が異なる。【００５４】
第１の実施の形態と同様に、ロック解除判定手段３４は、ステップＡ３にて得られる顔認証結果と、ステップＡ４にて得られるキーパターン判定結果とに基づいて、ロック解除の可否を判定する（ステップＡ５）。ここで、ロック解除判定手段３４によってロック解除不可と判定された場合（ステップＡ５のＮｏ）、ログ画像保存手段３５は、判定に用いた被認証画像を、不正アクセスログ画像として解除失敗画像記憶部４３に記憶し（ステップＢ１）、処理を終了する。ログ画像保存手段３５は、例えば、撮像部２が撮影した画像と、認証を行った時刻と、その際入力されたキーパターンとを含む情報を解除失敗画像記憶部４３に記憶する。なお、ロック解除可と判定された場合には、第１の実施の形態と同様に、機能ロック部５がロックを解除する（ステップＡ６）。【００５５】
以上のように、本実施の形態によれば、ロック解除に失敗した際に撮影した画像をログ画像として保存することができるので、情報処理端末への不正アクセス者の顔を確認することが可能となる。また、このような構成になっていることによって、不正アクセスの抑止効果も期待できる。なお、他の点に関しては第１の実施の形態と同様である。【００５６】
また、第１、２の実施の形態では、顔認証とキーパターン判定とを組み合わせる場合を例に説明したが、認証方式はこれら２つに限定されず、また、３つ以上の方式を組み合わせることも可能である。なお、組み合わせる認証方式は、ユーザからの入力操作を伴う方式とそうでない方式とを組み合わせるのがより好ましいが、ユーザからの入力操作をトリガに認証を開始する方式であればどのような方式であってもよい。【００５７】
組み合わせる認証方式は、顔認証やキーパターン判定の他に、例えば、端末が加速度センサーを備え、端末の振り方（右に２回等）に基づいて特定パターン判定を行う加速度情報判定であってもよい。また、例えば、音声（”あー”や、”はっ、はっ”、または特定の文章）に基づいて特定パターン判定を行う音声情報判定であってもよい。この他にも、顔や声以外の生体情報として、例えば、虹彩、指紋、肌の文様（肌上の網目模様やほくろ、しみ等）を用いる認証方式や、日常的に身につけている人工物情報（例えば、カード、時計、アクセサリ）の形状や色、撮影方向、画面内サイズ等の一致度により同定判定を行う方式も考えられる。【００５８】
（第３の実施の形態）
次に、本発明の第３の実施の形態について図面を参照して説明する。図６は、本実施の形態による機能ロック解除システムの構成例を示すブロック図である。図６に示す機能ロック解除システムは、図１に示す第１の実施の形態と比べて、外部記憶媒体６が追加となっている点が異なる。【００５９】
本実施の形態では、外部記憶媒体６に、キー入力検知手段３１、キー入力内容判定手段３２等、第１の実施の形態においてデータ処理装置３が含む処理手段が行うロック解除用の処理を実行するための機能ロック解除用プログラムが記憶されている。データ処理装置３は、外部記憶媒体６に記憶されているロック解除用プログラムを読み込むことによって、第１の実施の形態と同様の動作を行う。なお、記憶装置４に含まれるキーパターン記憶部４１や登録顔データ記憶部４２等のロック解除用の記憶領域についても、機能ロック解除用プログラムを読み込んだデータ処理装置３によって、動的に割り当てられてもよい。【００６０】
なお、ロック解除用プログラムは、第１の実施の形態に限らず、第２の実施の形態における処理手段が行うロック解除用の処理を実行するためのプログラムであってもよい。そのような場合には、データ処理装置３は、読み込んだ機能ロック解除用プログラムに応じて、第２の実施の形態と同様の動作を行う。なお、この場合、記憶装置４は解除失敗画像記憶部４３を含む。
【実施例】
【００６１】
次に、具体的な実施例を用いて本発明を実施するための最良の形態の動作を説明する。以下に説明する実施例は、本発明の第２の実施の形態に対応するものである。図７は、機能ロック解除システムを適用する携帯電話機の構成例を示す説明図である。図７に示すように、本実施例では情報処理端末としてカメラ付き携帯電話機を用いた例を示す。本実施例における携帯電話機は、撮像部２としてＣＭＯＳカメラやＣＣＤカメラなどのカメラデバイスを備える。また、携帯電話機は、キー入力手段１としてダイヤルキーを、データ処理装置３としてデータ処理系を、記憶装置４としてメモリを備える。また、携帯電話機は、機能ロック部５として、データ処理系が制御する通話機能以外の全ての機能をロックするオールロック機能をデータ処理系内部に備えている。【００６２】
携帯電話機のデータ処理系は、キー入力検知手段３１、キー入力内容判定手段３２、顔認証手段３３、ロック解除判定手段３４、ログ画像保存手段３５、および機能ロック部５として動作する中央演算装置を有する。また、携帯電話機のメモリは、キーパターン記憶部４１、登録顔データ記憶部４２、および解除失敗画像記憶部４３として、登録キーパターンと、登録顔データと、不正アクセス画像ログとを記憶する。【００６３】
キーパターン記憶部４１に記憶されている登録キーパターンは、例えば、「１」や「５」などの単一の数字や、「１１」や「５５」などの同じ数値が連続するパターンや、「１２３４」などの数値あるいは「ＡＢＣＤ・・・」など任意の文字列の組み合わせである。【００６４】
ここで、顔認証において、他人を本人と誤判定しまう確率（他人受入率）を１％、本人を他人と誤判定してしまう確率（本人棄却率）を１％とする。顔認証のみを用いてロック解除を実行する場合、例えば、ユーザから、顔認証を開始するための特定のボタン（以下、シャッターボタンと呼ぶ。）が押下されたことを検知して、顔認証を起動し、顔認証結果に基づいてロック解除可否の判定を行う。この時のロック解除の精度は、顔認証の精度と同様、他人受入率１％および本人棄却率１％となる。【００６５】
これに対して、本実施例では、顔認証のためのシャッターボタンを、ユーザ指定の任意のキーパターンとして登録することによって、ロック解除の精度を高める。例えば、シャッターボタンとするキーパターンを「０」から「９」までの任意の１キーとした場合、登録キーパターンとして１０通りのバリエーションができる。このため、顔認証とキーパターン判定とを組み合わせたロック解除の精度は、他人受入率０．１％および本人忘却率１％となる。このように、ユーザから見れば、シャッターボタンを１回押下するというロック解除の手間が変わらないにもかかわらず、他人受入率を改善することができる。【００６６】
また、シャッターボタンを任意のキーの１回押下だけでなくダブルクリックのように連続して２回押下するパターンまで許可する場合には、登録キーパターンとしては、「０」から「９」までと、「００」、「１１」、・・・、「９９」までの２０通りのバリエーションができる。このような場合には、顔認証とキーパターン判定とを組み合わせたロック解除の精度のうち、他人受入率を０．０５％まで改善することができる。【００６７】
なお、ユーザの利便性を考慮すると、登録キーパターンは、１回のキー入力または同じキーの複数回入力するパターンとすることが好ましいが、他人受入率を更に改善したい場合には、任意の文字列や、各種ファンクションキー、ニューロポインタによる移動方向等を組み込んでもよい。【００６８】
なお、本実施例の動作としては、次のようになる。図５に示すように、ユーザから入力キーパターン「１１」が、「１」キーのダブルクリックによって入力されると（ステップＡ１）、中央演算装置は、ユーザからキーパターンが入力されたことを検知し、カメラデバイスを起動、制御して、ユーザの顔画像を撮影させる（ステップＡ２）。中央処理装置は、カメラデバイスから、撮影した画像データが入力されると、入力された画像データと、予めメモリに記憶されている登録顔データとを用いて顔認証処理を実行する（ステップＡ３）。【００６９】
また、中央処理装置は、ユーザからキーパターンが入力されたことを検知すると、ダイヤルキーから入力されるキー情報で示される入力キーパターンと予めメモリに記憶されている登録キーパターンとを用いてキーパターン判定処理を実行する（ステップＡ４）。中央処理装置は、例えば、ダイヤルキーから入力されるキー情報および入力タイミングに基づいて入力キーパターンを特定し、入力キーパターンと登録キーパターンとが、キーの種類・回数・順番・タイミングにおいて同一かどうかを判定する。【００７０】
中央処理装置は、顔認証処理およびキーパターン判定処理の結果、ユーザが登録人物と同一人物であり、かつ、入力キーパターンが登録キーパターンと同一であれば、ロックを解除（ステップＡ５のＹｅｓ，Ａ６）し、携帯電話機の内部情報を閲覧可能とする。一方、ユーザが登録人物と同一人物でない、または、入力キーパターンが登録キーパターンと同一でない、もしくは、その両方である場合には、後日正規ユーザが閲覧できるように、認証用に撮影したユーザの顔画像を不正アクセス者の画像としてメモリに記憶する（ステップＡ５のＮｏ，Ｂ１）。
【産業上の利用可能性】
【００７１】
本発明は、パスワード方式や、ＩＣカード等を用いたＩＤ方式、生体情報を用いたバイオメトリクス方式等で本人認証を行う装置に好適に適用できる。
【図１】
2007119818.tif 000003
【図２】
2007119818.tif 000004
【図３】
2007119818.tif 000005
【図４】
2007119818.tif 000006
【図５】
2007119818.tif 000007
【図６】
2007119818.tif 000008
【図７】
2007119818.tif 000009
【図８】
2007119818.tif 000010
【手続補正書】
【提出日】平成19年8月29日(2007.8.29)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
情報処理端末の機能をロックした状態であるロック状態を解除する機能ロック解除システムであって、
被認証者の顔を撮影する撮像部と、
被認証者のキー入力を検出するキー入力手段と、
前記キー入力を検知したときに前記撮像部を起動して被認証者の顔を撮影し被認証者が前記情報処理端末を使用することが許可された人物か否かを判定する顔認証手段と、
前記キー入力が、予め登録されているパターンと一致するか否かを判定するパターン判定手段と、
前記顔認証手段による認証結果と、前記パターン判定手段による判定結果とに基づいて、当該情報処理端末のロック状態を解除するか否かを判定するロック解除判定手段とを備えたことを特徴とする機能ロック解除システム。
【請求項２】
（削除）
【請求項３】
前記顔認証手段は、
画像中の顔の位置を特定する顔検出手段と、
前記顔検出手段によって特定された顔データと、予め登録されている顔データとの一致度を判定する顔照合手段とを含む請求項１記載の機能ロック解除システム。
【請求項４】
（削除）
【請求項５】
（削除）
【請求項６】
前記パターン判定手段が判定に用いるキーパターンは、１桁の数字、文字またはファンクションキーである請求項１記載の機能ロック解除システム。
【請求項７】
前記パターン判定手段が判定に用いるキーパターンは、複数回連続する同一の数字、文字、またはファンクションキーである請求項１記載の機能ロック解除システム。
【請求項８】
前記パターン判定手段が判定に用いるキーパターンは、所定の長さの数字、文字、またはファンクションキーの入力列である請求項１記載の機能ロック解除システム。
【請求項９】
（削除）
【請求項１０】
（削除）
【請求項１１】
情報処理端末の機能をロックした状態であるロック状態を解除する機能ロック解除方法であって、
被認証者の顔を撮影する撮像ステップと、
被認証者のキー入力を検出するキー入力ステップと、
前記キー入力を検知したときに前記撮像ステップを起動して被認証者の顔を撮影し被認証者が前記情報処理端末を使用することが許可された人物か否かを判定する顔認証ステップと、
前記キー入力が、予め登録されているパターンと一致するか否かを判定するパターン判定ステップと、
前記ステップにおける認証結果と、前記パターン判定ステップにおける判定結果とに基づいて、当該情報処理端末のロック状態を解除するか否かを判定するロック解除判定ステップとを含むことを特徴とする機能ロック解除方法。
【請求項１２】
（削除）
【請求項１３】
情報処理端末の機能をロックした状態であるロック状態を解除するための機能ロック解除用プログラムであって、
コンピュータに、
被認証者の顔を撮影する撮像処理、
被認証者のキー入力を検出するキー入力処理、
前記キー入力を検知したときに前記撮像処理を起動して被認証者の顔を撮影し被認証者が前記情報処理端末を使用することが許可された人物か否かを判定する顔認証処理、
前記キー入力が、予め登録されているパターンと一致するか否かを判定するパターン判定処理、および
前記顔認証処理における認証結果と、前記パターン判定処理における判定結果とに基づいて、当該情報処理端末のロック状態を解除するか否かを判定するロック解除判定処理
を実行させるための機能ロック解除用プログラム。
【請求項１４】
（削除）
【請求項１５】
請求項１、３、６、７、８のいずれか１項に記載の機能ロック解除システムを用いたことを特徴とする情報処理端末。
【請求項１６】
請求項１、３、６、７、８のいずれか１項に記載の機能ロック解除システムを用いたことを特徴とする携帯電話機。
【請求項１７】
前記顔認証ステップは、
画像中の顔の位置を特定する顔検出ステップと、
前記顔検出ステップによって特定された顔データと、予め登録されている顔データとの一致度を判定する顔照合ステップとを含む請求項１１記載の機能ロック解除方法。
【請求項１８】
前記パターン判定ステップが判定に用いるキーパターンは、１桁の数字、文字またはファンクションキーである請求項１１記載の機能ロック解除方法。
【請求項１９】
前記パターン判定ステップが判定に用いるキーパターンは、複数回連続する同一の数字、文字、またはファンクションキーである請求項１１記載の機能ロック解除方法。
【請求項２０】
前記パターン判定ステップが判定に用いるキーパターンは、所定の長さの数字、文字、またはファンクションキーの入力列である請求項１１記載の機能ロック解除方法。
【請求項２１】
前記顔認証処理は、
画像中の顔の位置を特定する顔検出処理と、
前記顔検出処理によって特定された顔データと、予め登録されている顔データとの一致度を判定する顔照合処理とを含む請求項１３記載の機能ロック解除用プログラム。
【請求項２２】
前記パターン判定処理が判定に用いるキーパターンは、１桁の数字、文字またはファンクションキーである請求項１３記載の機能ロック解除用プログラム。
【請求項２３】
前記パターン判定処理が判定に用いるキーパターンは、複数回連続する同一の数字、文字、またはファンクションキーである請求項１３記載の機能ロック解除用プログラム。
【請求項２４】
前記パターン判定処理が判定に用いるキーパターンは、所定の長さの数字、文字、またはファンクションキーの入力列である請求項１３記載の機能ロック解除用プログラム。
【国際調査報告】
2007119818.tif 000011
2007119818.tif 000012