(57)【要約】  顔検証方法が提供される。電子デバイスは、1つ以上のコンテンツを表示画面に表示し、コンテンツの表示中にカメラを用いてk個の顔画像を取得し、取得したk個の顔画像に従って、t個の表情パラメータ値を判定し、t個の表情パラメータ値と第1の予め設定された参照系列との一致度が第1の予め設定された閾値以上であり、取得されたk個の顔画像のうちの少なくとも1つに従って、顔検証結果が成功であると判定する。本方法は、プロンプトに応じた瞬きや1回の相互作用で行われる生体検証が行われる従来技術に比べ、写真、ビデオ、3D印刷、または別の技術による攻撃の可能性を低減する。
2018538608.tif 000002
【特許請求の範囲】
【請求項１】
表示画面とカメラとを備えた電子デバイスに適用される顔検証方法であって、前記方法は、
前記表示画面に1つ以上のコンテンツを表示するステップであって、前記コンテンツは、文字、写真、またはビデオを含む、ステップと、
前記1つ以上のコンテンツの表示中に前記カメラを用いてk個の顔画像を取得するステップであって、kは2以上の整数である、ステップと、
前記取得したk個の顔画像に従って、t個の表情パラメータ値を判定するステップであって、前記表情パラメータ値は、表情コード値または瞳孔相対値のうちの少なくとも1つを含み、tは2以上の整数であり、t≦kである、ステップと、
前記判定されたt個の表情パラメータ値と第1の予め設定された参照系列との一致度が第1の予め設定された閾値以上であり、前記取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が成功である場合、顔検証結果は成功であると判定するステップと、
を含む、方法。
【請求項２】
前記方法は、
前記判定されたt個の表情パラメータ値と前記第1の参照系列との前記一致度が前記第1の予め設定された閾値未満である場合、1つ以上の他のコンテンツを前記表示画面に表示するステップと、
前記1つ以上の他のコンテンツの表示中に、前記カメラを用いてk個の顔画像を再取得するステップと、
前記再取得されたk個の顔画像に従って、t個の表情パラメータ値を再判定するステップと、
前記再判定されたt個の表情パラメータ値と第2の予め設定された参照系列との一致度が第2の予め設定された閾値以上であり、前記再取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が成功である場合に、顔検証結果は成功であると判定するステップと、
をさらに含む、請求項1に記載の方法。
【請求項３】
前記方法は、
前記判定されたt個の表情パラメータ値と前記第1の参照系列との前記一致度が、前記第1の予め設定された閾値未満である場合および／または前記取得されたk個の顔画像のうちの前記少なくとも1つに従って取得された前記顔照合結果が失敗である場合、顔検証結果が失敗であると判定するステップ
をさらに含む、請求項1に記載の方法。
【請求項４】
前記方法は、
前記再判定されたt個の表情パラメータ値と前記第2の参照系列との前記一致度が、前記第2の予め設定された閾値未満である場合および／または前記再取得されたk個の顔画像のうちの前記少なくとも1つに従って取得された前記顔照合結果が失敗である場合、顔検証結果が失敗であると判定するステップ
をさらに含む、請求項2に記載の方法。
【請求項５】
前記表示画面に1つ以上のコンテンツが同時に表示されている場合、前記1つ以上のコンテンツの表示中に前記カメラを用いてk個の顔画像を取得する前記ステップは、
予め設定された間隔に従って、前記1つ以上のコンテンツが表示され始めた後の前記k個の顔画像を取得するステップ
を含む、請求項1から4のいずれか一項に記載の方法。
【請求項６】
前記表示画面に複数のコンテンツが順次表示されている場合、前記複数のコンテンツの表示中に前記カメラを用いてk個の顔画像を取得する前記ステップは、
各コンテンツの表示中に、少なくとも1つの顔画像を取得するステップであって、前記取得された顔画像の総数がkである、ステップ
を含む、請求項1から4のいずれか一項に記載の方法。
【請求項７】
前記1つのコンテンツは、前記電子デバイスに記憶された複数のコンテンツからランダムに選択された1つのコンテンツであり、各コンテンツは参照系列に対応している、または
前記複数のコンテンツは、前記電子デバイスに記憶された複数のコンテンツセットからランダムに選択された1つのコンテンツセットを含み、各コンテンツセットは参照系列に対応する、
請求項1から6のいずれか一項に記載の方法。
【請求項８】
電子デバイスであって、前記電子デバイスは、
1つ以上のコンテンツを表示するように構成された表示画面であって、前記コンテンツは、文字、写真、またはビデオを含む、表示画面と、
前記コンテンツの表示中にk個の顔画像を取得するように構成されたカメラであって、kは2以上の整数である、カメラと、
前記取得したk個の顔画像に従って、t個の表情パラメータ値を判定し、前記表情パラメータ値は、表情コード値または瞳孔相対値のうちの少なくとも1つを含み、tは2以上の整数であり、t≦kであり、前記判定されたt個の表情パラメータ値と第1の予め設定された参照系列との一致度が第1の予め設定された閾値以上であり、前記取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が成功である場合、顔検証結果は成功であると判定するように構成された少なくとも1つのプロセッサと、
を備える、電子デバイス。
【請求項９】
前記表示画面は、
前記判定されたt個の表情パラメータ値と前記第1の参照系列との前記一致度が前記第1の予め設定された閾値未満である場合、1つ以上の他のコンテンツを表示する
ようにさらに構成され、
前記カメラは、
前記1つ以上の他のコンテンツの表示中に、k個の顔画像を再取得する
ようにさらに構成され、
前記少なくとも1つのプロセッサは、
前記再取得されたk個の顔画像に従って、t個の表情パラメータ値を再判定し、前記再判定されたt個の表情パラメータ値と第2の予め設定された参照系列との一致度が第2の予め設定された閾値以上であり、前記再取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が成功である場合に、顔検証結果は成功であると判定する
ようにさらに構成される、請求項8に記載の電子デバイス。
【請求項１０】
前記少なくともプロセッサは、
前記判定されたt個の表情パラメータ値と前記第1の参照系列との前記一致度が、前記第1の予め設定された閾値未満である場合および／または前記取得されたk個の顔画像のうちの前記少なくとも1つに従って取得された前記顔照合結果が失敗である場合、顔検証結果が失敗であると判定する
ようにさらに構成される、請求項8に記載の電子デバイス。
【請求項１１】
前記少なくともプロセッサは、
前記再判定されたt個の表情パラメータ値と前記第2の参照系列との前記一致度が、前記第2の予め設定された閾値未満である場合および／または前記再取得されたk個の顔画像のうちの前記少なくとも1つに従って取得された前記顔照合結果が失敗である場合、顔検証結果が失敗であると判定する
ようにさらに構成される、請求項9に記載の電子デバイス。
【請求項１２】
前記表示画面に1つ以上のコンテンツが同時に表示されている場合、前記カメラは、
予め設定された間隔に従って、前記1つ以上のコンテンツが表示され始めた後の前記k個の顔画像を取得する
ように特に構成される、請求項8から11のいずれか一項に記載の電子デバイス。
【請求項１３】
前記表示画面に複数のコンテンツが順次表示されている場合、前記カメラは、
各コンテンツの表示中に、少なくとも1つの顔画像を取得するように特に構成され、前記取得された顔画像の総数がkである、
請求項8から11のいずれか一項に記載の電子デバイス。
【請求項１４】
前記1つのコンテンツは、前記電子デバイスに記憶された複数のコンテンツからランダムに選択された1つのコンテンツであり、各コンテンツは参照系列に対応している、または
前記複数のコンテンツは、前記電子デバイスに記憶された複数のコンテンツセットからランダムに選択された1つのコンテンツセットを含み、各コンテンツセットは参照系列に対応する、
請求項8から13のいずれか一項に記載の電子デバイス。
【請求項１５】
電子デバイスであって、前記電子デバイスは、表示画面と、カメラと、メモリと、バスシステムと、少なくとも1つのプロセッサと、を備え、前記表示画面、前記カメラ、前記メモリ、および前記少なくとも1つのプロセッサは、前記バスシステムを使用して接続され、
前記メモリは1つ以上のプログラムを記憶し、前記1つ以上のプログラムは命令を含み、前記電子デバイスによって実行される場合、前記命令は、前記電子デバイスが請求項1から7のいずれか一項に記載の方法を実行することを可能にする、
電子デバイス。
【請求項１６】
1つ以上のプログラムを記憶するコンピュータ可読記憶媒体であって、前記1つ以上のプログラムは命令を含み、電子デバイスによって実行される場合、前記命令は、前記電子デバイスが請求項1から7のいずれか一項に記載の方法を実行することを可能にする、コンピュータ可読記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理技術の分野に関し、特に、顔検証方法および電子デバイスに関する。
【背景技術】
【０００２】
顔照合の精度が継続的に高まるにつれ、顔照合技術は多くの分野で広く適用されている。一般的な顔照合処理は、顔画像をまず取得することと、顔画像から特徴を抽出することと、特徴を顔画像テンプレートとしてマーキングすることと、を含み、顔認識の際、同じ方法を用いて認識対象の顔の特徴を抽出し、特徴を顔画像テンプレートと照合し、照合の信頼度に応じた認識結果を判定する。顔照合の難しさは生体検証である。生体検証が行われていない場合には、写真から取得された顔画像または3D印刷もしくは別の技術によって取得された顔画像を用いて、顔照合は容易に攻撃される。
【０００３】
従来技術において、Android携帯電話のフェイスアンロック（face unlock）などの生体検証方法は、ユーザの瞬き動作がプロンプトと一致するか否かを確認することによる検証である。プロンプトが5回瞬き、指定された時間内に確認対象である物体が5回瞬くと、生体検証が成功したと判定される。この方法は、ビデオを用いて容易に攻撃される。例えば、攻撃者は、異なる瞬き回数のビデオを予めに作成し、それから、プロンプトに従って対応するビデオを再生すればよい。
【発明の概要】
【課題を解決するための手段】
【０００４】
本明細書は、写真、ビデオ、3D印刷、または別の技術による攻撃の技術的問題を解決するために、顔検証方法および電子デバイスを提供する。
【０００５】
第1の実施態様は、表示画面とカメラとを備えた電子デバイスに適用される顔検証方法を提供し、本方法は、
表示画面に1つ以上のコンテンツを表示するステップであって、コンテンツは、文字、写真、またはビデオを含む、ステップと、1つ以上のコンテンツの表示中にカメラを用いてk個の顔画像を取得するステップであって、kは2以上の整数である、ステップと、取得したk個の顔画像に従って、t個の表情パラメータ値を判定するステップであって、表情パラメータ値は、表情コード値または瞳孔相対値のうちの少なくとも1つを含み、tは2以上の整数であり、t≦kである、ステップと、
判定されたt個の表情パラメータ値と第1の予め設定された参照系列との一致度が第1の予め設定された閾値以上であり、取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が成功である場合、顔検証結果は成功であると判定するステップと、
を含む。
【０００６】
可能な設計では、電子デバイスによって予め設定された第1の参照系列は、第1の表情サブ系列または第1の瞳孔サブ系列のうちの少なくとも1つを含む。
【０００７】
第1の参照系列が第1の表情サブ系列のみを含む場合、電子デバイスは、取得したk個の顔画像に従って、t個の表情パラメータ値がt個の表情コード値であると判定し、判定されたt個の表情コード値と第1の表情サブ系列との一致度が第1の予め設定された閾値以上であり、取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が成功である場合、顔検証結果は成功であると判定する、または
【０００８】
第1の参照系列が第1の瞳孔サブ系列のみを含む場合、電子デバイスは、取得したk個の顔画像に従って、t個の表情パラメータ値がt個の瞳孔相対値であると判定し、判定されたt個の瞳孔相対値と第1の瞳孔系列との一致度が第1の予め設定された閾値以上であり、取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が成功である場合、顔検証結果は成功であると判定する。
【０００９】
可能な設計では、第1の参照系列が第1の瞳孔サブ系列と第1の表情サブ系列とを含む場合、具体的には以下の3つの場合がある。
【００１０】
第1の可能な設計では、電子デバイスは、取得したk個の顔画像に従って、t個の表情コード値をまず判定し、判定されたt個の表情コード値と第1の表情サブ系列との一致度が第1の予め設定された閾値以上である場合、取得されたk個の顔画像に従って、t個の瞳孔相対値を判定する。
【００１１】
第2の可能な設計では、電子デバイスは、取得したk個の顔画像に従って、t個の瞳孔相対値をまず判定し、判定されたt個の瞳孔相対値と第1の瞳孔サブ系列との一致度が第1の予め設定された閾値以上である場合、取得されたk個の顔画像に従って、t個の表情コード値を判定する。
【００１２】
第3の可能な設計では、電子デバイスは、取得されたk個の顔画像に従って、t個の表情コード値とt個の瞳孔相対値との両方を判定し、第3のケースでは、判定されたt個の瞳孔相対値と第1の瞳孔サブ系列との一致度が第1の予め設定された閾値以上であり、判定されたt個の表情コード値と第1の表情サブ系列との一致度が第1の予め設定された閾値以上であり、取得したk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が成功であった場合、顔検証結果が成功であると判定する、または判定されたt個の瞳孔相対値と第1の瞳孔サブ分列との一致度と、判定されたt個の表情コード値と第1の表情サブ系列との一致度と、の積が第1の予め設定された閾値以上であり、取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が成功であった場合、顔検証結果が成功であると判定する。
【００１３】
本技術的解決策では、電子デバイスは、表示画面にコンテンツを表示することによって、コンテンツに対してユーザが提示した表情変化および／または瞳孔変化を捕捉して生体検証を行う。本方法は、プロンプトに応じた瞬きや1回の相互作用で行われる生体検証が行われる従来技術に比べ、写真、ビデオ、3D印刷、または別の技術による攻撃の可能性を低減するように、生体検証の困難性が高まっている。加えて、生体検証の際、意図的にユーザに促す必要がなく、ユーザとのインタラクションがより自然になり、ユーザ体験が向上する。
【００１４】
可能な設計では、判定されたt個の表情パラメータ値と第1の参照系列との一致度が第1の予め設定された閾値未満である場合、1つ以上の他のコンテンツが表示画面に表示され、1つ以上の他のコンテンツの表示中に、カメラを用いてk個の顔画像が再取得され、再取得されたk個の顔画像に従って、t個の表情パラメータ値が再判定され、再判定されたt個の表情パラメータ値と第2の予め設定された参照系列との一致度が第2の予め設定された閾値以上であり、再取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が成功である場合に、顔検証結果は成功である。
【００１５】
本技術的解決策では、最初に行われた生体検証が失敗した場合、いくつかの客観的な理由がある場合がある。例えば、撮影された顔画像が不鮮明であるか、同じコンテンツがたびたび表示されることが多いため、取得された顔画像が実在しない場合である。従って、電子デバイスは、誤判定を防止するために、1つ以上の他のコンテンツを表示画面に表示し、同じ方法で再度生体検証を行う。このように、電子デバイスによる生体検証を繰り返し行う回数は、実際の条件に応じて予め設定され調整されていてもよいことに留意されたい。このことは、本発明において限定されるものではない。
【００１６】
可能な設計では、取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が失敗である場合、電子デバイスは、取得されたk個の顔画像のうちの少なくとも1つに従って、顔照合を再度行うことができる。
【００１７】
本技術的解決策では、最初に行われた顔照合が失敗した場合、いくつかの客観的な理由がある場合がある。例えば、ユーザ検証のための顔画像が不鮮明であるか、または検証に使用される顔画像に顔が存在しない場合である。従って、誤判定を防止するために、電子デバイスは、取得した別の顔画像に従って顔照合を行う。このように、電子デバイスによる顔照合を繰り返し行う回数は、実際の条件に応じて予め設定され調整されていてもよいことに留意されたい。このことは、本発明において限定されるものではない。
【００１８】
可能な設計では、判定されたt個の表情パラメータ値と第1の参照系列との一致度が、第1の予め設定された閾値未満である場合および／または取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が失敗である場合、電子デバイスは、顔検証結果が失敗であると判定する。
【００１９】
可能な設計では、判定されたt個の表情パラメータ値と第1の参照系列との一致度が、第1の予め設定された閾値未満である場合および／または取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が失敗である場合、電子デバイスは、顔検証結果が失敗であると判定する。
【００２０】
可能な設計では、表示画面に1つ以上のコンテンツが同時に表示されている場合、電子デバイスは、予め設定された間隔に従って、1つ以上のコンテンツが表示され始めた後のk個の顔画像を取得する。
【００２１】
可能な設計では、表示画面に複数のコンテンツが順次表示されている場合、電子デバイスは、各コンテンツの表示中に、少なくとも1つの顔画像を取得し、取得された顔画像の総数がkである。
【００２２】
可能な設計では、1つのコンテンツは、電子デバイスに記憶された複数のコンテンツからランダムに選択された1つのコンテンツであり、各コンテンツは参照系列に対応している、または複数のコンテンツは、電子デバイスに記憶された複数のコンテンツセットからランダムに選択された1つのコンテンツセットを含み、各コンテンツセットは参照系列に対応する。
【００２３】
本技術的解決策では、電子デバイスは複数のコンテンツを予め記憶している。予め記憶されているコンテンツの量が増えるにつれて、写真、ビデオ、および3D印刷技術による攻撃を受けることはより困難になる。
【００２４】
第2の実施態様は、電子デバイスをさらに提供し、電子デバイスは、少なくとも表示画面と、カメラと、少なくとも1つのプロセッサと、を備え、電子デバイスは、第1の実施態様における方法の一部または方法全部を、表示画面、カメラ、および少なくとも1つのプロセッサを用いて実行する。
【００２５】
第3の実施態様は、電子デバイスをさらに提供し、電子デバイスは、表示画面と、カメラと、メモリと、バスシステムと、少なくとも1つのプロセッサと、を備え、表示画面、カメラ、メモリ、および少なくとも1つのプロセッサは、バスシステムを使用して接続され、
1つ以上のプログラムはメモリに記憶され、1つ以上のプログラムは命令を含み、電子デバイスによって実行される場合、命令は、電子デバイスが第1の実施態様における方法の一部または方法全部を実行することを可能にする。
【００２６】
第4の実施態様は、コンピュータ記憶媒体、すなわち、1つ以上のプログラムを記憶するコンピュータ可読記憶媒体をさらに提供し、1つ以上のプログラムは命令を含み、電子デバイスによって実行される場合、命令は、第1の実施態様における方法の一部または方法全部を実行することを可能にする。
【００２７】
第5の実施態様は、電子デバイスをさらに提供し、電子デバイスは、表示画面と、カメラと、少なくとも1つのプロセッサと、メモリと、を備え、メモリは1つ以上のプログラムを記憶し、少なくとも1つのプロセッサは、第1の実施態様における方法の一部または方法全部を電子デバイスが実行するように、メモリに記憶された1つ以上のプログラムを呼び出すように構成される。
【００２８】
本発明の実施形態をより明確に説明するために、以下、実施形態を説明するために必要な添付の図面を簡単に説明する。当然のことながら、以下の説明における添付の図面は、本発明の一部の実施形態を単に示すものであり、当業者は、創造的努力がなくても、これらの添付の図面から他の図面をさらに導出することができる。
【図面の簡単な説明】
【００２９】
【図１】本発明の一実施形態による電子デバイスの概略的な構成図である。
【図２】本発明の実施形態1による顔検証方法の概略的な流れ図である。
【図３ａ】図2に示す実施形態におけるテキストを表示する概略図である。
【図３ｂ】図2に示す実施形態におけるテキストを表示する別の概略図である。
【図３ｃ】図2に示す実施形態における複数のテキストを表示する概略図である。
【図３ｄ】図2に示す実施形態における写真を表示する概略図である。
【図４】本発明の実施形態2による顔検証方法の概略的な流れ図である。
【図５】本発明の実施形態3による顔検証方法の概略的な流れ図である。
【図６】本発明の実施形態4による顔検証方法の概略的な流れ図である。
【図７】本発明の一実施形態による電子デバイスの概略的な構成図である。
【発明を実施するための形態】
【００３０】
以下、本発明の実施形態における添付の図面を参照しながら、本発明の実施形態における技術的な解決策を明確かつ完全に説明する。当然のことながら、説明される実施形態は、単に本発明の実施形態の一部に過ぎず、すべてではない。本発明の実施形態に基づいて、当業者によって創造的努力なしに取得されるすべての他の実施形態は、本発明の保護範囲内に含まれるものとする。
【００３１】
ここで、本発明の実施形態に関連するいくつかの基本的な概念をまず説明する。
【００３２】
本発明の一実施形態で提供される電子デバイスを図1に示すことができる。電子デバイス1は、入力ユニット11と、少なくとも1つのプロセッサ12と、出力ユニット13と、メモリ14と、電源15と、通信ユニット16と、を備える。これらの構成要素は、1つ以上のバスを使用して互いに通信する。
【００３３】
図面に示された電子デバイスの構造は、本発明を限定するものとして解釈されないことを当業者は理解されよう。電子デバイスは、バス構造のものであってもよいし、スター構造のものであってもよく、図に示すものより多いもしくは少ない構成要素、またはいくつかのコンポーネントの組み合わせ、または異なる配置の構成要素をさらに含んでもよい。本発明の本実装では、電子デバイス1は、限定するものではないが、携帯電話、モバイルコンピュータ、タブレットコンピュータ、携帯情報端末（Personal Digital Assistant、PDA）、メディアプレーヤー、スマートテレビ、またはこれらの2つ以上の組み合わせを含む、任意のモバイルまたは携帯用電子デバイスとすることができる。
【００３４】
入力ユニット11は、ユーザと電子デバイスとの間のやりとりを実現するように、および／または電子デバイスに情報を入力するように構成される。例えば、入力ユニット11は、ユーザが入力したデジタルまたは文字情報を受信して、ユーザ設定または機能制御に関連する信号入力を生成することができる。本発明の具体的な実装では、入力ユニット11は、少なくともカメラ111を備え、入力ユニット11は、タッチパネル112および／または物理入力キーおよびマイクロフォンなどの別のヒューマン−コンピュータインタラクションインターフェース113をさらに備えることができる。
【００３５】
タッチパネル112は、タッチスクリーンまたはタッチコントロールスクリーンとも呼ばれ、ユーザがタッチパネル112またはタッチパネル112付近で行ったタッチ操作を収集することができる。例えば、ユーザは、指やスタイラスなどの任意の適切な物体や付属品を用いてタッチパネル上またはタッチパネル付近で操作を行い、予め設定されたプログラムに従って対応する接続デバイスを駆動する。場合により、タッチパネルは、2つの部分、すなわち、タッチ検出装置およびタッチコントローラを含み得る。タッチ検出装置は、ユーザのタッチ操作を検出し、検出されたタッチ操作を電気信号に変換し、電気信号をタッチコントローラに転送する。タッチコントローラは、タッチ検出装置から電気信号を受信し、電気信号を接触座標に変換し、次いで接触座標をプロセッサに送信する。タッチコントローラは、プロセッサが送信したコマンドをさらに受信および実行できる。加えて、タッチパネルは、抵抗方式、容量方式、赤外線（Infrared）方式、および表面弾性波方式などの複数の方式を使用して実装され得る。本発明の別の実装では、入力ユニット11によって使用される物理入力キーは、限定されるものではないが、物理キーボード、ファンクションキー（例えば、音量調節キーまたはオン／オフキー）、トラックボール、マウス、ジョイスティックなどのうちの1つ以上を含み得る。マイクロフォンの形態の入力ユニット11は、ユーザまたは環境から入力された音声を収集し、その音声を、電気信号の形態であり、かつプロセッサによって実行されるコマンドに変換することができる。
【００３６】
プロセッサ12は、電子デバイスの制御の中心であり、様々なインターフェースおよび配線を使用して電子デバイス全体のすべての部分に接続され、メモリに記憶されたソフトウェアプログラムおよび／またはモジュールを稼働（running）または実行（executing）し、メモリに記憶されたデータを呼び出すことによって、電子デバイスの様々な機能および／またはデータ処理を実行する。プロセッサ12は、集積回路（Integrated Circuit、略してIC）を含むことができ、例えば、単一のパッケージ化されたICを含んでもよいし、同じ機能または異なる機能を有する複数のパッケージ化されたICを接続することによって形成されてもよい。例えば、プロセッサ12は、中央処理装置（Central Processing Unit、略称CPU）のみを含んでいてもよいし、GPU、デジタルシグナルプロセッサ（Digital Signal Processor、略称DSP）、および通信ユニット16の制御チップ（例えば、ベースバンドチップ）の組み合わせとしてもよい。本発明の本実装では、CPUは単一のコンピューティングコアであってもよく、複数のコンピューティングコアを含んでいてもよい。
【００３７】
出力ユニット13は、画像出力ユニット131および音声出力ユニット132を含むが、これに限定されるものではない。画像出力ユニットは、文字、写真、および／またはビデオを出力するように構成される。本発明の本実施形態では、画像出力ユニット131は、表示画面1311、例えば、LCD（Liquid Crystal Display、液晶ディスプレイ）、OLED（Organic Light−Emitting Diode、有機発光ダイオード）、および電界放出ディスプレイ（field emission display、略称FED）の形態で構成された表示画面を少なくとも含む。あるいは、画像出力ユニットは、電気泳動（electrophoretic）ディスプレイなどの反射型ディスプレイ、または光の干渉変調（Interferometric Modulation of Light）を用いるディスプレイを含むことができる。画像出力ユニットは、単一のディスプレイまたは異なるサイズの複数のディスプレイを含むことができる。本発明の具体的な実装では、入力ユニット11が使用するタッチパネルと、出力ユニット13が使用する表示画面と、を総称してディスプレイと呼ぶことがある。タッチパネル上でのタッチ操作やタッチパネル付近でのジェスチャ操作を検出した後、タッチパネルは、その操作に関する情報をプロセッサ12に送信して、タッチイベントの種類を判定する。その後、プロセッサ12は、タッチイベントタイプに従って、対応する視覚的出力を表示画面に提示する。図1において、入力ユニット11と出力ユニット13とは、電子デバイスの入出力機能を実現するための2つの独立した構成要素として用いられている。しかしながら、一部の実施形態では、タッチパネルおよび表示画面を統合して、電子デバイスの入出力機能を実現することができる。例えば、画像出力ユニットは、タッチによりユーザが操作を行うことができるように、限定されるものではないが、ウィンドウ、スクロールバー、アイコン、スクラップブックをなど含む、様々なグラフィカルユーザインターフェース（Graphical User Interface、略称GUI）を表示して、仮想制御コンポーネントとして機能させることができる。
【００３８】
本発明の特定の実装では、画像出力ユニットは、プロセッサによってビデオ出力をフィルタリングおよびズームインするためのフィルタおよび増幅器を含む。音声出力ユニットは、プロセッサによって出力された音声信号をデジタルフォーマットからアナログフォーマットに変換するように構成されたデジタル−アナログコンバータを含む。
【００３９】
メモリ14は、ソフトウェアプログラムおよびモジュールを記憶するように構成することができる。プロセッサ12は、電子デバイスの各種機能アプリケーションを実行し、データ処理を実現するために、メモリ14に記憶されたソフトウェアプログラムおよびモジュールを実行する。メモリ14は、プログラム記憶領域とデータ記憶領域とを主に含むことができる。プログラム記憶領域には、オペレーティングシステムと、少なくとも1つの機能によって必要とされるアプリケーションプログラム、例えば音声再生プログラムや画像再生プログラムと、が記憶されていてもよい。データ記憶領域には、電子デバイスの使用などに応じて作成されたデータ（例えば、音声データや電話帳）が記憶されていてもよい。本発明の特定の実装では、メモリ14は、揮発性メモリ、例えば、不揮発性ランダムアクセスメモリ（Nonvolatile Random Access Memory、略称NVRAM）、相変化ランダムアクセスメモリ（Phase Change RAM、略称PRAM）、および磁気抵抗ランダムアクセスメモリ（Magetoresistive RAM、略称MRAM）を含むことができる。メモリ14は、不揮発性メモリ、例えば、少なくとも1つのディスク記憶装置、電気的に消去可能なプログラマブル読み出し専用メモリ（Electrically Erasable Programmable Read−Only Memory、略称EEPROM）、NORフラッシュメモリ（NOR flash memory）またはNANDフラッシュメモリ（NAND flash memory）などのフラッシュメモリをさらに含むことができる。不揮発性メモリは、プロセッサによって実行されるオペレーティングシステムおよびアプリケーションプログラムを記憶する。メモリ14は、実行中のプログラムやデータを不揮発性メモリからメモリにロードし、デジタルコンテンツを大容量の記憶装置に記憶する。オペレーティングシステムは、メモリ管理、記憶装置制御、および電力管理などの従来のシステムタスクを制御および管理するように構成され、様々なタイプのハードウェアおよびソフトウェア間の通信を容易にする、様々なコンポーネントおよび／またはドライバを含む。本発明の本実装では、オペレーティングシステムは、GoogleのAndroidシステム、Appleが開発したiOSシステム、Microsoftが開発したWindowsオペレーティングシステム、またはVxworksなどの組み込みオペレーティングシステムであってもよい。
【００４０】
アプリケーションプログラムには、限定されるものではないが、ブラウザ、電子メール、インスタントメッセージングサービス、ワードプロセッシング、キーボード仮想化、ウィジェット（Widget）、暗号化、デジタル著作権管理、音声認識、音声再生、（全地球測位システムによって提供される機能などの）測位、音楽再生などを含む、電子デバイスにインストールされた任意のアプリケーションが含まれる。
【００４１】
電源15は、電子デバイスの稼働を維持するために、電子デバイスの異なるコンポーネントに電力を供給するように構成される。一般に、電源は、一般的なリチウムイオン電池やニッケル水素電池などの内蔵バッテリでもよく、また、電子デバイスに直接電力を供給するACアダプタなどの外部電源も含むことができる。本発明の一部の実装では、電源をより広く定義することもでき、例えば、電力管理システム、充電システム、停電検出回路、電力コンバータまたはインバータ、電力ステータスインジケータ（例えば、発光ダイオード）、ならびに電子デバイスの発電、管理および分配に関連付けられた他の構成要素をさらに含むことができる。
【００４２】
通信ユニット16は、通信チャネルを確立するように構成され、その結果、電子デバイスは、通信チャネルを使用してリモートサーバに接続され、リモートサーバからメディアデータをダウンロードする。通信ユニット16は、無線ローカルエリアネットワーク通信、ブルートゥース(登録商標)通信、赤外線通信、ならびに／またはセルラー方式通信システム通信、例えば広帯域符号分割多元接続（Wideband Code Division Multiple Access、略称W−CDMA）および／もしくは高速ダウンリンクパケットアクセス（High Speed Downlink Packet Access、略称HSDPA）を行うために、無線ローカルエリアネットワーク（Wireless Local Area Network、略称無線LAN）モジュール、ブルートゥースモジュール、およびベースバンド（Baseband）モジュールなどの通信モジュールと、上記通信モジュールに対応する無線周波数（Radio Frequency、略称RF）回路と、を含むことができる。通信モジュールは、電子デバイス内のコンポーネントの通信を制御するように構成され、ダイレクトメモリアクセス（Direct Memory Access）をサポートすることができる。
【００４３】
本発明の異なる実装では、通信ユニット16内の通信モジュールは、集積回路チップ（Integrated Circuit Chip）の形で一般に提示され、すべての通信モジュールおよび対応するアンテナグループを含むのではなく、選択的に組み合わせることができる。例えば、通信ユニット16は、セルラー方式通信システムにおいて通信機能を提供するために、ベースバンドチップ、無線周波数チップ、および対応するアンテナのみを含んでいてもよい。電子デバイスは、通信ユニット16によって確立された無線ローカルエリアネットワークアクセスまたはWCDMA(登録商標)アクセスなどの無線通信接続を使用することによって、セルラーネットワーク（Cellular Network）またはインターネット（Internet）に接続されてもよい。本発明の一部の任意の実装では、通信ユニット16内のベースバンドモジュールなどの通信モジュールをプロセッサユニットに統合することができる。典型的な例は、クアルコム（Qualcomm）が提供するAPQ＋MDMシリーズプラットフォームである。
【００４４】
RF回路は、情報を送受信する、または呼処理において信号を送受信するように構成される。例えば、RF回路は、基地局の下りリンク情報を受信した後、処理のために下りリンク情報をプロセッサに送信し、追加的に、上りリンクデータを基地局に送信する。一般に、RF回路は、限定するものではないが、アンテナシステム、無線周波数送受信機、1つ以上の増幅器、チューナ、1つ以上の発振器、デジタルシグナルプロセッサ、コーデック（Codec）チップセット、加入者識別モジュール（SIM）カード、メモリなどを含む、機能を実装するための周知の回路を含む。加えて、RF回路は、無線通信によってネットワークおよび別のデバイスとさらに通信することができる。限定するものではないが、GSM(登録商標)（Global System of Mobile communication、汎欧州デジタル移動電話方式）、GPRS（General Packet Radio Service、汎用パケット無線サービス）、CDMA（Code Division Multiple Access、符号分割多元接続）、WCDMA（Wideband Code Division Multiple Access、広帯域符号分割多元接続）、高速アップリンクパケットアクセス（High Speed Uplink Packet Access、HSUPA）、LTE（Long Term Evolution、ロングタームエボリューション）、電子メール、SMS（Short Messaging Service、ショートメッセージングサービス）などを含む、任意の通信規格またはプロトコルを無線通信のために使用できる。
【００４５】
可能な実装では、電子デバイス1は、表示画面1311上に1つ以上のコンテンツを表示することができ、ここで、コンテンツは、文字、写真、またはビデオを含み、また1つ以上のコンテンツの表示中にカメラ111を用いてk個の顔画像を取得でき、ここで、kは2以上の整数である。プロセッサ12は、メモリ14に記憶されたコードを呼び出して以下の動作を実行する：
取得したk個の顔画像に従って、t個の表情パラメータ値を判定し、表情パラメータ値は、表情コード値または瞳孔相対値のうちの少なくとも1つを含み、判定されたt個の表情パラメータ値と第1の予め設定された参照系列との一致度が第1の予め設定された閾値以上であり、取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が成功である場合、顔検証結果は成功であると判定し、ここで、tは2以上の整数であり、t≦kである。
【００４６】
判定されたt個の表情パラメータ値と第1の参照系列との一致度が、第1の予め設定された閾値未満である場合および／または取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が失敗である場合、プロセッサ12は、顔検証結果が失敗であると判定し得る。
【００４７】
さらに、判定されたt個の表情パラメータ値と第1の参照系列との一致度が第1の予め設定された閾値未満である場合、表示画面1311は、1つ以上の他のコンテンツをさらに表示でき、カメラ111は、1つ以上の他のコンテンツの表示中に、k個の顔画像をさらに再取得でき、プロセッサ12は、再取得されたk個の顔画像に従って、t個の表情パラメータ値を再判定でき、かつ再判定されたt個の表情パラメータ値と第2の予め設定された参照系列との一致度が第2の予め設定された閾値以上であり、再取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が成功である場合に、顔検証結果は成功であると判定できる。
【００４８】
再判定されたt個の表情パラメータ値と第2の参照系列との一致度が、第2の予め設定された閾値未満である場合および／または再取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が失敗である場合、プロセッサ12は、顔検証結果が失敗であると判定する。
【００４９】
場合により、表示画面1311が1つ以上のコンテンツを同時に表示する場合、カメラ111は、予め設定された間隔に従って、1つ以上のコンテンツが表示され始めた後、k個の顔画像を取得してもよい。
【００５０】
場合により、表示画面1311が複数のコンテンツを順次表示する場合、カメラ111は、各コンテンツの表示中に、少なくとも1つの顔画像を取得し、取得された顔画像の総数がkであり得る。
【００５１】
1つのコンテンツは、電子デバイスに記憶された複数のコンテンツからランダムに選択された1つのコンテンツであり、各コンテンツは参照系列に対応している、または複数のコンテンツは、電子デバイスに記憶された複数のコンテンツセットからランダムに選択された1つのコンテンツセットを含み、各コンテンツセットは参照系列に対応する。
【００５２】
本実装では、電子デバイス1の機能モジュールの機能は、図2〜図6に示される方法実施形態の方法に従って具体的に実装され得、図2〜図6の関連する説明に対応し得ることが理解されよう。ここでは細部を説明しない。
【００５３】
ここで、本発明のすべての実施形態に関連するいくつかの用語について説明する。
【００５４】
表情パラメータ値は、表情コード値または瞳孔相対値のうちの少なくとも1つを含む。表情コード値および瞳孔相対値については、以下の説明を参照されたい。
【００５５】
人間は少なくとも7つの表情を主に持っており、すべての表情の顔の特徴が異なることが研究から判明している。幸福の表情の特徴としては、上がった口角、皺がみられ上がった頬、細められた目、および目尻に形成された「カラスの足跡」が挙げられる。悲しみの表情の特徴としては、細目、寄せられた眉、下がった口角、および上がったり突き出たりした顎が挙げられる。恐怖の表情の特徴としては、開いた口と見開かれた目、上方に動いた眉、および膨らんだ鼻孔が挙げられる。怒りの表情の特徴としては、下がった眉、皺の寄った額、ならびに緊張した瞼および緊張した唇が挙げられる。嫌悪の表情の特徴としては、皺の寄った鼻、引き上げられた上唇、下がった眉、および細目が挙げられる。驚きの表情の特徴としては、落ちた下顎、緩んだ唇および緩んだ口、見開かれた目、ならびに瞼および眉の僅かな上昇が挙げられる。軽蔑の表情の特徴は、口角の一方がつり上がり、冷笑または薄笑いが浮かんでいることである。上述の表情は数字で符号化することができる。幸福、悲しみ、恐怖、怒り、嫌悪、驚き、および軽蔑の表情は、1、2、3、4、5、6、および7と順番に符号化されると仮定する。電子デバイスは、表示画面に画像を表示し、その画像を表示する際にカメラを用いて顔画像を取得する。電子デバイスが、顔画像の分析を行うことによって、ユーザの表情が悲しみであることを知ると、電子デバイスは、コード2を判定できる。このコードは、本発明の本実施形態では表情コード値と呼ばれる。
【００５６】
この研究から、異なる顔の表情を持つときに、異なるサイズの瞳孔を有する人がいることがさらに分かった。電子デバイスは、瞳孔の直径および眼角距離を測定することもできる。同じ基準眼角距離に対する瞳孔の直径を、瞳孔相対値と呼ぶ。例えば、第1の予め設定された瞬間に、眼角距離が28mmであり、瞳孔の直径が4mmであることが検出され、第2の予め設定された瞬間に、眼角距離が28mmであり、瞳孔の直径が5mmであることが検出され、第3の予め設定された瞬間に、眼角距離が30mmであり、瞳孔の直径が6mmであることが検出される。基準眼角距離を28mmと仮定すると、瞳孔相対値は、順に、4mm、5mm、および5．6mmである。基準眼角距離は、第1の予め設定された瞬間（すなわち、コンテンツが表示され始めてから顔画像を最初に取得した瞬間）に検出された眼角距離とすることもできるし、検出された眼角距離の大多数とすることもできる。電子デバイスは、眼角を取得するために、cannyオペレータエッジ検出およびハフ変換を行うことによって形状を抽出することができる。
【００５７】
顔照合は、人間の顔の特徴情報に基づく身元認識のためのバイオメトリック認識技術である。顔照合プロセスは、3つのステップを一般に含む。顔の顔画像データベースがまず作成される。すなわち、カメラは、顔を撮影して顔画像を取得、もしくは写真を用いて顔画像を取得し、これらの顔画像を用いて顔紋（Faceprint）コードを生成し、顔紋コードを記憶する；現在検出された人物の顔画像を取得し、つまり、カメラを用いて現在検出された人物の顔画像を撮影、もしくは現在検出された人物の写真を用いて顔画像を取得し、現在取得された顔画像を用いて顔紋コードを生成し、顔画像データベースの顔紋コードと現在の顔紋コードを比較する。
【００５８】
顔照合とは、検出された人物の顔画像に対して本人確認を行うこと、または顔画像データベースで目標の検索を行うことである。実際には、これは、最適に照合されるコンテンツを見つけるために、撮影された顔画像とデータベース中の顔画像とを1つずつ比較することを意味する。従って、顔の記述によって、顔照合の具体的な方法と性能が決まる。固有ベクトルおよび顔紋テンプレートを用いた2つの記述方法が主に用いられる。1つ目は、固有ベクトル法である。この方法では、目の虹彩、小鼻、および口角などの顔の輪郭の寸法、位置、および距離などの属性を判定し、次いで、属性の幾何特徴量を算出する。これらの特徴量は、顔を記述する固有ベクトルを形成する。2つ目は、顔紋テンプレート法である。この方法では、いくつかの標準顔画像テンプレートまたは顔器官テンプレートがデータベースに記憶される。比較の際、正規化相関測定によって、取り込まれた顔画像とデータベース内のすべてのテンプレートとの照合が行われる。加えて、パターン認識のための自己相関ネットワークまたは特徴をテンプレートと組み合わせる方法もある。実際、顔照合技術の鍵は、「局所的人特徴分析（local human feature analysis）」と「グラフィック／ニューラル認識アルゴリズム（graphics／neural recognition algorithm）」である。このアルゴリズムは、人間の顔の器官と顔の特徴を使用する方法である。例えば、対応する幾何学的関係などのデータによって形成された識別パラメータは、データベース内のすべての元のパラメータと比較され、その後、判定および確認が行われる。
【００５９】
可能な設計では、1つ以上のコンテンツが表示画面に同時に表示されてもよいし、複数のコンテンツが順次表示画面に表示されてもよい。1つ以上のコンテンツの同時表示の関連する説明については、図2および図4の対応する実施形態を参照されたく、また複数のコンテンツの順次表示の関連する説明については、図5および図6の対応する実施形態を参照されたい。コンテンツには、文字、写真、またはビデオが含まれる。
【００６０】
図2を参照すると、図2は、本発明の実施形態1による顔検証方法の概略的な流れ図である。本発明の本実施形態で提供される顔検証方法は、表示画面とカメラとを備えた電子デバイスに適用される。図2に示すように、本方法は、以下のステップを含み得る。
【００６１】
ステップS201．電子デバイスは、表示画面に1つ以上のコンテンツを同時に表示し、コンテンツは、文字、写真、またはビデオを含む。
【００６２】
具体的には、電子デバイスが顔検証命令を受信した場合、電子デバイスの表示画面に1つ以上のコンテンツを同時に表示することができる。電子デバイスの一例として、携帯電話が用いられている。例えば、携帯電話のロックが解除されている場合には、顔検証命令を受信したとみなすことができる。電子デバイスの一例として、アクセス制御装置が用いられている。例えば、アクセス制御装置が認証を行っている場合には、顔検証命令を受信したとみなすことができる。
【００６３】
任意の実装では、電子デバイスは、複数のコンテンツを予め記憶していてもよく、各コンテンツは、参照系列に対応し、顔検証命令を受信した場合、電子デバイスは、予め記憶された複数のコンテンツから1つのコンテンツをランダムに取得し、表示画面にコンテンツを表示し得る。
【００６４】
別の任意の実装では、電子デバイスは、複数のコンテンツセットを予め記憶していてもよく、各コンテンツセットは、複数のコンテンツを含み、各コンテンツセットは、参照系列に対応し、顔検証命令を受信した場合、電子デバイスは、予め記憶された複数のコンテンツセットのうちの1つのコンテンツをランダムに取得し、表示画面にこのコンテンツセットを同時に表示し得る。
【００６５】
コンテンツが文字である場合、電子デバイスが電子デバイスの表示画面に1つのコンテンツを表示することは、具体的には、表示画面にテキストを表示すること、例えば、図3aに示すように、文字を含む質問を表示することであり、別の例として、図3bに示すように、鮮明さにむらがある状態で文字を表示することである。電子デバイスが表示画面に複数のコンテンツを表示することは、具体的には、電子デバイスが、表示する必要があるコンテンツの量を判定し、その量に従って表示画面の表示領域を判定し、1つの表示領域に1つのコンテンツが表示され、図3cに示すように、特定の順番で異なる領域を見るようにユーザに促すことである。
【００６６】
コンテンツが写真である場合、電子デバイスが表示画面に1つのコンテンツを表示することは、具体的には、静止写真を表示画面に表示し、静止写真の内容は空間の複雑さが不均一であり、図3dに示すように、特定の順番で静止写真の異なる領域を見るようにユーザに促すことである。電子デバイスが表示画面に複数のコンテンツを表示することは、具体的には、電子デバイスが、表示する必要があるコンテンツの量を判定し、その量に従って表示画面の表示領域を判定し、1つの表示領域に1つのコンテンツが表示され、特定の順番で異なる領域を見るようにユーザに促すことである。コンテンツがビデオである場合、電子デバイスが表示画面に1つのコンテンツを表示することは、具体的には、表示画面にビデオクリップを表示することである。
【００６７】
図3a、図3b、図3c、および図3dの電子デバイスは携帯電話であることに留意されたい。別の任意の実施形態では、電子デバイスはまた、PAD、メディアプレーヤーなどであってもよい。上記は、本発明の可能な実施形態の特定の実施形態に過ぎない。これは、本発明をなんら限定するものではない。
【００６８】
本発明の本実施形態では、コンテンツを表示することにより、コンテンツに対してユーザが提示する表情変化および瞳孔変化を取得し、表情変化および／または瞳孔変化に従って生体検証を行う。このようにして、ビデオ攻撃の影響は低減され、意図的にユーザに促すことが回避され、ユーザとのインタラクションがより自然になり、ユーザ体験が向上する。
【００６９】
別の任意の実施形態では、表示画面にコンテンツを表示する代わりに、音声出力ユニットを用いて音声クリップを再生して、ユーザが提示した表情変化および瞳孔変化を捕捉し、表情変化および／または瞳孔変化に従って、生体検証を行ってもよいことに留意されたい。
【００７０】
ステップS202．電子デバイスは、1つ以上のコンテンツの表示中にカメラを使用してk個の顔画像を取得し、kは2以上の整数である。
【００７１】
具体的には、1つ以上のコンテンツを表示画面に同時に表示することを開始する場合、電子デバイスは、自らのカメラを呼び出してユーザの顔画像を取得することができる。電子デバイスは、少なくとも2つの瞬間を予め設定しておき、コンテンツが表示され始めた後の対応する瞬間に、ユーザの顔画像を取得し始めることができる。瞬間同士の間隔は等しくても等しくなくてもよい。電子デバイスはまた、予め設定された間隔に従って、各瞬間を判定してもよい、つまり、コンテンツが表示され始めた後の顔画像を、予め設定された間隔に従って取得してもよい。
【００７２】
なお、各瞬間においてカメラによって取得される顔画像の数は、同じであっても異なっていてもよい。このことは、本発明において限定されるものではない。
【００７３】
説明を容易にするために、本発明の本実施形態では、2つの瞬間、すなわち、第1の予め設定された瞬間および第2の予め設定された瞬間が予め設定されている例を用いる。カメラは、コンテンツの表示が開始された後の第1の予め設定された瞬間にm個の顔画像の取得を開始し、コンテンツが表示され始めた後の第2の予め設定された瞬間にn個の顔画像を取得し始め、mおよびnは1以上の整数であり、mおよびnは、同じであっても異なっていてもよく、k＝m＋nである。第1の予め設定された瞬間は最初の秒であり、第2の予め設定された瞬間は第3番目の秒であり、mとnとの両方とも3であると仮定する。電子デバイスは、コンテンツが表示され始めた後、最初の秒にカメラを呼び出して3個の顔画像を連続的に取得し、コンテンツの表示を開始して第3番目の秒にカメラを呼び出して3個の顔画像を連続的に取得する。
【００７４】
場合により、コンテンツの表示中に、電子デバイスは、合計でk個の顔画像をk回取得することができ、毎回1つの顔画像が取得される。
【００７５】
ステップS203．電子デバイスは、取得されたk個の顔画像に従って、t個の表情パラメータ値を判定し、表情パラメータ値は、表情コード値または瞳孔相対値のうちの少なくとも1つを含み、tは2以上の整数であり、t≦kである。
【００７６】
各予め設定された瞬間に1つの顔画像しか取得されない場合、kとtとは等しい。
【００７７】
カメラが、コンテンツが表示され始めた後、第1の予め設定された瞬間から開始するm個の顔画像を取得し、コンテンツが表示され始めた後、第2の予め設定された瞬間から開始するn個の顔画像を取得する場合、電子デバイスは、第1の予め設定された瞬間から開始して取得されたm個の顔画像のうちの少なくとも1つに従って、表情パラメータ値を判定し、第2の予め設定された瞬間から開始して取得されたn個の顔画像のうちの少なくとも1つに従って、表情パラメータ値を判定することができる。
【００７８】
すべての瞬間に取得された顔画像に従って、電子デバイスが表情パラメータ値を判定する処理手順は同じであるため、本発明の本実施形態では、第1の予め設定された瞬間は、詳細な説明のための例として使用され、別の予め設定された瞬間に行われる処理手順は同様である。ここでは細部を繰り返さない。
【００７９】
任意の実装では、電子デバイスは、第1の予め設定された瞬間から開始して取得されたm個の顔画像のうち最も鮮明な画像を選択し、選択された顔画像に従って、表情パラメータ値を判定することができる。
【００８０】
別の任意の実装では、電子デバイスは、第1の予め設定された瞬間から開始して取得されたm個の顔画像のうちの少なくとも2つの顔画像を代替的に取得し、次いで、各顔画像の表情パラメータ値を取得し、取得した表情パラメータ値を比較し、最も頻繁に取得された表情パラメータ値を選択することができる。電子デバイスが5つの表情パラメータ値を取得し、5つの表情パラメータ値が（3，3，3，2，4）であると仮定する。電子デバイスは、表情パラメータ値が3であると判定し得る。
【００８１】
表情パラメータ値は、表情コード値または瞳孔相対値のうちの少なくとも1つを含むことができる。電子デバイスは、表示されたコンテンツのために予め記憶されている第1の参照系列に従って、顔画像から、表情コード値のみを取得するか、瞳孔相対値のみを取得するか、または表情コード値および瞳孔相対値を取得するかを判定することができる。
【００８２】
第1の参照系列は、第1の表情サブ系列または第1の瞳孔サブ系列のうちの少なくとも1つを含む。
【００８３】
第1の参照系列が第1の表情サブ系列のみを含む場合、電子デバイスは、取得された顔画像に従って、表情パラメータ値が表情コード値であると判定する。具体的には、電子デバイスは、第1の予め設定された瞬間から開始して取得されたm個の顔画像から1つの最も鮮明な顔画像を選択し、選択された顔画像に従って表情コード値を判定できる、または電子デバイスは、第1の予め設定された瞬間から取得されたm個の顔画像から少なくとも2つの顔画像を取得し、次いで、各顔画像の表情コード値を取得し、取得された表情コード値を比較し、最大の表情コード値を取ることができる。
【００８４】
第1の参照系列が第1の瞳孔サブ系列のみを含む場合、電子デバイスは、取得された顔画像に従って、表情パラメータ値を瞳孔相対値として判定する。具体的には、表情パラメータ値が瞳孔相対値である場合、電子デバイスは、第1の予め設定された瞬間から開始して取得されたm個の顔画像から1つの最も鮮明な顔画像を選択し、選択された1つの顔画像に従って瞳孔相対値を判定できる、または、電子デバイスは、第1の予め設定された瞬間から開始して取得されたm個の顔画像から少なくとも2つの顔画像を取得し、次いで、各顔画像の瞳孔相対値を取得し、取得された瞳孔相対値を比較し、最も頻繁に取得される瞳孔相対値を選択することができる。
【００８５】
第1の参照系列が第1の瞳孔サブ系列と第1の表情サブ系列とを含む場合、具体的には以下の3つの場合がある。
【００８６】
第1のケースでは、電子デバイスは、取得したk個の顔画像に従って、t個の表情コード値をまず判定し、判定されたt個の表情コード値と第1の表情サブ系列との一致度が第1の予め設定された閾値以上である場合、取得されたk個の顔画像に従って、t個の瞳孔相対値を判定する。
【００８７】
第2のケースでは、電子デバイスは、取得したk個の顔画像に従って、t個の瞳孔相対値をまず判定し、判定されたt個の瞳孔相対値と第1の瞳孔サブ系列との一致度が第1の予め設定された閾値以上である場合、取得されたk個の顔画像に従って、t個の表情コード値を判定する。
【００８８】
第3のケースでは、電子デバイスは、取得されたk個の顔画像に従って、t個の表情コード値とt個の瞳孔相対値との両方を判定する。
【００８９】
なお、電子デバイスがk個の顔画像に従って、t個の表情コード値とt個の瞳孔相対値とをどのように判定するかについては、上述の説明を参照されたい。ここでは細部を繰り返さない。
【００９０】
ステップS204．電子デバイスは、判定されたt個の表情パラメータ値と第1の予め設定された参照系列との一致度が第1の予め設定された閾値以上であるか否かを判定する。
【００９１】
t個の表情パラメータ値を取得した後、電子デバイスは、取得されたt個の表情パラメータ値を第1の参照系列と照合することができ、一致度が第1の予め設定された閾値以上である場合、生体検証結果は成功である。第1の予め設定された閾値は、実際の条件に従って調整されてもよい。
【００９２】
表情パラメータ値が表情コード値である場合、電子デバイスは、t個の表情コード値を第1の参照系列と照合することができる。電子デバイスが予めコンテンツのために記憶している第1の参照系列を（7，3，2，2，1）とし、第1の予め設定された閾値を80％と仮定すると、取得された5つの表情コード値のうちの少なくとも2つが第1の参照系列に対応するコード値とは異なる場合、電子デバイスは、一致度が第1の予め設定された閾値未満であると判定し、例えば、t個の表情コード値は（7，2，2，2，2）であり、取得された5つの表情コード値のうちの2つ未満が第1の参照系列に対応するコード値とは異なる場合、電子デバイスは、一致度が第1の予め設定された閾値に達していると判定する。
【００９３】
表情パラメータ値が瞳孔相対値である場合、電子デバイスは、t個の瞳孔相対値を第1の参照系列と照合することができる。電子デバイスが予めコンテンツのために記憶している第1の参照系列を（7，7，5，3，4）とし、第1の予め設定された閾値を80％と仮定すると、取得された5つの表情コード値のうちの少なくとも2つが第1の参照系列に対応するコード値とは異なる場合、電子デバイスは、一致度が第1の予め設定された閾値未満であると判定し、そうではなく、t個の表情コード値が（7，6，5，6，4）である場合、一致度が第1の予め設定された閾値に達していると判定する。
【００９４】
表情パラメータ値が瞳孔相対値である場合、電子デバイスはまた、第1の参照系列の変化傾向に対して瞳孔相対値を照合することができ、瞳孔相対値が第1の参照系列の変化傾向と一致する場合、瞳孔相対値と第1の参照系列との一致度が第1の予め設定された閾値に達すると判定することに留意されたい。特定の実装では、系列の差分系列を直接比較することによって変化傾向を取得することができ、各差分系列は、系列内の値と、値の後の別の値との差によって形成される系列である。（7，7，5，3，4）の差分系列が（0，−2，−2，1）であり、（5，5，3，1，2）の差分系列もまた（0，−2，−2，1）である場合、2つの系列は同じである。ユークリッド距離（Euclidean Distance）、ミンコフスキー距離（Minkowski Distance）、マンハッタン距離（Manhattan Distance）、チェビシェフ距離（Chebyshev Distance）、またはマハラノビス距離（Mahalanobis Distance）を用いて、差分系列の類似性を測定および評価することができる。
【００９５】
表情パラメータ値が表情コード値および瞳孔相対値であり、かつ第1の参照系列が2つのサブ配列、すなわち、表情コード値に対応する表情サブ系列と、瞳孔相対値に対応する瞳サブ系列と、を対応して有する場合、電子デバイスは、t個の表情コード値を表情サブ系列と照合し、t個の瞳孔相対値を瞳孔サブ系列と照合することができ、表情コード値と表情サブ系列との一致度が第1の予め設定された閾値に達し、かつ瞳孔相対値と瞳孔サブ系列との一致度が第1の予め設定された閾値に達する場合、または表情コード値と表情サブ系列との一致度と、瞳孔相対値と瞳孔サブ系列との一致度と、の積が、第1の予め設定された閾値に達する場合、t個の表情パラメータ値と第1の予め設定された参照系列との一致度が第1の予め設定された閾値以上であると判定することができる。
【００９６】
ステップS205．電子デバイスは、取得されたk個の顔画像のうちの少なくとも1つに従って、顔照合が成功したか否かを判定する。具体的には、電子デバイスは、取得したk個の顔画像から、顔照合のために少なくとも1つの鮮明な顔画像を選択してもよい。電子デバイスが顔照合をどのように実行するかは、当業者には理解されており、ここでは説明されないことに留意されたい。
【００９７】
ステップS204とステップS205とは同時に行われてもよいし、ステップS204に続けてステップS205が行われてもよいし、ステップS205に続けてステップS204が行われてもよいことに留意されたい。2つのステップの間に厳密な実行順序はない。これは、本発明をなんら限定するものではない。
【００９８】
ステップS206．判定されたt個の表情パラメータ値と第1の予め設定された参照系列との一致度が、第1の予め設定された閾値以上である場合および取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が成功である場合、電子デバイスは、顔検証結果が成功であると判定する。
【００９９】
ステップS207．判定されたt個の表情パラメータ値と第1の参照系列との一致度が、第1の予め設定された閾値未満である場合および／または取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が失敗である場合、顔検証結果が失敗であると判定する。
【０１００】
図2に示す実施形態では、電子デバイスは、表示画面に1つのコンテンツを表示することによって、コンテンツに対してユーザが提示した表情変化および瞳孔変化を捕捉して生体検証を行う。本発明の本実施形態は、プロンプトに応じた瞬きや1回の相互作用で行われる生体検証が行われる従来技術に比べ、写真、ビデオ、3D印刷、または別の技術による攻撃の可能性を低減するように、生体検証の困難性を大幅に高めている。加えて、生体検証の際、意図的にユーザに促す必要がなく、ユーザとのインタラクションがより自然になり、ユーザ体験が向上する。
【０１０１】
図4を参照すると、図4は、本発明の実施形態2による顔検証方法の概略的な流れ図である。本発明の本実施形態は、実施形態1と実質的に同じであるが、図4に示すように、本実施形態の方法は、実施形態1のステップS201〜ステップS204に対応するステップS401〜ステップS404に加えて、以下の具体的なステップを含む点が異なる。
【０１０２】
ステップS405．電子デバイスは、1つ以上の他のコンテンツを表示画面に表示する。
【０１０３】
ステップS406．電子デバイスは、1つ以上の他のコンテンツの表示中にカメラを使用してk個の顔画像を再取得する。
【０１０４】
ステップS407．電子デバイスは、再取得されたk個の顔画像に従って、t個の表情パラメータ値を再判定し、表情パラメータ値は、表情コード値または瞳孔相対値のうちの少なくとも1つを含む。
【０１０５】
ステップS403およびステップS407の表情パラメータ値が同じであってもよい、例えば、両方とも表情コード値である、両方とも瞳孔相対値である、もしくは両方とも表情コード値および瞳孔相対値を含む、またはステップS403およびステップS407の表情パラメータ値が異なっていてもよい、例えば、ステップS403における表情パラメータ値は表情コード値であり、ステップS403における表情パラメータ値は瞳孔相対値である、ことに留意されたい。このことは、本発明において限定されるものではない。
【０１０６】
ステップS408．電子デバイスは、再取得されたt個の表情パラメータ値と第2の予め設定された参照系列との一致度が第2の予め設定された閾値以上であるか否かを判定し、t個の表情パラメータ値と第2の予め設定された参照系列との一致度が第2の予め設定された閾値以上である場合、ステップS409を行い、そうでなければ、ステップS411を行う。
【０１０７】
別の任意の実施形態では、t個の表情パラメータ値と第2の参照系列との一致度が第2の予め設定された閾値未満である場合、電子デバイスは、ステップS405を行うように戻ることができる、つまり、別のコンテンツを表示して、生体検証を再度行うことに留意されたい。本発明の本実施形態では、実際の条件に従って、生体検証の回数を調整してもよい。
【０１０８】
第2の予め設定された閾値と第1の予め設定された閾値は、同じでも異なっていてもよい。このことは、本発明において限定されるものではない。
【０１０９】
ステップS409．電子デバイスは、再取得されたk個の顔画像のうちの少なくとも1つに従って、顔照合が成功したか否かを判定し、顔照合が成功するとステップS410を行い、そうでなければステップS411を行う。別の任意の実施形態では、顔照合が失敗した場合には、再取得したk個の顔画像のうちの少なくとも1つに従って、顔照合が成功したか否かを再度判定し、実際の条件に従って、顔照合の回数を調整することができることに留意されたい。
【０１１０】
ステップS408とステップS409とは同時に行われてもよいし、ステップS408に続けてステップS409が行われてもよいし、ステップS409に続けてステップS408が行われてもよいことに留意されたい。2つのステップの間に厳密な実行順序はない。これは、本発明をなんら限定するものではない。
【０１１１】
ステップS410．電子デバイスは、顔照合結果が成功であると判定する。
【０１１２】
ステップS411．電子デバイスは、顔検証結果が失敗であると判定する。
【０１１３】
図4に示す実施形態では、最初に行われた生体検証が失敗した場合、いくつかの客観的な理由がある場合がある。例えば、撮影された顔画像が不鮮明であるか、同じコンテンツがたびたび表示されることが多いため、取得された顔画像が実在しない場合である。従って、電子デバイスは、誤判定を防止するために、1つ以上の他のコンテンツを表示画面に表示し、同じ方法で再度生体検証を行う。このように、電子デバイスによる生体検証を繰り返し行う回数は、実際の条件に応じて予め設定され調整されていてもよいことに留意されたい。このことは、本発明において限定されるものではない。
【０１１４】
図5を参照すると、図5は、本発明の実施形態3による顔検証方法の概略的な流れ図である。本発明の本実施形態で提供される顔検証方法は、表示画面とカメラとを備えた電子デバイスに適用される。図5に示すように、本方法は、以下のステップを含み得る。
【０１１５】
ステップS501．電子デバイスは、表示画面に複数のコンテンツを順次表示し、コンテンツは、文字、写真、またはビデオを含む。順次表示される複数のコンテンツは、予め記憶されたコンテンツセットであり、すべてのコンテンツの間に順番があり、順番に従って、コンテンツが表示画面に順次表示される。
【０１１６】
具体的には、電子デバイスが顔検証命令を受信した場合、電子デバイスは、複数のコンテンツを電子デバイスの表示画面に順次表示してもよい。電子デバイスの一例として、スマートフォンが用いられている。例えば、スマートフォンのロックが解除されている場合には、顔検証命令を受信したとみなすことができる。電子デバイスの一例として、アクセス制御装置が用いられている。例えば、アクセス制御装置が認証を行っている場合には、顔検証命令を受信したとみなすことができる。
【０１１７】
電子デバイスは、複数のコンテンツセットを予め記憶していてもよく、各コンテンツセットは、複数のコンテンツを含み、各コンテンツセットは、参照系列に対応し、顔検証命令を受信した場合、電子デバイスは、予め記憶された複数のコンテンツセットから1つのコンテンツセットをランダムに取得し、表示画面にこのコンテンツセットを順次に表示し、毎回1つのコンテンツが再生され得る。
【０１１８】
コンテンツが文字である場合、電子デバイスが、複数のコンテンツを電子デバイスの表示画面に順次表示することは、具体的には、このセットのすべてのテキストの順番に従って、テキストを表示画面に順次表示することであり、2つのテキストが表示される時間間隔が予め設定されている。具体的には、電子デバイスは、文字を含む質問を表示してもよいし、鮮明さにむらがある文字を表示してもよい。コンテンツが文字であり、各回に表示画面に表示される文字の数が制限されない場合もあることに留意されたい。
【０１１９】
コンテンツが写真である場合、電子デバイスが、複数のコンテンツを電子デバイスの表示画面に順次表示することは、具体的には、このセットのすべての写真の順番に従って、写真を表示画面に順次表示することであり、2つの写真が表示される時間間隔が予め設定されている。
【０１２０】
コンテンツがビデオである場合、表示画面に複数のコンテンツを順次表示することは、具体的には、このセット内のすべてのビデオクリップの順番に従って表示画面にビデオクリップを順次表示することである。
【０１２１】
本発明の本実施形態では、コンテンツを表示することにより、複数のコンテンツに対してユーザが提示する表情変化および瞳孔変化を取得し、表情変化および／または瞳孔変化に従って生体検証を行う。このようにして、意図的にユーザに促すことが回避され、ユーザとのインタラクションがより自然になり、ユーザ体験が向上する。
【０１２２】
別の任意の実施形態では、表示画面に少なくとも2つのコンテンツを表示する代わりに、音声出力ユニットを用いて少なくとも2つの音声クリップを再生して、ユーザが提示した表情変化および瞳孔変化を捕捉し、表情変化および／または瞳孔変化に従って、生体検証を行ってもよいことに留意されたい。
【０１２３】
ステップS502．電子デバイスは、各コンテンツの表示中に、少なくとも1つの顔画像を取得し、取得された顔画像の総数がkである。
【０１２４】
電子デバイスによって、電子デバイスの表示画面に順次表示される複数のコンテンツの数がk個である場合、電子デバイスは、各コンテンツの表示中に1つの顔画像しか取得する必要がない。
【０１２５】
各コンテンツの表示中に電子デバイスが取得する顔画像は、同じであっても異なっていてもよいことに留意されたい。このことは、本発明において限定されるものではない。
【０１２６】
ステップS503．電子デバイスは、取得されたk個の顔画像に従って、t個の表情パラメータ値を判定する。
【０１２７】
具体的には、電子デバイスは、各コンテンツの表示順番に従って、かつ各コンテンツの表示中に取得された顔画像の少なくとも1つに従って、表情パラメータ値を判定して、t個の表情パラメータ値を取得し、表情パラメータ値は、表情コード値または瞳孔相対値のうちの少なくとも1つを含む。
【０１２８】
各コンテンツに従って、少なくとも1つの顔画像が取得されるため、各コンテンツの表示中に取得された少なくとも1つの顔画像に従って、電子デバイスが表情パラメータ値を判定する同じ処理手順が存在し、本発明の本実施形態では、第1のコンテンツの表示中に取得された顔画像に従って表情パラメータ値が判定される例と、別のコンテンツに従って行われる処理手順とは同様である。ここでは細部を繰り返さない。
【０１２９】
任意の実装では、電子デバイスは、第1のコンテンツの表示中に取得された少なくとも1つの顔画像から最も鮮明な顔画像を選択し、選択された顔画像に従って表情パラメータ値を判定することができる。
【０１３０】
別の任意の実装では、電子デバイスは、第1のコンテンツの表示中に取得された少なくとも1つの顔画像から少なくとも2つの顔画像を代替的に取得し、次いで、各顔画像の表情パラメータ値を取得し、取得した表情パラメータ値を比較し、最も頻繁に取得された表情パラメータ値を選択することができる。電子デバイスが5つの表情パラメータ値を取得し、5つの表情パラメータ値が（3，3，3，2，4）であると仮定する。電子デバイスは、表情パラメータ値が3であると判定し得る。
【０１３１】
なお、電子デバイスが1つのコンテンツの表示中に取得される顔画像に従って表情パラメータ値を判定する仕方については、図2に示す実施形態を参照されたく、ここでは詳細を繰り返さない。
【０１３２】
ステップS504．電子デバイスは、判定されたt個の表情パラメータ値と第1の予め設定された参照系列との一致度が第1の予め設定された閾値以上であるか否かを判定する。
【０１３３】
ステップS505．電子デバイスは、取得されたk個の顔画像のうちの少なくとも1つに従って、顔照合が成功したか否かを判定する。
【０１３４】
ステップS504とステップS505とは同時に行われてもよいし、ステップS504に続けてステップS505が行われてもよいし、ステップS505に続けてステップS504が行われてもよいことに留意されたい。2つのステップの間に厳密な実行順序はない。これは、本発明をなんら限定するものではない。
【０１３５】
ステップS506．判定されたt個の表情パラメータ値と第1の予め設定された参照系列との一致度が、第1の予め設定された閾値以上である場合および取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が成功である場合、電子デバイスは、顔検証結果が成功であると判定する。
【０１３６】
ステップS507．判定されたt個の表情パラメータ値と第1の参照系列との一致度が、第1の予め設定された閾値未満である場合および／または取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が失敗である場合、顔検証結果が失敗であると判定する。
【０１３７】
図5に示す実施形態では、電子デバイスは、表示画面に複数のコンテンツを順次表示することによって、コンテンツセットに対してユーザが提示した表情変化および瞳孔変化を捕捉して生体検証を行う。本発明の本実施形態は、プロンプトに応じた瞬きや1回の相互作用で行われる生体検証が行われる従来技術に比べ、また図2に示す実施形態で提供された技術的解決策に比べ、写真、ビデオ、3D印刷、または別の技術による攻撃の可能性を低減するように、生体検証の困難性をさらに高めている。加えて、生体検証の際、意図的にユーザに促す必要がなく、ユーザとのインタラクションがより自然になり、ユーザ体験が向上する。
【０１３８】
図6を参照すると、図6は、本発明の実施形態4による顔検証方法の概略的な流れ図である。本発明の本実施形態は、実施形態3と実質的に同じであるが、図6に示すように、本実施形態の方法は、実施形態3のステップS501〜ステップS504に対応するステップS601〜ステップS604に加えて、以下の具体的なステップをさらに含む点が異なる。
【０１３９】
ステップS605．電子デバイスは、表示画面に他の複数のコンテンツを順次表示する。
【０１４０】
ステップS606．電子デバイスは、他の複数のコンテンツのそれぞれの表示中にカメラを使用してk個の顔画像を再取得する。
【０１４１】
ステップS607．電子デバイスは、再取得されたk個の顔画像に従って、t個の表情パラメータ値を再判定する。
【０１４２】
ステップS603およびステップS607の表情パラメータ値が同じであってもよい、例えば、両方とも表情コード値である、両方とも瞳孔相対値である、もしくは両方とも表情コード値および瞳孔相対値を含む、またはステップS603およびステップS607の表情パラメータ値が異なっていてもよい、例えば、ステップS603における表情パラメータ値は表情コード値であり、ステップS603における表情パラメータ値は瞳孔相対値である、ことに留意されたい。このことは、本発明において限定されるものではない。
【０１４３】
ステップS608．電子デバイスは、再判定されたt個の表情パラメータ値と第2の予め設定された参照系列との一致度が第2の予め設定された閾値以上であるか否かを判定し、再判定されたt個の表情パラメータ値と第2の予め設定された参照系列との一致度が第2の予め設定された閾値以上である場合、ステップS609を行い、そうでなければ、ステップS611を行う。
【０１４４】
別の任意の実施形態では、再判定されたt個の表情パラメータ値と第2の参照系列との一致度が第2の予め設定された閾値未満である場合、電子デバイスは、ステップS605を行うように戻ることができる、つまり、他の複数のコンテンツを表示して、生体検証を再度行うことに留意されたい。本発明の本実施形態では、実際の条件に従って、生体検証の回数を調整してもよい。
【０１４５】
第2の予め設定された閾値と第1の予め設定された閾値は、同じでも異なっていてもよい。このことは、本発明において限定されるものではない。
【０１４６】
ステップS609．電子デバイスは、再取得されたk個の顔画像のうちの少なくとも1つに従って、顔照合が成功したか否かを判定し、顔照合が成功するとステップS610を行い、そうでなければステップS611を行う。別の任意の実施形態では、顔照合が失敗した場合には、再取得したk個の顔画像のうちの少なくとも1つに従って、顔照合が成功したか否かを再度判定し、実際の条件に従って、顔照合の回数を調整することができることに留意されたい。
【０１４７】
ステップS608とステップS609とは同時に行われてもよいし、ステップS608に続けてステップS609が行われてもよいし、ステップS609に続けてステップS608が行われてもよいことに留意されたい。2つのステップの間に厳密な実行順序はない。これは、本発明をなんら限定するものではない。
【０１４８】
ステップS610．電子デバイスは、顔照合結果が成功であると判定する。
【０１４９】
ステップS611．電子デバイスは、顔検証結果が成功であると判定する。
【０１５０】
図6に示す実施形態では、最初に行われた生体検証が失敗した場合、いくつかの客観的な理由がある場合がある。例えば、撮影された顔画像が不鮮明であるか、同じコンテンツがたびたび表示されることが多いため、取得された顔画像が実在しない場合である。従って、電子デバイスは、誤判定を防止するために、複数のコンテンツを表示画面に表示し、同じ方法で再度生体検証を行う。このように、電子デバイスによる生体検証を繰り返し行う回数は、実際の条件に応じて予め設定され調整されていてもよいことに留意されたい。このことは、本発明において限定されるものではない。
【０１５１】
図7を参照すると、図7は、本発明の一実施形態による電子デバイスの概略的な構成図である。図7に示すように、電子デバイス7は、少なくとも表示画面71と、カメラ72と、少なくとも1つのプロセッサ73と、を備えることができる。
【０１５２】
表示画面71は、1つ以上のコンテンツを表示し、コンテンツは、文字、写真、またはビデオを含む。カメラ72は、コンテンツの表示中にk個の顔画像を取得し、kは2以上の整数である。少なくとも1つのプロセッサ73は、取得したk個の顔画像に従って、t個の表情パラメータ値を判定し、表情パラメータ値は、表情コード値または瞳孔相対値のうちの少なくとも1つを含み、tは2以上の整数であり、t≦kであり、判定されたt個の表情パラメータ値と第1の予め設定された参照系列との一致度が第1の予め設定された閾値以上であり、取得されたk個の顔画像のうちの少なくとも1つに従って取得された顔照合結果が成功である場合、顔検証結果は成功であると判定するように構成される。
【０１５３】
本実装では、電子デバイス7の機能モジュールの機能は、図2〜図6に示される方法実施形態の方法に従って具体的に実装され得、図2〜図6の関連する説明に対応し得ることが理解されよう。ここでは細部を繰り返し説明しない。
【０１５４】
上述した実施形態では、各実施形態の説明には、それぞれの重点があることに留意されたい。一実施形態において詳細に記載されていない部分については、他の実施形態における関連説明を参照されたい。加えて、本明細書に記載されたすべての実施形態は実施形態の例であることと、関連する動作およびモジュールは必ずしも本発明の実施形態にとって必須のものではないことと、も当業者には理解されたい。
【０１５５】
本発明の実施形態における方法のステップの順番は調整することができ、特定のステップを実際の必要性に応じて結合または削除することもできる。
【０１５６】
本発明の実施形態のモジュールに対して、実際の必要に応じて、結合、分割、削除を行うことができる。
【０１５７】
本発明の実施形態のユニットは、CPU（Central Processing Unit、中央演算装置）またはASIC（Application Specific Integrated Circuit、特定用途向け集積回路）などの汎用集積回路によって実現されてもよい。
【０１５８】
当業者であれば、各実施形態における方法のプロセスの全部または一部を関連ハードウェアに命令するコンピュータプログラムによって実現することができることを理解するはずである。プログラムは、コンピュータ可読記憶媒体に記憶することができる。プログラムが実行されると、実施形態の方法のプロセスが行われる。上述の記憶媒体は、磁気ディスク、光ディスク、読み出し専用メモリ（Read−Only Memory、ROM）、ランダムアクセスメモリ（Random Access Memory、RAM）などを含み得る。
【０１５９】
上の開示は、本発明の単なる例示的な実施形態であり、当然のことながら、本発明の保護範囲を限定することを意図するものではない。従って、本発明の特許請求の範囲に従ってなされる均等な変形は、本発明の範囲に包含されるものとする。
【符号の説明】
【０１６０】
1  電子デバイス
2  コード
7  電子デバイス
11  入力ユニット
12  プロセッサ
13  出力ユニット
14  メモリ
15  電源
16  通信ユニット
71  表示画面
72  カメラ
73  プロセッサ
111  カメラ
112  タッチパネル
113  ヒューマン−コンピュータインタラクションインターフェース
131  画像出力ユニット
132  音声出力ユニット
1311  表示画面
【図１】
2018538608.tif 000003
【図２】
2018538608.tif 000004
【図３ａ】
2018538608.tif 000005
【図３ｂ】
2018538608.tif 000006
【図３ｃ】
2018538608.tif 000007
【図３ｄ】
2018538608.tif 000008
【図４】
2018538608.tif 000009
【図５】
2018538608.tif 000010
【図６】
2018538608.tif 000011
【図７】
2018538608.tif 000012
【手続補正書】
【提出日】平成30年6月8日(2018.6.8)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】００４４
【補正方法】変更
【補正の内容】
【００４４】
RF回路は、情報を送受信する、または呼処理において信号を送受信するように構成される。例えば、RF回路は、基地局の下りリンク情報を受信した後、処理のために下りリンク情報をプロセッサに送信し、追加的に、上りリンクデータを基地局に送信する。一般に、RF回路は、限定するものではないが、アンテナシステム、無線周波数送受信機、1つ以上の増幅器、チューナ、1つ以上の発振器、デジタルシグナルプロセッサ、コーデック（Codec）チップセット、加入者識別モジュール（SIM）カード、メモリなどを含む、機能を実装するための周知の回路を含む。加えて、RF回路は、無線通信によってネットワークおよび別のデバイスとさらに通信することができる。限定するものではないが、GSM(登録商標)（Global System for Mobile communications、汎欧州デジタル移動電話方式）、GPRS（General Packet Radio Service、汎用パケット無線サービス）、CDMA（Code Division Multiple Access、符号分割多元接続）、WCDMA（Wideband Code Division Multiple Access、広帯域符号分割多元接続）、高速アップリンクパケットアクセス（High Speed Uplink Packet Access、HSUPA）、LTE（Long Term Evolution、ロングタームエボリューション）、電子メール、SMS（Short Message Service、ショートメッセージングサービス）などを含む、任意の通信規格またはプロトコルを無線通信のために使用できる。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０１０５
【補正方法】変更
【補正の内容】
【０１０５】
ステップS403およびステップS407の表情パラメータ値が同じであってもよい、例えば、両方とも表情コード値である、両方とも瞳孔相対値である、もしくは両方とも表情コード値および瞳孔相対値を含む、またはステップS403およびステップS407の表情パラメータ値が異なっていてもよい、例えば、ステップS403における表情パラメータ値は表情コード値であり、ステップS407における表情パラメータ値は瞳孔相対値である、ことに留意されたい。このことは、本発明において限定されるものではない。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０１４２
【補正方法】変更
【補正の内容】
【０１４２】
ステップS603およびステップS607の表情パラメータ値が同じであってもよい、例えば、両方とも表情コード値である、両方とも瞳孔相対値である、もしくは両方とも表情コード値および瞳孔相対値を含む、またはステップS603およびステップS607の表情パラメータ値が異なっていてもよい、例えば、ステップS603における表情パラメータ値は表情コード値であり、ステップS607における表情パラメータ値は瞳孔相対値である、ことに留意されたい。このことは、本発明において限定されるものではない。
【国際調査報告】
2018538608.tif 000013
2018538608.tif 000014
2018538608.tif 000015
2018538608.tif 000016
2018538608.tif 000017