(57)【要約】【課題】対象人物の認証時に行われ得る画像を用いたなりすましを高精度に検出し、なりすましによる悪意ある第三者の不正行為を効果的に抑止する。【解決手段】顔認証システムでは、フラットパネル検出部７０は、２台の撮像装置のそれぞれにより同一の顔画像が撮像された撮像画像ＧＺ１および撮像画像ＧＺ２を入力する。顔検出部７１，７２は、それぞれ撮像画像ＧＺ１および撮像画像ＧＺ２の少なくとも一方の顔画像ｆｇ１，ｆｇ２を検出する。判定部８０は、２つの顔画像ｆｇ１，ｆｇ２に対応する特徴点と、顔画像ｆｇ１，ｆｇ２とに基づいて、顔画像ｆｇ１，ｆｇ２が平面であるか否かを判定する。有効判定部２５は、顔画像ｆｇ１，ｆｇ２が平面であるか否かの判定結果に基づいて、顔認証結果の有効性を判定する。【選択図】図４
2019197426.tif 000002
【特許請求の範囲】
【請求項１】
複数のカメラのそれぞれにより同一の人物が撮像された第１撮像画像および第２撮像画像を入力する画像入力部と、
前記第１撮像画像および第２撮像画像の少なくとも一方の顔領域を検出する顔検出部と、
前記顔領域に対応する顔情報と前記第１撮像画像および第２撮像画像とに基づいて、前記顔領域の顔画像が平面であるか否かを判定する平面判定部と、
前記顔領域の顔画像が平面であるか否かの判定結果に基づいて、前記人物の顔情報の認証結果の有効性を判定する有効性判定部と、を備える、
顔認証装置。
【請求項２】
検出された前記顔領域に対応する顔情報と既登録の顔照合用データとを照合する照合部、をさらに備え、
前記有効性判定部は、
前記顔情報の照合結果と前記顔領域の顔画像が平面であるか否かの判定結果とに基づいて、前記人物の顔情報の認証結果の有効性を判定する、
請求項１に記載の顔認証装置。
【請求項３】
検出された前記顔領域に対応する顔情報と既登録の顔照合用データとを照合する照合部、をさらに備え、
前記照合部は、
前記顔領域の顔画像が平面でないと判定された場合に、前記顔情報の照合を行い、
前記有効性判定部は、さらに、
前記顔情報の照合結果に基づいて、前記人物の顔情報の認証結果の有効性を判定する、
請求項１に記載の顔認証装置。
【請求項４】
前記人物のＩＤ情報を取得するＩＤ取得部、をさらに備え、
前記有効性判定部は、
前記顔領域の顔画像が平面であるか否かの判定結果と前記ＩＤ情報とに基づいて、前記認証結果の有効性を判定する、
請求項１に記載の顔認証装置。
【請求項５】
前記平面判定部は、
前記第１撮像画像および前記第２撮像画像のうち一方と、他方の撮像画像の撮像時の撮像方向を前記一方の撮像画像の撮像時の撮像方向に射影変換した射影変換画像との相関に応じて、前記一方の撮像画像内の顔領域の顔画像が平面であるか否かを判定する、
請求項１または２に記載の顔認証装置。
【請求項６】
前記有効性判定部は、
前記顔領域の顔画像が平面であることが所定回判定された場合に、前記人物が本人かどうかの照合結果の有効性を否認する、
請求項１に記載の顔認証装置。
【請求項７】
顔認証装置における顔認証方法であって、
複数のカメラのそれぞれにより同一の人物が撮像された第１撮像画像および第２撮像画像を入力するステップと、
前記第１撮像画像および第２撮像画像の少なくとも一方の顔領域を検出するステップと、
前記顔領域に対応する顔情報と前記第１撮像画像および第２撮像画像とに基づいて、前記顔領域の顔画像が平面であるか否かを判定するステップと、
前記顔領域の顔画像が平面であるか否かの判定結果に基づいて、前記人物の顔情報の認証結果の有効性を判定するステップと、を有する、
顔認証方法。
【請求項８】
複数のカメラと顔認証装置とが互いに通信可能に接続された顔認証システムであって、
前記複数のカメラは、
それぞれ同一の人物を撮像した第１撮像画像および第２撮像画像を前記顔認証装置に出力し、
前記顔認証装置は、
前記第１撮像画像および第２撮像画像を入力し、
前記第１撮像画像および第２撮像画像の少なくとも一方の顔領域を検出し、
前記顔領域に対応する顔情報と前記第１撮像画像および第２撮像画像とに基づいて、前記顔領域の顔画像が平面であるか否かを判定し、
前記顔領域の顔画像が平面であるか否かの判定結果に基づいて、前記人物の顔情報の認証結果の有効性を判定する、
顔認証システム。
【請求項９】
前記複数のカメラは、
鉛直方向の異なる高さの位置に配置されるとともに、前記複数のカメラのそれぞれの光軸が互いに平行である、
請求項８に記載の顔認証システム。
【請求項１０】
前記複数のカメラは、
鉛直方向の異なる高さの位置に配置されるとともに、前記複数のカメラのそれぞれの光軸が互いに非平行である、
請求項８に記載の顔認証システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、カメラにより撮像された撮像画像中の顔部分の画像を用いて対象人物を認証する顔認証装置、顔認証方法および顔認証システムに関する。
【背景技術】
【０００２】
特許文献１には、所定の時間の顔画像列を入力し、顔画像列から抽出された所定の色情報の時間的な変化に基づいて、顔画像列に含まれる顔がなりすましであるか否かを判定する情報処理装置が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】国際公開第２０１５／１２２１８３号
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１の構成では、非正規の人物が例えばタブレット端末等の携帯型の表示端末を用いて、正規の登録者の顔が写っている画像を表示してなりすましを行う場合、画像を用いた顔認証を行っても不正を検知できず、認証結果として承認と判定する可能性があった。
【０００５】
本開示は、上述した従来の状況に鑑みて案出され、対象人物の認証時に行われ得る画像を用いたなりすましを高精度に検出し、なりすましによる悪意ある第三者の不正行為を効果的に抑止する顔認証装置、顔認証方法および顔認証システムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
本開示は、複数のカメラのそれぞれにより同一の人物が撮像された第１撮像画像および第２撮像画像を入力する画像入力部と、前記第１撮像画像および第２撮像画像の少なくとも一方の顔領域を検出する顔検出部と、前記顔領域に対応する顔情報と前記第１撮像画像および第２撮像画像とに基づいて、前記顔領域の顔画像が平面であるか否かを判定する平面判定部と、前記顔領域の顔画像が平面であるか否かの判定結果に基づいて、前記人物の顔情報の認証結果の有効性を判定する有効性判定部と、を備える、顔認証装置を提供する。
【０００７】
また、本開示は、顔認証装置における顔認証方法であって、複数のカメラのそれぞれにより同一の人物が撮像された第１撮像画像および第２撮像画像を入力するステップと、前記第１撮像画像および第２撮像画像の少なくとも一方の顔領域を検出するステップと、前記顔領域に対応する顔情報と前記第１撮像画像および第２撮像画像とに基づいて、前記顔領域の顔画像が平面であるか否かを判定するステップと、前記顔領域の顔画像が平面であるか否かの判定結果に基づいて、前記人物の顔情報の認証結果の有効性を判定するステップと、を有する、顔認証方法を提供する。
【０００８】
また、本開示は、複数のカメラと顔認証装置とが互いに通信可能に接続された顔認証システムであって、前記複数のカメラは、それぞれ同一の人物を撮像した第１撮像画像および第２撮像画像を前記顔認証装置に出力し、前記顔認証装置は、前記第１撮像画像および第２撮像画像を入力し、前記第１撮像画像および第２撮像画像の少なくとも一方の顔領域を検出し、前記顔領域に対応する顔情報と前記第１撮像画像および第２撮像画像とに基づいて、前記顔領域の顔画像が平面であるか否かを判定し、前記顔領域の顔画像が平面であるか否かの判定結果に基づいて、前記人物の顔情報の認証結果の有効性を判定する、顔認証システムを提供する。
【発明の効果】
【０００９】
本開示によれば、対象人物の認証時に行われ得る画像を用いたなりすましを高精度に検出し、なりすましによる悪意ある第三者の不正行為を抑止することができる。
【図面の簡単な説明】
【００１０】
【図１】実施の形態１に係る顔認証システムのシステム構成例を示す図
【図２】４台の撮像装置の配置例を示す図
【図３】実施の形態１に係る顔認証装置に内蔵されるプロセッサおよびメモリの協働により実現される機能的な構成例を示すブロック図
【図４】フラットパネル検出部の機能的構成および動作概要の一例を示すブロック図
【図５】フラットパネルに映し出された顔画像を撮像して平面判定を行う動作概要例を示す説明図
【図６】実際の人物の顔を撮像して平面判定を行う動作概要例を示す説明図
【図７】実施の形態１に係る顔認証の動作手順の一例を時系列に説明するフローチャート
【図８】ステップＳ６に係る顔画像平面判定の動作手順の一例を時系列に説明するフローチャート
【図９】実施の形態１に係る他の顔認証の動作手順の一例を時系列に説明するフローチャート
【図１０】実施の形態１に係る他の３台の撮像装置の配置例を示す図
【図１１】実施の形態２に係る顔認証装置に内蔵されるプロセッサおよびメモリの協働により実現される機能的な構成例を示すブロック図
【図１２】枠検出部による枠検出処理の動作概要例を示す説明図
【図１３】配置判定部による配置判定処理の動作概要例を示す説明図
【図１４】実施の形態２に係る顔認証の動作手順の一例を時系列に説明するフローチャート
【発明を実施するための形態】
【００１１】
以下、適宜図面を参照しながら、本開示に係る顔認証装置、顔認証方法および顔認証システムを具体的に開示した実施の形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。なお、添付図面および以下の説明は、当業者が本開示を十分に理解するために提供されるのであって、これらにより特許請求の範囲に記載の主題を限定することは意図されていない。
【００１２】
（実施の形態１）
図１は、実施の形態１に係る顔認証システム１００のシステム構成例を示す図である。顔認証システム１００は、認証対象の人物を撮像装置で撮像した顔画像のデータと、予め登録された正規の人物の顔画像のデータとを照合し、認証対象の人物の顔認証を行う。顔認証システム１００は、認証対象の人物の顔認証結果を制御対象機器４０に出力する。
【００１３】
制御対象機器４０は、例えば、カーシェアリング等のサービス事業者が使用する利用管理装置、セキュリティエリアの入退場管理装置であるが、これらに限定されない。
【００１４】
制御対象機器４０がカーシェアリングの利用管理装置である場合、利用管理装置は、顔認証結果として利用者が予め登録されている正規利用者である場合、カーシェア対象の車両の利用を許可する。一方、利用者が予め登録されている正規利用者でない場合、利用管理装置は、カーシェア対象の車両の利用を拒否する。利用管理装置は、車両の利用を許可または拒否する場合、例えばその車両に搭載される電子制御ユニット（ＥＣＵ：Electronic Control Unit）に車両の利用の可否を示す認証結果を送る。電子制御ユニットは、利用管理装置から送られた認証結果を基に、自車両の始動（例えば、イグニッションのオン）を有効または無効に設定する。
【００１５】
制御対象機器４０がセキュリティエリアの入退場管理装置である場合、入退場管理装置は、顔認証結果として入退場者が許可された人物に対し、その人物のセキュリティエリアへの通行を許可する。一方、入退場管理装置は、顔認証結果として入退場者が許可された人物でない場合、その人物のセキュリティエリアへの通行を遮断したり、顔認証システム１００の管理者や運用者に対して侵入者を検知した旨の報知をしたりする。
【００１６】
顔認証システム１００は、顔認証装置２０、複数（例えば、２台）の撮像装置１１Ａ，１１Ｂ、表示装置１２、ＩＤ読取装置１３を含む構成である。２台の撮像装置１１Ａ，１１Ｂを区別する必要が無い場合、単に撮像装置１１と称する。２台の撮像装置１１Ａ，１１Ｂは、例えば通路を歩く人物の顔を、異なる向きから同時に撮像可能な位置に配置される。撮像装置１１は、撮像レンズ、撮像デバイス、画像信号処理回路、通信インタフェース等を含む。撮像装置１１は、認証対象人物３０を含む撮像領域を被写体として撮像し、撮像画像を顔認証装置２０に出力する。なお、撮像装置の数は、２台に限らず、任意の台数であってもよい。撮像装置１１は、例えば所定のエリアを監視するための監視カメラであってもよい。
【００１７】
図２は、４台の撮像装置１１ｅ，１１ｆ，１１ｇ，１１ｈの配置例を示す図である。４台の撮像装置１１ｅ，１１ｆ，１１ｇ，１１ｈは、認証対象人物３０が通過する通路の面に対し、垂直な方向（つまり、水平面に対して鉛直方向）に配置される。４台の撮像装置１１ｅ，１１ｆ，１１ｇ，１１ｈは、通路幅ｗｄにおいて、画角が重なり合うように、認証対象人物３０の顔の存在範囲ＳＡを撮像する。４台の撮像装置１１ｅ，１１ｆ，１１ｇ，１１ｈの光軸は、例えば全て平行である。
【００１８】
例えば、背の低い子供等の人物の顔は、低い位置に設置された２台の撮像装置１１ｅ，１１ｆで撮像される。この場合、２台の撮像装置１１ｅ，１１ｆが、図１の撮像装置１１Ａ，１１Ｂとして用いられる。また例えば、背の高い大人等の人物の顔は、高い位置に設置された２台の撮像装置１１ｇ，１１ｈで撮像される。この場合、２台の撮像装置１１ｇ，１１ｈが、図１の撮像装置１１Ａ，１１Ｂとして用いられる。撮像装置１１ｅ，１１ｆ，１１ｇ，１１ｈを特に区別しない場合、撮像装置１１と称される。また、３台以上の撮像装置で、対象人物の顔画像が３枚以上撮像された場合、これらの顔画像の中から２枚分の顔画像が顔認証に用いられる。なお、３枚以上の顔画像は、時間的に連続の３フレームでもよいし、時間的に非連続の３フレームでもよい。
【００１９】
ＩＤ読取装置１３は、例えばカードリーダ等の情報読取装置で構成される。ＩＤ読取装置１３は、認証対象人物３０が所持する個人識別用のＩＤカード３５の識別情報（例えば、ＩＤ情報）を読み取り、その読み取られた識別情報を顔認証装置２０に出力する。ＩＤカード３５として、会員証、身分証明カード、運転免許証、マイナンバーカード等が挙げられる。
【００２０】
顔認証装置２０は、ＰＣ（personal computer）等で構成され、プロセッサ、メモリ、通信インタフェース等を含む。顔認証装置２０は、撮像装置１１から取得した撮像画像の画像情報とＩＤ読取装置１３から取得したＩＤ情報とを用いて顔認証を行い、その顔認証結果を制御対象機器４０に出力する。顔認証処理の詳細については後述する。
【００２１】
表示装置１２は、液晶ディスプレイ等の表示デバイスを含む。表示装置１２は、顔認証装置２０による顔認証の実行時、各種のデータもしくは情報を表示する。各種のデータもしくは情報は、操作案内画面、撮像画像、顔検出結果、枠検出結果、顔照合結果、顔認証を含む認証結果等を含む。表示装置１２は、顔認証システム１００の管理者や運用者が視認可能な監視室等に配置される。なお、表示装置１２は、認証対象人物３０に対し、案内表示が可能なように、撮像装置１１の近傍に配置されてもよい。
【００２２】
図３は、実施の形態１に係る顔認証装置２０に内蔵されるプロセッサおよびメモリの協働により実現される機能的な構成例を示すブロック図である。顔認証装置２０は、顔認識部２１、顔照合部２４、有効判定部２５、フラットパネル検出部７０を含む。顔認識部２１、顔照合部２４、有効判定部２５、フラットパネル検出部７０は、例えばＰＣである顔認証装置２０に内蔵されるプロセッサおよびメモリの協働により、プロセッサがメモリに記憶された所定のプログラムを実行することで実現される。
【００２３】
顔認識部２１は、２台の撮像装置から送られた撮像画像ＧＺ１，ＧＺ２（つまり、顔部分の画像が含まれる撮像画像ＧＺ１，ＧＺ２）のデータをそれぞれ入力し、公知の顔認識技術を用いた顔認識処理によって撮像画像に含まれる認証対象人物３０の顔を検出する。顔認識部２１は、顔認識処理により、顔の特徴情報と撮像画像中における位置情報（言い換えると、顔配置情報）とを取得する。顔特徴情報は、顔の特徴点を含む他、肌色、血流、髪色等のバイタル情報を含んでよい。
【００２４】
顔照合部２４は、顔認識部２１で検出された顔の特徴情報と正規登録者の顔情報の照合データとを用いて、顔認識部２１で検出された撮像画像中の顔と正規登録者の顔とが一致するか否かを判定する。照合データは、例えば顔認証装置２０に内蔵された記録媒体に記録され、正規登録者の顔画像の画像データや、顔特徴情報の特徴データを含む。顔認証システム１００の管理者や運用者は、照合データとして、例えば認証対象人物３０が所持するＩＤカード３５に記録されているＩＤ情報に含まれる照合データを顔認証装置２０の顔照合部２４に入力する。入力された照合データは、顔照合部２４が読み出し可能な記録媒体に蓄積される。
【００２５】
有効判定部２５は、顔照合部２４による顔照合の結果、撮像画像に含まれる認証対象人物３０の顔が有効か否か（つまり、顔認証の有効性として承認か否認か）を判定し、顔認証結果を出力する。
【００２６】
フラットパネル検出部７０は、認証対象人物３０の撮像画像において検出された顔画像が平面であるか否かを判定する（図４参照）。
【００２７】
図４は、フラットパネル検出部７０の機能的構成および動作概要の一例を示すブロック図である。フラットパネル検出部７０は、顔検出部７１，７２、顔対応判定部７３、特徴点検出部７４，７５、特徴点マッチング部７６、射影変換推定部７７、射影変換部７８、相関演算部７９、判定部８０を有する。
【００２８】
顔検出部７１，７２は、認証対象人物３０が撮像された対応する撮像画像ＧＺ１，ＧＺ２に含まれる対象人物の顔をそれぞれ検出し、顔配置情報を取得する。顔配置情報は、特徴点検出範囲ｒｃ１，ｒｃ２（図５参照）であり、例えば目、鼻、口等を含む矩形の範囲を表す情報である。顔検出部７１は、撮像装置１１Ａで撮像された撮像画像ＧＺ１に対して顔検出を行う。顔検出部７２は、撮像装置１１Ｂで撮像された撮像画像ＧＺ２に対して顔検出を行う。
【００２９】
特徴点検出部７４，７５は、例えば公知の顔の特徴点検出技術を用いた特徴点検出処理により、顔配置情報により特定される顔画像に含まれる顔の特徴点を検出する。顔の特徴点として、例えば、目、鼻、口の位置、口元の位置、奥行き感のある鼻孔の位置、目尻の位置、額にかかる前髪の曲線、目尻間の距離、顔の輪郭、突出している鼻先の位置等の顔の部位を特徴付ける箇所が挙げられる。特徴点検出部７４は、顔検出部７１で得られた顔画像ｆｇ１に含まれる顔の特徴点を検出する。特徴点検出部７５は、顔検出部７２で得られた顔画像ｆｇ２に含まれる顔の特徴点を検出する。ここでは、一例として、両側の口元の位置、鼻孔の位置、額にかかる前髪の曲線を特徴点とした場合を示す。また、特徴点検出部７４，７５は、例えば顔のコーナ部分（言い換えると、輪郭）を検出して顔の特徴点を検出したり、ＳＩＦＴ（Scale-Invariant Feature Transform）もしくはＳＵＲＦ（Speeded-Up Robust Features）等の公知の特徴点抽出用のアルゴリズムを用いて顔の特徴点を検出してもよい。
【００３０】
特徴点マッチング部７６は、特徴点検出部７４，７５からの出力を用いて、特徴点マッチング処理を行う。特徴点マッチング処理では、顔画像ｆｇ１で検出された複数の特徴点ｐ１ａ，ｐ２ａ，ｐ３ａと、顔画像ｆｇ２で検出された複数の特徴点ｐ１ｂ，ｐ２ｂ，ｐ３ｂとに対し、同じ特徴点同士が対応付けられる。特徴点間の対応付けは、顔画像ｆｇ１，ｆｇ２において、特徴点ｐ１ａと特徴点ｐ１ｂの間、特徴点ｐ２ａと特徴点ｐ２ｂの間、特徴点ｐ３ａと特徴点ｐ３ｂの間をそれぞれ線分ｃ１，ｃ２，ｃ３で結ぶことで、表現される（図５参照）。
【００３１】
射影変換推定部７７は、顔画像ｆｇ１，ｆｇ２に含まれる、対応する２つの特徴点の座標を基に、射影変換行列を算出する。射影変換行列は、ある平面を別の平面に射影するために、座標を変換するための行列である。ここでは、射影変換行列は、顔画像ｆｇ２の面を顔画像ｆｇ１の面に射影するための座標変換を行う。なお、射影変換推定部７７は、顔画像ｆｇ１の面を顔画像ｆｇ２の面に射影する射影変換行列を算出してもよい。射影変換行列は、例えば３行３列の行列で表される。この射影変換行列では、少なくとも４つの一致する特徴点同士の座標を対応付けることで、３行３列の行列で表される行列の各要素が算出される。また、射影変換推定部７７は、４つ以上の対応点（つまり、互いに一致する特徴点同士の位置を示す座標）を用いて、最小二乗法等を用いて射影変換行列を算出してもよい。これにより、射影変換推定部７７は、より正確な射影変換行列を算出できる。
【００３２】
射影変換部７８は、射影変換推定部７７によって算出された射影変換行列を用いて、顔画像ｆｇ２に対し射影変換を行い、変換画像ｆｇ２ａを取得する。
【００３３】
相関演算部７９は、顔画像ｆｇ１と変換画像ｆｇ２ａとを基に、２つの画像の類似度を示す相関値を演算する。相関値の演算では、画像の中から指定した画像（例えば、テンプレート）と似ている位置を探すテンプレートマッチングが行われる。ここでは、正規化相互相関（ＮＮＣ：Normalized Cross-Correlation）が相関値の演算に用いられる。なお、相関値の演算には、輝度値の差の２乗の合計（ＳＳＤ：Sum of Squared Difference）や、輝度値の差の絶対値の合計（ＳＡＤ：Sum of Absolute Difference）等が用いられてもよい。
【００３４】
判定部８０は、相関演算部７９で演算された相関値を基に、顔画像ｆｇ１がフラットパネルに映し出されたようにフラット（つまり、２次元的な平面）であるか否かを判定し、その判定結果を出力する。相関値が高い場合、例えば相関値が予め設定された閾値より高い場合、顔画像ｆｇ１と顔画像ｆｇ２は、どちらも平面（例えば、実際の人物の顔のように立体的な構造を有さない２次元的な平面）であると判定される。一方、相関値が低い場合、例えば相関値が予め設定された閾値以下である場合、顔画像ｆｇ１と顔画像ｆｇ２の少なくとも一方は、平面でなく、立体物（例えば、実際の人物の顔のように奥行き感のある３次元的な立体物）であると判定される。
【００３５】
図５は、フラットパネル１５０に映し出された顔画像を撮像して平面判定を行う動作概要例を示す説明図である。フラットパネル１５０は、例えば、タブレット端末、デジタルフォトフレーム、スマートフォン、ノートＰＣ等の表示ユニット（いわゆる、ディスプレイ等の表示デバイス）である。撮像装置１１Ａ，１１Ｂは、フラットパネル１５０に映し出された顔画像をそれぞれ撮像し、撮像画像ＧＺ１，ＧＺ２を得る。このとき、撮像装置１１Ｂは、フラットパネル１５０に対し、正面方向から撮像する。撮像装置１１Ａは、フラットパネル１５０に対し、正面方向から僅かに傾けて撮像する。
【００３６】
顔検出部７１，７２は、それぞれ撮像画像ＧＺ１，ＧＺ２に対し顔検出を行い、特徴点検出範囲ｒｃ１，ｒｃ２を得る。特徴点検出部７４，７５は、それぞれ特徴点検出範囲ｒｃ１，ｒｃ２で囲まれる、顔画像ｆｇ１，ｆｇ２に含まれる顔の特徴点ｐ１ａ，ｐ２ａ，ｐ３ａおよびｐ１ｂ，ｐ２ｂ，ｐ３ｂを検出する。
【００３７】
特徴点マッチング部７６は、顔画像ｆｇ１で検出された複数の特徴点ｐ１ａ，ｐ２ａ，ｐ３ａと、顔画像ｆｇ２で検出された複数の特徴点ｐ１ｂ，ｐ２ｂ，ｐ３ｂとを対応付け、それぞれを線分ｃ１，ｃ２，ｃ３で結ぶ。
【００３８】
射影変換部７８は、顔画像ｆｇ２に対し、射影変換を行い、変換画像ｆｇ２ａを得る。相関演算部７９は、顔画像ｆｇ１と変換画像ｆｇ２ａとの相関値を演算する。ここでは、相関演算部７９によって演算された相関値は、０．９９９と極めて値１に近く、高い値である。判定部８０は、顔画像ｆｇ１と顔画像ｆｇ２が２次元画像であり、フラットパネル１５０に映し出されたフラット（つまり、平面）の顔画像であると判定する。また、判定部８０は、判定結果の他、顔画像ｆｇ１と変換画像ｆｇ２ａとを重畳した重畳画像ｍｇ１を出力し、表示装置１２に重畳画像ｍｇ１を表示する。重畳画像ｍｇ１は、顔画像ｆｇ１と変換画像ｆｇ２ａとがほぼ一致し、ダブリが殆ど無い、１つの顔画像のように表示される。
【００３９】
このように、フラットパネルに映し出された顔画像は高い相関値を示す。したがって、正規の登録者の顔画像が映し出されたフラットパネルを持って、正規登録者になりすまし、不正に通過しようとする人物の顔認証は、否認される。
【００４０】
図６は、実際の人物の顔を撮像して平面判定を行う動作概要例を示す説明図である。撮像装置１１Ａ，１１Ｂは、実際の人物ｈｍの顔をそれぞれ撮像し、撮像画像ＧＺ３，ＧＺ４を得る。このとき、撮像装置１１Ａは、実際の人物ｈｍの顔に対し、正面方向から撮像する。撮像装置１１Ｂは、実際の人物ｈｍの顔に対し、正面方向から僅かに傾けて撮像する。
【００４１】
顔検出部７１，７２は、それぞれ撮像画像ＧＺ３，ＧＺ４に対し顔検出を行い、特徴点検出範囲ｒｃ３，ｒｃ４を得る。特徴点検出部７４，７５は、それぞれ特徴点検出範囲ｒｃ３，ｒｃ４で囲まれる、顔画像ｆｇ３，ｆｇ４に含まれる顔の特徴点ｐ４ａ，ｐ５ａ，ｐ６ａ，ｐ７ａおよびｐ４ｂ，ｐ５ｂ，ｐ６ｂ，ｐ７ｂを検出する。
【００４２】
特徴点マッチング部７６は、顔画像ｆｇ３で検出された複数の特徴点ｐ４ａ，ｐ５ａ，ｐ６ａ，ｐ７ａと、顔画像ｆｇ４で検出された複数の特徴点ｐ４ｂ，ｐ５ｂ，ｐ６ｂ，ｐ７ｂとを対応付け、それぞれを線分ｃ４，ｃ５，ｃ６，ｃ７で結ぶ。
【００４３】
射影変換部７８は、顔画像ｆｇ４に対し、射影変換を行い、変換画像ｆｇ４ａを得る。相関演算部７９は、顔画像ｆｇ３と変換画像ｆｇ４ａとの相関値を演算する。ここでは、相関演算部７９によって演算された相関値は、０．８８３２となり、図５の場合と比べて低い。判定部８０は、顔画像ｆｇ３と顔画像ｆｇ４は、奥行き感のある立体物であり、実際の人物ｈｍの顔画像であると判定する。また、判定部８０は、判定結果の他、顔画像ｆｇ３と変換画像ｆｇ４ａとを重畳した重畳画像ｍｇ２を出力し、表示装置１２に重畳画像ｍｇ２を表示する。重畳画像ｍｇ２は、顔画像ｆｇ３と変換画像ｆｇ４ａが少しずれており、ダブリが少なからず存在する。ここでは、変換画像ｆｇ４ａが赤紫色（マゼンタ）で表示され、顔画像ｆｇ３が緑色で表示される。赤紫色と緑色は補色の関係にあるので、重畳画像ｍｇ２では、これらが一致した画像部分は、モノトーンで表示され、不一致の画像部分は、赤紫色もしくは緑色で表示される。したがって、重畳画像ｍｇ２は、緑色の画像部分ｇｎと赤紫色の画像部分ｒｄとが混在し、ダブっている２つの顔画像のように表示される。
【００４４】
このように、実際の人物の顔画像は、顔の表面に凹凸があるので、低い相関値を示す。したがって、実際の人物の顔が２台の撮像装置で撮像された場合、顔認証は承認される。
【００４５】
次に、実施の形態１に係る顔認証システム１００の動作について、図７および図８を参照して説明する。
【００４６】
図７は、実施の形態１に係る顔認証の動作手順の一例を時系列に説明するフローチャートである。
【００４７】
図７において、顔認証装置２０の顔認識部２１は、撮像装置１１Ａ，１１Ｂで撮像された撮像画像ＧＺ１，ＧＺ２を取り込む（Ｓ１）。顔認識部２１は、撮像画像ＧＺ１，ＧＺ２中の対象人物の顔検出を行う（Ｓ２）。顔認識部２１は、対象人物の顔が検出されたか否かを判別する（Ｓ３）。顔が検出されない場合、顔認証装置２０の処理はステップＳ１に戻る。
【００４８】
一方、顔が検出された場合、顔照合部２４は、検出された顔の照合を行い、本人認証を行う（Ｓ４）。顔照合部２４は、対象人物の顔特徴情報が登録者の顔の照合データと一致するか否かを判定する（Ｓ５）。
【００４９】
対象人物の顔特徴情報が登録者の顔の照合データと一致しない場合、有効判定部２５は、無効の判定を行い、顔認証の認証結果として否認の旨のメッセージ（つまり、ＮＧの旨のメッセージ）を出力する（Ｓ９）。この後、顔認証装置２０は図７に示す処理を終了する。
【００５０】
一方、対象人物の顔特徴情報が登録者の顔の照合データと一致した場合、フラットパネル検出部７０は、顔画像の平面判定を行う（Ｓ６）。判定部８０は、顔画像が平面であるか否かを判別する（Ｓ７）。平面である場合、有効判定部２５は、ステップＳ９において、無効の判定を行い、顔認証の認証結果として否認を出力する。また、ステップＳ７で平面でない場合、有効判定部２５は、有効の判定を行い、顔認証の認証結果として承認の旨のメッセージ（つまり、ＯＫの旨のメッセージ）を出力する（Ｓ８）。この後、顔認証装置２０は本処理を終了する。
【００５１】
図８は、ステップＳ６に係る顔画像平面判定の動作手順の一例を時系列に説明するフローチャートである。
【００５２】
図８において、フラットパネル検出部７０の顔検出部７１，７２は、撮像画像に対し、それぞれ撮像画像中の顔画像を検出する。特徴点検出部７４，７５は、それぞれ顔画像中の特徴点を検出する（Ｓ１１）。
【００５３】
特徴点マッチング部７６は、２つの顔画像間で特徴点マッチングを行う（Ｓ１２）。射影変換推定部７７は、特徴点マッチングの結果を基に、射影変換行列を算出する（Ｓ１３）射影変換部７８は、２つの顔画像の一方に対し、射影変換を行い、変換画像を取得する（Ｓ１４）。
【００５４】
相関演算部７９は、射影変換されない顔画像と変換画像との相関値を算出する（Ｓ１５）。判定部８０は、この相関値によって、顔画像が平面であるか否かを判定する（Ｓ１６）。この後、顔認証装置２０は、図８に示す処理を終了する。これにより、顔認証装置２０の処理は、図７のステップＳ７に進む。
【００５５】
このように、実施の形態１における顔認証システム１００では、顔認証装置２０のフラットパネル検出部７０（画像入力部の一例）は、２台の撮像装置１１Ａ，１１Ｂ（複数のカメラの一例）のそれぞれにより同一の顔画像（人物）が撮像された撮像画像ＧＺ１（第１撮像画像の一例）および撮像画像ＧＺ２（第２撮像画像の一例）を入力する。顔検出部７１，７２は、それぞれ撮像画像ＧＺ１および撮像画像ＧＺ２の少なくとも一方の顔画像ｆｇ１，ｆｇ２（顔領域）を検出する。判定部８０（平面判定部の一例）は、２つの顔画像ｆｇ１，ｆｇ２に対応する特徴点（顔情報）と、顔画像ｆｇ１，ｆｇ２とに基づいて、顔画像ｆｇ１，ｆｇ２が平面であるか否かを判定する。有効判定部２５（有効性判定部の一例）は、顔画像ｆｇ１，ｆｇ２が平面であるか否かの判定結果に基づいて、顔認証結果の有効性を判定する。
【００５６】
これにより、顔認証装置２０または顔認証システム１００は、対象人物の認証時に行われ得る画像を用いたなりすましを高精度に検出し、なりすましによる悪意ある第三者の不正行為を効果的に抑止することができる。例えば、タブレット端末等の表示ユニットに、正規の登録者の顔画像（静止画像、動画像）を表示し、なりすましを行おうとしても、顔画像が平面であると判定される。つまり、この顔画像は、立物体である人間の顔の顔画像とは異なると判定される。よって、顔認証が否認される。
【００５７】
また、顔認証装置２０の顔照合部２４は、検出された顔画像の顔特徴情報（前記顔領域に対応する顔情報の一例）と既登録の照合データ（顔照合用データの一例）とを照合する。有効判定部２５は、この顔照合結果と顔画像が平面であるか否かの判定結果とに基づいて、対象人物の顔認証結果の有効性を判定する。このように、顔認証装置２０または顔認証システム１００は、顔照合が一致した顔画像に対し、平面判定を行うことで、平面判定の回数を減らすことができる。
【００５８】
また、顔認証装置２０は、人物の識別情報（ＩＤ情報の一例）を取得するＩＤ読取装置１３（ＩＤ取得部の一例）を備える。有効判定部２５は、顔画像が平面であるか否かの判定結果とＩＤ情報とに基づいて、認証結果の有効性を判定する。このように、顔認証装置２０または顔認証システム１００は、ＩＤ情報を用いることで、顔認証の精度を高めることができる。
【００５９】
また、フラットパネル検出部７０（平面判定部の一例）は、顔画像ｆｇ１および顔画像ｆｇ２のうち一方の顔画像ｆｇ１と、他方の顔画像ｆｇ２の撮像時の撮像方向を一方の撮像画像の撮像時の撮像方向に射影変換した変換画像ｆｇ２ａ（射影変換画像の一例）との相関値に応じて、顔画像が平面であるか否かを判定する。このように、顔認証装置２０または顔認証システム１００は、相関値を用いることで、客観的に平面か否かを判定でき、平面判定の結果に疑義が生じず、判定精度が高まる。
【００６０】
また、複数の撮像装置１１（カメラの一例）は、鉛直方向の異なる高さの位置に配置される。複数の撮像装置１１のそれぞれの光軸が互いに平行である。これにより、それぞれの撮像装置１１は、認証対象人物３０の背の高さによらず、認証対象人物３０の顔画像を確実に２フレーム分撮像することができる。また、複数の撮像装置１１の光軸を平行にすることで、顔画像の鉛直方向の向きが大きくずれないようにすることができる。また、同一の方向からの撮像画像であるので、これらの相関値を算出する処理を軽減でき、相関値の算出精度が高まる。
【００６１】
（実施の形態１における他の顔認証処理例）
図９は、実施の形態１に係る他の顔認証の動作手順の一例を時系列に説明するフローチャートである。図９の説明において、図７に示す顔認証処理と同一のステップ処理については、同一のステップ番号あるいは対応するステップ番号を付して説明を簡略化または省略し、異なる内容について説明する。
【００６２】
図９において、他の顔認証処理では、顔認証装置２０は、顔画像が検出された後、先に平面判定を行う。その後、対象人物の顔照合を行う。ステップＳ３で顔認識部２１が顔画像を検出した場合、フラットパネル検出部７０は、顔画像の平面判定を行う（Ｓ６）。判定部８０は、顔画像が平面であるか否かを判別する（Ｓ７）。平面である場合、判定部８０は、平面と判定された回数が所定回数以上であるか否かを判別する（Ｓ７Ａ）所定回数未満である場合、顔認証装置２０は、ステップＳ１の処理に戻る。一方、平面と判定された回数が所定回数以上である場合、有効判定部２５は、無効の判定を行い、顔認証の認証結果として否認の旨のメッセージ（つまり、ＮＧの旨のメッセージ）を出力する（Ｓ９）。この後、顔認証装置２０は図９に示す処理を終了する。
【００６３】
一方、ステップＳ７で顔画像が平面でない場合、顔照合部２４は、検出された顔の照合を行い、本人認証を行う（Ｓ４）。顔照合部２４は、対象人物の顔の特徴情報が登録者の顔の照合データと一致するか否かを判別する（Ｓ５）。照合データと一致しない場合、有効判定部２５は、ステップＳ９において、無効の判定を行い、顔認証の認証結果として否認を出力する。また、ステップＳ５で照合データと一致する場合、有効判定部２５は、有効の判定を行い、顔認証の認証結果として承認の旨のメッセージ（つまり、ＯＫの旨のメッセージ）を出力する（Ｓ８）。この後、顔認証装置２０は図９に示す処理を終了する。
【００６４】
これにより、顔画像が平面でないと判定された場合に限って、顔照合を行うことができる。したがって、処理の負荷が大きい顔照合の回数を減らすことができる。
【００６５】
また、顔照合部２４は、顔画像が平面でないと判定された場合に、対象人物の顔特徴報が登録者の顔の照合データと一致するか否かの照合を行う。有効判定部２５は、この照合結果に基づいて、人物の顔情報の認証結果の有効性を判定する。これにより、顔認証装置２０または顔認証システム１００は、顔画像が平面であると判定された場合、顔認証の処理を省くことができ、処理の負荷を軽減できる。
【００６６】
また、有効判定部２５は、顔領域の顔画像が平面であることが所定回判定された場合に、人物が本人か否かの照合結果の有効性を否認する。これにより、顔認証装置２０または顔認証システム１００は、例えば一度だけでなく複数回に亘ってその人物の顔が平面であると判定された場合、一度の平面であるとの誤判定の可能性を排除しながら処理負荷の大きい顔照合の処理の実行を省略し、その人物の顔認証の認証結果として否認を出力できる。従って、顔認証装置２０または顔認証システム１００において、処理の負荷の軽減が可能となる。
【００６７】
（実施の形態１における他の撮像装置の配置例）
図１０は、実施の形態１に係る他の３台の撮像装置１１ｉ，１１ｊ，１１ｋの配置例を示す図である。３台の撮像装置１１ｉ，１１ｊ，１１ｋは、認証対象人物３０が通過する通路の面に対し、垂直な方向（つまり、水平面に対して鉛直方向）に配置される。３台の撮像装置１１ｉ，１１ｊ，１１ｋは、通路幅ｗｄにおいて、画角が重なり合うように、認証対象人物３０の顔の存在範囲ＳＡを撮像する。この場合、背の低い子供等の人物の顔は、低い位置に設置された撮像装置１１ｋと、高い位置に設置された撮像装置１１ｉで撮像される。また、一般的な背の高さを有する人物の顔は、３台の撮像装置１１ｉ，１１ｊ，１１ｋで撮像される。また、背の高い大人等の人物の顔は、高い位置に設置された撮像装置１１ｉと、中間位置に設置された撮像装置１１ｊで撮像される。３台の撮像装置１１ｉ，１１ｊ，１１ｋの光軸は、顔の存在範囲ＳＡに合わせて任意に設定されており、非平行である。したがって、背の高さが異なる人物が通路を通過しようとすると、少なくとも２台の撮像装置によって顔画像が撮像される。
【００６８】
このように、複数の撮像装置は、鉛直方向の異なる高さの位置に配置されるとともに、複数の撮像装置のそれぞれの光軸が互いに非平行である。これにより、背の高さによらず、対象人物の顔画像を確実に２枚以上の撮像装置で撮像できる。また、複数のカメラの光軸を非平行にすることで、背の高さが異なる対象人物の顔画像を容易に撮像できる。したがって、２枚分の顔画像を撮像するために、設置される撮像装置の台数を少なくすることができる。
【００６９】
（実施の形態２）
実施の形態１では、顔画像が平面である場合、表示ユニットを用いた、なりすましであるとして、顔認証の結果を否認と判定した。実施の形態２では、実施の形態１の構成に加え、さらに撮像画像中に枠画像が検出された場合においても、表示ユニットを用いたなりすましであると判断する場合を示す。
【００７０】
実施の形態２に係る顔認証システムにおいて、実施の形態１と同一の構成要素については同一の符号を用いることで、その説明を簡略化または省略する。
【００７１】
図１１は、実施の形態２に係る顔認証装置２０Ａに内蔵されるプロセッサおよびメモリの協働により実現される機能的な構成例を示す図である。顔認証装置２０Ａは、実施の形態１で示した顔認識部２１、顔照合部２４、有効判定部２５、フラットパネル検出部７０の他、枠検出部２２および配置判定部２３を有する。顔認識部２１、枠検出部２２、配置判定部２３、顔照合部２４、有効判定部２５、フラットパネル検出部７０は、例えばＰＣである顔認証装置２０Ａに内蔵されるプロセッサおよびメモリの協働により、プロセッサがメモリに記憶された所定のプログラムを実行することで実現される。
【００７２】
枠検出部２２は、撮像画像と背景画像とを用い、撮像画像から背景画像を除去した入力画像において、直線状の枠の検出を行う。枠検出部２２は、撮像画像中に表示ユニットの枠がある場合に枠の位置情報（言い換えると、枠配置情報）を取得する。
【００７３】
配置判定部２３は、顔認識部２１によって取得された顔配置情報と枠配置情報とを基に、表示ユニットの枠内に顔が位置しているか否かの配置判定を行う。配置判定部２３は、配置判定の結果、撮像画像中に表示ユニット（上述参照）が存在し、表示ユニットの枠内に顔画像が表示されていることを検出する。
【００７４】
有効判定部２５は、顔照合部２４による顔照合、フラットパネル検出部７０による平面判定、および配置判定部２３による枠検出の結果を基に、撮像画像に映っている対象人物の顔が有効か否か、つまり顔認証の結果の有効性として承認か否認かを判定する。有効判定部２５は、認証結果を制御対象機器４０に出力する。
【００７５】
図１２は、枠検出部２２による枠検出処理の動作概要例を示す説明図である。ここで、携帯型の表示ユニットに正規登録者の顔が写っている画像（静止画増、動画像）を再生してなりすましが行われている状況を想定する。撮像装置１１Ａ，１１Ｂは、それぞれ表示ユニットを撮像する。
【００７６】
撮像装置１１Ａ，１１Ｂの一方で撮像された撮像画像を、枠検出部２２に入力される入力画像５１とする。入力画像５１には、表示ユニットの筐体５３と、表示ユニットの画面に表示された人物５４とが含まれる。枠検出部２２は、入力画像５１について公知の輪郭抽出（例えば、エッジ検出）処理を行い、エッジ画像５２を生成する。エッジ画像５２は、表示ユニットの筐体の輪郭５５と、表示ユニットの画面に表示された人物の輪郭５６とを含む。枠検出部２２は、エッジ画像５２に対し直線検出処理を行い、画像中の直線部分（線分）５７を抽出する。直線検出処理には、例えばハフ（Ｈｏｕｇｈ）変換を用いた直線検出等が用いられる。枠検出部２２は、抽出した画像中の直線部分５７において、平行な２つの直線とこれに垂直の直線とがあるか否かを判定し、四辺で囲まれた枠５８を抽出し、枠座標を取得する。なお、枠検出部２２は、四辺が閉じていない方形状の線分の組や三辺または二辺の直交する線分の組等であっても、所定条件に基づいて線分で囲まれた枠として判定し、枠５８を抽出してもよい。
【００７７】
また、枠検出部２２は、枠検出処理において、撮像画像から背景除去をした後で直線検出および枠抽出を行ってもよい。撮像画像において背景部分を除去することによって、枠検出の精度を向上できる。
【００７８】
図１３は、配置判定部２３による配置判定処理の動作概要例を示す説明図である。配置判定部２３は、顔認識部２１による顔検出結果の一つとして得られた対象人物の顔配置情報を取得する。顔配置情報は、撮像画像中の顔の輪郭位置を示す顔枠６８を含む。また、配置判定部２３は、枠検出部２２による枠検出結果の一つとして得られた表示ユニットの枠配置情報を取得する。枠配置情報は、撮像画像において検出された表示ユニットの輪郭位置を示す枠５８を含む。
【００７９】
配置判定部２３は、配置判定処理として、顔枠６８と枠５８の双方の位置を比較し、枠５８の内側の領域に顔枠６８が存在するか否か、つまり表示ユニットの枠内に対象人物の顔が位置しているか否かを判定する。配置判定部２３は、図１３に示すように、枠５８の内側に顔枠６８がある場合、枠内に顔画像ありとの配置判定結果を出力する。
【００８０】
有効判定部２５は、配置判定部２３による配置判定結果に基づき、枠内に顔画像が存在する場合、撮像画像において検出された顔画像が表示ユニットに表示された顔画像であるとみなし、顔照合結果、無効であると判定する。有効判定部２５は、顔認証の結果として否認を制御対象機器４０に出力する。
【００８１】
次に、実施の形態２に係る顔認証システム１００の動作について、図１４を参照して説明する。
【００８２】
図１４は、実施の形態２に係る顔認証の動作手順の一例を時系列に説明するフローチャートである。図７に示した顔認証処理と同一のステップ処理については、同一のステップ番号を付すことで、その説明を簡略化または省略する。
【００８３】
ステップＳ７で平面でないと判定された場合、枠検出部２２は、撮像画像中の枠検出を行う（Ｓ７Ｂ）。配置判定部２３は、顔検出による顔の位置と枠検出による枠の位置との配置判定を行う（Ｓ７Ｃ）。配置判定部２３は、撮像画像中に枠が検出され、枠の内側に顔が存在するか否か、つまり対象人物の顔の外側を囲む枠が存在するか否かを判定する（Ｓ７Ｄ）。配置判定部２３は、枠存在の判定結果を有効判定部２５に渡す。有効判定部２５は、枠存在判定の結果、対象人物の顔の外側を囲む枠が存在する場合、顔認証において無効と判定し、顔認証の結果として否認を制御対象機器４０に出力する。有効判定部２５は、枠存在判定の結果、対象人物の顔の外側を囲む枠が無い場合、顔認証において有効と判定し、顔認証の結果として承認を制御対象機器４０に出力する。
【００８４】
なお、ここでは、ステップＳ７で平面でないと判定された場合、上記ステップＳ７Ｂ〜Ｓ７Ｄで、枠検出処理が行われたが、ステップＳ５で対象人物の顔特徴情報が登録者の顔の照合データと一致した場合、ステップＳ７Ｂ〜Ｓ７Ｄと同様の枠検出処理が行われてもよい。
【００８５】
また、上記顔認証処理において、顔検出処理と枠検出処理とを、並列的に並行して実行してもよい。また、直列的に一方の処理を実行してから他方の処理を実行してもよく、処理の実施タイミングや順序は限定されない。
【００８６】
このように、実施の形態２における顔認証システム１００では、顔照合および平面判定の処理に加え、配置判定部２３による枠検出の結果を、顔認証の判定に用いることで、対象人物の顔認証を高い精度を行うことができる。
【００８７】
また、対象人物の顔画像が平面でないと判定された場合でも、顔画像を含む撮像画像に枠画像が含まれる場合、顔認証を否認することできる。例えば、タブレット端末の向きを小刻みに反転させながら、あるいはタブレット端末に表示される顔画像を３Ｄ表示あるいは２Ｄ表示に連続的に切り換えながら、対象人物が複数の撮像装置で撮像された場合、顔画像が平面でないと判定されるおそれがある。そのような場合でも、撮像画像に枠画像がある場合、タブレット端末に映っている顔画像であると判断し、対象人物の顔画像を否認できる。
【００８８】
一方、顔画像が表示された表示ユニットの枠を隠す等の行為があった場合でも、平面判定によってそのような行為に対処できる。また、平面判定を組み合わせることで、顔認証の対象でない人物に対しても、枠が検出されただけで、顔認証結果がＮＧになってしまうという、誤検出を回避できる。
【００８９】
以上、図面を参照しながら各種の実施の形態について説明したが、本開示はかかる例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例、修正例、置換例、付加例、削除例、均等例に想到し得ることは明らかであり、それらについても当然に本開示の技術的範囲に属するものと了解される。また、発明の趣旨を逸脱しない範囲において、上述した各種の実施の形態における各構成要素を任意に組み合わせてもよい。
【産業上の利用可能性】
【００９０】
本開示は、対象人物の認証時に行われ得る画像を用いたなりすましを高精度に検出し、なりすましによる悪意ある第三者の不正行為を効果的に抑止する顔認証装置、顔認証方法および顔認証システムとして有用である。
【符号の説明】
【００９１】
１１Ａ、１１Ｂ  撮像装置
１２  表示装置
１３  ＩＤ読取装置
２０、２０Ａ  顔認証装置
２１  顔認識部
２２  枠検出部
２３  配置判定部
２４  顔照合部
２５  有効判定部
４０  制御対象機器
７０  フラットパネル検出部
７１、７２  顔検出部
７３  顔対応判定部
７４、７５  特徴点検出部
７６  特徴点マッチング部
７７  射影変換推定部
７８  射影変換部
７９  相関演算部
８０  判定部
１００  顔認証システム
【図１】
2019197426.tif 000003
【図２】
2019197426.tif 000004
【図３】
2019197426.tif 000005
【図４】
2019197426.tif 000006
【図５】
2019197426.tif 000007
【図６】
2019197426.tif 000008
【図７】
2019197426.tif 000009
【図８】
2019197426.tif 000010
【図９】
2019197426.tif 000011
【図１０】
2019197426.tif 000012
【図１１】
2019197426.tif 000013
【図１２】
2019197426.tif 000014
【図１３】
2019197426.tif 000015
【図１４】
2019197426.tif 000016