(57)【特許請求の範囲】
【請求項１】
判定対象者の顔の画像を撮影する撮像手段と、
比較対象画像を取得する比較対象取得手段と、
前記撮影手段が撮影した撮影画像及び前記比較対象画像の各々に写された顔画像から特定の特徴点をそれぞれ抽出する第１の特徴点抽出手段と、
前記撮影画像及び比較対象画像を、前記特定の特徴点の位置が一致するように重ね合わせる画像重ね合わせ手段と、
前記第１の特徴点抽出手段が抽出した特定の特徴点のうち、前記画像重ね合わせ手段が重ね合わせに用いたもの以外の特徴点の位置を、重ね合わせた撮影画像及び比較対象画像上に表示する第１の特徴点表示手段とを有することを特徴とする顔認証装置。
【請求項２】
前記第１の特徴点抽出手段が抽出した特定の２以上の特徴点の位置が一致するように前記撮影画像及び前記比較対象画像の少なくとも一方を変換する変換処理手段を有し、
前記画像重ね合わせ手段は、前記変換処理手段が変換処理に用いた特徴点が一致するように、変換後の前記撮影画像と前記比較対象画像とを重ね合わせることを特徴とする請求項１記載の顔認証装置。
【請求項３】
前記第１の特徴点抽出手段が抽出した特定の特徴点のうち、前記画像重ね合わせ手段が画像の重ね合わせに用いる特徴点を、前記撮像手段のプレビュー表示画面上に表示させる第１の特徴点プレビュー表示手段を有することを特徴とする請求項１又は２記載の顔認証装置。
【請求項４】
前記撮像手段がプレビュー撮影した画像に写された顔画像から特定の特徴点を抽出する第２の特徴点抽出手段と、
前記第２の特徴点抽出手段が抽出した特定の特徴点のうち、前記画像重ね合わせ手段が画像の重ね合わせに用いる特徴点と同じ特徴点を前記撮像手段のプレビュー表示画面上に表示させる第２の特徴点プレビュー表示手段とを有することを特徴とする請求項３記載の顔認証装置。
【請求項５】
前記第２の特徴点抽出手段が抽出した特定の特徴点のうち、前記画像重ね合わせ手段が画像の重ね合わせに用いる特徴点を結ぶ撮影補助線を、前記撮影手段のプレビュー表示画面上に生成する撮影補助線生成手段を有し、
前記第２の特徴点プレビュー表示手段は、前記特徴点に代えて前記撮影補助線を前記撮像手段のプレビュー画像上に表示することを特徴とする請求項４記載の顔認証装置。
【請求項６】
前記第１の特徴点抽出手段が抽出した特定の特徴点のうち、前記画像重ね合わせ手段が画像の重ね合わせに用いたもの以外の特徴点が２以上存在する場合に、これらの少なくとも二つを結ぶ比較補助線を前記撮影画像及び前記比較対象画像上に生成する比較補助線生成手段を有し、
前記第１の特徴点表示手段は、前記特徴点に代えて前記比較補助線を前記撮影画像及び比較対象画像上に表示することを特徴とする請求項１から５のいずれか１項記載の顔認証装置。
【請求項７】
判定対象者の顔の画像を撮影する撮像装置と、情報処理装置とを備えた顔認証システムであって、
前記情報処理装置は、
比較対象画像を取得する比較対象取得手段と、
前記撮影装置から入力された撮影画像及び前記比較対象画像の各々に写された顔画像から特定の特徴点をそれぞれ抽出する第１の特徴点抽出手段と、
前記撮影画像及び比較対象画像を、前記特定の特徴点の位置が一致するように重ね合わせる画像重ね合わせ手段と、
前記第１の特徴点抽出手段が抽出した特定の特徴点のうち、前記画像重ね合わせ手段が重ね合わせに用いたもの以外の特徴点の位置を、重ね合わせた撮影画像及び比較対象画像上に表示する第１の特徴点表示手段とを有することを特徴とする顔認証システム。
【請求項８】
前記情報処理装置は、
前記第１の特徴点抽出手段が抽出した特定の２以上の特徴点の位置が一致するように前記撮影画像及び前記比較対象画像の少なくとも一方を変換する変換処理手段を有し、
前記画像重ね合わせ手段は、前記変換処理手段が変換処理に用いた特徴点が一致するように、変換後の前記撮影画像と前記比較対象画像とを重ね合わせることを特徴とする請求項７記載の顔認証システム。
【請求項９】
前記情報処理装置は、前記第１の特徴点抽出手段が抽出した特定の特徴点のうち、前記画像重ね合わせ手段が画像の重ね合わせに用いる特徴点の位置情報を、前記撮像装置へ送信する手段を有し、
前記撮像装置は、前記情報処理装置から受信した情報に基づいて、前記画像重ね合わせ手段が画像の重ね合わせに用いる特徴点の位置関係をプレビュー表示画面上に表示させる第１の特徴点プレビュー表示手段を有することを特徴とする請求項７又は８記載の顔認証システム。
【請求項１０】
前記撮像装置は、  プレビュー撮影した画像に写された顔画像から特定の特徴点を抽出する第２の特徴点抽出手段と、
前記第２の特徴点抽出手段が抽出した特定の特徴点のうち、前記画像重ね合わせ手段が画像の重ね合わせに用いる特徴点と同じ特徴点をプレビュー表示画面上に表示させる第２の特徴点プレビュー表示手段とを有することを特徴とする請求項９記載の顔認証システム。
【請求項１１】
前記撮像装置は、前記第２の特徴点抽出手段が抽出した特定の特徴点のうち、前記画像重ね合わせ手段が画像の重ね合わせに用いる特徴点を結ぶ撮影補助線を、前記撮影手段のプレビュー表示画面上に生成する撮影補助線生成手段を有し、
前記第２の特徴点プレビュー表示手段は、前記特徴点に代えて前記撮影補助線をプレビュー画像上に表示することを特徴とする請求項１０記載の顔認証システム。
【請求項１２】
前記情報処理装置は、前記第１の特徴点抽出手段が抽出した特定の特徴点のうち、前記画像重ね合わせ手段が画像の重ね合わせに用いたもの以外の特徴点が２以上存在する場合に、これらの少なくとも二つを結ぶ比較補助線を前記撮影画像及び前記比較対象画像上に生成する比較補助線生成手段を有し、
前記第１の特徴点表示手段は、前記特徴点に代えて前記比較補助線を前記撮影画像及び比較対象画像上に表示することを特徴とする請求項７から１１のいずれか１項記載の顔認証システム。
【請求項１３】
判定対象者の顔の画像を撮影する撮像工程と、
比較対象画像を取得する比較対象取得工程と、
前記撮影工程において撮影した撮影画像及び前記比較対象画像の各々に写された顔画像から特定の特徴点をそれぞれ抽出する第１の特徴点抽出工程と、
前記撮影画像及び比較対象画像を、前記特定の特徴点の位置が一致するように重ね合わせる画像重ね合わせ工程と、
前記第１の特徴点抽出工程において抽出した特定の特徴点のうち、前記画像重ね合わせ工程において重ね合わせに用いたもの以外の特徴点の位置を、重ね合わせた撮影画像及び比較対象画像上に表示する第１の特徴点表示工程とを有することを特徴とする顔認証方法。
【請求項１４】
前記第１の特徴点抽出工程において抽出した特定の２以上の特徴点の位置が一致するように前記撮影画像及び前記比較対象画像の少なくとも一方を変換する変換処理工程を有し、
前記画像重ね合わせ工程においては、前記変換処理工程において変換処理に用いた特徴点が一致するように、変換後の前記撮影画像と前記比較対象画像とを重ね合わせることを特徴とする請求項１３記載の顔認証方法。
【請求項１５】
前記第１の特徴点抽出工程において抽出した特定の特徴点のうち、前記画像重ね合わせ工程においてが画像の重ね合わせに用いる特徴点を、前記撮像工程に用いる撮像装置のプレビュー表示画面上に表示させる第１の特徴点プレビュー表示工程を有することを特徴とする請求項１３又は１４記載の顔認証方法。
【請求項１６】
前記撮像装置がプレビュー撮影した画像に写された顔画像から特定の特徴点を抽出する第２の特徴点抽出工程と、
前記第２の特徴点抽出工程において抽出した特定の特徴点のうち、前記画像重ね合わせ工程において画像の重ね合わせに用いる特徴点と同じ特徴点を前記撮像装置のプレビュー表示画面上に表示させる第２の特徴点プレビュー表示工程とを有することを特徴とする請求項１５記載の顔認証方法。
【請求項１７】
前記第２の特徴点抽出工程において抽出した特定の特徴点のうち、前記画像重ね合わせ工程において画像の重ね合わせに用いる特徴点を結ぶ撮影補助線を、前記撮影装置のプレビュー表示画面上に生成する撮影補助線生成工程を有し、
前記第２の特徴点プレビュー表示工程においては、前記特徴点に代えて前記撮影補助線をプレビュー画像上に表示することを特徴とする請求項１６記載の顔認証方法。
【請求項１８】
前記第１の特徴点抽出工程において抽出した特定の特徴点のうち、前記画像重ね合わせ工程において画像の重ね合わせに用いたもの以外の特徴点が２以上存在する場合に、これらの少なくとも二つを結ぶ比較補助線を前記撮影画像及び前記比較対象画像上に生成する比較補助線生成工程を有し、
前記第１の特徴点表示工程においては、前記特徴点に代えて前記比較補助線を前記撮影画像及び比較対象画像上に表示することを特徴とする請求項１３から１７のいずれか１項記載の顔認証方法。
【請求項１９】
コンピュータに、
判定対象者を撮影して得られた撮影画像及び比較対象画像の各々に写された顔画像から特定の特徴点をそれぞれ抽出する第１の特徴点抽出工程と、
前記撮影画像及び比較対象画像を、前記特定の特徴点の位置が一致するように重ね合わせる画像重ね合わせ工程と、
前記第１の特徴点抽出工程において抽出した特定の特徴点のうち、前記画像重ね合わせ工程において重ね合わせに用いたもの以外の特徴点の位置を、重ね合わせた撮影画像及び比較対象画像上に表示する第１の特徴点表示工程とを実行させることを特徴とする顔認証プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、顔画像を基に人物を認証する装置、システム、方法及びプログラムに関し、顔画像として写された人物の同一性を操作者の技量によらずに判定できる顔認証装置、システム、方法及びプログラムに関する。
【背景技術】
【０００２】
公的機関からは運転免許証やパスポートなどといった顔写真付きの証明書が発行されている。
【０００３】
身元を隠そうとしたり、不正に出入国しようとする者（以下、犯罪者等という）がこのような証明書を不正に使用する手法としては、かつては偽造した証明書を使用するという手口が主流であった。
【０００４】
近年、紙質やインクの成分を高精度に分析できる機械が実用化されており、本物とは異なる紙やインクを用いて偽造した証明書を見破ることが容易になっている。
【０００５】
また、証明書自体にＩＣチップを埋め込むことも行われるようになったため、証明書の偽造は困難となっている。
【０００６】
このため、近年では、犯罪者等は、自分と顔立ちの似た別人のパスポートを入手し、本人になりすまして使用するといった手口を用いるようになってきた。
【０００７】
この背景には、インターネットや携帯電話端末の普及によって情報化社会が実現されたために、犯罪者等は他人のパスポートを容易に入手できるようになったことがある。
【０００８】
この手口の場合、証明書自体は本物であるから、どれだけ分析機器の精度が向上しても別人による証明書の不正使用を防ぐことはできない。すなわち、証明書の別人による不正使用を防止するためには、証明書に添付された顔写真が所持者と別人であることを科学的に証明する必要がある。
【０００９】
このため、証明書の所持者を撮影した画像と、証明書に添付されている写真の画像とを比較して、人物の同一性を科学的に判定することが行われている。
【００１０】
顔画像の人物の同一性を判定する場合には、２枚の画像のそれぞれ対応する特定の点（両目の瞳の位置など）を照合し、重ね合わせるスーパーインポーズを用いることが一般的である。
【００１１】
スーパーインポーズに関する発明としては、特許文献１に開示される「頭蓋骨スーパーインポーズ方法と装置」がある。
【特許文献１】特開２００２−３６９８１２号公報
【発明の開示】
【発明が解決しようとする課題】
【００１２】
しかし、スーパーインポーズを行うためには、２枚の画像の大きさを合わせたり、回転させたり、位置を合わせたりする操作を手動で行わなければならない。このため、作業者には長年の経験と熟練した技術が要求される。
【００１３】
また、作業者の技能によって同一性の判定結果が異なることもあり、判定結果の信頼性にも問題があった。
【００１４】
本発明は係る問題に鑑みてなされたものであり、顔画像として写された人物の同一性を操作者の技量によらずに判定できる顔認証装置、システム、方法及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【００１５】
上記目的を達成するため、本発明は、第１の態様として、判定対象者の顔の画像を撮影する撮像手段と、比較対象画像を取得する比較対象取得手段と、撮影手段が撮影した撮影画像及び比較対象画像の各々に写された顔画像から特定の特徴点をそれぞれ抽出する第１の特徴点抽出手段と、撮影画像及び比較対象画像を、特定の特徴点の位置が一致するように重ね合わせる画像重ね合わせ手段と、第１の特徴点抽出手段が抽出した特定の特徴点のうち、画像重ね合わせ手段が重ね合わせに用いたもの以外の特徴点の位置を、重ね合わせた撮影画像及び比較対象画像上に表示する第１の特徴点表示手段とを有することを特徴とする顔認証装置を提供するものである。
【００１６】
また、上記目的を達成するため、本発明は、第２の態様として、判定対象者の顔の画像を撮影する撮像装置と、情報処理装置とを備えた顔認証システムであって、情報処理装置は、比較対象画像を取得する比較対象取得手段と、撮影装置から入力された撮影画像及び比較対象画像の各々に写された顔画像から特定の特徴点をそれぞれ抽出する第１の特徴点抽出手段と、撮影画像及び比較対象画像を、特定の特徴点の位置が一致するように重ね合わせる画像重ね合わせ手段と、第１の特徴点抽出手段が抽出した特定の特徴点のうち、画像重ね合わせ手段が重ね合わせに用いたもの以外の特徴点の位置を、重ね合わせた撮影画像及び比較対象画像上に表示する第１の特徴点表示手段とを有することを特徴とする顔認証システムを提供するものである。
【００１７】
また、上記目的を達成するため、本発明は、第３の態様として、判定対象者の顔の画像を撮影する撮像工程と、比較対象画像を取得する比較対象取得工程と、撮影工程において撮影した撮影画像及び比較対象画像の各々に写された顔画像から特定の特徴点をそれぞれ抽出する第１の特徴点抽出工程と、撮影画像及び比較対象画像を、特定の特徴点の位置が一致するように重ね合わせる画像重ね合わせ工程と、第１の特徴点抽出工程において抽出した特定の特徴点のうち、画像重ね合わせ工程において重ね合わせに用いたもの以外の特徴点の位置を、重ね合わせた撮影画像及び比較対象画像上に表示する第１の特徴点表示工程とを有することを特徴とする顔認証方法を提供するものである。
【００１８】
また、上記目的を達成するため、本発明は、第４の態様として、コンピュータに、判定対象者を撮影して得られた撮影画像及び比較対象画像の各々に写された顔画像から特定の特徴点をそれぞれ抽出する第１の特徴点抽出工程と、撮影画像及び比較対象画像を、特定の特徴点の位置が一致するように重ね合わせる画像重ね合わせ工程と、第１の特徴点抽出工程において抽出した特定の特徴点のうち、画像重ね合わせ工程において重ね合わせに用いたもの以外の特徴点の位置を、重ね合わせた撮影画像及び比較対象画像上に表示する第１の特徴点表示工程とを実行させることを特徴とする顔認証プログラムを提供するものである。
【発明の効果】
【００１９】
本発明によれば、顔画像として写された人物の同一性を操作者の技量によらずに判定できる顔認証装置、システム、方法及びプログラムを提供できる。
【発明を実施するための最良の形態】
【００２０】
本発明に係る顔認証装置は、図１に示すように、判定対象者の顔の画像を撮影する撮像部１１１と、比較対象画像を取得する比較対象取得部１２１と、撮影部が撮影した撮影画像及び比較対象画像の各々に写された顔画像から特定の特徴点をそれぞれ抽出する特徴点抽出部１２２と、撮影画像及び比較対象画像を、特定の特徴点の位置が一致するように重ね合わせる重ね合わせ処理部１２３と、特徴点抽出部１２２が抽出した特定の特徴点のうち、重ね合わせ処理部１２３が重ね合わせに用いたもの以外の特徴点の位置を、重ね合わせた撮影画像及び比較対象画像上に表示する特徴点表示部１２４とを有することを特徴とするものである。
【００２１】
このような構成とすることにより、画像の重ね合わせに用いていない特徴点を重ね合わせた撮影画像及び比較対象画像上に表示できるため、表示された特徴点の位置が撮影画像と比較対象画像とでずれているか否かに基づいて、判定対象者が比較対象画像に写された人物と同一であるか否かを操作者の技量によらずに判定できる。
なお、図２に示すように、撮像装置２００と情報処理装置３００とを有するシステムとして構成することも可能である。
【００２２】
以下、本発明の好適な実施の形態について説明する。
【００２３】
〔第１の実施形態〕
本発明を好適に実施した第１の実施形態について説明する。
図３に、本実施形態に係る顔認証システムの構成を示す。
このシステムは、撮像装置１と認証処理装置２とを有する。撮像装置１は、判定対象者の顔画像を撮影するための装置であり、撮像部１１を有する。認証処理装置２は、比較対象画像取得部２１と、特徴点抽出部２２と、変換処理部２３と、重ね合わせ処理部２４と、比較補助線生成部２５と、表示部２６とを有する。
【００２４】
比較対象画像取得部２１は、撮像装置１から入力される画像と比較する対象となる顔画像のデータを取得する。例えば、顔写真付き身分証に添付されている写真を光学的に読み取ることにより顔画像の画像データを取得する。特徴点抽出部２２は、撮影画像及び比較対象画像のそれぞれから特徴点（骨格によって定まり、肉付きの変化や年齢の増加によっては変動しない、顔認証において基準となる部位の位置）を抽出する。特徴点は、正面を見た状態での瞳の中心、目頭、目尻、鼻孔、口唇の中央、耳の穴などであり、その箇所は公知である。なお、特徴点の抽出方法は、公知技術を適用可能であるため、詳細な説明は省略する。変換処理部２３は、抽出された特定の特徴点の位置が撮像画像と比較対象画像とで一致するように撮影画像及び比較対象画像の少なくとも一方の大きさ、傾きなどを変換する。重ね合わせ処理部２４は、変換処理部２３によって大きさや傾きが調整された撮像画像と比較対象画像とを重ね合わせる。比較補助線生成部２５は、重ね合わせ処理部２４が画像の重ね合わせに用いた特徴点（後述する位置合わせ用特徴点）以外の特定の特徴点（後述する照合用特徴点）、又は、これらを結ぶ線を重ね合わせ画像の上に描画する。表示部２６は、特徴点やこれらを結ぶ線が描画された重ね合わせ画像を表示する。
【００２５】
本実施形態に係る顔認証システムの動作について説明する。図４に、本実施形態に係る顔認証システムの動作の流れを示す。
まず、判定対象者の顔画像を撮像装置１にて撮影し、撮像部１１で撮影した画像（撮影画像）のデータを認証処理装置２へ入力する（ステップＳ１０１）。また、判定対象者が所持している身分証に添付されている写真から顔画像のデータを取得する（ステップＳ１０２）。
【００２６】
撮影画像及び比較対象画像のそれぞれのデータを取得すると、特徴点抽出部２２は、撮影画像及び比較対象画像のそれぞれから、特定の２以上の特徴点（例えば両目の瞳の中心）とこれらとは別の１以上の特徴点（例えば上唇の中央）とを抽出する（ステップＳ１０２）。ここで、前者を「位置合わせ用特徴点」、後者を「照合用特徴点」と称する。なお、位置合わせ用特徴点はできるだけ離れた位置にあることが好ましい。例えば、左右の鼻の穴を位置合わせ用特徴点として抽出するよりも、左右の耳の穴を位置合わせ用特徴点として抽出するほうが、特徴点同士の間隔が広いので好ましい。位置合わせ用特徴点及び照合用特徴点としてどの特徴点を抽出するかは任意であるが、それらの部位は撮影画像及び比較対象画像で共通である。図５に、位置合わせ用特徴点及び照合用特徴点の抽出例を示す。ここでは位置合わせ用特徴点として両目の瞳の中心を、照合用特徴点として右目の目尻及び上唇の中央を抽出する例を示している。
【００２７】
変換処理部２３は、位置合わせ用特徴点の位置が撮像画像と比較対象画像とで一致するように撮影画像の大きさ、傾きなどを調整する（ステップＳ１０３）。ここでは、撮影画像の大きさ、傾きを変化させる場合を例としているが、比較対象画像の大きさや傾きを変化させても良いし、撮影画像及び比較対象画像の双方の大きさ、傾きを変化させて調整しても良い。図６に、位置合わせ用特徴点の位置が撮像画像と比較対象画像とで一致するように撮影画像の大きさ、傾きなどを調整した例を示す。
【００２８】
重ね合わせ処理部２４は、変換処理部２３によって大きさや傾きが調整された撮像画像を、位置合わせ用特徴点の位置が一致するように比較対象画像に重ね合わせ、重ね合わせ画像を生成する（ステップＳ１０４）。
【００２９】
比較補助線生成部２５は、撮影画像及び比較対象画像の照合用特徴点、又は照合用特徴点を結ぶ線（以下、比較補助線という）を重ね合わせ画像の上に描画する（ステップＳ１０５）。この際、照合用特徴点や比較補助線は、撮影画像のものと比較対象画像のものとを異なる色や形状で描画することが好ましい。
【００３０】
表示部２６は、照合用特徴点や比較補助線が描画された重ね合わせ画像を表示する（ステップＳ１０６）。
【００３１】
システムのユーザは、照合用特徴点や比較補助線の位置が、撮影画像と比較対象画像とで一致するか否かに基づいて、判定対象者が身分証の正当な所有者であるか否かを判断できる。図７に示す例では、（ａ）の場合は、比較補助線の位置が撮影対象画像と比較対象画像とで一致しないため、判定対象者が身分証の正当な所有者ではないと判断できる。一方、（ｂ）の場合は、比較補助線の位置が撮影対象画像と比較対象画像とで一致するため、判定対象者が身分証の正当な所有者であると判断できる。
【００３２】
本実施形態に係る顔認証システムは、比較補助線が重ね合わせ画像上に自動的に描画されるため、撮影画像に写された人物と、比較対象画像に写された人物とが同一人物であるか否かを客観的に判断できる。すなわち、スーパーインポーズ操作を行う者の技量に左右されることなく、同じ結果が得られるため、客観的な判断が可能である。
【００３３】
〔第２の実施形態〕
本発明を好適に実施した第２の実施形態について説明する。図８に、本実施形態に係る顔認証システムの構成を示す。このシステムは、撮像装置３と認証処理装置４とを有する。
【００３４】
撮像装置３は、比較対象者の顔画像を撮影するための撮像部３１とユーザに情報を表示するための表示部３２とを有する。
【００３５】
認証処理装置４は、比較対象画像取得部４１、特徴点抽出部４２、重ね合わせ処理部４３、補助線生成部４４及び表示部４５を有する。比較対象画像取得部４１は、撮像装置３から入力される画像と比較する対象となる顔画像のデータを取得する。例えば、顔写真付き身分証に添付されている写真を光学的に読み取ることにより顔画像の画像データを取得する。特徴点抽出部４２は、撮影装置３から入力された撮影画像及び比較対象画像取得部４１が取得した比較対象画像から特徴点を抽出する。重ね合わせ処理部４３は、撮像画像と比較対象画像とを重ね合わせる。補助線生成部４４は、特徴点抽出部４２が抽出した特徴点（又は、二つの特定の特徴点を結ぶ線分）を示す画像上に描画する。表示部４５は、特徴点又はそれらを結ぶ線が描画された画像を表示する。
【００３６】
本実施形態に係る顔認証システムの動作について説明する。図９に、本実施形態に係る顔認証システムの動作の流れを示す。
まず、認証処理装置４は、比較対象画像取得部４１によって比較対象画像の画像データを取得する（ステップＳ２０１）。次に、特徴点抽出部４２は、比較対象画像から特定の２以上の特徴点（例えば両目の瞳の中心）を抽出する（ステップＳ２０２）。以下、これらの特徴点を「位置合わせ用特徴点」という。
続いて、補助線生成部４４は、比較対象画像上に位置合わせ用特徴点、又は位置合わせ用特徴点同士を結ぶ線（以下、撮影補助線という）を描画し補助画像を生成する（ステップＳ２０３）。
【００３７】
認証処理装置４は補助画像を撮像装置１へ送信する（ステップＳ２０４）。
【００３８】
撮像装置３は、画像撮影時に表示部３１に補助画像を表示する（ステップＳ２０５）。撮影者は表示部３１に表示された撮影補助線に合わせて（例えば、表示部３１に表示された位置合わせ用特徴点が両目の瞳の中心と一致するようにして）比較対象者を撮影し、撮像部３１によって撮像画像のデータを生成する（ステップＳ２０６）。撮像装置３は、撮像画像を認証処理装置４へ送信する（ステップＳ２０７）。
【００３９】
撮影画像のデータが認証処理装置４に入力されると、特徴点抽出部４２は、撮影画像及び比較対象画像のそれぞれから、位置合わせ用特徴点とは別の１以上の特徴点を抽出する（ステップＳ２０８）。以下、この特徴点を「照合用特徴点」という。照合用特徴点としてどの特徴点を抽出するかは任意であるが、照合用特徴点とする部位は撮影画像及び比較対象画像で共通である。
【００４０】
重ね合わせ処理部４３は、撮像画像と比較対象画像に重ね合わせ、重ね合わせ画像を生成する（ステップＳ２０９）。
【００４１】
補助線生成部４４は、撮影画像及び比較対象画像の照合用特徴点、又は照合用特徴点を結ぶ線（以下、比較補助線という）を重ね合わせ画像の上に描画する（ステップＳ２１０）。この際、照合用特徴点や比較補助線は、撮影画像のものと比較対象画像のものとを異なる色や形状で描画することが好ましい。
【００４２】
表示部４５は、照合用特徴点や比較補助線が描画された重ね合わせ画像を表示する（ステップＳ２１１）。
【００４３】
システムのユーザは、照合用特徴点や比較補助線の位置が、撮影画像と比較対象画像とで一致するか否かに基づいて、判定対象者が身分証の正当な所有者であるか否かを判断できる。
【００４４】
本実施形態に係る顔認証システムでは、判定対象者の画像を撮影する際に、比較対象画像と大きさや傾きが一致する状態で撮影できるため、スーパーインポーズ時に画像の大きさや傾きを変化させる必要が無い。
【００４５】
この他の効果については、第１の実施形態と同様である。
【００４６】
〔第３の実施形態〕
本発明を好適に実施した第３の実施形態について説明する。
図１０に、本実施形態に係る顔認証システムを示す。このシステムは、撮像装置５及び認証処理装置６を有する。撮像装置５は、撮像部５１、表示部５２、特徴点抽出部５３、撮影補助線生成部５４を有する。なお、認証処理装置６は、第２の実施形態の認証処理装置４と同様である。
【００４７】
撮像部５１及び表示部５２は、第２の実施形態の撮像部３１及び表示部３２と同様である。特徴点抽出部５３は、撮像部５１から入力されるプレビュー画像から特定の二つの特徴点（位置合わせ用特徴点）を抽出する。撮影補助線生成部５４は、特徴点抽出部５３が抽出した特徴点の位置、又は、二つの位置合わせ用特徴点同士を結ぶ線分（撮影補助線）を示す補助線付きプレビュー画像を生成する。
【００４８】
本実施形態に係る顔認証システムの動作について説明する。図１１に、本実施形態に係る顔認証システムの動作の流れを示す。
認証処理装置６において補助画像を生成し、撮像装置５へ転送する処理（ステップＳ３０１〜Ｓ３０４）は、第２の実施形態のステップＳ２０１〜Ｓ２０４と同様である。
【００４９】
撮像部５１は、プレビュー画像を取得する（ステップＳ３１２）。撮影装置５の特徴点抽出部５３は、撮像部５１から入力されるプレビュー画像から特定の特徴点を抽出する（ステップＳ３１３）。撮像装置５の撮影補助線生成部５４は、プレビュー画像上に位置合わせ用特徴点、又は撮影補助線を加えた補助線付きプレビュー画像を生成する（ステップＳ３１４）。
【００５０】
撮像装置５は、画像撮影時には、図１２に示すような認証処理装置６から取得した補助画像と補助線付きプレビュー画像とを、図１３に示すように表示部５２に重ねて表示する（ステップＳ３０５）。なお、図１２は位置合わせ用特徴点として両目の瞳の中心を、照合用特徴点として右目の目尻及び上唇の中央を抽出した場合である。撮影者は表示部５２に表示された撮影補助線同士を合わせて撮影することで、スーパーインポーズ時に画像の大きさや傾きを変化させる必要が無くなる。
【００５１】
撮像部５１によって撮影画像のデータを生成した後の処理（ステップＳ３０６〜３１１）は第２の実施形態のステップＳ２０６〜２１１と同様であるため、説明は省略する。
【００５２】
本実施形態に係る顔認証システムは、第２の実施形態と同様に、判定対象者の画像を撮影する際に、比較対象画像と大きさや傾きが一致する状態で撮影できるため、スーパーインポーズ時に画像の大きさや傾きを変化させる必要が無い。
【００５３】
なお、本実施形態においては、撮影補助線同士が重なった場合（特定の特徴点の位置が一致した場合）に自動的にシャッターが切れるようにしても良い。このようにすれば、撮像時に手ブレの発生を抑え、撮影画像と比較対象画像との大きさ及び傾きをより正確に揃えることが可能である。
【００５４】
なお、上記各実施形態は本発明の好適な実施の一例であり、本発明はこれらに限定されることはない。
例えば、上記実施形態においては、証明書に添付された写真を光学的に読み取って比較対象画像とする場合を例としたが、証明書にＩＣチップが内蔵されている場合には、これに正当な所持者の顔画像を格納しておき、比較対象画像として用いても良い。
また、上記各実施形態においては、撮像装置と認証処理装置とが別個である構成を例としたが、これらが一体の構成であっても良い。
このように、本発明は様々な変形が可能である。
【図面の簡単な説明】
【００５５】
【図１】本発明に係る顔認証装置の構成を示す図である。
【図２】本発明に係る顔認証システムの構成を示す図である。
【図３】本発明を好適に実施した第１の実施形態に係る顔認証システムの構成を示す図である。
【図４】第１の実施形態に係る顔認証システムの動作の流れを示す図である。
【図５】撮像画像及び比較対象画像の一例を示す図である。
【図６】位置合わせ用特徴点の位置が撮像画像と比較対象画像とで一致するように撮影画像の大きさ、傾きなどが調整された撮影画像及び比較対象画像を示す図である。
【図７】撮影画像及び比較対象画像の重ね合わせ画像上に比較補助線を描画した状態を示す図である。
【図８】本発明を好適に実施した第２の実施形態に係る顔認証システムの構成を示す図である。
【図９】第２の実施形態に係る顔認証システムの動作の流れを示す図である。
【図１０】本発明を好適に実施した第３の実施形態に係る顔認証システムの構成を示す図である。
【図１１】第３の実施形態に係る顔認証システムの動作の流れを示す図である。
【図１２】補助画像及び補助線付きプレビュー画像の一例を示す図である。
【図１３】撮影補助線が一致するように補助画像と補助線付きプレビュー画像とを重ねて表示した状態を示す図である。
【符号の説明】
【００５６】
１、３、５、２００    撮像装置
２、４、６    認証処理装置
１１、３１、５１、１１１、２１１    撮像部
１２、２６、３２、４５、５２、６５    表示部
２１、４１、６１、１２１、３２１    比較画像取得部
２２、４２、５３、６２、１２２、３２２    特徴点抽出部
２３    変換処理部
２４、４３、６３、１２３、３２３    重ね合わせ処理部
２５    比較補助線生成部
４４、６４    補助線生成部
５４    撮影補助線生成部
１００    顔認証装置
１２４、３２４    特徴点表示部
３００    情報処理装置
【図１】
0004640416.tif 000002
【図２】
0004640416.tif 000003
【図３】
0004640416.tif 000004
【図４】
0004640416.tif 000005
【図５】
0004640416.tif 000006
【図６】
0004640416.tif 000007
【図７】
0004640416.tif 000008
【図８】
0004640416.tif 000009
【図９】
0004640416.tif 000010
【図１０】
0004640416.tif 000011
【図１１】
0004640416.tif 000012
【図１２】
0004640416.tif 000013
【図１３】
0004640416.tif 000014