(57)【要約】  本発明は、端末からの口座開設における本人確認およびユーザ情報の入力を簡易に確実に行う情報処理装置に関するものである。本情報処理装置は、動画に含まれるユーザの顔画像から第１特徴量を抽出する第１特徴量抽出部と、動画に含まれる、ユーザを証明する本人確認書類の顔画像から第２特徴量を抽出する第２特徴量抽出部と、第１特徴量と第２特徴量とが一致するか否かを照合する第１照合部と、ユーザに所定の動作を指示し、動画に含まれるユーザの動作が指示された所定の動作に相当するか否かを判定する第１判定部と、第１特徴量と第２特徴量とが一致し、かつ、ユーザの動作が指示された所定の動作に相当する場合に、ユーザが本人であることを確認する確認部と、を備える。
2020022014.tif 000002
【特許請求の範囲】
【請求項１】
動画に含まれるユーザの顔画像から第１特徴量を抽出する第１特徴量抽出部と、
前記動画に含まれる、前記ユーザを証明する本人確認書類の顔画像から第２特徴量を抽出する第２特徴量抽出部と、
前記第１特徴量と前記第２特徴量とが一致するか否かを照合する第１照合部と、
前記ユーザに所定の動作を指示し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当するか否かを判定する第１判定部と、
前記第１特徴量と前記第２特徴量とが一致し、かつ、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当する場合に、前記ユーザが本人であることを確認する確認部と、
を備える情報処理装置。
【請求項２】
前記ユーザの顔画像と前記ユーザを証明する本人確認書類の顔画像とは、前記動画の同じフレーム内の画像であり、
前記第１照合部の照合と前記第１判定部の判定とは並行に処理される請求項１に記載の情報処理装置。
【請求項３】
前記第１照合部において前記第１特徴量と前記第２特徴量とが一致すると判定された場合に、前記第１判定部による判定を実施する請求項１に記載の情報処理装置。
【請求項４】
前記第１判定部において前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当する場合に、前記第１照合部による照合を実施する請求項１に記載の情報処理装置。
【請求項５】
前記ユーザに指示される動作は、前記ユーザの顔を含むユーザの身体の動作および前記本人確認書類の提示方法の変化の少なくともいずれかを含む請求項１乃至４のいずれか１項に記載の情報処理装置。
【請求項６】
前記本人確認書類が本物であるか否か判定する第２判定部、をさらに備え、
前記確認部は、さらに前記本人確認書類が本物である場合に、前記ユーザが本人であることを確認する請求項１乃至５のいずれか１項に記載の情報処理装置。
【請求項７】
前記本人確認書類の判定中に、前記動画に含まれるユーザの顔画像から第３特徴量を抽出する第３特徴量抽出部と、
前記第１特徴量と前記第３特徴量とが一致するか否かを照合する第２照合部と、
をさらに備え、
前記第２判定部は、さらに前記第１特徴量と前記第３特徴量とが一致する場合に、前記本人確認書類を本物と判定する請求項６に記載の情報処理装置。
【請求項８】
前記本人確認書類の顔画像を含まない面の画像と共に、前記動画に含まれる前記ユーザの顔画像から第４特徴量を抽出する第４特徴量抽出部と、
前記第１特徴量と前記第４特徴量とが一致するか否かを照合する第３照合部と、
前記第１特徴量と前記第４特徴量とが一致する場合に、前記本人確認書類の顔画像を含まない面の画像が本物であると判定する第３判定部と、
をさらに備える請求項６または７に記載の情報処理装置。
【請求項９】
前記動画と、前記動画に含まれる前記ユーザの顔画像と、前記動画に含まれる前記本人確認書類の画像と、を保持する保持部と、
前記ユーザが本人であり、前記本人確認書類が本物であり、かつ、前記本人確認書類の顔画像を含まない面の画像が本物である場合に、前記保持部に保持された、前記動画と、前記動画に含まれる前記ユーザの顔画像と、前記動画に含まれる前記本人確認書類と、をユーザ情報として前記ユーザの適格審査を行う装置に送信する送信部と、
をさらに備える請求項８に記載の情報処理装置。
【請求項１０】
前記動画に含まれる前記本人確認書類の画像から文字を認識して文字コードに変換する変換部を、さらに備える請求項１乃至９のいずれか１項に記載の情報処理装置。
【請求項１１】
前記情報処理装置は通信端末である請求項１乃至１０のいずれか１項に記載の情報処理装置。
【請求項１２】
前記本人確認書類は、免許証、パスポート、またはマイナンバーカードである請求項１乃至１１のいずれか１項に記載の情報処理装置。
【請求項１３】
動画に含まれるユーザの顔画像から第１特徴量を抽出する第１特徴量抽出ステップと、
前記動画に含まれる、前記ユーザを証明する本人確認書類の顔画像から第２特徴量を抽出する第２特徴量抽出ステップと、
前記第１特徴量と前記第２特徴量とが一致するか否かを照合する第１照合ステップと、
前記ユーザに所定の動作を指示し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当するか否かを判定する第１判定ステップと、
前記第１特徴量と前記第２特徴量とが一致し、かつ、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当する場合に、前記ユーザが本人であることを確認する確認ステップと、
を含む情報処理方法。
【請求項１４】
動画に含まれるユーザの顔画像から第１特徴量を抽出する第１特徴量抽出ステップと、
前記動画に含まれる、前記ユーザを証明する本人確認書類の顔画像から第２特徴量を抽出する第２特徴量抽出ステップと、
前記第１特徴量と前記第２特徴量とが一致するか否かを照合する第１照合ステップと、
前記ユーザに所定の動作を指示し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当するか否かを判定する第１判定ステップと、
前記第１特徴量と前記第２特徴量とが一致し、かつ、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当する場合に、前記ユーザが本人であることを確認する確認ステップと、
をコンピュータに実行させる情報処理プログラム。
【請求項１５】
動画に含まれるユーザの顔画像から抽出した第１特徴量と、前記動画に含まれる、前記ユーザを証明する本人確認書類の顔画像から抽出した第２特徴量とを照合する照合部と、
前記ユーザに所定の動作を指示し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当するか否かを判定する第１判定部と、
前記本人確認書類が本物であるか否かを判定する第２判定部と、
前記第１特徴量と前記第２特徴量とが一致し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当し、かつ、前記本人確認書類が本物であると判定された場合に、前記ユーザが本人であることを確認する確認部と、
前記本人確認書類の顔画像を含まない面の画像と共に、前記動画に含まれる前記ユーザの顔画像から抽出した第４特徴量と前記第１特徴量とが一致する場合に、前記本人確認書類の顔画像を含まない面の画像が本物であると判定する第３判定部と、
前記ユーザが本人であり、前記本人確認書類が本物であり、かつ、前記本人確認書類の顔画像を含まない面の画像が本物である場合に、前記動画に含まれる前記本人確認書類の画像から文字を認識して文字コードに変換して、前記動画に含まれる前記ユーザの顔画像および前記本人確認書類の内容と、あらかじめ登録された情報との比較に基づいて、ユーザの適格性を審査する適格審査部と、
適格と判定されたユーザに対する口座を開設する口座開設部と、
を備える口座開設システム。
【請求項１６】
動画に含まれるユーザの顔画像から抽出した第１特徴量と、前記動画に含まれる、前記ユーザを証明する本人確認書類の顔画像から抽出した第２特徴量とを照合する照合ステップと、
前記ユーザに所定の動作を指示し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当するか否かを判定する第１判定ステップと、
前記本人確認書類が本物であるか否かを判定する第２判定ステップと、
前記第１特徴量と前記第２特徴量とが一致し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当し、かつ、前記本人確認書類が本物であると判定された場合に、前記ユーザが本人であることを確認する確認ステップと、
前記本人確認書類の顔画像を含まない面の画像と共に、前記動画に含まれる前記ユーザの顔画像から抽出した第４特徴量と前記第１特徴量とが一致する場合に、前記本人確認書類の顔画像を含まない面の画像が本物であると判定する第３判定ステップと、
前記ユーザが本人であり、前記本人確認書類が本物であり、かつ、前記本人確認書類の顔画像を含まない面の画像が本物である場合に、前記動画に含まれる前記本人確認書類の画像から文字を認識して文字コードに変換して、前記動画に含まれる前記ユーザの顔画像および前記本人確認書類の内容と、あらかじめ登録された情報との比較に基づいて、ユーザの適格性を審査する適格審査ステップと、
適格と判定されたユーザに対する口座を開設する口座開設ステップと、
を含む口座開設方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置、情報処理方法および情報処理プログラムに関する。
【背景技術】
【０００２】
上記技術分野において、特許文献１には、ネットワークを介して金融機関の口座開設をする技術が開示されている。特許文献１においては、スキャナで読み取った画像情報とユーザが入力した本人確認情報との一致で本人確認をしているまた、特許文献２には、顔の向きや瞬きの指示でなりすまし防止をするユーザの顔画像の照合による本人確認の技術が開示されている。また、特許文献３には、顔の向きの移動による角膜反射の変化による本人確認の技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−２５１９４４号公報
【特許文献２】特開２００３−３１７１００号公報
【特許文献３】特表２０１８−５０４７０３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記文献に記載の技術を、端末からの口座開設における本人確認に適用したとしても、適格審査に必要なユーザ情報の入力には手間がかかっていた。【０００５】
本発明の目的は、上述の課題を解決する技術を提供することにある。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明に係る情報処理装置は、
動画に含まれるユーザの顔画像から第１特徴量を抽出する第１特徴量抽出部と、
前記動画に含まれる、前記ユーザを証明する本人確認書類の顔画像から第２特徴量を抽出する第２特徴量抽出部と、
前記第１特徴量と前記第２特徴量とが一致するか否かを照合する第１照合部と、
前記ユーザに所定の動作を指示し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当するか否かを判定する第１判定部と、
前記第１特徴量と前記第２特徴量とが一致し、かつ、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当する場合に、前記ユーザが本人であることを確認する確認部と、
を備える。【０００７】
上記目的を達成するため、本発明に係る情報処理方法は、
動画に含まれるユーザの顔画像から第１特徴量を抽出する第１特徴量抽出ステップと、
前記動画に含まれる、前記ユーザを証明する本人確認書類の顔画像から第２特徴量を抽出する第２特徴量抽出ステップと、
前記第１特徴量と前記第２特徴量とが一致するか否かを照合する第１照合ステップと、
前記ユーザに所定の動作を指示し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当するか否かを判定する第１判定ステップと、
前記第１特徴量と前記第２特徴量とが一致し、かつ、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当する場合に、前記ユーザが本人であることを確認する確認ステップと、
を含む。【０００８】
上記目的を達成するため、本発明に係る情報処理プログラムは、
動画に含まれるユーザの顔画像から第１特徴量を抽出する第１特徴量抽出ステップと、
前記動画に含まれる、前記ユーザを証明する本人確認書類の顔画像から第２特徴量を抽出する第２特徴量抽出ステップと、
前記第１特徴量と前記第２特徴量とが一致するか否かを照合する第１照合ステップと、
前記ユーザに所定の動作を指示し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当するか否かを判定する第１判定ステップと、
前記第１特徴量と前記第２特徴量とが一致し、かつ、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当する場合に、前記ユーザが本人であることを確認する確認ステップと、
をコンピュータに実行させる。
【発明の効果】
【０００９】
本発明によれば、端末からの口座開設における本人確認およびユーザ情報の入力を簡易に確実に行うことができる。
【図面の簡単な説明】
【００１０】
【図１】本発明の第１実施形態に係る情報処理装置の構成を示すブロック図である。
【図２Ａ】本発明の第２実施形態に係る情報処理装置による口座開設の動作概要を示す図である。
【図２Ｂ】本発明の第２実施形態に係る情報処理装置による本人確認処理の動作概要を示す図である。
【図３】本発明の第２実施形態に係る情報処理装置を含む口座開設システムの構成を示すブロック図である。
【図４Ａ】本発明の第２実施形態に係る情報処理装置を含む口座開設システムの動作手順を示すシーケンス図である。
【図４Ｂ】本発明の第２実施形態に係る情報処理装置を含む口座開設システムの動作手順を示すシーケンス図である。
【図５】本発明の第２実施形態に係る情報処理装置としての通信端末の機能構成を示すブロック図である。
【図６Ａ】本発明の第２実施形態に係るユーザ情報保持部の構成を示す図である。
【図６Ｂ】本発明の第２実施形態に係る本人確認用情報保持部の構成を示す図である。
【図７Ａ】本発明の第２実施形態に係る顔画像照合テーブルの構成を示す図である。
【図７Ｂ】本発明の第２実施形態に係るライブネス判定テーブルの構成を示す図である。
【図７Ｃ】本発明の第２実施形態に係る免許証本物判定テーブルの構成を示す図である。
【図８】本発明の第２実施形態に係る情報処理装置としての通信端末のハードウェア構成を示すブロック図である。
【図９Ａ】本発明の第２実施形態に係る情報処理装置としての通信端末の処理手順を示すフローチャートである。
【図９Ｂ】本発明の第２実施形態に係る本人確認処理の手順を示すフローチャートである。
【図９Ｃ】本発明の第２実施形態に係る顔画像照合処理の手順を示すフローチャートである。
【図９Ｄ】本発明の第２実施形態に係るライブネス判定処理の手順を示すフローチャートである。
【図９Ｅ】本発明の第２実施形態に係る免許証判定処理の手順を示すフローチャートである。
【図１０】本発明の第２実施形態に係る適格審査サーバの処理手順を示すフローチャートである。
【図１１】本発明の第２実施形態に係る銀行口座管理サーバの処理手順を示すフローチャートである。
【図１２】本発明の第３実施形態に係る情報処理装置による本人確認処理の動作概要を示す図である。
【図１３】本発明の第３実施形態に係る情報処理装置としての通信端末の機能構成を示すブロック図である。
【図１４】本発明の第３実施形態に係るユーザ情報保持部および本人確認用情報保持部の構成を示す図である。
【図１５】本発明の第３実施形態に係るライブネス判定テーブルの構成を示す図である。
【図１６】本発明の第３実施形態に係るライブネス判定処理の手順を示すフローチャートである。
【図１７】本発明の第４実施形態に係る情報処理装置によるユーザ情報取得処理の動作概要を示す図である。
【図１８】本発明の第４実施形態に係る情報処理装置としての通信端末の機能構成を示すブロック図である。
【図１９】本発明の第４実施形態に係るユーザ情報取得処理の手順を示すフローチャートである。
【図２０】本発明の第５実施形態に係る情報処理装置による本人確認処理の動作概要を示す図である。
【図２１】本発明の第６実施形態に係る情報処理装置としての通信端末の機能構成を示すブロック図である。
【図２２】本発明の第６実施形態に係る情報処理装置としての通信端末の処理手順を示すフローチャートである。
【図２３】本発明の第７実施形態に係る情報処理装置による口座利用の動作概要を示す図である。
【図２４】本発明の第７実施形態に係る情報処理装置を含む口座利用システムの動作手順を示すシーケンス図である。
【図２５】本発明の第７実施形態に係る情報処理装置としての通信端末の機能構成を示すブロック図である。
【発明を実施するための形態】
【００１１】
以下に、図面を参照して、本発明の実施の形態について例示的に詳しく説明する。ただし、以下の実施の形態に記載されている構成要素は単なる例示であり、本発明の技術範囲をそれらのみに限定する趣旨のものではない。
【００１２】
［第１実施形態］
本発明の第１実施形態としての情報処理装置１００について、図１を用いて説明する。情報処理装置１００は、口座開設や口座利用のための本人確認をするための装置である。
【００１３】
図１に示すように、情報処理装置１００は、第１特徴量抽出部１０１と、第２特徴量抽出部１０２と、第１照合部１０３と、第１判定部１０４と、確認部１０５と、を含む。第１特徴量抽出部１０１は、動画１１０に含まれるユーザ１２０の顔画像１２１から第１特徴量を抽出する。第２特徴量抽出部１０２は、動画１１０に含まれる、ユーザ１２０を証明する本人確認書類１３０の顔画像１３１から第２特徴量を抽出する。第１照合部１０３は、第１特徴量と第２特徴量とが一致するか否かを照合する。第１判定部１０４は、ユーザ１２０に所定の動作を指示し、動画１１０に含まれるユーザ１２０の動作１４０（１４１→１４２）が指示された所定の動作に相当するか否かを判定する。確認部１０５は、第１特徴量と第２特徴量とが一致し、かつ、動画１１０に含まれたユーザ１２０の動作１４０（１４１→１４２）が指示された所定の動作に相当する場合に、ユーザ１２０が本人であることを確認する。
【００１４】
本実施形態によれば、動画に含まれるユーザの顔画像と本人確認書類の顔画像との照合、および、指示された動作とユーザの動作との照合から本人確認するので、端末からの口座開設における本人確認およびユーザ情報の入力を簡易に確実に行うことができる。
【００１５】
［第２実施形態］
次に、本発明の第２実施形態に係る情報処理装置について説明する。本実施形態に係る情報処理装置としての通信端末は、銀行の口座開設をユーザの本人確認処理とユーザ情報取得処理とを効率的に実行して、その結果を適格審査サーバに送信する。適格審査サーバは、ユーザの適格性を審査し、ユーザが適格であれば銀行口座開設サーバにおいて新規の口座が開設される。なお、本実施形態は、口座におけるユーザ情報の更新などにおいても適用されてよい。なお、本実施形態においては、本人確認に使用される本人確認書類として本人証明カードの１つとして免許証を例に説明するが、ユーザの顔画像とユーザ情報とを含む書類であれば免許証に限らない。
【００１６】
《口座開設の動作概要》
図２Ａは、本実施形態に係る情報処理装置２００による口座開設の動作概要を示す図である。
【００１７】
情報処理装置２００としての通信端末では、ステップＳ２１０において、口座開設アプリケーションが開始される。そして、ステップＳ２１０では、口座開設アプリケーションへのログインなどの処理がされるが、詳細な手順は省略する。
【００１８】
情報処理装置２００としての通信端末では、ステップＳ２２０において、口座開設の操作をしているユーザの本人認証と、口座開設者として適格かを審査する適格審査サーバに送信するユーザ情報が正しく取得されたか否かの判定とを行う。
【００１９】
ここで、ユーザの本人認証とは、別人が本人になりすまして口座開設の操作をしている場合や、録画を用いて本人が操作してように見せかける場合などを避けるために行われる。本実施形態においては、次のように、フロントカメラでの同時処理による不正防止を実行する。(1)ライブネス認証による写真・ビデオによる成りすまし防止(2)ライブネス認証と本人確認書類の同時取得（すなわち、ユーザの顔画像と本人確認画像とを同じフレーム内の画像として撮像すること）よる本人確認・書類の不正防止(3)カメラ画像と本人確認書類の顔照合による本人確認
また、本実施形態においては、ユーザ情報を免許証から取得するので、免許証が本物か偽物かを判定する。
【００２０】
口座開設の操作をしているユーザが本人であり、操作が現在行われていること（ライブネス認証）が確認されたならば、情報処理装置２００としての通信端末では、ステップＳ２３０において、ステップＳ２２０で収集したユーザ情報（動画や静止画を含む）を、口座開設者として適格かを審査する適格審査サーバに送信する。
【００２１】
適格審査部として機能する適格審査サーバでは、ステップＳ２４０において、受信したユーザ情報（動画や静止画を含む）から、免許証の表面画像および裏面画像のＯＣＲ(Optical Character Recognition)処理を行って文字コードに変換し、ユーザ情報を生成する。なお、ＯＣＲ処理において文字認識にエラーが発生する場合は、生成されたユーザ情報について通信端末に送信して、確認あるいは修正を行ってもよい。そして、適格審査サーバでは、ステップＳ２５０において、確認あるいは修正されたユーザ情報を、あらかじめ登録された不適格情報と照合することによって、ユーザの適格性を審査する。
【００２２】
口座開設を要請したユーザが適格であると判定された場合、各銀行の銀行口座を管理する口座開設部として機能する銀行口座管理サーバにユーザ情報と適格審査通過情報とを通知し、銀行口座管理サーバでは新規口座の開設処理をし、通信端末を介して口座開設が完了した旨をユーザに通知する。
【００２３】
（本人確認処理）
図２Ｂは、本実施形態に係る情報処理装置２００による本人確認処理（Ｓ２２０）の動作概要を示す図である。
【００２４】
図２Ｂにおいて、情報処理装置２００としての通信端末の処理は矢印の方向に進む。なお、図２Ｂの処理手順は一例であり、ライブネス判定の位置や処理の前後が逆になってもよい。
【００２５】
まず、口座開設アプリケーションを起動してログインした後、通信端末の撮像部（カメラ）で自分の顔２０１を含む動画を撮像する。
【００２６】
そして、通信端末からの“顔と免許証を写してください”とのメッセージに応えて、動画中に自分の顔と免許証の表面が入るようにする。通信端末は、動画からユーザの顔画像２０２と免許証２１２とを抽出する。次に、通信端末は、免許証２１２からユーザの顔画像（顔写真）２２２を抽出する。そして、ユーザの顔画像２０２の特徴量と免許証の顔画像２２２の特徴量をそれぞれ抽出して照合する。照合の結果、一致すれば一致２３２が表示され、不一致であれば不一致２４２が表示される。ユーザは、不一致２４２が表示されると、戻るボタン２５２を押して再度、顔画像の照合を行う。
【００２７】
一致２３２が表示されると、通信端末は、ライブネス判定に移行する。ライブネス判定では、通信端末の“右目をつぶってください”とのメッセージに応えて、ユーザは顔画像２０３のように右目をつぶる。ライブネス判定において、メッセージの指示とユーザ動作とが一致すれば一致２３３が表示され、不一致であれば不一致２４３が表示される。なお、ライブネス判定中も、免許証２１３と顔画像２２３とが同時に取得され保持されてよい。なお、このライブネス判定は、ランダムに選択された指示に応じたユーザ動作により判定されるが、ライブネス判定を確実にするためには、複数回のランダムに選択された指示に応じたユーザ動作により判定されるのが望ましい。ユーザは、不一致２４３が表示されると、戻るボタン２５３を押して再度、ライブネス判定を行うが、所定回数の不一致があればライブネスでないと判定して処理を終了してもよい。その場合には、今までの保持情報は破棄され、顔画像の認証から再開される。
【００２８】
所定回の連続した一致２３３が表示されると、通信端末は、免許証の裏面撮像に移行する。免許証の裏面撮像では、通信端末の“免許証を裏返してください”とのメッセージに応えて、ユーザは免許証を回転させる。また、免許証の本物判定を行う場合、免許証のＩＣ(Integrated Circuit)チップ２２４をＰＩＮ(Personal Identification Number)が不要な範囲、例えば共通エリアを読み込み、妥当な形式でデータが入っているのかを確認して、妥当な形式であれば免許証を本物と判定する。免許証が本物と判定すれば本物２３４が表示され、偽物であれば偽物２４４が表示される。ユーザは、偽物２４４が表示されると、戻るボタン２５４を押して再度、顔画像の認証から再開される。なお、本実施形態においては、免許証が本物か偽物か否かの判定はユーザ情報送信前のいずれのタイミングで行ってもよい。
【００２９】
免許証が裏面になると、裏面画像が取得される。裏面画像が取得されると取得２３５が表示され、ユーザが次へボタン２６５を押すと、本人確認処理のＳ２２０から収集した動画および画像、特徴量をユーザの適格審査のために適格審査サーバに送信するＳ２３０に移行する。戻るボタン２５５を押すと、口座開設手順は中断して本人確認処理のＳ２２０の最初に戻る。
【００３０】
なお、図２Ｂにおいては、ライブネス判定を顔画像の特徴量照合の後に１回だけ図示したが、ライブネス判定は、顔画像の特徴量照合時に毎回繰り返し、免許証本物判定中や免許証裏面撮像中に同時に実行して、ライブネスが連続していることを確認するのが望ましい。また、図２Ｂにおいては、顔画像の特徴量照合→ライブネス判定→免許証本物判定→免許証裏面撮像の順序で処理を行ったが、ライブネス判定や免許証本物判定を先に行ってもよい。ユーザの本人確認をより迅速に簡易に確実に行うよう適切な手順が選択される。
【００３１】
《口座開設システム》
図３は、本実施形態に係る情報処理装置２００を含む口座開設システム３００の構成を示すブロック図である。
【００３２】
口座開設システム３００は、ネットワーク３８０により接続された、本実施形態の情報処理装置２００と、適格審査サーバ３６０と、銀行口座管理サーバ３７０と、を備える。なお、適格審査サーバ３６０と銀行口座管理サーバ３７０とは一体であってもよい。
【００３３】
情報処理装置２００としての１つの通信端末からは、免許証３５１とユーザ３４１とを動画で撮像して、ユーザの顔画像３１１と免許証画像３１２に含まれる顔画像３１３とを照合して一致し、かつ、ライブネスと判定されれば、口座開設のユーザ情報が適格審査サーバ３６０と銀行口座管理サーバ３７０とに送信される。また、別の通信端末からは、免許証３５２とユーザ３４２とを動画で撮像して、ユーザの顔画像３２１と免許証画像３２２に含まれる顔画像３２３とを照合して一致し、かつ、ライブネスと判定されれば、口座開設のユーザ情報が適格審査サーバ３６０と銀行口座管理サーバ３７０とに送信される。さらに、別の通信端末からは、免許証３５３とユーザ３４３とを動画で撮像して、ユーザの顔画像３３１と免許証画像３３２に含まれる顔画像３３３とを照合して一致し、かつ、ライブネスと判定されれば、口座開設のユーザ情報が適格審査サーバ３６０と銀行口座管理サーバ３７０とに送信される。
【００３４】
適格審査サーバ３６０は、情報処理装置２００でユーザの本人確認済みの免許証画像に含まれるユーザ情報を受信し、ＯＣＲ処理で文字コードに変換して、不適格情報との照合によって、ユーザによる口座開設の適格性を審査する。銀行口座管理サーバ３７０は、適格審査サーバ３６０で口座開設が適格と判定されたユーザの新規口座を開設し、各情報処理装置２００に通知する。
【００３５】
（動作シーケンス）
図４Ａおよび図４Ｂは、本実施形態に係る情報処理装置２００を含む口座開設システム３００の動作手順を示すシーケンス図である。ここで、図４Ａは情報処理装置２００としての通信端末におけるユーザの本人確認処理とユーザ情報の取得処理であり、図４Ｂは本人確認後の銀行口座開設処理である。
【００３６】
図４Ａで、情報処理装置２００としての通信端末は、ステップＳ４０１において、口座開設アプリケーションを取得して起動する。情報処理装置２００としての通信端末は、ステップＳ４０３において、ユーザが入力したログイン情報その他を取得して保存する。
【００３７】
情報処理装置２００としての通信端末は、ステップＳ４０５において、適格審査や口座開設のためのユーザ情報の送信に先立って、情報処理装置２００としての通信端末のみでユーザの本人確認処理を実施する。
【００３８】
ステップＳ４０５でユーザの本人確認処理が成功すると、図４Ｂで、情報処理装置２００としての通信端末は、ステップＳ４０７において、ステップＳ４０５の本人確認処理中に情報処理装置２００としての通信端末が取得して保持していたユーザ顔画像/動画、および、免許証表面/裏面画像を、適格審査サーバ３６０に送信する。適格審査サーバ３６０は、ステップＳ４０９において、免許証の表面/裏面画像からＯＣＲ処理により文字コードに変換して、ユーザ情報を取得する。そして、ユーザ情報の確認、あるいは、ユーザ情報の修正を情報処理装置２００としての通信端末に問い合わせる。情報処理装置２００としての通信端末は、ステップＳ４１１において、ユーザにユーザ情報の確認、または、ユーザ情報の修正を問い合わせ、その結果を適格審査サーバ３６０に返送する。なお、ＯＣＲ処理は、第６実施形態（図２５）でも示されるように、情報処理装置としての通信端末で行い、適格審査サーバ３６０や銀行口座管理サーバ３７０には免許証の表面/裏面画像から文字コードに変換されたユーザ情報を送信してもよい。
【００３９】
適格審査サーバ３６０は、ステップＳ４１３において、確認または修正されたユーザ情報と不適格情報との照合に基づき適格審査を実施する。そして、ユーザが適格であると判定された場合は、銀行口座管理サーバ３７０にその旨を通知する。ユーザが適格であるとの通知を受けて、銀行口座管理サーバ３７０は、ステップＳ４１５において、新規口座の開設処理を行う。そして、銀行口座管理サーバ３７０は、ステップＳ４１７において、口座開設処理の完了を情報処理装置２００としての通信端末に通知する。情報処理装置２００としての通信端末は、ステップＳ４１９において、口座開設の完了を報知し、ユーザは確認をする。
【００４０】
次に、ステップＳ４０５のユーザの本人確認処理を詳細に説明する。
【００４１】
情報処理装置２００としての通信端末は、ステップＳ４５１において、撮像部が撮像した動画からユーザの顔画像を取得する。なお、ステップＳ４５１の処理は無くてもよい。情報処理装置２００としての通信端末は、ステップＳ４５３において、ユーザが提示するユーザと免許証表面とを撮像した動画からユーザの顔画像と免許証表面画像に含まれる顔画像を取得する。情報処理装置２００としての通信端末は、ステップＳ４５５において、ユーザの顔画像と免許証表面の顔画像とのそれぞれの特徴量を抽出して、抽出された特徴量を照合する。
【００４２】
特徴量の照合の結果、顔画像が一致すると判定されると、情報処理装置２００としての通信端末は、ステップＳ４５７において、ライブネス判定のためにユーザの動作を指示する。ユーザが情報処理装置２００としての通信端末からの動作指示に応じて動作をすると、情報処理装置２００としての通信端末は、ステップＳ４５９において、ユーザの動作を認識して動作指示に相当する場合にライブネスであると判定する。
【００４３】
顔画像が一致すると判定され、ライブネスであると判定されると、情報処理装置２００としての通信端末は、ステップＳ４６１において、免許証の裏面を撮像するようユーザに指示する。免許証の裏面を撮像するためにユーザが免許証を回転させる。一方、情報処理装置２００としての通信端末は、ステップＳ４６３において、免許証が本物であるか否かを判定する。
【００４４】
最後に、情報処理装置２００としての通信端末は、ステップＳ４６５において、裏返された免許証の裏面の動画を撮像する。なお、ユーザの顔画像と免許証とは常に一連の動画に含まれている。
【００４５】
なお、ステップＳ４５７およびＳ４５９のライブネス判定処理は、ライブネスの確認が必要であれば、他のステップにおける照合処理や判定処理中に繰り返し実行されてよい。
【００４６】
《通信端末の機能構成》
図５は、本実施形態に係る情報処理装置２００としての通信端末の機能構成を示すブロック図である。
【００４７】
情報処理装置２００は、通信制御部５０１と、入出力インタフェース５０２と、アプリケーション実行部５０３と、を備える。また、情報処理装置２００は、入出力インタフェース５０２に接続された、表示部５０４と、操作部５０５と、撮像部５０６と、音声入出力部５０７と、オプショナルなＩＣカードリーダ５０８と、を備える。ここで、表示部５０４と操作部５０５とはタッチパネルであってもよい。なお、図５では撮像部５０６を情報処理装置２００が有する構成として示したが、例えば、ＯＣＲ処理にも十分な高解像度の撮像部を情報処理装置２００の外部に接続してもよい。通信制御部５０１は、ネットワーク３８０を介して、適格審査サーバ３６０や銀行口座管理サーバ３７０との通信を制御する。入出力インタフェース５０２は、入出力機器との入出力を制御する。
【００４８】
アプリケーション実行部５０３は、撮像動画取得部５３１と、ユーザ顔画像抽出部５３２と、ユーザ顔画像特徴量抽出部５３３と、免許証抽出部５３４と、免許証顔画像抽出部５３５と、免許証顔画像特徴量抽出部５３６と、顔特徴量照合部５３７と、を有する。ここで、ユーザ顔画像抽出部５３２とユーザ顔画像特徴量抽出部５３３とが、図１の第１特徴量抽出部１０２に相当する。また、免許証抽出部５３４と免許証顔画像抽出部５３５と免許証顔画像特徴量抽出部５３６とが、図１の第２特徴量抽出部１０２に相当する。
【００４９】
撮像動画取得部５３１は、撮像部５０６が撮像した動画を取得する。ユーザ顔画像抽出部５３２は、撮像動画取得部５３１が取得した動画からユーザの顔画像を抽出する。ユーザ顔画像特徴量抽出部５３３は、ユーザ顔画像抽出部５３２が抽出したユーザの顔画像から、所定アルゴリズムで顔特徴量を抽出する。免許証抽出部５３４は、撮像動画取得部５３１が取得した動画から免許証を抽出する。免許証顔画像抽出部５３５は、免許証抽出部５３４が抽出した免許証の表面に含まれる顔画像を抽出する。免許証顔画像特徴量抽出部５３６は、免許証顔画像抽出部５３５が抽出した免許証の表面に含まれる顔画像から、同じ所定アルゴリズムで顔特徴量を抽出する。顔特徴量照合部５３７は、ユーザ顔画像特徴量抽出部５３３が抽出したユーザの顔特徴量と免許証顔画像特徴量抽出部５３６が抽出した免許証の顔特徴量とを照合して、顔画像が一致するか否かの照合結果を出力する。
【００５０】
さらに、アプリケーション実行部５０３は、ユーザ動作指示部５３８と、ライブネス判定部５３９と、ユーザ本人確認部５４０と、免許証裏面指示部５４１と、免許証本物判定部５４２と、ユーザ情報送信部５４３と、データベース５５０と、を有する。ここで、ユーザ動作指示部５３８とライブネス判定部５３９とが、図１の第１判定部１０４に相当する。また、免許証裏面指示部５４１と免許証本物判定部５４２とが、第２判定部と称される。さらに、ユーザ本人確認部５４０は、顔特徴量照合部５３７の照合結果とライブネス判定部５３９の判定結果とによりユーザの本人確認をする場合を第１確認部と称し、さらに免許証本物判定部５４２の判定結果を考慮する場合を第２確認部と称する。
【００５１】
ユーザ動作指示部５３８は、ライブネス判定のため、ユーザに対してランダムに選択された動作を、表示部５０４や音声入出力部５０７からの出力により指示する。ライブネス判定部５３９は、ユーザ動作指示部５３８が出力した動作指示と、本例ではユーザ顔画像抽出部５３２からのユーザ顔画像に見られる動作とを照合して、相当しているか否かを判定する。なお、ユーザの顔以外の動作指示の場合は、撮像動画から対応する部位を抽出することになる。
【００５２】
ユーザ本人確認部５４０は、顔特徴量照合部５３７の照合結果とライブネス判定部５３９の判定結果とから、あるいは、顔特徴量照合部５３７の照合結果とライブネス判定部５３９の判定結果と免許証本物判定部５４２の判定結果とから、ユーザが本人であることを確認する。
【００５３】
免許証裏面指示部５４１は、免許証の裏面撮像のため、ユーザに対して免許証の裏面を撮像部前に提示するよう、表示部５０４や音声入出力部５０７からの出力により指示する。免許証本物判定部５４２は、オプショナルに接続されたＩＣカードリーダ５０８により、免許証のＩＣチップ２２４をＰＩＮ(Personal Identification Number)が不要な範囲、例えば共通エリアを読み込み、妥当な形式でデータが入っているのかを確認して、妥当な形式であれば免許証を本物と判定する。
【００５４】
ユーザ情報送信部５４３は、ユーザ本人確認部５４０からの本人確認結果を受けて、それまでの処理中に得られてデータベース５５０に保持されていた動画や顔画像、顔特徴量、および、免許証の表面画像／裏面画像を、適格審査や口座開設のため適格審査サーバ３６０や銀行口座管理サーバ３７０に送信する。
【００５５】
データベース５５０は、本人確認用情報保持部５５１とユーザ情報保持部５５２とを有する。本人確認用情報保持部５５１は、本人確認に用いられる種々のアルゴリズムやパラメータを保存する。ユーザ情報保持部５５２は、本人確認処理中に得られた動画や顔画像、顔特徴量、および、免許証の表面画像／裏面画像を保持する。図５には、データベース５５０と関連する各機能構成部とを結ぶ線は煩雑さを避けるために図示されていないが、本人確認用情報保持部５５１からは、本人確認用情報を必要とする各機能構成部に情報が送付され、ユーザ情報保持部５５２には、各機能構成部で取得されたユーザ情報が保持される。
【００５６】
（ユーザ情報保持部）
図６Ａは、本実施形態に係るユーザ情報保持部５５２の構成を示す図である。ユーザ情報保持部５５２は、ログインに関連して保持されるログイン関連保持部６１０と、顔画像照合に関連して保持される顔画像関連保持部６２０と、ライブネス判定に関連して保持されるライブネス関連保持部６３０と、免許証判定に関連して保持される免許証関連保持部６４０と、を含む。
【００５７】
ログイン関連保持部６１０は、端末ＩＤ６１１に対応付けて、ユーザＩＤ６１２と、パスワード６１３と、ユーザ属性６１４と、その他情報６１５と、を保持する。ログイン関連保持部６１０のデータ保持は一時的でよい。
【００５８】
顔画像関連保持部６２０は、ユーザ画像関連６２１と免許証画像関連６２２とを保持する。ユーザ画像関連６２１には、ユーザ画像、ユーザ顔画像、顔画像特徴量が含まれる。また、免許証画像関連６２２には、免許証表面画像、免許証顔画像、顔画像特徴量が含まれる。なお、画像は動画で保持されるのが望ましい。
【００５９】
ライブネス関連保持部６３０は、ライブネス判定関連６３１と、ユーザ画像関連６２１と、免許証画像関連６２２と、を保持する。ライブネス判定関連６３１は、ライブネス指示情報とライブネス反応顔画像とを含む。なお、ユーザ画像関連６３２と免許証画像関連６３３とには、ユーザ画像関連６２１や免許証画像関連６２２と同種のライブネス判定時の情報が含まれる。
【００６０】
免許証関連保持部６４０は、免許証判定関連６４１と、ユーザ画像関連６４２と、免許証画像関連６４３と、を保持する。免許証判定関連６４１は、免許証ＩＣチップ形式を含む。なお、ユーザ画像関連６４２には、ユーザ画像関連６２１同種の免許証判定時の情報が含まれる。また、免許証画像関連６４３には、免許証裏面画像が含まれる。
【００６１】
（本人確認用情報保持部）
図６Ｂは、本実施形態に係る本人確認用情報保持部５５１の構成を示す図である。本人確認用情報保持部５５１は、顔画像照合処理で使用するアルゴリズムを保持するアルゴリズム保持部６５０と、ライブネス判定処理で使用するライブネス指示情報を保持するライブネス指示情報保持部６６０と、免許証判定処理で使用する免許証判定情報保持部６７０と、を含む。
【００６２】
アルゴリズム保持部６５０は、免許証抽出部５３４が撮像動画から免許証を抽出するための免許証抽出用アルゴリズム６５１と、ユーザ顔画像抽出部５３２や免許証顔画像抽出部５３５が顔画像を抽出するための顔画像抽出用アルゴリズム６５２と、を保持する。また、アルゴリズム保持部６５０は、ユーザ顔画像特徴量抽出部５３３や免許証顔画像特徴量抽出部５３６が特徴量を抽出する顔画像特徴量抽出用アルゴリズム６５３と、顔特徴量照合部５３７が特徴量照合に用いる顔画像特徴量照合用アルゴリズム６５４と、を保持する。
【００６３】
ライブネス指示情報保持部６６０は、ライブネス指示ＩＤ６６１に対応付けて、指示内容６６２、現在指示中であることを表す指示フラグ６６３と、各ライブネス指示に応じたライブネス判定アルゴリズム６６４と、を保持する。指示内容６６２としては、例えば、右ウインク、左ウインク、両目閉じ、顔上向き、首左右傾き、などが含まれるが、これらに限定されない。
【００６４】
免許証判定情報保持部６７０は、免許証種類６７１に対応付けて、ＩＣチップ形式６７２と、免許証が本物か偽物かを判定するアルゴリズム６７３と、を保持する。
【００６５】
（顔画像照合テーブル）
図７Ａは、本実施形態に係る顔画像照合テーブル７１０の構成を示す図である。なお、顔画像照合テーブル７１０は、顔特徴量照合部５３７がユーザの顔画像と免許証の顔画像とを照合するために使用される。
【００６６】
顔画像照合テーブル７１０は、ユーザの顔画像特徴量７１１と、対応する免許証の顔画像特徴量７１２と、特徴量の照合結果７１３と、一致か否かの判定閾値７１４と、判定結果の一致／不一致フラグ７１５と、を記憶する。
【００６７】
（ライブネス判定テーブル）
図７Ｂは、本実施形態に係るライブネス判定テーブル７２０の構成を示す図である。なお、ライブネス判定テーブル７２０は、ライブネス判定部５３９が顔の変化指示とユーザの顔画像の変化とを照合するために使用される。
【００６８】
ライブネス判定テーブル７２０は、複数のライブネス指示７２１に対応付けて、それぞれのユーザによるライブネス反応７２２と、一致／不一致フラグ７２３と、を記憶する。そして、複数回の一致／不一致フラグ７２３に基づいて判定した、ライブネス判定結果７２４を記憶する。なお、ライブネス指示７２１とライブネス反応７２２とが一致するか否かを閾値により判別してもよい。
【００６９】
（免許証本物判定テーブル）
図７Ｃは、本実施形態に係る免許証本物判定テーブル７３０の構成を示す図である。なお、免許証本物判定テーブル７３０は、免許証本物判定部５４２が免許証のＩＣチップ形式からユーザ免許証が本物か偽物かを判定するために使用される。
【００７０】
免許証本物判定テーブル７３０は、免許証から得られたユーザ免許証のＩＣチップ形式７３１と、あらかじめ設定された標準免許証のＩＣチップ形式７３２と、免許証の本物／偽物判定結果７３３とを記憶する。
【００７１】
《通信端末のハードウェア構成》
図８は、本実施形態に係る情報処理装置２００としての通信端末のハードウェア構成を示すブロック図である。
【００７２】
図８で、ＣＰＵ(Central Processing Unit)８１０は演算制御用のプロセッサであり、プログラムを実行することで図５の機能構成部を実現する。ＣＰＵ８１０は１つであっても複数であってもよい。ＲＯＭ(Read Only Memory)８２０は、初期データおよびプログラムなどの固定データおよびプログラムを記憶する。ネットワークインタフェース８３０は、ネットワークを介して、適格審査サーバ３６０や銀行口座管理サーバ３７０との通信を制御する。
【００７３】
ＲＡＭ(Random Access Memory)８４０は、ＣＰＵ８１０が一時記憶のワークエリアとして使用するランダムアクセスメモリである。ＲＡＭ８４０には、本実施形態の実現に必要なデータを記憶する領域が確保されている。ログイン関連保持部６１０は、図６Ａに示したような情報が含まれている。顔画像照合テーブル７１０は、図７Ａに示したような情報が含まれており、顔特徴量の照合に使用される。ライブネス判定テーブル７２０は、図７Ｂに示したような情報が含まれており、ライブネスの判定に使用される。免許証本物判定テーブル７３０は、図７Ｃに示したような情報が含まれており、免許証が本物かの判定に使用される。入出力データ８４１は、入出力インタフェース５０２に接続された入出力機器と入出力されるデータである。送受信データ８４２は、ネットワークインタフェース８３０を介して、外部装置と送受信されるデータである。
【００７４】
ストレージ８５０は、ＣＰＵ８１０が使用する、データベースや各種のパラメータ、あるいは本実施形態の実現に必要な以下のデータまたはプログラムが記憶されている。本人確認用情報保持部５５１は、図６Ｂに示したように、ユーザの本人確認処理に使用される情報を保持する。ユーザ情報保持部５５２は、図６Ａに示したように、ユーザの本人確認処理の間に収集された適格審査に使用するための情報を保持する。
【００７５】
ストレージ８５０には、以下のプログラムが格納される。通信端末制御プログラム８５１は、情報処理装置２００としての通信端末全体を制御するプログラムである。アプリケーション実行部５０３で実行されるアプリケーションブログラムは、本実施形態のユーザの本人確認処理を実行するためのプログラムである。アプリケーションブログラムには、以下のモジュールが含まれている。ユーザ顔画像抽出モジュール８５２は、撮像した動画からユーザの顔画像を抽出するモジュールである。免許証顔画像抽出モジュール８５３は、撮像した動画から免許証を抽出し、免許証の表面画像から顔画像を抽出するモジュールである。顔画像特徴量抽出モジュール８５４は、顔画像の特徴を示す特徴量を抽出するモジュールである。特徴量照合モジュール８５５は、ユーザの顔画像と免許証の顔画像が一致するか否かを顔特徴量の照合で判定するモジュールである。ライブネス判定モジュール８５６は、ユーザへのランダムな動作指示を出して、それに応じたユーザの動作が相当するか否かで実時間の動画であることを判定するモジュールである。免許証判定モジュール８５７は、ユーザ免許証のＩＣチップ形式を読み取って、そのＩＣチップ形式から免許証が本物か偽物かを判定するモジュールである。ユーザ本人確認モジュール８５８は、特徴量照合モジュール８５５、ライブネス判定モジュール８５６、免許証判定モジュール８５７の判定結果を組み合わせて、ユーザが本人であるか否かを確認するモジュールである。適格審査情報送信モジュール８５９は、ユーザ本人確認モジュール８５８が、ユーザが本人であると確認した場合に、ユーザの適格審査に使用するユーザ情報を適格審査サーバ３６０に送信するモジュールである。
【００７６】
なお、図８のＲＡＭ８４０やストレージ８５０には、情報処理装置２００としての通信端末が有する汎用の機能や他の実現可能な機能に関連するプログラムやデータは図示されていない。
【００７７】
《通信端末の処理手順》
図９Ａは、本実施形態に係る情報処理装置２００としての通信端末の処理手順を示すフローチャートである。このフローチャートは、図８のＣＰＵ８１０がＲＡＭ８４０を使用して実行し、図５の情報処理装置２００の機能構成部を実現する。
【００７８】
情報処理装置２００は、ステップＳ９０１において、口座開設用のアプリケーションを取得して起動する。情報処理装置２００は、ステップＳ９０３において、ログイン処理を行う。なお、かかるログイン処理は、実際にＷｅｂブラウザと繋いでもよいし、以降のユーザの本人確認とユーザ情報収集を情報処理装置２００内で完結するためには、情報処理装置２００内のアプリケーションに擬似ログインする構成であってもよい。
【００７９】
情報処理装置２００は、ステップＳ９０５において、本実施形態の本人確認処理を実行する。情報処理装置２００は、ステップＳ９０７において、本人確認されたか否かを判定する。
【００８０】
本人確認されたと判定した場合、情報処理装置２００は、ステップＳ９０９において、本人確認処理中の取得した動画、画像、特徴量、免許証の表面画像および裏面画像などを含む適格審査用情報を適格審査サーバ３６０に送信する。情報処理装置２００は、ステップＳ９１１において、適格審査サーバ３６０でＯＣＲ処理した結果の受信を待つ。免許証の表面画像および裏面画像などをＯＣＲ処理した結果を受信すると、情報処理装置２００は、ステップＳ９１３において、ＯＣＲ結果の確認または修正内容を適格審査サーバ３６０に送信する。
【００８１】
情報処理装置２００は、ステップＳ９１５において、適格審査サーバ３６０の適格審査と銀行口座管理サーバ３７０の口座開設処理とにより口座が開設されたか否かを待つ。口座開設の完了通知があれば、情報処理装置２００は、ステップＳ９１７において、ユーザに報知する。一方、本人確認に失敗した場合や適格審査で落ちた場合、情報処理装置２００は、ステップＳ９１９において、原因通知を含むエラー通知を行う。
【００８２】
（本人確認処理）
図９Ｂは、本実施形態に係る本人確認処理（Ｓ９０５）の手順を示すフローチャートである。
【００８３】
情報処理装置２００は、ステップＳ９２１において、顔画像照合処理を実行する。情報処理装置２００は、ステップＳ９２３において、顔画像照合処理の照合結果が一致であるか否かを判定する。照合結果が一致である場合、情報処理装置２００は、ステップＳ９２４において、顔画像および免許証表面画像を保存する。一方、照合結果が不一致の場合、情報処理装置２００は、ステップＳ９３５に進んで、本人確認失敗フラグをＯＮにして本人確認処理を終了する。
【００８４】
情報処理装置２００は、ステップＳ９２５において、ライブネス判定処理を実行する。情報処理装置２００は、ステップＳ９２７において、ライブネス判定処理の判定結果がライブネスであるか否かを判定する。ライブネスである場合、情報処理装置２００は、ステップＳ９２８において、ライブネス中の顔画像あるいは同時に撮像中の免許証表面画像を保存する。一方、ライブネスでない場合、情報処理装置２００は、ステップＳ９３５に進んで、本人確認失敗フラグをＯＮにして本人確認処理を終了する。
【００８５】
情報処理装置２００は、ステップＳ９２９において、免許証判定処理を実行する。情報処理装置２００は、ステップＳ９３１において、免許証判定処理の判定結果が本物であるか偽物であるかを判定する。免許証が本物と判定された場合、情報処理装置２００は、ステップＳ９３２において、免許証判定中の顔画像および免許証裏面画像を保存する。そして、情報処理装置２００は、ステップＳ９３３において、本人確認成功フラグをＯＮにする。一方、免許証が偽物と判定された場合、情報処理装置２００は、ステップＳ９３５に進んで、本人確認失敗フラグをＯＮにして本人確認処理を終了する。
【００８６】
なお、本人確認成功フラグをＯＮにする場合の判定順序や組み合わせは、図９Ｂに限定されない。例えば、ライブネス判定を顔画像照合の前に行ってもよい。また、ライブネス判定処理は、ライブネス確認を確実とするため、１回の顔画像照合ごとに行っても、免許証判定時や免許証裏面撮像時に行ってもよい。
【００８７】
（顔画像照合処理）
図９Ｃは、本実施形態に係る本人確認処理（Ｓ９０５）に含まれる顔画像照合処理（Ｓ９２１）の手順を示すフローチャートである。
【００８８】
情報処理装置２００は、ステップＳ９４１において、撮像部でユーザの動画を撮像する。かかる撮像はオプションであり、なくてもよい。情報処理装置２００は、ステップＳ９４３において、ユーザと免許証とを含む動画を撮像する。情報処理装置２００は、ステップＳ９４５において、ユーザ画像と免許証の表面画像とから顔特徴量を抽出する。詳しくは、動画からユーザの顔画像と免許証画像を抽出し、免許証画像から顔画像を抽出する。そして、ユーザの顔画像および免許証の顔画像からそれぞれ特徴量を抽出する。
【００８９】
情報処理装置２００は、ステップＳ９４７において、抽出された特徴量を照合する。すなわち、動画中のユーザの顔画像と、免許証の写真の顔画像とが所定の誤差範囲内で一致するか否かを判定する。そして、情報処理装置２００は、ステップＳ９４９において、照合結果から一致したか否かを判定する。一致した場合、情報処理装置２００は、ステップＳ９５１において、顔画像一致フラグをＯＮにして顔画像照合処理を終了する。
【００９０】
一方、一致しなかった場合、情報処理装置２００は、ステップＳ９５３において、タイムアウトあるいは照合回数の上限か否かを判定する。タイムアウトあるいは照合回数の上限でなければ、ステップＳ９４３からの特徴量の照合処理を繰り返す。タイムアウトあるいは照合回数の上限であれば、情報処理装置２００は、ステップＳ９５５において、顔画像不一致フラグをＯＮにして顔画像照合処理を終了する。
【００９１】
（ライブネス判定処理）
図９Ｄは、本実施形態に係る本人確認処理（Ｓ９０５）に含まれるライブネス判定処理（Ｓ９２５）の手順を示すフローチャートである。
【００９２】
情報処理装置２００は、ステップＳ９６１において、ユーザに指示する動作をランダムに選択してユーザに指示する。情報処理装置２００は、ステップＳ９６３において、撮像部が撮像した動画からユーザの画像または顔画像を取得する。そして、情報処理装置２００は、ステップＳ９６５において、ユーザに指示した動作とユーザが行った動作とが相当するか否かを判定する。例えば、ユーザの身体の部位の動作や顔内の部位の変化などが含まれてよい。
【００９３】
ユーザが指示通りに動作している場合、情報処理装置２００は、ステップＳ９６７において、ライブネス確認の回数が所定の回数になったか否かを判定する。所定回数でなければ、情報処理装置２００は、ステップＳ９６１に戻って、次のライブネス判定を続ける。所定回数になっていれば、情報処理装置２００は、ステップＳ９６９において、ライブネス成功フラグをＯＮにしてライブネス判定処理を終了する。
【００９４】
一方、ステップＳ９６５において指示通りの動作でなかった場合、情報処理装置２００は、ステップＳ９７１において、タイムアウトあるいはライブネス判定回数の上限か否かを判定する。タイムアウトあるいは回数の上限でなければ、ステップＳ９６１からライブネス判定を繰り返す。タイムアウトあるいは回数の上限であれば、情報処理装置２００は、ステップＳ９７３において、ライブネス失敗フラグをＯＮにしてライブネス判定処理を終了する。
【００９５】
（免許証判定処理）
図９Ｅは、本実施形態に係る本人確認処理（Ｓ９０５）に含まれる免許証判定処理（Ｓ９２９）の手順を示すフローチャートである。
【００９６】
情報処理装置２００は、ステップＳ９８１において、免許証の裏面を提示するようにユーザに指示する。一方、情報処理装置２００は、ステップＳ９８３において、ユーザ免許証のＩＣチップを読み取り、ユーザ免許証のＩＣチップの形式が標準免許証のＩＣチップ形式と一致するか否かを判定する。
【００９７】
情報処理装置２００は、ステップＳ９８５において、ユーザ免許証のＩＣチップの形式が標準免許証のＩＣチップ形式と一致しユーザ免許証が本物であると判定すると、ステップＳ９８７において、免許証本物フラグをＯＮにして免許証判定処理を終了する。一方、ユーザ免許証のＩＣチップの形式が標準免許証のＩＣチップ形式と一致せずユーザ免許証が偽物であると判定すると、ステップＳ９８９において、免許証偽物フラグをＯＮにして免許証判定処理を終了する。
【００９８】
なお、上記顔画像照合処理、ライブネス判定処理、免許証判定処理はそれぞれ独立したルーチンなので、マクロフローの所望の位置に順序や回数の制限無しに挿入することで、適切な手順や組み合わせの本人確認処理が実現できる。
【００９９】
《適格審査サーバの処理手順》
図１０は、本実施形態に係る適格審査サーバ３６０の処理手順を示すフローチャートである。
【０１００】
適格審査サーバ３６０は、ステップＳ１２０１において、情報処理装置２００としての通信端末から本人確認処理で収集された画像情報を取得する。適格審査サーバ３６０は、ステップＳ１２０３において、取得した画像情報の中から、免許証の表面画像および裏面画像を取り出して、ＯＣＲ処理を行ってユーザ情報を取得する。そして、ＯＣＲ処理での認識結果のユーザ情報を、確認または修正のため通信端末に送信する。通信端末からユーザの修正指示を受けると、適格審査サーバ３６０は、ステップＳ１２０７からステップＳ１２０９に進んで、修正情報を受信してユーザ情報に反映させる。
【０１０１】
適格審査サーバ３６０は、ステップＳ１２１１において、適格審査のための情報を取得する。そして、生成したユーザ情報と適格審査のための情報とを照合して、ステップＳ１２１３において、ユーザが適格か否かを判定する。ユーザが適格と判定されれば、適格審査サーバ３６０は、ステップＳ１２１５において、ユーザが口座開設に適格であることを銀行口座管理サーバ３７０に通知する。一方、ユーザが不適格と判定されれば、適格審査サーバ３６０は、ステップＳ１２１７において、ユーザが口座開設に不適格であることを通信端末からユーザに通知する。
【０１０２】
《銀行口座管理サーバの処理手順》
図１１は、本実施形態に係る銀行口座管理サーバ３７０の処理手順を示すフローチャートである。
【０１０３】
銀行口座管理サーバ３７０は、ステップＳ１５０１において、適格審査サーバ３６０からの適格審査結果の受信を待つ。適格審査合格の受信があると、銀行口座管理サーバ３７０は、ステップＳ１５０３において、通信端末でユーザ確認処理中に収集したユーザ情報を取得する。銀行口座管理サーバ３７０は、ステップＳ１５０５において、取得したユーザ情報に基づいて新規口座を開設する。そして、銀行口座管理サーバ３７０は、ステップＳ１５０７において、開設口座情報を、口座開設を要請したユーザの通信端末に通知する。
【０１０４】
本実施形態によれば、動画に含まれるユーザの顔画像と本人確認書類の顔画像との照合、指示された顔の変化とユーザの顔の変化との照合、および、本人確認書類の本物か偽物かの確認から本人確認するので、端末からの口座開設における本人確認およびユーザ情報の入力を簡易にさらに確実に行うことができる。
【０１０５】
［第３実施形態］
次に、本発明の第３実施形態に係る情報処理装置について説明する。本実施形態に係る情報処理装置は、上記第２実施形態と比べると、ライブネス判定をユーザの顔でなく本人確認書類によって行う点で異なる。その他の構成および動作は、第２実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。なお、本実施形態のライブネス判定は、第２実施形態のユーザの顔によるライブネス判定と組み合わせる、あるいは、２つのライブネス判定を同時に行うと、さらにユーザ確認の確度を高めることができる。
【０１０６】
《ライブネス判定処理の動作概要》
図１２は、本実施形態に係る情報処理装置１６００による本人確認処理（Ｓ１６２０）の動作概要を示す図である。なお、図１２は、図２Ａの本人確認処理（Ｓ２２０）に置き換えられる処理である。また、図１２において、図２Ｂと同様の構成要素には同じ参照番号を付して、重複する説明を省略する。
【０１０７】
本人確認処理（Ｓ１６２０）のライブネス判定においては、通信端末の“免許証を縦向きにしてください”とのメッセージに応えて、ユーザは顔画像１６０３を動かさずに、顔画像１６３２を含む免許証１６１３を縦方向になるよう動作する。ライブネス判定において、メッセージの指示とユーザ動作とが一致すれば一致１６３３が表示され、不一致であれば不一致１６４３が表示される。なお、ライブネス判定中も、顔画像１６０３と免許証１６１３とが同時に取得され保持されてよい。なお、このライブネス判定は、ランダムに選択された指示に応じたユーザ動作により判定されるが、ライブネス判定を確実にするためには、複数回のランダムに選択された指示に応じたユーザ動作により判定されるのが望ましい。ユーザは、不一致１６４３が表示されると、戻るボタン１６５３を押して再度、ライブネス判定を行うが、所定回数の不一致があればライブネスでないと判定して処理を終了してもよい。その場合には、今までの保持情報は破棄され、顔画像の認証から再開される。
【０１０８】
《通信端末の機能構成》
図１３は、本実施形態に係る情報処理装置１６００としての通信端末の機能構成を示すブロック図である。なお、図１３において、図５と同様の機能構成部には同じ参照番号を付して、重複する説明を省略する。
【０１０９】
情報処理装置１６００としての通信端末は、アプリケーション実行部５０３に代わって、アプリケーション実行部１７０３を備える。アプリケーション実行部１７０３は、免許証変化指示部１７３８と、ライブネス判定部１７３９と、データベース１７５０と、を有する。ここで、免許証変化指示部１７３８とライブネス判定部１７３９とが、図１の第１判定部１０４に相当する。さらに、ユーザ本人確認部５４０は、顔特徴量照合部５３７の照合結果とライブネス判定部１７３９の判定結果とによりユーザの本人確認をする場合と、さらに免許証本物判定部５４２の判定結果を考慮する場合とがある。
【０１１０】
免許証変化指示部１７３８は、ライブネス判定のため、ユーザに対してランダムに選択された免許証を変化させる動作を、表示部５０４や音声入出力部５０７からの出力により指示する。ライブネス判定部１７３９は、免許証変化指示部１７３８が出力した免許証を変化させる動作指示と、免許証抽出部５３４からの免許証画像に見られる変化とを照合して、相当しているか否かを判定する。
【０１１１】
データベース１７５０は、本人確認用情報保持部１７５１とユーザ情報保持部１７５２とを有する。本人確認用情報保持部１７５１は、本人確認に用いられる種々のアルゴリズムやパラメータを保存する。ユーザ情報保持部１７５２は、本人確認処理中に得られた動画や顔画像、顔特徴量、および、免許証の表面画像／裏面画像を保持する。図１７には、データベース１７５０と関連する各機能構成部とを結ぶ線は煩雑さを避けるために図示されていないが、本人確認用情報保持部１７５１からは、本人確認用情報を必要とする各機能構成部に情報が送付され、ユーザ情報保持部１７５２には、各機能構成部で取得されたユーザ情報が保持される。
【０１１２】
（ユーザ情報保持部および本人確認用情報保持部）
図１４は、本実施形態に係るユーザ情報保持部１７５２および本人確認用情報保持部１７５１の構成を示す図である。なお、図１４において、図６Ａおよび図６Ｂと同様の構成要素については、重複する説明を省略する。
【０１１３】
図１４のユーザ情報保持部１７５２は、図６Ａのライブネス関連保持部６３０をライブネス関連保持部１８３０に置き代え、他の保持部６１０、６２０、６４０を維持した図である。ライブネス関連保持部１８３０は、ライブネス判定関連１８３１として、例えば、ライブネス指示情報とライブネス反応免許証画像とを保持する。
【０１１４】
また、図１４の本人確認用情報保持部１７５１は、図６Ｂのライブネス指示情報保持部６６０をライブネス指示情報保持部１８６０に置き代え、他の保持部６６０、６７０を維持した図である。ライブネス指示情報保持部１８６０は、ライブネス指示ＩＤ１８６１に対応付けて、指示内容１８６２、指示フラグ６６３、ライブネス判定アルゴリズム１８６３を記憶する。指示内容１８６２には、免許証の提示変化として、例えば、右９０度回転、左９０度回転、１８０度回転、親指上側、左右持ち替え、などが含まれる。その他、免許証の上下を把持するか／左右を把持するか、指の数や種類なども含まれる。
【０１１５】
（ライブネス判定テーブル）
図１５は、本実施形態に係るライブネス判定テーブル１９２０の構成を示す図である。なお、ライブネス判定テーブル１９２０は、ライブネス判定部１７３９が免許証の変化指示とユーザの免許証の変化とを照合するために使用される。
【０１１６】
ライブネス判定テーブル１９２０は、複数のライブネス指示１９２１に対応付けて、例えば、それぞれのユーザによるライブネス反応免許証画像１９２２と、一致／不一致フラグ１９２３と、を記憶する。そして、複数回の一致／不一致フラグ１９２３に基づいて判定した、ライブネス判定結果１９２４を記憶する。なお、ライブネス指示１９２１とライブネス反応免許証画像１９２２とが一致するか否かを閾値により判別してもよい。
【０１１７】
（ライブネス判定処理）
図１６は、本実施形態に係るライブネス判定処理（Ｓ９２５）の他の手順を示すフローチャートである。なお、図１６において、図９Ｄと同様のステップには同じステップ番号を付して、重複する説明を省略する。また、図１６には免許証の画像変化についてのみ説明するが、これに限定されず、他の免許証提示の変化も含む。
【０１１８】
情報処理装置１６００は、ステップＳ２０７１において、免許証の提示の変化をランダムに選択してユーザに指示する。情報処理装置１６００は、ステップＳ２０７３において、撮像部が撮像した動画から免許証画像を抽出する。そして、情報処理装置１６００は、ステップＳ２０７５において、ステップＳ２０７１での免許証の提示変化の指示とステップＳ２０７３で抽出した免許証画像とが相当しているか否かを判定する。
【０１１９】
なお、本実施形態においては、免許証側におけるライブネス判定として、特に、免許証の向きなどを説明したが、免許証の向きに限定されず、ユーザの免許証の持ち方（指の位置や数などを含む）や免許証を提示するユーザの動作など、ライブネス判定が容易でユーザに負担の少ない動作であってもよい。
【０１２０】
本実施形態によれば、ユーザの顔でなく本人確認書類によってライブネス判定が実現できる。さらに、ユーザの顔によるライブネス判定と組み合わせると、さらにユーザ確認の確度を高めることができる。
【０１２１】
［第４実施形態］
次に、本発明の第４実施形態に係る情報処理装置について説明する。本実施形態に係る情報処理装置は、上記第２実施形態および第３実施形態と比べると、本人確認書類としての免許証からのユーザ情報の取得ができたか否かを判定して、取得できてない場合に再取得（再撮像）する点で異なる。その他の構成および動作は、第２実施形態または第３実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。
【０１２２】
《ユーザ情報取得処理の動作概要》
図１７は、本実施形態に係る情報処理装置２１００による本人確認処理（Ｓ２１２０）の動作概要を示す図である。なお、図１７は、図２Ａの本人確認処理（Ｓ２２０）に置き換えられる処理である。また、図１７において、図２Ｂと同様の構成要素には同じ参照番号を付して、重複する説明を省略する。
【０１２３】
図１７においては、ユーザの顔画像と免許証の顔画像との照合時の撮像動画中の免許証の一部が妨害物２１６２のため撮像されていない。この場合に、顔画像の照合で一致をしても免許証の表面画像からユーザ情報を確実には取得できない。本実施形態では、妨害物２１６２があれば、ユーザにメッセージ“隠れています”２１７２を報知して、妨害物２１６２の無い免許証の表面画像を再撮像するように指示する。また、ライブネス判定中の免許証の一部が妨害物２１６３のため撮像されていない。この場合に、ライブネス判定はＯＫでも免許証の表面画像からユーザ情報を確実には取得できない。本実施形態では、妨害物２１６３があれば、ユーザにメッセージ“隠れています”２１７３を報知して、妨害物２１６３の無い免許証の表面画像を再撮像するように指示する。さらに、免許証の裏面撮像中の免許証の一部が妨害物（例えば、ユーザの指など）２１６５のため撮像されていない。この場合に、免許証の裏面画像からユーザ情報を確実には取得できない。本実施形態では、妨害物２１６５があれば、ユーザにメッセージ“隠れています”２１７５を報知して、妨害物２１６５の無い免許証の裏面画像を再撮像するように指示する。
【０１２４】
《通信端末の機能構成》
図１８は、本実施形態に係る情報処理装置２１００としての通信端末の機能構成を示すブロック図である。なお、図１８において、図５と同様の機能構成部には同じ参照番号を付して、重複する説明を省略する。
【０１２５】
情報処理装置２１００は、アプリケーション実行部２１０３を備える。このアプリケーション実行部２１０３は、さらにユーザ情報取得可否検出部２２３４を有する。ユーザ情報取得可否検出部２２３４は、ユーザ情報の取得が可能であるか否かを、特に、免許証の表面画像あるいは裏面画像が妨害物無しに取得されているかを判定して、口座開設の適格審査に必要なユーザ情報の取得可否を検出する。そして、妨害物が有って免許証の表面画像あるいは裏面画像が正常に取得できないと検出した場合には、表示部５０４または音声入出力部５０７から免許証の表面画像あるいは裏面画像の再撮像を要請する。
【０１２６】
（本人確認処理）
図１９は、本実施形態に係る本人確認処理（Ｓ９０５）の他の手順を示すフローチャートである。なお、図１９において、図９Ｂと同様のステップには同じステップ番号を付して、重複する説明を省略する。
【０１２７】
情報処理装置２１００は、ステップＳ２３２３において、顔画像照合処理中に動画から取得した免許証の表面画像に妨害物が無く、ユーザ情報を取得可能であるかを検出する。ユーザ情報を取得可能であれば、情報処理装置２１００は、ステップＳ９２４に進んで、免許証の表面画像を適格審査に使用するユーザ情報を取得するために保存する。ユーザ情報を取得可能でなければ、情報処理装置２１００は、ステップＳ９２１に戻って、再度、顔画像照合処理による免許証の表面画像の撮像を行う。
【０１２８】
情報処理装置２１００は、ステップＳ２３２７において、ライブネス判定中に動画から取得した免許証の表面画像に妨害物が無く、ユーザ情報を取得可能であるかを検出する。ユーザ情報を取得可能であれば、情報処理装置２１００は、ステップＳ９２８に進んで、免許証の表面画像を適格審査に使用するユーザ情報を取得するために保存する。ユーザ情報を取得可能でなければ、情報処理装置２１００は、ステップＳ９２５に戻って、再度、ライブネス判定処理による免許証の表面画像の撮像を行う。なお、ライブネス判定中に動画から取得した免許証の表面画像が後の処理に必要でなければ、ステップＳ２３２７は削除してもよい。
【０１２９】
情報処理装置２１００は、ステップＳ２３３１において、免許証判定処理後に動画から取得した免許証の裏面画像に妨害物が無く、ユーザ情報を取得可能であるかを検出する。ユーザ情報を取得可能であれば、情報処理装置２１００は、ステップＳ９３２に進んで、免許証の裏面画像を適格審査に使用するユーザ情報を取得するために保存する。ユーザ情報を取得可能でなければ、情報処理装置２１００は、ステップＳ９２９に戻って、再度、免許証判定処理による免許証の裏面画像の撮像を行う。
【０１３０】
本実施形態によれば、本人確認書類の画像情報の取得ミスによるユーザ情報の不足を未然に防ぐことができる。
【０１３１】
［第５実施形態］
次に、本発明の第５実施形態に係る情報処理装置について説明する。本実施形態に係る情報処理装置は、上記第２実施形態乃至第４実施形態と比べると、本人確認書類として免許証でなく、他の顔画像を有するパスポートやマイナンバーカードなどを用いる点で異なる。その他の構成および動作は、第２実施形態から第４実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。
【０１３２】
《本人確認処理の動作概要》
図２０は、本実施形態に係る情報処理装置２４０１または２４０２による本人確認処理（Ｓ２４０１、Ｓ２４０２）の動作概要を示す図である。なお、図２０は、図２Ａの本人確認処理（Ｓ２２０）に置き換えられる処理であり、Ｓ２４０１は本人確認書類としてパスポートを提示する場合を示し、Ｓ２４０２はマイナンバーカードを提示する場合を示している。また、図２０において、図２Ｂと同様の構成要素には同じ参照番号を付して、重複する説明を省略する。
【０１３３】
ステップＳ２４０１において、ユーザの顔画像とパスポートの顔画像とを照合する場合には、顔画像２４２２を含むパスポート２４１２が撮像され、ライブネス判定時には、顔画像２４２３を含むパスポート２４１３が撮像される。なお、パスポートには裏面はないので、パスポートを裏返す動作は無くてもよいが、他のユーザ情報などを含むパスポート頁を提示させたりしてもよい。
【０１３４】
ステップＳ２４０２において、ユーザの顔画像とマイナンバーカードの顔画像とを照合する場合には、顔画像２４４２を含むマイナンバーカード２４３２が撮像され、ライブネス判定時には、顔画像２４４３を含むマイナンバーカード２４３３が撮像される。なお、マイナンバーカードの裏面は個人情報なので、マイナンバーカードを裏返す動作は無くてもよい。
【０１３５】
なお、本実施形態においては、本人確認に使用される本人確認書類としてパスポートやマイナンバーカードを例に説明したが、ユーザの顔画像とユーザ情報とを含む本人確認書類であればこれらに限らない。
【０１３６】
本実施形態によれば、他の顔画像を有する本人確認書類を用いても、免許証と同等の効果を奏することができる。
【０１３７】
［第６実施形態］
次に、本発明の第６実施形態に係る情報処理装置について説明する。本実施形態に係る情報処理装置は、上記第２実施形態乃至第５実施形態と比べると、情報処理装置としての通信端末において免許証などの本人確認書類の画像からＯＣＲ処理によりユーザ情報を認識する点で異なる。その他の構成および動作は、第２実施形態から第５実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。なお、ＯＣＲ処理で認識した文字コードをさらに解析して、本人確認書類のフォーマットに整理して適格審査サーバに送信してもよい。また、情報処理装置の性能が改善されて負荷の問題が解消されるのであれば、さらに、他の口座開設に関連する処理を情報処理装置としての通信端末で実現することができる。
【０１３８】
《通信端末の機能構成》
図２１は、本実施形態に係る情報処理装置２５００としての通信端末の機能構成を示すブロック図である。なお、図２１においては、図５と同様の機能構成部には同じ参照番号を付して、重複する説明を省略する。
【０１３９】
情報処理装置２５００としての通信端末は、ＯＣＲ処理部２５４４と、ユーザ情報送信部２５４３と、データベース２５５０と、を備える。ＯＣＲ処理部２５４４は、撮像部が撮像した動画から免許証抽出部５３４で抽出した免許証の表面画像や裏面画像を、データベース２５５０の本人確認用情報保持部２５５１に保持されたＯＣＲ用アルゴリズムに基づいてＯＣＲ処理して、文字コードによるユーザ情報に変換する。そして、変換結果の文字コードによるユーザ情報をデータベース２５５０のユーザ情報保持部２５５２に保持する。ユーザ情報送信部２５４３は、ユーザ情報保持部２５５２に保持された、撮像されたユーザの動画および顔画像と免許証から取得した文字コードによるユーザ情報とを適格審査サーバ３６０に送信する。
【０１４０】
データベース２５５０は、本人確認用情報保持部２５５１とユーザ情報保持部２５５２とを含み、本人確認用情報保持部２５５１には、図６Ｂの本人確認用情報保持部５５１に加えてＯＣＲ用アルゴリズム（不図示）が保持される。また、ユーザ情報保持部２５５２には、図６Ａのユーザ情報保持部５５２の免許証表面画像や免許証裏面画像に代わって、ＯＣＲ処理済みの文字コードによるユーザ情報（不図示）が保持される。
【０１４１】
《通信端末の処理手順》
図２２は、本実施形態に係る情報処理装置２５００としての通信端末の処理手順を示すフローチャートである。なお、図２２において、図９Ａと同様のステップには同じステップ番号を付して、重複する説明を省略する。
【０１４２】
情報処理装置２５００は、ステップＳ２６０９において、撮像部が撮像した動画から抽出した免許証の表面画像および裏面画像をＯＣＲ処理して、文字コードによるユーザ情報を生成復元する。情報処理装置２５００は、ステップＳ２６１１において、ＯＣＲ処理済みのユーザ情報を表示部５０４に表示してユーザの確認または修正を行う。そして、情報処理装置２５００は、ステップＳ２６１３において、顔画像と共に、ユーザが確認または修正したユーザ情報を適格審査用情報として適格審査サーバに送信する。
【０１４３】
本実施形態によれば、画像データの送信に比較して通信容量を削減できて通信トラフィックを防ぎ、適格審査サーバや銀行口座管理サーバの負担を軽減することができる。
【０１４４】
［第７実施形態］
次に、本発明の第７実施形態に係る情報処理について説明する。本実施形態に係る情報処理装置は、上記第２実施形態乃至第６実施形態と比べると、口座開設ではなく口座利用を行う点で異なる。その他の構成および動作は、第２実施形態から第６実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。なお、本実施形態においては、口座利用アプリケーションを口座開設アプリケーションとは別個のアプリケーションとして説明しているが、一体化された口座処理アプリケーションとして提供されてもよい。
【０１４５】
《口座利用の動作概要》
図２３は、本実施形態に係る情報処理装置２７００による口座利用の動作概要を示す図である。なお、図２３において、図２Ａと同様のステップには同じステップ番号を付して、重複する説明を省略する。
【０１４６】
図２３において、ステップＳ２１０とＳ２２０とは図２Ａと同様である。ただし、ステップＳ２２０における本人確認は口座開設時に一度確認済みであるので、確実性を保った上で図２Ａよりも簡略化された手順が使用される。例えば、既に口座と共に本人の顔画像は登録されているので、本人確認書類の本物確認や裏面画像の取得は省略可能である。なお、所定金額、例えば２００万円を超える大口現金取引等の犯収法で定めらられた「特定取引」を対象とするような場合などには、ステップＳ２２０における本人確認を援用することができる。
【０１４７】
情報処理装置２７００としての通信端末では、ステップＳ２７３０において、本人確認処理結果の情報と共に、ユーザにより指示された自分の口座からの送金要請が銀行口座管理サーバ３７０に送られる。そして、銀行口座管理サーバ３７０で送金要請が審査されて送金完了が報告されると、情報処理装置２７００としての通信端末では、ステップＳ２７４０において、送金完了をユーザに通知する。なお、送金処理が承認されなかった場合や送金処理の失敗時には、送金エラーがユーザに通知される。
【０１４８】
《口座利用システムの動作シーケンス》
図２４は、本実施形態に係る情報処理装置２７００を含む口座利用システムの動作手順を示すシーケンス図である。図２４において、図４Ａと同様のステップには同じステップ番号を付与し、重複する説明を省略する。
【０１４９】
情報処理装置２７００としての通信端末は、ステップＳ２８０１において、口座利用アプリケーションを取得して起動する。情報処理装置２７００としての通信端末は、ステップＳ２８０３において、ユーザが入力したログイン情報その他を取得して保存する。
【０１５０】
情報処理装置２７００としての通信端末は、ステップＳ２８０５において、口座利用のためのユーザ情報の送信に先立って、情報処理装置２７００としての通信端末のみでユーザの本人確認処理を実施する。かかるステップＳ２８０５の処理において、通常の口座利用では図４ＡにおけるステップＳ４６１〜Ｓ４６５は省略しているが、上記のように、定金額、例えば２００万円を超える大口現金取引等の犯収法で定めらられた「特定取引」を対象とするような場合などには、図４ＡにおけるステップＳ４６１〜Ｓ４６５を実施してもよい。
【０１５１】
ステップＳ２８０５でユーザの本人確認処理が成功すると、情報処理装置２７００としての通信端末は、ステップＳ２８０７において、ユーザが入力した口座利用情報を取得する。そして、情報処理装置２７００としての通信端末は、ステップＳ２８０９において、ステップＳ２８０５の本人確認処理中に情報処理装置２７００が取得して保持していたユーザ顔画像/動画や免許証表面画像と共に、口座利用情報を銀行口座管理サーバ３７０に送信する。なお、上記「特定取引」を対象とするような場合などには、図４ＢのＳ４０７〜Ｓ４１３に示したような適格審査サーバ３６０による適格審査を行うようにしてもよい。
【０１５２】
銀行口座管理サーバ３７０は、ステップＳ２８１１において、情報処理装置２７００から受信したユーザ情報と口座利用情報とに基づいて、口座利用処理を実施する。そして、口座利用処理が完了すると、銀行口座管理サーバ３７０は、ステップＳ２８１３において、口座利用完了の通知を情報処理装置２７００に送信する。
【０１５３】
情報処理装置２７００としての通信端末は、ステップＳ２８１５において、銀行口座管理サーバ３７０から受領した口座利用完了の通知をユーザに報知して、口座利用の確認をする。
【０１５４】
《通信端末の機能構成》
図２５は、本実施形態に係る情報処理装置２７００としての通信端末の機能構成を示すブロック図である。図２５において、図５と同様の機能構成部には同じ参照番号を付して、重複する説明を省略する。
【０１５５】
情報処理装置２７００としての通信端末は、口座利用アプリケーションを実行するアプリケーション実行部２９０３を備える。アプリケーション実行部２９０３は、口座利用情報取得部２９４１と、ユーザ情報／口座利用情報送信部２９４３と、口座利用完了受信部２９４４と、口座利用完了通知部２９４５と、データベース２９５０と、を有する。
【０１５６】
口座利用情報取得部２９４１は、操作部５０５からユーザが入力指示した口座利用情報を取得する。ユーザ情報／口座利用情報送信部２９４３は、ユーザの本人確認中に取得したユーザ情報と共に、口座利用情報取得部２９４１が取得した口座利用情報を銀行口座管理サーバ３７０に送信する。口座利用完了受信部２９４４は、銀行口座管理サーバ３７０における口座利用処理結果を受信する。口座利用完了通知部２９４５は、口座利用完了受信部２９４４が銀行口座管理サーバ３７０から受信した口座利用処理結果を表示部５０４や音声入出力部５０７からユーザに通知する。
【０１５７】
データベース２９５０は、口座利用履歴保持部２９５３を有する。口座利用履歴保持部２９５３は、ユーザによる口座利用の履歴を保持する。図示しないが、口座利用履歴保持部２９５３には、ユーザＩＤ、タイムスタンプ、口座番号、口座利用情報などが機密保持されるのが望ましい。
【０１５８】
なお、本実施形態においては、すでに口座開設時の本人確認があるので、免許証が本物かの判定や免許証の裏面画像の撮像についてはユーザ操作の簡略化のために省略した。さらに、口座利用時には、免許証提示なしに、端末内に口座開設時に保持された顔画像および特徴量と、撮像部で撮像したユーザ顔画像および特徴量との照合と、ライブネス判定であってもよい。あるいは、銀行口座管理サーバ３７０に登録または更新された顔画像および特徴量を取得し、撮像部で撮像したユーザ顔画像および特徴量との照合と、ライブネス判定であってもよい。このように、口座利用時には、口座開設時よりも本人確認の手順を簡略化することで、ユーザの手間を省くのが望ましい。
【０１５９】
本実施形態によれば、口座利用時においても、端末における本人確認および口座利用処理を簡易に確実に行うことができる。
【０１６０】
［他の実施形態］
なお、本実施形態において、本人確認書類としては、免許証、パスポート、マイナンバーカードを例に説明したが、本発明は、ユーザの顔画像とユーザ適格審査に用いるユーザ情報とを有するさらに他の書類であっても適用が可能であり、同様の効果を奏することができる。
【０１６１】
また、インターネットバンキングに入っていれば、免許証の本物確認やライブネスは簡略でき、顔画像照合と本人確認書類からのユーザ情報の収集（免許証であれば、表面画像および裏面画像の取得）で適格審査に進むことができる。
【０１６２】
さらに、ユーザの本人確認結果やユーザの口座開設の適格審査結果を、ブロックチェーンを利用して共有することによって、１つの銀行の口座開設時の情報を他の銀行の口座開設にも用いることができるので、ユーザによる口座開設の操作をより簡易により確実に実現することができる。
【０１６３】
以上、実施形態を参照して本願発明を説明したが、本願発明は上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。また、それぞれの実施形態に含まれる別々の特徴を如何様に組み合わせたシステムまたは装置も、本発明の範疇に含まれる。
【０１６４】
また、本発明は、複数の機器から構成されるシステムに適用されてもよいし、単体の装置に適用されてもよい。さらに、本発明は、実施形態の機能を実現する情報処理プログラムが、システムあるいは装置に直接あるいは遠隔から供給される場合にも適用可能である。したがって、本発明の機能をコンピュータで実現するために、コンピュータにインストールされるプログラム、あるいはそのプログラムを格納した媒体、そのプログラムをダウンロードさせるＷＷＷ(World Wide Web)サーバも、本発明の範疇に含まれる。特に、少なくとも、上述した実施形態に含まれる処理ステップをコンピュータに実行させるプログラムを格納した非一時的コンピュータ可読媒体（non-transitory computer readable medium）は本発明の範疇に含まれる。
【０１６５】
［実施形態の他の表現］
上記の実施形態の一部または全部は、以下の付記のようにも記載されうるが、以下には限られない。
（付記１）
動画に含まれるユーザの顔画像から第１特徴量を抽出する第１特徴量抽出部と、
前記動画に含まれる、前記ユーザを証明する本人確認書類の顔画像から第２特徴量を抽出する第２特徴量抽出部と、
前記第１特徴量と前記第２特徴量とが一致するか否かを照合する第１照合部と、
前記ユーザに所定の動作を指示し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当するか否かを判定する第１判定部と、
前記第１特徴量と前記第２特徴量とが一致し、かつ、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当する場合に、前記ユーザが本人であることを確認する確認部と、
を備える情報処理装置。
（付記２）
前記ユーザの顔画像と前記ユーザを証明する本人確認書類の顔画像とは、前記動画の同じフレーム内の画像であり、
前記第１照合部の照合と前記第１判定部の判定とは並行に処理される付記１に記載の情報処理装置。
（付記３）
前記第１照合部において前記第１特徴量と前記第２特徴量とが一致すると判定された場合に、前記第１判定部による判定を実施する付記１に記載の情報処理装置。
（付記４）
前記第１判定部において前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当する場合に、前記第１照合部による照合を実施する付記１に記載の情報処理装置。
（付記５）
前記ユーザに指示される動作は、前記ユーザの顔を含むユーザの身体の動作および前記本人確認書類の提示方法の変化の少なくともいずれかを含む付記１乃至４のいずれか１項に記載の情報処理装置。
（付記６）
前記本人確認書類が本物であるか否か判定する第２判定部、をさらに備え、
前記確認部は、さらに前記本人確認書類が本物である場合に、前記ユーザが本人であることを確認する付記１乃至５のいずれか１項に記載の情報処理装置。
（付記７）
前記本人確認書類の判定中に、前記動画に含まれるユーザの顔画像から第３特徴量を抽出する第３特徴量抽出部と、
前記第１特徴量と前記第３特徴量とが一致するか否かを照合する第２照合部と、
をさらに備え、
前記第２判定部は、さらに前記第１特徴量と前記第３特徴量とが一致する場合に、前記本人確認書類を本物と判定する付記６に記載の情報処理装置。
（付記８）
前記本人確認書類の顔画像を含まない面の画像と共に、前記動画に含まれる前記ユーザの顔画像から第４特徴量を抽出する第４特徴量抽出部と、
前記第１特徴量と前記第４特徴量とが一致するか否かを照合する第３照合部と、
前記第１特徴量と前記第４特徴量とが一致する場合に、前記本人確認書類の顔画像を含まない面の画像が本物であると判定する第３判定部と、
をさらに備える付記６または７に記載の情報処理装置。
（付記９）
前記動画と、前記動画に含まれる前記ユーザの顔画像と、前記動画に含まれる前記本人確認書類の画像と、を保持する保持部と、
前記ユーザが本人であり、前記本人確認書類が本物であり、かつ、前記本人確認書類の顔画像を含まない面の画像が本物である場合に、前記保持部に保持された、前記動画と、前記動画に含まれる前記ユーザの顔画像と、前記動画に含まれる前記本人確認書類と、をユーザ情報として前記ユーザの適格審査を行う装置に送信する送信部と、
をさらに備える付記８に記載の情報処理装置。
（付記１０）
前記動画に含まれる前記本人確認書類の画像から文字を認識して文字コードに変換する変換部を、さらに備える付記１乃至９のいずれか１項に記載の情報処理装置。
（付記１１）
前記情報処理装置は通信端末である付記１乃至１０のいずれか１項に記載の情報処理装置。
（付記１２）
前記本人確認書類は、免許証、パスポート、またはマイナンバーカードである付記１乃至１１のいずれか１項に記載の情報処理装置。
（付記１３）
動画に含まれるユーザの顔画像から第１特徴量を抽出する第１特徴量抽出ステップと、
前記動画に含まれる、前記ユーザを証明する本人確認書類の顔画像から第２特徴量を抽出する第２特徴量抽出ステップと、
前記第１特徴量と前記第２特徴量とが一致するか否かを照合する第１照合ステップと、
前記ユーザに所定の動作を指示し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当するか否かを判定する第１判定ステップと、
前記第１特徴量と前記第２特徴量とが一致し、かつ、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当する場合に、前記ユーザが本人であることを確認する確認ステップと、
を含む情報処理方法。
（付記１４）
動画に含まれるユーザの顔画像から第１特徴量を抽出する第１特徴量抽出ステップと、
前記動画に含まれる、前記ユーザを証明する本人確認書類の顔画像から第２特徴量を抽出する第２特徴量抽出ステップと、
前記第１特徴量と前記第２特徴量とが一致するか否かを照合する第１照合ステップと、
前記ユーザに所定の動作を指示し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当するか否かを判定する第１判定ステップと、
前記第１特徴量と前記第２特徴量とが一致し、かつ、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当する場合に、前記ユーザが本人であることを確認する確認ステップと、
をコンピュータに実行させる情報処理プログラム。
（付記１５）
動画に含まれるユーザの顔画像から抽出した第１特徴量と、前記動画に含まれる、前記ユーザを証明する本人確認書類の顔画像から抽出した第２特徴量とを照合する照合部と、
前記ユーザに所定の動作を指示し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当するか否かを判定する第１判定部と、
前記本人確認書類が本物であるか否かを判定する第２判定部と、
前記第１特徴量と前記第２特徴量とが一致し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当し、かつ、前記本人確認書類が本物であると判定された場合に、前記ユーザが本人であることを確認する確認部と、
前記本人確認書類の顔画像を含まない面の画像と共に、前記動画に含まれる前記ユーザの顔画像から抽出した第４特徴量と前記第１特徴量とが一致する場合に、前記本人確認書類の顔画像を含まない面の画像が本物であると判定する第３判定部と、
前記ユーザが本人であり、前記本人確認書類が本物であり、かつ、前記本人確認書類の顔画像を含まない面の画像が本物である場合に、前記動画に含まれる前記本人確認書類の画像から文字を認識して文字コードに変換して、前記動画に含まれる前記ユーザの顔画像および前記本人確認書類の内容と、あらかじめ登録された情報との比較に基づいて、ユーザの適格性を審査する適格審査部と、
適格と判定されたユーザに対する口座を開設する口座開設部と、
を備える口座開設システム。
（付記１６）
動画に含まれるユーザの顔画像から抽出した第１特徴量と、前記動画に含まれる、前記ユーザを証明する本人確認書類の顔画像から抽出した第２特徴量とを照合する照合ステップと、
前記ユーザに所定の動作を指示し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当するか否かを判定する第１判定ステップと、
前記本人確認書類が本物であるか否かを判定する第２判定ステップと、
前記第１特徴量と前記第２特徴量とが一致し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当し、かつ、前記本人確認書類が本物であると判定された場合に、前記ユーザが本人であることを確認する確認ステップと、
前記本人確認書類の顔画像を含まない面の画像と共に、前記動画に含まれる前記ユーザの顔画像から抽出した第４特徴量と前記第１特徴量とが一致する場合に、前記本人確認書類の顔画像を含まない面の画像が本物であると判定する第３判定ステップと、
前記ユーザが本人であり、前記本人確認書類が本物であり、かつ、前記本人確認書類の顔画像を含まない面の画像が本物である場合に、前記動画に含まれる前記本人確認書類の画像から文字を認識して文字コードに変換して、前記動画に含まれる前記ユーザの顔画像および前記本人確認書類の内容と、あらかじめ登録された情報との比較に基づいて、ユーザの適格性を審査する適格審査ステップと、
適格と判定されたユーザに対する口座を開設する口座開設ステップと、
を含む口座開設方法。
【０１６６】
この出願は、２０１８年７月２５日に出願された日本国特許出願  特願２０１８−１３９３７４号を基礎とする優先権を主張し、その開示の全てをここに取り込む。
【図１】
2020022014.tif 000003
【図２Ａ】
2020022014.tif 000004
【図２Ｂ】
2020022014.tif 000005
【図３】
2020022014.tif 000006
【図４Ａ】
2020022014.tif 000007
【図４Ｂ】
2020022014.tif 000008
【図５】
2020022014.tif 000009
【図６Ａ】
2020022014.tif 000010
【図６Ｂ】
2020022014.tif 000011
【図７Ａ】
2020022014.tif 000012
【図７Ｂ】
2020022014.tif 000013
【図７Ｃ】
2020022014.tif 000014
【図８】
2020022014.tif 000015
【図９Ａ】
2020022014.tif 000016
【図９Ｂ】
2020022014.tif 000017
【図９Ｃ】
2020022014.tif 000018
【図９Ｄ】
2020022014.tif 000019
【図９Ｅ】
2020022014.tif 000020
【図１０】
2020022014.tif 000021
【図１１】
2020022014.tif 000022
【図１２】
2020022014.tif 000023
【図１３】
2020022014.tif 000024
【図１４】
2020022014.tif 000025
【図１５】
2020022014.tif 000026
【図１６】
2020022014.tif 000027
【図１７】
2020022014.tif 000028
【図１８】
2020022014.tif 000029
【図１９】
2020022014.tif 000030
【図２０】
2020022014.tif 000031
【図２１】
2020022014.tif 000032
【図２２】
2020022014.tif 000033
【図２３】
2020022014.tif 000034
【図２４】
2020022014.tif 000035
【図２５】
2020022014.tif 000036
【手続補正書】
【提出日】令和3年1月22日(2021.1.22)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
動画に含まれるユーザの顔画像から第１特徴量を抽出する第１特徴量抽出部と、
前記動画に含まれる、前記ユーザを証明する本人確認書類の顔画像から第２特徴量を抽出する第２特徴量抽出部と、
前記第１特徴量と前記第２特徴量とが一致するか否かを照合する第１照合部と、
前記ユーザに所定の動作を指示し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当するか否かを判定する第１判定部と、
前記第１特徴量と前記第２特徴量とが一致し、かつ、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当する場合に、前記ユーザが本人であることを確認する確認部と、
を備える情報処理装置。
【請求項２】
前記ユーザの顔画像と前記ユーザを証明する本人確認書類の顔画像とは、前記動画の同じフレーム内の画像であり、
前記第１照合部の照合と前記第１判定部の判定とは並行に処理される請求項１に記載の情報処理装置。
【請求項３】
前記第１照合部において前記第１特徴量と前記第２特徴量とが一致すると判定された場合に、前記第１判定部による判定を実施する、または、前記第１判定部において前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当する場合に、前記第１照合部による照合を実施する請求項１に記載の情報処理装置。
【請求項４】
前記ユーザに指示される動作は、前記ユーザの顔を含むユーザの身体の動作および前記本人確認書類の提示方法の変化の少なくともいずれかを含む請求項１乃至３のいずれか１項に記載の情報処理装置。
【請求項５】
前記本人確認書類が本物であるか否か判定する第２判定部、をさらに備え、
前記確認部は、さらに前記本人確認書類が本物である場合に、前記ユーザが本人であることを確認する請求項１乃至４のいずれか１項に記載の情報処理装置。
【請求項６】
前記本人確認書類の判定中に、前記動画に含まれるユーザの顔画像から第３特徴量を抽出する第３特徴量抽出部と、
前記第１特徴量と前記第３特徴量とが一致するか否かを照合する第２照合部と、
をさらに備え、
前記第２判定部は、さらに前記第１特徴量と前記第３特徴量とが一致する場合に、前記本人確認書類を本物と判定する請求項５に記載の情報処理装置。
【請求項７】
前記本人確認書類の顔画像を含まない面の画像と共に、前記動画に含まれる前記ユーザの顔画像から第４特徴量を抽出する第４特徴量抽出部と、
前記第１特徴量と前記第４特徴量とが一致するか否かを照合する第３照合部と、
前記第１特徴量と前記第４特徴量とが一致する場合に、前記本人確認書類の顔画像を含まない面の画像が本物であると判定する第３判定部と、
をさらに備える請求項５または６に記載の情報処理装置。
【請求項８】
前記動画と、前記動画に含まれる前記ユーザの顔画像と、前記動画に含まれる前記本人確認書類の画像と、を保持する保持部と、
前記ユーザが本人であり、前記本人確認書類が本物であり、かつ、前記本人確認書類の顔画像を含まない面の画像が本物である場合に、前記保持部に保持された、前記動画と、前記動画に含まれる前記ユーザの顔画像と、前記動画に含まれる前記本人確認書類と、をユーザ情報として前記ユーザの適格審査を行う装置に送信する送信部と、
をさらに備える請求項７に記載の情報処理装置。
【請求項９】
動画に含まれるユーザの顔画像から第１特徴量を抽出する第１特徴量抽出ステップと、
前記動画に含まれる、前記ユーザを証明する本人確認書類の顔画像から第２特徴量を抽出する第２特徴量抽出ステップと、
前記第１特徴量と前記第２特徴量とが一致するか否かを照合する第１照合ステップと、
前記ユーザに所定の動作を指示し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当するか否かを判定する第１判定ステップと、
前記第１特徴量と前記第２特徴量とが一致し、かつ、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当する場合に、前記ユーザが本人であることを確認する確認ステップと、
を含む情報処理方法。
【請求項１０】
動画に含まれるユーザの顔画像から抽出した第１特徴量と、前記動画に含まれる、前記ユーザを証明する本人確認書類の顔画像から抽出した第２特徴量とを照合する照合ステップと、
前記ユーザに所定の動作を指示し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当するか否かを判定する第１判定ステップと、
前記本人確認書類が本物であるか否かを判定する第２判定ステップと、
前記第１特徴量と前記第２特徴量とが一致し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当し、かつ、前記本人確認書類が本物であると判定された場合に、前記ユーザが本人であることを確認する確認ステップと、
前記本人確認書類の顔画像を含まない面の画像と共に、前記動画に含まれる前記ユーザの顔画像から抽出した第４特徴量と前記第１特徴量とが一致する場合に、前記本人確認書類の顔画像を含まない面の画像が本物であると判定する第３判定ステップと、
前記ユーザが本人であり、前記本人確認書類が本物であり、かつ、前記本人確認書類の顔画像を含まない面の画像が本物である場合に、前記動画に含まれる前記本人確認書類の画像から文字を認識して文字コードに変換して、前記動画に含まれる前記ユーザの顔画像および前記本人確認書類の内容と、あらかじめ登録された情報との比較に基づいて、ユーザの適格性を審査する適格審査ステップと、
適格と判定されたユーザに対する口座を開設する口座開設ステップと、
【手続補正書】
【提出日】令和3年1月28日(2021.1.28)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】請求項１０
【補正方法】変更
【補正の内容】
【請求項１０】
動画に含まれるユーザの顔画像から抽出した第１特徴量と、前記動画に含まれる、前記ユーザを証明する本人確認書類の顔画像から抽出した第２特徴量とを照合する照合ステップと、
前記ユーザに所定の動作を指示し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当するか否かを判定する第１判定ステップと、
前記本人確認書類が本物であるか否かを判定する第２判定ステップと、
前記第１特徴量と前記第２特徴量とが一致し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当し、かつ、前記本人確認書類が本物であると判定された場合に、前記ユーザが本人であることを確認する確認ステップと、
前記本人確認書類の顔画像を含まない面の画像と共に、前記動画に含まれる前記ユーザの顔画像から抽出した第４特徴量と前記第１特徴量とが一致する場合に、前記本人確認書類の顔画像を含まない面の画像が本物であると判定する第３判定ステップと、
前記ユーザが本人であり、前記本人確認書類が本物であり、かつ、前記本人確認書類の顔画像を含まない面の画像が本物である場合に、前記動画に含まれる前記本人確認書類の画像から文字を認識して文字コードに変換して、前記動画に含まれる前記ユーザの顔画像および前記本人確認書類の内容と、あらかじめ登録された情報との比較に基づいて、ユーザの適格性を審査する適格審査ステップと、
適格と判定されたユーザに対する口座を開設する口座開設ステップと、
をコンピュータに実行させる情報処理プログラム。
【手続補正書】
【提出日】令和3年4月22日(2021.4.22)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】請求項８
【補正方法】変更
【補正の内容】
【請求項８】
前記動画と、前記動画に含まれる前記ユーザの顔画像と、前記動画に含まれる前記本人確認書類の画像と、を保持する保持部と、
前記ユーザが本人であり、前記本人確認書類が本物であり、かつ、前記本人確認書類の顔画像を含まない面の画像が本物である場合に、前記保持部に保持された、前記動画と、前記動画に含まれる前記ユーザの顔画像と、前記動画に含まれる前記本人確認書類の画像と、をユーザ情報として前記ユーザの適格審査を行う装置に送信する送信部と、
をさらに備える請求項７に記載の情報処理装置。
【手続補正２】
【補正対象書類名】特許請求の範囲
【補正対象項目名】請求項１０
【補正方法】変更
【補正の内容】
【請求項１０】
動画に含まれるユーザの顔画像から抽出した第１特徴量と、前記動画に含まれる、前記ユーザを証明する本人確認書類の顔画像から抽出した第２特徴量とを照合する照合ステップと、
前記ユーザに所定の動作を指示し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当するか否かを判定する第１判定ステップと、
前記本人確認書類が本物であるか否かを判定する第２判定ステップと、
前記第１特徴量と前記第２特徴量とが一致し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当し、かつ、前記本人確認書類が本物であると判定された場合に、前記ユーザが本人であることを確認する確認ステップと、
前記本人確認書類の顔画像を含まない面の画像と共に、前記動画に含まれる前記ユーザの顔画像から抽出した第４特徴量と前記第１特徴量とが一致する場合に、前記本人確認書類の顔画像を含まない面の画像が本物であると判定する第３判定ステップと、
前記ユーザが本人であり、前記本人確認書類が本物であり、かつ、前記本人確認書類の顔画像を含まない面の画像が本物である場合に、前記動画に含まれる前記本人確認書類の画像から文字を認識して文字コードに変換し、前記本人確認書類の前記文字コードとあらかじめ登録された情報との比較に基づいて、ユーザの適格性を審査する適格審査ステップと、
適格と判定されたユーザに対する口座を開設する口座開設ステップと、
をコンピュータに実行させる情報処理プログラム。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
上記目的を達成するため、本発明に係る情報処理プログラムは、
動画に含まれるユーザの顔画像から抽出した第１特徴量と、前記動画に含まれる、前記ユーザを証明する本人確認書類の顔画像から抽出した第２特徴量とを照合する照合ステップと、
前記ユーザに所定の動作を指示し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当するか否かを判定する第１判定ステップと、
前記本人確認書類が本物であるか否かを判定する第２判定ステップと、
前記第１特徴量と前記第２特徴量とが一致し、前記動画に含まれる前記ユーザの動作が前記指示された所定の動作に相当し、かつ、前記本人確認書類が本物であると判定された場合に、前記ユーザが本人であることを確認する確認ステップと、
前記本人確認書類の顔画像を含まない面の画像と共に、前記動画に含まれる前記ユーザの顔画像から抽出した第４特徴量と前記第１特徴量とが一致する場合に、前記本人確認書類の顔画像を含まない面の画像が本物であると判定する第３判定ステップと、
前記ユーザが本人であり、前記本人確認書類が本物であり、かつ、前記本人確認書類の顔画像を含まない面の画像が本物である場合に、前記動画に含まれる前記本人確認書類の画像から文字を認識して文字コードに変換し、前記本人確認書類の前記文字コードとあらかじめ登録された情報との比較に基づいて、ユーザの適格性を審査する適格審査ステップと、
適格と判定されたユーザに対する口座を開設する口座開設ステップと、
をコンピュータに実行させる。
【国際調査報告】
2020022014.tif 000037
2020022014.tif 000038
2020022014.tif 000039
2020022014.tif 000040