(57)【要約】【課題】撮像する際に身分証明書を配置した下地の色、あるいは身分証明書に対する照明などの撮像環境に対し、従来に比較して高い確率で身分証明書の画像の抽出が行え、身分証明書における文字情報の読取りを行うことを可能とする登録情報確認方法を提供する。【解決手段】本発明の登録情報確認方法は、身分証明書を撮像した撮像画像から、当該身分証明書の画像のエッジを検出するエッジ検出処理または身分証明書に印刷された罫線を検出する罫線検出処理のいずれか一方を第１処理として行い、第１処理による検出が行えない場合、他方を第２処理として行い、エッジあるいは罫線のいずれかを取得する過程と、検出されたエッジまたは罫線により、撮像画像の補正を行う過程と、補正された撮像画像の身分証明書の画像における文字認識を行い、文字情報を読み取る過程とを含む。【選択図】図５
2019008580.tif 000002
【特許請求の範囲】
【請求項１】
身分証明書を撮像した撮像画像から、当該身分証明書の画像のエッジを検出するエッジ検出処理または前記身分証明書に印刷された罫線を検出する罫線検出処理のいずれか一方を第１処理として行い、当該第１処理による検出が行えない場合、他方を第２処理として行い、前記エッジあるいは前記罫線のいずれかを取得する過程と、
前記検出された前記エッジまたは前記罫線により、前記撮像画像の補正を行う過程と、
補正された前記撮像画像の前記身分証明書の画像における文字認識を行い、文字情報を読み取る過程と
を含むことを特徴とする登録情報確認方法。
【請求項２】
前記撮像画像に前記身分証明書の画像と印影の画像との各々が同一フレームとして撮像され、前記罫線が取得された場合、当該罫線に基づき補正された前記撮像画像から、前記身分証明書とともに撮像された印影の画像を抽出する過程をさらに含む
ことを特徴とする請求項１に記載の登録情報確認方法。
【請求項３】
身分証明書を撮像した撮像画像から、当該身分証明書の画像のエッジを検出するエッジ検出処理または前記身分証明書に印刷された罫線を検出する罫線検出処理のいずれか一方を第１処理として行い、当該第１処理による検出が行えない場合、他方を第２処理として行い、前記エッジあるいは前記罫線のいずれかを取得し、前記検出された前記エッジまたは前記罫線により、前記撮像画像の補正を行い、補正された前記撮像画像の前記身分証明書の画像における文字認識を行い、文字情報を読み取ることを特徴とする登録情報確認サーバ。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、登録情報確認方法及び登録情報確認サーバに関する。
【背景技術】
【０００２】
近年、銀行の口座開設などの契約に際し、インターネットなどの通信情報網により、端末あるいは携帯端末から個人情報のみを送信し、契約にかかる処理時間の短縮が行われている。
例えば、送信される個人情報が契約しようとしている人間に対応した情報であるか否かの確認を行うために、免許証などの身分証明書の画像情報を送信させている。そして、送信された身分証明書の画像情報から、契約者の本人確認を行っている（例えば、特許文献１）。また、本人確認のための身分証明書の文字情報を、上記画像情報からＯＣＲ（Optical Character Recognition/Reader、光学的文字認識）により読取り、身分証明書における本人確認のための情報を抽出する処理が行われる（例えば、特許文献２参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００２−３５８４２０号公報
【特許文献２】特開２０１５−０４５９１０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上述したように、画像情報から身分証明書からの画像を抽出し、文字認識を行う領域の検出を行う際、一般的にエッジ検出により、身分証明書の外形を判定している。そして、検出したエッジを元に、台形補正などの画像補正処理を行い、身分証明書の画像をＯＣＲにより読み取れる形状に補正している。
しかしながら、身分証明書の画像を撮像する際、身分証明書を配置した下地の色、あるいは身分証明書に対する照明の状態によって、身分証明書のエッジが検出されない場合がある。この場合においては、身分証明書の画像を抽出できないため、身分証明書のＯＣＲで読み取る領域が抽出することができず、文字情報の読取りを行うことができない。
【０００５】
本発明は、このような事情に鑑みてなされたもので、撮像する際に身分証明書を配置した下地の色、あるいは身分証明書に対する照明などの撮像環境に対応し、撮像された撮像画像から従来に比較して高い確率で身分証明書の画像の抽出が行え、身分証明書における文字情報の読取りを行うことを可能とする登録情報確認方法及び登録情報確認サーバを提供することを目的とする。
【課題を解決するための手段】
【０００６】
この発明は上述した課題を解決するためになされたもので、本発明の登録情報確認方法は、身分証明書を撮像した撮像画像から、当該身分証明書の画像のエッジを検出するエッジ検出処理または前記身分証明書に印刷された罫線を検出する罫線検出処理のいずれか一方を第１処理として行い、当該第１処理による検出が行えない場合、他方を第２処理として行い、前記エッジあるいは前記罫線のいずれかを取得する過程と、前記検出された前記エッジまたは前記罫線により、前記撮像画像の補正を行う過程と、補正された前記撮像画像の前記身分証明書の画像における文字認識を行い、文字情報を読み取る過程とを含むことを特徴とする。
【０００７】
本発明の登録情報確認方法は、前記撮像画像に前記身分証明書の画像と印影の画像との各々が同一フレームとして撮像され、前記罫線が取得された場合、当該罫線に基づき補正された前記撮像画像から、前記身分証明書とともに撮像された印影の画像を抽出する過程をさらに含むことを特徴とする。
【０００８】
本発明の登録情報確認サーバは、身分証明書を撮像した撮像画像から、当該身分証明書の画像のエッジを検出するエッジ検出処理または前記身分証明書に印刷された罫線を検出する罫線検出処理のいずれか一方を第１処理として行い、当該第１処理による検出が行えない場合、他方を第２処理として行い、前記エッジあるいは前記罫線のいずれかを取得し、前記検出された前記エッジまたは前記罫線により、前記撮像画像の補正を行い、補正された前記撮像画像の前記身分証明書の画像における文字認識を行い、文字情報を読み取ることを特徴とする。
【発明の効果】
【０００９】
この発明によれば、撮像する際に身分証明書を配置した下地の色、あるいは身分証明書に対する照明などの撮像環境に対応し、撮像された撮像画像から従来に比較して高い確率で身分証明書の画像の抽出が行え、身分証明書における文字情報の読取りを行うことが可能となる。
【図面の簡単な説明】
【００１０】
【図１】本発明の第１の実施形態による登録情報確認システムの構成例を示す概念図である。
【図２】登録情報確認サーバから提供される撮像アプリケーションにおける撮像処理を説明する図である。
【図３】本発明の第１の実施形態による登録情報確認サーバの構成例を示すブロック図である。
【図４】本発明の第１の実施形態による登録情報確認サーバによる撮像画像からの身分証明書のエッジ及び外枠線の検出処理を説明する図である。
【図５】本発明の第１の実施形態による登録情報確認システムの動作例を示すフローチャートである。
【図６】本発明の第２の実施形態による登録情報確認サーバの構成例を示す概念図である。
【図７】登録情報確認サーバから提供される撮像アプリケーションにおける撮像処理を説明する図である。
【図８】本発明の第２の実施形態による登録情報確認システムの動作例を示すフローチャートである。
【発明を実施するための形態】
【００１１】
＜第１の実施形態＞
以下、図面を参照して、本発明の実施の形態について説明する。図１は、本発明の第１の実施形態による登録情報確認システムの構成例を示す概念図である。この図１において、登録情報確認システムは、利用者１が所有する端末１１及び携帯端末１２と、登録情報確認センタ２が備える登録情報確認サーバ２１及びデータベース２２を備えている。施設３の登録情報管理サーバ３１は、登録情報確認サーバ２１から送信された登録情報が蓄積される。登録情報は、撮像された身分証明書の撮像データ（画像データ）である。身分証明書は、例えば自動車などの運転免許証、保険証、パスポート（写真などの情報が示されたページ）、年金手帳などである。本実施形態においては、身分証明書として運転免許証（以下、単に「免許証」と称す）を用いて説明する。
【００１２】
端末１１は、例えば、パーソナルコンピュータであり、インターネットなどの情報通信網により登録情報確認サーバ２１にアクセス可能である。
携帯端末１２は、例えばカメラ機能を有するスマートフォンなどであり、インターネットなどの情報通信網により登録情報確認サーバ２１にアクセス可能である。
【００１３】
登録情報確認サーバ２１は、携帯端末１２からのダウンロード要求により、テンプレートフレームを撮像する際の画面に表示するアプリケーションプログラムを携帯端末１２に対して送信する。テンプレートフレームは、身分証明書を撮像する際に表示画面に表示されるフレームであり、身分証明書枠として設けられている。また、ユーザは、アプリケーションプログラムを、Apple Store （登録商標）あるいは及びGoogle Inc.のウェブストアなどからダウンロードしても良い。
【００１４】
図２は、登録情報確認サーバから提供される撮像アプリケーションにおける撮像処理を説明する図である。この図２（ａ）に示すように、撮像アプリケーションは、携帯端末１２の表示画面１２Ａに、身分証明書の画像を撮像する際、上記テンプレートフレームとして身分証明書枠Ｆ１を表示する。
【００１５】
身分証明書枠Ｆ１は、枠のサイズが身分証明書の種類毎に設定されている。また、身分証明書枠Ｆ１は、内部に免許証の画像を配置し、配置した免許証の画像（以下、免許証画像と称す）の外周が平面視で重なる大きさで撮像した場合、後述するＯＣＲ処理して得られる文字画像の大きさ及び解像度が、文字認識の処理（文字解析）において解析可能なサイズに設定されている。また、例えば、身分証明書枠Ｆ１と平面視で免許証の画像の外周との平面視における重なりの程度に対しては、予め設定された誤差範囲を設定する。
【００１６】
また、図２（ｂ）に示すように、利用者は、身分証明書枠Ｆ１に免許証画像１００の外周部が収まり、かつ身分証明書枠Ｆ１に免許証画像１００の外周部が重なるように、免許証画像１００を携帯端末１２により撮像する。これにより、身分証明書枠Ｆ１内の免許証画像１００がフレームにおいて撮像される。より具体的には、身分証明書枠Ｆ１に免許証画像１００が収まる位置に免許証を配置し、携帯端末１２により撮像を行う。図２（ｂ）において、エッジ１５０は、免許証画像１００の輪郭線、すなわち免許証画像１００のエッジ部分である。また、外枠線２００は、免許証の表面に印刷されている罫線（例えば、１５７、１５８、１５９、１６１、１６２、１６３、１６４）の一種であり、身分証明となる情報の記載された欄の枠を形成する罫線における、外枠として印刷された最外に位置する罫線である。
【００１７】
図３は、本発明の第１の実施形態による登録情報確認サーバの構成例を示すブロック図である。登録情報確認サーバ２１は、画像取得部２１１、エッジ取得処理部２１２、罫線取得処理部２１３、画像補正処理部２１４、ＯＣＲ処理部２１５及び記憶部２１６の各々を備えている。
画像取得部２１１は、外部装置から、例えば携帯端末１２から送信された撮像画像（図２（ｂ）に示す表示画面１２Ａに対応する撮像画像）を入力し、記憶部２１６に対して書き込んで記憶させる。
【００１８】
エッジ取得処理部２１２は、記憶部２１６から撮像画像（以下、撮像データと称す場合もある）を読み出し、撮像画像から身分証明書部分の画像のエッジ（図２（ｂ）におけるエッジ１５０）の検出を行う。
ここで、エッジ取得処理部２１２は、例えば、撮像画像内における輝度（画素値）の変化の勾配を求め、エッジの強さを算出し、勾配の方向からエッジの局所的方向を予測する。そして、エッジ取得処理部２１２は、この予測された局所的方向において、局所的に極大となる箇所を検索し、この箇所と予め設定されている閾値とを比較してエッジの検出を行う。
【００１９】
罫線取得処理部２１３は、記憶部２１６から撮像画像を読み出し、この撮像画像において、身分証明書の表面に印刷されている、身分証明となる情報の記載された欄の枠を形成する罫線から、最外に位置する罫線である外枠線（図２（ｂ）における外枠線２００）の検出を行う。
ここで、罫線取得処理部２１３は、例えば、画像において線分を抽出し、予め設定されている罫線抽出のルールに基づいて、罫線の抽出を行う。すなわち、罫線取得処理部２１３は、抽出した線分の幅や線分の長さなどが罫線抽出のルールにおいて、罫線であるか否かの判定を行い、判定結果として得られた罫線における最外に位置する罫線を外枠線として検出する。
【００２０】
画像補正処理部２１４は、エッジ取得処理部２１２が取得したエッジ１５０、または罫線取得処理部２１３が取得した外枠線２００のいずれかを用い、撮像画像の台形補正、縦横比の補正及びレンズ収差補正などの画像補正の処理を行う。ここで、外枠線ではなく、撮像画像の台形補正、縦横比の補正及びレンズ収差補正などの画像補正の処理を行うことが可能な罫線であれば、いずれの罫線でも良い。
ＯＣＲ処理部２１５は、補正後の撮像画像における免許証画像１００の所定の位置（予め指定された領域）の文字認識を行い、位置毎から文字情報としてテキストデータを抽出する。
【００２１】
図４は、本発明の第１の実施形態による登録情報確認サーバによる撮像画像からの身分証明書のエッジ及び外枠線の検出処理を説明する図である。
図４において、免許証画像１００のエッジ１５０は、免許証画像１００の外周部を示し、撮像する際の下地と免許証のと高さの差、すなわち免許証の厚さ、あるいは下地の色と免許証の外周部の色との違い、すなわち輝度差などの違いとして形成される。このため、免許証の撮像時に影ができにくい角度で撮像した場合や、下地の色が免許証の外周部の色と輝度差がない場合、上述した閾値を超えるエッジが検出できず、エッジ１５０が検出されない。
一方、罫線抽出は、上述したエッジの抽出より検出の精度は高いが、免許証を撮像する際の照明光の状態や、撮像角度によっては、表面における照明光の反射などで罫線が抽出できず、上記罫線抽出のルールに基づく外枠線２００の検出が行えない。
【００２２】
また、ＯＣＲ処理部２１５は、光学式文字読取機能により、免許証画像１００の免許証における所定の領域の各々の文字画像の取り込みを行う。所定の領域とは、免許証における住所、氏名、有効期限、生年月日などの項目の文字データが記載されている領域である。図４に示すように、ＯＣＲ処理部２１５は、免許証画像１００において読み込む位置を予め項目毎に指定する。読み込む位置（領域）は、上記所定の領域のいずれか一つ、またはそれらの組合わせである。この指定は、オペレータが、登録情報確認サーバ２１の入力部から操作することで行うこともできる。
また、ＯＣＲ処理部２１５は、上述した免許証画像１００における読み込む位置を、エッジ１５０あるいは外枠線２００を基準として相対的に検出する。
【００２３】
次に、図１、図２、図３、図４及び図５の各々を用いて本発明の第１の実施形態における登録情報確認サーバが行う登録情報確認を説明する。図５は、本発明の第１の実施形態による登録情報確認システムの動作例を示すフローチャートである。以下、利用者が銀行口座を開設するため、利用者自身の個人情報を登録する際、個人情報を確認する確認書類である免許証の登録情報の確認を例として説明する。
【００２４】
ステップＳ１：
利用者は、端末１１により情報通信網を介し、登録情報確認サーバ２１にアクセスし、端末１１の表示画面において登録処理を行うウェブページを参照する。
登録情報確認サーバ２１は、携帯端末１２の表示画面に対し、図２（ａ）に示すテンプレートフレームを撮像時に表示するアプリケーションプログラムをダウンロードする表示を、携帯端末１２に送信する。
【００２５】
そして、利用者は、携帯端末１２に表示された登録画面におけるダウンロードを指示するボタンをクリックする。これにより、携帯端末１２は、登録情報確認サーバ２１からアプリケーションプログラムのダウンロードを行う。携帯端末１２は、アプリケーションプログラムをダウンロードすると、表示画面のウェブページにアプリケーションを実行させるボタンを表示する。ここで、ユーザは、アプリケーションプログラムを、Apple Store （登録商標）あるいは及びGoogle Inc.のウェブストアなどからダウンロードしても良い。
そして、利用者は、携帯端末１２に対してアプリケーションプログラムを実行させる。
【００２６】
ステップＳ２：
アプリケーションが実行されることにより、携帯端末１２は、自身を撮像モードに切り替え、表示画面に図２（ａ）のテンプレートフレームを表示する。
利用者は、テンプレートフレームにおいて、図２（ｂ）に示すように、身分証明書枠Ｆ１に免許証画像１００の外周部が重なるように、免許証の配置の調整、また、携帯端末１２の撮像位置及び撮像範囲のズームイン、ズームアウトなどの調整を行う。
【００２７】
利用者は、テンプレートフレームにおける身分証明書枠Ｆ１に対し、身分証明書である免許証画像１００が収まるように、免許証画像１００を携帯端末１２により撮像する。これにより、携帯端末１２は、撮像した撮像データ（撮像画像）を登録情報確認サーバ２１に対して送信する。
画像取得部２１１は、携帯端末１２から供給される撮像データを入力し、記憶部２１６に対して書き込んで記憶させる。
【００２８】
ステップＳ３：
罫線取得処理部２１３は、記憶部２１６から撮像データを読み出し、撮像データに対して罫線抽出の画像処理を行い、免許証画像１００における外枠線２００の抽出を行う。
【００２９】
ステップＳ４：
そして、罫線取得処理部２１３は、罫線抽出のルールに基づき抽出した罫線において、外枠線２００が検出できて取得が行えたか否かを、予め記憶部２１６に書き込まれて設定されている免許証の外枠線の形状及び縦横比などにより判定する。
このとき、罫線取得処理部２１３は、外枠線２００が取得できた場合、外枠線２００の外枠線情報を画像補正処理部２１４に対して出力し、処理をステップＳ５へ進める。一方、罫線取得処理部２１３は、外枠線２００が取得できなかった場合、外枠線２００の抽出ができなかったことを示す情報を画像補正処理部２１４に対して出力し、処理をステップＳ１５へ進める。
【００３０】
ステップＳ５：
画像補正処理部２１４は、罫線取得処理部２１３から供給される外枠線２００の情報により、台形補正、縦横比の補正及びレンズ収差補正などの画像補正を撮像データ（画像データ）に対して行い、ＯＣＲで文字認識が可能な状態とする。
【００３１】
ステップＳ６：
ＯＣＲ処理部２１５は、携帯端末１２から送信された撮像データのＯＣＲ処理を、図示しない光学式文字読取装置を用いて行う。
登録情報確認サーバ２１は、撮像データからＯＣＲ処理により得られた撮像データにおいて、図４に示すように、予め設定された領域の各々における文字の撮像データである文字画像を抽出する。
ＯＣＲ処理部２１５は、この文字画像の文字認識を行い、文字画像に対応するテキストデータを求める。
【００３２】
ステップＳ７：
そして、利用者は、端末１１に表示されている表示画面の登録処理を行うウェブページにおいて、端末１１の入力装置（例えば、キーボードなど）により、利用者の名前、住所及び電話番号などの個人情報を入力する。
【００３３】
ステップＳ８：
利用者は、端末１１の表示画面のウェブページに必要な個人情報を入力した後、ウェブページにおける登録処理の実行を要求する実行ボタンをクリックする。
これにより、端末１１は、ウェブページに記載された個人情報を、登録情報確認サーバ２１に対し、情報通信網を介して送信する。
【００３４】
そして、登録情報確認サーバ２１は、個人情報を入力すると、この個人情報に対して申し込み番号を付与する。登録情報確認サーバ２１は、個人情報と付与した申し込み番号とを組として、データベース２２に対して書き込んで記憶させる。
また、登録情報確認サーバ２１は、付与した申し込み番号を、端末１１に対して送信する。
【００３５】
ステップＳ９：
登録情報確認サーバ２１は、携帯端末１２の表示画面におけるウェブページに対し、個人情報を表示させ、登録内容の確認を利用者に促す。
【００３６】
ステップＳ１０：
利用者は、携帯端末１２の表示画面のウェブページに表示されている登録情報（画面内容）が正しい場合、例えば、ウェブページにおける了承を示すボタンをクリックする。一方、登録情報を修正したい場合、例えば、ウェブページにおける中止を示すボタンをクリックする。
携帯端末１２は、了承のボタンがクリックされた（ＹＥＳ）場合、処理をステップＳ１１へ進め、一方、中止のボタンがクリックされた（ＮＯ）場合、処理を終了する。
【００３７】
ステップＳ１１：
携帯端末１２は、個人情報が正しいこと、登録を行うことを了承する応答信号を、登録情報確認サーバ２１に対して送信する。
そして、携帯端末１２は、アプリケーションプログラムの実行を終了し、アプリケーションが実行されていない通常のモードに戻る。
【００３８】
ステップＳ１２：
登録情報確認サーバ２１は、登録情報の撮像データ（免許証画像１００）をデータベース２２に対し、個人情報と対応させて書き込んで記憶させる。
【００３９】
ステップＳ１３：
登録情報確認サーバ２１は、登録情報の登録が終了した後、撮像データ及び個人情報を、契約先の施設３の登録情報管理サーバ３１に対して送信する。
そして、登録情報管理サーバ３１は、登録情報確認サーバ２１から送信された登録情報を、図示しないデータベースに対して書き込んで蓄積する。
【００４０】
ステップＳ１４：
登録情報確認サーバ２１は、ステップＳ７において、情報入力が正しく行われなかった場合、ステップＳ７における個人情報の入力から処理をやり直すことを示す再登録情報を携帯端末１２に対して送信し、処理を終了する。
また、登録情報確認サーバ２１は、罫線取得及びエッジ取得のいずれも行えなかった場合、ステップＳ２における免許証（身分証明書）の撮像から処理をやり直すことを示す再撮像情報を携帯端末１２に対して送信する。
【００４１】
ステップＳ１５：
エッジ取得処理部２１２は、記憶部２１６から撮像データを読み出し、撮像データに対して罫線抽出の画像処理を行い、免許証画像１００におけるエッジ１５０の抽出を行う。
【００４２】
ステップＳ１６：
そして、エッジ取得処理部２１２は、エッジ抽出のルールに基づき抽出したエッジにおいて、エッジ１５０が検出できて取得が行えたか否かを、予め記憶部２１６に書き込まれて設定されている免許証のエッジの形状及び縦横比などにより判定する。
このとき、エッジ取得処理部２１２は、エッジ１５０が取得できた場合、エッジ１５０のエッジ情報を画像補正処理部２１４に対して出力し、処理をステップＳ１７へ進める。一方、罫線取得処理部２１３は、エッジ１５０が取得できなかった場合、エッジ１５０の抽出ができなかったことを示す情報を画像補正処理部２１４に対して出力し、処理をステップＳ１４へ進める。
【００４３】
ステップＳ１７：
画像補正処理部２１４は、エッジ取得処理部２１２から供給されるエッジ１５０の情報により、台形補正、縦横比の補正及びレンズ収差補正などの画像補正を撮像データに対して行い、ＯＣＲで文字認識が可能な状態とする。
【００４４】
上述したように、本実施形態は、免許証（身分証明書）の撮像データにおける免許証画像１００から、エッジ抽出及び罫線抽出の双方の処理が行える構成となっており、免許証画像１００におけるエッジ１５０及び外枠線２００のいずれか一方が取得できない場合、他方の取得を行う。このため、本実施形態によれば、ＯＣＲ処理により免許証画像１００の所定の欄に記載されている文字画像の文字認識を行う際、少なくともエッジ１５０または外枠線２００のいずれかにより、ＯＣＲにより文字画像の認識が可能な形態とすることが可能となり、台形補正、縦横比の補正及びレンズ収差補正などの画像補正が行える可能性を、従来に比較して向上させることができる。
【００４５】
すなわち、エッジ取得と罫線取得との各々は、それぞれ抽出対象が段差による輝度差、印刷された線分の画像とで異なるため、撮像された環境により、いずれか一方が検出され易い場合があり、他方が検出されにくい場合に、画像補正に必要な免許証の画像の形状を補正するために用いる情報を従来に比較して取得できる確率を高くすることができる。
結果として、従来のように、エッジあるいは罫線のいずれか一方のみを取得する構成に比較し、利用者に対して証明書の再撮像を依頼する頻度を低下させることができ、個人情報の登録作業における再撮像の煩わしさを低減し、ユーザビリティ（使いやすさ）を向上させることが可能となる。
【００４６】
＜第２の実施形態＞
以下、図面を参照して、本発明の実施の形態について説明する。図６は、本発明の第２の実施形態による登録情報確認システムの構成例を示す概念図である。この図６において、登録情報確認サーバ２１Ａは、画像取得部２１１、エッジ取得処理部２１２、罫線取得処理部２１３、画像補正処理部２１４、ＯＣＲ処理部２１５、記憶部２１６及び印影取得部２１７の各々を備えている。第１の実施形態と異なる点は、印影の画像（印影画像）を取得する印影取得部２１７を有していることである。
【００４７】
印影取得部２１７は、印影フラグが立っている場合、利用者が撮像した撮像データから、利用者が押印した印影画像を抽出して取得する処理を行う。ここで、登録情報確認サーバ２１Ａは、撮像データから印影の画像を取得する必要のある場合、撮像データに付加されている印影フラグをセット状態（例えば、「１」）し、撮像データから印影画像を取得する必要のない場合、撮像データに付加されている印影フラグをリセット状態（例えば、「０」）とする。
【００４８】
図７は、登録情報確認サーバから提供される撮像アプリケーションにおける撮像処理を説明する図である。この図７（ａ）に示すように、撮像アプリケーションは、携帯端末１２の表示画面１２Ａに、身分証明書及び印影画像を撮像する際、身分証明書枠Ｆ１と印影枠Ｆ２とを表示する。身分証明書枠Ｆ１は、第１の実施形態と同様の構成である。これにより、身分証明書の画像と印影画像との各々は、同一フレームに含まれ、一個の撮像データに撮像される。印影取得部２１７は、印影枠Ｆ２において抽出される画像を、印影画像として取得する。
【００４９】
また、図７（ｂ）に示すように、利用者は、身分証明書枠Ｆ１に免許証画像１００の外周部が収まり、かつ身分証明書枠Ｆ１に免許証画像１００の外周部が重なるように、免許証画像１００を携帯端末１２により撮像する。この際、利用者は、印影枠Ｆ２内に印影画像１０１が収まるように、印影画像１０１を配置し、身分証明書枠Ｆ１内の免許証画像１００とともに、携帯端末１２により印影画像１０１を撮像する。これにより、身分証明書枠Ｆ１内の免許証画像１００と、印影枠Ｆ２内の印影画像１０１とが同一のフレームに撮像される。より具体的には、印影を用紙に押印し、この印影画像１０１が印影枠Ｆ２内に収まった状態で、身分証明書枠Ｆ１に免許証画像１００が収まる位置に免許証を配置し、携帯端末１２により撮像を行う。
【００５０】
図８は、本発明の第２の実施形態による登録情報確認システムの動作例を示すフローチャートである。以下、第１の実施形態における図５のフローチャートと異なる処理のみを説明する。図８のフローチャートにおいて第１のフローチャートと異なる処理は、ステップＳ１Ａ、Ｓ４Ａ、Ｓ５Ａ、Ｓ５Ｂ、Ｓ１２Ａ及びＳ１４Ａの各々である。
【００５１】
ステップＳ１Ａ：
登録情報確認サーバ２１は、携帯端末１２の表示画面に対し、図７（ａ）に示すテンプレートフレームを撮像時に表示するアプリケーションプログラムをダウンロードする表示を、携帯端末１２に送信する。ここで、ユーザは、アプリケーションプログラムを、Apple Store （登録商標）あるいは及びGoogle Inc.のウェブストアなどからダウンロードしても良い。
【００５２】
ステップＳ４Ａ：
印影取得部２１７は、撮像データに付加されている印影フラグがセットされているかリセットされているか、すなわち撮像データにおける取得する印影画像１０１の有無の判定を行う。このとき、印影取得部２１７は、撮像データに取得する印影画像１０１が有ると判定した場合、処理をステップＳ１４Ａへ進める。一方、印影取得部２１７は、撮像データに取得する印影画像１０１が無いと判定した場合、処理をステップＳ１５へ進める。
すなわち、撮像データに印影画像１０１が無い場合、ＯＣＲ処理のみを行えば良いため、外枠線２００の取得が失敗しているので、ＯＣＲ処理を行う前の画像処理に用いるエッジ１５０を取得するステップＳ１５へ処理が進む。一方、撮像データに印影画像１０１が有る場合、ＯＣＲ処理の他に印影画像を抽出する必要があるが、罫線取得ができない場合、印影画像１０１を取得する精度を撮像画像が有していないことから、処理がステップＳ１４Ａへ進む。
【００５３】
ステップＳ５Ａ：
印影取得部２１７は、撮像データに付加されている印影フラグがセットされているかリセットされているか、すなわち撮像データにおける取得する印影画像１０１の有無の判定を行う。このとき、印影取得部２１７は、撮像データに取得する印影画像１０１が有ると判定した場合、処理をステップＳ５Ｂへ進める。一方、印影取得部２１７は、撮像データに取得する印影画像１０１が無いと判定した場合、処理をステップＳ６へ進める。
すなわち、撮像データに印影画像１０１が無い場合、ＯＣＲ処理のみを行えば良いため、印影取得処理を行う必要が無いため、処理がステップＳ６へ進む。一方、撮像データに印影の画像が有る場合、ＯＣＲ処理の他に印影画像１０１を抽出する必要があるため、処理が印影画像１０１を取得する処理を行うステップＳ５Ｂへ進む。
【００５４】
ステップＳ５Ｂ：
印影取得部２１７は、撮像データから印影枠Ｆ２内に有る画像を印影画像１０１として抽出する。このとき、印影取得部２１７は、罫線が取得できる精度（撮像データの画像の解像度が十分な品質）によって、印影画像１０１を取得することができる。
【００５５】
ステップＳ１２Ａ：
登録情報確認サーバ２１は、登録情報の撮像データ（免許証画像１００及び印影画像１０１）をデータベース２２に対し、個人情報と対応させて書き込んで記憶させる。
【００５６】
ステップＳ１４Ａ：
登録情報確認サーバ２１は、ステップＳ７において、情報入力が正しく行われなかった場合、ステップＳ７における個人情報の入力から処理をやり直すことを示す再登録情報を携帯端末１２に対して送信し、処理を終了する。
また、登録情報確認サーバ２１は、罫線取得及びエッジ取得のいずれも行えなかった場合、ステップＳ２における免許証（身分証明書）の撮像から処理をやり直すことを示す再撮像情報を携帯端末１２に対して送信する。
さらに、登録情報確認サーバ２１は、罫線取得が行えず、かつ撮像データが印影画像１０１を有している場合、ステップＳ２における免許証（身分証明書）及び印影の撮像から処理をやり直すことを示す再撮像情報を携帯端末１２に対して送信する。
【００５７】
本実施形態によれば、ＯＣＲ処理のみを行う場合、第１の実施形態と同様に、ＯＣＲ処理により免許証画像１００の所定の欄に記載されている文字画像の文字認識を行う際、少なくともエッジ１５０または外枠線２００のいずれかにより、ＯＣＲにより文字画像の認識が可能な形態とすることが可能となり、台形補正、縦横比の補正及びレンズ収差補正などの画像補正が行える可能性を、従来に比較して向上させることができる。すなわち、本実施形態によれば、ＯＣＲ処理のみを行う場合、印影画像の取得が行う品質が保証される罫線取得が行えなくとも、撮像データから少なくともエッジの取得ができれば、ＯＣＲ処理を行うことができるため、罫線処理において外枠線２００が検出されなくとも、ＯＣＲ処理が行えないとするエラーが発生しないため、個人情報の登録作業における再撮像の煩わしさを低減し、ユーザビリティを向上させることが可能となる。
【００５８】
また、本実施形態によれば、身分証明書のみの画像の登録処理、あるいは身分証明書の画像及び印影画像１０１の各々の登録処理をそれぞれ行うことができ、印影画像１０１を登録する際、罫線取得ができるか否かにより、撮像データの画像の品質が印影の画像を取得することが可能な程度であるか否かを判定している。このため、本実施形態によれば、罫線取得ができない場合、印影画像１０１を取得しないため、印影画像１０１の品質を一定の精度に保つことが可能となる。
【００５９】
第１の実施形態及び第２の実施形態の各々において、罫線取得処理をエッジ取得処理より前に行っているが、エッジ取得処理を罫線取得処理より前に行う構成としても良い。
【００６０】
また、図３における登録情報確認サーバ２１または図８における登録情報確認サーバ２１Ａの各々の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより、身分証明書や印影それぞれの画像の登録情報の確認処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。
【００６１】
また、「コンピュータシステム」は、ＷＷＷシステムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）も含むものとする。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含むものとする。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。
【００６２】
以上、この発明の実施形態を図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。
【符号の説明】
【００６３】
１…利用者
２…登録情報確認センタ
３…施設
１１…端末
１２…携帯端末
１２Ａ…表示画面
２１，２１Ａ…登録情報確認サーバ
２２…データベース
３１…登録情報管理サーバ
１００…免許証画像
１０１…印影画像
１５０…エッジ
２００…外枠線
Ｆ１…身分証明書枠
Ｆ２…印影枠
【図１】
2019008580.tif 000003
【図２】
2019008580.tif 000004
【図３】
2019008580.tif 000005
【図４】
2019008580.tif 000006
【図５】
2019008580.tif 000007
【図６】
2019008580.tif 000008
【図７】
2019008580.tif 000009
【図８】
2019008580.tif 000010