(57)【要約】【目的】本発明は、帳票から取得した全面イメージより文字認識結果を確認・修正する入力イメージ表示方法および入力イメージ表示プログラムに関し、帳票から取得した全面イメージより文字認識した文字認識結果を表示したテキストフィールド中のカーソルの位置する項目の近傍に対応する項目イメージを表示すると共に全面イメージ上の当該項目イメージを強調表示し、修正入力があったときは当該項目に反映することを繰り返し、テキストフィールド上の項目の確認、修正時に項目イメージへの視線の動きを極めて少なくかつ迅速かつ簡単にすることを目的とする。【構成】  全面イメージより文字認識した文字認識結果をテキストフィールドに表示するステップと、表示したテキストフィールド上の、選択された項目の近傍に、全面イメージ上の項目イメージを取得して表示することを繰り返すステップとを有する。【選択図】        図１
2006277001.tif 000002
【特許請求の範囲】
【請求項１】
帳票から取得した全面イメージより文字認識結果を確認・修正する入力イメージ表示方法において、
前記全面イメージより文字認識した文字認識結果をテキストフィールドに表示するステップと、
前記表示したテキストフィールド上の、選択された項目の近傍に、前記全面イメージ上の該当項目イメージを取得して表示することを繰り返すステップと、
を有する入力イメージ表示方法。
【請求項２】
前記テキストフィールド上で、選択された項目に修正入力されたときに更新するステップを有することを特徴とする請求項１記載の入力イメージ表示方法。
【請求項３】
前記表示したテキストフィールド上の、選択された項目の近傍に、前記全面イメージ上の該当項目イメージを取得して表示した場合に、前記全面イメージ上の当該項目イメージを強調表示することを特徴とする請求項１あるいは請求項２記載の入力イメージ表示方法。
【請求項４】
前記表示したテキストフィールド上の、選択された項目の上側あるいは下側あるいは左側あるいは右側に、前記全面イメージ上の該当項目イメージを取得して表示することを特徴とする請求項１から請求項３のいずれかに記載の入力イメージ表示方法。
【請求項５】
帳票から取得した全面イメージより文字認識結果を確認・修正する入力イメージ表示プログラムにおいて、
コンピュータに、
前記全面イメージより文字認識した文字認識結果をテキストフィールドに表示するステップと、
前記表示したテキストフィールド上の、選択された項目の近傍に、前記全面イメージ上の該当項目イメージを取得して表示することを繰り返すステップと
として機能させるための入力イメージ表示プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、帳票から取得した全面イメージより文字認識結果を確認・修正する入力イメージ表示方法および入力イメージ表示プログラムに関するものである。
【背景技術】
【０００２】
従来、手書き記入された帳票をスキャンしてその帳票イメージを画面上に表示し、当該帳票イメージから文字認識して所定入力フィールドに文字認識結果を入力することが行われている。この際、文字認識結果の入力された文字や数字について、オペレータが確認、修正する場合、１つの画面上にスキャンした帳票イメージを表示し、他の画面上に文字認識結果を入力した帳票を表示し（あるいは１つの画面を左右分割あるいは上下分割して一方に帳票イメージ、他方に文字認識結果を表示し）、両者を比較しつつ確認したり、必要なときに文字認識結果について修正入力したりするようにしていた（特許文献１）。
【特許文献１】特開平０５−３０３６６１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
上述した従来の技術では、帳票上に手書入力された文字の文字認識結果について、カーソルで対応づけられた帳票イメージ上の該当イメージをオペレータが目視して確認する必要があり、視線が他の画面から１つ画面上のカーソルの位置まで移動して確認する必要があり、視認に時間がかかると共にカーソルなどで対応づけられた場所を探して確認するなどの面倒な作業が強要されてしまうという問題があった。
【課題を解決するための手段】
【０００４】
本発明は、これらの問題を解決するため、帳票から取得した全面イメージより文字認識した文字認識結果を表示したテキストフィールド中のカーソルの位置する項目の近傍に対応する項目イメージを表示すると共に全面イメージ上の当該項目イメージを強調表示し、修正入力があったときは当該項目に反映することを繰り返すようにしている。
【発明の効果】
【０００５】
本発明は、文字認識したテキストフィールド中のカーソルの位置する項目の近傍に項目イメージを表示すると共に全面イメージ上の当該項目イメージを強調表示し、修正入力があったときは当該項目に反映することを繰り返すことにより、テキストフィールド上の項目の確認、修正時に項目イメージへの視線の動きを極めて少なくかつ迅速かつ簡単に確認、修正作業することが可能となる。
【発明を実施するための最良の形態】
【０００６】
本発明は、帳票から取得した全面イメージより文字認識した文字認識結果を表示したテキストフィールド中のカーソルの位置する項目の近傍に対応する項目イメージを表示すると共に全面イメージ上の当該項目イメージを強調表示し、修正入力があったときは当該項目に反映することを繰り返し、テキストフィールド上の項目の確認、修正時に項目イメージへの視線の動きを極めて少なくかつ迅速かつ簡単にすることを実現した。
【実施例１】
【０００７】
図１は、本発明のシステム構成図を示す。
図１において、システム１は、プログラムに従い各種処理を実行するものであって、パソコンなどのコンピュータであり、データ取得手段２、画面表示手段３、データ修正手段４、帳票データベース５、表示装置６、および入力装置７などから構成されるものである。
【０００８】
データ取得手段２は、帳票データベース５などからデータを取得するものであって、例えば手書きされた帳票からスキャナーで読み取った全面イメージ、更に、当該全面イメージから図示外のソフトによって文字認識されて設定されたテキストフィールドなどを取得するものである（図２から図４参照）。
【０００９】
画面表示手段３は、データ取得手段２によって取得したデータ（全面イメージ、テキストフィールドなどのデータ）を表示装置６の画面上に表示するものである（図２から図４参照）。
【００１０】
データ修正手段４は、データを修正するものであって、例えばテキストフィールド上の選択した項目の近傍に表示された当該項目イメージを人が見て正しい文字や値に修正入力されたときに当該項目のデータを修正したりなどするものである（図２から図４参照）。
【００１１】
帳票データベース５は、帳票に関する情報を登録したものである（図３参照）。
表示装置６は、画面を表示するものであって、ここでは、図４の画面（全面イメージ、テキストフィールド）を表示するものである（図４参照）。
【００１２】
入力装置７は、データや指示を入力するものであって、キーボードやマウスなどである。
【００１３】
次に、図２のフローチャートの順番に従い、図１の構成の動作を詳細に説明する
図２は、本発明の動作説明フローチャートを示す。
【００１４】
図２において、Ｓ１は、表示する帳票に対応した全面イメージを取得する。これは、これから表示して自動文字認識結果を修正しようとする帳票に対応する全面イメージを、ここでは、帳票データベース５から取得する。取得は、図３の帳票データベース５中の帳票ＩＤとして、例えば”帳票Ａ”を指定して当該帳票Ａのレコードのうちから全面イメージＡ（例えば、図３の（１）のレコードの全面イメージＡ）を取得する。
【００１５】
Ｓ２は、表示する帳票に対応した切り出しイメージを取得する（性能を考慮し全項目分）。これは、Ｓ１で取得した全面イメージの，ここでは、帳票Ａのレコードに対応した切り出しイメージとして、項目イメージ１，２，３・・・ｎのうち、図１のシステム（パソコン）１の性能を考慮してできるだけ多くの当該項目イメージを取得、例えばメモリ容量を考慮してできるだけ多く項目イメージをメモリ上に取得し、Ｓ３以降の表示・確認・修正時にテキストフィールド中の選択された項目（文字認識された結果が設定されている項目）の近傍に当該項目イメージを高速表示できるように準備する。
【００１６】
Ｓ３は、全面イメージを画面に表示する。これは、Ｓ１で取得した表示する帳票の全面イメージ（手書きされた帳票をスキャナーで読み取った当該帳票の全面イメージ）を画面上に表示、例えば後述する図４の（ａ）の上段の全面イメージのように表示する。
【００１７】
Ｓ４は、テキストフィールドを画面に表示する。これは、Ｓ２で取得した表示する帳票のテキストフィールド（全面イメージを文字認識した文字や数値を設定したテキストフィールド）を画面上に表示、例えば後述する図４の（ａ）の下段のテキストフィールドのように表示する。
【００１８】
Ｓ５は、項目からの脱出か判別する。これは、例えば図４の（ａ）の画面の下段のテキストフィールド中の項目、ここでは、お名前の右の入力フィールドの項目”？？フシ？？・・・”の上側に全面イメージ中から切り出した当該項目に対応する項目イメージを表示した状態で、オペレータが他の項目（例えば下側の項目（電話番号））を選択し、当該項目から脱出か判別する。ＹＥＳの場合には、Ｓ６に進む。ＮＯの場合には、Ｓ６、Ｓ７をスキップしてＳ８に進む。
【００１９】
Ｓ６は、Ｓ５のＹＥＳでテキストフィールド中のある項目から他の項目に脱出と判明したので、切り出しイメージ（項目イメージ）が表示中の場合には消去、例えば図４の（ａ）の下段のテキストフィールド中の現在の選択している項目（お名前）では、当該項目（お名前）の上に対応する全面イメージから切り出したイメージ（項目（お名前）の手書き入力された項目イメージ）を表示しているので、当該項目イメージを消去する。
【００２０】
Ｓ７は、イメージカーソルが表示中の場合には、消去する。これは、図４の（ａ）の上段の全面イメージ上で、下段のテキストフィールドの項目（お名前）に対応する文字認識した図示の枠（実際は赤色の枠）で強調表示したイメージカーソルを消去する。
【００２１】
Ｓ８は、項目が入力対象となったか判別する。これは、テキストフィールド中で選択された項目が入力対象となったか判別する。ＹＥＳの場合には、Ｓ９に進む。ＮＯの場合には、Ｓ９、Ｓ１０をスキップし、Ｓ１１に進む。
【００２２】
Ｓ９は、Ｓ８のＹＥＳでテキストフィールド中の選択された項目が入力対象となったと判明したので、項目に対応した切り出しイメージを、項目の上部に表示する。例えば、後述する図４の（ｂ）の下段のテキストフィールド中の項目（電話番号）が入力対象となったので、当該項目（電話番号）の上部に、全面イメージから切り出した項目イメージ（全面イメージ上の項目（電話番号）の欄に手書き入力された項目イメージ）を図示のように表示する（手書きされた図示の文字のイメージ”１２３４”を表示する）。
【００２３】
Ｓ１０は、項目に対応したイメージカーソルを、全面イメージに表示する。これは、図４の（ｂ）の画面の上段の全面イメージ上の、当該項目（電話番号）の項目イメージの部分を図示のイメージカーソル（実際は、赤の矩形の枠）を表示し、文字認識した結果を設定したテキストフィールドの項目（電話番号）に設定された値との対応を判り易く表示する。
【００２４】
以上のＳ９、Ｓ１０により、図４の（ｂ）の画面の下段のテキストフィールド中の選択した項目（電話番号）の入力フィールドに文字認識結果が設定され、その上部に、全面イメージ中の当該項目（電話番号）の欄に手書き入力されたイメージをスキャナで読み取った項目イメージを切り出して図示のように表示すると共に、図４の（ｂ）の画面の上段の元の全面イメージの項目（電話番号）の手書き入力されたイメージ（項目イメージ）の部分にイメージカーソル（赤の矩形枠）を表示することが可能となる。これにより、オペレータはテキストフィールドの選択した項目（電話番号）に設定されている文字認識結果（１２３４）と、すぐ上部に表示された項目イメージ（１２３４のイメージ）とを比較して文字認識結果がここでは正しいことを目線を移動させることなく即座に判断することが可能となると共に、元の全面イメージ上の当該項目イメージの位置がイメージカーソル（赤の矩形枠）で対応づけて表示されるので、元の帳票上の場所と手書きされたイメージとの確認を併せて容易に行うことが可能となる
Ｓ１１は、修正入力ありか判別する。これは、図４の（ｂ）の画面の下段のテキストフィールド中の選択した項目に設定されている文字認識結果の文字や値と、すぐ上部に表示された項目イメージ（手書き入力された当該項目のイメージ）とを見たオペレータが文字認識結果について修正入力が必要か判別する。ＹＥＳの場合には、Ｓ１２でテキストフィールドに入力データを反映、例えば項目に設定されている文字認識結果の文字や数値をキーボードを操作して修正入力して正しくする。そして、Ｓ１３に進む。一方、Ｓ１１のＮＯの場合には、Ｓ１３に進む。
【００２５】
Ｓ１３は、入力処理は終了か判別する。ＹＥＳの場合には、Ｓ１４で、入力データを図３の帳票データベース５に図示のように格納し、終了する。ＮＯの場合には、Ｓ５以降を繰り返す。
【００２６】
以上によって、オペレータが帳票を指定すると、システム１が帳票データベース５から該当帳票の全面イメージを取得、切り出しイメージ（項目イメージ）を取得、および文字認識した結果のテキストフィールドを取得し、図４の（ａ）に示すように表示装置６の画面上に表示するので、オペレータが図４の（ａ）の画面の下段のテキストフィールド中の任意の項目を選択すると、システム１が当該項目の上部に全面イメージから切り出した当該項目に対応する項目イメージを表示および元の全面イメージ中の当該項目に対応する項目イメージの部分をイメージカーソルで強調表示する。これにより、オペレータは図４の（ａ）の画面の下段のテキストフィールドの選択した項目に設定されている文字認識結果の文字や数値と、すぐ上部に表示された項目イメージとを目線を移動させることなく即座に比較してチェックすることが可能となる。更に、システム１が元の帳票中のいずれの場所、項目であるかについて、図４の（ａ）の画面の上段の全面イメージ中の当該項目の手書き入力された部分をイメージカーソル（赤の矩形の枠）で強調表示するので、オペレータは全面イメージ中の当該イメージカーソルの帳票上の場所およびそのイメージ（項目イメージ）を見て、より正確に手書き入力されたイメージとその場所を容易に確認することが可能となる。
【００２７】
図３は、本発明の帳票データベース例を示す。図示の帳票データベース５は、帳票毎に全面イメージ、当該全面イメージから項目毎に切り出した項目イメージ１，２・・ｎ、更に、文字認識結果（認識データ）などを対応づけて登録して管理するものであって、ここでは、図示の下記の情報を対応づけて登録して管理するものである。
【００２８】
・帳票ＩＤ：
・イメージデータＩＤ：
・イメージデータ：
・認識データ：
・入力データ：
・その他：    
ここで、帳票ＩＤは、手書き入力された帳票を一意に識別するＩＤ（識別子）であって、例えば帳票Ａは図４の（ａ），（ｂ）の”富士通デパートカード入会申込書”である。イメージデータＩＤは、当該帳票の全面イメージ、項目毎に切り出したの切り出しイメージ（項目イメージ）などを一意に識別するＩＤ（識別子）である。全面イメージＡは、例えば図４の（ａ），（ｂ）の画面の上段に表示したイメージ（全面イメージ）である。項目イメージ１は、例えば図４の（ｂ）の下段のテキストフィールドの項目（電話番号）の上部に表示した、全面イメージから切り出した当該項目（電話番号）の部分のイメージ（図示のイメージ”１２３４”）である。認識データは、項目イメージ１，２，３・・・ｎ毎の文字認識した文字認識結果である。例えば図４の（ｂ）の画面の下段のテキストフィールドの項目（電話番号）に設定されている文字認識結果の”１２３４”である。入力データは、項目イメージ１，２，３・・・ｎ毎に、オペレータが入力したデータである。
【００２９】
図４は、本発明の画面例を示す。
図４の（ａ）は、ある項目（ここでは、申込日）を選択したときの全面イメージとテキストフィールドの画面例を示す。図示のテキストフィールド中の項目（お名前）を選択したときは、その上部に、全面イメージから切り出した当該項目（お名前）の手書された項目の部分のイメージ（項目イメージ）が図示のように表示される。また、図４の（ａ）の画面の上段の全面イメージ中の当該項目（お名前）の場所をイメージカーソル（赤の矩形枠）で強調表示し、切り出した項目イメージの元の全面イメージ中の場所を判り易く表示している。
【００３０】
以上のように表示されている状態で、テキストフィールド中の選択した項目（お名前）から他の項目（電話番号）を選択して入力対象項目を切り替えると、図４の（ｂ）に示すようになる。
【００３１】
図４の（ｂ）は、項目（申込日）から項目（電話番号）に切り替えたときの画面例を示す。ここでは、図４の（ａ）の状態から、オペレータが項目（電話番号）を選択して切り替え指示すると、システム１が切り替えた後の項目（電話番号）の上部に、切り替えた後の項目イメージ（全面イメージ中の切り替えた後の項目（電話番号）の項目イメージ）を表示すると共に、全面イメージ中の当該項目（電話番号）の部分をイメージカーソル（赤の矩形枠）で強調表示する。これらにより、新たに切り替えたテキストフィールド中の項目（電話番号）の文字認識結果（ここでは、１２３４）の上部に手書きされた当該項目（電話番号）の項目イメージが図示のように表示されるので、オペレータは文字認識結果と元の項目イメージとを目線の移動なしに即座に確認することが可能となる。そして、元の全面イメージ中の当該項目（電話番号）の場所がイメージカーソル（赤の矩形枠）で表示されるので、オペレータは当該イメージカーソルの場所およびその中の、手書きされたイメージを目視し、帳票の全体の中の当該イメージカーソルの場所をもとに文字認識結果についてより正確に文字認識結果を判断することが可能となる。
【産業上の利用可能性】
【００３２】
本発明は、文字認識したテキストフィールド中のカーソルの位置する項目の近傍に項目イメージを表示すると共に全面イメージ上の当該項目イメージを強調表示し、修正入力があったときは当該項目に反映することを繰り返すことにより、テキストフィールド上の項目の確認、修正時に項目イメージへの視線の動きを極めて少なくかつ迅速かつ簡単に確認、修正作業することが可能となる。
【図面の簡単な説明】
【００３３】
【図１】本発明のシステム構成図である。
【図２】本発明の動作説明フローチャートである。
【図３】本発明の帳票データベース例である。
【図４】本発明の画面例である。
【符号の説明】
【００３４】
１：システム（パソコン等）
２：データ取得手段
３：画面表示手段
４：データ修正手段
５：帳票データベース
６：表示装置
７：入力装置
【図１】
2006277001.tif 000003
【図２】
2006277001.tif 000004
【図３】
2006277001.tif 000005
【図４】
2006277001.tif 000006