(57)【要約】    【課題】  文書の各ページの画像データと文字認識結果とを対応づけた上でページ間、文書間を随意に移動して閲覧できるようにする。    【解決手段】  文書管理部５０は、データ管理情報を管理する。データ管理情報は、画像データまたは文字認識結果データのページＩＤごとに、前ページＩＤ（直前のページのＩＤ）、次ページＩＤ（直後のページのＩＤ）、文書区切りフラグ、次文書のトップページＩＤ、前文書のトップページＩＤ等を保持する。各ページのレコードを参照することにより、前ページ、次ページ、前文書のトップページ、次文書のトップページのページＩＤを取得してそれぞれのページを記憶装置６０から取りだして表示することができる。また画像データ、文字認識結果データの種別を指定することにより表示タイプを切り替えることができる。【選択図】  図１
2005322081.tif 000002
【特許請求の範囲】
【請求項１】
文書の所定量単位ごとの画像データと、上記所定量単位ごとの画像データを文字認識して得た所定量単位ごとの文字認識結果データとを関連付けて記憶するデータ記憶手段と、
所定量単位で文書の部分を指定する文書部分指定手段と、
上記文書部分指定手段で指定された文書の部分に対応する画像データおよび文字認識結果データを表示するデータ表示手段とを有することを特徴とする文書管理装置。
【請求項２】
画像データおよび文字認識結果のいずれかを指定するデータ種類指定手段を更に有し、データ種類指定手段の指定に応じて上記文書部分指定手段で指定された文書の部分に対応する画像データおよび文字認識結果データの一方を表示する請求項１記載の文書管理装置。
【請求項３】
上記所定量単位はページである請求項１または２記載の文書管理装置。
【請求項４】
上記所定量単位は、文書のセクションである請求項１または２記載の文書管理装置。
【請求項５】
上記文書のセクションは段落である請求項４記載の文書管理装置。
【請求項６】
上記所定量単位をユーザが指定できる請求項１または２記載の文書管理装置。
【請求項７】
文書のページごとの画像データに対して、当該画像データ自体を識別する本体データ識別子、当該ページの直前のページの画像データを識別する前ページデータ識別子および当該ページの直後のページの画像データを識別する次ページデータ識別子を記憶する画像データ管理情報記憶手段と、
上記画像データと対応する文字認識結果データを上記画像データのデータ識別子と所定の対応関係により対応するデータ識別子の下で管理し、さらに、文書のページごとの文字認識結果データに対して、当該文字認識結果データ自体を識別する本体データ識別子、当該ページの直前のページの文字認識結果データを識別する前ページデータ識別子および当該ページの直後のページの文字認識結果を識別する次ページデータ識別子を記憶する文字認識結果データ管理情報記憶手段と、
上記画像データのデータ識別子に基づいて文書のページごとの画像データを読み出し可能に記憶する画像データ記憶手段と、
上記文字認識結果のデータ識別子に基づいて文書のページごとの文字認識結果データを読み出し可能に記憶する画像データ記憶手段と、
現在の画像データの表示を直前のページの画像データおよび直後のページの画像データの表示にそれぞれ切り替える指示に応答して、上記画像データ管理情報記憶手段を参照して該当するデータ識別子を決定し、決定したデータ識別子により上記画像データ記憶手段から該当する画像データを読み出す第１のデータ読み出し手段と、
現在の文字認識結果データの表示を直前のページの文字認識結果データおよび直後のページの文字認識結果データの表示にそれぞれ切り替える指示に応答して、上記文字認識結果データ管理情報記憶手段を参照して該当するデータ識別子を決定し、決定したデータ識別子により上記文字認識結果データ記憶手段から該当する文字認識結果データを読み出す第２のデータ読み出し手段と、
現在の画像データの表示を対応する文字認識結果データの表示に切り替える指示に応答して現在の画像データのデータ識別子に対応する文字認識結果データのデータ識別子を上記所定の対応関係から決定し、決定した文字認識結果データのデータ識別子により上記文字認識結果データ記憶手段から該当する文字認識結果データを読み出す第３のデータ読み出し手段と、
現在の文字認識結果データの表示を対応する画像データの表示に切り替える指示に応答して現在の文字認識結果のデータ識別子に対応する画像データのデータ識別子を上記所定の対応関係から決定し、決定した画像データのデータ識別子により上記画像データ記憶手段から該当する画像データを読み出す第４のデータ読み出し手段と、
上記第１のデータ読み出し手段、上記第２のデータ読み出し手段、上記第３のデータ読み出し手段、および上記第４のデータ読み出し手段から読み出した画像データまたは文字認識結果データを表示する表示手段とを有することを特徴とする文書管理装置。
【請求項８】
上記画像データ管理情報記憶手段は、文書のページごとの画像データに対して、さらに当該ページが文書区切りに隣接しているかどうかを示す文書区切り情報を記憶し、上記文字認識結果データ管理情報記憶手段は、文書のページごとの文字認識結果データに対して、さらに、当該ページが文書区切りに隣接しているかどうかを示す文書区切り情報を記憶する請求項１記載の文書管理装置。
【請求項９】
上記データ識別子はファイル管理システムのパス名であり、上記画像データのデータ識別子と、当該画像データに対応する文字認識結果データのデータ識別子とは一部が共通であり、相違部分で画像データか文字認識結果データかを判別する請求項７または８記載の文書管理装置。
【請求項１０】
画像データと文字認識結果データとを対応する別々のフォルダに保持する請求項９記載の文書管理装置。
【請求項１１】
画像データと文字認識結果データとを拡張子により区別する請求項９または１０記載の文書管理装置。
【請求項１２】
上記画像データ管理情報記憶手段および上記文字認識結果データ管理情報記憶手段のうちの一方を他方で兼用する請求項７〜１１のいずれかに記載の文書管理装置。
【請求項１３】
文書のページごとの画像データに対して、当該画像データ自体を識別する本体データ識別子、当該ページの直前のページの画像データを識別する前ページデータ識別子、当該ページの直後のページの画像データを識別する次ページデータ識別子、当該文書の直前の文書の所定ページの画像データを識別する前文書データ所定ページ識別子および当該文書の直後の文書の所定ページの画像データを識別する次文書データ所定ページ識別子を記憶する画像データ管理情報記憶手段と、
上記画像データと対応する文字認識結果データを上記画像データのデータ識別子と所定の対応関係により対応するデータ識別子の下で管理し、さらに、文書のページごとの文字認識結果データに対して、当該文字認識結果データ自体を識別する本体データ識別子、当該ページの直前のページの文字認識結果データを識別する前ページデータ識別子、当該ページの直後のページの文字認識結果を識別する次ページデータ識別子、当該文書の直前の文書の所定ページの文字認識結果を識別する前文書データ所定ページ識別子および当該文書の直後の文書の所定ページの文字認識結果データを識別する次文書データ所定ページ識別子を記憶する文字認識結果データ管理情報記憶手段と、
上記画像データのデータ識別子に基づいて文書のページごとの画像データを読み出し可能に記憶する画像データ記憶手段と、
上記文字認識結果データのデータ識別子に基づいて文書のページごとの文字認識結果データを読み出し可能に記憶する画像データ記憶手段とを準備し、
第１のデータ読み出し手段により、現在の画像データの表示を直前のページの画像データ、直後のページの画像データ、直前の文書の所定のページの画像データおよび直後の文書の所定のページの画像データの表示にそれぞれ切り替える指示に応答して、上記画像データ管理情報記憶手段を参照して該当するデータ識別子を決定し、決定したデータ識別子により上記画像データ記憶手段から該当する画像データを読み出すステップと、
第２のデータ読み出し手段により、現在の文字認識結果データの表示を直前のページの文字認識結果データ、直後のページの文字認識結果データ、直前の文書の所定のページの文字認識結果データおよび直後の文書の所定のページの文字認識結果データの表示にそれぞれ切り替える指示に応答して、上記文字認識結果データ管理情報記憶手段を参照して該当するデータ識別子を決定し、決定したデータ識別子により上記文字認識結果データ記憶手段から該当する文字認識結果データを読み出すステップと、
第３のデータ読み出し手段により、現在の画像データの表示を対応する文字認識結果データの表示に切り替える指示に応答して現在の画像データのデータ識別子に対応する文字認識結果データのデータ識別子を上記所定の対応関係から決定し、決定した文字認識結果データのデータ識別子により上記文字認識結果データ記憶手段から該当する文字認識結果データを読み出すステップと、
第４のデータ読み出し手段により、現在の文字認識結果データの表示を対応する画像データの表示に切り替える指示に応答して現在の文字認識結果のデータ識別子に対応する画像データのデータ識別子を上記所定の対応関係から決定し、決定した画像データのデータ識別子により上記画像データ記憶手段から該当する画像データを読み出すステップと、
表示手段により、上記第１のデータ読み出し手段、上記第２のデータ読み出し手段、上記第３のデータ読み出し手段、および上記第４のデータ読み出し手段から読み出した画像データまたは文字認識結果データを表示するステップとを有することを特徴とする文書管理方法。
【請求項１４】
画像データ管理情報記憶手段により、文書のページごとの画像データに対して、当該画像データ自体を識別する本体データ識別子、当該ページの直前のページの画像データを識別する前ページデータ識別子、当該ページの直後のページの画像データを識別する次ページデータ識別子、当該文書の直前の文書の所定ページの画像データを識別する前文書データ所定ページ識別子および当該文書の直後の文書の所定ページの画像データを識別する次文書データ所定ページ識別子を記憶するステップと、
文字認識結果データ管理情報記憶手段により、上記画像データと対応する文字認識結果データを上記画像データのデータ識別子と所定の対応関係により対応するデータ識別子の下で管理し、さらに、文書のページごとの文字認識結果データに対して、当該文字認識結果データ自体を識別する本体データ識別子、当該ページの直前のページの文字認識結果データを識別する前ページデータ識別子、当該ページの直後のページの文字認識結果を識別する次ページデータ識別子、当該文書の直前の文書の所定ページの文字認識結果を識別する前文書データ所定ページ識別子および当該文書の直後の文書の所定ページの文字認識結果データを識別する次文書データ所定ページ識別子を記憶するステップと、
画像データ記憶手段により、上記画像データのデータ識別子に基づいて文書のページごとの画像データを読み出し可能に記憶するステップと、
画像データ記憶手段により、上記文字認識結果のデータ識別子に基づいて文書のページごとの文字認識結果データを読み出し可能に記憶するステップと、
第１のデータ読み出し手段により、現在の画像データの表示を直前のページの画像データ、直後のページの画像データ、直前の文書の所定のページの画像データおよび直後の文書の所定のページの画像データの表示にそれぞれ切り替える指示に応答して、上記画像データ管理情報記憶手段を参照して該当するデータ識別子を決定し、決定したデータ識別子により上記画像データ記憶手段から該当する画像データを読み出すステップと、
第２のデータ読み出し手段により、現在の文字認識結果データの表示を直前のページの文字認識結果データ、直後のページの文字認識結果データ、直前の文書の所定のページの文字認識結果データおよび直後の文書の所定のページの文字認識結果データの表示にそれぞれ切り替える指示に応答して、上記文字認識結果データ管理情報記憶手段を参照して該当するデータ識別子を決定し、決定したデータ識別子により上記文字認識結果データ記憶手段から該当する文字認識結果データを読み出すステップと、
第３のデータ読み出し手段により、現在の画像データの表示を対応する文字認識結果データの表示に切り替える指示に応答して現在の画像データのデータ識別子に対応する文字認識結果データのデータ識別子を上記所定の対応関係から決定し、決定した文字認識結果データのデータ識別子により上記文字認識結果データ記憶手段から該当する文字認識結果データを読み出すステップと、
第４のデータ読み出し手段により、現在の文字認識結果データの表示を対応する画像データの表示に切り替える指示に応答して現在の文字認識結果のデータ識別子に対応する画像データのデータ識別子を上記所定の対応関係から決定し、決定した画像データのデータ識別子により上記画像データ記憶手段から該当する画像データを読み出すステップと、
表示手段により、上記第１のデータ読み出し手段、上記第２のデータ読み出し手段、上記第３のデータ読み出し手段、および上記第４のデータ読み出し手段から読み出した画像データまたは文字認識結果データを表示するステップとをコンピュータに実行させるために用いられることを特徴とする文書管理用コンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、文書の画像データとその画像データの文字認識結果とを関連付けて管理する文書管理技術に関し、とくに、複数の文書についてその各ページの画像データと文字認識結果との間を自在に行き来しながら参照できるようにしたものである。
【背景技術】
【０００２】
オフィス空間を有効に利用するために紙文書を遠隔地の比較的コストが低廉な倉庫に保管し、あるいは、破棄し、その内容を電子化して利用することが提案されている。紙文書の電子化は、オフィスコストを抑制するとともに情報の共有化の上でも好ましい。紙文書の電子化は、文書を各葉にばらばらにし、サイズの統一、両面ページの片面化等の前処理を行なった後、画像読取装置（スキャナ）で画像を読み取り、適宜、文字認識処理等の後処理を行い、文書単位で管理するようにしていた。膨大な数の文書を電子化した後、作業者が各文書に重要事項すなわち文書の属性を付与し、文書管理の用に供したり、電子化した文書に対して検索等を行なえるようにする。
【０００３】
ところで、作業者が文書に属性を付与する際には、文書から文書へ、ページからページへ随意に移動して内容を閲覧することが重要であり、また、画像データと文字認識結果とを対応づけて表示することが肝要である。例えば、ある文書に属性を付与する際に、表紙画像の文字認識結果を閲覧していたときに重要な部分に誤認識らしい箇所があった場合には即座に元の画像を参照して正しい内容を把握して属性の付与に反映させる必要がある。
【０００４】
なお、この発明と関連する特許文献としては、紙文書を電子化してサービス享受者に提供する際に、基本的には画像データを閲覧させ、目次（見出し項目と該当ページ）および各ページのページ番号とを文字認識したうえで、各ページの画像データを目次に対応させて表示できるようにすることを開示するものがある（特許文献１）。しかしながら、この特許文献には、各ページの画像データとその文字認識結果とを対応づけることについては何ら記載がない。
【特許文献１】特開２００２−２４７９６公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
この発明は、以上の事情を考慮してなされたものであり、文書の各ページの画像データと文字認識結果とを対応づけた上でページ間、文書間を随意に移動して閲覧できる文書管理技術を提供することを目的としている。
【課題を解決するための手段】
【０００６】
この発明によれば、上述の目的を達成するために、特許請求の範囲に記載のとおりの構成を採用している。ここでは、発明を詳細に説明するのに先だって、特許請求の範囲の記載について補充的に説明を行なっておく。
【０００７】
すなわち、この発明の一側面によれば、上述の目的を達成するために、文書管理装置に：文書の所定量単位ごとの画像データと、上記所定量単位ごとの画像データを文字認識して得た所定量単位ごとの文字認識結果データとを関連付けて記憶するデータ記憶手段と；所定量単位で文書の部分を指定する文書部分指定手段と；上記文書部分指定手段で指定された文書の部分に対応する画像データおよび文字認識結果データを表示するデータ表示手段とを設けるようにしている。
【０００８】
この構成においては、文書の各所定量単位（例えば各ページ）の画像データと文字認識結果データとを対応づけて、各所定単位の画像データと文字認識結果データとの間を随意に移動して閲覧できる。
【０００９】
この構成において、画像データおよび文字認識結果のいずれかを指定するデータ種類指定手段を更に設け、データ種類指定手段の指定に応じて上記文書部分指定手段で指定された文書の部分に対応する画像データおよび文字認識結果データの一方を表示するようにしてもよい。もちろん画像データおよび文字認識結果データの双方を同時に表示しても良い。
上記所定量単位はページ、段落、章、節等である。複数種類の所定量単位をユーザが指定できるようにしても良い。
【００１０】
この発明の他の側面によれば、上述の目的を達成するために、文書管理装置に：文書のページごとの画像データに対して、当該画像データ自体を識別する本体データ識別子、当該ページの直前のページの画像データを識別する前ページデータ識別子および当該ページの直後のページの画像データを識別する次ページデータ識別子を記憶する画像データ管理情報記憶手段と；上記画像データと対応する文字認識結果データを上記画像データのデータ識別子と所定の対応関係により対応するデータ識別子の下で管理し、さらに、文書のページごとの文字認識結果データに対して、当該文字認識結果データ自体を識別する本体データ識別子、当該ページの直前のページの文字認識結果データを識別する前ページデータ識別子および当該ページの直後のページの文字認識結果を識別する次ページデータ識別子を記憶する文字認識結果データ管理情報記憶手段と；上記画像データのデータ識別子に基づいて文書のページごとの画像データを読み出し可能に記憶する画像データ記憶手段と；上記文字認識結果のデータ識別子に基づいて文書のページごとの文字認識結果データを読み出し可能に記憶する画像データ記憶手段と；現在の画像データの表示を直前のページの画像データおよび直後のページの画像データの表示にそれぞれ切り替える指示に応答して、上記画像データ管理情報記憶手段を参照して該当するデータ識別子を決定し、決定したデータ識別子により上記画像データ記憶手段から該当する画像データを読み出す第１のデータ読み出し手段と；現在の文字認識結果データの表示を直前のページの文字認識結果データおよび直後のページの文字認識結果データの表示にそれぞれ切り替える指示に応答して、上記文字認識結果データ管理情報記憶手段を参照して該当するデータ識別子を決定し、決定したデータ識別子により上記文字認識結果データ記憶手段から該当する文字認識結果データを読み出す第２のデータ読み出し手段と；現在の画像データの表示を対応する文字認識結果データの表示に切り替える指示に応答して現在の画像データのデータ識別子に対応する文字認識結果データのデータ識別子を上記所定の対応関係から決定し、決定した文字認識結果データのデータ識別子により上記文字認識結果データ記憶手段から該当する文字認識結果データを読み出す第３のデータ読み出し手段と；現在の文字認識結果データの表示を対応する画像データの表示に切り替える指示に応答して現在の文字認識結果のデータ識別子に対応する画像データのデータ識別子を上記所定の対応関係から決定し、決定した画像データのデータ識別子により上記画像データ記憶手段から該当する画像データを読み出す第４のデータ読み出し手段と；上記第１のデータ読み出し手段、上記第２のデータ読み出し手段、上記第３のデータ読み出し手段、および上記第４のデータ読み出し手段から読み出した画像データまたは文字認識結果データを表示する表示手段とを設けるようにしている。
【００１１】
この構成においては、文書の各ページの画像データと文字認識結果とを対応づけた上でページ間、文書間を随意に移動して閲覧できる。
【００１２】
この発明の文書管理装置は、単一の筐体に収容された単一の機器でもよいし、個別の筐体に収容された個別の機器を組み合わせて構成したものでも良い。例えばクライアント・サーバ・システムでこの発明の文書管理装置を構成できる。
【００１３】
画像データは、文字コードによりコード化されていないデータであり、種々のフォーマットを採用でき、種々の画像データ閲覧ソフトウェアを用いて表示できる。文字認識結果データは、文字コードからなるファイルであり、種々のフォーマットで記憶される。例えばテキストやＨＴＭＬ文書の形態で保持される。
【００１４】
画像データと文字認識結果データの対応づけは任意のものを採用できる。同一の文書ＩＤを用い、バージョンを異ならせても良いし、ファイル名や、パス名の一部を同一にしても良い。テーブルを用いて個々の画像データファイルと文字認識結果データファイルとを対応づけても良いし、リンク情報を用いても良い。
【００１５】
この構成においては、上記画像データ管理情報記憶手段は、文書のページごとの画像データに対して、さらに当該ページが文書区切りに隣接しているかどうかを示す文書区切り情報を記憶し、上記文字認識結果データ管理情報記憶手段は、文書のページごとの文字認識結果データに対して、さらに、当該ページが文書区切りに隣接しているかどうかを示す文書区切り情報を記憶するようにしてもよい。
【００１６】
文書区切り情報を用いて文書ごとの管理が可能になる。
【００１７】
画像データ管理情報は種々のフォーマットで保持されてよく、例えば、データベースのレコード（タプル）やＣＳＶ（コンマ・セパレイテッド・バリュー）ファイル等を採用できる。
【００１８】
上記データ識別子は典型的にはファイル管理システムのパス名であり、上記画像データのデータ識別子と、当該画像データに対応する文字認識結果データのデータ識別子とは一部が共通であり、相違部分で画像データか文字認識結果データかを判別するようにしてもよい。
【００１９】
画像データと文字認識結果データとを対応する別々のフォルダに保持するようにしてもよい。
【００２０】
画像データと文字認識結果データとを拡張子により区別するようにしてもよい。
【００２１】
上記画像データ管理情報記憶手段および上記文字認識結果データ管理情報記憶手段のうちの一方を他方で兼用するようにしてもよい。
【００２２】
なお、この発明は装置またはシステムとして実現できるのみでなく、方法としても実現可能である。また、そのような発明の一部をソフトウェアとして構成することができることはもちろんである。またそのようなソフトウェアをコンピュータに実行させるために用いるソフトウェア製品もこの発明の技術的な範囲に含まれることも当然である。
【００２３】
この発明の上述の側面および他の側面は特許請求の範囲に記載され以下実施例を用いて詳述される。
【発明の効果】
【００２４】
この発明によれば、文書の各ページの画像データと文字認識結果とを対応づけた上でページ間、文書間を随意に移動して閲覧できる。
【発明を実施するための最良の形態】
【００２５】
以下、この発明の実施例について説明する。
【実施例１】
【００２６】
図１は、この発明の実施例１を模式的に示している。この実施例は、この発明の文書管理技術を文書属性入力装置に適用したものである。この実施例では、複数の紙文書を電子化して各文書の各ページの画像データを取得し、さらに各ページの文字認識結果データ（この例では固有表現をマークアップしてハイライトしたＨＴＭＬ、コードデータ、テキストデータでもよい）を取得してハイライト情報等を参照しながら文書に属性を付与する。この例では説明の便宜上、３つの文書の画像を読み取る場合を前提とするが、文書数等はこれに限らないことはもちろんである。
【００２７】
図１において、実施例１の文書属性入力装置は、紙送り装置２０、画像読取装置３０、文字認識装置３１、用紙判別部４０、文書管理部５０、記憶装置６０、表示制御部７０、表示装置８０、ポインティング装置９０等を含んで構成されている。
【００２８】
紙送り装置２０および画像読取装置３０は紙文書の電子化を行なう。まず、文書Ｄ１、Ｄ２、Ｄ３がバラバラにされて用紙束ｄ１、ｄ２、ｄ３とされ、それぞれの用紙束ｄ１、ｄ２、ｄ３の上に管理用用紙（バナーシートともいう）ｃ１、ｃ２、ｃ３が挿入される。これら一群の用紙はバッチ処理される対象として（以下ではバッチ用紙束ともいい、符号１０で示す）紙送り装置２０に載置される。紙送り装置２０はバッチ用紙束１０の用紙を上から、または下から順次に送り出して画像読取装置３０に供給する。画像読取装置３０は、典型的には、通常のスキャナであり、送られてくる用紙の印刷面を光学的に走査して印刷面の電子画像データを取得する。
【００２９】
文字認識装置３１は、電子画像データに対して周知の文字認識処理を実行する。
【００３０】
用紙判別部４０は、バッチ用紙束１０から管理用用紙ｃ１、ｃ２、ｃ３を検出する。管理用用紙ｃ１、ｃ２、ｃ３は、他の用紙と区別するために、例えば、特別な色の用紙（一部の特定領域が特別の色でも良い）を用いる。あるいは、図１２に示すように、区別用の文字列１００、例えば「ＢＡＮＮＥＲ」とそれに続く連続数字（例えば「０００１」から徐々に大きくなる数字）を印刷しても良いし、一次元または二次元バーコードやＲＦＩＤタグを設けて文書区切りの用紙としても良い。用紙の色は、画像読取装置３０で読み取った電子画像データの属性から判別できる。紙送り装置２０等に色判別機構（例えば、所定の色の光を検出する検出器。図示しない）を設けても良い。管理用用紙ｃ１、ｃ２、ｃ３の記述内容を利用する場合には、その光学画像を文字認識装置３１により文字コードに変換して記述内容、例えば「ＢＡＮＮＥＲ」の文字や連続番号に連続性等に基づいて検出する。バーコードやＲＦＩＤタグを用いる場合には専用の読取機が必要である。ＲＦＩＤタグの読取機は、用紙が重なって複数のＲＦＩＤタグが相互に近傍に配置されている状態では、誤動作を招来するので、紙送り装置２０の搬送路等、用紙が重ならない状態が保証されている場所に設けることが好ましい。また、電磁遮蔽部を設けて外来ノイズへの耐性を強化することが好ましい。
【００３１】
文書管理部５０は、図４に示すように、管理用用紙からつぎの管理用用紙の間の用紙の画像（一番下の用紙束の場合、管理用用紙の次の用紙の画像から最後の用紙の画像まで）を１つの管理単位で管理する。さらに、図４の例では、文書を構成する各ページの画像データと、その画像データを文字認識して取得したテキストとを、１つの管理単位５０ａの下で管理している。より具体的には、文書ごとに各ページの画像データにページ順の連続番号を持つ識別子（ＩＤ）を付与する。さらに文書ごとの各ページの文字認識結果データにページ順に連続番号を付す。対応する画像データの識別子と文字認識結果データの識別子とは主たる部分が同一であり、データ種別を表す部分が異なる。例えば、画像データを「０００１−００１ｉｍｇ」で表し、文字認識結果を「０００１−００１ｈｔｍｌ」で表す。データ種別は拡張子で表示しても良い。データ識別子はパス名であってもよいし、パス名とは独立した別の識別子であってもよい。さらに具体的な例では、１文書の画像データを１つのフォルダに配置し、各画像データを１つのファイルとして連続したファイル名を割り当てる。同様に文字認識結果についても各文書について１つのフォルダを用意し、各ページの文字認識結果のデータを１つのファイルとして連続したファイル名を割り当てる。相互に対応する画像データのファイルと文字認識結果データのファイルとは、対応するファイル名を有し、相互に関連付けられ、一方から他方を容易に決定できる。例えばフォルダ名を適宜に変更し、拡張子も適宜に変更すればよい。図４の破線は画像データとテキストデータとが異なるフォルダ５０ｂ、５０ｃで管理されていることを示す。図４の例では、複数の文書の画像データを１つのフォルダ５０ｂに配置し、対応する複数の文書の文字認識結果データを他の１つのフォルダ５０ｃに配置している。もちろん、画像データや文字認識結果データがどの文書に属するかは、個別のフォルダ５０ｂ、５０ｃを用いずに、例えば、データ識別子（ファイル名でもよい）の一部にどの文書かを示す文字列を含ませても良い。
【００３２】
上述した画像データおよび文字認識結果データは記憶装置６０（図２の画像データ記憶部６１および文字認識結果データ記憶部６２）に記憶される。
【００３３】
文書管理部５０は、さらに、データ管理情報を管理する。図５はデータ管理情報の一例を示しており、この図に示されるように、画像データまたは文字認識結果データのページＩＤごとに、前ページＩＤ（直前のページのＩＤ）、次ページＩＤ（直後のページのＩＤ）、文書区切りフラグ、次文書のトップページＩＤ、前文書のトップページＩＤ等が割り当てられている。該当するページがない場合には「ｎｕｌｌ」が割り当てられる。文書区切りフラグが「ＴＲＵＥ」のときには、そのページの次が他の文書のページであること、すなわち文書区切りであるを示し、文書区切りフラグが「ＦＡＬＳＥ」のときには、その次のページも同一の文書のページであること、すなわち文書区切りでないことを示す。文書区切りフラグを用いて個々の文書を区切って管理できる。
【００３４】
例えば、当ページＩＤが「０００１−００１」（この例では文書０００１の００１ページを示す）のときには次ページＩＤは「０００１−００２」であり、前ページＩＤは「ｎｕｌｌ」である（文書００１は最初の文書）。文書区切りフラグは「ＦＡＬＳＥ」であり、次文書のトップページＩＤは「０００２−００１」である。前文書のトップページＩＤは「ｎｕｌｌ」である。
【００３５】
同様に、当ページＩＤが「０００１−００５」の場合、前ページＩＤは「０００１−００４」であり、次ページＩＤは「０００２−００１」であり、文書区切りフラグが「ＴＲＵＥ」であり、次文書のトップページＩＤが「０００３−００１」であり、前文書のトップページＩＤが「０００１−００１」である。
【００３６】
各ページのレコード（タプル）を参照することにより、前ページ、次ページ、前文書のトップページ、次文書のトップページのページＩＤを取得してそれぞれのページを記憶装置６０から取りだして表示することができる。
【００３７】
なお、この例では、画像データのフォルダとページＩＤとを指定して画像データを取り出し、文字認識結果データのフォルダとページＩＤとを指定して文字認識結果データを取り出すようにしている。すなわち、フォルダを指定することにより画像データと文字認識結果データを区別するようにしている。もちろん、拡張子により画像データおよび文字認識結果データの区別を行なったり、付加的な区別用の文字列をページＩＤに加えて画像データまたは文字認識結果データを区別して取り出すようにしても良い。
【００３８】
また図５のデータ管理情報は種々のフォーマットを採用でき、例えば、データベースのレコードとして管理されていも良いし、ＣＳＶファイルとして管理されても良いし、その他任意のフォーマットで管理されて良い。
【００３９】
文書管理部５０は、さらに、利用者に対して、図３に示すような属性入力用のユーザインタフェースを提示して利用者から属性入力を受け付ける。すなわち、文書管理部５０は、図３に示すような属性入力用のユーザインタフェースを表示するためのデータを表示制御部７０に送り、表示制御部７０はＣＲＴや液晶表示装置等の表示装置８０の画面上に図３に示すようなユーザインタフェースを表示する。ポインティング装置９０は、例えばマウス装置であり、表示装置８０の表示画面上の座標を指示するものである。
【００４０】
図３に示す表示例では、左側のフレームＦ１に文字認識結果データ（ＨＴＭＬ文書）１５１を表示している。紙文書をスキャンインして取得したオリジナルの画像文書（画像データ）を文字認識処理し、そののち固有表現を抽出し当該固有表現をタグによりハイライトしたものである。この例では、「あいうえ男」（人名）、「Ｈ１６／０５／１０」（日付）、「東京都」（地名）、「日本株式会社」（組織名）等の固有表現をハイライトして示している。
【００４１】
フレームＦ１には、文字認識結果データ１５１に代えてオリジナルの画像データを表示することができる。例えば図３の例では、上部にコマンドバーＣに種々の［画像文書］（オリジナルの画像データ）、［ＨＴＭＬ文書］（文字認識結果データ）、［前ページ］、［次ページ］、［前文書］、［次文書］のコマンドボタンが設けられ、［画像文書］、［ＨＴＭＬ文書］をクリック操作等することにより文書の切替を行なえる。
【００４２】
また、［前ページ］、［次ページ］、［前文書］、［次文書］をクリックすることにより前ページのデータ（画像データまたは文字認識結果データ）、次ページのデータ、前文書のトップページにデータ、次文書のトップページのデータをフレームＦ１に表示できる。
【００４３】
図３の例では、フレームＦ２、Ｆ３に属性入力テーブル１５２およびお定型語句テーブル１５３が表示されている。文書管理部５０は、文字認識結果データ（ＨＴＭＬ文書）のハイライト部分がクリックされ、属性入力テーブル１５２のフィールドがクリックされたことに基づいて、ハイライト部分の語句を属性入力テーブル１５２のフィールドに転記する。同様に、文書管理部５０は、定型語句テーブル１５３の所定の定型語句がクリックがクリックされ、属性入力テーブル１５２のフィールドがクリックされたことに基づいて、定型語句を属性入力テーブル１５２のフィールドに転記する。
【００４４】
このようにして、文字認識結果データ（ＨＴＭＬ文書）のハイライト部または定型語句のフィールドをクリックした後、属性入力テーブルのフィールドをクリックすることにより簡易に属性値を入力できる。
【００４５】
文字認識結果には誤認識もあるので、文字認識結果データから属性入力テーブルに転記を行なう際には、オリジナルの画像データを閲覧してそれが正しいかどうかを検証しなけらえばならない場合もある。また、文書の属性を判別するために前後のページを閲覧しなければならない場合もある。また、今まで属性を付与した文書やこれから属性を付与しようとしている文書を閲覧して全体的な見地から属性を判別する必要がある場合がある。
【００４６】
この実施例では、［画像文書］（オリジナルの画像データ）、［ＨＴＭＬ文書］（文字認識結果データ）、［前ページ］、［次ページ］、［前文書］、［次文書］のコマンドボタンをクリック操作することにより、任意の種類のデータの任意のページに即座に移動して表示が可能である。
【００４７】
図２は、図１の文書管理部５０の要部の構成例を説明するものである。図２の要部構成例は画像データまたは文字認識結果データを取りだして表示するためのものである。図２において、文書管理部５０には、第１読み出し部５１、第２読み出し部５２、第３読み出し部５３、第４読み出し部５４、イベント受信部５５等が設けられている。また記憶装置６０には、画像データ記憶部６１、文字認識結果データ記憶部６２、画像データ管理情報記憶部６３、文字認識結果データ管理情報記憶部６４等が設けられている。画像データ記憶部６１は各ページの画像データ（図２のフォルダ５０ｂの画像データ）を記憶するものである。文字認識結果データ記憶部６２は各ページの文字認識結果データ（図２のフォルダ５０ｃの文字認識結果データ）を記憶するものである。画像データ管理情報記憶部６３は、図３に示すようなデータ管理情報を画像データに関して記憶するものである。文字認識結果データ管理情報記憶部６４は、図５に示すようなデータ管理情報を、文字認識結果データに関して記憶するものである。図５に示すようにページＩＤを画像データおよび文字認識結果データの双方のアドレッシングに検証する場合には、データ管理情報を画像データと文字認識結果データとで兼用することもできる。画像データ記憶部６１、文字認識結果データ記憶部６２、画像データ管理情報記憶部６３、文字認識結果データ管理情報記憶部６４は、図２においては個別に表示されているが、１つの記憶機器に配置しても良いし、複数の記憶機器に配置しても良い。
【００４８】
ポインティング装置９０を用いて［画像文書］、［ＨＴＭＬ文書］、［前ページ］、［次ページ］、［前文書］、［次文書］のコマンドボタンがクリック操作されると、イベント受信部５５が対応するイベントを受け取って第１読み出し部５１、第２読み出し部５２、第３読み出し部５３、第４読み出し部５４のいずれかが画像データ管理情報記憶部６３や文字認識結果データ管理情報記憶部６４を適宜参照して画像データ記憶部６１や文字認識結果データ記憶部６２から画像データや文字認識結果データを読み出して表示制御部７０に供給し表示装置８０に画像データまたは文字認識結果データを表示する。
【００４９】
つぎに［画像文書］、［ＨＴＭＬ文書］、［前ページ］、［次ページ］、［前文書］、［次文書］の各コマンドボタンがクリック操作されたときの動作を説明する。
【００５０】
図６は、［前ページ］のコマンドボタンがクリックされたときの動作例を示している。ここでは、便宜上、現時点において画像データが表示されているものとするが、文字認識結果データ（ＨＴＭＬ文書）が表示されている場合も同様である。図６において、イベント受信部５５が当該イベントを判別して、画像データ管理情報記憶部６３を参照して現時点の画像データのページＩＤを当ページＩＤとするレコード（タプル）を取り出す。例えば、現在の画像データのページＩＤが「０００１−００２」であれば、図５の上から２番めのレコード（０００１−００１，０００１−００１，０００１−００３，ＦＡＬＳＥ，０００２−００１，ｎｕｌｌ）を取り出し、このレコードから前ページＩＤ「０００１−００１」を取得する（Ｓ１０）。こののちこのページＩＤを用いて画像データ記憶部６１から該当する画像データを取り出し、表示装置８０を用いて図３のフレームＦ１に表示する（Ｓ１１、Ｓ１２）。
【００５１】
図７は、［次ページ］のコマンドボタンがクリックされたときの動作例を示している。ここでも、便宜上、現時点において画像データが表示されているものとするが、文字認識結果データ（ＨＴＭＬ文書）が表示されている場合も同様である。図７において、イベント受信部５５が当該イベントを判別して、画像データ管理情報記憶部６３を参照して現時点の画像データのページＩＤを当ページＩＤとするレコード（タプル）を取り出す。例えば、現在の画像データのページＩＤが「０００１−００２」であれば、図５の上から２番めのレコード（０００１−００１，０００１−００１，０００１−００３，ＦＡＬＳＥ，０００２−００１，ｎｕｌｌ）を取り出し、次ページＩＤ「０００１−００３」を取得する（Ｓ２０）。こののちこのページＩＤを用いて画像データ記憶部６１から該当する画像データを取り出し、これを表示装置８０を用いて図３のフレームＦ１に表示する（Ｓ２１、Ｓ２２）。
【００５２】
図８は、［前文書］のコマンドボタンがクリックされたときの動作例を示している。ここでも、便宜上、現時点において画像データが表示されているものとするが、文字認識結果データ（ＨＴＭＬ文書）が表示されている場合も同様である。図８において、イベント受信部５５が当該イベントを判別して、画像データ管理情報記憶部６３を参照して現時点の画像データのページＩＤを当ページＩＤとするレコード（タプル）を取り出す。例えば、現在の画像データのページＩＤが「０００２−００１」であれば、図５の上から６番めのレコード（０００２−００１，０００１−００５，０００２−００２，ＦＡＬＳＥ，０００３−００１，０００１−００１）を取り出し、このレコードから前文書のトップページＩＤ「０００１−００１」を取得する（Ｓ３０）。こののちこのページＩＤを用いて画像データ記憶部６１から該当する画像データを取り出し、表示装置８０を用いて図３のフレームＦ１に表示する（Ｓ３１、Ｓ３２）。
【００５３】
図９は、［次文書］のコマンドボタンがクリックされたときの動作例を示している。ここでも、便宜上、現時点において画像データが表示されているものとするが、文字認識結果データ（ＨＴＭＬ文書）が表示されている場合も同様である。図９において、イベント受信部５５が当該イベントを判別して、画像データ管理情報記憶部６３を参照して現時点の画像データのページＩＤを当ページＩＤとするレコード（タプル）を取り出す。例えば、現在の画像データのページＩＤが「０００２−００１」であれば、図５の上から６番めのレコード（０００２−００１，０００１−００５，０００２−００２，ＦＡＬＳＥ，０００３−００１，０００１−００１）を取り出し、このレコードから次文書のトップページＩＤ「０００３−００１」を取得する（Ｓ４０）。こののちこのページＩＤを用いて画像データ記憶部６１から該当する画像データを取り出し、表示装置８０を用いて図３のフレームＦ１に表示する（Ｓ４１、Ｓ４２）。
【００５４】
図１０は、［画像文書］のコマンドボタンがクリックされたときの動作例を示している。便宜上、現時点において文字認識結果データ（ＨＴＭＬ文書）が表示されているものとする。図１０において、イベント受信部５５が当該イベントを判別して、現時点の文字認識結果データのページＩＤを用いて画像データ記憶部６１を参照して対応する画像データを取り出し、表示装置８０を用いて図３のフレームＦ１に表示する（Ｓ５０、Ｓ５１、Ｓ５２）。
【００５５】
図１１は、［ＨＴＭＬ文書］のコマンドボタンがクリックされたときの動作例を示している。便宜上、現時点において画像データが表示されているものとする。図１１において、イベント受信部５５が当該イベントを判別して、現時点の画像データのページＩＤを用いて文字認識結果データ記憶部６２を参照して対応する文字認識結果データ（ＨＴＭＬ文書）を取り出し、表示装置８０を用いて図３のフレームＦ１に表示する（Ｓ６０、Ｓ６１、Ｓ６２）。
【００５６】
以上で実施例１の説明を終了する。
【００５７】
この実施例によれば、画像データと文字認識結果データとを対応づけながら前ページ、次ページ、前文書、次文書に移動しながら閲覧を行なえ、文字認識結果を画像データで検証しながら文書の属性を入力していくことができる。この例では文書の属性を入力する場合を例に挙げたが、広く文字認識結果とオリジナルの画像データとを対応づけて閲覧できるようにして文書の内容を把握する場合等に広く利用できる。また文字認識結果に対してキーワード検索等を行い、該当するページのオリジナルの画像データを閲覧する等してもよい。
【実施例２】
【００５８】
つぎに複写機を用いた実施例２について説明する。
【００５９】
図１３は、実施例２の構成を全体として示しており、この図において、図１と対応する箇所には対応する符号を付した。
【００６０】
図６において、複写機２００は、紙送り装置２０、画像読取装置３０、文字認識装置３１、用紙判別部４０、文書データ転送部２０１０等を含んで構成されている。紙送り装置２０は図１のバッチ用紙束１０を一枚一枚画像読取装置３０に送り出し、画像読取装置３０は各用紙の光学画像を電子データに変換する。用紙判別部４０は管理用用紙を判別する。文字認識装置３１は、画像読取装置３０が生成した電子画像から文字認識を行なう。この文字認識結果は例えばテキストファイルやＨＴＭＬファイル等とされ図４に示したように管理される。複写機２００の操作部２００ａは、画像読取開始指示等、種々の操作を指示するものである。
【００６１】
複写機２００の文書データ転送部２０１は、ＦＴＰプロトコル等により文書の電子データをサーバ装置３００に転送する。サーバ装置３００は文書管理部５０および記憶装置６０を具備して、クライアント装置４００に対して文書データの閲覧サービス等を提供する。この実施例においても文書管理部５０が表示データの管理を行い、クライアント装置４００の表示画面において［画像文書］、［ＨＴＭＬ文書］、［前ページ］、［次ページ］、［前文書］、［次文書］の各コマンドボタンがクリックされたことに基づいて画像データや文字認識結果データをクライアント装置４００に転送して表示内容を更新する。
【００６２】
この実施例においても、画像データと文字認識結果データとを対応づけながら前ページ、次ページ、前文書、次文書に移動しながら閲覧を行なえる。
【００６３】
なお、この発明は上述の実施例に限定されるものではなくその趣旨を逸脱しない範囲で種々変更が可能である。例えば、実施例２では、文字認識、用紙判別を複写機２００側で行なったが、読み取った画像データを文書データ転送部２０１でサーバ装置３００に送り、サーバ装置３００で文字認識、用紙判別を行なうようにしても良い。
【００６４】
また、上述実施例では文字認識結果データをＨＴＭＬ文書で表示するようにしたが、他のマークアップ言語例えばＸＭＬやＸＨＴＭＬ等で表示しても良いし、テキストや他のコードデータで表示しても良い。
【図面の簡単な説明】
【００６５】
【図１】この発明の実施例１の文書属性入力装置を模式的に示す図である。
【図２】実施例１の文書管理部５０の要部構成例を説明するブロック図である。
【図３】実施例１の属性入力画面の例を説明する図である。
【図４】実施例１の画像データおよび文字認識結果データの管理態様を説明する図である。
【図５】実施例１のデータ管理情報を説明する図である。
【図６】実施例１の動作例（その１）を説明するフローチャートである。
【図７】実施例１の動作例（その２）を説明するフローチャートである。
【図８】実施例１の動作例（その３）を説明するフローチャートである。
【図９】実施例１の動作例（その４）を説明するフローチャートである。
【図１０】実施例１の動作例（その５）を説明するフローチャートである。
【図１１】実施例１の動作例（その６）を説明するフローチャートである。
【図１２】実施例１の管理用用紙の例を説明する図である。
【図１３】この発明の実施例２の構成を説明する図である。
【符号の説明】
【００６６】
１０      バッチ用紙束
２０      紙送り装置
３０      画像読取装置
３１      文字認識装置
４０      用紙判別部
５０ａ      管理単位
５０ｂ      フォルダ
５０ｃ      フォルダ
５０      文書管理部
５１      第１読み出し部
５２      第２読み出し部
５３      第３読み出し部
５４      第４読み出し部
５５      イベント受信部
６０      記憶装置
６１      画像データ記憶部
６２      文字認識結果データ記憶部
６３      画像データ管理情報記憶部
６４      文字認識結果データ管理情報記憶部
７０      表示制御部
８０      表示装置
９０      ポインティング装置
１００      文字列
１５１      文字認識結果データ
１５２      属性入力テーブル
１５３      定型語句テーブル
２００      複写機
２００ａ      操作部
２０１      文書データ転送部
３００      サーバ装置
４００      クライアント装置
【図１】
2005322081.tif 000003
【図２】
2005322081.tif 000004
【図３】
2005322081.tif 000005
【図４】
2005322081.tif 000006
【図５】
2005322081.tif 000007
【図６】
2005322081.tif 000008
【図７】
2005322081.tif 000009
【図８】
2005322081.tif 000010
【図９】
2005322081.tif 000011
【図１０】
2005322081.tif 000012
【図１１】
2005322081.tif 000013
【図１２】
2005322081.tif 000014
【図１３】
2005322081.tif 000015