(57)【要約】【課題】  電子化された文書の構成を容易に把握することができ、かつ、文書のページ内の画像領域又は文字領域毎に操作できるようにして文書管理性と再利用性を向上させる。【解決手段】  領域抽出部１１が、電子文書データのページ画像データから画像を含む画像領域画像データと、文字列を含む文字領域画像データとをそれぞれ抽出し、登録部１３が、上記電子文書データと上記電子文書データのページ画像データとそのページ画像データについて領域抽出部１１によって抽出した画像領域画像データと文字領域画像データとをそれぞれ関連付けて格納部１４に登録し、検索表示部２は、表示部２０に格納部１４に登録されたデータに基づいて上記電子文書データのページ構成とページ中の画像領域と文字領域との領域構成とからなる文書構造を表示する。【選択図】        図１
2009064080.tif 000002
【特許請求の範囲】
【請求項１】
電子文書データのページ画像データから画像を含む画像領域画像データと、文字列を含む文字領域画像データとをそれぞれ抽出する抽出手段と、前記電子文書データと前記電子文書データのページ画像データと該ページ画像データについて前記抽出手段によって抽出した画像領域画像データと文字領域画像データとをそれぞれ関連付けて登録する登録手段と、該登録手段によって登録されたデータに基づいて前記電子文書データのページ構成とページ中の画像領域と文字領域との領域構成とからなる文書構造を表示する表示手段とを備えたことを特徴とする画像処理装置。
【請求項２】
請求項１記載の画像処理装置において、
前記電子文書データに、前記電子文書データを一意に特定する為の電子文書ＩＤ、前記電子文書データの前記登録手段による登録場所を示す保管場所、前記電子文書データが何ページから構成される文書であるかを示すページ数を含むメタデータを登録し、
前記電子文書データのページ画像データに、前記ページ画像データを一意に特定する為のページＩＤ、前記ページ画像データの領域を特定する為の座標情報、前記ページ画像データが含まれる前記電子文書データを特定する為の所属情報、前記ページ画像データから抽出された画像領域画像データと文字領域画像データとを特定する為の領域画像情報を含むメタデータを登録し、
前記画像領域画像データに、前記画像領域画像データを一意に特定する為の画像領域画像ＩＤ、前記画像領域画像データの前記登録手段による登録場所を示す保管場所、前記画像領域画像データの種別を示す画像タイプ、前記画像領域画像データがどの電子文書データのどのページ画像データと関連があるかを特定する為の所属情報、前記画像領域画像データのページ中の領域を特定する為の座標情報、前記画像領域画像データから抽出された文字列情報であるキーテキスト、前記キーテキストの中で更にリンク情報として認識されたハイパーリンクを含むメタデータを登録し、
前記文字領域画像データに、前記文字領域画像データを一意に特定する為の文字領域画像ＩＤ、前記文字領域画像データの前記登録手段による登録場所を示す保管場所、前記文字領域画像データの種別を示す画像タイプ、前記文字領域画像データがどの電子文書データのどのページ画像データと関連があるかを特定する為の所属情報、前記文字領域画像データのページ中の領域を特定する為の座標情報、前記文字領域画像データから抽出された文字列情報であるキーテキスト、前記キーテキストの中で更にリンク情報として認識されたハイパーリンクを含むメタデータを登録したことを特徴とする画像処理装置。
【請求項３】
請求項１又は２記載の画像処理装置において、
前記表示手段は、前記電子文書データのページ構成とページ中の画像領域と文字領域との領域構成とからなる文書構造を、ツリー形式で表示する手段であることを特徴とする画像処理装置。
【請求項４】
請求項３記載の画像処理装置において、
前記表示手段によってツリー形式で表示した画像領域と文字領域とを展開又は省略して表示する手段を設けたことを特徴とする画像処理装置。
【請求項５】
請求項２乃至４のいずれか一項に記載の画像処理装置において、
前記画像領域画像データ又は前記文字領域画像データに登録されたメタデータに基づいて前記画像領域画像データ又は前記文字領域画像データのソートと絞込みを行う手段を設けたことを特徴とする画像処理装置。
【請求項６】
請求項５記載の画像処理装置において、
前記画像領域画像データ又は前記文字領域画像データのソートは、前記画像領域画像データ又は前記文字領域画像データのメタデータ中の座標情報に基づいて行うようにしたことを特徴とする画像処理装置。
【請求項７】
請求項２乃至６のいずれか一項に記載の画像処理装置において、
前記画像領域画像データ又は前記文字領域画像データのメタデータのハイパーリンクを表示する手段と、該手段によって表示されたハイパーリンクが選択されたときに前記ハイパーリンクのリンク先のインターネット上のページにジャンプしてそのページを表示する手段を設けたことを特徴とする画像処理装置。
【請求項８】
請求項２乃至７のいずれか一項に記載の画像処理装置において、
前記電子文書データを構成するページ画像データのプレビューを表示する手段と、該手段によってページ画像データのプレビューを表示する際、そのプレビュー画像中の画像領域画像と文字領域画像とのエリアに矩形枠を表示する手段と、該手段によって表示された矩形枠の画像領域画像又は文字領域画像が選択されてドラッグ＆ドロップされたとき、そのドロップ先が他のアプリケーションソフトウェアによるデータの場合、そのデータに前記選択された画像領域画像又は文字領域画像を添付する手段を設けたことを特徴とする画像処理装置。
【請求項９】
請求項８記載の画像処理装置において、
前記ドラッグ＆ドロップされた矩形枠の領域画像が文字領域画像である場合、その文字領域画像データに登録されたキーテキストを添付する手段を設けたことを特徴とする画像処理装置。
【請求項１０】
電子文書データのページ画像データから画像を含む画像領域画像データと、文字列を含む文字領域画像データとをそれぞれ抽出する抽出工程と、前記電子文書データと前記電子文書データのページ画像データと該ページ画像データについて前記抽出工程によって抽出した画像領域画像データと文字領域画像データとをそれぞれ関連付けて登録する登録工程と、該登録工程によって登録されたデータに基づいて前記電子文書データのページ構成とページ中の画像領域と文字領域との領域構成とからなる文書構造を表示する表示工程とからなることを特徴とする画像処理方法。
【請求項１１】
請求項１０記載の画像処理方法において、
前記電子文書データに、前記電子文書データを一意に特定する為の電子文書ＩＤ、前記電子文書データの前記登録工程による登録場所を示す保管場所、前記電子文書データが何ページから構成される文書であるかを示すページ数を含むメタデータを登録し、
前記電子文書データのページ画像データに、前記ページ画像データを一意に特定する為のページＩＤ、前記ページ画像データの領域を特定する為の座標情報、前記ページ画像データが含まれる前記電子文書データを特定する為の所属情報、前記ページ画像データから抽出された画像領域画像データと文字領域画像データとを特定する為の領域画像情報を含むメタデータを登録し、
前記画像領域画像データに、前記画像領域画像データを一意に特定する為の画像領域画像ＩＤ、前記画像領域画像データの前記登録工程による登録場所を示す保管場所、前記画像領域画像データの種別を示す画像タイプ、前記画像領域画像データがどの電子文書データのどのページ画像データと関連があるかを特定する為の所属情報、前記画像領域画像データのページ中の領域を特定する為の座標情報、前記画像領域画像データから抽出された文字列情報であるキーテキスト、前記キーテキストの中で更にリンク情報として認識されたハイパーリンクを含むメタデータを登録し、
前記文字領域画像データに、前記文字領域画像データを一意に特定する為の文字領域画像ＩＤ、前記文字領域画像データの前記登録工程による登録場所を示す保管場所、前記文字領域画像データの種別を示す画像タイプ、前記文字領域画像データがどの電子文書データのどのページ画像データと関連があるかを特定する為の所属情報、前記文字領域画像データのページ中の領域を特定する為の座標情報、前記文字領域画像データから抽出された文字列情報であるキーテキスト、前記キーテキストの中で更にリンク情報として認識されたハイパーリンクを含むメタデータを登録したことを特徴とする画像処理方法。
【請求項１２】
請求項１０又は１１記載の画像処理方法において、
前記表示工程は、前記電子文書データのページ構成とページ中の画像領域と文字領域との領域構成とからなる文書構造を、ツリー形式で表示する工程であることを特徴とする画像処理方法。
【請求項１３】
請求項１２記載の画像処理方法において、
前記表示工程によってツリー形式で表示した画像領域と文字領域とを展開又は省略して表示する工程を含むことを特徴とする画像処理方法。
【請求項１４】
請求項１１乃至１３のいずれか一項に記載の画像処理方法において、
前記画像領域画像データ又は前記文字領域画像データに登録されたメタデータに基づいて前記画像領域画像データ又は前記文字領域画像データのソートと絞込みを行う工程を含むことを特徴とする画像処理方法。
【請求項１５】
請求項１４記載の画像処理方法において、
前記画像領域画像データ又は前記文字領域画像データのソートは、前記画像領域画像データ又は前記文字領域画像データのメタデータ中の座標情報に基づいて行うことを特徴とする画像処理方法。
【請求項１６】
請求項１１乃至１５のいずれか一項に記載の画像処理方法において、
前記画像領域画像データ又は前記文字領域画像データのメタデータのハイパーリンクを表示する工程と、該工程によって表示されたハイパーリンクが選択されたときに前記ハイパーリンクのリンク先のインターネット上のページにジャンプしてそのページを表示する工程を含むことを特徴とする画像処理方法。
【請求項１７】
請求項１１乃至１６のいずれか一項に記載の画像処理方法において、
前記電子文書データを構成するページ画像データのプレビューを表示する工程と、該工程によってページ画像データのプレビューを表示する際、そのプレビュー画像中の画像領域画像と文字領域画像とのエリアに矩形枠を表示する工程と、該工程によって表示された矩形枠の画像領域画像又は文字領域画像が選択されてドラッグ＆ドロップされたとき、そのドロップ先が他のアプリケーションソフトウェアによるデータの場合、そのデータに前記選択された画像領域画像又は文字領域画像を添付する工程を含むことを特徴とする画像処理方法。
【請求項１８】
請求項１７記載の画像処理方法において、
前記ドラッグ＆ドロップされた矩形枠の領域画像が文字領域画像である場合、その文字領域画像データに登録されたキーテキストを添付する工程を含むことを特徴とする画像処理方法。
【請求項１９】
コンピュータに、電子文書データのページ画像データから画像を含む画像領域画像データと、文字列を含む文字領域画像データとをそれぞれ抽出する抽出手順と、前記電子文書データと前記電子文書データのページ画像データと該ページ画像データについて前記抽出手順によって抽出した画像領域画像データと文字領域画像データとをそれぞれ関連付けて登録する登録手順と、該登録手順によって登録されたデータに基づいて前記電子文書データのページ構成とページ中の画像領域と文字領域との領域構成とからなる文書構造を表示する表示手順を実行させるためのプログラム。
【請求項２０】
請求項１９記載のプログラムにおいて、
前記電子文書データに、前記電子文書データを一意に特定する為の電子文書ＩＤ、前記電子文書データの前記登録手順による登録場所を示す保管場所、前記電子文書データが何ページから構成される文書であるかを示すページ数を含むメタデータを登録し、
前記電子文書データのページ画像データに、前記ページ画像データを一意に特定する為のページＩＤ、前記ページ画像データの領域を特定する為の座標情報、前記ページ画像データが含まれる前記電子文書データを特定する為の所属情報、前記ページ画像データから抽出された画像領域画像データと文字領域画像データとを特定する為の領域画像情報を含むメタデータを登録し、
前記画像領域画像データに、前記画像領域画像データを一意に特定する為の画像領域画像ＩＤ、前記画像領域画像データの前記登録手順による登録場所を示す保管場所、前記画像領域画像データの種別を示す画像タイプ、前記画像領域画像データがどの電子文書データのどのページ画像データと関連があるかを特定する為の所属情報、前記画像領域画像データのページ中の領域を特定する為の座標情報、前記画像領域画像データから抽出された文字列情報であるキーテキスト、前記キーテキストの中で更にリンク情報として認識されたハイパーリンクを含むメタデータを登録し、
前記文字領域画像データに、前記文字領域画像データを一意に特定する為の文字領域画像ＩＤ、前記文字領域画像データの前記登録手順による登録場所を示す保管場所、前記文字領域画像データの種別を示す画像タイプ、前記文字領域画像データがどの電子文書データのどのページ画像データと関連があるかを特定する為の所属情報、前記文字領域画像データのページ中の領域を特定する為の座標情報、前記文字領域画像データから抽出された文字列情報であるキーテキスト、前記キーテキストの中で更にリンク情報として認識されたハイパーリンクを含むメタデータを登録したプログラム。
【請求項２１】
請求項１９又は２１記載のプログラムにおいて、
前記表示手順は、前記電子文書データのページ構成とページ中の画像領域と文字領域との領域構成とからなる文書構造を、ツリー形式で表示する手順であるプログラム。
【請求項２２】
請求項２１記載のプログラムにおいて、
前記表示手順によってツリー形式で表示した画像領域と文字領域とを展開又は省略して表示する手順も実行させるためのプログラム。
【請求項２３】
請求項２０乃至２２のいずれか一項に記載のプログラムにおいて、
前記画像領域画像データ又は前記文字領域画像データに登録されたメタデータに基づいて前記画像領域画像データ又は前記文字領域画像データのソートと絞込みを行う手順も実行させるためのプログラム。
【請求項２４】
請求項２３記載のプログラムにおいて、
前記画像領域画像データ又は前記文字領域画像データのソートは、前記画像領域画像データ又は前記文字領域画像データのメタデータ中の座標情報に基づいて行うことも実行させるためのプログラム。
【請求項２５】
請求項２０乃至２４のいずれか一項に記載のプログラムにおいて、
前記画像領域画像データ又は前記文字領域画像データのメタデータのハイパーリンクを表示する手順と、該手順によって表示されたハイパーリンクが選択されたときに前記ハイパーリンクのリンク先のインターネット上のページにジャンプしてそのページを表示する手順も実行させるためのプログラム。
【請求項２６】
請求項２０乃至２５のいずれか一項に記載のプログラムにおいて、
前記電子文書データを構成するページ画像データのプレビューを表示する手順と、該手順によってページ画像データのプレビューを表示する際、そのプレビュー画像中の画像領域画像と文字領域画像とのエリアに矩形枠を表示する手順と、該手順によって表示された矩形枠の画像領域画像又は文字領域画像が選択されてドラッグ＆ドロップされたとき、そのドロップ先が他のアプリケーションソフトウェアによるデータの場合、そのデータに前記選択された画像領域画像又は文字領域画像を添付する手順も実行させるためのプログラム。
【請求項２７】
請求項２６記載のプログラムにおいて、
前記ドラッグ＆ドロップされた矩形枠の領域画像が文字領域画像である場合、その文字領域画像データに登録されたキーテキストを添付する手順も実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、コンピュータを含む画像処理装置と画像処理方法とプログラムに関する。
【背景技術】
【０００２】
コンピュータの急速な普及に伴って、従来は紙をファイリングすることによって保存していた文書を、電子化された情報として保存することが一般的となってきている。
従来、図、表、写真等の画像および文字列が混在した文書から画像を含む画像領域および文字列を含む文字領域を認識して領域抽出し、抽出した画像を検索対象として格納し、抽出した文字を検索用テキストとして用いて、格納した画像を容易に検索できるようにした情報処理装置（例えば、特許文献１参照）があった。
このような情報処理装置では、電子化された大量の情報の中から必要な情報が検索できる。
【特許文献１】特開平１１−２５１１３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、上述のような従来の情報処理装置では、電子化するのは文書のみならず、文書を構成する個々の画像やテキストも電子化された情報として保存されることになるが、ユーザには電子化された文書や画像がどのような構成で保存されているのかを確認する手段がなく、文書の管理が困難であるという問題があった。
また、抽出された画像自体を操作する手段が提供されていない為、再利用性に乏しいものであるという問題もあった。
この発明は上記の点に鑑みてなされたものであり、電子化された文書の構成を容易に把握することができ、かつ、文書のページ内の画像領域又は文字領域毎に操作できるようにして文書管理性と再利用性を向上させることを目的とする。
【課題を解決するための手段】
【０００４】
この発明は上記の目的を達成するため、次の画像処理装置と画像処理方法とプログラムを提供する。
（１）電子文書データのページ画像データから画像を含む画像領域画像データと、文字列を含む文字領域画像データとをそれぞれ抽出する抽出手段と、上記電子文書データと上記電子文書データのページ画像データとそのページ画像データについて上記抽出手段によって抽出した画像領域画像データと文字領域画像データとをそれぞれ関連付けて登録する登録手段と、その登録手段によって登録されたデータに基づいて上記電子文書データのページ構成とページ中の画像領域と文字領域との領域構成とからなる文書構造を表示する表示手段を備えた画像処理装置。
【０００５】
（２）上記のような画像処理装置において、上記電子文書データに、上記電子文書データを一意に特定する為の電子文書ＩＤ、上記電子文書データの上記登録手段による登録場所を示す保管場所、上記電子文書データが何ページから構成される文書であるかを示すページ数を含むメタデータを登録し、上記電子文書データのページ画像データに、上記ページ画像データを一意に特定する為のページＩＤ、上記ページ画像データの領域を特定する為の座標情報、上記ページ画像データが含まれる上記電子文書データを特定する為の所属情報、上記ページ画像データから抽出された画像領域画像データと文字領域画像データとを特定する為の領域画像情報を含むメタデータを登録し、上記画像領域画像データに、上記画像領域画像データを一意に特定する為の画像領域画像ＩＤ、上記画像領域画像データの上記登録手段による登録場所を示す保管場所、上記画像領域画像データの種別を示す画像タイプ、上記画像領域画像データがどの電子文書データのどのページ画像データと関連があるかを特定する為の所属情報、上記画像領域画像データのページ中の領域を特定する為の座標情報、上記画像領域画像データから抽出された文字列情報であるキーテキスト、上記キーテキストの中で更にリンク情報として認識されたハイパーリンクを含むメタデータを登録し、上記文字領域画像データに、上記文字領域画像データを一意に特定する為の文字領域画像ＩＤ、上記文字領域画像データの上記登録手段による登録場所を示す保管場所、上記文字領域画像データの種別を示す画像タイプ、上記文字領域画像データがどの電子文書データのどのページ画像データと関連があるかを特定する為の所属情報、上記文字領域画像データのページ中の領域を特定する為の座標情報、上記文字領域画像データから抽出された文字列情報であるキーテキスト、上記キーテキストの中で更にリンク情報として認識されたハイパーリンクを含むメタデータを登録した画像処理装置。
【０００６】
（３）上記のような画像処理装置において、上記表示手段は、上記電子文書データのページ構成とページ中の画像領域と文字領域との領域構成とからなる文書構造を、ツリー形式で表示する手段である画像処理装置。
（４）上記のような画像処理装置において、上記表示手段によってツリー形式で表示した画像領域と文字領域とを展開又は省略して表示する手段を設けた画像処理装置。
（５）上記のような画像処理装置において、上記画像領域画像データ又は上記文字領域画像データに登録されたメタデータに基づいて上記画像領域画像データ又は上記文字領域画像データのソートと絞込みを行う手段を設けた画像処理装置。
（６）上記のような画像処理装置において、上記画像領域画像データ又は上記文字領域画像データのソートは、上記画像領域画像データ又は上記文字領域画像データのメタデータ中の座標情報に基づいて行うようにした画像処理装置。
（７）上記のような画像処理装置において、上記画像領域画像データ又は上記文字領域画像データのメタデータのハイパーリンクを表示する手段と、その手段によって表示されたハイパーリンクが選択されたときに上記ハイパーリンクのリンク先のインターネット上のページにジャンプしてそのページを表示する手段を設けた画像処理装置。
【０００７】
（８）上記のような画像処理装置において、上記電子文書データを構成するページ画像データのプレビューを表示する手段と、その手段によってページ画像データのプレビューを表示する際、そのプレビュー画像中の画像領域画像と文字領域画像とのエリアに矩形枠を表示する手段と、その手段によって表示された矩形枠の画像領域画像又は文字領域画像が選択されてドラッグ＆ドロップされたとき、そのドロップ先が他のアプリケーションソフトウェアによるデータの場合、そのデータに前記選択された画像領域画像又は文字領域画像を添付する手段を設けた画像処理装置。
（９）上記のような画像処理装置において、上記ドラッグ＆ドロップされた矩形枠の領域画像が文字領域画像である場合、その文字領域画像データに登録されたキーテキストを添付する手段を設けた画像処理装置。
【０００８】
（１０）電子文書データのページ画像データから画像を含む画像領域画像データと、文字列を含む文字領域画像データとをそれぞれ抽出する抽出工程と、上記電子文書データと上記電子文書データのページ画像データとそのページ画像データについて上記抽出工程によって抽出した画像領域画像データと文字領域画像データとをそれぞれ関連付けて登録する登録工程と、その登録工程によって登録されたデータに基づいて上記電子文書データのページ構成とページ中の画像領域と文字領域との領域構成とからなる文書構造を表示する表示工程とからなる画像処理方法。
【０００９】
（１１）上記のような画像処理方法において、上記電子文書データに、上記電子文書データを一意に特定する為の電子文書ＩＤ、上記電子文書データの上記登録工程による登録場所を示す保管場所、上記電子文書データが何ページから構成される文書であるかを示すページ数を含むメタデータを登録し、上記電子文書データのページ画像データに、上記ページ画像データを一意に特定する為のページＩＤ、上記ページ画像データの領域を特定する為の座標情報、上記ページ画像データが含まれる上記電子文書データを特定する為の所属情報、上記ページ画像データから抽出された画像領域画像データと文字領域画像データとを特定する為の領域画像情報を含むメタデータを登録し、上記画像領域画像データに、上記画像領域画像データを一意に特定する為の画像領域画像ＩＤ、上記画像領域画像データの上記登録工程による登録場所を示す保管場所、上記画像領域画像データの種別を示す画像タイプ、上記画像領域画像データがどの電子文書データのどのページ画像データと関連があるかを特定する為の所属情報、上記画像領域画像データのページ中の領域を特定する為の座標情報、上記画像領域画像データから抽出された文字列情報であるキーテキスト、上記キーテキストの中で更にリンク情報として認識されたハイパーリンクを含むメタデータを登録し、上記文字領域画像データに、上記文字領域画像データを一意に特定する為の文字領域画像ＩＤ、上記文字領域画像データの上記登録工程による登録場所を示す保管場所、上記文字領域画像データの種別を示す画像タイプ、上記文字領域画像データがどの電子文書データのどのページ画像データと関連があるかを特定する為の所属情報、上記文字領域画像データのページ中の領域を特定する為の座標情報、上記文字領域画像データから抽出された文字列情報であるキーテキスト、上記キーテキストの中で更にリンク情報として認識されたハイパーリンクを含むメタデータを登録した画像処理方法。
【００１０】
（１２）上記のような画像処理方法において、上記表示工程は、上記電子文書データのページ構成とページ中の画像領域と文字領域との領域構成とからなる文書構造を、ツリー形式で表示する工程である画像処理方法。
（１３）上記のような画像処理方法において、上記表示工程によってツリー形式で表示した画像領域と文字領域とを展開又は省略して表示する工程を含む画像処理方法。
（１４）上記のような画像処理方法において、上記画像領域画像データ又は上記文字領域画像データに登録されたメタデータに基づいて上記画像領域画像データ又は上記文字領域画像データのソートと絞込みを行う工程を含む画像処理方法。
（１５）上記のような画像処理方法において、上記画像領域画像データ又は上記文字領域画像データのソートは、上記画像領域画像データ又は上記文字領域画像データのメタデータ中の座標情報に基づいて行う画像処理方法。
（１６）上記のような画像処理方法において、上記画像領域画像データ又は上記文字領域画像データのメタデータのハイパーリンクを表示する工程と、その工程によって表示されたハイパーリンクが選択されたときに上記ハイパーリンクのリンク先のインターネット上のページにジャンプしてそのページを表示する工程を含む画像処理方法。
【００１１】
（１７）上記のような画像処理方法において、上記電子文書データを構成するページ画像データのプレビューを表示する工程と、その工程によってページ画像データのプレビューを表示する際、そのプレビュー画像中の画像領域画像と文字領域画像とのエリアに矩形枠を表示する工程と、その工程によって表示された矩形枠の画像領域画像又は文字領域画像が選択されてドラッグ＆ドロップされたとき、そのドロップ先が他のアプリケーションソフトウェアによるデータの場合、そのデータに前記選択された画像領域画像又は文字領域画像を添付する工程を含む画像処理方法。
（１８）上記のような画像処理方法において、上記ドラッグ＆ドロップされた矩形枠の領域画像が文字領域画像である場合、その文字領域画像データに登録されたキーテキストを添付する工程を含む画像処理方法。
【００１２】
（１９）コンピュータに、電子文書データのページ画像データから画像を含む画像領域画像データと、文字列を含む文字領域画像データとをそれぞれ抽出する抽出手順と、上記電子文書データと上記電子文書データのページ画像データとそのページ画像データについて上記抽出手順によって抽出した画像領域画像データと文字領域画像データとをそれぞれ関連付けて登録する登録手順と、その登録手順によって登録されたデータに基づいて上記電子文書データのページ構成とページ中の画像領域と文字領域との領域構成とからなる文書構造を表示する表示手順を実行させるためのプログラム。
【００１３】
（２０）上記のようなプログラムにおいて、上記電子文書データに、上記電子文書データを一意に特定する為の電子文書ＩＤ、上記電子文書データの上記登録手順による登録場所を示す保管場所、上記電子文書データが何ページから構成される文書であるかを示すページ数を含むメタデータを登録し、上記電子文書データのページ画像データに、上記ページ画像データを一意に特定する為のページＩＤ、上記ページ画像データの領域を特定する為の座標情報、上記ページ画像データが含まれる上記電子文書データを特定する為の所属情報、上記ページ画像データから抽出された画像領域画像データと文字領域画像データとを特定する為の領域画像情報を含むメタデータを登録し、上記画像領域画像データに、上記画像領域画像データを一意に特定する為の画像領域画像ＩＤ、上記画像領域画像データの上記登録手順による登録場所を示す保管場所、上記画像領域画像データの種別を示す画像タイプ、上記画像領域画像データがどの電子文書データのどのページ画像データと関連があるかを特定する為の所属情報、上記画像領域画像データのページ中の領域を特定する為の座標情報、上記画像領域画像データから抽出された文字列情報であるキーテキスト、上記キーテキストの中で更にリンク情報として認識されたハイパーリンクを含むメタデータを登録し、上記文字領域画像データに、上記文字領域画像データを一意に特定する為の文字領域画像ＩＤ、上記文字領域画像データの上記登録手順による登録場所を示す保管場所、上記文字領域画像データの種別を示す画像タイプ、上記文字領域画像データがどの電子文書データのどのページ画像データと関連があるかを特定する為の所属情報、上記文字領域画像データのページ中の領域を特定する為の座標情報、上記文字領域画像データから抽出された文字列情報であるキーテキスト、上記キーテキストの中で更にリンク情報として認識されたハイパーリンクを含むメタデータを登録したプログラム。
【００１４】
（２１）上記のようなプログラムにおいて、上記表示手順は、上記電子文書データのページ構成とページ中の画像領域と文字領域との領域構成とからなる文書構造を、ツリー形式で表示する手順であるプログラム。
（２２）上記のようなプログラムにおいて、上記表示手順によってツリー形式で表示した画像領域と文字領域とを展開又は省略して表示する手順も実行させるためのプログラム。
（２３）上記のようなプログラムにおいて、上記画像領域画像データ又は上記文字領域画像データに登録されたメタデータに基づいて上記画像領域画像データ又は上記文字領域画像データのソートと絞込みを行う手順も実行させるためのプログラム。
（２４）上記のようなプログラムにおいて、上記画像領域画像データ又は上記文字領域画像データのソートは、上記画像領域画像データ又は上記文字領域画像データのメタデータ中の座標情報に基づいて行うことも実行させるためのプログラム。
（２５）上記のようなプログラムにおいて、上記画像領域画像データ又は上記文字領域画像データのメタデータのハイパーリンクを表示する手順と、その手順によって表示されたハイパーリンクが選択されたときに上記ハイパーリンクのリンク先のインターネット上のページにジャンプしてそのページを表示する手順も実行させるためのプログラム。
【００１５】
（２６）上記のようなプログラムにおいて、上記電子文書データを構成するページ画像データのプレビューを表示する手順と、その手順によってページ画像データのプレビューを表示する際、そのプレビュー画像中の画像領域画像と文字領域画像とのエリアに矩形枠を表示する手順と、その手順によって表示された矩形枠の画像領域画像又は文字領域画像が選択されてドラッグ＆ドロップされたとき、そのドロップ先が他のアプリケーションソフトウェアによるデータの場合、そのデータに前記選択された画像領域画像又は文字領域画像を添付する手順も実行させるためのプログラム。
（２７）上記のようなプログラムにおいて、上記ドラッグ＆ドロップされた矩形枠の領域画像が文字領域画像である場合、その文字領域画像データに登録されたキーテキストを添付する手順も実行させるためのプログラム。
【発明の効果】
【００１６】
この発明による画像処理装置と画像処理方法は、電子化された文書の構成を容易に把握することができ、かつ、文書のページ内の画像領域又は文字領域毎に操作できるようにして文書管理性と再利用性を向上させることができる。
また、この発明によるプログラムは、コンピュータに、電子化された文書の構成を容易に把握することができ、かつ、文書のページ内の画像領域又は文字領域毎に操作できるようにして文書管理性と再利用性を向上させることができるようにするための機能を実現させることができる。
【発明を実施するための最良の形態】
【００１７】
以下、この発明を実施するための最良の形態を図面に基づいて具体的に説明する。
〔実施例〕
図１は、この発明の実施例の画像処理装置の機能構成を示すブロック図である。
この画像処理装置は、パーソナルコンピュータを含む情報処理装置全般であり、文書から図、表、テキストを画像として抽出すると共に、抽出した画像を抽出元のページに関連づけ、その文書構造を表示するものである。
なお、上記抽出された画像のことを領域画像と定義することにする。
【００１８】
この画像処理装置は、登録処理部１と検索表示部２からなる。
登録処理部１は、紙文書を光学的に読み取って、電子化された電子文書データを得るための文書入力部１０と、電子文書データのページ画像データから図、表の画像を含む画像領域画像データと、文字列（テキスト）を含む文字領域画像データとをそれぞれ抽出する領域抽出部１１と、画像領域画像データと文字領域画像データ中の本文やキャプションについて文字認識し、その認識したテキストを抽出するテキスト抽出部１２と、領域抽出部１１で抽出された画像領域画像データと文字領域画像データにそれぞれテキスト抽出部１２で抽出されたテキストを関連付け、更に、抽出元のページ画像データを関連付けて記憶装置である格納部１４に登録する登録部１３から構成される。
【００１９】
上記登録部１３によって登録されるデータの詳細は後述する。
なお、登録処理部１は、スキャナで読み取った文書をはじめ、ワープロソフトで作成した文書や、ＳＧＭＬ、ＨＴＭＬ、ＸＭＬを含む構造化文書等、いかなる形式の文書についても扱うことができるものである。
一方、検索表示部２は、ユーザインタフェース部であるＬＣＤを含む表示部２０と、ユーザの要求受付から応答までの一連のフローを制御する要求制御部２１と、指定されたキーワードに従い格納部１４から画像，テキストの検索を行う検索部２２と、その検索結果に基づいて表示用データを生成し、表示部２０へ送信する表示情報生成部２３から構成される。
【００２０】
［格納部に登録されたデータの説明］
図２乃至図４は、図１に示した登録部１３によって格納部１４へ登録される情報の詳しい説明図である。
格納部１４に登録される情報は、格納される文書データそのものである電子文書データ３０と、それに付随する電子文書メタデータ３１と（以上、図２に示す）、電子文書データを構成するページ画像データ３２と、それに付随するページ画像メタデータ３３と（以上、図３に示す）、電子文書データを構成する各ページ画像データから抽出された画像を含む画像領域画像データ又は文字列を含む文字領域画像データである領域画像データ３４と、それに付随する領域画像メタデータ３５と（以上、図４に示す）がそれぞれ関連付けられて格納される。
【００２１】
まず、上記電子文書メタデータ３１は、電子文書データを一意に特定する為の電子文書ＩＤと、電子文書データの格納部１４における登録場所を示す保管場所、電子文書データが何ページから構成される文書であるかを示すページ数の各データからなる。
次に、上記ページ画像メタデータ３３は、ページ画像データを一意に特定する為のページＩＤ、ページ画像データの領域を特定する為の座標情報、ページ画像データが含まれる電子文書データを特定する為の所属情報、ページ画像データから抽出された画像領域画像データ又は文字領域画像データを特定する為の領域画像情報の各データからなる。
上記座標情報を、例えば、（ｘ０，ｙ０，ｘ１，ｙ１）とした場合、ページ画像データ中に設定された原点に対して、ｘ０は画像左上のＸ座標、ｙ０は画像左上のＹ座標、ｘ１は画像右下のＸ座標、ｙ１は画像右下のＹ座標を意味し、ページ画像メタデータの場合、ｘ０，ｙ０は常に０が設定される。
【００２２】
次に、領域画像メタデータ３５は、画像領域画像データ又は文字領域画像データを一意に特定する為の領域画像ＩＤ（画像領域画像データについては画像領域画像ＩＤに相当し、文字領域画像データについては文字領域画像ＩＤに相当する）と、領域画像データの格納部１４における登録場所を示す保管場所、領域画像データの種別を示す画像タイプ（画像の種別として少なくともテキスト、表、図に分類するデータ）と、領域画像データがどの電子文書データのどのページ画像データと関連があるかを特定する為の所属情報と、領域画像データのページ中の領域を特定する為の座標情報と、領域画像データから抽出された文字列情報であるキーテキストと、キーテキストの中で更にリンク情報として認識されたハイパーリンクの各データからなる。
【００２３】
［表示例の説明］
次に、図５乃至図７を用いて電子文書の文書構造を表示する画面例について説明する。
まず、図５は、ユーザが検索表示部２を介し、格納部１４に保管されている電子文書の一覧を表示した際の画面例である。
この画面により、ユーザは格納部１４に保管されている電子文書の一覧を参照することができる。
ここで表示されるサムネイル画像は、その電子文書を構成するページ一覧画面へのリンクとなっており、ユーザがサムネイル画像をクリックすることでページ一覧画面が表示される。
【００２４】
例えば、図５の電子文書のサムネイル画像４０をクリックすると、図６に示すように、ページ一覧画面が表示される。
このページ一覧画面には、矢示４１のように、電子文書の各ページ毎のページ画像が一覧表示される。
この時、画面中の表示対象欄４２でページが指定されている為、電子文書の各ページ画像が一覧表示される。
ここで、画面中の表示対象欄４２で文書ツリーを指定すると、図７に示すようなページ一覧画面が表示され、矢示４３のように、電子文書とその電子文書の各ページ毎のページ画像と、各ページ画像毎にページ中の領域画像とがツリー形式で表示される。
【００２５】
［ツリー形式の表示例の説明］
図７に示したように、電子文書の文書構造を示すツリー形式は３段構成になっており、図中の左から電子文書、その電子文書データの各ページ画像、各ページ毎の領域画像のそれぞれのサムネイルとメタデータが表示される。
ここでは、電子文書として文書の先頭ページの画像を表示しているが、ページ画像の１ページ目と重複する為、文書であることを意味するアイコンや別画像を表示してもよい。
また、メタデータとして、ここでは図２に示したメタデータの一部を表示しているが、全メタデータを表示してもよい。
さらに、ユーザによってメタデータが追加されることがあればそれを表示してもよい。
【００２６】
また、ツリー中の各画像は展開及び省略の表示が可能であり、ツリー上に表示される省略アイコン（−アイコン）４４をクリックすることで、不要な領域画像を省略したり、また、展開アイコン（＋アイコン）４５をクリックすることで省略された領域画像を展開することも可能である。
なお、領域画像を子ノードとして持たないページについては、これらの展開アイコンと省略アイコンは表示されない。
【００２７】
もし、領域画像のメタデータとしてＵＲＬ等のハイパーリンクが存在する場合は、それを表示することにより、その表示されたハイパーリンクが選択されたときにハイパーリンクのリンク先のインターネット上のページにジャンプしてそのページを表示するリンク先のサイトを参照させることも可能である。
この実施例では、ＨＴＭＬで画面表示を行い、領域画像の展開と省略の制御をジャバスクリプト（ＪａｖａＳｃｒｉｐｔ：登録商標）を行うことを想定して記載しているが、実現手段をこれに制限するものではない。
【００２８】
［ツリー形成の表示処理の説明］
次に、ページ一覧画面から文書ツリー画面に切り替えるときの処理について説明する。
図８は、ページ一覧画面から文書ツリー画面に切り替えるときの処理を示すフローチャート図である。
図６に示したページ一覧に表示中のページで先頭ページについて、例えば、先頭ページのメタデータである所属情報を参照し、ページが属する電子文書データを特定する為の情報である電子文書ＩＤと電子文書の保管場所が得られる為、それらの情報に基づいて上記初速情報と一致する電子文書データを検索する（ステップ（図中「Ｓ」で示す）１）。
上記検索で得られた電子文書データについて、その電子文書データからページ画像データを抽出し、電子文書データをルートノードとし、その電子文書データから抽出された各ページのデータを子ノードとした表示用ツリーを形成する表示データを作成する（Ｓ２）。
【００２９】
次に、抽出されたページ画像メタデータについて、そのページ画像メタデータの領域画像情報に値が存在するか否かを判断する（Ｓ３）。
ステップ３の判断で値が存在しないと判断したら、そのページに関連する領域画像が存在しないことを意味し、ツリーの形成は行わないでこの処理を終了するが、値が存在すると判断したら、ステップ４でページ画像メタデータから抽出された領域画像を特定する為の情報である電子文書ＩＤと領域画像の保管場所がリスト形式で得られる為、それらの情報に基づいてリスト長分の領域画像データ（画像領域画像データ又は文字領域画像データ）を検索する（Ｓ４）。
ステップ４の検索で得られた全領域画像データをページの子ノードとした表示用ツリーを形成する表示データを作成する（Ｓ５）。
【００３０】
全ページについて調べたか否かを判断し、調べてなければステップ５へ戻って上記処理を繰り返し、全ページについて調べたら、この処理を終了する。
以上の処理により電子文書をルートノードとしたツリー表示の表示データが形成され、その表示データを表示部２０に送信することで電子文書の文書構造（ページ構成と各ページ中の画像領域又は文字領域の構成）とをツリー形式で表示し、ユーザはそのツリーを参照して電子文書の文書構造を容易に確認することが可能となる。
【００３１】
［領域画像のソートの説明］
次に、図８のステップ５の処理において、何のルールも無くツリーを形成すると、ページの上部にある領域画像とページの下部にある領域画像が入り乱れて表示されてしまい、ページ画像と領域画像の対応関係が分かり難くなる可能性がある。
これを回避する為に、領域画像のメタデータである座標情報に基づいてソートを行うとよい。
【００３２】
図９は、領域画像のソートの説明図である。
５０〜５４は、それぞれ画像領域又は文字領域の領域画像であり、図番の順はソート結果に基づいた表示順を意味している。
ここで、ページの左上をＸ座標０、Ｙ座標０とした場合、表示順は以下の１，２に従って決定される。
１．Ｙ座標の始点の値が０に近い領域画像を優先的に表示させる。
２．Ｙ座標の始点の値が同じであった場合は、Ｘ座標の始点の値がより０に近いもの優先的に表示させる。
上記２点に従うことにより、領域画像５０〜５４の順にソートされた領域画像をツリーに表示することが可能となる。
また、本ソートはツリー以外の表示方法を採用した場合でも同様に可能である。
【００３３】
［ツリー表示の展開と省略の表示処理の説明］
次に、表示部２０に対してツリー表示の展開又は省略の表示データを送信することでユーザに対して不要な領域画像を省略し、必要な情報だけを表示させることができる。
図１０は、ツリー表示で展開中の領域画像を省略表示にする処理を示すフローチャート図である。
表示部２０に表示されているツリー表示において、ページに付随する省略アイコン（−アイコン）がクリックするされたか否かを判断する（Ｓ１１）。
【００３４】
ステップ１１で省略アイコンがクリックされなかったと判断したら、この処理を終了し、クリックされたと判断したら、該当ページに属する領域画像が表示中である否かを判断する（Ｓ１２）。
ステップ１２で領域画像が表示中であると判断したら、該当ページに属する領域画像を非表示にし、画面上に表示させないようにする（Ｓ１３）。
さらに、省略アイコンを展開アイコンに切替えて表示し（Ｓ１４）、この処理を終了する。このように、アイコンが展開アイコンに切り替わることにより、ユーザは領域画像が省略されていることを認識することができる。
【００３５】
また、ツリー表示で省略中の領域画像を展開表示にする処理は、
表示部２０に表示されているツリー表示において、ページに付随する展開アイコン（＋アイコン）がクリックするされたか否かを判断し、展開アイコンがクリックされなかったと判断したら、この処理を終了し、クリックされたと判断したら、該当ページに属する領域画像の表示が省略中である否かを判断し、領域画像の表示が省略中であると判断したら、該当ページに属する領域画像を展開表示にし、画面上に表示するようにする。
さらに、展開アイコンを省略アイコンに切替えて表示し、この処理を終了する。
【００３６】
次に、この画像処理装置では、電子文書を構成するページを表示する際、領域画像のエリアを矩形表示し、指定された領域画像をドラッグ＆ドロップし、ワープロソフト等の別アプリケーションに添付することができる。
［プレビュー表示の画面の説明］
例えば、図６に示したページ一覧画面において、各ページのサムネイル画像にリンクが貼られており、サムネイル画像をクリックすることにより、そのサムネイル画像が示すページのプレビュー画面が表示される。
【００３７】
［プレビュー画面の説明］
図１１は、プレビュー画面の一例を示す図である。
このプレビュー画面では、ページから抽出された領域画像のエリアを、図中波線枠で示す矩形枠で表示されており、ユーザは矩形枠をドラッグ＆ドロップすることで別アプリケーションへ矩形枠内の領域画像データを添付することができる。
このとき、領域画像の画像種別がテキストである場合、添付されるのは領域画像ではなく、領域画像メタデータのキーテキストであることを特徴とする。
なお、矩形枠は、図中には黒の点線で表示しているが、他の色や線種で表示するようにしてもよい。
また、この実施例ではドラッグ＆ドロップの実現手段としてジャバアプレット（ＪａｖａＡｐｐｌｅｔ：登録商標）を採用することを想定して記載しているが、実現手段をこれに制限するものではなく、他の手段を用いても良い。
【００３８】
［プレビュー画面の表示処理の説明］
次に、ページ一覧画面からプレビュー画面に切り替える処理について説明する。
図１２は、ページ一覧画面からプレビュー画面に切り替える処理のフローチャート図である。
ユーザによって指定されたページのメタデータである保管場所に基づいてページ画像データのプレビュー画像を取得する（Ｓ２１）。
さらに、ページ画像メタデータに領域画像情報の値が存在するか否か判断する（Ｓ２２）。
【００３９】
ステップ２２で値が存在しないと判断したら、そのページに関連する領域画像が存在しないことを意味し、矩形枠のリンクエリアの形成は行わずに、この処理を終了するが、値が存在すると判断したら、ページから抽出された領域画像を特定する為の情報である電子文書ＩＤと領域画像の保管場所がリスト形式で得られる為、それらの情報に基づいてリスト長分の領域画像を全て検索する（Ｓ２３）。
上記検索で得られた全領域画像のメタデータから画像領域を示す座標情報を取得する（Ｓ２４）。
上記取得した画像領域を示す座標情報に基づいてプレビュー画像上に矩形のリンクエリア（矩形枠）を形成し、リンク先として保管場所に基づくダウンロード先のＵＲＩを設定し、リンク先に領域画像を指定する（Ｓ２５）。
これにより、ページ中の各領域画像について矩形のリンクエリアを伴ったプレビュー表示が可能となる。
【００４０】
［領域画像をドラッグ＆ドロップするときの処理の説明］
次に、ユーザがプレビュー表示されたページの領域画像をドラッグ＆ドロップする際の処理について説明する。
図１３は、プレビュー表示されたページの領域画像をドラッグ＆ドロップする際の処理を示すフローチャート図である。
例えば、図１１に示したページ中のいずれかのリンクエリア（図中波線で示す矩形枠内）がユーザによってクリックされたか否かを判断する（Ｓ３１）。
ステップ３１でクリックされなかったと判断したら、この処理を終了するが、クリックされたと判断したら、そのクリックされたリンクエリアのリンク先の領域画像のメタデータの画像タイプを取得し、この値に基づいて領域画像がテキスト画像か否かを判断する（Ｓ３２）。
【００４１】
ステップ３２でリンク先の領域画像がテキスト画像であると判断したら、リンク先の領域画像に登録されているキーテキストをダウンロードする（Ｓ３３）。
一方、ステップ３２でリンク先の領域画像がテキスト画像では無いと判断したら、すなわち、画像タイプが画像や表であった場合は、領域画像をダウンロードする（Ｓ３５）。
ステップ３３においてクリックによりキーテキストがダウンロード、ステップ３５においてクリックにより領域画像がダウンロードされた後、ユーザによるダウンロードデータのドラッグ＆ドロップ操作に応じてデータの表示位置の移動と、そのドロップ先が他のアプリケーションソフトウェアによるデータにキーテキスト又は領域画像を添付し、この処理を終了する。
このようにして、ユーザはリンクエリア（矩形枠）内の画像をドラッグ＆ドロップすることで、別アプリケーションにテキスト又は画像を添付することができる。
【００４２】
上述の説明では、この画像処理装置における電子文書の構造をツリー形式で表示する場合について説明したが、電子文書、ページ、領域画像の関連を表示する方法はツリー形式に制限されるものではない。
次に、ツリー以外の領域画像の表示形式について説明する。
［ツリー形式以外の表示形式の説明〜その１〜］
図１４は、ツリー形式以外の表示形式の説明図である。
この表示処理については、上述した説明済みの内容を持ちいれば実施可能であり、フローチャート図を用いた説明は省略し、表示内容についてのみ説明する。
図１４に示した画面は、表示対象欄６０で「ページ＋領域画像」を選択した際に表示される画面であり、３つのフレームで構成される。
【００４３】
上部のフレーム６１には「私の文書」という電子文書のファイル名が表示され、左部のフレーム６２には電子文書を構成する各ページのサムネール画像が一覧表示され、中央部から右部にわたるフレーム６３には、上記サムネール画像で選択中のページに関連する領域画像が一覧表示されている。
この画面では、左部のフレーム６２において電子文書の３ページ目のサムネール画像が選択され、それにより中央部から右部にわたるフレーム６３に３ページ目と関連をもつ領域画像（画像領域画像と文字領域画像）が表示されている。
各領域画像には、上述したプレビュー画面へのリンクが張られており、ユーザがいずれかの領域画像をクリックすることにより、そのクリックされた領域画像のプレビュー画面へ遷移することが可能である。
【００４４】
そのとき、プレビュー画面では遷移元の領域画像の座標情報に基づいて該当するエリアを強調表示してもよい。
図１５は、プレビュー画面におけるエリア強調表示例を示す説明図である。
このプレビュー画面では、遷移元の領域画像の座標情報に基づいて該当するエリア６４が強調表示（図中に太線枠で示す）されている。
【００４５】
［ツリー形式以外の表示形式の説明〜その２〜］
図１６は、ツリー形式以外の表示形式の他の例の説明図である。
この表示処理についても、上述した説明済みの内容を持ちいれば実施可能であり、フローチャート図を用いた説明は省略し、表示内容についてのみ説明する。
図１６に示した画面は、表示対象欄６０で「領域画像」を選択した際に表示される画面であり、矢示６５のように、ページをまたいで各ページの領域画像のみを一覧表示している。
この画面のように、表示対象が領域画像となっている場合、さらに領域画像メタデータの画像種別による絞込みが可能であり、同図では、画像種別がテキストである画像のみを表示させている画面を示している。
ここで、ユーザが絞込みを解除したい場合、画像種別の全てを選択することで全画像種別を一覧表示することが可能である。
【００４６】
この画像処理装置は、電子文書についてページ構成と各ページ中の領域画像構成からなる文書構造を表示するので、文書とページと領域画像の関係が明確になり、ユーザにとって文書管理性が向上する。
また、電子文書とページと領域画像の文書構造をツリー形式で表示することにより、視覚的に文書全体が把握しやすくなり、ユーザにとって文書管理性が向上する。
さらに、ツリーの展開と省略の表示を可能とすることにより、ユーザは必要な情報のみを得ることができる。
また、領域画像に登録したメタデータに基づく領域画像間のソートや領域画像の絞込みができるので、ユーザの好みに応じた表示が可能となる。
【００４７】
さらに、領域画像の座標情報に基づいてソートすることにより、ユーザにとってページと領域画像の位置関係が視覚的に把握しやすくなる。
また、領域画像から抽出したテキストをハイパーリンクとして表示することにより、ユーザはハイパーテキストを選択するだけで、リンク先を開いて参照することができる。
さらに、領域画像のドラッグ＆ドロップを可能とすることにより、ユーザによる領域画像の再利用性が高まる。
さらにまた、ドラッグ＆ドロップの対象となる領域画像の画像種別がテキストである場合、画像としてではなくメタデータであるキーテキストを添付することにより、ユーザは添付先のアプリケーションでテキスト編集が可能となる。
【産業上の利用可能性】
【００４８】
この発明による画像処理装置と画像処理方法とプログラムは、デスクトップパソコン，ノートブックパソコン等のパーソナルコンピュータにおいても適用することができる。
【図面の簡単な説明】
【００４９】
【図１】この発明の実施例の画像処理装置の機能構成を示すブロック図である。
【図２】図１に示した登録部によって格納部へ登録される情報の詳しい説明図である。
【図３】図２の続きの説明図である。
【図４】図３の続きの説明図である。
【図５】電子文書の文書構造を表示する画面例の説明図である。
【００５０】
【図６】同じく電子文書の文書構造を表示する画面例の説明図である。
【図７】同じく電子文書の文書構造を表示する画面例の説明図である。
【図８】ページ一覧画面から文書ツリー画面に切り替えるときの処理を示すフローチャート図である。
【図９】領域画像のソートの説明図である。
【００５１】
【図１０】ツリー表示で展開中の領域画像を省略表示にする処理を示すフローチャート図である。
【図１１】プレビュー画面の一例を示す図である。
【図１２】ページ一覧画面からプレビュー画面に切り替える処理のフローチャート図である。
【図１３】プレビュー表示されたページの領域画像をドラッグ＆ドロップする際の処理を示すフローチャート図である。
【００５２】
【図１４】ツリー形式以外の表示形式の説明図である。
【図１５】プレビュー画面におけるエリア強調表示例を示す説明図である。
【図１６】ツリー形式以外の表示形式の他の例の説明図である。
【符号の説明】
【００５３】
１：登録処理部    ２：検索表示部    １０：文書入力部    １１：領域抽出部    １２：テキスト抽出部    １３：登録部    １４：格納部    ２０：表示部    ２１：要求制御部    ２２：検索部    ２３：表示情報生成部    ３０：電子文書データ    ３１：電子文書メタデータ    ３２：ページ画像データ    ３３：ページ画像メタデータ    ３４：領域画像データ    ３５：領域画像メタデータ
【図１】
2009064080.tif 000003
【図２】
2009064080.tif 000004
【図３】
2009064080.tif 000005
【図４】
2009064080.tif 000006
【図５】
2009064080.tif 000007
【図６】
2009064080.tif 000008
【図７】
2009064080.tif 000009
【図８】
2009064080.tif 000010
【図９】
2009064080.tif 000011
【図１０】
2009064080.tif 000012
【図１１】
2009064080.tif 000013
【図１２】
2009064080.tif 000014
【図１３】
2009064080.tif 000015
【図１４】
2009064080.tif 000016
【図１５】
2009064080.tif 000017
【図１６】
2009064080.tif 000018