【手続補正書】
【提出日】平成20年8月27日(2008.8.27)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
メモリに格納された文書画像の情報を処理する画像処理装置が実行する画像処理方法であって、
文書画像の情報の出力先装置の情報を取得する第一の取得ステップと、
前記出力先装置の情報と前記文書画像の各領域の属性に基づき、前記領域ごとに出力すべき前記文書画像の情報の種類を判断する判断ステップと、
前記領域ごとに、前記判断した種類に対応する情報を前記メモリから取得する第二の取得ステップと、
前記領域ごとに、前記メモリから取得した情報を統合する統合ステップと、
前記統合した情報を前記出力先装置に出力する出力ステップとを有することを特徴とする画像処理方法。
【請求項２】
さらに、前記画像処理装置に登録する対象の文書画像を、画像属性に基づき複数の領域に分割する分割ステップと、
前記分割した各領域の画像を一または複数の情報に変換する変換ステップと、
前記変換した情報を関連付けて前記文書画像の構造を示す構造化文書情報を生成する生成ステップと、
前記構造化文書情報を前記文書画像の情報として前記メモリに格納する格納ステップとを有することを特徴とする請求項1に記載された画像処理方法。
【請求項３】
前記第二の取得ステップは、前記判断した種類の情報が存在しない注目領域について、前記判断した種類とは異なる種類の前記注目領域の情報を前記判断した種類の情報に変換して、前記変換した情報を前記注目領域の情報とすることを特徴とする請求項1または請求項2に記載された画像処理方法。
【請求項４】
前記第二の取得ステップは、前記変換した情報を前記注目領域に関連付けて前記メモリに格納することを特徴とする請求項3に記載された画像処理方法。
【請求項５】
前記第二の取得ステップは、前記判断した種類の情報が存在しない注目領域について、前記注目領域の画像に類似する画像を有し、かつ、前記判断した種類に対応する情報を有する前記文書画像の他の領域を検索し、前記他の領域の、前記判断した種類の情報を前記注目領域の情報とすることを特徴とする請求項1または請求項2に記載された画像処理方法。
【請求項６】
前記第二の取得ステップは、前記他の領域の、前記判断した種類の情報を、前記注目領域に関連付けて前記メモリに格納することを特徴とする請求項5に記載された画像処理方法。
【請求項７】
前記メモリに格納された文書画像の情報は、前記文書画像の各領域の属性情報とレイアウト情報を含むことを特徴とする請求項1に記載された画像処理方法。
【請求項８】
前記出力すべき文書画像の情報の種類は、解像度可変のラスタ画像、ベクタ画像、モノクロ画像、カラー画像、三次元画像、文字認識結果のテキスト、フォント情報および他言語への翻訳結果の少なくとも一つであることを特徴とする請求項1に記載された画像処理方法。
【請求項９】
前記判断ステップは、前記出力先装置の情報、前記各領域の属性、前記各領域の情報の特性に基づき、前記領域ごとに出力すべき情報の種類を判断することを特徴とする請求項1から請求項8の何れか一項に記載された画像処理方法。
【請求項１０】
文書画像の情報を格納するメモリと、
前記文書画像の情報の出力先装置の情報を取得する第一の取得手段と、
前記出力先装置の情報と前記文書画像の各領域の属性に基づき、前記領域ごとに出力すべき情報の種類を判断する判断手段と、
前記領域ごとに、前記判断した種類に対応する情報を前記メモリから取得する第二の取得手段と、
前記領域ごとに、前記メモリから取得した情報を統合する統合手段と、
前記統合した情報を前記出力先装置に出力する出力手段とを有することを特徴とする画像処理装置。
【請求項１１】
情報処理装置を制御して、請求項1から請求項9の何れか一項に記載された画像処理を実現することを特徴とするプログラム。
【請求項１２】
請求項11に記載されたプログラムが記録されたことを特徴とするコンピュータが読み取り可能な記録媒体。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１７
【補正方法】変更
【補正の内容】
【００１７】
本発明は、文書画像の各領域の情報を出力する際に、その出力先の装置に応じた種類の情報を出力することを目的とする。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１９
【補正方法】変更
【補正の内容】
【００１９】
本発明にかかる画像処理は、メモリに格納された文書画像の情報を処理する際に、文書画像の情報の出力先装置の情報を取得し、前記出力先装置の情報と前記文書画像の各領域の属性に基づき、前記領域ごとに出力すべき前記文書画像の情報の種類を判断し、前記領域ごとに、前記判断した種類に対応する情報を前記メモリから取得し、前記領域ごとに、前記メモリから取得した情報を統合し、前記統合した情報を前記出力先装置に出力することを特徴とする。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００２０
【補正方法】変更
【補正の内容】
【００２０】
本発明によれば、文書画像の各領域の情報を出力する際に、その出力先の装置に応じた種類の情報を出力することができる。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００２３
【補正方法】変更
【補正の内容】
【００２３】
CPU101は、ROM102に格納された制御プログラムに従い、RAM103をワークメモリとして装置全体を制御する。ROM102は、CPU101が実行する後述する制御プログラムなどを格納する。RAM103および磁気ディスクなどのHD104は、後述する処理プログラムや文書画像などを記憶する。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００２５
【補正方法】変更
【補正の内容】
【００２５】
また、伝達情報出力装置は、ネットワークインタフェイス(I/F)109を介して、ローカルエリアネットワーク(LAN)110などに接続し、ネットワーク上の他の機器（サーバ、コンピュータ、プリンタ、スキャナ、複合機など）と通信し、データやプログラムをやり取りする。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００３３
【補正方法】変更
【補正の内容】
【００３３】
なお、以下の説明では、モノクロ印刷とモニタ表示を基本的な出力モード（基本パターンと呼ぶ）として、他の出力モード（応用パターンと呼ぶ）は、基本パターンに比べて利用頻度が低いとする。従って、基本パターンにおける伝達情報だけを、例えば、次のように用意する、として説明する。
────┬────────┬─────────
│  モノクロ印刷  │    モニタ表示
────┼────────┼─────────
文字領域│ラスタ画像      │ラスタ画像
写真領域│階調ラスタ画像  │低解像度ラスタ画像
線画領域│ラスタ画像      │ラスタ画像
表領域  │ラスタ画像      │低解像度ラスタ画像
────┴────────┴─────────
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００３４
【補正方法】変更
【補正の内容】
【００３４】
次に、各分割領域の文書情報および伝達情報を関連付けた、ツリー構造で記述される構造化文書を生成する(S205)。続いて、生成したデータ群（各分割領域の文書情報および伝達情報、並びに、構造化文書）をHD104などに保存（登録）する(S206)。なお、データ群の保存先はネットワーク110上のサーバなどでもよい。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００３７
【補正方法】変更
【補正の内容】
【００３７】
つまり、ある分割領域の文書情報401は、ステップS204で得た、その領域の伝達情報402、403を保持する。このようなツリー構造により、各分割領域の関係を階層的に表現することができる。なお、文書情報は、複数種類の伝達情報を保持することができる。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００４７
【補正方法】変更
【補正の内容】
【００４７】
また、変換可能な伝達情報が存在しない場合は、分割領域の伝達情報を検索キーとして、出力モードに適した伝達情報（代替情報）をHD104やサーバから検索し(S508)、検索がヒットしたか否かを判定し(S509)、ヒットすればステップS510へ、ヒットしなければステップS511へ移行する。この検索は、例えば、モノクロ写真属性の分割領域をカラー出力したい場合、当該領域の伝達情報（モノクロ画像）を検索キーとして類似するカラー画像を検索するものである。詳細は省略するが、類似画像検索は、画像のアングルの変化、被写体の位置の変化および撮影条件による、画像特徴量のある程度の違いを吸収して、ある程度の曖昧さを残しながらも適切な画像検索を行うことができる。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００５７
【補正方法】変更
【補正の内容】
【００５７】
文字属性以外の領域、および、文字認識の信頼度がX%未満の文字属性の領域は、低解像度ラスタ画像を設定する(S603)。また、文字認識の信頼度がX%以上の文字属性の領域は、文字認識結果のテキストを設定する(S604)。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００６５
【補正方法】変更
【補正の内容】
【００６５】
また、文字属性でも写真属性でもない注目領域、あるいは、文字認識の信頼度がX%未満の文字属性の注目領域は、注目領域に関連付けた伝達情報からラスタ画像のファイルサイズがYバイト以下か否かを判定する(S704)。ファイルサイズがYバイト以下のラスタ画像は、PDA表示に耐え得るので、この場合は低解像度ラスタ画像を設定する(S705)。ラスタ画像のファイルサイズがYバイトを超える場合はPDA表示に向かないので、ベクタ画像を設定する(S706)。
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】００７７
【補正方法】変更
【補正の内容】
【００７７】
［変換情報（代替情報）の関連付け］
次に、変換情報（代替情報）の関連付け(S507)の処理を説明する。