(57)【要約】【課題】背景パターン上に画像が存在する原稿の読取画像から、背景パターン上の画像が分離された場合であっても、読取画像の見栄えを良好に維持することができる画像処理装置を提供する。【解決手段】本発明の画像処理装置は、背景パターン上に画像が存在する原稿を読取装置により読み取って得られた当該原稿の読取画像を取得する取得部と、取得部により取得された読取画像に含まれる画像を認識する認識部と、認識部により認識された画像を読取画像から除去することにより、画像が除去された領域である無地領域と、背景パターンに対応する領域であるパターン領域とを有する背景パターン画像を生成する生成部と、生成部により生成された背景パターン画像における特徴的な色を求める算出部と、算出部により求められた特徴的な色の塗りつぶし画像または当該色のパターン画像によって、背景パターン画像の全領域を置き換える置換部と、を有する。【選択図】図５
2010251867.tif 000002
【特許請求の範囲】
【請求項１】
背景パターン上に画像が存在する原稿を読取装置により読み取って得られた当該原稿の読取画像を取得する取得部と、
前記取得部により取得された前記読取画像に含まれる前記画像を認識する認識部と、
前記認識部により認識された前記画像を前記読取画像から除去することにより、前記画像が除去された領域である無地領域と、前記背景パターンに対応する領域であるパターン領域とを有する背景パターン画像を生成する生成部と、
前記生成部により生成された前記背景パターン画像における特徴的な色を求める算出部と、
前記算出部により求められた前記特徴的な色の塗りつぶし画像または当該色のパターン画像によって、前記背景パターン画像の全領域を置き換える置換部と、
を有することを特徴とする画像処理装置。
【請求項２】
前記置換部は、前記背景パターンのパターン形状と同一のパターン形状を有する前記パターン画像によって、前記背景パターン画像の全領域を置き換えることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記特徴的な色は、前記背景パターン画像の代表色であり、
前記置換部は、前記代表色の前記パターン画像によって、前記背景パターン画像の全領域を置き換えることを特徴とする請求項１または２に記載の画像処理装置。
【請求項４】
前記特徴的な色は、前記背景パターン画像の平均色であり、
前記置換部は、前記平均色の前記塗りつぶし画像によって、前記背景パターン画像の全領域を置き換えることを特徴とする請求項１に記載の画像処理装置。
【請求項５】
前記背景パターン画像と置き換えられる画像が前記特徴的な色の塗りつぶし画像であるかまたは当該色のパターン画像であるかについてのユーザによる選択を受け付けるための選択画面を表示させる表示部と、
前記選択画面を通じて、前記背景パターン画像と置き換えられる前記画像についての前記ユーザによる選択を受け付ける受付部と、をさらに有し、
前記置換部は、前記受付部により受付けられた前記ユーザによる選択にしたがって、前記特徴的な色の塗りつぶし画像または当該色のパターン画像によって、前記背景パターン画像の全領域を置き換えることを特徴とする請求項１〜４のいずれか１項に記載の画像処理装置。
【請求項６】
前記特徴的な色とは異なる色の画像によって前記背景パターン画像を置き換えるか否かについての前記ユーザによる選択を受付ける色変更受付部と、
前記異なる色の画像によって前記背景パターン画像を置き換えることが前記ユーザにより選択される場合、選択画面に表示される複数の色の中から、前記異なる色についての前記ユーザによる選択を受付ける色選択受付部と、
前記色選択受付部により受付けられた前記異なる色の塗りつぶし画像または当該色のパターン画像によって、前記背景パターン画像の全領域を置き換える色置換部と、をさらに有することを特徴とする請求項１〜５のいずれか１項に記載の画像処理装置。
【請求項７】
前記背景パターン上に存在する画像は、文字画像であることを特徴とする請求項１〜６のいずれか１項に記載の画像処理装置。
【請求項８】
背景パターン上に画像が存在する原稿を読取装置により読み取って得られた当該原稿の読取画像を取得する手順（ａ）と、
前記手順（ａ）において取得された前記読取画像に含まれる前記画像を認識する手順（ｂ）と、
前記手順（ｂ）において認識された前記画像を前記読取画像から除去することにより、前記画像が除去された領域である無地領域と、前記背景パターンに対応する領域であるパターン領域とを有する背景パターン画像を生成する手順（ｃ）と、
前記手順（ｃ）において生成された前記背景パターン画像における特徴的な色を求める手順（ｄ）と、
前記手順（ｄ）において求められた前記特徴的な色の塗りつぶし画像または当該色のパターン画像によって、前記背景パターン画像の全領域を置き換える手順（ｅ）と、
をコンピュータに実行させることを特徴とする画像処理プログラム。
【請求項９】
前記手順（ｅ）において、前記背景パターンのパターン形状と同一のパターン形状を有する前記パターン画像によって、前記背景パターン画像の全領域が置き換えられることを特徴とする請求項８に記載の画像処理プログラム。
【請求項１０】
前記特徴的な色は、前記背景パターン画像の代表色であり、
前記手順（ｅ）において、前記代表色の前記パターン画像によって、前記背景パターン画像の全領域が置き換えられることを特徴とする請求項８または９に記載の画像処理プログラム。
【請求項１１】
前記特徴的な色は、前記背景パターン画像の平均色であり、
前記手順（ｅ）において、前記平均色の前記塗りつぶし画像によって、前記背景パターン画像の全領域が置き換えられることを特徴とする請求項８に記載の画像処理プログラム。
【請求項１２】
前記背景パターン画像と置き換えられる画像が前記特徴的な色の塗りつぶし画像であるかまたは当該色のパターン画像であるかについてのユーザによる選択を受け付けるための選択画面を表示させる手順（ｆ）と、
前記選択画面を通じて、前記背景パターン画像が置き換えられる画像についての前記ユーザによる選択を受け付ける手順（ｇ）と、をさらに前記コンピュータに実行させ、
前記手順（ｅ）において、前記手順（ｇ）において受付けられた前記ユーザによる選択にしたがって、前記特徴的な色の塗りつぶし画像または当該色のパターン画像によって、前記背景パターン画像の全領域が置き換えられることを特徴とする請求項８〜１１のいずれか１項に記載の画像処理プログラム。
【請求項１３】
前記特徴的な色とは異なる色の画像によって前記背景パターン画像を置き換えるか否かについてのユーザによる選択を受付けるための手順（ｈ）と、
前記異なる色の画像によって前記背景パターン画像を置き換えることが前記ユーザにより選択される場合、選択画面に表示される複数の色の中から、前記異なる色についての前記ユーザによる選択を受付ける手順（ｉ）と、
前記手順（ｉ）において受付けられた前記異なる色の塗りつぶし画像または当該色のパターン画像によって、前記背景パターン画像の全領域を置き換える手順（ｊ）と、をさらに前記コンピュータに実行させることを特徴とする請求項８〜１２のいずれか１項に記載の画像処理プログラム。
【請求項１４】
前記背景パターン上に存在する画像は、文字画像であることを特徴とする請求項８〜１３のいずれか１項に記載の画像処理プログラム。
【請求項１５】
請求項８〜１４のいずれか１項に記載の画像処理プログラムを記録したコンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置および画像処理プログラムに関する。本発明は、特に、背景パターン上に画像が存在する原稿の読取画像を処理する画像処理装置および画像処理プログラムに関する。
【背景技術】
【０００２】
スキャナにより原稿を読み取って得られた原稿の読取画像から、文字画像および図形画像を抽出して画像毎に画像処理を施し、画像処理後の画像を合成して文書ファイルを作成する技術が知られている。
【０００３】
これに関連する技術として、ファイル化された読取画像の見栄えを良好に維持する見地から、下記の特許文献１に示すような画像処理装置が提案されている。特許文献１に開示されている画像処理装置は、背景画像上に文字画像が存在する原稿の読取画像から文字画像を分離して、文字画像を文字コードデータに変換するとともに、文字画像が分離された背景画像の白抜き部分の画像データを周辺の背景画像データを用いて補正するものである。このような構成によれば、周辺の背景画像データに基づいて背景画像の白抜き部分が補完されるため、文字コードデータに変換された後の文字画像の形状と元の読取画像で用いられていた文字画像の形状とが異なる場合であっても、文字画像の背景に白抜き部分が現れず、読取画像が見栄え良く維持される。
【０００４】
しかしながら、上記画像処理装置では、背景画像が単一色または複数色からなるパターン画像である場合、背景画像の白抜き部分が適切に補完されず、読取画像の見栄えが低下してしまうおそれがある。したがって、背景パターン上に文字画像が存在する原稿の読取画像から文字画像を抽出する場合であっても、読取画像の見栄えを良好に維持することが望まれている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００１−３５８９２５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
本発明は、上述した課題に鑑みてなされたものである。したがって、本発明の目的は、背景パターン上に画像が存在する原稿の読取画像から、背景パターン上の画像が分離された場合であっても、読取画像の見栄えを良好に維持することができる画像処理装置および画像処理プログラムを提供することである。
【課題を解決するための手段】
【０００７】
本発明の上記目的は、下記の手段によって達成される。
【０００８】
（１）背景パターン上に画像が存在する原稿を読取装置により読み取って得られた当該原稿の読取画像を取得する取得部と、前記取得部により取得された前記読取画像に含まれる前記画像を認識する認識部と、前記認識部により認識された前記画像を前記読取画像から除去することにより、前記画像が除去された領域である無地領域と、前記背景パターンに対応する領域であるパターン領域とを有する背景パターン画像を生成する生成部と、前記生成部により生成された前記背景パターン画像における特徴的な色を求める算出部と、前記算出部により求められた前記特徴的な色の塗りつぶし画像または当該色のパターン画像によって、前記背景パターン画像の全領域を置き換える置換部と、を有することを特徴とする画像処理装置。
【０００９】
（２）前記置換部は、前記背景パターンのパターン形状と同一のパターン形状を有する前記パターン画像によって、前記背景パターン画像の全領域を置き換えることを特徴とする上記（１）に記載の画像処理装置。
【００１０】
（３）前記特徴的な色は、前記背景パターン画像の代表色であり、前記置換部は、前記代表色の前記パターン画像によって、前記背景パターン画像の全領域を置き換えることを特徴とする上記（１）または（２）に記載の画像処理装置。
【００１１】
（４）前記特徴的な色は、前記背景パターン画像の平均色であり、前記置換部は、前記平均色の前記塗りつぶし画像によって、前記背景パターン画像の全領域を置き換えることを特徴とする上記（１）に記載の画像処理装置。
【００１２】
（５）前記背景パターン画像と置き換えられる画像が前記特徴的な色の塗りつぶし画像であるかまたは当該色のパターン画像であるかについてのユーザによる選択を受け付けるための選択画面を表示させる表示部と、前記選択画面を通じて、前記背景パターン画像と置き換えられる前記画像についての前記ユーザによる選択を受け付ける受付部と、をさらに有し、前記置換部は、前記受付部により受付けられた前記ユーザによる選択にしたがって、前記特徴的な色の塗りつぶし画像または当該色のパターン画像によって、前記背景パターン画像の全領域を置き換えることを特徴とする上記（１）〜（４）のいずれか一つに記載の画像処理装置。
【００１３】
（６）前記特徴的な色とは異なる色の画像によって前記背景パターン画像を置き換えるか否かについての前記ユーザによる選択を受付ける色変更受付部と、前記異なる色の画像によって前記背景パターン画像を置き換えることが前記ユーザにより選択される場合、選択画面に表示される複数の色の中から、前記異なる色についての前記ユーザによる選択を受付ける色選択受付部と、前記色選択受付部により受付けられた前記異なる色の塗りつぶし画像または当該色のパターン画像によって、前記背景パターン画像の全領域を置き換える色置換部と、をさらに有することを特徴とする上記（１）〜（５）のいずれか一つに記載の画像処理装置。
【００１４】
（７）前記背景パターン上に存在する画像は、文字画像であることを特徴とする上記（１）〜（６）のいずれか一つに記載の画像処理装置。
【００１５】
（８）背景パターン上に画像が存在する原稿を読取装置により読み取って得られた当該原稿の読取画像を取得する手順（ａ）と、前記手順（ａ）において取得された前記読取画像に含まれる前記画像を認識する手順（ｂ）と、前記手順（ｂ）において認識された前記画像を前記読取画像から除去することにより、前記画像が除去された領域である無地領域と、前記背景パターンに対応する領域であるパターン領域とを有する背景パターン画像を生成する手順（ｃ）と、前記手順（ｃ）において生成された前記背景パターン画像における特徴的な色を求める手順（ｄ）と、前記手順（ｄ）において求められた前記特徴的な色の塗りつぶし画像または当該色のパターン画像によって、前記背景パターン画像の全領域を置き換える手順（ｅ）と、をコンピュータに実行させることを特徴とする画像処理プログラム。
【００１６】
（９）前記手順（ｅ）において、前記背景パターンのパターン形状と同一のパターン形状を有する前記パターン画像によって、前記背景パターン画像の全領域が置き換えられることを特徴とする上記（８）に記載の画像処理プログラム。
【００１７】
（１０）前記特徴的な色は、前記背景パターン画像の代表色であり、前記手順（ｅ）において、前記代表色の前記パターン画像によって、前記背景パターン画像の全領域が置き換えられることを特徴とする上記（８）または（９）に記載の画像処理プログラム。
【００１８】
（１１）前記特徴的な色は、前記背景パターン画像の平均色であり、前記手順（ｅ）において、前記平均色の前記塗りつぶし画像によって、前記背景パターン画像の全領域が置き換えられることを特徴とする上記（８）に記載の画像処理プログラム。
【００１９】
（１２）前記背景パターン画像と置き換えられる画像が前記特徴的な色の塗りつぶし画像であるかまたは当該色のパターン画像であるかについてのユーザによる選択を受け付けるための選択画面を表示させる手順（ｆ）と、前記選択画面を通じて、前記背景パターン画像が置き換えられる画像についての前記ユーザによる選択を受け付ける手順（ｇ）と、をさらに前記コンピュータに実行させ、前記手順（ｅ）において、前記手順（ｇ）において受付けられた前記ユーザによる選択にしたがって、前記特徴的な色の塗りつぶし画像または当該色のパターン画像によって、前記背景パターン画像の全領域が置き換えられることを特徴とする上記（８）〜（１１）のいずれか一つに記載の画像処理プログラム。
【００２０】
（１３）前記特徴的な色とは異なる色の画像によって前記背景パターン画像を置き換えるか否かについてのユーザによる選択を受付けるための手順（ｈ）と、前記異なる色の画像によって前記背景パターン画像を置き換えることが前記ユーザにより選択される場合、選択画面に表示される複数の色の中から、前記異なる色についての前記ユーザによる選択を受付ける手順（ｉ）と、前記手順（ｉ）において受付けられた前記異なる色の塗りつぶし画像または当該色のパターン画像によって、前記背景パターン画像の全領域を置き換える手順（ｊ）と、をさらに前記コンピュータに実行させることを特徴とする上記（８）〜（１２）のいずれか一つに記載の画像処理プログラム。
【００２１】
（１４）前記背景パターン上に存在する画像は、文字画像であることを特徴とする上記（８）〜（１３）のいずれか一つに記載の画像処理プログラム。
【００２２】
（１５）上記（８）〜（１４）のいずれか一つに記載の画像処理プログラムを記録したコンピュータ読み取り可能な記録媒体。
【発明の効果】
【００２３】
本発明によれば、画像が除去された領域である無地領域を有する背景パターン画像の全領域が、塗りつぶし画像またはパターン画像によって置き換えられるため、無地領域を有する背景パターン画像が、無地領域を有さない画像に復元される。したがって、背景パターン上に画像が存在する原稿の読取画像から、背景パターン上の画像が分離された場合であっても、背景画像に白抜き部分が残存することが防止され、読取画像の見栄えを良好に維持することができる。
【００２４】
また、本発明によれば、背景パターン画像の色情報を残しつつ、画像が復元されるため、画像の視覚的な印象を変えることなく、読取画像の見栄えを良好に維持することができる。
【図面の簡単な説明】
【００２５】
【図１】本発明の一実施形態にかかる画像処理システムの全体構成を示すブロック図である。
【図２】図１に示されるクライアントＰＣの構成を示すブロック図である。
【図３】図１に示されるＭＦＰの構成を示すブロック図である。
【図４】図３に示されるＭＦＰの操作パネルに表示される背景画像復元設定画面の一例を示す図である。
【図５】図１に示されるＭＦＰによるファイル作成処理を説明するためのフローチャートである。
【図６】背景パターン上に文字画像が存在する読取画像の一例を示す図である。
【図７】図５のステップＳ１０５に示される背景画像復元処理を説明するためのフローチャートである。
【図８】図７のステップＳ２０３に示されるパターン・色復元処理を説明するためのフローチャートである。
【図９】ＲＧＢデータヒストグラムの一例を示す図である。
【図１０】図６に示される読取画像から文字画像を分離した後に背景パターン画像を復元して得られる画像の一例を示す図である。
【図１１】図６に示される読取画像から文字画像を分離した後に背景パターン画像の無地領域を周辺画素平均値で補完した場合に得られる画像の一例を示す図である。
【図１２】パターン・色復元処理の変形例を説明するための図である。
【図１３】図７のステップＳ２０５に示される平均色復元処理を説明するためのフローチャートである。
【図１４】平均色復元処理によって復元された画像の一例を示す図である。
【図１５】図７のステップＳ２０６に示される別パターン・別色復元処理を説明するためのフローチャートである。
【図１６】別パターン・別色復元処理によって復元された画像の一例を示す図である。
【発明を実施するための形態】
【００２６】
以下、本発明の実施の形態を、図面を参照して詳細に説明する。
【００２７】
図１は、本発明の一実施形態にかかる画像処理システムの全体構成を示すブロック図である。
【００２８】
図１に示されるとおり、本実施形態にかかる画像処理システムは、クライアントＰＣ１と、ＭＦＰ（Ｍｕｌｔｉ−Ｆｕｎｃｔｉｏｎ  Ｐｅｒｉｐｈｅｒａｌ）２とを備え、これらはネットワーク３を介して相互に通信可能に接続されている。
【００２９】
ネットワーク３は、たとえば、イーサネット（登録商標）、トークンリング、およびＦＤＤＩ等の規格によりコンピュータやネットワーク機器同士を接続したＬＡＮ、またはＬＡＮ同士を専用線で接続したＷＡＮ等の各種のネットワークからなる。なお、ネットワーク３に接続される機器の種類および台数は、図１に示す例に限定されない。また、クライアントＰＣ１とＭＦＰ２とは、ネットワーク３を介することなく直接機器間で接続（ローカル接続）されていてもよい。
【００３０】
図２は、図１に示されるクライアントＰＣの構成を示すブロック図である。クライアントＰＣ１は、ＣＰＵ１１、ＲＯＭ１２、ＲＡＭ１３、ハードディスク１４、ディスプレイ１５、入力装置１６、および通信インタフェース１７を備えており、これらは信号をやり取りするためのバス１８を介して相互に接続されている。
【００３１】
ＣＰＵ１１は、プログラムにしたがって、上記各部の制御や各種の演算処理を行う。ＲＯＭ１２は、各種プログラムや各種データを格納する。ＲＡＭ１３は、作業領域として一時的にプログラムやデータを記憶する。ハードディスク１４は、オペレーティングシステムを含む各種プログラムや各種データを格納する。ハードディスク１４には、ＭＦＰ２により作成された文書ファイルを閲覧および編集するためのアプリケーションと、文書ファイルをＭＦＰ２が解釈可能な言語（たとえばＰｏｓｔＳｃｒｉｐｔ（登録商標）などのページ記述言語）で記述されたプリントデータに変換するためのプリンタドライバとがインストールされている。
【００３２】
ディスプレイ１５は、各種の情報を表示する。入力装置１６は、マウス等のポインティングデバイスやキーボードであり、各種の入力を行うために使用される。通信インタフェース１７は、ネットワーク３を介して他の機器と通信するためのインタフェースであり、イーサネット（登録商標）、トークンリング、ＦＤＤＩ等の規格が用いられる。
【００３３】
図３は、図１に示されるＭＦＰの構成を示すブロック図である。ＭＦＰ２は、ＣＰＵ２１、ＲＯＭ２２、ＲＡＭ２３、ハードディスク２４、操作パネル２５、画像読取部２６、印刷部２７、および通信インタフェース２８を含み、これらは信号をやり取りするためのバス２９を介して相互に接続されている。なお、ＭＦＰ２の上記各部のうち、クライアントＰＣ１の上記各部と同様の機能を有する部分については、説明の重複を避けるためその説明を省略する。
【００３４】
操作パネル２５は、各種情報の表示および各種指示の入力に使用される。画像読取部２６は、原稿を読み取ることによって画像データを得る。画像読取部２６は、原稿台の所定の読み取り位置にセットされた原稿またはＡＤＦ（Ａｕｔｏ  Ｄｏｃｕｍｅｎｔ  Ｆｅｅｄｅｒ：自動原稿搬送装置）により所定の読取位置に搬送された原稿に蛍光ランプ等の光源で光を当て、その反射光をＣＣＤ等の受光素子で光電変換して、その電気信号から画像データを生成する。
【００３５】
印刷部２７は、電子写真式プロセス等の周知の作像プロセスを用いて各種データに基づく画像を用紙などの記録材上に印刷する。
【００３６】
なお、クライアントＰＣ１およびＭＦＰ２は、それぞれ、上記した構成要素以外の構成要素を含んでいてもよく、あるいは、上記した構成要素のうちの一部が含まれていなくてもよい。
【００３７】
図４は、図３に示されるＭＦＰの操作パネルに表示される背景画像復元設定画面の一例を示す図である。
【００３８】
図４に示されるとおり、本実施形態の背景画像復元設定画面１００は、復元方式選択部１１０、背景画像表示部１２０、パターン選択部１３０、色選択部１４０、および変更確認部１５０を有する。
【００３９】
復元方式選択部１１０は、ユーザによる背景画像の復元方式についての選択を受付けるものである。本実施形態の復元方式選択部１１０は、３つの復元方式の中からユーザによる１つの復元方式の選択を受付ける。具体的には、復元方式選択部１１０は、「パターン・色復元」、「平均色復元」、および「別パターン・別色復元」の３つの復元方式の中から、ユーザによる１つの復元方式の選択を受付ける。
【００４０】
背景画像表示部１２０は、画像読取部２６により原稿を読み取って得られた原稿の読取画像を表示するものである。背景画像表示部１２０は、原稿の読取画像に含まれる背景パターンを認識して表示する。
【００４１】
パターン選択部１３０は、ユーザによる復元後の背景画像のパターンについての選択を受付けるものである。パターン選択部１３０は、復元方式選択部１１０において「別パターン・別色復元」が選択された場合に、背景画像の復元後のパターンについてのユーザによる選択を受付ける。
【００４２】
色選択部１４０は、ユーザによる復元後の背景画像の色についての選択を受付けるものである。色選択部１４０は、復元方式選択部１１０において「別パターン・別色復元」が選択された場合に、背景画像の復元後の色についてのユーザによる選択を受付ける。
【００４３】
変更確認部１５０は、復元前後の背景画像を確認するものである。変更確認部１５０は、復元前の背景画像の色と、復元後の背景画像のパターンおよび色とを表示することにより、背景画像の復元後の内容をユーザが確認することを可能とする。
【００４４】
以上のとおり構成される本実施形態の画像処理システムでは、ＭＦＰ２の画像読取部２６により原稿が読み取られ、読取画像の文書ファイルが作成される。本実施形態では、ＰＤＦ、ＸＰＳ等の階層を持つファイル形式の文書ファイルが作成される。以下、図５〜図１６を参照して、本実施形態の画像処理方法について説明する。
【００４５】
図５は、図１に示されるＭＦＰによるファイル作成処理を説明するためのフローチャートである。なお、図５のフローチャートにより示されるアルゴリズムは、ＭＦＰ２のＲＯＭ２２にプログラムとして記憶されており、ＣＰＵ２１によって実行される。
【００４６】
図５に示されるとおり、本実施形態のファイル作成処理では、まず、原稿の読取画像が取得される（ステップＳ１０１）。本実施形態では、背景パターン上に文字画像が存在する原稿がＭＦＰ２の画像読取部２６により読み取られ、原稿の読取画像が取得される。
【００４７】
図６は、原稿の読取画像の一例を示す図である。図６に示されるとおり、読取画像２００には、背景パターン２１０上に存在する文字画像２２０が含まれている。読取画像２００は、ビットマップ形式のカラー画像データであり、背景パターン２１０は、単一色の繰り返しパターンにより構成されている。
【００４８】
次に、読取画像に含まれる文字画像が抽出される（ステップＳ１０２）。本実施形態では、ステップＳ１０１に示す処理で取得された読取画像に含まれる背景パターン上の文字画像が抽出される。具体的には、読取画像に対して、文字エッジ抽出処理および文字連結／判定処理が実行されることにより、読取画像に含まれる文字画像が抽出される。
【００４９】
次に、背景パターン上の文字画像が除去される（ステップＳ１０３）。本実施形態では、ステップＳ１０２に示す処理で抽出された背景パターン上の文字画像が、読取画像から除去される。その結果、読取画像には、文字画像が除去された領域である無地領域（白抜き部分）が形成される。
【００５０】
次に、背景画像が抽出される（ステップＳ１０４）。本実施形態では、ステップＳ１０３に示す処理で読取画像から文字画像が除去されることにより得られた背景パターン画像が抽出される。背景パターン画像は、文字画像が除去された領域である無地領域と、背景パターンに対応するパターン領域とを有している。ここで、パターン領域とは、原稿の読取画像において背景パターンが視覚的に認識される領域を意味する。
【００５１】
次に、背景画像が復元される（ステップＳ１０５）。本実施形態では、ステップＳ１０４に示す処理で抽出された背景パターン画像の全領域が、一様な塗りつぶし画像またはパターン画像によって置き換えられることにより、背景パターン画像が復元される。その結果、文字画像が除去された領域である無地領域を有する背景パターン画像が、無地領域を有さない画像に復元される。ステップＳ１０５に示される背景画像復元処理の詳細については後述する。
【００５２】
次に、文字画像と背景画像とが合成される（ステップＳ１０６）。本実施形態では、ステップＳ１０３に示す処理で読取画像から除去された文字画像と、ステップＳ１０５に示す処理で復元された背景画像とが合成され、たとえば、ＰＤＦファイルが作成される。このとき、合成される文字画像と背景画像とは、互いに異なる圧縮方式によってそれぞれ圧縮されることができる。
【００５３】
以上のとおり、図５に示されるフローチャートの処理によれば、まず、原稿の読取画像から文字画像および背景画像が分離抽出される。次に、文字画像が除去された領域である無地領域を有する背景パターン画像が、無地領域を有さない画像に復元される。そして、適切な画像処理がそれぞれ施された文字画像と背景画像とが合成され、たとえば、ユーザにより文字画像の編集が可能な文書ファイルが作成される。
【００５４】
図７は、図５のステップＳ１０５に示される背景画像復元処理を説明するためのフローチャートである。上述したとおり、図５のステップＳ１０５に示される背景画像復元処理では、文字画像が除去された領域である無地領域を有する背景パターン画像が、無地領域を有さない画像に復元される。
【００５５】
図７に示されるとおり、本実施形態の背景画像復元処理では、まず、背景画像の復元方式についてのパラメータが取得される（ステップＳ２０１）。本実施形態では、背景画像復元設定画面１００を通じてユーザにより選択された復元方式選択部１１０の選択パラメータが取得される。上述したとおり、本実施形態では、「パターン・色復元」、「平均色復元」、および「別パターン・別色復元」の３つの復元方式の中から、ユーザにより選択された１つの復元方式についてのパラメータが取得される。
【００５６】
次に、復元方式が「パターン・色復元」であるか否かが判断される（ステップＳ２０２）。本実施形態では、ステップＳ２０１に示す処理で取得された復元方式についてのパラメータが、「パターン・色復元」による背景画像復元処理を指示するものであるか否かが判断される。
【００５７】
復元方式が「パターン・色復元」であると判断される場合（ステップＳ２０２：ＹＥＳ）、パターン・色復元処理が実行される（ステップＳ２０３）。本実施形態では、無地領域を有する背景パターン画像が、無地領域を有さない同一または類似のパターン画像に復元される。ステップＳ２０３に示すパターン・色復元処理についての詳細な説明は後述する。
【００５８】
一方、復元方式が「パターン・色復元」でないと判断される場合（ステップＳ２０２：ＮＯ）、復元方式が「平均色復元」であるか否かが判断される（ステップＳ２０４）。本実施形態では、ステップＳ２０１に示す処理で取得された復元方式についてのパラメータが、「平均色復元」による背景画像復元処理を指示するものであるか否かが判断される。
【００５９】
復元方式が「平均色復元」であると判断される場合（ステップＳ２０４：ＹＥＳ）、平均色復元処理が実行される（ステップＳ２０５）。本実施形態では、無地領域を有する背景パターン画像が、無地領域を有さない同一または類似の色の塗りつぶし画像に復元される。ステップＳ２０５に示す平均色復元処理についての詳細な説明は後述する。
【００６０】
一方、復元方式が「平均色復元」でないと判断される場合（ステップＳ２０４：ＮＯ）、別パターン・別色復元処理が実行される（ステップＳ２０６）。本実施形態では、無地領域を有する背景パターン画像が、無地領域を有さない別色のパターン画像に復元される。ステップＳ２０６に示す別パターン・別色復元処理についての詳細な説明は後述する。
【００６１】
以上のとおり、図７に示されるフローチャートの処理によれば、ユーザにより選択される背景画像の復元方式にしたがって、文字画像が除去された領域である無地領域を有する背景パターン画像が、無地領域を有さない画像に復元される。
【００６２】
図８は、図７のステップＳ２０３に示されるパターン・色復元処理を説明するためのフローチャートである。
【００６３】
図８に示されるとおり、本実施形態のパターン・色復元処理では、まず、背景画像のＲＧＢデータヒストグラムが作成される（ステップＳ３０１）。本実施形態では、図５のステップＳ１０４に示す処理で抽出された背景パターン画像の画像データから、ＲＧＢデータヒストグラムが作成され、背景パターン画像の代表色が求められる。
【００６４】
図９は、ＲＧＢデータヒストグラムの一例を示す図である。図９の横軸はデータ値であり、縦軸は画素数である。本実施形態では、無色の画素を除く背景パターン画像の画像データを用いて作成されるＲＧＢデータヒストグラムから、たとえば、Ｒ＝４２、Ｇ＝１１７、およびＢ＝２１３の代表色が求められる。
【００６５】
次に、背景パターン画像のパターン形状が検出される（ステップＳ３０２）。本実施形態では、まず、背景パターン画像の画像データが周波数解析される。そして、ステップＳ３０１に示す処理で求められた代表色の周波数成分から、背景パターン画像のパターン領域におけるパターンの線数および角度が算出されることにより、パターン形状が検出される。なお、画像データを周波数解析してパターン形状を検出する処理自体は、一般的な画像処理技術であるため、詳細な説明は省略する。
【００６６】
次に、背景画像が復元される（ステップＳ３０３）。本実施形態では、ステップＳ３０１に示す処理で求められた代表色とステップＳ３０２に示す処理で検出されたパターン形状とが組み合わされて生成されるパターン画像によって、無地領域を有する背景パターン画像の全領域が置き換えられる。その結果、文字画像が除去された領域である無地領域を有する背景パターン画像が、無地領域を有さない同一または類似のパターン画像に復元される。
【００６７】
図１０および図１１は、パターン・色復元処理による背景画像復元効果を説明するための図である。図１０は、図６に示される読取画像から文字画像を分離した後に背景パターン画像を復元して得られる画像の一例を示す図であり、図１１は、比較例として、背景パターン画像の無地領域を周辺画素平均値で補完した場合に得られる画像の一例を示す図である。
【００６８】
図１１に示されるとおり、図６に示される読取画像２００から文字画像２２０が除去されて得られる背景パターン画像の無地領域を周辺画素平均値で補完する場合、無地領域が適切に補完されず、背景パターン画像２１５上に無地領域の痕跡が残存する。このような痕跡は、画像処理後の背景パターン画像と文字画像とを合成する処理において、読取画像の見栄えを低下させてしまうおそれがある。特に、ファイル化された読取画像上の文字画像が削除または移動される場合、読取画像の見栄えを顕著に低下させる。
【００６９】
一方、図１０に示されるとおり、本実施形態のパターン・色復元処理では、無地領域を有する背景パターン画像の全領域が、代表色のパターン画像によって置き換えられるため、無地領域を有する背景パターン画像が、無地領域を有さない同一または類似のパターン画像２１１に復元される。より具体的には、無地領域を有する背景パターン画像が、当該背景パターン画像と同一または類似の色かつ同一または類似のパターン形状を有するパターン画像２１１に復元される。したがって、読取画像から文字画像が分離された場合であっても、背景パターン画像に白抜き部分が残存することが防止され、読取画像の見栄えが良好に維持される。
【００７０】
なお、上述した実施形態では、パターンの線数および角度を算出することにより、背景パターン画像のパターンが検出された。しかしながら、たとえば、図１２に示されるとおり、複数種類のパターン２１０ａ，２１０ｂ，２１０ｃに関するデータをハードディスク２４などの記憶部に予め記憶しておき、パターンマッチング技術を用いて、類似のパターンが検出されてもよい。
【００７１】
次に、図１３を参照して、図７のステップＳ２０５に示される平均色復元処理について説明する。図１３は、図７のステップＳ２０５に示す平均色復元処理を説明するためのフローチャートである。
【００７２】
図１３に示されるとおり、本実施形態の平均色復元処理では、まず、背景画像における色の平均値が算出される（ステップＳ４０１）。本実施形態では、図５のステップＳ１０４に示す処理で抽出された背景パターン画像の全領域の画像データから、ＲＧＢ平均値が算出される。なお、本実施形態とは異なり、無色の画素を除く背景パターン画像の画像データから、ＲＧＢ平均値が算出されてもよい。
【００７３】
次に、背景画像が復元される（ステップＳ４０２）。本実施形態では、ステップＳ４０１に示す処理で算出されたＲＧＢ平均値から得られる平均色の塗りつぶし画像によって、無地領域を有する背景パターン画像の全領域が置き換えられる。その結果、無地領域を有する背景パターン画像が、無地領域を有さない同一または類似の色の塗りつぶし画像に復元される。
【００７４】
図１４は、平均色復元処理によって復元された画像の一例を示す図である。図１４に示されるとおり、本実施形態の平均色復元処理では、無地領域を有する背景パターン画像の全領域が、平均色の塗りつぶし画像によって置き換えられため、無地領域を有する背景パターン画像が、無地領域を有さない塗りつぶし画像２１２に復元される。より具体的には、無地領域を有する背景パターン画像が、当該背景パターン画像と同一または類似の色を有する塗りつぶし画像２１２に復元される。
【００７５】
次に、図１５を参照して、図７のステップＳ２０６に示される別パターン・別色復元処理について説明する。図１５は、図７のステップＳ２０６に示される別パターン・別色復元処理を説明するためのフローチャートである。
【００７６】
図１５に示されるとおり、本実施形態の別パターン・別色復元処理では、まず、復元後の画像のパターンおよび色についてのパラメータが取得される（ステップＳ５０１）。本実施形態では、復元方式選択部１１０の背景画像表示部１２０に示される背景画像に対して、パターン選択部１３０および色選択部１４０においてユーザにより選択された変更後のパターンおよび色に関するパラメータが取得される。
【００７７】
次に、パターンデータおよび色データが取り込まれる（ステップＳ５０２）。本実施形態では、ステップＳ５０１に示す処理で取得されたパラメータに対応するパターンデータおよび色データが取り込まれる。
【００７８】
次に、背景画像が復元される（ステップＳ５０３）。本実施形態では、ステップＳ５０２に示す処理で取り込まれたパターンデータおよび色データから生成される画像によって、無地領域を有する背景パターン画像の全領域が置き換えられる。その結果、無地領域を有する背景パターン画像が、無地領域を有さない別色かつ別パターンの画像に復元される。
【００７９】
図１６は、別パターン・別色復元処理によって復元された画像の一例を示す図である。図１６に示されるとおり、本実施形態の別パターン・別色復元処理では、無地領域を有する背景パターン画像の全領域が、ユーザにより選択されたパターンおよび色の画像によって置き換えられるため、無地領域を有する背景パターン画像が、無地領域を有さない別色かつ別パターンの画像２１３に復元される。より具体的には、無地領域を有する背景パターン画像が、当該背景パターン画像と異なる色かつ異なるパターン形状を有するパターン画像２１３に復元される。なお、本実施形態とは異なり、背景パターン画像は、ユーザにより選択された色の塗りつぶし画像に復元されてもよい。
【００８０】
以上のとおり、本実施形態によれば、無地領域を有する背景パターン画像の全領域が、塗りつぶし画像またはパターン画像によって置き換えられる。したがって、文字画像が除去された領域である無地領域を有する背景パターン画像が、無地領域を有さない画像に復元される。その結果、読取画像から背景パターン上の画像が分離された場合であっても、背景画像に白抜き部分が残存することが防止され、読取画像の見栄えを良好に維持することができる。
【００８１】
また、本実施形態によれば、背景パターン画像の色情報を残しつつ、画像が復元されるため、画像の視覚的な印象を変えることなく、読取画像の見栄えを良好に維持することができる。
【００８２】
本発明は、上記した実施形態のみに限定されるものではなく、特許請求の範囲内において、種々改変することができる。
【００８３】
たとえば、上記実施形態では、背景パターン上の文字画像が抽出され、読取画像から分離された。しかしながら、抽出される画像は、文字画像に限定されるものではなく、たとえば、背景パターン上に存在する図形画像または写真画像であってもよい。
【００８４】
また、上記実施形態では、画像処理装置として、ＭＦＰを用いる場合を例に挙げて説明した。しかしながら、画像処理装置は、ＭＦＰに限定されるものではなく、プリンタコントローラやクライアントＰＣにおいて画像処理が実行されてもよい。
【００８５】
本実施形態にかかる画像処理装置における各種処理を行う手段および方法は、専用のハードウエア回路、またはプログラムされたコンピュータのいずれによっても実現することが可能である。上記プログラムは、たとえば、フレキシブルディスクおよびＣＤ−ＲＯＭ等のコンピュータ読み取り可能な記録媒体によって提供されてもよいし、インターネット等のネットワークを介してオンラインで提供されてもよい。この場合、コンピュータ読み取り可能な記録媒体に記録されたプログラムは、通常、ハードディスク等の記憶部に転送され記憶される。また、上記プログラムは、単独のアプリケーションソフトとして提供されてもよいし、装置の一機能としてその装置のソフトウエアに組み込まれてもよい。
【符号の説明】
【００８６】
１  クライアントＰＣ、
１１，２１  ＣＰＵ、
１２，２２  ＲＯＭ、
１３，２３  ＲＡＭ、
１４，２４  ハードディスク、
１５  ディスプレイ、
１６  入力装置、
１７，２８  通信インタフェース、
１８，２９  バス、
２  ＭＦＰ、
２５  操作パネル、
２６  画像読取部、
２７  印刷部、
３  ネットワーク、
１００  背景画像復元設定画面、
２００  読取画像、
２１０  背景パターン、
２１１，２１２，２１３  復元された画像、
２２０  文字画像。
【図１】
2010251867.tif 000003
【図２】
2010251867.tif 000004
【図３】
2010251867.tif 000005
【図５】
2010251867.tif 000006
【図７】
2010251867.tif 000007
【図８】
2010251867.tif 000008
【図９】
2010251867.tif 000009
【図１３】
2010251867.tif 000010
【図１５】
2010251867.tif 000011
【図４】
2010251867.tif 000012
【図６】
2010251867.tif 000013
【図１０】
2010251867.tif 000014
【図１１】
2010251867.tif 000015
【図１２】
2010251867.tif 000016
【図１４】
2010251867.tif 000017
【図１６】
2010251867.tif 000018