(57)【要約】【課題】複数世代のコピー原稿であっても高精度な像域識別結果を得ることができ、また、高機能な電子ファイルを得ることができる技術を提供する。【解決手段】文書画像を入力して画像データである入力文書画像を生成する文書画像入力手段と、文書画像のそれぞれの像域について作成された像域情報を入力する像域情報入力手段と、像域情報を埋め込んだ透かし画像を形成する透かし画像形成手段と、入力文書画像と透かし画像とを合成し透かし入り文書画像を形成する透かし入り文書画像合成手段とを有する画像形成装置である。【選択図】図１
2010011455.tif 000002
【特許請求の範囲】
【請求項１】
文書画像を入力して画像データである入力文書画像を生成する文書画像入力手段と、
前記文書画像のそれぞれの像域について作成された像域情報を入力する像域情報入力手段と、
前記像域情報を埋め込んだ透かし画像を形成する透かし画像形成手段と、
前記入力文書画像と前記透かし画像とを合成し透かし入り文書画像を形成する透かし入り文書画像合成手段
とを有することを特徴とする画像形成装置。
【請求項２】
文書データを入力する文書データ入力手段と、
前記文書データから画像データである文書画像を形成する文書画像形成手段と、
前記文書データ中のそれぞれの像域について作成された像域情報を入力する像域情報入力手段と、
前記像域情報を埋め込んだ透かし画像を形成する透かし画像形成手段と、
前記文書画像と前記透かし画像とを合成し透かし入り文書画像を形成する透かし入り文書画像合成手段
とを有することを特徴とする画像形成装置。
【請求項３】
文書画像を入力して画像データである入力文書画像を生成する文書画像入力手段と、
前記入力文書画像中のそれぞれの像域を識別して像域情報を生成する像域識別手段と、
前記像域情報を埋め込んだ透かし画像を形成する透かし画像形成手段と、
前記入力文書画像と前記透かし画像とを合成し透かし入り文書画像を形成する透かし入り文書画像合成手段
とを有することを特徴とする画像形成装置。
【請求項４】
文書データを入力する文書データ入力手段と、
前記文書データから画像データである文書画像を形成する文書画像形成手段と、
前記文書データ中のそれぞれの像域について像域情報を抽出する像域情報抽出手段と、  
前記像域情報を埋め込んだ透かし画像を形成する透かし画像形成手段と、
前記文書画像と前記透かし画像とを合成し透かし入り文書画像を形成する透かし入り文書画像合成手段
とを有することを特徴とする画像形成装置。
【請求項５】
文書画像を入力して画像データである入力文書画像を生成する文書画像入力手段と、
前記入力文書画像中のそれぞれの像域を識別して像域情報を生成する像域識別手段と、
前記像域情報を所定の規則に従って編集する像域情報編集手段と、
前記編集された像域情報を埋め込んだ透かし画像を形成する透かし画像形成手段と、
前記入力文書画像と前記透かし画像とを合成し透かし入り文書画像を形成する透かし入り文書画像合成手段
とを有することを特徴とする画像形成装置。
【請求項６】
文書データを入力する文書データ入力手段と、
前記文書データから画像データである文書画像を形成する文書画像形成手段と、
前記文書データ中のそれぞれの像域について像域情報を抽出する像域情報抽出手段と、
抽出した像域情報を所定の規則に従って編集する像域情報編集手段と、
前記編集された像域情報を埋め込んだ透かし画像を形成する透かし画像形成手段と、
前記文書画像と前記透かし画像とを合成し透かし入り文書画像を形成する透かし入り文書画像合成手段
とを有することを特徴とする画像形成装置。
【請求項７】
前記像域情報編集手段は、新たな像域情報を加えることを特徴とする請求項５または６に記載の画像形成装置。
【請求項８】
前記像域情報編集手段は、少なくとも一つの像域情報を除去することを特徴とする請求項５または６に記載の画像形成装置。
【請求項９】
前記像域情報編集手段は、少なくとも一つの像域情報を新たな像域情報に置換することを特徴とする請求項５または６に記載の画像形成装置。
【請求項１０】
前記像域情報編集手段は、像域情報に優先順位付けすることを特徴とする請求項５または６に記載の画像形成装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数世代のコピー原稿であっても高精度な像域識別結果を得ることができ、また、高機能な電子ファイルを得ることができる技術に関する。
【背景技術】
【０００２】
従来プリンタ、ＭＦＰ或いは画像形成装置（以下複写機と略称する。）等では、原稿を走査して読み取った原画像データを画像に再生する際、画像のタイプを識別する像域識別を実施する。そして、その像域識別結果に基づいて各種画像のタイプに適した画像処理（原画像データのフィルタ処理等）を実行した後、プリント装置に出力している。
【０００３】
ここで、原稿画像の各領域における画像のタイプを決定する理由は、例えば同じ原稿上にあっても、文字領域と図形領域とでは夫々異なるフィルタ処理を施す必要があるためである。原稿画像を複数の領域に分離して領域毎に画像のタイプを識別する方法としては特許文献１に開示された技術が知られている。
【０００４】
一方、電子メールやＷｅｂサービス等のネットワークの普及に伴い、電子ファイルをネットワークを介して送信・配布する頻度が増加している。この際、電子ファイルをワープロソフトやプレゼンテーションソフトの出力ファイル形式で配布すると容易に改竄されてしまう。このような改竄を防ぐ簡易的な方法として、一旦プリントアウトした画像をスキャン入力し、ＪＰＥＧ／ＴＩＦＦ／ＰＤＦなどの画像ファイルに変換して配布することが行われている。しかし、画像ファイルのままでは検索等の再利用が困難、ファイル容量が大きい等の短所がある。
【０００５】
そこで、検索などの再利用を図るために、例えば特許文献１で提案されている画像識別処理を用いて入力画像から文字領域を抽出し、抽出された文字領域にＯＣＲ処理をすることでキーワード検索が可能なファイルを作成することができる。  
また、ファイル容量を小さくするために、入力画像を文字領域及び自然画像領域に領域分割し、文字領域、自然画像領域それぞれに適した手法で画像データを圧縮することで高圧縮・高画質な画像再現を実現する方法も提案されている（例えば、特許文献２参照）。
【発明の概要】
【発明が解決しようとする課題】
【０００６】
このように画像識別処理を用いて入力画像を文字像域および自然画像像域に領域分割を行うことで、検索等の再利用、ファイル容量の高圧縮などを実現することが可能となる。しかし、一般に完璧な識別技術というものは存在せず、常に誤識別が発生する可能性がある。
【０００７】
特に複写機で何世代もコピーを繰り返したコピー原稿は、オリジナル原稿と比べて画質が劣化することは良く知られている。そのため、このようなコピー原稿を読取った世代コピー画像に対する像域識別結果はオリジナル原稿に対する像域識別結果と比較して識別精度が低くなっている。
【０００８】
このことは、複写機によるコピー原稿に限らずプリンタによる出力原稿においても同様である。即ち、プリントアウトされた画像をスキャン入力し、高機能な電子ファイルを作成する際、その画像識別処理で誤識別が生じる可能性がある。
【０００９】
本発明は斯かる事情に鑑みてなされたものであって、複数世代のコピー原稿であっても高精度な像域識別結果を得ることができ、また、高機能な電子ファイルを得ることができる技術を提供することを目的とする。
【課題を解決するための手段】
【００１０】
上記課題を解決するための本発明は、文書画像を入力して画像データである入力文書画像を生成する文書画像入力手段と、前記文書画像のそれぞれの像域について作成された像域情報を入力する像域情報入力手段と、前記像域情報を埋め込んだ透かし画像を形成する透かし画像形成手段と、前記入力文書画像と前記透かし画像とを合成し透かし入り文書画像を形成する透かし入り文書画像合成手段とを有する画像形成装置である。
【００１１】
また本発明は、文書データを入力する文書データ入力手段と、前記文書データから画像データである文書画像を形成する文書画像形成手段と、前記文書データ中のそれぞれの像域について作成された像域情報を入力する像域情報入力手段と、前記像域情報を埋め込んだ透かし画像を形成する透かし画像形成手段と、前記文書画像と前記透かし画像とを合成し透かし入り文書画像を形成する透かし入り文書画像合成手段とを有する画像形成装置である。
【発明の効果】
【００１２】
本発明によれば、複数世代のコピー原稿であっても高精度な像域識別結果を得ることができ、また、高機能な電子ファイルを得ることができる。
【図面の簡単な説明】
【００１３】
【図１】第１の実施の形態の画像形成装置の構成を示すブロック図。
【図２】第１の実施の形態の画像形成装置の概略の動作を示すフローチャート。
【図３】入力される文書画像及び像域情報の内容を示す図。
【図４】従来の画像形成方法を説明する図。
【図５】第１の実施の形態の画像形成装置に対応する画像処理装置の構成を示すブロック図。
【図６】画像処理手段により施される画像処理の例を示す図。
【図７】第１の実施の形態の画像形成装置に対応する画像処理装置の他の構成を示すブロック図。
【図８】第２の実施の形態の画像形成装置の構成を示すブロック図。
【図９】第２の実施の形態の画像形成装置の概略の動作を示すフローチャート。
【図１０】文書画像形成手段がＲＩＰである場合の入力される文書データと出力する文書画像データを示す図。
【図１１】第３の実施の形態の画像形成装置の構成を示すブロック図。
【図１２】第３の実施の形態の画像識別手段により得られる像域情報を示す図。
【図１３】第４の実施の形態の画像形成装置の構成を示すブロック図。
【図１４】像域情報抽出手段がＲＩＰ内で実装される場合の具体的な抽出方法と抽出情報の例を示す図。
【図１５】第５の実施の形態の画像形成装置の構成を示すブロック図。
【図１６】像域情報編集手段の機能を説明する図。
【図１７】像域情報の編集の一例を示す図。
【図１８】第６の実施の形態の画像形成装置の構成を示すブロック図。
【図１９】像域情報編集手段の機能を説明する図。
【図２０】第７の実施の形態の画像形成装置の構成を示すブロック図。
【図２１】像域情報編集手段の機能を説明する図。
【図２２】第１の実施の形態の画像処理装置の構成を示すブロック図。
【図２３】第１の実施の形態の画像処理装置の概略の動作を示すフローチャート。
【図２４】画像形成装置の構成を示すブロック図。
【図２５】入力される文書画像及び像域情報の内容を示す図。
【図２６】従来の技術を用いた画像形成方法を説明する図。
【図２７】入力された文書画像に埋め込まれた透かし画像から抽出した像域情報を示す図。
【図２８】画像識別手段により得られた像域情報を示す図。
【図２９】高画質な世代コピーを得る装置の構成と動作を説明する図。
【図３０】画像処理手段により施される画像処理例を示す図。
【図３１】高圧縮な電子ファイルを得る装置の構成と動作を説明する図。
【図３２】第２の実施の形態の画像処理装置の構成を示すブロック図。
【図３３】第２の実施の形態の画像処理装置をＯＣＲ前処理として使用する際の像域情報合成手段の動作例を示す図。
【図３４】第２の実施の形態の画像処理装置を高圧縮ファイル作成のために使用する際の像域情報合成手段の動作例を示す図。
【図３５】第２の実施の形態の画像処理装置をコピア用識別信号生成に使用する際の像域情報合成手段の動作例を示す図。
【図３６】第３の実施の形態の画像処理装置の構成を示すブロック図。
【図３７】第３の実施の形態の画像処理装置により得られる像域情報の例を示す図。
【図３８】第４の実施の形態の画像処理装置の構成を示すブロック図。
【図３９】第４の実施の形態の画像処理装置により得られる像域情報の例を示す図。
【発明を実施するための形態】
【００１４】
[第１の実施の形態]    
図１は、第１の実施の形態の画像形成装置の構成を示すブロック図である。図２は、第１の実施の形態の画像形成装置の概略の動作を示すフローチャートである。  
以下、図１及び図２を参照しつつ画像形成装置の構成と動作を説明する。
【００１５】
画像形成装置は、文書画像入力手段１０１、像域情報入力手段１０２、透かし画像形成手段１０３、透かし文書合成手段１０４を備えている。
【００１６】
動作２０１において、文書画像入力手段１０１は、文書画像を入力する。ここで文書画像入力手段１０１は、例えば、ＭＦＰや複写機に搭載されているスキャナであり、入力される文書画像は紙原稿である。動作２０２において、像域情報入力手段１０２は入力される文書画像を元に予め作成されている像域情報を入力する。
【００１７】
図３は、入力される文書画像及び像域情報の内容を示す図である。図３（１）の文書画像３０１は、タイトル３０２，本文３０３及び自然画像３０４の像域を含んでいる。この文書画像３０１から像域情報を抽出するために、例えば、図３（２）の文書画像３０５に示したように、ユーザが画面を見ながらマウス等で各像域（３０６，３０７，３０８）を矩形で囲み、キーボード等から各属性を指定する。
【００１８】
このようにユーザに指定された各像域の矩形座標位置と属性とから、図３（３）に示す像域情報３０９が作成され、像域情報入力手段１０２に入力される。像域情報としては、属性（タイトル／本文／自然画像）とその座標位置（３１０、３１１、３１２）である。  
なお、本実施の形態では像域情報として座標位置と、タイトル／本文／自然画像の属性を入力しているが、例えば文字属性の像域であれば文字色や文字コード、自然画像であれば風景画像／人物画像などの情報も像域情報として入力することが可能である。
【００１９】
動作２０３において、透かし画像形成手段１０３は、像域情報入力手段１０２により抽出された像域情報を埋め込んだ透かし画像を形成する。更に、動作２０４において、透かし文書合成手段１０４は、文書画像入力手段１０１から出力された文書画像と、透かし画像形成手段１０３から出力された透かし画像を合成し、透かし情報が埋め込まれた画像を形成する。
【００２０】
透かし画像の形成及び透かし情報が埋め込まれた画像の形成に関しては、既に様々な手法が開示されている。例えば特開２００３−１０１７６２号公報に記載の技術では、文書の背景に所定の方法で黒画素を埋め込むことで文書に情報を埋め込む。
【００２１】
図４は、特開２００３−１０１７６２号公報に記載の技術を用いた画像形成方法を説明する図である。  
文書画像入力手段１０１から文書画像４０１を出力し、像域情報入力手段１０２から出力された像域情報を透かし画像形成手段１０３により透かし画像４０２に変換し、文書画像４０１と透かし画像４０２を透かし文書合成手段１０４により合成して透かし情報が埋め込まれた文書４０３を得る。
【００２２】
次に、第１の実施の形態の画像形成装置を用いて得られた透かし情報が埋め込まれた文書から、高画質な世代コピーを得る方法を説明する。  
図５は、第１の実施の形態の画像形成装置に対応する画像処理装置の構成を示すブロック図である。
【００２３】
文書画像入力手段５０１は、紙に出力された上述の像域情報が透かし画像として埋め込まれた文書画像を入力する。ここで文書画像入力手段５０１は、ＭＦＰや複写機のスキャナ等である。次に透かし情報抽出手段５０２は、埋め込まれた像域情報を抽出する。ここで用いられる透かし情報を抽出する技術は、例えば上述の特開２００３−１０１７６２号公報に記載の技術を用いることができる。  
続いて画像処理手段５０３は、文書画像入力手段５０１から出力された文書画像に対して、抽出された像域情報を用いて像域ごとに適した画像処理を施す。
【００２４】
図６は、画像処理手段５０３により施される画像処理の例を示す図である。画像処理の例としては、フィルタ処理や階調処理がある。例えば、自然画像に対しては画像出力時の網点との干渉によるモアレを防ぐために入力画像の網点を潰すためのぼかしフィルタ処理を施し、文字画像に対しては文字のエッジを強調するためにエッジ強調フィルタを施す。また、階調処理においても、自然画像は解像性よりも階調性を重視するため低線数の階調処理を施し、文字画像は解像性を重視するために高線数の階調処理を施す。
【００２５】
最後に画像出力手段５０４は、画像処理された画像を出力する。画像を出力する手段としては、ＭＦＰや複写機のプリント部がある。
【００２６】
以上述べた通り、劣化しているコピー画像を対象として像域識別するのではなく、透かしとして埋め込まれた情報から像域情報を得ることで、正確な像域識別結果を使用することが出来る。また、透かしから得られた像域情報を図１に示す像域情報入力手段１０２に入力し直すことで、何世代コピーしても高精度な像域識別結果を得ることが可能となる。
【００２７】
図７は、第１の実施の形態の画像形成装置に対応する画像処理装置の他の構成を示すブロック図である。この画像処理装置では、透かし情報が埋め込まれた文書から、高圧縮な電子ファイルを得る。
【００２８】
文書画像入力手段７０１は、紙に出力された上述の像域情報が透かし画像として埋め込まれた文書画像を入力する。次に透かし情報抽出手段７０２は、埋め込まれた像域情報を抽出する。続いて画像分割手段７０３は、抽出された像域情報を用いて文書画像入力手段７０１から出力された文書画像を文字画像と自然画像に分割する。
【００２９】
分割された文字画像と自然画像をそれぞれに適した方法で画像圧縮することにより、高画質・高圧縮を実現する。例えば、文字画像を圧縮するための第１の圧縮手段７０４としては、２値画像しか扱えないが劣化しない（可逆である）ＭＭＲ圧縮を用いる。また、自然画像を圧縮するための第２の圧縮手段７０５としては、画像の高周波成分は失われるが、階調性のある画像に適したＪＰＥＧ圧縮を用いる。最後に画像結合手段７０６は、圧縮された文字画像と圧縮された自然画像を結合する。
【００３０】
以上述べたように劣化しているコピー画像を像域識別せずに、埋め込まれた像域情報を用いて画像処理することで高画質で高圧縮な画像ファイルを得ることが可能となる。
【００３１】
[第２の実施の形態]    
図８は、第２の実施の形態の画像形成装置の構成を示すブロック図である。図９は、第２の実施の形態の画像形成装置の概略の動作を示すフローチャートである。  
以下、図８及び図９を参照しつつ画像形成装置の構成と動作を説明する。
【００３２】
画像形成装置は、文書データ入力手段８０１、文書画像形成手段８０２、像域情報入力手段８０３、透かし画像形成手段８０４、透かし文書合成手段８０５を備えている。
【００３３】
動作９０１において、文書データ入力手段９０１は、文書データを入力する。ここで入力される文書データはＰＣ上のアプリケーションファイル、アプリケーションより出力されるＧＤＩ、プリンタドライバから出力されるＰＤＬ（ページ記述言語）などである。
【００３４】
動作９０２において、文書画像形成手段８０２は、入力された文書データからＧＤＩ・ＰＤＬ・ラスタデータ等の画像データを形成する。文書画像形成手段８０２はＰＣ上のアプリケーションやプリンタドライバ、ＲＩＰ（ラスタイメージプロセッサ）などである。
【００３５】
図１０は、文書画像形成手段８０２がＲＩＰである場合の入力される文書データと出力する文書画像データを示す図である。入力される文書データは主にプリンタドライバが作成したＰＤＬであり、図１０（１）の文書データ１００１が具体例である。この文書データ１００１は、文字像域データ１００２，１００３と自然画像像域データ１００４とを含んでいる。
【００３６】
ＲＩＰである文書画像形成手段８０２は、文書画像データとしてラスタ画像を出力する。図１０（２）に示すラスタ画像１００５がその具体例である。ラスタ画像１００５中の文字画像データ１００６，１００７は、それぞれ入力ＰＤＬの文字像域データ１００２，  １００３から形成される文字の文書画像であり、ＰＤＬに記述されているフォント名・フォントサイズ・文字の表示位置・文字色・文字列サイズ・文字列データ（文字コード）などの情報に従いビットマップ画像を形成する。
【００３７】
また、ラスタ画像１００５中の自然画像データ１００８は入力ＰＤＬの自然画像データ１００４から形成される自然画像の文書画像であり、画象の大きさ・位置・色情報・ビット数・圧縮方式・画像データ（ビットマップデータ）などの情報に従いビットマップ画像を形成する。通常、このように形成されたラスタ画像はプリントエンジンを介して紙へと出力される。
【００３８】
図８に示す像域情報入力手段８０３、透かし画像形成手段８０４、透かし文書合成手段８０５は、図１に示す第１の実施の形態に対応する各手段と同様に処理する。すなわち、動作９０３において、像域情報入力手段８０３は、文書データを元にユーザによって作成された像域情報を入力し、動作９０４において、透かし画像形成手段８０４は、像域情報を埋め込んだ透かし画像を形成する。動作９０５において、透かし文書合成手段８０５は、透かし情報が埋め込まれた合成画像を形成する。
【００３９】
図５、図７で説明した画像処理装置を用いれば、本第２の実施の形態の画像形成装置でプリント出力した文書画像を何世代コピーしても高画質な画像及び高画質・高圧縮な電子ファイルを得ることが可能となる。
【００４０】
[第３の実施の形態]    
図１１は、第３の実施の形態の画像形成装置の構成を示すブロック図である。画像形成装置は、文書画像入力手段１１０１、画像識別手段１１０２、透かし画像形成手段１１０３、透かし文書合成手段１１０４を備えている。
【００４１】
第３の実施の形態は画像識別手段１１０２を有している点で第１の実施の形態と異なっている。即ち、第３の実施の形態では像域情報はユーザが作成するのではなく、入力される文書画像の像域を自動的に識別して像域情報を抽出する点で第１の実施の形態と異なっている。
【００４２】
図１２は、第３の実施の形態の画像識別手段１１０２により得られる像域情報を示す図である。図１２（１）は入力される文書画像１２０１を示している。図１２（２）は、画像識別手段１１０２により得られた像域情報１２０５である。文書画像１２０１から文字画像・自然画像等の像域を識別する手段には既に公知の技術があり、画像識別手段１１０２としては、例えば、特開２００５−３９４３０号公報に提案されている技術を用いることができる。
【００４３】
本第３の実施の形態では、画質が劣化していないオリジナル原稿（文書画像）に対して画像識別処理をした結果を用いて画像を合成している。そのため、常に高精度な像域識別結果を使用することが可能である。このことにより、何世代コピーしても高精度な像域識別結果を得ることが可能である。また、高画質・高圧縮な電子ファイルを得ることも可能となる。
【００４４】
[第４の実施の形態]    
図１３は、第４の実施の形態の画像形成装置の構成を示すブロック図である。  
画像形成装置は、文書データ入力手段１３０１、文書画像形成手段１３０２、像域情報抽出手段１３０３、透かし画像形成手段１３０４、透かし文書合成手段１３０５を備えている。
【００４５】
第４の実施の形態は像域情報抽出手段１３０３を有している点で第２の実施の形態と異なっている。即ち、第４の実施の形態では像域情報はユーザが作成するのではなく、入力される文書データの像域を自動的に識別して像域情報を抽出する点で第２の実施の形態と異なっている。
【００４６】
像域情報抽出手段１３０３は、入力される文書データから特定の像域情報を抽出する。像域情報抽出手段１３０３は、アプリケーション内やプリンタドライバ内、ＲＩＰ内で実現される。  
図１４は、像域情報抽出手段１３０３がＲＩＰ内で実装される場合の具体的な抽出方法と抽出情報の例を示す図である。図１４（１）は、入力される文書データ１４０１を示している。文書データ１４０１はＰＤＬである。文書データ１４０１には、文字列１４０２、文字列１４０３、文字列１４０４の３行の文字列と自然画像１４０５を含んでいる。
【００４７】
像域抽出手段１３０３は、ＰＤＬから像域の属性・座標・文字色などを抽出する。図１４（２）は抽出された像域情報１４０６を示している。  
具体的には、像域抽出手段１３０３は、文書データ１４０１中の文字列データ１４０２から、第１像域の像域情報１４０７を抽出すると共に、第１像域の属性を文字と特定している。また、像域抽出手段１３０３は、文字列データ１４０２の位置情報と文字列サイズ情報から、第１像域の左下座標（ｘ１，ｙ１）と右上座標（ｘ２，ｙ２）の組が（２０，  ７０）−（８０，９０）であることも特定している。更に像域抽出手段１３０３は、文字列データ１４０２中の文字色情報から第１像域の文字色も抽出する。
【００４８】
同様の処理を文字列１４０３、１４０４と自然画像１４０５に対しても繰り返すことで像域情報１４０６が生成される。  
尚、本実施の形態で抽出した像域情報は像域の属性・座標・文字色であるが、これに限定するものではなく、文書データに記述されている情報、および、その情報に処理を加えることで得られる情報であれば抽出可能である。
【００４９】
第４の実施の形態では、文書データを用いて正確な像域情報を抽出する。従って、画像識別処理を用いることによる誤識別を回避することができる。この結果、何世代コピーしても高精度な像域識別結果を得ることが可能である。また、高画質・高圧縮な電子ファイルを得ることも可能となる。
【００５０】
[第５の実施の形態]    
図１５は、第５の実施の形態の画像形成装置の構成を示すブロック図である。画像形成装置は、文書画像入力手段１５０１、画像識別手段１５０２、像域情報編集手段１５０３、透かし画像形成手段１５０４、透かし文書合成手段１５０５を備えている。
【００５１】
第５の実施の形態では、像域情報編集手段１５０３を有している点で、第３の実施の形態と異なっている。像域情報を組み込んで形成される画像から高機能な電子データを得る際、文字画像・写真画像の情報だけではなく更に詳細な情報が必要とされる場合がある。例えば、文字領域を識別すると共に、「タイトル」という属性まで識別できれば、タイトルの領域にＯＣＲ処理をし、その結果からファイル名を付けるといった高度な処理が可能となる。
【００５２】
しかし、このような詳細な情報を得ようとした場合、画像識別手段１５０２には非常に高度な技術が要求される。このため、詳細情報を出力できなかったり、あるいは、誤識別を発生させてしまう場合がある。  
また、透かし等を用いて埋め込める情報量には制限がある。そのため、優先順位を付けずに、例えば、像域情報抽出手段１３０３（図１３）により抽出された順番で情報を埋め込んでいくと、その文書を顕著に表す重要な像域情報を埋め込めない可能性がある。
【００５３】
図１６は、像域情報編集手段１５０３の機能を説明する図である。図１６（１）は、入力された文書画像１６０１である。図１６（２）は、画像識別手段１５０２により出力された像域情報１６０６を示している。図１６（３）は、ユーザにより必要な情報が付与されたり、あるいは別の情報に書き換えられたり、優先順位を付けられたりして編集された像域情報１６１８を示している。なお、本実施の形態では、像域情報１６０６は優先順位の高い順番に記述されるものとする。
【００５４】
画像識別手段１５０２により出力された像域情報１６０６は単純に文書を上→下、左→右の順番で走査した順に記述されている。まず、像域情報付与の例を説明する。一般に画像識別処理において像域が重なっている場合には誤識別を起こしやすい。そこで、文書画像１６０１にある自然画像１６０５の中の文字“ＭＦＰ”は誤識別による抽出漏れで抽出出来なかったとする。この場合、ユーザが像域情報１６１８を編集し、文字列“ＭＦＰ”を第５像域としてその属性情報１６２５と位置情報１６２６を付加する。
【００５５】
次に、像域情報削除の例を示す。本実施の形態の画像形成装置により形成した画像を再利用する際に、特に文字色の記述がない場合は黒文字であるという規則が既にある場合、“黒文字”という情報は不要である。そのため、像域情報１６０６の第１像域、第３像域の文字色情報（１６０９，１６１５）は像域情報１６１８から削除されている。
【００５６】
続いて情報書き換えの例を示す。像域情報１６０６においてはどのような文字像域もその属性は単なる“文字”としか抽出されていない。それに対し編集後の像域情報１６１８では“タイトル”、“本文”と更に詳細な分類（１６１９，１６２１，１６２３）がされている。
【００５７】
最後に優先順位の書き換えの例を示す。本実施の形態では、自然画像像域より文字画像像域を優先し、更に文字色情報の優先度を最も低くしている。その結果、像域情報１６１８では自然画像像域情報１６２７，１６２８の優先順位が低く、第２像域の文字色１６２９が最も優先順位が低くなっている。
【００５８】
像域情報編集手段１５０３は、予め決められた優先度の順に情報を選択し、透かし画像形成手段１５０４が、限界の情報量までの情報を埋め込んだ透かし画像を作成する。例えば、４個分の像域情報しか埋めこめられない場合には、第１像域の属性情報（１６１９）、位置情報（１６２０）、第２像域の属性情報（１６２１）、位置情報（１６２２）の４つの像域情報のみを埋め込んだ透かし画像を作成する。
【００５９】
なお、像域情報編集手段１５０３は、ユーザとの間で、例えば、コントロールパネルを介して情報授受を行って、像域情報を編集する。図１７は、像域情報の編集の一例を示す図である。ユーザが文書画像１７０１中の領域（１７０２、１７０３、１７０４）のいずれかを指定して、属性の編集を行うことを入力すると、プルダウンメニュー１７０５が表示される。そこで、ユーザはこのプルダウンメニューから、タイトル、本文、文字、自然画像などを選択するとその選択された情報が像域情報１６１８に反映される。
【００６０】
第５の実施の形態では、重要な像域情報の優先度を高くしているため精度の高い像域情報を使用することが可能となる。このことにより、何世代コピーしても高精度な像域識別結果を得ることが可能である。また、高画質・高圧縮な電子ファイルを得ることも可能となる。
【００６１】
[第６の実施の形態]    
図１８は、第６の実施の形態の画像形成装置の構成を示すブロック図である。  
画像形成装置は、文書データ入力手段１８０１、文書画像形成手段１８０２、像域情報抽出手段１８０３、像域情報編集手段１８０４、透かし画像形成手段１８０５、透かし文書合成手段１８０６を備えている。
【００６２】
第６の実施の形態は像域情報編集手段１８０４を有している点で第４の実施の形態と異なっている。
【００６３】
入力される文書データには画像を形成するためのデータのみを含んでいる場合が多い。そのため、後で高機能な電子データを得ようとしたときには別の情報が必要となる場合がある。  
また、透かし等を用いて像域情報を埋め込む際、埋め込める情報量には制限がある。そのため、優先順位を付けずに、例えば、像域情報抽出手段１８０３により抽出された順番に像域情報を埋め込んでいくと、その文書を顕著に表す重要な像域情報を埋め込めない可能性がある。
【００６４】
図１９は、像域情報編集手段１８０４の機能を説明する図である。図１９（１）は、入力された文書データ１９０１を示している。図１９（２）は、像域情報抽出手段１８０３により出力された像域情報１９０６を示している。図１９（３）は、ユーザにより必要な情報が付与されたり、あるいは別の情報に書き換えられたり、優先順位を付けられたりして編集された像域情報１９１８を示している。なお、本実施の形態では、像域情報１９０６は優先順位の高い順番に記述されるものとする。
【００６５】
第６の実施の形態の像域情報編集手段１８０４は、第５の実施の形態の像域情報編集手段１５０３と同様に動作する。従って、その詳細の説明は省略する。  
第６の実施の形態では、重要な像域情報の優先度を高くしているため精度の高い像域情報を使用することが可能となる。このことにより、何世代コピーしても高精度な像域識別結果を得ることが可能である。また、高画質・高圧縮な電子ファイルを得ることも可能となる。
【００６６】
[第７の実施の形態]    
図２０は、第７の実施の形態の画像形成装置の構成を示すブロック図である。  
画像形成装置は、文書データ入力手段２００１、文書画像形成手段２００２、像域情報抽出手段２００３、像域情報編集手段２００４、透かし画像形成手段２００５、透かし文書合成手段２００６を備えている。
【００６７】
第７の実施の形態と第６の実施の形態とでは像域情報編集手段２００４（１８０４）の機能が異なっている。第６の実施の形態の像域情報編集手段１８０４は、ユーザが直接指定した優先順位に基づいて編集するのに対し、第７の実施の形態の像域情報編集手段２００４は、事前に決めた規則に則って自動的に指定される優先順位に基づいて編集する。
【００６８】
図２１は、像域情報編集手段２００４の機能を説明する図である。図２１（１）は、入力された文書データ２１０１である。図２１（２）は、像域情報抽出手段２００３により出力された像域情報２１０６を示している。図２１（３）は、事前に決めた規則に則って自動的に指定される優先順位に基づいて編集された像域情報２１１８を示している。
【００６９】
続いて、像域情報編集手段２００４の動作について説明する。  
像域情報編集手段２００４は予め決められた規則に則って、例えば、像域識別する際に誤識別が起こりやすい順に、像域情報の優先順位をつける。  
一般的に複数のオブジェクトに重なりがある場合、像域識別は非常に難しい。図２１（１）の文書データ２１０１の例では、像域２１０２と像域２１０５との像域識別は難しい。そこで、重なりのある像域情報の優先順位を高くする。
【００７０】
図２１（２）の像域情報２１０６によれば、それぞれの像域の左下座標（ｘ１，ｙ１）及び右上座標（ｘ２，ｙ２）の座標値は判明している。そこで、領域Ａ及び領域Ｂの座標を調べて下記条件が成立する場合、領域Ａ及び領域Ｂには重なり有りと判断し、優先順位を高くする。
【００７１】
条件：  （ｙＡ１＜ｙＢ１＜ｙＡ２  または  ｙＡ１＜ｙＢ２＜ｙＡ２）  かつ  
（ｘＡ１＜ｘＢ１＜ｘＡ２  または  ｘＡ１＜ｘＢ２＜ｘＡ２）  
但し、領域Ａの左下座標−右上座標の組を（ｘＡ１，ｙＡ１）−（ｘＡ２，ｙＡ２）、
領域Ｂの左下座標−右上座標の組を（ｘＢ１，ｙＢ１）−（ｘＢ２，ｙＢ２）とする。
【００７２】
また、フォントサイズが小さな文字領域も像域識別が難しい。そこで、像域情報としてフォントサイズが抽出されている場合には、そのフォントサイズがある閾値より小さい場合に優先順位を上げる。図２１（２）の像域情報２１０６に示したように、像域情報にフォントサイズが直接記述されていない場合でも、例えば、像域属性が文字であって、その像域の幅・高さいずれかが閾値より小さい場合、即ち像域座標の関係が下式に当てはまる場合は、小文字領域と判断し優先順位を上げる。
【００７３】
ｘ２−ｘ１  ＜  ｔｈ  または  ｙ２−ｙ１  ＜  ｔｈ  
なお、ｔｈはある閾値を表す。
【００７４】
また、ここでは優先順位を付け替える場合について具体例を挙げて説明した。しかし、第７の実施の形態では、優先順位の付け替えのみに限定されない。第３の実施の形態と同様に、例えばある閾値よりサイズが大きな文字像域の属性はロゴに置き換える、ある閾値よりサイズが小さな自然画像の属性情報は削除するなどの規則に則り、像域情報の付与・置き換え・削除等の編集が可能である。
【００７５】
透かし画像形成手段２００５は、像域情報編集手段２００４で決めた優先度の順に情報を選択して限界の情報量までの情報を埋め込んだ透かし画像を作成する。
【００７６】
第７の実施の形態では、重要な像域情報の優先度を高くしているため精度の高い像域情報を使用することが可能となる。このことにより、何世代コピーしても高精度な像域識別結果を得ることが可能である。また、高画質・高圧縮な電子ファイルを得ることも可能となる。
【００７７】
以上説明した各実施の形態によれば、コピー出力、あるいはプリント出力を再度コピー出力する際に従来の手法と比べて高画質なコピー出力を得ることができる。あるいは、プリント出力、コピー出力をスキャン入力して再電子ファイル化する際に高機能な電子ファイルを得ることができる。
【００７８】
続いて、上述の画像形成装置で形成された画像から透かし情報を抽出する画像処理装置について説明する。
【００７９】
[第１の実施の形態]    
図２２は、第１の実施の形態の画像処理装置の構成を示すブロック図である。図２３は、第１の実施の形態の画像処理装置の概略の動作を示すフローチャートである。  
以下、図１及び図２を参照しつつ画像処理装置の構成と動作を説明する。
【００８０】
画像処理装置は、文書画像入力手段２２０１、透かし情報抽出手段２２０２、画像識別手段２２０３を備えている。
【００８１】
動作２３０１において、文書画像入力手段２２０１は文書画像を入力する。ここで文書画像入力手段２２０１は、ＭＦＰや複写機に搭載されているスキャナ等である。入力される文書画像は画像形成装置を用いて像域情報を透かし画像として合成した文書画像を紙などに出力したものである。
【００８２】
像域情報を透かし画像として合成する上述の画像形成装置の例を、以下に簡単に説明する。  
図２４は、画像形成装置の構成を示すブロック図である。  
画像形成装置は、文書画像入力手段２４０１、像域情報入力手段２４０２、透かし画像形成手段２４０３、透かし文書合成手段２４０４を備えている。
【００８３】
文書画像入力手段２４０１は、文書画像を入力する。ここで文書画像入力手段２４０１は、例えば、ＭＦＰや複写機に搭載されているスキャナであり、入力される文書画像は紙原稿である。像域情報入力手段２４０２は入力される文書画像を元に予め作成されている像域情報を入力する。
【００８４】
図２５は、入力される文書画像及び像域情報の内容を示す図である。図２５（１）の文書画像２５０１は、タイトル２５０２，本文２５０３及び自然画像２５０４の像域を含んでいる。この文書画像２５０１から像域情報を抽出するために、例えば、図２５（２）の文書画像２５０５に示したように、ユーザが画面を見ながらマウス等で各像域（２５０６，２５０７，２５０８）を矩形で囲み、キーボード等から各属性を指定する。
【００８５】
このようにユーザに指定された各像域の矩形座標位置と属性とから、図２５（３）に示す像域情報２５０９が作成され、像域情報入力手段２４０２に入力される。像域情報としては、属性（タイトル／本文／自然画像）とその座標位置（２５１０、２５１１、２５１２）である。  
なお、本実施例では像域情報として座標位置と、タイトル／本文／自然画像の属性を入力しているが、例えば文字属性の像域であれば文字色や文字コード、自然画像であれば風景画像／人物画像などの情報も像域情報として入力することが可能である。
【００８６】
透かし画像形成手段２４０３は、像域情報入力手段２４０２により抽出された像域情報を埋め込んだ透かし画像を形成する。更に、透かし文書合成手段２４０４は、文書画像入力手段２４０１から出力された文書画像と、透かし画像形成手段２４０３から出力された透かし画像を合成し、透かし情報が埋め込まれた画像を形成する。
【００８７】
透かし画像の形成及び透かし情報が埋め込まれた画像の形成に関しては、既に様々な手法が開示されている。例えば特開２００３−１０１７６２号公報に記載の技術では、文書の背景に所定の方法で黒画素を埋め込むことで文書に情報を埋め込む。
【００８８】
図２６は、特開２００３−１０１７６２号公報に記載の技術を用いた画像形成方法を説明する図である。  
文書画像入力手段２４０１から出力された文書画像２６０１に対し、像域情報入力手段２４０２から出力された像域情報を透かし画像形成手段２４０３により透かし画像２６０２に変換し、文書画像２６０１と透かし画像２６０２を透かし文書合成手段２４０４により合成して透かし情報が埋め込まれた文書２６０３を得る。
【００８９】
図２３に戻り、動作２３０２において透かし情報抽出手段２２０２（図２２）が入力された文書画像から透かし画像として埋め込まれている像域情報を抽出する。なお、透かし情報を抽出するための技術としては、例えば、特開２００３−１０１７６２号公報に記載の技術等を用いることができる。
【００９０】
図２７は、入力された文書画像に埋め込まれた透かし画像から抽出した像域情報を示す図である。図２７（１）は入力された文書画像２７０１を示している。この文書画像２７０１は、図２４に示す画像形成装置に図２５（１）の文書画像２５０１を入力し、図２５（３）の像域情報２５０９を埋め込んだ透かし画像を合成して形成したものとする。
【００９１】
透かし情報抽出手段２２０２により抽出された、文書画像に埋め込まれた像域情報が図２７（２）の像域情報２７０５である。この像域情報２７０５は、画像形成装置により埋め込まれていた図２５（３）の像域情報２５０９であり、そのまま抽出できる。
【００９２】
動作２３０３においてＹｅｓの場合、すなわち入力文書画像に像域情報が透かし画像で埋め込まれていた場合には、動作２３０４において、透かし情報抽出手段２２０２により抽出された像域情報２７０５を本実施の形態の画像処理装置の出力とする。
【００９３】
一方、動作２３０３においてＮｏの場合、すなわち入力文書画像に透かし画像が埋め込まれていなかったために、透かし情報抽出手段２０２が像域情報を抽出できなかった場合には、動作２３０５において、画像識別手段２２０３により入力文書画像の像域識別を行い、その像域情報を本実施の形態の画像処理装置の出力とする。なお、画像識別手段としては、例えば、特開２００３−８７５６２号公報に記載の技術を用いる。
【００９４】
図２８は、画像識別手段２２０３により得られた像域情報を示す図である。図２８（１）は、入力文書画像２８０１を示している。画像識別手段２２０３は、入力画像中の文字領域・自然画像領域を識別し、それぞれの領域の属性・座標位置を図２８（２）に示す像域情報２８０５として出力する。
【００９５】
第１の実施の形態の画像処理装置によれば、透かし画像が埋め込まれていない画像に対しては従来と同精度の像域情報を得ることが出来、既に像域情報が透かし画像で埋め込まれた文書画像に対しては、画像識別を行わずに像域情報を得ることが可能である。従って、高精度な識別情報を得ることができる。
【００９６】
次に、第１の実施の形態の画像処理装置を用いて得られる像域情報の利用方法として、高画質な世代コピーを得る装置の構成と動作を図２９を参照しつつ説明する。  
上述の画像形成装置を用いて像域情報が透かし画像として埋め込まれた文書画像を紙に出力する。文書画像入力手段２９０１が紙に出力された文書画像を入力する。ここで文書画像入力手段２９０１はＭＦＰや複写機のスキャナ等である。
【００９７】
次に、第１の実施の形態の画像処理装置２９０２を用いて埋め込まれた像域情報を抽出する。続いて画像処理手段２９０３が、入力された文書画像に対して、抽出された像域情報を用いて像域ごとに適した画像処理を施す。
【００９８】
図３０は、画像処理手段２９０３により施される画像処理例を示す図である。画像処理の例としては、フィルタ処理や階調処理がある。例えば、自然画像に対しては画像出力時の網点との干渉によるモアレを防ぐために入力画像の網点を潰すためのぼかしフィルタ処理を施す。文字画像に対しては文字のエッジを強調するためにエッジ強調フィルタを施す。また、階調処理においても、自然画像は解像性よりも階調性を重視するため低線数の階調処理を施し、文字画像は解像性を重視するために高線数の階調処理を施す。
【００９９】
画像処理手段２９０３による画像処理の後、画像出力手段２９０４が画像を出力する。画像出力手段２９０４としては、ＭＦＰや複写機のプリント部がある。
【０１００】
以上述べた通り、劣化しているコピー画像に対して像域識別するのではなく、透かしとして埋め込まれた情報から像域情報を得ることで、正確な像域識別結果を使用することが出来る。また、第１の実施の形態の画像処理装置から得られた像域情報を、再度、図２４に示す画像形成装置に入力し直すことで、何世代コピーしても高精度な像域識別結果を得ることが可能となる。
【０１０１】
更に、第１の実施の形態の画像処理装置を用いて得られた像域情報の他の利用方法として、高圧縮な電子ファイルを得る装置の構成と動作を図３１を参照しつつ説明する。  
文書画像入力手段３１０１が像域情報が埋め込まれた文書画像を入力し、第１の実施の形態の画像処理装置３１０２が埋め込まれた像域情報を抽出する。次に画像分割手段３１０３が抽出された像域情報を用いて入力された文書画像を文字画像と自然画像に分割する。
【０１０２】
分割された文字画像と自然画像をそれぞれに適した方法で画像圧縮することで、高画質・高圧縮を実現する。例えば、文字画像を圧縮するための第１の圧縮手段３１０４は、２値画像しか扱えないが劣化しない（可逆である）ＭＭＲ圧縮を用いる。また、自然画像を圧縮するための第２の圧縮手段３１０５は、画像の高周波成分は失われるが、階調性のある画像に適したＪＰＥＧ圧縮を用いる。
【０１０３】
最後に画像結合手段３１０６が、前記圧縮文字画像と前記圧縮自然画像を結合する。
【０１０４】
以上述べたように像域識別を行わず、埋め込まれた像域情報を用いると高精度な像域情報を得られるため高画質で高圧縮な画像ファイルを得ることが可能となる。
【０１０５】
[第２の実施の形態]    
図３２は、第２の実施の形態の画像処理装置の構成を示すブロック図である。画像処理装置は、文書画像入力手段３２０１、透かし情報抽出手段３２０２、画像識別手段３２０３、像域情報合成手段３２０４を備えている。
【０１０６】
第２の実施の形態の画像処理装置は、入力文書画像の透かし情報の有無に関わらず画像識別を行うことと、像域情報合成手段３２０４を有する点で第１の実施の形態と異なっている。  
一般に透かし画像に埋め込むことのできる情報量には限りがあり、必要な像域情報が全て透かし画像に埋め込まれていない場合もある。そこで、第２の実施の形態の画像処理装置は透かし画像の有無に関わらず画像識別を行い、透かし画像から得られた第１の像域情報と画像識別により生成した第２の像域情報を、像域情報合成手段３２０４により合成し出力する。
【０１０７】
第２の実施の形態の画像処理装置をどのような目的に使用するかによって、像域情報合成手段３２０４による最適な合成方法が異なる。  
例えば、全文検索用のＯＣＲ処理の前処理として第２の実施の形態の画像処理装置を使用する場合では、文字領域を過抽出することよりも、文字領域の抽出漏れを発生させることが不具合としての度合が大きいと考えられる。そこで、像域情報合成手段３２０４は、第１の像域情報と第２の像域情報に含まれる全ての領域を出力するように動作する。
【０１０８】
また、高圧縮な電子ファイルを作成するために第２の実施の形態の画像処理装置を使用する場合、文字領域には２値化処理を行うので、自然画像を“文字領域”と誤って識別すると、文字抽出漏れよりも画質不具合による影響が大きくなる。そのため、像域情報合成手段３２０４は、信頼度の低い領域情報は破棄するように動作する。
【０１０９】
更に、文字画像を優先したコピア用の識別信号生成に第２の実施の形態の画像処理装置を使用する際には、まず領域毎に文字用の画像処理／自然画像用の画像処理とを切り替える必要がある。そのため領域に重複が許されず、かつ、自然画像領域を文字画像と間違うことよりも文字領域を自然画像領域と間違うことの方が画質不具合の度合が大きい。従って、像域情報合成手段３２０４は、領域に重複があり、かつ、その属性が異なった場合には文字属性の領域を優先するように動作する。
【０１１０】
図３３は、第２の実施の形態の画像処理装置をＯＣＲ前処理として使用する際の像域情報合成手段３２０４の動作例を示す図である。図３３（１）は、入力文書画像３３０１を示している。図３３（２）は、透かし画像から抽出された第１の像域情報３３０５を示している。図３３（３）は、画像識別手段３３０３により生成された第２の像域情報３３０８を示している。図３３（４）は、第１の像域情報３３０５と第２の像域情報３３０８を合成して生成された第３の像域情報３３１１を示している。
【０１１１】
図３３に示した例では、像域情報合成手段３２０４は、第１の像域情報３３０５と第２の像域情報３３０８を単純に合成している。すなわち、第１の像域情報３３０５中の第１領域３３０６と第２領域３３０７が第３の像域情報３３１１の第１領域３３１２、第２領域３３１３となり、第２の像域情報３３０８中の第１領域３３０９と第２領域３３１０が第３の像域情報３３１１の第３領域３３１４、第４領域３３１５となっている。
【０１１２】
図３４は、第２の実施の形態の画像処理装置を高圧縮ファイル作成のために使用する際の像域情報合成手段３２０４の動作例を示す図である。図３４（１）は、入力文書画像３４０１を示している。図３４（２）は、透かし画像から抽出された第１の像域情報３４０５を示している。図３４（３）は、画像識別手段３２０３により生成された第２の像域情報３４０８を示している。図３４（４）は、第１の像域情報３４０５と第２の像域情報３４０８を合成して生成された第３の像域情報３４１１を示している。
【０１１３】
図３４に示した例では、第１の像域情報３４０５中の領域と第２の像域情報３４０８中の領域で座標位置に重なりがある場合は第１の像域情報３４０５中の領域を採用し、第２の像域情報３４０８中の領域を破棄している。例えば、第１の像域情報３４０５中の第１領域３４０６と第２像域情報３４０８中の第１領域３４０９に重なりがある。従って、第２像域情報３４０８中の第１領域３４０９を破棄して合成した第３の像域情報３４１１が出力される。
【０１１４】
なお、２つの領域、領域Ａと領域Ｂの重なりの有無は、例えば下式に当てはまるか否かで判定する。  
（ｙＡ１＜ｙＢ１＜ｙＡ２  または  ｙＡ１＜ｙＢ２＜ｙＡ２）  かつ  
（ｘＡ１＜ｘＢ１＜ｘＡ２  または  ｘＡ１＜ｘＢ２＜ｘＡ２）  
但し、領域Ａの左下座標−右上座標の組を（ｘＡ１，ｙＡ１）−（ｘＡ２，ｙＡ２）、領域Ｂの左下座標−右上座標の組を（ｘＢ１，ｙＢ１）−（ｘＢ２，ｙＢ２）とする。
【０１１５】
図３５は、第２の実施の形態の画像処理装置をコピア用識別信号生成に使用する際の像域情報合成手段３２０４の動作例を示す図である。図３５（１）は、入力文書画像３５０１を示している。図３５（２）は、透かし画像から抽出された第１の像域情報３５０５を示している。図３５（３）は、画像識別手段３２０３により生成された第２の像域情報３５０８を示している。図３５（４）は、第１の像域情報３５０５と第２の像域情報３５０８を合成して生成された第３の像域情報３５１１を示している。
【０１１６】
図３５に示した例では、第１の像域情報３５０５中の第１領域３５０６（文字列“ＴＩＴＬＥ”）と第２の像域情報３５０８中の第１領域３５０９（文字列“ＴＩＴＬＥ”）で座標位置に重なりがある。そこで、その属性が“文字”である第２の像域情報３５０８中の領域３５０９を採用し、その属性が“自然画像”である第１の像域情報３５０５中の領域３５０６を破棄する。すなわち、第１の像域情報３５０５中の第２領域３５０７と第２の像域情報３５０８中の第１領域３５０９、第２領域３５１０を採用して第３の像域情報３５１１として出力する。
【０１１７】
なお、像域情報合成手段３２０４の動作として３例を説明したが、この例に限られるものではない。より高精度な像域情報を得るために第１の像域情報と第２の像域情報の両方に存在する領域のみを採用する等、他の動作例も考えられる。
【０１１８】
また、上述の第３の像域情報中に領域を記述する順序は、第１の像域情報中の領域の後に第２の像域情報中の領域を記述する単純なものである。しかし、第２の実施の形態の画像処理装置の出力をコピア用識別信号に使用する場合、コピアの画像処理は副走査の順方向にしか処理できない。従って、第３の像域情報中の領域も副走査の順方向に並べ替える必要がある。例えば、図３５（４）の第３の像域情報３５１１の例では、上を副走査の先頭とすると、第２領域、第３領域、第１領域の順に並び替える。
【０１１９】
以上説明した第２の実施の形態によれば、第１の実施の形態と同様に、透かし画像が埋め込まれていない画像に対しては従来と同精度の像域情報を得ることが出来、既に像域情報が透かし画像で埋め込まれた文書画像に対しては、透かし画像中の像域情報では不足している像域情報を画像識別手段で生成した像域情報で補うことにより高精度な識別情報を得ることが可能である。
【０１２０】
[第３の実施の形態]    
図３６は、第３の実施の形態の画像処理装置の構成を示すブロック図である。画像処理装置は、文書画像入力手段３６０１、透かし情報抽出手段３６０２、画像識別手段３６０３、像域情報合成手段３６０４を備えている。
【０１２１】
第３の実施の形態の画像処理装置は、画像識別手段３６０３が透かし情報から抽出した第１の像域情報中に記載されていない領域のみに対して画像識別を行う点で第２の実施の形態と異なっている。
【０１２２】
図３７は、第３の実施の形態の画像処理装置により得られる像域情報の例を示す図である。図３７（１）は、入力文書画像３７０１を示している。図３７（２）は、透かし画像から抽出された第１の像域情報３７０５を示している。図３７（３）は、画像識別手段３６０３により生成された第２の像域情報３７０８を示している。図３７（４）は、第１の像域情報３７０５と第２の像域情報３７０８を合成して生成された第３の像域情報３７１０を示している。
【０１２３】
透かし情報抽出手段３６０２が抽出した結果である第１の像域情報３７０５には第１領域３７０６として“ＴＩＴＬＥ”という文字領域と、第２領域３７０７としてＭＦＰが撮影されている自然画像が抽出されている。しかし、透かし情報抽出手段３６０２は、入力文書画像３７０１中の文字列“ＡＢＣ”を抽出していない。
【０１２４】
画像識別手段３６０３は、第１の像域情報３７０５中の第１領域３７０６・第２領域３７０７で表される領域以外の箇所に対して識別処理を実行する。そして、文字列“ＡＢＣ”を第１領域３７０９として含む第２の像域情報３７０８を生成する。像域情報合成手段３６０４は、得られた第１の像域情報３７０５と第２の像域情報３７０８を合成し、第３の像域情報３７１０を生成する。
【０１２５】
以上説明した第３の実施の形態によれば、第２の実施の形態と同様に、透かし画像が埋め込まれていない画像に対しては従来と同精度の像域情報を得ることが出来、既に像域情報が透かし画像で埋め込まれた文書画像に対しては、透かし画像中の像域情報では不足している像域情報を画像識別手段で生成した像域情報で補うことにより高精度な識別情報を得ることが可能である。更に透かし画像から得られた像域情報中に領域が無かった箇所のみを識別するので第２の実施の形態と比較して高速に処理することが可能となる。
【０１２６】
[第４の実施の形態]    
図３８は、第４の実施の形態の画像処理装置の構成を示すブロック図である。画像処理装置は、文書画像入力手段３８０１、透かし情報抽出手段３８０２、画像識別手段３８０３、像域情報合成手段３８０４を備えている。
【０１２７】
第４の実施の形態の画像処理装置は、透かし情報から抽出した第１の像域情報中に存在する領域のみを対象として画像識別手段３８０３が識別処理を行い、第１の像域情報に不足している情報を補う点で第３の実施の形態と異なっている。
【０１２８】
図３９は、第４の実施の形態の画像処理装置により得られる像域情報の例を示す図である。図３９（１）は、入力文書画像３９０１を示している。図３９（２）は、透かし画像から抽出された第１の像域情報３９０５を示している。図３９（３）は、画像識別手段３８０３により生成された第２の像域情報３９０９を示している。図３９（４）は、第１の像域情報３９０５と第２の像域情報３９０９を合成して生成された第３の像域情報３９１２を示している。
【０１２９】
透かし情報抽出手段３８０２が抽出した結果である第１の像域情報３９０５には第１領域３９０６、第２領域３９０７、第３領域３９０８の３つの領域が含まれており、その領域を表す情報として座標位置と“文字”／“自然画像”という属性情報が存在する。例えば、第４の実施の形態の画像処理装置から出力する像域情報に文字色情報が必要な場合、画像識別手段３８０３は第１像域３９０５中の文字領域である第１領域３９０６・第２領域３９０７に対してのみ識別処理を行い、文字色情報を抽出して含む第２の像域情報３９０９を生成する。
【０１３０】
文字色を抽出する方法として、例えば次のような処理を行う。  
１：文字領域をＧｒａｙｓｃａｌｅ化する。単純に（Ｒ＋Ｇ＋Ｂ）／３等で求めても良いし、輝度変換によりも求めても良い。  
２：２値化により白黒化する。２値化の閾値は適当な固定閾値を用いてもよいし、Ｇｒａｙｓｃａｌｅ画像のヒストグラムから算出した適応的な値を用いても良い。  
３：２値画像の白画素数と黒画素数を数える。数の少なかった色の画素を文字画素とする。
【０１３１】
４：原画像中の文字画素と判断された画素のＲＧＢ値の平均値を求める。この平均値を文字色とする。
【０１３２】
像域情報合成手段３８０４は、得られた第１の像域情報３９０５と第２の像域情報３９０９を合成し、第３の像域情報３９１２を生成する。
【０１３３】
なお、第４の実施の形態においては、第１の像域情報中に存在する領域にのみ画像識別を行う処理について説明してきた。しかし、例えば第３の実施の形態に説明した技術と組み合わせて、第１の像域情報中に存在する領域については文字色識別のみを行い、第１の像域情報に存在しない領域に付いては、領域の座標位置・属性・属性が文字であった場合には文字色の識別を行うという処理も考えられる。
【０１３４】
以上説明した第４の実施の形態によれば、第３の実施の形態と同様に、透かし画像が埋め込まれていない画像に対しては従来と同精度の像域情報を得ることが出来、既に像域情報が透かし画像で埋め込まれた文書画像に対しては、透かし画像中の像域情報では不足している像域情報を画像識別手段で生成した像域情報で補うことにより高精度な識別情報を得ることが可能である。
【０１３５】
なお、第１乃至第４の実施の形態に係る画像処理装置では、図２４の画像形成装置で形成した透かし画像が含まれた画像を入力したが、この形態に限られず、第１乃至第７の実施の形態の画像形成装置により形成された画像を用いても良い。
【０１３６】
なお、以上説明した第１乃至第４の実施の形態に係る画像処理装置は、次のように表すことができる。
【０１３７】
[付記１]（透かしから像域情報を抽出する）  
文書画像を入力する文書画像入力手段と、  
前記入力された文書画像に埋め込まれた透かし画像から像域情報を抽出する透かし情報抽出手段、  
とを有することを特徴とする画像処理装置。
【０１３８】
[付記２]（透かしから像域情報を抽出する）  
請求項１の画像処理装置において、  
前記入力された文書画像に埋め込まれた透かし画像から抽出された像域情報は、  
その座標の基準位置（左下基準，左上基準ｅｔｃ．）、長さの単位（ｃｍ，ｉｎｃｈ，ｅｔｃ．）が埋め込まれている。
【０１３９】
[付記３]（透かしがなかった場合は識別処理をする）  
文書画像を入力する文書画像入力手段と、  
前記入力された文書画像に像域情報が透かし画像として埋められていた場合、埋め込まれた透かし画像から像域情報を抽出する透かし情報抽出手段と、  
前記入力された文書画像に透かし画像が埋め込まれていなかった場合に入力文書画像の像域を識別する画像識別手段、  
とを有することを特徴とする画像処理装置。
【０１４０】
[付記４]（透かし情報と識別結果とを合成する）  
文書画像を入力する文書画像入力手段と、  
前記入力された文書画像に像域情報が透かし画像として埋められていた場合、埋め込まれた透かし画像から第１の像域情報を抽出する透かし情報抽出手段と、  
入力された文書画像の像域を識別し第２像域情報を生成する画像識別手段と、  
第１の像域情報と第２の像域情報を合成し第３の像域情報を生成する像域情報合成手段、  
とを有することを特徴とする画像処理装置。
【０１４１】
[付記５]（透かし画像から抽出した領域については像域識別を行わない）  
文書画像を入力する文書画像入力手段と、  
前記入力された文書画像に像域情報が透かし画像として埋められていた場合、埋め込まれた透かし画像から第１の像域情報を抽出する透かし情報抽出手段と、  
前記入力された文書画像の前記第１の像域情報においてどの領域にも含まれていない位置の像域を識別し第２像域情報を生成する画像識別手段と、  
第１の像域情報と第２の像域情報を合成し第３の像域情報を生成する像域情報合成手段、  
とを有することを特徴とする画像処理装置。
【０１４２】
[付記６]（透かしから抽出した領域は、透かしにない情報のみ（文字色等）を識別処理で生成する）  
文書画像を入力する文書画像入力手段と、  
前記入力された文書画像に像域情報が透かし画像として埋められていた場合、埋め込まれた透かし画像から第１の像域情報を抽出する透かし情報抽出手段と、  
第１の像域情報内の領域に対して画像識別を行い、第１の像域情報にはない種類の情報である第２の像域情報を生成する画像識別手段と、  
第１の像域情報と第２の像域情報を合成し第３の像域情報を生成する像域情報合成手段、  
とを有することを特徴とする画像処理装置。
【０１４３】
[付記７]（本提案画像処理装置の使い方（コピーｏｒ高圧縮ファイル）に応じて、合成方法を変える）  
請求項４、請求項５、請求項６に記載の画像処理装置において、  
像域情報合成手段は、前記画像処理装置の使用方法（コピー用識別／高圧縮ファイル用識別／ＯＣＲ前処理）に応じてその合成方法を変える。
【０１４４】
[付記８]（透かし情報と識別結果の重複を許して全て出力する）  
請求項４、請求項５、請求項６に記載の画像処理装置において、  
前記像域情報合成手段は、第１の像域情報と第２像域情報に含まれている領域情報を全て第３の像域情報に含ませる。
【０１４５】
[付記９]（透かし情報を重視。像域識別結果と重なりがあった場合は、識別結果の方を破棄する）  
請求項４、請求項５、請求項６に記載の画像処理装置において、  
前記像域情報合成手段は、第１の像域情報内の領域と第２像域情報内の領域の座標位置に重なりがあった場合、該領域については第１の像域情報の領域を採用し第２の像域情報の領域を破棄する。
【０１４６】
[付記１０]（領域の属性（文字であるか否か）を重視。重なりがあった場合は、優先属性の領域のみ残す）  
請求項４、請求項５、請求項６に記載の画像処理装置において、
前記像域情報合成手段は、予め領域の属性による重要度を決めておき、第１の像域情報内の領域と第２像域情報内の領域の座標位置に重なりがあり、かつ、それぞれの属性が異なった場合、該領域については第１の像域情報と第２の像域情報で優先度が低い属性情報を有する方の像域情報を破棄する。
【０１４７】
[付記１１]（像域情報を合成する際に、領域の順番を自由に入れ替える）  
請求項４、請求項５、請求項６に記載の画像処理装置において、  
前記像域情報合成手段は、第１の像域情報と第２の像域情報を合成した第３の像域情報中の領域情報は、その記述順を自由に置き換えられる。
【０１４８】
[付記１２]（透かし情報と像域識別結果とで一致した領域のみを出力する）  
請求項４、請求項５、請求項６に記載の画像処理装置において、  
前記像域情報合成手段は、第１の像域情報内の領域と第２像域情報内の領域の座標位置を調べ、一致した領域のみを第３の像域情報に採用する。
【０１４９】
本発明は、像域情報が埋め込まれた文書画像から正確な像域識別結果を得る技術に関する。この技術を用いると何世代にも渡り正確な像域識別結果を用いた世代コピーが可能となる。また、より高画質・高機能な電子ファイルを作成可能となる。
【０１５０】
尚、本発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。  
また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に亘る構成要素を適宜組み合せてもよい。
【産業上の利用可能性】
【０１５１】
本発明は、複数世代のコピー原稿であっても高精度な像域識別結果を得ることができ、また、高機能な電子ファイルを得ることができる画像形成装置、画像処理装置を製造し、使用する産業で利用することができる。
【符号の説明】
【０１５２】
１０１…文書画像入力手段、１０２…像域情報入力手段、１０３…画像形成手段、１０４…文書合成手段、５０１…文書画像入力手段、５０２…情報抽出手段、５０３…画像処理手段、５０４…画像出力手段、７０１…文書画像入力手段、７０２…情報抽出手段、７０３…画像分割手段、７０４…第１の圧縮手段、７０５…第２の圧縮手段、７０６…画像結合手段、８０１…文書データ入力手段、８０２…文書画像形成手段、８０３…像域情報入力手段、８０４…画像形成手段、８０５…文書合成手段、１１０１…文書画像入力手段、１１０２…画像識別手段、１１０３…画像形成手段、１１０４…文書合成手段、１３０１…文書データ入力手段、１３０２…文書画像形成手段、１３０３…像域情報抽出手段、１３０４…画像形成手段、１３０５…文書合成手段、１５０１…文書画像入力手段、１５０２…画像識別手段、１５０３…像域情報編集手段、１５０４…画像形成手段、１５０５…文書合成手段、１８０１…文書データ入力手段、１８０２…文書画像形成手段、１８０３…像域情報抽出手段、１８０４…像域情報編集手段、１８０５…画像形成手段、１８０６…文書合成手段。
【先行技術文献】
【特許文献】
【０１５３】
【特許文献１】特開２００５−３９４３０号公報
【特許文献２】特開２００２−７７６３３号公報
【図１】
2010011455.tif 000003
【図２】
2010011455.tif 000004
【図３】
2010011455.tif 000005
【図４】
2010011455.tif 000006
【図５】
2010011455.tif 000007
【図６】
2010011455.tif 000008
【図７】
2010011455.tif 000009
【図８】
2010011455.tif 000010
【図９】
2010011455.tif 000011
【図１０】
2010011455.tif 000012
【図１１】
2010011455.tif 000013
【図１２】
2010011455.tif 000014
【図１３】
2010011455.tif 000015
【図１４】
2010011455.tif 000016
【図１５】
2010011455.tif 000017
【図１６】
2010011455.tif 000018
【図１７】
2010011455.tif 000019
【図１８】
2010011455.tif 000020
【図１９】
2010011455.tif 000021
【図２０】
2010011455.tif 000022
【図２１】
2010011455.tif 000023
【図２２】
2010011455.tif 000024
【図２３】
2010011455.tif 000025
【図２４】
2010011455.tif 000026
【図２５】
2010011455.tif 000027
【図２６】
2010011455.tif 000028
【図２７】
2010011455.tif 000029
【図２８】
2010011455.tif 000030
【図２９】
2010011455.tif 000031
【図３０】
2010011455.tif 000032
【図３１】
2010011455.tif 000033
【図３２】
2010011455.tif 000034
【図３３】
2010011455.tif 000035
【図３４】
2010011455.tif 000036
【図３５】
2010011455.tif 000037
【図３６】
2010011455.tif 000038
【図３７】
2010011455.tif 000039
【図３８】
2010011455.tif 000040
【図３９】
2010011455.tif 000041