(57)【要約】【課題】ユーザの利便性向上に資する画像処理装置及び画像形成装置を得る。【解決手段】原稿画像に基づく画像データを受けて、記述領域抽出部７３は、画像データから文字等の記述領域を抽出する一方、修飾領域抽出部７５は、前記記述領域に施されている修飾態様に係る領域を抽出する。領域情報解析部７７は、前記記述領域に係る記述内容、並びに、前記修飾領域に係る修飾態様を含む領域情報を解析する。そして、修飾態様置換部７９は、領域情報解析部７７の解析結果と、置換情報記憶部７８の置換情報と、に基づいて、該当する記述領域に係る修飾態様を、前記置換情報に従う修飾態様に置き換えた置換画像データを生成して出力する。【選択図】  図２
2010074287.tif 000002
【特許請求の範囲】
【請求項１】
原稿画像に基づく画像データを取得する画像データ取得部と、
前記画像データから文字・図形・記号若しくはこれらの組合せに係る記述領域を抽出する記述領域抽出部と、
前記記述領域抽出部で抽出された記述領域に施されている修飾態様に係る領域を抽出する修飾領域抽出部と、
前記記述領域抽出部で抽出された記述領域に係る記述内容、並びに、前記修飾領域抽出部で抽出された修飾領域に係る修飾態様を含む領域情報を解析する領域情報解析部と、
前記修飾領域に係る修飾態様の種別にそれぞれ関連付けて、該当する記述領域に施される修飾態様を置換情報として記憶する置換情報記憶部と、
前記領域情報解析部の解析結果と、前記置換情報記憶部の置換情報と、に基づいて、該当する記述領域に係る修飾態様を、前記置換情報に従う修飾態様に置き換えた置換画像データを生成して出力する修飾態様置換部と、
を備えたことを特徴とする画像処理装置。
【請求項２】
請求項１記載の画像処理装置であって、
前記記述領域に施されている修飾態様は、所要の色彩に係る塗りつぶしであり、
前記置換情報記憶部は、所要の色彩に係る塗りつぶしに関連付けて、該当する記述領域の記述内容に前記塗りつぶしに係る色彩を施す旨の修飾態様を置換情報として記憶しており、
前記修飾態様置換部は、該当する記述領域に係る修飾態様を、前記置換情報に従う修飾態様に置き換えた置換画像データを生成して出力する、
ことを特徴とする画像処理装置。
【請求項３】
原稿画像に基づく画像データを取得する画像データ取得部と、
前記画像データから文字・図形・記号若しくはこれらの組合せに係る記述領域を抽出する記述領域抽出部と、
前記記述領域抽出部で抽出された記述領域に施されている修飾態様に係る領域を抽出する修飾領域抽出部と、
前記記述領域抽出部で抽出された記述領域に係る記述内容、並びに、前記修飾領域抽出部で抽出された修飾領域に係る修飾態様を含む領域情報を解析する領域情報解析部と、
前記修飾領域に係る修飾態様の種別にそれぞれ関連付けて、該当する記述領域に施される修飾態様を置換情報として記憶する置換情報記憶部と、
前記領域情報解析部の解析結果と、前記置換情報記憶部の置換情報と、に基づいて、該当する記述領域に係る修飾態様を、前記置換情報に従う修飾態様に置き換えた置換画像データを生成して出力する修飾態様置換部と、
前記置換画像データに基づく置換画像を、表示部の表示画面上に表示させる制御を行う表示制御部と、
を備えたことを特徴とする画像形成装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、原稿画像に基づく画像データを取得する機能を有する画像処理装置に係り、特に、文字等の記述領域に施されている修飾態様を、異なる修飾態様に置換したいといったユーザの要望に応えることで、ユーザの利便性向上に資する画像処理装置及び画像形成装置に関する。
【背景技術】
【０００２】
プリンタ等の画像形成装置で画像形成された原稿を訂正する場合、原稿中の訂正対象箇所を取り消し線などで取り消すとともに、その上方などの近傍に文字等を追加記入することが行われる。
【０００３】
かかる原稿訂正を容易にするとともに、訂正前の状態がわかるように原稿を編集することを目的として、原稿の読み取り画像データを取得する画像読取部と、取得された画像データから取消記号として予め定められた取消線を含む取消部分を抽出する取消部分抽出部と、取消部分抽出部により取消部分が抽出された場合、抽出された取消部分に関連する手書文字を含む関連部分を抽出する関連部分抽出部と、画像データから関連部分を消去する関連部分消去部と、消去部分を関連部分で置き換えた置換画像データを生成する置換部と、取消部分と置換画像データとを関連付ける関連付部と、を備えて構成される画像形成装置が開示されている（例えば特許文献１参照）。
【０００４】
ところで、例えば、講習会の講義に使用されるテキストなどの文書では、受講者がその内容を理解しつつ読み進める目的で、黄色・ピンク・青色などのマーカーペンによって重要箇所を色分けしつつ塗りつぶすことが一般に行われている。
【０００５】
こうして塗りつぶしがなされた後の文書について、その理解がある程度進んだ後では、当初重要と認識していた箇所とは異なる箇所が、新たな重要箇所としてクローズアップされてくることがある。かかる場合であって、当初重要と認識していた箇所の価値が相対的に下がり、後に重要な箇所としてクローズアップされてきた箇所の価値が相対的に上がった場合などには、当初重要と認識した箇所について、塗りつぶしとは異なる修飾態様に置換したいという要望を生じる場合が考えられる。
【０００６】
しかしながら、特許文献１の技術では、上述したようなユーザの要望に応えることはできない。
【特許文献１】特開２００７−２８０２６６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
解決しようとする問題点は、従来技術では、文字等の記述領域に施されている修飾態様を、異なる修飾態様に置換したいといったユーザの要望に応えることは出来なかった点である。
【課題を解決するための手段】
【０００８】
本発明は、文字等の記述領域に施されている修飾態様を、異なる修飾態様に置換したいといったユーザの要望に応えることで、ユーザの利便性向上に資する画像処理装置を提供することを目的として、原稿画像に基づく画像データを取得する画像データ取得部と、前記画像データから文字・図形・記号若しくはこれらの組合せに係る記述領域を抽出する記述領域抽出部と、前記記述領域抽出部で抽出された記述領域に施されている修飾態様に係る領域を抽出する修飾領域抽出部と、前記記述領域抽出部で抽出された記述領域に係る記述内容、並びに、前記修飾領域抽出部で抽出された修飾領域に係る修飾態様を含む領域情報を解析する領域情報解析部と、前記修飾領域に係る修飾態様の種別にそれぞれ関連付けて、該当する記述領域に施される修飾態様を置換情報として記憶する置換情報記憶部と、前記領域情報解析部の解析結果と、前記置換情報記憶部の置換情報と、に基づいて、該当する記述領域に係る修飾態様を、前記置換情報に従う修飾態様に置き換えた置換画像データを生成して出力する修飾態様置換部と、を備えたことを最も主要な特徴とする。
【発明の効果】
【０００９】
本発明に係る画像処理装置では、画像データ取得部は、原稿画像に基づく画像データを取得すると、取得した画像データを記述領域抽出部等に渡す。これを受けて記述領域抽出部は、前記画像データから文字・図形・記号若しくはこれらの組合せに係る記述領域を抽出する一方、修飾領域抽出部は、前記記述領域抽出部で抽出された記述領域に施されている修飾態様に係る領域を抽出する。領域情報解析部は、前記記述領域抽出部で抽出された記述領域に係る記述内容、並びに、前記修飾領域抽出部で抽出された修飾領域に係る修飾態様を含む領域情報を解析する。そして、修飾態様置換部は、前記領域情報解析部の解析結果と、前記置換情報記憶部の置換情報と、に基づいて、該当する記述領域に係る修飾態様を、前記置換情報に従う修飾態様に置き換えた置換画像データを生成して出力する。従って、例えば文字等の記述領域に施されている修飾態様を、予め置換情報で設定される所要の修飾態様に置換することが可能となる結果として、ユーザの利便性向上に資する画像処理装置を提供することができる。
【発明を実施するための最良の形態】
【００１０】
ユーザの利便性向上に資する画像処理装置を得るといった目的を、前記領域情報解析部の解析結果と、前記置換情報記憶部の置換情報と、に基づいて、該当する記述領域に係る修飾態様を、前記置換情報に従う修飾態様に置き換えた置換画像データを生成して出力する修飾態様置換部によって実現した。
【実施例】
【００１１】
以下、本発明実施例に係る画像処理装置及び画像形成装置について、図面を参照しつつ詳細に説明する。なお、以下では、本発明に係る画像処理装置の一実施例として、スキャナ機能を有するデジタル複合機（画像形成装置）を例示して説明する。
【００１２】
［本発明実施例に係るデジタル複合機（画像形成装置）の概略構成］
図１は、本発明実施例に係るデジタル複合機（画像形成装置）の概略構成を示すブロック図である。
【００１３】
本機は、例えば、コピージョブ、Fax送信ジョブ、印刷ジョブ、又はネットワーク送信（メール送信やデータ送信）ジョブを含む諸機能が利用可能であり、マイクロコンピュータ及び専用のハードウェア回路等から構成される主制御部１１によって制御される。この主制御部１１に接続され諸機能を担う入出力機器として、本機は、原稿読取部２１、画像処理部３１、エンジン部４１、操作パネル部５１、ファクシミリ通信部６１、ＨＤＤ（ハードディスクドライブ）６３、並びに、ネットワークＩ／Ｆ（インタフェース）部６５を備える。
【００１４】
主制御部１１は、スキャナ機能を実現するための動作制御を行うスキャナコントローラ１３と、ファクシミリ機能を実現するための動作制御を行うファクシミリコントローラ１５、プリンタ機能を実現するための動作制御を行うプリンタコントローラ１７、並びに、コピー機能を実現するための動作制御を行うコピーコントローラ１９を内蔵し、本機全体の動作を統括制御する。
【００１５】
本発明実施例において画像処理装置の一部を構成する原稿読取部２１は、画像照射ランプ２３及びＣＣＤ（電荷結合素子： Charge Coupled Device ）センサ２５を含む。原稿読取部２１は、画像照射ランプ２３により原稿を照射し、その反射光をＣＣＤセンサ２５で受光することにより、原稿から画像を読み取り、読み取った画像に対応する画像データを画像処理部３１へ出力する。
【００１６】
画像処理部３１は、補正部３３、画像加工部３５及び画像メモリ３７を含む。画像処理部３１は、原稿読取部２１で読み取られた画像データを、必要に応じて補正部３３及び画像加工部３５で処理し、処理後の画像データを画像メモリ３７に記憶させ、或いは、エンジン部４１、ファクシミリ通信部６１等へ出力する。補正部３３は、原稿読取部２１で読み取られた画像データに対してレベル補正、ガンマ補正等の所定の補正処理を行う。画像加工部３５は、画像データの圧縮又は伸張処理、及び拡大又は縮小処理等の種々の加工処理を行う。
【００１７】
エンジン部４１は、図示しない給紙カセットや給紙ローラ等から構成される用紙搬送部４３、図示しない感光体ドラム、露光装置、現像装置等から構成される画像形成部４５、図示しない転写ローラ等から構成される転写部４７、及び図示しない定着ローラ等から構成される定着部４９を含む。エンジン部４１は、原稿読取部２１で読み取られた画像データ、ネットワークＩ／Ｆ部６５を介してＬＡＮ（Local Area Network）によりクライアントＰＣ（パーソナルコンピュータ）等から送信された画像データ、ファクシミリ通信部６１を用いて外部のファクシミリ装置等から受信したファクスデータ等の画像データを用いて画像を用紙に印刷する。具体的には、用紙搬送部４３は用紙を画像形成部４５へ搬送し、画像形成部４５は上記の画像データに対応するトナー像を形成し、転写部４７はトナー像を用紙に転写し、定着部４９はトナー像を用紙に定着させて画像を形成する。
【００１８】
操作パネル部５１は、タッチパネル部５３及び機能キー部５５を含む。操作パネル部５１は、ユーザがスキャナ機能、ファクシミリ機能、プリンタ機能、コピー機能等に関する操作を行うために使用され、ユーザによる操作指令等を主制御部１１に与える。
【００１９】
タッチパネル部５３（本発明の「表示部」に相当する。）は、タッチパネルとカラーＬＣＤ（Liquid Crystal Display）とを組み合わせたタッチパネルユニット等から構成され、各種項目に係る情報を表示するとともに、ユーザが該当部分をタッチすることにより種々の操作指令を入力するための操作ボタン類を表示する。また、タッチパネル部５３は、複数ページにわたる原稿画像を含む電子文書を表示する際に用いられる。
【００２０】
機能キー部５５は、画像形成処理に係る各種機能を選択する際にユーザによって操作される複数の機能キー、並びに、ショートカットキーを備えており、例えば、コピー機能、プリンタ機能、スキャナ機能、ファクシミリ機能など諸機能のなかから、所要機能のキー入力操作をユーザが選択的に実行する際に、又は、ユーザが複写部数やコピー実行指令などを操作入力する際に用いられる。
【００２１】
ファクシミリ通信部６１は、符号化／復号化部（図示省略）、変復調部（図示省略）及びＮＣＵ（Network Control Unit）（図示省略）を含む。ファクシミリ通信部６１は、原稿読取部２１によって読み取られた原稿の画像データを電話回線を介してファクシミリ装置等へ送信したり、ファクシミリ装置等から送信された画像データを受信する。
【００２２】
ＨＤＤ（ハードディスクドライブ）６３は、大容量記憶装置であって、原稿読取部２１によって読み取られた画像データ及び同画像データに設定されている出力形式等の種々のデータ等を記憶する。ＨＤＤに記憶されている画像データは、デジタル複合機、プログラム及び記録媒体内部で使用されるだけでなく、必要に応じて、ネットワークＩ／Ｆ部６５を介してクライアントＰＣ等から確認したり、クライアントＰＣやＦＴＰサーバ等の所定のフォルダへ転送される。
【００２３】
ネットワークＩ／Ｆ部６５は、ネットワークインタフェース（１０／１００Ｂａｓｅ−ＴＸ）等を用い、ＬＡＮ等のネットワークを介して接続されたユーザＰＣ等の外部の情報処理装置に対する種々のデータの送受信を制御する。
【００２４】
さて、文字等の記述領域に施されている修飾態様を、異なる修飾態様に置換することを通じて、ユーザの利便性向上に資する画像処理装置を提供するために、本発明実施例に係るデジタル複合機は、原稿画像に基づく画像データを取得する画像データ取得部７１と、前記画像データから文字・図形・記号若しくはこれらの組合せに係る記述領域を抽出する記述領域抽出部７３と、記述領域抽出部７３で抽出された記述領域に施されている修飾態様に係る領域を抽出する修飾領域抽出部７５と、記述領域抽出部７３で抽出された記述領域に係る記述内容、並びに、修飾領域抽出部７５で抽出された修飾領域に係る修飾態様を含む領域情報を解析する領域情報解析部７７と、修飾領域に係る修飾態様の種別にそれぞれ関連付けて、該当する記述領域に施される修飾態様を置換情報として記憶する置換情報記憶部７８と、領域情報解析部７７の解析結果と、置換情報記憶部７８の置換情報と、に基づいて、該当する記述領域に係る修飾態様を、前記置換情報に従う修飾態様に置き換えた置換画像データを生成して出力する修飾態様置換部７９と、前記置換画像データに基づく置換画像を、タッチパネル部５３の表示画面上に表示させる制御を行う表示制御部８１と、を備えて構成されている。
【００２５】
［本発明実施例に係るデジタル複合機（画像処理装置）の動作］
次に、本発明実施例に係るデジタル複合機の動作について、図２乃至図３を参照して説明する。
【００２６】
図２は、本デジタル複合機における置換処理の流を示す動作フローチャート図、図３（１）は、置換処理前の文字イメージ例を示す説明図、図３（２）は、置換処理後の文字イメージ例を示す説明図である。
【００２７】
前提として、本発明実施例に係るデジタル複合機は、複数ページにわたる紙媒体文書の原稿画像を読み取るスキャナ機能と、同スキャナ機能を活用することで複数ページにわたる原稿画像を含む電子文書（例えば、PDF :Portable Document Format 文書）を作成する電子文書作成機能と、同電子文書作成機能を活用することで作成された電子文書中の文字を認識してテキスト化するＯＣＲ(Optical Character Recognition：光学文字認識)機能と、を有しているものとする。
【００２８】
図２に示すように、原稿読取部２１における原稿自動送り装置（不図示）に、複数ページにわたる原稿がセットされた後に、同原稿の読み取り指示が操作パネル部５１を介してユーザに操作入力されると、主制御部１１は、原稿読み取りの開始信号を原稿読取部２１に送出する。これを受けて原稿読取部２１は、ページ単位で原稿読み取りを開始する。こうしてページ単位で読み取られた画像データは、原稿読取部２１から画像データ取得部７１宛に送出される。これを受けて画像データ取得部７１は、当該原稿に係る画像をページ単位で取得し（ステップ１１）、取得した画像データを、画像メモリ３７に記憶させる。
【００２９】
次いで、記述領域抽出部７３は、画像データ取得部７１で取得した画像データのなかから文字・図形・記号若しくはこれらの組合せに係る記述領域を抽出する処理を実行する（ステップＳ１２）。具体的には、記述領域抽出部７３は、例えば、本願出願人が出願し公開されている、特開2006-129203号公報に記載された（この引用により本実施例に取り込まれる。）、「原稿読取部２１のＣＣＤセンサ２５によって読取られた原稿の画像データをそれぞれ画素毎に格納する第１画像データ記憶部及び第２画像データ記憶部を含む画像メモリ３７と、第１画像データ及び第２画像データの各画素について文字画素であるか否かを判定するエッジ判定部（不図示）と、エッジ判定部による判定結果に基づいて第１画像データを文字領域と非文字領域とに分離する領域分離部（不図示）と、第１画像データの文字領域及び非文字領域毎にそれぞれ異なる画像処理を施して補正する補正部３３と、を含む画像処理部３１を備え、文字領域と非文字領域との分離を高い精度で行う」画像処理技術を採用することによって、画像データ取得部７１で取得した画像データのなかから文字等の記述領域を抽出する処理を実行する。
【００３０】
次いで、修飾領域抽出部７５は、記述領域抽出部７３で抽出された記述領域に施されている修飾態様に係る領域を抽出する処理を実行する（ステップＳ１３）。具体的には、修飾領域抽出部７５は、例えば、記述領域抽出部７３で抽出された記述領域における背景画像の色彩・濃度・パターンに着目して、前記背景画像の色彩が白地ではないとき、前記記述領域に塗りつぶしに係る修飾態様が施されているとみなして、これを抽出する。
【００３１】
次いで、領域情報解析部７７は、記述領域抽出部７３で抽出された記述領域に係る記述内容、並びに、修飾領域抽出部７５で抽出された修飾領域に係る修飾態様を含む領域情報を解析する処理を実行する（ステップＳ１４）。ステップＳ１４における領域情報解析によって、前記記述領域においてどのような文字等が記述されているか、並びに、前記修飾領域においてどのような修飾態様が施されているか、が取得される。
【００３２】
修飾態様置換部７９は、領域情報解析部７７の解析結果と、置換情報記憶部７８の置換情報と、に基づいて、該当する記述領域に係る修飾態様を、前記置換情報に従う修飾態様に置き換えた置換画像データを生成して出力する（ステップＳ１５）。ステップＳ１５における修飾態様の置換によって、記述領域に施されていた修飾態様が、置換情報に従う修飾態様に置き換えられる。具体的には、例えば、記述領域９１に対して「特許請求の範囲」に係る黒色の文字が記述され、修飾領域９３に対して黄色マーカーに係る塗りつぶし修飾が施された、図３（１）に示す文字表示イメージが、ステップＳ１５における修飾態様の置換によって、修飾領域９３（図中の二点鎖線で示す）に対する黄色マーカーに係る塗りつぶし修飾が消去される代わりに、記述領域９１における「特許請求の範囲」に係る文字の色を黄色にする修飾が施された、図３（２）に示す文字表示イメージへと置き換えられる。このように、黄色マーカーに係る塗りつぶし修飾が、黄色文字に係る修飾へと置換されるようにしたので、例えば「黄色」という色彩に対して重要度等の何らかの意味付けがなされている場合であっても、その意味に係る付加情報をそのまま維持したままで、その修飾態様を所要の態様へと変更することができる。
【００３３】
次いで、表示制御部８１は、ステップＳ１５で生成出力された置換画像データに基づく置換画像を、タッチパネル部５３の表示画面上に表示させる制御を実行し（ステップＳ１６）、かかる表示制御の実行後に、一連の置換処理を終了させる。
【００３４】
［本発明実施例の効果］
以上述べたように、本発明実施例に係る画像形成装置（画像処理装置）によれば、画像データ取得部７１は、原稿画像に基づく画像データを取得すると、取得した画像データを記述領域抽出部等に渡す。これを受けて記述領域抽出部７３は、前記画像データから文字・図形・記号若しくはこれらの組合せに係る記述領域を抽出する一方、修飾領域抽出部７５は、記述領域抽出部７３で抽出された記述領域に施されている修飾態様に係る領域を抽出する。領域情報解析部７７は、記述領域抽出部７３で抽出された記述領域に係る記述内容、並びに、修飾領域抽出部７５で抽出された修飾領域に係る修飾態様を含む領域情報を解析する。そして、修飾態様置換部７９は、領域情報解析部７７の解析結果と、置換情報記憶部７８の置換情報と、に基づいて、該当する記述領域に係る修飾態様を、前記置換情報に従う修飾態様に置き換えた置換画像データを生成して出力する。従って、例えば文字等の記述領域に施されている修飾態様を、予め置換情報で設定される所要の修飾態様に置換することが可能となる結果として、ユーザの利便性向上に資する画像形成装置（画像処理装置）を提供することができる。
【００３５】
［その他］
本発明は、上述した実施例に限られるものではなく、請求の範囲及び明細書全体から読み取れる発明の要旨、あるいは技術思想に反しない範囲で適宜変更可能であり、そのような変更を伴う画像処理装置及び画像形成装置もまた、本発明における技術的範囲の射程に包含されるものである。
【００３６】
すなわち、例えば、本発明実施例において、スキャナ機能を有するデジタル複合機（画像形成装置）を例示して説明したが、本発明はこの例に限定されることなく、スキャナ機能を有する周辺機器としての画像処理装置にも、本発明をそのまま適用することができる。
【００３７】
また、本発明実施例中、修飾態様の置換例として、黄色マーカーに係る塗りつぶし修飾が、黄色文字に係る修飾へと、色彩を共通に維持したまま置換される例をあげて説明したが、本発明はこの例に限定されることなく、例えば、黄色マーカーに係る塗りつぶし修飾が、緑色文字に係る修飾へと、色彩を異ならせて置換されるように構成してもよい。また、例えば、黄色マーカーに係る塗りつぶし修飾を、太字文字に係る修飾、イタリック文字に係る修飾、下線付加に係る修飾、文字フォントの種別・大きさの変更に係る修飾、若しくは、塗りつぶしの種別（ハッチングを含む）の変更に係る修飾、又はこれらの組合せに係る修飾へと置換するように構成してもよい。このように構成すれば、モノクロ対応の画像形成装置であっても、修飾態様の置換を簡易に実現することができる。
【図面の簡単な説明】
【００３８】
【図１】本発明実施例に係るデジタル複合機の概略構成を示す機能ブロック図である。
【図２】本デジタル複合機における置換処理の流を示す動作フローチャート図である。
【図３】図３（１）は、置換処理前の文字イメージ例を示す説明図、図３（２）は、置換処理後の文字イメージ例を示す説明図である。
【符号の説明】
【００３９】
１１  主制御部
７１  画像データ取得部
７３  記述領域抽出部
７５  修飾領域抽出部
７７  領域情報解析部
７８  置換情報記憶部
７９  修飾態様置換部
８１  表示制御部
【図１】
2010074287.tif 000003
【図２】
2010074287.tif 000004
【図３】
2010074287.tif 000005