(57)【要約】      （修正有）【課題】入力された画像を対象に局所識別処理を行う場合に、参照領域より広い領域を持つ、大サイズの文字や写真等の部品に対しても正しい識別処理ができるようにする。【解決手段】サムネイル画像生成部から生成されたサムネイル画像信号に対して広域識別処理を行う広域識別処理部と、画像信号に対して局所的識別処理を行う局所的識別処理部と、広域識別処理部から出力された広域識別データを変倍して、広域識別データを局所的識別処理部から出力される局所識別データと同サイズの識別データを生成する変倍処理部と、変倍処理部から出力された識別データを局所的識別処理部から出力された識別データと合成する識別結果合成部と、識別結果合成部からの出力を適用して前記画像入力装置から入力された画像信号を処理する後処理部と、後処理部からの画像データを出力する画像出力部とを備える。【選択図】図１
2011045060.tif 000002
【特許請求の範囲】
【請求項１】
画像を入力するための画像入力装置と、
前記画像入力装置から入力された画像信号からサムネイル画像を生成するサムネイル画像生成部と、
前記サムネイル画像生成部から生成されたサムネイル画像信号に対して広域識別処理を行う広域識別処理部と、
前記画像入力装置から入力された画像信号に対して局所的識別処理を行う局所的識別処理部と、
前記広域識別処理部から出力された広域識別データを変倍して、前記広域識別データを前記局所的識別処理部から出力される局所識別データと同サイズの識別データを生成する変倍処理部と、
前記変倍処理部から出力された識別データを前記局所的識別処理部から出力された識別データと合成する識別結果合成部と、
前記識別結果合成部からの出力を適用して前記画像入力装置から入力された画像信号を処理する後処理部と、
前記後処理部からの画像データを出力する画像出力部とを具備することを特徴とする画像処理装置。
【請求項２】
前記サムネイル画像並びに前記画像信号の同期をとるために前記各画像信号が格納されるページメモリを有することを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記局所的識別処理部へ入力される画像信号を前処理する前処理部を有することを特徴とする請求項２記載の画像処理装置。
【請求項４】
前記広域識別処理部からの識別信号を入力する他のページメモリを有することを特徴とする請求項１乃至３のいずれか１項記載の画像処理装置。
【請求項５】
画像を入力するための画像入力装置と、
前記画像入力装置から入力された画像信号からサムネイル画像信号を生成するサムネイル画像生成部と、
前記サムネイル画像生成部から生成されたサムネイル画像信号に対して広域識別処理を行う広域識別処理部と、
前記画像入力装置から入力された画像信号を前処理する前処理部と、
前記広域識別処理部からの広域識別データ、前記サムネイル画像信号並びに前記前処理部から出力される画像信号が格納されるページメモリと、
前記ページメモリに格納された前記画像信号に対して局所的識別処理を行う局所的識別処理部と、
前記ページメモリに格納されている広域識別データを変倍して、前記広域識別データを前記局所的識別処理部から出力される局所識別データと同サイズの識別データを生成する変倍処理部と、
前記変倍処理部から出力された識別データを前記局所的識別処理部から出力された識別データと合成する識別結果合成部と、
前記識別結果合成部からの出力を適用して前記画像入力装置から入力された画像信号を処理する後処理部と、
前記後処理部からの画像データを出力する画像出力部とを具備することを特徴とする画像処理装置。
【請求項６】
前記ページメモリに格納されている前記画像信号を、前記後処理部へ入力することを特徴とする請求項２乃至５のいずれか１項記載の画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、デジタル複合機であるＭＦＰや、複写機、スキャナ等にサムネイル画像生成機能を備えた画像処理装置に関する。
【背景技術】
【０００２】
ＭＦＰや複写機、スキャナ等においては、入力された画像信号に対して適応的な処理を施すために、局所的な領域参照による識別処理によって、処理対象となる画素が文字領域であるか、網点領域であるか等を判別する。この判別結果を後処理、例えば、判別結果が文字と識別された場合にはエッジ強調処理を施し、判別結果が写真と識別された場合には階調をなめらかにする等のように、判別結果に応じて切替えて処理を行う。
【０００３】
しかしながら、参照領域より広い領域を持つ、大サイズの文字や写真等の部品に対しては、局所的識別処理によっては正しく識別できないケースがあった。
【０００４】
例えば、（１）大きな文字を文字として識別できず、写真と識別してしまうこともあった。（２）太さが変わる明朝文字などの文字の識別を均一に行えない。（３）網点（背景）と細かい文字の区別がつきにくい。すなわち、局所的識別では、粗い網点と細かい文字のピッチが近いため、区別ができない。（４）同系色背景上の文字が識別できない。すなわち、色の濃さが、クレー上の黒文字等のように違うだけだと、濃度差が少なく検出が困難である。
【０００５】
また、写真の暗部の細かい階調の違いを再現する暗部領域の階調再現を満足し、かつ、黒ロゴ文字の内部まで濃く再現する文字品質の確保するという点では、写真高濃度と文字濃度の分布が非常に近い場合には、双方の要求品質を満たすことは困難であった。
【０００６】
このため、広域を参照する識別処理、すなわち広域識別処理との組合せを行うことで、良好な画像改善を図ることも可能である。しかしながら、広域識別処理を行うためには、処理対象となる画像のスキャナ入力データを１ページ分保持したうえで、識別処理を行う必要があり、プリスキャンによってデータを保持することが必須であった。このプリスキャンによるデータ保持にあたっては、対象となる文書構造解析が必要であり、生産性の点で問題であった。更に、プリスキャンのための専用のハードウェアが必要となるのみならず、プリスキャンを行うとコピー速度が遅くなってしまい、ユーザの使用感が悪くなる。
【０００７】
一方、複合型の画像形成装置では、装置の使用履歴を把握するためや、画像の保存のため等に、入力された画像を低解像度画像に縮小したいわゆるサムネイル画像を生成する機能を有するものが知られている。このサムネイル画像は、上述のように装置の使用履歴把握のための利用や、サムネイル画像に識別用の付加情報を重畳し、付加情報を検索キーとして使用してサムネイル画像を検索するような利用がなされている。
【発明の概要】
【発明が解決しようとする課題】
【０００８】
入力された画像を対象に、局所識別処理を行う場合においては、参照領域より広い領域を持つ、大サイズの文字や写真等の部品に対しては正しい識別処理ができず、広域識別処理を行う場合においては、専用のハードウェアが必要であったり、生産性が低下する等の課題が認められる。一方、サムネイル画像の利用も一般的になっているが、低解像度画像に各種情報を付加して保存しておき、検索利用等に利用されている状況にある。
【課題を解決するための手段】
【０００９】
実施形態の画像形成装置は、画像を入力するための画像入力装置と、前記画像入力装置から入力された画像信号からサムネイル画像を生成するサムネイル画像生成部と、前記サムネイル画像生成部から生成されたサムネイル画像信号に対して広域識別処理を行う広域識別処理部と、前記画像入力装置から入力された画像信号に対して局所的識別処理を行う局所的識別処理部と、前記広域識別処理部から出力された広域識別データを変倍して、前記広域識別データを前記局所的識別処理部から出力される局所識別データと同サイズの識別データを生成する変倍処理部と、前記変倍処理部から出力された識別データを前記局所的識別処理部から出力された識別データと合成する識別結果合成部と、前記識別結果合成部からの出力を適用して前記画像入力装置から入力された画像信号を処理する後処理部、前記後処理部からの画像データを出力する画像出力部とを具備する。
【図面の簡単な説明】
【００１０】
【図１】第１の実施形態を説明するための画像処理装置のブロック構成図。
【図２】第２の実施形態を説明するための画像処理装置のブロック構成図。
【図３】第３の実施形態を説明するための画像処理装置のブロック構成図。
【図４】第４の実施形態を説明するための画像処理装置のブロック構成図。
【図５】実施形態の作用を説明するための図。
【図６】実施形態の動作を説明するための画面構成図。
【発明を実施するための形態】
【００１１】
以下に実施形態を図を参照して説明する。図１には、第１の実施形態を説明するための画像処理装置のブロック構成図を示してある。各構成、動作を説明に先立ち、図にも示してあるが各種異なる矢印について説明する。実線矢印は、画像入力装置で入力された画像信号を表し、点線矢印は、サムネイル画像信号を表し、二点鎖線矢印は、広域識別処理あるいは局所識別処理を行った出力信号である識別信号を表し、ドット線矢印は、各種のコントロール信号をそれぞれ表している。これらの表示は、他の実施形態を説明するための図においても、共通に使用されている。
【００１２】
図１に示すように、画像入力装置１１から入力された画像信号は２分され、一方はサムネイル画像生成部１２に入力され、低解像度画像であるサムネイル画像が生成される。生成されたサムネイル画像信号はページメモリ１３に記憶される。また、２分された画像信号の他方は、直接ページメモリ１３に記憶される。なお、サムネイル画像信号並びに画像信号は、ページメモリ１３を介してハードディスクメモリ（ＨＤＤ）１４へ格納され、必要に応じて読み出される。
【００１３】
ＨＤＤ１４へ格納されたサムネイル画像信号は、先に説明したように、各種の付加情報が付与されて格納されることになり、以後の種々の利用のために保存されることになる。そして、保存されているサムネイル画像は、以後の装置の使用履歴の把握や、保存画像データの検索等の利用に供せられることになる。
【００１４】
本発明の実施形態においては、図１に示すように、生成された低解像度画像であるサムネイル画像信号は、ページメモリ１３を介して広域識別処理部１５へ入力される。また、画像入力装置１１から分かれた画像信号は、ページメモリ１３を介して局所的識別処理部１６へ入力される。サムネイル画像信号並びに画像信号ともに、ページメモリ１３を介してそれぞれの識別処理部へ入力しているが、これは、サムネイル画像信号が低解像度化すなわち縮小されているため、元画像である画像信号とはデータサイズが異なり、ハードウェアで処理する際のタイミングを合わせる必要があるからである。
【００１５】
サムネイル画像生成部１２からのサムネイル画像信号は、上述したように広域識別処理部１５へ入力され、広域識別処理が実行される。この広域識別処理は、画像入力装置１１への入力原稿のそれぞれが、小さい文字領域、ロゴのような大きい文字領域、写真領域、背景が白でない領域、表、グラフ、地図等、複数の領域に分離される。写真であれば「０」、細かい文字であれば「１」、ロゴであれば「２」、表であれば「３」、グラフであれば「４」、色文字であれば「５」、色のついた背景であれば「６」、白の背景であれば「７」、というように個々の注目画素がどの領域に属するかを数値に置き換える。
【００１６】
一方、ページメモリ１３からの画像信号は、局所的識別処理部１６へ入力される。局所的識別処理部１６では、入力されたデータから最大でも１〜２ｍｍ四方程度のサイズで注目画素がどのような領域に属しているのかを判定する。広域識別処理と同じように文字、写真、背景等に分離・識別される。
【００１７】
上述したサムネイル画像信号に基づいて広域識別処理部１５にて識別処理されたデータは、変倍処理部１７に入力され、画像信号と同じ解像度まで変倍、すなわち拡大される。変倍された広域処理部１５からの識別信号は、局所的識別処理部１６からの識別信号とともに識別結果合成部１８へ入力され、２つの信号を合成して１つの信号となり、この最終識別結果信号を適用して画像入力装置１１から入力された画像信号を処理する後処理部１９へ入力される。
【００１８】
なお、画像信号は、ページメモリ１３から直接後処理部１９へ入力され、色変換、色調整、ノイズ除去、エッジ強調、墨入れ、階調補正、階調処理等が施される。識別結果合成部１８から後処理部１９に入力された最終識別結果信号も、後処理部１９において、先の画像信号対象の処理と合わせて、フィルタ処理、色調整処理、墨入れ、階調補正、階調処理に適用され、識別結果に対応して対象に適した処理を施す。例えば、写真部であれば、階調再現を良くし、ノイズ除去を行う。ロゴ文字であれば、くっきりと出力する等の処理がなされる。後処理部１９からの出力信号は、画像出力部２０から画像情報として出力される。また、図１において、各種処理部などへ制御部２１からドット線で表したコントロール信号が入力されているが、この制御部２１は、いわゆるコントロールパネルからの指示信号を含め、図示していないがＣＰＵ等から各種信号を出力するものである。
【００１９】
このように、いままで画像信号を低解像度化したサムネイル画像は、各種付加情報を付与してうえで、保存しおき、後日の装置履歴の調査のためや、付加情報を検索キーとしての検索調査のために利用されてきたが、上記説明のようにこの低解像度化されたサムネイル画像信号を広域識別処理に利用することによって、例えば、太い文字画像の場合に、局所的識別処理によっては、これを文字とは識別できず塗りつぶされた画像領域と識別するところ、サムネイル画像を利用して太文字であればこれを正しく文字と識別することが可能となった。
【００２０】
これにより、このサムネイル画像を用いた広域識別処理結果と元画像である画像信号を用いた局所的識別処理結果を合成することで、より正確な画像識別を可能とした。さらに、このよう広域識別処理は、特段の新たな装置を付加する必要もなく、保存、検索などを目的とした低解像度化したサムネイル画像を転用することによって、リアルタイム処理をも可能とした。また、プリスキャンを使用して処理を行ったり、ソフト処理で識別処理を行う場合に比べ、既存の低解像度のサムネイル画像を転用することで、処理スピードの向上と良好な画質の双方を満足する画像処理装置を提供可能とした。
【００２１】
以下に図２〜図４を用いて他の実施形態を説明するが、図１と同一箇所は同一符号をもってその詳細な説明は省略する。図２は、第２の実施形態を説明するための図であるが、図１と異なるところは、画像入力装置１１から出力された画像信号が前処理部２２を介してページメモリ１３へ入力されている点である。画像データをページメモリ１３へ入力する前に前処理部２２にて、ページメモリ１３やＨＤＤ１４へ画像データを格納する際に、データ量を低減させるために、圧縮処理をかけたり、圧縮時のデータ量低減のためのノイズ除去、下地除去を目的に、圧縮処理、下地除去処理、フィルタ処理等を行う。なお、図２のサムネイル画像生成部１２に入力される信号は、前処理部２２から出力された信号であってもよい。
【００２２】
図３は、第３の実施形態を説明するための図である。第１、第２の実施形態では、広域識別処理からの出力信号は、変倍処理部１７へ出力する構成であったが、図３に示す構成では、広域識別処理部１５からの識別結果データを変倍処理部１７へ入力するとともに、他のページメモリ２３介してＨＤＤ１４へ格納するようにした。これにより、広域識別処理の出力結果をＨＤＤ１４に保存しておくことにより、コピー以外に、スキャンデータを機体内に保存しておき、必要な場合にプリントアウトしたり、他の利用に供することを可能とした。
【００２３】
図４は、第４の実施形態を説明するための図である。この実施形態においては、画像入力装置１１からの画像信号をサムネイル画像生成部１２に入力し出力されたサムネイル画像を直接広域識別処理部１５へ入力して前述した広域識別処理を行い、その識別結果をページメモリ１３へ格納するとともに、ＨＤＤ１４へも格納する。そして、ページメモリ１３から変倍処理部１５へ入力する構成である。
【００２４】
この実施形態によって、図３に示した別途のページメモリ２３を設置することなく、ＨＤＤ１４への保存を可能とした。また、図１〜図３までの実施形態においては、サムネイル画像生成部１２からの出力データは全てページメモリ１３を介してＨＤＤ１４に保存することができ、従前からデータ保存や検索のために利用されているサムネイル画像の保存を可能としていた。
【００２５】
しかしながら、図４の構成では、サムネイル画像生成部１２からの出力信号を広域識別処理部１５のみへ入力したのでは、前述した従前からのサムネイル画像の利用を阻害することになることから、図４の実施形態では、サムネイル画像生成部１２からの出力画像信号は、分岐して直接ページメモリ１３を介してＨＤＤ１４へ保存できるように構成した。
【００２６】
次に図５に示した表を参照して上述した広域的識別処理結果と局所的識別結果の組合せ例を説明する。すなわち、図の表の縦軸欄には広域的識別結果を、横軸欄には局所的識別結果を示し、それぞれの交点の欄に両識別結果を合成した結果を示したものである。すなわち、例えば、広域的識別結果が下地領域で局所的識別結果が文字の場合には、合成された画像出力は、文字となる。また、広域的識別結果が図・グラフで、局所的識別結果が文字の場合には、合成された結果は線・文字となる。
【００２７】
図６には、ユーザが識別処理に際して、調整レベルを設定するためのコントロールパネル２３の入力インターフェイス例を示した。すなわち、原稿種類選択項目として、文字／写真混在、写真重視、文字重視を選択でき、識別レベル調整としては、写真寄り、文字寄りの程度を調整選択可能な入力例を示したものである。
【符号の説明】
【００２８】
１１…画像入力装置、１２…サムネイル画像生成部、１３、２３…ページメモリ、１４…ＨＤＤ、１５…広域識別処理部、１６…局所的識別処理部、１７…変倍処理部、１８…識別結果合成部、１９…後処理部、２０…画像出力部、２１…制御部、２２…前処理部、２３…コントロールパネル。
【図１】
2011045060.tif 000003
【図２】
2011045060.tif 000004
【図３】
2011045060.tif 000005
【図４】
2011045060.tif 000006
【図５】
2011045060.tif 000007
【図６】
2011045060.tif 000008