(57)【特許請求の範囲】
【請求項１】
入力された画像情報を処理する画像処理装置であって、
対象画像領域を指示する閉曲線イメージと、該閉曲線イメージと交差し且つ該閉曲線イメージの内側或は外側のいずれを抽出するかを示すシンボルとが、前記画像情報に含まれているか否かを判断する判断手段と、
前記判断手段により閉曲線イメージとシンボルとが含まれていると判断された場合、当該閉曲線イメージとシンボルとによって指示される前記閉曲線イメージの内側或いは外側の画像を対象画像領域の画像として抽出する抽出手段と、
前記抽出手段により抽出された画像を記憶するよう制御する記憶制御手段とを有し、
前記判断手段により複数の閉曲線イメージとシンボルとが含まれており且つ該複数の閉曲線イメージが包含関係であると判断された場合、前記抽出手段は、前記包含関係にある閉曲線イメージのうち最外周の閉曲線イメージについては当該閉曲線イメージの内側が指示されているとし、且つその他の閉曲線イメージについては各閉曲線イメージに交差している各シンボルによって各閉曲線イメージの内側或いは外側のいずれかが指示されているとして、当該指示された対象画像領域の画像を抽出することを特徴とする画像処理装置。
【請求項２】
前記シンボルは矢印のイメージであり、当該矢印の指示する方向が前記対象画像領域であることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
更に、前記記憶するよう制御された画像に対して文字認識処理を行ってテキスト情報を得る文字認識手段を有することを特徴とする請求項１に記載の画像処理装置。
【請求項４】
更に、前記テキスト情報を用いて検索を行なう検索手段を有することを特徴とする請求項３に記載の画像処理装置。
【請求項５】
入力された画像情報を処理する画像処理方法であって、
対象画像領域を指示する閉曲線イメージと、該閉曲線イメージと交差し且つ該閉曲線イメージの内側或は外側のいずれを抽出するかを示すシンボルとが、前記画像情報に含まれているか否かを判断する判断工程と、
前記判断工程で閉曲線イメージとシンボルとが含まれていると判断された場合、当該閉曲線イメージとシンボルとによって指示される前記閉曲線イメージの内側或いは外側の画像を対象画像領域の画像として抽出する抽出工程と、
前記抽出工程で抽出された画像を記憶するよう制御する記憶制御工程とを有し、
前記判断工程で複数の閉曲線イメージとシンボルとが含まれており且つ該複数の閉曲線イメージが包含関係であると判断された場合、前記抽出工程では、前記包含関係にある閉曲線イメージのうち最外周の閉曲線イメージについては当該閉曲線イメージの内側が指示されているとし、且つその他の閉曲線イメージについては各閉曲線イメージに交差している各シンボルによって各閉曲線イメージの内側或いは外側のいずれかが指示されているとして、当該指示された対象画像領域の画像を抽出することを特徴とする画像処理方法。
【請求項６】
前記シンボルは矢印のイメージで、当該矢印の指示する方向が前記対象画像領域であることを特徴とする請求項５に記載の画像処理方法。
【請求項７】
更に、前記記憶するよう制御された画像に対して文字認識処理を行ってテキスト情報を得る文字認識工程を有することを特徴とする請求項５に記載の画像処理方法。
【請求項８】
更に、前記テキスト情報を用いて検索を行なう検索工程を有することを特徴とする請求項７に記載の画像処理方法。
【発明の詳細な説明】
【０００１】
【産業上の利用分野】
本発明は、画像情報の所定領域が指定されると、その指定された画像領域の画像を入力する画像処理方法及びその装置に関するものである。
【０００２】
【従来の技術】
従来より、例えば像域分離処理により、画像に含まれる文字領域と画像領域とを分離する手法がある。しかし、このような従来の手法では、画像情報に含まれる文字と画像部分とを完全に精度良く分離できないのが現状である。そこで、例えば複写機などにおいて、原稿画像の所望の領域を、マーカ等を用いて描画することにより指定し、そのマーカを用いて描画された部分を複写したり、色を変えて複写する機器等が開発されている。
【０００３】
【発明が解決しようとする課題】
しかし、このようなマーカによる領域指定は、例えば、原稿画像中のタイトルの自動抽出の補助手段に留まっている。また、そのようなマーカにより描画された曲線により囲まれた領域の外側或は内側のいずれを対象領域にするかは、オペレータがキー操作により指定することにより行っている。このように従来の領域指定では、完全な自動化には至っていない。
【０００４】
本発明は上記従来例に鑑みてなされたもので、処理対象の画像領域を簡単な方法で指定して、その画像部分を抽出できる画像処理方法及びその装置を提供することを目的とする。
【０００５】
また本発明の目的は、原稿画像にマークするだけで、原稿画像の所望の画像領域を指定して、その領域の画像を抽出できる画像処理方法及びその装置を提供することにある。
【０００６】
また本発明の他の目的は、原稿画像に閉曲線を描画し、その内側或は外側の領域を指定して、その指定された画像を入力できる画像処理方法及びその装置を提供することにある。
【０００７】
【課題を解決するための手段】
上記目的を達成するために本発明の画像処理装置は以下のような構成を備える。即ち、
入力された画像情報を処理する画像処理装置であって、
対象画像領域を指示する閉曲線イメージと、該閉曲線イメージと交差し且つ該閉曲線イメージの内側或は外側のいずれを抽出するかを示すシンボルとが、前記画像情報に含まれているか否かを判断する判断手段と、
前記判断手段により閉曲線イメージとシンボルとが含まれていると判断された場合、当該閉曲線イメージとシンボルとによって指示される前記閉曲線イメージの内側或いは外側の画像を対象画像領域の画像として抽出する抽出手段と、
前記抽出手段により抽出された画像を記憶するよう制御する記憶制御手段とを有し、
前記判断手段により複数の閉曲線イメージとシンボルとが含まれており且つ該複数の閉曲線イメージが包含関係であると判断された場合、前記抽出手段は、前記包含関係にある閉曲線イメージのうち最外周の閉曲線イメージについては当該閉曲線イメージの内側が指示されているとし、且つその他の閉曲線イメージについては各閉曲線イメージに交差している各シンボルによって各閉曲線イメージの内側或いは外側のいずれかが指示されているとして、当該指示された対象画像領域の画像を抽出することを特徴とする．
【０００８】
上記目的を達成するために本発明の画像処理方法は以下のような構成を備える。即ち、
入力された画像情報を処理する画像処理方法であって、
対象画像領域を指示する閉曲線イメージと、該閉曲線イメージと交差し且つ該閉曲線イメージの内側或は外側のいずれを抽出するかを示すシンボルとが、前記画像情報に含まれているか否かを判断する判断工程と、
前記判断工程で閉曲線イメージとシンボルとが含まれていると判断された場合、当該閉曲線イメージとシンボルとによって指示される前記閉曲線イメージの内側或いは外側の画像を対象画像領域の画像として抽出する抽出工程と、
前記抽出工程で抽出された画像を記憶するよう制御する記憶制御工程とを有し、
前記判断工程で複数の閉曲線イメージとシンボルとが含まれており且つ該複数の閉曲線イメージが包含関係であると判断された場合、前記抽出工程では、前記包含関係にある閉曲線イメージのうち最外周の閉曲線イメージについては当該閉曲線イメージの内側が指示されているとし、且つその他の閉曲線イメージについては各閉曲線イメージに交差している各シンボルによって各閉曲線イメージの内側或いは外側のいずれかが指示されているとして、当該指示された対象画像領域の画像を抽出することを特徴とする．
【０００９】
【作用】
以上の構成において、入力した画像情報に、対象画像領域を指示する閉曲線イメージと、該閉曲線イメージと交差し且つ該閉曲線イメージの内側或は外側のいずれを抽出するかを示すシンボルとが含まれているか否かを判断し、閉曲線イメージとシンボルとが含まれていると判断された場合、その閉曲線イメージとシンボルとによって指示される閉曲線イメージの内側或いは外側の画像を対象画像領域の画像として抽出し、その抽出された画像を記憶するとともに、画像情報に、複数の閉曲線イメージとシンボルとが含まれており且つ該複数の閉曲線イメージが包含関係であると判断された場合、包含関係にある閉曲線イメージのうち最外周の閉曲線イメージについては当該閉曲線イメージの内側が指示されているとし、且つその他の閉曲線イメージについては各閉曲線イメージに交差している各シンボルによって各閉曲線イメージの内側或いは外側のいずれかが指示されているとして、その指示された対象画像領域の画像を抽出するよう制御する。
【００１０】
【実施例】
以下、添付図面を参照して本発明の好適な実施例を詳細に説明する。本実施例を説明する前に、図１〜図３を参照して本実施例の概要を簡単に説明する。
【００１１】
図１（Ａ）は、閉曲線の内側を指示する場合を示し、図１（Ｂ）は、閉曲線の外側を指示する場合をそれぞれ示している。
【００１２】
更に、図２を参照してその具体例を説明する。
【００１３】
図２（Ａ）は、閉曲線で囲まれたイメージ領域２０１の外側にある黒枠を除外する例を示し、図２（Ｂ）は、閉曲線で指定された領域２０２を除外する例を示している。更に、図２（Ｃ）は、閉曲線を用いて複数の領域を指定する例を示している。
【００１４】
これら例で示すように、編集対象エリアが閉曲線の内側であるか、或は外側であるかは、この閉曲線と交差する矢印を用いて指示する方法が考えられるが、このような矢印以外にも、方向が明示できるシンボルであれば何を用いても良く、特に矢印に限定されない。
【００１５】
また、有効にしたい画像領域と、例えばＯＣＲの対象となる領域とが異なる場合には、それぞれ異なる色の矢印を用いたり、あるいは形状の異なるシンボルを用いて区別しても良い。
【００１６】
尚、領域の入れ子を許可し、領域の包含関係をも考慮した領域指定も可能である。このような領域の指定方法の例を図３に示す。
【００１７】
図３（Ａ）は、最も大きな閉曲線３０１で囲まれた領域の内側であり、且つ内側の閉曲線３０２で囲まれた領域の外側が指定され、その結果、３０３で示される領域が指定される。
【００１８】
図３（Ｂ）は、最も大きな閉曲線３０４の外側の領域で、且つ内側の閉曲線３０５で囲まれた領域の外側が指示されている。その結果、図３（Ａ）において、閉曲線３０１で囲まれた領域の外側を指定した場合と全く同じ結果になってしまう。即ち、３０６で示すように黒枠のみが残ることになる。従って、このような場合は、閉曲線３０１で囲まれた領域の内側を指定すべきだったものを、間違えてその領域の外側に指定した可能性が極めて高い。
【００１９】
図３（Ｃ）は、最も大きな閉曲線３０７で囲まれた領域の外側であり、且つ内側の閉曲線３０８で囲まれた領域の内側が指示されており、その結果、３０９で示されるように、該当する領域は存在しない。
【００２０】
従って、図３（Ｂ）、図３（Ｃ）の場合を考慮すると、領域の入れ子指定の場合には、最外周の閉曲線による領域指定は、この閉曲線の内側にするというルールにする方が合理的である。
【００２１】
以下、図４及び図５を参照して本実施例の画像処理装置の構成及び動作を、入力したイメージデータの指定された領域を抽出する処理（指定領域抽出ソフトウェア）を中心に説明する。
【００２２】
図５は本実施例の画像処理装置の構成を示すブロック図である。
【００２３】
図５において、５０２はカラーイメージスキャナで、原稿５０１を光電的に走査して読取り、その原稿画像に応じたイメージ情報を得る。この原稿５０１には、例えばマーカを用いて原稿上に領域を指定するための閉曲線５１０と、対象領域がこの閉曲線５１０の内側か外側かを指示するための矢印５１１が描画されている。５０３は指定領域抽出ソフトウェアで、本実施例の画像処理装置の制御部（ＣＰＵ）５０４に搭載され、カラーイメージスキャナ５０２より入力されるカラーイメージデータから、閉曲線５１０を用いて指定された領域のイメージデータを抽出している。５０５はＯＣＲ処理ソフトウェアで、指定領域抽出ソフトウェアにより抽出されたエリア（閉曲線５１０で囲まれた領域）のイメージデータ、或は外部記憶装置５０７に記憶されているイメージデータを入力して文字認識を行っている。
【００２４】
５０６は文書検索ソフトウェアで、外部記憶装置５０７に記憶されている文書情報（テキスト情報）、或はＯＣＲ処理ソフトウェアにより認識されて作成されたテキスト情報を入力し、それらの検索用ファイルを作成するとともに、その検索処理も行っている。５０８はキーボードやマウス等のポインティングデバイスを備えた入力部で、文書検索を指示するコマンド、文書データ或はスキャナへの読取り指示等の各種命令が入力される。外部記憶装置５０７は、イメージデータと、テキスト情報および検索用ファイルなどを記憶しており、例えばハードディスクや光ディスク等で構成される。５０９は表示装置で、オペレータへのメッセージや文書情報、読取った原稿画像、或は検索された文書テキスト、検索用コマンド及びその検索式等を表示する。
【００２５】
以上の構成に基づき、本実施例の画像処理装置におけるイメージ蓄積処理を説明する。
【００２６】
イメージデータの蓄積処理は、カラーイメージスキャナ５０２から得られたイメージ情報から、指定領域抽出ソフトウェア５０３によりＯＣＲ処理を行うように指定された領域、及びイメージ情報として外部記憶装置５０７に蓄積すべき領域を抽出する。その後、まず指定された領域のイメージ情報を外部記憶装置５０７に記憶し、一方、ＯＣＲ処理を行うように指定された領域のイメージ情報をＯＣＲ処理ソフトウェア５０６に出力する。そして、このＯＣＲ処理ソフトウェア５０５によりテキスト情報に変換されたテキスト情報は、外部記憶装置５０７に送られて記憶される。また、文書検索ソフトウェア５０６は、テキスト情報に基づいて検索用ファイルを作成し、その検索用ファイルを外部記憶装置５０７に出力して記憶する。
【００２７】
また、外部記憶装置５０７に記憶されているテキスト情報の検索は、入力部５０８から入力された検索語を文書検索ソフトウェア５０６が受取り、外部記憶装置５０７に記憶されている検索用ファイルと照合し、その結果、該当する文書アドレス情報を取り出す。こうして取り出されたテキスト情報は、表示装置５０９にイメージデータで表示される。
【００２８】
図４は、本実施例の画像処理装置における指定領域抽出のアルゴリズムの例を示すフローチャートである。但し、これは単色のマーカに対して行う処理であり、複数色の場合は、この処理が各色のマーカに対して行なわれるものとする。
【００２９】
まず、カラーイメージスキャナ５０２より入力されるイメージデータの１ラインずつが読取られ、この読取ったデータに基づいて閉曲線の抽出処理が行なわれ、この処理はステップＳ１でデータが無くなるまで行われる。
【００３０】
即ち、ステップＳ１でデータが存在する時はステップＳ３に進み、１ライン分のイメージデータを読み込む。ステップＳ４では、その読取った１ライン分のイメージデータの中に、ラインマーカで描画された線のイメージがあるか否かをみる。その線がある時はステップＳ５に進み、閉曲線の候補群と連続しているかを調べ、連続している時はステップＳ６に進み、そのマーカにより描画された線イメージを、その連続している線候補のデータに追加する。次にステップＳ７に進み、閉じている線があるかどうかを調べ、ある時はステップＳ８に進み、その閉じている閉曲線候補で囲まれた領域を指定領域として、閉曲線の座標を有効にする。またステップＳ９において、連続するマーカデータの無い閉曲線候補を破棄する。尚このとき、別々の閉曲線候補が連続している場合には、１つの閉曲線として統合する。
【００３１】
一方、ステップＳ５で閉曲線候補群との連続性が無いときはステップＳ１０に進み、これまでの閉曲線候補を破棄し、どの閉曲線候補とも連続しないデータを、新規の閉曲線候補データとして登録する（ステップＳ１１）。
【００３２】
また、前述のステップＳ４で、１ライン中にマーカ線が無い場合はステップＳ１２に進み、閉曲線候補があるかどうかをみる。存在しない時はステップＳ１に戻り、次のラインデータの読込みを行なう。
【００３３】
閉曲線候補が存在する場合はステップＳ１３に進み、閉じた線があるかどうかを調べる。閉じた線があればステップＳ１４に進み、閉じている閉曲線候補で囲まれた領域を指定領域として、閉曲線の座標を有効にして、それを保存するが、閉じていない候補は破棄する。また、閉じているものが無い時はステップＳ１３よりステップＳ１５に進み、閉曲線候補を全て破棄する。
【００３４】
またステップＳ１でデータが存在しなくなるとステップＳ２に進み、閉曲線画像データから領域の外側か、内側かを示すシンボル（例えば図５の矢印５１１）を抽出し、その結果を基に、領域の理論演算が行われ、指定された領域を決定し、その指定された領域内のイメージデータを出力する。
【００３５】
［他の実施例］
尚、本実施例は、前述の電子ファイリングシステム以外にも、例えば複写機、ファクシミリ装置などにも応用可能である。
【００３６】
また、このような領域指定方式は、カラースキャナのユーティリティ・ソフトウェアの補助機能として、画像を読み込む領域を指定するのに用いる場合にも適用可能である。
【００３７】
尚、本発明は、複数の機器から構成されるシステムに適用しても、１つの機器から成る装置に適用しても良い。また、本発明はシステム或は装置に本発明を実施するプログラムを供給することによって達成される場合にも適用できる。
【００３８】
以上説明したように本実施例によれば、原稿におけるイメージの蓄積領域、或はＯＣＲ領域を指定するのに、その原稿領域をマーカにより閉曲線を描いて囲み、その内側或は外側を指示するシンボルを記述するだけで、この領域を指定することができ、また各領域の入れ子も可能となる。これにより、簡単に領域の指定が可能となり、マーカにより領域を指定した原稿をフィーダに載置しておくだけで、単にカラーイメージスキャナでイメージを取り込むだけで、その指定された領域を抽出し、後段の処理にその領域のイメージデータを渡すことができる。
【００３９】
このように本実施例によれば、人手を介さず、自動的に必要な部分のみの画像を抽出して処理したり、或は蓄積することができる。
【００４０】
また本実施例によれば、必要な領域だけを指定し、これに対してイメージ蓄積ができるので、読取って処理するデータ量を削減でき、イメージの切り貼りやコピー等の再編集が不要となり効率的である。
【００４１】
また、こうして指定された領域のイメージデータをＯＣＲ処理することにより、必要な文書データだけをＯＣＲの対象に絞ることができる。また、こうして作成された文書データを記憶しておくことにより、不要な文書データ量を少なくできるので、複数の文書データより所望の文書データを検索する検索処理の効率も向上できる。
【００４２】
【発明の効果】
以上説明したように本発明によれば、処理対象の画像領域を簡単な方法で指定して、その画像部分を抽出できる。
【００４３】
また本発明によれば、原稿画像にマークするだけで、原稿画像の所望の画像領域を指定して、その領域の画像を抽出できる。
【００４４】
また本発明によれば、原稿画像に閉曲線を描画し、その内側或は外側の領域を指定して、その指定された画像を入力できる効果がある。
【００４５】
【図面の簡単な説明】
【図１】本発明の一実施例における領域指定方法を説明する図である。
【図２】本実施例における領域指定処理の具体例を示す図である。
【図３】本実施例における領域指定処理、及び指定領域の入れ子の具体例を説明する図である。
【図４】本実施例の画像処理装置における指定領域抽出処理を示すフローチャートである。
【図５】本発明の一実施例の画像処理装置の概略構成を示すブロック図である。
【符号の説明】
５０１  原稿
５０２  カラーイメージスキャナ
５０３  領域抽出ソフトウェア
５０５  ＯＣＲ処理ソフトウェア
５０６  文書検索ソフトウェア
５０７  外部記憶装置
５０８  入力部
５０９  表示装置
５１０  閉曲線
５１１  矢印
【図１】
0003647070.tif 000002
【図２】
0003647070.tif 000003
【図３】
0003647070.tif 000004
【図４】
0003647070.tif 000005
【図５】
0003647070.tif 000006