(57)【要約】【課題】印刷などによって作成された資料に対して他の情報が物理的に付加された後に、短時間で他の情報を除去して元データを復元する。【解決手段】資料データ復元装置は、スキャナなどから画像データを入力する画像入力部１と、画像入力部１に入力された画像データの画素値が所定の濃度値以下である比率が所定のしきい値以上である処理対象領域を検出する処理対象領域検出部２と、処理対象領域検出部２が検出した処理対象領域を対象として、文字データを抽出し、抽出した文字データから手書き文字データを検出する文字検出部３と、処理対象領域検出部２が検出した処理対象領域から文字検出部３が抽出した文字データを除外した領域を対象として、手書き図形データを検出する図形検出部４とを備えている。【選択図】図１
2009212655.tif 000002
【特許請求の範囲】
【請求項１】
画像データを入力する画像入力部と、
前記画像入力部に入力された画像データの画素値が所定の濃度値以下である比率が所定のしきい値以下である処理対象領域を検出する処理対象領域検出部と、
前記処理対象領域検出部が検出した処理対象領域を対象として、文字データを抽出し、抽出した文字データから手書き文字データを検出する文字検出部と、
前記処理対象領域検出部が検出した処理対象領域から前記文字検出部が抽出した文字データを除外した領域を対象として、手書き図形データを検出する図形検出部と、
前記文字検出部が検出した手書き文字データおよび前記図形検出部が検出した手書き図形データとからなる手書きデータと、前記画像入力部に入力された画像データにおける当該手書き文字データおよび当該手書き図形データ以外のデータである資料データとを区別可能に保存する記憶部とを備えた
ことを特徴とする資料データ復元装置。
【請求項２】
画像データを入力する画像入力部と、
前記画像入力部に入力された画像データの画素値が所定の濃度値以下である比率が所定のしきい値以下である処理対象領域を検出する処理対象領域検出部と、
前記処理対象領域検出部が検出した処理対象領域を対象として、文字データを抽出し、抽出した文字データから手書き文字データを検出する文字検出部と、
前記処理対象領域検出部が検出した処理対象領域から前記文字検出部が抽出した文字データを除外した領域を対象として、手書き図形データを検出する図形検出部と、
前記文字検出部が検出した手書き文字データおよび前記図形検出部が検出した手書き図形データとからなる手書きデータと、前記画像入力部に入力された画像データにおける当該手書き文字データおよび当該手書き図形データ以外のデータである資料データとを区別可能に出力する出力部とを備えた
ことを特徴とする資料データ復元装置。
【請求項３】
出力部は、手書きデータにもとづく画像と、資料データにもとづく画像とを独立して出力する
請求項２記載の資料データ復元装置。
【請求項４】
出力部は、印刷装置である
請求項３記載の資料データ復元装置。
【請求項５】
文字検出部は、
処理対象領域を対象として、文字データを検出する文字データ切り出し部と、
前記文字データ切り出し部が検出した文字データを活字辞書に記憶されている活字データと比較することによって手書きデータを検出する辞書比較部とを含む
請求項１から請求項４のうちのいずれか１項に記載の資料データ復元装置。
【請求項６】
図形検出部は、
処理対象領域中の手書き文字データおよび活字データを除いたデータにおける屈曲箇所を検出する屈曲検出部と、
前記屈曲検出部が検出した屈曲箇所にもとづいて手書き図形を検出する手書き図形サーチ部とを含む
請求項１から請求項５のうちのいずれか１項に記載の資料データ復元装置。
【請求項７】
入力された画像データの画素値が所定の濃度値以下である比率が所定のしきい値以下である処理対象領域を検出する処理対象領域ステップと、
前記処理対象領域検出ステップで検出された処理対象領域を対象として、文字データを抽出し、抽出した文字データから手書き文字データを検出する文字検出ステップと、
前記処理対象領域検出部ステップで検出された処理対象領域から前記文字検出ステップで抽出された文字データを除外した領域を対象として、手書き図形データを検出する図形検出ステップと、
前記文字検出ステップで検出された手書き文字データおよび前記図形検出ステップで検出された手書き図形データとからなる手書きデータと、前記入力された画像データにおける当該手書き文字データおよび当該手書き図形データ以外のデータである資料データとを区別可能に記憶部に保存する保存ステップとを含む
ことを特徴とする資料データ復元方法。
【請求項８】
入力された画像データの画素値が所定の濃度値以下である比率が所定のしきい値以下である処理対象領域を検出する処理対象領域ステップと、
前記処理対象領域検出ステップで検出された処理対象領域を対象として、文字データを抽出し、抽出した文字データから手書き文字データを検出する文字検出ステップと、
前記処理対象領域検出部ステップで検出された処理対象領域から前記文字検出ステップで抽出された文字データを除外した領域を対象として、手書き図形データを検出する図形検出ステップと、
前記文字検出ステップで検出された手書き文字データおよび前記図形検出ステップで検出された手書き図形データとからなる手書きデータと、前記入力された画像データにおける当該手書き文字データおよび当該手書き図形データ以外のデータである資料データとを区別可能に出力する出力ステップとを含む
ことを特徴とする資料データ復元方法。
【請求項９】
コンピュータに、
入力された画像データの画素値が所定の濃度値以下である比率が所定のしきい値以下である処理対象領域を検出する処理対象領域処理と、
前記処理対象領域検出処理で検出された処理対象領域を対象として、文字データを抽出し、抽出した文字データから手書き文字データを検出する文字検出処理と、
前記処理対象領域検出部処理で検出された処理対象領域から前記文字検出処理で抽出された文字データを除外した領域を対象として、手書き図形データを検出する図形検出処理と、
前記文字検出処理で検出された手書き文字データおよび前記図形検出処理で検出された手書き図形データとからなる手書きデータと、前記入力された画像データにおける当該手書き文字データおよび当該手書き図形データ以外のデータである資料データとを区別可能に記憶部に保存する保存処理と
を実行させるための資料データ復元プログラム。
【請求項１０】
コンピュータに、
入力された画像データの画素値が所定の濃度値以下である比率が所定のしきい値以下である処理対象領域を検出する処理対象領域処理と、
前記処理対象領域検出処理で検出された処理対象領域を対象として、文字データを抽出し、抽出した文字データから手書き文字データを検出する文字検出処理と、
前記処理対象領域検出部処理で検出された処理対象領域から前記文字検出処理で抽出された文字データを除外した領域を対象として、手書き図形データを検出する図形検出処理と、
前記文字検出処理で検出された手書き文字データおよび前記図形検出処理で検出された手書き図形データとからなる手書きデータと、前記入力された画像データにおける当該手書き文字データおよび当該手書き図形データ以外のデータである資料データとを区別可能に出力する出力処理と
を実行させるための資料データ復元プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理を行う方式に関し、特に、印刷などによって作成された資料に対して他の情報が物理的に付加された後に、他の情報を除去して元データを復元する資料データ復元装置、資料データ復元方法および資料データ復元プログラムに関する。
【背景技術】
【０００２】
各種展示会で配付された印刷物や、会議等の参加者に配付される資料に対して、展示会に赴いた人や会議の参加者が手書きでメモ等を記入することは一般になされることである。また、その後に、展示会に赴いていない人（他者とする。）に対して、展示会に赴いた人（当事者とする。）が配付された印刷物を回覧したり、会議等の非参加者（他者とする。）に対して、会議等の参加者（当事者とする。）が配付された資料等を渡すこともよくあることである。
【０００３】
当事者が他者に印刷物等を回覧する場合に、各種展示会や会議等で配付された資料を、著作権を侵害しない限り、複写して他者に回覧したり他者に渡すことも、しばしば行われている。また、各種展示会や会議等で配付された資料の内容をスキャナで読み取った後、電子データに変換して、電子メール等で他者に配付することも、しばしば行われている。
【０００４】
当事者が各種展示会や会議等で配付された資料に対してメモ等を記入した後に、資料を複写したり電子データ化すると、メモ等も合わせて複写されたり電子データに含まれたりすることになる。当事者が資料を複写したり電子データ化する前にメモ等を消去すれば、オリジナルの資料の内容が他者に配付されるが、メモ等を容易に消せない場合には、一般に、当事者は、メモ等を消去する作業を行わない。
【０００５】
また、資料の内容をスキャナで読み取った後、資料の電子データをパーソナルコンピュータに入力し、パーソナルコンピュータの表示部に資料の内容を表示させ、表示された資料の内容を目視しながら、パーソナルコンピュータにおいてメモ等の部分を消去する作業を行うことは可能である。しかし、そのような作業では、人手によって消去箇所が指定されることになる。すると、メモ等の近傍のオリジナル部分も消去されてしまう可能性がある。また、消去し忘れが生ずる可能性もある。
【０００６】
結局、当事者が他者に資料を配付するときに、当事者が記入したメモ等が残ったまま他者に配付される可能性が残る。すると、配付を受けた他者が、当事者が記入したメモ等を、資料のオリジナル部分と誤認する可能性があることになる。
【０００７】
活字と手書き文字が混在した文書を対象として、活字部分と手書き部分とを分離する技術がある（例えば、特許文献１参照）。また、印刷物に対して手書きされた図形を認識する技術がある（例えば、特許文献２参照）。
【０００８】
【特許文献１】特開２００６−９２３４５号公報（段落０００２，００１０、図１，図４）
【特許文献２】特開２００７−２４１３５７号公報（段落０００２−０００６、図１）
【発明の開示】
【発明が解決しようとする課題】
【０００９】
しかし、特許文献１に記載された方式では、スキャナ等の画像入力部から入力された文書データ全体を対象として活字部分と手書き部分との判別が行われている。また、特許文献２に記載された方式でも、画像読み取り部で得られた画像データ全体を対象として手書きされた図形を認識する処理が施されている。
【００１０】
すると、活字部分と手書き部分との判別を行う装置、および手書きされた図形を認識する装置が、文書データまたは画像データが入力されてから結果を出力するまでに長時間を要する。
【００１１】
そこで、本発明は、印刷などによって作成された資料に対して他の情報が物理的に付加された後に、短時間で他の情報を除去して元データを復元することができる資料データ復元装置、資料データ復元方法および資料データ復元プログラムを提供することを目的とする。
【課題を解決するための手段】
【００１２】
本発明による資料データ復元装置は、画像データを入力する画像入力部と、画像入力部に入力された画像データの画素値が所定の濃度値以下である比率が所定のしきい値以上である処理対象領域を検出する処理対象領域検出部と、処理対象領域検出部が検出した処理対象領域を対象として、文字データを抽出し、抽出した文字データから手書き文字データを検出する文字検出部と、処理対象領域検出部が検出した処理対象領域から文字検出部が抽出した文字データを除外した領域を対象として、手書き図形データを検出する図形検出部と、文字検出部が検出した手書き文字データおよび図形検出部が検出した手書き図形データとからなる手書きデータと、画像入力部に入力された画像データにおける手書き文字データおよび手書き図形データ以外のデータである資料データとを区別可能に保存する記憶部とを備えたことを特徴とする。
【００１３】
本発明による他の態様の資料データ復元装置は、画像データを入力する画像入力部と、画像入力部に入力された画像データの画素値が所定の濃度値以下である比率が所定のしきい値以上である処理対象領域を検出する処理対象領域検出部と、処理対象領域検出部が検出した処理対象領域を対象として、文字データを抽出し、抽出した文字データから手書き文字データを検出する文字検出部と、処理対象領域検出部が検出した処理対象領域から文字検出部が抽出した文字データを除外した領域を対象として、手書き図形データを検出する図形検出部と、文字検出部が検出した手書き文字データおよび図形検出部が検出した手書き図形データとからなる手書きデータと、画像入力部に入力された画像データにおける手書き文字データおよび手書き図形データ以外のデータである資料データとを区別可能に出力する出力部とを備えたことを特徴とする。
【００１４】
本発明による資料データ復元方法は、入力された画像データの画素値が所定の濃度値以下である比率が所定のしきい値以上である処理対象領域を検出する処理対象領域ステップと、処理対象領域検出ステップで検出された処理対象領域を対象として、文字データを抽出し、抽出した文字データから手書き文字データを検出する文字検出ステップと、処理対象領域検出部ステップで検出された処理対象領域から文字検出ステップで抽出された文字データを除外した領域を対象として、手書き図形データを検出する図形検出ステップと、文字検出ステップで検出された手書き文字データおよび図形検出ステップで検出された手書き図形データとからなる手書きデータと、入力された画像データにおける手書き文字データおよび手書き図形データ以外のデータである資料データとを区別可能に記憶部に保存する保存ステップとを含むことを特徴とする。
【００１５】
本発明による他の態様の資料データ復元方法は、入力された画像データの画素値が所定の濃度値以下である比率が所定のしきい値以上である処理対象領域を検出する処理対象領域ステップと、処理対象領域検出ステップで検出された処理対象領域を対象として、文字データを抽出し、抽出した文字データから手書き文字データを検出する文字検出ステップと、処理対象領域検出部ステップで検出された処理対象領域から文字検出ステップで抽出された文字データを除外した領域を対象として、手書き図形データを検出する図形検出ステップと、文字検出ステップで検出された手書き文字データおよび図形検出ステップで検出された手書き図形データとからなる手書きデータと、入力された画像データにおける手書き文字データおよび手書き図形データ以外のデータである資料データとを区別可能に出力する出力ステップとを含むことを特徴とする。
【００１６】
本発明による資料データ復元プログラムは、コンピュータに、入力された画像データの画素値が所定の濃度値以下である比率が所定のしきい値以上である処理対象領域を検出する処理対象領域処理と、処理対象領域検出処理で検出された処理対象領域を対象として、文字データを抽出し、抽出した文字データから手書き文字データを検出する文字検出処理と、処理対象領域検出部処理で検出された処理対象領域から文字検出処理で抽出された文字データを除外した領域を対象として、手書き図形データを検出する図形検出処理と、文字検出処理で検出された手書き文字データおよび図形検出処理で検出された手書き図形データとからなる手書きデータと、入力された画像データにおける手書き文字データおよび手書き図形データ以外のデータである資料データとを区別可能に記憶部に保存する保存処理とを実行させることを特徴とする。
【００１７】
本発明による他の態様の資料データ復元プログラムは、コンピュータに、入力された画像データの画素値が所定の濃度値以下である比率が所定のしきい値以上である処理対象領域を検出する処理対象領域処理と、処理対象領域検出処理で検出された処理対象領域を対象として、文字データを抽出し、抽出した文字データから手書き文字データを検出する文字検出処理と、処理対象領域検出部処理で検出された処理対象領域から文字検出処理で抽出された文字データを除外した領域を対象として、手書き図形データを検出する図形検出処理と、文字検出処理で検出された手書き文字データおよび図形検出処理で検出された手書き図形データとからなる手書きデータと、入力された画像データにおける手書き文字データおよび手書き図形データ以外のデータである資料データとを区別可能に出力する出力処理とを実行させることを特徴とする。
【発明の効果】
【００１８】
本発明によれば、印刷などによって作成された資料に対して他の情報が物理的に付加された後に、短時間で他の情報を除去して元データを復元することができる。
【発明を実施するための最良の形態】
【００１９】
以下、本発明の実施形態を図面を参照して説明する。
【００２０】
図１は、本発明による資料データ復元装置の主要構成を示すブロック図である。図１に示す資料データ復元装置は、スキャナなどから画像データを入力する画像入力部１と、画像入力部１に入力された画像データの画素値が所定の濃度値以下である比率が所定のしきい値以上である処理対象領域（例えば、所定の濃度値が０（＝白とする）である場合には、白画素数の割合が所定値以上）を検出する処理対象領域検出部２と、処理対象領域検出部２が検出した処理対象領域を対象として、文字データを抽出し、抽出した文字データから手書き文字データを検出する文字検出部３と、処理対象領域検出部２が検出した処理対象領域から文字検出部３が抽出した文字データを除外した領域を対象として、手書き図形データを検出する図形検出部４と、文字検出部３が検出した手書き文字データおよび図形検出部４が検出した手書き図形データとからなる手書きデータと、画像入力部１に入力された画像データにおける手書き文字データおよび手書き図形データ以外のデータである資料データとを区別可能に保存する記憶部５とを備えている。
【００２１】
文字検出部３は、例えば、処理対象領域を対象として、文字データを検出する文字データ切り出し部３１と、文字データ切り出し部３１が検出した文字データを活字辞書に記憶されている活字データと比較することによって手書きデータを検出する辞書比較部３２とを含む。また、図形検出部４は、処理対象領域中の手書き文字データおよび活字データを除いたデータにおける屈曲箇所を検出する屈曲検出部４１と、屈曲検出部４１が検出した屈曲箇所にもとづいて手書き図形を検出する手書き図形サーチ部４２とを含む。
【００２２】
図２は、本発明による資料データ復元装置の他の例の主要構成を示すブロック図である。図２に示す資料データ復元装置は、スキャナなどから画像データを入力する画像入力部１と、画像入力部１に入力された画像データの画素値が所定の濃度値以下である比率が所定のしきい値以上である処理対象領域を検出する処理対象領域検出部２と、処理対象領域検出部２が検出した処理対象領域を対象として、文字データを抽出し、抽出した文字データから手書き文字データを検出する文字検出部３と、処理対象領域検出部２が検出した処理対象領域から文字検出部３が抽出した文字データを除外した領域を対象として、手書き図形データを検出する図形検出部４と、文字検出部３が検出した手書き文字データおよび図形検出部４が検出した手書き図形データとからなる手書きデータと、画像入力部１に入力された画像データにおける手書き文字データおよび手書き図形データ以外のデータである資料データとを区別可能に出力する印刷装置（プリンタ）などの出力部６とを備えている。
【００２３】
なお、図１および図２に示された資料データ復元装置は、例えば、パーソナルコンピュータなどの情報処理装置で実現される。情報処理装置で実現される場合、処理対象領域検出部２、文字検出部３および図形検出部４の機能は、プログラムに従って処理を実行する情報処理装置におけるＣＰＵで実現される。
【００２４】
次に、資料データ復元方法の一例を、図３〜５の説明図を参照して説明する。図３は、手書き文字および手書き図形の消去方法の概要を示す説明図である。図３における（Ａ）に示すように、資料における文字や図形等が印刷された印刷領域１００に、印刷済みの印刷文字（図３に示す例では「１２月１３日提出」）１０１に加えて、当事者が、手書き図形（図３に示す例では、曲線）１０２と、手書き文字（（図３に示す例では「重要」）１０３とを手書きで書き込んだとする。
【００２５】
手書き図形１０２と手書き文字１０３とを除去する場合には、画像読取装置（スキャナ）２０で、資料の内容を読み取らせ、画像読取装置２０に画像データを生成させる。そして、画像読取装置２０が生成した画像データを資料データ復元装置に入力させる。
【００２６】
資料データ復元装置は、図１および図２に例示されたように、手書き文字認識機能５１を有する文字検出部３を備えている。文字検出部３は、手書き文字認識機能５１によって、入力された画像データから手書き文字データを分離する。
【００２７】
また、資料データ復元装置は、図１および図２に例示されたように、手書き図形認識機能５２を有する図形検出部４を備えている。図形検出部４は、手書き図形認識機能５２によって、文字データが除去された画像データから手書き図形データを分離する。
【００２８】
図３に示す例では、図形検出部４の出力は、１つは手書き文字データと手書き図形データとを含む画像データであり、もう１つは、手書き文字データおよび手書き図形データが分離された（除去された）画像データである。図形検出部４の２つの出力が印刷装置等の出力装置５３に供給されると、出力装置５３は、図３における（Ｂ）に示すように、手書き文字データと手書き図形データとを含む画像データにもとづく画像を出力するとともに、図３における（Ｃ）に示すように、手書き文字データおよび手書き図形データが除去された画像データにもとづく画像を出力する。図３における（Ｂ）に示す出力物には、手書き図形１０２および手書き文字１０３が現れている。図３における（Ｃ）に示す出力物には、手書き文字１０２および手書き図形が１０３が除去されて印刷文字１０１のみが残っている。すなわち、図３における（Ｃ）に示す出力物は、手書き文字１０２および手書き図形が１０３が除去された復元データの画像である。
【００２９】
当事者は、図３における（Ｃ）に示す出力物を配付することによって、入手した資料（手書きが入る前のもの）を配付することができることになる。
【００３０】
図４は、手書き文字の消去方法の詳細な一例を示す説明図である。ここでも、図３における（Ａ）に示されたような資料を例にする。すなわち、図４における（Ａ）に示すように、資料における文字や図形等が印刷された印刷領域１００に、印刷済みの印刷文字（図４に示す例では「１２月１３日提出」）１０１に加えて、当事者が、手書き図形（図４に示す例では、曲線）１０２と、手書き文字（（図４に示す例では「重要」）１０３とを手書きで書き込んだとする。
【００３１】
図４における（Ｂ）に示すように、文字については、画像データ（スキャナ等で読み取られた後に生成された画像データ）から１文字ずつの文字検出を行い、１文字単位で抽出する方法を用いる。なお、図１や図２に示された構成では、文字データ切り出し部３１が、文字を抽出する。また、文字抽出は、文字認識方法にもとづいて実行されるが、画像データから文字を認識する文字認識方法として公知のいずれの方法を用いてもよい。
【００３２】
次いで、抽出された文字（具体的には、文字部分と判定された領域の画像データ、すなわち文字データ）を、活字辞書（フォントデータ記憶部５４）に記憶されているフォントデータと比較する。フォントデータ記憶部５４には、あらかじめ複数種類のフォントの各文字のデータがフォントデータとして格納されている。図１や図２に示された構成では、辞書比較部３２が、抽出された文字データとフォントデータとを比較する。なお、この実施形態では、フォントデータ記憶部５４に記憶されているフォントデータによる文字サイズは１種類である（その文字サイズを、以下、既定サイズという。）。そこで、辞書比較部３２は、抽出された文字データのサイズを既定サイズに規格化する処理を実行する。具体的には、文字データが２値で表されているとすると、黒画素が存在している領域のサイズを既定サイズにするために、縮小（画素間引き）または拡大（画素補間）の処理を行う。
【００３３】
その後、実際に抽出された文字データとフォントデータとの比較処理を行うのであるが、比較処理として、例えば、以下の方法を用いることができる。
【００３４】
すなわち、文字データによる文字が存在する領域である文字領域とフォントデータによる文字が存在する領域であるフォント領域のそれぞれを複数の格子で分割し、分割して得られる文字領域における各分割領域を、分割して得られるフォント領域における分割領域のうちの対応するものと比較する。そして、一致（例えば、黒画素数の差が所定値以下の場合）する分割領域数が所定の割合（例えば、全分割領域数の９０％）である場合に、文字データがフォントデータと一致したと判定する。
【００３５】
辞書比較部３２は、文字データがいずれのフォントデータとも一致していないと判定した場合には、文字データを手書き文字データであるとみなす。そして、手書き文字データを出力するとともに、入力された画像データから文字検出部３が検出した文字データが除去された画像データを出力する。なお、除去の方法として、手書き図形データを白画素に置き換えることが考えられる。
【００３６】
図４に示す例では、資料中に、「重要」の手書き文字１０３が存在するが、文字データ切り出し部３１によって「重」の領域１０３Ａの文字と「要」の領域１０３Ｂの文字とが抽出されるが、領域１０３Ａの文字の文字データが、いずれのフォントデータとも一致しなかったことが例示されている。また、印刷文字１０１についても、１文字ずつ抽出され、各文字の文字データについて各フォントデータと比較されるが、文字データ（図４における（Ｃ）に示す例では「３」）がいずれかのフォントデータと一致したことが例示されている。なお、図４における（Ｃ）では、分割領域数が４である場合が例示されているが、実際には、分割領域数を、求められる精度に応じて、もっと多くする。
【００３７】
図４における（Ｄ）には、印刷領域１００に、手書き文字データが除去された後の画像データ（印刷文字１０１のみが残された画像データ）にもとづく画像が表示されている例が示されている。なお、図４における（Ｄ）では、手書き図形１０２については省略されている。
【００３８】
図５は、手書き図形の消去方法の詳細な一例を示す説明図である。ここでも、図３における（Ａ）に示されたような資料を例にする。すなわち、図５における（Ａ）に示すように、資料における文字や図形等が印刷された印刷領域１００に、印刷済みの印刷文字（図５に示す例では「１２月１３日提出」）１０１に加えて、当事者が、手書き図形（図５に示す例では、曲線）１０２と、手書き文字（（図５に示す例では「重要」）１０３とを手書きで書き込んだとする。
【００３９】
図形検出部４は、文字検出部３が画像データから文字データ（印刷文字データおよび手書き文字データ）を除外した後に、手書き図形を検出する。すなわち、図５における（Ｂ）に示すように文字が除去された画像を対象として図形認識処理が実行される。
【００４０】
図１や図２に示された屈曲検出部４１は、図５における（Ｃ）に示すように、画像データから、連続する画像領域における屈曲点（頂点に加えて端点も含む。）を検出する。連続する画像領域とは、画像データが２値で表されている場合には複数の黒画素が所定方向で接している狭い幅部分である。
【００４１】
屈曲検出部４１は、例えば、連続する画像領域における連続画素の繋がり方向ベクトルを求める。そして、図５における（Ｄ）に示すように、方向ベクトルの方向が急変する箇所を頂点とする。次いで、各頂点（端点も含む。）間を通る線分１０３を仮定する。なお、図５における（Ｄ）には、２つの端点間の線分１０３が例示されているが、屈曲検出部４１は、例えば、連続する画像領域における最左の部分１０４の中央と最右の部分１０５の中央との間を、線分１０３としてもよい。その他、手書き図形１０２の大まかな延長方向を定めることができれば、他の方法で線分１０３を設定してもよい。
【００４２】
手書き図形サーチ部４２は、線分１０３と各頂点との間の距離の絶対値を算出する。そして、算出した各値の総和が所定値以下である場合に、連続する画像領域は手書き図形であると判定する。なお、距離の絶対値の総和を用いて判定することに代えて、距離の自乗の総和を用いるなど、他の方法で判定してもよい。
【００４３】
その後、手書き図形サーチ部４２は、入力された画像データから文字検出部３が抽出した手書き文字データが除かれた画像データから、手書き図形データを除去する。なお、除去の方法として、手書き図形データを白画素に置き換えることが考えられる。そして、手書き文字データと手書き図形データとが除去された画像データを出力する。その画像データに加えて、手書き文字データと手書き図形データとを出力する。すなわち、入力された画像データにおける手書き文字データおよび手書き図形データ以外のデータである資料データを、手書き文字データおよび手書き図形データと区別可能に出力する。
【００４４】
図５における（Ｅ）には、印刷領域１００に、手書き図形データのみの画像データにもとづく画像が表示されている例が示されている。
【００４５】
次に、資料データ復元装置のより具体的な構成を説明する。図６は、資料データ復元装置のより具体的な構成例を示す説明図である。図６に示すように、資料データ復元装置において、画像入力部１は、スキャナなどの画像読取装置１からディジタルデータである画像データを入力する。画像入力部１に入力された画像データがカラー画像データである場合には、２値化部１１が、各画素を黒画素と白画素とのいずれかに２値化する処理を行う。そして、領域分割部１２が、画像を所定領域に分割する処理を行う。
【００４６】
図７は、画像の領域分割を説明するための説明図である。領域分割部１２は、図７（Ａ）に例示する画像２００の画像データが入力された場合に、図７（Ｂ）に例示するように、（ａ）〜（ｅ）の各行と（ｐ）〜（ｔ）の各列に領域を分割する。すなわち、図７に示す例では、画像は、２５個の矩形領域の分割領域に分割される。
【００４７】
黒画素計数部１３は、各分割領域の黒画素数を計数する。そして、比率計算部１４は、各分割領域の黒画素の比率（黒画素数／全画素数）を算出する。処理対象領域決定部１５は、黒画素の比率が所定値（例えば、５％）未満である分割領域を処理対象領域に決定する。換言すれば、白画素の比率が所定値（例えば、９５％）以上である分割領域を処理対象領域に決定する。すなわち、画素値が所定の濃度値以下である比率が所定のしきい値以上である分割領域を処理対象領域にする。
【００４８】
なお、この実施形態では、２値化データを対象にしているので、所定の濃度値は０（＝白とする）であるが、中間調画像（資料の地部分が白と黒の中間濃度である場合を含む）やカラー画像（資料の地部分が有彩色である場合を含む）の画像データを対象にする場合には、所定の濃度を、０ではないが０に近い値に設定する。
【００４９】
当事者は、資料における余白部分にメモ書き等を行うはずである。そこで、この実施形態では、黒画素の比率が所定値未満である分割領域、すなわち余白部分である可能性が高い分割領域を処理対象領域にする。
【００５０】
また、例えば黒画素の比率が５％未満である分割領域を処理対象領域に決定すれば、処理対象領域は資料の余白部分になる可能性が高く、当事者がメモ書き等を行った領域が処理対象領域と決定される可能性が高いが、余白部分が小さいか、または存在しない資料に対して当事者がメモ書き等を行う可能性もある。そのような場合を考慮して、処理対象領域を決定するための黒画素の比率を変更可能にしてもよい。例えば、入力手段（例えば、パーソナルコンピュータのキーボードやマウス）で所定の指定コードを入力したり画面に表示されている選択肢から黒画素の比率をユーザが選択可能なように構成する。一例として、黒画素の比率が１００％である場合には、全黒の領域以外は処理対象領域とされる。
【００５１】
文字検出部３および図形検出部４は、上記のような処理を実行し、図形検出部４は、手書き文字データと手書き図形データとが除去された画像データを出力する。また、手書き文字データと手書き図形データとを出力する。手書き文字データと手書き図形データとが除去された画像データは、印刷データ収集部７に入力される。また、手書き文字データと手書き図形データとは、手書きデータ収集部８に出力される。
【００５２】
印刷データ収集部７は、入力された画像データを、印刷装置１０に出力する。印刷装置１０は、手書き文字と手書き図形とが除去された元データの画像を出力することになる。また、必要であれば、手書きデータ収集部８は、入力されたデータを印刷装置１０に出力する。その場合には、印刷装置１０は、手書き文字と手書き図形とを印刷出力することになる。
【００５３】
なお、図６には、出力装置としての印刷装置１０が使用される例が示されているが、印刷装置１０に代えて、または印刷装置１０に加えて、記憶装置が設けられていてもよい。
【００５４】
以上のように、この実施形態では、黒画素の比率が所定値未満である分割領域、すなわち余白部分である可能性が高い分割領域を処理対象領域にして手書き文字および手書き図形を検出するので、短時間で他の情報を除去して元データを復元することができる。また、資料に元々印刷されていた印刷文字や印刷図形を誤って手書き文字や手書き図形と認識する可能性を低減することができる。
【図面の簡単な説明】
【００５５】
【図１】本発明による資料データ復元装置の主要構成を示すブロック図である。
【図２】本発明による資料データ復元装置の他の例の主要構成を示すブロック図である。
【図３】手書き文字および手書き図形の消去方法の概要を示す説明図である。
【図４】手書き文字の消去方法の詳細な一例を示す説明図である。
【図５】手書き図形の消去方法の詳細な一例を示す説明図である。
【図６】資料データ復元装置のより具体的な構成例を示す説明図である。
【図７】画像の領域分割を説明するための説明図である。
【符号の説明】
【００５６】
１      画像入力部
２      処理対象領域検出部
３      文字検出部
４      図形検出部
５      記憶部
６      出力部
１０    印刷装置
１１    ２値化部
１２    領域分割部
１３    黒画素計数部
１４    比率計算部
１５    処理対象領域決定部
２０    画像読取装置
３１    文字データ切り出し部
３２    辞書比較部
４１    屈曲検出部
４２    手書き図形サーチ部
【図１】
2009212655.tif 000003
【図２】
2009212655.tif 000004
【図３】
2009212655.tif 000005
【図４】
2009212655.tif 000006
【図５】
2009212655.tif 000007
【図６】
2009212655.tif 000008
【図７】
2009212655.tif 000009