【手続補正書】
【提出日】平成18年1月11日(2006.1.11)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】特許請求の範囲
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】  電子文書の原稿画像と前記電子文書を紙へ出力した後に手書きの加筆が重畳した状態で画像読取装置で再び電子化された画像とから文字認識を用いて所望の領域を小領域に分割し、該小領域毎に加筆抽出操作の必要性の有無を判定する領域分割手段と、
前記領域分割手段によって分割され差分計算が必要と判定された前記小領域に対して差分計算を行う画像差分手段と、
前記画像差分手段によって差分処理された画像に対して補間処理を行う画像補間手段と、
を有することを特徴とする加筆抽出装置。
【請求項２】  前記画像補間手段は、
前記差分処理後の画像の輪郭画像を作成する輪郭抽出手段と、
前記輪郭抽出手段によって作成された輪郭画像から電子原稿画像を差分することで補間すべき端点の座標と補間方向を検出する端点検出手段と、
前記端点検出手段によって検出された端点の情報から端点同士を接続し閉曲線を構成する端点接続手段と、
前記端点接続手段によって作成された閉曲線の内部を着色する画像着色手段と、
を有することを特徴とする請求項１記載の加筆抽出装置。
【請求項３】  前記領域分割手段は、
電子原稿画像の与えられた領域に文字認識処理を行い、該領域内における一文字毎の文字画像の認識結果と該認識結果における前記文字の確信度と前記文字の領域情報とを出力する文字認識手段と、
前記文字認識手段から得られた文字画像の領域情報から該文字画像に対応する加筆重畳画像内での領域を検出する位置検出手段と、
前記位置検出手段によって検出された該文字画像の加筆重畳画像内での領域に対する文字認識結果および認識結果文字の確信度と、前記文字認識手段によって得られる認識結果および認識結果文字の確信度とを比較することで加筆抽出操作の必要性の有無を判定する認識結果比較手段と、
を有することを特徴とする請求項１記載の加筆抽出装置。
【請求項４】  前記領域分割手段は、
電子原稿画像の与えられた領域に文字認識処理を行い領域内における一文字毎の文字画像の領域情報を出力する文字認識手段と、
前記文字認識手段から得られた文字画像の領域情報から該文字画像に対応する加筆重畳画像内での領域を検出する位置検出手段と、
前記位置検出手段によって検出された該文字画像の加筆重畳画像内での領域内における黒画素の総和と電子原稿画像内での文字画像の黒画素の総和を計数し比較することで加筆抽出操作の必要性の有無を判定する画素計数手段と、
を有することを特徴とする請求項１記載の加筆抽出装置。
【請求項５】  前記位置検出手段は、
電子原稿画像の領域と加筆重畳画像の画像相関関数を計算し相関関数が最大値に達する２枚の画像の位置関係を検出結果とする相関位置検出手段、
を有することを特徴とする請求項３または４記載の加筆抽出装置。
【請求項６】  前記位置検出手段は、
電子原稿画像の領域と加筆重畳画像の差分後の黒画素の総和を計算し該総和値が最小値に達する２枚の画像の位置関係を検出結果とする差分位置検出手段、
を有することを特徴とする請求項３または４記載の加筆抽出装置。
【請求項７】  前記画像差分手段は、
電子原稿画像と加筆重畳画像の両者の対応する位置からわずかにずらす画素ずらし処理手段と、
前記画素ずらし処理手段によりわずかにずらされた２枚の画像間での差分処理を行う差分処理手段と、
を有することを特徴とする請求項１記載の加筆抽出装置。
【請求項８】  前記画像差分手段は、
電子原稿画像を太化する画像太化処理手段と、
前記画像太化処理手段により太化された電子原稿画像と加筆重畳画像間での差分処理を行う差分処理手段と、
を有することを特徴とする請求項１記載の加筆抽出装置。
【請求項９】  電子文書の原稿画像と前記電子文書を紙へ出力した後に手書きの加筆が重畳した状態で画像読取装置で再び電子化された画像とから文字認識を用いて所望の領域を小領域に分割し、該小領域毎に加筆抽出操作の必要性の有無を判定する領域分割ステップと、
前記領域分割ステップによって分割され差分計算が必要と判定された前記小領域に対して差分計算を行う画像差分ステップと、
前記画像差分ステップによって差分処理された画像に対して補間処理を行う画像補間ステップと、
を有することを特徴とする加筆抽出方法。
【請求項１０】  前記画像補間ステップは、
前記差分処理後の画像の輪郭画像を作成する輪郭抽出ステップと、
前記輪郭抽出ステップによって作成された輪郭画像から電子原稿画像を差分することで補間すべき端点の座標と補間方向を検出する端点検出ステップと、
前記端点検出ステップによって検出された端点の情報から端点同士を接続し閉曲線を構成する端点接続ステップと、
前記端点接続ステップによって作成された閉曲線の内部を着色する画像着色ステップと、
を有することを特徴とする請求項９記載の加筆抽出方法。
【請求項１１】  前記領域分割ステップは、
電子原稿画像の与えられた領域に文字認識処理を行い該領域内における一文字毎の文字画像の認識結果と該認識結果における前記文字の確信度と前記文字の領域情報とを出力する文字認識ステップと、
前記文字認識ステップから得られた文字画像の領域情報から該文字画像に対応する加筆重畳画像内での領域を検出する位置検出ステップと、
前期位置検出ステップによって検出された該文字画像の加筆重畳画像内での領域に対する文字認識結果および認識結果文字の確信度と、前記文字認識ステップによって得られる認識結果および認識結果文字の確信度とを比較することで加筆抽出操作の必要性の有無を判定する認識結果比較ステップと、
を有することを特徴とする請求項９記載の加筆抽出方法。
【請求項１２】  前記領域分割ステップは、
電子原稿画像の与えられた領域に文字認識処理を行い領域内における一文字毎の文字画像の領域情報を出力する文字認識ステップと、
前記文字認識ステップから得られた文字画像の領域情報から該文字画像に対応する加筆重畳画像内での領域を検出する位置検出ステップと、
前期位置検出ステップによって検出された該文字画像の加筆重畳画像内での領域内における黒画素の総和と電子原稿画像内での文字画像の黒画素の総和を計数し比較することで加筆抽出操作の必要性の有無を判定する画素計数ステップと、
を有することを特徴とする請求項９記載の加筆抽出方法。
【請求項１３】  前記位置検出ステップは、
電子原稿画像の領域と加筆重畳画像の画像相関関数を計算し相関関数が最大値に達する２枚の画像の位置関係を検出結果とする相関位置検出ステップ、
を有することを特徴とする請求１１または１２記載の加筆抽出方法。
【請求項１４】  前記位置検出ステップは、
電子原稿画像の領域と加筆重畳画像の差分後の黒画素の総和を計算し該総和値が最小値に達する２枚の画像の位置関係を検出結果とする差分位置検出ステップ、
を有することを特徴とする請求項１１または１２記載の加筆抽出方法。
【請求項１５】  前記画像差分ステップは、
電子原稿画像と加筆重畳画像の両者の対応する位置からわずかにずらす画素ずらし処理ステップと、
前記画素ずらし処理ステップによりわずかにずらされた２枚の画像間での差分処理を行う差分処理ステップと、
を有することを特徴とする請求項９記載の加筆抽出方法。
【請求項１６】  前記画像差分ステップは、
電子原稿画像を太化する画像太化処理ステップと、
前記画像太化処理ステップにより太化された電子原稿画像と加筆重畳画像間での差分処理を行う差分処理ステップと、
を有することを特徴とする請求項９記載の加筆抽出方法。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
【発明が解決しようとする課題】
しかし、特許文献１記載の発明等では、加筆修正内容をイメージ抽出する際に、プリンタドライバが作成した電子原稿画像と、デバイスから入力された加筆重畳画像との間で、単純な差分処理を行うことで抽出しているが、この方法では電子原稿と加筆重畳画像の間で全体的、または局所的なズレが発生した場合に、そのズレの影響として差分処理後に引き残しが発生する。また、印刷された枠、文字等の上に加筆があった場合、差分処理によって、加筆した情報が失われてしまう可能性もある。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
【課題を解決するための手段】
上記の目的を達成するために、請求項１記載の発明によれば、加筆抽出装置は、電子文書の原稿画像と電子文書を紙へ出力した後に手書きの加筆が重畳した状態で画像読取装置で再び電子化された画像とから文字認識を用いて所望の領域を小領域に分割し、小領域毎に加筆抽出操作の必要性の有無を判定する領域分割手段と、領域分割手段によって分割され差分計算が必要と判定された小領域に対して差分計算を行う画像差分手段と、画像差分手段によって差分処理された画像に対して補間処理を行う画像補間手段と、を有することを特徴とするものである。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１９
【補正方法】変更
【補正の内容】
【００１９】
請求項９記載の発明によれば、加筆抽出方法は、電子文書の原稿画像と電子文書を紙へ出力した後に手書きの加筆が重畳した状態で画像読取装置で再び電子化された画像とから文字認識を用いて所望の領域を小領域に分割し、該小領域毎に加筆抽出操作の必要性の有無を判定する領域分割ステップと、領域分割ステップによって分割され差分計算が必要と判定された小領域に対して差分計算を行う画像差分ステップと、画像差分ステップによって差分処理された画像に対して補間処理を行う画像補間ステップと、を有することを特徴とするものである。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】０１３１
【補正方法】変更
【補正の内容】
【０１３１】
【発明の効果】
請求項１の記載の発明によれば、加筆抽出装置は、電子文書の原稿画像と前記電子文書を紙へ出力した後に手書きの加筆が重畳した状態で画像読取装置で再び電子化された画像とから文字認識を用いて所望の領域を小領域に分割し、小領域毎に加筆抽出操作の必要性の有無を判定する領域分割手段と、前記領域分割手段によって分割され差分計算が必要と判定された小領域に対して差分計算を行う画像差分手段と、前記画像差分手段によって差分処理された画像に対して補間処理を行う画像補間手段と、を有しているので、加筆抽出の精度が向上する。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】０１３９
【補正方法】変更
【補正の内容】
【０１３９】
請求項９記載の発明によれば、加筆抽出方法は、電子文書の原稿画像と前記電子文書を紙へ出力した後に手書きの加筆が重畳した状態で画像読取装置で再び電子化された画像とから文字認識を用いて所望の領域を小領域に分割し、小領域毎に加筆抽出操作の必要性の有無を判定する領域分割ステップと、前記領域分割ステップによって分割され差分計算が必要と判定された小領域に対して差分計算を行う画像差分ステップと、前記画像差分ステップによって差分処理された画像に対して補間処理を行う画像補間ステップと、を有しているので、加筆抽出の精度が向上する。