(57)【要約】【課題】  文書に対して手書きで追記された追記マークに基づいて、互いに関連性を有すると推測される領域の記載内容を集めてユーザに判りやすく提示する。【解決手段】  紙文書を電子化して得られる文書画像データを解析し、その文書画像データの表す文書の原本に対して手書きで追記された追記マークを抽出する抽出手段と、抽出された追記マークの各々について、その追記マークが対応付けられている画像領域を特定する特定手段と、複数の追記マークが抽出された場合に、各追記マークの形状を解析して、同一又は類似する形状を有する追記マーク毎に分類する分類手段と、同一又は類似する形状を有すると分類された追記マークの各々について、その追記マークに対応付けられていると特定された画像領域に配置されている画像を所定のレイアウトにしたがって出力する出力手段とを有する文書処理装置を提供する。【選択図】      図４
2006301695.tif 000002
【特許請求の範囲】
【請求項１】
紙文書を電子化して得られる文書画像データが入力される入力手段と、
前記入力手段へ入力された文書画像データを解析し、その文書画像データの表す文書の原本に対して手書きで追記された追記マークを特定する第１の特定手段と、
前記第１の特定手段により特定された追記マークの各々について、その追記マークが対応付けられている前記文書画像データの画像領域を特定する第２の特定手段と、
前記第１の特定手段により複数の追記マークが特定された場合に、各追記マークの形状を解析して、同一又は類似する形状を有する追記マーク毎に分類する分類手段と、
前記分類手段により同一又は類似する形状を有すると分類された追記マークの各々について、その追記マークに対応付けられていると前記第２の特定手段により特定された画像領域に配置されている画像を所定のレイアウトにしたがって配置して出力する出力手段と
を有する文書処理装置。
【請求項２】
前記第１の特定手段は、
前記入力手段へ入力された文書画像データとその文書画像データの表す紙文書の原本を表す原本画像データとを比較して、前記追記マークを特定する
ことを特徴とする請求項１に記載の文書処理装置。
【請求項３】
前記第１の特定手段は、
前記入力手段へ入力された文書画像データの表す画像の色とその文書画像データの表す紙文書の原本の色との差に基づいて、前記追記マークを特定する
ことを特徴とする請求項１に記載の文書処理装置。
【請求項４】
前記分類手段は、
追記マークの形状を解析してその特徴量を算出し、算出された特徴量が同一である追記マーク同士を同一の形状を有する追記マークとして分類する一方、算出された特徴量の乖離が所定の範囲内である追記マーク同士を互いに類似する追記マークとして分類する
ことを特徴とする請求項１に記載の文書処理装置。
【請求項５】
コンピュータ装置に、
紙文書を電子化して得られる文書画像データを解析し、その文書画像データの表す文書の原本に対して手書きで追記された追記マークを特定する第１のステップと、
前記第１のステップにて特定された追記マークの各々について、その追記マークが対応付けられている前記文書画像データの画像領域を特定する第２のステップと、
前記第１のステップにて複数の追記マークが特定された場合に、各追記マークの形状を解析して、同一又は類似する形状を有する追記マーク毎に分類する第３のステップと、
前記第３のステップにて同一又は類似する形状を有する追記マークを表すと分類された追記マークの各々について、その追記マークに対応付けられていると前記第２のステップにて特定された画像領域に配置されている画像を所定のレイアウトにしたがって配置して出力する第４のステップと
を実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、文書に対して手書きで追記された文字や記号、図形などの追記マークに基づいて、その追記マークが付されている領域の記載内容を抽出する技術に関する。
【背景技術】
【０００２】
紙文書には、読み手によって各種のコメントが追記される場合がある。係るコメントのように紙文書に追記された事項のなかには、その読み手にとって重要な情報が含まれている場合があるので、このような追記事項のみを紙文書から抽出したいといったニーズがあった。そこで、このようなことを可能にする技術が従来より種々提案されており、その一例としては特許文献１に開示された技術が挙げられる。特許文献１には、追記事項の属性を各追記事項が付されている文脈などに基づいて分類し、各属性毎に追記事項をリスト化して出力する技術が開示されている。
【特許文献１】特開平１１−２１９２４５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
ところで、紙文書の読み手は、上記のようなコメントの他に、その読み手にとって重要な情報が記載されていると判断した章や段落にその旨を表す特定の文字や記号、図形など追記する場合がある。以下では、このような目的で紙文書に手書きで追記された文字や記号、図形などを「追記マーク」と呼ぶ。このような追記マークが付された章や段落には、読み手にとって重要な情報が記載されているのであるから、追記マークが付された領域の記載内容のみを抽出して提供することができると便利である。また、読み手が追記マークを紙文書へ書き込む際には、互いに関連性を有する記載が為されている箇所には同一の追記マークを付与することが一般的であるから、同一の追記マークが付与された領域など互いに関連性を有すると推測される領域の記載内容を集めてユーザに提示することができたならば便利である。しかしながら、特許文献１に開示された技術では、追記事項をその属性に応じてリスト化して出力するだけであるから、このようなことを実現することはできない。
【０００４】
本発明は、文書に対して手書きで追記された文字や記号、図形などの追記マークに基づいて、互いに関連性を有すると推測される領域の記載内容を集めてユーザに判りやすく提示することを可能にする技術を提供することを目的としている。
【課題を解決するための手段】
【０００５】
上記課題を解決するために、本発明は、紙文書を電子化して得られる文書画像データが入力される入力手段と、前記入力手段へ入力された文書画像データを解析し、その文書画像データの表す文書の原本に対して手書きで追記された追記マークを特定する第１の特定手段と、前記第１の特定手段により特定された追記マークの各々について、その追記マークが対応付けられている前記文書画像データの画像領域を特定する第２の特定手段と、前記第１の特定手段により複数の追記マークが特定された場合に、各追記マークの形状を解析して、同一又は類似する形状を有する追記マーク毎に分類する分類手段と、前記分類手段により同一又は類似する形状を有すると分類された追記マークの各々について、その追記マークに対応付けられていると前記第２の特定手段により特定された画像領域に配置されている画像を所定のレイアウトにしたがって配置して出力する出力手段とを有する文書処理装置を提供する。
【０００６】
このような文書処理装置によれば、同一又は類似する形状を有する追記マークが対応付けられた画像領域に配置される画像が所定のレイアウトに配置されて出力される。このため、上記所定のレイアウトとして、例えば、複数の画像をリスト形式に並べて配置するレイアウトを採用すれば、上記文書画像データの表す画像において、同一又は類似する追記マークが対応付けられた画像領域に配置される画像がリスト形式に並べられて出力されることになる。同一又は類似する追記マークが対応付けられた画像領域に配置される画像は、互いに関連性を有する事項の画像を表していると推測されることは前述した通りであるから、本発明にかかる文書処理装置によれば、上記紙文書に記載されている事項のうち、互いに関連性を有すると推測される事項を集めて、例えばリスト形式で出力するなど、それら互いに関連性を有する事項のみをユーザに判りやすく提示することが可能になる。
【０００７】
より好ましい態様においては、前記第１の特定手段は、前記入力手段へ入力された文書画像データとその文書画像データの表す紙文書の原本を表す原本画像データとを比較して、前記追記マークを特定することを特徴としている。このような態様においては、上記原本に対して付された追記マークが確実に特定される。
【０００８】
また、別の好ましい態様においては、前記第１の特定手段は、前記入力手段へ入力された文書画像データの表す画像の色とその文書画像データの表す紙文書の原本の色との差に基づいて、前記追記マークを特定することを特徴としている。このような態様においては、上記原本に付された追記マークの色がその原本の記載に用いられている色とは異なっている場合に、その追記マークが確実に特定される。
【０００９】
また、別の好ましい態様においては、前記分類手段は、追記マークの形状を解析してその特徴量を算出し、算出された特徴量が同一である追記マーク同士を同一の形状を有する追記マークとして分類する一方、算出された特徴量の乖離が所定の範囲内である追記マーク同士を互いに類似する追記マークとして分類することを特徴としている。このような態様においては、各追記マークの色や回転の有無などの配置態様によらずに、同一又は類似する形状を有する追記マークが確実に分類される。
【００１０】
また、上記課題を解決するために、本発明は、コンピュータ装置に、紙文書を電子化して得られる文書画像データを解析し、その文書画像データの表す文書の原本に対して手書きで追記された追記マークを特定する第１のステップと、前記第１のステップにて特定された追記マークの各々について、その追記マークが対応付けられている前記文書画像データの画像領域を特定する第２のステップと、前記第１のステップにて複数の追記マークが特定された場合に、各追記マークの形状を解析して、同一又は類似する形状を有する追記マーク毎に分類する第３のステップと、前記第３のステップにて同一又は類似する形状を有する追記マークを表すと分類された追記マークの各々について、その追記マークに対応付けられていると前記第２のステップにて特定された画像領域に配置されている画像を所定のレイアウトにしたがって配置して出力する第４のステップとを実行させるプログラムプログラムを提供する。
【００１１】
このようなプログラムによれば、このプログラムを一般的なコンピュータ装置へインストールしそのコンピュータ装置を該プログラムにしたがって作動させることによって、そのコンピュータ装置に本発明にかかる文書処理装置と同一の機能が付与される。なお、本発明の別の態様においては、コンピュータ装置読取り可能な記録媒体に上記プログラムを書き込んで提供するとしても勿論良い。
【発明の効果】
【００１２】
本発明によれば、文書に対して手書きで追記された追記マークに基づいて、互いに関連性を有すると推測される領域の記載内容を集めてユーザに判りやすく提示することが可能になる、といった効果を奏する。
【発明を実施するための最良の形態】
【００１３】
以下、本発明を実施する際の最良の形態について図面を参照しつつ説明する。
（Ａ：構成）
図１は、本発明の１実施形態に係る文書処理装置１１０を含んでいる文書処理システム１０の構成例を示すブロック図である。図１の画像読取装置１２０は、例えばＡＤＦ（Auto Document Feeder）などの自動給紙機構を備えたスキャナ装置であり、ＡＤＦにセットされた紙文書を１ページずつ光学的に読み取り、読み取った画像を表す画像データ（以下、文書画像データ）をＬＡＮ（Local Area Network）などの通信線１３０を介して文書処理装置１１０へ引渡すものである。なお、本実施形態では、通信線１３０がＬＡＮである場合について説明するが、ＷＡＮ（Wide Area Network）やインターネットなどであっても良いことは勿論である。また、本実施形態では、文書処理装置１１０と画像読取装置１２０とを夫々個別のハードウェアとして構成する場合について説明するが、両者を一体のハードウェアで構成するとしても良いことは勿論である。このような態様にあっては、通信線１３０は、係るハードウェア内で文書処理装置１１０と画像読取装置１２０とを接続する内部バスである。
【００１４】
さて、図１に示す文書処理システム１０においては、読み手によって追記マークが手書きされた紙文書が画像読取装置１２０の自動給紙機構にセットされ、その紙文書の画像を表す文書画像データが文書処理装置１１０へ送られる。一方、文書処理装置１１０には、上記紙文書の原本（すなわち、手書きによる追記が為されていない紙文書）の画像を表す画像データ（以下、「原本画像データ」）が予め格納されている。そして、文書処理装置１１０は、画像読取装置１２０から受取った文書画像データと自装置に予め格納されている原本画像データとを比較して、上記読み手により付された追記マークを特定し、同一又は類似する追記マークが付されている章や段落の記載内容を集めて所定のレイアウトにしたがって出力する機能を備えている。以下、文書処理装置１１０の構成および動作を中心に説明する。
【００１５】
図２は、文書処理装置１１０のハードウェア構成の一例を示す図である。
図２に示されているように、文書処理装置１１０は、制御部２００と、通信インターフェイス（以下、ＩＦ）部２１０と、表示部２２０と、操作部２３０と、記憶部２４０と、これら各構成要素間のデータ授受を仲介するバス２５０と、を備えている。
【００１６】
制御部２００は、例えばＣＰＵ（Central Processing Unit）であり、後述する記憶部２４０に格納されている各種ソフトウェアを実行することによって、文書処理装置１１０の各部を中枢的に制御するものである。通信ＩＦ部２１０は、通信線１３０を介して画像読取装置１２０に接続されており、この通信線１３０を介して画像読取装置１２０から送られてくる文書画像データを受取り、制御部２００へ引渡すものである。つまり、この通信ＩＦ部２１０は、画像読取装置１２０から送られてくる文書画像データが入力される入力手段として機能する。
【００１７】
表示部２２０は、例えば液晶ディスプレイとその駆動回路であり、制御部２００から引渡されたデータに応じた画像を表示するものである。操作部２３０は、例えば、複数の操作子（図示省略）を備えたキーボードであり、それら操作子の操作内容に応じたデータ（以下、操作内容データ）を制御部２００へ引渡すことによって、ユーザによる上記各操作子の操作内容を制御部２００へ伝達するためのものである。
【００１８】
記憶部２４０は、図２に示されているように、揮発性記憶部２４０ａと不揮発性記憶部２４０ｂとを含んでいる。揮発性記憶部２４０ａは、例えばＲＡＭ（Random Access Memory）であり、後述する各種ソフトウェアにしたがって作動している制御部２００によってワークエリアとして利用される。一方、不揮発性記憶部２４０ｂは、例えば、ハードディスクである。この不揮発性記憶部２４０ｂには、本実施形態に係る文書処理装置１１０に特有な機能を制御部２００に実現させるためのデータやソフトウェアが格納されている。
【００１９】
不揮発性記憶部２４０ｂに格納されているデータの一例としては、前述した原本画像データが挙げられる。一方、不揮発性記憶部２４０ｂに格納されているソフトウェアの一例としては、オペレーティングシステム（Operating System 以下、「ＯＳ」）を制御部２００に実現させるためのＯＳソフトウェアと編集ソフトウェアとが挙げられる。ここで、編集ソフトウェアとは、画像読取装置１２０から入力された文書画像データにより表される文書にて同一又は類似する追記マークを付与されている記載箇所を章や段落などの領域毎に抽出し、それらを所定のレイアウトにしたがって表示部２２０に表示する処理を制御部２００に実行させるためのソフトウェアである。以下、これらソフトウェアを実行することによって制御部２００に付与される機能について説明する。
【００２０】
文書処理装置１１０の電源（図示省略）が投入されると、制御部２００は、まず、ＯＳソフトウェアを不揮発性記憶部２４０ｂから読み出し実行する。ＯＳソフトウェアにしたがって作動しＯＳを実現している状態の制御部２００には、文書処理装置１１０の各部を制御する機能や、ユーザの指示に応じて他のソフトウェアを不揮発性記憶部２４０ｂから読み出し実行する機能が付与される。例えば、上記編集ソフトウェアの実行を指示されると、制御部２００は、上記編集ソフトウェアを不揮発性記憶部２４０ｂから読み出し、これを実行する。この編集ソフトウェアにしたがって作動している制御部２００には、以下に述べる４個の機能が付与される。
【００２１】
第１に、画像読取装置１２０から通信ＩＦ部２１０を介して受取った文書画像データを解析し、その文書画像データの表す文書の原本に対して手書きで追記された追記マークを特定する第１の特定機能である。具体的には、制御部２００は、上記文書画像データと上記原本画像データとを比較し、両者の差分を表す画像を上記原本に対する追記事項を表す追記画像として特定し、その追記画像の各々を表す画像データ（以下、追記画像データ）を生成する。このようにして生成された追記画像データの表す追記画像には、上述した追記マークの画像が含まれているのであるから、上記追記画像データを生成することによって追記マークが特定されることになる。
【００２２】
第２に、上記第１の特定機能により特定された追記マークの各々について、その追記マークが対応付けられている上記文書画像データの画像領域を特定する第２の特定機能である。より詳細に説明すると、制御部２００は、上記第１の特定機能により生成された各追記画像データの表す追記画像について、文書画像データの表す画像内での位置を特定するとともに、上記原本画像データの表す画像についてレイアウト解析を施し、各画像領域の配置位置を特定する。そして、上記追記画像と所定の位置関係にある画像領域（例えば、その追記画像からの距離が所定の閾値以下である画像領域）をその追記画像の表す追記マークに対応付けられている画像領域として特定する。
【００２３】
第３に、上記第１の特定機能により複数の追記マークが特定された場合に、各追記マークの形状を解析し、同一又は類似する形状を有する追記マーク毎に分類する分類機能である。より詳細に説明すると、制御部２００は、各追記画像データの表す追記画像を解析してその追記画像の表す追記マークの形状についての特徴量を算出し、その特徴量が同一である追記マーク同士を同一の追記マークとして分類し、特徴量が互いに異なっているもののその乖離が所定の範囲内である追記マークを互いに類似する追記マークとして分類する。
【００２４】
そして、第４に、上記分類機能により同一又は類似する形状を有する追記マークと分類された追記マークの各々について、その追記マークに対応付けられていると上記第２の特定機能により特定された画像領域に配置されている画像を所定のレイアウトにしたがって配置して形成される画像を表す画像データ（以下、編集済み画像データ）を生成し、その画像データを表示部２２０へ出力する出力機能である。なお、本実施形態では、上記のようにして生成された編集済み画像データを表示部２２０へ出力してその編集済み画像データに応じた画像を表示させる場合について説明するが、上記編集済み画像データを、例えばプリンタ装置などの画像形成装置へ転送し、その編集済み画像データの表す画像を印刷用紙やＯＨＰシートなどの記録材上に形成させるようにしても勿論良い。
【００２５】
以上に説明したように、本実施形態に係る文書処理装置１１０のハードウェア構成は一般的なコンピュータ装置のハードウェア構成と同一であり、不揮発性記憶部２４０ｂに格納されている各種ソフトウェアを制御部２００に実行させることによって、本発明に係る文書処理装置に特有な機能が実現される。このように、本実施形態では、本発明に係る文書処理装置に特有な機能をソフトウェアモジュールで実現する場合について説明したが、これらの機能を各々担っているハードウェアモジュールを組み合わせて本発明に係る文書処理装置を構成するとしても良いことは勿論である。
【００２６】
（Ｂ：動作）
次いで、文書処理装置１１０が行う動作のうち、その特徴を顕著に示す動作について図面を参照しつつ説明する。なお、以下に説明する動作例では、文書処理装置１１０の制御部２００は上記編集ソフトウェアにしたがって作動しており、画像読取り装置１２０から文書画像データが送られてくることを待ち受けているものとする。
【００２７】
ユーザが画像読取装置１２０のＡＤＦに紙文書をセットし、所定の操作（例えば、画像読取装置１２０の操作部に設けられている起動ボタンの押下など）を行うと、その紙文書に対応する画像が画像読取装置１２０によって読み取られ、その画像に対応する文書画像データが通信線１３０を介して画像読取装置１２０から文書処理装置１１０へ送られる。本動作例では、図３（ａ）に示す紙文書が画像読取装置１２０のＡＤＦにセットされ、その紙文書に対応する画像を表す文書画像データが画像読取装置１２０から文書処理装置１１０へ送られるものとする。また、文書処理装置１１０の不揮発性記憶部２４０ｂには、図３（ａ）に示す紙文書の原本（図３（ｂ）参照）を表す原本画像データが予め１つだけ格納されているものとする。図３（ａ）と図３（ｂ）との比較から明らかなように、図３（ａ）に示す紙文書においては、その第１段落（図３（ａ）：“Ｂ０１”）には追記マークＭ０１が付与されており、その第３段落（図３（ａ）：“Ｂ０２”）には、追記マークＭ０２が付与されており、その第４段落（図３（ａ）：“Ｂ０４”）には、追記マークＭ０３が付与されている。図３（ａ）から明らかなように、追記マークＭ０１と追記マークＭ０３とは同一の形状を有する追記マークである。
【００２８】
図４は、上記編集ソフトウェアにしたがって制御部２００が行う編集処理の流れを示すフローチャートである。図４に示すように、制御部２００は、通信線１３０を介して画像読取装置１２０から送られてくる文書画像データを通信ＩＦ部２１０によって受取ると（ステップＳＡ１００）、その文書画像データと不揮発性記憶部２４０ｂに格納されている原本画像データとを比較し、その原本画像データの表す原本に対して付された追記マークを特定する（ステップＳＡ１１０）。図３（ａ）および図３（ｂ）の比較から明らかなように、本動作例では、追記マークＭ０１、Ｍ０２およびＭ０３の各々を表す３つの追記画像データが上記第１の特定機能によって生成され、これら追記画像データによって各追記マークが特定されることになる。なお、本実施形態では、上記文書画像データの表す紙文書の原本を表す原本画像データが予め１つだけ文書処理装置１１０の不揮発性記憶部２４０ｂに格納されている場合について説明したが、複数種類の紙文書の各々の原本を表す原本画像データ（すなわち、複数の原本画像データ）が文書処理装置１１０の不揮発性記憶部２４０ｂに格納されているとしても良いことは勿論である。このような場合には、上記ステップＳＡ１１０の実行に先立って、上記文書画像データの表す紙文書の原本を表す原本画像データをユーザに指定させるようにすれば良い。
【００２９】
次いで、制御部２００は、上記ステップＳＡ１１０にて特定した追記マークの各々について、上記文書画像データの表す画像における配置位置を特定（ステップＳＡ１２０）するとともに、上記原本画像データの表す画像についてレイアウト解析を施し、その原本画像データの表す原本における章や段落などのブロック毎にそのブロックを表す画像領域の配置位置を特定する（ステップＳＡ１３０）。そして、制御部２００は、上記追記画像との距離が所定の閾値以下である画像領域をその追記画像の表す追記マークに対応付けられている画像領域として特定する（ステップＳＡ１４０）。図３（ａ）に示すように、追記マークＭ０１は、処理対象の文書の第１段落を表す画像領域Ｂ０１の近傍に位置しているのであるから、上記ステップＳＡ１３０の処理によって追記マークＭ０１と画像領域Ｂ０１とが対応付けられていると特定される。同様に、上記ステップＳＡ１３０の処理によって、追記マークＭ０２と画像領域Ｂ０２とが対応付けられていると特定され、追記マークＭ０３と画像領域Ｂ０４とが対応付けられていると特定される。なお、本実施形態では、原本画像データの表す画像にレイアウト解析を施して、その原本における章や段落などのブロック毎にそのブロックを表す画像領域の配置位置を特定する場合について説明したが、画像読取装置１２０から引渡された文書画像データに対して、上記追記画像を表すデータを取り除く処理を施して得られる画像データにレイアウト解析を施して、上記原本における章や段落などのブロック毎にそのブロックを表す画像領域の配置位置を特定するとしても良いことは勿論である。
【００３０】
次いで、制御部２００は、上記ステップＳＡ１１０において複数の追記マークが特定されたか否かを判定し（ステップＳＡ１５０）、その判定結果が“Ｙｅｓ”である場合には、以下に述べるステップＳＡ１６０〜ＳＡ１７０の処理を実行する。前述したように、本動作例では、上記ステップＳＡ１１０において３つの追記マークが特定されているのであるか、上記ステップＳＡ１５０の判定結果は“Ｙｅｓ”になり、ステップＳＡ１６０〜ステップＳＡ１７０の処理が実行されることになる。
【００３１】
ステップＳＡ１５０の判定結果が“Ｙｅｓ”である場合に後続して実行されるステップＳＡ１６０においては、制御部２００は、各追記マークについてその形状を表す特徴量を算出し、その特徴量が同一である追記マーク同士を同一の追記マークとして分類し、特徴量が互いに異なっていてもその乖離が所定の範囲内である追記マークを互いに類似する追記マークとして分類する。このステップＳＡ１６０の処理が実行されることによって、本動作例においては、上記ステップＳＡ１１０にて特定された３つの追記マークが、追記マークＭ０１と追記マークＭ０３のグループと、追記マークＭ０２との２組に分類されることになる（図３（ａ）参照）。
【００３２】
上記ステップＳＡ１６０に後続して実行されるステップＳＡ１７０においては、制御部２００は、上記ステップＳＡ１６０にて同一又は類似する形状を有すると分類された追記マークの各々について、その追記マークに対応付けられていると上記ステップＳＡ１３０にて特定された画像領域に配置されている画像を図５（ａ）に示すリスト形式のレイアウトにしたがって配置して得られる画像を表す画像データを生成し表示部２２０へ出力する。
以上が本実施形態に係る文書処理装置１１０が実行する編集処理である。
【００３３】
以上に説明したように、本実施形態に係る文書処理装置１１０によれば、文書処理装置１１０の表示部２２０には、図５（ｂ）に示す画像が表示されることになる。図５（ｂ）に示す表示例では、処理対象の紙文書において、同一又は類似する形状を有する追記マーク毎に、その追記マークが対応付けられている領域の記載内容が並べて表示されている。前述したように、同一又は類似する形状を有する追記マークが付与されている領域の記載内容が関連性を有している可能性が高いことは前述した通りであるから、本実施形態に係る文書処理装置１１０によれば、紙文書に対して手書きで追記された文字や記号、図形などの追記マークに基づいて、互いに関連性を有すると推測される領域の記載内容を集めてユーザに判りやすく提示することをが可能になるといった効果を奏する。
【００３４】
（Ｃ：変形）
以上、本発明の１実施形態について説明したが、上述した実施形態を以下に述べるように変形しても良いことは勿論である。
（Ｃ−１：変形例１）
上述した実施形態では、画像読取装置１２０から引渡された文書画像データと原本画像データとを比較することによって、その原本画像データの表す原本に対して追記された事項を表す追記画像を文書処理装置１１０に抽出させる場合について説明した。しかしながら、画像読取装置から引渡された文書画像データを文書処理装置に解析させ、その文書画像データの表す画像のうち、原本を紙文書に印刷する際に利用される色として予め定められた色を表す画像以外の部分を追記画像として文書処理装置に抽出させるようにしても良い。このような態様によれば、例えば、原本がモノクロ印刷された紙文書に対して朱書きされた追記事項を、その原本を表す原本データとの比較を行うことなく、文書処理装置に抽出させることが可能になる。
【００３５】
また、画像読取装置から引渡された文書画像データを文書処理装置に解析させ、その文書画像データの表す画像のうち、手書き文字や手書き図形を表す画像を追記画像として文書処理装置に抽出させるようにしても良い。このような態様によれば、例えば、活字などで印刷された紙文書に対して手書きで追記された事項を、その原本を表す原本データとの比較を行うことなく、文書処理装置に抽出させることが可能になる。また、原本の印刷に用いられている紙がアノトペーパであり、アノトペンにより追記がなされた場合には、そのアノトペンから出力されたデータに基づいてその追記事項およに追記位置を特定することも可能である。
【００３６】
（Ｃ−２：変形例２）
上述した実施形態では、処理対象の紙文書が１頁で構成されている場合について説明した。しかしながら複数の頁から構成されている紙文書を本発明に係る文書処理装置の処理対象としても良いことは勿論である。このように処理対象の紙文書が複数の頁で構成されている場合には、その各頁の画像を表す画像データの各々について前述したステップＳＡ１１０〜ＳＡ１４０の処理を実行するようにすれば良い。また、上述した実施形態では、各追記マークに対応付けられている領域が紙文書の原本に記載されていた事項を表す領域である場合について説明したが、追記マークとともに手書きされた記載内容を表す画像が配置される画像領域（以下、手書き領域）がその追記マークの近傍に位置しているなどその追記マークと所定の位置関係を有している場合には、その手書き領域がその追記マークに対応付けられていると特定しても良いことは勿論である。例えば、図６（ａ）に示すような3頁で構成されている紙文書について本発明に係る文書処理装置により追記事項の抽出を行い、その抽出結果をその文書処理装置に出力（例えば、その抽出結果の表示など）させると、図６（ｂ）に示す画像が出力されることになる。
【００３７】
より詳細に説明すると、図６（ａ）に示す紙文書においては、第１頁の第１段落Ｂ１１には追記マークＭ１１が手書きで付されており、余白の手書き領域Ｃ１１には追記マークＭ１２が手書きで付されている。また、第２頁の余白の手書き領域Ｃ２１には追記マークＭ２１が手書きで付されており、第３頁の余白の手書き領域Ｃ３１には追記マークＭ３１が手書きで付されている。なお、図６（ａ）を参照すれば明らかなように、追記マークＭ１１と追記マークＭ３１とは何れも英大文字“Ａ”を表す追記マークであり、追記マークＭ１２と追記マークＭ２１とは英大文字“Ｂ”を表す追記マークである。
【００３８】
このような紙文書の各頁に対応する画像データについて前述したステップＳＡ１１０〜ＳＡ１４０の処理が施される結果、図６（ａ）に示す紙文書については、追記マークＭ１１と追記マークＭ３１とは同一又は類似の形状を有する追記マークであると分類され、この追記マークＭ１１に対応付けられている領域（すなわち、第１頁第１段落Ｂ１１）と追記マークＭ３１に対応付けられている領域（すなわち、第３頁余白の手書き領域Ｃ３１）の記載内容を表す画像がその追記マークの画像と対応付けて並べて表示されることになる。一方、追記マークＭ１２と追記マークＭ２１とについても同一又は類似の形状を有する追記マークであると分類され、この追記マークＭ１２に対応付けられている領域（すなわち、第１頁余白の手書き領域Ｃ１１）と追記マークＭ２１に対応付けられている領域（すなわち、第２頁余白の手書き領域Ｃ２１）の記載内容を表す画像がその追記マークを表す画像と対応付けて並べて表示されることになる。その結果、図６（ｂ）に示す画像が表示されることになる。
【００３９】
（Ｃ−３：変形例３）
上述した実施形態では、追記マークの近傍に位置する画像領域に配置される画像を被追記画像として特定する場合について説明した。しかしながら、第１の追記マークの近傍に位置する画像領域に配置される画像を、その第１の追記マークの近傍に位置する第２の追記マークに対する被追記画像として特定するようにしても良い。このようにすると、例えば、図７に示すように、引き出し線などの第１の追記マークＭ４１の近傍に位置する第２の追記マークＭ４２と、その第１の追記マークＭ４１の近傍に位置する画像領域Ｂ４１に配置される画像とを対応付けることが可能になる。
【００４０】
（Ｃ−４：変形例４）
上述した実施形態では、本発明に係る文書処理装置に特有な機能を制御部２００に実現させるためのソフトウェアを不揮発性記憶部２４０ｂに予め格納しておく場合について説明した。しかしながら、例えばＣＤ−ＲＯＭ（Compact Disk- Read Only Memory）やＤＶＤ（Digital Versatile Disk）などのコンピュータ装置読み取り可能な記録媒体に、上記ソフトウェアを記録しておき、このような記録媒体を用いて一般的なコンピュータ装置に上記ソフトウェアをインストールするとしても良いことは勿論である。このようにすると、一般的なコンピュータ装置に、本発明に係る文書処理装置と同一の機能を付与することが可能になる、といった効果を奏する。
【図面の簡単な説明】
【００４１】
【図１】本発明の１実施形態に係る文書処理装置１１０を有する文書処理システム１０の構成例を示すブロック図である。
【図２】同文書処理装置１１０のハードウェア構成の一例を示すブロック図である。
【図３】同文書処理装置１１０へ入力される文書画像データの表す紙文書とその原本の一例を示す図である。
【図４】同制御部２００が編集ソフトウェアにしたがって行う編集処理の流れを示すフローチャートである。
【図５】同文書処理装置１１０の表示部２２０に表示される編集結果一例を示す図である。
【図６】同変形例２に係る編集処理を説明するための図である。
【図７】同変形例３に係る編集処理を説明するための図である。
【符号の説明】
【００４２】
１０…文書処理システム、１１０…文書処理装置、１２０…画像読取装置、１３０…通信線、２００…制御部、２１０…通信ＩＦ部、２２０…表示部、２３０…操作部、２４０…記憶部、２４０ａ…揮発性記憶部、２４０ｂ…不揮発性記憶部、２５０…バス。
【図１】
2006301695.tif 000003
【図２】
2006301695.tif 000004
【図３】
2006301695.tif 000005
【図４】
2006301695.tif 000006
【図５】
2006301695.tif 000007
【図６】
2006301695.tif 000008
【図７】
2006301695.tif 000009