(57)【要約】【課題】  原本画像とそれに追記がなされた追記画像との間において、その追記内容から原稿作成時の時系列を認識することができる画像処理装置、画像処理方法および画像処理プログラムを提供する。【解決手段】  この画像処理装置１は、原本に追記がされた原稿から追記画像を画像入力部２により光学的に読み取ると、抽出画像生成部４が画像格納部３に格納されている原本画像と追記画像から追記抽出画像を生成し、リンク作成部５により画像間のリンク情報を作成し、追記抽出画像をリンク情報とともに画像格納部３に格納する。【選択図】      図１
2006185027.tif 000002
【特許請求の範囲】
【請求項１】
原本画像とその原本に追記がされた追記画像との差分を抽出して前記追記の内容を追記抽出画像として生成する追記抽出部と、
前記差分に基づいて前記追記抽出画像と前記原本画像との間の時系列を判定する時系列判定部とを備えたことを特徴とする画像処理装置。
【請求項２】
前記時系列判定は、前記時系列の情報としてリンク情報を作成することを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記追記抽出画像は、前記原本画像と同一のサイズを有することを特徴とする請求項１記載の画像処理装置。
【請求項４】
前記追記抽出画像は、前記追記の内容とその位置情報とからなることを特徴とする請求項１記載の画像処理装置。
【請求項５】
前記追記抽出画像は、色情報を含むことを特徴とする請求項４記載の画像処理装置。
【請求項６】
原本画像を格納する画像格納部と、
前記原本に追記がされた原稿から追記画像を読み取る画像入力部と、
前記追記画像と前記原本画像との差分を抽出して前記追記の内容を追記抽出画像として生成する追記抽出部と、
前記差分に基づいて前記追記抽出画像と前記原本画像との間の時系列を判定し、前記追記抽出画像を前記時系列の情報とともに前記画像格納部に格納する時系列判定部とを備えたことを特徴とする画像処理装置。
【請求項７】
前記画像入力部は、前記原本あるいは追記がされた前記原稿にさらに第２の追記がされた原稿から第２の追記画像を読み取り、
前記追記抽出部は、前記第２の追記画像と前記画像格納部に格納されている前記原本画像あるいは前記追記抽出画像との差分を抽出して前記第２の追記の内容を第２の追記抽出画像として生成し、
前記時系列判定部は、前記差分に基づいて前記原本画像あるいは前記追記抽出画像と前記第２の追記抽出画像との間の時系列を判定し、前記第２の追記抽出画像を前記時系列の情報とともに前記画像格納部に格納することを特徴とする請求項６に記載の画像処理装置。
【請求項８】
複数の原本画像をその識別情報とともに格納する画像格納部と、
前記複数の原本画像のうちいずれかの原本に追記がされた原稿から追記画像を読み取る画像入力部と、
前記識別情報を入力する識別情報入力部と、
前記識別情報に対応する前記原本画像を前記画像格納部から読み出し、前記追記画像とその読み出した前記原本画像との差分を抽出して前記追記の内容を追記抽出画像として生成する追記抽出部と、
前記差分に基づいて前記追記抽出画像と前記原本画像との間の時系列を判定し、前記追記抽出画像を前記時系列の情報とともに前記画像格納部に格納する時系列判定部とを備えたことを特徴とする画像処理装置。
【請求項９】
前記識別情報入力部は、ユーザの操作によって前記識別情報を入力する入力キーを備えたことを特徴とする請求項８に記載の画像処理装置。
【請求項１０】
前記識別情報入力部は、前記画像入力部によって入力された前記追記画像から前記原稿に記入された前記識別情報を光学的に読み取る文字認識部を備えたことを特徴とする請求項８に記載の画像処理装置。
【請求項１１】
原本画像とその原本に追記がされた追記画像との差分を抽出して前記追記の内容を追記抽出画像として生成し、
前記差分に基づいて前記追記抽出画像と前記原本画像との間の時系列を判定することを特徴とする画像処理方法。
【請求項１２】
原本画像とその原本に追記がされた追記画像との差分を抽出して前記追記の内容を追記抽出画像として生成する抽出ステップと、
前記差分に基づいて前記追記抽出画像と前記原本画像との間の時系列を判定する判定ステップとをコンピュータにおいて実行させるための画像処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、紙文書に文字、記号等のアノテーション（注釈）を追加した文書を取り扱う画像処理装置、画像処理方法および画像処理プログラムに関し、特に、原本画像とそれに追記がされた追記画像との間において、その追記内容から原稿作成時の時系列を認識することができる画像処理装置に関する。
【背景技術】
【０００２】
従来、原本である紙文書に文字、記号などのアノテーションが追記された追記文書は、登録された原本と追記文書を比較照合することにより、アノテーションを抽出する画像処理方法が知られている（例えば、特許文献１参照）。
【０００３】
この画像処理方法は、ファイリングされている文書Ａと入力した更新文書Ｂとを比較して追加領域のみを追加画像として抽出し、入力時間を添付してその追加画像を文書Ａと対応付けてメモリに格納し、さらに文書Ｂを変更した文書Ｂ’を入力した場合は、文書Ｂと文書Ｂ’とを比較して追加領域のみを追加画像として抽出し、入力時間を添付してその追加画像を文書Ｂと対応付けてメモリに格納するものである。
【特許文献１】特開平０８−３１７１５５号公報（請求項１、［００４８］、［００４９］、図２）
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかし、従来の画像処理方法によれば、１つの原本から複数の追記画像が作成された場合に、各追記画像間の関係を推測することができない。また、各原稿は必ずしも作成された順序で入力されるものではないので、原稿の作成順序と入力順序が異なる場合もあり、このような場合には、正確な画像作成時の時系列を認識することができない。
【０００５】
従って、本発明の目的は、原本画像とそれに追記がなされた追記画像との間において、その追記内容から原稿作成時の時系列を認識することができる画像処理装置、画像処理方法および画像処理プログラムを提供することにある。
【課題を解決するための手段】
【０００６】
本発明は、上記目的を達成するため、原本画像とその原本に追記がされた追記画像との差分を抽出して前記追記の内容を追記抽出画像として生成する追記抽出部と、前記差分に基づいて前記追記抽出画像と前記原本画像との間の時系列を判定する時系列判定部とを備えたことを特徴とする画像処理装置を提供する。
【０００７】
追記抽出画像と原本画像との間の時系列を判定することにより、例えば、３つ以上の画像間においても、各画像の作成時の時系列をほぼ正確に認識することができる。
【０００８】
ここで「原本画像」とは、追記画像に対して追記がなされる前の状態の画像をいうものとする。従って、時系列上最初に作成された文書画像は原本画像であるが、追記画像に更なる追記がされた場合には、新たな追記がされた画像に対しては元の追記画像は原本画像となる。
【０００９】
上記時系列の情報は、リンク情報が好ましいが、ツリー情報でも一覧表でもよい。
【００１０】
上記追記抽出画像は、原稿画像と同一のサイズを有するものであってもよい。この場合、追記抽出画像間での差分処理が容易となる。
【００１１】
上記追記抽出画像は、追記の内容とその位置情報とからなるものであってもよく、更には色情報を含むものであってもよい。追記抽出画像を追記領域のみに限定することで、保存するデータ量を軽減することができる。また、色情報を含むことで、カラー画像においても更なるデータ量の軽減ができる。
【００１２】
また、本発明は、上記目的を達成するため、原本画像を格納する画像格納部と、前記原本に追記がされた原稿から追記画像を読み取る画像入力部と、前記追記画像と前記原本画像との差分を抽出して前記追記の内容を追記抽出画像として生成する追記抽出部と、前記差分に基づいて前記追記抽出画像と前記原本画像との間の時系列を判定し、前記追記抽出画像を前記時系列の情報とともに前記画像格納部に格納する時系列判定部とを備えたことを特徴とする画像処理装置を提供する。
【００１３】
追記抽出画像と原本画像との間の時系列を判定することにより、例えば、３つ以上の画像間においても、各画像の作成時の時系列をほぼ正確に認識することができる。
【００１４】
上記画像入力部は、原本あるいは追記がされた原稿にさらに第２の追記がされた原稿から第２の追記画像を読み取り、上記追記抽出部は、第２の追記画像と画像格納部に格納されている原本画像あるいは追記抽出画像との差分を抽出して第２の追記の内容を第２の追記抽出画像として生成し、上記時系列判定部は、差分に基づいて原本画像あるいは追記抽出画像と第２の追記抽出画像との間の時系列を判定し、第２の追記抽出画像を時系列の情報とともに画像格納部に格納する構成でもよい。
【００１５】
原本画像あるいは追記抽出画像と第２の追記抽出画像との間の時系列を判定することにより、第２の追記画像の直前の画像が原本画像なのか、追記画像なのかを認識することができる。
【００１６】
また、本発明は、上記目的を達成するため、複数の原本画像をその識別情報とともに格納する画像格納部と、前記複数の原本画像のうちいずれかの原本に追記がされた原稿から追記画像を読み取る画像入力部と、前記識別情報を入力する識別情報入力部と、前記識別情報に対応する前記原本画像を前記画像格納部から読み出し、前記追記画像とその読み出した前記原本画像との差分を抽出して前記追記の内容を追記抽出画像として生成する追記抽出部と、前記差分に基づいて前記追記抽出画像と前記原本画像との間の時系列を判定し、前記追記抽出画像を前記時系列の情報とともに前記画像格納部に格納する時系列判定部とを備えたことを特徴とする画像処理装置を提供する。
【００１７】
上記識別情報入力部は、ユーザの操作によって識別情報を入力する入力キーを備えた構成でもよく、画像入力部によって入力された追記画像から原稿に記入された識別情報を光学的に読み取る文字認識部を備えた構成でもよい。文字認識部を備えることにより、識別情報を入力する手間が省ける。
【００１８】
また、本発明は、上記目的を達成するため、原本画像とその原本に追記がされた追記画像との差分を抽出して前記追記の内容を追記抽出画像として生成し、
前記差分に基づいて前記追記抽出画像と前記原本画像との間の時系列を判定することを特徴とする画像処理方法を提供する。
【００１９】
また、本発明は、上記目的を達成するため、原本画像とその原本に追記がされた追記画像との差分を抽出して前記追記の内容を追記抽出画像として生成する抽出ステップと、前記差分に基づいて前記追記抽出画像と前記原本画像との間の時系列を判定する判定ステップとをコンピュータにおいて実行させるための画像処理プログラムを提供する。
【発明の効果】
【００２０】
本発明によれば、原本画像とそれに追記がなされた追記画像との間において、その追記内容から原稿作成時の時系列を認識することができる。
【発明を実施するための最良の形態】
【００２１】
［第１の実施の形態］
図１は、本発明の第１の実施の形態に係る画像処理装置の構成を示し、（ａ）はブロック図、（ｂ）は差分抽出部の回路例を示す。この画像処理装置１は、原本に追記がされた原稿から追記画像を光学的に読み取る画像入力部２と、原本画像等を格納する画像格納部３と、原本画像と追記画像から追記抽出画像を生成する抽出画像生成部４と、画像間の時系列の情報としてのリンク情報を作成するリンク作成部５と、ユーザが各種入力操作を行うための操作部７と、ユーザにより選択された画像あるいはリンク情報を表示する画像表示部６と、この装置１の各部を制御する制御部８とを備える。
【００２２】
画像入力部２は、原稿台上に載置された原稿に対し、Ｒ，Ｇ，Ｂのフィルタを備えたライン状の光電変換素子アレイをそのライン方向に直交する方向に移動させることにより、原稿から原稿画像を読み取るものであり、原稿がカラーの場合は、カラーの原稿画像が得られる。
【００２３】
画像格納部３は、原本画像、追記抽出画像等の各種の画像や画像間のリンク情報を格納するものであり、ハードディスクドライブ（ＨＤＤ）が用いられるが、ＨＤＤといった固定式の記憶装置に限らず、フラッシュメモリやＤＶＤ等の着脱式の記憶装置を用いてもよい。
【００２４】
抽出画像生成部４は、画像入力部２から出力される追記画像を補正する画像補正部４０Ａと、画像補正部４０Ａにより補正された追記画像と原本画像との差分を抽出する差分抽出部４１Ａと、抽出された追記抽出画像の文字、記号等の修正を行い、リンク作成部５に出力する修正部４２とを備える。
【００２５】
画像補正部４０Ａは、画像入力部２から出力される追記画像の位置、傾き、歪み等を補正するとともに、カラー情報を２値情報に変換して差分抽出部４１Ａに出力する。
【００２６】
差分抽出部４１Ａは、例えば、図１（ｂ）に示すように、原本画像と文字や記号等が追記された追記画像の画像信号を入力するＥＸＯＲ回路４３を用いて構成され、原本画像と追記画像の画像信号が入力されると、追記抽出画像の画像信号を出力し、原本画像と同一のサイズを有する追記抽出画像を抽出するものである。
【００２７】
修正部４２は、本来１つの線分であったものが差分抽出部４１Ａの差分処理によって欠落した部分を補間して１つの線分に復元するような修正を行うものである。
【００２８】
リンク生成部５は、原本画像と追記抽出画像との間、あるいは２つの追記抽出画像間のリンク情報を作成し、追記抽出画像をリンク情報とともに画像格納部３に格納する。
【００２９】
画像表示部６は、操作部７の操作によって選択された画像あるいはリンク情報を可視表示するディスプレイである。ディスプレイとして、ＣＲＴ（陰極線管）ディスプレイ、液晶ディスプレイ等を用いることができる。なお、画像表示部として、レーザプリンタ、インクジェットプリンタ、ドットインパクトプリンタ等のプリンタを用いてもよい。
【００３０】
操作部７は、例えば、ＬＣＤ（液晶ディスプレイ）等の表示部を背面側に配置したタッチパネルにより構成され、表示部に表示されたテンキーにより原本画像の識別情報としての原本番号を入力することができ、また表示部に表示された表示項目選択画面に対して所望の表示項目を押下することにより対応する表示内容を表示できるようになっている。この表示内容には、原本画像、合成画像の追記画像、追記抽出画像およびリンク情報がある。なお、識別情報としては、原本の名前等の原本を識別できるものならば他の情報でもよい。
【００３１】
制御部８は、操作部７によって選択された表示項目に従って必要な各部を動作させ、ユーザが要求する原本画像、追記画像、追記抽出画像あるいはリンク情報を表示するようになっている。また、制御部８は、２つの追記抽出画像の時系列を調べ、入力順序と追記順序が一致しているか否かを判断するものである。すなわち、画像の構成要素が入力順序に従って増えている場合は、入力順序が追記順序と一致していると判断する。
【００３２】
（第１の実施の形態の動作）
次に、本実施の形態の動作を図２、図３および図４を参照し、図５のフローチャートに従って説明する。
【００３３】
図２（ａ）〜（ｃ）は、それぞれ原本画像１０、第１の追記画像１１Ａ、第２の追記画像１１Ｂを示し、図２（ｄ）は、原本画像１０および第１の追記画像１１Ａから抽出された第１の追記抽出画像１２Ａを示し、図２（ｅ）は、第１および第２の追記画像１１Ａ，１１Ｂから抽出された第２の追記抽出画像１２Ｂを示す。
【００３４】
図３（ａ）〜（ｃ）は、原本画像１０Ａ、第１および第２の追記抽出画像１２Ａ，１２Ｂ間のリンク情報を示し、図３（ｄ）〜（ｆ）は、表示画像の原本画像１０、第１および第２の追記画像１１Ａ，１１Ｂを示す。
【００３５】
（１）第１の追記抽出画像の生成およびリンク情報の作成
ユーザは、原本に記入者Ａによって最初に追記がされた原稿を画像入力部２にセットするとともに、操作部７において原本番号を入力し、画像入力部２の図示しないスタートキーを押下する。
【００３６】
画像入力部２は、原稿から図２（ｂ）に示す原本部分１０ａと追記部分１３ａ，１３ｂからなる第１の追記画像１１Ａを読み取り、抽出画像生成部４に出力する。同図の場合の追記部分１３ａは、楕円の図形、矢印、「入れ換え」の文字からなり、追記部分１３ｂは、「修正」の文字からなる。
【００３７】
抽出画像生成部４の画像補正部４０Ａは、第１の追記画像１１Ａの位置、傾き、歪み等を補正し、差分抽出部４１Ａに出力する。
【００３８】
差分抽出部４１Ａは、画像格納部３に追記抽出画像が存在しているか調べる（Ｓ１）。追記抽出画像が存在していないので、操作部７に入力された原本番号に対応する図２（ａ）に示す原本部分１０ａからなる原本画像１０を画像格納部３から読み出し、第１の追記画像１１Ａと原本画像１０との差分を抽出し、図２（ｄ）に示す追記部分１３ａ，１３ｂからなる第１の追記抽出画像１２Ａを生成し、修正部４２に出力する（Ｓ２）。
【００３９】
修正部４２は、差分抽出部４１Ａの差分処理によって欠落した部分を補間する修正を行い、リンク作成部５に出力する。
【００４０】
リンク作成部５は、図３に示すように原本画像１０に対する第１の追記抽出画像１２Ａのリンク情報１４ａを作成し（Ｓ３）、第１の追記抽出画像１２Ａをそのリンク情報１４ａとともに画像格納部３に格納する（Ｓ４）。
【００４１】
（２）第２の追記抽出画像の生成およびリンク情報の作成
次に、ユーザは、追記がされた原本に記入者Ｂによって更に追記がされた原稿を画像入力部２にセットするとともに、操作部７に原本番号を入力し、画像入力部２の図示しないスタートキーを押下する。
【００４２】
画像入力部２は、原稿から図２（ｃ）に示す原稿部分１０ａと追記部分１３ａ〜１３ｃからなる第２の追記画像１１Ｂを読み取り、抽出画像生成部４に出力する。同図の場合の追記部分１３ｃは、矢印および「効果追加」の文字からなる。
【００４３】
抽出画像生成部４の画像補正部４０Ａは、第２の追記画像１１Ｂの位置、傾き、歪み等を補正し、差分抽出部４１Ａに出力する。
【００４４】
差分抽出部４１Ａは、画像格納部３に追記抽出画像が存在しているか調べる（Ｓ１）。第１の追記抽出画像１２Ａが存在しているので、最新に入力された第２の追記画像１１Ｂとその一つ前に入力された第１の追記画像１１Ａとの差分を抽出し、図２（ｅ）に示す追記部分１３ｃからなる第２の追記抽出画像１２Ｂを生成し、修正部４２に出力する（Ｓ５）。
【００４５】
修正部４２は、差分抽出部４１Ａの差分処理によって欠落した部分を補間する修正を行い、リンク作成部５に出力する。
【００４６】
制御部８は、既に存在する第１の追記抽出画像１２Ａと上記ステップＳ５で抽出された第２の追記抽出画像１２Ｂの時系列を調べる（Ｓ６）。この場合は、追記画像１１Ａ，１１Ｂの構成要素である追記部分１３ａ〜１３ｃが入力順序に従って増えているので、入力順序と追記順序が一致していると判断する（Ｓ７）。
【００４７】
リンク作成部５は、制御部８の制御により、図３に示すように第１の追記抽出画像１２Ａに対する第２の追記抽出画像１２Ｂのリンク情報１４ｂを作成し（Ｓ３）、第２の追記抽出画像１２Ｂをそのリンク情報１４ｂとともに画像格納部３に格納する（Ｓ４）。なお、ここでは追記画像１１Ａ、１１Ｂを比較して追記抽出画像１２Ｂを抽出したが、追記画像１１Ａが保存されていない場合、原本画像１０と第１の追記抽出画像１２Ａを合成して追記画像１１Ａを生成した後、比較処理を行っても良い。
【００４８】
（３）第２の追記画像が入力された後、第１の追記画像が入力された場合
上記の例は、原本画像１０と第１の追記抽出画像１２Ａがリンク付けされた後に、第２の追記画像１１Ｂが入力された場合の例であるが、実際には必ずしも原稿に追記がなされた順序で入力されるとは限らない。そこで、第２の追記抽出画像１１Ｂが原本画像１０とリンク付けされた後に第１の追記画像１１Ａが入力された場合について図４を参照して説明する。
【００４９】
図４（ａ）〜（ｃ）は、それぞれ原本画像１０、第２の追記画像１１Ｂ、第１の追記画像１１Ａを示し、図４（ｄ）は、原本画像１０および第２の追記画像１１Ｂから抽出された第１の追記抽出画像１２Ｃを示し、図４（ｅ）は、第２および第１の追記画像１１Ｂ，１１Ａから抽出された第２の追記抽出画像１１Ｄを示す。
【００５０】
ユーザは、原本に記入者Ａおよび記入者Ｂによってそれぞれ追記がされた原稿を画像入力部２にセットするとともに、操作部７において原本番号を入力し、画像入力部２の図示しないスタートキーを押下する。
【００５１】
抽出画像生成部４の画像補正部４０Ａは、第２の追記画像１１Ｂの位置、傾き、歪み等を補正し、差分抽出部４１Ａに出力する。
【００５２】
差分抽出部４１Ａは、画像格納部３に追記抽出画像が存在しているか調べる（Ｓ１）。追記抽出画像が存在していないので、操作部７に入力された原本番号に対応する図４（ａ）に示す原本部分１０ａからなる原本画像１０を画像格納部３から読み出し、第２の追記画像１１Ｂと原本画像１０との差分を抽出し、図４（ｄ）に示す追記部分１３ａ〜１３ｃからなる第１の追記抽出画像１２Ｃを生成し、修正部４２に出力する（Ｓ２）。
【００５３】
修正部４２は、差分抽出部４１Ａの差分処理によって欠落した部分を補間する修正を行い、リンク作成部５に出力する。
【００５４】
リンク作成部５は、原本画像１０に対する第１の追記抽出画像１２Ｃのリンク情報を作成し（Ｓ３）、その第１の追記抽出画像１２Ｃをリンク情報とともに画像格納部３に格納する（Ｓ４）。
【００５５】
ユーザは、原本に記入者Ａによって追記がされた原稿を画像入力部２にセットするとともに、操作部７において原本番号を入力し、画像入力部２の図示しないスタートキーを押下する。
【００５６】
画像入力部２は、原稿から図４（ｃ）に示す原稿部分１０ａと追記部分１３ａ，１３ｂからなる第１の追記画像１１Ａを読み取り、抽出画像生成部４に出力する。
【００５７】
抽出画像生成部４の画像補正部４０Ａは、第１の追記画像１１Ａの位置、傾き、歪み等を補正し、差分抽出部４１Ａに出力する。
【００５８】
差分抽出部４１Ａは、画像格納部３に追記抽出画像が存在しているか調べる（Ｓ１）。第１の追記抽出画像１２Ｃが存在しているので、最新に入力された第１の追記画像１１Ａとその一つ前に入力された第２の追記画像１１Ｂとの差分を抽出し、図４（ｅ）に示す追記部分１３ｃからなる第２の追記抽出画像１２Ｄを生成し、修正部４２に出力する（Ｓ５）。
【００５９】
修正部４２は、差分抽出部４１Ａの差分処理によって欠落した部分を補間する修正を行い、リンク作成部５に出力する。
【００６０】
制御部８は、既に存在する第１の追記抽出画像１２Ｃと上記ステップＳ５で抽出された第２の追記抽出画像１２Ｄの時系列を調べる（Ｓ６）。この場合は、追記画像１１Ａ，１１Ｂの構成要素である追記部分１３ａ〜１３ｃが入力順序に従って減っているので、入力順序と追記順序が逆転していると判断する（Ｓ７）。
【００６１】
差分抽出部４１Ａは、制御部８の制御の下、追記順序に従い、原本と第１の追記画像１１Ａから図２（ｄ）に示す第１の追記抽出画像１２Ａを抽出し、最新に記入された第１の追記画像１１Ａとその一つ前に記入された第２の追記画像１１Ｂから図２（ｅ）に示す第２の追記抽出画像１２Ｂを抽出する（Ｓ８）。
【００６２】
リンク作成部５は、制御部８の制御により、前述したように原本画像に対する第１の追記抽出画像１２Ａのリンク情報を作成し、第１の追記抽出画像に対する第２の追記抽出画像１２Ｂのリンク情報を作成し（Ｓ３）、第１および第２の追記抽出画像１２Ａ，１２Ｂとともにそれらのリンク情報を画像格納部３に格納し、図３に示すような時系列を完成させる（Ｓ４）。このとき、第１の追記抽出画像１２Ｃ、および原本画像１０に対する第１の追記抽出画像１２Ｃのリンク情報を消去する。
【００６３】
（４）画像およびリンク情報の表示
制御部８は、操作部７により指定された表示項目に従い、原本画像１０、追記抽出画像１２Ａ，１２Ｂ、追記画像１１Ａ，１１Ｂ、あるいは原本画像１０、追記抽出画像１２Ａ，１２Ｂとともにリンク情報１４ａ，１４ｂを画像表示部６に表示する。
【００６４】
第１の追記画像１１Ａが指定された場合は、制御部８は、第１の追記抽出画像１２Ａとともにリンク先の原本画像１０を画像格納部３から読み出し、２つ画像を合成することにより、図３（ｅ）に示す第１の追記画像１１Ａを画像表示部６に表示する。
【００６５】
第２の追記画像１１Ｂが指定された場合は、制御部８は、第２の追記抽出画像１２Ｂとともにリンク先の第１の追記抽出画像１２Ａ、および更なるリンク先である原本画像１０をも読み出し、３つの画像を合成することにより、図３（ｆ）に示す第２の追記画像１１Ｂを画像表示武６に表示する。
【００６６】
なお、ここでは追記画像１１Ａ、１１Ｂを比較して追記抽出画像１２Ｄを抽出したが、追記画像１１Ｂが保存されていない場合、原本画像１０と第１の追記抽出画像１２Ｃを合成して追記画像１１Ｂを生成した後、比較処理をおこなっても良い。
【００６７】
本実施の形態において、カラー画像を２値画像に変換したのち、追記領域を抽出し、表示や格納をおこなっているが、入力されたカラー画像と追記領域抽出した２値画像を対比させ、追記抽出画素をカラーで表現して、追記領域をカラー情報として表示や格納をおこなっても良い。あるいは、２値画像に変換しないで、カラー画像のまま追記領域抽出をおこなっても構わない。
【００６８】
（第１の実施の形態の効果）
上述した第１の実施の形態によれば、追記画像の作成順序と画像入力の順序が異なる場合であっても、正しい原稿の作成順序で時系列を認識することができる。また、原本画像と各追記抽出画像とをリンクさせることにより、追記画像を保存しなくても済むため、記憶容量の小型化が図れる。さらに、追記抽出画像をグレー化することにより、保存するデータ量を小さくすることができる。
【００６９】
［第２の実施の形態］
図６は、本発明の第２の実施の形態に係る画像処理装置のブロック図である。この第２の実施の形態は、第１の実施の形態とは差分抽出部４１Ｂが異なり、他は第１の実施の形態と同様に構成されている。
【００７０】
差分抽出部４１Ｂは、原本画像と画像補正部４０Ａにより補正された追記画像との差分を抽出した後、追記領域とその位置情報を抽出する。
【００７１】
（第２の実施の形態に動作）
次に、本実施の形態の動作を図７、図８を参照して説明する。
【００７２】
図７（ａ）〜（ｃ）は、それぞれ原本画像１０、第１の追記画像１１Ａ、第２の追記画像１１Ｂを示し、図７（ｄ）は、原本画像１０および第１の追記画像１１Ａから抽出された第１の追記抽出画像１２Ａを示し、図７（ｅ）は、第１および第２の追記画像１１Ａ，１１Ｂから抽出された第２の追記抽出画像１２Ｂを示す。
【００７３】
図８（ａ）〜（ｃ）は、原本画像１０、第１および第２の追記抽出画像１２Ａ，１２Ｂ間のリンク情報を示し、図８（ｄ）〜（ｆ）は、表示画像の原本画像１０、第１および第２の追記画像１１Ａ，１１Ｂを示す。
【００７４】
（追記抽出画像の生成およびリンク情報の作成）
次に、本実施の形態における追記抽出画像の生成およびリンク情報の作成の方法について説明するが、上述の第１の実施の形態と共通となる点については説明を省略する。
【００７５】
画像入力部２が、原稿から図７（ｂ）に示す原本部分１０ａと追記部分１３ａ，１３ｂからなる第１の追記画像１１Ａを読み取り、抽出画像生成部４に出力すると、抽出画像生成部４の画像補正部４０Ａは、第１の追記画像１１Ａの位置、傾き、歪み等を補正し、２値化処理を行った後、差分抽出部４１Ｂに出力する。
【００７６】
差分抽出部４１Ｂは、操作部７に入力された原本番号に対応する図７（ａ）に示す原本部分１０ａからなる原本画像１０を画像格納部３から読み出し、第１の追記画像１１Ａと原本画像１０との差分を抽出し、図７（ｄ）に示す追記部分１３ａ，１３ｂの領域とそれらの位置情報からなる第１の追記抽出画像１２Ａを生成し、修正部４２に出力する。
【００７７】
追記部分１３ａの位置情報は、例えば、矩形の追記領域の左上部の頂点の座標（ｘ１，ｙ１）、矩形の幅（ｗ１）および高さ（ｈ１）によって特定され、追記部分１３ｂの位置情報は、例えば、矩形の追記領域の左上部の頂点の座標（ｘ２，ｙ２）、矩形の幅（ｗ２）および高さ（ｈ２）によって特定される。
【００７８】
その後、第１の実施の形態と同様に、修正部４２は、差分抽出部４１Ｂの差分処理によって欠落した部分を補間する修正を行い、リンク作成部５は、原本画像１０に対する第１の追記抽出画像１２Ａのリンク情報１４ａを作成し、第１の追記抽出画像１２Ａをそのリンク情報とともに画像格納部３に格納する。
【００７９】
第２の追記抽出画像の生成およびリンク情報の作成についても同様に行われる。第２の追記抽出画像１２Ｂは、図７（ｅ）に示すように、追記部分１３ｃの領域と位置情報からなる。追記部分１３ｃの位置情報は、矩形上の追記領域の左上部の頂点の座標（ｘ４，ｙ４）、矩形の幅（ｗ４）および高さ（ｈ４）によって特定される。また、第２の追記抽出画像１２Ｂが原本画像１０とリンク付けされた後に第１の追記画像１１Ａが入力された場合についても、第１の実施の形態と同様の処理がなされる。
【００８０】
なお、本実施の形態においても第1の実施の形態と同様に、カラー画像を２値画像に変換したのち、追記領域を抽出し、表示や格納をおこなっているが、入力されたカラー画像と追記領域抽出した２値画像を対比させ、追記抽出画素をカラーで表現して、追記領域をカラー情報として表示や格納をおこなっても良い。あるいは、２値画像に変換しないで、カラー画像のまま追記領域抽出をおこなっても構わない。
【００８１】
（第２の実施の形態の効果）
上述した第２の実施の形態によれば、追記抽出画像として追記領域とその位置情報からなるものとすることにより、より少ないデータ量で追記画像を保存することができるので、より多くのデータを保存することができる。
【００８２】
［第３の実施の形態］
図９は、本発明の第３の実施の形態に係る画像処理装置のブロック図である。この第３の実施の形態は、第１の実施の形態とは画像補正部４０Ｂおよび差分抽出部４１Ｃが異なり、他は第１の実施の形態と同様に構成されている。
【００８３】
画像補正部４０Ｂは、画像入力部２から出力される追記画像の位置、傾き、歪み等を補正するとともに、カラー情報をグレー情報に変換せずに差分抽出部４１Ｃに出力する。
【００８４】
差分抽出部４１Ｃは、画像補正部４０Ａにより補正された追記画像と原本画像との差分を抽出した後、追記領域、その位置情報および色情報からなる追記抽出画を抽出する。
【００８５】
（第３の実施の形態に動作）
次に、本実施の形態の動作を図１０、図１１を参照して説明する。
【００８６】
図１０（ａ）〜（ｃ）は、それぞれ原本画像１０、第１の追記画像１１Ａ、第２の追記画像１１Ｂを示し、図１０（ｄ）は、原本画像１０および第１の追記画像１１Ａから抽出された第１の追記抽出画像１２Ａを示し、図１０（ｅ）は、第１および第２の追記画像１１Ａ，１１Ｂから抽出された第２の追記抽出画像１２Ｂを示す。
【００８７】
図１１（ａ）〜（ｃ）は、原本画像１０Ａ、第１および第２の追記抽出画像１２Ａ，１２Ｂ間のリンク情報を示し、図８（ｄ）〜（ｆ）は、表示画像の原本画像１０、第１および第２の追記画像１１Ａ，１１Ｂを示す。
【００８８】
（追記抽出画像の生成およびリンク情報の作成）
次に、本実施の形態における追記抽出画像の生成およびリンク情報の作成の方法について説明するが、上述の第２の実施の形態と共通となる点については説明を省略する。
【００８９】
画像入力部２が、原稿から図１０（ｂ）に示す原本部分１０ａと追記部分１３ａ，１３ｂ，１３ｄからなる第１の追記画像１１Ａを読み取り、抽出画像生成部４に出力すると、抽出画像生成部４の画像補正部４０Ｂは、第１の追記画像１１Ａの位置、傾き、歪み等を補正し、カラー情報を含んだまま差分抽出部４１Ｃに出力する。同図の場合の追記部分１３ｄは、文字「分析結果」の上にマーキングされたカラーマークからなる。なお、追記部分１３ａ，１３ｂは、第１および第２の実施の形態と同様である。
【００９０】
差分抽出部４１Ｃは、操作部７に入力された原本番号に対応する図１０（ａ）に示す原本部分１０ａからなる原本画像１０を画像格納部３から読み出し、第１の追記画像１１Ａと原本画像１０との差分を抽出し、図１０（ｄ）に示す追記部分１３ａ，１３ｂ，１３ｄ、それらの位置情報および色情報からなる第１の追記抽出画像１２Ａを生成し、修正部４２に出力する。
【００９１】
色情報は、ＲＧＢの３原色に分解し、各色毎の濃度を数値化することにより特定される。
【００９２】
追記部分１３ａの位置情報は、座標（ｘ１，ｙ１）、大きさ（ｗ１，ｈ１）によって特定され、色情報は、（Ｒ１，Ｇ１，Ｂ１）によって特定される。また、追記部分１３ｂの位置情報は、座標（ｘ２，ｙ２）、大きさ（ｗ２，ｈ２）によって特定され、色情報は、（Ｒ２，Ｇ２，Ｂ２）によって特定される。また、追記部分１３ｄの位置情報は、座標（ｘ３，ｙ３）、大きさ（ｗ３，ｈ３）によって特定され、色情報は、（Ｒ３，Ｇ３，Ｂ３）によって特定される。
【００９３】
その後、第１の実施の形態と同様に、修正部４２は、差分抽出部４１Ｂの差分処理によって欠落した部分を補間する修正を行い、リンク作成部５は、原本画像１０に対する第１の追記抽出画像１２Ａのリンク情報１４ａを作成し、第１の追記抽出画像１２Ａをそのリンク情報とともに画像格納部３に格納する。
【００９４】
第２の追記抽出画像の生成およびリンク情報の作成についても同様に行われる。第２の追記抽出画像１２Ｂは、図１０（ｅ）に示すように、追記部分１３ｃの領域、位置情報、色情報からなる。追記部分１３ｃの位置情報は、座標（ｘ４，ｙ４）、大きさ（ｗ４，ｈ４）によって特定され、色情報は、（Ｒ４，Ｇ４，Ｂ４）によって特定される。また、第２の追記抽出画像１２Ｂが原本画像１０とリンク付けされた後に第１の追記画像１１Ａが入力された場合についても、第１の実施の形態と同様の処理がなされる。
【００９５】
（第３の実施の形態の効果）
上述した第３の実施の形態によれば、追記抽出画像として追記領域とその位置情報および色情報からなるものとすることにより、追記画像にカラーマーク等の色情報が含まれている場合でも、正しい原稿の作成順序で時系列を認識することができる。
【００９６】
［第４の実施の形態］
図１２は、本発明の第４の実施の形態に係る画像処理装置のブロック図である。この第４実施の形態は、第２の実施の形態とは差分抽出部４１Ｄおよび制御部８が異なり、他は第２の実施の形態と同様に構成されている。第４の実施の形態は、１つの原本画像に対して２つの追記画像が存在した場合においてリンク情報を作成するものである。ここでは、第２の実施の形態に示すような、追記抽出画像が追記領域と位置情報とから特定される場合について説明する。
【００９７】
差分抽出部４１Ｄは、画像補正部４０Ａにより補正された追記画像と原本画像との差分を抽出した後、追記抽出画像に関してその追記領域を分割して、その位置情報と共に認識する。
【００９８】
制御部８は、第１の実施の形態と同様に、２つの追記抽出画像の時系列を調べ、入力順序と追記順序が一致しているか否かを判断するものであるが、１つの原本画像に対して複数の追記画像が存在した場合、あるいは１つの追記画像に対して複数の追記画像が存在する場合においても、時系列を判断できるものである。すなわち、画像の構成要素が入力順序に従って増えている場合は、入力順序が追記順序と一致していると判断し、画像の構成要素が入力順序に従って減っている場合は、入力順序が追記順序と逆転していると判断し、画像の構成要素が入力順序に従って増えている領域と減っている領域が存在する場合は、１つの原本画像あるいは１つの追記画像に対して複数の追記画像が存在していると判断する。
【００９９】
（第４の実施の形態の動作）
次に、本実施の形態の動作を図１３、図１４を参照して説明する。
【０１００】
図１３（ａ）〜（ｃ）は、それぞれ第１の追記画像１１Ａ、第２の追記画像１１Ｂ、第３の追記画像１１Ｃを示し、図１３（ｄ）は、第１および第２の追記画像１１Ａ，１１Ｂから抽出された第２の追記抽出画像１２Ｂを示し、図１３（ｅ）は、第２および第３の追記画像１１Ｂ，１１Ｃから抽出された第３の追記抽出画像１２Ｅを示す。
【０１０１】
図１４（ａ）〜（ｄ）は、原本画像１０Ａ、第１乃至第３の追記抽出画像１２Ａ，１２Ｂ，１２Ｅ間のリンク情報を示し、図１４（ｅ）〜（ｈ）は、表示画像の原本画像１０、第１乃至第３の追記画像１１Ａ〜１１Ｃを示す。
【０１０２】
（追記抽出画像の生成およびリンク情報の作成）
１つの原本あるいは原本に追記がされた１つの原稿からそれぞれ別個に追記がされる場合がある。このような場合の追記抽出画像の生成およびリンク情報の作成について図１３、図１４を参照して説明するが、上述の第２の実施の形態と共通となる点については説明を省略する。
【０１０３】
なお、原本画像１０と第１の追記画像１１Ａから第１の追記抽出画像１２Ａが抽出され、第１の追記抽出画像１２Ａがリンク情報とともに画像格納部３に格納され、第１の追記画像１１Ａと第２の追記画像１１Ｂから図１３（ｄ）に示す第２の追記抽出画像１２Ｂが抽出され、第２の追記抽出画像１２Ｂがリンク情報とともに画像格納部３に格納されているものとする。
【０１０４】
次に、画像入力部２が、原稿から図１３（ｃ）に示す原本部分１０ａと追記部分１３ａ，１３ｂ，１３ｅからなる第３の追記画像１１Ｃを読み取り、抽出画像生成部４に出力すると、抽出画像生成部４の画像補正部４０Ａは、第３の追記画像１１Ｃの位置、傾き、歪み等を補正し、グレー化処理を行った後、差分抽出部４１Ｄに出力する。同図の場合の追記部分１３ｅは、×印と文字「削除」からなる。なお、追記部分１３ａ，１３ｂは、第２の実施の形態と同様である。
【０１０５】
差分抽出部４１Ｄは、操作部７に入力された原本番号に対応する図１４に示す原本画像１０、原本画像１０にリンクする第１の追記画像１１Ａおよび第２の追記画像１１Ｂを画像格納部３から読み出す。
【０１０６】
制御部８は、第１の実施の形態と同様に、２つの追記抽出画像の時系列を調べる。第２の追記画像１１Ｂは、第１の追記画像１１Ａに対して追記部分１３ｃが付加され、第３の追記画像１１Ｃは、第１の追記画像１１Ａに対して追記部分１３ｅが付加されていることから、第１の追記画像１１Ａを作成した後、第２および第３の追記画像１１Ｂ，１１Ｃが並行して作成されたことなり、第３の追記画像１１Ｃの差分処理の対象として第１の追記画像１１Ａを選択する。図１３（ｅ）に示す追記部分１３ｅおよびその位置情報からなる第３の追記抽出画像１２Ｅを生成し、修正部４２に出力する。追記部分１３ｅの位置情報は、座標（ｘ５，ｙ５）、大きさ（ｗ５，ｈ５）によって特定される。
【０１０７】
その後、第１の実施の形態と同様に、修正部４２は、差分抽出部４１Ｄの差分処理によって欠落した部分を補間する修正を行い、リンク作成部５は、第１の追記抽出画像１２Ａに対する第３の追記抽出画像１２Ｅのリンク情報１４ｃを作成し、第３の追記抽出画像１２Ｅをそのリンク情報とともに画像格納部３に格納する。
【０１０８】
（第４の実施の形態の効果）
上述した第４の実施の形態によれば、同一の原稿から派生した複数の追記画像が存在しても、各追記画像の時系列を正確に判断することができる。なお、本実施の形態において、原本画像に対して複数の追記画像が並行して作成された場合も同様に各追記画像の時系列を判断することができる。
【０１０９】
［第５の実施の形態］
図１５は、本発明の第５の実施の形態に係る画像処理装置のブロック図である。この第５実施の形態は、文字認識部４４を有する点を除いては、第１の実施の形態と同様に構成されている。
【０１１０】
画像入力部２が読み取る画像には、原本を特定可能なコードが原本識別情報として予め記載されている。コードは、数字等の文字でもバーコード等でもよい。
【０１１１】
文字認識部４４は、原稿画像に含まれたコードの文字パターンと辞書に登録されている文字パターンと照合して文字認識を行うものである。
【０１１２】
差分抽出部４１Ｅは、文字認識部４４によって認識されたコードに対応する原本画像を画像格納部３から読み出して差分抽出を行う。
【０１１３】
（第５の実施の形態の効果）
上述した第５の実施の形態によれば、ユーザが原本番号を入力しなくても、自動的に対応する原本を識別してリンク付けを行うことができる。
【０１１４】
［他の実施の形態］
本発明は、上記各実施の形態に限定されず、その発明の要旨を変更しない範囲内で種々変形実施が可能である。例えば、その発明の要旨を変更しない範囲内で各実施の形態の構成要素を任意に組み合わせることができる。
【０１１５】
また、追記画像間のリンク情報を作成し、追記画像をリンク情報とともに画像格納部に格納してもよい。追記画像を表示する際の合成画像を作成作業を省ける。
【図面の簡単な説明】
【０１１６】
【図１】本発明の第１の実施の形態に係る画像処理装置の構成を示し、（ａ）はブロック図、（ｂ）は差分抽出部の回路例を示す。
【図２】本発明の第１の実施の形態に係る画像処理装置における追記抽出画像の抽出方法を説明するための図である。
【図３】本発明の第１の実施の形態に係る画像処理装置における原本画像と追記抽出画像のリンク方法を説明するための図である。
【図４】本発明の第１の実施の形態に係る画像処理装置における追記抽出画像の抽出方法を説明するための図である。
【図５】本発明の第１の実施の形態に係る画像処理装置における追記抽出画像の抽出方法を説明するためのフローチャートである。
【図６】本発明の第２の実施の形態に係る画像処理装置の構成を示す図である。
【図７】本発明の第２の実施の形態に係る画像処理装置における追記抽出画像の抽出方法を説明するための図である。
【図８】本発明の第２の実施の形態に係る画像処理装置における原本画像と追記抽出画像のリンク方法を説明するための図である。
【図９】本発明の第３の実施の形態に係る画像処理装置の構成を示す図である。
【図１０】本発明の第３の実施の形態に係る画像処理装置における追記抽出画像の抽出方法を説明するための図である。
【図１１】本発明の第３の実施の形態に係る画像処理装置における原本画像と追記抽出画像のリンク方法を説明するための図である。
【図１２】本発明の第４の実施の形態に係る画像処理装置の構成を示す図である。
【図１３】本発明の第４の実施の形態に係る画像処理装置における追記抽出画像の抽出方法を説明するための図である。
【図１４】本発明の第４の実施の形態に係る画像処理装置における原本画像と追記抽出画像のリンク方法を説明するための図である。
【図１５】本発明の第５の実施の形態に係る画像処理装置の構成を示す図である。
【符号の説明】
【０１１７】
１、画像処理装置
２、画像入力部
３、画像格納部
４、抽出画像生成部
５、リンク生成部
６、画像表示部
７、操作部
８、制御部
１０、原本画像
１０ａ、原本部分
１１Ａ、第１の追記画像
１１Ｂ、第２の追記画像
１１Ｃ、第３の追記画像
１２Ａ、第１の追記抽出画像
１２Ｂ、第２の追記抽出画像
１２Ｃ、第３の追記抽出画像
１３ａ〜１３ｅ、追記部分
１４ａ、１４ｂ、１４ｃ、リンク情報
４０Ａ、４０Ｂ、画像補正部
４１Ａ〜４１Ｅ、差分抽出部
４２、修正部
４３、ＮＡＮＤ回路
４４、文字認識部
【図１】
2006185027.tif 000003
【図２】
2006185027.tif 000004
【図３】
2006185027.tif 000005
【図４】
2006185027.tif 000006
【図５】
2006185027.tif 000007
【図６】
2006185027.tif 000008
【図７】
2006185027.tif 000009
【図８】
2006185027.tif 000010
【図９】
2006185027.tif 000011
【図１０】
2006185027.tif 000012
【図１１】
2006185027.tif 000013
【図１２】
2006185027.tif 000014
【図１３】
2006185027.tif 000015
【図１４】
2006185027.tif 000016
【図１５】
2006185027.tif 000017