(57)【要約】【課題】  印刷物からオリジナルの電子文書を検索する場合に、その印刷物が複数のページから構成される文書の場合や、その印刷物にページの追加、欠落、変更、入れ替えがある場合であっても、オリジナルの電子文書を精度良く検索することができる画像検索装置、方法、記録媒体及びプログラムを提供する。【解決手段】  複数ページからなる複数の文書画像を含む画像データ群をそれぞれの特徴量と対応付けてクライアントＰＣ１０２等に記憶しておく。ＭＦＰ１００は、複数ページの印刷物をページ単位に電子的に読み取って電子データに変換し、その特徴量を抽出する。そして、電子データの特徴量と画像データ群に含まれるそれぞれの文書画像の特徴量とをページごとに比較して類似度を算出し、その類似度に基づいて画像データ群の中から電子データに対応する文書画像を候補画像データとして検索する。【選択図】  図３Ｃ
2006031181.tif 000002
【特許請求の範囲】
【請求項１】
複数ページからなる複数の文書画像を、それぞれの特徴量と対応付けて記憶する記憶手段と、
複数ページの印刷物をページ単位に電子的に読み取って電子データに変換する読取手段と、
前記電子データの特徴量を抽出する抽出手段と、
前記電子データの特徴量と前記記憶手段に記憶されたそれぞれの文書画像の特徴量とをページごとに比較して類似度を算出し、該類似度に基づいて前記複数の文書画像の中から前記電子データに対応する文書画像を候補データとして検索する検索手段と
を備えることを特徴とする画像検索装置。
【請求項２】
前記検索手段が、前記電子データに含まれるすべてのページと、前記記憶手段に記憶されたそれぞれの文書画像のすべてのページとを比較してページごとに類似度を算出し、それぞれのページごとの類似度を統合した統合類似度を算出し、該統合類似度に基づいて該電子データに対応する文書画像を候補データとして検索することを特徴とする請求項１に記載の画像検索装置。
【請求項３】
前記検索手段が、前記電子データの最初のページから順に、前記複数の文書画像のそれぞれのページと比較して類似度を算出し、該類似度が所定値未満の文書画像を候補データから削除しつつ、最後のページまで候補データを検索することを特徴とする請求項１に記載の画像検索装置。
【請求項４】
前記検索手段は、前記電子データの最初のページと前記複数の文書画像のページとを比較して類似度を算出し、該類似度に基づいて前記複数の文書画像の中から前記電子データに対応する文書画像を候補データとして検索し、前記電子データに含まれる２ページ目から順に、前記候補データに含まれるそれぞれの文書画像のページと比較して類似度を算出し、該類似度が所定値未満の文書画像を候補データから削除しつつ最後のページまで候補データを検索することを特徴とする請求項１に記載の画像検索装置。
【請求項５】
前記検索手段が、前記電子データの最初のページから順に、前記複数の文書画像それぞれのページと比較して類似度を算出し、該類似度が所定値未満の文書画像を候補データから削除しつつ所定のページまで候補データを検索することを特徴とする請求項１に記載の画像検索装置。
【請求項６】
前記検索手段が、前記候補データの候補数が所定数を下回ったときのページまで検索することを特徴とする請求項５に記載の画像検索装置。
【請求項７】
前記検索手段によって算出されたページごとの前記類似度に基づいて、前記印刷物のページの追加、欠落、入れ替え、差し換えを検出する検出手段をさらに備えることを特徴とする請求項１から６までのいずれか１項に記載の画像検索装置。
【請求項８】
前記抽出手段が、
前記電子データを複数のブロックに分割するブロックセレクション手段と、
前記ブロックの種別を特定する特定手段と、
特定されたブロックの種別に基づいて各ブロックの特徴量を抽出する第１の抽出手段と、
抽出された各ブロックの特徴量をページ単位にまとめて前記電子データの特徴量を抽出する第２の抽出手段と
を備えることを特徴とする請求項１から７までのいずれか１項に記載の画像検索装置。
【請求項９】
前記特徴量が、画像を複数のメッシュブロックに分割した各メッシュブロックの色ヒストグラム中の代表色と各メッシュブロックの位置情報とを対応付けた色特徴情報であることを特徴とする請求項１から８までのいずれか１項に記載の画像検索装置。
【請求項１０】
前記類似度が、前記電子データと前記文書画像のそれぞれの前記メッシュブロック上の色特徴情報から取得される色ビンＩＤ間の類似距離であることを特徴とする請求項９に記載の画像検索装置。
【請求項１１】
前記検索手段によって前記候補データが複数検索されたか否かを判定する判定手段と、
前記候補データが複数検索された場合、複数の前記候補データのサムネイル画像を一覧表示する表示手段と、
一覧表示された複数の候補データのサムネイル画像の中から一の候補データを選択させる選択手段と
をさらに備えることを特徴とする請求項１から１０までのいずれか１項に記載の画像検索装置。
【請求項１２】
複数ページからなる複数の文書画像を、それぞれの特徴量と対応付けて記憶装置に記憶する記憶工程と、
複数ページの印刷物をページ単位に電子的に読み取って電子データに変換する読取工程と、
前記電子データの特徴量を抽出する抽出工程と、
前記電子データの特徴量と前記記憶手段に記憶されたそれぞれの文書画像の特徴量とをページごとに比較して類似度を算出し、該類似度に基づいて前記複数の文書画像の中から前記電子データに対応する文書画像を候補データとして検索する検索工程と
を有することを特徴とする画像検索方法。
【請求項１３】
コンピュータに、
複数ページからなる複数の文書画像を、それぞれの特徴量と対応付けて記憶装置に記憶する記憶手順と、
複数ページの印刷物をページ単位に電子的に読み取って電子データに変換する読取手順と、
前記電子データの特徴量を抽出する抽出手順と、
前記電子データの特徴量と前記記憶手段に記憶されたそれぞれの文書画像の特徴量とをページごとに比較して類似度を算出し、該類似度に基づいて前記複数の文書画像の中から前記電子データに対応する文書画像を候補データとして検索する検索手順と
を実行させるためのプログラム。
【請求項１４】
請求項１３に記載されたプログラムを格納したことを特徴とするコンピュータ読み取り可能な記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像検索装置、方法、記憶媒体及びプログラムに関し、特に、複写機等の画像入力装置で読み取った紙文書から、それに対する印刷、配信、蓄積、編集等に活用可能なオリジナルの電子データを検索する画像検索装置、方法、記憶媒体及びプログラムに関する。
【背景技術】
【０００２】
近年、オフィスのペーパレス化が唱えられ、電子文書の利用が盛んになりつつある。その一方で、紙文書には、目が疲れにくい、全体を概観しやすい、書き込める等の電子文書にはないメリットがある。そのため、現在、多くのオフィスでは、電子文書と紙文書のそれぞれのメリットを生かし、電子文書と紙文書が併用されている状況にある。そこで、このような状況において紙文書と電子文書との取り扱いの差異を軽減するために、電子文書から紙文書へ、或いは紙文書から電子文書への相互の移行が容易にできるような環境が求められている。
【０００３】
電子文書から紙文書への移行は、一般に電子文書をプリンタを用いて紙に印刷することで容易に達成できる。それに対して、紙文書から電子文書への移行は、紙文書をスキャナを用いて読み取り、画像データとして電子化する方法が一般的に行われている。
【０００４】
しかしながら、紙文書に対応するオリジナルの電子文書が既に存在している場合は、紙文書を改めて電子文書に移行するよりも、紙文書に対応するオリジナルの電子文書を用いて、紙文書を電子文書に移行するほうが望ましい。
【０００５】
これを実現する方法として、例えば、電子文書をラスタ画像に変換して電子文書と対応付けて保存し、紙文書をスキャンして得られたラスタ画像と、電子文書を変換したラスタ画像とを、その特徴量の類似性を比較することにより、紙文書のラスタ画像からオリジナルの電子文書を検索することを可能にする方法が知られている（例えば、特許文献１参照。）。
【０００６】
例えば、会議で発表する時に用いた資料を紙文書として出席者に配布されることは一般的に行われているが、上記方法により、配布された紙文書からオリジナルの電子文書を取り出すことが可能になる。そのため、会議の出席者は、配布された紙文書を利用して、対応するオリジナルの電子文書を編集したり、会議に出席していない人にその電子文書から得られる紙文書を配布したりすることが可能になる。
【０００７】
また、オリジナル文書が紙文書である場合に、その紙文書をスキャンして得られたラスタ画像データをオリジナルのラスタ画像データとして記憶しておき、配布された紙文書をスキャンして得られたラスタ画像データと、オリジナルのラスタ画像データとを比較することにより、オリジナル文書を検索する方法が知られている（例えば、特許文献２参照。）。
【０００８】
現状では、製品のパンフレットのように、社外から紙文書としてオリジナル文書を入手する場合も多くある。このような場合、オリジナルの紙文書のコピーが何世代にも渡って行われると画質が劣化することから、このようにして、オリジナル文書のラスタ画像データを保持しておき、オリジナルのラスタ画像データを検索することには意味がある。
【０００９】
さらに、紙原稿をスキャンして得られたラスタ画像データをオリジナルのラスタ画像データと比較してオリジナル文書を検索する際に、ページごとにスキャンして得られたラスタ画像データとオリジナル画像データとの比較を行うことによって、紙原稿をすべてスキャンしなくてもオリジナル原稿を検索する方法が知られている（例えば、特許文献３参照）。
【特許文献１】特開２００１−２５６２５６号公報
【特許文献２】特開平５−３７７４８号公報
【特許文献３】特願２００３−１４３４９３号公報
【発明の開示】
【発明が解決しようとする課題】
【００１０】
しかしながら、一般的な紙文書には、１ページのみで構成される文書よりも、複数ページから構成される文書が多い。これに対し、特許文献１に記載の技術によれば、全ページ分のラスタ画像の特徴量を比較条件とするために、スキャンした紙文書のラスタ画像を一時的に記憶保持しておくメモリが全ページ分必要になり、メモリ容量が増加するという課題があった。
【００１１】
仮に、特許文献１に記載の技術において、全ページ分のラスタ画像の特徴量を比較条件としないでオリジナルの電子文書を特定するためには、比較先画像となるオリジナル文書それぞれの全ページとのラスタ画像を比較する必要があり、処理時間が増加するという課題が生じる。
【００１２】
また、特許文献２に記載の技術によれば、先頭ページ等の特定ページのみを比較条件とすることによって、使用するメモリを低減する方法が示されている。しかし、オフィスで使用される文書には類似する文書も多く、先頭ページ等の特定ページのみを比較条件とするだけではオリジナルの文書を適切に特定できない場合があり、オリジナル文書を精度よく検索することができないという課題があった。
【００１３】
また、特許文献３に記載の技術によれば、先頭ページから順に比較する際に、候補を絞っていくことによって、処理に必要とするメモリ容量を増加させない方法が示されている。しかし、紙文書は、取り扱われているうちに得てして、ばらばらになりがちである。例えば、紙文書中の一部のページを紛失してしまったり、順番が入れ替わってしまったり、場合によっては他の文書のページが混ざってしまうことさえある。そのため、スキャンした紙文書の中にそのようなページが存在すると、特許文献３に記載の技術では、本来は候補となるべきオリジナル文書が検索途中で候補からはずれてしまい、オリジナル文書を適切に検索できなくなるという課題があった。
【００１４】
さらに、オリジナル文書が特定された時点で紙文書のスキャンを終了するために、そのページ以降に存在する紙文書の追加、欠落、変更、入れ替えを検出することができず、オリジナル原稿との差異を適切に認識することができないという課題があった。
【００１５】
本発明は、このような事情を考慮してなされたものであり、印刷物からオリジナルの電子文書を検索する場合に、その印刷物が複数のページから構成される文書の場合や、その印刷物にページの追加、欠落、変更、入れ替えがある場合であっても、オリジナルの電子文書を精度良く検索することができる画像検索装置、方法、記録媒体及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【００１６】
上記課題を解決するために、本発明に係る画像検索装置は、
複数ページからなる複数の文書画像を、それぞれの特徴量と対応付けて記憶する記憶手段と、
複数ページの印刷物をページ単位に電子的に読み取って電子データに変換する読取手段と、
前記電子データの特徴量を抽出する抽出手段と、
前記電子データの特徴量と前記記憶手段に記憶されたそれぞれの文書画像の特徴量とをページごとに比較して類似度を算出し、該類似度に基づいて前記複数の文書画像の中から前記電子データに対応する文書画像を候補データとして検索する検索手段と
を備えることを特徴とする。
【００１７】
また、上記課題を解決するために、本発明に係る画像検索方法は、
複数ページからなる複数の文書画像を、それぞれの特徴量と対応付けて記憶装置に記憶する記憶工程と、
複数ページの印刷物をページ単位に電子的に読み取って電子データに変換する読取工程と、
前記電子データの特徴量を抽出する抽出工程と、
前記電子データの特徴量と前記記憶手段に記憶されたそれぞれの文書画像の特徴量とをページごとに比較して類似度を算出し、該類似度に基づいて前記複数の文書画像の中から前記電子データに対応する文書画像を候補データとして検索する検索工程と
を有することを特徴とする。
【００１８】
さらに、上記課題を解決するために、本発明に係るプログラムは、
コンピュータに、
複数ページからなる複数の文書画像を、それぞれの特徴量と対応付けて記憶装置に記憶する記憶手順と、
複数ページの印刷物をページ単位に電子的に読み取って電子データに変換する読取手順と、
前記電子データの特徴量を抽出する抽出手順と、
前記電子データの特徴量と前記記憶手段に記憶されたそれぞれの文書画像の特徴量とをページごとに比較して類似度を算出し、該類似度に基づいて前記複数の文書画像の中から前記電子データに対応する文書画像を候補データとして検索する検索手順と
を実行させることを特徴とする。
【００１９】
さらにまた、本発明は、上記プログラムを格納したことコンピュータ読み取り可能な記憶媒体であることを特徴とする。
【発明の効果】
【００２０】
本発明によれば、印刷物から電子文書を検索する場合に、その印刷物が複数のページから構成される文書の場合や、その印刷物にページの追加、欠落、変更、入れ替えがある場合であっても、電子文書を精度良く検索することができる。
【００２１】
また、本発明によれば、印刷物から電子文書を検索する場合に、当該印刷物にページの追加、欠落、変更、入れ替えがあった場合、その状態を好適に検出することができる。
【発明を実施するための最良の形態】
【００２２】
以下、図面を参照して、本発明の一実施形態について詳細に説明する。
【００２３】
＜第１の実施形態＞
図１は、本発明の第１の実施形態に係る画像処理システムの構成を示すブロック図である。図１に示すように、第１の実施形態に係る画像処理システムは、オフィス１０とオフィス２０とをインターネット等のネットワーク１０４で接続された環境で実現する。
【００２４】
オフィス１０内に構築されたＬＡＮ１０７には、複数種類の機能を実現する複合機であるＭＦＰ（Ｍｕｌｔｉ−Ｆｕｎｃｔｉｏｎ  Ｐｅｒｉｐｈｅｒａｌ）１００、ＭＦＰ１００を制御するマネージメントＰＣ１０１、クライアントＰＣ１０２、文書管理サーバ１０６ａ及びそのデータベース１０５ａ、及びプロキシサーバ１０３ａが接続されている。また、オフィス２０内に構築されたＬＡＮ１０８には、文書管理サーバ１０６ｂ及びそのデータベース１０５ｂが接続されている。
【００２５】
オフィス１０内のＬＡＮ１０７及びオフィス２０内のＬＡＮ１０８は、双方のオフィスのプロキシサーバ１０３ａ、ｂを介してネットワーク１０４に接続されている。
【００２６】
ＭＦＰ１００は、特に、紙文書を電子的に読み取る画像読取部と、画像読取部から得られる画像信号に対する画像処理を実行する画像処理部とを有している。そして、ＭＦＰ１００は、この画像信号をＬＡＮ１０９を介してマネージメントＰＣ１０１に送信することができる。
【００２７】
マネージメントＰＣ１０１は、通常のＰＣで実現することが可能であり、内部に画像記憶部、画像処理部、表示部、入力部等の各種構成要素を有する。尚、その構成要素の一部をＭＦＰ１００に一体化して構成するようにしてもよい。
【００２８】
尚、ネットワーク１０４は、典型的にはインターネット、ＬＡＮ、ＷＡＮ、電話回線、専用デジタル回線、ＡＴＭ、フレームリレー回線、通信衛星回線、ケーブルテレビ回線、データ放送用無線回線等のいずれか、又はこれらの組み合わせにより実現されるいわゆる通信ネットワークであり、データの送受信が可能であれば良い。
【００２９】
また、マネージメントＰＣ１０１、クライアントＰＣ１０２、文書管理サーバ等の各種端末はそれぞれ、汎用コンピュータに搭載される標準的な構成要素（例えば、ＣＰＵ、ＲＡＭ、ＲＯＭ、ハードディスク、外部記憶装置、ネットワークインタフェース、ディスプレイ、キーボード、マウス等）を有している。
【００３０】
次に、ＭＦＰ１００の詳細構成について、図２を用いて説明する。図２は、本発明の第１の実施形態におけるＭＦＰ１００の細部構成を示すブロック図である。
【００３１】
図２において、原稿台とオートドキュメントフィーダ（ＡＤＦ）を含む画像読取部１１０は、束状の、或いは１枚の原稿画像を光源（不図示）で照射し、原稿反射像をレンズで固体撮像素子上に結像し、固体撮像素子からラスタ状の画像読取信号を所定密度（例えば、６００ＤＰＩ）のラスタ画像として得る。
【００３２】
尚、第１の実施形態では、画像読取部１１０で読み取られる印刷物として、紙文書を例に挙げて説明するが、紙以外の記録媒体（例えば、ＯＨＰシート、フィルム等の透過原稿、布等）からなる印刷物を画像読取部１１０の読み取り対象としても良い。
【００３３】
また、ＭＦＰ１００は、画像読取信号に対応する画像を印刷部１１２で記録媒体に印刷する複写機能を有している。そして、原稿画像を１つ複写する場合、ＭＦＰ１００は、画像読取信号をデータ処理部１１５で画像処理して記録信号を生成し、これを印刷部１１２によって記録媒体上に印刷させる。一方、原稿画像を複数複写する場合、ＭＦＰ１００は、記憶部１１１に一旦１つ分の記録信号を記憶保持させた後、これを印刷部１１２に順次出力して記録媒体上に印刷させる。
【００３４】
一方、クライアントＰＣ１０２から出力される記録信号は、ＬＡＮ１０７及びネットワークＩＦ１１４を介してデータ処理部１１５が受信し、データ処理部１１５は、その記録信号を印刷部１１２で記録可能なラスタデータに変換した後、印刷部１１２によって記録媒体上に印刷させる。
【００３５】
ＭＦＰ１００への操作者の指示は、ＭＦＰ１００に装備されたキー操作部とマネージメントＰＣ１０１に接続されたキーボード及びマウスからなる入力部１１３から行われ、これら一連の動作はデータ処理部１１５内の制御部（不図示）で制御される。また、操作入力の状態表示及び処理中の画像データの表示は、表示部１１６で行われる。
【００３６】
記憶部１１１は、マネージメントＰＣ１０１からも制御され、ＭＦＰ１００とマネージメントＰＣ１０１とのデータの送受信及び制御は、ネットワークＩＦ１１７及びＬＡＮ１０９を介して行われる。
【００３７】
データベース１１８は、画像読取部１１０で読み取った紙文書の文書画像、その文書画像に関する情報、及び、クライアントＰＣ１０２内のハードディスク内、或いはオフィス１０、２０内の文書管理サーバ１０６ａ、ｂのデータベース１０５ａ、ｂ内の電子文書の画像画像に関する情報を登録、管理する。
【００３８】
尚、ＭＦＰ１００では、後述する各種処理を実行するための各種操作・表示をユーザに提供するユーザインタフェースを、表示部１１６及び入力部１１３によって実現する。
【００３９】
本実施形態に係る画像処理システムで実行する処理としては、大きく分けて、画像データを登録する登録処理と、所望の画像データを検索する検索処理との２つがある。尚、本実施形態では、画像処理システム全体の処理効率を向上するために、以下に説明する各種処理を、画像処理システムを構成する各種端末に分散させて実行するようにしているが、１つの端末（例えば、ＭＦＰ１００）上で実行するようにしても構わない。
【００４０】
最初に、第１の実施形態に係る画像処理システムにおける登録処理の詳細について説明する。
【００４１】
［登録処理の概要］
登録対象の画像データの登録方法としては、文書作成アプリケーション等で作成された電子ファイルをオリジナル文書として登録する場合と、紙文書をスキャンした電子ファイルをオリジナル文書として登録する場合とがある。
【００４２】
（Ａ）電子文書の登録処理の概要
まず、マネージメントＰＣ１０１の制御のもとに、電子文書をオリジナル文書としてＭＦＰ１００内のデータベース１１８に登録する登録処理の概要について図３Ａを用いて説明する。図３Ａは、本発明の第１の実施形態に係る画像処理システムにおける電子文書の登録処理を説明するためのフローチャートである。尚、登録対象の電子文書は、クライアントＰＣ１０２内のハードディスク内、オフィス１０、２０内の文書管理サーバ１０６ａ、ｂのデータベース１０５ａ、ｂ内のいずれかに格納されている。
【００４３】
そこで、まず、マネージメントＰＣ１０１は、これらの格納元から定められた順序に従って電子文書を一つずつ取得し、ネットワークＩ／Ｆ１１４を介して記憶部１１１に格納する（ステップＳ３１０１）。次に、全ての電子文書の取得が終了したか否かを判定する（ステップＳ３１０２）。その結果、電子文書の取得が終了して新たな電子文書を取得しない場合（Ｙｅｓ）は、登録処理を終了する。一方、電子文書の取得が終了していない場合（Ｎｏ）はステップＳ３１０３に進む。
【００４４】
ステップＳ３１０３では、取得した電子文書に固有の文書ＩＤを発行し、その電子文書（電子ファイル）の格納場所を示すアドレスと対応付けて、データベース１１８内のアドレス情報として登録する。ここで、文書ＩＤとは、データベース１１８内に格納される電子文書を識別するためのＩＤであり、電子文書を一つ登録するごとに、使用されていないＩＤが発行される。また、アドレスとは、ＵＲＬや、サーバ名、ホスト名、共有名、ディレクトリ、ファイル名等からなる電子文書の格納先を示すフルパス情報である。図４は、第１の実施形態において登録される文書ＩＤとアドレスからなるアドレス情報の一例を示す図である。
【００４５】
次に、取得した電子文書を、データ処理部１１５で１ページずつラスタ画像に変換して画像を生成し、記憶部１１１に格納する（ステップＳ３１０４）。その後、電子文書の各ページのラスタ画像への変換が終了したか否かを判定する（ステップＳ３１０５）。その結果、変換が終了したと判定された場合（Ｙｅｓ）は、ステップＳ３１０１に戻って次の電子文書を取得する。一方、変換が終了していないと判定された場合（Ｎｏ）は、ステップＳ３１０６に進む。
【００４６】
ステップＳ３１０６では、記憶部１１１に格納されている１ページ分のラスタ画像に対して、ブロックセレクション（ＢＳ）処理を行う。この処理は、マネージメントＰＣ１０１の制御によって実行される。
【００４７】
具体的には、マネージメントＰＣ１０１のＣＰＵによって、記憶部１１１に格納された処理対象のラスタ画像を、文字／線画部分とハーフトーン画像部分とに領域分割する。次いで、文字／線画部分については、さらに段落で塊として纏まっているブロック毎に、或いは線で構成された表や図形毎に分割する。一方、ハーフトーン画像部分については、矩形に分離されたブロックの画像部分、背景部分等のブロックに分割する。
【００４８】
次に、ステップＳ３１０６におけるブロックセレクション処理の処理対象のページ画像のページ番号、そのページ中の各ブロックを特定するブロックＩＤを発行し、各ブロックの属性（画像、文字等）、サイズやオリジナル文書内の位置（ページ内の座標）と各ブロックを関連付けてデータベース１１８にブロック情報として記憶（登録）する（ステップＳ３１０７）。図５は、第１の実施形態においてデータベース１１８に登録されたブロック情報の一例を示す図である。
【００４９】
次に、データ処理部１１５において、各ブロックの種別に応じて各ブロックの特徴量情報を抽出する特徴量情報抽出処理を行う（ステップＳ３１０８）。特に、文字ブロックについては、ＯＣＲ処理を施して文字コードを抽出し、これを文字特徴量とする。また、画像ブロックについては、色に関する画像特徴量を抽出する。
【００５０】
次に、それぞれのブロックに対応する特徴量をページ単位にまとめ、文書ＩＤ、ページ番号、ブロックＩＤに関連付けてデータベース１１８に特徴量情報として記憶する（ステップＳ３１０９）。図６及び図７は、それぞれ第１の実施形態においてデータベース１１８に記憶される色特徴量情報及び文字特徴量の一例を示す図である。
【００５１】
その後、ステップＳ３１０４に戻って、次のページの処理を行う。
【００５２】
（Ｂ）紙文書の登録処理の概要
次に、マネージメントＰＣ１０１の制御のもとに、紙文書をオリジナル文書としてＭＦＰ１００内のデータベース１１８に登録する登録処理の概要について、図３Ｂを用いて説明する。図３Ｂは、本発明の第１の実施形態の紙文書の登録処理を説明するためのフローチャートである。尚、この処理は、画像読取部１１０のＡＤＦに、登録対象の紙文書がセットされ、入力部１１３の登録ボタンが操作された時点で開始される。
【００５３】
まず、入力部１１３から紙文書からのオリジナル文書の登録処理がオペレータから指示されると、マネージメントＰＣ１０１は、新たに文書ＩＤを発行し、データベース１１８内の紙文書の電子データの格納場所を決定し、文書ＩＤと紙文書の電子データの格納場所を示すアドレスと対応付けて、データベース１１８内のアドレス情報として登録する（ステップＳ３２０１）。尚、紙文書の電子データの格納場所は複数ページに対応するために、新たにディレクトリが作成され、アドレス情報には、このディレクトリを指し示すアドレスが格納される。
【００５４】
次に、マネージメントＰＣ１０１の指示に従い、ＭＦＰ１００の画像読取部１１０を動作させ、１ページずつ、紙文書をラスタ走査して得られたラスタ画像を記憶部１１１に読み込む（ステップＳ３２０２）。この際、ステップＳ３２０１で作成したディレクトリに、１ページ分のラスタ画像を順次電子ファイルとして格納する。尚、電子ファイルのファイル名はページ番号を含むようにし、そのファイル名を参照するだけで、そのファイルのページが識別できるように構成されている。
【００５５】
また、オリジナル文書が紙文書である場合の電子データのファイル形式は、例えば、ＢＭＰ形式とするが、これに限定されるものではなく、色情報を保存しておくことが可能なファイル形式（例えば、ＧＩＦ、ＪＰＥＧ等）であればどのようなものでも良い。一方、オリジナル文書が電子データである場合のその電子データのファイル形式は、その電子データを作成したアプリケーション（例えば、マイクロソフト社のＭＳ−Ｗｏｒｄや、米アドビシステム社のアクロバット等）で作成されたファイル形式（＊．ｄｏｃや＊．ｐｄｆ等）となる。
【００５６】
次に、画像読取部１１０から全てのページの読み込みが終了したか否かを判定する（ステップＳ３２０３）。その結果、読み込みが終了した場合（Ｙｅｓ）が、本処理を終了する。一方、読み込みが終了していない場合（Ｎｏ）は、ステップＳ３２０４に進む。
【００５７】
ステップＳ３２０４では、記憶部１１１に格納されている１ページ分のラスタ画像に対して、ブロックセレクション（ＢＳ）処理を行う。尚、この処理は、ステップＳ３１０６の処理と同様であるため、その詳細な説明は省略する。
【００５８】
次に、ステップＳ３２０４におけるブロックセレクション処理の処理対象のページ画像中の各ブロックに基づいて、ブロック情報を生成して、データベース１１８に記憶する（ステップＳ３２０５）。尚、この処理は、ステップＳ３１０７の処理と同様であるため、その詳細な説明は省略する。
【００５９】
次に、データ処理部１１５において、各ブロックの種別に応じて、各ブロックの特徴量情報を抽出する特徴量情報抽出処理を行う（ステップＳ３２０６）。尚、この処理は、ステップＳ３１０８の処理と同じ処理であるため、その詳細な説明は省略する。
【００６０】
次に、それぞれのブロックに対応する特徴量をページ単位にまとめ、文書ＩＤ、ページ番号、ブロックＩＤに関連付けてデータベース１１８に特徴量情報として記憶する（ステップＳ３２０７）。尚、この処理は、ステップＳ３１０９と同じ処理であるため、その詳細な説明は省略する。
【００６１】
その後、ステップＳ３２０２に戻って、次のページの処理を行う。
【００６２】
（Ｃ）検索処理の概要
次に、紙文書に基づいて対応するオリジナルの電子ファイル、若しくは画像データを検索し、印刷等を行う検索処理の概要について図３Ｃを用いて説明する。図３Ｃは、本発明の第１の実施形態における検索処理を説明するためのフローチャートである。
【００６３】
まず、ＭＦＰ１００の画像読取部１１０を動作させ、１ページ分の紙文書をラスタ走査して得られたラスタ画像を記憶部１１１に読み込む（ステップＳ３３０１）。次に、画像読取部１１０から全てのページの読み込みが終了したか否かを判定する（ステップＳ３３０２）。その結果、読み込みが終了した場合（Ｙｅｓ）は、ステップＳ３３０７に進む。一方、読み込みが終了していない場合（Ｎｏ）は、ステップＳ３３０３に進む。
【００６４】
ステップＳ３３０３では、記憶部１１１に格納されている１ページ分のラスタ画像に対して、ブロックセレクション（ＢＳ）処理を行う。尚、この処理は、ステップＳ３１０６と同じ処理であるため、その詳細な説明は省略する。但し、このブロックセレクション処理によって生成する各ブロックの属性、サイズ、位置は一時記憶するだけであり、その紙文書に対するブロック情報は記憶部１１１に保存しておく必要はない。
【００６５】
次に、各ブロックの特徴量情報を抽出する特徴量情報抽出処理を行う（ステップＳ３３０４）。尚、この処理は、ステップＳ３１０８の処理と同様であるため、その詳細な説明は省略する。但し、この処理によって生成する各ブロックの特徴量は一時記憶するだけであり、その紙文書に対する特徴量情報を記憶部１１１に保存しておく必要はない。
【００６６】
次に、入力した紙文書のページ画像（比較元画像）に対する特徴量情報と、データベース１１８に格納されている電子文書の文書ＩＤに対応するオリジナル文書（比較先画像）のすべてのページに対する特徴量情報を比較する（ステップＳ３３０５）。
【００６７】
次に、ステップＳ３３０５の比較結果からその類似度を算出し、当該類似度が第１の閾値よりも高い電子文書の文書ＩＤ及びページを検索結果リストに追加する（ステップＳ３３０６）。ここで、検索結果リストとは、検索結果を管理するリストであり、入力した紙文書のページ番号と、候補となるオリジナル文書の文書ＩＤと、オリジナル文書の該ページのページ番号と、類似度等とからなり、記憶部１１１に格納される。図８は、第１の実施形態における検索結果リストの構成例を示す図である。
【００６８】
そして、ステップＳ３３０１に戻って、次のページの紙文書を読み取る。
【００６９】
一方、ステップＳ３３０２において、画像読取部１１０から全てのページの紙文書の読み込みが終了した場合（Ｙｅｓ）はステップＳ３３０７に進むが、ここでは検索結果リストを評価して、文書候補リストを作成する。尚、文書候補リストは、候補となるオリジナル文書の文書ＩＤと類似度合計とを含んでおり、記憶部１１１に格納される。また、この類似度合計が第２の閾値を下回る場合には、文書候補リストから削除される。図９は、第１の実施形態における文書候補リストの構成例を示す図である。
【００７０】
次いで、文書候補リスト中の候補数が１つであるか否かが判断される（ステップＳ３３０８）。その結果、候補数が１つである場合（Ｙｅｓ）はステップＳ３３１０に進み、候補数が２つ以上の場合（Ｎｏ）はステップＳ３３０９に進む。
【００７１】
ステップＳ３３０９では、文書候補リストに登録されている文書のサムネイル画像を含むユーザインタフェースを表示部１１６や入力部１１３で実現し、このユーザインタフェースによって、オリジナル文書候補の表示／選択を行う。特に、この選択は、オリジナル文書候補のサムネイル画像を表示部１１６に表示し、複数のオリジナル文書候補の中からユーザが所望のオリジナル文書候補のサムネイル画像を選択させることで実現する。そして、このユーザインタフェースによってオリジナル文書が選択されると、そのオリジナル文書の文書ＩＤを特定する。尚、このユーザインタフェースの構成の詳細については後述する。
【００７２】
そして最後に、ステップＳ３３１０では、特定されたオリジナル文書の文書ＩＤに対して、データベース１１８内のアドレス情報の文書ＩＤに対応したアドレスを参照して、記憶部１１１に、オリジナル文書（電子ファイル若しくは画像データ）を読み込み、オペレータの指示に基づいて、そのオリジナル文書の印刷、配信、蓄積、編集のいずれかの処理を実行する。
【００７３】
（Ｄ）文書情報抽出
次に、紙文書に対応するオリジナルの電子ファイル、若しくは画像データの検索結果から、紙文書のページの増加、削除、変更、差し換えの情報を抽出する処理の概要を説明する。
【００７４】
前述したように、図３Ｃに示す検索処理の結果、図９に示すような文書候補リストが得られる。以下では、一例として文書ＩＤ０００１で示される文書が検出されたものとする。そこで、以下の処理では、図８に示す検索結果リストのうち、画像ＩＤ０００１の部分を抽出し、図２１Ａ、Ｂで示されるページ対応表を作成する。
【００７５】
図２１Ａは、処理文書のページ番号順に並べた表を示す図であり、処理文書のページ番号、検出文書のページ番号、類似度からなる。図２１Ｂは、検出文書のページ番号順に並べた表を示す図であり、検出文書のページ番号、処理文書のページ番号からなる。尚、該当するページが無い部分は、「Ｘ」を記載する。
【００７６】
図２１Ａにおける「Ｘ」の部分は処理文書にのみあるページであり、処理文書の３ページ目に他の文書のページが混ざっていることを表している。また、図２１Ｂにおける「Ｘ」の部分は検出文書のみにあるページであり、検出文書の４ページ目が欠落していることを表している。
【００７７】
図２１ＡのＸ以外の部分は、処理文書の２ページ目と処理文書の４ページ目を入れ替えればソートすることができ、ページの順番が入れ替わっていることを表している。
【００７８】
また、図２１Ａに示す類似度で、第３の閾値（本実施形態では、８０）を下回っているページ（処理文書の４ページ目）は、改編されていることを表している。
【００７９】
［各処理の詳細］
以下、各処理の詳細について説明する。
【００８０】
まず、ステップＳ３１０６、ステップＳ３２０４及びステップＳ３３０３のブロックセレクション処理の詳細について説明する。ここで、図１０は、本発明の第１の実施形態における画像ブロック抽出例を示す図である。
【００８１】
ブロックセレクション処理とは、例えば、図１０におけるラスタ画像１０Ａを１０Ｂに示すように、意味のあるブロック毎の塊として認識し、該ブロック各々の属性（文字（ＴＥＸＴ）／図画（ＰＩＣＴＵＲＥ）／写真（ＰＨＯＴＯ）／線（ＬＩＮＥ）／表（ＴＡＢＬＥ）等）を判定し、異なる属性を持つブロックに分割する処理である。
【００８２】
ここで、ブロックセレクション処理の一実施例について詳細に説明する。
【００８３】
まず、入力画像を白黒画像に二値化し、輪郭線追跡を行って黒画素輪郭で囲まれる画素の塊を抽出する。そして、面積の大きい黒画素の塊については、内部にある白画素に対しても輪郭線追跡を行って白画素の塊を抽出し、さらに一定面積以上の白画素の塊の内部からは再帰的に黒画素の塊を抽出する。
【００８４】
このようにして得られた黒画素の塊を、大きさ及び形状で分類し、異なる属性を持つブロックへ分類する。例えば、縦横比が１に近く、大きさが一定の範囲のブロックは文字相当の画素塊とし、近接する文字が整列良くグループ化可能な部分を文字ブロックとする。また、扁平な画素塊を線ブロック、一定大きさ以上でかつ矩形の白画素塊を整列よく内包する黒画素塊の占める範囲を表ブロック、不定形の画素塊が散在している領域を写真ブロック、それ以外の任意形状の画素塊を図画ブロックとする。
【００８５】
次に、ステップＳ３１０８、ステップＳ３２０６及びステップＳ３３０４の特徴量情報抽出処理の詳細について説明する。尚、特徴量情報抽出処理においては、画像ブロック及び文字ブロックでそれぞれ処理方法が異なるので、それぞれ別に説明する。例えば、図１０における１０Ｂに示す例の場合、画像ブロックには写真ブロックと図画ブロックとがあるものとするが、用途や目的に応じて、画像ブロックを写真ブロック及び図画ブロックの少なくとも一方にすることも可能である。
【００８６】
まず、画像ブロックに対する特徴量情報抽出処理について説明する。尚、１文書に複数の画像ブロックが存在する場合は、その総数分だけ、以下の処理を繰り返すようにする。また、本実施形態では、一例として、画像の色に関する色特徴量を抽出する色特徴量情報抽出処理を行う。
【００８７】
この色特徴量情報抽出処理の詳細について、図１１を用いて説明する。図１１は、本発明の第１の実施形態における色特徴量情報抽出処理の詳細を説明するためのフローチャートである。尚、以下で説明する処理では、処理対象画像を複数のメッシュブロックに分割した各メッシュブロックの色ヒストグラム中の最頻色を有する色と、各メッシュブロックの位置情報を対応づけた情報とを色特徴情報として抽出する。
【００８８】
まず、画像を複数のメッシュブロックに分割する（ステップＳ１１０１）。図１２は、第１の実施形態において画像を複数のメッシュブロックへの分割例を示す図である。図１２に示すように、本実施形態では、画像を縦横をそれぞれ９メッシュブロックに分割する。特に、本実施形態では、表記の都合上９×９＝８１メッシュブロックに分割している例を示しているが、実際には、１５×１５＝２２５メッシュブロック程度であることが好ましい。
【００８９】
次に、処理対象となる着目メッシュブロックを左上端のブロックに設定する（ステップＳ１１０２）。尚、この着目メッシュブロックの設定は、例えば、図１３に示すように、予め処理順序が決定された順序決定テーブルを参照して行う。すなわち、図１３は、第１の実施形態において用いられる順序決定テーブルの一例を示す図である。図１３に示す例では、左上端から右へ走査し、その行を終えると次の行の左端から右へスキャンする走査例を示している。
【００９０】
次いで、未処理の着目メッシュブロックの有無を判定する（ステップＳ１１０３）。その結果、未処理の着目メッシュブロックがない場合（Ｎｏ）は、処理を終了する。一方、未処理の着目メッシュブロックがある場合（Ｙｅｓ）は、ステップＳ１１０４に進む。
【００９１】
ステップＳ１１０４では、着目メッシュブロックの全画素の各濃度値を、図１４に示す色空間を分割して作った部分空間である色ビンへ射影し、色ビンに対する色ヒストグラムを生成する。すなわち、図１４は、本発明の第１の実施形態の色空間上の色ビンの構成の一例を示す図である。
【００９２】
尚、本実施形態では、図１４に示すように、ＲＧＢ色空間を３×３×３＝２７に分割した色ビンへ着目メッシュブロックの全画素の濃度値を射影する場合を示しているが、実際には、ＲＧＢ色空間を６×６×６＝２１６程度に分割した色ビンへ着目メッシュブロックの全画素の濃度値を射影するほうが好ましい。
【００９３】
その後、色ヒストグラムの最頻色ビンの色ビンＩＤをその着目メッシュブロックの代表色と決定し、その着目メッシュブロックとその位置に対応づけて記憶部１１１に記憶する（ステップＳ１１０５）。
【００９４】
そして、図１３に示す順序決定テーブルを参照して、次の処理対象となる着目メッシュブロックを設定する（ステップＳ１１０６）。その後、ステップＳ１１０３に戻って、未処理の着目メッシュブロックがなくなるまで、上述したステップＳ１１０３〜ステップＳ１１０６の処理を繰り返す。
【００９５】
以上の処理によって、処理対象画像（画像ブロック）のメッシュブロック毎の代表色と各メッシュブロックの位置情報が対応付けられた情報を色特徴量情報として抽出することができる。
【００９６】
次に、文字ブロックに対する特徴量情報抽出処理について説明する。尚、１文書に複数の文字ブロックが存在する場合は、その総数分だけ、以下で説明する処理を繰り返す。また、文字ブロックに対する文字特徴量情報は、その文字ブロックにＯＣＲ（文字認識）処理を施して得られる文字コードとする。
【００９７】
ここで、ＯＣＲ（文字認識）処理は、文字ブロックから文字単位で切り出された文字画像に対し、パターンマッチングの一手法を用いて文字認識を行い、対応する文字コードを取得するものである。この文字認識処理は、文字画像から得られる特徴を数十次元の数値列に変換した観測特徴ベクトルと、あらかじめ字種毎に求められている辞書特徴ベクトルとを比較し、最も距離の近い字種を認識結果とするものである。特徴ベクトルの抽出には種々の公知手法があり、例えば、文字をメッシュ状に分割し、各メッシュブロック内の文字線を方向別に線素としてカウントしたメッシュ数次元ベクトルを特徴とする方法がある。
【００９８】
ブロックセレクション処理（ステップＳ３１０６、ステップＳ３２０４あるいはステップＳ３３０３）で抽出された文字ブロックに対して文字認識を行う場合は、まず、該当文字ブロックに対して横書き／縦書きの判定を行い、各々対応する方向に文字列を切り出し、その後、文字列から文字を切り出して文字画像を取得する。
【００９９】
ここで、横書き／縦書きの判定は、該当文字ブロック内で画素値に対する水平／垂直の射影を取り、水平射影の分散が大きい場合は横書き、垂直射影の分散が大きい場合は縦書きと判定する。また、文字列及び文字への分解は、横書きの文字ブロックである場合には、その水平方向の射影を利用して行を切り出し、さらに切り出された行に対する垂直方向の射影から、文字を切り出すことで行う。一方、縦書きの文字ブロックに対しては、水平と垂直を逆にすれば良い。
【０１００】
次に、ステップＳ３３０５の比較処理の詳細について、図１５を用いて説明する。図１５は、本発明の第１の実施形態における比較処理の詳細を説明するためのフローチャートである。
【０１０１】
まず、比較先文書を管理する文書候補リストの先頭から文書ＩＤを順番に取得する（ステップＳ１５０１）。次に、全ての文書ＩＤを取得したか否かを判定する（ステップＳ１５０２）。その結果、全ての文書ＩＤを取得した場合（Ｙｅｓ）は、本処理を終了する。一方、全ての文書ＩＤを取得していない場合（Ｎｏ）は、ステップＳ１５０３に進む。
【０１０２】
ステップＳ１５０３では、レイアウトの比較を行う。ここで、レイアウトとは、ブロック情報にあるブロックの属性、サイズ、位置のことである。具体的には、各ブロックの属性、サイズ、位置と、ステップＳ１５０１で取得した文書ＩＤ及び現在処理中のページ番号に対応したブロック情報中の各ブロックの属性、サイズ、位置を比較し、レイアウトが同じであるかどうかを判定する。
【０１０３】
その結果、比較元画像（紙文書）と比較先画像（オリジナル文書）のレイアウトが同じである場合（Ｙｅｓ）は、ステップＳ１５０４に進む。一方、比較元画像と比較先画像のレイアウトが同じでない場合（Ｎｏ）は、ステップＳ１５０１に戻る。
【０１０４】
ステップＳ１５０４では、比較元画像（紙文書）と比較先画像（オリジナル文書）のページ同士の比較を行うページ比較処理を実行する。この比較は、ブロックの属性に合わせ、文字、画像それぞれに応じた特徴量を用いて、複合的に比較を行い、類似度を算出する。尚、この処理の詳細については後述する。
【０１０５】
次に、算出された類似度が第１の閾値以上であるか否かを判定する（ステップＳ１５０５）。その結果、類似度が第１の閾値未満である場合（Ｎｏ）は、ステップＳ１５０１に戻る。一方、類似度が第１の閾値以上である場合（Ｙｅｓ）は、ステップＳ１５０６に進む。
【０１０６】
ステップＳ１５０６では、現在処理中の文書ＩＤと類似度を検索結果リストに追加し、ステップＳ１５０１へ戻る。
【０１０７】
次に、ステップＳ１５０４のページ比較処理の詳細について、図１６を用いて説明する。図１６は、本発明の第１の実施形態における比較処理の詳細を説明するためのフローチャートである。
【０１０８】
まず、ブロック情報を参照して、処理対象となる文書ＩＤ、ページ番号に対応する電子データ中で、未比較のブロックの有無を判定する（ステップＳ１６０１）。その結果、未比較のブロックがない場合（Ｎｏ）は、ステップＳ１６０５に進む。一方、未比較のブロックがある場合（Ｙｅｓ）は、ステップＳ１６０２に進む。
【０１０９】
ステップＳ１６０２では、比較対象のブロックの属性を判定する。その結果、属性が画像ブロックである場合は、ステップＳ１６０３へ進む。一方、属性が文字ブロックである場合は、ステップＳ１６０４へ進む。
【０１１０】
属性が画像ブロックである場合は、色に関する特徴量情報で比較先ブロックとの類似比較である色特徴量情報比較処理を行う（ステップＳ１６０３）。尚、この処理の詳細については後述するが、この処理によって得られる類似度は、比較先の文書ＩＤ、ページ番号、ブロックＩＤに対応させて記憶部１１１に一時記憶される。
【０１１１】
一方、属性が文字ブロックである場合は、文字の特徴量情報での比較元ブロックと比較先ブロックとの類似比較である文字特徴量情報比較処理を行う（ステップＳ１６０４）。尚、この処理の詳細については後述するが、これによって得られる類似度は、比較先の文書ＩＤ、ページ番号、ブロックＩＤに対応させて記憶部１１１に一時記憶する。
【０１１２】
また、ステップＳ１６０１において、全てのブロックとの比較が終了した場合（Ｎｏ）はステップＳ１６０５に進むこととなるが、ステップＳ１６０５では、ステップＳ１６０３及びステップＳ１６０４の処理によって記憶部１１１に記憶されている、比較先文書（オリジナル文書）のページに含まれる全てのブロックの類似度を統合し、検索条件である紙文書とオリジナル文書中のページとの類似度（統合類似度）を算出する統合処理を行う。
【０１１３】
次に、ステップＳ１６０３の色特徴量情報比較処理の詳細について図１７を用いて説明する。図１７は、本発明の第１の実施形態における色特徴量情報比較処理の詳細を説明するためのフローチャートである。
【０１１４】
まず、比較元画像と比較先画像の色特徴量を色特徴量情報から読み出す（ステップＳ１７０１）。次に、処理対象とする画像中の着目メッシュブロックを先頭に設定する（ステップＳ１７０２）。さらに、比較元画像の色特徴量と、比較対象の色特徴量の類似度を示す類似距離を０にリセットする（ステップＳ１７０３）。
【０１１５】
その後、未比較の着目メッシュブロックの有無を判定する（ステップＳ１７０４）。その結果、未比較の着目メッシュブロックがない場合（Ｎｏ）は、ステップＳ１７０８に進む。一方、未比較の着目メッシュブロックがある場合（Ｙｅｓ）は、ステップＳ１７０５に進む。
【０１１６】
ステップＳ１７０５では、比較元画像と比較先画像のそれぞれの色特徴量から、それぞれの着目メッシュブロックの色ビンＩＤを取得する。次いで、図１８に示す色ビンペナルティマトリックスを参照して、取得した色ビンＩＤ間に対応する着目メッシュブロックの局所的類似距離を取得する（ステップＳ１７０６）。そして、取得した局所的類似距離を直前の処理で取得している類似距離に累積加算し、この類似距離は記憶部１１１に記憶する（ステップＳ１７０７）。
【０１１７】
ここで、色ビンペナルティマトリックスについて、図１８を用いて説明する。図１８は、本発明の第１の実施形態で使用される色ビンペナルティマトリックスの一構成例を示す図である。色ビンペナルティマトリックスは、色ビンＩＤ同士の局所的類似距離を管理するマトリックスである。図１８によれば、色ビンペナルティマトリックスは、同一色ビンＩＤではその類似距離は０となり、色ビンＩＤ同士の差が大きくなるほど、すなわち、類似度が低くなるほど、その類似距離が大きくなるように構成されている。また、色ビンペナルティマトリックスは、同一色ビンＩＤの対角位置はすべて類似距離が０であり、それを境として対象性を有している。
【０１１８】
このように、第１の実施形態に係る画像処理システムでは、図１８に示すような色ビンペナルティマトリックスを参照するだけで、色ビンＩＤ同士の類似距離を取得することができるので、処理の高速化を図ることができる。
【０１１９】
そして、図１３に示す順序決定テーブルを参照して、次の処理対象となる着目メッシュブロックを設定する（ステップＳ１７０７）。その後、ステップＳ１７０４に戻る。
【０１２０】
一方、ステップＳ１７０４で未比較の着目メッシュブロックがないと判断された場合（Ｎｏ）、記憶部１１１に記憶されている類似距離を類似度に変換し、ブロックＩＤと対にして出力する（ステップＳ１７０８）。尚、類似度への変換は、例えば、類似距離が最小値のときを類似度１００％、類似距離が最大値のときを類似度０％として、その範囲内の類似距離に対する類似度は、最小値或いは最大値に対する差に基づいて算出するようにすれば良い。
【０１２１】
次に、ステップＳ１６０４の文字特徴量情報比較処理の詳細について説明する。この処理では、比較元画像と比較先画像中のそれぞれの文字ブロック内の各文字コード同士の比較を行い、その一致度から類似度を算出する。尚、検索条件とする紙文書とオリジナル文書との比較である場合、類似度は１００％となるのが理想的であるが、実際には、検索条件となる紙文書中の文字ブロックに対するＯＣＲ処理では誤認識が発生する場合がある。そのため、オリジナル文書との比較であっても、類似度は１００％にならないことはあるが、１００％に近いような値であれば同一の文書とみなせばよい。
【０１２２】
次に、ステップＳ１６０５の統合処理の詳細について説明する。この統合処理では、比較先画像であるオリジナル文書内で占めている割合の大きいブロックの類似度が、オリジナル文書全体の類似度としてより大きく反映されるような、算出されたブロック毎の類似度の統合を行う。
【０１２３】
例えば、オリジナル文書中のブロックＢ１〜Ｂ６に対し、ブロック毎の類似率がｎ１〜ｎ６と算出されたとする。このときオリジナル文書全体の総合類似率Ｎは、以下の式で表現される。
【０１２４】
Ｎ＝ｗ１＊ｎ１＋ｗ２＊ｎ２＋ｗ３＊ｎ３＋  ・・・  ＋ｗ６＊ｎ６…（１）
ここで、ｗ１〜Ｗ６は、各ブロックの類似率を評価する重み係数である。
【０１２５】
重み係数ｗ１〜ｗ６は、ブロックのオリジナル文書内占有率により算出する。例えば、ブロック１〜６のサイズをＳ１〜Ｓ６とすると、ブロック１の占有率ｗ１は、
ｗ１＝Ｓ１／（Ｓ１＋Ｓ２＋・・・＋Ｓ６）  …（２）
として算出することができる。
【０１２６】
このような占有率を用いた重み付け処理により、オリジナル文書内で大きな領域を占めるブロックの類似度がより、オリジナル文書全体の類似度に反映することができる。
【０１２７】
次に、ステップＳ３３０９の候補表示／選択処理時のユーザインタフェースの一例について、図１９を用いて説明する。図１９は、本発明の第１の実施形態におけるユーザインタフェースの一例を示す図である。
【０１２８】
図１９において、１９０１は表示領域であり、例えばタッチパネルで構成されており、ユーザが直接画面に触れることで選択指示が可能である。また、１９０２〜１９１１は、検索結果として出力するオリジナル文書（電子ファイル、若しくは画像データ）候補の所定ページのサムネイル画像群である。このサムネイル画像の表示は、１９０２から番号順に類似度の高い順で表示されている。
【０１２９】
この例では、最大１０枚のサムネイル画像が表示され、オリジナル文書候補が１０以上である場合には、上位１０までのサムネイル画像が表示される。そして、このサムネイル画像群１９０２〜１９１１から、所望するサムネイル画像をタッチ等することにより選択することで、所望のオリジナル文書を選択することが可能である。そして、その選択したオリジナル文書に対する各種処理を実行することが可能となる。
【０１３０】
また、図１９において、１９１２は文書中の何ページ目の候補が表示されているかを示すものである。また、これを選択することで、他のページの候補を切り替えて表示させることができる。
【０１３１】
以上説明したように、第１の実施形態によれば、複数ページからなる紙文書から対応するオリジナル文書を検索する場合には、データベースの全データと比較を行う。すなわち、本実施形態では、検索元文書の２ページ目をデータベース中の文書の２ページ目のみと比較するというような単純な処理ではない。従って、処理対象となる文書が、ページの追加、欠落、変更、入れ替え等がある状態であっても、オリジナルの原稿を適切に検出することができる。
【０１３２】
また、文書を検出した後も、処理対象の文書の全ページに対してページの比較を行うことにより、印刷物にページの追加、欠落、変更、入れ替え等があった場合であっても、その状態を好適に検出することができる。
【０１３３】
＜第２の実施形態＞
上述した第１の実施形態では、処理対象となる文書の全ページに対して、データベース中の全ページと比較を行っているが、第２の実施形態では、処理するページが進むに連れて、比較するデータを絞っていく処理について説明する。以下、第２の実施形態に係る検索処理について、図面を用いて詳細に説明する。
【０１３４】
尚、第２の実施形態に係る画像処理システムの構成、ＭＦＰの詳細構成、電子文書の登録処理、紙文書の登録処理に関しては、前述した第１の実施形態と同様であるため、ここでは詳細な説明については省略する。
【０１３５】
第２の実施形態における検索処理について、図３Ｄを用いて説明する。図３Ｄは、本発明の第２の実施形態における検索処理を説明するためのフローチャートである。
【０１３６】
まず、入力部１１３からオリジナル文書（電子ファイル、若しくは画像データ）の検索がオペレータから指示されると、マネージメントＰＣ１０１の制御に従って比較先リストの初期化を行う（ステップＳ３４０１）。
【０１３７】
尚、比較先リストとは、比較処理で比較対象となるオリジナル文書の絞り込みを行うためのリストであり、比較対象となるオリジナル文書の文書ＩＤと、その文書と画像読取部１１０から読み込む紙文書との各ページの類似度の合計と、検索されたページの類似度の平均からなり、記憶部１１１に格納される。図２０は、第２の実施形態で使用される比較先リストの構成例を示す図である。比較先リストの初期化では、データベース１１８に格納されている電子文書の文書ＩＤを全て比較先リストに格納し、その類似度合計の値に０を設定する。
【０１３８】
そして、次のステップＳ３４０２からステップＳ３４０７までの処理は、第１の実施形態におけるステップＳ３３０１からステップＳ３３０６までの処理と同様であるため、ここでは詳細な説明は省略する。
【０１３９】
そして、ステップＳ３４０７において検索結果リストの追加を行った後、比較先リストの更新を行う（ステップＳ３４０８）。比較先リストの更新では、類似度の合計が第２の閾値を下回った候補、及び検索されたページの類似度の平均が第１の閾値を下回った候補に関しては、候補から削除される。そして、それ以外の候補について、類似度の合計と類似度の平均が改めて計算され、リストの更新がされる。尚、図２０は、（Ａ）から（Ｄ）へと、比較先リストが順次更新された結果例を示している。
【０１４０】
そして、ステップＳ３４０２に戻って、次のページの紙文書を読み取る。
【０１４１】
また、ステップＳ３４０３において画像読取部１１０から全てのページの紙文書の読み込みが終了した場合（Ｙｅｓ）は、ステップＳ３４０９に進む。尚、ステップＳ３４０９からステップＳ３４１２までの処理は、上述した第１の実施形態におけるステップＳ３３０７からステップＳ３３１０までの処理と同様であるため、ここでは詳細な説明は省略する。
【０１４２】
以上説明したように、第２の実施形態によれば、複数ページからなる紙文書から対応するオリジナル文書を検索する場合は、比較処理に基づいて比較対象を絞り込み、比較対象を絞り込んだデータの全ページと比較を行う。すなわち、本実施形態では、検索元文書の２ページ目をデータベース中の文書の２ページ目のみと比較するというような単純な処理ではない。従って、処理対象となる文書に、ページの追加、欠落、変更、入れ替えがある場合であっても、オリジナルの原稿を適切に検出することができる。また、比較対象を絞り込んでいくことにより、比較処理の負荷が軽減され、処理速度が大幅に向上する。但し、処理対象となる文書にページの追加があった場合は、検索すべき文書が検索中に比較対象からはずれてしまう場合もある。
【０１４３】
また、文書を検出した後も処理対象の文書の全ページに対してページの比較を行うことにより、印刷物にページの追加、欠落、変更、入れ替えがあった場合であっても、その状態を適切に検出することができる。
【０１４４】
＜第３の実施形態＞
次いで、第３の実施形態では、最初のページの比較処理の結果を次ページ以降の比較対象とする処理について説明する。尚、第３実施形態に係る画像処理システムの構成、ＭＦＰの詳細構成、電子文書の登録処理、紙文書の登録処理に関しては、前述した第１の実施形態と同様であるため、ここでは詳細な説明については省略する。
【０１４５】
以下、第３の実施形態における検索処理について、図３Ｅを用いて説明する。図３Ｅは、本発明の第３の実施形態における検索処理を説明するためのフローチャートである。
【０１４６】
まず、比較先リストの初期化を行うが（ステップＳ３５０１）、当該処理は前述した第２の実施形態のステップＳ３４０１と同様の処理であるため、その詳細な説明は省略する。また、続くステップＳ３５０２からステップＳ３５０７までの処理は、第１の実施形態におけるステップＳ３３０１からステップＳ３３０６までの処理と同様であるため、その詳細な説明は省略する。
【０１４７】
そして、ステップＳ３５０７において、検索結果リストの追加を行った後、処理中のページが１ページ目であるか否かを判断する（ステップＳ３５０８）。その結果、処理中のページが１ページ目であると判断された場合（Ｙｅｓ）は、ステップＳ３５０９に進む。一方、処理中のページが２ページ目以降であると判断された場合（Ｎｏ）は、ステップＳ３５０２に戻る。尚、ステップＳ３５０９の比較先リスト更新処理は、前述した第２の実施形態のステップＳ３４０８と同様の処理であるため、その詳細な説明は省略する。そして、ステップＳ３５０２に戻って、次のページの紙文書を読み取る。
【０１４８】
一方、ステップＳ３５０３において、画像読取部１１０から全てのページの紙文書の読み込みが終了したと判断された場合（Ｎｏ）は、ステップＳ３５１０に進む。尚、その後のステップＳ３５１０からステップＳ３５１３までの処理は、第１の実施形態におけるステップＳ３３０７からステップＳ３３１０までの処理と同様であるため、その詳細な説明は省略する。
【０１４９】
以上説明したように、第３の実施形態によれば、複数ページからなる紙文書から対応するオリジナル文書を検索する場合には、最初のページの比較処理に基づいて比較対象を絞り込み、次ページ以降は比較対象を絞り込んだデータの全ページと比較を行う。すなわち、本実施形態では、検索元文書の２ページ目をデータベース中の文書の２ページ目のみと比較するというような単純な処理ではない。従って、処理対象となる文書が、ページの追加、欠落、変更、入れ替え等がある状態であっても、オリジナルの原稿を適切に検出することができる。
【０１５０】
また、検索したい書類を画像読取部１１０にセットする際に、途中のページに他の書類が混ざっている可能性があっても、少なくとも最初のページは検索したい書類のうちの１ページである可能性が高い。従って、最初のページで比較対象を絞り込むことにより、オリジナル原稿の検出精度を下げることなく、全文書の全ページを比較対象とした処理と比べて比較処理の負荷が軽減され、処理速度の向上も見込まれる。
【０１５１】
また、文書を検出した後も処理対象の文書の全ページに対してページの比較を行うことにより、印刷物にページの追加、欠落、変更、入れ替えがあった場合、その状態を好適に検出することができる。
【０１５２】
＜第４の実施形態＞
第４の実施形態は、比較対象の文書が所定数（本実施形態では４）を下回るまでは、比較対象の絞り込みを行い、そのページの比較処理の結果を次ページ以降の比較対象とする処理である。尚、第４の実施形態に係る画像処理システムの構成、ＭＦＰの詳細構成、電子文書の登録処理、紙文書の登録処理に関しては、第１の実施形態と同様であるため、ここでは詳細な説明は省略する。以下、第４の実施形態における検索処理について、図３Ｆを用いて説明する。
【０１５３】
図３Ｆは、本発明の第４の実施形態における検索処理を説明するためのフローチャートである。
【０１５４】
まず、比較先リストの初期化を行うが（ステップＳ３６０１）、当該処理は、第２の実施形態のステップＳ３４０１と同様の処理であるため、ここでは詳細な説明は省略する。また、続くステップＳ３６０２からステップＳ３６０７までの処理は、第１の実施形態におけるステップＳ３３０１からステップＳ３３０６までの処理と同様であるため、その詳細な説明は省略する。
【０１５５】
そして、ステップＳ３６０７において検索結果リストの追加を行った後、比較先リストに含まれる候補数が所定数（本実施形態では、４）以上であるか否かが判断される（ステップＳ３６０８）。その結果、比較先リストに含まれる候補数が所定数（本実施形態では、４）以上であった場合（Ｙｅｓ）は、ステップＳ３６０９に進む。一方、比較先リストに含まれる候補数が所定数（本実施形態では、４）未満であった場合（Ｎｏ）は、ステップＳ３６０２に戻る。
【０１５６】
ステップＳ３６０９では比較先リストの更新処理が行われるが、当該処理は第２の実施形態のステップＳ３４０８と同様の処理であるため、その詳細な説明は省略する。そして、ステップＳ３６０２に戻って、次のページの紙文書を読み取る。
【０１５７】
一方、ステップＳ３６０３で、画像読取部１１０から全てのページの紙文書の読み込みが終了した場合（Ｙｅｓ）は、ステップＳ３６１０に進む。続くステップＳ３６１０からステップＳ３６１３までの処理は、第１の実施形態におけるステップＳ３３０７からステップＳ３３１０までの処理と同様であるため、その詳細な説明は省略する。
【０１５８】
以上説明したように、第４の実施形態によれば、複数ページからなる紙文書から対応するオリジナル文書を検索する場合には、比較対象の候補数が所定数（本実施形態では、４）を下回るまで比較対象を絞り込み、次ページ以降は比較対象を絞り込んだデータの全ページと比較を行う。すなわち、本実施形態では、検索元文書の２ページ目をデータベース中の文書の２ページ目のみと比較するというような単純な処理ではない。従って、処理対象となる文書が、ページの追加、欠落、変更、入れ替え等がある状態であっても、オリジナルの原稿を適切に検出することができる。
【０１５９】
また、検索したい書類を画像読取部１１０にセットする際、例えば、途中のページには他の書類が混ざっている可能性はあっても、前の方のページは検索したい書類のうちの１ページである可能性が高い。また、最初のページのみで絞り込みを行うと、最初のページが表紙だったような場合、充分な絞り込みが行われず、処理速度が思ったほど上がらない場合もある。そこで、本実施形態によれば、オリジナル原稿の検出精度を下げることなく、比較処理の負荷が軽減され、処理速度の向上が見込まれる。
【０１６０】
また、文書を検出した後も処理対象の文書の全ページに対してページの比較を行うことにより、印刷物にページの追加、欠落、変更、入れ替えがあった場合であっても、その状態を好適に検出することができる。
【０１６１】
＜その他の実施形態＞
上述した実施形態において、図１１の色特徴量情報抽出処理では、処理対象画像の最頻色を色特徴情報として抽出する例を説明したが、これに限定されるものではなく、例えば、平均色を色特徴情報として抽出するようにしても良い。
【０１６２】
また、画像特徴量として色特徴量を用いたが、これに限定されるものではなく、例えば、最頻輝度、平均輝度等の輝度特徴量、共起行列、コントラスト、エントロピ、Ｇａｂｏｒ変換等で表現されるテクスチャ特徴量、エッジ、フーリエ記述子等の形状特徴量等の複数種類の画像特徴量を１つ、或いは、任意に組み合わせた画像特徴量を用いても良い。
【０１６３】
さらに、上述した実施形態では、ブロックセレクション処理を行い、処理対象の文書を文字ブロックと画像ブロックに分割し、これらの各ブロックの特徴量を複合的に用いて検索を行ったが、文書全体を１つの画像とみなし、オリジナル文書の検索を行うようにしてもよい。さらにまた、精度が許容される範囲であれば、文書中の画像ブロックのみを利用して、オリジナル文書の検索を行うようにしてもよい。
【０１６４】
さらにまた、上述した実施形態では、電子文書をラスタ画像に変換して処理を行ったが、電子文書から直接、文字コードや画像を抜き出して比較してもよい。さらにまた、上述した実施形態では、文字特徴量としては文字コードを採用したが、例えば、単語辞書とのマッチングを予め行って単語の品詞を抽出しておき、名詞である単語を文字特徴量としても良い。
【０１６５】
さらにまた、上述した実施形態では、図３ＣのステップＳ３３０５、図３ＤのステップＳ３４０６、図３ＥのステップＳ３５０６、及び図３ＦのステップＳ３６０６の比較処理では、画像若しくは文字の特徴量を用いて比較処理を実行していたが、それ以外に画像データ同士を直接比較する構成を用いても良い。
【０１６６】
さらにまた、上述した実施形態では、画像読取部１１０（スキャナ）と印刷部１１２（プリンタ）が一体に構成されているＭＦＰ１００を例に挙げて説明したが、画像読取部１１０と印刷部１１２をそれぞれ個別の機器として、ＬＡＮ１０７、若しくはクライアントＰＣ１０２等に接続して構成するようにしても良い。この場合、ＭＦＰ１００のそれ以外の構成要素は、マネージメントＰＣ１０１に含まれることになり、画像読取部１１０（スキャナ）と印刷部１１２（プリンタ）との接続は、ネットワークＩ／Ｆ１１４を介して、ＬＡＮ１０７経由で接続されることになる。
【０１６７】
尚、上述した第１〜第３の閾値については固定にする必要はなく、使用する文書の種類等によって、ユーザや管理者等が任意に設定するようにしてもよい。
【０１６８】
以上、実施形態例を詳述したが、本発明は、例えば、システム、装置、方法、プログラム若しくは記憶媒体（記録媒体）等としての実施態様をとることが可能であり、具体的には、複数の機器から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。
【０１６９】
尚、本発明は、前述した実施形態の機能を実現するソフトウェアのプログラム（実施形態では図に示すフローチャートに対応したプログラム）を、システムあるいは装置に直接あるいは遠隔から供給し、そのシステムあるいは装置のコンピュータが該供給されたプログラムコードを読み出して実行することによっても達成される場合を含む。
【０１７０】
従って、本発明の機能処理をコンピュータで実現するために、該コンピュータにインストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明は、本発明の機能処理を実現するためのコンピュータプログラム自体も含まれる。
【０１７１】
その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給するスクリプトデータ等の形態であっても良い。
【０１７２】
プログラムを供給するための記録媒体としては、例えば、フロッピー（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスク、ＭＯ、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、磁気テープ、不揮発性のメモリカード、ＲＯＭ、ＤＶＤ（ＤＶＤ−ＲＯＭ，ＤＶＤ−Ｒ）などがある。
【０１７３】
その他、プログラムの供給方法としては、クライアントコンピュータのブラウザを用いてインターネットのホームページに接続し、該ホームページから本発明のコンピュータプログラムそのもの、もしくは圧縮され自動インストール機能を含むファイルをハードディスク等の記録媒体にダウンロードすることによっても供給できる。また、本発明のプログラムを構成するプログラムコードを複数のファイルに分割し、それぞれのファイルを異なるホームページからダウンロードすることによっても実現可能である。つまり、本発明の機能処理をコンピュータで実現するためのプログラムファイルを複数のユーザに対してダウンロードさせるＷＷＷサーバも、本発明に含まれるものである。
【０１７４】
また、本発明のプログラムを暗号化してＣＤ−ＲＯＭ等の記憶媒体に格納してユーザに配布し、所定の条件をクリアしたユーザに対し、インターネットを介してホームページから暗号化を解く鍵情報をダウンロードさせ、その鍵情報を使用することにより暗号化されたプログラムを実行してコンピュータにインストールさせて実現することも可能である。
【０１７５】
また、コンピュータが、読み出したプログラムを実行することによって、前述した実施形態の機能が実現される他、そのプログラムの指示に基づき、コンピュータ上で稼動しているＯＳなどが、実際の処理の一部または全部を行い、その処理によっても前述した実施形態の機能が実現され得る。
【０１７６】
さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によっても前述した実施形態の機能が実現される。
【図面の簡単な説明】
【０１７７】
【図１】本発明の第１の実施形態に係る画像処理システムの構成を示すブロック図である。
【図２】本発明の第１の実施形態におけるＭＦＰ１００の細部構成を示すブロック図である。
【図３Ａ】本発明の第１の実施形態に係る画像処理システムにおける電子文書の登録処理を説明するためのフローチャートである。
【図３Ｂ】本発明の第１の実施形態の紙文書の登録処理を説明するためのフローチャートである。
【図３Ｃ】本発明の第１の実施形態における検索処理を説明するためのフローチャートである。
【図３Ｄ】本発明の第２の実施形態における検索処理を説明するためのフローチャートである。
【図３Ｅ】本発明の第３の実施形態における検索処理を説明するためのフローチャートである。
【図３Ｆ】本発明の第４の実施形態における検索処理を説明するためのフローチャートである。
【図４】第１の実施形態において登録される文書ＩＤとアドレスからなるアドレス情報の一例を示す図である。
【図５】第１の実施形態においてデータベース１１８に登録されたブロック情報の一例を示す図である。
【図６】第１の実施形態においてデータベース１１８に記憶される色特徴量情報の一例を示す図である。
【図７】第１の実施形態においてデータベース１１８に記憶される文字特徴量の一例を示す図である。
【図８】第１の実施形態における検索結果リストの構成例を示す図である。
【図９】第１の実施形態における文書候補リストの構成例を示す図である。
【図１０】本発明の第１の実施形態における画像ブロック抽出例を示す図である。
【図１１】本発明の第１の実施形態における色特徴量情報抽出処理の詳細を説明するためのフローチャートである。
【図１２】第１の実施形態において画像を複数のメッシュブロックへの分割例を示す図である。
【図１３】第１の実施形態において用いられる順序決定テーブルの一例を示す図である。
【図１４】本発明の第１の実施形態の色空間上の色ビンの構成の一例を示す図である。
【図１５】本発明の第１の実施形態における比較処理の詳細を説明するためのフローチャートである。
【図１６】本発明の第１の実施形態における比較処理の詳細を説明するためのフローチャートである。
【図１７】本発明の第１の実施形態における色特徴量情報比較処理の詳細を説明するためのフローチャートである。
【図１８】本発明の第１の実施形態で使用される色ビンペナルティマトリックスの一構成例を示す図である。
【図１９】本発明の第１の実施形態におけるユーザインタフェースの一例を示す図である。
【図２０】第２の実施形態で使用される比較先リストの構成例を示す図である。
【図２１Ａ】処理文書のページ番号順に並べた表を示す図である。
【図２１Ｂ】検出文書のページ番号順に並べた表を示す図である。
【符号の説明】
【０１７８】
１００  ＭＦＰ
１０１  マネージメントＰＣ
１０２  クライアントＰＣ
１０３ａ、１０３ｂ  プロキシサーバ
１０４  ネットワーク
１０５ａ、１０５ｂ  データベース
１０６ａ、１０６ｂ  文書管理サーバ
１０７、１０８、１０９  ＬＡＮ
１１０  画像読取部
１１１  記憶部
１１２  印刷部
１１３  入力部
１１４、１１７  ネットワークＩ／Ｆ
１１５  データ処理部
１１６  表示部
１１８  データベース
【図１】
2006031181.tif 000003
【図２】
2006031181.tif 000004
【図３Ａ】
2006031181.tif 000005
【図３Ｂ】
2006031181.tif 000006
【図３Ｃ】
2006031181.tif 000007
【図３Ｄ】
2006031181.tif 000008
【図３Ｅ】
2006031181.tif 000009
【図３Ｆ】
2006031181.tif 000010
【図４】
2006031181.tif 000011
【図５】
2006031181.tif 000012
【図６】
2006031181.tif 000013
【図７】
2006031181.tif 000014
【図８】
2006031181.tif 000015
【図９】
2006031181.tif 000016
【図１０】
2006031181.tif 000017
【図１１】
2006031181.tif 000018
【図１２】
2006031181.tif 000019
【図１３】
2006031181.tif 000020
【図１４】
2006031181.tif 000021
【図１５】
2006031181.tif 000022
【図１６】
2006031181.tif 000023
【図１７】
2006031181.tif 000024
【図１８】
2006031181.tif 000025
【図１９】
2006031181.tif 000026
【図２０】
2006031181.tif 000027
【図２１Ａ】
2006031181.tif 000028
【図２１Ｂ】
2006031181.tif 000029