【手続補正書】
【提出日】平成25年3月13日(2013.3.13)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
本発明に係る画像処理装置は、複数ページの画像それぞれを、複数の領域に分割する領域分割手段と、前記分割された複数の領域それぞれに対し、当該領域に応じた属性を付加する属性情報付加手段と、前記属性情報付加手段によってキャプションの属性が付加されたキャプション領域と本文の属性が付加された本文領域とに対し、文字認識処理を行う文字認識手段と、前記キャプション領域が付随するオブジェクト領域に対して、メタデータを関連づけるメタデータ処理手段と、を有し、前記メタデータ処理手段は、前記キャプション領域に対する前記文字認識処理の結果から、所定の文字列で構成されるアンカー表現と、当該アンカー表現を除く文字列で構成されるキャプション表現とを抽出する第１抽出手段と、同じアンカー表現を含むキャプション領域が付随しているオブジェクト領域が、複数存在するか否かを判定する第１判定手段と、前記本文領域に対する前記文字認識処理の結果から、前記アンカー表現を含む説明文を抽出する第２抽出手段と、前記判定手段で前記同じアンカー表現を含むキャプション領域が付随しているオブジェクト領域が１つであると判定した場合、前記第２抽出手段で抽出された説明文から得られるメタデータを、当該オブジェクト領域に関連付ける第１関連付け手段と、前記第１判定手段で前記同じアンカー表現を含むキャプション領域が付随しているオブジェクト領域が複数存在すると判定した場合、当該アンカー表現を含むキャプション領域それぞれのキャプション表現と、前記第２抽出手段で抽出される当該アンカー表現を含む説明文それぞれとの間の類似度を計算する類似度計算手段と、前記類似度計算手段で計算された類似度に基づいて前記複数のオブジェクト領域それぞれに最適な説明文を判定し、当該判定された最適な説明文から得られるメタデータを当該オブジェクト領域に関連付ける第２関連付け手段と、を有することを特徴とする。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００９３
【補正方法】変更
【補正の内容】
【００９３】
ステップ１００６で、メタデータ処理制御部４０６は、見つかった本文中の説明文（本文領域）に対し、可能性のあるオブジェクト領域のキャプションとの間で、最適な対応関係を見出すのに必要な数の組合せを作り、個々の組合せについて類似度の計算を行う。上記の例の場合、例えば、同じ「図１」のアンカー表現を含んだキャプション９１２及び９１８と、当該アンカー表現を含む本文領域９０８及び９１３との間で、２組の組合せが作られる。つまり、この場合、一方の本文中の説明文に対応するキャプションが決まれば他方についても決まる状況にあるので、キャプション９１２と本文領域９０８の組合せ及びキャプション９１８と本文領域９０８の組合せの計２組の組合せが作られる。もちろん、これと表裏の関係にあるキャプション９１２と本文領域９１３の組合せとキャプション９１８と本文領域９１３の２組でもよい。ちなみに、同一のアンカー表現を含むキャプション（オブジェクト）が３つあり、対応し得る本文中の説明文も３つ見つかった場合には、少なくとも５組の組合せが作られることになる。
【手続補正３】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
複数ページの画像それぞれを、複数の領域に分割する領域分割手段と、
前記分割された複数の領域それぞれに対し、当該領域に応じた属性を付加する属性情報付加手段と、
前記属性情報付加手段によってキャプションの属性が付加されたキャプション領域と本文の属性が付加された本文領域とに対し、文字認識処理を行う文字認識手段と、
前記キャプション領域が付随するオブジェクト領域に対して、メタデータを関連づけるメタデータ処理手段と、
を有し、
前記メタデータ処理手段は、
前記キャプション領域に対する前記文字認識処理の結果から、所定の文字列で構成されるアンカー表現と、当該アンカー表現を除く文字列で構成されるキャプション表現とを抽出する第１抽出手段と、
同じアンカー表現を含むキャプション領域が付随しているオブジェクト領域が、複数存在するか否かを判定する第１判定手段と、
前記本文領域に対する前記文字認識処理の結果から、前記アンカー表現を含む説明文を抽出する第２抽出手段と、
前記第１判定手段で前記同じアンカー表現を含むキャプション領域が付随しているオブジェクト領域が１つであると判定した場合、前記第２抽出手段で抽出された説明文から得られるメタデータを、当該オブジェクト領域に関連付ける第１関連付け手段と、
前記第１判定手段で前記同じアンカー表現を含むキャプション領域が付随しているオブジェクト領域が複数存在すると判定した場合、当該アンカー表現を含むキャプション領域それぞれのキャプション表現と、前記第２抽出手段で抽出される当該アンカー表現を含む説明文それぞれとの間の類似度を計算する類似度計算手段と、
前記類似度計算手段で計算された類似度に基づいて前記複数のオブジェクト領域それぞれに最適な説明文を判定し、当該判定された最適な説明文から得られるメタデータを当該オブジェクト領域に関連付ける第２関連付け手段と、
を有することを特徴とする画像処理装置。
【請求項２】
前記オブジェクト領域は、前記属性情報付加手段によって、写真、図、表のいずれかの属性が付加された領域であることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記第２関連付け手段は、前記類似度計算手段で計算された類似度が最も大きい説明文を当該オブジェクト領域に対する最適な説明文とし、当該最適な説明文から得られるメタデータを当該オブジェクト領域に関連付けることを特徴とする請求項１又は２に記載の画像処理装置。
【請求項４】
前記メタデータ処理手段は、
前記第２抽出手段で抽出される説明文が、前記オブジェクト領域と同一のページ画像内に存在するか否か判定する第２判定手段を更に有し、
前記第２抽出手段で抽出される説明文が前記オブジェクト領域と同一のページ画像内に存在すると前記第２判定手段で判定された場合、前記類似度計算手段での類似度の計算を行うことなく、当該同一のページ画像から抽出された説明文から得られるメタデータを、当該同一のページ画像内に存在する前記オブジェクト領域に関連付ける
ことを特徴とする請求項１乃至３のいずれか１項に記載の画像処理装置。
【請求項５】
前記第２関連付け手段は、前記最適な説明文との類似度が所定の閾値に達している場合に、当該最適な説明文から得られるメタデータを当該オブジェクト領域に関連付けることを特徴とする請求項１又は２に記載の画像処理装置。
【請求項６】
前記メタデータ処理手段は、前記第１判定手段で前記同じアンカー表現を含むキャプション領域が付随しているオブジェクト領域が複数存在すると判定した場合、その旨の警告表示を行うことを特徴とする請求項１乃至５のいずれか１項に記載の画像処理装置。
【請求項７】
更に、前記第１抽出手段で抽出されたキャプション表現をメタデータとして、当該キャプション表現を含むキャプション領域が付随するオブジェクト領域に関連付ける第３関連付け手段を有することを特徴とする請求項１乃至６のいずれか１項に記載の画像処理装置。
【請求項８】
前記領域分割手段で分割された複数の領域に関する情報と、前記オブジェクト領域に関連付けられたメタデータとを用いて、所定のフォーマットの電子文書を生成する生成手段を更に備えたことを特徴とする請求項１乃至７のいずれか１項に記載の画像処理装置。
【請求項９】
画像処理方法であって、
複数ページの画像それぞれを、複数の領域に分割する領域分割ステップと、
前記分割された複数の領域それぞれに対し、当該領域に応じた属性を付加する属性情報付加ステップと
前記属性情報付加ステップでキャプションの属性が付加されたキャプション領域と本文の属性が付加された本文領域とに対し、文字認識処理を行う文字認識ステップと、
前記キャプション領域が付随するオブジェクト領域に対して、メタデータを関連づけるメタデータ処理ステップと、
を含み、
前記メタデータ処理ステップは、さらに、 
前記キャプション領域に対する前記文字認識処理の結果から、所定の文字列で構成されるアンカー表現と、当該アンカー表現を除く文字列で構成されるキャプション表現とを抽出する第１抽出ステップと、
同じアンカー表現を含むキャプション領域が付随しているオブジェクト領域が、複数存在するか否かを判定する第１判定ステップと、
前記本文領域に対する前記文字認識処理の結果から、前記アンカー表現を含む説明文を抽出する第２抽出ステップと、
前記第１判定ステップで前記同じアンカー表現を含むキャプション領域が付随しているオブジェクト領域が１つであると判定した場合、前記第２抽出ステップで抽出された説明文から得られるメタデータを、当該オブジェクト領域に関連付ける第１関連付けステップと、
前記第１判定ステップで前記同じアンカー表現を含むキャプション領域が付随しているオブジェクト領域が複数存在すると判定した場合、当該アンカー表現を含むキャプション領域それぞれのキャプション表現と、前記第２抽出ステップで抽出される当該アンカー表現を含む説明文それぞれとの間の類似度を計算する類似度計算ステップと、
前記類似度計算ステップで計算された類似度に基づいて前記複数のオブジェクト領域それぞれに最適な説明文を判定し、当該判定された最適な説明文から得られるメタデータを当該オブジェクト領域に関連付ける第２関連付けステップと
を含むことを特徴とする画像処理方法。
【請求項１０】
コンピュータを、請求項１乃至８のいずれか１項に記載の画像処理装置として機能させるためのプログラム。
【手続補正４】
【補正対象書類名】図面
【補正対象項目名】図８
【補正方法】変更
【補正の内容】
【図８】
2011192145.tif 000001