(57)【要約】【課題】画像から原文となるテキストを抽出して翻訳し、訳文を原文のレイアウトに合わせて表示するものにおいて、画像中のテキスト抽出領域が適切でなかった場合にも、該テキスト抽出領域を編集する翻訳プログラム及び情報処理装置を提供する。【解決手段】情報処理装置１は、文書情報として画像情報を受け付ける文書受付手段１００と、画像情報と、画像情報から抽出されたテキスト領域と、テキスト領域に含まれるテキストを文字認識した原文とを対応付けて表示する表示制御手段１０４と、外部から操作の入力を受け付けて、当該操作の内容に応じてテキスト領域を編集するテキスト領域編集手段１０５とを有する。【選択図】図１
2017151768.tif 000002
【特許請求の範囲】
【請求項１】
コンピュータを、
画像情報と、前記画像情報からテキストの画像が含まれる領域を抽出したテキスト領域と、前記テキスト領域に含まれるテキストを文字認識した原文とを対応付けて表示する表示制御手段と、
受け付けた操作の内容に応じて前記テキスト領域を編集するテキスト領域編集手段として機能させるための翻訳プログラム。
【請求項２】
前記テキスト領域編集手段は、編集の対象として、前記表示制御手段が表示するテキスト領域又は原文の選択を、前記操作の内容の一部として受け付ける請求項１に記載の翻訳プログラム。
【請求項３】
前記テキスト領域編集手段は、選択された前記テキスト領域又は選択された前記原文に対応するテキスト領域を、受け付けた前記操作の内容に応じて結合又は分割して編集する請求項２に記載の翻訳プログラム。
【請求項４】
前記テキスト領域の信頼度を当該テキスト領域から抽出された原文の内容に基づいて算出する信頼度算出手段としてさらに機能させ、
前記表示制御手段は、当該信頼度が予め定めた閾値より低いテキスト領域を修正すべきテキスト領域の候補として表示する請求項１−３のいずれか１項に記載の翻訳プログラム。
【請求項５】
前記テキスト領域の信頼度を当該テキスト領域から抽出された原文の内容に基づいて算出する信頼度算出手段と、
当該信頼度が予め定めた閾値より低いテキスト領域を結合した新たなテキスト領域の面積と、結合する前のテキスト領域の面積の和とに基づいて新たなテキスト領域の候補を推定するテキスト領域推定手段としてさらに機能させ、
前記表示制御手段は、推定された前記新たなテキスト領域の候補を表示する請求項１−３のいずれか１項に記載の翻訳プログラム。
【請求項６】
画像情報と、前記画像情報からテキストの画像が含まれる領域を抽出したテキスト領域と、前記テキスト領域に含まれるテキストを文字認識した原文とを対応付けて表示する表示制御手段と、
受け付けた操作の内容に応じて前記テキスト領域を編集するテキスト領域編集手段とを有する情報処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、翻訳プログラム及び情報処理装置に関する。
【背景技術】
【０００２】
従来の技術として、翻訳される原文と翻訳結果である訳文を対訳表示する情報処理装置が提案されている（例えば、特許文献１参照）。
【０００３】
特許文献１に開示された情報処理装置は、ひとまとまりの文章を識別するための文番号を表示する文番号ウインドウと、文番号ウインドウで選択された文番号に該当する日本語の原文を表示する日本語原文ウインドウと、日本語原文ウインドウに表示された日本語の原文を翻訳した結果である英語の訳文を表示する英語訳文ウインドウとを有し、文番号を選択されることで対応する原文と訳文とを対訳表示する。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００６−１２７２７０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
画像からテキストを抽出して翻訳し、訳文を原文と差し替える場合、訳文を原文のテキスト抽出領域に当てはめる技術がある。この際、テキスト抽出領域が適切でなかった場合、訳文のレイアウトがくずれてしまう恐れがあるため、テキスト抽出領域が適切に抽出されなかった際は、該テキスト抽出領域を編集する必要がある。
【０００６】
本発明の目的は、画像から原文となるテキストを抽出して翻訳し、訳文を原文のレイアウトに合わせて表示するものにおいて、画像中のテキスト抽出領域が適切でなかった場合にも、該テキスト抽出領域を編集する翻訳プログラム及び情報処理装置を提供することにある。
【課題を解決するための手段】
【０００７】
本発明の一態様は、上記目的を達成するため、以下の翻訳プログラム及び情報処理装置を提供する。
【０００８】
［１］コンピュータを、
画像情報と、前記画像情報からテキストの画像が含まれる領域を抽出したテキスト領域と、前記テキスト領域に含まれるテキストを文字認識した原文とを対応付けて表示する表示制御手段と、
受け付けた操作の内容に応じて前記テキスト領域を編集するテキスト領域編集手段として機能させるための翻訳プログラム。
［２］前記テキスト領域編集手段は、編集の対象として、前記表示制御手段が表示するテキスト領域又は原文の選択を、前記操作の内容の一部として受け付ける前記［１］に記載の翻訳プログラム。
［３］前記テキスト領域編集手段は、選択された前記テキスト領域又は選択された前記原文に対応するテキスト領域を、受け付けた前記操作の内容に応じて結合又は分割して編集する前記［２］に記載の翻訳プログラム。
［４］前記テキスト領域の信頼度を当該テキスト領域から抽出された原文の内容に基づいて算出する信頼度算出手段としてさらに機能させ、
前記表示制御手段は、当該信頼度が予め定めた閾値より低いテキスト領域を修正すべきテキスト領域の候補として表示する前記［１］−［３］のいずれかに記載の翻訳プログラム。
［５］前記テキスト領域の信頼度を当該テキスト領域から抽出された原文の内容に基づいて算出する信頼度算出手段と、
当該信頼度が予め定めた閾値より低いテキスト領域を結合した新たなテキスト領域の面積と、結合する前のテキスト領域の面積の和とに基づいて新たなテキスト領域の候補を推定するテキスト領域推定手段としてさらに機能させ、
前記表示制御手段は、推定された前記新たなテキスト領域の候補を表示する前記［１］−［３］のいずれかに記載の翻訳プログラム。
［６］画像情報と、前記画像情報からテキストの画像が含まれる領域を抽出したテキスト領域と、前記テキスト領域に含まれるテキストを文字認識した原文とを対応付けて表示する表示制御手段と、
受け付けた操作の内容に応じて前記テキスト領域を編集するテキスト領域編集手段とを有する情報処理装置。
【発明の効果】
【０００９】
請求項１又は６に係る発明によれば、画像から原文となるテキストを抽出して翻訳し、訳文を原文のレイアウトに合わせて表示するものにおいて、画像中のテキスト抽出領域が適切でなかった場合にも、該テキスト抽出領域を編集することができる。
請求項２に係る発明によれば、表示制御手段が表示するテキスト領域又は原文の選択を、操作の内容として受け付けることができる。
請求項３に係る発明によれば、選択されたテキスト領域又は選択された原文に対応するテキスト領域を、受け付けた操作の内容に応じて結合又は分割して編集することができる。
請求項４に係る発明によれば、テキスト領域の信頼度を当該テキスト領域から抽出された原文の内容に基づいて算出し、当該信頼度が予め定めた閾値より低いテキスト領域を修正すべきテキスト領域の候補として表示することができる。
請求項５に係る発明によれば、信頼度が予め定めた閾値より低いテキスト領域を結合して、結合する前のテキスト領域の面積の和と当該新たなテキスト領域の面積とに基づいて新たなテキスト領域の候補を推定することができる。
【図面の簡単な説明】
【００１０】
【図１】図１は、実施の形態に係る情報処理装置の構成例を示すブロック図である。
【図２】図２は、文書の翻訳を受け付ける際に表示する画面の構成の一例を示す概略図である。
【図３】図３は、文書受付手段が受け付けた画像情報の構成の一例を示す概略図である。
【図４】図４は、テキスト領域抽出手段が抽出したテキスト領域の例を示す概略図である。
【図５】図５は、テキスト領域情報の構成例を示す表である。
【図６】図６は、表示制御手段によって表示される画面の構成例を示す概略図である。
【図７】図７は、表示制御手段によって表示される画面の構成の他の例を示す概略図である。
【図８】図８は、表示制御手段によって表示される画面の構成の他の例を示す概略図である。
【図９】図９は、表示制御手段によって表示される画面の構成の他の例を示す概略図である。
【図１０】図１０は、情報処理装置の動作例を示すフローチャートである。
【図１１】図１１は、テキスト領域の編集時の情報処理装置の動作例を示すフローチャートである。
【図１２】図１２は、信頼度情報の構成の一例を示す概略図である。
【図１３】図１３は、テキスト領域推定手段が作成するリストの構成の一例を示す概略図である。
【図１４】図１４（ａ）及び（ｂ）は、テキスト領域推定手段が作成するリストの構成及び文書情報の座標の一例を示す概略図である。
【図１５】図１５は、テキスト領域推定手段の面積比較動作の一例を説明するための図である。
【図１６】図１６は、テキスト領域推定手段の面積比較動作の他の例を説明するための図である。
【図１７】図１７は、テキスト領域推定手段の面積比較動作の一例を説明するための図である。
【図１８】図１８は、テキスト領域推定手段の推定した新たなテキスト領域候補の一例を示す概略図である。
【図１９】図１９は、テキスト領域推定手段の推定した新たなテキスト領域候補の他の例を示す概略図である。
【図２０】図２０は、表示制御手段によって表示される画面の構成例を示す概略図である。
【発明を実施するための形態】
【００１１】
［第１の実施の形態］
（情報処理装置の構成）
図１は、第１の実施の形態に係る情報処理装置の構成例を示すブロック図である。
【００１２】
情報処理装置１は、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）等から構成され、各部を制御するとともに、各種のプログラムを実行する制御部１０と、フラッシュメモリ等の記憶媒体から構成され情報を記憶する記憶部１１と、ネットワークを介して外部と通信する通信部１２とを備える。
【００１３】
制御部１０は、後述する翻訳プログラム１１０を実行することで、文書受付手段１００、テキスト領域抽出手段１０１、テキスト認識手段１０２、翻訳手段１０３、表示制御手段１０４、テキスト領域編集手段１０５、信頼度算出手段１０６及びテキスト領域推定手段１０７等として機能する。
【００１４】
文書受付手段１００は、通信部１２を介して外部から文書情報を受け付ける。なお、文書情報は文字や画像を含んだ印刷物をスキャンした画像情報又は文字や画像を含んだ画像情報である。
【００１５】
テキスト領域抽出手段１０１は、文書受付手段１００が受け付けた画像情報にテキストが含まれる場合にテキストが配置された領域をテキスト領域として抽出する。なお、テキスト領域抽出手段１０１は、抽出したテキスト領域の座標、高さ及び幅をテキスト領域情報１１１に登録する。
【００１６】
テキスト認識手段１０２は、テキスト領域抽出手段１０１が抽出したテキスト領域に含まれるテキストをＯＣＲ等の技術により認識し、テキスト情報を生成する。また、テキスト認識手段１０２は、生成したテキスト情報を原文としてテキスト領域情報１１１に登録する。
【００１７】
翻訳手段１０３は、テキスト認識手段１０２が生成したテキスト情報を原文とし、他の言語へ翻訳して訳文を生成する。
【００１８】
表示制御手段１０４は、操作用の画面を表示するほか、テキスト領域情報１１１を参照して、受け付けた画像情報と、原文とを対応付けて表示する。
【００１９】
テキスト領域編集手段１０５は、利用者が入力した操作内容に応じてテキスト領域のマージ、分割を行う。また、自動でテキスト領域のマージ、分割を行う。
【００２０】
信頼度算出手段１０６は、テキスト領域に含まれる文字列がどれだけ文字列として信頼できるかを表した信頼度という指標を算出する。
【００２１】
テキスト領域推定手段１０７は、信頼度が低いテキスト領域をマージ又は分割する。マージ又は分割の方法は後述する。
【００２２】
記憶部１１は、制御部１０を上述した各手段１００−１０７として動作させる翻訳プログラム１１０、テキスト領域情報１１１及び信頼度情報１１２等を記憶する。
【００２３】
また、情報処理装置１は、通信部１２を介して図示しない端末等にネットワークを介して接続され、端末の要求に応じて動作し、動作結果を端末に送信する。端末は動作結果を受信して後述する画面を表示部に表示する。
【００２４】
（情報処理装置の動作）
次に、第１の実施の形態の作用を説明する。
【００２５】
まず、利用者は図示しない端末を操作して情報処理装置１にアクセスし、文書の翻訳を要求する。
【００２６】
情報処理装置１は、端末から要求を受け付けて、以下に示す画面を端末の表示部に表示させる。
【００２７】
図２は、文書の翻訳を受け付ける際に表示する画面の構成の一例を示す概略図である。
【００２８】
画面１０４ａは、原文の言語を選択するための選択欄１０４ａ１と、訳文の言語を選択するための選択欄１０４ａ２と、翻訳する文書を選択するための選択欄１０４ａ３と、翻訳対象とする文書のページを選択する選択欄１０４ａ４と、翻訳の実行又はキャンセルを行うためのボタン１０４ａ５とを有する。
【００２９】
利用者は、原文の言語を選択欄１０４ａ１で選択し、訳文となる言語を選択欄１０４ａ２で選択し、対象となる文書情報を選択欄１０４ａ３で指定して、ページを選択欄１０４ａ４で選択した後、翻訳を実行するボタン１０４ａ５を押下する。
【００３０】
図１０は、情報処理装置１の動作例を示すフローチャートである。
【００３１】
まず、文書受付手段１００は、選択欄１０４ａ３で指定された文書情報を受け付ける（Ｓ１）。文書情報は、例えば、以下に示すような画像情報である。
【００３２】
図３は、文書受付手段１００が受け付けた画像情報の構成の一例を示す概略図である。
【００３３】
画像情報１００ａは、「５．Ｃｏｒｒｅｌａｔｉｏｎ  ｏｆ  ｄｉａｇｒａｍ  ｏｆ  ｓｅｌｌｅｒ  ａｎｄ  ｂｕｙｅｒ」と記載されたタイトル部と、「Ｋｅｙ  Ｉｓｓｕｅ」及び「ｅｎｖｉｒｏｎｍｅｎｔ」の項目からなる表組部とを有する。
【００３４】
次に、テキスト領域抽出手段１０１は、文書受付手段１００が受け付けた画像情報１００ａの１ページ目から（Ｓ２）、テキストが配置された領域をテキスト領域として抽出する（Ｓ３）。なお、テキスト領域の抽出には、文書画像のレイアウト構造認識等の技術を用いる。
【００３５】
図４は、テキスト領域抽出手段１０１が抽出したテキスト領域の例を示す概略図である。
【００３６】
テキスト領域１０１ａ１、１０１ａ２、…、１０１ａ１０…１０１ａ１５は、画像情報１００ａからテキスト領域抽出手段１０１によって抽出された領域である。テキスト領域１０１ａ１０、１０１ａ１２のように、単語単位やフレーズ単位で抽出されるべきであるが、テキスト領域１０１ａ１、１０１ａ２のように文字単位で抽出される場合やテキスト領域１０１ａ１１、１０１ａ１３−１０１ａ１５のようにフレーズ単位にあたらない位置で抽出される場合もある。
【００３７】
次に、テキスト認識手段１０２は、テキスト領域抽出手段１０１が抽出したテキスト領域に含まれるテキストをＯＣＲ等の技術により認識し（Ｓ４）、テキスト領域情報１１１を生成する。
【００３８】
図５は、テキスト領域情報１１１の構成例を示す表である。
【００３９】
テキスト領域情報１１１は、テキスト領域中の画像を文字認識した結果である原文と、テキスト領域の座標、幅及び高さと、テキスト領域に含まれるテキストの画像とを有する。
【００４０】
次に、表示制御手段１０４は、テキスト領域情報１１１を参照して、受け付けた画像情報と、原文とを対応付けて表示して、表示した画面において利用者からの編集を受け付ける（Ｓ５）。当該ステップＳ５では、情報処理装置１は、以下の図１１のように動作する。なお、上記したステップＳ３−Ｓ５は、文書情報のすべてのページについて繰り返される（Ｓ６、Ｓ７）。
【００４１】
図１１は、テキスト領域の編集時の情報処理装置１の動作例を示すフローチャートである。
【００４２】
表示制御手段１０４は、文書情報（画像情報）と原文とを以下に示す図６の画面のように表示する。
【００４３】
図６は、表示制御手段１０４によって表示される画面の構成例を示す概略図である。
【００４４】
画面１０４ｂは、受け付けた画像情報及び抽出したテキスト領域を表示する文書表示領域１０４ｂ１と、原文を表示する文字認識結果表示領域１０４ｂ２と、文書情報のページが複数ある場合にページを切り替えるためのページ切替ボタン１０４ｂ３と、結合するテキスト領域を選択するための結合チェックボックス１０４ｂ４と、結合チェックボックス１０４ｂ４に対応して表示される選択枠１０４ｂ５と、後述するカーソルによってテキスト領域を分割する分割するボタン１０４ｂ６と、結合チェックボックス１０４ｂ４でチェックしたテキスト領域をマージするマージするボタン１０４ｂ７と、全てのテキスト領域の原文を翻訳する翻訳するボタン１０４ｂ８と、画面１０４ｂの表示を終了するためのキャンセルボタン１０４ｂ９と、を有する。
【００４５】
選択枠１０４ｂ５と結合チェックボックス１０４ｂ４は、一方を選択することで対応する他方が自動的に選択される。つまり、画像中のテキスト領域を選択枠１０４ｂ５で選択すれば、結合チェックボックス１０４ｂ４にチェックが入り、利用者は、当該テキスト領域に含まれるテキストがどのような文字として認識されたのかがわかる。また、原文を結合チェックボックス１０４ｂ４で選択すれば、選択枠１０４ｂ５が画像中に現れ、利用者は、当該原文及び訳文が画像中のいずれのテキスト領域に含まれるテキストであるのかがわかる。
【００４６】
上記した画面１０４ｂにおいて、利用者が結合チェックボックス１０４ｂ４にチェックを入れると、テキスト領域編集手段１０５は、当該チェックボックスの入力を受け付ける（Ｓ５１）。
【００４７】
次に、例えば、利用者がマージするボタン１０４ｂ７を押下したとすると、テキスト領域編集手段１０５は、当該操作を受け付け（Ｓ５２）、操作に応じてテキスト領域をマージし、テキスト領域情報１１１を更新し（Ｓ５３）、次に示す図７のように画面１０４ｂの表示内容を更新する（Ｓ５４）。
【００４８】
図７は、表示制御手段１０４によって表示される画面の構成の他の例を示す概略図である。
【００４９】
上記動作によって、選択枠１０４ｂ５によって選択されていたテキスト領域がマージされ、マージされたテキスト領域内の文字列が「Ｃｏｒｒｅｌａｔｉｏｎ  ｄｉａｇｒａｍ  ｏｆ  ｓｅｌｌｅｒ  ａｎｄ  ｂｕｙｅｒ」となる。また、文字認識結果表示領域１０４ｂ２の上記テキスト領域に該当する箇所にＯＣＲボタン１０４ｂ１０が現れ、結合した原文の文字認識が最初に誤っていた場合にはＯＣＲを実行して再度、テキスト認識手段１０２に文字認識させることができる。
【００５０】
また、他の例として、利用者が分割するボタン１０４ｂ６を押下したとすると、テキスト領域編集手段１０５は、当該操作を受け付け（Ｓ５２）、操作に応じてテキスト領域を分割し、テキスト領域情報１１１を更新し（Ｓ５３）、次に示す図７のように画面１０４ｂの表示内容を更新する（Ｓ５４）。
【００５１】
図８は、表示制御手段１０４によって表示される画面の構成の他の例を示す概略図である。また、図９は、表示制御手段１０４によって表示される画面の構成の他の例を示す概略図である。
【００５２】
図８に示すように、利用者は、カーソル１０４ｂ１１を用い、テキスト領域の分割する位置を指定して分割するボタン１０４ｂ６を押下する。上記動作によって、図９に示すように、テキスト領域内の文字列が「Ｓｔｒｅｎｇｔｈ  Ｋｎｏｗｌｅｇｅ  ｏｆ  Ｐｒｏｄｕｃｔｓ  ａｎｄ  Ｋｎｏｗ−ｈｏｗ」から「Ｓｔｒｅｎｇｔｈ」と「Ｋｎｏｗｌｅｇｅ  ｏｆ  Ｐｒｏｄｕｃｔｓ  ａｎｄ  Ｋｎｏｗ−ｈｏｗ」とに分割される。
【００５３】
次に、利用者は、テキスト領域が適切に分割又はマージされたと判断すると、翻訳するボタン１０４ｂ８を押下する。
【００５４】
翻訳手段１０３は、テキスト認識手段１０２が生成したテキスト情報を原文とし、他の言語へ翻訳して訳文を生成する（Ｓ８）。次に、表示制御手段１０４は、文書情報の各テキスト領域内に訳文を配置し、翻訳結果として端末の表示部に表示する。なお、訳文は、例えば、テキスト領域の幅及び高さを考慮してフォントの大きさや種類が選択されて配置されるものとする。
【００５５】
（第１の実施の形態の効果）
上記した第１の実施の形態によれば、画像からテキストを抽出したテキスト領域と、原文とを対応させて表示し、テキスト領域の抽出が誤っていた場合に利用者に分割するボタン１０４ｂ６やマージするボタン１０４ｂ７を用意して、誤りを訂正させるようにしたため、テキスト領域を編集してテキスト領域が正しく抽出され、原文を翻訳して、訳文を原文のレイアウトに合わせて表示する際に、訳文のレイアウトのくずれを抑制することができる。
【００５６】
また、テキスト認識の結果が誤ったものであっても、画像中のいずれのテキスト領域から抽出した原文及び訳文であるかを利用者が認識でき、原文及び訳文の編集時に誤った文字列を編集してしまう頻度を抑制することができる。
【００５７】
［第２の実施の形態］
次に、本願の第２の実施の形態を説明する。第２の実施の形態は、第１の実施の形態に比べて、テキスト領域抽出手段１０１が抽出したテキスト領域について、マージ又は分割したほうがよいか否かを判定し、マージ又は分割したほうがよい場合は新たなテキスト領域を推定する点で異なる。なお、第１の実施の形態と同様の構成を有するため、説明を省略する。
【００５８】
まず、情報処理装置１は、第１の実施の形態と同様に、図１０のステップＳ１−Ｓ４までを実行する。次に、信頼度算出手段１０６は、テキスト認識手段１０２が認識した原文の各テキストについて信頼度を算出し、以下の図１２に示すように信頼度情報１１２を生成する。
【００５９】
図１２は、信頼度情報１１２の構成の一例を示す概略図である。
【００６０】
なお、信頼度算出手段１０６は、原文の各テキストについて、単語であれば予め用意された辞書にあるものか否か、文であれば文法的におかしいか否かを判定して信頼度を算出し、信頼度情報１１２とする。図１２に示す信頼度情報１１２のように、例えば、「Ｃ」「ｏ」「ｒ」「ｒ」「ｅ」「ｌ」「ａ」「ｔ」「ｉ」「ｏ」「ｎ」については、それぞれはアルファベット一文字であって、単語として辞書に登録されていないため、信頼度算出手段１０６はこれらの信頼度を０と算出する。また、「Ｓｔｒｅｎｇｔｈ  Ｋｎｏｗｌｅｄｇｅ  ｏｆ  Ｐｒｏｄｕｃｔｓ  ａｎｄ  Ｋｎｏｗ−ｈｏｗ」は、「Ｓｔｒｅｎｇｔｈ」が余計であって文法がおかしいため、信頼度算出手段１０６はこの信頼度を５０と算出する。また、「Ｕｓｉｎｇ  ｉｔｓ  ｈｉｇｈ」も文法的におかしく、信頼度算出手段１０６はこの信頼度を４０と算出する。
【００６１】
なお、表示制御手段１０４は、図１２に示した信頼度情報１１２の内容を利用者に表示してもよい。
【００６２】
次に、テキスト領域推定手段１０７は、信頼度が予め定めた閾値（例えば、５０）以下であるテキスト１３個の全ての組み合わせを作成する。以下に説明する図１３に示すように、テキストの組み合わせをリスト１０７ａとする。
【００６３】
図１３は、テキスト領域推定手段１０７が作成するリストの構成の一例を示す概略図である。
【００６４】
ここで、リスト１０７ａに含まれる組み合わせの数は２の１３乗個であるから８１９２通り存在する。
【００６５】
次に、テキスト領域推定手段１０７は、リスト１０７ａに含まれるテキスト全てを含む新たなテキスト領域を想定し、当該新たなテキスト領域の左上の座標、幅及び高さをリスト１０７ａに情報として追加して、以下に説明する図１４（ａ）に示すように、新たなリスト１０７ｂを作成する。
【００６６】
図１４（ａ）及び（ｂ）は、テキスト領域推定手段１０７が作成するリストの構成及び文書情報の座標の一例を示す概略図である。
【００６７】
図１４（ａ）に示すように、リスト１０７ｂは新たなテキスト領域の左上の座標、幅及び高さを有し、例えば、［Ｃ，ｏ，ｒ，ｒ，ｅ，ｌ，ａ，ｔ，ｉ，ｏ，ｎ］については、図１４（ｂ）に示すように、「Ｃ」を含むテキスト領域１０７ｃ１の左上の座標が（６０，１０）であり、全体の幅及び高さが（７０，１２）であるから、［Ｃ，ｏ，ｒ，ｒ，ｅ，ｌ，ａ，ｔ，ｉ，ｏ，ｎ，６０，１０，７０，１２］と表される。また、［Ｃ，ｒ，ｕｓｉｎｇ  ｉｔｓ  ｈｉｇｈ］については、「ｕｓｉｎｇ  ｉｔｓ  ｈｉｇｈ」の右下の座標が（２６０，７０）であるため、幅及び高さが（２００，６０）となるから、［Ｃ，ｒ，ｕｓｉｎｇ  ｉｔｓ  ｈｉｇｈ，６０，１０，２００，６０］と表される。
【００６８】
次に、テキスト領域推定手段１０７は、リスト１０７ｂから新たなテキスト領域の面積と、新たなテキスト領域に含まれていた元のテキスト領域の面積の和とを算出し、これらを比較する。
【００６９】
図１５は、テキスト領域推定手段１０７の面積比較動作の一例を説明するための図である。
【００７０】
リスト１０７ｂの最上段［Ｃ，６０，１０，８，１２］に該当する新たなテキスト領域１０７ｄ１の面積は８×１２＝９６であり、新たなテキスト領域に含まれていた元のテキスト「Ｃ」のテキスト領域１０７ｃ１の面積（の和）は８×１２＝９６であって、これらの比は、９６／９６＝１である。
【００７１】
テキスト領域推定手段１０７は、予め定めた閾値（例えば、０．７）以上の比が得られた場合、上記新たなテキスト領域１０７ｄ１を新たなテキスト領域候補とする。
【００７２】
図１６は、テキスト領域推定手段１０７の面積比較動作の他の例を説明するための図である。
【００７３】
また、リスト１０７ｂの［Ｃ，ｏ，ｒ，ｒ，ｅ，ｌ，ａ，ｔ，ｉ，ｏ，ｎ，６０，１０，７０，１２］に該当する新たなテキスト領域１０７ｄ２の面積は７０×１２＝８４０であり、新たなテキスト領域に含まれていた元のテキスト「Ｃ」「ｏ」「ｒ」「ｒ」「ｅ」「ｌ」「ａ」「ｔ」「ｉ」「ｏ」「ｎ」のテキスト領域１０７ｃ１−１０７ｃ１１の面積の和は７５０であって、これらの比は、７５０／８４０＝０．８９である。
【００７４】
テキスト領域推定手段１０７は、再度、予め定めた閾値（例えば、０．７）以上の比が得られ、かつ、当該値が１でない場合、上記新たなテキスト領域１０７ｄ２を新たなテキスト領域候補とし、値が１であった新たなテキスト領域１０７ｄ１を候補から削除する。これは、より面積が大きな領域を表示する方がユーザーにとって分かりやすいためである。
【００７５】
図１７は、テキスト領域推定手段１０７の面積比較動作の一例を説明するための図である。
【００７６】
また、リスト１０７ｂの［Ｃ，ｒ，ｕｓｉｎｇ  ｉｔｓ  ｈｉｇｈ，６０，１０，２００，６０］に該当する新たなテキスト領域１０７ｄ３の面積は２００×６０＝１２０００であり、新たなテキスト領域に含まれていた元のテキスト「Ｃ」「ｒ」「ｕｓｉｎｇ  ｉｔｓ  ｈｉｇｈ」のテキスト領域１０７ｃ１、１０７ｃ３、１０７ｃ１１の面積の和は１２００であって、これらの比は、１２００／１２０００＝０．１０である。
【００７７】
テキスト領域推定手段１０７は、予め定めた閾値（例えば、０．７）未満の比が得られた場合、上記新たなテキスト領域１０７ｄ３を新たなテキスト領域候補としない。
【００７８】
リスト１０７ｂの全ての新たなテキスト領域について、テキスト領域推定手段１０７によって、上記同様に比の計算が行われ、新たなテキスト領域候補が以下の図１８に示すように定まる。
【００７９】
図１８は、テキスト領域推定手段１０７の推定した新たなテキスト領域候補の一例を示す概略図である。
【００８０】
テキスト領域推定手段１０７は、上記の計算によって、新たなテキスト領域候補１０７ｅ１−１０７ｅ３を推定する。
【００８１】
さらに、テキスト領域推定手段１０７は、テキストの信頼度が低くないテキスト領域を上記した新たなテキスト領域候補１０７ｅ１−１０７ｅ３とマージしてもよい。
【００８２】
図１９は、テキスト領域推定手段１０７の推定した新たなテキスト領域候補の他の例を示す概略図である。
【００８３】
例えば、図１８の新たなテキスト領域候補１０７ｅ１と「ｄｉａｇｒａｍ  ｏｆ  ｓｅｌｌｅｒ  ａｎｄ  ｂｕｙｅｒ」のテキスト領域とは、左上の座標のｙ座標が１０で一致しているため、テキスト領域推定手段１０７は、これらを結合して信頼度算出手段１０６に「Ｃｏｒｒｅｌａｔｉｏｎ  ｄｉａｇｒａｍ  ｏｆ  ｓｅｌｌｅｒ  ａｎｄ  ｂｕｙｅｒ」の信頼度を算出させ、算出した信頼度が予め定めた閾値以上であれば、図１９に示すように、これを新たなテキスト領域候補１０７ｆ１とする。
【００８４】
また、図１８の新たなテキスト領域候補１０７ｅ３と「Ｓｔｒｅｎｇｔｈｅｎ  ｏｎｌｉｎｅ  ｓａｌｅｓ」及び「ｔｅｃｈｎｏｌｏｇｙ」のテキスト領域とは、左上の座標のｘ座標が一致しているため、テキスト領域推定手段１０７は、これらを結合して信頼度算出手段１０６に「Ｓｔｒｅｎｇｔｈｅｎ  ｏｎｌｉｎｅ  ｓａｌｅｓ  ｕｓｉｎｇ  ｉｔｓ  ｈｉｇｈ  ｔｅｃｈｎｏｌｏｇｙ」の信頼度を算出させ、算出した信頼度が予め定めた閾値以上であれば、図１９に示すように、これを新たなテキスト領域候補１０７ｆ３とする。
【００８５】
次に、表示制御手段１０４は、図１４（ｂ）に示した元のテキスト領域１０７ｃ１−１０７ｃ１１が、図１９に示したテキスト領域推定手段１０７が推定した新たなテキスト領域１０７ｆ１−１０７ｆ３となるように、以下の図２０に示す画面の結合チェックボックスに自動でチェックを入力する。
【００８６】
図２０は、表示制御手段１０４によって表示される画面の構成例を示す概略図である。
【００８７】
画面１０４ｃは、図６に示した画面１０４ｂと同様の構成を有し、結合チェックボックス１０４ｃ４にテキスト領域推定手段１０７によりチェックが入力されている。表示制御手段１０４は、当該画面１０４ｃを表示して、第１の実施の形態と同様に、利用者からの編集を受け付ける。
【００８８】
なお、表示制御手段１０４は、図１４−図１９の内容を表示してもよい。
【００８９】
（第２の実施の形態の効果）
上記した第２の実施の形態によれば、テキスト領域に含まれるテキストの信頼度が低い複数のテキスト領域を結合したものの面積と元のテキスト領域の合計の面積との比を算出し、当該比が予め定めた条件に合致するものを新たなテキスト領域候補として、元のテキスト領域を結合することで新たなテキスト領域候補を生成できるよう結合チェックボックスにチェックを入力したため、利用者に推定した新たなテキスト領域を作成するよう促すことができる。また、利用者が結合ボックスにチェックを入力する手順を省略することができる。
【００９０】
［他の実施の形態］
なお、本発明は、上記実施の形態に限定されず、本発明の趣旨を逸脱しない範囲で種々な変形が可能である。
【００９１】
上記実施の形態では制御部１０の各手段１００〜１０７の機能をプログラムで実現したが、各手段の全て又は一部をＡＳＩＣ等のハードウエアによって実現してもよい。また、上記実施の形態で用いたプログラムをＣＤ−ＲＯＭ等の記録媒体に記憶して提供することもできる。また、上記実施の形態で説明した上記ステップの入れ替え、削除、追加等は本発明の要旨を変更しない範囲内で可能である。
【符号の説明】
【００９２】
１     情報処理装置
１０   制御部
１１   記憶部
１２   通信部
１００ 文書受付手段
１０１ テキスト領域抽出手段
１０２ テキスト認識手段
１０３ 翻訳手段
１０４ 表示制御手段
１０５ テキスト領域編集手段
１０６ 信頼度算出手段
１０７ テキスト領域推定手段
１１０ 翻訳プログラム
１１１ テキスト領域情報
１１２ 信頼度情報
【図１】
2017151768.tif 000003
【図２】
2017151768.tif 000004
【図３】
2017151768.tif 000005
【図４】
2017151768.tif 000006
【図５】
2017151768.tif 000007
【図６】
2017151768.tif 000008
【図７】
2017151768.tif 000009
【図８】
2017151768.tif 000010
【図９】
2017151768.tif 000011
【図１０】
2017151768.tif 000012
【図１１】
2017151768.tif 000013
【図１２】
2017151768.tif 000014
【図１３】
2017151768.tif 000015
【図１４】
2017151768.tif 000016
【図１５】
2017151768.tif 000017
【図１６】
2017151768.tif 000018
【図１７】
2017151768.tif 000019
【図１８】
2017151768.tif 000020
【図１９】
2017151768.tif 000021
【図２０】
2017151768.tif 000022