(57)【特許請求の範囲】
【請求項１】
文字を一意に識別する文字識別符号と対応させて、該文字を表す文字画像における外接矩形の大きさと文字サイズとの比率を記憶している記憶手段と、
画像内の文字画像を認識する文字認識手段と、
前記画像内の前記文字画像の外接矩形を抽出する外接矩形抽出手段と、
前記文字認識手段による認識結果である文字識別符号に基づいて、前記記憶手段に記憶されている該文字識別符号に対応する外接矩形の大きさと文字サイズの比率を抽出する比率抽出手段と、
前記外接矩形抽出手段によって抽出された外接矩形の大きさと前記比率抽出手段によって抽出された外接矩形の大きさと文字サイズの比率に基づいて、前記文字画像の文字サイズを算出する文字サイズ算出手段と、
前記文字認識手段によって認識された文字画像の書体種別を認識する書体認識手段
を具備しており、
前記記憶手段は、文字を一意に識別する文字識別符号とフォント種別毎に該文字を表す文字画像における外接矩形の大きさと文字サイズの比率を対応させて記憶しており、
前記比率抽出手段は、前記文字認識手段による認識結果である文字識別符号及び前記書体認識手段による認識結果である書体種別に基づいて、前記記憶手段に記憶されている該文字識別符号及び該書体種別に対応する外接矩形の大きさと文字サイズの比率を抽出する
ことを特徴とする画像処理装置。
【請求項２】
前記画像内の文字領域を抽出する領域抽出手段と、
前記領域抽出手段によって抽出された文字領域内にある文字画像の前記文字サイズ算出手段によって算出された文字サイズに基づいて、該文字領域内にある文字画像の文字サイズを決定する決定手段
をさらに具備し、
前記文字認識手段は、前記領域抽出手段によって抽出された文字領域内にある文字画像を認識し、
前記外接矩形抽出手段は、前記文字領域内にある前記文字画像の外接矩形を抽出する
ことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記文字認識手段による認識結果である文字識別符号が予め定められた文字識別符号である場合は、前記外接矩形抽出手段、前記比率抽出手段又は前記文字サイズ算出手段のうち、いずれか１つ以上は、該文字識別符号又は該文字識別符号に対応する文字画像の処理を行わない
ことを特徴とする請求項１に記載の画像処理装置。
【請求項４】
前記文字認識手段による認識結果である文字識別符号が予め定められた文字識別符号である場合は、前記外接矩形抽出手段、前記比率抽出手段、前記文字サイズ算出手段又は前記決定手段のうち、いずれか１つ以上は、該文字識別符号又は該文字識別符号に対応する文字画像の処理を行わない
ことを特徴とする請求項２に記載の画像処理装置。
【請求項５】
前記文字認識手段は、前記文字画像を認識した場合の確からしさを算出し、文字識別符号に対応させて該認識の確からしさを認識結果として出力し、
前記文字認識手段による認識結果である認識の確からしさと予め定められた値の比較に基づいて、前記外接矩形抽出手段、前記比率抽出手段又は前記文字サイズ算出手段のうち、いずれか１つ以上は、該文字識別符号又は該文字識別符号に対応する文字画像の処理を行わない
ことを特徴とする請求項１又は３に記載の画像処理装置。
【請求項６】
前記文字認識手段は、前記文字画像を認識した場合の確からしさを算出し、文字識別符号に対応させて該認識の確からしさを認識結果として出力し、
前記文字認識手段による認識結果である認識の確からしさと予め定められた値の比較に基づいて、前記外接矩形抽出手段、前記比率抽出手段、前記文字サイズ算出手段又は前記決定手段のうち、いずれか１つ以上は、該文字識別符号又は該文字識別符号に対応する文字画像の処理を行わない
ことを特徴とする請求項２に記載の画像処理装置。
【請求項７】
コンピュータを、
文字を一意に識別する文字識別符号と対応させて、該文字を表す文字画像における外接矩形の大きさと文字サイズとの比率を記憶している記憶手段と、
画像内の文字画像を認識する文字認識手段と、
前記画像内の前記文字画像の外接矩形を抽出する外接矩形抽出手段と、
前記文字認識手段による認識結果である文字識別符号に基づいて、前記記憶手段に記憶されている該文字識別符号に対応する外接矩形の大きさと文字サイズの比率を抽出する比率抽出手段と、
前記外接矩形抽出手段によって抽出された外接矩形の大きさと前記比率抽出手段によって抽出された外接矩形の大きさと文字サイズの比率に基づいて、前記文字画像の文字サイズを算出する文字サイズ算出手段と、
前記文字認識手段によって認識された文字画像の書体種別を認識する書体認識手段
として機能させ、
前記記憶手段は、文字を一意に識別する文字識別符号とフォント種別毎に該文字を表す文字画像における外接矩形の大きさと文字サイズの比率を対応させて記憶しており、
前記比率抽出手段は、前記文字認識手段による認識結果である文字識別符号及び前記書体認識手段による認識結果である書体種別に基づいて、前記記憶手段に記憶されている該文字識別符号及び該書体種別に対応する外接矩形の大きさと文字サイズの比率を抽出する
ための画像処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置及び画像処理プログラムに関する。
【背景技術】
【０００２】
特許文献１には、画像中の文字サイズを精度よく推定することを課題とし、ラン抽出部は、原画メモリ内の画像データの主走査方向についてランを抽出し、連結矩形抽出部は、抽出されたランを用いて連結矩形を抽出し、頻度計数部は、抽出された矩形の縦サイズについて頻度を計数し、ピーク検出部は、頻度分布上で、縦サイズの小さい方から、微分値の符号が変化する点を探索し、この点をピークとし、文字サイズ出力部は、ピークを文字サイズとして出力することが開示されている。
【０００３】
特許文献２には、読取解像度に依存することなく、行・文字を安定して切り出すことを可能とすることを課題とし、原稿を読取って得た処理対象の文書画像から文字と見なせる黒ランの外接矩形を作成し、さらに近隣の矩形を統合し、文字行を作成し（切り出し）、原稿１頁分から得られた文字行サイズ（ｄｏｔ数）のヒストグラムを作り、最頻値を代表文字サイズとして求め、実効解像度は、代表文字サイズ（ｄｏｔ数）／標準文字サイズ（ｉｎｃｈ）により算出し、算出した実効解像度に基づいて、文字認識処理の処理条件を定める内部パラメータを適正値に設定しなおし、解像度が不明なデジ・カメによる入力文書画像に対しても実効解像度を推定し、適正な設定により行・文字を安定して切り出すことが開示されている。
【０００４】
特許文献３には、印刷文書に基づく電子フォームを得るためには、まず該文書をスキャナで読み込んで、文字部を背景画素で置き換える必要があり、困難な作業であったことを改善することを課題とし、記録媒体上に形成された文書画像に基づく多値の原画像データを入力し、これを二値化部で二値化してレイアウト解析部でレイアウトを解析し、文字塗りつぶし部において、該レイアウト解析結果としての文字領域情報及び前記二値画像データに基づき、原画像データにおける文字部をその周囲色で塗りつぶすことによって、第１の電子フォームを作成することが開示されている。
【０００５】
特許文献４には、文字サイズの違う様々な文書に対して的確な領域分割を行うことを目的とし、矩形抽出部により黒連結成分の外接矩形を抽出し、ヒストグラム生成部で矩形の高さのヒストグラムを生成し、これにもとづき標準文字サイズ決定部が標準文字サイズを決定し、矩形分類部は、標準文字サイズと矩形の大きさを比較し、文字矩形と図表矩形を分類し、行抽出部は文字矩形を統合した行を抽出し、文字領域生成部は行を統合した文字領域を抽出することが開示されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２０００−３０６０４１号公報
【特許文献２】特開２００３−２７１８９７号公報
【特許文献３】特開２００３−０４６７４６号公報
【特許文献４】特開平０５−２３３８７３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
本発明は、文字画像の外接矩形の大きさを文字サイズとしてしまうことを防止するようにした画像処理装置及び画像処理プログラムを提供することを目的としている。
【課題を解決するための手段】
【０００８】
かかる目的を達成するための本発明の要旨とするところは、次の各項の発明に存する。
請求項１の発明は、文字を一意に識別する文字識別符号と対応させて、該文字を表す文字画像における外接矩形の大きさと文字サイズとの比率を記憶している記憶手段と、画像内の文字画像を認識する文字認識手段と、前記画像内の前記文字画像の外接矩形を抽出する外接矩形抽出手段と、前記文字認識手段による認識結果である文字識別符号に基づいて、前記記憶手段に記憶されている該文字識別符号に対応する外接矩形の大きさと文字サイズの比率を抽出する比率抽出手段と、前記外接矩形抽出手段によって抽出された外接矩形の大きさと前記比率抽出手段によって抽出された外接矩形の大きさと文字サイズの比率に基づいて、前記文字画像の文字サイズを算出する文字サイズ算出手段と、前記文字認識手段によって認識された文字画像の書体種別を認識する書体認識手段を具備しており、前記記憶手段は、文字を一意に識別する文字識別符号とフォント種別毎に該文字を表す文字画像における外接矩形の大きさと文字サイズの比率を対応させて記憶しており、前記比率抽出手段は、前記文字認識手段による認識結果である文字識別符号及び前記書体認識手段による認識結果である書体種別に基づいて、前記記憶手段に記憶されている該文字識別符号及び該書体種別に対応する外接矩形の大きさと文字サイズの比率を抽出することを特徴とする画像処理装置である。
【００１０】
請求項２の発明は、前記画像内の文字領域を抽出する領域抽出手段と、前記領域抽出手段によって抽出された文字領域内にある文字画像の前記文字サイズ算出手段によって算出された文字サイズに基づいて、該文字領域内にある文字画像の文字サイズを決定する決定手段をさらに具備し、前記文字認識手段は、前記領域抽出手段によって抽出された文字領域内にある文字画像を認識し、前記外接矩形抽出手段は、前記文字領域内にある前記文字画像の外接矩形を抽出することを特徴とする請求項１に記載の画像処理装置である。
請求項３の発明は、前記文字認識手段による認識結果である文字識別符号が予め定められた文字識別符号である場合は、前記外接矩形抽出手段、前記比率抽出手段又は前記文字サイズ算出手段のうち、いずれか１つ以上は、該文字識別符号又は該文字識別符号に対応する文字画像の処理を行わないことを特徴とする請求項１に記載の画像処理装置である。
【００１１】
請求項４の発明は、前記文字認識手段による認識結果である文字識別符号が予め定められた文字識別符号である場合は、前記外接矩形抽出手段、前記比率抽出手段、前記文字サイズ算出手段又は前記決定手段のうち、いずれか１つ以上は、該文字識別符号又は該文字識別符号に対応する文字画像の処理を行わないことを特徴とする請求項２に記載の画像処理装置である。
請求項５の発明は、前記文字認識手段は、前記文字画像を認識した場合の確からしさを算出し、文字識別符号に対応させて該認識の確からしさを認識結果として出力し、前記文字認識手段による認識結果である認識の確からしさと予め定められた値の比較に基づいて、前記外接矩形抽出手段、前記比率抽出手段又は前記文字サイズ算出手段のうち、いずれか１つ以上は、該文字識別符号又は該文字識別符号に対応する文字画像の処理を行わないことを特徴とする請求項１又は３に記載の画像処理装置である。
【００１２】
請求項６の発明は、前記文字認識手段は、前記文字画像を認識した場合の確からしさを算出し、文字識別符号に対応させて該認識の確からしさを認識結果として出力し、前記文字認識手段による認識結果である認識の確からしさと予め定められた値の比較に基づいて、前記外接矩形抽出手段、前記比率抽出手段、前記文字サイズ算出手段又は前記決定手段のうち、いずれか１つ以上は、該文字識別符号又は該文字識別符号に対応する文字画像の処理を行わないことを特徴とする請求項２に記載の画像処理装置である。
【００１３】
請求項７の発明は、コンピュータを、文字を一意に識別する文字識別符号と対応させて、該文字を表す文字画像における外接矩形の大きさと文字サイズとの比率を記憶している記憶手段と、画像内の文字画像を認識する文字認識手段と、前記画像内の前記文字画像の外接矩形を抽出する外接矩形抽出手段と、前記文字認識手段による認識結果である文字識別符号に基づいて、前記記憶手段に記憶されている該文字識別符号に対応する外接矩形の大きさと文字サイズの比率を抽出する比率抽出手段と、前記外接矩形抽出手段によって抽出された外接矩形の大きさと前記比率抽出手段によって抽出された外接矩形の大きさと文字サイズの比率に基づいて、前記文字画像の文字サイズを算出する文字サイズ算出手段と、前記文字認識手段によって認識された文字画像の書体種別を認識する書体認識手段として機能させ、前記記憶手段は、文字を一意に識別する文字識別符号とフォント種別毎に該文字を表す文字画像における外接矩形の大きさと文字サイズの比率を対応させて記憶しており、前記比率抽出手段は、前記文字認識手段による認識結果である文字識別符号及び前記書体認識手段による認識結果である書体種別に基づいて、前記記憶手段に記憶されている該文字識別符号及び該書体種別に対応する外接矩形の大きさと文字サイズの比率を抽出するための画像処理プログラムである。
【発明の効果】
【００１４】
請求項１の画像処理装置によれば、文字画像の外接矩形の大きさを文字サイズとしてしまうことを防止することができる。また、同じ文字であっても書体種別毎に異なる外接矩形と文字サイズの比率を用いることができる。
【００１６】
請求項２の画像処理装置によれば、文字領域内の文字画像は同じ文字サイズとすることができる。
請求項３の画像処理装置によれば、予め定められた文字識別符号である文字画像の文字サイズの影響を防止することができる。
【００１７】
請求項４の画像処理装置によれば、予め定められた文字識別符号である文字画像の文字サイズの影響を防止することができる。
請求項５の画像処理装置によれば、認識の確からしさと予め定められた値の比較に基づいて、その認識の確からしさである文字画像の文字サイズの影響を防止することができる。
【００１８】
請求項６の画像処理装置によれば、認識の確からしさと予め定められた値の比較に基づいて、その認識の確からしさである文字画像の文字サイズの影響を防止することができる。
【００１９】
請求項７の画像処理プログラムによれば、文字画像の外接矩形の大きさを文字サイズとしてしまうことを防止することができる。また、同じ文字であっても書体種別毎に異なる外接矩形と文字サイズの比率を用いることができる。
【図面の簡単な説明】
【００２０】
【図１】外接矩形・文字サイズ比率テーブルを生成するための画像処理装置の構成例についての概念的なモジュール構成図である。
【図２】外接矩形・文字サイズ比率テーブルのデータ構成例を示す説明図である。
【図３】外接矩形・文字サイズ比率テーブルの生成処理例を示すフローチャートである。
【図４】第１の実施の形態の構成例についての概念的なモジュール構成図である。
【図５】第１の実施の形態による処理例の概略を示す説明図である。
【図６】第１の実施の形態による処理例を示すフローチャートである。
【図７】フォント毎の外接矩形・文字サイズ比率テーブルを生成するための画像処理装置の構成例についての概念的なモジュール構成図である。
【図８】フォント種別毎によって異なる外接矩形の大きさと文字サイズの比率の例を示す説明図である。
【図９】フォント毎の外接矩形・文字サイズ比率テーブルのデータ構成例を示す説明図である。
【図１０】フォント特徴テーブルのデータ構成例を示す説明図である。
【図１１】フォント文字画像テーブルのデータ構成例を示す説明図である。
【図１２】フォント毎の外接矩形・文字サイズ比率テーブルの生成処理例を示すフローチャートである。
【図１３】第２の実施の形態の構成例についての概念的なモジュール構成図である。
【図１４】第２の実施の形態による処理例を示すフローチャートである。
【図１５】本実施の形態を実現するコンピュータのハードウェア構成例を示すブロック図である。
【発明を実施するための形態】
【００２１】
以下、図面に基づき本発明を実現するにあたっての好適な各種の実施の形態の例を説明する。
＜第１の実施の形態＞
まず、前処理としての外接矩形・文字サイズ比率テーブル２００を生成する処理例について説明する。図１は、外接矩形・文字サイズ比率テーブル２００を生成するための画像処理装置の構成例についての概念的なモジュール構成図である。
【００２２】
なお、モジュールとは、一般的に論理的に分離可能なソフトウェア（コンピュータ・プログラム）、ハードウェア等の部品を指す。したがって、本実施の形態におけるモジュールはコンピュータ・プログラムにおけるモジュールのことだけでなく、ハードウェア構成におけるモジュールも指す。それゆえ、本実施の形態は、それらのモジュールとして機能させるためのコンピュータ・プログラム（コンピュータにそれぞれの手順を実行させるためのプログラム、コンピュータをそれぞれの手段として機能させるためのプログラム、コンピュータにそれぞれの機能を実現させるためのプログラム）、システム及び方法の説明をも兼ねている。ただし、説明の都合上、「記憶する」、「記憶させる」、これらと同等の文言を用いるが、これらの文言は、実施の形態がコンピュータ・プログラムの場合は、記憶装置に記憶させる、又は記憶装置に記憶させるように制御するの意である。また、モジュールは機能に一対一に対応していてもよいが、実装においては、１モジュールを１プログラムで構成してもよいし、複数モジュールを１プログラムで構成してもよく、逆に１モジュールを複数プログラムで構成してもよい。また、複数モジュールは１コンピュータによって実行されてもよいし、分散又は並列環境におけるコンピュータによって１モジュールが複数コンピュータで実行されてもよい。なお、１つのモジュールに他のモジュールが含まれていてもよい。また、以下、「接続」とは物理的な接続の他、論理的な接続（データの授受、指示、データ間の参照関係等）の場合にも用いる。「予め定められた」とは、対象としている処理の前に定まっていることをいい、本実施の形態による処理が始まる前はもちろんのこと、本実施の形態による処理が始まった後であっても、対象としている処理の前であれば、そのときの状況・状態に応じて、又はそれまでの状況・状態に応じて定まることの意を含めて用いる。
また、システム又は装置とは、複数のコンピュータ、ハードウェア、装置等がネットワーク（一対一対応の通信接続を含む）等の通信手段で接続されて構成されるほか、１つのコンピュータ、ハードウェア、装置等によって実現される場合も含まれる。「装置」と「システム」とは、互いに同義の用語として用いる。もちろんのことながら、「システム」には、人為的な取り決めである社会的な「仕組み」（社会システム）にすぎないものは含まない。
また、各モジュールによる処理毎に又はモジュール内で複数の処理を行う場合はその処理毎に、対象となる情報を記憶装置から読み込み、その処理を行った後に、処理結果を記憶装置に書き出すものである。したがって、処理前の記憶装置からの読み込み、処理後の記憶装置への書き出しについては、説明を省略する場合がある。なお、ここでの記憶装置としては、ハードディスク、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、外部記憶媒体、通信回線を介した記憶装置、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）内のレジスタ等を含んでいてもよい。
【００２３】
図１の例に示す画像処理装置は、画像受付モジュール１１０、外接矩形抽出モジュール１２０、外接矩形・文字サイズ比率算出モジュール１３０、外接矩形・文字サイズ比率記憶モジュール１４０を有している。
画像受付モジュール１１０は、外接矩形抽出モジュール１２０と接続されており、文字画像を含む画像を受け付け、その画像を外接矩形抽出モジュール１２０へ渡す。ここでの画像は、サンプルとしての画像であり、文字及び文字サイズが既に判明している文字画像を含む画像である。例えば、ある文字サイズの文字画像が印刷された文書を、スキャナ等で読み込むことによって得た画像である。また、その文書には、文字として、アルファベット（大文字、小文字を含む）、漢字、ひらがな、カタカナ等の文字が印刷されている。例えば、ある定められた順（具体的には、アルファベット順、ＪＩＳコード順等）に、予め定められた大きさの領域内に、予め定められた文字サイズの文字を、１文字ずつ印刷した文書である。実際の外接矩形の大きさを測定するために、このようなサンプルとしての画像を用いる。
なお、文字サイズという用語は、フォントサイズと呼ばれることもある。また、外接矩形の大きさを文字サイズと呼ぶ文献もあるが、本明細書内では、外接矩形の大きさと文字サイズを使い分ける。外接矩形の大きさについては後述する。
【００２４】
外接矩形抽出モジュール１２０は、画像受付モジュール１１０、外接矩形・文字サイズ比率算出モジュール１３０と接続されており、画像受付モジュール１１０内の文字画像の外接矩形を抽出し、その外接矩形の大きさを文字識別符号と対応付けて外接矩形・文字サイズ比率算出モジュール１３０に渡す。
外接矩形とは、文字画像を取り囲む最小の矩形である。したがって、縦軸をＸ軸、横軸をＹ軸とした座標系の場合、外接矩形の左辺のＸ座標は、文字画像の最も左にある画素のＸ座標であり、外接矩形の右辺のＸ座標は、文字画像の最も右にある画素のＸ座標であり、外接矩形の上辺のＹ座標は、文字画像の最も上にある画素のＹ座標であり、外接矩形の下辺のＹ座標は、文字画像の最も下にある画素のＹ座標である。
外接矩形の大きさとは、その外接矩形の縦長又は横幅のいずれか一方又は両方をいう。また、文字サイズについても、その文字サイズの縦長又は横幅のいずれか一方又は両方をいい、外接矩形の大きさと対応していればよい。
また、外接矩形の大きさを示す単位は画素数（ドット数）であってもよいし、活字文字の大きさの単位であるポイント等であってもよい。なお、文字サイズの単位は、外接矩形の大きさの単位と対応していれば、画素数（ドット数）であってもよいし、ポイント等であってもよい。
なお、文字サイズとその文字画像の外接矩形の大きさとは異なるのが普通である。文字サイズとは、文字画像の周囲の空白も含めて定義されている場合が多いからである。したがって、外接矩形の大きさよりも文字サイズの方が大きいのが一般的である。
【００２５】
また、画像内の文字は判明しているので、抽出した外接矩形は文字識別符号と対応付けられている。例えば、ある定められた順に、予め定められた大きさの領域内にある文字画像を抽出し、その文字画像の外接矩形の大きさを測定する。そして、その順にしたがって文字識別符号を対応付ける。
なお、文字識別符号（以下、文字コードともいう）とは、文字を一意に識別する符号であればよい。例えば、ＪＩＳコード、ユニコード等のように情報交換用に規格として定められたものであってもよいし、規格として定められたものではなく、本実施の形態内で文字を一意に識別するために定められた符号であってもよい。
【００２６】
外接矩形・文字サイズ比率算出モジュール１３０は、外接矩形抽出モジュール１２０、外接矩形・文字サイズ比率記憶モジュール１４０と接続されており、文字毎に文字画像の外接矩形の大きさと文字サイズとの比率を算出し、文字コードと対応させて、その文字を表す文字画像における外接矩形の大きさと文字サイズとの比率を外接矩形・文字サイズ比率記憶モジュール１４０に記憶させる。文字画像の文字サイズは既に判明しており、外接矩形抽出モジュール１２０から文字画像の外接矩形の大きさを得ている。比率としては、ａ：ｂのように比の形態で表してもよいし、分数（（文字画像の外接矩形の大きさ／文字サイズ）、又は（文字サイズ／文字画像の外接矩形の大きさ））、その分数を小数の形態で表してもよい。また、外接矩形の大きさは、前述したように、その外接矩形の縦長又は横幅のいずれか一方又は両方であるから、外接矩形の縦長と文字サイズの縦長との比率、外接矩形の横幅と文字サイズの横幅との比率、外接矩形の面積と文字サイズの面積との比率等であってもよい。
【００２７】
そして、外接矩形・文字サイズ比率算出モジュール１３０は、例えば外接矩形・文字サイズ比率テーブル２００のように、文字毎に文字画像の外接矩形の大きさと文字サイズとの比率を外接矩形・文字サイズ比率記憶モジュール１４０に記憶させる。図２は、外接矩形・文字サイズ比率テーブル２００のデータ構成例を示す説明図である。外接矩形・文字サイズ比率テーブル２００は、文字コード欄２１０、外接矩形・文字サイズ比率欄２２０を有している。文字コード欄２１０は、文字コードを記憶している。外接矩形・文字サイズ比率欄２２０は、文字画像の外接矩形の大きさと文字サイズとの比率を記憶している。
外接矩形・文字サイズ比率記憶モジュール１４０は、外接矩形・文字サイズ比率算出モジュール１３０と接続されており、文字コードと対応させて、その文字を表す文字画像における外接矩形の大きさと文字サイズとの比率を記憶する。例えば外接矩形・文字サイズ比率テーブル２００を記憶する。
【００２８】
図３は、外接矩形・文字サイズ比率テーブル２００の生成処理例を示すフローチャートである。
ステップＳ３０２では、画像受付モジュール１１０が、画像を受け付ける。この画像は、文字（文字コード）及び文字サイズが既に判明している文字画像が含まれている画像である。
ステップＳ３０４からステップＳ３１２までの処理を文字画像の数だけ繰り返す。
ステップＳ３０６では、外接矩形抽出モジュール１２０が、文字画像の外接矩形を抽出する。１つの文字画像は、予め定められた大きさの領域内にあるので、その領域内の文字画像を抽出する。
ステップＳ３０８では、外接矩形・文字サイズ比率算出モジュール１３０が、ステップＳ３０６で抽出した外接矩形の大きさと文字サイズの比率を算出する。
ステップＳ３１０では、外接矩形・文字サイズ比率算出モジュール１３０が、文字（文字コード）と対にして外接矩形の大きさと文字サイズの比率を外接矩形・文字サイズ比率記憶モジュール１４０に記憶させる。
【００２９】
第１の実施の形態である画像処理装置は、図４の例に示すように、画像受付モジュール４１０、文字領域抽出モジュール４２０、外接矩形・文字認識モジュール４３０、比率抽出モジュール４４０、文字サイズ算出モジュール４５０、領域内文字サイズ決定モジュール４６０、出力モジュール４７０、外接矩形・文字サイズ比率記憶モジュール１４０を有している。なお、前述の画像処理装置と同種の部位には同一符号を付し重複した説明を省略する。
【００３０】
画像受付モジュール４１０は、文字領域抽出モジュール４２０と接続されており、画像を受け付けて、その画像を文字領域抽出モジュール４２０へ渡す。画像を受け付けるとは、例えば、スキャナ、カメラ等で画像を読み込むこと、ファックス等で通信回線を介して外部機器から画像を受信すること、ＣＣＤ（Ｃｈａｒｇｅ−Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）等で映像を撮影すること、ハードディスク（コンピュータに内蔵されているものの他に、ネットワークを介して接続されているもの等を含む）等に記憶されている画像を読み出すこと等が含まれる。画像は、２値画像、多値画像（カラー画像を含む）であってもよい。受け付ける画像は、１枚であってもよいし、複数枚であってもよい。また、画像の内容として、文字画像が含まれていればよく、例えば、ビジネスに用いられる文書、広告宣伝用のパンフレット等であってもよい。
【００３１】
文字領域抽出モジュール４２０は、画像受付モジュール４１０、外接矩形・文字認識モジュール４３０と接続されており、画像受付モジュール４１０が受け付けた画像内の文字領域を抽出し、その文字領域を外接矩形・文字認識モジュール４３０へ渡す。ここで、文字領域とは、文字画像が含まれている領域をいい、具体的には、段落等が該当し、複数行の領域であってもよいし、１行だけの領域であってもよい。文字領域を抽出する技術は種々あるが、既存の技術を用いればよい。例えば、画素塊の特徴（大きさ、穴の個数等）を抽出し、その特徴空間において、文字画像の特徴に近いものを文字画像の領域と判断するようにしてもよい。また、画素塊とは、４連結又は８連結で連続する画素領域をいう。
【００３２】
外接矩形・文字認識モジュール４３０は、文字領域抽出モジュール４２０、比率抽出モジュール４４０と接続されており、外接矩形抽出モジュール４３２、文字認識モジュール４３４を有している。外接矩形・文字認識モジュール４３０は、文字領域抽出モジュール４２０によって抽出された文字領域内の文字画像を認識し、その文字コードと文字画像の外接矩形の大きさを対応させて比率抽出モジュール４４０に渡す。
【００３３】
外接矩形抽出モジュール４３２は、文字領域内の文字画像の外接矩形を抽出する。
文字認識モジュール４３４は、文字領域内の文字画像を認識する。外接矩形抽出モジュール４３２、文字認識モジュール４３４のいずれが先に処理を行ってもよいが、ここでの文字画像は、外接矩形抽出モジュール４３２が抽出した外接矩形の文字画像と対応している。したがって、外接矩形と文字コードは対応している。例えば、外接矩形抽出モジュール４３２が先に処理を行う場合は、文字認識モジュール４３４は、外接矩形抽出モジュール４３２が抽出した外接矩形の文字画像を対象として文字認識を行う。また、文字認識モジュール４３４が先に処理を行う場合は、外接矩形抽出モジュール４３２は、文字認識モジュール４３４が認識した文字画像を対象として外接矩形を抽出する。なお、文字認識モジュール４３４は、外接矩形抽出モジュール４３２の機能を有していてもよい。つまり、認識結果として、文字コードとともに、認識対象とした文字画像の外接矩形を含めるようにしてもよい。
【００３４】
また、文字認識モジュール４３４による認識結果である文字コードが予め定められた文字コードである場合は、外接矩形抽出モジュール４３２、比率抽出モジュール４４０、文字サイズ算出モジュール４５０又は領域内文字サイズ決定モジュール４６０のうち、いずれか１つ以上は、その文字コード又はその文字コードに対応する文字画像の処理を行わないようにしてもよい。例えば、具体的には、外接矩形抽出モジュール４３２、比率抽出モジュール４４０、文字サイズ算出モジュール４５０又は領域内文字サイズ決定モジュール４６０が、文字コードが予め定められた文字コードであるか否かの判断を行い、文字コードが予め定められた文字コードである場合は、そのモジュールによる処理を行うようにする。
ここで、予め定められた文字コードとは、例えば、誤認識されやすい記号（ピリオド、カンマ、句読点等）がある。又は、文字認識モジュール４３４における誤認識率が予め定められた値よりも高い文字の文字識別符号であってもよい。誤認識されてしまった場合、その文字コード又はその文字コードに対応する文字画像を用いて、その後に比率抽出モジュール４４０、文字サイズ算出モジュール４５０等による処理が行われてしまうと文字サイズも誤ったものになってしまうことを防ぐ場合に、このような処理を行う。
【００３５】
また、文字認識モジュール４３４は、文字画像を認識した場合の確からしさを算出し、文字コードに対応させてその認識の確からしさを認識結果として出力するようにしてもよい。
そして、この場合、文字認識モジュール４３４による認識結果である認識の確からしさと予め定められた値の比較に基づいて、外接矩形抽出モジュール４３２、比率抽出モジュール４４０、文字サイズ算出モジュール４５０又は領域内文字サイズ決定モジュール４６０のうち、いずれか１つ以上は、その文字コード又はその文字コードに対応する文字画像の処理を行わないようにしてもよい。
例えば、認識の確からしさを０から１の間の数値で表し、高い値である場合に、誤っている認識である可能性が低いことを示している場合は、予め定められた値は０から１の間の数値であり、「比較に基づいて」とは、「認識の確からしさが予め定められた値よりも大きい場合に」となる。逆に、認識の確からしさが低い値である場合に、誤っている認識である可能性が低いことを示している場合は、「比較に基づいて」とは、「認識の確からしさが予め定められた値よりも小さい場合に」となる。
例えば、具体的には、外接矩形抽出モジュール４３２、比率抽出モジュール４４０、文字サイズ算出モジュール４５０又は領域内文字サイズ決定モジュール４６０が、認識の確からしさと予め定められた値の比較を行い、前述の関係を有している場合は、そのモジュールによる処理を行うようにする。
【００３６】
比率抽出モジュール４４０は、外接矩形・文字認識モジュール４３０、文字サイズ算出モジュール４５０、外接矩形・文字サイズ比率記憶モジュール１４０と接続されており、文字認識モジュール４３４による認識結果である文字コードに基づいて、外接矩形・文字サイズ比率記憶モジュール１４０に記憶されているその文字コードに対応する外接矩形の大きさと文字サイズの比率を抽出し、その外接矩形と文字サイズの比率を文字サイズ算出モジュール４５０に渡す。なお、外接矩形・文字サイズ比率記憶モジュール１４０は、前述のように、文字コードと対応させて、その文字を表す文字画像における外接矩形の大きさと文字サイズとの比率（例えば、外接矩形・文字サイズ比率テーブル２００）を記憶している。
【００３７】
文字サイズ算出モジュール４５０は、比率抽出モジュール４４０、領域内文字サイズ決定モジュール４６０と接続されており、外接矩形抽出モジュール４３２によって抽出された外接矩形の大きさと比率抽出モジュール４４０によって抽出された外接矩形の大きさと文字サイズの比率に基づいて、文字画像の文字サイズを算出し、その文字サイズを領域内文字サイズ決定モジュール４６０に渡す。例えば、外接矩形の大きさと文字サイズの比率が（文字サイズ／外接矩形の大きさ）であれば、文字コードの画像内における文字画像の外接矩形の大きさを乗算することによって、文字サイズを算出する。外接矩形の大きさと文字サイズの比率が（外接矩形の大きさ／文字サイズ）であれば、文字コードの画像内における文字画像の外接矩形の大きさを比率で除算することによって、文字サイズを算出する。外接矩形の大きさと文字サイズの比率が（（外接矩形の大きさ）対（文字サイズ））であれば、文字コードの画像内における文字画像の外接矩形の大きさを比率内の（外接矩形の大きさ）で除算し、比率内の（文字サイズ）を乗算することによって、文字サイズを算出する。
【００３８】
領域内文字サイズ決定モジュール４６０は、文字サイズ算出モジュール４５０、出力モジュール４７０と接続されており、文字領域抽出モジュール４２０によって抽出された文字領域内にある文字画像の文字サイズ算出モジュール４５０によって算出された文字サイズに基づいて、その文字領域内にある文字画像の文字サイズを決定し、その文字サイズを文字領域と対応させて出力モジュール４７０へ渡す。文字領域内は、統一された文字サイズであることが一般的であるので、それに対応したものである。例えば、その文字領域内の文字サイズに対して統計的な処理を行い、文字サイズを決定してもよい。より具体的には、その文字領域内の文字サイズの平均値、最頻値、中央値等のいずれか１つを、文字領域内の文字サイズと決定するようにしてもよい。
【００３９】
出力モジュール４７０は、領域内文字サイズ決定モジュール４６０と接続されており、文字サイズを文字領域と対応させて出力する。また、文字コードを出力に含め、文字コードの属性として文字サイズを出力するようにしてもよい。出力するとは、例えば、プリンタ等の印刷装置で印刷すること、ディスプレイ等の表示装置に表示すること、メモリーカード等の記憶媒体に記憶すること、他の情報処理装置、情報処理モジュールへ渡すこと等が含まれる。例えば、ワープロソフトウェア等の文書作成モジュールへ出力し、その文書作成モジュールは、文字コードをその文字サイズで表示して、画像受付モジュール４１０が受け付けた画像を文字コードで構成されている文書として扱うようにしてもよい。
また、出力モジュール４７０は、文字サイズに対して出力先の解像度に合わせた変換を行ってもよい。例えば、本実施の形態では解像度が６００ｄｐｉ（Ｄｏｔ  Ｐｅｒ  Ｉｎｃｈ）における文字サイズであり、出力先の解像度が９６ｄｐｉである場合は、解像度を６００ｄｐｉから９６ｄｐｉに変換した後に、出力するようにしてもよい。
【００４０】
図５は、第１の実施の形態による処理例の概略を示す説明図である。
画像受付モジュール４１０が画像５００を受け付ける。外接矩形抽出モジュール４３２が外接矩形抽出処理５１０を行う。そして、外接矩形５３０の大きさとして２９ポイントを抽出したとする。また、文字認識モジュール４３４が文字認識処理５２０を行う。そして、文字認識結果５４０として、文字コード「ａ」を認識したとする。比率抽出モジュール４４０は、文字コード「ａ」に対応する比率を外接矩形・文字サイズ比率記憶モジュール１４０から比率抽出処理５５０する。そして、文字サイズ算出モジュール４５０は、比率を用いて、外接矩形５３０の大きさ２９ポイントから文字サイズ５７０として３８ポイントを算出する。
【００４１】
図６は、第１の実施の形態による処理例を示すフローチャートである。
ステップＳ６０２では、画像受付モジュール４１０が、画像を受け付ける。
ステップＳ６０４では、文字領域抽出モジュール４２０が、画像から文字領域を抽出する。
ステップＳ６０６からステップＳ６２０までの処理を文字領域の数だけ繰り返す。
ステップＳ６０８では、外接矩形抽出モジュール４３２が、文字領域内の文字画像の外接矩形を抽出する。
ステップＳ６１０では、文字認識モジュール４３４が、文字認識処理を行う。
ステップＳ６１２では、比率抽出モジュール４４０が、文字認識結果を用いて、外接矩形・文字サイズ比率記憶モジュール１４０から外接矩形の大きさと文字サイズの比率を抽出する。
ステップＳ６１４では、文字サイズ算出モジュール４５０が、ステップＳ６０８で抽出された外接矩形の大きさと文字サイズの比率から、文字サイズを算出する。
ステップＳ６１６では、領域内文字サイズ決定モジュール４６０が、文字領域内で文字サイズ毎に文字数を計数する。
ステップＳ６１８では、領域内文字サイズ決定モジュール４６０が、例えば、最頻値をその文字領域内の文字サイズに決定する。
【００４２】
＜第２の実施の形態＞
まず、前処理としてのフォント毎の外接矩形・文字サイズ比率テーブル９００、フォント特徴テーブル１０００又はフォント文字画像テーブル１１００を生成する処理例について説明する。図７は、フォント毎の外接矩形・文字サイズ比率テーブル９００を生成するための画像処理装置の構成例についての概念的なモジュール構成図である。
画像受付モジュール１１０、外接矩形抽出モジュール１２０、特徴抽出モジュール７３０、外接矩形・文字サイズ比率記憶モジュール７４０を有している。これは、書体種別毎に外接矩形の大きさと文字サイズの比率を求めるようにしたものである。なお、前述の画像処理装置と同種の部位には同一符号を付し重複した説明を省略する。
【００４３】
画像受付モジュール１１０は、図１に例示の画像受付モジュール１１０と同等であるが、受け付ける画像は、文字、文字サイズ及びフォント種別が既に判明している文字画像を含む画像である。なお、書体種別とは、いわゆるフォントの種別をいい、例えば、明朝体、ゴシック体、サンセリフ体、イタリック体等がある。以下、書体のことをフォントともいう。
【００４４】
特徴抽出モジュール７３０は、外接矩形抽出モジュール１２０、外接矩形・文字サイズ比率記憶モジュール７４０と接続されており、フォント特徴抽出モジュール７３２、外接矩形・文字サイズ比率算出モジュール７３４を有している。
フォント特徴抽出モジュール７３２は、各文字画像のフォント特徴を抽出し、そのフォント特徴を文字コードに対応させて外接矩形・文字サイズ比率記憶モジュール７４０に記憶させる。フォント特徴としては、例えば、その文字画像の縦方向又は横方向のいずれか一方又は両方に投影した投影画像そのもの、その投影画像の特徴（例えば、投影画像内のピークのある位置、そのピークの高さ、そのピークの幅等がある。なお、ピークとは、予め定められた値よりも多い投影をいう）、その文字画像そのもの等がある。なお、投影画像とは、縦方向又は横方向に画素の数を計数したものであり、ヒストグラムともいわれるものである。
【００４５】
例えば、フォント特徴テーブル１０００のように、文字コードとフォント種別とその文字画像の投影画像の特徴を対応させたものを外接矩形・文字サイズ比率記憶モジュール７４０に記憶させる。図１０は、フォント特徴テーブル１０００のデータ構成例を示す説明図である。フォント特徴テーブル１０００は、文字コード欄１０１０、フォント種別欄１０２０、投影特徴欄１０３０を有している。文字コード欄１０１０は、文字コードを記憶している。フォント種別欄１０２０は、フォント種別を記憶している。投影特徴欄１０３０は、投影画像の特徴（投影画像そのもの、又はその投影画像の特徴のいずれか一方又は両方）を記憶している。
また、例えば、フォント文字画像テーブル１１００のように、文字コードとその文字コードのフォント種別毎の文字画像を対応させたものを外接矩形・文字サイズ比率記憶モジュール７４０に記憶させる。図１１は、フォント文字画像テーブル１１００のデータ構成例を示す説明図である。フォント文字画像テーブル１１００は、文字コード欄１１１０、フォントＡ文字画像欄１１２０、フォントＢ文字画像欄１１３０を有している。文字コード欄１１１０は、文字コードを記憶している。フォントＡ文字画像欄１１２０は、フォントＡにおけるその文字コードの文字画像を記憶している。フォントＢ文字画像欄１１３０は、フォントＢにおけるその文字コードの文字画像を記憶している。その他のフォント種別におけるその文字コードの文字画像を記憶していてもよい。
フォント特徴抽出モジュール７３２は、フォント特徴テーブル１０００又はフォント文字画像テーブル１１００のいずれか一方又は両方を外接矩形・文字サイズ比率記憶モジュール７４０に記憶させる。
【００４６】
外接矩形・文字サイズ比率算出モジュール７３４は、図１に例示の外接矩形・文字サイズ比率算出モジュール１３０と同等である。ただし、既に判明しているフォント種別を用いて、文字コードとフォント種別毎にその文字を表す文字画像における外接矩形の大きさと文字サイズの比率を対応させて、外接矩形・文字サイズ比率記憶モジュール７４０に記憶させる。文字画像のフォント種別、文字サイズは既に判明しており、外接矩形抽出モジュール１２０から文字画像の外接矩形の大きさを得ている。比率としては、ａ：ｂのように表してもよいし、分数（（文字画像の外接矩形の大きさ／文字サイズ）、又は（文字サイズ／文字画像の外接矩形の大きさ））、その分数を小数で表した形態であってもよい。
例えば、フォント毎の外接矩形・文字サイズ比率テーブル９００のように、文字毎にフォント種別における文字画像の外接矩形の大きさと文字サイズとの比率を外接矩形・文字サイズ比率記憶モジュール７４０に記憶させる。図９は、フォント毎の外接矩形・文字サイズ比率テーブル９００のデータ構成例を示す説明図である。フォント毎の外接矩形・文字サイズ比率テーブル９００は、文字コード欄９１０、フォントＡにおける外接矩形・文字サイズ比率欄９２０等を有している。文字コード欄９１０は、文字コードを記憶している。フォントＡにおける外接矩形・文字サイズ比率欄９２０は、フォントＡにおける文字画像の外接矩形の大きさと文字サイズとの比率を記憶している。フォントＢにおける外接矩形・文字サイズ比率欄９３０は、フォントＢにおける文字画像の外接矩形の大きさと文字サイズとの比率を記憶している。その他のフォント種別における文字画像の外接矩形の大きさと文字サイズとの比率を記憶していてもよい。
【００４７】
外接矩形・文字サイズ比率記憶モジュール７４０は、特徴抽出モジュール７３０と接続されており、文字コードとフォント種別毎にその文字を表す文字画像における外接矩形の大きさと文字サイズの比率を対応させて記憶する。例えばフォント毎の外接矩形・文字サイズ比率テーブル９００を記憶する。そして、文字コードとフォント種別毎にその文字を表す文字画像のフォント特徴を記憶する。例えばフォント特徴テーブル１０００又はフォント文字画像テーブル１１００のいずれか一方又は両方を記憶する。
【００４８】
図８は、フォント種別毎によって異なる外接矩形の大きさと文字サイズの比率の例を示す説明図である。
図８（ａ）に例示するものは、２種類のフォントによるアルファベットの文字の「ａ」と「ｂ」の外接矩形を示したものである。これらは、文字サイズが同じであるにもかかわらず、文字、フォントによって外接矩形の大きさは異なっている。同じ「ａ」という文字であっても、外接矩形８１０、外接矩形８３０のように、その大きさは異なっており、同じ「ｂ」という文字であっても、外接矩形８２０、外接矩形８４０のように、その大きさは異なっている。なお、前述したように、同じフォントであっても、文字によって外接矩形の大きさは異なっていることも示している。
図８（ｂ）に例示するものは、図８（ａ）に例示した文字の文字サイズを示したものである。このように、文字、フォントが異なっていても、その文字サイズは同じ大きさである。
したがって、フォント種別によって、文字毎に外接矩形の大きさと文字サイズの比率が異なる。第２の実施の形態では、図９に例示したように、フォント種別毎に外接矩形の大きさと文字サイズの比率を外接矩形・文字サイズ比率記憶モジュール７４０内のフォント毎の外接矩形・文字サイズ比率テーブル９００に記憶させる。
【００４９】
図１２は、フォント毎の外接矩形・文字サイズ比率テーブル９００の生成処理例を示すフローチャートである。
ステップＳ１２０２では、画像受付モジュール１１０が、画像を受け付ける。この画像は、文字（文字コード）、フォント種別及び文字サイズが既に判明している文字画像が含まれている画像である。
ステップ１２０４からステップＳ１２１４までの処理を文字画像の数だけ繰り返す。
ステップＳ１２０６では、外接矩形抽出モジュール１２０が、文字画像の外接矩形を抽出する。１つの文字画像は、予め定められた大きさの領域内にあるので、その領域内の文字画像を抽出する。
ステップＳ１２０８では、外接矩形・文字サイズ比率算出モジュール７３４が、ステップＳ１２０６で抽出した外接矩形の大きさと文字サイズの比率を算出する。
ステップＳ１２１０では、フォント特徴抽出モジュール７３２が、フォントの特徴を抽出する。
ステップＳ１２１２では、特徴抽出モジュール７３０が、文字（文字コード）と対にしてそのフォントにおける外接矩形の大きさと文字サイズの比率、文字（文字コード）と対にしてその文字におけるフォント特徴を外接矩形・文字サイズ比率記憶モジュール７４０に記憶させる。
【００５０】
図１３は、第２の実施の形態の構成例についての概念的なモジュール構成図である。
画像受付モジュール４１０、文字領域抽出モジュール４２０、外接矩形・文字認識モジュール４３０、フォント種別認識・比率算出モジュール１３４０、外接矩形・文字サイズ比率記憶モジュール７４０、文字サイズ算出モジュール４５０、領域内文字サイズ決定モジュール４６０、出力モジュール４７０を有している。なお、前述の画像処理装置と同種の部位には同一符号を付し重複した説明を省略する。
【００５１】
フォント種別認識・比率算出モジュール１３４０は、外接矩形・文字認識モジュール４３０、文字サイズ算出モジュール４５０、外接矩形・文字サイズ比率記憶モジュール７４０と接続されており、フォント種別認識モジュール１３４２、比率抽出モジュール１３４４を有している。
フォント種別認識モジュール１３４２は、文字認識モジュール４３４によって認識された文字画像のフォント種別を認識する。例えば、外接矩形・文字サイズ比率記憶モジュール７４０に記憶されているフォント特徴テーブル１０００又はフォント文字画像テーブル１１００のいずれか一方又は両方を用いて、その文字画像のフォント種別を認識する。
【００５２】
フォント特徴テーブル１０００を用いる場合であって、投影特徴欄１０３０が投影画像の特徴として投影画像そのものを記憶しているときは、フォント種別認識モジュール１３４２は、文字認識モジュール４３４によって認識された文字画像の投影画像を生成して、その投影画像そのものと文字コードに対応する投影特徴欄１０３０内の投影画像そのものとのマッチング処理を行い、不一致の画素割合が予め定められた値と比較して少ない場合には、そのフォント種別と判別するようにしてもよいし、不一致の画素が最も少ないものをそのフォント種別と判別するようにしてもよい。
【００５３】
また、フォント特徴テーブル１０００を用いる場合であって、投影特徴欄１０３０が投影画像内のピークのある位置等の投影画像の特徴を記憶しているときは、フォント種別認識モジュール１３４２は、文字認識モジュール４３４によって認識された文字画像の投影画像の特徴を抽出して、抽出した投影画像の特徴と投影特徴欄１０３０内の投影画像の特徴を比較して、差が予め定められた値と比較して少ない場合には、そのフォント種別と判別するようにしてもよいし、差が最も少ないものをそのフォント種別と判別するようにしてもよい。
【００５４】
また、フォント文字画像テーブル１１００を用いる場合は、フォント種別認識モジュール１３４２は、文字認識モジュール４３４によって認識された文字画像を抽出して、抽出した文字画像とフォントＡ文字画像欄１１２０等内の文字画像とのマッチング処理を行い、不一致の画素割合が予め定められた値と比較して少ない場合には、そのフォント種別と判別するようにしてもよいし、不一致の画素が最も少ないものをそのフォント種別と判別するようにしてもよい。また、フォントＡ文字画像欄１１２０等内の文字画像の外接矩形の大きさを文字認識モジュール４３４によって認識された文字画像の大きさに合わせるようにした後、又は文字認識モジュール４３４によって認識された文字画像の大きさをフォントＡ文字画像欄１１２０等内の文字画像の外接矩形の大きさに合わせるようにした後に、マッチング処理を行うようにしてもよい。
【００５５】
比率抽出モジュール１３４４は、文字認識モジュール４３４による認識結果である文字コード及びフォント種別認識モジュール１３４２による認識結果であるフォント種別に基づいて、外接矩形・文字サイズ比率記憶モジュール７４０に記憶されているその文字コード及びそのフォント種別に対応する外接矩形の大きさと文字サイズの比率を抽出する。例えば、外接矩形・文字サイズ比率記憶モジュール７４０に記憶されているフォント毎の外接矩形・文字サイズ比率テーブル９００を用いる場合は、文字認識モジュール４３４からの文字コードに対応する文字コード欄９１０とフォント種別認識モジュール１３４２からのフォント種別に対応するフォントＡにおける外接矩形・文字サイズ比率欄９２０等によって、外接矩形の大きさと文字サイズの比率を抽出する。
【００５６】
外接矩形・文字サイズ比率記憶モジュール７４０は、フォント種別認識・比率算出モジュール１３４０と接続されており、文字コードとフォント種別毎にその文字を表す文字画像における外接矩形の大きさと文字サイズの比率を対応させて記憶している。例えば、フォント毎の外接矩形・文字サイズ比率テーブル９００を記憶している。また、文字コードに対応したフォント特徴を記憶していてもよい。例えば、フォント特徴テーブル１０００又はフォント文字画像テーブル１１００のいずれか一方又は両方を記憶していてもよい。
【００５７】
文字サイズ算出モジュール４５０は、フォント種別認識・比率算出モジュール１３４０、領域内文字サイズ決定モジュール４６０と接続されており、図４に例示した文字サイズ算出モジュール４５０と同等の処理を行うが、外接矩形抽出モジュール４３２によって抽出された外接矩形の大きさと比率抽出モジュール１３４４によって抽出された外接矩形の大きさと文字サイズの比率に基づいて、文字画像の文字サイズを算出し、その文字サイズを領域内文字サイズ決定モジュール４６０に渡す。
【００５８】
前述の第１の実施の形態と同様に、文字認識モジュール４３４による認識結果である文字コードが予め定められた文字コードである場合は、外接矩形抽出モジュール４３２、フォント種別認識モジュール１３４２、比率抽出モジュール１３４４、文字サイズ算出モジュール４５０又は領域内文字サイズ決定モジュール４６０のうち、いずれか１つ以上は、その文字コード又はその文字コードに対応する文字画像の処理を行わないようにしてもよい。
また、前述の第１の実施の形態と同様に、文字認識モジュール４３４が、文字画像を認識した場合の確からしさを算出し、文字コードに対応させてその認識の確からしさを認識結果として出力するようにした場合、文字認識モジュール４３４による認識結果である認識の確からしさと予め定められた値の比較に基づいて、外接矩形抽出モジュール４３２、フォント種別認識モジュール１３４２、比率抽出モジュール１３４４、文字サイズ算出モジュール４５０又は領域内文字サイズ決定モジュール４６０のうち、いずれか１つ以上は、その文字コード又はその文字コードに対応する文字画像の処理を行わないようにしてもよい。
【００５９】
図１４は、第２の実施の形態による処理例を示すフローチャートである。
ステップＳ１４０２では、画像受付モジュール４１０が、画像を受け付ける。
ステップＳ１４０４では、文字領域抽出モジュール４２０が、画像から文字領域を抽出する。
ステップＳ１４０６からステップＳ１４２２までの処理を文字領域の数だけ繰り返す。
ステップＳ１４０８では、外接矩形抽出モジュール４３２が、文字画像の外接矩形を抽出する。
ステップＳ１４１０では、文字認識モジュール４３４が、文字認識処理を行う。
ステップＳ１４１２では、フォント種別認識モジュール１３４２が、フォント種別の認識処理を行う。
ステップＳ１４１４では、比率抽出モジュール１３４４が、文字認識結果とフォント種別の認識結果を用いて、外接矩形・文字サイズ比率記憶モジュール７４０から外接矩形の大きさと文字サイズの比率を抽出する。
ステップＳ１４１６では、文字サイズ算出モジュール４５０が、ステップＳ１４１４で抽出された外接矩形の大きさと文字サイズの比率から、文字サイズを算出する。
ステップＳ１４１８では、領域内文字サイズ決定モジュール４６０が、文字領域内で文字サイズ毎に文字数を計数する。
ステップＳ１４２０では、領域内文字サイズ決定モジュール４６０が、例えば、最頻値をその文字領域内の文字サイズに決定する。
【００６０】
図１５を参照して、図１、図４、図７、図１３の例に示した画像処理装置のハードウェア構成例について説明する。図１５に示す構成は、例えばパーソナルコンピュータ（ＰＣ）などによって構成されるものであり、スキャナ等のデータ読み取り部１５１７と、プリンタなどのデータ出力部１５１８を備えたハードウェア構成例を示している。
【００６１】
ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）１５０１は、前述の実施の形態において説明した各種のモジュール、すなわち、外接矩形抽出モジュール１２０、外接矩形・文字サイズ比率算出モジュール１３０、文字領域抽出モジュール４２０、外接矩形・文字認識モジュール４３０、比率抽出モジュール４４０、文字サイズ算出モジュール４５０、領域内文字サイズ決定モジュール４６０、特徴抽出モジュール７３０、フォント種別認識・比率算出モジュール１３４０等の各モジュールの実行シーケンスを記述したコンピュータ・プログラムにしたがった処理を実行する制御部である。
【００６２】
ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）１５０２は、ＣＰＵ１５０１が使用するプログラムや演算パラメータ等を格納する。ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）１５０３は、ＣＰＵ１５０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を格納する。これらはＣＰＵバスなどから構成されるホストバス１５０４により相互に接続されている。
【００６３】
ホストバス１５０４は、ブリッジ１５０５を介して、ＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ  Ｃｏｍｐｏｎｅｎｔ  Ｉｎｔｅｒｃｏｎｎｅｃｔ／Ｉｎｔｅｒｆａｃｅ）バスなどの外部バス１５０６に接続されている。
【００６４】
キーボード１５０８、マウス等のポインティングデバイス１５０９は、操作者により操作される入力デバイスである。ディスプレイ１５１０は、液晶表示装置又はＣＲＴ（Ｃａｔｈｏｄｅ  Ｒａｙ  Ｔｕｂｅ）などがあり、各種情報をテキストやイメージ情報として表示する。
【００６５】
ＨＤＤ（Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）１５１１は、ハードディスクを内蔵し、ハードディスクを駆動し、ＣＰＵ１５０１によって実行するプログラムや情報を記録又は再生させる。ハードディスクには、受け付けた画像、外接矩形・文字サイズ比率テーブル２００、フォント毎の外接矩形・文字サイズ比率テーブル９００、フォント特徴テーブル１０００、フォント文字画像テーブル１１００、抽出した外接矩形、文字サイズなどが格納される。さらに、その他の各種のデータ処理プログラム等、各種コンピュータ・プログラムが格納される。
【００６６】
ドライブ１５１２は、装着されている磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリ等のリムーバブル記録媒体１５１３に記録されているデータ又はプログラムを読み出して、そのデータ又はプログラムを、インタフェース１５０７、外部バス１５０６、ブリッジ１５０５、及びホストバス１５０４を介して接続されているＲＡＭ１５０３に供給する。リムーバブル記録媒体１５１３も、ハードディスクと同様のデータ記録領域として利用可能である。
【００６７】
接続ポート１５１４は、外部接続機器１５１５を接続するポートであり、ＵＳＢ、ＩＥＥＥ１３９４等の接続部を持つ。接続ポート１５１４は、インタフェース１５０７、及び外部バス１５０６、ブリッジ１５０５、ホストバス１５０４等を介してＣＰＵ１５０１等に接続されている。通信部１５１６は、ネットワークに接続され、外部とのデータ通信処理を実行する。データ読み取り部１５１７は、例えばスキャナであり、ドキュメントの読み取り処理を実行する。データ出力部１５１８は、例えばプリンタであり、ドキュメントデータの出力処理を実行する。
【００６８】
なお、図１５に示す画像処理装置のハードウェア構成は、１つの構成例を示すものであり、本実施の形態は、図１５に示す構成に限らず、本実施の形態において説明したモジュールを実行可能な構成であればよい。例えば、一部のモジュールを専用のハードウェア（例えば特定用途向け集積回路（Ａｐｐｌｉｃａｔｉｏｎ  Ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ：ＡＳＩＣ）等）で構成してもよく、一部のモジュールは外部のシステム内にあり通信回線で接続しているような形態でもよく、さらに図１５に示すシステムが複数互いに通信回線によって接続されていて互いに協調動作するようにしてもよい。また、複写機、ファックス、スキャナ、プリンタ、複合機（スキャナ、プリンタ、複写機、ファックス等のいずれか２つ以上の機能を有している画像処理装置）などに組み込まれていてもよい。
【００６９】
前述の第１の実施の形態又は第２の実施の形態においては、領域内文字サイズ決定モジュール４６０はなくてもよい。文字領域内の各文字画像の文字サイズを統一することは行わずに、文字サイズ算出モジュール４５０によってそれぞれ算出された各文字画像の文字サイズを、その文字の文字サイズとしてもよい。
また、同様に、前述の第１の実施の形態又は第２の実施の形態においては、文字領域抽出モジュール４２０はなくてもよい。受け付けた画像が文字だけで構成されている場合は、文字領域抽出モジュール４２０の処理を行う必要がない。
また、前述の実施の形態の説明において、予め定められた値との比較において、「以上」、「以下」、「より大きい」、「より小さい（未満）」としたものは、その組み合わせに矛盾が生じない限り、それぞれ「より大きい」、「より小さい（未満）」、「以上」、「以下」としてもよい。
【００７０】
なお、説明したプログラムについては、記録媒体に格納して提供してもよく、また、そのプログラムを通信手段によって提供してもよい。その場合、例えば、前記説明したプログラムについて、「プログラムを記録したコンピュータ読み取り可能な記録媒体」の発明として捉えてもよい。
「プログラムを記録したコンピュータ読み取り可能な記録媒体」とは、プログラムのインストール、実行、プログラムの流通などのために用いられる、プログラムが記録されたコンピュータで読み取り可能な記録媒体をいう。
なお、記録媒体としては、例えば、デジタル・バーサタイル・ディスク（ＤＶＤ）であって、ＤＶＤフォーラムで策定された規格である「ＤＶＤ−Ｒ、ＤＶＤ−ＲＷ、ＤＶＤ−ＲＡＭ等」、ＤＶＤ＋ＲＷで策定された規格である「ＤＶＤ＋Ｒ、ＤＶＤ＋ＲＷ等」、コンパクトディスク（ＣＤ）であって、読出し専用メモリ（ＣＤ−ＲＯＭ）、ＣＤレコーダブル（ＣＤ−Ｒ）、ＣＤリライタブル（ＣＤ−ＲＷ）等、ブルーレイ・ディスク（Ｂｌｕ−ｒａｙ  Ｄｉｓｃ（登録商標））、光磁気ディスク（ＭＯ）、フレキシブルディスク（ＦＤ）、磁気テープ、ハードディスク、読出し専用メモリ（ＲＯＭ）、電気的消去及び書換可能な読出し専用メモリ（ＥＥＰＲＯＭ）、フラッシュ・メモリ、ランダム・アクセス・メモリ（ＲＡＭ）等が含まれる。
そして、前記のプログラム又はその一部は、前記記録媒体に記録して保存や流通等させてもよい。また、通信によって、例えば、ローカル・エリア・ネットワーク（ＬＡＮ）、メトロポリタン・エリア・ネットワーク（ＭＡＮ）、ワイド・エリア・ネットワーク（ＷＡＮ）、インターネット、イントラネット、エクストラネット等に用いられる有線ネットワーク、あるいは無線通信ネットワーク、さらにこれらの組み合わせ等の伝送媒体を用いて伝送させてもよく、また、搬送波に乗せて搬送させてもよい。
さらに、前記のプログラムは、他のプログラムの一部分であってもよく、あるいは別個のプログラムと共に記録媒体に記録されていてもよい。また、複数の記録媒体に分割して
記録されていてもよい。また、圧縮や暗号化など、復元可能であればどのような態様で記録されていてもよい。
【符号の説明】
【００７１】
１１０…画像受付モジュール
１２０…外接矩形抽出モジュール
１３０…外接矩形・文字サイズ比率算出モジュール
１４０…外接矩形・文字サイズ比率記憶モジュール
４１０…画像受付モジュール
４２０…文字領域抽出モジュール
４３０…外接矩形・文字認識モジュール
４３２…外接矩形抽出モジュール
４３４…文字認識モジュール
４４０…比率抽出モジュール
４５０…文字サイズ算出モジュール
４６０…領域内文字サイズ決定モジュール
４７０…出力モジュール
７３０…特徴抽出モジュール
７３２…フォント特徴抽出モジュール
７３４…外接矩形・文字サイズ比率算出モジュール
７４０…外接矩形・文字サイズ比率記憶モジュール
１３４０…フォント種別認識・比率算出モジュール
１３４２…フォント種別認識モジュール
１３４４…比率抽出モジュール
【図１】
0005601027.tif 000002
【図２】
0005601027.tif 000003
【図３】
0005601027.tif 000004
【図４】
0005601027.tif 000005
【図５】
0005601027.tif 000006
【図６】
0005601027.tif 000007
【図７】
0005601027.tif 000008
【図８】
0005601027.tif 000009
【図９】
0005601027.tif 000010
【図１０】
0005601027.tif 000011
【図１１】
0005601027.tif 000012
【図１２】
0005601027.tif 000013
【図１３】
0005601027.tif 000014
【図１４】
0005601027.tif 000015
【図１５】
0005601027.tif 000016