【手続補正書】
【提出日】平成23年6月14日(2011.6.14)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
撮影した画像から文字領域を検出する文字領域検出手段と、
前記文字領域検出手段によって検出された文字領域から文字列の傾斜角を検出する傾斜角検出手段と、
前記傾斜角が所定の角度になるように前記文字列の傾斜角を補正する傾斜角補正手段と、
前記傾斜角補正手段によって傾斜角が補正された文字列において、文字のアスペクト比を検出する文字列アスペクト比検出手段と、
前記文字列アスペクト比検出手段で検出されたアスペクト比が所定の値になるように、前記傾斜角が補正された文字列の、文字のアスペクト比を補正するアスペクト比補正手段と、
を備えることを特徴とする文字画像補正装置。
【請求項２】
予め所定の異なる傾斜角の文字列が形成された複数の基準画像を備え、
前記傾斜角検出手段が、
前記複数の基準画像における文字列に対して、前記文字領域検出手段で検出された文字領域における文字列の傾斜角の相似を表す相関度を算出し、
前記複数の基準画像の内で相関度の高い基準画像の文字列の傾斜角に基づいて、前記文字領域検出手段で検出された文字領域における文字列の傾斜角を検出するように構成されている、
ことを特徴とする請求項１に記載の文字画像補正装置。
【請求項３】
前記文字列アスペクト比検出手段が、
前記文字列を文字列方向及び文字列方向に直交する文字列直交方向の夫々に投影して、前記投影された前記文字列方向及び前記文字列直交方向の夫々における画素分布を検出する画素分布検出手段と、
前記画素分布検出手段によって検出された前記文字列方向の画素分布に基づいて、前記文字列の前記文字列方向に直交する方向における文字サイズを検出する第１の文字サイズ検出手段と、
前記画素分布検出手段によって検出された前記文字列直交方向の画素分布に基づいて、前記文字列の前記文字列方向における文字サイズを検出する第２の文字サイズ検出手段と、
を備え、
前記第１の文字サイズ検出手段で検出された文字サイズと前記第２の文字サイズ検出手段で検出された文字サイズとの比によって、前記アスペクト比を検出するように構成されている、
ことを特徴とする請求項１又は請求項２に記載の文字画像補正装置。
【請求項４】
撮影した画像から文字領域を検出する文字領域検出手順と、
前記文字領域検出手順によって検出された文字領域から文字列の傾斜角を検出する傾斜角検出手順と、
前記傾斜角が所定の角度になるように前記文字列の傾斜角を補正する傾斜角補正手順と、
前記傾斜角補正手順によって傾斜角が補正された文字列において、文字のアスペクト比を検出する文字列アスペクト比検出手順と、
前記文字列アスペクト比検出手順で検出されたアスペクト比が所定の値になるように、前記傾斜角が補正された文字列の、文字のアスペクト比を補正するアスペクト比補正手順と、
を備えることを特徴とする文字画像補正方法。
【請求項５】
予め所定の異なる傾斜角の文字列が形成された複数の基準画像を用い、
前記傾斜角検出手順において、
前記複数の基準画像における文字列に対して、前記文字領域検出手順で検出された文字領域における文字列の傾斜角の相似を表す相関度を算出し、
複数の基準画像の内で相関度の高い基準画像の文字列の傾斜角に基づいて、前記文字領域検出手順で検出された文字領域における文字列の傾斜角を検出する、
ことを特徴とする請求項４に記載の文字画像補正方法。
【請求項６】
前記文字列アスペクト比検出手順において、
前記文字列を文字列方向及び文字列方向に直交する文字列直交方向の夫々に投影して、前記投影された前記文字列方向及び前記文字列直交方向の夫々における画素分布を検出する画素分布検出手順と、
前記画素分布検出手順によって検出された前記文字列方向の画素分布に基づいて、前記文字列の前記文字列方向に直交する方向における文字サイズを検出する第１の文字サイズ検出手順と、
前記画素分布検出手順によって検出された前記文字列直交方向の画素分布に基づいて、前記文字列の前記文字列方向における文字サイズを検出する第２の文字サイズ検出手順と、
を用い、
前記第１の文字サイズ検出手順で検出された文字サイズと前記第２の文字サイズ検出手順で検出された文字サイズとの比によって、前記アスペクト比を検出する、
ことを特徴とする請求項４又は請求項５に記載の文字画像補正方法。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１５
【補正方法】変更
【補正の内容】
【００１５】
また、請求項１又は請求項２に記載の文字画像補正装置は、請求項３に記載の発明のように、前記文字列アスペクト比検出手段が、前記文字列を文字列方向及び文字列方向に直交する文字列直交方向の夫々に投影して、前記投影された前記文字列方向及び前記文字列直交方向の夫々における画素分布を検出する画素分布検出手段と、前記画素分布検出手段によって検出された前記文字列方向の画素分布に基づいて、前記文字列の前記文字列方向に直交する方向における文字サイズを検出する第１の文字サイズ検出手段と、前記画素分布検出手段によって検出された前記前記文字列直交方向の画素分布に基づいて、前記文字列の前記文字列方向における文字サイズを検出する第２の文字サイズ検出手段と、を備え、前記第１の文字サイズ検出手段で検出された文字サイズと前記第２の文字サイズ検出手段で検出された文字サイズとの比によって、前記アスペクト比を検出するように構成されていることにより、傾斜角が補正された文字画像における文字列の、文字のアスペクト比を検出できる。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１６
【補正方法】変更
【補正の内容】
【００１６】
次に、請求項４に記載の発明は、撮影された文字画像の歪みを補正する文字画像補正方法において、撮影した画像から文字領域を検出する文字領域検出手順と、前記文字領域検出手順によって検出された文字領域から文字列の傾斜角を検出する傾斜角検出手順と、前記傾斜角が所定の角度になるように前記文字列の傾斜角を補正する傾斜角補正手順と、前記傾斜角補正手順によって傾斜角が補正された文字列において、文字のアスペクト比を検出する文字列アスペクト比検出手順と、前記文字列アスペクト比検出手順で検出されたアスペクト比が所定の値になるように、前記傾斜角が補正された文字列の、文字のアスペクト比を補正するアスペクト比補正手順と、を備えることを特徴とする。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１９
【補正方法】変更
【補正の内容】
【００１９】
また、請求項４又は請求項５に記載の文字画像補正方法は、請求項６に記載の発明のように、前記文字列アスペクト比検出手順において、前記文字列を文字列方向及び文字列方向に直交する文字列直交方向の夫々に投影して、前記投影された前記文字列方向及び前記文字列直交方向の夫々における画素分布を検出する画素分布検出手順と、前記画素分布検出手順によって検出された前記文字列方向の画素分布に基づいて、前記文字列の前記文字列方向に直交する方向における文字サイズを検出する第１の文字サイズ検出手順と、前記画素分布検出手順によって検出された前記文字列直交方向の画素分布に基づいて、前記文字列の前記文字列方向における文字サイズを検出する第２の文字サイズ検出手順と、を用い、前記第１の文字サイズ検出手順で検出された文字サイズと前記第２の文字サイズ検出手順で検出された文字サイズとの比によって、前記アスペクト比を検出することにより、請求項３に記載の発明と同様に、傾斜角が補正された文字画像における文字列の、文字のアスペクト比を検出できる。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００２２
【補正方法】変更
【補正の内容】
【００２２】
また、本発明の文字画像補正装置及び文字画像補正方法は、文字画像の文字列を文字列方向及び文字列方向に直交する文字列直交方向の夫々に投影して、投影された文字列方向及び文字列直交方向の夫々における画素分布を検出し、次いで、この検出された文字列方向の画素分布に基づいて、文字列の前記文字列方向に直交する方向における第１の文字サイズを検出すると共に、検出された文字列直交方向の画素分布に基づいて、文字列の文字列方向における第２の文字サイズを検出し、次いで、文字列方向の文字サイズと文字列に直交する方向の文字サイズとの比によって、文字のアスペクト比を検出することにより、傾斜角が補正された文字画像における文字列の、文字のアスペクト比を検出できる。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００２７
【補正方法】変更
【補正の内容】
【００２７】
文字画像補正装置１００は、デジタルカメラ１０１で撮影した画像から文字領域を検出する文字領域検出部１、所定の相異なる傾斜角が形成された複数の基準画像を格納する基準画像格納部２、基準画像における文字列に対して文字領域検出部１によって検出された文字領域の文字列の傾斜角の相関度を算出し、文字領域の文字列の傾斜角を検出する傾斜角検出部３、傾斜角が所定の角度になるように文字列の傾斜角を補正する傾斜角補正部４、傾斜角補正部４によって傾斜角が補正された文字列において、文字のアスペクト比を検出する文字列アスペクト比検出部５、傾斜角が補正された文字列の文字のアスペクト比を補正するアスペクト比補正部９、等によって構成されている。
なお、本発明における文字領域検出手段の機能が文字領域検出部１によって発現し、本発明における傾斜角検出手段の機能が傾斜角検出部３によって発現し、本発明における傾斜角補正手段の機能が傾斜角補正部４によって発現し、本発明における文字列アスペクト比検出手段の機能が文字列アスペクト比検出部５によって発現し、本発明におけるアスペクト比補正手段の機能がアスペクト比補正部９によって発現する。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００２９
【補正方法】変更
【補正の内容】
【００２９】
文字領域検出部１は、文字画像をｕ方向及びｖ方向に走査して各画素の輝度を検出し、文字Ｐ０〜Ｐ３で囲まれた文字領域を検出する。具体的には、水平方向に走査して垂直列毎に黒画素の密度を検出し、この黒画素密度を所定の閾値と比較して水平方向の文字領域の先端位置（Ｐ０〜Ｐ２）と末端位置（Ｐ１〜Ｐ３）を検出すると共に、垂直方向に走査して水平列毎に黒画素の密度を検出し、この黒画素密度を所定の閾値と比較して垂直方向の文字領域の先端位置（Ｐ０〜Ｐ１）と末端位置（Ｐ２〜Ｐ３）を検出する。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００３６
【補正方法】変更
【補正の内容】
【００３６】
次に、図１に表したように、文字列アスペクト比検出部５は、図５（ａ）のように傾斜角が補正された文字列において、文字列を文字列方向に投影して文字列方向の画素分布を検出する文字列方向画素分布検出部６ａ、文字列を文字列と直交する方向に投影して直交方向の画素分布を検出する文字列直方向画素分布検出部６ｂ、文字列方向の画素分布に基づいて文字列に直交する方向における文字サイズを検出する文字列直方向の文字サイズ検出部７ａ、文字列に直交する方向の画素分布に基づいて文字列方向における文字サイズを検出する文字列方向の文字サイズ検出部７ｂ、文字列方向の文字サイズと文字列直方向の文字サイズとの比によって文字列における文字のアスペクト比を演算する文字アスペクト比演算部８、等によって構成されている。
なお、本発明における画素分布検出手段の機能が文字列方向画素分布検出部６ａ及び文字列直方向画素分布検出部６ｂによって発現され、本発明における第１の文字サイズ検出手段の機能が文字サイズ検出部７ａによって発現され、本発明における第２の文字サイズ検出手段の機能が文字サイズ検出部７ｂによって発現される。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００４６
【補正方法】変更
【補正の内容】
【００４６】
また、本実施例に記載の文字画像補正装置１００は、文字列アスペクト比検出部５が、文字列を文字列方向及び文字列方向に直交する文字列直交方向の夫々に投影して、文字列方向の画素分布を検出する文字列方向画素分布検出部６ａ及び文字列直交方向の画素分布を検出する文字列直方向画素分布検出部６ｂと、文字列方向の画素分布に基づいて、文字列方向に直交する方向における文字サイズを検出する文字列直方向の文字サイズ検出部７ａと、文字列直交方向の画素分布に基づいて、文字列の文字列方向における文字サイズを検出する文字列方向の文字サイズ検出部７ｂと、を備え、文字列直方向の文字サイズと文字列方向の文字サイズとの比によって、アスペクト比を検出するアスペクト比演算部８と、によって構成されていることにより、傾斜角が補正された文字画像における文字列の、文字のアスペクト比を検出できる。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００７３
【補正方法】変更
【補正の内容】
【００７３】
次いで、Ｓ６００において、文字列アスペクト比検出部５を用い、傾斜角が補正された文字列における文字のアスペクト比を検出し、その後、Ｓ７００に移る。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００７４
【補正方法】変更
【補正の内容】
【００７４】
次いで、Ｓ７００において、文字アスペクト比補正部９を用い、文字のアスペクト比が所定の値になるように文字画像を補正し、本文字画像補正方法の処理手順を終了する。
なお、本発明における文字領域検出手順がＳ２００及びＳ２０１〜Ｓ２１６によって発現し、本発明における傾斜角検出手順がＳ４００によって発現し、本発明における傾斜角補正手順がＳ５００によって発現し、本発明における文字列アスペクト比検出手順がＳ６００によって発現し、本発明におけるアスペクト比補正手順がＳ７００によって発現する。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００７５
【補正方法】変更
【補正の内容】
【００７５】
以上のように、本実施例に記載の文字画像補正方法は、文字領域検出ステップ（Ｓ２００）において、撮影した画像から文字領域を検出し、次いで、基準画像取得ステップ（Ｓ３００）及び文字列の傾き角度算出ステップ（Ｓ４００）において、文字列の傾斜角を検出し、次いで、画像傾き補正ステップ（Ｓ５００）において、文字列の傾斜角を所定の角度になるように補正し、次いで、文字列アスペクト比検出ステップ（Ｓ６００）において、傾斜角が補正された文字列における文字のアスペクト比を検出し、次いで、アスペクト比補正ステップ（Ｓ７００）において、文字列の検出されたアスペクト比が所定の値になるように文字画像を補正することにより、元の文字画像から歪んで得られた文字画像を補正する際に、元の文字画像と撮影された文字画像との既知の対応点を必要とせず、文字の傾き及び歪みを品位良く補正できる。
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】００７７
【補正方法】変更
【補正の内容】
【００７７】
また、本実施例に記載の文字画像補正方法は、文字列アスペクト比検出ステップ（Ｓ６００）において、文字列を文字列方向及び文字列方向に直交する文字列直交方向の夫々に投影して、文字列方向及び前記文字列直交方向の夫々に画素分布を検出し、文字列方向の画素分布に基づいて、文字列の文字列方向に直交する方向における文字サイズを検出すると共に、文字列直交方向の画素分布に基づいて、文字列方向における文字サイズを検出し、文字列直方向の文字サイズと文字列方向の文字サイズとの比によって、傾斜角が補正された文字画像における文字列の、文字のアスペクト比を検出できる。
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】００８０
【補正方法】変更
【補正の内容】
【００８０】
１…文字領域検出部、２…基準画像格納部、３…傾斜角検出部、４…傾斜角補正部、５…文字列アスペクト比検出部、６ａ…文字列方向画素分布検出部、６ｂ…文字列直方向画素分布検出部、７ａ…文字列直方向の文字サイズ検出部、７ｂ…文字列方向の文字サイズ検出部、８…文字アスペクト比演算部、９…文字アスペクト比補正部、１００…文字画像補正装置、１０１…デジタルカメラ。