(57)【要約】入力画像から、文字を含む領域である文字領域を検出する文字領域検出部（３２）と、文字領域検出部（３２）が検出した文字領域内の画像の崩れの度合いを示す特徴量を検出する特徴量検出部（３３）と、特徴量検出部（３３）が検出した特徴量に基づいて補正ゲインを算出する補正ゲイン算出部（３４）と、補正ゲイン算出部（３４）が算出した補正ゲインが小さいほど、文字領域内の画像に対して効果がより小さい画像処理を施すことにより、入力画像に補正を行う補正部（３５）とを備える。
2014102876.tif 000002
【特許請求の範囲】
【請求項１】
入力画像から、文字を含む領域である文字領域を検出する文字領域検出部と、
前記文字領域検出部が検出した前記文字領域内の画像の崩れの度合いを示す特徴量を検出する特徴量検出部と、
前記特徴量検出部が検出した前記特徴量に基づいて補正ゲインを算出する補正ゲイン算出部と、
前記補正ゲイン算出部が算出した前記補正ゲインが小さいほど、前記文字領域内の画像に対して効果がより小さい画像処理を施すことにより、前記入力画像に補正を行う補正部とを備える
画像処理装置。
【請求項２】
前記特徴量検出部は、
前記文字領域の文字の大きさである文字サイズを前記特徴量として検出する文字サイズ検出部を有し、
前記補正ゲイン算出部は、
前記文字サイズ検出部が検出した前記文字サイズが小さいほど、より小さな前記補正ゲインを算出する
請求項１に記載の画像処理装置。
【請求項３】
前記特徴量検出部は、
前記文字領域内の画像において、輝度の変動回数を前記特徴量として検出する輝度変動検出部を有し、
前記補正ゲイン算出部は、
前記輝度変動検出部が検出した前記変動回数が大きいほど、より小さな前記補正ゲインを算出する
請求項１又は２に記載の画像処理装置。
【請求項４】
前記特徴量検出部は、
前記入力画像の解像度を前記特徴量として検出し、
前記補正ゲイン算出部は、
前記解像度と所定値との差分が大きいほど、より小さな前記補正ゲインを算出する
請求項１〜３のいずれか１項に記載の画像処理装置。
【請求項５】
前記特徴量検出部は、
前記入力画像のビットレートを前記特徴量として検出し、
前記補正ゲイン算出部は、
前記ビットレートが小さいほど、より小さな前記補正ゲインを算出する
請求項１〜４のいずれか１項に記載の画像処理装置。
【請求項６】
前記補正部は、
前記画像処理として鮮鋭化処理を施すことにより、前記補正を行う
請求項１〜５のいずれか１項に記載の画像処理装置。
【請求項７】
前記補正部は、
前記画像処理としてノイズ除去処理を施すことにより、前記補正を行う
請求項１〜５のいずれか１項に記載の画像処理装置。
【請求項８】
前記画像処理装置は、さらに、
前記入力画像に対して、解像度を上げる処理である拡大処理を施す拡大部を備え、
前記文字領域検出部は、前記拡大部が前記拡大処理を施した後の前記入力画像から前記文字領域を検出する
請求項１〜７のいずれか１項に記載の画像処理装置。
【請求項９】
入力画像から、文字を含む領域である文字領域を検出する文字領域検出ステップと、
前記文字領域検出ステップで検出した前記文字領域内の画像の崩れの度合いを示す特徴量を検出する特徴量検出ステップと、
前記特徴量検出ステップで検出した前記特徴量に基づいて補正ゲインを算出する補正ゲイン算出ステップと、
前記補正ゲイン算出ステップで算出した前記補正ゲインが小さいほど、前記文字領域内の画像に対して効果がより小さい画像処理を施すことにより、前記入力画像に補正を行う補正ステップとを含む
画像処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、画像処理装置、および、画像処理方法に関する。
【背景技術】
【０００２】
特許文献１は、輝度差のある画素を文字領域として検出し、文字領域の平滑化効果を強める画像処理装置を開示する。この画像処理装置は、簡易な文字検出を行うことにより、文字領域を検出する。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００８−１１３１２４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
本開示は、画像内の文字の鮮鋭さを高める画像処理装置を開示する。
【課題を解決するための手段】
【０００５】
本開示における画像処理装置は、入力画像から、文字を含む領域である文字領域を検出する文字領域検出部と、前記文字領域検出部が検出した前記文字領域内の画像の崩れの度合いを示す特徴量を検出する特徴量検出部と、前記特徴量検出部が検出した前記特徴量に基づいて補正ゲインを算出する補正ゲイン算出部と、前記補正ゲイン算出部が算出した前記補正ゲインが小さいほど、前記文字領域内の画像に対して効果がより小さい画像処理を施すことにより、前記入力画像に補正を行う補正部とを備える。
【発明の効果】
【０００６】
本開示における画像処理装置は、画像内の文字の鮮鋭さを高めることができる。
【図面の簡単な説明】
【０００７】
【図１】図１は、実施の形態１における画像処理装置の機能ブロック図である。
【図２】図２は、実施の形態１における文字領域検出部の詳細な機能ブロック図である。
【図３】図３は、実施の形態１における文字領域検出部の処理の説明図である。
【図４Ａ】図４Ａは、実施の形態１における文字レベル判定部の画素数の数え方の説明図である。
【図４Ｂ】図４Ｂは、実施の形態１における文字ブロック値の例を示す図である。
【図５】図５は、実施の形態１における文字判定部の文字判定率の算出方法の説明図である。
【図６】図６は、実施の形態１における文字サイズ検出部の詳細な機能ブロック図である。
【図７】図７は、実施の形態１における文字サイズ検出部の文字サイズの算出方法の説明図である。
【図８】図８は、実施の形態１における輝度変動回数算出部の詳細な機能ブロック図である。
【図９】図９は、実施の形態１における水平変動算出部の詳細な機能ブロック図である。
【図１０】図１０は、実施の形態１における垂直変動算出部の詳細な機能ブロック図である。
【図１１】図１１は、実施の形態１における補正ゲイン算出部の詳細な機能ブロック図である。
【図１２】図１２は、実施の形態１における補正ゲイン算出部の補正ゲイン算出処理の説明図である。
【図１３】図１３は、実施の形態１における補正部の詳細な機能ブロック図である。
【図１４】図１４は、実施の形態１における平滑化部の詳細な機能ブロック図である。
【図１５】図１５は、実施の形態１における鮮鋭化部の詳細な機能ブロック図である。
【図１６】図１６は、実施の形態１における鮮鋭化部によるアンシャープマスク処理の説明図である。
【図１７】図１７は、実施の形態１における画像処理装置のフローチャートである。
【図１８Ａ】図１８Ａは、実施の形態２における画像処理装置の機能ブロック図である。
【図１８Ｂ】図１８Ｂは、実施の形態２の変形例における画像処理装置の機能ブロック図である。
【図１９】図１９は、各実施の形態における画像処理装置の外観の一例を示す図である。
【発明を実施するための形態】
【０００８】
以下、適宜図面を参照しながら、実施の形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。
【０００９】
なお、発明者らは、当業者が本開示を十分に理解するために添付図面および以下の説明を提供するのであって、これらによって請求の範囲に記載の主題を限定することを意図するものではない。
【００１０】
まず、本開示により解決される課題について説明する。
【００１１】
一般に、ＳＤ（Standard definition）放送、ＤＶＤ、又は、インターネット上のコンテンツの解像度は、３６０ｐ（縦方向の画素数が３６０個）又は４８０ｐ程度である。このようなコンテンツ（低解像度コンテンツ）を、より解像度が高い表示パネルに表示する場合、低解像度コンテンツに対して解像度を上げる拡大処理を施すことにより、解像度の高いコンテンツを生成することが行われる。低解像度コンテンツが画像処理などによって付加された文字を含む場合、拡大処理により、その文字自体にぼやけが発生する現象、又は、その文字とその近傍の画像とに存在する符号歪や文字自体の潰れが拡大されることで拡大処理前より目立つ現象等が発生する。特に後者の現象は低解像度又は低ビットレートのコンテンツにおいて発生しやすく、また、コンテンツ内の文字の線が密集している領域において発生しやすい。言い換えれば、拡大処理により、その文字に、画像としての崩れが発生することがある。コンテンツの視聴者は、画像の崩れが発生した文字を読み取りにくいという問題がある。
【００１２】
特許文献１は、輝度差のある画素を文字領域として検出し、文字領域の平滑化効果を強める画像処理装置を開示する。この画像処理装置は、簡易な文字検出を行うことにより、文字領域を検出する。しかし、検出した文字領域に対する画像処理が適切でないので、上記問題は解決されない。
【００１３】
そこで、本開示は、画像内の文字の鮮鋭さを高める画像処理装置を提供する。
【００１４】
本開示における画像処理装置は、入力画像から、文字を含む領域である文字領域を検出する文字領域検出部と、前記文字領域検出部が検出した前記文字領域内の画像の崩れの度合いを示す特徴量を検出する特徴量検出部と、前記特徴量検出部が検出した前記特徴量に基づいて補正ゲインを算出する補正ゲイン算出部と、前記補正ゲイン算出部が算出した前記補正ゲインが小さいほど、前記文字領域内の画像に対して効果がより小さい画像処理を施すことにより、前記入力画像に補正を行う補正部とを備える。
【００１５】
これによれば、画像処理装置は、入力画像の中の文字領域に対して、鮮鋭さを高める画像処理であって特徴量に応じた強さの画像処理（特徴量に応じた効果を有する画像処理）を施すことができる。特徴量は、入力画像に施された拡大処理による文字領域内の画像の崩れの度合いを示す量であるので、画像処理装置は、特徴量に基づいて画像処理を行うことにより、適正に画像の崩れを補正することができる。よって、画像処理装置は、画像内の文字の鮮鋭さを高めることができる。
【００１６】
また、前記特徴量検出部は、前記文字領域の文字の大きさである文字サイズを前記特徴量として検出する文字サイズ検出部を有し、前記補正ゲイン算出部は、前記文字サイズ検出部が検出した前記文字サイズが小さいほど、より小さな前記補正ゲインを算出するとしてもよい。
【００１７】
これによれば、画像処理装置は、特徴量に基づいて入力画像の中で小さな文字を含む部分には、効果が小さい画像処理を施すことができる。入力画像の中で小さな文字を含む部分の画像は、拡大処理により発生した画像の崩れが大きいために、画像処理による補正により拡大前の画像に復元できなくなっている場合がある。その場合に、画像処理装置が、効果が大きい画像処理を施すと、拡大前の画像に復元できないだけでなく、画像の崩れをさらに進める可能性がある。その場合には、画像処理装置は、特徴量に基づいて効果が小さい画像処理を施すことにより、画像処理により発生する画像の崩れを未然に防ぐことができる。
【００１８】
また、前記特徴量検出部は、前記文字領域内の画像において、輝度の変動回数を前記特徴量として検出する輝度変動検出部を有し、前記補正ゲイン算出部は、前記輝度変動検出部が検出した前記変動回数が大きいほど、より小さな前記補正ゲインを算出するとしてもよい。
【００１９】
これによれば、画像処理装置は、特徴量に基づいて入力画像の中でも所定方向に画素をスキャンした場合に輝度の変動回数が大きい部分には、効果が小さい画像処理を施すことができる。輝度の変動回数が大きい部分は、小さな文字を含む部分、または、字画（画数）が多いなど複雑な形状を有する文字を含む部分に相当する。このような部分は、拡大処理により発生した画像の崩れが大きいために、画像処理による補正により拡大前の画像に復元できなくなっている場合がある。その場合に、画像処理装置が、効果が大きい画像処理を施すと、拡大前の画像に復元できないだけでなく、画像の崩れをさらに進める可能性がある。その場合には、画像処理装置は、特徴量に基づいて効果が小さい画像処理を施すことにより、画像処理により発生する画像の崩れを未然に防ぐことができる。
【００２０】
また、前記特徴量検出部は、前記入力画像の解像度を前記特徴量として検出し、前記補正ゲイン算出部は、前記解像度と所定値との差分が大きいほど、より小さな前記補正ゲインを算出するとしてもよい。
【００２１】
これによれば、画像処理装置は、特徴量に基づいて解像度が低い入力画像の文字領域に対して、効果が小さい画像処理を施すことができる。解像度が低い入力画像は、拡大処理により発生した画像の崩れが大きいために、画像処理による補正により拡大前の画像に復元できなくなっている場合がある。その場合に、画像処理装置が、効果が大きい画像処理を施すと、拡大前の画像に復元できないだけでなく、画像の崩れをさらに進める可能性がある。その場合には、画像処理装置は、効果が小さい画像処理を施すことにより、画像処理により発生する画像の崩れを未然に防ぐことができる。また、解像度が高い入力画像には、拡大率が小さい拡大処理が施される。拡大率が小さい拡大処理により発生する画像の崩れは小さいので、画像処理装置は、効果が小さい画像処理を施すことにより適正に画像の崩れを補正することができる。
【００２２】
また、前記特徴量検出部は、前記入力画像のビットレートを前記特徴量として検出し、前記補正ゲイン算出部は、前記ビットレートが小さいほど、より小さな前記補正ゲインを算出するとしてもよい。
【００２３】
これによれば、画像処理装置は、ビットレートが低い入力画像の文字領域に対して、効果が小さい画像処理を施すことができる。ビットレートが低い入力画像は、圧縮による歪を多く含んでいるので、画像処理による補正により拡大前の画像に復元できなくなっている場合がある。その場合に、画像処理装置が、効果が大きい画像処理を施すと、拡大前の画像に復元できないだけでなく、画像の崩れをさらに進める可能性がある。その場合には、画像処理装置は、効果が小さい画像処理を施すことにより、画像処理により発生する画像の崩れを未然に防ぐことができる。
【００２４】
また、前記補正部は、前記画像処理として鮮鋭化処理を施すことにより、前記補正を行うとしてもよい。
【００２５】
これによれば、画像処理装置は、入力画像に対して鮮鋭化処理を施すことにより、画像の崩れを補正することができる。
【００２６】
また、前記補正部は、前記画像処理としてノイズ除去処理を施すことにより、前記補正を行うとしてもよい。
【００２７】
これによれば、画像処理装置は、入力画像のノイズを除去することにより、画像の崩れを補正することができる。
【００２８】
また、前記画像処理装置は、さらに、前記入力画像に対して、解像度を上げる処理である拡大処理を施す拡大部を備え、前記文字領域検出部は、前記拡大部が前記拡大処理を施した後の前記入力画像から前記文字領域を検出するとしてもよい。
【００２９】
これによれば、画像処理装置は、比較的解像度が低い入力画像を受信し、受信した入力画像に対して拡大処理と鮮鋭さを高める画像処理を施し、画像処理が施された入力画像を出力することができる。
【００３０】
また、本開示における画像処理方法は、入力画像から、文字を含む領域である文字領域を検出する文字領域検出ステップと、前記文字領域検出ステップで検出した前記文字領域内の画像の崩れの度合いを示す特徴量を検出する特徴量検出ステップと、前記特徴量検出ステップで検出した前記特徴量に基づいて補正ゲインを算出する補正ゲイン算出ステップと、前記補正ゲイン算出ステップで算出した前記補正ゲインが小さいほど、前記文字領域内の画像に対して効果がより小さい画像処理を施すことにより、前記入力画像に補正を行う補正ステップとを含む。
【００３１】
これにより、上記の画像処理装置と同様の効果を奏する。
【００３２】
（実施の形態１）
以下、図１〜１７を用いて、実施の形態１を説明する。本実施の形態において、入力された入力映像信号の文字領域に対して、文字領域内の画像の特徴に応じて画像処理を行う画像処理装置の例を説明する。なお、本実施の形態の画像処理装置は、比較的低い解像度の入力映像信号を、入力映像信号の解像度より高い解像度を有する出力映像信号にする過程において用いられるものである。入力映像信号の解像度は、例えば、３６０ｐ（縦方向の画素数が３６０個）又は４８０ｐである。また、出力映像信号の解像度は、例えば、１０８０ｐ（ＦＨＤ（Full high definition）に相当）である。
【００３３】
［１−１．構成］
図１は、本実施の形態における画像処理装置の機能ブロック図である。
【００３４】
図１に示されるように、画像処理装置１は、拡大部１１と、文字領域検出部１２と、文字サイズ検出部１３と、輝度変動回数算出部１４と、補正ゲイン算出部１５と、補正部１６とを備える。
【００３５】
拡大部１１は、画像処理装置１に入力された入力映像信号の解像度を上げる拡大処理を入力映像信号に施すことにより入力映像信号を拡大し、拡大することにより生成した拡大映像信号を出力する。拡大処理の方法には、ニアレストネイバー、バイリニア、又は、バイキュービックなどの従来技術を用いることができる。なお、画像処理装置１は、必ずしも拡大部１１を備えなくてもよい。つまり、画像処理装置１は、拡大部１１と同等の機能を有する外部装置から拡大映像信号を受信してもよい。なお、入力映像信号は、静止画を構成する信号であってもよいし、動画を構成する信号であってもよい。なお、入力映像信号は、入力画像の一例である。入力映像信号が静止画である場合には、当該静止画が入力画像に相当する。入力映像信号が動画である場合には、当該動画を構成するフレームの１つが入力画像に相当する。また、拡大映像信号は、入力画像の別の一例である。
【００３６】
文字領域検出部１２は、拡大部１１が出力した拡大映像信号を受信し、拡大映像信号に含まれる文字領域を検出する。具体的には、文字領域検出部１２は、拡大映像信号を構成するブロックごとに当該ブロックが文字を含んでいるか否かを判定する。この判定の結果、文字を含むブロックか否かをブロックごとに示す文字ブロック値と、隣接ブロックとの関係を考慮して文字ブロック値を平均化した値である文字判定率とを算出し、出力する。なお、拡大映像信号のブロックとは、拡大映像信号を複数の領域に区切ったときの領域のそれぞれを意味する。つまり、拡大映像信号は複数のブロックを含む、と表現される。また、拡大映像信号は、複数のブロックから構成される、とも表現される。
【００３７】
文字サイズ検出部１３は、文字領域検出部１２が出力した文字ブロック値を受信し、ブロックごとに当該ブロックが含む文字の文字サイズを判定する。そして、文字サイズ検出部１３は、各ブロックが含む文字サイズを出力する。
【００３８】
輝度変動回数算出部１４は、拡大部１１が出力した拡大映像信号を受信し、拡大映像信号における水平方向及び垂直方向の輝度変動回数を、変動値として算出する。そして、輝度変動回数算出部１４は、算出した変動値を出力する。
【００３９】
補正ゲイン算出部１５は、輝度変動回数算出部１４が出力した変動値と、文字サイズ検出部１３が出力した文字サイズと、文字領域検出部１２が出力した文字判定率と、入力映像信号の解像度及びビットレートとを受信し、各ブロックに対して補正部１６が行う画像処理の強さの程度（補正ゲイン）を算出する。なお、補正ゲイン算出部１５が受信する情報の中で必須なのは、文字判定率である。その他の情報は必須ではないが、その他の情報があれば補正ゲインの算出結果をより適正にすることができる。
【００４０】
補正部１６は、拡大部１１が出力した拡大映像信号に対して、補正ゲイン算出部１５が算出した補正ゲインに基づいて、拡大映像信号を構成するブロックのそれぞれに対する画像処理を施す。画像処理は、平滑化処理、又は、鮮鋭化処理を含む。補正部１６は、画像処理を施した後の信号を、出力映像信号として出力する。
【００４１】
以下で、各機能ブロックについて、詳細に説明する。
【００４２】
図２は、本実施の形態における文字領域検出部１２の詳細な機能ブロック図である。
【００４３】
図２に示されるように文字領域検出部１２は、ＨＰＦ（High-pass filter）部１２１と、文字レベル判定部１２２と、文字ブロック判定部１２３と、文字判定部１２４とを備える。
【００４４】
ＨＰＦ部１２１は、拡大部１１が出力した拡大映像信号を受信し、拡大映像信号のブロックごとにアンシャープマスク処理を施す。そして、ＨＰＦ部１２１は、アンシャープマスク処理の結果として、ブロックごとのＨＰＦ値を出力する。この処理について以下で具体的に説明する。
【００４５】
図３の（ａ）は、ＨＰＦ部１２１が受信する拡大映像信号の例（拡大映像信号３０１）である。以下では、図３の（ａ）を用いて文字領域検出部１２の処理を説明する。また、以下では、拡大映像信号３０１を水平方向にＭａｘＩブロックに、かつ、垂直方向にＭａｘＪブロックに分割して得られるブロックのそれぞれに対して処理を施す。例えば、（ＭａｘＩ，ＭａｘＪ）＝（３２，２４）のとき、ＦＨＤの拡大映像信号（１９２０×１０８０）は、水平方向に６０ブロックに、垂直方向に４５ブロックにそれぞれ分割される。また、例えば、（ＭａｘＩ，ＭａｘＪ）＝（２４０，１８０）のとき、ＦＨＤの拡大映像信号は、水平方向に８ブロックに、垂直方向に６ブロックにそれぞれ分割される。ブロックサイズが小さいほど、画像の中で文字が表示される領域を正確に判定することができる。なお、横方向に連続した複数のブロックの並びを列と記述し、縦方向に連続した複数のブロックの並びを行と記述することがある。また、横方向を列方向又は水平方向と、縦方向を行方向又は垂直方向と、それぞれ記述することがある。
【００４６】
まず、ＨＰＦ部１２１は、拡大映像信号３０１のブロックに対してＬＰＦ（Low-pass filter）値を算出する。ＬＰＦ値とは、当該ブロックの画素に対してＬＰＦを適用して得られる値であり、（式１）で表される。なお、ＬＰＦの係数については、例えば、ＬＰＦの全ての係数が１であるもの（図３の（ｂ））を用いればよい。ＬＰＦの係数は、上記のものに限られない。
【００４７】
【数１】
2014102876.tif 000003
【００４８】
次に、ＨＰＦ部１２１は、中心画素値Ｃ（ブロックの中央の画素の画素値）から、ＬＰＦ値を減算した後、絶対値をとることでＨＰＦ値を算出し（式２）、算出したＨＰＦ値を出力する。
【００４９】
【数２】
2014102876.tif 000004
【００５０】
文字レベル判定部１２２は、拡大部１１が出力した拡大映像信号３０１を受信し、拡大映像信号３０１のブロックごとに、当該ブロックの信号レベルの偏りに基づいて文字が存在していると推測される度合いであるレベル判定値を出力する。この処理について以下で具体的に説明する。
【００５１】
まず、文字レベル判定部１２２は、ブロックに含まれる画素値に基づいて、信号レベルごとの画素数を算出する（図４Ａ）。ここで、信号レベルとは、画素値の輝度、又は、画素値の所定の色成分などである信号値を、幅がある複数の段階に区分したものである。例えば、信号値として、０から２５５までの２５６段階で示される画素値の輝度を用いる場合、黒色の画素が信号値０に対応し、白色の画素が信号値２５５に対応する。また、信号レベルは、当該信号レベルに隣接する信号レベルとの間で重複するように設定してもよい。つまり、第一の信号レベルが信号値０から４までを含むものであるとし、第二の信号レベルが信号値２から６までを含むものであるとしてもよい。このようにすることで、文字色が厳密に単一でない場合、つまり、文字色に若干の幅があるものの概ね同一である場合にも、適切に文字を検出することができる。
【００５２】
次に、文字レベル判定部１２２は、信号レベルのそれぞれに属する画素の数を数え、信号レベルに対する画素数を示すヒストグラムを作成する。次に、文字レベル判定部１２２は、作成したヒストグラムに基づいて、閾値を超える画素数を有する信号レベルがあるか否かを判定し、ある場合にはレベル判定値として１を、ない場合にはレベル判定値として０を出力する。なお、閾値は、例えば、３００画素とする。
【００５３】
文字ブロック判定部１２３は、ＨＰＦ部１２１が出力したＨＰＦ値、及び、文字レベル判定部１２２が出力したレベル判定値を受信し、ブロックごとに、文字があるか否かを示す文字ブロック値を出力する。
【００５４】
具体的には、文字ブロック判定部１２３は、ＨＰＦ部１２１が出力したＨＰＦ値が閾値以上であるか否かの判定、及び、文字レベル判定部１２２が出力したレベル判定値が１であるか否かの判定を、ブロックごとに行う。その結果、ブロックごとに、ＨＰＦ値が閾値以上であり、かつ、レベル判定値が１である場合に文字ブロック値として１を、上記以外の場合に文字ブロック値として０を出力する。例えば、文字ブロック判定部１２３は、拡大映像信号３０１に対して図４Ｂに示される文字ブロック値４０１を出力する。図４Ｂにおいて、拡大映像信号３０１におけるブロックの位置に対応する位置に、当該ブロックの文字ブロック値が記載されている。拡大映像信号３０１において文字が存在しているブロックに対応する文字ブロック値が１となっている。
【００５５】
文字判定部１２４は、文字ブロック判定部１２３が出力した文字ブロック値を受信し、文字を含むブロックが隣接している度合いを算出し、文字判定率として出力する。この処理について以下で具体的に説明する。
【００５６】
具体的には、まず、文字判定部１２４は、拡大映像信号３０１のブロックごとに、当該ブロックを中心とする縦３ブロック×横３ブロックの合計９ブロックの文字ブロック値の総和Ｓを算出する。ここで、列方向で左からｉ番目であって、行方向で上からｊ番目のブロックの文字ブロック値をＭＢ（ｉ，ｊ）と表現する。
【００５７】
【数３】
2014102876.tif 000005
【００５８】
次に、文字判定部１２４は、文字ブロック値の総和Ｓに基づいて文字判定率を算出する。文字判定率は、総和Ｓに対する増加関数であり、総和Ｓが所定値以上のときに１となるものである。所定値は、１から９までの任意の値をとることができる。所定値を３とする場合の、総和Ｓに対する文字判定率の関係を図５の（ｂ）に示す。所定値を３とすれば、当該ブロックと、当該ブロックに隣接する２つ以上のブロックとの文字ブロック値が１であるときに、当該ブロックの文字判定率を１と算出することができる。このようにすれば、文字ブロック値４０１のように、文字ブロック値が１であるブロックが連なっている場合に、これらのブロックの文字判定率を１と算出することができる（図５の（ｃ））。また、例えば、文字ブロック値が１であるブロックに隣接する全てのブロックの文字ブロック値が０である場合に、当該ブロックの文字判定率を１／３（約０．３）と算出することができる（図５の（ｄ））。入力画像における文字は、列方向又は行方向に連なることが多いので、上記の文字判定率を用いることで、列方向又は行方向に連なった文字を検出することで、より適正に文字の存在を判定することができる。
【００５９】
なお、増加関数とは、任意のｘ及びｙに対して、ｘ＜ｙのときｆ（ｘ）≦ｆ（ｙ）が成立するような関数ｆ（ｘ）を意味する。また、後述される減少関数とは、任意のｘ及びｙに対して、ｘ＜ｙのときｆ（ｘ）≧ｆ（ｙ）が成立するような関数ｆ（ｘ）を意味する。
【００６０】
図６は、本実施の形態における文字サイズ検出部１３の詳細な機能ブロック図である。
【００６１】
図６に示されるように、文字サイズ検出部１３は、水平カウント部１３１と、垂直カウント部１３２と、最小選択部１３３とを備える。
【００６２】
水平カウント部１３１は、文字領域検出部１２の文字ブロック判定部が出力する文字ブロック値を受信し、ブロックごとの水平カウント値を算出し、出力する。具体的には、水平カウント部１３１は、各ブロックに着目し、当該ブロックと同一の行に属するブロックの文字ブロック値を数え、水平カウント値として出力する。例えば、水平カウント部１３１は、図７の（ａ）に示される文字ブロック値（文字ブロック値４０１と同一）に対して、図７の（ｂ）に示される水平カウント値を出力する。
【００６３】
垂直カウント部１３２は、文字領域検出部１２の文字ブロック判定部が出力する文字ブロック値を受信し、ブロックごとの垂直カウント値を算出し、出力する。具体的には、垂直カウント部１３２は、各ブロックに着目し、当該ブロックと同一の列に属するブロックの文字ブロック値を数え、垂直カウント値として出力する。例えば、垂直カウント部１３２は、図７の（ａ）に示される文字ブロック値（文字ブロック値４０１と同一）に対して、図７の（ｃ）に示される垂直カウント値を出力する。
【００６４】
最小選択部１３３は、水平カウント部１３１が出力する水平カウント値と、垂直カウント部１３２が出力する垂直カウント値とを受信し、各ブロックにおいて、水平カウント値と垂直カウント値とのうちの小さい方を選択し、小さい方の値を文字サイズとして出力する。例えば、最小選択部１３３は、図７の（ｂ）に示される水平カウント値と、図７の（ｃ）に示される垂直カウント値とに対して、図７の（ｄ）に示される文字サイズを出力する。
【００６５】
図８は、本実施の形態における輝度変動回数算出部１４の詳細な機能ブロック図である。
【００６６】
図８に示されるように、輝度変動回数算出部１４は、水平変動算出部１４１と、垂直変動算出部１４２と、最大選択部１４３とを備える。
【００６７】
水平変動算出部１４１は、拡大部１１が出力した拡大映像信号を受信し、画素単位に、水平方向の画素値の変動の大きさの度合いを示す水平変動値を出力する。水平変動算出部１４１についてさらに詳細に説明する。
【００６８】
図９は、水平変動算出部１４１の詳細な機能ブロック図である。図９に示されるように、水平変動算出部１４１は、水平輝度差算出部１４１１と、水平符号総和算出部１４１２と、水平絶対値総和算出部１４１３と、乗算器１４１４とを備える。
【００６９】
水平輝度差算出部１４１１は、拡大部１１が出力した拡大映像信号を受信し、画素単位に、水平方向の隣接画素との輝度差ＤＩＦＦを算出する。
【００７０】
水平符号総和算出部１４１２は、水平輝度差算出部１４１１が算出した輝度差ＤＩＦＦに基づいて水平符号総和を算出し、出力する。図９を用いて具体的に説明する。具体的には、水平符号総和算出部１４１２は、画素単位に、当該画素（図９の（ｃ）における着目画素）を含む所定の領域において、隣り合う画素の輝度差ＤＩＦＦの総和の絶対値ＤＨ，Ｓを算出する（式４）。なお、所定の領域とは、例えば、当該画素を中心とする水平方向に９画素、垂直方向に９画素の矩形領域である。なお、所定の領域は、上記の矩形領域に限られず、他の画素数を有する矩形領域であってもよいし、三角形、円形のようなその他の図形に含まれる領域であってもよい。また、当該画素を中心とする領域である必要もなく、当該画素を含む領域であればよい。
【００７１】
【数４】
2014102876.tif 000006
【００７２】
次に、水平符号総和算出部１４１２は、ＤＨ，Ｓに基づいて水平符号総和ＳＨ，Ｓを算出する。水平符号総和ＳＨ，Ｓは、ＤＨ，Ｓに対する減少関数であり、ＤＨ，Ｓが小さいときに１となり、ＤＨ，Ｓが大きいときに０となる関数である。水平符号総和ＳＨ，Ｓの具体例を、図９の（ａ）に示す。そして、水平符号総和算出部１４１２は、算出した水平符号総和ＳＨ，Ｓを出力する。
【００７３】
水平絶対値総和算出部１４１３は、水平輝度差算出部１４１１が算出した輝度差ＤＩＦＦに基づいて水平絶対値総和を算出し、出力する。具体的には、水平絶対値総和算出部１４１３は、画素単位に、当該画素を中心とする所定の範囲において、隣り合う画素の輝度差ＤＩＦＦの絶対値の総和ＤＨ，Ａを算出する（式５）。
【００７４】
【数５】
2014102876.tif 000007
【００７５】
次に、水平絶対値総和算出部１４１３は、ＤＨ，Ａに基づいて水平絶対値総和ＳＨ，Ａを算出する。水平絶対値総和ＳＨ，Ａは、ＤＨ，Ａに対する増加関数であり、ＤＨ，Ａが小さいときに０となり、ＤＨ，Ａが大きいときに１となる関数である。水平絶対値総和ＳＨ，Ａの具体例を、図９の（ｂ）に示す。そして、水平絶対値総和算出部１４１３は、算出した水平絶対値総和ＳＨ，Ａを出力する。
【００７６】
乗算器１４１４は、水平符号総和算出部１４１２が出力した水平符号総和と、水平絶対値総和算出部１４１３が出力した水平絶対値総和とを受信し、水平符号総和と水平絶対値総和との積を、水平変動値として出力する。この水平変動値が、水平変動算出部１４１の出力となる。
【００７７】
図８に戻り、垂直変動算出部１４２は、拡大部１１が出力した拡大映像信号を受信し、画素単位に、垂直方向の画素値の変動の大きさの度合いを示す垂直変動値を出力する。垂直変動算出部１４２についてさらに詳細に説明する。
【００７８】
図１０は、垂直変動算出部１４２の詳細な機能ブロック図である。図１０に示されるように、垂直変動算出部１４２は、垂直輝度差算出部１４２１と、垂直符号総和算出部１４２２と、垂直絶対値総和算出部１４２３と、乗算器１４２４とを備える。
【００７９】
垂直輝度差算出部１４２１は、拡大部１１が出力した拡大映像信号を受信し、画素単位に、垂直方向の隣接画素との輝度差ＤＩＦＦを算出する。
【００８０】
垂直符号総和算出部１４２２は、垂直輝度差算出部１４２１が算出した輝度差ＤＩＦＦに基づいて垂直符号総和を算出し、出力する。具体的な算出方法は、水平符号総和算出部１４１２が水平符号総和を算出した方法と同様であり、隣り合う画素の輝度差ＤＩＦＦの総和の絶対値ＤＶ，Ｓ（式６）に基づいて垂直符号総和ＳＶ，Ｓを算出する。
【００８１】
【数６】
2014102876.tif 000008
【００８２】
垂直絶対値総和算出部１４２３は、垂直輝度差算出部１４２１が算出した輝度差ＤＩＦＦに基づいて垂直絶対値総和を算出する。具体的な算出方法は、水平絶対値総和算出部１４１３が水平絶対値総和を算出した方法と同様であり、隣り合う画素の輝度差ＤＩＦＦの総和の絶対値ＤＶ，Ａ（式７）に基づいて垂直符号総和ＳＶ，Ａを算出する。
【００８３】
【数７】
2014102876.tif 000009
【００８４】
乗算器１４２４は、垂直符号総和算出部１４２２が出力した垂直符号総和と、垂直絶対値総和算出部１４２３が出力した垂直絶対値総和とを受信し、垂直符号総和と垂直絶対値総和との積を、垂直変動値として出力する。この垂直変動値が、垂直変動算出部１４２の出力となる。
【００８５】
図８に戻り、最大選択部１４３は、水平変動算出部１４１が出力した水平変動値と、垂直変動算出部１４２が出力した垂直変動値とを受信し、画素ごとに水平変動値と垂直変動値との大きい方法を、変動値として出力する。
【００８６】
図１１は、本実施の形態における補正ゲイン算出部１５の詳細な機能ブロック図である。図１１に示されるように、補正ゲイン算出部１５は、変動値ゲイン算出部１５１と、文字サイズゲイン算出部１５２と、文字判定率ゲイン算出部１５３と、解像度ゲイン算出部１５４と、ビットレートゲイン算出部１５５と、乗算器１５６とを備える。なお、文字判定率ゲイン算出部１５３と、乗算器１５６とは必須の構成要素である。また、変動値ゲイン算出部１５１と、文字サイズゲイン算出部１５２と、文字判定率ゲイン算出部１５３と、解像度ゲイン算出部１５４と、ビットレートゲイン算出部１５５とについては、これらのうち少なくとも１つがあればよい。
【００８７】
変動値ゲイン算出部１５１は、輝度変動回数算出部１４が出力した変動値を受信し、その変動値に基づいて変動値ゲインを算出し、出力する。具体的には、変動値ゲイン算出部１５１は、変動値が大きいほど、より小さな変動値ゲインを算出する。変動値ゲインは、０以上かつ１以下の値をとる。変動値に対する変動値ゲインの関数の例を図１２の（ａ）に示す。
【００８８】
上記のようにすることにより、入力映像信号の中で輝度変動が大きい部分に対して、画像処理の補正ゲインを小さくすることができる。輝度変動回数算出部１４が出力した変動値は、周辺の画素との輝度変化が大きい画素において大きな値をとる。このように輝度変化が大きい画素、及び、その周辺の部分では、圧縮ノイズによる劣化が大きい（文字の画像としての崩れが大きい）ことが知られている。このような部分に画像処理（鮮鋭化処理）を施すと、圧縮ノイズが目立ちやすくなったり、画像がさらに崩れたりする。よって、このような部分に施す画像処理の補正ゲインを小さくすることにより、圧縮ノイズが目立ちやすくなるのを防ぐことができる。
【００８９】
図１１に戻り、文字サイズゲイン算出部１５２は、文字サイズ検出部１３が出力した文字サイズを受信し、その文字サイズに基づいて文字サイズゲインを算出し、出力する。具体的には、文字サイズゲイン算出部１５２は、文字サイズが大きいほど、より大きな文字サイズゲインを算出する。文字サイズゲインは、０以上かつ１以下の値をとる。文字サイズに対する文字サイズゲインの関数の例を図１２の（ｂ）に示す。
【００９０】
上記のようにすることにより、入力映像信号の中で小さな文字を含む部分に対して、画像処理の補正ゲインを小さくすることができる。文字サイズ検出部１３が出力した文字サイズは、小さな文字を含むブロックにおいて小さな値をとる。このように小さなブロックを含む部分では、圧縮ノイズによる劣化が大きい（文字の画像としての崩れが大きい）ことが知られている。このような部分に画像処理（鮮鋭化処理）を施すと、圧縮ノイズが目立ちやすくなる。一方、大きな文字を含む部分は、入力映像信号の提供者が当該文字を強調することを意図していることが多い。また、大きな文字を含む部分は、画像処理（鮮鋭化処理）により適切に鮮鋭化されることが知られている。よって、小さな文字を含む部分に施す画像処理の補正ゲインを小さくすることにより、圧縮ノイズが目立ちやすくなるのを防ぐとともに、大きな文字を含む部分に施す画像処理の補正ゲインを大きくすることにより、大きな文字の視認性を向上することができる。
【００９１】
図１１に戻り、文字判定率ゲイン算出部１５３は、文字領域検出部１２が出力した文字判定率を受信し、その文字判定率に基づいて文字判定率ゲインを算出し、出力する。具体的には、文字判定率ゲイン算出部１５３は、文字判定率が小さいほど、より小さな文字判定率ゲインを算出する。文字判定率ゲインは、０以上かつ１以下の値をとる。文字判定率に対する文字判定率ゲインの関数の例を図１２の（ｃ）に示す。
【００９２】
上記のようにすることにより、入力映像信号の中で文字を含むと推定される部分に対して補正ゲインを大きくし、かつ、文字を含まないと推定される部分に対して補正ゲインを小さくすることができる。文字領域検出部１２が出力した文字判定率は、文字を含むと推定されるブロックにおいて大きな値をとり（例えば、図５の（ｃ）右図における１）、上記以外のブロックにおいて小さな値をとる（例えば、図５の（ｄ）右図における０．１）。文字を含む部分に施す画像処理の補正ゲインを大きくすることにより、文字の視認性を向上することができる。
【００９３】
図１１に戻り、解像度ゲイン算出部１５４は、入力映像信号の解像度を受信し、その解像度に基づいて解像度ゲインを算出し、出力する。具体的には、解像度ゲイン算出部１５４は、解像度が所定値より大きいほど、又は、解像度が所定値より小さいほど、より小さな解像度ゲインを算出する。言い換えれば、解像度ゲイン算出部１５４は、解像度と所定値との差分が大きいほど、より小さな解像度ゲインを算出する。解像度ゲインは、０以上かつ１以下の値をとる。解像度に対する解像度ゲインの関数の例を図１２の（ｄ）に示す。
【００９４】
上記のようにすることにより、所定値より大きい解像度を有する入力映像信号に対して補正ゲインを小さくすることができる。入力映像信号の解像度が大きいほど、拡大部１１による拡大処理の効果が小さい。所定値より大きい解像度を有する入力映像信号に対して行われる拡大処理により生ずる画像の歪は小さい（文字の画像としての崩れが小さい）ので、画像処理の補正ゲインを小さくする。また、上記のようにすることにより、所定値より小さい解像度を有する入力映像信号に対して補正ゲインを小さくすることができる。入力映像信号の解像度が小さいほど、拡大部１１による拡大処理の効果が大きい。所定値より小さい解像度を有する入力映像信号に対して行われる拡大処理により生ずる画像の歪は大きい（文字の画像としての崩れが大きい）。画像の歪が大きすぎる場合、文字の細かな構造が失われる（文字がつぶれる）。このような場合には、画像処理により文字の鮮鋭さを向上することが期待されないので、画像処理の補正ゲインを小さくする。
【００９５】
図１１に戻り、ビットレートゲイン算出部１５５は、入力映像信号のビットレートを受信し、そのビットレートに基づいてビットレートゲインを算出し、出力する。具体的には、ビットレートゲイン算出部１５５は、ビットレートが小さいほど、より小さなビットレートゲインを算出する。ビットレートゲインは、０以上かつ１以下の値をとる。ビットレートに対するビットレートゲインの関数の例を図１２の（ｅ）に示す。なお、入力映像信号が動画である場合、動画を構成するフレームごとにビットレートが異なる場合がある。その場合、処理対象のフレームのビットレートを用いればよい。
【００９６】
上記のようにすることにより、ビットレートの小さい入力映像信号に対する画像処理の補正ゲインを小さくすることができる。ビットレートの小さい入力映像信号は、当該入力信号が生成される際に発生する圧縮ノイズを多く含んでおり、大きく劣化している（文字の画像としての崩れが大きい）。よって、画像処理により鮮鋭さを向上することが期待されないので、画像処理の補正ゲインを小さくする。
【００９７】
図１１に戻り、乗算器１５６は、変動値ゲインと、文字サイズゲインと、文字判定率ゲインと、解像度ゲインと、ビットレートゲインとの積を、補正ゲインとして出力する。
【００９８】
図１３は、本実施の形態における補正部１６の詳細な機能ブロック図である。図１３に示されるように、補正部１６は、平滑化部１６１と、鮮鋭化部１６２とを備える。
【００９９】
平滑化部１６１は、拡大部１１が生成した拡大映像信号と、補正ゲイン算出部１５が算出した補正ゲインとを受信する。そして、平滑化部１６１は、拡大映像信号を平滑化することにより、平滑化映像信号を生成し、出力する。平滑化部１６１についてさらに詳細に説明する。
【０１００】
図１４は、平滑化部１６１の詳細な機能ブロック図である。図１４に示されるように、平滑化部１６１は、ＬＰＦ（Low-pass filter）部１６１１と、減算器１６１２と、乗算器１６１３と、加算器１６１４とを備える。
【０１０１】
ＬＰＦ（Low-pass filter）部１６１１は、拡大映像信号に対してＬＰＦを適用し、適用した結果得られた信号を出力する。
【０１０２】
減算器１６１２は、ＬＰＦ部が拡大映像信号に対してＬＰＦを適用して得られる信号から、拡大映像信号を減算し、減算した結果得られた信号を出力する。
【０１０３】
乗算器１６１３は、減算器１６１２が出力した信号と、補正ゲイン算出部１５が算出した補正ゲインとの積を算出し、出力する。
【０１０４】
加算器１６１４は、拡大映像信号と、乗算器１６１３が出力した信号とを加算して、平滑化映像信号として出力する。
【０１０５】
上記の構成により、平滑化部１６１は、補正ゲインが０のときには、拡大映像信号そのものを平滑化映像信号として出力する。また、平滑化部１６１は、補正ゲインが１のときには、拡大映像信号が平滑化された信号を平滑化映像信号として出力する。また、平滑化部１６１は、補正ゲインが０と１との間の値のときには、補正ゲインが大きいほどより強く平滑化された拡大映像信号を、平滑化映像信号として出力する。
【０１０６】
図１５は、鮮鋭化部１６２の詳細な機能ブロック図である。なお、図１５に示される処理は、アンシャープマスク処理の一例である。
【０１０７】
図１５に示されるように、鮮鋭化部１６２は、ＬＰＦ部１６２１と、減算器１６２２と、乗算器１６２３と、乗算器１６２４と、加算器１６２５とを備える。
【０１０８】
ＬＰＦ部１６２１は、平滑化映像信号Ａ（図１６の（Ａ））に対してＬＰＦを適用し、適用した結果得られた信号Ｂ（図１６の（Ｂ））を出力する。
【０１０９】
減算器１６２２は、ＬＰＦ部１６２１が出力した信号から、拡大映像信号を減算し、減算した結果得られた信号Ｃ（図１６の（Ｃ））を出力する。
【０１１０】
乗算器１６２３は、基準ゲインと、補正ゲインとの積を算出し、ゲインとして出力する。ここで、基準ゲインとは、鮮鋭化処理の強度（効果の大きさ）の基準となる数値である。つまり、基準ゲインが大きいほど、より強い（効果がより大きい）鮮鋭化処理が施される。基準ゲインは、あらかじめ設定された値であり、例えば、３としてよい。
【０１１１】
乗算器１６２４は、減算器１６２２が出力した信号と、ゲインとの積を算出し、出力する。
【０１１２】
加算器１６２５は、平滑化映像信号と、乗算器１６２４が出力した信号とを加算して、出力映像信号Ｄ（図１６の（Ｄ））として出力する。
【０１１３】
上記の構成により、鮮鋭化部１６２は、補正ゲインが０のときには、拡大映像信号そのものを出力映像信号として出力する。また、鮮鋭化部１６２は、補正ゲインが１のときには、基準ゲインで示される強さで拡大映像信号が鮮鋭化された信号を出力映像信号として出力する。また、鮮鋭化部１６２は、補正ゲインが０と１との間の値のときには、補正ゲインが大きいほどより強く鮮鋭化された拡大映像信号を、平滑化映像信号として出力する。つまり、補正ゲインは、鮮鋭化処理の強さの程度を、基準ゲインと０との間で調整する値として機能する。
【０１１４】
なお、上記において、補正ゲイン算出部１５において、入力映像信号の解像度に基づいて補正ゲインの算出を行う例を示したが、解像度の代わりに、拡大部１１の拡大処理における拡大率を用いることもできる。解像度と拡大率とは逆数の関係にある。解像度の代わりに拡大率を用いる場合、拡大率に係る補正ゲインの成分を拡大率ゲインとすれば、補正ゲイン算出部１５は、拡大率が所定値より大きいほど、又は、拡大率が所定値より小さいほど、より小さな拡大率ゲインを算出する。言い換えれば、補正ゲイン算出部１５は、拡大率と所定値との差分が大きいほど、より小さな拡大率ゲインを算出する。
【０１１５】
［１−２．動作］
以上のように構成された画像処理装置１について、その動作を以下に説明する。
【０１１６】
図１７は、実施の形態１における画像処理装置１のフローチャートである。以下で、画像処理装置１の動作及び処理について詳細に説明する。
【０１１７】
ステップＳ１７０１において、画像処理装置１は、入力映像信号を受信する。
【０１１８】
ステップＳ１７０２において、拡大部１１は、ステップＳ１７０１で画像処理装置が受信した入力映像信号に対して拡大処理を施す。なお、拡大部１１は必須の構成要素ではない。画像処理装置１が拡大部１１を備えない場合には、ステップＳ１７０２の処理は行われない。その場合、画像処理装置１は、拡大部１１と同等の機能を有する外部装置から、拡大映像信号を取得する。
【０１１９】
ステップＳ１７０３において、文字領域検出部１２は、拡大映像信号を受信し、拡大映像信号に含まれる文字領域を検出する。そして、文字ブロック値と、文字判定率とを算出し、出力する。
【０１２０】
ステップＳ１７０４において、文字サイズ検出部１３は、ステップＳ１７０３で文字領域検出部１２が出力した文字ブロック値を受信し、ブロックごとに当該ブロックが含む文字の文字サイズを判定する。そして、文字サイズ検出部１３は、各ブロックが含む文字サイズを出力する。
【０１２１】
ステップＳ１７０５において、輝度変動回数算出部１４は、ステップＳ１７０２で拡大部１１が出力した拡大映像信号を受信し、拡大映像信号における水平方向及び垂直方向の輝度変動回数を、変動値として算出する。そして、輝度変動回数算出部１４は、算出した変動値を出力する。なお、ステップＳ１７０５は、必ずしもステップＳ１７０４の後に実行されなくてもよく、ステップＳ１７０２の処理が完了した後であれば、実行可能である。
【０１２２】
ステップＳ１７０６において、補正ゲイン算出部１５は、ステップＳ１７０５で輝度変動回数算出部１４が出力した変動値と、ステップＳ１７０４で文字サイズ検出部１３が出力した文字サイズと、ステップＳ１７０３で文字領域検出部１２が出力した文字判定率と、ステップＳ１７０１で受信した入力映像信号の解像度及びビットレートとを受信し、各ブロックに対して補正部１６が行う画像処理の強さの程度（補正ゲイン）を算出する。
【０１２３】
ステップＳ１７０７において、補正部１６は、拡大映像信号に対して、補正ゲイン算出部１５が算出した補正ゲインに基づいて、拡大映像信号を構成するブロックのそれぞれに対する画像処理を施す。ここで、拡大映像信号は、ステップＳ１７０２で拡大部１１が入力映像信号を拡大することにより生成したものである。また、拡大映像信号は、画像処理装置１が拡大部１１を備えない場合には、外部装置から取得したものである。
【０１２４】
ステップＳ１７０８において、画像処理装置１は、ステップＳ１７０７で補正部１６が出力した出力映像信号を出力する。
【０１２５】
［１−３．効果］
以上のように、本実施の形態にかかる画像処理装置は、画像処理装置は、入力画像の中の文字領域に対して、鮮鋭さを高める画像処理であって特徴量に応じた強さの画像処理（特徴量に応じた効果を有する画像処理）を施すことができる。特徴量は、入力画像に施された拡大処理による文字領域内の画像の崩れの度合いを示す量であるので、画像処理装置は、特徴量に基づいて画像処理を行うことにより、適正に画像の崩れを補正することができる。よって、画像処理装置は、画像内の文字の鮮鋭さを高めることができる。
【０１２６】
また、画像処理装置は、入力画像の中で小さな文字を含む部分には、効果が小さい画像処理を施すことができる。入力画像の中で小さな文字を含む部分の画像は、拡大処理により発生した画像の崩れが大きいために、画像処理による補正により拡大前の画像に復元できなくなっている場合がある。その場合に、効果が大きい画像処理を施すと、拡大前の画像に復元できないだけでなく、画像の崩れをさらに進める可能性がある。その場合には、効果が小さい画像処理を施すことにより、画像処理により発生する画像の崩れを未然に防ぐことができる。
【０１２７】
また、画像処理装置は、入力画像の中でも所定方向に画素をスキャンした場合に輝度の変動回数が大きい部分には、効果が小さい画像処理を施すことができる。輝度の変動回数が大きい部分は、小さな文字を含む部分、または、字画（画数）が多いなど複雑な形状を有する文字を含む部分に相当する。このような部分は、拡大処理により発生した画像の崩れが大きいために、画像処理による補正により拡大前の画像に復元できなくなっている場合がある。その場合に、効果が大きい画像処理を施すと、拡大前の画像に復元できないだけでなく、画像の崩れをさらに進める可能性がある。その場合には、効果が小さい画像処理を施すことにより、画像処理により発生する画像の崩れを未然に防ぐことができる。
【０１２８】
また、画像処理装置は、解像度が低い入力画像の文字領域に対して、効果が小さい画像処理を施すことができる。解像度が低い入力画像は、拡大処理により発生した画像の崩れが大きいために、画像処理による補正により拡大前の画像に復元できなくなっている場合がある。その場合に、効果が大きい画像処理を施すと、拡大前の画像に復元できないだけでなく、画像の崩れをさらに進める可能性がある。その場合には、効果が小さい画像処理を施すことにより、画像処理により発生する画像の崩れを未然に防ぐことができる。また、解像度が高い入力画像には、拡大率が小さい拡大処理が施される。拡大率が小さい拡大処理により発生する画像の崩れは小さいので、効果が小さい画像処理を施すことにより適正に画像の崩れを補正することができる。
【０１２９】
また、画像処理装置は、ビットレートが低い入力画像の文字領域に対して、効果が小さい画像処理を施すことができる。ビットレートが低い入力画像は、圧縮による歪を多く含んでいるので、画像処理による補正により拡大前の画像に復元できなくなっている場合がある。その場合に、効果が大きい画像処理を施すと、拡大前の画像に復元できないだけでなく、画像の崩れをさらに進める可能性がある。その場合には、効果が小さい画像処理を施すことにより、画像処理により発生する画像の崩れを未然に防ぐことができる。
【０１３０】
また、画像処理装置は、入力画像に対して鮮鋭化処理を施すことにより、画像の崩れを補正することができる。
【０１３１】
また、画像処理装置は、入力画像のノイズを除去することにより、画像の崩れを補正することができる。
【０１３２】
また、画像処理装置は、比較的解像度が低い入力画像を受信し、受信した入力画像に対して拡大処理と鮮鋭さを高める画像処理を施し、画像処理が施された入力画像を出力することができる。
【０１３３】
（実施の形態２）
以下、図１８Ａを用いて、実施の形態２を説明する。実施の形態１にかかる画像処理装置１は、文字領域検出部１２及び輝度変動回数算出部１４は、拡大映像信号に基づいて処理を実行したが、本実施の形態では、上記に相当する機能ブロックが入力映像信号に基づいて処理を実行する画像処理装置の例を説明する。
【０１３４】
［２−１．構成］
図１８Ａは、本実施の形態における画像処理装置２の機能ブロック図である。図１８Ａに示されるように、本実施の形態における画像処理装置２は、文字領域検出部１２Ａと、輝度変動回数算出部１４Ａとを備える。その他の機能ブロックは、実施の形態１にかかる画像処理装置１と同様であるので詳細な説明を省略する。
【０１３５】
文字領域検出部１２Ａは、画像処理装置２が受信した入力映像信号を受信し、入力映像信号に含まれる文字領域を検出する。具体的には、文字領域検出部１２Ａは、入力映像信号を構成するブロックごとに当該ブロックが文字を含んでいるか否かを判定する。この判定の結果、文字を含むブロックか否かをブロックごとに示す文字ブロック値と、文字ブロック値を隣接ブロックとの関係を考慮して平均化した値である文字判定率とを算出し、出力する。
【０１３６】
輝度変動回数算出部１４Ａは、画像処理装置２が受信した入力映像信号を受信し、入力映像信号における水平方向及び垂直方向の輝度変動回数を、変動値として算出する。そして、輝度変動回数算出部１４Ａは、算出した変動値を出力する。
【０１３７】
［２−２．動作］
以上のように構成された画像処理装置２について、その動作を以下に説明する。
【０１３８】
なお、画像処理装置２の動作は、画像処理装置１の動作におけるステップＳ１７０３及びステップ１７０５が、それぞれ、対応する処理ステップであるステップＳ１７０３Ａ及びステップ１７０５Ａに置き換わる。ステップＳ１７０３Ａ及びステップ１７０５Ａについて以下で説明する。
【０１３９】
ステップＳ１７０３Ａは、画像処理装置１のステップＳ１７０３に対応する処理ステップである。ステップＳ１７０３Ａにおいて、文字領域検出部１２Ａは、入力映像信号を受信し、入力映像信号に含まれる文字領域を検出する。そして、文字ブロック値と、文字判定率とを算出し、出力する。
【０１４０】
ステップＳ１７０５Ａは、画像処理装置１のステップＳ１７０５に対応する処理ステップである。ステップＳ１７０５Ａは、輝度変動回数算出部１４Ａは、ステップＳ１７０２で入力映像信号を受信し、入力映像信号における水平方向及び垂直方向の輝度変動回数を、変動値として算出する。そして、輝度変動回数算出部１４Ａは、算出した変動値を出力する。なお、ステップＳ１７０５Ａは、必ずしもステップＳ１７０４の後に実行されなくてもよく、ステップＳ１７０２の処理が完了した後であれば、実行可能である。
【０１４１】
［２−３．効果］
このようにすることで、入力映像信号に基づいて補正ゲイン算出部１５が補正ゲインを算出し、算出した補正ゲインに基づいて補正部１６が拡大映像信号に対して画像処理を行うことができる。拡大部１１による拡大処理により、入力映像信号と拡大映像信号との間には、解像度の違いだけではなく、画素補間により画素値の違い（ぼやけ）が生ずる場合がある。このような場合に、入力映像信号から算出した補正ゲインに基づいて画像処理を行うことにより、より適正に文字の鮮鋭さを高めることができる。
【０１４２】
（実施の形態２の変形例）
以下、図１８Ｂを用いて、実施の形態２の変形例を説明する。本変形例にかかる画像処理装置３は、実施の形態１又は実施の形態２の必須の構成要素を示すものである。
【０１４３】
［３−１．構成］
図１８Ｂは、本変形例における画像処理装置３の機能ブロック図である。図１８Ｂに示されるように、本変形例における画像処理装置３は、文字領域検出部３２と、特徴量検出部３３と、補正ゲイン算出部３４と、補正部３５とを備える。
【０１４４】
文字領域検出部３２は、入力画像から、文字を含む領域である文字領域を検出する。なお、文字領域検出部３２は、文字領域検出部１２に相当する。
【０１４５】
特徴量検出部３３は、文字領域検出部３２が検出した文字領域内の画像の崩れの度合いを示す特徴量を検出する。なお、特徴量検出部３３は、文字サイズ検出部１３又は輝度変動回数算出部１４に相当する。
【０１４６】
補正ゲイン算出部３４は、特徴量検出部３３が検出した特徴量に基づいて、文字領域検出部３２が検出した文字領域に対する補正ゲインを算出する。なお、補正ゲイン算出部３４は、補正ゲイン算出部１５に相当する。
【０１４７】
補正部３５は、補正ゲイン算出部３４が算出した補正ゲインが小さいほど、文字領域内の画像に対してより効果が小さい画像処理を施すことにより、入力信号に補正を行う。なお、補正部３５は、補正部１６に相当する。
【０１４８】
［３−２．効果］
本変形例における画像処理装置３によれば、実施の形態１又は実施の形態２と同様の効果を奏する。
【０１４９】
（他の実施の形態）
以上のように、本出願において開示する技術の例示として、各実施の形態を説明した。
【０１５０】
各実施の形態における画像処理装置は、例えば、テレビ（図１９）、映像記録装置、セットトップボックス、ＰＣ（Personal computer）などに搭載される。
【０１５１】
本開示における技術は、これに限定されず、適宜、変更、置き換え、付加、省略などを行った実施の形態にも適用可能である。また、上記実施の形態１及び２で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。
【０１５２】
以上のように、本開示における技術の例示として、実施の形態を説明した。そのために、添付図面および詳細な説明を提供した。
【０１５３】
したがって、添付図面および詳細な説明に記載された構成要素の中には、課題解決のために必須な構成要素だけでなく、上記実装を例示するために、課題解決のためには必須でない構成要素も含まれ得る。そのため、それらの必須ではない構成要素が添付図面や詳細な説明に記載されていることをもって、直ちに、それらの必須ではない構成要素が必須であるとの認定をするべきではない。
【０１５４】
また、上述の実施の形態は、本開示における技術を例示するためのものであるから、請求の範囲またはその均等の範囲において種々の変更、置き換え、付加、省略などを行うことができる。
【産業上の利用可能性】
【０１５５】
本開示は、比較的解像度が小さい入力映像信号を受信し、入力映像信号より解像度が高い出力映像信号を出力する画像処理装置に適用可能である。具体的には、テレビ、映像記録装置、セットトップボックス、ＰＣ（Personal computer）などに、本開示は適用可能である。
【符号の説明】
【０１５６】
１、２、３    画像処理装置
１１    拡大部
１２、１２Ａ、３２    文字領域検出部
１３    文字サイズ検出部
１４、１４Ａ    輝度変動回数算出部
１５、３４    補正ゲイン算出部
１６、３５    補正部
３３    特徴量検出部
１２１    ＨＰＦ部
１２２    文字レベル判定部
１２３    文字ブロック判定部
１２４    文字判定部
１３１    水平カウント部
１３２    垂直カウント部
１３３    最小選択部
１４１    水平変動算出部
１４２    垂直変動算出部
１４３    最大選択部
１５１    変動値ゲイン算出部
１５２    文字サイズゲイン算出部
１５３    文字判定率ゲイン算出部
１５４    解像度ゲイン算出部
１５５    ビットレートゲイン算出部
１５６、１４１４、１４２４、１６１３、１６２３、１６２４    乗算器
１６１    平滑化部
１６２    鮮鋭化部
３０１    拡大映像信号
４０１    文字ブロック値
１４１１    水平輝度差算出部
１４１２    水平符号総和算出部
１４１３    水平絶対値総和算出部
１４２１    垂直輝度差算出部
１４２２    垂直符号総和算出部
１４２３    垂直絶対値総和算出部
１６１１、１６２１    ＬＰＦ部
１６１２、１６２２    減算器
１６１４、１６２５    加算器
【図１】
2014102876.tif 000010
【図２】
2014102876.tif 000011
【図３】
2014102876.tif 000012
【図４Ａ】
2014102876.tif 000013
【図４Ｂ】
2014102876.tif 000014
【図５】
2014102876.tif 000015
【図６】
2014102876.tif 000016
【図７】
2014102876.tif 000017
【図８】
2014102876.tif 000018
【図９】
2014102876.tif 000019
【図１０】
2014102876.tif 000020
【図１１】
2014102876.tif 000021
【図１２】
2014102876.tif 000022
【図１３】
2014102876.tif 000023
【図１４】
2014102876.tif 000024
【図１５】
2014102876.tif 000025
【図１６】
2014102876.tif 000026
【図１７】
2014102876.tif 000027
【図１８Ａ】
2014102876.tif 000028
【図１８Ｂ】
2014102876.tif 000029
【図１９】
2014102876.tif 000030
【手続補正書】
【提出日】平成27年2月10日(2015.2.10)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、画像処理装置、および、画像処理方法に関する。
【背景技術】
【０００２】
特許文献１は、輝度差のある画素を文字領域として検出し、文字領域の平滑化効果を強める画像処理装置を開示する。この画像処理装置は、簡易な文字検出を行うことにより、文字領域を検出する。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００８−１１３１２４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
本開示は、画像内の文字の鮮鋭さを高める画像処理装置を開示する。
【課題を解決するための手段】
【０００５】
本開示における画像処理装置は、入力画像から、文字を含む領域である文字領域を検出する文字領域検出部と、前記文字領域検出部が検出した前記文字領域内の画像の崩れの度合いを示す特徴量を検出する特徴量検出部と、前記特徴量検出部が検出した前記特徴量に基づいて補正ゲインを算出する補正ゲイン算出部と、前記補正ゲイン算出部が算出した前記補正ゲインが小さいほど、前記文字領域内の画像に対して効果がより小さい画像処理を施すことにより、前記入力画像に補正を行う補正部とを備える。
【発明の効果】
【０００６】
本開示における画像処理装置は、画像内の文字の鮮鋭さを高めることができる。
【図面の簡単な説明】
【０００７】
【図１】図１は、実施の形態１における画像処理装置の機能ブロック図である。
【図２】図２は、実施の形態１における文字領域検出部の詳細な機能ブロック図である。
【図３】図３は、実施の形態１における文字領域検出部の処理の説明図である。
【図４Ａ】図４Ａは、実施の形態１における文字レベル判定部の画素数の数え方の説明図である。
【図４Ｂ】図４Ｂは、実施の形態１における文字ブロック値の例を示す図である。
【図５】図５は、実施の形態１における文字判定部の文字判定率の算出方法の説明図である。
【図６】図６は、実施の形態１における文字サイズ検出部の詳細な機能ブロック図である。
【図７】図７は、実施の形態１における文字サイズ検出部の文字サイズの算出方法の説明図である。
【図８】図８は、実施の形態１における輝度変動回数算出部の詳細な機能ブロック図である。
【図９】図９は、実施の形態１における水平変動算出部の詳細な機能ブロック図である。
【図１０】図１０は、実施の形態１における垂直変動算出部の詳細な機能ブロック図である。
【図１１】図１１は、実施の形態１における補正ゲイン算出部の詳細な機能ブロック図である。
【図１２】図１２は、実施の形態１における補正ゲイン算出部の補正ゲイン算出処理の説明図である。
【図１３】図１３は、実施の形態１における補正部の詳細な機能ブロック図である。
【図１４】図１４は、実施の形態１における平滑化部の詳細な機能ブロック図である。
【図１５】図１５は、実施の形態１における鮮鋭化部の詳細な機能ブロック図である。
【図１６】図１６は、実施の形態１における鮮鋭化部によるアンシャープマスク処理の説明図である。
【図１７】図１７は、実施の形態１における画像処理装置のフローチャートである。
【図１８Ａ】図１８Ａは、実施の形態２における画像処理装置の機能ブロック図である。
【図１８Ｂ】図１８Ｂは、実施の形態２の変形例における画像処理装置の機能ブロック図である。
【図１９】図１９は、各実施の形態における画像処理装置の外観の一例を示す図である。
【発明を実施するための形態】
【０００８】
以下、適宜図面を参照しながら、実施の形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。
【０００９】
なお、発明者らは、当業者が本開示を十分に理解するために添付図面および以下の説明を提供するのであって、これらによって請求の範囲に記載の主題を限定することを意図するものではない。
【００１０】
まず、本開示により解決される課題について説明する。
【００１１】
一般に、ＳＤ（Standard definition）放送、ＤＶＤ、又は、インターネット上のコンテンツの解像度は、３６０ｐ（縦方向の画素数が３６０個）又は４８０ｐ程度である。このようなコンテンツ（低解像度コンテンツ）を、より解像度が高い表示パネルに表示する場合、低解像度コンテンツに対して解像度を上げる拡大処理を施すことにより、解像度の高いコンテンツを生成することが行われる。低解像度コンテンツが画像処理などによって付加された文字を含む場合、拡大処理により、その文字自体にぼやけが発生する現象、又は、その文字とその近傍の画像とに存在する符号歪や文字自体の潰れが拡大されることで拡大処理前より目立つ現象等が発生する。特に後者の現象は低解像度又は低ビットレートのコンテンツにおいて発生しやすく、また、コンテンツ内の文字の線が密集している領域において発生しやすい。言い換えれば、拡大処理により、その文字に、画像としての崩れが発生することがある。コンテンツの視聴者は、画像の崩れが発生した文字を読み取りにくいという問題がある。
【００１２】
特許文献１は、輝度差のある画素を文字領域として検出し、文字領域の平滑化効果を強める画像処理装置を開示する。この画像処理装置は、簡易な文字検出を行うことにより、文字領域を検出する。しかし、検出した文字領域に対する画像処理が適切でないので、上記問題は解決されない。
【００１３】
そこで、本開示は、画像内の文字の鮮鋭さを高める画像処理装置を提供する。
【００１４】
本開示における画像処理装置は、入力画像から、文字を含む領域である文字領域を検出する文字領域検出部と、前記文字領域検出部が検出した前記文字領域内の画像の崩れの度合いを示す特徴量を検出する特徴量検出部と、前記特徴量検出部が検出した前記特徴量に基づいて補正ゲインを算出する補正ゲイン算出部と、前記補正ゲイン算出部が算出した前記補正ゲインが小さいほど、前記文字領域内の画像に対して効果がより小さい画像処理を施すことにより、前記入力画像に補正を行う補正部とを備える。
【００１５】
これによれば、画像処理装置は、入力画像の中の文字領域に対して、鮮鋭さを高める画像処理であって特徴量に応じた強さの画像処理（特徴量に応じた効果を有する画像処理）を施すことができる。特徴量は、入力画像に施された拡大処理による文字領域内の画像の崩れの度合いを示す量であるので、画像処理装置は、特徴量に基づいて画像処理を行うことにより、適正に画像の崩れを補正することができる。よって、画像処理装置は、画像内の文字の鮮鋭さを高めることができる。
【００１６】
また、前記特徴量検出部は、前記文字領域の文字の大きさである文字サイズを前記特徴量として検出する文字サイズ検出部を有し、前記補正ゲイン算出部は、前記文字サイズ検出部が検出した前記文字サイズが小さいほど、より小さな前記補正ゲインを算出するとしてもよい。
【００１７】
これによれば、画像処理装置は、特徴量に基づいて入力画像の中で小さな文字を含む部分には、効果が小さい画像処理を施すことができる。入力画像の中で小さな文字を含む部分の画像は、拡大処理により発生した画像の崩れが大きいために、画像処理による補正により拡大前の画像に復元できなくなっている場合がある。その場合に、画像処理装置が、効果が大きい画像処理を施すと、拡大前の画像に復元できないだけでなく、画像の崩れをさらに進める可能性がある。その場合には、画像処理装置は、特徴量に基づいて効果が小さい画像処理を施すことにより、画像処理により発生する画像の崩れを未然に防ぐことができる。
【００１８】
また、前記特徴量検出部は、前記文字領域内の画像において、輝度の変動回数を前記特徴量として検出する輝度変動検出部を有し、前記補正ゲイン算出部は、前記輝度変動検出部が検出した前記変動回数が大きいほど、より小さな前記補正ゲインを算出するとしてもよい。
【００１９】
これによれば、画像処理装置は、特徴量に基づいて入力画像の中でも所定方向に画素をスキャンした場合に輝度の変動回数が大きい部分には、効果が小さい画像処理を施すことができる。輝度の変動回数が大きい部分は、小さな文字を含む部分、または、字画（画数）が多いなど複雑な形状を有する文字を含む部分に相当する。このような部分は、拡大処理により発生した画像の崩れが大きいために、画像処理による補正により拡大前の画像に復元できなくなっている場合がある。その場合に、画像処理装置が、効果が大きい画像処理を施すと、拡大前の画像に復元できないだけでなく、画像の崩れをさらに進める可能性がある。その場合には、画像処理装置は、特徴量に基づいて効果が小さい画像処理を施すことにより、画像処理により発生する画像の崩れを未然に防ぐことができる。
【００２０】
また、前記特徴量検出部は、前記入力画像の解像度を前記特徴量として検出し、前記補正ゲイン算出部は、前記解像度と所定値との差分が大きいほど、より小さな前記補正ゲインを算出するとしてもよい。
【００２１】
これによれば、画像処理装置は、特徴量に基づいて解像度が低い入力画像の文字領域に対して、効果が小さい画像処理を施すことができる。解像度が低い入力画像は、拡大処理により発生した画像の崩れが大きいために、画像処理による補正により拡大前の画像に復元できなくなっている場合がある。その場合に、画像処理装置が、効果が大きい画像処理を施すと、拡大前の画像に復元できないだけでなく、画像の崩れをさらに進める可能性がある。その場合には、画像処理装置は、効果が小さい画像処理を施すことにより、画像処理により発生する画像の崩れを未然に防ぐことができる。また、解像度が高い入力画像には、拡大率が小さい拡大処理が施される。拡大率が小さい拡大処理により発生する画像の崩れは小さいので、画像処理装置は、効果が小さい画像処理を施すことにより適正に画像の崩れを補正することができる。
【００２２】
また、前記特徴量検出部は、前記入力画像のビットレートを前記特徴量として検出し、前記補正ゲイン算出部は、前記ビットレートが小さいほど、より小さな前記補正ゲインを算出するとしてもよい。
【００２３】
これによれば、画像処理装置は、ビットレートが低い入力画像の文字領域に対して、効果が小さい画像処理を施すことができる。ビットレートが低い入力画像は、圧縮による歪を多く含んでいるので、画像処理による補正により拡大前の画像に復元できなくなっている場合がある。その場合に、画像処理装置が、効果が大きい画像処理を施すと、拡大前の画像に復元できないだけでなく、画像の崩れをさらに進める可能性がある。その場合には、画像処理装置は、効果が小さい画像処理を施すことにより、画像処理により発生する画像の崩れを未然に防ぐことができる。
【００２４】
また、前記補正部は、前記画像処理として鮮鋭化処理を施すことにより、前記補正を行うとしてもよい。
【００２５】
これによれば、画像処理装置は、入力画像に対して鮮鋭化処理を施すことにより、画像の崩れを補正することができる。
【００２６】
また、前記補正部は、前記画像処理としてノイズ除去処理を施すことにより、前記補正を行うとしてもよい。
【００２７】
これによれば、画像処理装置は、入力画像のノイズを除去することにより、画像の崩れを補正することができる。
【００２８】
また、前記画像処理装置は、さらに、前記入力画像に対して、解像度を上げる処理である拡大処理を施す拡大部を備え、前記文字領域検出部は、前記拡大部が前記拡大処理を施した後の前記入力画像から前記文字領域を検出するとしてもよい。
【００２９】
これによれば、画像処理装置は、比較的解像度が低い入力画像を受信し、受信した入力画像に対して拡大処理と鮮鋭さを高める画像処理を施し、画像処理が施された入力画像を出力することができる。
【００３０】
また、本開示における画像処理方法は、入力画像から、文字を含む領域である文字領域を検出する文字領域検出ステップと、前記文字領域検出ステップで検出した前記文字領域内の画像の崩れの度合いを示す特徴量を検出する特徴量検出ステップと、前記特徴量検出ステップで検出した前記特徴量に基づいて補正ゲインを算出する補正ゲイン算出ステップと、前記補正ゲイン算出ステップで算出した前記補正ゲインが小さいほど、前記文字領域内の画像に対して効果がより小さい画像処理を施すことにより、前記入力画像に補正を行う補正ステップとを含む。
【００３１】
これにより、上記の画像処理装置と同様の効果を奏する。
【００３２】
（実施の形態１）
以下、図１〜１７を用いて、実施の形態１を説明する。本実施の形態において、入力された入力映像信号の文字領域に対して、文字領域内の画像の特徴に応じて画像処理を行う画像処理装置の例を説明する。なお、本実施の形態の画像処理装置は、比較的低い解像度の入力映像信号を、入力映像信号の解像度より高い解像度を有する出力映像信号にする過程において用いられるものである。入力映像信号の解像度は、例えば、３６０ｐ（縦方向の画素数が３６０個）又は４８０ｐである。また、出力映像信号の解像度は、例えば、１０８０ｐ（ＦＨＤ（Full high definition）に相当）である。
【００３３】
［１−１．構成］
図１は、本実施の形態における画像処理装置の機能ブロック図である。
【００３４】
図１に示されるように、画像処理装置１は、拡大部１１と、文字領域検出部１２と、文字サイズ検出部１３と、輝度変動回数算出部１４と、補正ゲイン算出部１５と、補正部１６とを備える。
【００３５】
拡大部１１は、画像処理装置１に入力された入力映像信号の解像度を上げる拡大処理を入力映像信号に施すことにより入力映像信号を拡大し、拡大することにより生成した拡大映像信号を出力する。拡大処理の方法には、ニアレストネイバー、バイリニア、又は、バイキュービックなどの従来技術を用いることができる。なお、画像処理装置１は、必ずしも拡大部１１を備えなくてもよい。つまり、画像処理装置１は、拡大部１１と同等の機能を有する外部装置から拡大映像信号を受信してもよい。なお、入力映像信号は、静止画を構成する信号であってもよいし、動画を構成する信号であってもよい。なお、入力映像信号は、入力画像の一例である。入力映像信号が静止画である場合には、当該静止画が入力画像に相当する。入力映像信号が動画である場合には、当該動画を構成するフレームの１つが入力画像に相当する。また、拡大映像信号は、入力画像の別の一例である。
【００３６】
文字領域検出部１２は、拡大部１１が出力した拡大映像信号を受信し、拡大映像信号に含まれる文字領域を検出する。具体的には、文字領域検出部１２は、拡大映像信号を構成するブロックごとに当該ブロックが文字を含んでいるか否かを判定する。この判定の結果、文字を含むブロックか否かをブロックごとに示す文字ブロック値と、隣接ブロックとの関係を考慮して文字ブロック値を平均化した値である文字判定率とを算出し、出力する。なお、拡大映像信号のブロックとは、拡大映像信号を複数の領域に区切ったときの領域のそれぞれを意味する。つまり、拡大映像信号は複数のブロックを含む、と表現される。また、拡大映像信号は、複数のブロックから構成される、とも表現される。
【００３７】
文字サイズ検出部１３は、文字領域検出部１２が出力した文字ブロック値を受信し、ブロックごとに当該ブロックが含む文字の文字サイズを判定する。そして、文字サイズ検出部１３は、各ブロックが含む文字サイズを出力する。
【００３８】
輝度変動回数算出部１４は、拡大部１１が出力した拡大映像信号を受信し、拡大映像信号における水平方向及び垂直方向の輝度変動回数を、変動値として算出する。そして、輝度変動回数算出部１４は、算出した変動値を出力する。
【００３９】
補正ゲイン算出部１５は、輝度変動回数算出部１４が出力した変動値と、文字サイズ検出部１３が出力した文字サイズと、文字領域検出部１２が出力した文字判定率と、入力映像信号の解像度及びビットレートとを受信し、各ブロックに対して補正部１６が行う画像処理の強さの程度（補正ゲイン）を算出する。なお、補正ゲイン算出部１５が受信する情報の中で必須なのは、文字判定率である。その他の情報は必須ではないが、その他の情報があれば補正ゲインの算出結果をより適正にすることができる。
【００４０】
補正部１６は、拡大部１１が出力した拡大映像信号に対して、補正ゲイン算出部１５が算出した補正ゲインに基づいて、拡大映像信号を構成するブロックのそれぞれに対する画像処理を施す。画像処理は、平滑化処理、又は、鮮鋭化処理を含む。補正部１６は、画像処理を施した後の信号を、出力映像信号として出力する。
【００４１】
以下で、各機能ブロックについて、詳細に説明する。
【００４２】
図２は、本実施の形態における文字領域検出部１２の詳細な機能ブロック図である。
【００４３】
図２に示されるように文字領域検出部１２は、ＨＰＦ（High-pass filter）部１２１と、文字レベル判定部１２２と、文字ブロック判定部１２３と、文字判定部１２４とを備える。
【００４４】
ＨＰＦ部１２１は、拡大部１１が出力した拡大映像信号を受信し、拡大映像信号のブロックごとにアンシャープマスク処理を施す。そして、ＨＰＦ部１２１は、アンシャープマスク処理の結果として、ブロックごとのＨＰＦ値を出力する。この処理について以下で具体的に説明する。
【００４５】
図３の（ａ）は、ＨＰＦ部１２１が受信する拡大映像信号の例（拡大映像信号３０１）である。以下では、図３の（ａ）を用いて文字領域検出部１２の処理を説明する。また、以下では、拡大映像信号３０１を水平方向にＭａｘＩブロックに、かつ、垂直方向にＭａｘＪブロックに分割して得られるブロックのそれぞれに対して処理を施す。例えば、（ＭａｘＩ，ＭａｘＪ）＝（３２，２４）のとき、ＦＨＤの拡大映像信号（１９２０×１０８０）は、水平方向に６０ブロックに、垂直方向に４５ブロックにそれぞれ分割される。また、例えば、（ＭａｘＩ，ＭａｘＪ）＝（２４０，１８０）のとき、ＦＨＤの拡大映像信号は、水平方向に８ブロックに、垂直方向に６ブロックにそれぞれ分割される。ブロックサイズが小さいほど、画像の中で文字が表示される領域を正確に判定することができる。なお、横方向に連続した複数のブロックの並びを列と記述し、縦方向に連続した複数のブロックの並びを行と記述することがある。また、横方向を列方向又は水平方向と、縦方向を行方向又は垂直方向と、それぞれ記述することがある。
【００４６】
まず、ＨＰＦ部１２１は、拡大映像信号３０１のブロックに対してＬＰＦ（Low-pass filter）値を算出する。ＬＰＦ値とは、当該ブロックの画素に対してＬＰＦを適用して得られる値であり、（式１）で表される。なお、ＬＰＦの係数については、例えば、ＬＰＦの全ての係数が１であるもの（図３の（ｂ））を用いればよい。ＬＰＦの係数は、上記のものに限られない。
【００４７】
【数１】
2014102876.tif 000031
【００４８】
次に、ＨＰＦ部１２１は、中心画素値Ｃ（ブロックの中央の画素の画素値）から、ＬＰＦ値を減算した後、絶対値をとることでＨＰＦ値を算出し（式２）、算出したＨＰＦ値を出力する。
【００４９】
【数２】
2014102876.tif 000032
【００５０】
文字レベル判定部１２２は、拡大部１１が出力した拡大映像信号３０１を受信し、拡大映像信号３０１のブロックごとに、当該ブロックの信号レベルの偏りに基づいて文字が存在していると推測される度合いであるレベル判定値を出力する。この処理について以下で具体的に説明する。
【００５１】
まず、文字レベル判定部１２２は、ブロックに含まれる画素値に基づいて、信号レベルごとの画素数を算出する（図４Ａ）。ここで、信号レベルとは、画素値の輝度、又は、画素値の所定の色成分などである信号値を、幅がある複数の段階に区分したものである。例えば、信号値として、０から２５５までの２５６段階で示される画素値の輝度を用いる場合、黒色の画素が信号値０に対応し、白色の画素が信号値２５５に対応する。また、信号レベルは、当該信号レベルに隣接する信号レベルとの間で重複するように設定してもよい。つまり、第一の信号レベルが信号値０から４までを含むものであるとし、第二の信号レベルが信号値２から６までを含むものであるとしてもよい。このようにすることで、文字色が厳密に単一でない場合、つまり、文字色に若干の幅があるものの概ね同一である場合にも、適切に文字を検出することができる。
【００５２】
次に、文字レベル判定部１２２は、信号レベルのそれぞれに属する画素の数を数え、信号レベルに対する画素数を示すヒストグラムを作成する。次に、文字レベル判定部１２２は、作成したヒストグラムに基づいて、閾値を超える画素数を有する信号レベルがあるか否かを判定し、ある場合にはレベル判定値として１を、ない場合にはレベル判定値として０を出力する。なお、閾値は、例えば、３００画素とする。
【００５３】
文字ブロック判定部１２３は、ＨＰＦ部１２１が出力したＨＰＦ値、及び、文字レベル判定部１２２が出力したレベル判定値を受信し、ブロックごとに、文字があるか否かを示す文字ブロック値を出力する。
【００５４】
具体的には、文字ブロック判定部１２３は、ＨＰＦ部１２１が出力したＨＰＦ値が閾値以上であるか否かの判定、及び、文字レベル判定部１２２が出力したレベル判定値が１であるか否かの判定を、ブロックごとに行う。その結果、ブロックごとに、ＨＰＦ値が閾値以上であり、かつ、レベル判定値が１である場合に文字ブロック値として１を、上記以外の場合に文字ブロック値として０を出力する。例えば、文字ブロック判定部１２３は、拡大映像信号３０１に対して図４Ｂに示される文字ブロック値４０１を出力する。図４Ｂにおいて、拡大映像信号３０１におけるブロックの位置に対応する位置に、当該ブロックの文字ブロック値が記載されている。拡大映像信号３０１において文字が存在しているブロックに対応する文字ブロック値が１となっている。
【００５５】
文字判定部１２４は、文字ブロック判定部１２３が出力した文字ブロック値を受信し、文字を含むブロックが隣接している度合いを算出し、文字判定率として出力する。この処理について以下で具体的に説明する。
【００５６】
具体的には、まず、文字判定部１２４は、拡大映像信号３０１のブロックごとに、当該ブロックを中心とする縦３ブロック×横３ブロックの合計９ブロックの文字ブロック値の総和Ｓを算出する。ここで、列方向で左からｉ番目であって、行方向で上からｊ番目のブロックの文字ブロック値をＭＢ（ｉ，ｊ）と表現する。
【００５７】
【数３】
2014102876.tif 000033
【００５８】
次に、文字判定部１２４は、文字ブロック値の総和Ｓに基づいて文字判定率を算出する。文字判定率は、総和Ｓに対する増加関数であり、総和Ｓが所定値以上のときに１となるものである。所定値は、１から９までの任意の値をとることができる。所定値を３とする場合の、総和Ｓに対する文字判定率の関係を図５の（ｂ）に示す。所定値を３とすれば、当該ブロックと、当該ブロックに隣接する２つ以上のブロックとの文字ブロック値が１であるときに、当該ブロックの文字判定率を１と算出することができる。このようにすれば、文字ブロック値４０１のように、文字ブロック値が１であるブロックが連なっている場合に、これらのブロックの文字判定率を１と算出することができる（図５の（ｃ））。また、例えば、文字ブロック値が１であるブロックに隣接する全てのブロックの文字ブロック値が０である場合に、当該ブロックの文字判定率を１／３（約０．３）と算出することができる（図５の（ｄ））。入力画像における文字は、列方向又は行方向に連なることが多いので、上記の文字判定率を用いることで、列方向又は行方向に連なった文字を検出することで、より適正に文字の存在を判定することができる。
【００５９】
なお、増加関数とは、任意のｘ及びｙに対して、ｘ＜ｙのときｆ（ｘ）≦ｆ（ｙ）が成立するような関数ｆ（ｘ）を意味する。また、後述される減少関数とは、任意のｘ及びｙに対して、ｘ＜ｙのときｆ（ｘ）≧ｆ（ｙ）が成立するような関数ｆ（ｘ）を意味する。
【００６０】
図６は、本実施の形態における文字サイズ検出部１３の詳細な機能ブロック図である。
【００６１】
図６に示されるように、文字サイズ検出部１３は、水平カウント部１３１と、垂直カウント部１３２と、最小選択部１３３とを備える。
【００６２】
水平カウント部１３１は、文字領域検出部１２の文字ブロック判定部が出力する文字ブロック値を受信し、ブロックごとの水平カウント値を算出し、出力する。具体的には、水平カウント部１３１は、各ブロックに着目し、当該ブロックと同一の行に属するブロックの文字ブロック値を数え、水平カウント値として出力する。例えば、水平カウント部１３１は、図７の（ａ）に示される文字ブロック値（文字ブロック値４０１と同一）に対して、図７の（ｂ）に示される水平カウント値を出力する。
【００６３】
垂直カウント部１３２は、文字領域検出部１２の文字ブロック判定部が出力する文字ブロック値を受信し、ブロックごとの垂直カウント値を算出し、出力する。具体的には、垂直カウント部１３２は、各ブロックに着目し、当該ブロックと同一の列に属するブロックの文字ブロック値を数え、垂直カウント値として出力する。例えば、垂直カウント部１３２は、図７の（ａ）に示される文字ブロック値（文字ブロック値４０１と同一）に対して、図７の（ｃ）に示される垂直カウント値を出力する。
【００６４】
最小選択部１３３は、水平カウント部１３１が出力する水平カウント値と、垂直カウント部１３２が出力する垂直カウント値とを受信し、各ブロックにおいて、水平カウント値と垂直カウント値とのうちの小さい方を選択し、小さい方の値を文字サイズとして出力する。例えば、最小選択部１３３は、図７の（ｂ）に示される水平カウント値と、図７の（ｃ）に示される垂直カウント値とに対して、図７の（ｄ）に示される文字サイズを出力する。
【００６５】
図８は、本実施の形態における輝度変動回数算出部１４の詳細な機能ブロック図である。
【００６６】
図８に示されるように、輝度変動回数算出部１４は、水平変動算出部１４１と、垂直変動算出部１４２と、最大選択部１４３とを備える。
【００６７】
水平変動算出部１４１は、拡大部１１が出力した拡大映像信号を受信し、画素単位に、水平方向の画素値の変動の大きさの度合いを示す水平変動値を出力する。水平変動算出部１４１についてさらに詳細に説明する。
【００６８】
図９は、水平変動算出部１４１の詳細な機能ブロック図である。図９に示されるように、水平変動算出部１４１は、水平輝度差算出部１４１１と、水平符号総和算出部１４１２と、水平絶対値総和算出部１４１３と、乗算器１４１４とを備える。
【００６９】
水平輝度差算出部１４１１は、拡大部１１が出力した拡大映像信号を受信し、画素単位に、水平方向の隣接画素との輝度差ＤＩＦＦを算出する。
【００７０】
水平符号総和算出部１４１２は、水平輝度差算出部１４１１が算出した輝度差ＤＩＦＦに基づいて水平符号総和を算出し、出力する。図９を用いて具体的に説明する。具体的には、水平符号総和算出部１４１２は、画素単位に、当該画素（図９の（ｃ）における着目画素）を含む所定の領域において、隣り合う画素の輝度差ＤＩＦＦの総和の絶対値ＤＨ，Ｓを算出する（式４）。なお、所定の領域とは、例えば、当該画素を中心とする水平方向に９画素、垂直方向に９画素の矩形領域である。なお、所定の領域は、上記の矩形領域に限られず、他の画素数を有する矩形領域であってもよいし、三角形、円形のようなその他の図形に含まれる領域であってもよい。また、当該画素を中心とする領域である必要もなく、当該画素を含む領域であればよい。
【００７１】
【数４】
2014102876.tif 000034
【００７２】
次に、水平符号総和算出部１４１２は、ＤＨ，Ｓに基づいて水平符号総和ＳＨ，Ｓを算出する。水平符号総和ＳＨ，Ｓは、ＤＨ，Ｓに対する減少関数であり、ＤＨ，Ｓが小さいときに１となり、ＤＨ，Ｓが大きいときに０となる関数である。水平符号総和ＳＨ，Ｓの具体例を、図９の（ａ）に示す。そして、水平符号総和算出部１４１２は、算出した水平符号総和ＳＨ，Ｓを出力する。
【００７３】
水平絶対値総和算出部１４１３は、水平輝度差算出部１４１１が算出した輝度差ＤＩＦＦに基づいて水平絶対値総和を算出し、出力する。具体的には、水平絶対値総和算出部１４１３は、画素単位に、当該画素を中心とする所定の範囲において、隣り合う画素の輝度差ＤＩＦＦの絶対値の総和ＤＨ，Ａを算出する（式５）。
【００７４】
【数５】
2014102876.tif 000035
【００７５】
次に、水平絶対値総和算出部１４１３は、ＤＨ，Ａに基づいて水平絶対値総和ＳＨ，Ａを算出する。水平絶対値総和ＳＨ，Ａは、ＤＨ，Ａに対する増加関数であり、ＤＨ，Ａが小さいときに０となり、ＤＨ，Ａが大きいときに１となる関数である。水平絶対値総和ＳＨ，Ａの具体例を、図９の（ｂ）に示す。そして、水平絶対値総和算出部１４１３は、算出した水平絶対値総和ＳＨ，Ａを出力する。
【００７６】
乗算器１４１４は、水平符号総和算出部１４１２が出力した水平符号総和と、水平絶対値総和算出部１４１３が出力した水平絶対値総和とを受信し、水平符号総和と水平絶対値総和との積を、水平変動値として出力する。この水平変動値が、水平変動算出部１４１の出力となる。
【００７７】
図８に戻り、垂直変動算出部１４２は、拡大部１１が出力した拡大映像信号を受信し、画素単位に、垂直方向の画素値の変動の大きさの度合いを示す垂直変動値を出力する。垂直変動算出部１４２についてさらに詳細に説明する。
【００７８】
図１０は、垂直変動算出部１４２の詳細な機能ブロック図である。図１０に示されるように、垂直変動算出部１４２は、垂直輝度差算出部１４２１と、垂直符号総和算出部１４２２と、垂直絶対値総和算出部１４２３と、乗算器１４２４とを備える。
【００７９】
垂直輝度差算出部１４２１は、拡大部１１が出力した拡大映像信号を受信し、画素単位に、垂直方向の隣接画素との輝度差ＤＩＦＦを算出する。
【００８０】
垂直符号総和算出部１４２２は、垂直輝度差算出部１４２１が算出した輝度差ＤＩＦＦに基づいて垂直符号総和を算出し、出力する。具体的な算出方法は、水平符号総和算出部１４１２が水平符号総和を算出した方法と同様であり、隣り合う画素の輝度差ＤＩＦＦの総和の絶対値ＤＶ，Ｓ（式６）に基づいて垂直符号総和ＳＶ，Ｓを算出する。
【００８１】
【数６】
2014102876.tif 000036
【００８２】
垂直絶対値総和算出部１４２３は、垂直輝度差算出部１４２１が算出した輝度差ＤＩＦＦに基づいて垂直絶対値総和を算出する。具体的な算出方法は、水平絶対値総和算出部１４１３が水平絶対値総和を算出した方法と同様であり、隣り合う画素の輝度差ＤＩＦＦの総和の絶対値ＤＶ，Ａ（式７）に基づいて垂直符号総和ＳＶ，Ａを算出する。
【００８３】
【数７】
2014102876.tif 000037
【００８４】
乗算器１４２４は、垂直符号総和算出部１４２２が出力した垂直符号総和と、垂直絶対値総和算出部１４２３が出力した垂直絶対値総和とを受信し、垂直符号総和と垂直絶対値総和との積を、垂直変動値として出力する。この垂直変動値が、垂直変動算出部１４２の出力となる。
【００８５】
図８に戻り、最大選択部１４３は、水平変動算出部１４１が出力した水平変動値と、垂直変動算出部１４２が出力した垂直変動値とを受信し、画素ごとに水平変動値と垂直変動値との大きい方法を、変動値として出力する。
【００８６】
図１１は、本実施の形態における補正ゲイン算出部１５の詳細な機能ブロック図である。図１１に示されるように、補正ゲイン算出部１５は、変動値ゲイン算出部１５１と、文字サイズゲイン算出部１５２と、文字判定率ゲイン算出部１５３と、解像度ゲイン算出部１５４と、ビットレートゲイン算出部１５５と、乗算器１５６とを備える。なお、文字判定率ゲイン算出部１５３と、乗算器１５６とは必須の構成要素である。また、変動値ゲイン算出部１５１と、文字サイズゲイン算出部１５２と、文字判定率ゲイン算出部１５３と、解像度ゲイン算出部１５４と、ビットレートゲイン算出部１５５とについては、これらのうち少なくとも１つがあればよい。
【００８７】
変動値ゲイン算出部１５１は、輝度変動回数算出部１４が出力した変動値を受信し、その変動値に基づいて変動値ゲインを算出し、出力する。具体的には、変動値ゲイン算出部１５１は、変動値が大きいほど、より小さな変動値ゲインを算出する。変動値ゲインは、０以上かつ１以下の値をとる。変動値に対する変動値ゲインの関数の例を図１２の（ａ）に示す。
【００８８】
上記のようにすることにより、入力映像信号の中で輝度変動が大きい部分に対して、画像処理の補正ゲインを小さくすることができる。輝度変動回数算出部１４が出力した変動値は、周辺の画素との輝度変化が大きい画素において大きな値をとる。このように輝度変化が大きい画素、及び、その周辺の部分では、圧縮ノイズによる劣化が大きい（文字の画像としての崩れが大きい）ことが知られている。このような部分に画像処理（鮮鋭化処理）を施すと、圧縮ノイズが目立ちやすくなったり、画像がさらに崩れたりする。よって、このような部分に施す画像処理の補正ゲインを小さくすることにより、圧縮ノイズが目立ちやすくなるのを防ぐことができる。
【００８９】
図１１に戻り、文字サイズゲイン算出部１５２は、文字サイズ検出部１３が出力した文字サイズを受信し、その文字サイズに基づいて文字サイズゲインを算出し、出力する。具体的には、文字サイズゲイン算出部１５２は、文字サイズが大きいほど、より大きな文字サイズゲインを算出する。文字サイズゲインは、０以上かつ１以下の値をとる。文字サイズに対する文字サイズゲインの関数の例を図１２の（ｂ）に示す。
【００９０】
上記のようにすることにより、入力映像信号の中で小さな文字を含む部分に対して、画像処理の補正ゲインを小さくすることができる。文字サイズ検出部１３が出力した文字サイズは、小さな文字を含むブロックにおいて小さな値をとる。このように小さなブロックを含む部分では、圧縮ノイズによる劣化が大きい（文字の画像としての崩れが大きい）ことが知られている。このような部分に画像処理（鮮鋭化処理）を施すと、圧縮ノイズが目立ちやすくなる。一方、大きな文字を含む部分は、入力映像信号の提供者が当該文字を強調することを意図していることが多い。また、大きな文字を含む部分は、画像処理（鮮鋭化処理）により適切に鮮鋭化されることが知られている。よって、小さな文字を含む部分に施す画像処理の補正ゲインを小さくすることにより、圧縮ノイズが目立ちやすくなるのを防ぐとともに、大きな文字を含む部分に施す画像処理の補正ゲインを大きくすることにより、大きな文字の視認性を向上することができる。
【００９１】
図１１に戻り、文字判定率ゲイン算出部１５３は、文字領域検出部１２が出力した文字判定率を受信し、その文字判定率に基づいて文字判定率ゲインを算出し、出力する。具体的には、文字判定率ゲイン算出部１５３は、文字判定率が小さいほど、より小さな文字判定率ゲインを算出する。文字判定率ゲインは、０以上かつ１以下の値をとる。文字判定率に対する文字判定率ゲインの関数の例を図１２の（ｃ）に示す。
【００９２】
上記のようにすることにより、入力映像信号の中で文字を含むと推定される部分に対して補正ゲインを大きくし、かつ、文字を含まないと推定される部分に対して補正ゲインを小さくすることができる。文字領域検出部１２が出力した文字判定率は、文字を含むと推定されるブロックにおいて大きな値をとり（例えば、図５の（ｃ）右図における１）、上記以外のブロックにおいて小さな値をとる（例えば、図５の（ｄ）右図における０．１）。文字を含む部分に施す画像処理の補正ゲインを大きくすることにより、文字の視認性を向上することができる。
【００９３】
図１１に戻り、解像度ゲイン算出部１５４は、入力映像信号の解像度を受信し、その解像度に基づいて解像度ゲインを算出し、出力する。具体的には、解像度ゲイン算出部１５４は、解像度が所定値より大きいほど、又は、解像度が所定値より小さいほど、より小さな解像度ゲインを算出する。言い換えれば、解像度ゲイン算出部１５４は、解像度と所定値との差分が大きいほど、より小さな解像度ゲインを算出する。解像度ゲインは、０以上かつ１以下の値をとる。解像度に対する解像度ゲインの関数の例を図１２の（ｄ）に示す。
【００９４】
上記のようにすることにより、所定値より大きい解像度を有する入力映像信号に対して補正ゲインを小さくすることができる。入力映像信号の解像度が大きいほど、拡大部１１による拡大処理の効果が小さい。所定値より大きい解像度を有する入力映像信号に対して行われる拡大処理により生ずる画像の歪は小さい（文字の画像としての崩れが小さい）ので、画像処理の補正ゲインを小さくする。また、上記のようにすることにより、所定値より小さい解像度を有する入力映像信号に対して補正ゲインを小さくすることができる。入力映像信号の解像度が小さいほど、拡大部１１による拡大処理の効果が大きい。所定値より小さい解像度を有する入力映像信号に対して行われる拡大処理により生ずる画像の歪は大きい（文字の画像としての崩れが大きい）。画像の歪が大きすぎる場合、文字の細かな構造が失われる（文字がつぶれる）。このような場合には、画像処理により文字の鮮鋭さを向上することが期待されないので、画像処理の補正ゲインを小さくする。
【００９５】
図１１に戻り、ビットレートゲイン算出部１５５は、入力映像信号のビットレートを受信し、そのビットレートに基づいてビットレートゲインを算出し、出力する。具体的には、ビットレートゲイン算出部１５５は、ビットレートが小さいほど、より小さなビットレートゲインを算出する。ビットレートゲインは、０以上かつ１以下の値をとる。ビットレートに対するビットレートゲインの関数の例を図１２の（ｅ）に示す。なお、入力映像信号が動画である場合、動画を構成するフレームごとにビットレートが異なる場合がある。その場合、処理対象のフレームのビットレートを用いればよい。
【００９６】
上記のようにすることにより、ビットレートの小さい入力映像信号に対する画像処理の補正ゲインを小さくすることができる。ビットレートの小さい入力映像信号は、当該入力信号が生成される際に発生する圧縮ノイズを多く含んでおり、大きく劣化している（文字の画像としての崩れが大きい）。よって、画像処理により鮮鋭さを向上することが期待されないので、画像処理の補正ゲインを小さくする。
【００９７】
図１１に戻り、乗算器１５６は、変動値ゲインと、文字サイズゲインと、文字判定率ゲインと、解像度ゲインと、ビットレートゲインとの積を、補正ゲインとして出力する。
【００９８】
図１３は、本実施の形態における補正部１６の詳細な機能ブロック図である。図１３に示されるように、補正部１６は、平滑化部１６１と、鮮鋭化部１６２とを備える。
【００９９】
平滑化部１６１は、拡大部１１が生成した拡大映像信号と、補正ゲイン算出部１５が算出した補正ゲインとを受信する。そして、平滑化部１６１は、拡大映像信号を平滑化することにより、平滑化映像信号を生成し、出力する。平滑化部１６１についてさらに詳細に説明する。
【０１００】
図１４は、平滑化部１６１の詳細な機能ブロック図である。図１４に示されるように、平滑化部１６１は、ＬＰＦ（Low-pass filter）部１６１１と、減算器１６１２と、乗算器１６１３と、加算器１６１４とを備える。
【０１０１】
ＬＰＦ（Low-pass filter）部１６１１は、拡大映像信号に対してＬＰＦを適用し、適用した結果得られた信号を出力する。
【０１０２】
減算器１６１２は、ＬＰＦ部が拡大映像信号に対してＬＰＦを適用して得られる信号から、拡大映像信号を減算し、減算した結果得られた信号を出力する。
【０１０３】
乗算器１６１３は、減算器１６１２が出力した信号と、補正ゲイン算出部１５が算出した補正ゲインとの積を算出し、出力する。
【０１０４】
加算器１６１４は、拡大映像信号と、乗算器１６１３が出力した信号とを加算して、平滑化映像信号として出力する。
【０１０５】
上記の構成により、平滑化部１６１は、補正ゲインが０のときには、拡大映像信号そのものを平滑化映像信号として出力する。また、平滑化部１６１は、補正ゲインが１のときには、拡大映像信号が平滑化された信号を平滑化映像信号として出力する。また、平滑化部１６１は、補正ゲインが０と１との間の値のときには、補正ゲインが大きいほどより強く平滑化された拡大映像信号を、平滑化映像信号として出力する。
【０１０６】
図１５は、鮮鋭化部１６２の詳細な機能ブロック図である。なお、図１５に示される処理は、アンシャープマスク処理の一例である。
【０１０７】
図１５に示されるように、鮮鋭化部１６２は、ＬＰＦ部１６２１と、減算器１６２２と、乗算器１６２３と、乗算器１６２４と、加算器１６２５とを備える。
【０１０８】
ＬＰＦ部１６２１は、平滑化映像信号Ａ（図１６の（Ａ））に対してＬＰＦを適用し、適用した結果得られた信号Ｂ（図１６の（Ｂ））を出力する。
【０１０９】
減算器１６２２は、ＬＰＦ部１６２１が出力した信号から、拡大映像信号を減算し、減算した結果得られた信号Ｃ（図１６の（Ｃ））を出力する。
【０１１０】
乗算器１６２３は、基準ゲインと、補正ゲインとの積を算出し、ゲインとして出力する。ここで、基準ゲインとは、鮮鋭化処理の強度（効果の大きさ）の基準となる数値である。つまり、基準ゲインが大きいほど、より強い（効果がより大きい）鮮鋭化処理が施される。基準ゲインは、あらかじめ設定された値であり、例えば、３としてよい。
【０１１１】
乗算器１６２４は、減算器１６２２が出力した信号と、ゲインとの積を算出し、出力する。
【０１１２】
加算器１６２５は、平滑化映像信号と、乗算器１６２４が出力した信号とを加算して、出力映像信号Ｄ（図１６の（Ｄ））として出力する。
【０１１３】
上記の構成により、鮮鋭化部１６２は、補正ゲインが０のときには、拡大映像信号そのものを出力映像信号として出力する。また、鮮鋭化部１６２は、補正ゲインが１のときには、基準ゲインで示される強さで拡大映像信号が鮮鋭化された信号を出力映像信号として出力する。また、鮮鋭化部１６２は、補正ゲインが０と１との間の値のときには、補正ゲインが大きいほどより強く鮮鋭化された拡大映像信号を、平滑化映像信号として出力する。つまり、補正ゲインは、鮮鋭化処理の強さの程度を、基準ゲインと０との間で調整する値として機能する。
【０１１４】
なお、上記において、補正ゲイン算出部１５において、入力映像信号の解像度に基づいて補正ゲインの算出を行う例を示したが、解像度の代わりに、拡大部１１の拡大処理における拡大率を用いることもできる。解像度と拡大率とは逆数の関係にある。解像度の代わりに拡大率を用いる場合、拡大率に係る補正ゲインの成分を拡大率ゲインとすれば、補正ゲイン算出部１５は、拡大率が所定値より大きいほど、又は、拡大率が所定値より小さいほど、より小さな拡大率ゲインを算出する。言い換えれば、補正ゲイン算出部１５は、拡大率と所定値との差分が大きいほど、より小さな拡大率ゲインを算出する。
【０１１５】
［１−２．動作］
以上のように構成された画像処理装置１について、その動作を以下に説明する。
【０１１６】
図１７は、実施の形態１における画像処理装置１のフローチャートである。以下で、画像処理装置１の動作及び処理について詳細に説明する。
【０１１７】
ステップＳ１７０１において、画像処理装置１は、入力映像信号を受信する。
【０１１８】
ステップＳ１７０２において、拡大部１１は、ステップＳ１７０１で画像処理装置が受信した入力映像信号に対して拡大処理を施す。なお、拡大部１１は必須の構成要素ではない。画像処理装置１が拡大部１１を備えない場合には、ステップＳ１７０２の処理は行われない。その場合、画像処理装置１は、拡大部１１と同等の機能を有する外部装置から、拡大映像信号を取得する。
【０１１９】
ステップＳ１７０３において、文字領域検出部１２は、拡大映像信号を受信し、拡大映像信号に含まれる文字領域を検出する。そして、文字ブロック値と、文字判定率とを算出し、出力する。
【０１２０】
ステップＳ１７０４において、文字サイズ検出部１３は、ステップＳ１７０３で文字領域検出部１２が出力した文字ブロック値を受信し、ブロックごとに当該ブロックが含む文字の文字サイズを判定する。そして、文字サイズ検出部１３は、各ブロックが含む文字サイズを出力する。
【０１２１】
ステップＳ１７０５において、輝度変動回数算出部１４は、ステップＳ１７０２で拡大部１１が出力した拡大映像信号を受信し、拡大映像信号における水平方向及び垂直方向の輝度変動回数を、変動値として算出する。そして、輝度変動回数算出部１４は、算出した変動値を出力する。なお、ステップＳ１７０５は、必ずしもステップＳ１７０４の後に実行されなくてもよく、ステップＳ１７０２の処理が完了した後であれば、実行可能である。
【０１２２】
ステップＳ１７０６において、補正ゲイン算出部１５は、ステップＳ１７０５で輝度変動回数算出部１４が出力した変動値と、ステップＳ１７０４で文字サイズ検出部１３が出力した文字サイズと、ステップＳ１７０３で文字領域検出部１２が出力した文字判定率と、ステップＳ１７０１で受信した入力映像信号の解像度及びビットレートとを受信し、各ブロックに対して補正部１６が行う画像処理の強さの程度（補正ゲイン）を算出する。
【０１２３】
ステップＳ１７０７において、補正部１６は、拡大映像信号に対して、補正ゲイン算出部１５が算出した補正ゲインに基づいて、拡大映像信号を構成するブロックのそれぞれに対する画像処理を施す。ここで、拡大映像信号は、ステップＳ１７０２で拡大部１１が入力映像信号を拡大することにより生成したものである。また、拡大映像信号は、画像処理装置１が拡大部１１を備えない場合には、外部装置から取得したものである。
【０１２４】
ステップＳ１７０８において、画像処理装置１は、ステップＳ１７０７で補正部１６が出力した出力映像信号を出力する。
【０１２５】
［１−３．効果］
以上のように、本実施の形態にかかる画像処理装置は、画像処理装置は、入力画像の中の文字領域に対して、鮮鋭さを高める画像処理であって特徴量に応じた強さの画像処理（特徴量に応じた効果を有する画像処理）を施すことができる。特徴量は、入力画像に施された拡大処理による文字領域内の画像の崩れの度合いを示す量であるので、画像処理装置は、特徴量に基づいて画像処理を行うことにより、適正に画像の崩れを補正することができる。よって、画像処理装置は、画像内の文字の鮮鋭さを高めることができる。
【０１２６】
また、画像処理装置は、入力画像の中で小さな文字を含む部分には、効果が小さい画像処理を施すことができる。入力画像の中で小さな文字を含む部分の画像は、拡大処理により発生した画像の崩れが大きいために、画像処理による補正により拡大前の画像に復元できなくなっている場合がある。その場合に、効果が大きい画像処理を施すと、拡大前の画像に復元できないだけでなく、画像の崩れをさらに進める可能性がある。その場合には、効果が小さい画像処理を施すことにより、画像処理により発生する画像の崩れを未然に防ぐことができる。
【０１２７】
また、画像処理装置は、入力画像の中でも所定方向に画素をスキャンした場合に輝度の変動回数が大きい部分には、効果が小さい画像処理を施すことができる。輝度の変動回数が大きい部分は、小さな文字を含む部分、または、字画（画数）が多いなど複雑な形状を有する文字を含む部分に相当する。このような部分は、拡大処理により発生した画像の崩れが大きいために、画像処理による補正により拡大前の画像に復元できなくなっている場合がある。その場合に、効果が大きい画像処理を施すと、拡大前の画像に復元できないだけでなく、画像の崩れをさらに進める可能性がある。その場合には、効果が小さい画像処理を施すことにより、画像処理により発生する画像の崩れを未然に防ぐことができる。
【０１２８】
また、画像処理装置は、解像度が低い入力画像の文字領域に対して、効果が小さい画像処理を施すことができる。解像度が低い入力画像は、拡大処理により発生した画像の崩れが大きいために、画像処理による補正により拡大前の画像に復元できなくなっている場合がある。その場合に、効果が大きい画像処理を施すと、拡大前の画像に復元できないだけでなく、画像の崩れをさらに進める可能性がある。その場合には、効果が小さい画像処理を施すことにより、画像処理により発生する画像の崩れを未然に防ぐことができる。また、解像度が高い入力画像には、拡大率が小さい拡大処理が施される。拡大率が小さい拡大処理により発生する画像の崩れは小さいので、効果が小さい画像処理を施すことにより適正に画像の崩れを補正することができる。
【０１２９】
また、画像処理装置は、ビットレートが低い入力画像の文字領域に対して、効果が小さい画像処理を施すことができる。ビットレートが低い入力画像は、圧縮による歪を多く含んでいるので、画像処理による補正により拡大前の画像に復元できなくなっている場合がある。その場合に、効果が大きい画像処理を施すと、拡大前の画像に復元できないだけでなく、画像の崩れをさらに進める可能性がある。その場合には、効果が小さい画像処理を施すことにより、画像処理により発生する画像の崩れを未然に防ぐことができる。
【０１３０】
また、画像処理装置は、入力画像に対して鮮鋭化処理を施すことにより、画像の崩れを補正することができる。
【０１３１】
また、画像処理装置は、入力画像のノイズを除去することにより、画像の崩れを補正することができる。
【０１３２】
また、画像処理装置は、比較的解像度が低い入力画像を受信し、受信した入力画像に対して拡大処理と鮮鋭さを高める画像処理を施し、画像処理が施された入力画像を出力することができる。
【０１３３】
（実施の形態２）
以下、図１８Ａを用いて、実施の形態２を説明する。実施の形態１にかかる画像処理装置１は、文字領域検出部１２及び輝度変動回数算出部１４は、拡大映像信号に基づいて処理を実行したが、本実施の形態では、上記に相当する機能ブロックが入力映像信号に基づいて処理を実行する画像処理装置の例を説明する。
【０１３４】
［２−１．構成］
図１８Ａは、本実施の形態における画像処理装置２の機能ブロック図である。図１８Ａに示されるように、本実施の形態における画像処理装置２は、文字領域検出部１２Ａと、輝度変動回数算出部１４Ａとを備える。その他の機能ブロックは、実施の形態１にかかる画像処理装置１と同様であるので詳細な説明を省略する。
【０１３５】
文字領域検出部１２Ａは、画像処理装置２が受信した入力映像信号を受信し、入力映像信号に含まれる文字領域を検出する。具体的には、文字領域検出部１２Ａは、入力映像信号を構成するブロックごとに当該ブロックが文字を含んでいるか否かを判定する。この判定の結果、文字を含むブロックか否かをブロックごとに示す文字ブロック値と、文字ブロック値を隣接ブロックとの関係を考慮して平均化した値である文字判定率とを算出し、出力する。
【０１３６】
輝度変動回数算出部１４Ａは、画像処理装置２が受信した入力映像信号を受信し、入力映像信号における水平方向及び垂直方向の輝度変動回数を、変動値として算出する。そして、輝度変動回数算出部１４Ａは、算出した変動値を出力する。
【０１３７】
［２−２．動作］
以上のように構成された画像処理装置２について、その動作を以下に説明する。
【０１３８】
なお、画像処理装置２の動作は、画像処理装置１の動作におけるステップＳ１７０３及びステップ１７０５が、それぞれ、対応する処理ステップであるステップＳ１７０３Ａ及びステップ１７０５Ａに置き換わる。ステップＳ１７０３Ａ及びステップ１７０５Ａについて以下で説明する。
【０１３９】
ステップＳ１７０３Ａは、画像処理装置１のステップＳ１７０３に対応する処理ステップである。ステップＳ１７０３Ａにおいて、文字領域検出部１２Ａは、入力映像信号を受信し、入力映像信号に含まれる文字領域を検出する。そして、文字ブロック値と、文字判定率とを算出し、出力する。
【０１４０】
ステップＳ１７０５Ａは、画像処理装置１のステップＳ１７０５に対応する処理ステップである。ステップＳ１７０５Ａは、輝度変動回数算出部１４Ａは、ステップＳ１７０２で入力映像信号を受信し、入力映像信号における水平方向及び垂直方向の輝度変動回数を、変動値として算出する。そして、輝度変動回数算出部１４Ａは、算出した変動値を出力する。なお、ステップＳ１７０５Ａは、必ずしもステップＳ１７０４の後に実行されなくてもよく、ステップＳ１７０２の処理が完了した後であれば、実行可能である。
【０１４１】
［２−３．効果］
このようにすることで、入力映像信号に基づいて補正ゲイン算出部１５が補正ゲインを算出し、算出した補正ゲインに基づいて補正部１６が拡大映像信号に対して画像処理を行うことができる。拡大部１１による拡大処理により、入力映像信号と拡大映像信号との間には、解像度の違いだけではなく、画素補間により画素値の違い（ぼやけ）が生ずる場合がある。このような場合に、入力映像信号から算出した補正ゲインに基づいて画像処理を行うことにより、より適正に文字の鮮鋭さを高めることができる。
【０１４２】
（実施の形態２の変形例）
以下、図１８Ｂを用いて、実施の形態２の変形例を説明する。本変形例にかかる画像処理装置３は、実施の形態１又は実施の形態２の必須の構成要素を示すものである。
【０１４３】
［３−１．構成］
図１８Ｂは、本変形例における画像処理装置３の機能ブロック図である。図１８Ｂに示されるように、本変形例における画像処理装置３は、文字領域検出部３２と、特徴量検出部３３と、補正ゲイン算出部３４と、補正部３５とを備える。
【０１４４】
文字領域検出部３２は、入力画像から、文字を含む領域である文字領域を検出する。なお、文字領域検出部３２は、文字領域検出部１２に相当する。
【０１４５】
特徴量検出部３３は、文字領域検出部３２が検出した文字領域内の画像の崩れの度合いを示す特徴量を検出する。なお、特徴量検出部３３は、文字サイズ検出部１３又は輝度変動回数算出部１４に相当する。
【０１４６】
補正ゲイン算出部３４は、特徴量検出部３３が検出した特徴量に基づいて、文字領域検出部３２が検出した文字領域に対する補正ゲインを算出する。なお、補正ゲイン算出部３４は、補正ゲイン算出部１５に相当する。
【０１４７】
補正部３５は、補正ゲイン算出部３４が算出した補正ゲインが小さいほど、文字領域内の画像に対してより効果が小さい画像処理を施すことにより、入力信号に補正を行う。なお、補正部３５は、補正部１６に相当する。
【０１４８】
［３−２．効果］
本変形例における画像処理装置３によれば、実施の形態１又は実施の形態２と同様の効果を奏する。
【０１４９】
（他の実施の形態）
以上のように、本出願において開示する技術の例示として、各実施の形態を説明した。
【０１５０】
各実施の形態における画像処理装置は、例えば、テレビ（図１９）、映像記録装置、セットトップボックス、ＰＣ（Personal computer）などに搭載される。
【０１５１】
本開示における技術は、これに限定されず、適宜、変更、置き換え、付加、省略などを行った実施の形態にも適用可能である。また、上記実施の形態１及び２で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。
【０１５２】
以上のように、本開示における技術の例示として、実施の形態を説明した。そのために、添付図面および詳細な説明を提供した。
【０１５３】
したがって、添付図面および詳細な説明に記載された構成要素の中には、課題解決のために必須な構成要素だけでなく、上記実装を例示するために、課題解決のためには必須でない構成要素も含まれ得る。そのため、それらの必須ではない構成要素が添付図面や詳細な説明に記載されていることをもって、直ちに、それらの必須ではない構成要素が必須であるとの認定をするべきではない。
【０１５４】
また、上述の実施の形態は、本開示における技術を例示するためのものであるから、請求の範囲またはその均等の範囲において種々の変更、置き換え、付加、省略などを行うことができる。
【産業上の利用可能性】
【０１５５】
本開示は、比較的解像度が小さい入力映像信号を受信し、入力映像信号より解像度が高い出力映像信号を出力する画像処理装置に適用可能である。具体的には、テレビ、映像記録装置、セットトップボックス、ＰＣ（Personal computer）などに、本開示は適用可能である。
【符号の説明】
【０１５６】
１、２、３    画像処理装置
１１    拡大部
１２、１２Ａ、３２    文字領域検出部
１３    文字サイズ検出部
１４、１４Ａ    輝度変動回数算出部
１５、３４    補正ゲイン算出部
１６、３５    補正部
３３    特徴量検出部
１２１    ＨＰＦ部
１２２    文字レベル判定部
１２３    文字ブロック判定部
１２４    文字判定部
１３１    水平カウント部
１３２    垂直カウント部
１３３    最小選択部
１４１    水平変動算出部
１４２    垂直変動算出部
１４３    最大選択部
１５１    変動値ゲイン算出部
１５２    文字サイズゲイン算出部
１５３    文字判定率ゲイン算出部
１５４    解像度ゲイン算出部
１５５    ビットレートゲイン算出部
１５６、１４１４、１４２４、１６１３、１６２３、１６２４    乗算器
１６１    平滑化部
１６２    鮮鋭化部
３０１    拡大映像信号
４０１    文字ブロック値
１４１１    水平輝度差算出部
１４１２    水平符号総和算出部
１４１３    水平絶対値総和算出部
１４２１    垂直輝度差算出部
１４２２    垂直符号総和算出部
１４２３    垂直絶対値総和算出部
１６１１、１６２１    ＬＰＦ部
１６１２、１６２２    減算器
１６１４、１６２５    加算器
【手続補正２】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
入力画像から、文字を含む領域である文字領域を検出する文字領域検出部と、
前記文字領域検出部が検出した前記文字領域内の画像の崩れの度合いを示す特徴量を検出する特徴量検出部と、
前記特徴量検出部が検出した前記特徴量に基づいて補正ゲインを算出する補正ゲイン算出部と、
前記補正ゲイン算出部が算出した前記補正ゲインが小さいほど、前記文字領域内の画像に対して効果がより小さい画像処理を施すことにより、前記入力画像に補正を行う補正部とを備える
画像処理装置。
【請求項２】
前記特徴量検出部は、
前記文字領域の文字の大きさである文字サイズを前記特徴量として検出する文字サイズ検出部を有し、
前記補正ゲイン算出部は、
前記文字サイズ検出部が検出した前記文字サイズが小さいほど、より小さな前記補正ゲインを算出する
請求項１に記載の画像処理装置。
【請求項３】
前記特徴量検出部は、
前記文字領域内の画像において、輝度の変動回数を前記特徴量として検出する輝度変動検出部を有し、
前記補正ゲイン算出部は、
前記輝度変動検出部が検出した前記変動回数が大きいほど、より小さな前記補正ゲインを算出する
請求項１又は２に記載の画像処理装置。
【請求項４】
前記特徴量検出部は、
前記入力画像の解像度を前記特徴量として検出し、
前記補正ゲイン算出部は、
前記解像度と所定値との差分が大きいほど、より小さな前記補正ゲインを算出する
請求項１〜３のいずれか１項に記載の画像処理装置。
【請求項５】
前記特徴量検出部は、
前記入力画像のビットレートを前記特徴量として検出し、
前記補正ゲイン算出部は、
前記ビットレートが小さいほど、より小さな前記補正ゲインを算出する
請求項１〜４のいずれか１項に記載の画像処理装置。
【請求項６】
前記補正部は、
前記画像処理として鮮鋭化処理を施すことにより、前記補正を行う
請求項１〜５のいずれか１項に記載の画像処理装置。
【請求項７】
前記補正部は、
前記画像処理としてノイズ除去処理を施すことにより、前記補正を行う
請求項１〜５のいずれか１項に記載の画像処理装置。
【請求項８】
前記画像処理装置は、さらに、
前記入力画像に対して、解像度を上げる処理である拡大処理を施す拡大部を備え、
前記文字領域検出部は、前記拡大部が前記拡大処理を施した後の前記入力画像から前記文字領域を検出する
請求項１〜７のいずれか１項に記載の画像処理装置。
【請求項９】
入力画像から、文字を含む領域である文字領域を検出する文字領域検出ステップと、
前記文字領域検出ステップで検出した前記文字領域内の画像の崩れの度合いを示す特徴量を検出する特徴量検出ステップと、
前記特徴量検出ステップで検出した前記特徴量に基づいて補正ゲインを算出する補正ゲイン算出ステップと、
前記補正ゲイン算出ステップで算出した前記補正ゲインが小さいほど、前記文字領域内の画像に対して効果がより小さい画像処理を施すことにより、前記入力画像に補正を行う補正ステップとを含む
画像処理方法。
【手続補正３】
【補正対象書類名】図面
【補正対象項目名】全図
【補正方法】変更
【補正の内容】
【図１】
2014102876.tif 000038
【図２】
2014102876.tif 000039
【図３】
2014102876.tif 000040
【図４Ａ】
2014102876.tif 000041
【図４Ｂ】
2014102876.tif 000042
【図５】
2014102876.tif 000043
【図６】
2014102876.tif 000044
【図７】
2014102876.tif 000045
【図８】
2014102876.tif 000046
【図９】
2014102876.tif 000047
【図１０】
2014102876.tif 000048
【図１１】
2014102876.tif 000049
【図１２】
2014102876.tif 000050
【図１３】
2014102876.tif 000051
【図１４】
2014102876.tif 000052
【図１５】
2014102876.tif 000053
【図１６】
2014102876.tif 000054
【図１７】
2014102876.tif 000055
【図１８Ａ】
2014102876.tif 000056
【図１８Ｂ】
2014102876.tif 000057
【図１９】
2014102876.tif 000058
【国際調査報告】
2014102876.tif 000059
2014102876.tif 000060
2014102876.tif 000061
2014102876.tif 000062