(57)【要約】【課題】超解像度処理と動画改善処理で行われる補正処理を制御して適切に画像調整ができる画像処理装置、画像処理方法を提供する。【解決手段】第１解像度の映像信号が入力され、第１の映像信号から本来の画素値を推定して画素を増やすことにより、第１解像度よりも高い第２解像度の映像信号を復元する超解像度変換処理を行い、超解像度変換処理された第２解像度の映像信号を補正する第１の補正処理を行う高解像度化手段と、超解像度変換処理の実行後に、第１の補正処理と同種の補正機能を含む場合には、同種の補正機能を実行せずに超解像度変換処理された第１の補正処理が施された第２解像度の映像信号を補正する第２の補正処理を行う動画改善処理手段と、を備える。【選択図】        図１
2010041338.tif 000002
【特許請求の範囲】
【請求項１】
第１解像度の映像信号が入力され、前記第１の映像信号から本来の画素値を推定して画素を増やすことにより、前記第１解像度よりも高い第２解像度の映像信号を復元する超解像度変換処理を行い、前記超解像度変換処理された前記第２解像度の映像信号を補正する第１の補正処理を行う高解像度化手段と、
前記超解像度変換処理の実行後に、前記第１の補正処理と同種の補正機能を含む場合には、前記同種の補正機能を実行せずに前記超解像度変換処理された前記第１の補正処理が施された前記第２解像度の映像信号を補正する第２の補正処理を行う動画改善処理手段と、
を備えることを特徴とする画像処理装置。
【請求項２】
前記第１の補正処理と前記第２の補正処理とが同種の機能を含む場合には、前記第１の補正処理に含まれる前記同種の機能を実行させないように前記高解像度化手段を制御する制御手段、
をさらに備えることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記制御手段は、さらに、前記第２の補正処理が無効となっているか否かを判定し、前記第２の補正処理が無効であると判定した場合には、前記第１の補正処理に含まれる前記同種の機能を実行させるように前記高解像度化手段を制御する、
ことを特徴とする請求項１または２に記載の画像処理装置。
【請求項４】
前記第１の補正処理および前記第２の補正処理に含まれる前記機能の一覧を記憶する記憶手段をさらに備え、
前記機能判定手段は、前記記憶手段に記憶された前記機能の一覧に含まれる前記第１の補正処理の機能と前記第２の補正処理の機能とを比較して前記同種の機能の有無を判定する、
ことを特徴とする請求項１〜３のいずれか１項に記載の画像処理装置。
【請求項５】
前記第１の補正処理および前記第２の補正処理には、ホワイトバランス調整機能またはガンマ補正機能を含む、
ことを特徴とする請求項１〜４のいずれか１項に記載の画像処理装置。
【請求項６】
前記超解像度変換処理を行った前記第２解像度の映像信号を表示する表示手段、
をさらに備えたことを特徴とする請求項１〜５のいずれか１項に記載の画像処理装置。
【請求項７】
第１解像度の映像信号を、超解像度技術を用いて第２解像度の映像信号に高解像度化する超解像度変換処理を行い、前記超解像度変換処理された前記第２解像度の映像信号を補正する第１の補正処理を行う高解像度化手段と、
前記超解像度変換処理の実行後に、前記第１の補正処理と同種の補正機能を含む場合には、前記同種の補正機能を実行せずに前記超解像度変換処理された前記第１の補正処理が施された前記第２解像度の映像信号を補正する第２の補正処理を行う動画改善処理手段と、
を備えることを特徴とする画像処理装置。
【請求項８】
高解像度化手段が、第１解像度の映像信号が入力され、前記第１の映像信号から本来の画素値を推定して画素を増やすことにより、前記第１解像度よりも高い第２解像度の映像信号を復元する超解像度変換処理を行い、前記超解像度変換処理された前記第２解像度の映像信号を補正する第１の補正処理を行う高解像度化ステップと、
動画改善処理手段が、前記超解像度変換処理の実行後に、前記第１の補正処理と同種の補正機能を含む場合には、前記同種の補正機能を実行せずに前記超解像度変換処理された前記第１の補正処理が施された前記第２解像度の映像信号を補正する第２の補正処理を行う動画改善処理ステップと、
を含むことを特徴とする画像処理方法。
【請求項９】
第１解像度の映像信号が入力され、前記第１の映像信号から本来の画素値を推定して画素を増やすことにより、前記第１解像度よりも高い第２解像度である第２の映像信号を復元する超解像度変換処理を行う超解像度変換処理部と、前記第１の映像信号または前記第２の映像信号に対して補正処理を行う第１の補正処理部とを有する高解像度化手段と、
前記第２の映像信号が入力され、前記第２の映像信号に対して動画改善処理を行う動画改善処理部と、前記第２の映像信号に対して補正処理を行う第２の補正処理部とを有する動画改善処理手段と、を備え、
前記第１の補正処理部と前記第２の補正処理部とが同種の補正機能を有し、かつ、前記第１の補正処理部では前記同種の補正機能が実行されず、前記第２の補正処理部では前記同種の補正機能を含めて補正処理が実行されるように構成されていることを特徴とする画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像を高解像度化する技術に関し、特に、高解像度化された映像に補正処理を行う画像処理装置、画像処理方法に関するものである。
【背景技術】
【０００２】
従来から、映像表示装置としてテレビジョン受像機が存在する。このテレビジョン受像機では、ＳＤ（Standard  Definition）基準からＨＤ(High  Definition)基準の高解像度の画像に変換する高解像度化処理、あるいは動きのある映像をなめらかに表示するための倍速処理、すなわち動画改善処理が施される。そして、これらの各処理では、さらに画質をより向上させるために、高解像度化あるいは動画改善処理された画像に対して、ホワイトバランス調整やガンマ補正等の種の補正処理が行われる。
【０００３】
上述したような高解像度処理や動画改善処理で行われる補正処理には種々の手法が開示されている(例えば、特許文献１、特許文献２、特許文献３)。
【０００４】
【特許文献１】特開２００２−２３０５７４号公報
【特許文献２】特開平１０−１９１２０８号公報
【特許文献２】特開２００６−２７９２６２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
従来、上述したような超解像度技術による高解像度処理と倍速処理とを備えたテレビジョン受像機は存在しなかった。従って、高解像度処理と動画改善処理のそれぞれにおいて、上述した補正処理を行っても、互いの処理の結果によって画像に不具合が生じるという問題はなかった。
【０００６】
具体的には、１つのテレビジョン受像機で超解像度処理と動画改善処理を行う場合、例えば、超解像度処理でホワイトバランス調整を行った後、動画改善処理を行うと、本来ダイナミックレンジ内で適正にホワイトバランス調整できていたにもかかわらず、ある閾値を超えた範囲Ｒの画素をホワイトバランス調整すると、高輝度の場合の画素値がダイナミックレンジの最大値を超えてしまい、いわゆる「白つぶれ」という現象が生じてしまうという問題があった。すなわち、超解像度処理と動画改善処理の双方の処理を１つのテレビジョン受像機で行う場合であって、超解像度処理と動画改善処理に同種の補正処理を行う機能がある場合、超解像度処理で補正処理をした場合には、動画改善処理で処理する画像に不具合が生じてしまうという問題があった。
【０００７】
本発明は、上記に鑑みてなされたものであって、超解像度処理と動画改善処理を行うテレビジョン受像機において、超解像度処理で行われる補正処理と動画改善処理で行われる補正処理を制御して適切に画像調整ができる画像処理装置、画像処理方法を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上述した課題を解決し、目的を達成するために、本発明に係る画像処理装置は、第１解像度の映像信号が入力され、前記第１の映像信号から本来の画素値を推定して画素を増やすことにより、前記第１解像度よりも高い第２解像度の映像信号を復元する超解像度変換処理を行い、前記超解像度変換処理された前記第２解像度の映像信号を補正する第１の補正処理を行う高解像度化手段と、前記超解像度変換処理の実行後に、前記第１の補正処理と同種の補正機能を含む場合には、前記同種の補正機能を実行せずに前記超解像度変換処理された前記第１の補正処理が施された前記第２解像度の映像信号を補正する第２の補正処理を行う動画改善処理手段と、を備えることを特徴とする。
【０００９】
また、本発明に係る画像処理装置は、第１解像度の映像信号を、超解像度技術を用いて第２解像度の映像信号に高解像度化する超解像度変換処理を行い、前記超解像度変換処理された前記第２解像度の映像信号を補正する第１の補正処理を行う高解像度化手段と、前記超解像度変換処理の実行後に、前記第１の補正処理と同種の補正機能を含む場合には、前記同種の補正機能を実行せずに前記超解像度変換処理された前記第１の補正処理が施された前記第２解像度の映像信号を補正する第２の補正処理を行う動画改善処理手段と、を備えることを特徴とする。
【００１０】
また、本発明に係る画像処理方法は、高解像度化手段が、第１解像度の映像信号が入力され、前記第１の映像信号から本来の画素値を推定して画素を増やすことにより、前記第１解像度よりも高い第２解像度の映像信号を復元する超解像度変換処理を行い、前記超解像度変換処理された前記第２解像度の映像信号を補正する第１の補正処理を行う高解像度化ステップと、動画改善処理手段が、前記超解像度変換処理の実行後に、前記第１の補正処理と同種の補正機能を含む場合には、前記同種の補正機能を実行せずに前記超解像度変換処理された前記第１の補正処理が施された前記第２解像度の映像信号を補正する第２の補正処理を行う動画改善処理ステップと、を含むことを特徴とする。
【００１１】
また、本発明に係る画像処理装置は、第１解像度の映像信号が入力され、前記第１の映像信号から本来の画素値を推定して画素を増やすことにより、前記第１解像度よりも高い第２解像度である第２の映像信号を復元する超解像度変換処理を行う超解像度変換処理部と、前記第１の映像信号または前記第２の映像信号に対して補正処理を行う第１の補正処理部とを有する高解像度化手段と、前記第２の映像信号が入力され、前記第２の映像信号に対して動画改善処理を行う動画改善処理部と、前記第２の映像信号に対して補正処理を行う第２の補正処理部とを有する動画改善処理手段と、を備え、前記第１の補正処理部と前記第２の補正処理部とが同種の補正機能を有し、かつ、前記第１の補正処理部では前記同種の補正機能が実行されず、前記第２の補正処理部では前記同種の補正機能を含めて補正処理が実行されるように構成されていることを特徴とする。
【発明の効果】
【００１２】
本発明によれば、超解像度処理と動画改善処理に同種の機能の補正処理があるか否かを判定し、超解像度処理と動画改善処理との間で同種の機能の補正処理が存在する場合には、超解像度処理の補正処理を実行しないように構成されるので、適切な画像調整ができるという効果を奏する。
【発明を実施するための最良の形態】
【００１３】
以下に添付図面を参照して、この発明にかかる画像処理装置および画像処理方法の最良な実施の形態を詳細に説明する。
【００１４】
（第１の実施の形態）
図１は、本実施形態に係る画像表示装置１００のシステムを概略的に示したブロック図である。同図に示したように、画像表示装置１００は、映像信号入力部１１と、メイン処理部１２と、画像処理装置に対応する高解像度化部１３と、動画改善処理部１４と、表示処理部１５と、表示部１６と、音声処理部１７と、音声出力部１８と、フラッシュメモリ１９と、ＥＥＰＲＯＭメモリ２０と、ＥＥＰＲＯＭメモリ２１とを備えている。
【００１５】
映像信号入力部１１は、表示の対象となる映像信号が入力される部位であって、デジタル放送受信部１１１と、ＩＰＴＶ信号処理部１１２と、インターネット等のＩＰ網を介して送信されるデータを受信するインターネット信号処理部１１３と、アナログ信号の入力を受け付ける外部入力部１１４とを備えている。ここで「映像信号」とは、静止画像や動画像からなる画像信号の他、音声信号をも含む概念である。
【００１６】
デジタル放送受信部１１１は、ＢＳ、ＣＳ、地上波等のデジタル放送を受信するためのデジタルアンテナ１１１１と、デジタル放送を選局するためのデジタルチューナ１１１２と、デジタル放送を復調しデジタルの映像信号としてメイン処理部１２に出力するデジタル信号復調部１１１３とを有している。
【００１７】
ＩＰＴＶ信号処理部１１２は、専用のＩＰ網を介して送信されるＩＰ放送を受信し、デジタルの映像信号としてメイン処理部１２に出力する。
【００１８】
インターネット信号処理部１１３は、インターネット等のＩＰ網を介して送信されるデータ（静止画像や動画像）を受信し、デジタルの映像信号としてメイン処理部１２に出力する。
【００１９】
外部入力部１１４は、アナログ放送を受信するためのアナログアンテナ１１４１と、アナログ放送を選局するためのアナログチューナ１１４２と、アナログ信号にＡ／Ｄ変換等の信号処理を施し、デジタルの映像信号としてメイン処理部１２に出力する外部入力信号処理部１１４３とを有している。なお、外部入力信号処理部１１４３は、ゲーム機やＰＣ（Personal  Computer）、ＤＶＤ（Digital  Versatile  Disk）プレーヤ等の外部機器と接続するための端子を有し（図示せず）、当該入力端子を介して外部機器から入力されるアナログ信号に対しても信号処理を施すものとする。
【００２０】
図２は、メイン処理部１２の機能的構成を示すブロック図である。図２に示すように、メイン処理部１２は、機能判定部１２１と、制御部１２２と、フラッシュメモリ１９とを有している。
【００２１】
機能判定部１２１は、映像信号入力部１１が映像信号を受信すると、あらかじめフラッシュメモリ１９に記憶された、高解像度化部１３および動画改善処理部１４で行うホワイトバランス調整処理やガンマ補正処理等の補正処理（以下、単に補正処理と呼ぶ。）を対応付けたテーブル（以下、機能対応表と呼ぶ。）を参照して、高解像度化部１３または動画改善処理部１４に同じ種類の補正処理の補正処理が在るか否かを判定する。なお、以下の説明では、補正処理としてホワイトバランス調整処理やガンマ補正処理を例に記載しているが、例えば、階調補正やコントラスト伸張等の一般的な各種の補正処理を行うこととしても良い。
【００２２】
図３は、上述した機能対応表がフラッシュメモリ１９に記憶されている状態を示す図である。図３に示すように、機能対応表には、補正処理の種類と、その補正処理を行う処理部（高解像度化部１３および動画改善処理部１４）とが対応付けて記憶されている。図３に示す例では、高解像度化部１３では、ガンマ補正処理およびホワイトバランス調整処理の両方の処理を行うことが可能であるのに対し、動画改善処理部１４はホワイトバランス調整処理のみ可能であることを示している。
【００２３】
なお、上述した例では、高解像度化部１３および動画改善処理部１４が行う補正処理を、機能対応表に記憶しているが、例えば、ホワイトバランス調整処理には対応しているものの、そのホワイトバランス調整処理が無効（ＯＦＦ）に設定されている場合、あるいは動画改善処理部１４全体の機能が無効（ＯＦＦ）に設定されている場合等、機能判定部１２１が、動画改善処理部１４等の各処理部、各処理部の補正処理の有効性を判定することによって、同種の補正処理の有無を判定することとしてもよい。
【００２４】
図２に戻り、機能判定部１２１は、高解像度化部１３および動画改善処理部１４に同じ種類の補正処理があると判定した場合には、映像信号入力部１１から受信した映像信号を出力するとともに、その補正処理を示す識別信号を制御部１２２に出力する。一方、高解像度化部１３および動画改善処理部１４に同種の補正処理がないと判定した場合には、映像信号のみを制御部１２２に出力する。なお、同種の補正処理がないと判定した場合には、その旨を示す識別信号を制御部１２２に出力してもよい。
【００２５】
制御部１２２は、機能判定部１２１が出力した映像信号を画像信号と音声信号とに分離し、所定の画像処理を施した画像信号を高解像度化部１３に出力するとともに、音声信号を音声処理部１７に出力する。また、画像信号を出力すると共に、機能判定部１２１から受け取った同種の補正処理を示す識別信号を受け取った場合には、その識別信号を後述する高解像度化部１３に送信する。
【００２６】
ここで、制御部１２２が施す画像処理としては、入力された画像信号の解像度を所定の解像度（例えば、１２８０×７２０等）に変換するスケーリング処理等が挙げられる。続いて、高解像度化部１３について説明する。
【００２７】
図４は、図１に示す高解像度化部１３の機能構成を示すブロック図である。図４に示すように、高解像度化部１３は、前処理部１３１と、超解像度変換処理部１３２と、後処理部１３３と、ＥＥＰＲＯＭメモリ２０とを備えている。
【００２８】
前処理部１３１は、メイン処理部１２から入力された画像信号に対し、インターレース・プログレッシブ変換処理や、ノイズを除去するノイズリダクション処理等の画像処理（以下、前処理と呼ぶ。）を施し、処理済みの映像信号を超解像度変換処理部１３２に出力する。さらに、前処理部１３１は、メイン処理部１２の機能判定部１２１が高解像度化部１３と動画改善処理部１４に同種の補正処理があると判定している場合には、同種の補正処理を示す識別信号その補正処理の名称を受け取り、超解像度変換処理部１３２に出力する。
【００２９】
上述したインターレース・プログレッシブ変換処理としては、入力された画像信号における画像の動きを検出して静止画と動画とを判定し、静止画と判定したときには静止画用の補間処理を行い、動画と判定したときには動画用の補間処理を行う。
【００３０】
また、前処理部１３１は、ノイズリダクション処理として、画像信号における画像の輪郭補整や、画像ボケやギラツキ感の低減、過度なイコライジング（高域強調）を抑える補正、水平方向にカメラが移動する際のブレ改善等の処理を行う。
【００３１】
超解像度変換処理部１３２は、前処理部１３１から入力される低解像度フレームを、高解像度化するための画像処理（以下、「超解像度変換処理」という。）を施して、ＨＤサイズの高解像度の動画データのフレーム（以下、「高解像度フレーム」という。）を生成し、後処理部１３５に出力する。
【００３２】
ここで、超解像度変換処理とは、第１解像度である低解像度の画像信号から本来の画素値を推定して画素を増やすことにより、第２解像度である高解像度の画像信号を復元する鮮鋭化処理を意味する。ここで、本来の画素値とは、例えば、低解像度（第１解像度）の画像信号を得たときと同じ被写体を、高解像度（第２解像度）の画像信号の画素数を持つカメラで撮像したときに得られる画像信号の各画素が持つ値を指す。
【００３３】
また、「推定して画素を増やす」とは、画像の特徴を捕らえて、相関性があるという画像の特徴を利用して周辺（同一フレーム内またはフレーム間）の画像から本来の画素値を推定して画素を増やすことを意味する。なお、超解像度変換処理については、特開２００７−３１０８３７号公報、特開２００８−９８８０３号公報や特開２０００−１８８６８０号公報等に開示された公知・公用の技術を用いることが可能である。本実施の形態の超解像度変換処理の技術としては、例えば、入力画像の標本化周期で決まるナイキスト周波数より高い周波数成分を有する画像を復元する技術を用いる。
【００３４】
例えば、特開２００７−３１０８３７号公報に開示された超解像度変換処理を用いる場合には、複数の中解像度フレームのそれぞれに対してフレーム中の注目画素を含む注目画像領域中の画素値の変化パターンに最も近い複数の注目画像領域に対応する複数の対応点を基準フレームの中から選択し、対応点での輝度の標本値を対応点に対応している注目画素の画素値に設定し、複数の標本値の大きさと、複数の対応点の配置とに基づいて、基準フレームの画素数よりも多い画素数の高解像度フレームであって基準フレームに対応する高解像度フレームの画素値を算出することにより、低解像度の画像信号から本来の画素値を推定して画素を増やすことにより、高解像度の画像信号を復元する。
【００３５】
また、特開２００８−９８８０３号公報に開示された同一フレーム画像内の自己合同位置探索を利用した超解像度変換処理を用いる場合には、中解像度フレームの探索領域の各画素の誤差を比較して最小となる第１の画素位置を算出し、第１の画素位置及びこの第１の誤差、第１の画素の周辺の第２の画素位置及びこの第２の誤差に基づいて、探索領域のなかで誤差が最小となる位置を小数精度で算出する。そして、この位置を終点及び注目画素を始点とする小数精度ベクトルを算出し、小数精度ベクトルを用いて、探索領域に含まれない画面上の画素を終点とする、小数精度ベクトルの外挿ベクトルを算出する。そして、小数精度ベクトル、外挿ベクトル及び画像信号から取得された画素値に基づいて、画像信号に含まれる画素数よりも多い画素数の高解像度画像の画素値を算出する。超解像度変換処理部１３３は、このような処理を行うことにより、低解像度の画像信号から本来の画素値を推定して画素を増やすことにより、高解像度の画像信号を復元する。
【００３６】
また、特開２０００−１８８６８０号公報に開示された複数フレーム画像間でのマッピングを利用した超解像度変換処理を用いることもできる。
【００３７】
ただし、超解像度変換処理部１３３における超解像度変換処理の手法は、上記に限定されるものではなく、低解像度の画像信号から本来の画素値を推定して画素を増やすことにより、高解像度の画像信号を復元する処理であれば、あらゆる手法を適用することができる。なお、画像を鮮鋭化する方法として、画像のエッジを立てることによって、映像を見かけ上鮮鋭にするシャープネス処理がある。しかしながら、超解像度化技術は、新たに高周波成分の画素を生成するという点で、シャープネス処理とは全く異なる技術である。
【００３８】
また、超解像度変換処理部１３２は、前処理部１３１がノイズリダクション処理等を行った後の画像信号、および高解像度化部１３と動画改善処理部１４に同種の補正処理がある場合には、補正処理を示す識別信号を受け取り、後処理部１３３に出力する。続いて、後処理部１３３について説明する。
【００３９】
図５は、後処理部１３３の機能構成を示すブロック図である。図５に示すように、後処理部１３３は、処理制御部１３３１と、ガンマ補正部１３３２と、ホワイトバランス調整部１３３３とを有している。この後処理部１３３は、超解像度変換処理部１３２から入力される画像信号に対し、ホワイトバランス調整処理やガンマ補正処理等の画像補正処理（以下、後処理とも呼ぶ。）を施すものである。以下では補正処理の例としてガンマ補正、ホワイトバランス調整について記載しているが、階調補正やコントラスト伸張等の各種の画像補正処理を行う場合も同様である。
【００４０】
処理制御部１３３１は、超解像度変換処理部１３２から画像信号を受け取ると、画像信号と共に、高解像度化部１３と動画改善処理部１４とが同種の補正処理機能を有する旨の識別信号を高解像度処理部１３が受信したか否かを判定する。そして、その名称を受け取ったと判定した場合には、上記同種の機能に関する処理は行わずに、それ以外の処理の実行を指示する。例えば、図５の場合を例にとると、処理制御部１３３１が、超解像度変換処理部１３２やメイン処理部１２からホワイトバランス調整機能が後段の動画改善処理部１４に備わっている場合、ホワイトバランス調整部１３３３以外のガンマ補正部１３３２に対して実行を指示する。
【００４１】
一方、処理制御部１３３１は、同種の補正処理機能を有する旨の識別信号を受け取っていないと判定した場合には、ガンマ補正部１３３２およびホワイトバランス調整部１３３３に対して処理の実行を指示する。また、処理制御部１３３１は、ガンマ補正部１３３２およびホワイトバランス調整部１３３３が処理した画像信号を動画改善処理部１４に出力する。
【００４２】
ガンマ補正部１３３２は、処理制御部１３３１からの実行指示を受けると、画像信号に含まれる輝度信号の特性に従って、画像信号に対して所定のガンマ補正を行う。
【００４３】
ホワイトバランス調整部１３３３は、処理制御部１３３１からの実行指示を受けると、ＥＥＰＲＯＭメモリ２０を参照して、画像信号の色温度に応じてホワイトバランス調整処理を行う。
【００４４】
図６は、ＥＥＰＲＯＭメモリ２０が、ホワイトバランス調整部１３３３が処理するためのパラメータを記憶する例を示す図である。図６に示すように、ＥＥＰＲＯＭメモリ２０には、色温度とバランス値とが対応付けて記憶されており、ホワイトバランス調整部１３３３は、画像信号から色温度を判定し、判定した色温度に対応するバランス値（−１５〜＋１５）を取得して、画像信号に対してホワイトバランス調整処理をかける。
【００４５】
図６に示す例では、ホワイトバランス調整する場合についてのバランス値等のパラメータについて説明したが、ガンマ補正部１３３２等の他の処理部も同様にパラメータが記憶され、それぞれのパラメータに従って各種の補正処理を行っている。続いて、動画改善処理部１４について説明する。
【００４６】
図７は、図１に示す動画改善処理部１４の機能構成を示すブロック図である。図７に示すように、動画改善処理部１４は、処理制御部１４１と、ホワイトバランス調整部１４２と、フレーム補間部１４３と、ＥＥＰＲＯＭメモリ２１とを有している。この動画改善処理部１４は、後処理部１３３から受け取った画像信号対して倍速処理を行うものである。
【００４７】
処理制御部１４１は、高解像度化部１３から画像信号を受け取ると、ホワイトバランス調整部１４２と、フレーム補間部１４３に対して処理を実行するよう指示する。また、処理制御部１４１は、上述した各部が処理を行った後の画像信号を受け取り、表示処理部１５に出力する。以下の例では、高解像度化部１３の後処理部１３３と同様に、補正処理の例としてホワイトバランス調整について記載しているが、上述した高解像度化部１３の後処理部１３３と同様に、階調補正等の各種の画像補正処理の場合も含まれる。
【００４８】
ホワイトバランス調整部１４２は、上述したホワイトバランス調整部１３３３と同様の処理を行うものであり、図５に示すＥＥＰＲＯＭメモリ２０に記憶されたパラメータと同様のパラメータをＥＥＰＲＯＭメモリ２１から取得して画像信号のホワイトバランス調整を行う。尚、本実施の形態においては、発明の理解を容易にするために、ホワイトバランス調整部１３３３とホワイトバランス調整部１４２は、同じ内容のパラメータを取得してバランス調整することとしているが、ホワイトバランス調整部１３３３とホワイトバランス調整部１４２が、各々個別のパラメータを用いてホワイトバランス調整することももちろん可能である。
【００４９】
フレーム補間部１４３は、ＥＥＰＲＯＭメモリ２１に記憶された、高解像度化部１３から出力された画像信号で表されるフレーム画像の１つまえのフレーム画像を読み出し、高解像度化されたフレーム画像の間に読み出したフレーム画像（以下、補間フレーム画像と呼ぶ。）を動き補償処理によって生成し、生成した補間フレーム画像を、ＥＥＰＲＯＭメモリ２１に格納する。具体的には、６０ｆｐｓ（Frame  Per  Second）で送信される映像信号を１２０ｆｐｓにフレームレート変換する処理を行うことにより、横、縦、斜め方向や回転する被写体など動きのある部分の映像ブレを低減し、ノイズも効果的に抑えて、流れるテロップや動きの速いスポーツシーンがくっきりと表示される。そして、フレームレート変換された画像信号を表示処理部１５に出力する。
【００５０】
なお、補間処理の方法としては、特開２００８−３５４０４号公報に記載されたブロックマッチング法による動きベクトル検出に基づいた補間生成処理方法等、一般的に行われているフレーム画像の補間方法に従って補間フレーム画像を生成し、補間することも可能である。さらに、補間フレーム画像の枚数についても任意に定めることができる。
【００５１】
また、上述した補間フレーム画像を生成する処理は、本実施の形態に示すように、高解像度化部１３で行われる超解像度処理の後に実行されることが望ましい。その理由は、例えば、超解像度処理する前に補間フレーム画像を生成した場合に、画像信号のある一部の領域において動きベクトルの誤検出が発生し、ブロック段差状の歪みが生じた画像信号が超解像度処理されると、最終的に映像として表示された場合、このブロック段差状の歪みが、通常の映像における物体の輪郭や絵柄の境界等と区別出来ないため、その歪みがより強調され、映像の品位を悪化させてしまうためである。
【００５２】
また、画像信号の処理量の観点から考えた場合、補間フレーム画像を生成した後に超解像度化する場合、補間フレーム画像を生成した結果、超解像度化する対象となる入力画像のフレームレートの２倍のフレームレートで超解像度処理を行う必要があり、コスト増につながってしまうためである。この現象は、補間フレーム画像の枚数が増えるとさらに顕著になることは明らかである。続いて、ＥＥＰＲＯＭメモリ２１について説明する。
【００５３】
ＥＥＰＲＯＭメモリ２１は、ホワイトバランス調整部１４２がバランス調整するためのパラメータを記憶するほか、高解像度化部１３によって画像処理されたフレーム画像、およびフレーム補間部１４３が生成した補間フレーム画像を記憶する。
【００５４】
表示処理部１５は、画像信号を表示部１６に出力するためのドライバ等から構成され、動画改善処理部１４から受け取った補間後の画像信号を表示部１６に表示させる。
【００５５】
表示部１６は、ＬＣＤ（Liquid  Crystal  Display）、プラズマパネル、ＳＥＤ（Surface-conduction  Electron-emitter  Display）パネル等のディスプレイから構成され、表示処理部１５から受け取った画像信号を表示する。
【００５６】
続いて、上述した画像表示装置１００で行われる実行処理について説明する。
【００５７】
図８は、画像表示装置１００が映像信号を受信し、各種の補正処理を行って画像を表示するまでの処理手順を示すフローチャートである。
【００５８】
本図に示すように、メイン処理部１２の機能判定部１２１は、映像信号入力部１１から映像信号を受け取ると、フラッシュメモリ１９を参照し、高解像度化部１３の中の後処理部１３３と動画改善処理部１４に同種の補正処理があるか否かを判定する（ステップＳ８０１）。
【００５９】
機能判定部１２１が、高解像度化部１３の中の後処理部１３３が行う補正処理と、動画改善処理部１４が行う補正処理に同じ種類の処理があると判定した場合（ステップＳ８０１；Ｙｅｓ）、フラッシュメモリ１９から同種の補正処理機能を有する旨の識別信号を制御部１２２に出力する（ステップＳ８０３）。一方、機能判定部１２１が、高解像度化部１３の中の後処理部１３３が行う補正処理と、動画改善処理部１４が行う補正処理に同じ種類の処理がないと判定した場合（ステップＳ８０１；Ｎｏ）、映像信号のみを制御部１２２に出力する（ステップＳ８０２）。
【００６０】
制御部１２２は、ステップＳ８０２で映像信号を取得し、またはステップＳ８０３で映像信号と補正処理の名称を受け取ると、取得した映像信号を画像信号と音声信号に分離し、分離した画像信号とともに、補正処理の名称を高解像度化部１３に出力する(ステップＳ８０４）。
【００６１】
そして、高解像度化部１３の前処理部１３１は、画像信号に対してノイズリダクション処理等の前処理を行い、さらに超解像度変換処理部１３２は画像信号に対して超解像度処理を施し、同種の補正処理機能を有する旨の識別信号が出力されている場合にはその信号を後処理部１３３に出力する（ステップＳ８０５）。
【００６２】
その後、後処理部１３３の処理制御部１３３１は、超解像度変換処理部１３２から同種の補正処理機能を有する旨の識別信号が出力されているか否かを判定する（ステップＳ８０６）。処理制御部１３３１が、同種の補正処理機能を有する旨の識別信号が出力されたと判定した場合（ステップＳ８０６；Ｙｅｓ）、処理制御部１３３１は、同種の補正処理以外の補正処理を実行させる（ステップＳ８０８）。
【００６３】
一方、処理制御部１３３１が、同種の補正処理を有する旨の識別信号が出力されていないと判定した場合（ステップＳ８０６；Ｎｏ）、後処理として設定された全ての補正処理を実行させる（ステップＳ８０７）。
【００６４】
ステップＳ８０７、またはステップＳ８０８で処理制御部１３３１から補正処理の実行指示を受けると、ホワイトバランス調整部１３３３等の各処理部は補正処理を実行し（ステップＳ８０９）、その後、動画改善処理部１４は、動画改善処理として設定された補正処理を実行する（ステップＳ８１０）。
【００６５】
その後、ステップＳ８１０で各種の補正処理が終了すると、補正された画像信号から構成される画像信号に対して補間フレームを生成して倍速化処理を行う（ステップＳ８１１）。このように倍速化された画像信号から構成される画像信号を表示処理部１５に出力し、表示部１６に高解像度化および倍速化された画像信号が映像として表示される。
【００６６】
（第２の実施の形態）
上述した第１の実施の形態においては、機能判定部１２１が、超解像度変換処理部１３２と動画改善部１４との間に同種の機能の補正処理があるか否かを判定した上で、どちらかの補正処理を実行させることとしたが、例えば、超解像度変換処理部１３２と動画改善部１４とが別チップであるような場合には、あらかじめ超解像度変換処理部１３２に含まれる補正処理を実行させないように設定しておくことも可能である。
【００６７】
第２の実施の形態における構成要素は第１の実施の形態における構成要素と同様の構成であるため、ブロック図を用いた説明は省略し、図９に示す処理手順に従って説明する。
【００６８】
機能判定部１２１は、入力された映像信号をそのまま出力し（ステップＳ９０１）、その後第１の実施の形態と同様に、画像信号と音声信号を分離し（ステップＳ９０２）、さらに前処理および超解像度変換処理を行う（ステップＳ９０３）。
【００６９】
その後、後処理部１３３の制御処理部１３３１は、あらかじめ定められた補正処理（すなわち、動画改善部１４と同種の補正処理以外の補正処理）を実行し（ステップＳ９０４）、その後、第一の実施の形態と同様に、動画改善処理として設定された補正処理を実行し（ステップＳ９０５）、倍速化処理を行う（ステップＳ９０６）。
【００７０】
このように第１の実施の形態または第２の実施の形態では、上記のような処理を行っているので適切な画像調整を行うことができる。すなわち、超解像度変換処理でホワイトバランス調整を行った後、動画改善処理を行うと、図１０に示すように、本来ダイナミックレンジ内で適正にホワイトバランス調整できていたにもかかわらず、ある閾値を超えた範囲Ｒの画素をホワイトバランス調整すると、高輝度の場合の画素値がダイナミックレンジの最大値を超えてしまい、いわゆる「白つぶれ」という現象が生じてしまう。
【００７１】
しかし本実施の形態では、メイン処理部１２の機能判定部１２１が、高解像度化部１３で行われる補正処理と動画改善処理部１４で行われる補正処理とを比較して、同種の補正処理がある場合には、その補正処理を動画改善処理部１４のみで処理するように各処理部を制御するので、例えば、ホワイトバランス調整においてもいわゆる「白つぶれ」が生じることなく適切に画像調整ができる。
【００７２】
上述した各処理では、同種の機能としてホワイトバランス調整に関する補正処理を例に説明した。しかし、例えば、同種の機能の補正処理がガンマ補正の場合の場合にも適用可能である。この場合、そのガンマ特性に従って正しくガンマ補正されず、本来の輝度とは異なる輝度の画像が表示され、その結果、本来表示すべき画像の色合いと、補正した画像の色合いとの間に誤差が生じてしまうという現象を生じさせることなく、適切に画像調整ができる。
【００７３】
なお、本実施の形態によれば、超解像度変換処理と動画改善処理とが別チップに分かれて搭載されているような場合において、双方のチップの持つ画像処理技術を適切に使いこなして、最終的に高画質な映像表示に供することができる。
【００７４】
また、本実施の形態では、本発明の画像処理装置を、表示部１６、表示処理部１５、音声出力部１８および音声処理部１７を有するデジタルＴＶ等の画像表示装置１００に適用した例をあげて説明したが、表示部１６、表示処理部１５、音声出力部１８および音声処理部１７を有さない、例えば、チューナやセットトップボックス等にも本発明の画像処理装置を適用することができる。
【００７５】
なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
【産業上の利用可能性】
【００７６】
以上のように、本発明にかかる画像処理装置、画像処理方法は、高解像度化された画像を補正して表示する際に有用であり、特に、超解像度化と倍速化の双方の処理で同種の補正処理を行って映像を表示する技術に適している。
【図面の簡単な説明】
【００７７】
【図１】本実施の形態にかかる画像表示装置の構成を示すブロック図である。
【図２】図１に示すメイン処理部の構成を示すブロック図である。
【図３】図２に示すフラッシュメモリに記憶される機能対応表の例を示す図である。
【図４】図１に示す高解像度化部の構成を示すブロック図である。
【図５】図４に示す後処理部の構成を示すブロック図である。
【図６】図５に示すＥＥＰＲＯＭメモリに記憶されるパラメータの例を示す図である。
【図７】図１に示す動画改善処理部の構成を示すブロック図である。
【図８】第１の実施の形態にかかる同種の補正処理がある場合の補正処理の実行手順を示すフローチャートである。
【図９】第２の実施の形態にかかる同種の補正処理がある場合の補正処理の実行手順を示すフローチャートである。
【図１０】超解像度化および倍速化の双方で同種の補正処理（ホワイトバランス調整）を行った場合の白つぶれの様子を示す図である。
【符号の説明】
【００７８】
１００  画像表示装置
１１  映像信号入力部
１２  メイン処理部
１３  高解像度化部
１４  動画改善処理部
１５  表示処理部
１６  表示部
１７  音声処理部
１８  音声出力部
１９  フラッシュメモリ
２０  ２１  ＥＥＰＲＯＭメモリ
１１１  デジタル放送受信部
１１２  ＩＰＴＶ信号処理部
１１３  インターネット信号処理部
１１４  外部入力部
１２１  機能判定部
１２２  制御部
１３１  前処理部
１３２  超解像度変換処理部
１３３  後処理部
１３３１  処理制御部
１３３２  ガンマ補正部
１３３３  ホワイトバランス調整部
１４１  処理制御部
１４２  ホワイトバランス調整部
１４３  フレーム補間部
１１１１  デジタルアンテナ
１１１２  デジタルチューナ
１１１３  デジタル信号復調部
１１４１  アナログアンテナ
１１４２  アナログチューナ
１１４３  外部入力信号処理部
【図１】
2010041338.tif 000003
【図２】
2010041338.tif 000004
【図３】
2010041338.tif 000005
【図４】
2010041338.tif 000006
【図５】
2010041338.tif 000007
【図６】
2010041338.tif 000008
【図７】
2010041338.tif 000009
【図８】
2010041338.tif 000010
【図９】
2010041338.tif 000011
【図１０】
2010041338.tif 000012
【手続補正書】
【提出日】平成21年7月16日(2009.7.16)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
第１解像度の映像信号が入力され、前記第１の映像信号から本来の画素値を推定して画素を増やすことにより、前記第１解像度よりも高い第２解像度の映像信号を復元する超解像度変換処理を行い、前記超解像度変換処理された前記第２解像度の映像信号を補正する第１の補正処理を行う高解像度化手段と、
前記超解像度変換処理の実行後に、前記超解像度変換処理された前記第１の補正処理が施された前記第２解像度の映像信号に対して動画改善処理を行うとともに、当該映像信号を補正する第２の補正処理を行う動画改善処理手段と、
前記第１の補正処理と前記第２の補正処理とが同種の機能を含む場合には、前記第１の補正処理に含まれる前記同種の機能を実行させないように前記高解像度化手段を制御する制御手段と、
を備えることを特徴とする画像処理装置。
【請求項２】
前記制御手段は、さらに、前記第２の補正処理が無効となっているか否かを判定し、前記第２の補正処理が無効であると判定した場合には、前記第１の補正処理に含まれる前記同種の機能を実行させるように前記高解像度化手段を制御する、
ことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記第１の補正処理および前記第２の補正処理に含まれる前記機能の一覧を記憶する記憶手段をさらに備え、
前記機能判定手段は、前記記憶手段に記憶された前記機能の一覧に含まれる前記第１の補正処理の機能と前記第２の補正処理の機能とを比較して前記同種の機能の有無を判定する、
ことを特徴とする請求項１又は２に記載の画像処理装置。
【請求項４】
前記第１の補正処理および前記第２の補正処理には、ホワイトバランス調整機能またはガンマ補正機能を含み、
前記同種の機能がホワイトバランス調整機能またはガンマ補正機能であることを特徴とする請求項１〜３のいずれか１項に記載の画像処理装置。
【請求項５】
前記超解像度変換処理を行った前記第２解像度の映像信号を表示する表示手段、
をさらに備えたことを特徴とする請求項１〜４のいずれか１項に記載の画像処理装置。
【請求項６】
第１解像度の映像信号を、超解像度技術を用いて第２解像度の映像信号に高解像度化する超解像度変換処理を行い、前記超解像度変換処理された前記第２解像度の映像信号を補正する第１の補正処理を行う高解像度化手段と、
前記超解像度変換処理の実行後に、前記超解像度変換処理された前記第１の補正処理が施された前記第２解像度の映像信号に対して動画改善処理を行うとともに、当該映像信号を補正する第２の補正処理を行う動画改善処理手段と、
前記第１の補正処理と前記第２の補正処理とが同種の機能を含む場合には、前記第１の補正処理に含まれる前記同種の機能を実行させないように前記高解像度化手段を制御する制御手段と、
を備えることを特徴とする画像処理装置。
【請求項７】
高解像度化手段が、第１解像度の映像信号が入力され、前記第１の映像信号から本来の画素値を推定して画素を増やすことにより、前記第１解像度よりも高い第２解像度の映像信号を復元する超解像度変換処理を行い、前記超解像度変換処理された前記第２解像度の映像信号を補正する第１の補正処理を行う高解像度化ステップと、
動画改善処理手段が、前記超解像度変換処理の実行後に、前記超解像度変換処理された前記第１の補正処理が施された前記第２解像度の映像信号に対して動画改善処理を行うとともに、当該映像信号を補正する第２の補正処理を行う動画改善処理ステップと、
制御手段が、前記第１の補正処理と前記第２の補正処理とが同種の機能を含む場合には、前記第１の補正処理に含まれる前記同種の機能を実行させないように前記高解像度化手段を制御する制御ステップと、
を含むことを特徴とする画像処理方法。
【請求項８】
第１解像度の映像信号が入力され、前記第１の映像信号から本来の画素値を推定して画素を増やすことにより、前記第１解像度よりも高い第２解像度である第２の映像信号を復元する超解像度変換処理を行う超解像度変換処理部と、前記第１の映像信号または前記第２の映像信号に対して補正処理を行う第１の補正処理部とを有する高解像度化手段と、
前記第２の映像信号が入力され、前記第２の映像信号に対して動画改善処理を行う動画改善処理部と、前記第２の映像信号に対して補正処理を行う第２の補正処理部とを有する動画改善処理手段と、を備え、
前記第１の補正処理部と前記第２の補正処理部とが同種の補正機能を有し、かつ、前記第１の補正処理部では前記同種の補正機能が実行されず、前記第２の補正処理部では前記同種の補正機能を含めて補正処理が実行されるように構成されていることを特徴とする画像処理装置。
【請求項９】
前記第１の補正処理部および前記第２の補正処理部は、ホワイトバランス調整機能またはガンマ補正機能を含み、
前記同種の補正機能がホワイトバランス調整機能またはガンマ補正機能であることを特徴とする請求項８に記載の画像処理装置。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
上述した課題を解決し、目的を達成するために、本発明に係る画像処理装置は、第１解像度の映像信号が入力され、前記第１の映像信号から本来の画素値を推定して画素を増やすことにより、前記第１解像度よりも高い第２解像度の映像信号を復元する超解像度変換処理を行い、前記超解像度変換処理された前記第２解像度の映像信号を補正する第１の補正処理を行う高解像度化手段と、前記超解像度変換処理の実行後に、前記超解像度変換処理された前記第１の補正処理が施された前記第２解像度の映像信号に対して動画改善処理を行うとともに、当該映像信号を補正する第２の補正処理を行う動画改善処理手段と、前記第１の補正処理と前記第２の補正処理とが同種の機能を含む場合には、前記第１の補正処理に含まれる前記同種の機能を実行させないように前記高解像度化手段を制御する制御手段と、を備えることを特徴とする。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
また、本発明に係る画像処理装置は、第１解像度の映像信号を、超解像度技術を用いて第２解像度の映像信号に高解像度化する超解像度変換処理を行い、前記超解像度変換処理された前記第２解像度の映像信号を補正する第１の補正処理を行う高解像度化手段と、前記超解像度変換処理の実行後に、前記超解像度変換処理された前記第１の補正処理が施された前記第２解像度の映像信号に対して動画改善処理を行うとともに、当該映像信号を補正する第２の補正処理を行う動画改善処理手段と、前記第１の補正処理と前記第２の補正処理とが同種の機能を含む場合には、前記第１の補正処理に含まれる前記同種の機能を実行させないように前記高解像度化手段を制御する制御手段と、を備えることを特徴とする。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
また、本発明に係る画像処理方法は、高解像度化手段が、第１解像度の映像信号が入力され、前記第１の映像信号から本来の画素値を推定して画素を増やすことにより、前記第１解像度よりも高い第２解像度の映像信号を復元する超解像度変換処理を行い、前記超解像度変換処理された前記第２解像度の映像信号を補正する第１の補正処理を行う高解像度化ステップと、動画改善処理手段が、前記超解像度変換処理の実行後に、前記超解像度変換処理された前記第１の補正処理が施された前記第２解像度の映像信号に対して動画改善処理を行うとともに、当該映像信号を補正する第２の補正処理を行う動画改善処理ステップと、制御手段が、前記第１の補正処理と前記第２の補正処理とが同種の機能を含む場合には、前記第１の補正処理に含まれる前記同種の機能を実行させないように前記高解像度化手段を制御する制御ステップと、を含むことを特徴とする。 
【手続補正書】
【提出日】平成21年10月23日(2009.10.23)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
第１解像度の映像信号が入力され、前記第１の映像信号から本来の画素値を推定して画素を増やすことにより、前記第１解像度よりも高い第２解像度の映像信号を復元する超解像度変換処理を行い、前記超解像度変換処理された前記第２解像度の映像信号を補正する第１の補正処理を行う高解像度化手段と、
前記超解像度変換処理の実行後に、前記超解像度変換処理された前記第１の補正処理が施された前記第２解像度の映像信号に対して動画改善処理を行うとともに、当該動画改善処理の前または後に、前記映像信号を補正する第２の補正処理を行う動画改善処理手段と、
前記第１の補正処理と前記第２の補正処理とが同種の機能を含む場合には、前記第１の補正処理に含まれる前記同種の機能を実行させないように前記高解像度化手段を制御する制御手段と、
を備えることを特徴とする画像処理装置。
【請求項２】
前記制御手段は、さらに、前記第２の補正処理が無効となっているか否かを判定し、前記第２の補正処理が無効であると判定した場合には、前記第１の補正処理に含まれる前記同種の機能を実行させるように前記高解像度化手段を制御する、
ことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記第１の補正処理および前記第２の補正処理に含まれる前記機能の一覧を記憶する記憶手段をさらに備え、
前記機能判定手段は、前記記憶手段に記憶された前記機能の一覧に含まれる前記第１の補正処理の機能と前記第２の補正処理の機能とを比較して前記同種の機能の有無を判定する、
ことを特徴とする請求項１又は２に記載の画像処理装置。
【請求項４】
前記第１の補正処理および前記第２の補正処理には、ホワイトバランス調整機能またはガンマ補正機能を含み、
前記同種の機能がホワイトバランス調整機能またはガンマ補正機能であることを特徴とする請求項１〜３のいずれか１項に記載の画像処理装置。
【請求項５】
前記超解像度変換処理を行った前記第２解像度の映像信号を表示する表示手段、
をさらに備えたことを特徴とする請求項１〜４のいずれか１項に記載の画像処理装置。
【請求項６】
第１解像度の映像信号を、超解像度技術を用いて第２解像度の映像信号に高解像度化する超解像度変換処理を行い、前記超解像度変換処理された前記第２解像度の映像信号を補正する第１の補正処理を行う高解像度化手段と、
前記超解像度変換処理の実行後に、前記超解像度変換処理された前記第１の補正処理が施された前記第２解像度の映像信号に対して動画改善処理を行うとともに、当該動画改善処理の前または後に、前記映像信号を補正する第２の補正処理を行う動画改善処理手段と、
前記第１の補正処理と前記第２の補正処理とが同種の機能を含む場合には、前記第１の補正処理に含まれる前記同種の機能を実行させないように前記高解像度化手段を制御する制御手段と、
を備えることを特徴とする画像処理装置。
【請求項７】
高解像度化手段が、第１解像度の映像信号が入力され、前記第１の映像信号から本来の画素値を推定して画素を増やすことにより、前記第１解像度よりも高い第２解像度の映像信号を復元する超解像度変換処理を行い、前記超解像度変換処理された前記第２解像度の映像信号を補正する第１の補正処理を行う高解像度化ステップと、
動画改善処理手段が、前記超解像度変換処理の実行後に、前記超解像度変換処理された前記第１の補正処理が施された前記第２解像度の映像信号に対して動画改善処理を行うとともに、当該動画改善処理の前または後に、前記映像信号を補正する第２の補正処理を行う動画改善処理ステップと、
制御手段が、前記第１の補正処理と前記第２の補正処理とが同種の機能を含む場合には、前記第１の補正処理に含まれる前記同種の機能を実行させないように前記高解像度化手段を制御する制御ステップと、
を含むことを特徴とする画像処理方法。
【請求項８】
第１解像度の映像信号が入力され、前記第１の映像信号から本来の画素値を推定して画素を増やすことにより、前記第１解像度よりも高い第２解像度である第２の映像信号を復元する超解像度変換処理を行う超解像度変換処理部と、前記第１の映像信号または前記第２の映像信号に対して補正処理を行う第１の補正処理部とを有する高解像度化手段と、
前記第２の映像信号が入力され、前記第２の映像信号に対して動画改善処理を行う動画改善処理部と、前記動画改善処理の前または後に、前記第２の映像信号に対して補正処理を行う第２の補正処理部とを有する動画改善処理手段と、を備え、
前記第１の補正処理部と前記第２の補正処理部とが同種の補正機能を有し、かつ、前記第１の補正処理部では前記同種の補正機能が実行されず、前記第２の補正処理部では前記同種の補正機能を含めて補正処理が実行されるように構成されていることを特徴とする画像処理装置。
【請求項９】
前記第１の補正処理部および前記第２の補正処理部は、ホワイトバランス調整機能またはガンマ補正機能を含み、
前記同種の補正機能がホワイトバランス調整機能またはガンマ補正機能であることを特徴とする請求項８に記載の画像処理装置。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
上述した課題を解決し、目的を達成するために、本発明に係る画像処理装置は、第１解像度の映像信号が入力され、前記第１の映像信号から本来の画素値を推定して画素を増やすことにより、前記第１解像度よりも高い第２解像度の映像信号を復元する超解像度変換処理を行い、前記超解像度変換処理された前記第２解像度の映像信号を補正する第１の補正処理を行う高解像度化手段と、前記超解像度変換処理の実行後に、前記超解像度変換処理された前記第１の補正処理が施された前記第２解像度の映像信号に対して動画改善処理を行うとともに、当該動画改善処理の前または後に、前記映像信号を補正する第２の補正処理を行う動画改善処理手段と、前記第１の補正処理と前記第２の補正処理とが同種の機能を含む場合には、前記第１の補正処理に含まれる前記同種の機能を実行させないように前記高解像度化手段を制御する制御手段と、を備えることを特徴とする。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
また、本発明に係る画像処理装置は、第１解像度の映像信号を、超解像度技術を用いて第２解像度の映像信号に高解像度化する超解像度変換処理を行い、前記超解像度変換処理された前記第２解像度の映像信号を補正する第１の補正処理を行う高解像度化手段と、前記超解像度変換処理の実行後に、前記超解像度変換処理された前記第１の補正処理が施された前記第２解像度の映像信号に対して動画改善処理を行うとともに、当該動画改善処理の前または後に、前記映像信号を補正する第２の補正処理を行う動画改善処理手段と、前記第１の補正処理と前記第２の補正処理とが同種の機能を含む場合には、前記第１の補正処理に含まれる前記同種の機能を実行させないように前記高解像度化手段を制御する制御手段と、を備えることを特徴とする。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
また、本発明に係る画像処理方法は、高解像度化手段が、第１解像度の映像信号が入力され、前記第１の映像信号から本来の画素値を推定して画素を増やすことにより、前記第１解像度よりも高い第２解像度の映像信号を復元する超解像度変換処理を行い、前記超解像度変換処理された前記第２解像度の映像信号を補正する第１の補正処理を行う高解像度化ステップと、動画改善処理手段が、前記超解像度変換処理の実行後に、前記超解像度変換処理された前記第１の補正処理が施された前記第２解像度の映像信号に対して動画改善処理を行うとともに、当該動画改善処理の前または後に、前記映像信号を補正する第２の補正処理を行う動画改善処理ステップと、制御手段が、前記第１の補正処理と前記第２の補正処理とが同種の機能を含む場合には、前記第１の補正処理に含まれる前記同種の機能を実行させないように前記高解像度化手段を制御する制御ステップと、を含むことを特徴とする。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
また、本発明に係る画像処理装置は、第１解像度の映像信号が入力され、前記第１の映像信号から本来の画素値を推定して画素を増やすことにより、前記第１解像度よりも高い第２解像度である第２の映像信号を復元する超解像度変換処理を行う超解像度変換処理部と、前記第１の映像信号または前記第２の映像信号に対して補正処理を行う第１の補正処理部とを有する高解像度化手段と、前記第２の映像信号が入力され、前記第２の映像信号に対して動画改善処理を行う動画改善処理部と、前記動画改善処理の前または後に、前記第２の映像信号に対して補正処理を行う第２の補正処理部とを有する動画改善処理手段と、を備え、前記第１の補正処理部と前記第２の補正処理部とが同種の補正機能を有し、かつ、前記第１の補正処理部では前記同種の補正機能が実行されず、前記第２の補正処理部では前記同種の補正機能を含めて補正処理が実行されるように構成されていることを特徴とする。