(57)【特許請求の範囲】
【請求項１】
入力映像信号が４：４：４フォーマットの映像信号である場合には、前記入力映像信号をオーバサンプリングしてデジタル信号に変換するＡ／Ｄ変換器と、
前記入力映像信号が４：４：４フォーマットの映像信号である場合には、前記Ａ／Ｄ変換器からの映像信号の色の標本点を少なくして４：２：２フォーマットの映像信号に変換する変換部と、
前記４：４：４フォーマットよりも色の標本点が少ない映像信号に対して自己合同性型超解像処理及び色超解像処理の少なくとも一方の処理を行う第１の超解像処理部を含み、供給された映像信号に映像処理を施して表示モジュールに出力する映像処理モジュールと、
入力映像信号が前記４：４：４フォーマットの映像信号でない場合には、前記入力映像信号を前記変換部により変換させることなく前記映像処理モジュールに供給し、前記入力映像信号が前記４：４：４フォーマットの映像信号である場合には、前記入力映像信号を前記変換部によって変換させた後前記映像処理モジュールに供給するコントローラと、
を具備することを特徴とする映像表示装置。
【請求項２】
前記コントローラは、４８０ｉ，４８０ｐ又は７２０ｐの４：４：４フォーマットの映像信号を前記変換部によって変換させた後、前記映像処理モジュールに供給することを特徴とする請求項１に記載の映像表示装置。
【請求項３】
前記コントローラは、Ｄ端子を介して入力された４：４：４フォーマットの映像信号を前記変換部によって変換させた後、前記映像処理モジュールに供給することを特徴とする請求項１又は２に記載の映像表示装置。
【請求項４】
前記映像処理モジュールは、再構成型超解像処理部を含むことを特徴とする請求項１乃至３のいずれか１つに記載の映像表示装置。
【請求項５】
コントローラによって、入力映像信号が４：４：４フォーマットの映像信号であるか否かを判定し、
前記入力映像信号が前記４：４：４フォーマットの映像信号である場合には、Ａ／Ｄ変換器によって、前記入力映像信号をオーバサンプリングしてデジタル信号に変換し、
前記入力映像信号が前記４：４：４フォーマットの映像信号である場合には、変換部によって、前記Ａ／Ｄ変換器からの映像信号の色の標本点を少なくして４：２：２フォーマットの映像信号に変換し、
映像処理モジュールが、前記入力映像信号が前記４：４：４フォーマットの映像信号でない場合には、前記入力映像信号をそのまま映像処理し、前記入力映像信号が前記４：４：４フォーマットの映像信号である場合には、前記入力映像信号を前記変換部によって変換させた後、自己合同性型超解像処理及び色超解像処理の少なくとも一方の処理を行う第１の超解像処理部による処理を含む映像処理を施す
ことを特徴とする映像処理方法。
【請求項６】
前記入力映像信号がＤ端子を介して入力された４：４：４フォーマットの映像信号である場合には、前記変換部による変換後の映像信号に対して、前記第１の超解像処理部による処理を含む映像処理を行うことを特徴とする請求項５に記載の映像処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施の形態は、映像表示装置及び映像信号の映像処理方法に関する。
【背景技術】
【０００２】
ゲーム機器を接続することにより、ユーザーがゲームを楽しむことのできるテレビジョン受信装置（以下「テレビ」という。）が普及している。ユーザーは、テレビの外部入力端子にゲーム機器を接続して動作させることにより、ゲーム機器で生成された映像及び音声がテレビのディスプレイ及びスピーカから出力される。即ち、テレビをゲーム機器の外部出力装置として用いることにより、ユーザーは大きな画面でゲームを楽しむことができる。
【０００３】
テレビは種々の映像入力に対応するものがある。例えば、テレビに、Ｄ端子（Ｄ１〜Ｄ５端子）、コンポーネント端子、Ｓ端子、ＲＣＡ端子、コンポジット映像信号端子及びＨＤＭＩ（High-Definition Multimedia Interface）端子等を備え、これらの端子からの映像入力を受け付ける。また、テレビは、各端子に入力される種々の映像信号フォーマットに対応しており、例えば、４８０ｉ、４８０ｐ、７２０ｐ、１０８０ｉ、１０８０ｐ等の映像信号を処理することができる。
【０００４】
近年、テレビには、種々の超解像処理により、入力された映像の画質改善を可能にする技術が搭載されることがある。例えば、再構成型超解像処理機能を有するテレビでは、オリジナル映像が本来有している鮮鋭な画像を復元することができる。
【０００５】
また、比較的低画質の映像信号に対して、斜め方向の解像度を向上させることが可能な自己合同性型超解像処理及び色超解像処理の処理機能を搭載したテレビも開発されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００５−３３８６０５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、ゲーム等の出力が入力されるＤ端子を介して入力された４：４：４フォーマットの映像信号については、他の４：２：２フォーマットの映像信号と比較して、高画質化のための処理を加えることが困難であった。このため、Ｄ端子に入力された映像信号については、単純スケーリング処理しかされず、斜め線がギザギザになりやすいという画質劣化の問題があった。
【０００８】
本発明は、Ｄ端子を介して入力される映像信号について超解像処理を施すことを可能にして、十分な高画質化を図ることができる映像表示装置及び映像処理方法を提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明の一態様の映像表示装置は、入力映像信号が４：４：４フォーマットの映像信号である場合には、前記入力映像信号をオーバサンプリングしてデジタル信号に変換するＡ／Ｄ変換器と、前記入力映像信号が４：４：４フォーマットの映像信号である場合には、前記Ａ／Ｄ変換器からの映像信号の色の標本点を少なくして４：２：２フォーマットの映像信号に変換する変換部と、前記４：４：４フォーマットよりも色の標本点が少ない映像信号に対して自己合同性型超解像処理及び色超解像処理の少なくとも一方の処理を行う第１の超解像処理部を含み、供給された映像信号に映像処理を施して表示モジュールに出力する映像処理モジュールと、入力映像信号が前記４：４：４フォーマットの映像信号でない場合には、前記入力映像信号を前記変換部により変換させることなく前記映像処理モジュールに供給し、前記入力映像信号が前記４：４：４フォーマットの映像信号である場合には、前記入力映像信号を前記変換部によって変換させた後前記映像処理モジュールに供給するコントローラと、を具備する。
【図面の簡単な説明】
【００１０】
【図１】本発明の一実施の形態に係る映像表示装置を示すブロック図。
【図２】図１の詳細な構成、特に前段モジュール１３及び映像処理モジュール３０の具体的な構成を示すブロック図。
【図３】実施の形態の動作を説明するためのフローチャート。
【図４】本発明の変形例を示すブロック図。
【発明を実施するための形態】
【００１１】
以下、図面を参照して本発明の実施の形態について詳細に説明する。図１は本発明の一実施形態に係る映像表示装置を示すブロック図である。
【００１２】
図１に示すように、映像表示装置であるテレビジョン受信装置（テレビ）１は、チューナ１１と、外部入力端子１２と、前段モジュール１３と、フレームメモリ１４と、映像処理モジュール３０と、セレクタ２１と、コントローラ２０と、オーディオプロセッサ１６と、音声遅延処理モジュール１７と、を具備する。なお説明の都合上、フレームメモリ１４と映像処理モジュール３０とを区別しているが、フレームメモリ１４は映像処理モジュール３０の機能の一部とみなすこともできるし、フレームメモリ１４及び映像処理モジュール３０等は、ひとつのシステムＬＳＩに実装されていてもよい。
【００１３】
そして、テレビ１は、アンテナ２がチューナ１１と、ゲーム操作部４を有するゲーム機器３が外部入力端子１２と接続され、表示モジュールである表示パネル１５に映像を、音声出力モジュールであるスピーカ１８に音声を出力する。
【００１４】
チューナ１１は、ＢＳ放送、ＣＳ放送等の衛星放送、地上波放送等の放送信号等を選局／処理して、映像信号及び音声信号を出力する。チューナ１１は、ケーブルＴＶ回線等の通信回線からの信号も受信可能である。
【００１５】
外部入力端子１２としては、Ｄ端子（Ｄ１〜Ｄ５端子）、コンポーネント端子、Ｓ端子、ＲＣＡ端子、コンポジット映像信号端子及びＨＤＭＩ（High-Definition Multimedia Interface）端子等があり、コンポジッット信号、Ｓ端子信号、色差信号、Ｄ−ｓｕｂ信号等の信号形態によるゲーム機器３及びハードディスクレコーダー等をはじめとする外部装置からの映像信号／音声信号を外部入力として受ける。
【００１６】
テレビ１で処理可能な映像フォーマットとしては、例えば、４８０ｉ、４８０ｐ、７２０ｐ、１０８０ｉ、１０８０ｐ等の種々の映像フォーマットが有る。また、テレビ１は、色信号の帯域を低減させるための種々のクロマフォーマットに対応しており、例えば間引きを行わない４：４：４フォーマットの外、色差信号を輝度信号の１／２に間引く４：２：２フォーマットや、１／４に間引く４：２：０フォーマット、４：１：１フォーマット等の映像信号に対する処理が可能である。
【００１７】
前段モジュール１３は、チューナ１１及び外部入力端子１２からの複数の映像信号／音声信号等が入力され、いずれかの映像信号／音声信号を選択して前段処理を行う。前段モジュール１３は、後述するように、アナログ映像信号をデジタル信号に変換するＡ／Ｄ変換機能及びクロマフォーマットを変換するクロマフォーマット変換機能を有する。前段モジュール１３は、前段処理後の映像信号をフレームメモリ１４に、音声信号をオーディオプロセッサ１６に出力する。
【００１８】
映像信号はフレームメモリ１４を介して、後に詳述する映像処理モジュール３０で信号処理され、表示映像信号が表示パネル１５に出力される。音声信号は、オーディオプロセッサ１６で信号処理された後に、映像信号の遅延時間に応じて、音声信号を遅延処理する音声遅延処理モジュール１７を介してスピーカ１８に出力される。
【００１９】
コントローラ２０は、ユーザー指示が入力されるセレクタ２１の設定等に応じて、テレビ１の全体の制御を行うＣＰＵである。コントローラ２０は、前段モジュール１３及び映像処理モジュール３０を、入力された映像信号のフォーマットに応じて制御して、各映像フォーマットに最適な映像処理を行わせるようになっている。例えば、コントローラ２０は、前段モジュール１３に外部入力端子１２中のＤ端子からの４：４：４フォーマットの映像信号を選択させる場合には、前段モジュール１３にこの映像信号を例えば４：２：２フォーマットの映像信号に変換させた後出力させる。そして、この場合には、コントローラ２０は、映像処理モジュール３０を制御して、クロマフォーマット変換後の映像信号に対して、４：２：２超解像モジュール及び４：４：４超解像モジュールによる両方の超解像処理を実施させるようになっている。
【００２０】
なお、セレクタ２１は、ユーザ操作に基づいて、チューナ１１からの映像信号及び外部入力端子１２の各端子のいずれの映像信号を選択するかを決定してコントローラ２０に指示する。
【００２１】
図２は図１の詳細な構成、特に前段モジュール１３及び映像処理モジュール３０の具体的な構成を示すブロック図である。
【００２２】
本実施の形態のテレビ１は前段モジュール１３として、Ａ／Ｄ変換器２７、セレクタ２８及びクロマフォーマット変換部２９を備えている。Ａ／Ｄ変換器２７は、入力された映像信号をデジタル信号に変換して出力する。Ａ／Ｄ変換器２７は、入力された映像信号をオーバーサンプリングしてデジタル信号に変換することができる。
【００２３】
セレクタ２８は、コントローラ２０に制御されて、Ａ／Ｄ変換器２７の出力のうち、４：４：４フォーマットの映像信号であって、解像度が比較的低い、例えば、４８０ｉ、４８０ｐ、７２０ｐ等の映像信号をクロマフォーマット変換部２９に与え、その他の映像信号については直接フレームメモリ１４に与えるようになっている。なお、セレクタ２８は、Ａ／Ｄ変換器２７の出力のうち、Ｄ端子を介して入力された４：４：４フォーマットの映像信号のみをクロマフォーマット変換部２９に与えるようにしてもよい。
【００２４】
クロマフォーマット変換部２９は、入力された４：４：４フォーマットの映像信号を、４：４：４フォーマットよりも色の標本点が少ないクロマフォーマットの映像信号、例えば、４：２：２、４：２：０、４：１：１フォーマット等の映像信号に変換してフレームメモリ１４に与える。なお、クロマフォーマット変換部２９は、Ｄ端子を介して入力された４：４：４フォーマットの映像信号を、４：２：２フォーマットの映像信号に変換するものであってもよい。
【００２５】
前段モジュール１３によって、少なくともＤ端子を介して入力された４：４：４フォーマットの映像信号については、４：２：２フォーマットの映像信号に変換されてフレームメモリ１４に供給される。
【００２６】
なお、４：４：４フォーマットの映像信号を４：２：２フォーマットの映像信号に変換することにより、色信号成分の解像度が低下する。しかしながら、Ａ／Ｄ変換器２７において、オーバーサンプリングによってＡ／Ｄ変換を行っており、クロマフォーマット変換による解像度の低下による画質劣化は僅かである。
【００２７】
図２において、テレビ１は、フレームメモリ１４と、映像処理モジュール３０と、映像解析モジュール２２と、同期信号生成モジュール４１と、クロック４２と、同期補正モジュール４３と、表示同期信号生成モジュール４４と、を有する。
【００２８】
映像処理モジュール３０は、ＩＰ変換／ＮＲモジュール３１、４：２：２超解像モジュール３２、４：４：４超解像モジュール３３、スケーラー３４、高画質化モジュール３５、倍速処理モジュール３６によって構成されている。
【００２９】
映像解析モジュール２２は、フレームメモリ１４に記憶された映像信号を解析し、コントローラ２０が映像処理モジュール３０の制御に用いるフレーム情報を出力する。即ち、映像解析モジュール２２は、例えば輝度レベルのダイナミックレンジをｎ分割し、１フレーム分の映像信号に対して、各輝度レベル１〜ｎに対応している画素数をカウントすることにより１フレーム分の輝度のヒストグラムデータを取得したりする。また、映像解析モジュール２２は、例えば映像信号の周波数分布も検出する。
【００３０】
同期信号生成モジュール４１は、入力された映像信号から同期信号を分離し生成する。クロック４２は所定の周波数の信号を発生し、表示同期信号生成モジュール４４はクロック４２が発生した信号をもとに、表示パネル１５が表示する表示映像信号の同期信号（表示同期信号）を発生する。
【００３１】
同期補正モジュール４３は、同期信号生成モジュール４１が生成した映像信号の入力同期信号と、表示同期信号生成モジュール４４が発生した表示同期信号と、を同期させる。表示装置として、フラットパネルディスプレイ（以下、ＦＰＤという）を採用した場合には、ＦＰＤにおいて表示に用いる水平及び垂直同期信号（以下、表示用同期信号という）は、入力映像信号の水平及び垂直同期信号（入力同期信号）とは非同期に発生される。ＦＰＤの表示用同期信号の周波数には許容範囲があり、入力同期信号がこの許容範囲（以下、同期補償期間という）内であれば、ＦＰＤは常に入力映像信号に基づく表示を行うことができる。
【００３２】
しかし、表示用同期信号を入力同期信号に同期させない場合には、表示用同期信号の周波数と入力同期信号の周波数との差から表示用メモリがオーバーフロー又はアンダーフローする虞がある。この理由から、同期補正モジュール４３は、表示同期信号を入力同期信号に同期化するようになっている。同期補正モジュール４３は、所定の同期補償期間にある入力同期信号に同期した表示同期信号を生成し、表示パネル１５に出力する。
【００３３】
映像処理モジュール３０中のＩＰ（Interlace／Progressive）変換／ＮＲ（Noise Reduction）モジュール３１は、インターレース方式の映像信号をプログレッシブ方式の映像信号へ変換するＩＰ変換処理を行うとともに、映像の、ざらつき、ちらつき、ブロッキングノイズ及び、モスキートノイズを低減するノイズリダクション処理を行う。即ち、ＩＰ変換／ＮＲモジュール３１は、ＩＰ変換処理モジュールとＮＲモジュールとから構成されている。なお、プログレッシブ方式の入力映像信号に対しては、ＩＰ変換処理は行われない。また、入力映像信号のノイズが少ない場合等にはノイズリダクション処理を省略してもよい。即ち、ＩＰ変換／ＮＲモジュール３１では、ＩＰ変換及びノイズリダクション処理の少なくとも一方が行われる。
【００３４】
４：２：２超解像モジュール３２は、自己合同性型超解像処理部及び色超解像処理部を備えている。自己合同性型超解像処理部は、フレーム内の“ある画像の近傍にそれと似た画像が存在する”という性質（自己合同性）を利用し、エッジの近傍のそれに似た信号を用いて元の画素の間にある信号を生成する。即ち、自己合同性型超解像処理部は、物体の境目や線などのエッジ部に対して処理を行い、エッジ部の周辺部から映像信号が近似した箇所を検出し、その画像を重ね合わせることで、より高精細な画像を生成する。自己合同性型超解像処理部の処理によって、画像の精細感が高められ、映像の鮮鋭感は更に向上する。
【００３５】
色超解像処理部は、輝度信号だけでなく色信号にも上記の自己合同性型超解像処理を行ない、色解像度を２倍に向上させる。これにより、画像の色のキレや精細感を向上させることができる。
【００３６】
デジタル放送においては、色の標本点を水平及び垂直方向に１／２に間引く４：２：０フォーマットの映像信号が用いられることがある。このような映像信号に対して、色超解像処理を施すことで、圧縮されて欠落した色情報の信号を明るさ情報の２分の１まで復元し、豊かな色彩を再現することができる。即ち、色超解像処理部は、細部にいたる色の情報量を増やすことで、輪郭部のにじみを抑制して鮮鋭に映し、画面全体の精細感を向上させる。
【００３７】
色超解像処理部は、色超解像処理を行うために、合同点探索処理及び位相合わせ処理を行う。色超解像処理部は、合同点探索処理によって、入力画素に対する自己合同性を有する画素を検出して新たな標本点として用いる。しかし、４：２：０フォーマットでは、輝度信号の画素位置に対して色差信号の画素の位置が垂直方向へシフトする位相オフセットを有している。そこで、色超解像処理部は、位相合わせ処理によって、輝度の位相に応じて色信号の位相を補正する位相合わせ処理を行っている。
【００３８】
この４：２：２超解像モジュール３２においては、４：４：４フォーマットの映像信号に対して信号処理を行うことができない。なお、４：４：４フォーマットの映像信号については、色信号に対する間引き処理は行われていないことから、色超解像処理を施さなくても十分な解像度が得られる。
【００３９】
また、４：２：２超解像モジュール３２における処理は、垂直方向の画素補間を伴い、４：２：２超解像モジュール３２は、基本的に、表示パネル１５の垂直方向画素数の１／２よりも大きい画素数の映像信号に対する処理も行うことができない。なお、画素圧縮処理又は間引き処理を行うことを前提に、表示パネル１５の垂直方向画素数の１／２よりも大きい画素数の映像信号に対する自己合同性型超解像処理及び色超解像処理を行うようにしてもよい。例えば、４：２：２超解像モジュール３２は、表示パネル１５がＨＤ解像度である場合には、４８０ｉ，４８０ｐの映像信号だけでなく４：２：２フォーマットの７２０ｐの映像信号に対する超解像処理を行うようにしてもよい。
【００４０】
このように、４：２：２超解像モジュール３２においては、垂直方向の画素数による制限及びクロマフォーマット上の制限から、全ての映像信号を超解像処理することはできない。例えばＤ端子に入力される４８０ｐの映像信号が４：４：４フォーマットである場合には、この映像信号に対して、４：２：２超解像モジュール３２による超解像処理を行うことはできない。しかしながら、Ｄ端子に入力される４：４：４フォーマットの４８０ｐの映像信号であっても、十分な解像度を有しているとは言えず、超解像処理による解像度の向上が期待される。
【００４１】
そこで、本実施の形態においては、Ｄ端子に入力される４：４：４フォーマットの４８０ｐの映像信号等については、一旦４：２：２フォーマットに変換した後、超解像モジュール３２に与えることにより、自己合同性型超解像処理及び色超解像処理による超解像処理によって解像度を向上させるようになっている。
【００４２】
セレクタ３７は、ＩＰ変換／ＮＲモジュール３１からの映像信号が、４：２：２超解像モジュール３２によって処理可能な解像度を有し４：４：４フォーマットよりも色の標本点が少ないクロマフォーマットの場合には、この映像信号を４：２：２超解像モジュール３２を介して４：４：４超解像モジュール３３に与え、それ以外の映像信号の場合には、当該映像信号を４：２：２超解像モジュール３２を介することなく直接４：４：４超解像モジュール３３に与えるようになっている。
【００４３】
例えば、セレクタ３７は、ＩＰ変換／ＮＲモジュール３１からの映像信号が、４８０ｉ、４８０ｐ又は７２０ｐであって、４：２：２フォーマットの映像信号を、４：２：２超解像モジュール３２に与える。これにより、Ｄ端子を介して入力された４：４：４フォーマットの映像信号については、４：２：２フォーマットに変換された後、４：２：２超解像モジュール３２に供給されることになり、自己合同性型超解像処理及び色超解像処理が施されることになる。
【００４４】
なお、４：２：２超解像モジュール３２は、複数フレームを用いて超解像処理を行う複数フレーム超解像処理部を備えていてもよい。
【００４５】
４：４：４超解像モジュール３３は、再構成型超解像処理を行うものであり、画素と画素との間に新しい画素値データを生成し、高い周波数成分を創造し、鮮鋭化することで、映像の元の解像度を超える映像を生成する。即ち、第１解像度である低解像度の映像信号から本来の画素値を推定して画素を増やすことにより、第２解像度である高解像度の映像信号を復元する。ここで、「本来の画素値」とは、例えば、低解像度（第１解像度）の映像信号を得たときと同じ被写体を、高解像度（第２解像度）のカメラで撮像したときに得られる映像信号の各画素が示す値をいう。また、「推定して画素を増やす」とは、対象とする映像の特徴を捉えて、同一フレーム内、またはフレーム間において相関の高い映像から、本来の画素値を推定して、新たな画素に対応付ける画素値とすることを意味する。つまり、映像の相関性を利用する。なお、超解像モジュール３３は、公知技術、例えば、入力映像の標本化周期で決まるナイキスト周波数より高い周波数成分を有する映像を復元する技術を用いる。
【００４６】
スケーラー３４は、表示パネル１５の仕様と異なる映像信号に対して、表示パネル１５の仕様にあわせたスケーリング処理を行う。例えば、入力映像信号のアスペクト比が４：３で、表示パネルのアスペクト比が１６：９の場合、スケーラー３４は、入力映像信号を、アスペクト比が１６：９の表示映像信号に変換する。
【００４７】
高画質化モジュール３５は、映像の画質を改善するために、例えば、色補正（ガンマ補正、ホワイトバランス調整、ブライトネス調整、コントラスト調整）、シャープネス調整、輪郭強調（エッジエンハンスメント）、及び応答速度向上等の高画質化処理を行う。
【００４８】
倍速処理モジュール３６は、フレーム周波数５０Ｈｚの場合は１００Ｈｚへ、６０Ｈｚ場合は１２０Ｈｚと、フレーム周波数を倍にあげ、残像感を低減する倍速処理を行う。倍速処理としては、動き補償予測に基づき、連続する２つのフレームの間に挿入するための補間フレームを生成する方式でもよいし、単純に同じ映像を２回表示する、いわゆる「単純二度振り方式（Simple double repeat method)」であってもよい。
【００４９】
次に、このように構成された実施の形態の動作について図３のフローチャートを参照して説明する。
【００５０】
アンテナ２に誘起した映像信号はチューナ１１によって選局された後、前段モジュール１３に供給される（ステップＳ１）。一方、ゲーム機器３からの映像信号は外部入力端子１２を介して前段モジュール１３に供給される。いま、ユーザの選局操作によって、チューナ１１からの高解像度の映像信号、例えば、１０８０ｐの４：４：４フォーマットの映像信号が選択されるものとする。前段モジュール１３は、入力された映像信号がアナログ信号である場合には、Ａ／Ｄ変換器２７によっデジタル信号に変換する。
【００５１】
コントローラ２０は、ステップＳ２において、選択された映像信号の映像フォーマットが高解像度の４：４：４フォーマットであることを検出すると、前段モジュール１３のセレクタ２８を制御して、この映像信号をフレームメモリ１４に与えて記憶させる。映像処理モジュール３０は、フレームメモリ１４に格納された映像信号を読み出して、各部における処理を実行する。
【００５２】
コントローラ２０は、セレクタ３７を制御して、ＩＰ変換／ＮＲモジュール３１の出力を４：４：４超解像モジュール３３に与える。これにより、フレームメモリ１４から読出された映像信号は、ＩＰ変換／ＮＲモジュール３１によってＮＲ処理が施された後、４：４：４超解像モジュール３３によって再構成型超解像処理が施されて、高解像度化される。４：４：４超解像モジュール３３からの映像信号は、スケーラー３４、高画質化モジュール３５及び倍速処理モジュール３６において各処理が行われた後、表示映像信号として表示パネル１５に供給される。
【００５３】
こうして、表示パネル１５の表示下面上には、超解像処理されて高画質化された映像が表示される。
【００５４】
次に、ユーザが、Ｄ端子を介して入力されたゲーム機器３からの４：４：４フォーマットの映像信号を選択するものとする。前段モジュール１３は、Ｄ端子を介して入力された４８０ｐのアナログ映像信号を、Ａ／Ｄ変換器２７によっデジタル信号に変換する。
【００５５】
コントローラ２０は、ステップＳ２において、選択された映像信号の映像フォーマットが比較的低い解像度の４：４：４フォーマットであることを検出すると、処理をステップＳ３，Ｓ４からステップＳ５に移行して、クロマフォーマット変換を行う。即ち、コントローラ２０は、前段モジュール１３のセレクタ２８を制御して、ゲーム機器３等からの映像信号をクロマフォーマット変換部２９に与える。クロマフォーマット変換部２９は、入力された映像信号について色信号の標本点を少なくして、例えば、４：２：２フォーマットに変換する。クロマフォーマット変換部２９によってクロマフォーマットが変換された映像信号は、フレームメモリ１４に与えられて記憶される。
【００５６】
映像処理モジュール３０は、フレームメモリ１４に格納された映像信号を読み出して、各部における処理を実行する。コントローラ２０は、セレクタ３７を制御して、ＩＰ変換／ＮＲモジュール３１からのＮＲ処理後の映像信号を４：２：２超解像モジュール３２に与える。
【００５７】
４：２：２超解像モジュール３２は、入力された映像信号に対して、自己合同性型超解像処理及び色超解像処理を行って（ステップＳ６）、輝度及び色の斜め方向の解像度を向上させた後、４：４：４超解像モジュール３３に与える。これにより、Ｄ端子から入力された比較的低い解像度の映像信号についても高解像度化される。更に、４：２：２超解像モジュール３２の出力は、４：４：４超解像モジュール３３に供給されて再構成型超解像処理が施される（ステップＳ７）。４：４：４超解像モジュール３３からの映像信号は、スケーラー３４、高画質化モジュール３５及び倍速処理モジュール３６において各処理が行われた後、表示映像信号として表示パネル１５に供給される。
【００５８】
こうして、表示パネル１５の表示下面上には、Ｄ端子を介して入力された比較的低解像度の映像信号であっても、再構成型超解像処理だけでなく、自己合同性型超解像処理及び色超解像処理によって十分に高解像度化されて、高画質の映像が表示される。
【００５９】
このように本実施の形態においては、比較的低い解像度の４：４：４フォーマットの映像信号については、４：２：２フォーマットに変換した後映像信号を処理を施す。４：２：２フォーマットに変換することにより色の標本点が少なくなるが、Ａ／Ｄ変換時のオーバサンプリングによって、標本点の低下による画質の劣化は僅かであり、一方、４：２：２フォーマットに変換することにより、自己合同性型超解像処理及び色超解像度処理が加えられるので、十分な高解像度化を図ることができ、画質を著しく向上させることが可能である。これにより、例えば、Ｄ端子に入力されるゲーム機器等からの４：４：４フォーマットの映像信号を十分に高解像度化及び高画質化することができる。
【００６０】
（変形例）
図４は本発明の変形例を示すブロック図である。図４において図２と同一の構成要素には同一符号を付して説明を省略する。
【００６１】
本変形例は、クロマフォーマット変換部２９に代えてクロマフォーマット変換部２９’を採用した点が図２の構成と異なる。クロマフォーマット変換部２９’は、コントローラ２０から与えられる変換パラメータに従って、クロマフォーマット変換を行うようになっている。コントローラ２０は、Ａ／Ｄ変換器２７の出力のうち、４：４：４フォーマットの映像信号であって、解像度が比較的低い、例えば、４８０ｉ、４８０ｐ、７２０ｐ等の映像信号については、４：４：４フォーマットよりも色の標本点が少ないクロマフォーマットの映像信号、例えば、４：２：２、４：２：０、４：１：１フォーマット等の映像信号に変換するための変換パラメータをクロマフォーマット変換部２９’に与える。また、コントローラ２０は、４：４：４フォーマットの映像信号であって解像度が比較的低い映像信号以外の映像信号については、クロマフォーマット変換することなくそのまま出力するための変換パラメータをクロマフォーマット変換部２９’に与えるようになっている。
【００６２】
これにより、クロマフォーマット変換部２９’は、４：４：４フォーマットの映像信号であって解像度が比較的低い映像信号については、４：４：４フォーマットよりも色の標本点が少ないクロマフォーマットの映像信号、例えば、４：２：２、４：２：０、４：１：１フォーマット等の映像信号に変換してフレームメモリ１４に出力する。
【００６３】
他の構成及び作用効果は、上述した実施の形態と同様である。
【００６４】
以上、本発明の実施形態を説明したが、この実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。この新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。この実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【符号の説明】
【００６５】
１…テレビジョン受信装置、２…アンテナ、３…ゲーム機器、４…ゲーム操作部、１１…チューナ、１２…外部入力端子、１３…前段モジュール、１４…フレームメモリ、１５…表示パネル、１６…オーディオプロセッサ、１７…音声遅延処理モジュール、１８…スピーカ、２０…コントローラ、２１、２８，３７…セレクタ、２２…映像解析モジュール、２７…Ａ／Ｄ変換器、２９…クロマフォーマット変換部、３０…映像処理モジュール、３１…ＩＰ変換／ＮＲモジュール、３２…４：２：２超解像モジュール、３３…４：４：４超解像モジュール、３４…スケーラー、３５…高画質化モジュール、３６…倍速処理モジュール、４１…同期信号生成モジュール、４２…クロック、４３…同期補正モジュール、４４…表示同期信号生成モジュール。
【図１】
0005112528.tif 000002
【図２】
0005112528.tif 000003
【図３】
0005112528.tif 000004
【図４】
0005112528.tif 000005