(57)【要約】【課題】画像のチェックをする。【解決手段】信号処理部１２は、入力画像データを対象として、所定の信号処理を行う。表示制御部１３は、入力画像データの画素数より多い画素数の画面を有する表示装置２の画面の一部の表示領域に、入力画像データに対応する画像を表示させるとともに、表示装置２の画面の他の一部の表示領域に、所定の信号処理によって得られる処理後画像データに対応する画像を表示させる。本発明は、例えば、放送局で、画像の画質等のチェックのために使用される、画像を表示するモニタシステム等に適用できる。【選択図】図１
2008178075.tif 000002
【特許請求の範囲】
【請求項１】
画像の表示を制御する表示制御装置において、
入力画像データを対象として、所定の信号処理を行う信号処理手段と、
前記入力画像データの画素数より多い画素数の画面を有する表示装置の前記画面の一部の表示領域に、前記入力画像データに対応する画像を表示させるとともに、前記画面の他の一部の表示領域に、前記所定の信号処理によって得られる処理後画像データに対応する画像を表示させる表示制御手段と
を備える表示制御装置。
【請求項２】
前記信号処理手段は、前記表示装置と異なる表示特性を有する他の表示装置で表示される、前記入力画像データに対応する画像に相当する画像を前記表示装置に表示させる画像データを、前記処理後画像データとして生成する信号処理を行う
請求項１に記載の表示制御装置。
【請求項３】
前記他の表示装置は、PDP(Plasma Display Panel)、又はCRT(Cathode Ray Tube)で画像を表示する装置である
請求項２に記載の表示制御装置。
【請求項４】
前記信号処理手段は、他の表示装置が画像を表示するときに前記入力画像データに施す処理に相当する信号処理を行う
請求項１に記載の表示制御装置。
【請求項５】
前記信号処理手段は、前記他の表示装置が画像を表示するときに前記入力画像データに施す、画像の一部を強調するエンハンス処理、適応的なガンマ補正を行う適応ガンマ補正処理、又は、高フレームレートの画像データを生成する高フレームレート処理に相当する信号処理を行う
請求項４に記載の表示制御装置。
【請求項６】
前記信号処理手段は、他の表示装置が行う、画像を拡大する処理、又は、フレームを補間する処理に相当する信号処理を行う
請求項１に記載の表示制御装置。
【請求項７】
画像の表示を制御する表示制御方法において、
入力画像データを対象として、所定の信号処理を行い、
前記入力画像データの画素数より多い画素数の画面を有する表示装置の前記画面の一部の表示領域に、前記入力画像データに対応する画像を表示させるとともに、前記画面の他の一部の表示領域に、前記所定の信号処理によって得られる処理後画像データに対応する画像を表示させる
ステップを含む表示制御方法。
【請求項８】
画像の表示を制御する表示制御処理を、コンピュータに実行させるプログラムにおいて、
入力画像データを対象として、所定の信号処理を行い、
前記入力画像データの画素数より多い画素数の画面を有する表示装置の前記画面の一部の表示領域に、前記入力画像データに対応する画像を表示させるとともに、前記画面の他の一部の表示領域に、前記所定の信号処理によって得られる処理後画像データに対応する画像を表示させる
ステップを含む表示制御処理を、コンピュータに実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示制御装置、表示制御方法、及びプログラムに関し、特に、例えば、テレビジョン放送の放送側において、受信側で表示される画像をチェックすること等ができるようにする表示制御装置、表示制御方法、及びプログラムに関する。
【背景技術】
【０００２】
例えば、テレビジョン放送の放送側では、番組を放送する前に、その番組の画像を、表示装置（モニタ）に表示して、画質等のチェックが行われる。
【０００３】
画像の画質をチェックする方法としては、原画像と、その原画像を処理した処理画像とを、スイッチで切り換えて、１つのディスプレイに表示して、原画像と、処理画像とのそれぞれを、人が主観的に評価し、さらに、原画像の評価の結果を、原画像に近接して表示し、処理画像の評価の結果を、処理画像に近接して表示する方法がある（例えば、特許文献１を参照）。
【０００４】
【特許文献１】特開2001-136548号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
近年、テレビジョン放送を受信するテレビジョン受像機等の表示装置が高性能化しており、例えば、50インチ以上のLCD(Liquid Crystal Display)等の大画面を有する表示装置が普及しつつある。
【０００６】
このため、テレビジョン放送を受信する家庭等の受信側において、放送側で画質等のチェックに用いられる表示装置（以下、適宜、チェック用の表示装置という）よりも高性能の表示装置、すなわち、例えば、チェック用の表示装置よりも大画面の表示装置で、番組の視聴が行われるようになってきている。
【０００７】
そして、チェック用の表示装置よりも大画面の表示装置で、番組の視聴が行われる場合には、チェック用の表示装置では目立たなかったノイズ等の画質の劣化が目立ち、視聴者に違和感を感じさせることがある。
【０００８】
本発明は、このような状況に鑑みてなされたものであり、受信側等で表示される画像のチェックをすることができるようにするものである。
【課題を解決するための手段】
【０００９】
本発明の一側面の表示制御装置は、画像の表示を制御する表示制御装置であり、入力画像データを対象として、所定の信号処理を行う信号処理手段と、前記入力画像データの画素数より多い画素数の画面を有する表示装置の前記画面の一部の表示領域に、前記入力画像データに対応する画像を表示させるとともに、前記画面の他の一部の表示領域に、前記所定の信号処理によって得られる処理後画像データに対応する画像を表示させる表示制御手段とを備える。
【００１０】
本発明の一側面の表示制御方法、又は、プログラムは、画像の表示を制御する表示制御方法、又は、表示制御処理を、コンピュータに実行させるプログラムであり、入力画像データを対象として、所定の信号処理を行い、前記入力画像データの画素数より多い画素数の画面を有する表示装置の前記画面の一部の表示領域に、前記入力画像データに対応する画像を表示させるとともに、前記画面の他の一部の表示領域に、前記所定の信号処理によって得られる処理後画像データに対応する画像を表示させるステップを含む。
【００１１】
本発明の一側面においては、入力画像データを対象として、所定の信号処理が行われ、前記入力画像データの画素数より多い画素数の画面を有する表示装置の前記画面の一部の表示領域に、前記入力画像データに対応する画像が表示されるとともに、前記画面の他の一部の表示領域に、前記所定の信号処理によって得られる処理後画像データに対応する画像が表示される。
【００１２】
なお、プログラムは、伝送媒体を介して伝送することにより、又は、記録媒体に記録して提供することができる。
【発明の効果】
【００１３】
本発明の一側面によれば、画像を表示することができ、さらに、その表示を確認することによって、例えば、受信側等で表示される画像のチェックをすることができる。
【発明を実施するための最良の形態】
【００１４】
図１は、本発明を適用したモニタシステム（システムとは、複数の装置が論理的に集合した物をいい、各構成の装置が同一筐体中にあるか否かは、問わない）の一実施の形態の構成例を示すブロック図である。
【００１５】
モニタシステムは、表示制御装置１、表示装置２、及びリモートコマンダ３から構成され、例えば、テレビジョン放送を行う放送局等で、画質等のチェックに使用される。
【００１６】
モニタシステムには、画像を撮像するカメラが出力する画像データや、いわゆる素材を編集する編集装置が出力する画像データ、MPEG(Moving Picture Expert Group)方式等でエンコードされたエンコードデータをデコードするデコーダが出力する画像データ、その他の放送局等で放送を行う前の番組の動画の画像データが、モニタシステムへの入力となる入力画像データとして供給される。
【００１７】
そして、モニタシステムでは、入力画像データとしての、放送前の番組の画像データに対応する画像の、家庭等の受信側の表示装置（表示装置２の他の表示装置）での表示のシミュレーション（エミュレーション）が行われ、つまり、入力画像データを受信する受信側の各種の表示装置において、その入力画像データに対応する画像が表示されたならば表示されるであろう画像が表示され、これにより、画質等のチェック（評価）を行う評価者等が、その表示を見て、入力画像データに対応する画像が、受信側の表示装置で、どのような画質等で表示されるかのチェックを行うことができるようになっている。
【００１８】
表示制御装置１は、画像変換部１１、信号処理部１２、表示制御部１３、及び制御部１４から構成され、入力画像データを対象として、所定の信号処理を行い、表示装置２の画面の一部の表示領域に、入力画像データに対応する画像を表示させるとともに、その画面の他の一部の表示領域に、所定の信号処理によって得られる処理後画像データに対応する画像を表示させる。
【００１９】
すなわち、画像変換部１１には、入力画像データが供給される。画像変換部１１は、入力画像データを、受信側の表示装置でどのような画像が表示されるかのチェックの対象であるチェック画像データとして、そのチェック画像データに対して、画素数を変換する画像変換処理を、必要に応じて施し、信号処理部１２と表示制御部１３とに供給する。
【００２０】
信号処理部１２は、図１の実施の形態では、３つの第１信号処理部１２1、第２信号処理部１２2、及び第３信号処理部１２3から構成され、画像変換部１１からのチェック画像データに対して、受信側の表示装置において入力画像データ（チェック画像データ）に対応する画像が表示されたならば表示されるであろう画像が表示装置２で表示されるようにするための信号処理を施し、その信号処理によって得られる処理後画像データを、表示制御部１３に供給する。
【００２１】
すなわち、第１信号処理部１２1は、画像変換部１１からのチェック画像データに対して、制御部１４からの制御にしたがった信号処理を施し、その信号処理によって得られる処理後画像データを、表示制御部１３に供給する。
【００２２】
第２信号処理部１２2と第３信号処理部１２3も、第１信号処理部１２1と同様に、画像変換部１１からのチェック画像データに対して、制御部１４からの制御にしたがった信号処理をそれぞれ施し、その信号処理によって得られる処理後画像データを、表示制御部１３に供給する。
【００２３】
表示制御部１３は、制御部１４の制御にしたがい、画像変換部１１から供給されるチェック画像データに対応する画像を、表示装置２の画面の一部の表示領域に表示させる。さらに、表示制御部１３は、制御部１４の制御にしたがい、第１信号処理部１２1、第２信号処理部１２2、又は第３信号処理部１２3からそれぞれ供給される処理後画像データに対応する画像を、表示装置２の画面の他の一部の表示領域に表示させる。
【００２４】
なお、表示制御部１３は、制御部１４から供給されるパラメータにしたがい、表示装置２に画像を表示する位置や大きさを制御する。
【００２５】
ここで、以下、適宜、表示制御部１３に対して、第１信号処理部１２1、第２信号処理部１２2、又は第３信号処理部１２3からそれぞれ供給される処理後画像データを、第１処理後画像データ、第２処理後画像データ、又は第３処理後画像データともいう。
【００２６】
制御部１４は、リモートコマンダ３や、表示制御装置１に設けられた図示せぬ操作部から送信されてくる操作信号を受信し、その操作信号に対応して、第１信号処理部１２1、第２信号処理部１２2、及び第３信号処理部１２3、並びに表示制御部１３を制御する。また、制御部１４は、第１信号処理部１２1、第２信号処理部１２2、及び第３信号処理部１２3、並びに表示制御部１３の各ブロックに対して、処理に必要なパラメータその他の情報を供給する。
【００２７】
表示装置２は、例えば、LCD(Liquid Crystal Display)で画像を表示する装置であり、画像変換部１１が信号処理部１２及び表示制御部１３に供給するチェック画像データの画素数より多い画素数の画面を有する。そして、表示装置２は、表示制御部１３の制御にしたがい、チェック画像データに対応する画像を、画面の一部の表示領域に表示するとともに、第１処理後画像データ、第２処理後画像データ、及び第３処理後画像データに対応する画像それぞれを、画面の他の一部の表示領域に表示する。
【００２８】
リモートコマンダ３は、例えば、チェック画像データ、ひいては、入力画像データに対応する画像が、受信側の表示装置で、どのような画質等で表示されるかのチェックを行う評価者等によって操作され、その操作に対応する操作信号を、赤外線等の無線で、制御部１４に送信する。
【００２９】
図２は、表示装置２の画面の構成例を示している。
【００３０】
表示装置２では、その画面を、横と縦にそれぞれ等分する４つの表示領域#0,#1,#2,#3のそれぞれに画像が表示される。
【００３１】
すなわち、表示装置２では、４つの表示領域#0ないし#3のうちの、左上の表示領域#0に、チェック画像データに対応する画像が表示され、右上の表示領域#1に、第１処理後画像データに対応する画像が表示され、左下の表示領域#2に、第２処理後画像データに対応する画像が表示され、右下の表示領域#3に、第３処理後画像データに対応する画像が表示される。
【００３２】
ここで、表示装置２の画面を構成する画素を、画像データの画素と区別するために、以下、適宜、モニタ画素ということとすると、表示装置２の画面は、横×縦が、2H×2Vモニタ画素（2H×2V個のモニタ画素）で構成されている。
【００３３】
したがって、表示領域#0ないし#3は、いずれも、H×Vモニタ画素で構成される。
【００３４】
なお、例えば、表示領域#i(i=0,1,2,3)の横のモニタ画素の画素数Hを、1920画素とするとともに、縦のモニタ画素の画素数Vを、1080画素とすると、表示領域#iには、アスペクト比が16:9のHDTV(High-Definition Television)用の画像を表示することができる。
【００３５】
また、本実施の形態では、表示装置２の画面を、４つの表示領域#0ないし#3に区分し、その４つの表示領域#0ないし#3のそれぞれを、いわば仮想的な１画面として、表示領域#0ないし#3のそれぞれに、（１つの）画像を表示するが、表示装置２では、４つの表示領域#0ないし#3の全体、つまり、表示装置２の画面全体に、（１つの）画像を表示することができる。
【００３６】
上述したように、表示領域#iが、1920×1080モニタ画素で構成されることとすると、表示装置２の画面全体に、画像を表示する場合には、表示装置２では、[2×1920]×[2×1080]画素からなる、HDTV用の画像よりも高精細な画像を表示することができる。
【００３７】
次に、図３のフローチャートを参照して、図１のモニタシステムの処理について説明する。
【００３８】
表示制御装置１の画像変換部１１に対して、外部から入力画像データが供給されると、ステップＳ１１において、画像変換部１１は、入力画像データを、チェック画像データとして、そのチェック画像データが、例えば、表示領域#0を構成するモニタ画素と同一の画素数で構成されるかどうか、すなわち、チェック画像データが、H×V画素で構成されるかどうかを判定する。
【００３９】
ステップＳ１１において、チェック画像データが、表示領域#0を構成するモニタ画素と同一のH×V画素で構成されると判定された場合、処理は、ステップＳ１２をスキップして、ステップＳ１３に進む。
【００４０】
また、ステップＳ１１において、チェック画像データが、表示領域#0を構成するモニタ画素と同一のH×V画素以外の画素数で構成されると判定された場合、処理は、ステップＳ１２に進み、画像変換部１１は、チェック画像データを対象として、そのチェック画像データの画素数を、表示領域#0を構成するモニタ画素の画素数と同一のH×V画素に変換する画像変換処理を行い、その画像変換処理後のチェック画像データを、信号処理部１２と表示制御部１３とに供給して、処理は、ステップＳ１３に進む。
【００４１】
ステップＳ１３では、信号処理部１２を構成する第１信号処理部１２1、第２信号処理部１２2、及び第３信号処理部１２3のそれぞれが、画像変換部１１からのチェック画像データに対して、制御部１４からの制御にしたがった信号処理を施し、その信号処理によって得られる第１処理後画像データ、第２処理後画像データ、及び第３処理後画像データを、表示制御部１３に供給して、処理は、ステップＳ１４に進む。
【００４２】
ステップＳ１４では、表示制御部１３が、制御部１４の制御にしたがい、画像変換部１１からのチェック画像データに対応する画像を、表示装置２の表示領域#0に表示させる。さらに、ステップＳ１４では、表示制御部１３が、制御部１４の制御にしたがい、第１信号処理部１２1からの第１処理後画像データに対応する画像を表示領域#1に、第２信号処理部１２2からの第２処理後画像データに対応する画像を表示領域#2に、第３信号処理部１２3からの第３処理後画像データを表示領域#3に、それぞれ表示させる。
【００４３】
以上のようにして、表示領域#0には、チェック画像データに対応する画像が表示され、表示領域#1には、チェック画像データに所定の信号処理を施すことによって得られた第１処理後画像データに対応する画像、すなわち、受信側のある種類の表示装置においてチェック画像データに対応する画像が表示されたならば表示されるであろう画像が表示される。
【００４４】
また、表示領域#2には、チェック画像データに所定の信号処理を施すことによって得られた第２処理後画像データに対応する画像、すなわち、受信側の他の種類の表示装置においてチェック画像データに対応する画像が表示されたならば表示されるであろう画像が表示され、表示領域#3には、チェック画像データに所定の信号処理を施すことによって得られた第３処理後画像データに対応する画像、すなわち、受信側のさらに他の種類の表示装置においてチェック画像データに対応する画像が表示されたならば表示されるであろう画像が表示される。
【００４５】
したがって、表示領域#0に表示される画像によって、番組の画像データの、例えば、S/N(Signal to Noise Ratio)等の画質をチェックすることができる。さらに、表示領域#1ないし#3に表示される画像によって、表示領域#0に表示される画像が、受信側の各種の表示装置において、どのように表示されるかのチェックを行うことができる。
【００４６】
さらに、表示装置２は、H×V画素のチェック画像データの画素数より多いモニタ画素の画面を有するので、図２に示したように、画面の一部の表示領域である、例えば、表示領域#0に、チェック画像データに対応する画像を表示するのと同時に、画面の他の一部の表示領域である、表示領域#1や、#2、#3に、チェック画像データに所定の信号処理を施すことによって得られる処理後画像データに対応する画像、すなわち、受信側の表示装置においてチェック画像データに対応する画像が表示されたならば表示されるであろう画像を表示することができる。
【００４７】
したがって、チェック画像データに対応する画像と、その画像の、受信側の表示装置での表示の状態、つまり、チェック画像データが番組として放送され、受信側の表示装置で受信されて表示されるまでに生じる画質等の劣化がある劣化画像とを比較しながら、受信側の表示装置で表示される画像（劣化画像）の劣化の状態をチェックすることができる。そして、受信側の表示装置で表示される画像の劣化の状態を定性的に考慮して、番組の編集（編集のし直し）等を行うことができる。
【００４８】
また、チェック画像データに対応する画像と、処理後画像データに対応する画像とが、表示装置２の、物理的に１つの画面に表示されるので、チェック画像データに対応する画像と、処理後画像データに対応する画像とを、別々の表示装置に表示した場合に問題となる表示装置の各種の特性の違いを考慮する必要がない。
【００４９】
次に、図４は、図１の信号処理部１２の第１の構成例を示している。
【００５０】
図４では、信号処理部１２の第１信号処理部１２1が、画像変換部３１1から構成され、第２信号処理部１２2が、画像変換部３１2から構成され、第３信号処理部１２3が、画像変換部３１3から構成されている。
【００５１】
画像変換部３１i(i=1,2,3)には、画像変換部１１（図１）からチェック画像データが供給されるとともに、制御部１４（図１）から、画像を拡大する拡大率m,m',m''(>1)を表す拡大率情報が供給される。
【００５２】
そして、画像変換部３１iは、制御部１４から供給される拡大率情報にしたがい、画像変換部１１からのチェック画像データを対象として、受信側の表示装置が行う、画像を拡大する処理に相当する信号処理を行う。
【００５３】
すなわち、受信側の表示装置の中には、放送局からの番組としての画像を拡大する処理を行う拡大機能を有するものがあり、画像変換部３１iは、そのような、受信側の表示装置が行う、画像を拡大する処理に相当する信号処理を行う。
【００５４】
具体的には、画像変換部３１1は、制御部１４から供給される拡大率情報にしたがい、画像変換部１１からのチェック画像データを、そのチェック画像データをm倍にしたm倍拡大画像データに変換する画像変換処理を行い、その画像変換処理によって得られるm倍拡大画像データを、処理後画像データとして、表示制御部１３（図１）に供給する。
【００５５】
画像変換部３１2は、制御部１４から供給される拡大率情報にしたがい、画像変換部１１からのチェック画像データを、そのチェック画像データをm'倍にしたm'倍拡大画像データに変換する画像変換処理を行い、その画像変換処理によって得られるm'倍拡大画像データを、処理後画像データとして、表示制御部１３に供給する。同様に、画像変換部３１3も、制御部１４から供給される拡大率情報にしたがい、画像変換部１１からのチェック画像データを、そのチェック画像データをm''倍にしたm''倍拡大画像データに変換する画像変換処理を行い、その画像変換処理によって得られるm''倍拡大画像データを、処理後画像データとして、表示制御部１３に供給する。
【００５６】
図５は、信号処理部１２が図４に示したように構成される場合の、表示装置２の表示例を示している。
【００５７】
表示装置２においては、表示領域#0に、チェック画像データに対応する画像（以下、適宜、チェック画像ともいう）が表示される。また、表示領域#1には、m倍拡大画像データに対応する画像が、表示領域#2には、m'倍拡大画像データに対応する画像が、表示領域#3には、m''倍拡大画像データに対応する画像が、それぞれ表示される。
【００５８】
したがって、受信側の表示装置のうちの、拡大機能を有する表示装置において、放送局からの番組としての画像が、拡大機能によって拡大されて表示される場合の、その表示の状態（拡大された画像の画質等）のチェックを行うことができる。
【００５９】
なお、拡大率m,m',m''は、例えば、リモートコマンダ３（図１）を操作することにより指定することができる。
【００６０】
ところで、図４の画像変換部３１1では（他の画像変換部３１2及び３１3でも同様）、画像変換処理によって、チェック画像データが、横と縦それぞれの画素数がm倍のm倍拡大画像データに変換される。
【００６１】
本実施の形態では、上述したように、チェック画像データは、H×Vモニタ画素で構成される表示領域#iと同一の画素数のH×V画素で構成されるため、m倍拡大画像データは、mH×mV画素で構成される。
【００６２】
したがって、mH×mV画素で構成されるm倍拡大画像データに対応する画像の全体を、表示領域#1に表示することはできないため、表示領域#1では、図６に示すように、m倍拡大画像データに対応するmH×mV画素の画像のうちの一部が表示される。
【００６３】
すなわち、図６は、m倍拡大画像データに対応するmH×mV画素の画像の表示例を示している。
【００６４】
H×Vモニタ画素で構成される表示領域#1では、m倍拡大画像データに対応するmH×mV画素の画像のうちの、H×V画素の領域の部分が表示される。
【００６５】
いま、m倍拡大画像データに対応するmH×mV画素の画像のうちの、表示領域#1に表示されるH×V画素の領域に対応する、チェック画像の領域（図６において斜線を付してある部分）を、表示範囲領域ということとすると、表示範囲領域は、例えば、リモートコマンダ３を操作することにより指定することができ、表示制御部１３は、その指定にしたがって、m倍拡大画像データに対応するmH×mV画素の画像の一部を、表示領域#1に表示させる。
【００６６】
また、チェック画像における表示範囲領域は、例えば、チェック画像が表示される表示領域#0において、チェック画像に重畳して表示することができる。
【００６７】
次に、図７は、図１の信号処理部１２の第２の構成例を示している。
【００６８】
図７では、信号処理部１２の第１信号処理部１２1が、シミュレート処理部４１1から構成され、第２信号処理部１２2が、シミュレート処理部４１2から構成され、第３信号処理部１２3が、シミュレート処理部４１3から構成されている。
【００６９】
シミュレート処理部４１i(i=1,2,3)には、画像変換部１１（図１）からチェック画像データが供給されるとともに、制御部１４（図１）から、画像を表示する表示デバイスの種類を表す種類情報が供給される。
【００７０】
そして、シミュレート処理部４１iは、制御部１４から供給される種類情報にしたがい、画像変換部１１からのチェック画像データを対象として、表示装置２と異なる表示特性を有する他の表示装置でチェック画像が表示されるときに他の表示装置に表示される画像に相当する画像を、表示装置２の表示領域#iに表示させる画像データを、処理後画像データとして生成する信号処理を行う。
【００７１】
すなわち、上述したように、表示装置２は、LCDから構成されるが、受信側の表示装置としては、LCDとは異なる表示特性を有する表示デバイスである、例えば、CRT(Cathode Ray Tube)や、PDP(Plasma Display Panel)、有機EL(Electro Luminescence)ディスプレイ、FED(Field Emission Display)、その他を有する表示装置があり得る。また、今後、新たな表示デバイスを有する表示装置が開発されることがあり得る。
【００７２】
そこで、シミュレート処理部４１iは、そのような、表示装置２と異なる表示特性を有する受信側の表示装置で表示されるチェック画像に相当する画像を表示装置２の表示領域#iに表示させる画像データを、処理後画像データとして生成する信号処理を行う。
【００７３】
ここで、有機ELディスプレイを有する受信側の表示装置で表示されるチェック画像に相当する画像をLCDの表示装置２に表示させる画像データを、擬似有機EL画像データというとともに、チェック画像データから、擬似有機EL画像データを生成する信号処理を、有機ELシミュレート処理という。
【００７４】
また、PDPを有する受信側の表示装置で表示されるチェック画像に相当する画像をLCDの表示装置２に表示させる画像データを、擬似PDP画像データというとともに、チェック画像データから、擬似PDP画像データを生成する信号処理を、PDPシミュレート処理という。
【００７５】
さらに、CRTを有する受信側の表示装置で表示されるチェック画像に相当する画像をLCDの表示装置２に表示させる画像データを、擬似CRT画像データというとともに、チェック画像データから、擬似CRT画像データを生成する信号処理を、CRTシミュレート処理という。
【００７６】
この場合、シミュレート処理部４１1は、制御部１４から供給される種類情報にしたがい、画像変換部１１からのチェック画像データから、例えば、擬似有機EL画像データを生成する有機ELシミュレート処理を行い、その有機ELシミュレート処理によって得られる擬似有機EL画像データを、処理後画像データとして、表示制御部１３（図１）に供給する。
【００７７】
シミュレート処理部４１2は、制御部１４から供給される種類情報にしたがい、制御部１４から供給される種類情報にしたがい、画像変換部１１からのチェック画像データから、例えば、擬似PDP画像データを生成するPDPシミュレート処理を行い、そのPDPシミュレート処理によって得られる擬似PDP画像データを、処理後画像データとして、表示制御部１３に供給する。
【００７８】
同様に、シミュレート処理部４１3も、制御部１４から供給される種類情報にしたがい、画像変換部１１からのチェック画像データから、例えば、擬似CRT画像データを生成するCRTシミュレート処理を行い、そのCRTシミュレート処理によって得られる擬似CRT画像データを、処理後画像データとして、表示制御部１３に供給する。
【００７９】
図８は、信号処理部１２が図７に示したように構成される場合の、表示装置２の表示例を示している。
【００８０】
LCDを有する表示装置２においては、表示領域#0に、チェック画像が表示される。また、表示領域#1には、擬似有機EL画像データに対応する画像が、表示領域#2には、擬似PDP画像データに対応する画像が、表示領域#3には、擬似CRT画像データに対応する画像が、それぞれ表示される。
【００８１】
したがって、受信側の表示装置のうちの、LCDを有する表示装置、有機ELディスプレイパネルを有する表示装置、PDPを有する表示装置、及び、CRTを有する表示装置のそれぞれにおいて、放送局からの番組としての画像が、どのような画質等で表示されるかのチェックを行うことができる。
【００８２】
なお、図７のシミュレート処理部４１iにおいて、どのような表示特性の表示デバイスを有する表示装置で表示されるチェック画像に相当する画像をLCDの表示装置２に表示させる画像データを生成する信号処理を行うかは、制御部１４からシミュレート処理部４１iに供給される種類情報によって決定される。制御部１４からシミュレート処理部４１iに対して、どのような種類情報を供給するかは、例えば、リモートコマンダ３（図１）を操作することにより指定することができる。
【００８３】
また、制御部１４からシミュレート処理部４１iに対しては、その他、信号処理を行うのに必要なパラメータが供給される。
【００８４】
次に、図９は、図１の信号処理部１２の第３の構成例を示している。
【００８５】
なお、図中、図４又は図７の場合と対応する部分については、同一の符号を付してある。
【００８６】
図９では、信号処理部１２の第１信号処理部１２1が、画像変換部３１1及びシミュレート処理部４１1から構成され、第２信号処理部１２2が、画像変換部３１2及びシミュレート処理部４１2から構成され、第３信号処理部１２3が、画像変換部３１3及びシミュレート処理部４１3から構成されている。
【００８７】
画像変換部３１1には、画像変換部１１（図１）からチェック画像データが供給されるとともに、制御部１４（図１）から、拡大率情報が供給される。
【００８８】
画像変換部３１1は、制御部１４から供給される拡大率情報にしたがって画像変換処理を行うことにより、画像変換部１１からのチェック画像データを、m倍拡大画像データに変換し、シミュレート処理部４１1に供給する。
【００８９】
シミュレート処理部４１1は、制御部１４から供給される種類情報にしたがって、例えば、有機ELシミュレート処理を行うことにより、画像変換部３１1からのm倍拡大画像データから、擬似有機EL画像データを生成し、処理後画像データとして、表示制御部１３（図１）に供給する。
【００９０】
画像変換部３１2には、画像変換部１１からチェック画像データが供給されるとともに、制御部１４から、拡大率情報が供給される。
【００９１】
画像変換部３１2は、制御部１４から供給される拡大率情報にしたがって画像変換処理を行うことにより、画像変換部１１からのチェック画像データを、m'倍拡大画像データに変換し、シミュレート処理部４１2に供給する。
【００９２】
シミュレート処理部４１2は、制御部１４から供給される種類情報にしたがって、例えば、PDPシミュレート処理を行うことにより、画像変換部３１2からのm'倍拡大画像データから、擬似PDP画像データを生成し、処理後画像データとして、表示制御部１３に供給する。
【００９３】
画像変換部３１3には、画像変換部１１からチェック画像データが供給されるとともに、制御部１４から、拡大率情報が供給される。
【００９４】
画像変換部３１3は、制御部１４から供給される拡大率情報にしたがって画像変換処理を行うことにより、画像変換部１１からのチェック画像データを、m''倍拡大画像データに変換し、シミュレート処理部４１3に供給する。
【００９５】
シミュレート処理部４１3は、制御部１４から供給される種類情報にしたがって、例えば、CRTシミュレート処理を行うことにより、画像変換部３１3からのm''倍拡大画像データから、擬似CRT画像データを生成し、処理後画像データとして、表示制御部１３に供給する。
【００９６】
図１０は、信号処理部１２が図９に示したように構成される場合の、表示装置２の表示例を示している。
【００９７】
表示装置２においては、表示領域#0に、チェック画像が表示される。また、表示領域#1には、m倍拡大画像データから生成された擬似有機EL画像データに対応する画像が、表示領域#2には、m'倍拡大画像データから生成された擬似PDP画像データに対応する画像が、表示領域#3には、m''倍拡大画像データから生成された擬似CRT画像データに対応する画像が、それぞれ表示される。
【００９８】
したがって、受信側の表示装置のうちの、有機ELディスプレイパネルを有する表示装置、PDPを有する表示装置、及び、CRTを有する表示装置のそれぞれにおいて、放送局からの番組としての画像が拡大されて表示される場合の、その表示の状態（拡大された画像の画質等）のチェックを行うことができる。
【００９９】
次に、図１１は、図１の信号処理部１２の第４の構成例を示している。
【０１００】
なお、図中、図４の場合と対応する部分については、同一の符号を付してある。
【０１０１】
図１１では、信号処理部１２の第１信号処理部１２1が、画像変換部３１1から構成され、第２信号処理部１２2が、画像変換部５１から構成され、第３信号処理部１２3が、画像変換部３１3及び画像変換部５２から構成されている。
【０１０２】
画像変換部３１1は、図４で説明したように、制御部１４から供給される拡大率情報にしたがって画像変換処理を行うことにより、画像変換部１１からのチェック画像データを、m倍拡大画像データに変換し、処理後画像データとして、表示制御部１３（図１）に供給する。
【０１０３】
画像変換部５１には、画像変換部１１からチェック画像データが供給されるとともに、制御部１４から、スロー再生の再生速度を表す再生速度情報が供給される。
【０１０４】
画像変換部５１は、制御部１４から供給される再生速度情報にしたがい、画像変換部１１からのチェック画像データを、チェック画像の表示を１倍速未満のq(<1)倍速の再生速度で行うq倍速スロー再生画像データに変換する画像変換処理を行い、その画像変換処理によって得られるq倍速スロー再生画像データを、処理後画像データとして、表示制御部１３（図１）に供給する。
【０１０５】
すなわち、例えば、いま、表示装置２の表示レート（表示を更新するレート）と、チェック画像のフレームレートとが、30Hzであるとするとともに、再生速度情報が表す再生速度が、例えば、1/2倍速であるとすると、画像変換部５１は、フレームレートが30Hzのチェック画像データを、フレームレートが２倍の60Hzの画像データであるq倍速スロー再生画像データに変換する画像変換処理を行う。
【０１０６】
フレームレートが60Hzの画像データを、30Hzの表示レートで表示することにより、1/2倍速でのスロー再生をしたかのような画像が表示される。
【０１０７】
画像変換部３１3は、図４で説明したように、制御部１４から供給される拡大率情報にしたがって画像変換処理を行うことにより、画像変換部１１からのチェック画像データを、m''倍拡大画像データに変換し、画像変換部５２に供給する。
【０１０８】
画像変換部５２には、画像変換部３１3からm''倍拡大画像データが供給される他、制御部１４から、再生速度情報が供給される。
【０１０９】
画像変換部５２は、制御部１４から供給される再生速度情報にしたがい、画像変換部３１3からのm''倍拡大画像データを、チェック画像の表示を１倍速未満のq''(<1)倍速の再生速度で行うq''倍速スロー再生画像データに変換する画像変換処理を行い、その画像変換処理によって得られるq''倍速スロー再生画像データを、処理後画像データとして、表示制御部１３に供給する。
【０１１０】
図１２は、信号処理部１２が図１１に示したように構成される場合の、表示装置２の表示例を示している。
【０１１１】
表示装置２においては、表示領域#0に、チェック画像が表示され、表示領域#1には、m倍拡大画像データに対応する画像が表示される。
【０１１２】
また、表示領域#2には、q倍速スロー再生画像データに対応する画像が表示され、表示領域#3には、m''倍拡大画像データに対応する画像を、q''倍速スロー再生したかのような画像が表示される。
【０１１３】
表示領域#1に表示される、m倍拡大画像データに対応する画像は、表示領域#0に表示されるチェック画像よりも空間的な解像度が高いので、表示領域#0に表示されるチェック画像では目立たなかった、いわば空間的な画像の劣化がある場合に、その空間的な画像の劣化をチェックすることができる。
【０１１４】
また、表示領域#2に表示される、q倍速スロー再生画像データに対応する画像は、表示領域#0に表示されるチェック画像よりも時間的な解像度が高いので、表示領域#0に表示されるチェック画像では目立たなかった、いわば時間的な画像の劣化（例えば、動きのぎこちなさ等）がある場合に、その時間的な画像の劣化をチェックすることができる。
【０１１５】
さらに、表示領域#3に表示される、m''倍拡大画像データに対応する画像を、q''倍速スロー再生したかのような画像は、表示領域#0に表示されるチェック画像よりも空間的及び時間的な解像度が高いので、表示領域#0に表示されるチェック画像では目立たなかった、空間的な画像の劣化や、時間的な画像の劣化がある場合に、そのような画像の劣化をチェックすることができる。
【０１１６】
なお、画像変換部５１と５２のそれぞれにおいて、チェック画像データを、何倍速のスロー再生をしたかのような画像データに変換するかは、制御部１４から画像変換部５１と５２のそれぞれに供給される再生速度情報によって決定される。制御部１４から画像変換部５１と５２のそれぞれに対して、どのような再生速度情報を供給するかは、例えば、リモートコマンダ３（図１）を操作することにより指定することができる。
【０１１７】
次に、図１３は、図１の信号処理部１２の第５の構成例を示している。
【０１１８】
図１３では、信号処理部１２の第１信号処理部１２1が、エンハンス処理部６１から構成され、第２信号処理部１２2が、適応ガンマ処理部６２から構成され、第３信号処理部１２3が、高フレームレート処理部６３から構成されている。
【０１１９】
エンハンス処理部６１には、画像変換部１１（図１）からチェック画像データが供給されるとともに、制御部１４（図１）から信号処理用パラメータが供給される。
【０１２０】
そして、エンハンス処理部６１は、画像変換部１１からのチェック画像データを対象として、受信側の表示装置が画像データに対応する画像を表示するときに、その画像データに施す処理に相当する信号処理を施す。
【０１２１】
すなわち、受信側の表示装置の中には、放送局からの番組としての画像にエンハンス処理を施して表示する機能を有するものがあり、エンハンス処理部６１は、そのような、受信側の表示装置が行うのと同様の信号処理としてのエンハンス処理を行う。
【０１２２】
具体的には、エンハンス処理部６１は、制御部１４から供給される信号処理用パラメータにしたがい、画像変換部１１からのチェック画像データをフィルタリング等することにより、そのチェック画像データのエッジ部分等の一部を強調するエンハンス処理を行い、そのエンハンス処理後のチェック画像データを、処理後画像データとして、表示制御部１３（図１）に供給する。
【０１２３】
ここで、エンハンス処理部６１において、エンハンス処理によって、チェック画像データを強調する程度は、制御部１４から供給される信号処理用パラメータに含まれるエンハンス処理用のパラメータにしたがって決定される。エンハンス処理用のパラメータは、例えば、リモートコマンダ３（図１）を操作することにより指定することができる。
【０１２４】
適応ガンマ処理部６２には、画像変換部１１からチェック画像データが供給されるとともに、制御部１４から信号処理用パラメータが供給される。
【０１２５】
そして、適応ガンマ処理部６２は、画像変換部１１からのチェック画像データを対象として、受信側の表示装置が画像データに対応する画像を表示するときに、その画像データに施す処理に相当する信号処理を施す。
【０１２６】
すなわち、現在、表示装置では、表示装置を製造する各メーカが採用する表示デバイスの特性を吸収して、画像の見え方が、メーカによって異ならないようにするガンマ（γ）補正処理が施されるが、将来的には、各メーカが、表示対象の画像や表示デバイスの特性に応じて、そのメーカに特有の画像の見え方がするような固有のガンマ補正処理が施されることが予想され、この場合、表示装置のメーカによって、画像の見え方が異なることになる。
【０１２７】
そこで、適応ガンマ処理部６２は、各メーカの表示装置で表示される画像に相当する画像を、LCDの表示装置２に表示する（再現する）ことができるように、適応的なガンマ補正処理である適応ガンマ補正処理を行う。
【０１２８】
つまり、適応ガンマ処理部６２は、メーカ固有のガンマ補正処理が施される受信側の表示装置で表示されるチェック画像に相当する画像をLCDの表示装置２に表示させる画像データを得ることができるように、画像変換部１１からのチェック画像データに対して、適応ガンマ補正処理を施し、その適応ガンマ補正処理後のチェック画像データを、処理後画像データとして、表示制御部１３に供給する。
【０１２９】
ここで、適応ガンマ処理部６２において、どのような特性の適応ガンマ補正処理を行うかは、制御部１４から供給される信号処理用パラメータに含まれる適応ガンマ補正処理用のパラメータにしたがって決定される。適応ガンマ補正処理用のパラメータは、例えば、リモートコマンダ３を操作することにより指定することができる。
【０１３０】
また、適応ガンマ補正処理としては、例えば、特開平08-023460号公報や、特開2002-354290号公報、特開2005-229245号公報等に記載のガンマ補正処理を採用することができる。
【０１３１】
特開平08-023460号公報には、LCDやPDPのように、輝度コントラストの取りにくいデバイスに、APL(Average Picture Level)の変動の大きい画像信号を表示するときに、画像信号の絵柄に応じた最適なガンマ補正を行うガンマ補正処理として、画像信号の輝度レベルを、複数個の区分に分けその各々の区分での度数を取り、各輝度レベルの区分毎に複数個の度数レベルを設けその度数レベルで度数分布を区分けし、この結果をガンマ補正特性の選択信号としてガンマ補正特性を選択し、画像信号に適応したダイナミックなガンマ補正を行うことが記載されている。
【０１３２】
特開2002-354290号公報には、ガンマ補正の動作点を変えることで、常にガンマ補正がかかるようにして階調再現性の改善を図るガンマ補正処理として、APLと、動作点の初期値とから、APLに適応した動作点を求め、動作点より白側の輝度信号に対して、ガンマ補正をかけることが記載されている。
【０１３３】
特開2005-229245号公報には、色の飽和を低減し、かつ画像信号に適応した階調拡大制御を行う方法として、画像信号のRGB各色の最大値を検出し、RGB各色の最大値それぞれに重み付けの係数をかけたもののうちの最大値を検出し、その最大値と、画像信号の輝度レベルの最大値と比較し、大きい方を画像信号の輝度レベルの最大値とすることによって画像信号の信号制御を行う方法が記載されている。
【０１３４】
高フレームレート処理部６３には、画像変換部１１からチェック画像データが供給されるとともに、制御部１４から信号処理用パラメータが供給される。
【０１３５】
そして、高フレームレート処理部６３は、画像変換部１１からのチェック画像データを対象として、受信側の表示装置が画像データに対応する画像を表示するときに、その画像データに施す処理に相当する信号処理を施す。
【０１３６】
すなわち、受信側の表示装置の中には、放送局からの番組としての画像のフレームレートを２倍等の高フレームレートの画像に変換し、その高フレームレートに相当する表示レートで表示をする高レート表示機能を有するものがあり、高フレームレート処理部６３は、そのような、受信側の表示装置が行うのと同様の信号処理としての高フレームレート処理を行う。
【０１３７】
具体的には、高フレームレート処理部６３は、制御部１４から供給される信号処理用パラメータにしたがい、画像変換部１１からのチェック画像データのフレーム間にフレームを補間して、フレームレートが、元のチェック画像データの２倍の画像データを生成する倍速処理等の高フレームレート処理を行い、その高フレームレート処理後のチェック画像データを、処理後画像データとして、表示制御部１３に供給する。
【０１３８】
ここで、高フレームレート処理部６３において、高フレームレート処理によって、チェック画像データのフレームレートを何倍にするかは、制御部１４から供給される信号処理用パラメータに含まれる高フレームレート処理用のパラメータにしたがって決定される。高フレームレート処理用のパラメータは、例えば、リモートコマンダ３（図１）を操作することにより指定することができる。
【０１３９】
なお、例えば、いま、表示装置２の表示レートと、チェック画像のフレームレートとが、30Hzであるとするとともに、高フレームレート処理部６３の高フレームレート処理によって得られる画像データのフレームレートが、チェック画像のフレームレートの２倍の60Hzである場合には、表示装置２において、フレームレートが60Hzの画像が、30Hzの表示レートで表示されることになり、この場合、1/2倍速でのスロー再生をしたかのような画像が表示されることになる。
【０１４０】
そこで、ここでは、表示装置２は、30Hzの他に、30Hzよりも高い、例えば、60Hzや、120Hz、240Hz等の高表示レートでの画像の表示を行うことができるようになっており、表示制御部１３（図１）は、30Hzの他、高表示レートで、画像の表示を行うように、表示装置２を制御することができるようになっていることとする。
【０１４１】
表示制御部１３は、高フレームレート処理部６３の高フレームレート処理によって得られる画像データ（以下、適宜、高フレームレート画像データという）のフレームレートが、例えば、チェック画像のフレームレートの２倍の60Hzである場合には、その高フレームレート画像データのフレームレートと同一の60Hzの表示レートで、高フレームレート画像データに対応する画像を表示するように、表示装置２を制御する。
【０１４２】
これにより、高フレームレート画像データに対応する画像は、その高フレームレート画像データのフレームレートに相当する（同一の）表示レートで表示される。
【０１４３】
なお、表示装置２において、第３信号処理部１２3を構成する高フレームレート処理部６３による高フレームレート処理によって得られる、例えば、フレームレートが60Hzの高フレームレート画像データに対応する画像は、表示領域#3に表示されるが、その表示領域#3以外の、例えば、表示領域#0に表示されるチェック画像のフレームレートが30Hzである場合に、表示装置２の表示レートを、高フレームレート画像データのフレームレートと同一の60Hzとすると、表示領域#0に表示されるチェック画像は、２倍速で再生したかのような画像となる。
【０１４４】
このため、例えば、フレームレートが60Hzの高フレームレート画像データに対応する画像を、表示装置２の表示レートを60Hzにして、表示領域#3に表示する場合には、フレームレートが30Hzのチェック画像が表示される表示領域#0の表示の更新は、実質的に、２フレームの表示が行われる期間に、１回だけ行われる。
【０１４５】
すなわち、例えば、いま、表示領域#0に、あるフレーム#fのチェック画像が表示されているとすると、表示領域#0の次の表示の更新時には、再度、フレーム#fのチェック画像が表示され、その次の表示の更新時に、次のフレーム#f+1のチェック画像が表示される。フレームレートが30Hzの画像が表示される表示領域#1及び#2の表示の更新も、同様である。
【０１４６】
ここで、表示制御部１３において、表示装置２の表示レートをどのようにするかは、高フレームレート処理部６３の高フレームレート処理によって、チェック画像データのフレームレートを何倍にするかに連動して、制御部１４により制御される。
【０１４７】
図１４は、信号処理部１２が図１３に示したように構成される場合の、表示装置２の表示例を示している。
【０１４８】
表示装置２においては、表示領域#0に、チェック画像が表示され、表示領域#1には、エンハンス処理後のチェック画像データに対応する画像が表示される。さらに、表示領域#1には、適応ガンマ補正処理後のチェック画像データに対応する画像が表示され、表示領域#2には、高フレームレート処理後のチェック画像データに対応する画像が表示される。
【０１４９】
したがって、受信側の表示装置のうちの、画像にエンハンス処理を施して表示する機能を有する表示装置において、エンハンス処理後の画像データに対応する画像が表示される場合の、その画像の画質等のチェックを行うことができる。
【０１５０】
さらに、受信側の表示装置のうちの、画像にメーカに固有のガンマ補正処理を施して表示する表示装置において、その固有のガンマ補正処理後の画像データに対応する画像が表示される場合の、その画像の画質等のチェックを行うことができる。
【０１５１】
また、受信側の表示装置のうちの、高レート表示機能を有する表示装置において、高フレームレート処理後の画像データに対応する画像が表示される場合の、その画像の画質等のチェックを行うことができる。
【０１５２】
次に、図１５は、図１の信号処理部１２の第６の構成例を示している。
【０１５３】
図１５では、信号処理部１２の第１信号処理部１２1が、擬似インチ画像生成部７１1から構成され、第２信号処理部１２2が、擬似インチ画像生成部７１2から構成され、第３信号処理部１２3が、擬似インチ画像生成部７１3から構成されている。
【０１５４】
擬似インチ画像生成部７１i(i=1,2,3)には、画像変換部１１（図１）からチェック画像データが供給されるとともに、制御部１４（図１）から、画像を表示する画面のサイズであるインチ数n,n',n''(>1)を表すインチ数情報が供給される。
【０１５５】
そして、擬似インチ画像生成部７１iは、制御部１４から供給されるインチ数情報にしたがい、画像変換部１１からのチェック画像データを対象として、あるインチ数の受信側の表示装置でチェック画像が表示されるときに、その表示装置に表示される画像に相当する画像を表示装置２の表示領域#iに表示させる画像データを、処理後画像データとして生成する信号処理を行う。
【０１５６】
すなわち、受信側の表示装置としては、様々なインチ数の表示装置が存在する。そこで、擬似インチ画像生成部７１1は、あるnインチの受信側の表示装置で表示されるチェック画像に相当する画像を表示装置２の表示領域#1に表示させる画像データを、処理後画像データとして生成する信号処理を行う。擬似インチ画像生成部７１2と７１3も同様に、それぞれ、n'インチの受信側の表示装置で表示されるチェック画像に相当する画像を、表示装置２の表示領域#1に表示させる画像データと、n''インチの受信側の表示装置で表示されるチェック画像に相当する画像を、表示装置２の表示領域#1に表示させる画像データを、処理後画像データとして生成する信号処理を行う。
【０１５７】
ここで、あるインチ数の受信側の表示装置で表示されるチェック画像に相当する画像を表示装置２の表示領域#iに表示させる画像データを、擬似インチ画像データともいう。また、チェック画像データから擬似インチ画像データを生成する信号処理を、擬似インチ画像生成処理ともいう。
【０１５８】
擬似インチ画像生成部７１1では、制御部１４から供給されるインチ数情報にしたがって、画像変換部１１からのチェック画像データから、nインチの擬似インチ画像データを生成する擬似インチ画像生成処理が行われ、その結果得られるnインチの擬似インチ画像データが、処理後画像データとして、表示制御部１３（図１）に供給される。
【０１５９】
擬似インチ画像生成部７１2と７１3でも同様に、制御部１４から供給されるインチ数情報にしたがって、画像変換部１１からのチェック画像データから、n'インチの擬似インチ画像データを生成する擬似インチ画像生成処理と、n''インチの擬似インチ画像データを生成する擬似インチ画像生成処理が行われ、その結果得られるn'インチの擬似インチ画像データとn''インチの擬似インチ画像データが、処理後画像データとして、表示制御部１３に供給される。
【０１６０】
なお、擬似インチ画像生成処理では、チェック画像データの画素数を増加又は減少させる処理を行うことにより、擬似インチ画像データが生成される。画像データの画素数を増加させる処理としては、例えば、画素を補間する処理や、画像データを、その画像データより画素数が多い画像データに変換する画像変換処理等を採用することができる。また、画像データの画素数を減少させる処理としては、例えば、画素を間引く処理や、複数の画素の平均値等を１の画素の画素値とする平均化の処理等を採用することができる。
【０１６１】
図１６は、信号処理部１２が図１５に示したように構成される場合の、表示装置２の表示例を示している。
【０１６２】
表示装置２においては、表示領域#0に、チェック画像が表示される。また、表示領域#1には、nインチの擬似インチ画像データに対応する画像が、表示領域#2には、n'インチの擬似インチ画像データに対応する画像が、表示領域#3には、n''インチの擬似インチ画像データに対応する画像が、それぞれ表示される。
【０１６３】
したがって、各種のインチ数の受信側の表示装置において、放送局からの番組としての画像が表示される場合の、その表示の状態のチェックを行うことができる。
【０１６４】
なお、インチ数n,n',n''は、例えば、リモートコマンダ３（図１）を操作することにより指定することができる。
【０１６５】
次に、図１７ないし図１９を参照して、図１５の擬似インチ画像生成部７１iで行われる擬似インチ画像生成処理について、さらに説明する。
【０１６６】
上述したように、表示領域#iは、H×Vモニタ画素で構成され、チェック画像データも、表示領域#iと同一の画素数であるH×V画素で構成される。
【０１６７】
図１７は、H×V画素のチェック画像データが、H×Vモニタ画素の表示領域#iに表示される様子を示している。
【０１６８】
H×V画素のチェック画像データが、そのまま、H×Vモニタ画素の表示領域#iに表示される場合、チェック画像データの１画素（の画素値）が、表示領域#iの１モニタ画素に表示される。
【０１６９】
したがって、H×Vモニタ画素の表示領域#iが、例えば、30インチなどのNインチに相当する場合には、H×V画素のチェック画像データを、そのまま、H×Vモニタ画素の表示領域#iに表示することにより、Nインチの表示装置で表示されるチェック画像に相当する画像が表示される。
【０１７０】
表示装置２の表示領域#0ないし#3のうちの、表示領域#0では、H×V画素のチェック画像がそのまま表示されるので、Nインチの表示装置で表示されるチェック画像に相当する画像が表示されることになる。ここで、このNインチを、基準インチともいう。
【０１７１】
次に、図１８は、擬似インチ画像生成処理によりチェック画像データの画素数を増加して得られる擬似インチ画像データが、H×Vモニタ画素の表示領域#iに表示される様子を示している。
【０１７２】
図１８においては、H×V画素のチェック画像データの１画素を、3×3画素に増加する補間を行う擬似インチ画像生成処理により、3H×3V画素の擬似インチ画像データが生成され、その擬似インチ画像データのうちのH×V画素が、H×Vモニタ画素の表示領域#iに表示されている。
【０１７３】
この場合、等価的に、元のH×V画素のチェック画像データの１画素が、表示領域#iの3×3モニタ画素に表示されることになり、その結果、表示領域#iには、3×Nインチの擬似インチ画像データに対応する画像、つまり、3×Nインチの表示装置で表示されるチェック画像に相当する画像が表示される。
【０１７４】
なお、H×Vモニタ画素の表示領域#iには、その画素数よりも多い3H×3V画素の擬似インチ画像データに対応する画像の全体を表示することはできないため、図６で説明した、m倍拡大画像データに対応する画像を、表示領域#1に表示する場合と同様に、表示領域#iには、3H×3V画素の擬似インチ画像データに対応する画像の一部が表示される。3H×3V画素の擬似インチ画像データに対応する画像のうちの、どの部分を表示領域#iに表示するかは、例えば、リモートコマンダ３を操作することにより指定することができ、表示制御部１３は、その指定にしたがって、3H×3V画素の擬似インチ画像データに対応する画像の一部を、表示領域#iに表示させる。
【０１７５】
次に、図１９は、擬似インチ画像生成処理によりチェック画像データの画素数を減少して得られる擬似インチ画像データが、H×Vモニタ画素の表示領域#iに表示される様子を示している。
【０１７６】
図１９においては、H×V画素のチェック画像データの2×2画素を、1画素に減少する間引きを行う擬似インチ画像生成処理により、H/2×V/2画素の擬似インチ画像データが生成され、その擬似インチ画像データが、H×Vモニタ画素の表示領域#iに表示されている。
【０１７７】
この場合、等価的に、元のH×V画素のチェック画像データの2×2画素が、表示領域#iの１モニタ画素に表示されることになり、その結果、表示領域#iには、N/2インチの擬似インチ画像データに対応する画像、つまり、N/2インチの表示装置で表示されるチェック画像に相当する画像が表示される。
【０１７８】
なお、H/2×V/2画素の擬似インチ画像データに対応する画像は、H×Vモニタ画素の表示領域#iのうちの、H/2×V/2モニタ画素の領域に表示される。H×Vモニタ画素の表示領域#iにおいて、H/2×V/2画素の擬似インチ画像データに対応する画像を表示するH/2×V/2モニタ画素の領域は、例えば、リモートコマンダ３を操作することにより指定することができ、表示制御部１３は、その指定にしたがって、H/2×V/2画素の擬似インチ画像データに対応する画像を、表示領域#iに表示させる。
【０１７９】
次に、図２０のフローチャートを参照して、表示領域#1に、nインチの擬似インチ画像データに対応する画像を表示する場合の、図１の表示制御装置１の処理について説明する。
【０１８０】
なお、表示領域#2に、n'インチの擬似インチ画像データに対応する画像を表示する場合、及び、表示領域#3に、n''インチの擬似インチ画像データに対応する画像を表示する場合も、表示領域#1に、nインチの擬似インチ画像データに対応する画像を表示する場合と同様の処理が行われる。
【０１８１】
制御部１４は、ステップＳ３１において、インチ数nを変更（指定）するように、リモートコマンダ３が操作されたかどうかを判定する。
【０１８２】
ステップＳ３１において、インチ数nを変更するように、リモートコマンダ３が操作されていないと判定された場合、処理は、ステップＳ３１に戻る。
【０１８３】
また、ステップＳ３１において、インチ数nを変更するように、リモートコマンダ３が操作されたと判定された場合、すなわち、リモートコマンダ３が、インチ数nを変更するように操作され、その操作に対応する操作信号が、制御部１４によって受信された場合、処理は、ステップＳ３２に進み、制御部１４は、リモートコマンダ３からの操作信号から変更後のインチ数nを認識し、そのインチ数nと、基準インチNとに基づいて、擬似インチ画像生成部７１1（図１５）において、チェック画像データの画素数を変更する割合を表す画素数変更率n/Nを求める。さらに、制御部１４は、画素数変更率n/Nを含むインチ数情報を、擬似インチ画像生成部７１1に供給して、処理は、ステップＳ３２からステップＳ３３に進む。
【０１８４】
ステップＳ３３では、擬似インチ画像生成部７１1は、制御部１４からのインチ数情報にしたがい、画像変換部１１からのチェック画像データの横と縦の画素数それぞれを、画素数変更率n/N倍の画素数に変更（増加又は減少）する擬似インチ画像生成処理を行い、これにより、nインチの受信側の表示装置で表示されるチェック画像に相当する画像を表示領域#1に表示させるnインチの擬似インチ画像データを生成して、表示制御部１３に供給する。
【０１８５】
その後、処理は、ステップＳ３３からステップＳ３４に進み、制御部１４は、インチ数nが、基準インチN以下であるかどうかを判定する。
【０１８６】
ステップＳ３４において、インチ数nが、基準インチN以下であると判定された場合、すなわち、nインチの擬似インチ画像データに対応する画像の全体を、表示領域#1に表示することができる場合、処理は、ステップＳ３５に進み、表示制御部１３は、擬似インチ画像生成部７１1からのnインチの擬似インチ画像データから、その全体を、表示領域#1に表示する表示用画像データとして抽出し、処理は、ステップＳ３７に進む。
【０１８７】
ステップＳ３７では、表示制御部１３が、表示用画像データに対応する画像を、表示領域#1に表示させ、ステップＳ３１に戻る。この場合、nインチの擬似インチ画像データに対応する画像の全体が、表示領域#1に表示される。
【０１８８】
一方、ステップＳ３４において、インチ数nが、基準インチN以下でないと判定された場合、すなわち、nインチの擬似インチ画像データに対応する画像の全体を、表示領域#1に表示することができない場合、処理は、ステップＳ３６に進み、表示制御部１３は、擬似インチ画像生成部７１1からのnインチの擬似インチ画像データから、表示領域#1に表示することができるH×V画素を、表示用画像データとして抽出し、処理は、ステップＳ３７に進む。
【０１８９】
ステップＳ３７では、上述したように、表示制御部１３が、表示用画像データに対応する画像を、表示領域#1に表示させ、ステップＳ３１に戻る。この場合、nインチの擬似インチ画像データに対応する画像のうちの、ステップＳ３６で抽出されたH×V画素に対応する画像が、表示領域#1に表示される。
【０１９０】
次に、図２１は、図１の信号処理部１２の第７の構成例を示している。
【０１９１】
なお、図中、図４又は図１５と対応する部分については、同一の符号を付してある。
【０１９２】
図２１では、信号処理部１２の第１信号処理部１２1が、画像変換部３１1及び擬似インチ画像生成部７１1から構成され、第２信号処理部１２2が、画像変換部３１2及び擬似インチ画像生成部７１2から構成され、第３信号処理部１２3が、画像変換部３１3及び擬似インチ画像生成部７１3から構成されている。
【０１９３】
画像変換部３１1には、画像変換部１１（図１）からチェック画像データが供給されるとともに、制御部１４（図１）から、拡大率情報が供給される。
【０１９４】
画像変換部３１1は、制御部１４から供給される拡大率情報にしたがって画像変換処理を行うことにより、画像変換部１１からのチェック画像データを、m倍拡大画像データに変換し、擬似インチ画像生成部７１1に供給する。
【０１９５】
擬似インチ画像生成部７１1は、制御部１４から供給されるインチ数情報にしたがって、擬似インチ画像生成処理を行うことにより、画像変換部３１1からのm倍拡大画像データから、nインチの擬似インチ画像データを生成し、処理後画像データとして、表示制御部１３（図１）に供給する。
【０１９６】
画像変換部３１2には、画像変換部１１からチェック画像データが供給されるとともに、制御部１４から、拡大率情報が供給される。
【０１９７】
画像変換部３１2は、制御部１４から供給される拡大率情報にしたがって画像変換処理を行うことにより、画像変換部１１からのチェック画像データを、m'倍拡大画像データに変換し、擬似インチ画像生成部７１2に供給する。
【０１９８】
擬似インチ画像生成部７１2は、制御部１４から供給されるインチ数情報にしたがって、擬似インチ画像生成処理を行うことにより、画像変換部３１2からのm'倍拡大画像データから、n'インチの擬似インチ画像データを生成し、処理後画像データとして、表示制御部１３に供給する。
【０１９９】
画像変換部３１3には、画像変換部１１からチェック画像データが供給されるとともに、制御部１４から、拡大率情報が供給される。
【０２００】
画像変換部３１3は、制御部１４から供給される拡大率情報にしたがって画像変換処理を行うことにより、画像変換部１１からのチェック画像データを、m''倍拡大画像データに変換し、擬似インチ画像生成部７１3に供給する。
【０２０１】
擬似インチ画像生成部７１3は、制御部１４から供給されるインチ数情報にしたがって、擬似インチ画像生成処理を行うことにより、画像変換部３１3からのm''倍拡大画像データから、n''インチの擬似インチ画像データを生成し、処理後画像データとして、表示制御部１３に供給する。
【０２０２】
図２２は、信号処理部１２が図２１に示したように構成される場合の、表示装置２の表示例を示している。
【０２０３】
表示装置２においては、表示領域#0に、基準インチNのチェック画像が表示される。また、表示領域#1には、nインチの擬似インチ画像データに対応する画像をm倍に拡大した画像が、表示領域#2には、n'インチの擬似インチ画像データに対応する画像をm'倍に拡大した画像が、表示領域#3には、n''インチの擬似インチ画像データに対応する画像をm''倍に拡大した画像が、それぞれ表示される。
【０２０４】
したがって、各種のインチ数の受信側の表示装置が拡大機能を有する場合において、放送局からの番組としての画像が拡大して表示される場合の、その表示の状態のチェックを行うことができる。
【０２０５】
次に、図２３は、図１の信号処理部１２の第８の構成例を示している。
【０２０６】
なお、図中、図４、図７、又は図１５と対応する部分については、同一の符号を付してある。
【０２０７】
図２３では、信号処理部１２の第１信号処理部１２1が、画像変換部３１1及び擬似インチ画像生成部７１1から構成され、第２信号処理部１２2が、画像変換部３１2、シミュレート処理部４１2、及び擬似インチ画像生成部７１2から構成され、第３信号処理部１２3が、画像変換部３１3、シミュレート処理部４１3、及び擬似インチ画像生成部７１3から構成されている。
【０２０８】
画像変換部３１1は、制御部１４（図１）から供給される拡大率情報にしたがって画像変換処理を行うことにより、画像変換部１１（図１）からのチェック画像データを、m倍拡大画像データに変換し、擬似インチ画像生成部７１1に供給する。
【０２０９】
擬似インチ画像生成部７１1は、制御部１４から供給されるインチ数情報にしたがって、擬似インチ画像生成処理を行うことにより、画像変換部３１1からのm倍拡大画像データから、例えば、２０ないし１０３インチの範囲内のいずれかの値であるnインチの擬似インチ画像データを生成し、処理後画像データとして、表示制御部１３（図１）に供給する。
【０２１０】
画像変換部３１2は、制御部１４から供給される拡大率情報にしたがって画像変換処理を行うことにより、画像変換部１１からのチェック画像データを、m'倍拡大画像データに変換し、シミュレート処理部４１2に供給する。
【０２１１】
シミュレート処理部４１2は、制御部１４から供給される種類情報にしたがって、例えば、PDPシミュレート処理を行うことにより、画像変換部３１2からのm'倍拡大画像データから、擬似PDP画像データを生成し、擬似インチ画像生成部７１2に供給する。
【０２１２】
擬似インチ画像生成部７１2は、制御部１４から供給されるインチ数情報にしたがって、擬似インチ画像生成処理を行うことにより、シミュレート処理部４１2からの擬似PDP画像データから、例えば、２０ないし１０３インチの範囲内のいずれかの値であるn'インチの擬似インチ画像データを生成し、処理後画像データとして、表示制御部１３に供給する。
【０２１３】
画像変換部３１3は、制御部１４から供給される拡大率情報にしたがって画像変換処理を行うことにより、画像変換部１１からのチェック画像データを、m''倍拡大画像データに変換し、シミュレート処理部４１3に供給する。
【０２１４】
シミュレート処理部４１3は、制御部１４から供給される種類情報にしたがって、例えば、CRTシミュレート処理を行うことにより、画像変換部３１3からのm''倍拡大画像データから、擬似CRT画像データを生成し、擬似インチ画像生成部７１3に供給する。
【０２１５】
擬似インチ画像生成部７１3は、制御部１４から供給されるインチ数情報にしたがって、擬似インチ画像生成処理を行うことにより、シミュレート処理部４１3からの擬似CRT画像データから、例えば、２０ないし４０インチの範囲内のいずれかの値であるn''インチの擬似インチ画像データを生成し、処理後画像データとして、表示制御部１３に供給する。
【０２１６】
図２４は、信号処理部１２が図２３に示したように構成される場合の、表示装置２の表示例を示している。
【０２１７】
LCDの表示装置２においては、表示領域#0に、基準インチNのチェック画像が表示される。また、表示領域#1には、nインチの擬似インチ画像データに対応する画像をm倍に拡大した画像が、表示領域#2には、n'インチの擬似インチ画像データに対応する画像をm'倍に拡大した画像をPDPで表示した画像に相当する画像が、表示領域#3には、n''インチの擬似インチ画像データに対応する画像をm''倍に拡大した画像をCRTで表示した画像に相当する画像が、それぞれ表示される。
【０２１８】
したがって、受信側の表示装置のうちの、各種のインチ数の、LCDを有する表示装置、PDPを有する表示装置、及び、CRTを有する表示装置のそれぞれにおいて、放送局からの番組としての画像が拡大されて表示される場合の、その表示の状態のチェックを行うことができる。
【０２１９】
以上のように、図１のモニタシステムによれば、受信側の各種の表示装置での画像の表示のシミュレーションを行うことができ、受信側の各種の表示装置において、画像がどのように表示されるかのチェックを行うことができる。
【０２２０】
ところで、上述した画像変換処理は、例えば、画像データを、その画像データよりも画素数の多い画像データや、フレームレートの高い画像データ等に変換する処理、つまり、第１の画像データを第２の画像データに変換する処理であり、第１の画像データを第２の画像データに変換する画像変換処理は、例えば、クラス分類適応処理を利用して行うことができる。
【０２２１】
ここで、第１の画像データを第２の画像データに変換する画像変換処理は、その第１と第２の画像データの定義によって様々な処理となる。
【０２２２】
すなわち、例えば、第１の画像データを低空間解像度の画像データとするとともに、第２の画像データを高空間解像度の画像データとすれば、画像変換処理は、空間解像度を向上させる空間解像度創造（向上）処理ということができる。
【０２２３】
また、例えば、第１の画像データを低Ｓ／Ｎ(Siginal/Noise)の画像データとするとともに、第２の画像データを高Ｓ／Ｎの画像データとすれば、画像変換処理は、ノイズを除去するノイズ除去処理ということができる。
【０２２４】
さらに、例えば、第１の画像データを所定の画素数（サイズ）の画像データとするとともに、第２の画像データを、第１の画像データの画素数を多く又は少なくした画像データとすれば、画像変換処理は、画像の画素数を変更する（画像のリサイズ（拡大又は縮小）を行う）リサイズ処理ということができる。
【０２２５】
また、例えば、第１の画像データを低時間解像度の画像データとするとともに、第２の画像データを高時間解像度の画像データとすれば、画像変換処理は、時間解像度（フレームレート）を向上させる時間解像度創造（向上）処理ということができる。
【０２２６】
なお、空間解像度創造処理において、低空間解像度の画像データである第１の画像データを、高空間解像度の画像データである第２の画像データに変換するにあたっては、第２の画像データを、第１の画像データと同一の画素数の画像データとすることもできるし、第１の画像データよりも画素数が多い画像データとすることもできる。第２の画像データを、第１の画像データよりも画素数が多い画像データとする場合、空間解像度創造処理は、空間解像度を向上させる処理であるとともに、画像サイズ（画素数）を拡大するリサイズ処理でもある。
【０２２７】
以上のように、画像変換処理によれば、第１および第２の画像データをどのように定義するかによって、様々な処理を実現することができる。
【０２２８】
以上のような画像変換処理をクラス分類適応処理を利用して行う場合には、第２の画像データのうちの注目している注目画素（の画素値）を複数のクラスのうちのいずれかのクラスにクラス分類することにより得られるクラスのタップ係数と、注目画素に対して選択される第１の画像データの画素（の画素値）とを用いた演算により、注目画素（の画素値）が求められる。
【０２２９】
すなわち、図２５は、クラス分類適応処理を利用した画像変換処理を行う画像変換装置１０１の構成例を示している。
【０２３０】
画像変換装置１０１では、そこに供給される画像データが、第１の画像データとして、タップ選択部１１２及び１１３に供給される。
【０２３１】
注目画素選択部１１１は、第２の画像データを構成する画素を、順次、注目画素とし、その注目画素を表す情報を、必要なブロックに供給する。
【０２３２】
タップ選択部１１２は、注目画素（の画素値）を予測するのに用いる第１の画像データを構成する画素（の画素値）の幾つかを、予測タップとして選択する。
【０２３３】
具体的には、タップ選択部１１２は、注目画素の時空間の位置から空間的又は時間的に近い位置にある第１の画像データの複数の画素を、予測タップとして選択する。
【０２３４】
タップ選択部１１３は、注目画素を、幾つかのクラスのうちのいずれかにクラス分けするクラス分類を行うのに用いる第１の画像データを構成する画素の幾つかを、クラスタップとして選択する。すなわち、タップ選択部１１３は、タップ選択部１１２が予測タップを選択するのと同様にして、クラスタップを選択する。
【０２３５】
なお、予測タップとクラスタップは、同一のタップ構造を有するものであっても良いし、異なるタップ構造を有するものであっても良い。
【０２３６】
タップ選択部１１２で得られた予測タップは、予測演算部１１６に供給され、タップ選択部１１３で得られたクラスタップは、クラス分類部１１４に供給される。
【０２３７】
クラス分類部１１４は、タップ選択部１１３からのクラスタップに基づき、注目画素をクラス分類し、その結果得られるクラスに対応するクラスコードを、係数出力部１１５に供給する。
【０２３８】
ここで、クラス分類を行う方法としては、例えば、ADRC(Adaptive Dynamic Range Coding)等を採用することができる。
【０２３９】
ADRCを用いる方法では、クラスタップを構成する画素（の画素値）が、ADRC処理され、その結果得られるADRCコードにしたがって、注目画素のクラスが決定される。
【０２４０】
なお、KビットADRCにおいては、例えば、クラスタップを構成する画素の画素値の最大値MAXと最小値MINが検出され、DR=MAX-MINを、集合の局所的なダイナミックレンジとし、このダイナミックレンジDRに基づいて、クラスタップを構成する各画素の画素値がKビットに再量子化される。すなわち、クラスタップを構成する各画素の画素値から、最小値MINが減算され、その減算値がDR/2Kで除算（再量子化）される。そして、以上のようにして得られる、クラスタップを構成するKビットの各画素の画素値を、所定の順番で並べたビット列が、ADRCコードとして出力される。従って、クラスタップが、例えば、１ビットADRC処理された場合には、そのクラスタップを構成する各画素の画素値は、最大値MAXと最小値MINとの平均値で除算され（小数点以下切り捨て）、これにより、各画素の画素値が１ビットとされる（２値化される）。そして、その１ビットの画素値を所定の順番で並べたビット列が、ADRCコードとして出力される。
【０２４１】
なお、クラス分類部１１４には、例えば、クラスタップを構成する画素の画素値のレベル分布のパターンを、そのままクラスコードとして出力させることも可能である。しかしながら、この場合、クラスタップが、Ｎ個の画素の画素値で構成され、各画素の画素値に、Ｋビットが割り当てられているとすると、クラス分類部１１４が出力するクラスコードの場合の数は、（２N）K通りとなり、画素の画素値のビット数Ｋに指数的に比例した膨大な数となる。
【０２４２】
従って、クラス分類部１１４においては、クラスタップの情報量を、上述のADRC処理や、あるいはベクトル量子化等によって圧縮することにより、クラス分類を行うのが好ましい。
【０２４３】
係数出力部１１５は、後述する学習によって求められたクラスごとのタップ係数を記憶し、さらに、その記憶したタップ係数のうちの、クラス分類部１１４から供給されるクラスコードに対応するアドレスに記憶されているタップ係数（クラス分類部１１４から供給されるクラスコードが表すクラスのタップ係数）を出力する。このタップ係数は、予測演算部１１６に供給される。
【０２４４】
ここで、タップ係数とは、ディジタルフィルタにおける、いわゆるタップにおいて入力データと乗算される係数に相当するものである。
【０２４５】
予測演算部１１６は、タップ選択部１１２が出力する予測タップと、係数出力部１１５が出力するタップ係数とを取得し、その予測タップとタップ係数とを用いて、注目画素の真値の予測値を求める所定の予測演算を行う。これにより、予測演算部１１６は、注目画素の画素値（の予測値）、すなわち、第２の画像データを構成する画素の画素値を求めて出力する。
【０２４６】
次に、図２６のフローチャートを参照して、図２５の画像変換装置１０１による画像変換処理について説明する。
【０２４７】
ステップＳ１１１において、注目画素選択部１１１は、画像変換装置１０１に入力される第１の画像データに対する第２の画像データを構成する画素のうち、まだ、注目画素とされていないものの１つを、注目画素として選択し、ステップＳ１１２に進む。すなわち、注目画素選択部１１１は、例えば、第２の画像データを構成する画素のうち、ラスタスキャン順で、まだ、注目画素とされていないものが、注目画素として選択される。
【０２４８】
ステップＳ１１２において、タップ選択部１１２と１１３が、そこに供給される第１の画像データから、注目画素についての予測タップとクラスタップとするものを、それぞれ選択する。そして、予測タップは、タップ選択部１１２から予測演算部１１６に供給され、クラスタップは、タップ選択部１１３からクラス分類部１１４に供給される。
【０２４９】
クラス分類部１１４は、タップ選択部１１３から、注目画素についてのクラスタップを受信し、ステップＳ１１３において、そのクラスタップに基づき、注目画素をクラス分類する。さらに、クラス分類部１１４は、そのクラス分類の結果得られる注目画素のクラスを表すクラスコードを、係数出力部１１５に出力し、ステップＳ１１４に進む。
【０２５０】
ステップＳ１１４では、係数出力部１１５が、クラス分類部１１４から供給されるクラスコードに対応するアドレスに記憶されているタップ係数を取得して出力する。さらに、ステップＳ１１４では、予測演算部１１６が、係数出力部１１５が出力するタップ係数を取得し、ステップＳ１１５に進む。
【０２５１】
ステップＳ１１５では、予測演算部１１６が、タップ選択部１１２が出力する予測タップと、係数出力部１１５から取得したタップ係数とを用いて、所定の予測演算を行う。これにより、予測演算部１１６は、注目画素の画素値を求めて出力し、ステップＳ１１６に進む。
【０２５２】
ステップＳ１１６では、注目画素選択部１１１が、まだ、注目画素としていない第２の画像データがあるかどうかを判定する。ステップＳ１１６において、まだ、注目画素としていない第２の画像データがあると判定された場合、ステップＳ１１１に戻り、以下、同様の処理が繰り返される。
【０２５３】
また、ステップＳ１１６において、まだ、注目画素とされていない第２の画像データがないと判定された場合、処理を終了する。
【０２５４】
次に、図２５の予測演算部１１６における予測演算と、係数出力部１１５に記憶されたタップ係数の学習について説明する。
【０２５５】
いま、例えば、高画質の画像データ（高画質画像データ）を第２の画像データとするとともに、その高画質画像データをLPF(Low Pass Filter)によってフィルタリングする等してその画質（解像度）を低下させた低画質の画像データ（低画質画像データ）を第１の画像データとして、低画質画像データから予測タップを選択し、その予測タップとタップ係数を用いて、高画質画像データの画素（高画質画素）の画素値を、所定の予測演算によって求める（予測する）ことを考える。
【０２５６】
所定の予測演算として、例えば、線形１次予測演算を採用することとすると、高画質画素の画素値ｙは、次の線形１次式によって求められることになる。
【０２５７】
【数１】
2008178075.tif 000003
・・・（１）
【０２５８】
但し、式（１）において、ｘnは、高画質画素ｙについての予測タップを構成する、ｎ番目の低画質画像データの画素（以下、適宜、低画質画素という）の画素値を表し、ｗnは、ｎ番目の低画質画素（の画素値）と乗算されるｎ番目のタップ係数を表す。なお、式（１）では、予測タップが、Ｎ個の低画質画素ｘ1，ｘ2，・・・，ｘNで構成されるものとしてある。
【０２５９】
ここで、高画質画素の画素値ｙは、式（１）に示した線形１次式ではなく、２次以上の高次の式によって求めるようにすることも可能である。
【０２６０】
いま、第ｋサンプルの高画質画素の画素値の真値をｙkと表すとともに、式（１）によって得られるその真値ｙkの予測値をｙk’と表すと、その予測誤差ｅkは、次式で表される。
【０２６１】
【数２】
2008178075.tif 000004
・・・（２）
【０２６２】
いま、式（２）の予測値ｙk’は、式（１）にしたがって求められるため、式（２）のｙk’を、式（１）にしたがって置き換えると、次式が得られる。
【０２６３】
【数３】
2008178075.tif 000005
・・・（３）
【０２６４】
但し、式（３）において、ｘn,kは、第ｋサンプルの高画質画素についての予測タップを構成するｎ番目の低画質画素を表す。
【０２６５】
式（３）（又は式（２））の予測誤差ｅkを０とするタップ係数ｗnが、高画質画素を予測するのに最適なものとなるが、すべての高画質画素について、そのようなタップ係数ｗnを求めることは、一般には困難である。
【０２６６】
そこで、タップ係数ｗnが最適なものであることを表す規範として、例えば、最小自乗法を採用することとすると、最適なタップ係数ｗnは、次式で表される自乗誤差の総和Ｅを最小にすることで求めることができる。
【０２６７】
【数４】
2008178075.tif 000006
・・・（４）
【０２６８】
但し、式（４）において、Ｋは、高画質画素ｙkと、その高画質画素ｙkについての予測タップを構成する低画質画素ｘ1,k，ｘ2,k，・・・，ｘN,kとのセットのサンプル数（学習用のサンプルの数）を表す。
【０２６９】
式（４）の自乗誤差の総和Ｅの最小値（極小値）は、式（５）に示すように、総和Ｅをタップ係数ｗnで偏微分したものを０とするｗnによって与えられる。
【０２７０】
【数５】
2008178075.tif 000007
・・・（５）
【０２７１】
そこで、上述の式（３）をタップ係数ｗnで偏微分すると、次式が得られる。
【０２７２】
【数６】
2008178075.tif 000008
・・・（６）
【０２７３】
式（５）と（６）から、次式が得られる。
【０２７４】
【数７】
2008178075.tif 000009
・・・（７）
【０２７５】
式（７）のｅkに、式（３）を代入することにより、式（７）は、式（８）に示す正規方程式で表すことができる。
【０２７６】
【数８】
2008178075.tif 000010
・・・（８）
【０２７７】
式（８）の正規方程式は、例えば、掃き出し法（Gauss-Jordanの消去法）などを用いることにより、タップ係数ｗnについて解くことができる。
【０２７８】
式（８）の正規方程式を、クラスごとにたてて解くことにより、最適なタップ係数（ここでは、自乗誤差の総和Ｅを最小にするタップ係数）ｗnを、クラスごとに求めることができる。
【０２７９】
次に、図２７は、式（８）の正規方程式をたてて解くことによりタップ係数ｗnを求める学習を行う学習装置１２１の構成例を示している。
【０２８０】
学習用画像記憶部１３１は、タップ係数ｗnの学習に用いられる学習用画像データを記憶している。ここで、学習用画像データとしては、例えば、解像度の高い高画質画像データを用いることができる。
【０２８１】
教師データ生成部１３２は、学習用画像記憶部１３１から学習用画像データを読み出す。さらに、教師データ生成部１３２は、学習用画像データから、タップ係数の学習の教師（真値）、すなわち、式（１）による予測演算としての写像の写像先の画素値となる教師データを生成し、教師データ記憶部１３３に供給する。ここでは、教師データ生成部１３２は、例えば、学習用画像データとしての高画質画像データを、そのまま教師データとして、教師データ記憶部１３３に供給する。
【０２８２】
教師データ記憶部１３３は、教師データ生成部１３２から供給される教師データとしての高画質画像データを記憶する。
【０２８３】
生徒データ生成部１３４は、学習用画像記憶部１３１から学習用画像データを読み出す。さらに、生徒データ生成部１３４は、学習用画像データから、タップ係数の学習の生徒、すなわち、式（１）による予測演算としての写像による変換対象の画素値となる生徒データを生成し、生徒データ記憶部１３５に供給する。ここでは、生徒データ生成部１３４は、例えば、学習用画像データとしての高画質画像データをフィルタリングすることにより、その解像度を低下させることで、低画質画像データを生成し、この低画質画像データを、生徒データとして、生徒データ記憶部１３５に供給する。
【０２８４】
生徒データ記憶部１３５は、生徒データ生成部１３４から供給される生徒データを記憶する。
【０２８５】
学習部１３６は、教師データ記憶部１３３に記憶された教師データとしての高画質画像データを構成する画素を、順次、注目画素とし、その注目画素について、生徒データ記憶部１３５に記憶された生徒データとしての低画質画像データを構成する低画質画素のうちの、図２５のタップ選択部１１２が選択するのと同一のタップ構造の低画質画素を、予測タップとして選択する。さらに、学習部１３６は、教師データを構成する各画素と、その画素が注目画素とされたときに選択された予測タップとを用い、クラスごとに、式（８）の正規方程式をたてて解くことにより、クラスごとのタップ係数を求める。
【０２８６】
すなわち、図２８は、図２７の学習部１３６の構成例を示している。
【０２８７】
注目画素選択部１４１は、教師データ記憶部１３３に記憶されている教師データを構成する画素を、順次、注目画素として選択し、その注目画素を表す情報を、必要なブロックに供給する。
【０２８８】
タップ選択部１４２は、注目画素について、生徒データ記憶部１３５に記憶された生徒データとしての低画質画像データを構成する低画質画素から、図２５のタップ選択部１１２が選択するの同一の画素を選択し、これにより、タップ選択部１１２で得られるのと同一のタップ構造の予測タップを得て、足し込み部１４５に供給する。
【０２８９】
タップ選択部１４３は、注目画素について、生徒データ記憶部１３５に記憶された生徒データとしての低画質画像データを構成する低画質画素から、図２５のタップ選択部１１３が選択するのと同一の画素を選択し、これにより、タップ選択部１１３で得られるのと同一のタップ構造のクラスタップを得て、クラス分類部１４４に供給する。
【０２９０】
クラス分類部１４４は、タップ選択部１４３が出力するクラスタップに基づき、図２５のクラス分類部１１４と同一のクラス分類を行い、その結果得られるクラスに対応するクラスコードを、足し込み部１４５に出力する。
【０２９１】
足し込み部１４５は、教師データ記憶部１３３から、注目画素となっている教師データ（画素）を読み出し、その注目画素と、タップ選択部１４２から供給される注目画素についての予測タップを構成する生徒データ（画素）とを対象とした足し込みを、クラス分類部１４４から供給されるクラスコードごとに行う。
【０２９２】
すなわち、足し込み部１４５には、教師データ記憶部１３３に記憶された教師データｙk、タップ選択部１４２が出力する予測タップｘn,k、クラス分類部１４４が出力するクラスコードが供給される。
【０２９３】
そして、足し込み部１４５は、クラス分類部１４４から供給されるクラスコードに対応するクラスごとに、予測タップ（生徒データ）ｘn,kを用い、式（８）の左辺の行列における生徒データどうしの乗算（ｘn,kｘn',k）と、サメーション（Σ）に相当する演算を行う。
【０２９４】
さらに、足し込み部１４５は、やはり、クラス分類部１４４から供給されるクラスコードに対応するクラスごとに、予測タップ（生徒データ）ｘn,kと教師データｙkを用い、式（８）の右辺のベクトルにおける生徒データｘn,k及び教師データｙkの乗算（ｘn,kｙk）と、サメーション（Σ）に相当する演算を行う。
【０２９５】
すなわち、足し込み部１４５は、前回、注目画素とされた教師データについて求められた式（８）における左辺の行列のコンポーネント（Σｘn,kｘn',k）と、右辺のベクトルのコンポーネント（Σｘn,kｙk）を、その内蔵するメモリ（図示せず）に記憶しており、その行列のコンポーネント（Σｘn,kｘn',k）又はベクトルのコンポーネント（Σｘn,kｙk）に対して、新たに注目画素とされた教師データについて、その教師データｙk+1及び生徒データｘn,k+1を用いて計算される、対応するコンポーネントｘn,k+1ｘn',k+1又はｘn,k+1ｙk+1を足し込む（式（８）のサメーションで表される加算を行う）。
【０２９６】
そして、足し込み部１４５は、教師データ記憶部１３３（図２７）に記憶された教師データすべてを注目画素として、上述の足し込みを行うことにより、各クラスについて、式（８）に示した正規方程式をたてると、その正規方程式を、タップ係数算出部１４６に供給する。
【０２９７】
タップ係数算出部１４６は、足し込み部１４５から供給される各クラスについての正規方程式を解くことにより、各クラスについて、最適なタップ係数ｗnを求めて出力する。
【０２９８】
図２５の画像変換装置１０１における係数出力部１１５には、以上のようにして求められたクラスごとのタップ係数ｗnが記憶されている。
【０２９９】
ここで、第１の画像データに対応する生徒データとする画像データと、第２の画像データに対応する教師データとする画像データの選択の仕方によって、タップ係数としては、上述したように、各種の画像変換処理を行うものを得ることができる。
【０３００】
すなわち、上述のように、高画質画像データを、第２の画像データに対応する教師データとするとともに、その高画質画像データの空間解像度を劣化させた低画質画像データを、第１の画像データに対応する生徒データとして、タップ係数の学習を行うことにより、タップ係数としては、図２９上から１番目に示すように、低画質画像データ（SD(Standard Definition)画像）である第１の画像データを、その空間解像度を向上させた高画質画像データ（HD(High Definition)画像データ）である第２の画像データに変換する空間解像度創造処理としての画像変換処理を行うものを得ることができる。
【０３０１】
なお、この場合、第１の画像データ（生徒データ）は、第２の画像データ（教師データ）と画素数が同一であっても良いし、少なくても良い。
【０３０２】
また、例えば、高画質画像データを教師データとするとともに、その教師データとしての高画質画像データに対して、ノイズを重畳した画像データを生徒データとして、タップ係数の学習を行うことにより、タップ係数としては、図２９上から２番目に示すように、低S/Nの画像データである第１の画像データを、そこに含まれるノイズを除去（低減）した高S/Nの画像データである第２の画像データに変換するノイズ除去処理としての画像変換処理を行うものを得ることができる。
【０３０３】
さらに、例えば、ある画像データを教師データとするとともに、その教師データとしての画像データの画素数を間引いた画像データを生徒データとして、タップ係数の学習を行うことにより、タップ係数としては、図２９上から３番目に示すように、ある画像データの一部又は全部である第１の画像データを、その第１の画像データを拡大した拡大画像データである第２の画像データに変換するリサイズ処理（画素数を変更する処理）としての画像変換処理を行うものを得ることができる。
【０３０４】
なお、リサイズ処理を行うタップ係数は、高画質画像データを教師データとするとともに、その高画質画像データの空間解像度を、画素数を間引くことにより劣化させた低画質画像データを生徒データとして、タップ係数の学習を行うことによっても得ることができる。
【０３０５】
また、例えば、高フレームレートの画像データを教師データとするとともに、その教師データとしての高フレームレートの画像データのフレームを間引いた画像データを生徒データとして、タップ係数の学習を行うことにより、タップ係数としては、図２９上から４番目（１番下）に示すように、所定のフレームレートの第１の画像データを、高フレームレートの第２の画像データに変換する時間解像度創造処理としての画像変換処理を行うものを得ることができる。
【０３０６】
次に、図３０のフローチャートを参照して、図２７の学習装置１２１の処理（学習処理）について、説明する。
【０３０７】
まず最初に、ステップＳ１２１において、教師データ生成部１３２と生徒データ生成部１３４が、学習用画像記憶部１３１に記憶された学習用画像データから、画像変換処理で得る第２の画像データに対応（相当）する教師データと、画像変換処理の対象となる第１の画像データに対応する生徒データを生成し、教師データ記憶部１３３と生徒データ生成部１３４にそれぞれ供給して記憶させる。
【０３０８】
なお、教師データ生成部１３２と生徒データ生成部１３４において、それぞれ、どのような生徒データと教師データを生成するかは、上述したような種類の画像変換処理のうちのいずれの処理用のタップ係数の学習を行うかによって異なる。
【０３０９】
その後、ステップＳ１２２に進み、学習部１３６（図２８）において、注目画素選択部１４１は、教師データ記憶部１３３に記憶された教師データのうち、まだ、注目画素としていないものを、注目画素として選択し、ステップＳ１２３に進む。ステップＳ１２３では、タップ選択部１４２が、注目画素について、生徒データ記憶部１３５に記憶された生徒データから予測タップとする生徒データとしての画素を選択し、足し込み部１４５に供給するとともに、タップ選択部１４３が、やはり、注目画素について、生徒データ記憶部１３５に記憶された生徒データからクラスタップとする生徒データを選択し、クラス分類部１４４に供給する。
【０３１０】
そして、ステップＳ１２４に進み、クラス分類部１４４は、注目画素についてのクラスタップに基づき、注目画素のクラス分類を行い、その結果得られるクラスに対応するクラスコードを、足し込み部１４５に出力して、ステップＳ１２５に進む。
【０３１１】
ステップＳ１２５では、足し込み部１４５は、教師データ記憶部１３３から、注目画素を読み出し、その注目画素と、タップ選択部１４２から供給される注目画素について選択された予測タップを構成する生徒データとを対象とした式（８）の足し込みを、クラス分類部１４４から供給されるクラスコードごとに行い、ステップＳ１２６に進む。
【０３１２】
ステップＳ１２６では、注目画素選択部１４１が、教師データ記憶部１３３に、まだ、注目画素としていない教師データが記憶されているかどうかを判定する。ステップＳ１２６において、注目画素としていない教師データが、まだ、教師データ記憶部１３３に記憶されていると判定された場合、ステップＳ１２２に戻り、以下、同様の処理が繰り返される。
【０３１３】
また、ステップＳ１２６において、注目画素としていない教師データが、教師データ記憶部１３３に記憶されていないと判定された場合、足し込み部１４５は、いままでのステップＳ１２２乃至Ｓ１２６の処理によって得られたクラスごとの式（８）における左辺の行列と、右辺のベクトルを、タップ係数算出部１４６に供給し、ステップＳ１２７に進む。
【０３１４】
ステップＳ１２７では、タップ係数算出部１４６は、足し込み部１４５から供給されるクラスごとの式（８）における左辺の行列と右辺のベクトルによって構成されるクラスごとの正規方程式を解くことにより、各クラスごとに、タップ係数ｗnを求めて出力し、処理を終了する。
【０３１５】
なお、学習用画像データの数が十分でないこと等に起因して、タップ係数を求めるのに必要な数の正規方程式が得られないクラスが生じることがあり得るが、そのようなクラスについては、タップ係数算出部１４６は、例えば、デフォルトのタップ係数を出力するようになっている。
【０３１６】
次に、図３１は、クラス分類適応処理を利用した画像変換処理を行う他の画像変換装置である画像変換装置１５１の構成例を示している。
【０３１７】
なお、図中、図２５における場合と対応する部分については、同一の符号を付してあり、以下では、その説明は、適宜省略する。すなわち、画像変換装置１５１は、係数出力部１１５に代えて、係数出力部１５５が設けられている他は、図２５の画像変換装置１０１と同様に構成されている。
【０３１８】
係数出力部１５５には、クラス分類部１１４からクラス（クラスコード）が供給される他、例えば、ユーザの操作に応じて外部から入力されるパラメータｚが供給されるようになっている。係数出力部１５５は、後述するようにして、パラメータｚに対応するクラスごとのタップ係数を生成し、そのクラスごとのタップ係数のうちの、クラス分類部１１４からのクラスのタップ係数を、予測演算部１１６に出力する。
【０３１９】
図３２は、図３１の係数出力部１５５の構成例を示している。
【０３２０】
係数生成部１６１は、係数種メモリ１６２に記憶されている係数種データと、パラメータメモリ１６３に記憶されたパラメータｚとに基づいて、クラスごとのタップ係数を生成し、係数メモリ１６４に供給して上書きする形で記憶させる。
【０３２１】
係数種メモリ１６２は、後述する係数種データの学習によって得られるクラスごとの係数種データを記憶している。ここで、係数種データは、タップ係数を生成する、いわば種になるデータである。
【０３２２】
パラメータメモリ１６３は、ユーザの操作等に応じて外部から入力されるパラメータｚを上書きする形で記憶する。
【０３２３】
係数メモリ１６４は、係数生成部１６１から供給されるクラスごとのタップ係数（パラメータｚに対応するクラスごとのタップ係数）を記憶する。そして、係数メモリ１６４は、クラス分類部１１４（図３１）から供給されるクラスのタップ係数を読み出し、予測演算部１１６（図３１）に出力する。
【０３２４】
図３１の画像変換装置１５１では、外部から係数出力部１５５に対して、パラメータｚが入力されると、係数出力部１５５（図３２）のパラメータメモリ１６３において、そのパラメータｚが、上書きする形で記憶される。
【０３２５】
パラメータメモリ１６３にパラメータｚが記憶されると（パラメータメモリ１６３の記憶内容が更新されると）、係数生成部１６１は、係数種メモリ１６２からクラスごとの係数種データを読み出すとともに、パラメータメモリ１６３からパラメータｚを読み出し、その係数種データとパラメータｚに基づいて、クラスごとのタップ係数を求める。そして、係数生成部１６１は、そのクラスごとのタップ係数を、係数メモリ１６４に供給し、上書きする形で記憶させる。
【０３２６】
画像変換装置１５１では、タップ係数を記憶しており、そのタップ係数を出力する係数出力部１１５に代えて設けられている係数出力部１５５において、パラメータｚに対応するタップ係数を生成して出力することを除いて、図２５の画像変換装置１０１が行う図２６のフローチャートにしたがった処理と同様の処理が行われる。
【０３２７】
次に、図３１の予測演算部１１６における予測演算、並びに図３２の係数生成部１６１におけるタップ係数の生成及び係数種メモリ１６２に記憶させる係数種データの学習について説明する。
【０３２８】
図２５の実施の形態における場合のように、高画質の画像データ（高画質画像データ）を第２の画像データとするとともに、その高画質画像データの空間解像度を低下させた低画質の画像データ（低画質画像データ）を第１の画像データとして、低画質画像データから予測タップを選択し、その予測タップとタップ係数を用いて、高画質画像データの画素である高画質画素の画素値を、例えば、式（１）の線形１次予測演算によって求める（予測する）ことを考える。
【０３２９】
ここで、高画質画素の画素値ｙは、式（１）に示した線形１次式ではなく、２次以上の高次の式によって求めるようにすることも可能である。
【０３３０】
図３２の実施の形態では、係数生成部１６１において、タップ係数ｗnが、係数種メモリ１６２に記憶された係数種データと、パラメータメモリ１６３に記憶されたパラメータｚとから生成されるが、この係数生成部１６１におけるタップ係数ｗnの生成が、例えば、係数種データとパラメータｚを用いた次式によって行われることとする。
【０３３１】
【数９】
2008178075.tif 000011
・・・（９）
【０３３２】
但し、式（９）において、βm,nは、ｎ番目のタップ係数ｗnを求めるのに用いられるｍ番目の係数種データを表す。なお、式（９）では、タップ係数ｗnが、Ｍ個の係数種データβ1,n，β2,n，・・・，βM,nを用いて求められるようになっている。
【０３３３】
ここで、係数種データβm,nとパラメータｚから、タップ係数ｗnを求める式は、式（９）に限定されるものではない。
【０３３４】
いま、式（９）におけるパラメータｚによって決まる値ｚm-1を、新たな変数ｔmを導入して、次式で定義する。
【０３３５】
【数１０】
2008178075.tif 000012
・・・（１０）
【０３３６】
式（１０）を、式（９）に代入することにより、次式が得られる。
【０３３７】
【数１１】
2008178075.tif 000013
・・・（１１）
【０３３８】
式（１１）によれば、タップ係数ｗnは、係数種データβm,nと変数ｔmとの線形１次式によって求められることになる。
【０３３９】
ところで、いま、第ｋサンプルの高画質画素の画素値の真値をｙkと表すとともに、式（１）によって得られるその真値ｙkの予測値をｙk’と表すと、その予測誤差ｅkは、次式で表される。
【０３４０】
【数１２】
2008178075.tif 000014
・・・（１２）
【０３４１】
いま、式（１２）の予測値ｙk’は、式（１）にしたがって求められるため、式（１２）のｙk’を、式（１）にしたがって置き換えると、次式が得られる。
【０３４２】
【数１３】
2008178075.tif 000015
・・・（１３）
【０３４３】
但し、式（１３）において、ｘn,kは、第ｋサンプルの高画質画素についての予測タップを構成するｎ番目の低画質画素を表す。
【０３４４】
式（１３）のｗnに、式（１１）を代入することにより、次式が得られる。
【０３４５】
【数１４】
2008178075.tif 000016
・・・（１４）
【０３４６】
式（１４）の予測誤差ｅkを０とする係数種データβm,nが、高画質画素を予測するのに最適なものとなるが、すべての高画質画素について、そのような係数種データβm,nを求めることは、一般には困難である。
【０３４７】
そこで、係数種データβm,nが最適なものであることを表す規範として、例えば、最小自乗法を採用することとすると、最適な係数種データβm,nは、次式で表される自乗誤差の総和Ｅを最小にすることで求めることができる。
【０３４８】
【数１５】
2008178075.tif 000017
・・・（１５）
【０３４９】
但し、式（１５）において、Ｋは、高画質画素ｙkと、その高画質画素ｙkについての予測タップを構成する低画質画素ｘ1,k，ｘ2,k，・・・，ｘN,kとのセットのサンプル数（学習用のサンプルの数）を表す。
【０３５０】
式（１５）の自乗誤差の総和Ｅの最小値（極小値）は、式（１６）に示すように、総和Ｅを係数種データβm,nで偏微分したものを０とするβm,nによって与えられる。
【０３５１】
【数１６】
2008178075.tif 000018
・・・（１６）
【０３５２】
式（１３）を、式（１６）に代入することにより、次式が得られる。
【０３５３】
【数１７】
2008178075.tif 000019
・・・（１７）
【０３５４】
いま、Ｘi,p,j,qとＹi,pを、式（１８）と（１９）に示すように定義する。
【０３５５】
【数１８】
2008178075.tif 000020
・・・（１８）
【０３５６】
【数１９】
2008178075.tif 000021
・・・（１９）
【０３５７】
この場合、式（１７）は、Ｘi,p,j,qとＹi,pを用いた式（２０）に示す正規方程式で表すことができる。
【０３５８】
【数２０】
2008178075.tif 000022
・・・（２０）
【０３５９】
式（２０）の正規方程式は、例えば、掃き出し法（Gauss-Jordanの消去法）などを用いることにより、係数種データβm,nについて解くことができる。
【０３６０】
図３１の画像変換装置１５１においては、多数の高画質画素ｙ1，ｙ2，・・・，ｙKを学習の教師となる教師データとするとともに、各高画質画素ｙkについての予測タップを構成する低画質画素ｘ1,k，ｘ2,k，・・・，ｘN,kを学習の生徒となる生徒データとして、クラスごとに式（２０）の正規方程式をたてて解く学習を行うことにより求められたクラスごとの係数種データβm,nが、係数出力部１５５（図３２）の係数種メモリ１６２に記憶されており、係数生成部１６１では、その係数種データβm,nと、パラメータメモリ１６３に記憶されたパラメータｚから、式（９）にしたがって、クラスごとのタップ係数ｗnが生成される。そして、予測演算部１１６において、そのタップ係数ｗnと、高画質画素としての注目画素についての予測タップを構成する低画質画素（第１の画像データの画素）ｘnを用いて、式（１）が計算されることにより、高画質画素としての注目画素の画素値（に近い予測値）が求められる。
【０３６１】
次に、図３３は、式（２０）の正規方程式をクラスごとにたてて解くことにより、クラスごとの係数種データβm,nを求める学習を行う学習装置１７１の構成例を示している。
【０３６２】
なお、図中、図２７の学習装置１２１における場合と対応する部分については、同一の符号を付してあり、以下では、その説明は、適宜省略する。すなわち、学習装置１７１は、生徒データ生成部１３４と学習部１３６に代えて、生徒データ生成部１７４と学習部１７６がそれぞれ設けられているとともに、パラメータ生成部１８１が新たに設けられている他は、図２７の学習装置１２１と同様に構成されている。
【０３６３】
生徒データ生成部１７４は、図２７の生徒データ生成部１３４と同様に、学習用画像データから生徒データを生成し、生徒データ記憶部１３５に供給して記憶させる。
【０３６４】
但し、生徒データ生成部１７４には、学習用画像データの他、図３２のパラメータメモリ１６３に供給されるパラメータｚが取り得る範囲の幾つかの値が、パラメータ生成部１８１から供給されるようになっている。すなわち、いま、パラメータｚが取り得る値が０乃至Ｚの範囲の実数であるとすると、生徒データ生成部１７４には、例えば、ｚ＝０，１，２，・・・，Ｚが、パラメータ生成部１８１から供給されるようになっている。
【０３６５】
生徒データ生成部１７４は、学習用画像データとしての高画質画像データを、例えば、そこに供給されるパラメータｚに対応するカットオフ周波数のLPFによってフィルタリングすることにより、生徒データとしての低画質画像データを生成する。
【０３６６】
従って、生徒データ生成部１７４では、学習用画像データとしての高画質画像データについて、Ｚ＋１種類の、空間解像度の異なる生徒データとしての低画質画像データが生成される。
【０３６７】
なお、ここでは、例えば、パラメータｚの値が大きくなるほど、カットオフ周波数の高いLPFを用いて、高画質画像データをフィルタリングし、生徒データとしての低画質画像データを生成するものとする。従って、ここでは、値の大きいパラメータｚに対応する低画質画像データほど、空間解像度が高い。
【０３６８】
また、本実施の形態では、説明を簡単にするために、生徒データ生成部１７４において、高画質画像データの水平方向及び垂直方向の両方向の空間解像度を、パラメータｚに対応する分だけ低下させた低画質画像データを生成するものとする。
【０３６９】
学習部１７６は、教師データ記憶部１３３に記憶された教師データ、生徒データ記憶部１３５に記憶された生徒データ、及びパラメータ生成部１８１から供給されるパラメータｚを用いて、クラスごとの係数種データを求めて出力する。
【０３７０】
パラメータ生成部１８１は、パラメータｚが取り得る範囲の幾つかの値としての、例えば、上述したようなｚ＝０，１，２，・・・，Ｚを生成し、生徒データ生成部１７４と学習部１７６に供給する。
【０３７１】
次に、図３４は、図３３の学習部１７６の構成例を示している。なお、図中、図２８の学習部１３６における場合と対応する部分については、同一の符号を付してあり、以下では、その説明は、適宜省略する。
【０３７２】
タップ選択部１９２は、図２８のタップ選択部１４２と同様に、注目画素について、生徒データ記憶部１３５に記憶された生徒データとしての低画質画像データを構成する低画質画素から、図３１のタップ選択部１１２が選択するのと同一のタップ構造の予測タップを選択し、足し込み部１９５に供給する。
【０３７３】
タップ選択部１９３も、図２８のタップ選択部１４３と同様に、注目画素について、生徒データ記憶部１３５に記憶された生徒データとしての低画質画像データを構成する低画質画素から、図３１のタップ選択部１１３が選択するのと同一のタップ構造のクラスタップを選択し、クラス分類部１４４に供給する。
【０３７４】
但し、図３４では、タップ選択部１９２と１９３に、図３３のパラメータ生成部１８１が生成するパラメータｚが供給されるようになっており、タップ選択部１９２と１９３は、パラメータ生成部１８１から供給されるパラメータｚに対応して生成された生徒データ（ここでは、パラメータｚに対応するカットオフ周波数のLPFを用いて生成された生徒データとしての低画質画像データ）から、予測タップとクラスタップをそれぞれ選択する。
【０３７５】
足し込み部１９５は、図３３の教師データ記憶部１３３から、注目画素を読み出し、その注目画素、タップ選択部１９２から供給される注目画素について構成された予測タップを構成する生徒データ、及びその生徒データを生成したときのパラメータｚを対象とした足し込みを、クラス分類部１４４から供給されるクラスごとに行う。
【０３７６】
すなわち、足し込み部１９５には、教師データ記憶部１３３に記憶された注目画素としての教師データｙk、タップ選択部１９２が出力する注目画素についての予測タップｘi,k（ｘj,k）、及びクラス分類部１４４が出力する注目画素のクラスが供給されるとともに、注目画素についての予測タップを構成する生徒データを生成したときのパラメータｚが、パラメータ生成部１８１から供給される。
【０３７７】
そして、足し込み部１９５は、クラス分類部１４４から供給されるクラスごとに、予測タップ（生徒データ）ｘi,k（ｘj,k）とパラメータｚを用い、式（２０）の左辺の行列における、式（１８）で定義されるコンポーネントＸi,p,j,qを求めるための生徒データ及びパラメータｚの乗算（ｘi,kｔpｘj,kｔq）と、サメーション（Σ）に相当する演算を行う。なお、式（１８）のｔpは、式（１０）にしたがって、パラメータｚから計算される。式（１８）のｔqも同様である。
【０３７８】
さらに、足し込み部１９５は、やはり、クラス分類部１４４から供給されるクラスコードに対応するクラスごとに、予測タップ（生徒データ）ｘi,k、教師データｙk、及びパラメータｚを用い、式（２０）の右辺のベクトルにおける、式（１９）で定義されるコンポーネントＹi,pを求めるための生徒データｘi,k、教師データｙk、及びパラメータｚの乗算（ｘi,kｔpｙk）と、サメーション（Σ）に相当する演算を行う。なお、式（１９）のｔpは、式（１０）にしたがって、パラメータｚから計算される。
【０３７９】
すなわち、足し込み部１９５は、前回、注目画素とされた教師データについて求められた式（２０）における左辺の行列のコンポーネントＸi,p,j,qと、右辺のベクトルのコンポーネントＹi,pを、その内蔵するメモリ（図示せず）に記憶しており、その行列のコンポーネントＸi,p,j,q又はベクトルのコンポーネントＹi,pに対して、新たに注目画素とされた教師データについて、その教師データｙk、生徒データｘi,k(ｘj,k)、及びパラメータｚを用いて計算される、対応するコンポーネントｘi,kｔpｘj,kｔq又はｘi,kｔpｙkを足し込む（式（１８）のコンポーネントＸi,p,j,q又は式（１９）のコンポーネントＹi,pにおけるサメーションで表される加算を行う）。
【０３８０】
そして、足し込み部１９５は、０，１，・・・，Ｚのすべての値のパラメータｚにつき、教師データ記憶部１３３に記憶された教師データすべてを注目画素として、上述の足し込みを行うことにより、各クラスについて、式（２０）に示した正規方程式をたてると、その正規方程式を、係数種算出部１９６に供給する。
【０３８１】
係数種算出部１９６は、足し込み部１９５から供給されるクラスごとの正規方程式を解くことにより、各クラスごとの係数種データβm,nを求めて出力する。
【０３８２】
次に、図３５のフローチャートを参照して、図３３の学習装置１７１の処理（学習処理）について、説明する。
【０３８３】
まず最初に、ステップＳ１３１において、教師データ生成部１３２と生徒データ生成部１７４が、学習用画像記憶部１３１に記憶された学習用画像データから、教師データと生徒データを、それぞれ生成して出力する。すなわち、教師データ生成部１３２は、学習用画像データを、例えば、そのまま、教師データとして出力する。また、生徒データ生成部１７４には、パラメータ生成部１８１が生成するＺ＋１個の値のパラメータｚが供給される。生徒データ生成部１７４は、例えば、学習用画像データを、パラメータ生成部１８１からのＺ＋１個の値（０，１，・・・，Ｚ）のパラメータｚに対応するカットオフ周波数のLPFによってフィルタリングすることにより、各フレームの教師データ（学習用画像データ）について、Ｚ＋１フレームの生徒データを生成して出力する。
【０３８４】
教師データ生成部１３２が出力する教師データは、教師データ記憶部１３３に供給されて記憶され、生徒データ生成部１７４が出力する生徒データは、生徒データ記憶部１３５に供給されて記憶される。
【０３８５】
その後、ステップＳ１３２に進み、パラメータ生成部１８１は、パラメータｚを、初期値としての、例えば０にセットし、学習部１７６（図３４）のタップ選択部１９２及び１９３、並びに足し込み部１９５に供給して、ステップＳ１３３に進む。ステップＳ１３３では、注目画素選択部１４１は、教師データ記憶部１３３に記憶された教師データのうち、まだ、注目画素としていないものを、注目画素として、ステップＳ１３４に進む。
【０３８６】
ステップＳ１３４では、タップ選択部１９２が、注目画素について、生徒データ記憶部１３５に記憶された、パラメータ生成部１８１が出力するパラメータｚに対する生徒データ（注目画素となっている教師データに対応する学習用画像データを、パラメータｚに対応するカットオフ周波数のLPFによってフィルタリングすることにより生成された生徒データ）から予測タップを選択し、足し込み部１９５に供給する。さらに、ステップＳ１３４では、タップ選択部１９３が、やはり、注目画素について、生徒データ記憶部１３５に記憶された、パラメータ生成部１８１が出力するパラメータｚに対する生徒データからクラスタップを選択し、クラス分類部１４４に供給する。
【０３８７】
そして、ステップＳ１３５に進み、クラス分類部１４４は、注目画素についてのクラスタップに基づき、注目画素のクラス分類を行い、その結果得られる注目画素のクラスを、足し込み部１９５に出力して、ステップＳ１３６に進む。
【０３８８】
ステップＳ１３５では、足し込み部１９５は、教師データ記憶部１３３から注目画素を読み出し、その注目画素、タップ選択部１９２から供給される予測タップ、パラメータ生成部１８１が出力するパラメータｚを用い、式（２０）における左辺の行列のコンポーネントｘi,Kｔpｘj,Kｔqと、右辺のベクトルのコンポーネントｘi,KｔpｙKを計算する。さらに、足し込み部１９５は、既に得られている行列のコンポーネントとベクトルのコンポーネントのうち、クラス分類部１４４からの注目画素のクラスに対応するものに対して、注目画素、予測タップ、及びパラメータｚから求められた行列のコンポーネントｘi,Kｔpｘj,Kｔqとベクトルのコンポーネントｘi,KｔpｙKを足し込み、ステップＳ１３７に進む。
【０３８９】
ステップＳ１３７では、パラメータ生成部１８１が、自身が出力しているパラメータｚが、その取り得る値の最大値であるＺに等しいかどうかを判定する。ステップＳ１３６において、パラメータ生成部１８１が出力しているパラメータｚが最大値Ｚに等しくない（最大値Ｚ未満である）と判定された場合、ステップＳ１３８に進み、パラメータ生成部１８１は、パラメータｚに１を加算し、その加算値を新たなパラメータｚとして、学習部１７６（図３４）のタップ選択部１９２及び１９３、並びに足し込み部１９５に出力する。そして、ステップＳ１３４に戻り、以下、同様の処理が繰り返される。
【０３９０】
また、ステップＳ１３７において、パラメータｚが最大値Ｚに等しいと判定された場合、ステップＳ１３９に進み、注目画素選択部１４１が、教師データ記憶部１３３に、まだ、注目画素としていない教師データが記憶されているかどうかを判定する。ステップＳ１３８において、注目画素としていない教師データが、まだ、教師データ記憶部１３３に記憶されていると判定された場合、ステップＳ１３２に戻り、以下、同様の処理が繰り返される。
【０３９１】
また、ステップＳ１３９において、注目画素としていない教師データが、教師データ記憶部１３３に記憶されていないと判定された場合、足し込み部１９５は、いままでの処理によって得られたクラスごとの式（２０）における左辺の行列と、右辺のベクトルを、係数種算出部１９６に供給し、ステップＳ１４０に進む。
【０３９２】
ステップＳ１４０では、係数種算出部１９６は、足し込み部１９５から供給されるクラスごとの式（２０）における左辺の行列と右辺のベクトルによって構成されるクラスごとの正規方程式を解くことにより、各クラスごとに、係数種データβm,nを求めて出力し、処理を終了する。
【０３９３】
なお、学習用画像データの数が十分でないこと等に起因して、係数種データを求めるのに必要な数の正規方程式が得られないクラスが生じることがあり得るが、そのようなクラスについては、係数種算出部１９６は、例えば、デフォルトの係数種データを出力するようになっている。
【０３９４】
なお、係数種データの学習においても、図２９で説明したタップ係数の学習における場合と同様に、第１の画像データに対応する生徒データと、第２の画像データに対応する教師データとする画像データの選択の仕方によって、係数種データとしては、各種の画像変換処理を行うものを得ることができる。
【０３９５】
すなわち、上述の場合には、学習用画像データを、そのまま第２の画像データに対応する教師データとするとともに、その学習用画像データの空間解像度を劣化させた低画質画像データを、第１の画像データに対応する生徒データとして、係数種データの学習を行うようにしたことから、係数種データとしては、第１の画像データを、その空間解像度を向上させた第２の画像データに変換する空間解像度創造処理としての画像変換処理を行うものを得ることができる。
【０３９６】
この場合、図３１の画像変換装置１５１では、画像データの水平解像度及び垂直解像度を、パラメータｚに対応する解像度に向上させることができる。
【０３９７】
また、例えば、高画質画像データを教師データとするとともに、その教師データとしての高画質画像データに対して、パラメータｚに対応するレベルのノイズを重畳した画像データを生徒データとして、係数種データの学習を行うことにより、係数種データとしては、第１の画像データを、そこに含まれるノイズを除去（低減）した第２の画像データに変換するノイズ除去処理としての画像変換処理を行うものを得ることができる。この場合、図３１の画像変換装置１５１では、パラメータｚに対応するS/Nの画像データを得ることができる。
【０３９８】
また、例えば、ある画像データを教師データとするとともに、その教師データとしての画像データの画素数を、パラメータｚに対応して間引いた画像データを生徒データとして、又は、所定のサイズの画像データを生徒データとするとともに、その生徒データとしての画像データの画素をパラメータｚに対応する間引き率で間引いた画像データを教師データとして、係数種データの学習を行うことにより、係数種データとしては、第１の画像データを、そのサイズを拡大又は縮小した第２の画像データに変換するリサイズ処理としての画像変換処理を行うものを得ることができる。この場合、図３１の画像変換装置１５１では、パラメータｚに対応するサイズ（画素数）に変更した画像データを得ることができる。
【０３９９】
なお、上述の場合には、タップ係数ｗnを、式（９）に示したように、β1,nｚ0＋β2,nｚ1＋・・・＋βM,nｚM-1で定義し、この式（９）によって、水平及び垂直方向の空間解像度を、いずれも、パラメータｚに対応して向上させるためのタップ係数ｗnを求めるようにしたが、タップ係数ｗnとしては、水平解像度と垂直解像度を、独立のパラメータｚxとｚyに対応して、それぞれ独立に向上させるものを求めるようにすることも可能である。
【０４００】
すなわち、タップ係数ｗnを、式（９）に代えて、例えば、３次式β1,nｚx0ｚy0＋β2,nｚx1ｚy0＋β3,nｚx2ｚy0＋β4,nｚx3ｚy0＋β5,nｚx0ｚy1＋β6,nｚx0ｚy2＋β7,nｚx0ｚy3＋β8,nｚx1ｚy1＋β9,nｚx2ｚy1＋β10,nｚx1ｚy2で定義するとともに、式（１０）で定義した変数ｔmを、式（１０）に代えて、例えば、ｔ1＝ｚx0ｚy0，ｔ2＝ｚx1ｚy0，ｔ3＝ｚx2ｚy0，ｔ4＝ｚx3ｚy0，ｔ5＝ｚx0ｚy1，ｔ6＝ｚx0ｚy2，ｔ7＝ｚx0ｚy3，ｔ8＝ｚx1ｚy1，ｔ9＝ｚx2ｚy1，ｔ10＝ｚx1ｚy2で定義する。この場合も、タップ係数ｗnは、最終的には、式（１１）で表すことができ、従って、図３３の学習装置１７１や、パラメータｚxとｚyに対応して、教師データの水平解像度と垂直解像度をそれぞれ劣化させた画像データを、生徒データとして用いて学習を行って、係数種データβm,nを求めることにより、水平解像度と垂直解像度を、独立のパラメータｚxとｚyに対応して、それぞれ独立に向上させるタップ係数ｗnを求めることができる。
【０４０１】
その他、例えば、水平解像度と垂直解像度それぞれに対応するパラメータｚxとｚyに加えて、さらに、時間方向の解像度に対応するパラメータｚtを導入することにより、水平解像度、垂直解像度、時間解像度を、独立のパラメータｚx，ｚy，ｚtに対応して、それぞれ独立に向上させるタップ係数ｗnを求めることが可能となる。
【０４０２】
また、リサイズ処理についても、空間解像度創造処理における場合と同様に、水平及び垂直方向を、いずれもパラメータｚに対応する拡大率（又は縮小率）でリサイズするタップ係数ｗnの他、水平と垂直方向を、それぞれパラメータｚxとｚyに対応する拡大率で、独立にリサイズするタップ係数ｗnを求めることが可能である。
【０４０３】
さらに、図３３の学習装置１７１において、パラメータｚxに対応して教師データの水平解像度及び垂直解像度を劣化させるとともに、パラメータｚyに対応して教師データにノイズを付加した画像データを、生徒データとして用いて学習を行って、係数種データβm,nを求めることにより、パラメータｚxに対応して水平解像度及び垂直解像度を向上させるとともに、パラメータｚyに対応してノイズ除去を行うタップ係数ｗnを求めることができる。
【０４０４】
上述した画像変換処理は、以上のようなクラス分類適応処理を利用して行うことができる。
【０４０５】
すなわち、例えば、図４の画像変換部３１1において、チェック画像データを、サイズ（画素数）がm倍のm倍拡大画像データに変換する画像変換処理を、クラス分類適応処理を利用して行う場合には、図３３の学習装置１７１において、横と縦の画素数それぞれが、チェック画像データのm1倍、m2倍、・・・の画像データを、m倍拡大画像データに対応する教師データとするとともに、その教師データとしての画像データの画素数を、パラメータｚに対応して1/m1，1/m2，・・・に間引いた、チェック画像データと同一の画素数の画像データを、チェック画像データに対応する生徒データとして、係数種データの学習を行う。
【０４０６】
そして、画像変換部３１1を、図３１の画像変換装置１５１によって構成し、学習によって求めた係数種データを、画像変換部３１1としての画像変換装置１５１（図３１）の係数出力部１５５を構成する係数種メモリ１６２（図３２）に記憶させておく。
【０４０７】
この場合、画像変換部３１1としての画像変換装置１５１に対し、パラメータｚとして、拡大率mに対応する値を与えることによって、画像変換部３１1としての画像変換装置１５１において、チェック画像データを、画素数がm倍のm倍拡大画像データに変換する画像変換処理を、クラス分類適応処理によって行うことができる。
【０４０８】
次に、上述した一連の処理は、ハードウェアにより行うこともできるし、ソフトウェアにより行うこともできる。一連の処理をソフトウェアによって行う場合には、そのソフトウェアを構成するプログラムが、汎用のコンピュータ等にインストールされる。
【０４０９】
そこで、図３６は、上述した一連の処理を実行するプログラムがインストールされるコンピュータの一実施の形態の構成例を示している。
【０４１０】
プログラムは、コンピュータに内蔵されている記録媒体としてのハードディスク２０５やROM２０３に予め記録しておくことができる。
【０４１１】
あるいはまた、プログラムは、フレキシブルディスク、CD-ROM(Compact Disc Read Only Memory)，MO(Magneto Optical)ディスク，DVD(Digital Versatile Disc)、磁気ディスク、半導体メモリなどのリムーバブル記録媒体２１１に、一時的あるいは永続的に格納（記録）しておくことができる。このようなリムーバブル記録媒体２１１は、いわゆるパッケージソフトウエアとして提供することができる。
【０４１２】
なお、プログラムは、上述したようなリムーバブル記録媒体２１１からコンピュータにインストールする他、ダウンロードサイトから、ディジタル衛星放送用の人工衛星を介して、コンピュータに無線で転送したり、LAN(Local Area Network)、インターネットといったネットワークを介して、コンピュータに有線で転送し、コンピュータでは、そのようにして転送されてくるプログラムを、通信部２０８で受信し、内蔵するハードディスク２０５にインストールすることができる。
【０４１３】
コンピュータは、CPU(Central Processing Unit)２０２を内蔵している。CPU２０２には、バス２０１を介して、入出力インタフェース２１０が接続されており、CPU２０２は、入出力インタフェース２１０を介して、ユーザによって、キーボードや、マウス、マイク等で構成される入力部２０７が操作等されることにより指令が入力されると、それにしたがって、ROM(Read Only Memory)２０３に格納されているプログラムを実行する。あるいは、また、CPU２０２は、ハードディスク２０５に格納されているプログラム、衛星若しくはネットワークから転送され、通信部２０８で受信されてハードディスク２０５にインストールされたプログラム、またはドライブ２０９に装着されたリムーバブル記録媒体２１１から読み出されてハードディスク２０５にインストールされたプログラムを、RAM(Random Access Memory)２０４にロードして実行する。これにより、CPU２０２は、上述したフローチャートにしたがった処理、あるいは上述したブロック図の構成により行われる処理を行う。そして、CPU２０２は、その処理結果を、必要に応じて、例えば、入出力インタフェース２１０を介して、LCD(Liquid Crystal Display)やスピーカ等で構成される出力部２０６から出力、あるいは、通信部２０８から送信、さらには、ハードディスク２０５に記録等させる。
【０４１４】
なお、例えば、本実施の形態では、表示装置２において、チェック画像の他に、３つの画像を同時に表示するようにしたが、チェック画像と同時に表示する画像は、１，２、又は４以上であっても良い。
【０４１５】
すなわち、図２では、表示装置２の画面を、横と縦にそれぞれ等分する４つの表示領域#0ないし#3に分割し、その表示領域#0ないし#3のそれぞれに、画像を表示するようにしたが、表示装置２の画面は、その他、例えば、２，８，１６その他の数の複数の表示領域に分割して、各表示領域に、画像を表示することができる。
【０４１６】
さらに、表示領域の配置は、図２に示したように、マトリクス状の配置に限定されるものではなく、表示領域は、表示装置２の画面上の任意の位置に配置することができる。
【０４１７】
また、図１では、表示装置２を、LCDとしたが、表示装置としては、その他、例えば、CRTや、PDP、有機EL、プロジェクタ（スクリーンの正面から光を照射するフロントプロジェクタ、及び、スクリーンの背面から光を照射するリアプロジェクタの両方を含む）、FED等を採用することができる。
【０４１８】
さらに、図７及び図８では、信号処理部１２が、有機EL，PDP、及びCRTに表示される画像に相当する画像を、LCDである表示装置２で表示するための処理後画像データそれぞれを生成する信号処理を行い、表示装置２で表示するようにしたが、信号処理部１２では、その他、例えば、FEDや、フロントプロジェクタ、リアプロジェクタ等に表示される画像に相当する画像を、LCDである表示装置２で表示するための処理後画像データを生成する信号処理を行い、表示装置２で表示することが可能である。
【０４１９】
［ABL(Automatic Beam current Limiter)処理、VM(Velocity Modulation)処理、及びCRT(Cathode Ray Tube)用γ処理を含むFPD(Flat Panel Display)用信号処理を行うことにより、FPDの表示装置であるFPD表示装置において、CRTの表示装置であるCRT表示装置と同等の自然な表示を行う実施の形態］
【０４２０】
次に、FPD表示装置において、CRT表示装置と同等の自然な表示を行う実施の形態について説明する。
【０４２１】
図３７は、従来の、例えば、LCD(Liquid Crystal Display)等のFPDの表示装置（FPD表示装置）の一例の構成を示している。
【０４２２】
明るさ調整コントラスト調整部10011は、入力された画像信号にオフセットを掛けることで、画像信号の明るさ調整をし、ゲインを調整することで、画像信号のコントラスト調整をして、高画質化処理部10012に供給する。
【０４２３】
高画質化処理部10012は、DRC(Digital Reality Creation)を代表とする高画質化処理を行う。すなわち、高画質化処理部10012は、高画質画像を得るための処理ブロックで、明るさ調整コントラスト調整部10011からの画像信号に対して、画素数変換などを含む画像信号処理を行って、γ補正部10013に供給する。
【０４２４】
ここで、DRCについては、例えば、特開2005-236634号公報や特開2002-223167号公報等に、クラス分類適応処理として記載されている。
【０４２５】
γ補正部10013は、CRT表示装置において暗部が見えにくいなどの理由で本来の蛍光体（CRTの発光部）が持つγ特性に加えて信号処理により暗部の信号レベルを調整するガンマ補正処理を行う処理ブロックである。
【０４２６】
ここで、LCDにおいてもLCDパネル内部に液晶の光電変換特性（透過特性）をCRTのγ特性に合わせる処理回路が入っているため、従来のFPD表示装置では、CRT表示装置と同様にγ補正処理を行っている。
【０４２７】
γ補正部10013は、高画質化処理部10012からの画像信号に対してガンマ補正処理を施し、その結果得られる画像信号を、図示せぬFPDとしての、例えば、LCDに供給する。これにより、LCDでは、画像が表示される。
【０４２８】
以上のように、従来のFPD表示装置では、画像信号はコントラストや明るさ調整の処理が行われた後、高画質化処理、ガンマ補正処理を経てFPDに直接入力されている。
【０４２９】
このため、FPD表示装置では、入力と表示画像の明るさはガンマに従った比例関係になるが、表示画像は、CRT表示装置と比べ、明るすぎたりやギラツキが感じられる画像になってしまう。
【０４３０】
そこで、暗い部分の階調表現能力がCRTに比べてパネルの特性が落ちるディスプレイ装置において、別のABL回路を使用せずに、適応的に階調表現力を改善する方法が、例えば、特開2005-39817号公報に記載されている。
【０４３１】
ところで、上述のように、FPD表示装置で表示される画像が、CRT表示装置と比べ、明るすぎたりやギラツキが感じられる画像になってしまうのは、従来のCRT表示装置に搭載していた画像信号だけを対象とした処理を行う画像信号処理系のみをFPD向けに修正して、FPD表示装置に搭載したためで、CRT表示装置が画像信号処理系だけでなく、駆動系そのものの持つ特有の応答特性と駆動系を含めた総合的な信号処理による表示装置というシステム構造が考慮されていないことに原因がある。
【０４３２】
そこで、以下では、CRT表示装置以外の表示方式の、例えば、FPD表示装置で画像信号を表示したときに、CRT表示装置で表示された画像に見えるような、CRT表示装置と同等の自然な表示を行うことができるようにする実施の形態について説明する。
【０４３３】
図３８は、CRT表示装置と同等の自然な表示を行うことができるFPD表示装置が有する画像信号処理装置の一実施の形態の構成例を示している。
【０４３４】
図３８の画像信号処理装置は、CRT以外の表示方式の表示装置、すなわち、ここでは、例えば、LCD等のFPDを有するFPD表示装置で画像信号を表示したときに、CRT表示装置で表示された画像に見えるように画像信号を処理する。
【０４３５】
ここで、図３８の画像信号処理装置について説明する前に、図３８の画像信号処理装置で表示しようとしている画像を表示するCRT表示装置、すなわち、図３８の画像信号処理装置がエミュレート（シミュレート）するCRT表示装置について説明する。
【０４３６】
図３９は、CRT表示装置の構成例を示している。
【０４３７】
CRT表示装置では、明るさ調整コントラスト調整部10051と、高画質化処理部10052において、画像信号に対して、図３７の明るさ調整コントラスト調整部10011と、高画質化処理部10012のそれぞれと同様の処理が施され、その処理後の画像信号が、ゲイン調整部10053、及び画像信号微分回路10060に供給される。
【０４３８】
ゲイン調整部（リミッタ）10053は、後述するABL制御部10059からのABL制御信号により、高画質化処理部10052からの画像信号の信号レベルを制限し、γ補正部10054に供給する。すなわち、ゲイン調整部10053は、後述するCRT10056の電子ビームの電流量を直接制限する代わりに、高画質化処理部10052から画像信号のゲインを調整する。
【０４３９】
γ補正部10054は、ゲイン調整部10053からの画像信号に対して、図３７のγ補正部10013と同様のγ補正処理を施し、その結果得られる画像信号を、ビデオ(Video)増幅器10055に供給する。
【０４４０】
ビデオ増幅器10055は、γ補正部10054からの画像信号を増幅し、CRT駆動画像信号として、CRT10056に供給する。
【０４４１】
一方、FBT(Flyback Transformer)10057は、CRT表示装置において、電子ビームの水平走査を行うための水平偏向駆動電流、及びCRT（ブラウン管）10056のアノード電圧を発生するためのトランスで、その出力は、ビーム電流検出部10058に供給される。
【０４４２】
ビーム電流検出部10058は、FBT10057の出力から、ABL制御に必要な電子ビームの電流量を検出し、CRT10056、及びABL制御部10059に供給する。
【０４４３】
ABL制御部10059は、ビーム電流検出部10058からの電子ビームの電流値を計測し、画像信号の信号レベルを制御するABL制御のためのABL制御信号を、ゲイン調整部10053に出力する。
【０４４４】
一方、画像信号微分回路10060は、高画質化処理部10052からの画像信号を微分し、その結果得られる画像信号の微分値を、VM駆動回路10061に供給する。
【０４４５】
VM(Velocity Modulation)（速度変調）駆動回路10061は、CRT表示装置において、電子ビームの偏向（水平偏向）速度を部分的に変えることで同一画像信号でも表示輝度を変えるVM処理を行う。CRT表示装置において、VM処理は、主たる水平偏向回路（偏向ヨークDY、FBT10057、水平駆動回路（図示せず）等により構成される）とは別に、専用のVMコイル（図示せず）とVM駆動回路10061を用いて実現される。
【０４４６】
すなわち、VM駆動回路10061は、画像信号微分回路10060からの画像信号の微分値に基づき、VMコイルを駆動するVMコイル駆動信号を生成し、CRT10056に供給する。
【０４４７】
CRT10056は、電子銃EGや、偏向ヨークDY等で構成される。CRT10056では、電子銃EGが、ビーム電流検出部10058の出力や、ビデオ増幅器10055からのCRT駆動画像信号にしたがって電子ビームを放射し、その電子ビームが、コイルである偏向ヨークDYが発生する磁界に応じて水平と垂直の方向を変えて（走査され）、CRT10056の蛍光面に衝突することにより、画像が表示される。
【０４４８】
また、CRT10056では、VM駆動回路10061からのVMコイル駆動信号に応じて、VMコイルが駆動され、これにより、電子ビームの偏向速度が部分的に変更され、これにより、例えば、CRT10056に表示される画像のエッジの強調等がされる。
【０４４９】
図３９からわかるように、CRT表示装置では、偏向速度を部分的に変えるVM処理、及び電子ビームの電流量を制限するABL処理（ABL制御）が画像信号が処理されるパス以外で行われ、CRT10056に表示される画像の画質に影響を与える制御信号を作っている。
【０４５０】
これらのVM処理、及びABL処理による影響が現れた画像をFPDで表示するには、FPDは、CRTと駆動方法が全く異なるため、画像信号が処理されるパス上で、VM処理、及びABL処理に相当する処理を行う形をとる必要がある。
【０４５１】
そこで、図３８の画像信号処理装置においては、図３８に示すような処理順で画像信号を変換することにより、FPDの駆動方法に適応し、かつ、CRT表示装置と同様の自然な表示を行うことを可能とする。
【０４５２】
すなわち、図３８の画像信号処理装置において、明るさ調整コントラスト調整部10031と、高画質化処理部10032では、画像信号に対して、図３７の明るさ調整コントラスト調整部10011と、高画質化処理部10012のそれぞれと同様の処理が施され、ABL処理部10033、全画面明るさ平均レベル検出部10036、及びピーク検出微分制御値検出部10037に供給される。
【０４５３】
ABL処理部10033は、LCDにおいてCRTと同様の明るさ特性を得るために、画像が一定以上の明るさ（輝度とその面積）になる場合に、高画質化処理部10032からの画像信号のレベルを、ABL制御部10038からの制御に従って制限するABLエミュレート処理を行う。
【０４５４】
ここで、図３８におけるABLエミュレート処理は、図３９におけるABL処理をエミュレーションする処理である。
【０４５５】
すなわち、CRT表示装置で行われるABL処理は、CRTにおいて、電子ビーム（電流）が過大とならないよう一定以上の明るさ（輝度とその面積）になった場合に電流を制限する処理であるが、ABL処理部10033は、図３９におけるABL処理のエミュレーションを行う。
【０４５６】
図３８では、ABL処理部10033は、CRTにおいて電子ビームの電流を制限することにより、大面積で明るい画像を表示させようとした場合に実際の表示輝度を低く抑える処理（ABLエミュレート処理）を、画像信号の信号レベルを制限する処理として非線形演算処理により行う。
【０４５７】
すなわち、図３８において、全画面明るさ平均レベル検出部10036は、高画質化処理部10032からの画像信号に基づき、画面の明るさや平均レベルを検出し、ピーク検出微分制御値検出部10037、及びABL制御部10038に供給する。ABL制御部10038は、全画面明るさ平均レベル検出部10036からの画面の明るさや平均レベルの検出結果より画面の明るさとその面積を検出し、それによって画面上の明るさを制限するための制御信号を生成して、ABL処理部10033に供給する。ABL処理部10033は、ABL制御部10038からの制御信号を元に高画質化処理部10032からの画像信号に対し上記非線形演算を行うことでABL処理を実現（エミュレート）する。
【０４５８】
ABL処理部10033でABL処理が施された画像信号は、VM処理部10034に供給される。
【０４５９】
VM処理部10034は、図３９のCRT表示装置におけるVM処理と同等の処理を画像信号に対して行うための処理ブロックで、図３９のCRT表示装置で行われるVM処理のエミュレーションを行う。
【０４６０】
すなわち、図３８において、ピーク検出微分制御値検出部10037は、高画質化処理部10032からの画像信号から、画像信号の部分的なピーク信号や、画像信号の微分により得られるエッジ信号を求めて、全画面明るさ平均レベル検出部10036からの画面の明るさや平均レベルとともに、VM制御部10039に供給する。VM制御部10039は、ピーク検出微分制御値検出部10037からの、画像信号の部分的なピーク信号や画像信号の微分により得られるエッジ信号、画面の明るさなどを元に、部分的に画像信号のレベルを変化させる、CRT表示装置におけるVMコイル駆動信号に相当するVM制御信号を生成し、VM処理部10034に供給する。
【０４６１】
VM処理部10034は、VM制御部10039により生成されたVM制御信号により、部分的に、ABL処理部10033からの画像信号のレベルを変化させる処理、すなわち、画像信号の部分的な補正、画像信号のエッジ部やピークの強調などの処理を行う。
【０４６２】
ここで、図３９のCRT表示装置では、CRT10056において信号の立ち上がり時に輝度変化が不足するのを補うために、VM処理が行われるが、画像信号そのものに補正を掛けるのではなく、偏向ヨークDYにあるVMコイルを用い、CRT10056特有の水平偏向の偏向速度（時間）を変化させることで結果として輝度を変化させている。
【０４６３】
VM処理部10034は、CRT表示装置で行われるVM処理によって生じる輝度変化分に相当する補正値を演算して、その補正値によって画像信号を補正する演算処理を行うことで、CRT表示装置で行われるVM処理のエミュレーションをする。
【０４６４】
CRTγ処理部10035は、LCDにおいて、従来のLCDパネルがパネル内部に持っていたCRTと同等のγ特性を得るための処理回路（変換回路）で行われていた処理を含むγ補正処理、及び色温度補償処理を行うため、各色信号（コンポーネント信号）のレベルを調整する処理を行う。
【０４６５】
ここで、図３８におけるCRTγ処理部10035は、同一LCD画面上でCRTの特性だけでなくPDPやLEDディスプレイなど複数の表示特性を表現する際に必要となる電気光変換特性の補正を行う部分で、本実施の形態ではLCDの入力電圧−透過率特性をCRTの電気−輝度特性に合わせるために必要な処理を行う。
【０４６６】
すなわち、図３８において、表示色温度補償制御部10040は、LCDの表示画面を複数の表示エリア（例えば、図２の表示領域#0ないし#3）に区分して、各表示エリアに、複数の異なる表示特性を持った表示デバイスで表示されるであろう画像と同様の画質の画像を提示するシステム（例えば、図１のモニタシステム）において、CRTで表示されるであろう画像と同様の画質の画像を表示させる表示エリアの表示色温度をCRT用の色温度として表示させるための制御信号を、各色信号（コンポーネント信号）のバランスを調整する制御を行うために生成し、CRTγ処理部10035に供給する。そして、CRTγ処理部10035では、表示色温度補償制御部10040からの制御信号に従い、VM処理部10034からの画像信号の各色信号のバランスを調整する処理も行う。
【０４６７】
CRT、LCD、PDPではホワイトバランスや色温度、およびその対輝度変化がそれぞれ異なるため、図３８の表示色温度補償制御部10040が必要になる。
【０４６８】
CRTγ処理部10035が表示色温度補償制御部10040からの制御信号に従って行う処理には従来LCDなどフラットパネルの内部で処理されていた、各パネルの階調特性をCRTと同等になるように変換していた処理回路が行う処理を含み、表示パネルによる特性の違いを吸収する処理を行う。
【０４６９】
そして、CRTγ処理部10035は、VM処理部10034からの画像信号に対して、以上の処理を施した後、その処理後の画像信号を、図示せぬFPDとしてのLCDに供給して表示させる。
【０４７０】
以上のように、図３８の画像信号処理装置では、CRT表示装置において行われていた処理を画像信号処理に置き換えるだけではなく、処理手順（ABL処理部10033の処理後に、VM処理部10034の処理を行い、VM処理部10034の処理後に、CRTγ処理部10035の処理を行うという処理手順）も考慮することで、より正しくLCDの表示を、CRT表示装置で表示される画像の画質に近づけることを可能にする。したがって、図３８の画像信号処理装置によれば、LCDにCRTと同等な表示特性にて画像を出力することが可能になる。
【０４７１】
さらに、図３８の画像信号処理装置によれば、CRTそのものの特性違いによる表示特性をエミュレートすることが可能になり、色合いや質感の違いを同一LCDにて切り替えることが可能になる。例えば、EBU蛍光体と一般蛍光体の発色の違いを同一画面上で比べることで送出時の色調整や画質調整を正確に行う、などを容易に行うことが可能になる。
【０４７２】
また、図３８の画像信号処理装置によれば、同様に、LCDとCRTの表示特性による違いを容易に確認することが可能である。
【０４７３】
さらに、図３８の画像信号処理装置によれば、本来の意味での「好みの画質」で画像を表示することが可能になる。
【０４７４】
また、図３８の画像信号処理装置によれば、処理の範囲を表示画面内で変える事により特性の異なる表示デバイス（例えば、蛍光体の異なるCRT、LCDとCRT、など）で表示される画像を同時に見ることが可能になるため、比較や調整といった用途での利用を容易にすることができる。
【０４７５】
次に、図４０のフローチャートを参照して、図３８の画像信号処理装置による画像信号に対する処理の流れについて説明する。
【０４７６】
明るさ調整コントラスト調整部10031に、画像信号が供給されると、ステップS10011において、明るさ調整コントラスト調整部10031は、そこに供給される画像信号の明るさ調整をし、さらに、コントラスト調整をして、高画質化処理部10032に供給して、処理は、ステップS10012に進む。
【０４７７】
ステップS10012では、高画質化処理部10032が、明るさ調整コントラスト調整部10011からの画像信号に対して、画素数変換などを含む画像信号処理を行って、その画像信号処理後の画像信号を、ABL処理部10033、全画面明るさ平均レベル検出部10036、及びピーク検出微分制御値検出部10037に供給して、処理は、ステップS10013に進む。
【０４７８】
ここで、全画面明るさ平均レベル検出部10036は、高画質化処理部10032からの画像信号に基づき、画面の明るさや平均レベルを検出し、ピーク検出微分制御値検出部10037、及びABL制御部10038に供給する。ABL制御部10038は、全画面明るさ平均レベル検出部10036からの画面の明るさや平均レベルの検出結果に基づき、画面上の明るさを制限するための制御信号を生成して、ABL処理部10033に供給する。
【０４７９】
また、ピーク検出微分制御値検出部10037は、高画質化処理部10032からの画像信号から、画像信号の部分的なピーク信号や、画像信号の微分により得られるエッジ信号を求めて、全画面明るさ平均レベル検出部10036からの画面の明るさや平均レベルとともに、VM制御部10039に供給する。VM制御部10039は、ピーク検出微分制御値検出部10037からの、画像信号の部分的なピーク信号や画像信号の微分により得られるエッジ信号、画面の明るさなどを元に、CRT表示装置におけるVMコイル駆動信号に相当するVM制御信号を生成し、VM処理部10034に供給する。
【０４８０】
ステップS10033では、ABL処理部10033が、高画質化処理部10032からの画像信号に対してABL処理をエミュレートする処理を適用する。
【０４８１】
すなわち、ABL処理部10033は、ABL制御部10038からの制御に従って、高画質化処理部10032からの画像信号のレベルを制限する等のABL処理をエミュレートする処理（ABLエミュレート処理）を行い、その結果得られる画像信号を、VM処理部10034に供給する。
【０４８２】
そして、処理は、ステップS10013からステップS10014に進み、VM処理部10034は、ABL処理部10033からの画像信号に対してVM処理をエミュレートする処理を適用する。
【０４８３】
すなわち、VM処理部10034は、ステップS10014において、VM制御部10039から供給されるVM制御信号に従って、ABL処理部10033からの画像信号の輝度を補正する等のVM処理をエミュレートする処理（VMエミュレート処理）を行い、その結果得られる画像信号を、CRTγ処理部10035に供給して、処理は、ステップS10015に進む。
【０４８４】
ステップS10015では、CRTγ処理部10035は、VM処理部10034からの画像信号に対してγ補正処理を施し、さらに、表示色温度補償制御部10040からの制御信号に従い、VM処理部10034からの画像信号の各色信号のバランスを調整する色温度補償処理を行う。そして、CRTγ処理部10035は、色温度補償処理の結果得られる画像信号を、図示せぬFPDとしてのLCDに供給して表示させる。
【０４８５】
次に、図４１は、図３８のVM処理部10034の構成例を示すブロック図である。
【０４８６】
図４１において、VM処理部10034は、輝度補正部10210及びEB処理部10220から構成される。
【０４８７】
輝度補正部10210は、ABL処理部10033（図３８）から供給される画像信号を対象として、CRT表示装置の電子ビームの水平偏向の偏向速度の変化が輝度に影響する影響分の補正を行う輝度補正処理を行い、その結果得られる画像信号を、EB処理部10220に供給する。
【０４８８】
すなわち、輝度補正部10210は、VM係数発生部10211及び演算部10212から構成される。
【０４８９】
VM係数発生部10211には、VM制御部10039（図３８）から、VM制御信号が供給される。VM係数発生部10211は、VM制御部10039からのVM制御信号に従い、VM係数を発生し、演算部10212に供給する。
【０４９０】
演算部10212には、VM係数発生部10211からのVM係数が供給される他、ABL処理部10033（図３８）からの画像信号が供給される。
【０４９１】
演算部10212は、ABL処理部10033（図３８）からの画像信号に、VM係数発生部10211からのVM係数を乗算することで、その画像信号について、CRT表示装置の電子ビームの水平偏向の偏向速度の変化が輝度に影響する影響分の補正を行い、その補正後の画像信号を、EB処理部10220に供給する。
【０４９２】
EB処理部10220は、輝度補正部10210からの画像信号（ABL処理部10033で処理され、さらに、輝度補正部10210で処理された画像信号）を対象として、CRT表示装置の電子ビームが広がってCRT表示装置の蛍光体に衝突することをエミュレートする処理（EB(Erectron Beam)エミュレート処理）を施し、CRTγ処理部10035（図３８）に供給する。
【０４９３】
以上のように、VM処理部10034で行われるVMエミュレート処理は、輝度補正部10210で行われる輝度補正処理と、EB処理部10220で行われるEBエミュレート処理とからなる。
【０４９４】
図４２は、図４１のVM係数発生部10211で発生するVM係数の例を示している。
【０４９５】
VM係数は、CRT表示装置において、水平偏向（水平方向の偏向）の偏向速度を、VMコイル駆動信号により、注目画素（ここでは、VM処理により輝度を強調する補正をする画素）の位置で遅くすることによって、等価的に、注目画素の輝度を増すVM処理をエミュレーションするために、注目画素を中心として水平方向に並ぶ複数の画素を、輝度の補正対象として、その輝度の補正対象の画素の画素値（輝度）に乗算される係数である。
【０４９６】
VM係数発生部10211では、図４２に示すように、輝度の補正対象の画素のうちの、注目画素の画素値に乗算されるVM係数は、１以上の値とされ、他の画素に乗算されるVM係数は、演算部10212でのゲインが１となるように、１以下の値とされる。
【０４９７】
図４３は、図４１のVM係数発生部10211で発生されるVM係数を求める方法を示している。
【０４９８】
すなわち、図４３Ａは、CRT表示装置の偏向ヨークDY（図３９）に印加される電圧（偏向電圧）の波形を示している。
【０４９９】
偏向ヨークDY（図３９）に対しては、図４３Ａに示すように、時間tの経過に対して、一定の傾きで変化する偏向電圧が、水平走査の周期で繰り返し印加される。
【０５００】
図４３Ｂは、CRT表示装置のVM駆動回路10061（図３９）で生成されるVMコイル駆動信号を示している。
【０５０１】
CRT表示装置では、偏向ヨークDY（図３９）にあるVMコイルが、図４３ＢのVMコイル駆動信号によって駆動され、そのVMコイルが発生する磁界によって、電子ビームの偏向速度が、図４３Ｃに示すように、部分的に変更される。
【０５０２】
すなわち、図４３Ｃは、図４３ＢのVMコイル駆動信号によってVMコイルが磁界を発生する場合の、電子ビームの水平方向の位置の時間変化を示している。
【０５０３】
電子ビームの水平方向の位置の時間変化（図４３Ｃのグラフの傾き）、つまり、電子ビームの水平偏向の偏向速度は、VMコイルが磁界を発生することによって、その磁界が発生している区間等において一定ではなくなる（変化する）。
【０５０４】
図４３Ｄは、図４３Ａの偏向電圧による電子ビームの水平方向の位置の時間変化から、図４３Ｃの電子ビームの水平方向の位置の時間変化を減算した減算値の微分値を示している。
【０５０５】
図４３Ａの偏向電圧のみによって、電子ビームの水平偏向が行われる場合を基準とすると、VMコイル駆動信号によってVMコイルが磁界を発生する場合には、CRT表示装置のCRT10056（図３９）の蛍光体に衝突する電子ビームの強度（量）、つまり、CRT10056に表示される画像の輝度（明るさ）は、図４３Ｄに示すように変化する。
【０５０６】
VM係数発生部10211（図４１）は、図４３Ｄの微分値に相当する値を、VM係数として発生する。
【０５０７】
なお、VM係数の具体的な値や、VM係数との乗算をする画素の範囲（注目画素を中心として水平方向に並ぶ幾つの画素の画素値を、VM係数と乗算するか）、注目画素とする画素の画素値（レベル）等は、図３８の画像信号処理装置が表示をエミュレートするCRT表示装置の仕様等に応じて決定される。
【０５０８】
次に、図４１のEB処理部10220で行われるEBエミュレート処理について説明する。
【０５０９】
EBエミュレート処理では、上述したように、CRT表示装置の電子ビームが広がってCRT表示装置のCRT10056（図３９）の蛍光体に衝突することをエミュレートする処理が行われる。
【０５１０】
すなわち、いま、電子ビームを照射しようとする蛍光体に対応する画素（サブピクセル）を、注目画素とすると、電子ビームの強度が大である場合に、その電子ビームのスポットの形状が大となって、注目画素に対応する蛍光体だけでなく、その周辺の画素に対応する蛍光体にも衝突し、その周辺の画素の画素値に影響を与える。EBエミュレート処理では、その影響をエミュレートする処理が行われる。
【０５１１】
図４４は、電子ビームを照射する電子銃に与えられる電流（ビーム電流）と、そのビーム電流に対応して照射される電子ビームが、CRTの表示画面上に形成するスポットの径（スポットサイズ）との関係を示している。
【０５１２】
なお、図４４では、２種類のCRTについての、ビーム電流とスポットサイズとの関係が示されている。
【０５１３】
ビーム電流とスポットサイズとの関係は、CRTの種類や最大輝度の設定などによって差があるものの、スポットサイズは、ビーム電流が大であるほど大となる。つまり、輝度が大であると、スポットサイズも大になる。
【０５１４】
このようなビーム電流とスポットサイズとの関係は、例えば、特開2004- 39300号公報等に記載されている。
【０５１５】
CRTの表示画面には、赤、緑、及び青の３色の蛍光体（蛍光物質）が塗布されており、その赤、緑、及び青の蛍光体に、赤、緑、及び青（用）の電子ビームが衝突することで、赤、緑、及び青の光が、それぞれ放出され、これにより、画像が表示される。
【０５１６】
また、CRTには、赤、緑、及び青の３色の蛍光体に、赤、緑、及び青の電子ビームが照射されるように、電子ビームが通過する開口部が設けられた色選別機構が、表示画面に設けられている。
【０５１７】
図４５は、色選別機構を示している。
【０５１８】
すなわち、図４５Ａは、色選別機構の１つであるシャドウマスクを示している。
【０５１９】
シャドウマスクには、円形状の開口部としてのホールが設けられており、このホールを通過した電子ビームが蛍光体に照射される。
【０５２０】
なお、図４５Ａにおいて、模様を付していない丸印は、赤の蛍光体に電子ビームを照射するためのホールを、斜線を付した丸印は、緑の蛍光体に電子ビームを照射するためのホールを、黒塗りの丸印は、青の蛍光体に電子ビームを照射するためのホールを、それぞれ示している。
【０５２１】
図４５Ｂは、色選別機構の他の１つであるアパーチャーグリルを示している。
【０５２２】
アパーチャーグリルには、垂直方向に延びる開口部としてのスリットが設けられており、このスリットを通過した電子ビームが蛍光体に照射される。
【０５２３】
なお、図４５Ｂにおいて、模様を付していない方形は、赤の蛍光体に電子ビームを照射するためのスリットを、斜線を付した方形は、緑の蛍光体に電子ビームを照射するためのスリットを、黒塗りの方形は、青の蛍光体に電子ビームを照射するためのスリットを、それぞれ示している。
【０５２４】
図４４で説明したように、電子ビームのスポットサイズは、輝度が大であるほど大になる。
【０５２５】
図４６は、輝度が中程度である場合に、色選別機構上に形成される電子ビームのスポットを、図４７は、輝度が大である場合に、色選別機構上に形成される電子ビームのスポットを、それぞれ模式的に示している。
【０５２６】
なお、図４６Ａ及び図４７Ａは、色選別機構がシャドウマスクである場合に、そのシャドウマスク上に形成される電子ビームのスポットを示しており、図４６Ｂ及び図４７Ｂは、色選別機構がアパーチャーグリルである場合に、そのアパーチャーグリル上に形成される電子ビームのスポットを示している。
【０５２７】
輝度が大であるほど、電子ビーム（のスポット）の中心部分の強度が大となり、それに引きずられる形で、電子ビームの周辺部分の強度も大となって、色選別機構上に形成される電子ビームのスポットのスポットサイズが大となる。その結果、電子ビームが、注目画素（電子ビームを照射しようとする蛍光体に対応する画素）に対応する蛍光体だけでなく、注目画素の周囲の画素に対応する蛍光体にも照射される。
【０５２８】
図４８は、色選別機構としてアパーチャーグリルが採用されている場合の、電子ビームが照射される様子を示す断面図である。
【０５２９】
すなわち、図４８Ａは、ビーム電流が第１の電流値である場合の電子ビームが照射される様子を示しており、図４８Ｂは、ビーム電流が第１の電流値より大の第２の電流値である場合の電子ビームが照射される様子を示している。
【０５３０】
図４８では、緑の蛍光体に対応する画素が注目画素となっており、ビーム電流が第１の電流値である場合の電子ビームは、図４８Ａに示すように、そのスポットサイズが、隣接するスリットどうしの間の範囲に収まっており、注目画素に対応する蛍光体にのみ照射され、かつ、それ以外の蛍光体に照射されないように遮断される。
【０５３１】
一方、ビーム電流が第２の電流値である場合の電子ビームは、図４８Ｂに示すように、そのスポットサイズが、隣接するスリットどうしの間の範囲に収まらず、注目画素に対応する蛍光体だけでなく、他の蛍光体にも照射される。
【０５３２】
すなわち、ビーム電流が第２の電流値である場合の電子ビームのスポットサイズは、注目画素に対応する蛍光体のスリットの他、他のスリットをも含む大きさとなり、その結果、電子ビームが、他のスリットを通過し、注目画素に対応する蛍光体以外の蛍光体にも照射される。
【０５３３】
なお、図４８Ｂに示したように、電子ビームが、注目画素に対応する蛍光体のスリット以外のスリットをも通過する場合のビーム電流は、電子ビームのスポットサイズと、アパーチャーグリルのスリットのスリット幅との関係で決まる。
【０５３４】
EBエミュレート処理では、以上のように、電子ビームが、注目画素に対応する蛍光体だけでなく、他の蛍光体にも照射されることで、画像が受ける影響が、画像信号に反映される。
【０５３５】
ここで、図４９は、２次元正規分布（ガウス分布）で近似した電子ビームの強度の分布を示している。
【０５３６】
図５０は、図４９の電子ビームのうちの、アパーチャーグリルのスリットを通過する電子ビームの強度の分布を示している。
【０５３７】
すなわち、図５０Ａは、注目画素に対応する蛍光体のスリットを通過する電子ビームと、そのスリットの左右に隣接するスリットを通過する電子ビームとの強度の分布を示している。
【０５３８】
電子ビームの大部分は、注目画素に対応する蛍光体のスリットを通過するが、電子ビームの残りの一部が、注目画素に対応する蛍光体のスリットの左に隣接する左スリットと、右に隣接する右スリットとを通過し、その通過した電子ビームによって、左スリットの蛍光体に対応する画素と、右スリットの蛍光体に対応する画素との表示が影響を受ける。
【０５３９】
なお、図５０Ｂは、図５０Ａに示した電子ビームの強度の分布のうちの、注目画素に対応する蛍光体のスリットを通過する電子ビームの強度の分布を示しており、図５０Ｃは、左スリット及び右スリットを通過する電子ビームの強度の分布を示している。
【０５４０】
図５１は、図４９の場合よりも強度が大の電子ビームの強度の分布と、その電子ビームのうちの、アパーチャーグリルのスリットを通過する電子ビームの強度の分布とを示している。
【０５４１】
すなわち、図５１Ａは、図４９の場合よりも強度が大の電子ビームの強度の分布を示している。
【０５４２】
図５１Ａの電子ビームは、図４９の電子ビームよりもスポットサイズ（強度が所定値以上の範囲）が大となっている。
【０５４３】
図５１Ｂは、図５１Ａの電子ビームのうちの、アパーチャーグリルのスリットを通過する電子ビームの強度の分布を示している。
【０５４４】
図５１Ｂでは、図５０の場合に比較して、左スリット及び右スリットを通過する電子ビームの強度が大になっており、したがって、左スリットの蛍光体に対応する画素と、右スリットの蛍光体に対応する画素との表示には、より大きな影響がでる。
【０５４５】
なお、図５１Ｃは、図５１Ｂに示した電子ビームの強度の分布のうちの、注目画素に対応する蛍光体のスリットを通過する電子ビームの強度の分布を示しており、図５１Ｄは、左スリット及び右スリットを通過する電子ビームの強度の分布を示している。
【０５４６】
図５２は、図４９に示した電子ビームの強度の分布と、その電子ビームのうちの、シャドウマスクのスリットを通過する電子ビームの強度の分布とを示している。
【０５４７】
すなわち、図５２Ａは、図４９と同一の電子ビームの強度の分布を示している。
【０５４８】
図５２Ｂは、図５２Ａの電子ビームのうちの、シャドウマスクのホールを通過する電子ビームの強度の分布を示している。
【０５４９】
すなわち、図５２Ｂは、注目画素に対応する蛍光体のホールを通過する電子ビームと、そのホールの周辺のホール（周辺ホール）を通過する電子ビームとの強度の分布を示している。
【０５５０】
図５２Ｃは、図５２Ｂに示した電子ビームの強度の分布のうちの、注目画素に対応する蛍光体のホールを通過する電子ビームの強度の分布を示しており、図５２Ｄは、周辺ホールを通過する電子ビームの強度の分布を示している。
【０５５１】
図５３は、図５２の場合よりも強度が大の電子ビームの強度の分布と、その電子ビームのうちの、シャドウマスクのホールを通過する電子ビームの強度の分布とを示している。
【０５５２】
すなわち、図５３Ａは、図５２の場合よりも強度が大の電子ビームの強度の分布を示している。
【０５５３】
図５３Ａの電子ビームは、図５２Ａの電子ビームよりもスポットサイズ（強度が所定値以上の範囲）が大となっている。
【０５５４】
図５３Ｂは、図５３Ａの電子ビームのうちの、シャドウマスクのホールを通過する電子ビームの強度の分布を示している。
【０５５５】
図５３Ｂでは、図５２Ｂの場合に比較して、周辺ホールを通過する電子ビームの強度が大になっており、したがって、周辺ホールの蛍光体に対応する画素の表示には、図５２Ｂの場合より大きな影響がでる。
【０５５６】
図５３Ｃは、図５３Ｂに示した電子ビームの強度の分布のうちの、注目画素に対応する蛍光体のホールを通過する電子ビームの強度の分布を示しており、図５３Ｄは、周辺ホールを通過する電子ビームの強度の分布を示している。
【０５５７】
なお、図４９ないし図５３では、電子ビームのスポットの拡がりを分かりやすくするため、電子ビームの強度を表す高さ方向のスケールを、位置を表すx方向及びy方向のスケールよりも圧縮してある。
【０５５８】
ところで、１次元正規分布（１次元の正規分布）のある区間の面積は、１次元正規分布を表す式（２１）の確率密度関数f(x)を、面積を求めようとする区間に亘って積分することで求めることができる。
【０５５９】
【数２１】
2008178075.tif 000023
・・・（２１）
【０５６０】
ここで、式（２１）において、μは、平均値を表し、σ2は、分散を表す。
【０５６１】
上述したように、電子ビームの強度の分布を、２次元正規分布（２次元の正規分布）で近似する場合、ある範囲の電子ビームの強度は、２次元正規分布を表す式（２２）の確率密度関数f(x,y)を、強度を求めようとする範囲に亘って積分することで求めることができる。
【０５６２】
【数２２】
2008178075.tif 000024
・・・（２２）
【０５６３】
ここで、式（２２）において、μxは、x方向の平均値を表し、μyは、y方向の平均値を表す。また、σx2は、x方向の分散を表し、σy2は、x方向の分散を表す。ρxyは、x方向とy方向の相関係数（x方向とy方向の共分散を、x方向の標準偏差σxとy方向の標準偏差σyとの積で除算した値）を表す。
【０５６４】
平均値（平均ベクトル）（μx,μy）は、理想的には、電子ビームの中心の位置(x,y)を表す。いま、説明を簡単にするために、電子ビームの中心の位置(x,y)を、(0,0)（原点）とすると、平均値μx及びμyは０となる。
【０５６５】
また、CRT表示装置において、電子銃やカソード等の設計は、電子ビームのスポットが円形となるように行われることから、相関係数ρxyを０とする。
【０５６６】
いま、色選別機構が、アパーチャーグリルであるとすると、平均値μx及びμy、並びに、相関係数ρxyを０とした式（２２）の確率密度関数f(x,y)を、スリットの範囲で積分することにより、スリットを通過する電子ビームの強度（量）を求めることができる。
【０５６７】
すなわち、図５４は、スリットを通過する電子ビームの強度を求める積分を説明する図である。
【０５６８】
図５４Ａは、水平方向であるx方向の積分の区間を示している。
【０５６９】
注目画素に対応する蛍光体のスリット（注目スリット）を通過する電子ビームの強度は、x方向については、アパーチャーグリルのスリットのスリット幅をSとすると、-S/2から+S/2の範囲に亘って、確率密度関数f(x,y)を積分することにより求めることができる。
【０５７０】
また、左スリットを通過する電子ビームの強度は、x方向については、その左スリットのスリット幅に亘って、確率密度関数f(x,y)を積分することにより求めることができ、右スリットを通過する電子ビームの強度は、x方向については、その右スリットのスリット幅に亘って、確率密度関数f(x,y)を積分することにより求めることができる。
【０５７１】
図５４Ｂ及び図５４Ｃは、垂直方向であるy方向の積分の区間を示している。
【０５７２】
注目スリットを通過する電子ビームの強度は、y方向については、図５４Ｂに示すように、-∞から+∞の範囲に亘って、確率密度関数f(x,y)を積分することにより求めることができる。
【０５７３】
左スリット及び右スリットを通過する電子ビームの強度それぞれも、y方向については、図５４Ｃに示すように、-∞から+∞の範囲に亘って、確率密度関数f(x,y)を積分することにより求めることができる。
【０５７４】
一方、電子ビーム全体の強度は、x方向及びy方向のいずれにも、-∞から+∞の範囲に亘って、確率密度関数f(x,y)を積分することにより求めることができ、いま、その値をP0とする。
【０５７５】
また、注目スリットを通過する電子ビームの強度をP1と表すとともに、左スリット及び右スリットを通過する電子ビームの強度それぞれを、PL及びPRと表すこととする。
【０５７６】
この場合、注目画素の表示には、電子ビーム全体の強度P0のうちの、強度P1だけが影響し、この注目画素の表示によって、電子ビーム全体の強度P0のうちの、強度PLが、左スリットの蛍光体に対応する画素（左画素）の表示に影響し、強度PRが、左スリットの蛍光体に対応する画素（右画素）の表示に影響する。
【０５７７】
すなわち、電子ビーム全体の強度P0を基準とすると、注目画素の表示には、電子ビームの強度のP1/P0が影響し、さらに、電子ビームの強度のPL/P0が左画素の表示に影響を与えるとともに、電子ビームの強度のPR/P0が右画素の表示に影響を与える。
【０５７８】
したがって、注目画素の表示を基準とすると、注目画素の表示は、左画素の表示に、PL/P0/(P1/P0)だけ影響を与え、右画素の表示に、PR/P0/(P1/P0)だけ影響を与える。
【０５７９】
EBエミュレート処理では、左画素については、注目画素の表示の影響を反映するために、注目画素の表示の影響分PL/P0/(P1/P0)を、EBエミュレート処理に用いるEB係数として、左画素の画素値に乗算し、その結果得られる乗算値が、左画素の（元の）画素値に加算される。さらに、EBエミュレート処理では、左画素の表示に影響を与える、左画素の周囲の画素の表示の影響分をEB係数として、同様の処理が行われ、これにより、左画素の周囲の画素の表示時に電子ビームが広がって、左画素の蛍光体に衝突することによる影響を考慮した左画素の画素値が求められる。
【０５８０】
右画素についても、同様に、右素の周囲の画素の表示時に電子ビームが広がって、右画素の蛍光体に衝突することによる影響を考慮した右画素の画素値が求められる。
【０５８１】
なお、色選別機構が、シャドウマスクである場合も、アパーチャーグリルの場合と同様にして、EBエミュレート処理に用いるEB係数を求めることができる。但し、シャドウマスクについては、アパーチャーグリルの場合に比較して、積分が複雑になる。シャドウマスクについては、上述の積分を用いるのではなく、シャドウマスクのホールの位置とホールの半径からモンテカルロ法などで、EB係数を求める方が容易である。
【０５８２】
以上のように、EB係数は、理論上は、計算によって求めることが可能であるが、図４４に示したように、電子ビームのスポットサイズは、ビーム電流によって変化する。したがって、EB係数を求めるには、電子ビームの強度の分布を近似する式（２２）の確率密度関数f(x,y)の分散σx2及びσy2を、ビーム電流の電流値ごとに変える必要がある。
【０５８３】
また、上述の場合には、電子ビームが、色選別機構（アパーチャーグリル、及びシャドウマスク）に入射する角度が直角であることを、当然の前提としたが、実際には、電子ビームが色選別機構に入射する角度は、表示画面の中央から離れるほど浅くなる。
【０５８４】
すなわち、図５５は、電子ビームが色選別機構としてのアパーチャーグリルに入射する様子を示している。
【０５８５】
図５５Ａは、表示画面の中央付近での、電子ビームがアパーチャーグリルに入射する様子を示している。
【０５８６】
図５５Ａに示すように、表示画面の中央付近では、電子ビームは、アパーチャーグリルに対して、垂直に入射する。
【０５８７】
図５５Ｂは、表示画面の中央から離れた位置での、電子ビームがアパーチャーグリルに入射する様子を示している
【０５８８】
図５５Ｂに示すように、表示画面の中央から離れた位置では、電子ビームは、垂直から傾いた角度で、アパーチャーグリルに入射する。
【０５８９】
電子ビームが、図５５Ｂに示したように、垂直から傾いた角度で、アパーチャーグリルに入射する場合、電子ビームの強度の分布は、式（２２）の確率密度関数f(x,y)の形状から乖離するため、電子ビームがアパーチャーグリルに垂直に入射することを前提として、EB係数を求めたのでは、EB係数の精度が劣化する。
【０５９０】
以上から、EB係数は、計算のみによって求めるのではなく、実験も併用して求めることが望ましい。
【０５９１】
次に、図５６、及び図５７を参照して、図４１のEB処理部10220で行われるEBエミュレート処理についてさらに説明する。
【０５９２】
図５６は、画素と、電子ビームの強度の分布とを示している。
【０５９３】
すなわち、図５６Ａは、画素Eを中心とする横×縦が３×３の９画素A，B，C，D，F，G，H、及びIを示している。
【０５９４】
いま、図５６Ａにおいて、画素Eを注目画素として注目する。また、横方向をx方向とし、縦方向をy方向とするとともに、注目画素Eの位置(x,y)を基準として、他の画素AないしD及びFないしIの位置を表すこととする。
【０５９５】
この場合、画素どうしの間隔を１とすると、画素Aの位置は(x-1,y-1)に、画素Bの位置は(x,y-1)に、画素Cの位置は(x+1,y-1)に、画素Dの位置は(x-1,y)に、画素Fの位置は(x+1,y)に、画素Gの位置は(x-1,y+1)に、画素Hの位置は(x,y+1)に、画素Iの位置は(x+1,y+1)に、それぞれなる。
【０５９６】
ここで、画素Aを、その位置(x-1,y-1)をも用いて、画素A(x-1,y-1)ともいい、画素A(x-1,y-1)の画素値を、画素値Aともいう。他の画素BないしIについても同様とする。
【０５９７】
図５６Ｂ及び図５６Ｃは、CRT表示装置において、注目画素E(x,y)を表示するときの電子ビームの強度の分布を模式的に示している。
【０５９８】
すなわち、図５６Ｂは、注目画素E(x,y)を表示するときの電子ビームの強度のx方向の分布を表し、図５６Ｃは、注目画素E(x,y)を表示するときの電子ビームの強度のy方向の分布を表している。
【０５９９】
注目画素E(x,y)の画素値Eが大であるほど、電子ビームは、図５６Ｂ及び図５６Ｃに示すように広がり、他の画素A(x-1,y-1)ないしD(x-1,y)及びF(x+1,y)ないしI(x+1,y+1)の表示に影響を与える。
【０６００】
このため、図４１のEB処理部10220は、注目画素E(x,y)を表示するときの電子ビームが、他の画素A(x-1,y-1)ないしD(x-1,y)及びF(x+1,y)ないしI(x+1,y+1)の表示に影響を与える程度を表すEB係数を、他の画素A(x-1,y-1)ないしD(x-1,y)及びF(x+1,y)ないしI(x+1,y+1)の画素値AないしD及びFないしIに乗算することにより、注目画素E(x,y)を表示するときの電子ビームが、他の画素A(x-1,y-1)ないしD(x-1,y)及びF(x+1,y)ないしI(x+1,y+1)の表示に影響を与える影響分を求め、その影響分を考慮して、他の画素A(x-1,y-1)ないしD(x-1,y)及びF(x+1,y)ないしI(x+1,y+1)の、EBエミュレート処理後の画素値を決定する。
【０６０１】
図５７は、注目画素E(x,y)を表示するときの電子ビームが、他の画素A(x-1,y-1)ないしD(x-1,y)及びF(x+1,y)ないしI(x+1,y+1)の表示に影響を与える影響分（以下、適宜、EB影響分という）を求める回路の構成例を示している。
【０６０２】
画素値Aは演算部10242Ａに、画素値Bは演算部10242Ｂに、画素値Cは演算部10242Ｃに、画素値Dは演算部10242Ｄに、画素値EはEB係数発生部10241に、画素値Fは演算部10242Ｆに、画素値Gは演算部10242Ｇに、画素値Hは演算部10242Ｈに、画素値Iは演算部10242Ｉに、それぞれ供給される。
【０６０３】
EB係数発生部10241は、画素値Eに基づいて、注目画素E(x,y)を表示するときの電子ビームが、他の画素A(x-1,y-1)ないしD(x-1,y)及びF(x+1,y)ないしI(x+1,y+1)の表示に影響を与える程度を表すEB係数AEB,BEB,CEB,DEB,FEB,GEB,HEB、及びIEBを発生し、演算部10242Ａ，10242Ｂ，10242Ｃ，10242Ｄ，10242Ｆ，10242Ｇ，10242Ｈ、及び10242Ｉに、それぞれ供給する。
【０６０４】
演算部10242Ａないし10242Ｄ、及び10242Ｆないし10242Ｉは、そこに供給される画素値AないしD、及びFないしIと、EB係数発生部10241からのEB係数AEBないしDEB、及びFEBないしIEBとを、それぞれ乗算し、その結果得られる値A'ないしD'、及びF'ないしI'を、EB影響分として出力する。
【０６０５】
画素値Eは、そのまま出力され、他の画素A(x-1,y-1)ないしD(x-1,y)及びF(x+1,y)ないしI(x+1,y+1)を表示するときの電子ビームそれぞれが、注目画素E(x,y)の表示に影響を与えるEB影響分と加算され、その加算値が、注目画素E(x,y)の、EBエミュレート処理後の画素値とされる。
【０６０６】
図５８は、図４１のEB処理部10220の構成例を示すブロック図である。
【０６０７】
図５８において、EB処理部10220は、EB機能部10250から構成され、EB機能部10250は、遅延部10251ないし10259、EB係数発生部10260、及び積和演算部10261から構成される。
【０６０８】
EB機能部10250は、例えば、図５６に示したように、画素E(x,y)を表示するときの電子ビームが、その画素E(x,y)に隣接する画素A(x-1,y-1)ないしD(x-1,y)及びF(x+1,y)ないしI(x+1,y+1)の表示に影響を与えることとして、つまり、画素E(x,y)については、その画素E(x,y)に隣接する画素A(x-1,y-1)ないしD(x-1,y)及びF(x+1,y)ないしI(x+1,y+1)それぞれからのEB影響分があるとして、画素E(x,y)の、EBエミュレート処理後の画素値を求める。
【０６０９】
すなわち、EB機能部10250には、輝度補正部10210（図４１）から画像信号が供給される。
【０６１０】
EB機能部10250では、輝度補正部10210からの画像信号を構成する画素の画素値が、ラスタスキャン順に、遅延部10251，10253、及び10258、EB係数発生部10260、並びに積和演算部10261に供給される。
【０６１１】
遅延部10251は、輝度補正部10210からの画素値を１ライン（水平ライン）分だけ遅延して、遅延部10252に供給する。遅延部10252は、遅延部10251からの画素値を１ライン分だけ遅延して、遅延部10254、及び積和演算部10261に供給する。
【０６１２】
遅延部10254は、遅延部10252からの画素値を１画素分だけ遅延して、遅延部10255、及び積和演算部10261に供給する。遅延部10255は、遅延部10254からの画素値を１画素分だけ遅延して、積和演算部10261に供給する。
【０６１３】
遅延部10253は、輝度補正部10210からの画素値を１ライン分だけ遅延して、遅延部10256、及び積和演算部10261に供給する。遅延部10256は、遅延部10253からの画素値を１画素分だけ遅延して、遅延部10257、及び積和演算部10261に供給する。遅延部10257は、遅延部10256からの画素値を１画素分だけ遅延して、積和演算部10261に供給する。
【０６１４】
遅延部10258は、輝度補正部10210からの画素値を１画素分だけ遅延して、遅延部10259、及び積和演算部10261に供給する。遅延部10259は、遅延部10258からの画素値を１画素分だけ遅延して、積和演算部10261に供給する。
【０６１５】
EB係数発生部10260は、輝度補正部10210からの画素値に基づき、その画素値が、隣接する画素値に与えるEB影響分を求めるための、上述したようなEB係数を発生し、積和演算部10261に供給する。
【０６１６】
積和演算部10261は、輝度補正部10210からの画素値と、遅延部10252ないし10255、及び10257ないし10259それぞれからの画素値との、合計で８つの画素値それぞれと、EB係数発生部10260からのEB係数とを乗算することにより、その８つの画素値から、遅延部10256で遅延された画素値が受けるEB影響分を求め、そのEB影響分を、遅延部10256からの画素値に加算することで、遅延部10256からの画素値について、EBエミュレート処理後の画素値を求めて出力する。
【０６１７】
したがって、例えば、図５６に示した画素値AないしIがラスタスキャン順で、EB機能部10250に供給され、いま、画素値Iが、EB機能部10250に供給されたとすると、遅延部10255の出力は画素値Aに、遅延部10254の出力は画素値Bに、遅延部10252の出力は画素値Cに、遅延部10257の出力は画素値Dに、遅延部10256の出力は画素値Eに、遅延部10253の出力は画素値Fに、遅延部10259の出力は画素値Gに、遅延部10258の出力は画素値Hに、それぞれなって、積和演算部10261に供給される。
【０６１８】
また、EB係数発生部10260及び積和演算部10261には、EB機能部10250に供給された画素値Iが供給される。
【０６１９】
EB係数発生部10260には、画素値Iが供給される前に、画素値AないしHが供給されているので、EB係数発生部10260では、画素値AないしIのそれぞれが、隣接する画素値に影響するEB影響分を求めるためのEB係数が発生され、積和演算部10261に供給されている。
【０６２０】
積和演算部10261は、遅延部10256からの画素値Eと、EB係数発生部10260からの、画素値AないしD、及びFないしIのそれぞれが、画素値Eに影響するEB影響分を求めるためのEB係数それぞれとを乗算することにより、画素値AないしD、及びFないしIのそれぞれが、画素値Eに影響するEB影響分を求め、遅延部10256からの画素値Eと加算して、その加算値を、遅延部10256からの画素値Eについての、EBエミュレート処理後の画素値として出力する。
【０６２１】
次に、図５９は、図４１のEB処理部10220の他の構成例を示している。
【０６２２】
なお、図中、図５８の場合と対応する部分については、同一の符号を付してあり、以下では、その説明は、適宜省略する。
【０６２３】
すなわち、図５９のEB処理部10220は、EB機能部10250を有する点で、図５８の場合と共通し、セレクタ10271及び10272をさらに有する点で、図５８の場合と相違している。
【０６２４】
図５９のEB処理部10220では、輝度補正部10210（図４１）からの画像信号が、セレクタ10271に供給される。
【０６２５】
また、セレクタ10271には、セレクタ10272からの画像信号も供給される。
【０６２６】
セレクタ10271は、輝度補正部10210からの画像信号、又は、セレクタ10272からの画像信号のうちの一方を選択し、EB機能部10250に供給する。
【０６２７】
セレクタ10272には、EB機能部10250からの、EBエミュレート処理後の画像信号が供給される。
【０６２８】
セレクタ10272は、EB機能部10250からの画像信号を、最終的なEBエミュレート処理後の画像信号として出力するか、又は、セレクタ10271に供給する。
【０６２９】
以上のように構成されるEB処理部10220では、セレクタ10271は、まず、輝度補正部10210からの画像信号を選択し、EB機能部10250に供給する。
【０６３０】
EB機能部10250は、セレクタ10271からの画像信号に対して、EBエミュレート処理を施し、セレクタ10272に供給する。
【０６３１】
セレクタ10272は、EB機能部10250からの画像信号を、セレクタ10271に供給する。
【０６３２】
セレクタ10271は、セレクタ10272からの画像信号を選択し、EB機能部10250に供給する。
【０６３３】
以上のようにして、EB機能部10250において、輝度補正部10210からの画像信号に対して、所定の回数だけ、EBエミュレート処理が繰り返し施されると、セレクタ10272は、EB機能部10250からの画像信号を、最終的なEBエミュレート処理後の画像信号として出力する。
【０６３４】
以上のように、EBエミュレート処理は、再帰的に行うことができる。
【０６３５】
なお、図５８では、説明を簡単にするために、画素E(x,y)を表示するときの電子ビームが、その画素E(x,y)に隣接する画素A(x-1,y-1)ないしD(x-1,y)及びF(x+1,y)ないしI(x+1,y+1)の表示にしか影響を与えないこととしたが、画素E(x,y)を表示するときの電子ビームが表示に影響を与える画素の範囲は、電子ビームの強度の分布が異なるごとに異なる。
【０６３６】
次に、図６０は、図３８のCRTγ処理部10035の色温度補償処理を行う部分の構成例を示している。
【０６３７】
図６０において、制御部10281には、表示色温度補償制御部10040（図３８）からの制御信号が供給され、レベルシフト部10282には、VM処理部10034（図３８）からの画像信号としての色信号R(Red),G(Green),B(Blue)が供給される。
【０６３８】
制御部10281は、表示色温度補償制御部10040からの制御信号が表す色温度の設定値に基づき、レベルシフト部10282とゲイン調整部10283を制御する。
【０６３９】
レベルシフト部10282は、VM処理部10034からの色信号R,G,Bについて、制御部10281からの制御に従ったレベルのシフト（加算）を行い（CRT表示装置においてはDCバイアス）、その結果得られる色信号R,G,Bを、ゲイン調整部10283に供給する。
【０６４０】
ゲイン調整部10283は、レベルシフト部10282からの色信号R,G,Bのゲインの調整を、制御部10281からの制御に従って行い、その結果得られる色信号R,G,Bを、色温度補償処理後の色信号R,G,Bとして出力する。
【０６４１】
なお、色温度補償処理の方法としては、その他、例えば、特開平08-163582号公報や、特開2002-232905号公報に記載されている方法を採用することができる。
【０６４２】
図６１は、図３８のVM処理部10034の他の構成例を示している。
【０６４３】
なお、図中、図４１のVM処理部10034と対応する部分については、同一の符号を付してあり、以下では、その説明は、適宜省略する。
【０６４４】
すなわち、図６１のVM処理部10034は、輝度補正部10210（図４１）に代えて、輝度補正部10310が設けられていることを除き、図４１のVM処理部10034と同様に構成されている。
【０６４５】
図６２は、図６１の輝度補正部10310の構成例を示している。
【０６４６】
図６２において、輝度補正部10310は、遅延タイミング調整部10311、微分回路10312、スレッショルド処理部10313、波形整形処理部10314、及び乗算回路10315から構成され、例えば、特開昭61-167280号公報（特公平05-84706号公報）や、国際公開第WO00/010324号パンフレット等に記載されている、CRT表示装置におけるVM処理（電子ビームの速度変調）のエミュレーションとしての輝度補正を行う。
【０６４７】
すなわち、輝度補正部10310には、ABL処理部10033（図３８）からの画像信号が供給され、その画像信号は、遅延タイミング調整部10311、及び微分回路10312に供給される。
【０６４８】
遅延タイミング調整部10311は、ABL処理部10033からの画像信号を、微分回路10312、スレッショルド処理部10313、及び波形整形処理部10314での処理に要する時間に対応する時間だけ遅延し、乗算回路10315に供給する。
【０６４９】
一方、微分回路10312は、ABL処理部10033からの画像信号を１次微分することにより、その画像信号のエッジの部分を検出し、そのエッジの部分の微分値（１次微分の微分値）を、スレッショルド処理部10313に供給する。
【０６５０】
スレッショルド処理部10313は、微分回路10312からの微分値の絶対値を、所定の閾値と比較し、絶対値が所定の閾値より大の微分値だけを、波形整形処理部10314に供給することで、微分値の絶対値が所定の閾値以下のエッジの部分に対して、輝度補正が行われることを制限する。
【０６５１】
波形整形処理部10314は、スレッショルド処理部10313からの微分値に基づき、エッジの部分の画素値に乗算することにより輝度補正を行うVM係数として、平均値が1.0となるVM係数を算出し、乗算回路10315に供給する。
【０６５２】
乗算回路10315は、遅延タイミング調整部10311から供給される画像信号におけるエッジの部分の画素値と、波形整形処理部10314から供給されるVM係数とを乗算することにより、そのエッジの部分の輝度補正を行って、EB処理部10220（図６１）に供給する。
【０６５３】
なお、波形整形処理部10314で算出するVM係数は、エッジの部分の輝度補正の程度をユーザの好みに合致するように、例えば、ユーザの操作に応じて調整することが可能である。
【０６５４】
また、スレッショルド処理部10313、及び波形整形処理部10314は、それぞれ、VM制御部10039（図３８）から供給されるVM制御信号に従い、動作条件を設定する。
【０６５５】
図６３は、波形整形処理部10314で算出されるVM係数と、そのVM係数を用いて輝度補正が行われる前後の画像信号との例を示している。
【０６５６】
すなわち、図６３Ａは、VM係数の第１の例を示している。
【０６５７】
図６３Ａでは、エッジ画素値（エッジを構成する、大の画素値と小の画素値とのうちの、大の画素値）に乗算されるVM係数が、1.1となっており、エッジ画素値の左と右に隣接する画素値それぞれに乗算されるVM係数が、いずれも、0.95になっている。
【０６５８】
図６３Ｂは、VM係数の第２の例を示している。
【０６５９】
図６３Ｂでは、エッジ画素値に乗算されるVM係数が、1.2になっており、エッジ画素値の左と、そのさらに左に隣接する画素値それぞれに乗算されるVM係数、及び、エッジ画素値の右と、そのさらに右に隣接する画素値それぞれに乗算されるVM係数が、いずれも、0.95になっている。
【０６６０】
図６３Ｃは、輝度補正がされる前の画像信号を示している。
【０６６１】
図６３Ｃでは、左から３番目の画素値と、４番目の画素値との間がエッジとなっており、したがって、左から４番目の画素値が、エッジ画素値になっている。
【０６６２】
図６３Ｄは、図６３Ｃの画像信号に対して、図６３ＡのVM係数を用いて輝度補正を行って得られる画像信号を示している。
【０６６３】
図６３Ｄの画像信号では、図６３Ｃの元の画像信号と比較して、エッジ画素値である４番目の画素値が大になっているとともに、左から３番目の画素値と５番目の画素値が小になっており、その結果、エッジが強調されている。
【０６６４】
図６３Ｅは、図６３Ｃの画像信号に対して、図６３ＢのVM係数を用いて輝度補正を行って得られる画像信号を示している。
【０６６５】
図６３Ｅの画像信号では、図６３Ｃの元の画像信号と比較して、エッジ画素値である４番目の画素値が大になっているとともに、左から２番目、３番目、５番目、及び６番目の画素値が小になっており、その結果、エッジが、図６３Ｄの場合より強調されている。
【０６６６】
なお、図６３のVM係数は、一例にすぎない。また、図６３では、左から右方向に見て、暗い画像から明るい画像に変化するエッジの部分を示したが、明るい画像から暗い画像に変化するエッジの部分についても、同様に、輝度補正が行われる。
【０６６７】
次に、図６４は、図６１の輝度補正部10310の他の構成例を示している。
【０６６８】
図６４において、輝度補正部10310は、タップ選択部10321、クラス分類部10322、タップ係数記憶部10326、及び予測部10327から構成され、例えば、特開平07-95591号公報（特許第3271101号）等に記載のDRC（クラス分類適応処理）を利用して、輝度補正を行う。
【０６６９】
ここで、DRCについて説明する。
【０６７０】
DRCは、第１の画像信号を第２の画像信号に変換（マッピング）する処理であり、第１と第２の画像データの定義によって様々な信号処理を行うことができる。
【０６７１】
即ち、例えば、第１の画像信号を低空間解像度の画像信号とするとともに、第２の画像信号を高空間解像度の画像信号とすれば、DRCは、空間解像度を向上させる空間解像度創造（向上）処理ということができる。
【０６７２】
また、例えば、第１の画像信号を低Ｓ／Ｎ(Siginal/Noise)の画像信号とするとともに、第２の画像信号を高Ｓ／Ｎの画像信号とすれば、DRCは、ノイズを除去するノイズ除去処理ということができる。
【０６７３】
さらに、例えば、第１の画像信号を所定の画素数（サイズ）の画像信号とするとともに、第２の画像信号を、第１の画像信号の画素数を多くまたは少なくした画像信号とすれば、DRCは、画像のリサイズ（拡大または縮小）を行うリサイズ処理ということができる。
【０６７４】
また、例えば、第１の画像信号を低時間解像度の画像信号とするとともに、第２の画像信号を高時間解像度の画像信号とすれば、DRCは、時間解像度を向上させる時間解像度創造（向上）処理ということができる。
【０６７５】
さらに、例えば、第１の画像信号を、MPEG(Moving Picture Experts Group)符号化などのブロック単位で符号化された画像信号を復号することによって得られる復号画像信号とするとともに、第２の画像信号を、符号化前の画像信号とすれば、DRCは、MPEG符号化および復号によって生じるブロック歪み等の各種の歪みを除去する歪み除去処理ということができる。
【０６７６】
なお、空間解像度創造処理において、低空間解像度の画像信号である第１の画像信号を、高空間解像度の画像信号である第２の画像信号に変換するにあたっては、第２の画像信号を、第１の画像信号と同一の画素数の画像信号とすることもできるし、第１の画像信号よりも画素数が多い画像信号とすることもできる。第２の画像信号を、第１の画像信号よりも画素数が多い画像信号とする場合、空間解像度創造処理は、空間解像度を向上させる処理であるとともに、画像サイズ（画素数）を拡大するリサイズ処理でもある。
【０６７７】
以上のように、DRCによれば、第１および第２の画像信号をどのように定義するかによって、様々な信号処理を実現することができる。
【０６７８】
DRCでは、第２の画像信号のうちの注目している注目画素を複数のクラスのうちのいずれかのクラスにクラス分類することにより得られるクラスのタップ係数と、注目画素に対して選択される第１の画像信号の複数の画素（の画素値）とを用いた予測演算により、注目画素の画素値（の予測値）が求められる。
【０６７９】
図６４において、ABL処理部10033（図３８）からVM処理部10034の輝度補正部10310に供給される画像信号は、第１の画像信号として、タップ選択部10321に供給される。
【０６８０】
タップ選択部10321は、ABL処理部10033からの第１の画像信号の輝度補正を行って得られる画像信号を、第２の画像信号として、その第２の画像信号を構成する画素を、順次、注目画素とし、注目画素（の画素値）を予測するのに用いる第１の画像信号を構成する画素（の画素値）の幾つかを、予測タップとして選択する。
【０６８１】
具体的には、タップ選択部10321は、注目画素の時空間の位置から空間的または時間的に近い位置にある第１の画像信号の複数の画素を、予測タップとして選択する。
【０６８２】
さらに、タップ選択部10321は、注目画素を、複数のクラスのうちのいずれかにクラス分けするクラス分類を行うのに用いる第１の画像信号を構成する画素の幾つかを、クラスタップとして選択する。すなわち、タップ選択部10321は、タップ選択部10321が予測タップを選択するのと同様にして、クラスタップを選択する。
【０６８３】
なお、予測タップとクラスタップは、同一のタップ構造（注目画素に対する位置関係）を有するものであっても良いし、異なるタップ構造を有するものであっても良い。
【０６８４】
タップ選択部10321で得られた予測タップは、予測部10327に供給され、タップ選択部10321で得られたクラスタップは、クラス分類部10322に供給される。
【０６８５】
クラス分類部10322は、クラス予測係数記憶部10323、予測部10324、及びクラス決定部10325から構成され、タップ選択部10321からのクラスタップに基づき、注目画素をクラス分類し、その結果得られるクラスに対応するクラスコードを、タップ係数記憶部10326に供給する。
【０６８６】
ここで、クラス分類部10322によるクラス分類の詳細については、後述する。
【０６８７】
タップ係数記憶部10326は、後述する学習によって求められたクラスごとのタップ係数を、VM係数として記憶し、さらに、その記憶したタップ係数のうちの、クラス分類部10322から供給されるクラスコードに対応するアドレスに記憶されているタップ係数（クラス分類部10322から供給されるクラスコードが表すクラスのタップ係数）を出力する。このタップ係数は、予測部10327に供給される。
【０６８８】
ここで、タップ係数とは、ディジタルフィルタにおける、いわゆるタップにおいて入力データと乗算される係数に相当するものである。
【０６８９】
予測部10327は、タップ選択部10321が出力する予測タップと、タップ係数記憶部10326が出力するタップ係数とを取得し、その予測タップとタップ係数とを用いて、注目画素の真値の予測値を求める所定の予測演算を行う。これにより、予測部10327は、注目画素の画素値（の予測値）、すなわち、第２の画像信号を構成する画素の画素値、つまり、輝度補正後の画素値を求めて出力する。
【０６９０】
なお、クラス分類部10322を構成するクラス予測係数記憶部10323、及び予測部10324、並びに、タップ係数記憶部10326は、それぞれ、VM制御部10039（図３８）から供給されるVM制御信号に従い、動作条件の設定や必要な選択を行う。
【０６９１】
次に、図６４のタップ係数記憶部10326に、VM係数として記憶されるクラスごとのタップ係数の学習について説明する。
【０６９２】
DRCの所定の予測演算に用いられるタップ係数は、多数の画像信号を、学習用の画像信号として用いた学習によって求められる。
【０６９３】
すなわち、例えば、いま、輝度補正前の画像信号を、第１の画像信号とするとともに、その第１の画像信号について輝度補正を行って得られる、輝度補正後の画像信号を、第２の画像信号として、DRCにおいて、第１の画像信号から予測タップを選択し、その予測タップとタップ係数を用いて、第２の画像信号の注目画素の画素値を、所定の予測演算によって求める（予測する）こととする。
【０６９４】
所定の予測演算として、例えば、線形１次予測演算を採用することとすると、第２の画像信号の画素値ｙは、次の線形１次式によって求められることになる。
【０６９５】
【数２３】
2008178075.tif 000025
・・・（２３）
【０６９６】
但し、式（２３）において、ｘnは、第２の画像信号の注目画素ｙについての予測タップを構成する、第１の画像信号のｎ番目の画素（以下、適宜、補正前画素という）の画素値を表し、ｗnは、ｎ番目の補正前画素（の画素値）と乗算されるｎ番目のタップ係数を表す。なお、式（２３）では、予測タップが、Ｎ個の補正前画素ｘ1，ｘ2，・・・，ｘNで構成されるものとしてある。
【０６９７】
ここで、第２の画像信号の注目画素の画素値ｙは、式（２３）に示した線形１次式ではなく、２次以上の高次の式によって求めるようにすることも可能である。
【０６９８】
いま、第２の画像信号の第ｋサンプルの画素値の真値をｙkと表すとともに、式（２３）によって得られるその真値ｙkの予測値をｙk’と表すと、その予測誤差ｅkは、次式で表される。
【０６９９】
【数２４】
2008178075.tif 000026
・・・（２４）
【０７００】
いま、式（２４）の予測値ｙk’は、式（２３）にしたがって求められるため、式（２４）のｙk’を、式（２３）にしたがって置き換えると、次式が得られる。
【０７０１】
【数２５】
2008178075.tif 000027
・・・（２５）
【０７０２】
但し、式（２５）において、ｘn,kは、第２の画像信号の第ｋサンプルの画素についての予測タップを構成するｎ番目の補正前画素を表す。
【０７０３】
式（２５）（または式（２４））の予測誤差ｅkを０とするタップ係数ｗnが、第２の画像信号の画素を予測するのに最適なものとなるが、すべての第２の画像信号の画素について、そのようなタップ係数ｗnを求めることは、一般には困難である。
【０７０４】
そこで、タップ係数ｗnが最適なものであることを表す規範として、例えば、最小自乗法を採用することとすると、最適なタップ係数ｗnは、次式で表される自乗誤差の総和Ｅを最小にすることで求めることができる。
【０７０５】
【数２６】
2008178075.tif 000028
・・・（２６）
【０７０６】
但し、式（２６）において、Ｋは、第２の画像信号の画素ｙkと、その第２の画像信号の画素ｙkについての予測タップを構成する補正前画素ｘ1,k，ｘ2,k，・・・，ｘN,kとのセットのサンプル数（学習用のサンプルの総数）を表す。
【０７０７】
式（２６）の自乗誤差の総和Ｅの最小値（極小値）は、式（２７）に示すように、総和Ｅをタップ係数ｗnで偏微分したものを０とするｗnによって与えられる。
【０７０８】
【数２７】
2008178075.tif 000029
・・・（２７）
【０７０９】
そこで、上述の式（２５）をタップ係数ｗnで偏微分すると、次式が得られる。
【０７１０】
【数２８】
2008178075.tif 000030
・・・（２８）
【０７１１】
式（２７）と（２８）から、次式が得られる。
【０７１２】
【数２９】
2008178075.tif 000031
・・・（２９）
【０７１３】
式（２９）のｅkに、式（２５）を代入することにより、式（２９）は、式（３０）に示す正規方程式で表すことができる。
【０７１４】
【数３０】
2008178075.tif 000032
・・・（３０）
【０７１５】
式（３０）の正規方程式は、例えば、掃き出し法（Gauss-Jordanの消去法）などを用いることにより、タップ係数ｗnについて解くことができる。
【０７１６】
式（３０）の正規方程式を、クラスごとにたてて解くことにより、最適なタップ係数（ここでは、自乗誤差の総和Ｅを最小にするタップ係数）ｗnを、クラスごとに求めることができる。
【０７１７】
以上のようにして、タップ係数wnを求める学習は、例えば、後述するコンピュータ（図６７）によって行うことができる。
【０７１８】
次に、図６５のフローチャートを参照して、コンピュータが行う、タップ係数wnを求める学習の処理（学習処理）について、説明する。
【０７１９】
まず最初に、ステップS10021において、コンピュータは、あらかじめ学習用に用意された学習用画像信号から、第２の画像信号に相当する教師データと、第１の画像信号に相当する生徒データを生成して、処理は、ステップS10022に進む。
【０７２０】
すなわち、コンピュータは、学習用画像信号から、タップ係数の学習の教師（真値）となる、第２の画像信号に相当する教師データとして、式（２３）による予測演算としての写像の写像先の画素値、つまり、輝度補正後の画素値を生成する。
【０７２１】
さらに、コンピュータは、学習用画像信号から、タップ係数の学習の生徒となる、第１の画像信号に相当する生徒データとして、式（２３）による予測演算としての写像による変換対象の画素値を生成する。ここでは、コンピュータは、例えば、学習用画像信号を、そのまま、第１の画像信号に相当する生徒データとする。
【０７２２】
ステップS10022では、コンピュータは、教師データのうち、まだ、注目画素としていないものを、注目画素として選択し、処理は、ステップS10023に進む。ステップS10023では、コンピュータは、図６４のタップ選択部10321と同様に、注目画素について、生徒データから予測タップとする複数の画素を選択するとともに、クラスタップとする複数の画素を選択して、処理は、ステップS10024に進む。
【０７２３】
ステップS10024では、コンピュータは、注目画素についてのクラスタップに基づき、注目画素のクラス分類を、図６４のクラス分類部10322と同様にして行い、注目画素のクラスに対応するクラスコードを得て、処理は、ステップS10025に進む。
【０７２４】
ステップS10025では、コンピュータは、注目画素と、注目画素について選択された予測タップを構成する生徒データとを対象とした式（３０）の足し込みを、注目画素のクラスについて行い、処理は、ステップS10026に進む。
【０７２５】
すなわち、コンピュータは、注目画素のクラスについて、予測タップ（生徒データ）ｘn,kを用い、式（３０）の左辺の行列における生徒データどうしの乗算（ｘn,kｘn',k）と、サメーション（Σ）に相当する演算を行う。
【０７２６】
さらに、コンピュータは、注目画素のクラスについて、予測タップ（生徒データ）ｘn,kと教師データｙkを用い、式（３０）の右辺のベクトルにおける生徒データｘn,kおよび教師データｙkの乗算（ｘn,kｙk）と、サメーション（Σ）に相当する演算を行う。
【０７２７】
すなわち、コンピュータは、注目画素のクラスにおいて、前回、注目画素とされた教師データについて求められた式（３０）における左辺の行列のコンポーネント（Σｘn,kｘn',k）と、右辺のベクトルのコンポーネント（Σｘn,kｙk）を、その内蔵するメモリ（例えば、図６７のRAM10104）に記憶しており、その行列のコンポーネント（Σｘn,kｘn',k）またはベクトルのコンポーネント（Σｘn,kｙk）に対して、新たに注目画素とされた教師データについて、その教師データｙk+1および生徒データｘn,k+1を用いて計算される、対応するコンポーネントｘn,k+1ｘn',k+1またはｘn,k+1ｙk+1を足し込む（式（３０）のサメーションで表される加算を行う）。
【０７２８】
ステップS10026では、コンピュータが、まだ、注目画素としていない教師データがあるかどうかを判定する。ステップS10026において、注目画素としていない教師データが、まだあると判定された場合、ステップS10022に戻り、以下、同様の処理が繰り返される。
【０７２９】
また、ステップS10026において、注目画素としていない教師データがないと判定された場合、処理は、ステップS10027に進み、コンピュータは、いままでのステップS10022乃至S10026の処理によって得られたクラスごとの式（３０）における左辺の行列と、右辺のベクトルによって構成されるクラスごとの正規方程式を解くことにより、クラスごとに、タップ係数ｗnを求めて出力し、処理を終了する。
【０７３０】
図６４のタップ係数記憶部10326には、以上のようにして求められたクラスごとのタップ係数ｗnが、VM係数として記憶されている。
【０７３１】
次に、図６４のクラス分類部10322によるクラス分類について説明する。
【０７３２】
クラス分類部10322において、タップ選択部10321からの、注目画素についてのクラスタップは、予測部10324、及びクラス決定部10325に供給される。
【０７３３】
予測部10324は、タップ選択部10321からのクラスタップを構成する複数の画素のうちの１つの画素の画素値を、他の画素の画素値と、クラス予測係数記憶部10323に記憶されたクラス予測係数とを用いて予測し、その予測値を、クラス決定部10325に供給する。
【０７３４】
すなわち、クラス予測係数記憶部10323は、クラスごとに、クラスタップを構成する複数の画素のうちの１つの画素の画素値を予測するのに用いられるクラス予測係数を記憶している。
【０７３５】
具体的には、注目画素についてのクラスタップが、M+1個の画素の画素値から構成され、予測部10324が、例えば、クラスタップを構成するM+1個の画素の画素値x1,x2,・・・,xM,xM+1のうちの、M+1番目の画素値xM+1を、予測対象として、他のM個の画素x1,x2,・・・,xMを用いて、予測対象であるM+1番目の画素値xM+1を予測することとすると、クラス予測係数記憶部10323は、例えば、クラス#jについて、M個の画素x1,x2,・・・,xMそれぞれと乗算されるM個のクラス予測係数cj,1,cj,2,・・・,cj,Mを記憶している。
【０７３６】
この場合、予測部10324は、例えば、式x'j,M+1=x1cj,1+x2cj,2+・・・+,xMcj,Mに従って、クラス#jについての、予測対象の画素値xM+1の予測値x'j,M+1を求める。
【０７３７】
例えば、いま、クラス分類によって、注目画素がJ個のクラス#1ないし#Jのうちのいずれかのクラスに分類されるとすると、予測部10324は、クラス#1ないし#Jのそれぞれについて、予測値x'1,M+1ないしx'J,M+1を求め、クラス決定部10325に供給する。
【０７３８】
クラス決定部10325は、予測部10324からの予測値x'1,M+1ないしx'J,M+1それぞれを、タップ選択部10321からの、注目画素についてのクラスタップの予測対象のM+1番目の画素値（真値）xM+1と比較し、予測値x'1,M+1ないしx'J,M+1のうちの、予測対象のM+1番目の画素値xM+1との予測誤差が最も小さい予測値x'j,M+1を求めるのに用いられたクラス予測係数cj,1,cj,2,・・・,cj,Mのクラス#jを、注目画素のクラスに決定し、そのクラス#jを表すクラスコードを、タップ係数記憶部10326（図６４）に供給する。
【０７３９】
ここで、クラス予測係数記憶部10323に記憶されるクラス予測係数cj,mは、学習によって求められる。
【０７４０】
クラス予測係数cj,mを求める学習は、例えば、後述するコンピュータ（図６７）によって行うことができる。
【０７４１】
図６６のフローチャートを参照して、コンピュータが行う、クラス予測係数cj,mを求める学習の処理（学習処理）について説明する。
【０７４２】
コンピュータは、ステップS10031において、例えば、図６５のステップS10021と同様に、学習用画像信号から、第２の画像信号に相当する教師データと、第１の画像信号に相当する生徒データを生成する。さらに、コンピュータは、ステップS10031において、教師データを、順次、注目画素として選択し、各注目画素について、図６５のステップS10023と同様に、生徒データからクラスタップとする複数の画素を選択して、処理は、ステップS10032に進む。
【０７４３】
ステップS10032では、コンピュータは、クラスを表す変数jを、1に初期化して、処理は、ステップS10033に進む。
【０７４４】
ステップS10033では、コンピュータは、ステップS10031で得たクラスタップのすべてを、学習用のクラスタップ（学習用クラスタップ）として選択して、処理は、ステップS10034に進む。
【０７４５】
ステップS10034では、コンピュータは、図６５のタップ係数の学習の場合と同様に、式x'j,M+1=x1cj,1+x2cj,2+・・・+,xMcj,Mに従って求められる、クラス#jについての、予測対象の画素値xM+1の予測値x'j,M+1の、真値xM+1に対する予測誤差を最小にする正規方程式（式（３０）に相当する正規方程式）を、学習用クラスタップを対象として生成し、処理は、ステップS10035に進む。
【０７４６】
ステップS10035では、コンピュータは、ステップS10034で得た正規方程式を解くことで、クラス#jについてのクラス予測係数cj,mを求め（m=1,2,・・・,M）、処理は、ステップS10036に進む。
【０７４７】
ステップS10036では、コンピュータは、変数jがクラスの総数Jに等しいかどうかを判定し、等しくないと判定した場合、処理は、ステップS10037に進む。
【０７４８】
コンピュータは、ステップS10037において、変数jを1だけインクリメントして、処理は、ステップS10038に進み、ステップS10035で得たクラス予測係数cj,mを用い、学習用クラスタップを対象として、予測対象の画素xM+1を予測したときの予測誤差を求めて、処理は、ステップS10039に進む。
【０７４９】
ステップS10039では、コンピュータは、学習用クラスタップの中から、ステップS10038で求めた予測誤差が所定の閾値以上となるものを、新たな学習用クラスタップとして選択する。
【０７５０】
そして、処理は、ステップS10039からステップS10034に戻り、以下、上述した場合と同様にして、新たな学習用クラスタップを用いて、クラス#jについてのクラス予測係数cj,mが求められる。
【０７５１】
一方、ステップS10036において、変数jがクラスの総数Jに等しいと判定された場合、すなわち、J個のクラス#1ないし#Jすべてについて、クラス予測係数c1,mないしcJ,mが求められた場合、処理は、終了する。
【０７５２】
以上のように、図３８の画像信号処理装置では、CRT表示装置が、電子ビームにより蛍光体を光らせることで表示をしていることに鑑み、電子ビームを偏向する際に行う処理、及び、電子ビームの物理的な形状とその変化による表示への影響を考慮した信号処理を行うので、LCD等を用いたFPD表示装置において、CRT表示装置で表示したのと同等の画質の画像を表示することが可能となる。
【０７５３】
さらに、図３８の画像信号処理装置によれば、CRTそのものの特性違いによる表示特性をエミュレートすることが可能になり、輝度特性や質感の違いを同一LCDにて切り替えることが可能になる。例えば、業務用のCRTと一般用（一般向け）のCRTの発色特性の違いを同一画面上で比べることで送出時の色調整や画質調整を正確に行う、などを容易に行うことが可能になる。
【０７５４】
また、図３８の画像信号処理装置によれば、同様に、LCDとCRTの表示特性による違いを容易に確認することが可能である。
【０７５５】
さらに、図３８の画像信号処理装置によれば、本来の意味での「好みの画質」で画像を表示することが可能になる。
【０７５６】
また、図３８の画像信号処理装置によれば、処理の範囲を表示画面内で変える事により特性の異なる表示デバイス（例えば、業務用と一般用のCRT、LCDとCRT、など）を同時に見ることが可能になるため、比較や調整といった用途での利用を容易にすることができる。
【０７５７】
次に、上述した一連の処理のうちの少なくとも一部は、専用のハードウェアにより行うこともできるし、ソフトウェアにより行うこともできる。一連の処理をソフトウェアによって行う場合には、そのソフトウェアを構成するプログラムが、汎用のコンピュータ等にインストールされる。
【０７５８】
そこで、図６７は、上述した一連の処理を実行するプログラムがインストールされるコンピュータの一実施の形態の構成例を示している。
【０７５９】
プログラムは、コンピュータに内蔵されている記録媒体としてのハードディスク10105やROM10103に予め記録しておくことができる。
【０７６０】
あるいはまた、プログラムは、フレキシブルディスク、CD-ROM(Compact Disc Read Only Memory)，MO(Magneto Optical)ディスク，DVD(Digital Versatile Disc)、磁気ディスク、半導体メモリなどのリムーバブル記録媒体10111に、一時的あるいは永続的に格納（記録）しておくことができる。このようなリムーバブル記録媒体10111は、いわゆるパッケージソフトウエアとして提供することができる。
【０７６１】
なお、プログラムは、上述したようなリムーバブル記録媒体10111からコンピュータにインストールする他、ダウンロードサイトから、ディジタル衛星放送用の人工衛星を介して、コンピュータに無線で転送したり、LAN(Local Area Network)、インターネットといったネットワークを介して、コンピュータに有線で転送し、コンピュータでは、そのようにして転送されてくるプログラムを、通信部10108で受信し、内蔵するハードディスク10105にインストールすることができる。
【０７６２】
コンピュータは、CPU(Central Processing Unit)10102を内蔵している。CPU10102には、バス10101を介して、入出力インタフェース10110が接続されており、CPU10102は、入出力インタフェース10110を介して、ユーザによって、キーボードや、マウス、マイク等で構成される入力部10107が操作等されることにより指令が入力されると、それにしたがって、ROM(Read Only Memory)10103に格納されているプログラムを実行する。あるいは、また、CPU10102は、ハードディスク10105に格納されているプログラム、衛星若しくはネットワークから転送され、通信部10108で受信されてハードディスク10105にインストールされたプログラム、またはドライブ10109に装着されたリムーバブル記録媒体10111から読み出されてハードディスク10105にインストールされたプログラムを、RAM(Random Access Memory)10104にロードして実行する。これにより、CPU10102は、上述したフローチャートにしたがった処理、あるいは上述したブロック図の構成により行われる処理を行う。そして、CPU10102は、その処理結果を、必要に応じて、例えば、入出力インタフェース10110を介して、LCD(Liquid Crystal Display)やスピーカ等で構成される出力部10106から出力、あるいは、通信部10108から送信、さらには、ハードディスク10105に記録等させる。
【０７６３】
［画像を表示するLCD(Liquid Crystal Display)等の第１の表示デバイスを用いて、第１の表示デバイスと異なる特性を有するPDP(Plasma Display Panel)等の第２の表示デバイスにおいて画像を表示した状態を再現する実施の形態］
【０７６４】
次に、第１の表示デバイスを用いて、第１の表示デバイスと異なる特性を有する第２の表示デバイスにおいて画像を表示した状態を再現する実施の形態について説明する。
【０７６５】
画像信号を表示する表示デバイスとして、例えば、CRT(Cathode Ray Tube)、LCD、PDP、有機EL(Electroluminescence)、プロジェクタ等、様々な表示デバイスが存在する。
【０７６６】
そして、例えば、PDPについては、表示画面上で移動画素に対し視線が追従したときに、各網膜位置に入る光量の計算を行い、その出力データから新しいサブフィールドデータを生成することで、偽輪郭の発生を抑制する方法が、例えば、特開2000-39864号公報において提案されている。
【０７６７】
ところで、表示特性は表示デバイスによって異なるため、画像信号が適切な視聴状態（表示状態）にあるかを確認するモニタリングにおいては、表示デバイスの特性（表示特性）の違いが大きな問題となる。すなわち、ある画像信号をLCDに表示してモニタリングを行ったとしても、その画像信号をPDPに表示した際に、どのように見えるかを確認することは困難であった。
【０７６８】
そのため、複数の表示デバイスの特性を考慮してモニタリングを行うには、表示デバイスを必要な分だけ用意する必要があり、モニタリングシステムの規模の増大につながっていた。
【０７６９】
またPDPは、入力画像信号の１フィールドを複数のサブフィールドで構成し、各サブフィールドを発光、非発光のどちらかの状態にするように制御することで、多階調表示を実現する表示デバイスである。
【０７７０】
そのため、動画像を表示した際に、画像内の動き物体等に人の視線が追従すると、サブフィールドの発光パターンによっては、表示している画像と人の目に見える画像が異なるといった特徴がある。しかしながらPDPにおいて、実際に動画像がどのように見えるかを確認するには、PDPに動画像を表示し、人が目で見て確認するしかなく、確認作業が大変な上、客観的な評価が困難であった。
【０７７１】
そこで、以下では、例えば、LCD等の第１の表示デバイスを用いて、第１の表示デバイスと異なる特性を有するPDP等の第２の表示デバイスにおいて画像を表示した状態を再現することができるようにする実施の形態について説明する。
【０７７２】
図６８は、第１の表示デバイスを用いて、第１の表示デバイスと異なる特性を有する第２の表示デバイスにおいて画像を表示した状態を再現することができるようにする画像処理装置の第１実施の形態の構成例を示している。
【０７７３】
入力画像信号Vinは、動き検出部20100と、サブフィールド展開部20200へ供給される。
【０７７４】
図６９は、図６８の動き検出部20100の構成を示している。動き検出部20100では、入力画像信号Vinから、各画素の動きベクトルを、入力画像信号Vinを人が見た際の画素毎の視線として検出する。
【０７７５】
入力画像信号Vinは、相関演算回路20101と遅延回路20102へ供給される。相関演算回路20101では、現フィールドの入力画像信号Vinと、遅延回路20102で１フィールド遅延された前フィールドの入力画像信号との間で、相関演算を行う。
【０７７６】
図７０に相関演算の動作を示す。
【０７７７】
相関演算回路20101は、現フィールドの注目画素において、注目画素を中心としたブロックＢＬを設定する。ブロックBLは例えば５×５画素のブロックである。そして、相関演算回路20101は、遅延回路20102で遅延された前フィールドにおいて、現フィールドでのブロックBLと同じ位置を中心としたサーチ範囲を設定する。サーチ範囲は例えば、現フィールドでのブロックBLと同じ位置を基準とし、水平、垂直方向に−８〜＋７画素分の領域である。そして、相関演算回路20101は、ブロックBLとサーチ範囲内の、ブロックBLと同一サイズの各候補ブロックとの間で、例えば、画素値どうしの差分絶対値の総和を、ブロックBLと候補ブロックとの相関を評価するための評価値として求める演算を、相関演算として行い、各候補ブロックでの演算結果を、視線決定回路20103へ供給する。
【０７７８】
図６９に戻り、視線決定回路20103では、相関演算回路20101から供給された演算結果の中から、最小の値の演算結果が得られた候補ブロックの位置を、注目画素の動きベクトルとして検出する。ここで、候補ブロックの位置は、図７１に示すように、ブロックBLからの相対位置である。視線決定回路20103は、注目画素の動きベクトルの方向を、人が注目画素を見たときの視線の方向、すなわち、現フィールドを見た人の視線が追っていく方向（視線方向）mvに決定する。
【０７７９】
相関演算回路20101では、注目画素毎にブロックBLを設定するが、現フィールドを最初に５×５画素のブロックに分割し、ブロック毎に視線方向（動きベクトル）を求め、ブロック内の画素では、全て同じ視線方向を適用してもよい。またサーチ範囲内の各候補ブロックとの相関演算には、注目画素の近傍の画素における差分絶対値に一定の重みをつけて評価値を求めてもよい。この場合、注目画素の近傍の画素の相関を重く評価することになる。
【０７８０】
図７２は、図６８のサブフィールド展開部20200の構成例を示している。
【０７８１】
サブフィールド展開部20200では、入力画像信号VinをPDPに表示する際の各サブフィールドの発光パターンを生成する。
【０７８２】
サブフィールド展開部20200の動作を説明する前に、PDPにおける多階調表示の方法について説明する。PDPは、１フィールドを複数のサブフィールドに分割し、各サブフィールドの発光の輝度の重みを変えることで多階調表示を行う。
【０７８３】
図７３にPDPにおけるサブフィールドの構成例を示す。図７３では１フィールドは８つのサブフィールドＳＦ１、ＳＦ２、ＳＦ３、ＳＦ４、ＳＦ５、ＳＦ６、ＳＦ７、ＳＦ８に分割され、各サブフィールドＳＦ１ないしＳＦ８は異なる輝度の重み（光量）を持っている。各サブフィールドＳＦ１ないしＳＦ８は、それぞれの画素を発光、非発光のどちらかに設定するアドレス期間と、アドレス期間において発光と設定された画素を発光させる発光期間から構成されている。
【０７８４】
各サブフィールドＳＦ１ないしＳＦ８の輝度の重みを例えば１、２、４、８、１６、３２、６４、１２８とすると、これらのサブフィールドＳＦ１ないしＳＦ８を組み合わせることで、０〜２５５までの２５６階調を実現することができる。
【０７８５】
実際のPDPは２次元平面において構成されるため、PDPによる画像の表示は、図７４に示すように、PDPにおける画素位置X,Yと時間方向Ｔのサブフィールドからなる３次元的なモデル図で表現される。
【０７８６】
図７２に戻り、入力画像信号Vinは、サブフィールド割当回路20201へ供給される。サブフィールド割当回路20201は、入力画像信号Vinの１フィールドの画素値を、以下の式（３１）を用いて表す。ただしＮiは、サブフィールドＳＦ#iの非発光または発光を表す発光情報であり、０または１である。
【０７８７】
【数３１】
2008178075.tif 000033
・・・（３１）
【０７８８】
なおここでは、表示対象とするPDPのサブフィールド構造を図７３に示す場合と同様に、８つのサブフィールドＳＦ１ないしＳＦ８で構成し、各サブフィールドＳＦ１ないしＳＦ８の輝度の重みをそれぞれ１、２、４、８、１６、３２、６４、１２８としている。また以下の説明でもこの構造を元にするものとする。
【０７８９】
そして、サブフィールド割当回路20201は、各画素についての発光情報Ｎiの値を発光決定回路20202へ供給する。発光決定回路20202では、Ｎiが１の場合を発光、０の場合を非発光として、サブフィールドの発光パターンを表す発光制御情報ＳＦを生成する。
【０７９０】
例えば入力画像信号Vinのある画素値が「７」である場合、サブフィールドＳＦ１、ＳＦ２、ＳＦ３を発光、それ以外を非発光と割り当てる発光制御情報ＳＦを生成する。また例えば、入力画像信号Vinのある画素値が「２２」である場合、サブフィールドＳＦ２、ＳＦ３、ＳＦ５を発光、それ以外を非発光と割り当てる発光制御情報ＳＦを生成する。
【０７９１】
図７５は、図６８の光量積算部20300の構成を示している。光量積算部20300では、入力画像信号VinをPDPに表示した際に、人の網膜で積分される光量を画素値とする画像を、PDPにおいて入力画像信号を表示したときに人の目に見える、いわば擬似的な画像として生成して出力する。
【０７９２】
光量積算部20300の動作を説明する前に、PDP特有の、視線方向と発光パターンによる画像の見え方について説明する。
【０７９３】
図７６は、横軸を画素位置X（Y）とするとともに、縦軸を時間Ｔとしたサブフィールドの、画素値１２７と１２８の境界を示しており、影を付してあるサブフィールドが発光するサブフィールドを示している。
【０７９４】
画像が動いていない場合には、人の視線方向は、縦軸の時間方向Ｔと平行な方向Ａ−Ａ’となり、サブフィールドの発光が正しく人の網膜で積分されるため、画素値１２７と１２８が正しく認識される。
【０７９５】
しかし画像が左方向に1フィールドで１画素分動くとすると、動きに人の目（視線）が追従するため、視線方向が、縦軸の時間方向Ｔと平行でない方向Ｂ−Ｂ’となり、サブフィールドの発光が人の網膜で積分されず、画素値１２７と１２８の間に黒い線を認識してしまう。また逆に画像が右方向に1フィールドで１画素分動くとすると、動きに人の目が追従するため、視線方向が、縦軸の時間方向Ｔと平行でない方向Ｃ−Ｃ’となり、サブフィールドの発光が人の網膜に積分されすぎて、画素値１２７と１２８の間に白い線を認識してしまう。
【０７９６】
以上のようにPDPにおいては、サブフィールドを用いる駆動方式のため、視線方向とサブフィールドの発光パターンによって、表示している画像と人の目に見えている画像とが異なる現象が発生する場合があり、一般に動画擬似輪郭として知られている。
【０７９７】
図７５に戻り、動き検出部20100で検出された各画素の視線方向mvと、サブフィールド展開部20200で生成された発光制御情報ＳＦが光量積算領域決定回路20301へ供給される。
【０７９８】
光量積算領域決定回路20301は、動き検出部20100で検出された視線方向mvとサブフィールド展開部20200で生成されたサブフィールドの発光パターンを表す発光制御情報ＳＦとから、入力画像信号VinをPDPに表示した際に、人の網膜で積分される光量を擬似的に再現するための、光量積算領域を、画素ごとに決定する。すなわち図７７に示すように、注目画素に対し、検出された視線方向に１画素分の断面積の光量積算領域を設定する。
【０７９９】
さらに、光量積算領域決定回路20301は、光量積算領域内の各サブフィールドの発光、非発光の領域の比率に応じて各サブフィールドＳＦ＃iでの光量を積算する。例えば図７７の場合、サブフィールドＳＦ８において発光、非発光の領域の比率が７：１であるとき、サブフィールドＳＦ８において積算される光量は、１２８×１÷（７＋１）＝１６となる。光量積算領域決定回路20301は、同様に全てのサブフィールドＳＦ１ないしＳＦ８において積分される光量を算出し、光量積算回路20302に供給する。
【０８００】
光量積算回路20302は、光量積算領域決定回路20301からのサブフィールドＳＦ１ないしＳＦ８それぞれの光量の総和を求め、注目画素における画素値とする。そして、光量積算回路20302は、全ての画素に対し、同様の処理を行うことで出力画像Voutを生成する。
【０８０１】
また、光量積算領域決定回路20301、及び光量積算回路20302の処理は、以下のように簡便に行うこともできる。
【０８０２】
すなわち、図７７において、各サブフィールドの発光、非発光の領域の比率において、大きい方を採用する。この場合、サブフィールドＳＦ８は非発光となり光量０、サブフィールドＳＦ７は発光となり光量６４、以下同様に全てのサブフィールドでの結果の総和を注目画素における画素値とする。
【０８０３】
実際のPDPは２次元平面において構成されるため、PDPによる画像の表示は、図７８に示すように、PDPにおける画素位置X,Yと時間方向Ｔのサブフィールドからなる３次元的なモデル図で表現される。
【０８０４】
以上のように、図６８に示す画像処理装置は、入力画像信号Vinから、画素毎の視線方向と、PDPに表示した際のサブフィールドの発光パターンから、PDPに表示された画像を見る人の網膜に積分される光量を画素値とする画像を、PDPに表示された画像を見る人の目に見える画像として生成するので、入力画像信号VinをPDPに表示し、人が見た場合の画像を擬似的に再現することができる。
【０８０５】
図７９は、第１の表示デバイスを用いて、第１の表示デバイスと異なる特性を有する第２の表示デバイスにおいて画像を表示した状態を再現することができるようにする画像処理装置の第２実施の形態の構成例を示している。
【０８０６】
一般にPDPにおいて、動画擬似輪郭を抑制するために、使用する階調に制限を設け、さらに見た目に階調を出すために、入力画像と表示する画像の画素値の差分を、時空間の周辺の画素に割り振る誤差拡散処理、そして複数の画素値の時空間パターンによって、見た目の階調を表現するディザ処理などが行われている。図７９に示す画像処理装置は、入力画像信号Vinを表示するPDPにおいて、前記の誤差拡散処理やディザ処理が行われる場合に人の目に見える画像を擬似的に再現する。
【０８０７】
図７９において、入力画像信号Vinは動き検出部20100と階調変換部20400へ供給される。動き検出部20100の構成は図６８のものと同様であるため説明を省略する。
【０８０８】
図８０は、図７９の階調変換部20400の構成例を示している。
【０８０９】
入力画像信号Vinは、演算器４０５において、後述する表示階調誤差Vpdと加算され、画素値（階調）Vpとなり、階調変換回路20402へ供給される
【０８１０】
階調変換回路20402では、階調変換テーブル20403に応じて、入力された画素の階調（画素値）Vpを別の階調Vpoへと変換する。すなわち動画擬似輪郭の発生しにくい階調として０、１、３、７、１５、３１、６３、１２７、２５５を使用するとした場合、階調変換テーブル20403では、前記の使用する階調と、前記の使用する階調の時空間の分布で表現する見た目の階調（ディザ階調）を設定する。
【０８１１】
階調変換回路20402では、階調変換テーブル20403で設定された階調のみを用いるものとして、入力された階調Vpを、階調変換テーブル20403の階調のうちの、階調Vpとの差分がもっとも小さい階調Vpoに置き換えて出力する。階調変換回路20402の出力である階調Vpoはディザ変換回路20404に供給されるとともに、演算器４０６において、階調変換回路20402の入力である階調Vpとの差分が求められることにより、表示階調誤差Vpdとされ、遅延回路20401で水平方向で１画素分遅延され、演算器４０５で次の入力画像信号Vinの画素値と加算される。このように変換された階調の差分を周辺の画素の階調で表現することを誤差拡散処理と呼ぶ。
【０８１２】
ディザ変換回路20404では、使用する階調の時空間の分布によって、見た目の階調を表現するディザ処理（ディザ変換）を行う。ディザ変換回路20404の動作例を図８１に示す。ディザ変換回路20404では、例えば階調を４として表示する領域があったとすると、使用する階調である３と７を用いて、例えば図８１に示すように階調を分布させる。このようにすると、人の目には、階調の値が平均されて、階調の値が４として見えることになる。
【０８１３】
図７９に戻り、以上のように、階調変換部20400では、入力画像信号Vinを実際に表示に用いる画像信号Vdに変換し、サブフィールド展開部20200へ供給する。サブフィールド展開部20200、および光量積算部20300の構成は、図６８のものと同様であるため説明を省略する。
【０８１４】
すなわち、図７９の画像処理装置では、階調変換部20400によって、実際に表示される階調を元に、人の目に見える画像を擬似的に画像として出力する。この場合、動き検出部20100では入力画像信号Vinから視線を検出（決定）しているが、階調変換部20400で変換される階調の見た目が入力画像信号Vinと大きく異ならない場合、視線方向も大きく異ならないため、このような構成にしても問題がなくなる。また階調変換部20400は、入力画像信号Vinを表示に用いる画像信号Vdに変換するものであれば何でもよく、例えば特開２００４−１３８７８３号公報などに記載の手法を用いてもよい。
【０８１５】
図８２は、第１の表示デバイスを用いて、第１の表示デバイスと異なる特性を有する第２の表示デバイスにおいて画像を表示した状態を再現することができるようにする画像処理装置の第３実施の形態の構成例を示している。
【０８１６】
この画像処理装置では、階調変換部20400の出力である画素（画像信号の）Vdを動き検出部20100へ供給する。この場合、動き検出部20100では、実際に表示する画像信号を元に視線（視線方向）を検出することになる。そのため制限された階調や拡散誤差やディザそのものが視覚的に検知される場合の視線を検出するとともに、階調変換部20400によって、実際に表示される階調を元に、人の目に見える画像を擬似的に画像として出力することができる。
【０８１７】
なお、図８２において、動き検出部20100、サブフィールド展開部20200、光量積算部20300、および階調変換部20400の構成は、図７９のものと同様であるため説明を省略する。
【０８１８】
図８３は、第１の表示デバイスを用いて、第１の表示デバイスと異なる特性を有する第２の表示デバイスにおいて画像を表示した状態を再現することができるようにする画像処理装置の第４実施の形態の構成例を示している。
【０８１９】
入力画像信号Vinは階調変換部20400へ供給され、表示に用いる画像信号Vdへ変換される。表示に用いる画像信号Vdは視覚補正部20500へ供給される。
【０８２０】
図８４は視覚補正部20500の構成例を示している。視覚補正部20500では、表示に用いる画像信号Vdを人の見た目の画像（画像信号）へと擬似的に補正する。表示に用いる画像信号Vdはディザ補正回路20501へ供給される。ディザ補正回路20501では、ディザで表示する階調を見た目の階調へと擬似的に補正する。すなわち図８１に示したようにディザ階調が用いられていた場合、人の見た目には、階調の値が平均されるものとして、図８５に示すように階調を補正する。そしてディザ補正された画像Vmbは、拡散誤差補正回路20502へ供給される。
【０８２１】
拡散誤差補正回路20502では、注目画素の周辺の画素に拡散した誤差を見た目の階調へと擬似的に補正する。すなわち、拡散誤差補正回路20502では、ディザ補正された画像信号Vmbにおいて、入力画像信号Vinとの差分（誤差）が拡散されているものとし、拡散された誤差を補正する。例えば図８６に示すように、画像信号Vmbが９０である画素の誤差は、右隣の画像信号Vmbが１１０である画素における入力画像信号Vinとの差分であるとし、１１０−１０５＝５を拡散された誤差として画像信号Vmbに加算し、視覚補正された画像信号Vmを出力する。同様に全ての画素についても同じ処理を行う。
【０８２２】
以上のように、視覚補正部20500では、階調変換部20400によって変換された階調を、人の目に見える際の階調として擬似的に補正を行い、補正した画像信号を動き検出部20100へ供給する。そのため制限された階調や拡散誤差やディザが人の目に見える際の擬似的な画像を元に視線を検出するとともに、階調変換部20400によって、実際に表示される階調を元に、人の目に見える画像を擬似的に得ることができる。なお、図８３の動き検出部20100、サブフィールド展開部20200、光量積算部20300、および階調変換部20400の構成は、図７９のものと同様であるため説明を省略する。
【０８２３】
以上のように、図６８、図７９、図８２、及び図８３の画像処理装置では、PDPに画像を表示した際に、サブフィールドの発光パターンと視線方向から、人の目に見える画像を擬似的に得ることができる。このためPDPと異なる表示デバイスにおいて、任意の画像信号をPDPに表示した際に、人の目に見える画像を擬似的に表示することが可能となる。すなわち、例えば、LCDや、CRT、有機EL、プロジェクタ等の第１の表示デバイスを用いて、第１の表示デバイスと異なる特性を有するPDP等の第２の表示デバイスにおいて画像を表示した状態を再現することができ、第２の表示デバイスの表示のエミュレーションを、第２の表示デバイスとは異なる特性の第１の表示デバイスを用いて行うことができる。
【０８２４】
なお、PDPのサブフィールドの構造として図７３を例に用いたが、サブフィールドの枚数、および各サブフィールドの輝度の重みは任意のものでよい。
【０８２５】
図８７は、図６８の画像処理装置の処理を説明するフローチャートを示している。
【０８２６】
ステップST20100において、入力画像信号Vinが、画像処理装置に入力される。次にステップST20200において、動き検出部20100が、入力画像信号Vinのフィールド（又はフレーム）を、順次、注目フィールドとして、その注目フィールドについて、画素毎に動きベクトルを検出し、その動きベクトルの方向を、視線方向として決定する。
【０８２７】
図８８は、ステップST20200における動き（ベクトル）の検出の処理を説明するフローチャートである。
【０８２８】
ステップST20201において注目フィールドの入力画像信号Vinが動き検出部20100に入力される。次にステップST20202において、動き検出部20100は、注目フィールドを構成する画素を、順次、注目画素として選択し、注目画素を中心とする所定のサイズのブロックを注目ブロックとする。そして、動き検出部20100は、注目フィールドの注目ブロックと１フィールド前の所定のサーチ範囲内の候補ブロックとの間で、相関演算を行う。次にステップST20203において、動き検出部20100は、全ての候補ブロックと演算が終了したかを判定する。終了した場合、処理はステップST20204へ進み、終了してない場合、処理は、ステップST20202へ戻り処理を継続する。ステップST20204では、動き検出部20100は、候補ブロックの中で最も相関の高い候補ブロック（差分絶対値の総和の最も小さい候補ブロック）の位置を、動きベクトルとして検出し、その動きベクトルを、注目画素における視線方向mvと決定する。そしてステップST20205において、動き検出部20100は、視線方向mvを出力する。
【０８２９】
図８７に戻り、次のステップST20300において、サブフィールド展開部20200は、入力画像信号Vinの注目フィールドをPDPに表示する際のサブフィールドの発光パターンを表す発光制御情報ＳＦを生成する。
【０８３０】
図８９は、ステップST20300におけるサブフィールドの発光パターンを表す発光制御情報ＳＦを生成するフローチャートである。
【０８３１】
ステップST20301において入力画像信号Vinの注目フィールドがサブフィールド展開部20200に入力される。次にステップST20302において、サブフィールド展開部20200は、入力画像信号Vinの注目フィールドを、式（３１）の各サブフィールドの輝度の重みの総和で表現し、発光情報Niを求める。次にステップST20303において、サブフィールド展開部20200は、発光情報Niに基づき、注目フィールドの各サブフィールドの発光、非発光の発光パターンを表す発光制御情報ＳＦを生成する。そしてステップST20304で、サブフィールド展開部20200は、サブフィールドの発光パターンを表す発光制御情報ＳＦを出力する。
【０８３２】
図８７に戻り、次のステップST20400において、光量積算部20300は、入力画像信号Vinの注目フィールドをPDPに表示した際に、人の網膜で積分される光量（人の目に見える画像）に相当する画像信号Voutを、擬似的に生成する。
【０８３３】
図９０は、ステップST20400における光量の積算を示すフローチャートである。
【０８３４】
ステップST20401において、ステップST20200で検出された注目フィールドの各画素における視線方向mvと、ステップST20300で生成された注目フィールドのサブフィールドの発光制御情報ＳＦが光量積算部20300に入力される。次にステップST20402では、光量積算部20300において、注目フィールドの各画素が、順次、注目画素として選択され、注目画素における視線方向mvに応じて、光量を積算する光量積算領域が決定される。そしてステップST20403で、光量積算部20300は、ステップST20402で決定された光量積算領域内で発光するサブフィールドの光量を、発行制御情報ＳＦが表す発光パターンに基づいて積算し、注目画素の画素値を求めることにより、その画素値で構成される出力画像（信号）Voutを生成する。そしてステップST20404で、光量積算部20300は、出力画像Voutを出力する。
【０８３５】
図８７に戻り、次のステップST20500において、図示せぬ第２の表示デバイスとしての、例えば、LCDは、生成された出力画像Voutを表示する。
【０８３６】
図９１は、図７９の画像処理装置の処理を説明するフローチャートを示している。
【０８３７】
ステップST20110において、図８７のステップST20100と同様に、入力画像信号Vinが入力される。次にステップST20210において画素毎に動きベクトル、ひいては視線方向mvを検出する。ステップST20210の動作は図８７のステップST20200と同様である。次にステップST20310において、階調変換部20400は、PDPで表示する際に行われる階調変換を行う。
【０８３８】
図９２は、ステップST20310における階調変換の動作を示すフローチャートである。
【０８３９】
ステップST20311において、入力画像信号Vinが階調変換部20400に入力される。次にステップST20312において、階調変換部20400では、入力画像信号Vinが、周辺の画像から拡散された誤差を加算することにより、画像信号Vpとされる。次にステップST20313において、階調変換部20400は、階調変換テーブル20403（図８０）に従って、画像信号Vpの階調を変換する。次にステップST20314において、階調変換部20400は、階調の変換前の画像信号Vpと変換後の画像信号Vpoとの誤差（表示階調誤差）Vpdを算出する。次にステップST20315で、階調変換部20400は、画像信号Vpoのディザ変換を行う。そしてステップST20316で、階調変換部20400は、ディザ変換によって得られた画像信号を、階調変換された画像信号Vdとして出力する。
【０８４０】
図９１に戻り、次のステップST20410で、ステップST20310で変換された画像信号Vdに対し、図８７のステップST20300と同様の処理を行う。また以下のステップST20510とST20610は、図８７のステップST20400とST20500とそれぞれ同様であるため説明を省略する。
【０８４１】
図９３は、図８２の画像処理装置の処理を説明するフローチャートを示している。
【０８４２】
なお図９３では、ステップST20220で変換された画像信号Vdに対し、次のステップST20320で視線方向（動きベクトル）の検出が実行される以外は、ステップST20120，ST20220，ST20320，ST20420，ST20520，ST20620において、それぞれ、図９１のステップST20110，ST20310，ST20210，ST20410，ST20510，ST20610と同様の処理が行われる。
【０８４３】
図９４は、図８３の画像処理装置の処理を説明するフローチャートを示している。
【０８４４】
ステップST20130において、図９３のステップST20120と同様に、入力画像信号Vinが入力される。次にステップST20230で、図９３の場合と同様に階調が変換された画像信号Vdが生成される。次にステップST20330で、ステップST20320で変換された画像信号Vdに対し、視覚補正が行われる。以下、ステップST20430，ST20530，ST20630，ST20730において、それぞれ図９３のステップST20320，ST20420，ST20520，ST20620と同様の処理が行われる。
【０８４５】
図９５は、ステップST20330における、視覚補正の動作を示すフローチャートである。ステップST20331で画像信号Vdが視覚補正部20500に入力される。次にステップST20332において、視覚補正部20500は、ディザの視覚的な効果に応じて、画像信号Vdを補正する。次にステップST20333で、視覚補正部20500は、周辺の画素に拡散した誤差の影響を擬似的に補正し、画像信号Vmを生成する。そしてステップST20334で、視覚補正部20500は、画像信号Vmを出力する。
【０８４６】
以上のように、図６８、図７９、図８２、及び図８３の画像処理装置では、PDPに画像を表示した際に、サブフィールドの発光パターンと視線方向から、人の目に見える画像を擬似的に生成する。このためPDPと異なる表示デバイスにおいて、任意の画像信号をPDPに表示した際に、人の目に見える画像を擬似的に表示することが可能となる。
【０８４７】
次に、図６８の光量積算部20300の処理の詳細を説明するが、その前に、PDPによる画像の表示について、再度説明する。
【０８４８】
PDPによる画像の表示は、図７４や図７８に示したように、PDPにおける画素位置X,Yと時間方向Ｔのサブフィールドからなる３次元的なモデル図で表現される。
【０８４９】
図９６は、PDPによる画像の表示をモデル化したモデル（以下、適宜、表示モデルという）を示している。
【０８５０】
ここで、図９６は、上述の図７４や図７８と同様の図である。
【０８５１】
表示モデルでは、PDPにおいて入力画像信号Vinを表示する表示面としてのXY平面に垂直な方向を時間Tの方向として、８つのサブフィールドＳＦ１ないしＳＦ８が時間Tの方向に並べられている。
【０８５２】
なお、表示面としてのXY平面は、例えば、表示面の左上の点を原点とするとともに、左から右方向をX方向とし、上から下方向をY方向とする。
【０８５３】
光量積算部20300（図６８）では、PDPに表示される入力画像信号Vinの画素（入力画像信号Vinに従ってPDPに表示される、入力画像信号Vinに対応する画像の画素）を、順次、注目画素として選択し、表示モデルにおいて、注目画素の領域を断面とし、かつ、注目画素における視線方向mv（注目画素について検出された動きベクトルの方向）に延びる領域を、光量の積算を行う光量積算領域として、その光量積算領域内の光量を、発光制御情報ＳＦが表すサブフィールドの発光パターンに従って積算することにより、注目画素の画素値を算出する。
【０８５４】
すなわち、光量積算部20300は、図９６に示すように、表示モデルの表示面の画素の領域を断面とし、かつ、時間Tの方向に、サブフィールドＳＦ#iの発光の光量に対応する長さだけ延びる直方体形状の領域（空間）を、画素サブフィールド領域として、画素サブフィールド領域内を光量積算領域が占める比率である占有比率に、画素サブフィールド領域に対応するサブフィールドＳＦ#iの発光パターン（サブフィールドＳＦ#iの画素サブフィールド領域が発光であるのか、又は非発光であるのか）に従った発光の光量Lを乗算することにより、画素サブフィールド領域が注目画素の画素値に影響する分の影響光量を、光量積算領域が通る画素サブフィールド領域すべてについて求める。
【０８５５】
そして、光量積算部20300は、光量積算領域が通る画素サブフィールド領域すべてについて求められた影響光量を積算することにより、その積算値を、注目画素の画素値として算出する。
【０８５６】
以下、光量積算部20300による、表示モデルを用いた、注目画素の画素値の算出の方法の詳細について説明する。
【０８５７】
図９７は、表示モデルの画素の例を示している。
【０８５８】
表示モデルでは、画素は、例えば、横と縦の長さがいずれも１の方形状の領域になっていることとする。この場合、画素の領域の面積は、１（＝１×１）である。
【０８５９】
また、表示モデルでは、画素の位置（画素位置）を、画素の左上の座標で表すこととする。この場合、例えば、画素位置(X,Y)が(300,200)の画素（としての方形状の領域）については、図９７に示すように、その左上の点の座標は(300,200)となり、右上の点の座標は(301,200)となる。また、左下の点の座標は(300,201)となり、右下の点の座標は(301,201)となる。
【０８６０】
なお、表示モデルにおける画素の、例えば、左上の点を、以下、適宜、基準点という。
【０８６１】
図９８は、表示モデルにおける光量積算領域を示している。
【０８６２】
例えば、いま、画素位置(x,y)にある画素を注目画素として、時刻T=αにおいて、注目画素（に映る被写体）が、時間Tfの間に、動きベクトル(vx,vy)で表される動き量だけ動き、時刻T=β（＝α＋Tf）において、位置(x+vx,y+vy)に移動したとする。
【０８６３】
この場合、注目画素の領域としての方形状の領域が、位置(x,y)から位置(x+vx,y+vy)に移動するのに描く軌跡が、光量積算領域（空間）となる。
【０８６４】
いま、光量積算領域の断面、つまり、位置(x,y)から位置(x+vx,y+vy)に移動する注目画素の領域を、断面領域（平面）ということとすると、断面領域は、画素の領域と同一の形状の領域であるので、４つの頂点を有する。
【０８６５】
時刻αからβまでの間の任意の時刻T=t（α≦t≦β）における断面領域の４つの頂点のうちの、左上、右上、左下、及び右下の点（頂点）を、それぞれ、A,B,C、及びDと表すこととすると、左上の点Aは、時間Tfの間に、位置(x,y)から位置(x+vx,y+vy)に移動するので、時刻tにおける点Aの座標(X,Y)は、(x+vx(t-α)/Tf,y+vy(t-α)/Tf)となる。
【０８６６】
また、右上の点Bは、点AからX方向に+1だけ離れた点であるから、時刻tにおける点Bの座標(X,Y)は、(x+vx(t-α)/Tf+1,y+vy(t-α)/Tf)となる。同様に、左下の点Cは、点AからY方向に+1だけ離れた点であるから、時刻tにおける点Cの座標(X,Y)は、(x+vx(t-α)/Tf,y+vy(t-α)/Tf+1)となり、右下の点Dは、点AからX方向に+1だけ離れ、Y方向に+1だけ離れた点であるから、時刻tにおける点Dの座標(X,Y)は、(x+vx(t-α)/Tf+1,y+vy(t-α)/Tf+1)となる。
【０８６７】
図９９は、時刻T=tの断面領域を示している。
【０８６８】
点AないしDを頂点とする断面領域は、変形しないので、任意の時刻T=tにおいて、（XY平面上に射影したときに）基準点を１以上の数だけ含む。図９９では、断面領域に、１つの基準点(a,b)が含まれている。
【０８６９】
ここで、断面領域に、複数の基準点がある場合があるが、その場合については、後述する。
【０８７０】
また、断面領域は、時刻Tの経過とともに移動し、これにより、断面領域内の基準点の位置が変化するが、これは、断面領域を基準とすれば、相対的に、基準点が、時刻Tの経過とともに移動していると捉えることができる。そして、時刻Tの経過とともに基準点が移動することによって、断面領域内の基準点が（他の基準点）に変更される場合があるが、この場合についても、後述する。
【０８７１】
断面領域では、基準点(a,b)を通り、X軸に平行な直線LXと、Y軸に平行な直線LYとが、表示モデルを構成する画素の境界になるため、光量の積算は、断面領域を、直線LXとLYとで分割して得られる領域（以下、適宜、分割領域という）ごとに行う必要がある。
【０８７２】
図９９では、基準点(a,b)が、断面領域の内部（境界以外の部分）にあり、このため、断面領域は、４つの分割領域S1,S2,S3、及びS4に分割される。なお、図９９では、基準点(a,b)の右上の領域が分割領域S1と、基準点(a,b)の左上の領域が分割領域S2と、基準点(a,b)の左下の領域が分割領域S3と、基準点(a,b)の右上の領域が分割領域S4と、それぞれされている。
【０８７３】
時刻T=tにおける分割領域Si(i=1,2,3,4)の面積(Si)は、以下の式（３２）ないし（３５）で表される。
【０８７４】
【数３２】
2008178075.tif 000034
・・・（３２）
【０８７５】
【数３３】
2008178075.tif 000035
・・・（３３）
【０８７６】
【数３４】
2008178075.tif 000036
・・・（３４）
【０８７７】
【数３５】
2008178075.tif 000037
・・・（３５）
【０８７８】
いま、表示モデル（図９６）の８つのサブフィールドＳＦ１ないしＳＦ８のうちの、ある１つのサブフィールドＳＦ#jを、注目サブフィールドＳＦ#jとして、断面領域が、注目サブフィールドＳＦ#jを、時刻T=sfaから時刻T=sfbの間に通過することとする。
【０８７９】
断面領域が、注目サブフィールドＳＦ#jを通過するときに描く軌跡としての光量積算領域は、その通過時に、分割領域S1ないしS4のそれぞれが描く軌跡の結合に等しい。
【０８８０】
いま、光量積算領域のうちの、分割領域Siが描く軌跡としての領域（分割領域Siを断面とする立体）の部分を、分割立体Viということとすると、分割立体Viの体積(Vi)は、以下の式（３６）ないし（３９）に従って、分割領域Siを、時刻tsfaからtsfbにわたって積分することで求めることができる。
【０８８１】
【数３６】
2008178075.tif 000038
・・・（３６）
【０８８２】
【数３７】
2008178075.tif 000039
・・・（３７）
【０８８３】
【数３８】
2008178075.tif 000040
・・・（３８）
【０８８４】
【数３９】
2008178075.tif 000041
・・・（３９）
【０８８５】
なお、ここでは、断面領域が、注目サブフィールドＳＦ#jを通過するときに、基準点(a,b)は変更されない（断面領域が注目サブフィールドＳＦ#jの通過を開始するときに、断面領域内に存在した基準点(a,b)が、断面領域が注目サブフィールドＳＦ#jを通過するまで、断面領域内に存在し続ける）こととする。
【０８８６】
一方、表示モデルにおいて、注目サブフィールドＳＦ#jの、画素の領域を断面として時間Tの方向に延びる直方体形状の立体である画素フィールド領域（図９６）の体積をVとすると、その画素フィールド領域の体積Vと、分割立体V1,V2,V3、及びV4の体積(Vi)との間には、式（４０）の関係がある。
【０８８７】
【数４０】
2008178075.tif 000042
・・・（４０）
【０８８８】
光量積算領域の一部である分割立体Viは、注目サブフィールドＳＦ#jの、ある画素フィールド領域の一部を占めるが、その占める比率を、占有比率ということとすると、占有比率は、Vi/Vで表され、式（３６）ないし式（４０）から求めることができる。
【０８８９】
いま、分割立体Viが一部を占める、注目サブフィールドＳＦ#jの画素フィールド領域を、占有画素フィールド領域ということとすると、その占有画素フィールド領域（の光量）が、注目画素の画素値に影響する分の光量（以下、適宜、影響光量という）は、占有比率Vi/Vに、占有画素フィールド領域の光量SFViを乗算することで求めることができる。
【０８９０】
ここで、占有画素フィールド領域の光量SFViは、注目サブフィールドＳＦ#jの占有画素フィールド領域が発光している場合には、その注目サブフィールドＳＦ#jの輝度の重みLとされ、注目サブフィールドＳＦ#jの占有画素フィールド領域が発光していない（非発光である）場合には、0とされる。なお、注目サブフィールドＳＦ#jの占有画素フィールド領域の発光／非発光は、サブフィールド展開部20200（図６８）から光量積算部20300に供給される発光制御情報ＳＦが表す発光パターンから認識することができる。
【０８９１】
注目サブフィールドＳＦ#j（の光量）が、注目画素の画素値に影響する分の光量（注目サブフィールドＳＦ#jによる光量）PSFL,jは、分割立体V1,V2,V3、及びV4それぞれが一部を占有する占有画素フィールド領域の影響光量SFV1×V1/V,SFV2×V2/V,SFV3×V3/V、及びSFV4×V4/Vの総和であるから、式（４１）により求めることができる。
【０８９２】
【数４１】
2008178075.tif 000043
・・・（４１）
【０８９３】
光量積算部20300（図６８）では、式（４１）に従い、注目画素について、８つのサブフィールドＳＦ１ないしＳＦ８それぞれによるPSFL,1ないしPSFL,8が求められる。そして、光量積算部20300では、８つのサブフィールドＳＦ１ないしＳＦ８それぞれによるPSFL,1ないしPSFL,8が積算され、その積算値PSFL,1+PSFL,2+・・・+PSFL,8が、注目画素の画素値とされる。なお、積算値PSFL,1+PSFL,2+・・・+PSFL,8を求めることは、光量積算領域が通る画素サブフィールド領域すべての影響光量を求め、その影響光量を積算することと等価である。
【０８９４】
ところで、時刻Tの経過とともに移動する断面領域については、上述したように、断面領域内に、複数の基準点が存在する場合や、断面領域内の基準点が（他の基準点）に変更される場合がある。図１００及び図１０１を参照して、そのような場合について説明する。
【０８９５】
図１００及び図１０１は、表示モデルの位置(x,y)にある画素を注目画素として、時刻Tの経過とともに表示モデル内を移動する断面領域を示している。
【０８９６】
なお、図１０１は、図１００に続く図である。
【０８９７】
図１００及び図１０１では、画素位置(x,y)にある画素を注目画素として、注目画素（に映る被写体）が、時刻T=tsfaから時刻T=tsfbにかけて、動きベクトル(+2,-1)で表される動き量だけ動き、位置(x+2,y-1)に移動している。
【０８９８】
以上のように、位置(x,y)から位置(x+2,y-1)に移動する注目画素の領域である断面領域においては、その断面領域と、表示モデルの画素の領域との（XY平面から見た）位置が完全に一致するとき、その画素の領域の４つの頂点が、基準点として、断面領域内に存在する。
【０８９９】
すなわち、例えば、移動を開始するときの位置(x,y)にある断面領域（左上の頂点の位置が位置(x,y)の断面領域）内には、点(x,y)、点(x+1,y)、点(x,y+1)、及び点(x+1,y+1)の４つの基準点が存在する。
【０９００】
以上のように、断面領域内に複数の基準点が存在する場合、例えば、注目画素における視線方向mv（注目画素について検出された動きベクトルの方向）にある１つの基準点が、注目画素の画素値を求めるのに用いる基準点（以下、適宜、注目基準点という）として選択される。
【０９０１】
すなわち、例えば、注目画素における視線方向mvを表す動きベクトルのX成分が０より大（符号が正）で、Y成分が０以下（Y成分が０か、又はその符号が負）である場合には、４つの基準点(x,y),(x+1,y),(x,y+1)、及び(x+1,y+1)のうちの、右上の基準点(x+1,y)が、注目基準点として選択される。
【０９０２】
また、例えば、注目画素における視線方向mvを表す動きベクトルのX成分が０以下で、Y成分が０以下である場合には、４つの基準点(x,y),(x+1,y),(x,y+1)、及び(x+1,y+1)のうちの、左上の基準点(x,y)が、注目基準点として選択される。
【０９０３】
さらに、例えば、注目画素における視線方向mvを表す動きベクトルのX成分が０以下で、Y成分が０より大である場合には、４つの基準点(x,y),(x+1,y),(x,y+1)、及び(x+1,y+1)のうちの、左下の基準点(x,y+1)が、注目基準点として選択される。
【０９０４】
また、例えば、注目画素における視線方向mvを表す動きベクトルのX成分及びY成分がいずれも０より大である場合には、４つの基準点(x,y),(x+1,y),(x,y+1)、及び(x+1,y+1)のうちの、右下の基準点(x+1,y+1)が、注目基準点として選択される。
【０９０５】
図１００では、注目画素における視線方向mvを表す動きベクトルは、ベクトル(+2,-1)であるため、右上の基準点(x+1,y)が、注目基準点として選択される。
【０９０６】
以上のようにして、注目基準点(x+1,y)が選択された後は、断面領域は、注目基準点(x+1,y)によって、図９９で説明した４つの分割領域S1,S2,S3、及びS4に分割することができ、したがって、断面領域が視線方向mvに移動することにより、その断面領域内に、新たな基準点が含まれる状態とならない限り、式（３２）ないし式（４１）に従って、注目画素の画素値を求めることができる。
【０９０７】
一方、断面領域が視線方向mvに移動することにより、その断面領域内に、新たな基準点が含まれる状態となった場合、その新たな基準点を対象として、上述した場合と同様にして、新たな注目基準点が選択し直され、これにより、注目基準点が変更される。
【０９０８】
すなわち、例えば、図１００では、時刻T=γにおいて、断面領域の位置のX座標x+1が、表示モデルの画素の位置のX座標x+1と一致し、これにより、断面領域内に、新たな基準点(x+2,y)が含まれる状態となっている。
【０９０９】
この場合、新たな基準点(x+2,y)を対象として、新たな注目基準点が選択し直されるが、いまの場合、新たな基準点は、基準点(x+2,y)だけなので、その基準点(x+2,y)が、新たな注目基準点として選択され、これにより、注目基準点が、基準点(x+1,y)から基準点(x+2,y)に変更される。
【０９１０】
なお、断面領域の位置のY座標が、表示モデルの画素の位置のY座標と一致し、これにより、断面領域内に、新たな基準点が含まれる状態となった場合も、上述したように、注目基準点が変更される。
【０９１１】
図１０１は、注目基準点が変更された後、すなわち、新たな注目基準点(x+2,y)が選択された後の断面領域を示している。
【０９１２】
新たな注目基準点が選択された後は、断面領域は、その新たな注目基準点によって、図９９で説明した場合と同様に、４つの分割領域に分割することができる。図１０１では、断面領域は、４つの分割領域S1',S2',S3'、及びS4'に分割されている。
【０９１３】
新たな注目基準点の選択後、断面領域が視線方向mvに移動することにより、その断面領域内に、新たな基準点が含まれる状態となった場合、その新たな基準点を対象として、上述した場合と同様にして、新たな注目基準点が選択し直され、これにより、注目基準点が変更される。
【０９１４】
図１０１では、時刻T=tsfbにおいて、断面領域の位置のX座標x+2が、表示モデルの画素の位置(x+2,y-1)のX座標x+2と一致するとももに、断面領域の位置のY座標y-1が、表示モデルの画素の位置(x+2,y-1)のY座標y-1と一致し、これにより、断面領域内に、３つの新たな基準点(x+2,y-1),(x+3,y-1)、及び(x+3,y)が含まれる状態となっている。
【０９１５】
断面領域が、それ以降も移動する場合には、３つの新たな基準点(x+2,y-1),(x+3,y-1)、及び(x+3,y)の中から、上述したようにして、新たな注目基準点が選択し直される。
【０９１６】
以上のように、注目基準点を選択し直す（変更する）ことで、光量積算領域が占有画素フィールド領域（図９６）を占める占有比率、つまり、占有画素フィールド領域のうちの、光量積算領域が占める部分（この部分は、上述の分割立体に相当するので、この部分を、以下、適宜、分割立体の部分という）Vεの体積(Vε)と、占有画素フィールド領域Vの体積(V)との比Vε/Vを求めることができる。
【０９１７】
すなわち、例えば、図１００及び図１０１に示したように、断面領域が、時刻T=tsfaから時刻T=tsfbにかけて、位置(x,y)から位置(X+2,y-1)に移動して、注目サブフィールドＳＦ#jを通過する場合において、注目基準点の変更が、時刻T=γにおいて１回だけ行われるときには、注目サブフィールドＳＦ#jの、例えば、位置(x+1,y-1)の画素の領域を断面とする占有画素フィールド領域のうちの光量積算領域が占める分割立体の部分Vεの体積(Vε)は、式（４２）で求めることができる。
【０９１８】
【数４２】
2008178075.tif 000044
・・・（４２）
【０９１９】
ここで、式（４２）において、S1は、図１００に示すように、基準点(x+1,y)が注目基準点となっている時刻T=tsfaから時刻T=γまでの間の、占有画素フィールド領域の断面となっている位置(x+1,y-1)の画素の領域上の分割領域の面積を表す。また、S2'は、図１０１に示すように、基準点(x+2,y)が注目基準点となっている時刻T=γから時刻T=tsfbまでの間の、占有画素フィールド領域の断面となっている位置(x+1,y-1)の画素の領域上の分割領域の面積を表す。
【０９２０】
式（４２）に示したように、注目サブフィールドＳＦ#jの、ある位置(X,Y)の画素の領域を断面とする占有画素フィールド領域のうちの光量積算領域が占める分割立体の部分Vεの体積(Vε)は、積分の区間を、注目基準点が変更される区間（式（４２）では、時刻T=tsfaから時刻T=γまでの間と、時刻T=γから時刻T=tsfbまでの間）に分けて、占有画素フィールド領域の断面となっている画素の領域上の分割領域の面積（式（４２）では、面積S1とS2'）を積分することで求めることができる。
【０９２１】
そして、光量積算領域が占有画素フィールド領域を占める占有比率Vε/Vは、占有画素フィールド領域のうちの光量積算領域が占める分割立体の部分Vεの体積(Vε)を、占有画素フィールド領域Vの体積(V)で除算することにより求めることができる。
【０９２２】
占有比率Vε/Vを求めた後は、図９８及び図９９で説明したように、占有比率Vi/Vに、占有画素フィールド領域の光量を乗算することで、占有画素フィールド領域（の光量）が注目画素の画素値に影響する分の光量（影響光量）を求めることができる。そして、光量積算領域が通る画素サブフィールド領域すべての影響光量を求め、その影響光量を積算することで、注目画素の画素値を求めることができる。
【０９２３】
次に、式（４２）に示したように、占有画素フィールド領域のうちの光量積算領域が占める分割立体の部分Vεの体積(Vε)を求めるには、注目基準点が変更される時刻（式（４２）では、時刻γ）（以下、適宜、変更時刻という）が必要となる。
【０９２４】
注目基準点の変更は、断面領域の位置のX座標が、表示モデルの画素の位置のX座標と一致するか、又は、断面領域の位置のY座標が、表示モデルの画素の位置のY座標y-1と一致するときに生じる。したがって、変更時刻は、次のようにして求めることができる。
【０９２５】
すなわち、例えば、いま、上述の図９８に示したように、画素位置(x,y)にある画素を注目画素として、時刻T=αにおいて、位置(x,y)にある断面領域が、時間Tfの間に、動きベクトル(vx,vy)で表される動き量だけ動き、時刻T=β（＝α＋Tf）において、位置(x+vx,y+vy)に移動したとする。
【０９２６】
この場合、断面領域の位置のX座標が、表示モデルの画素の位置のX座標と一致する時刻としての変更時刻Tcxは、式（４３）で表される。
【０９２７】
【数４３】
2008178075.tif 000045
・・・（４３）
【０９２８】
ここで、動きベクトルのX成分vxは、整数値をとることとする。
【０９２９】
また、断面領域の位置のY座標が、表示モデルの画素の位置のY座標と一致する時刻としての変更時刻Tcyは、式（４４）で表される。
【０９３０】
【数４４】
2008178075.tif 000046
・・・（４４）
【０９３１】
ここで、動きベクトルのY成分vyは、整数値をとることとする。
【０９３２】
なお、動きベクトルのX成分vxが0以外の値である場合には、時刻Tが、式（４３）に従って求められる変更時刻Tcxになるごとに、直前に注目基準点であった基準点のX座標に+1又は-1を加算した点が、新たな注目基準点（変更後の基準点）となる。すなわち、動きベクトルのX成分vxが正である場合には、直前に注目基準点であった基準点のX座標を+1した点が、新たな注目基準点となり、動きベクトルのX成分vxが負である場合には、直前に注目基準点であった基準点のX座標を-1した点が、新たな注目基準点となる。
【０９３３】
同様に、動きベクトルのY成分vyが0以外の値である場合には、時刻Tが、式（４４）に従って求められる変更時刻Tcyになるごとに、直前に注目基準点であった基準点のY座標に+1又は-1を加算した点が、新たな注目基準点となる。すなわち、動きベクトルのY成分vyが正である場合には、直前に注目基準点であった基準点のY座標を+1した点が、新たな注目基準点となり、動きベクトルのY成分vyが負である場合には、直前に注目基準点であった基準点のY座標を-1した点が、新たな注目基準点となる。
【０９３４】
なお、変更時刻TcxとTcyとが等しい場合には、直前に注目基準点であった基準点のX座標及びY座標の両方を、上述したように、+1又は-1した点が、新たな注目基準点となる。
【０９３５】
ここで、図１００及び図１０１では、時刻T=tsfaにおいて、位置(x,y)にある断面領域が、時間Tfの間に、動きベクトル(vx,vy)=(+2,-1)で表される動き量だけ動き、時刻T=tsfb（＝tsfa＋Tf）において、位置(x+2,y-1)に移動している。
【０９３６】
図１００及び図１０１において、時刻T=γは、式（４３）の変数Nが1であるときの変更時刻Tcxであり、式（４３）において、Tf=tsfb-tsfa，N=1、及びvx=+2とすることにより、変更時刻Tcx=γは、式(tsfb-tsfa)×1/|+2|に従って求めることができる。
【０９３７】
次に、図１０２のフローチャートを参照して、図９０で説明した、図８７のステップST20400における光量の積算の処理の詳細について、さらに説明する。
【０９３８】
ステップST21001において、図８７のステップST20200で検出された注目フィールドの各画素における視線方向mvが、動き検出部20100（図６８）から光量積算部20300に供給されるとともに、図８７のステップST20300で生成された注目フィールドのサブフィールドの発光パターンを表す発光制御情報ＳＦが、サブフィールド展開部20200（図６８）から光量積算部20300に供給される。
【０９３９】
ここで、ステップST21001は、図９０のステップST20401に対応する。
【０９４０】
その後、処理は、ステップST21001からステップST21002に進み、光量積算部20300（図７５）において、光量積算領域決定回路20301は、注目フィールドを構成する画素のうちの、まだ注目画素として選択していない画素の１つを、注目画素に選択して、処理は、ステップST21003に進む。
【０９４１】
ステップST21003では、光量積算領域決定回路20301は、注目画素について、その注目画素における視線方向mvに基づき、表示モデルの基準点の中から、初期（最初）の注目基準点となる基準点を設定（選択）し、処理は、ステップST21004に進む。
【０９４２】
ステップST21004では、光量積算領域決定回路20301は、式（４３）及び式（４４）で説明したように、注目画素について、注目基準点が変更する変更時刻を求めるとともに、各変更時刻において、新たな注目基準点となる基準点を求めて、処理は、ステップST21005に進む。
【０９４３】
ステップST21005では、光量積算領域決定回路20301は、注目画素における視線方向mvと、ステップST21004で求めた変更時刻、及び、各変更時刻において新たな注目基準点となる基準点とを用いて、光量積算領域を求める。
【０９４４】
すなわち、ステップST21005では、光量積算領域決定回路20301は、注目画素における視線方向mvと、変更時刻、及び、各変更時刻において新たな注目基準点となる基準点とを用いることにより、８つのサブフィールドＳＦ１ないしＳＦ８それぞれについて、占有画素フィールド領域のうちの、注目画素の光量積算領域が占める分割立体の部分Vi（式（４１））の体積(Vi)を求める。ここで、８つのサブフィールドＳＦ１ないしＳＦ８それぞれについて得られる分割立体の部分Viをすべて合わせた領域が、光量積算領域となる。
【０９４５】
ステップST21005では、さらに、光量積算領域決定回路20301は、８つのサブフィールドＳＦ１ないしＳＦ８それぞれについて、注目画素の光量積算領域が占有画素フィールド領域を占める占有比率Vi/Vを求め、処理は、ステップST21006に進む。
【０９４６】
ステップST21006では、光量積算領域決定回路20301は、８つのサブフィールドＳＦ１ないしＳＦ８それぞれについて、注目画素の光量積算領域が占有画素フィールド領域を占める占有比率Vi/Vに、その占有画素フィールド領域の光量SFViを乗算することで、式（４１）で説明したように、占有画素フィールド領域（の光量）が注目画素の画素値に影響する分の光量（影響光量）PSFL,1ないしPSFL,8を求め、光量積算回路20302に供給する。
【０９４７】
なお、サブフィールドＳＦ#jの占有画素フィールド領域の光量SFViは、サブフィールドＳＦ#jが発光している場合には、そのサブフィールドＳＦ#jの輝度の重みLとされ、サブフィールドＳＦ#jが発光していない（非発光である）場合には、0とされる。光量積算領域決定回路20301は、サブフィールドＳＦ#jの発光／非発光を、サブフィールド展開部20200（図６８）から供給される発光制御情報ＳＦが表す発光パターンから認識する。
【０９４８】
ここで、以上のステップST21002ないしステップST21006が、図９０のステップST20402に対応する。
【０９４９】
その後、処理は、ステップST21006からステップST21007に進み、光量積算回路20302は、光量積算領域決定回路20301からの影響光量PSFL,1ないしPSFL,8を積算することで、注目画素の画素値を求め、処理は、ステップST21008に進む。
【０９５０】
ここで、ステップST21007は、図９０のステップST20403に対応する。
【０９５１】
ステップST21008では、光量積算領域決定回路20301が、注目フィールドを構成する画素のすべてを、注目画素としたかどうかを判定する。
【０９５２】
ステップST21008において、注目フィールドを構成する画素のすべてを、まだ、注目画素としていないと判定された場合、処理は、ステップST21002に戻り、光量積算領域決定回路20301は、注目フィールドを構成する画素のうちの、まだ注目画素として選択していない画素の１つを、注目画素に新たに選択し、以下、同様の処理が繰り返される。
【０９５３】
また、ステップST21008において、注目フィールドを構成する画素のすべてを、注目画素としたと判定された場合、処理は、ステップST21009に進み、光量積算回路20302は、注目フィールドを構成する画素のすべてを注目画素として求めた画素値からなる出力画像Voutを出力する。
【０９５４】
ここで、ステップST21009は、図９０のステップST20404に対応する。
【０９５５】
次に、図１０３は、図６８の光量積算部20300の他の構成例を示している。
【０９５６】
なお、図中、図７５の場合と対応する部分については、同一の符号を付してあり、以下では、その説明は、適宜省略する。
【０９５７】
すなわち、図１０３の光量積算部20300は、光量積算回路20302が設けられている点で、図７５の場合と共通するが、図７５の光量積算領域決定回路20301に代えて、光量積算値テーブル記憶部20303、及び光量積算領域選択回路20304が設けられている点で、図７５の場合と相違する。
【０９５８】
図１０３の光量積算部20300では、視線方向mvと、占有比率とを対応付けたテーブル（以下、適宜、光量積算値テーブルという）を用い、注目画素における視線方向mvに基づき、注目画素について、占有比率が求められる。
【０９５９】
すなわち、図１０３において、光量積算値テーブル記憶部20303は、光量積算値テーブルを記憶している。
【０９６０】
光量積算値テーブル記憶部20303には、動き検出部20100（図６８）から、注目フィールドの各画素における視線方向mvが供給される。光量積算値テーブル記憶部20303は、注目フィールドを構成する画素を、順次、注目画素として、そこに供給される注目画素における視線方向mvに対付けられている占有比率を、注目画素の光量積算領域が占有画素フィールド領域を占める占有比率Vi/Vとして、光量積算値テーブルから読み出し、光量積算領域選択回路20304に供給する。
【０９６１】
光量積算領域選択回路20304には、上述したように、光量積算値テーブル記憶部20303から占有比率が供給される他、サブフィールド展開部20200（図６８）から、注目フィールドのサブフィールドの発光パターンを表す発光制御情報ＳＦが供給される。
【０９６２】
光量積算領域選択回路20304は、サブフィールドＳＦ#jの占有画素フィールド領域の発光／非発光を、サブフィールド展開部20200からの発光制御情報ＳＦが表す発光パターンから認識する。さらに、光量積算領域選択回路20304は、サブフィールドＳＦ#jの占有画素フィールド領域が発光している場合には、その占有画素フィールド領域の光量SFViを、そのサブフィールドＳＦ#jの輝度の重みLに設定し、サブフィールドＳＦ#jの占有画素フィールド領域が発光していない（非発光である）場合には、その占有画素フィールド領域の光量SFViを、0に設定する。
【０９６３】
そして、光量積算領域選択回路20304は、８つのサブフィールドＳＦ１ないしＳＦ８それぞれについて、光量積算値テーブル記憶部20303からの、注目画素の光量積算領域が占有画素フィールド領域を占める占有比率Vi/Vに、その占有画素フィールド領域の光量SFViを乗算することで、式（４１）で説明したように、占有画素フィールド領域（の光量）が注目画素の画素値に影響する分の光量（影響光量）PSFL,1ないしPSFL,8を求め、光量積算回路20302に供給する。
【０９６４】
図１０４は、図１０３の光量積算値テーブル記憶部20303に記憶された光量積算値テーブルを、模式的に示している。
【０９６５】
光量積算値テーブルには、動き検出部20100が検出し得る動きベクトルとしての視線方向mvと、その視線方向mvに対して計算によりあらかじめ求められた、８つのサブフィールドＳＦ１ないしＳＦ８それぞれについての、画素の領域を断面とする光量積算領域が占有画素フィールド領域を占める占有比率Vi/Vとが対応付けられて記憶されている。
【０９６６】
すなわち、光量積算値テーブルは、視線方向mvごとに用意されている。したがって、視線方向mvとしての動きベクトルのサーチ範囲が、例えば、後述するように、１６×１６画素の範囲であり、視線方向mvが２５６通りをとり得ると、光量積算値テーブルは、２５６個だけ存在する。
【０９６７】
１つの視線方向mvに対する光量積算値テーブルには、８つのサブフィールドＳＦ１ないしＳＦ８それぞれについての占有比率Vi/Vが登録されており、これにより、視線方向mvと、その視線方向mvに対する、８つのサブフィールドＳＦ１ないしＳＦ８それぞれについての占有比率Vi/Vとが対応付けられている。
【０９６８】
図１０４は、ある１つの視線方向mvに対する光量積算値テーブルを示している。
【０９６９】
１つの視線方向mvに対する光量積算値テーブルは、例えば、横軸をサブフィールドＳＦ#jとし、縦軸を注目画素からの相対位置[x,y]とするテーブルになっている。
【０９７０】
ここで、本実施の形態では、８つのサブフィールドＳＦ１ないしＳＦ８があるので、光量積算値テーブルの横軸には、その８つのサブフィールドＳＦ１ないしＳＦ８それぞれに対応する欄が設けられる。
【０９７１】
また、光量積算値テーブルの縦軸の相対位置[x,y]のx座標とy座標は、注目画素の位置を基準（原点）とするX方向の位置とY方向の位置を、それぞれ表す。例えば、相対位置[1,0]は、注目画素の右に隣接する画素の位置を表し、例えば、相対位置[0,-1]は、注目画素の上に隣接する画素の位置を表す。
【０９７２】
いま、視線方向mvとしての動きベクトルのサーチ範囲が、例えば、注目画素を中心として、X方向及びY方向のいずれにも、−８画素ないし＋７画素の、１６×１６画素の範囲であるとすると、注目画素が１フィールドの間に動く動き量は、注目画素を基準として、[-8,-8]ないし[7,7]の２５６通りがあるので、光量積算値テーブルの縦軸には、その２５６通りの相対位置[x,y]それぞれに対応する欄が設けられる。
【０９７３】
視線方向mvが、ある動きベクトルMVで表される場合の、その視線方向MVに対する光量積算値テーブルでは、ある相対位置[x,y]の行の、あるサブフィールドＳＦ#jの列の欄には、注目画素の視線方向mvが、動きベクトルMVで表される場合において、注目画素からの相対位置が[x,y]で表される画素の領域を断面とする、サブフィールドＳＦ#jの占有画素フィールド領域BSF#j[x,y]を、注目画素の光量積算領域が占める占有比率RSF#j[x,y]（式（４１）のVi/V）、又は、式（４２）のVεを占有画素フィールド領域Vの体積(V)で除算したVε/V）が、計算によりあらかじめ求められて登録されている。
【０９７４】
なお、注目画素からの相対位置が[x,y]で表される画素の領域を断面とする、サブフィールドＳＦ#jの占有画素フィールド領域BSF#j[x,y]を、注目画素の光量積算領域が通らない場合（占有画素フィールド領域BSF#j[x,y]と、注目画素の光量積算領域とが重複しない場合）、その占有画素フィールド領域BSF#j[x,y]を、注目画素の光量積算領域が占める占有比率RSF#j[x,y]は、0とされる。
【０９７５】
ここで、注目画素における視線方向mvが、例えば、動きベクトル(1,-1)で表される場合には、注目画素の光量積算領域は、注目画素を中心とする１６×１６画素のサーチ範囲にある２５６画素それぞれの領域を断面とする、サブフィールドＳＦ１ないしＳＦ８それぞれの占有画素フィールド領域（２５６×８個の占有画素フィールド領域）のうちの、注目画素の領域を断面とする、サブフィールドＳＦ１ないしＳＦ８それぞれの８個の占有画素フィールド領域BSF1[0,0]ないしBSF8[0,0]、注目画素の右に隣接する画素を断面とする、サブフィールドＳＦ１ないしＳＦ８それぞれの８個の占有画素フィールド領域BSF1[1,0]ないしBSF8[1,0]、注目画素の上に隣接する画素を断面とする、サブフィールドＳＦ１ないしＳＦ８それぞれの８個の占有画素フィールド領域BSF1[0,-1]ないしBSF8[0,-1]、及び、注目画素の右上に隣接する画素を断面とする、サブフィールドＳＦ１ないしＳＦ８それぞれの８個の占有画素フィールド領域BSF1[1,-1]ないしBSF8[1,-1]だけを通り、他の占有画素フィールド領域を通らない。
【０９７６】
したがって、注目画素の領域を断面とする、サブフィールドＳＦ１ないしＳＦ８それぞれの８個の占有画素フィールド領域BSF1[0,0]ないしBSF8[0,0]のうちの、注目画素の光量積算領域が通る部分（分割立体の部分）の体積（式（３６）ないし式（４０）のVi）を、VSF1[0,0]ないしVSF8[0,0]と、注目画素の右に隣接する画素を断面とする、サブフィールドＳＦ１ないしＳＦ８それぞれの８個の占有画素フィールド領域BSF1[1,0]ないしBSF8[1,0]のうちの、注目画素の光量積算領域が通る部分の体積を、VSF1[1,0]ないしVSF8[1,0]と、注目画素の上に隣接する画素を断面とする、サブフィールドＳＦ１ないしＳＦ８それぞれの８個の占有画素フィールド領域BSF1[0,-1]ないしBSF8[0,-1]のうちの、注目画素の光量積算領域が通る部分の体積を、VSF1[0,-1]ないしVSF8[0,-1]と、注目画素の右上に隣接する画素を断面とする、サブフィールドＳＦ１ないしＳＦ８それぞれの８個の占有画素フィールド領域BSF1[1,-1]ないしBSF8[1,-1]のうちの、注目画素の光量積算領域が通る部分の体積を、VSF1[1,-1]ないしVSF8[1,-1]と、それぞれ表すこととすると、視線方向mvが、動きベクトル(1,-1)で表される、その視線方向mvに対する光量積算値テーブルでは、占有比率RSF1[0,0]ないしRSF8[0,0]が、値VSF1[0,0]/VないしVSF8[0,0]/Vに、占有比率RSF1[1,0]ないしRSF8[1,0]が、値VSF1[1,0]/VないしVSF8[1,0]/Vに、占有比率RSF1[0,-1]ないしRSF8[0,-1]が、値VSF1[0,-1]/VないしVSF8[0,-1]/Vに、占有比率RSF1[1,-1]ないしRSF8[1,-1]が、値VSF1[1,-1]/VないしVSF8[1,-1]/Vに、それぞれなっており、他の占有比率は、すべて0になっている。
【０９７７】
光量積算値テーブル記憶部20303（図１０３）は、注目画素における視線方向mvに対する光量積算値テーブルに登録されている、８つのサブフィールドＳＦ１ないしＳＦ８それぞれと、２５６通りの相対位置[-8,-8]ないし[7,7]それぞれとの、合計で、８×２５６通りの占有比率を読み出し、光量積算領域選択回路20304に供給する。
【０９７８】
光量積算領域選択回路20304は、光量積算値テーブル記憶部20303からの占有比率の中から、値が0以外の占有比率を選択し、その値が0以外の占有比率に、対応する光量SFViを乗算することで、影響光量を求める。
【０９７９】
なお、ここでは、光量積算領域選択回路20304が、光量積算値テーブル記憶部20303からの占有比率の中から、値が0以外の占有比率を選択し、その値が0以外の占有比率に、対応する光量SFViを乗算することで、影響光量を求めることとしたが、値が0の占有比率に対しては、どのような光量SFViを乗算を乗算しても、影響光量は0となるので、光量積算領域選択回路20304では、光量積算値テーブル記憶部20303からの占有比率の中から、値が0以外の占有比率を特に選択することなく、光量積算値テーブル記憶部20303からの占有比率のそれぞれに、対応する光量SFViを乗算することで、影響光量を求めることが可能である。
【０９８０】
次に、図１０５のフローチャートを参照して、図１０３の光量積算部20300による光量の積算の処理の詳細について説明する。
【０９８１】
ステップST21011において、注目フィールドの各画素における視線方向mvが、動き検出部20100（図６８）から光量積算部20300の光量積算値テーブル記憶部20303に供給されるとともに、注目フィールドのサブフィールドの発光パターンを表す発光制御情報ＳＦが、サブフィールド展開部20200（図６８）から光量積算部20300の光量積算領域選択回路20304に供給される。
【０９８２】
その後、処理は、ステップST21011からステップST21012に進み、光量積算値テーブル記憶部20303は、注目フィールドを構成する画素のうちの、まだ注目画素として選択していない画素の１つを、注目画素に選択して、処理は、ステップST21013に進む。
【０９８３】
ステップST21013では、光量積算値テーブル記憶部20303は、動き検出部20100からの視線方向mvのうちの、注目画素における視線方向mvに対する光量積算値テーブルから、そこに登録されているすべての占有比率RSF#j[x,y]を読み出して、光量積算領域選択回路20304に供給し、処理は、ステップST21014に進む。
【０９８４】
ステップST21014では、光量積算領域選択回路20304は、光量積算値テーブル記憶部20303からの占有比率RSF#j[x,y]に、対応する占有画素フィールド領域BSF#j[x,y]の光量SFjを乗算することで、占有画素フィールド領域BSF#j[x,y]（の光量）が注目画素の画素値に影響する分の光量（影響光量）を求め、光量積算回路20302に供給する。
【０９８５】
なお、サブフィールドＳＦ#jの占有画素フィールド領域の光量SFjは、サブフィールドＳＦ#jが発光している場合には、そのサブフィールドＳＦ#jの輝度の重みLとされ、サブフィールドＳＦ#jが発光していない（非発光である）場合には、0とされる。光量積算領域選択回路20304は、サブフィールドＳＦ#jの発光／非発光を、サブフィールド展開部20200（図６８）から供給される発光制御情報ＳＦが表す発光パターンから認識する。
【０９８６】
その後、処理は、ステップST21014からステップST21015に進み、光量積算回路20302は、光量積算領域選択回路20304からの影響光量すべてを積算することで、注目画素の画素値を求め、処理は、ステップST21016に進む。
【０９８７】
ステップST21016では、光量積算領域選択回路20304が、注目フィールドを構成する画素のすべてを、注目画素としたかどうかを判定する。
【０９８８】
ステップST21016において、注目フィールドを構成する画素のすべてを、まだ、注目画素としていないと判定された場合、処理は、ステップST21012に戻り、光量積算値テーブル記憶部20303は、注目フィールドを構成する画素のうちの、まだ注目画素として選択していない画素の１つを、注目画素に新たに選択し、以下、同様の処理が繰り返される。
【０９８９】
また、ステップST21016において、注目フィールドを構成する画素のすべてを、注目画素としたと判定された場合、処理は、ステップST21017に進み、光量積算回路20302は、注目フィールドを構成する画素のすべてを注目画素として求めた画素値からなる出力画像Voutを出力する。
【０９９０】
次に、上述した一連の処理は、専用のハードウェアにより行うこともできるし、ソフトウェアにより行うこともできる。一連の処理をソフトウェアによって行う場合には、そのソフトウェアを構成するプログラムが、汎用のコンピュータ等にインストールされる。
【０９９１】
そこで、図１０６は、上述した一連の処理を実行するプログラムがインストールされるコンピュータの一実施の形態の構成例を示している。
【０９９２】
プログラムは、コンピュータに内蔵されている記録媒体としてのハードディスク21105やROM21103に予め記録しておくことができる。
【０９９３】
あるいはまた、プログラムは、フレキシブルディスク、CD-ROM(Compact Disc Read Only Memory)，MO(Magneto Optical)ディスク，DVD(Digital Versatile Disc)、磁気ディスク、半導体メモリなどのリムーバブル記録媒体21111に、一時的あるいは永続的に格納（記録）しておくことができる。このようなリムーバブル記録媒体21111は、いわゆるパッケージソフトウエアとして提供することができる。
【０９９４】
なお、プログラムは、上述したようなリムーバブル記録媒体21111からコンピュータにインストールする他、ダウンロードサイトから、ディジタル衛星放送用の人工衛星を介して、コンピュータに無線で転送したり、LAN(Local Area Network)、インターネットといったネットワークを介して、コンピュータに有線で転送し、コンピュータでは、そのようにして転送されてくるプログラムを、通信部21108で受信し、内蔵するハードディスク21105にインストールすることができる。
【０９９５】
コンピュータは、CPU(Central Processing Unit)21102を内蔵している。CPU21102には、バス21101を介して、入出力インタフェース21110が接続されており、CPU21102は、入出力インタフェース21110を介して、ユーザによって、キーボードや、マウス、マイク等で構成される入力部21107が操作等されることにより指令が入力されると、それにしたがって、ROM(Read Only Memory)21103に格納されているプログラムを実行する。あるいは、また、CPU21102は、ハードディスク21105に格納されているプログラム、衛星若しくはネットワークから転送され、通信部21108で受信されてハードディスク21105にインストールされたプログラム、またはドライブ21109に装着されたリムーバブル記録媒体21111から読み出されてハードディスク21105にインストールされたプログラムを、RAM(Random Access Memory)21104にロードして実行する。これにより、CPU21102は、上述したフローチャートにしたがった処理、あるいは上述したブロック図の構成により行われる処理を行う。そして、CPU21102は、その処理結果を、必要に応じて、例えば、入出力インタフェース21110を介して、LCD(Liquid Crystal Display)やスピーカ等で構成される出力部21106から出力、あるいは、通信部21108から送信、さらには、ハードディスク21105に記録等させる。
【０９９６】
［CRT(Cathode Ray Tube)やLCD(Liquid Crystal Display)等の他のデバイスのディスプレイでプラズマディスプレイ(PDP(Plasma Display Panel))の見た目を再現する事を信号処理により可能とする画像信号処理装置の実施の形態］
【０９９７】
次に、PDPに画像を表示したときの見た目を、他のデバイスのディスプレイで再現する画像信号処理装置の実施の形態について説明する。
【０９９８】
PDPでは、例えば、河村正行著、「よくわかるプラズマテレビ」、電波新聞社に記載されているように、ストライプリブ構造等が採用され、各画素は、R(Red),G(Green),B(Blue)を発光する部分がストライプに配列されて構成される。
【０９９９】
ところで、PDPに画像がどのように表示されるかを評価する場合に、CRTやLCDなどのモニタを評価用モニタとして使用すると、PDPとLCD等とでは、表示特性が異なるため、LCDに表示された画像によっては、PDPに表示される（であろう）画像の見た目や画質を評価することが困難であった。
【１０００】
すなわち、評価時にLCDに表示される画像の画質と、実際のPDPでの観賞時にPDPに表示される画像の画質とが必ずしも一致してはいなかった。
【１００１】
そこで、以下では、PDP以外の、例えば、LCD等のディスプレイで、PDP（に画像を表示したとき）の見た目を再現する事を信号処理により可能とする実施の形態について説明する。
【１００２】
図１０７は、PDP以外のディスプレイでPDPの見た目を再現する画像信号処理装置の一実施の形態の構成例を示している。
【１００３】
図１０７において、画像信号処理装置は、画像処理部30001と、モニタ30002とから構成され、PDP以外の表示方式の表示装置であるモニタ30002で画像信号を表示したときに、PDP表示装置で表示された画像に見えるように、画像処理部30001に供給される画像信号を処理して、モニタ30002に表示させる。
【１００４】
すなわち、画像処理部30001は、そこに供給される画像信号に対して、RGB(Red,Green,Bule)の順で点灯しているために生ずる動画による色ズレを再現する色ズレ付加処理、空間方向に適用するディザパターンを再現する空間ディザ付加処理、時間方向に適用するディザパターンを再現する時間ディザ付加処理、画素ピッチ間の空白を再現する画素間ピッチ再現処理、又は、ストライプ配列を再現するストライプ配列再現処理のうちの少なくともひとつを施し、モニタ30002に供給する。
【１００５】
モニタ30002は、PDP以外の表示方式の表示装置、すなわち、例えば、LCDやCRTの表示装置であり、画像処理部30001から供給される画像信号に応じて、画像を表示する。モニタ30002が、画像処理部30001からの画像信号に応じて、画像を表示することにより、モニタ30002では、PDP表示装置で表示されたならば表示されるであろう画像が表示される。
【１００６】
上述したように、画像処理部30001では、色ズレ付加処理、空間ディザ付加処理、時間ディザ付加処理、画素間ピッチ再現処理、又はストライプ配列再現処理のうちの少なくともひとつが行われる。
【１００７】
まず、画像処理部30001で行われる、色ズレ付加処理、空間ディザ付加処理、時間ディザ付加処理、画素間ピッチ再現処理、又はストライプ配列再現処理のうちの、ストライプ配列再現処理について説明する。
【１００８】
図１０８は、ストライプ配列再現処理を説明する図である。
【１００９】
ストライプ配列再現処理では、PDP特有のストライプ配列を再現する。PDPの１画素の表示に出力モニタでは2画素以上を使用する。
【１０１０】
ストライプ配列再現処理では、画素値をRGBに分解し、それぞれ縦に並べて表示をする。
【１０１１】
2画素など3の等倍でない場合、見かけ上混ざった色を表示する事で同様の再現が可能となる。
【１０１２】
これにより、PDP特有のストライプの見た目が液晶モニタなどでも可能となる。
【１０１３】
また対象となるパネルによってはRGBの幅が等間隔でないものもあり、それに合わせてRGBの幅を変えることで、より再現度が高まる。
【１０１４】
図１０９は、ストライプ配列再現処理を行う画像処理部30001の構成例を示している。
【１０１５】
拡大ストライプ化回路30011は、画像処理部30001に供給される画像信号をN倍化し、すなわち、例えば、３倍化し、ストライプ配列に分解して、ストライプ化された画像信号を出力する。
【１０１６】
リサイズリサンプル回路30012は、拡大ストライプ化回路30011が出力する画像信号を、出力画像サイズ（モニタ30002が表示する画像のサイズ）に合わせて、リサンプルを行い出力する。
【１０１７】
なお、リサイズリサンプル回路30012が出力する画像信号が、モニタ30002に供給されて表示される。
【１０１８】
図１１０は、図１０９の画像処理部30001で行われるストライプ配列再現処理を説明するフローチャートである。
【１０１９】
ステップS30011において、拡大ストライプ化回路30011は、画像信号の１画素を3倍に拡大し、横にRGBを並べた形状に変形し、リサイズリサンプル回路30012に供給して、処理は、ステップS30012に進む。
【１０２０】
ステップS30012では、リサイズリサンプル回路30012が、拡大ストライプ化回路30011からの画像信号を、出力画像サイズに合わせてリサイズし、再サンプリングする処理を行って、処理は、ステップS30013に進む。ステップS30013では、リサイズリサンプル回路30012が、ステップS30012の処理で得られた画像信号を、モニタ30002に出力する。
【１０２１】
次に、画像処理部30001で行われる、色ズレ付加処理、空間ディザ付加処理、時間ディザ付加処理、画素間ピッチ再現処理、又はストライプ配列再現処理のうちの、色ズレ付加処理（動画による色ズレ再現を行う処理）について説明する。
【１０２２】
図１１１は、PDPに表示される画像に生じる色ズレを説明する図である。
【１０２３】
PDPにおいて、RGBの点灯時間の違いによって、白色物体が横に移動する場合に特に顕著であるが、その物体を人間が目で追って見ると仮定すると、色がずれて見えるという特性がある。
【１０２４】
色ズレ付加処理では、これを液晶パネルなどのモニタ30002でも再現する。以下の手順により再現をする。
【１０２５】
１．物体境界検出
【１０２６】
画像より、エッジ検出などにより物体境界を検出する。特に白色物体などを対象とする。
【１０２７】
２．動き量抽出
【１０２８】
上記１での手順で求めた物体において、次フレームとの動き量を求める。手法はブロックマッチング法などを用いる。
【１０２９】
３．色ズレの付加
【１０３０】
再現対象とするPDPのRGB発光特性と、物体の動き量に応じて最適な色ズレを付加してゆく。
【１０３１】
色ズレの付加量は、移動量と合わせようとするPDPの発光特性によって決定される。
【１０３２】
例えば青(B)の点灯が緑(G)よりも1/3frの時間だけ早く消灯する特性の場合（frはフレーム周期）、エッジ際の画素値は、青色成分を2/3とする。
【１０３３】
同様にその横の画素値は、移動量幅分の色ズレを起こすように青成分の減算を減らすことで生成が可能となる。
【１０３４】
図１１２は、青が緑よりも1/3frの時間だけ早く消灯する特性のPDPにおいて、画像に映っている物体の移動量が3画素の場合に生じる色ズレを付加するために、元の画素値に掛ける係数を表す。
【１０３５】
図１１３は、色ズレ付加処理を行う画像処理部30001の構成例を示している。
【１０３６】
現フレームメモリ30021は、画像処理部30001に供給される画像信号を記憶し、現フレームの画像信号として、前フレームメモリ30022、エッジ部切り出し回路30023、及び動き検出回路30024に供給する。
【１０３７】
前フレームメモリ30022は、現フレームメモリ30021から供給される現フレームの画像信号を記憶し、１フレーム分の時間だけ遅延して、動き検出回路30024に供給する。したがって、現フレームメモリ30021から動き検出回路30024に対して、現フレームの画像信号が供給されるとき、前フレームメモリ30022から動き検出回路30024に対して、現フレームの１フレーム前の前フレームの画像信号が供給される。
【１０３８】
エッジ部切り出し回路30023は、現フレームメモリ30021からの現フレームの画像信号のエッジ部分を検出し、そのエッジ部のエッジ位置を、動き検出回路30024、及び色係数乗算回路30025に供給する。さらに、エッジ部切り出し回路30023は、現フレームメモリ30021からの現フレームの画像信号も、色係数乗算回路30025に供給する。
【１０３９】
動き検出回路30024は、エッジ部切り出し回路30023からの指定位置のフレーム間の動き量を算出し、色係数乗算回路30025に出力する。
【１０４０】
すなわち、動き検出回路30024は、エッジ部切り出し回路30023からのエッジ位置のエッジ部の動き量を、現フレームメモリ30021からの現フレームの画像信号と、前フレームメモリ30022からの画像信号とを用いて検出し、色係数乗算回路30025に供給する。
【１０４１】
色係数乗算回路30025は、指定された（PDPの）発光特性にあわせ、指定位置の動き量に応じた色ズレを付加する係数を生成し、画像に乗算して出力する。
【１０４２】
すなわち、色係数乗算回路30025には、PDPの発光特性（表示特性）を表す発光特性パラメータが供給されるようになっている。
【１０４３】
色係数乗算回路30025は、発光特性パラメータが表す発光特性、エッジ部切り出し回路30023からのエッジ位置からの位置（画素の位置）、及び、動き検出回路30024からのエッジ部の動き量に応じて、色ズレを生じさせる係数を求め、その係数を、エッジ部切り出し回路30023からの画像信号（の画素値）に乗算して得られる色の画像信号を出力する。そして、色係数乗算回路30025が出力する画像信号が、モニタ30002に供給されて表示される。
【１０４４】
図１１４は、図１１３の画像処理部30001で行われる色ズレ付加処理を説明するフローチャートである。
【１０４５】
ステップS30021において、エッジ部切り出し回路30023は、現フレームメモリ30021からの現フレームの画像信号から、色ズレの起こるエッジ部を検出し、そのエッジ部のエッジ位置を、動き検出回路30024と色係数乗算回路30025に供給するとともに、現フレームの画像信号を、色係数乗算回路30025に供給して、処理は、ステップS30022に進む。
【１０４６】
ステップS30022では、動き検出回路30024が、エッジ部切り出し回路30023からのエッジ位置のエッジ部の動き量を、現フレームメモリ30021からの現フレームの画像信号と、前フレームメモリ30022の画像信号とを用いて検出し、色係数乗算回路30025に供給して、処理は、ステップS30023に進む。
【１０４７】
ステップS30023では、色係数乗算回路30025が、発光特性パラメータが表す発光特性、動き検出回路30024からのエッジ部の動き量、及び、エッジ部切り出し回路30023からのエッジ位置のエッジ部からの位置に応じて、色ズレを生じさせる係数を求め、エッジ部切り出し回路30023からの現フレームの画像信号の各画素の色（画素値）にかけて、その結果得られる色の画像信号を、モニタ30002に出力する。
【１０４８】
次に、画像処理部30001で行われる、色ズレ付加処理、空間ディザ付加処理、時間ディザ付加処理、画素間ピッチ再現処理、又はストライプ配列再現処理のうちの、画素間ピッチ再現処理（同一サイズ再現時の画素ピッチ再現の処理）について説明する。
【１０４９】
対象となるPDPのサイズも再現することを狙う場合、DRC(Digital Reality Creation)等の電子ズーム機能でサイズは同等のものを得ることが出来るが、画素ピッチ間の空白も再現することでより見た目を合わせることが可能となる。
【１０５０】
ここで、DRCについては、例えば、特開2005-236634号公報や特開2002-223167号公報等に、クラス分類適応処理として記載されている。
【１０５１】
例えば、合わせようとするPDPのサイズが2倍であるとする。この場合、2倍電子ズームを用いる事で同サイズに見せることが出来るが、大画面PDP特有の画素間の溝の視覚的効果も付加する事でより再現性が高まる。
【１０５２】
2倍の場合、図１１５に示すような効果を付加すればよい。
【１０５３】
図１１６は、画素間ピッチ再現処理を行う画像処理部30001の構成例を示している。
【１０５４】
拡大処理回路30031は、画像処理部30001に供給される画像信号を出力画像サイズに拡大し、すなわち、画像の一部を、そこに供給される拡大率に応じて拡大する処理をして、その結果得られる拡大画像を、画素間輝度減回路30032に出力する。
【１０５５】
画素間輝度減回路30032は、そこに供給される拡大率に応じて、画素間の溝の存在する位置に対して輝度値を下げる処理をし、すなわち、画素間の空白が存在する部分の輝度を下げるように、拡大処理回路30031からの画像信号を処理し、その処理の結果得られる画像信号を、モニタ30002に出力する。
【１０５６】
図１１７は、図１１６の画像処理部30001で行われる画素間ピッチ再現処理を説明するフローチャートである。
【１０５７】
ステップS30031において、拡大処理回路30031は、出力画像サイズに画像を拡大し、画素間輝度減回路30032に供給して、処理は、ステップS30032に進む。ステップS30032では、画素間輝度減回路30032は、拡大処理回路30031からの画像に対して、想定画素間のある部分の輝度を下げる処理をする。そして、処理は、ステップS30032からステップS30033に進み、画素間輝度減回路30032は、ステップS30032で得られた画像を、モニタ30002に出力する。
【１０５８】
次に、画像処理部30001で行われる、色ズレ付加処理、空間ディザ付加処理、時間ディザ付加処理、画素間ピッチ再現処理、又はストライプ配列再現処理のうちの、空間ディザ付加処理（空間ディザパターン再現の処理）について説明する。
【１０５９】
PDPパネルにおいては、色階調を稼ぐためにディザ（編み目状に色を配置し擬似的に階調を増やす）を用いることが多い。
【１０６０】
このディザパターンを再現する事でより見た目を合わせることが可能となる。
【１０６１】
対象となるPDPパネルによって、ディザが見える色というものが存在する。画面内の色変化の少ない部分において、もしそのディザの見える色にマッチするものであれば、図１１８に示すように、ディザを付加する処理を行うことで再現することが可能となる。
【１０６２】
図１１９は、空間ディザ付加処理を行う画像処理部30001の構成例を示している。
【１０６３】
平坦部抽出回路30041は、画像処理部30001に供給される画像信号の平坦な部分（平坦部）を抽出し、画像信号とともに、色比較回路30042に供給する。
【１０６４】
色比較回路30042は、平坦部抽出回路30041からの平坦部の色は、ディザが見える色かどうかを判定する。
【１０６５】
すなわち、色比較回路30042は、平坦部抽出回路30041で抽出された平坦部の色と、空間ディザパターンROMに記憶されたルックアップテーブルに登録されている（RGBの値が表す）色と比較し、平坦部の色が、ルックアップテーブルに登録されている色のうちの、後述する空間ディザパターン「なし」に対応付けられている色以外の色である場合には、平坦部の色は、ディザが見える色であると判定する。そして、色比較回路30042は、その判定結果とともに、平坦部抽出回路30041からの画像信号を、ディザ付加回路30044に供給する。
【１０６６】
空間ディザパターンROM30043はルックアップテーブルを記憶している。
【１０６７】
ここで、図１２０は、空間ディザパターンROM30043が記憶しているルックアップテーブルを示している。
【１０６８】
ルックアップテーブルでは、各色のRGBの値と、そのRGBの値で表される色がPDPに表示されたときに見えやすい空間的なディザのパターンである空間ディザパターンとが対応付けられている。
【１０６９】
なお、ルックアップテーブルにおいて、ディザが見えない色のRGBの値については、空間ディザパターンとして、「なし」（ディザが見えない旨）が登録されている。
【１０７０】
また、色比較回路30042（図１１９）では、空間ディザパターン「なし」と対応付けられているRGBの値で表される色が、ディザが見える色でないと判定され、それ以外の色が、ディザが見える色であると判定される。
【１０７１】
図１１９に戻り、空間ディザパターンROM30043は、その記憶しているルックアップテーブルにおいて、色比較回路30042が判定の対象とした、平坦部抽出回路30041からの平坦部の色を表すRGBの値に対応付けられている空間ディザパターンを、ディザ付加回路30044に供給する。
【１０７２】
ディザ付加回路30044は、空間ディザパターンROM30043から指定された空間ディザパターンが表す空間的なディザを、色比較回路30042からの画像信号に付加する。
【１０７３】
すなわち、ディザ付加回路30044は、色比較回路30042から、平坦部の色はディザが見える色である旨の判定結果が供給された場合に、色比較回路30042からの画像信号の、その平坦部の画像信号に、空間ディザパターンROM30043から供給される空間ディザパターンが表すディザを付加して、モニタ30002に出力する。
【１０７４】
図１２１は、図１１９の画像処理部30001が行う空間ディザ付加処理を説明するフローチャートである。
【１０７５】
ステップS30041において、平坦部抽出回路30041は、画像信号から、空間方向で色変化の少ない部分である平坦部を抽出し、画像信号とともに、色比較回路30042に供給して、処理は、ステップS30042に進む。
【１０７６】
ステップS30042では、色比較回路30042が、空間ディザパターンROM30043に記憶されたルックアップテーブルを参照し、平坦部抽出回路30041からの平坦部の色がPDPでディザの見える色かどうかを判定する。
【１０７７】
ステップS30042において、平坦部抽出回路30041からの平坦部の色がPDPでディザの見える色であると判定された場合、色比較回路30042は、その旨の判定結果と、平坦部抽出回路30041からの画像信号を、ディザ付加回路30044に供給するとともに、空間ディザパターンROM30043が、ルックアップテーブルにおいて、色比較回路30042の判定の対象になった平坦部の色のRGB値と対応付けられている空間ディザパターンを、ディザ付加回路30044に供給して、処理は、ステップS30043に進む。
【１０７８】
ステップS30043では、ディザ付加回路30044は、色比較回路30042からの画像信号の平坦部に対して、指定パターン、すなわち、空間ディザパターンROM30043からの空間ディザパターンが表す空間的なディザを付加して、処理は、ステップS30044に進む。ステップS30044では、ディザ付加回路30044は、ディザが付加された画像信号を、モニタ30002に出力する。
【１０７９】
一方、ステップS30042において、平坦部抽出回路30041からの平坦部の色がPDPでディザの見える色でないと判定された場合、色比較回路30042は、その旨の判定結果と、平坦部抽出回路30041からの画像信号を、ディザ付加回路30044に供給して、処理は、ステップS30045に進む。
【１０８０】
ステップS30045では、ディザ付加回路30044は、色比較回路30042からの画像信号を、ディザを付加せずに、そのまま、モニタ30002に出力する。
【１０８１】
次に、画像処理部30001で行われる、色ズレ付加処理、空間ディザ付加処理、時間ディザ付加処理、画素間ピッチ再現処理、又はストライプ配列再現処理のうちの、時間ディザ付加処理（時間方向ディザ再現の処理）について説明する。
【１０８２】
PDPパネルにおいては、色階調を稼ぐために時間方向にもディザを用いている。これも同様の処理をすることで再現性が高まる。
【１０８３】
入力画像１フレームを、色に応じて使用するモニタの応答速度で出力可能な枚数に分割し表示する。分割の仕方は近づけようとするPDPの時間方向を積分して得られるディザパターンを出力する。
【１０８４】
図１２２は、時間ディザ付加処理を行う画像処理部30001の構成例を示している。
【１０８５】
色比較回路30051は、画像処理部30001に供給される１フレームの画像信号の各画素の色と、時間ディザパターンROM30052に記憶されたルックアップテーブルに登録されている色（を表すRGBの値）と比較することにより、画像信号の画素の色は、ディザが見える色かどうかを判定する。
【１０８６】
そして、色比較回路30051は、画像信号の色が、ルックアップテーブルに登録されている色である場合には、その色は、ディザが見える色であると判定する。そして、色比較回路30051は、その判定結果とともに、１フレームの画像信号を、ディザ付加回路30044に供給する。
【１０８７】
時間ディザパターンROM30052は、ルックアップテーブルを記憶している。時間ディザパターンROM30052が記憶しているルックアップテーブルには、PDPで表示されたときにディザが見える色（を表すRGBの値）と、その色を、複数のサブフレームで表示するときの各サブフレームの画素値のパターンである時間ディザパターンとが対応付けられて登録されている。
【１０８８】
ここで、サブフレームとは、PDPの表示で使用されるサブフィールドに相当する。
【１０８９】
また、ここでは、上述の複数のサブフレームとは、例えば、３枚のサブフレームとし、モニタ30002は、少なくとも、１フレームの間に、３枚のサブフレームを表示することができる性能を有することとする。
【１０９０】
時間ディザパターンROM30052は、その記憶しているルックアップテーブルにおいて、色比較回路30051でディザが見えると判定された色に対応付けられている時間ディザパターン、すなわち、３枚のサブフレームそれぞれの画素値のセットを表す情報を、ディザ付加回路30053に供給する。
【１０９１】
ディザ付加回路30053は、色比較回路30051からのディザが見える旨の判定がされた色について、色比較回路30051からの１フレームの画像信号を、時間ディザパターンROM30052から供給される時間ディザパターンが表す画素値の３枚のサブフレームに分割（時分割）することにより、色比較回路30051からの１フレームの画像信号に時間ディザパターンを付加する。
【１０９２】
すなわち、１フレームの画像信号に時間ディザパターンを付加するとは、１フレームの画像信号を、画素ごとに、時間ディザパターンが表す画素値の複数のサブフレーム（ここでは、３枚のサブフレーム）に分割することを意味する。
【１０９３】
ディザ付加回路30053で時間ディザパターンの付加が行われることにより得られる３枚のサブフレームの画像信号のうちの１つの画像信号は、出力メモリ30054に、他の１つの画像信号は、出力メモリ30055に、残りの１つの画像信号は、出力メモリ30056に、それぞれ供給される。
【１０９４】
出力メモリ30054ないし30056は、それぞれ、ディザ付加回路30053から供給されるサブフレームの画像信号を記憶し、そのサブフレームを表示すべきタイミングで、モニタ30002に供給する。
【１０９５】
なお、モニタ30002では、サブフレームが、フレーム周期の1/3の周期等の、１フレームの間に３枚のサブフレームを表示することができる周期で表示される。
【１０９６】
ここで、図１２２では、サブフレームの画像信号を記憶するメモリとして、３つの出力メモリ30054ないし30056が設けられているが、サブフレームの画像信号を記憶するメモリは、ディザ付加回路30053で時間ディザパターンの付加が行われることにより得られるサブフレームの枚数と同一の個数だけ必要となる。
【１０９７】
例えば、ディザ付加回路30053で時間ディザパターンの付加が行われることにより得られるサブフレームの枚数が、モニタ30002で１フレームの間に表示することができる最大の枚数（モニタ30002の応答速度）に等しい場合、その枚数に等しい個数のメモリが、サブフレームの画像信号を記憶するメモリとして必要となる。
【１０９８】
図１２３は、図１２２の画像処理部30001が行う時間ディザ付加処理を説明するフローチャートである。
【１０９９】
色比較回路30051は、時間ディザパターンROM30052に記憶されたルックアップテーブルを参照し、画像処理部30001に供給される１フレームの画像信号の各画素の色が、ディザが見える色かどうかを判定し、その画素ごとの判定結果とともに、その１フレームの画像信号を、ディザ付加回路30053に供給する。
【１１００】
一方、時間ディザパターンROM30052では、ルックアップテーブルにおいて、色比較回路30051でディザが見えると判定された色に対応付けられている時間ディザパターンを、画素ごとに、ディザ付加回路30053に供給する。
【１１０１】
ディザ付加回路30053は、ステップS30051において、色比較回路30051からのディザが見える旨の判定がされた色について、色比較回路30051からの１フレームの画像信号に、時間ディザパターンを付加して、処理は、ステップS30052に進む。
【１１０２】
すなわち、ディザ付加回路30053は、色比較回路30051からの１フレームの画像信号の各画素の画素値を、時間ディザパターンROM30052から供給される時間ディザパターンが表す３つの画素値に分割し、その３つの画素値を、３枚のサブフレームの対応する画素それぞれの画素値とすることにより、１フレームの画像信号を３つのサブフレームの画像信号に分割する。そして、ディザ付加回路30053は、その３枚のサブフレームの画像信号のうちの１つの画像信号を、出力メモリ30054に、他の１つの画像信号を、出力メモリ30055に、残りの１つの画像信号を、出力メモリ30056に、それぞれ供給して記憶させる。なお、ディザが見えない色の画素については、例えば、その画素値の1/3を、サブフレームの画素値とすることができる。
【１１０３】
ステップS30052では、出力メモリ30054ないし30056は、ステップS30051で記憶したサブフレームの画像信号を、そのサブフレームを表示すべきタイミングで、モニタ30002に出力する。
【１１０４】
次に、図１２４は、色ズレ付加処理、空間ディザ付加処理、時間ディザ付加処理、画素間ピッチ再現処理、及びストライプ配列再現処理のすべてを行う画像処理部30001の構成例を示している。
【１１０５】
図１２４において、画像処理部30001は、画像処理部30060，30070、及び30080から構成されている。
【１１０６】
画像処理部30060は、現フレームメモリ30061、前フレームメモリ30062、エッジ部切り出し回路30063、動き検出回路30064、及び色係数乗算回路30065から構成される。
【１１０７】
現フレームメモリ30061ないし色係数乗算回路30065は、図１１３の現フレームメモリ30021ないし色係数乗算回路30025とそれぞれ同様に構成され、したがって、画像処理部30060は、画像処理部30001に供給される画像信号に対して、図１１３の場合と同様の色ズレ付加処理を施し、画像処理部30070に供給する。
【１１０８】
画像処理部30070は、色比較回路30071、時間／空間ディザパターンROM30072、ディザ付加回路30073、及び出力メモリ30074ないし30076から構成される。
【１１０９】
色比較回路30071は、画像処理部30060から供給される画像信号を対象として、図１１９の色比較回路30042と、図１２２の色比較回路30051それぞれと同様の処理を行う。
【１１１０】
時間／空間ディザパターンROM30072は、図１１９の空間ディザパターンROM30043が記憶しているルックアップテーブルと、図１２２の時間ディザパターンROM30052が記憶しているルックアップテーブルとそれぞれ同様のルックアップテーブルを記憶しており、そのルックアップテーブルに基づき、図１１９の空間ディザパターンROM30043と、図１２２の時間ディザパターンROM30052それぞれと同様の処理を行う。
【１１１１】
ディザ付加回路30073は、図１１９のディザ付加回路30044と同様に、画像信号に、空間ディザパターンが表す空間的なディザを付加し、また、画像信号に時間ディザパターンを付加することにより、その画像信号を、３枚のサブフレームに分割し、それぞれを、出力メモリ30074ないし30076に供給する。
【１１１２】
出力メモリ30074ないし30076は、図１２２の出力メモリ30054ないし30056と同様に、ディザ付加回路30073からのサブフレームの画像信号を記憶する。出力メモリ30074ないし30076に記憶されたサブフレームの画像信号は、画像処理部30080に供給される。
【１１１３】
以上のように構成される画像処理部30070では、画像処理部30060が出力する画像信号を対象として、図１１９の場合と同様の空間ディザ付加処理と、図１２２の場合と同様の時間ディザ付加処理が行われる。
【１１１４】
画像処理部30080は、拡大処理回路30081、ストライプ化回路30082、及び画素間輝度減回路30083から構成される。
【１１１５】
拡大処理回路30081は、画像処理部30070からの画像信号を対象として、図１１６の拡大処理回路30031と同様の処理を行い、ストライプ化回路30082に供給する。
【１１１６】
ストライプ化回路30082は、拡大処理回路30081からの画像信号を対象として、図１０９の拡大ストライプ化回路30011が行う処理のうちの、ストライプ配列に分解する処理だけを行い、画素間輝度減回路30083に供給する。
【１１１７】
したがって、拡大処理回路30081及びストライプ化回路30082の両方で、図１０９の拡大ストライプ化回路30011が行うのと同様の処理が行われる。
【１１１８】
画素間輝度減回路30083は、ストライプ化回路30082からの画像信号を対象として、図１１６の画素間輝度減回路30032が行うのと同様の処理を行い、その結果得られる画像信号を、モニタ30002に出力する。
【１１１９】
したがって、画像処理部30080では、図１１６の場合と同様のストライプ配列再現処理と、図１１９の場合と同様の画素間ピッチ再現処理とが行われる。
【１１２０】
なお、画像処理部30080において、ストライプ配列再現処理、及び画素間ピッチ再現処理は、画像処理部30070から供給される３つのサブフレームの画像信号それぞれを対象として行われる。
【１１２１】
図１２５は、図１２４の画像処理部30001の処理を説明するフローチャートである。
【１１２２】
ステップS30061において、時間方向を伴う処理が行われる。すなわち、ステップS30061では、画像処理部30060において、色ズレ付加処理が行われ、画像処理部30070において、空間ディザ付加処理、及び時間ディザ付加処理が行われる。
【１１２３】
そして、処理は、ステップS30061からステップS30062に進み、サイズ拡大を伴う処理が行われる。すなわち、ステップS30062では、画像処理部30080において、画素間ピッチ再現処理、及びストライプ配列再現処理が行われる。
【１１２４】
以上のように、画像処理部30001では、色ズレ付加処理、空間ディザ付加処理、時間ディザ付加処理、画素間ピッチ再現処理、又はストライプ配列再現処理のうちの少なくとも１つを行うので、PDP以外の、例えば、LCD等のディスプレイで、PDPの見た目を再現する事が信号処理により可能となる。
【１１２５】
また、信号処理で行う事で、同一モニタの同一画面上でプラズマディスプレイの画質評価などを同時に行う事を可能とする。
【１１２６】
次に、上述した一連の処理は、専用のハードウェアにより行うこともできるし、ソフトウェアにより行うこともできる。一連の処理をソフトウェアによって行う場合には、そのソフトウェアを構成するプログラムが、汎用のコンピュータ等にインストールされる。
【１１２７】
そこで、図１２６は、上述した一連の処理を実行するプログラムがインストールされるコンピュータの一実施の形態の構成例を示している。
【１１２８】
プログラムは、コンピュータに内蔵されている記録媒体としてのハードディスク30105やROM30103に予め記録しておくことができる。
【１１２９】
あるいはまた、プログラムは、フレキシブルディスク、CD-ROM(Compact Disc Read Only Memory)，MO(Magneto Optical)ディスク，DVD(Digital Versatile Disc)、磁気ディスク、半導体メモリなどのリムーバブル記録媒体30111に、一時的あるいは永続的に格納（記録）しておくことができる。このようなリムーバブル記録媒体30111は、いわゆるパッケージソフトウエアとして提供することができる。
【１１３０】
なお、プログラムは、上述したようなリムーバブル記録媒体30111からコンピュータにインストールする他、ダウンロードサイトから、ディジタル衛星放送用の人工衛星を介して、コンピュータに無線で転送したり、LAN(Local Area Network)、インターネットといったネットワークを介して、コンピュータに有線で転送し、コンピュータでは、そのようにして転送されてくるプログラムを、通信部30108で受信し、内蔵するハードディスク30105にインストールすることができる。
【１１３１】
コンピュータは、CPU(Central Processing Unit)30102を内蔵している。CPU30102には、バス30101を介して、入出力インタフェース30110が接続されており、CPU30102は、入出力インタフェース30110を介して、ユーザによって、キーボードや、マウス、マイク等で構成される入力部30107が操作等されることにより指令が入力されると、それにしたがって、ROM(Read Only Memory)30103に格納されているプログラムを実行する。あるいは、また、CPU30102は、ハードディスク30105に格納されているプログラム、衛星若しくはネットワークから転送され、通信部30108で受信されてハードディスク30105にインストールされたプログラム、またはドライブ30109に装着されたリムーバブル記録媒体30111から読み出されてハードディスク30105にインストールされたプログラムを、RAM(Random Access Memory)30104にロードして実行する。これにより、CPU30102は、上述したフローチャートにしたがった処理、あるいは上述したブロック図の構成により行われる処理を行う。そして、CPU30102は、その処理結果を、必要に応じて、例えば、入出力インタフェース30110を介して、LCD(Liquid Crystal Display)やスピーカ等で構成される出力部30106から出力、あるいは、通信部30108から送信、さらには、ハードディスク30105に記録等させる。
【１１３２】
ここで、本明細書において、コンピュータに各種の処理を行わせるためのプログラムを記述する処理ステップは、必ずしもフローチャートとして記載された順序に沿って時系列に処理する必要はなく、並列的あるいは個別に実行される処理（例えば、並列処理あるいはオブジェクトによる処理）も含むものである。
【１１３３】
また、プログラムは、１のコンピュータにより処理されるものであっても良いし、複数のコンピュータによって分散処理されるものであっても良い。さらに、プログラムは、遠方のコンピュータに転送されて実行されるものであっても良い。
【１１３４】
なお、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
【図面の簡単な説明】
【１１３５】
【図１】本発明を適用したモニタシステムの一実施の形態の構成例を示すブロック図である。
【図２】表示装置２の画面の構成例を示す図である。
【図３】モニタシステムの処理を説明するフローチャートである。
【図４】信号処理部１２の第１の構成例を示すブロック図である。
【図５】表示装置２の表示例を示す図である。
【図６】mH×mV画素の画像の表示例を示す図である。
【図７】信号処理部１２の第２の構成例を示すブロック図である。
【図８】表示装置２の表示例を示す図である。
【図９】信号処理部１２の第３の構成例を示すブロック図である。
【図１０】表示装置２の表示例を示す図である。
【図１１】信号処理部１２の第４の構成例を示すブロック図である。
【図１２】表示装置２の表示例を示す図である。
【図１３】信号処理部１２の第５の構成例を示すブロック図である。
【図１４】表示装置２の表示例を示す図である。
【図１５】信号処理部１２の第６の構成例を示すブロック図である。
【図１６】表示装置２の表示例を示す図である。
【図１７】擬似インチ画像生成処理を説明する図である。
【図１８】擬似インチ画像生成処理を説明する図である。
【図１９】擬似インチ画像生成処理を説明する図である。
【図２０】表示領域#1に、nインチの擬似インチ画像データに対応する画像を表示する場合の表示制御装置１の処理を説明するフローチャートである。
【図２１】信号処理部１２の第７の構成例を示すブロック図である。
【図２２】表示装置２の表示例を示す図である。
【図２３】信号処理部１２の第８の構成例を示すブロック図である。
【図２４】表示装置２の表示例を示す図である。
【図２５】クラス分類適応処理を利用した画像変換処理を行う画像変換装置１０１の構成例を示すブロック図である。
【図２６】画像変換装置１０１による画像変換処理を説明するフローチャートである。
【図２７】タップ係数を学習する学習装置１２１の構成例を示すブロック図である。
【図２８】学習装置１２１の学習部１３６の構成例を示すブロック図である。
【図２９】各種の画像変換処理を説明するための図である。
【図３０】学習装置１２１による学習処理を説明するフローチャートである。
【図３１】クラス分類適応処理を利用した画像変換処理を行う画像変換装置１５１の構成例を示すブロック図である。
【図３２】画像変換装置１５１の係数出力部１５５の構成例を示すブロック図である。
【図３３】係数種データを学習する学習装置１７１の構成例を示すブロック図である。
【図３４】学習装置１７１の学習部１７６の構成例を示すブロック図である。
【図３５】学習装置１７１による学習処理を説明するフローチャートである。
【図３６】本発明を適用したコンピュータの一実施の形態の構成例を示すブロック図である。
【図３７】従来のFPD表示装置の一例の構成を示すブロック図である。
【図３８】FPD表示装置が有する画像信号処理装置の一実施の形態の構成例を示すブロック図である。
【図３９】CRT表示装置の構成例を示すブロック図である。
【図４０】画像信号処理装置の処理を説明するフローチャートである。
【図４１】VM処理部10034の構成例を示すブロック図である。
【図４２】VM係数の例を示す図である。
【図４３】VM係数を求める方法を説明する図である。
【図４４】ビーム電流とスポットサイズとの関係を示す図である。
【図４５】色識別機構を示す図である。
【図４６】電子ビームのスポットを示す図である。
【図４７】電子ビームのスポットを示す図である。
【図４８】色選別機構としてアパーチャーグリルが採用されている場合の、電子ビームが照射される様子を示す断面図である。
【図４９】２次元正規分布で近似した電子ビームの強度の分布を示す図である。
【図５０】アパーチャーグリルのスリットを通過する電子ビームの強度の分布を示す図である。
【図５１】電子ビームの強度の分布と、その電子ビームのうちの、アパーチャーグリルのスリットを通過する電子ビームの強度の分布とを示す図である。
【図５２】電子ビームの強度の分布と、その電子ビームのうちの、シャドウマスクのスリットを通過する電子ビームの強度の分布とを示す図である。
【図５３】電子ビームの強度の分布と、その電子ビームのうちの、シャドウマスクのスリットを通過する電子ビームの強度の分布とを示す図である。
【図５４】スリットを通過する電子ビームの強度を求める積分を説明する図である。
【図５５】電子ビームが色選別機構としてのアパーチャーグリルに入射する様子を示す図である。
【図５６】画素と、電子ビームの強度の分布とを示す図である。
【図５７】EB影響分を求める回路の構成例を示す図である。
【図５８】EB処理部10220の構成例を示すブロック図である。
【図５９】EB処理部10220の他の構成例を示すブロック図である。
【図６０】CRTγ処理部10035の色温度補償処理を行う部分の構成例を示すブロック図である。
【図６１】VM処理部10034の他の構成例を示すブロック図である。
【図６２】輝度補正部10310の構成例を示すブロック図である。
【図６３】輝度補正の処理を説明する図である。
【図６４】輝度補正部10310の他の構成例を示すブロック図である。
【図６５】VM係数としてのタップ係数を求める学習の処理を説明するフローチャートである。
【図６６】クラス予測係数を求める学習の処理を説明するフローチャートである。
【図６７】コンピュータの一実施の形態の構成例を示すブロック図である。
【図６８】第１の表示デバイスを用いて、第１の表示デバイスと異なる特性を有する第２の表示デバイスにおいて画像を表示した状態を再現することができるようにする画像処理装置の第１実施の形態の構成例を示すブロック図である。
【図６９】動き検出部20100の構成例を示すブロック図である。
【図７０】動き検出を説明する図である。
【図７１】動き検出を説明する図である。
【図７２】サブフィールド展開部20200の構成例を示すブロック図である。
【図７３】サブフィールドの構成例を示す図である。
【図７４】サブフィールドの構成例を示す図である。
【図７５】光量積算部20300の構成例を示すブロック図である。
【図７６】擬似輪郭の発生を説明する図である。
【図７７】光量積算領域を示す図である。
【図７８】光量積算領域を示す図である。
【図７９】第１の表示デバイスを用いて、第１の表示デバイスと異なる特性を有する第２の表示デバイスにおいて画像を表示した状態を再現することができるようにする画像処理装置の第２実施の形態の構成例を示すブロック図である。
【図８０】階調変換部20400の構成例を示すブロック図である。
【図８１】ディザ変換回路20404の動作を説明する図である。
【図８２】第１の表示デバイスを用いて、第１の表示デバイスと異なる特性を有する第２の表示デバイスにおいて画像を表示した状態を再現することができるようにする画像処理装置の第３実施の形態の構成例を示すブロック図である。
【図８３】第１の表示デバイスを用いて、第１の表示デバイスと異なる特性を有する第２の表示デバイスにおいて画像を表示した状態を再現することができるようにする画像処理装置の第４実施の形態の構成例を示すブロック図である。
【図８４】視覚補正部20500の構成例を示すブロック図である。
【図８５】ディザ補正回路20501の動作を説明する図である。
【図８６】拡散誤差補正回路20502の動作を説明する図である。
【図８７】第１の表示デバイスを用いて、第１の表示デバイスと異なる特性を有する第２の表示デバイスにおいて画像を表示した状態を再現することができるようにする画像処理装置の第１実施の形態の動作を説明するフローチャートである。
【図８８】動き検出の処理を説明するフローチャートである。
【図８９】画像をサブフィールドに展開する処理を説明するフローチャートである。
【図９０】光量を積算する処理を説明するフローチャートである。
【図９１】第１の表示デバイスを用いて、第１の表示デバイスと異なる特性を有する第２の表示デバイスにおいて画像を表示した状態を再現することができるようにする画像処理装置の第２実施の形態の動作を説明するフローチャートである。
【図９２】階調を変換する処理を説明するフローチャートである。
【図９３】第１の表示デバイスを用いて、第１の表示デバイスと異なる特性を有する第２の表示デバイスにおいて画像を表示した状態を再現することができるようにする画像処理装置の第３実施の形態の動作を説明するフローチャートである。
【図９４】第１の表示デバイスを用いて、第１の表示デバイスと異なる特性を有する第２の表示デバイスにおいて画像を表示した状態を再現することができるようにする画像処理装置の第４実施の形態の動作を説明するフローチャートである。
【図９５】視覚補正の処理を説明するフローチャートである。
【図９６】表示モデルを示す図である。
【図９７】表示モデルの画素を示す図である。
【図９８】表示モデルにおける光量積算領域を示す図である。
【図９９】断面領域を示す図である。
【図１００】時刻Tの経過とともに表示モデル内を移動する断面領域を示す図である。
【図１０１】時刻Tの経過とともに表示モデル内を移動する断面領域を示す図である。
【図１０２】光量の積算の処理を説明するフローチャートである。
【図１０３】光量積算部20300の他の構成例を示すブロック図である。
【図１０４】光量積算値テーブルを示す図である。
【図１０５】光量の積算の処理を説明するフローチャートである。
【図１０６】コンピュータの一実施の形態の構成例を示すブロック図である。
【図１０７】PDP以外のディスプレイでPDPの見た目を再現する画像信号処理装置の一実施の形態の構成例を示すブロック図である。
【図１０８】ストライプ配列再現処理を説明する図である。
【図１０９】ストライプ配列再現処理を行う画像処理部30001の構成例を示すブロック図である。
【図１１０】ストライプ配列再現処理を説明するフローチャートである。
【図１１１】PDPに表示される画像に生じる色ズレを説明する図である。
【図１１２】色ズレ付加処理で画像信号と乗算される係数を示す図である。
【図１１３】色ズレ付加処理を行う画像処理部30001の構成例を示すブロック図である。
【図１１４】色ズレ付加処理を説明するフローチャートである。
【図１１５】画素間ピッチ再現処理を説明する図である。
【図１１６】画素間ピッチ再現処理を行う画像処理部30001の構成例を示す図である。
【図１１７】画素間ピッチ再現処理を説明するフローチャートである。
【図１１８】空間ディザ付加処理を説明する図である。
【図１１９】空間ディザ付加処理を行う画像処理部30001の構成例を示すブロック図である。
【図１２０】空間ディザパターンROM30043が記憶しているルックアップテーブルを示す図である。
【図１２１】空間ディザ付加処理を説明するフローチャートである。
【図１２２】時間ディザ付加処理を行う画像処理部30001の構成例を示すブロック図である。
【図１２３】時間ディザ付加処理を説明するフローチャートである。
【図１２４】色ズレ付加処理、空間ディザ付加処理、時間ディザ付加処理、画素間ピッチ再現処理、及びストライプ配列再現処理のすべてを行う画像処理部30001の構成例を示すブロック図である。
【図１２５】画像処理部30001の処理を説明するフローチャートである。
【図１２６】コンピュータの一実施の形態の構成例を示すブロック図である。
【符号の説明】
【１１３６】
１  表示制御装置，  ２  表示装置，  ３  リモートコマンダ，  １１  画像変換部，  １２  信号処理部，  １２1  第１信号処理部，  １２2  第２信号処理部，  １２3  第３信号処理部，  １３  表示制御部，  １４  制御部，  ３１1，３１2，３１3  画像変換部，  ４１1，４１2，４１3  シミュレート処理部，  ５１，５２  画像変換部，  ６１  エンハンス処理部，  ６２  適応ガンマ処理部，  ６３  高フレームレート処理部，  ７１1，７１2，７１3  擬似インチ画像生成部，  １０１  画像変換装置，  １１１  注目画素選択部，  １１２，１１３  タップ選択部，  １１４  クラス分類部，  １１５  係数出力部，  １１６  予測演算部，  １２１  学習装置，  １３１  学習用画像記憶部，  １３２  教師データ生成部，  １３３  教師データ記憶部，  １３４  生徒データ生成部，  １３５  生徒データ記憶部，  １３６  学習部，  １４１  注目画素選択部，  １４２，１４３  タップ選択部，  １４５  足し込み部，  １４６  タップ係数算出部，  １５１  画像変換装置，  １５５  係数出力部，  １６１  係数生成部，  １６２  係数種メモリ，  １６３  パラメータメモリ，  １６４  係数メモリ，  １７４  生徒データ生成部，  １７６  学習部，  １８１  パラメータ生成部，  １９２，１９３  タップ選択部，  １９５  足し込み部，  １９６  係数種算出部，  ２０１  バス，  ２０２  CPU，  ２０３  ROM，  ２０４  RAM，  ２０５  ハードディスク，  ２０６  出力部，  ２０７  入力部，  ２０８  通信部，  ２０９  ドライブ，  ２１０  入出力インタフェース，  ２１１  リムーバブル記録媒体，  10011  明るさ調整コントラスト調整部，  10012  高画質化処理部，  10013  γ補正部，  10031  明るさ調整コントラスト調整部，  10032  高画質化処理部，  10033  ABL処理部，  10034  VM処理部，  10035  CRTγ処理部，  10036  全画面明るさ平均レベル検出部，  10037  ピーク検出微分制御値検出部，  10038  ABL制御部，  10039  VM制御部，  10040  表示色温度補償制御部，  10051  明るさ調整コントラスト調整部，  10052  高画質化処理部，  10053  ゲイン調整部，  10054  γ補正部，  10055  ビデオ増幅器，  10056  CRT，  10057  FBT，  10058  ビーム電流検出部，  10059  ABL制御部，  10060  画像信号微分回路，  10061  VM駆動回路，  10101  バス，  10102  CPU，  10103  ROM，  10104  RAM，  10105  ハードディスク，  10106  出力部，  10107  入力部，  10108  通信部，  10109  ドライブ，  10110  入出力インタフェース，  10111  リムーバブル記録媒体  10210  輝度補正部，  10211  VM係数発生部，  10212  演算部，  10220  EB処理部，  10241  EB係数発生部，  10242Ａないし10242Ｄ，10242Ｆないし10242Ｉ  演算部，  10250  EB機能部，  10251ないし10259  遅延部，  10260  EB係数発生部，  10261  積和演算部，  10271，10272  セレクタ，  10281  制御部，  10282  レベルシフト部，  10283  ゲイン調整部，  10310  輝度補正部，  10311  遅延タイミング調整部，  10312  微分回路，  10313  スレッショルド処理部，  10314  波形整形処理部，  10315  乗算回路，  10321  タップ選択部，  10322  クラス分類部，  10323  クラス予測係数記憶部，  10324  予測部，  10325  クラス決定部，  10326  タップ係数記憶部，  10327  予測部，  20100  動き検出部，  20101  相関演算回路，  20102  遅延回路，  20103  視線決定回路，  20200  サブフィールド展開部，  20201  サブフィールド割当回路，  20202  発光決定回路，  20300  光量積算部，  20301  光量積算領域決定回路，  20302  光量積算回路，  20303  光量積算値テーブル記憶部，  20304  光量積算領域選択回路，  20400  階調変換部，  20401  遅延回路，  20402  階調変換回路，  20403  階調変換テーブル，  20404  ディザ変換回路，  ４０５，４０６  演算器  20500  視覚補正部，  20501  ディザ補正回路，  20502  拡散誤差補正回路，  21101  バス，  21102  CPU，  21103  ROM，  21104  RAM，  21105  ハードディスク，  21106  出力部，  21107  入力部，  21108  通信部，  21109  ドライブ，  21110  入出力インタフェース，  21111  リムーバブル記録媒体，  30001  画像処理部，  30002  モニタ，  30011  拡大ストライプ化回路，  30012  リサイズリサンプル回路，  30021  現フレームメモリ，  30022  前フレームメモリ，  30023  エッジ部切り出し回路，  30024  動き検出回路，  30025  色係数乗算回路，  30031  拡大処理回路，  30032  画素間輝度減回路，  30041  平坦部抽出回路，  30042  色比較回路，  30043  空間ディザパターンROM，  30044  ディザ付加回路，  30051  色比較回路，  30052  時間ディザパターンROM，  30053  ディザ付加回路，  30054ないし30056  出力メモリ，  30060  画像処理部，  30061  現フレームメモリ，  30062  前フレームメモリ，  30063  エッジ部切り出し回路，  30064  動き検出回路，  30065  色係数乗算回路，  30070  画像処理部，  30071  色比較回路，  30072  時間／空間ディザパターンROM，  30073  ディザ付加回路，  30074ないし30076  出力メモリ，  30080  画像処理部，  30081  拡大処理回路，  30082  ストライプ化回路，  30083  画素間輝度減回路，  30101  バス，  30102  CPU，  30103  ROM，  30104  RAM，  30105  ハードディスク，  30106  出力部，  30107  入力部，  30108  通信部，  30109  ドライブ，  30110  入出力インタフェース，  30111  リムーバブル記録媒体
【図１】
2008178075.tif 000047
【図２】
2008178075.tif 000048
【図３】
2008178075.tif 000049
【図４】
2008178075.tif 000050
【図５】
2008178075.tif 000051
【図６】
2008178075.tif 000052
【図７】
2008178075.tif 000053
【図８】
2008178075.tif 000054
【図９】
2008178075.tif 000055
【図１０】
2008178075.tif 000056
【図１１】
2008178075.tif 000057
【図１２】
2008178075.tif 000058
【図１３】
2008178075.tif 000059
【図１４】
2008178075.tif 000060
【図１５】
2008178075.tif 000061
【図１６】
2008178075.tif 000062
【図１７】
2008178075.tif 000063
【図１８】
2008178075.tif 000064
【図１９】
2008178075.tif 000065
【図２０】
2008178075.tif 000066
【図２１】
2008178075.tif 000067
【図２２】
2008178075.tif 000068
【図２３】
2008178075.tif 000069
【図２４】
2008178075.tif 000070
【図２５】
2008178075.tif 000071
【図２６】
2008178075.tif 000072
【図２７】
2008178075.tif 000073
【図２８】
2008178075.tif 000074
【図２９】
2008178075.tif 000075
【図３０】
2008178075.tif 000076
【図３１】
2008178075.tif 000077
【図３２】
2008178075.tif 000078
【図３３】
2008178075.tif 000079
【図３４】
2008178075.tif 000080
【図３５】
2008178075.tif 000081
【図３６】
2008178075.tif 000082
【図３７】
2008178075.tif 000083
【図３８】
2008178075.tif 000084
【図３９】
2008178075.tif 000085
【図４０】
2008178075.tif 000086
【図４１】
2008178075.tif 000087
【図４２】
2008178075.tif 000088
【図４３】
2008178075.tif 000089
【図４４】
2008178075.tif 000090
【図４５】
2008178075.tif 000091
【図４６】
2008178075.tif 000092
【図４７】
2008178075.tif 000093
【図４８】
2008178075.tif 000094
【図４９】
2008178075.tif 000095
【図５０】
2008178075.tif 000096
【図５１】
2008178075.tif 000097
【図５２】
2008178075.tif 000098
【図５３】
2008178075.tif 000099
【図５４】
2008178075.tif 000100
【図５５】
2008178075.tif 000101
【図５６】
2008178075.tif 000102
【図５７】
2008178075.tif 000103
【図５８】
2008178075.tif 000104
【図５９】
2008178075.tif 000105
【図６０】
2008178075.tif 000106
【図６１】
2008178075.tif 000107
【図６２】
2008178075.tif 000108
【図６３】
2008178075.tif 000109
【図６４】
2008178075.tif 000110
【図６５】
2008178075.tif 000111
【図６６】
2008178075.tif 000112
【図６７】
2008178075.tif 000113
【図６８】
2008178075.tif 000114
【図６９】
2008178075.tif 000115
【図７０】
2008178075.tif 000116
【図７１】
2008178075.tif 000117
【図７２】
2008178075.tif 000118
【図７３】
2008178075.tif 000119
【図７４】
2008178075.tif 000120
【図７５】
2008178075.tif 000121
【図７６】
2008178075.tif 000122
【図７７】
2008178075.tif 000123
【図７８】
2008178075.tif 000124
【図７９】
2008178075.tif 000125
【図８０】
2008178075.tif 000126
【図８１】
2008178075.tif 000127
【図８２】
2008178075.tif 000128
【図８３】
2008178075.tif 000129
【図８４】
2008178075.tif 000130
【図８５】
2008178075.tif 000131
【図８６】
2008178075.tif 000132
【図８７】
2008178075.tif 000133
【図８８】
2008178075.tif 000134
【図８９】
2008178075.tif 000135
【図９０】
2008178075.tif 000136
【図９１】
2008178075.tif 000137
【図９２】
2008178075.tif 000138
【図９３】
2008178075.tif 000139
【図９４】
2008178075.tif 000140
【図９５】
2008178075.tif 000141
【図９６】
2008178075.tif 000142
【図９７】
2008178075.tif 000143
【図９８】
2008178075.tif 000144
【図９９】
2008178075.tif 000145
【図１００】
2008178075.tif 000146
【図１０１】
2008178075.tif 000147
【図１０２】
2008178075.tif 000148
【図１０３】
2008178075.tif 000149
【図１０４】
2008178075.tif 000150
【図１０５】
2008178075.tif 000151
【図１０６】
2008178075.tif 000152
【図１０７】
2008178075.tif 000153
【図１０８】
2008178075.tif 000154
【図１０９】
2008178075.tif 000155
【図１１０】
2008178075.tif 000156
【図１１１】
2008178075.tif 000157
【図１１２】
2008178075.tif 000158
【図１１３】
2008178075.tif 000159
【図１１４】
2008178075.tif 000160
【図１１５】
2008178075.tif 000161
【図１１６】
2008178075.tif 000162
【図１１７】
2008178075.tif 000163
【図１１８】
2008178075.tif 000164
【図１１９】
2008178075.tif 000165
【図１２０】
2008178075.tif 000166
【図１２１】
2008178075.tif 000167
【図１２２】
2008178075.tif 000168
【図１２３】
2008178075.tif 000169
【図１２４】
2008178075.tif 000170
【図１２５】
2008178075.tif 000171
【図１２６】
2008178075.tif 000172