(57)【要約】【課題】情報信号を複数の処理部で順に処理するものにあって、所定の処理部における所定単位毎の処理変更を容易に実現する。【解決手段】制御コマンド付加部１０７で、５２５ｉ信号の１フレーム毎にＩＰ変換部１０８、ＤＲＣ部１０９および子画面処理部１１０を夫々制御する制御コマンドＣＭＤを付加し、制御コマンド付き画像信号ＳＶａを得る。ＩＰ変換部１０８、ＤＲＣ部１０９、子画面処理部１１０は、夫々、制御コマンドＣＭＤに含まれている自己の処理部を制御する制御コマンドに基づいて、処理を実行する。解像度、ノイズ除去度の調整時には、ＤＲＣ部１０９は生成する１０５０ｐ信号の解像度、ノイズ除去度を、１フレーム毎に、６種類のものに順次繰り返し変化させる。これに対応して、子画面処理部１１０は、１０５０ｐ信号の１／６領域の子画面部分を、画像メモリ１１１の、その１０５０ｐ信号の解像度、ノイズ除去度に対応したメモリ領域に書き込む。【選択図】        図１
2005217634.tif 000002
【特許請求の範囲】
【請求項１】
情報信号に対して複数の処理を順に行う情報信号処理装置であって、
上記複数の処理をそれぞれ行う複数の処理部を備え、
上記複数の処理部には、情報信号の所定単位毎に上記複数の処理部の一部または全部における処理を制御するための制御コマンドが付加された制御コマンド付き情報信号が供給され、
上記一部または全部の処理部は、それぞれ上記制御コマンド付き情報信号に付加されている制御コマンドのうち自己の処理部における処理を制御するための制御コマンドに基づいて、上記情報信号の処理を行う
ことを特徴とする情報信号処理装置。
【請求項２】
情報信号の所定単位毎に上記複数の処理部の一部または全部における処理を制御するための制御コマンドを付加して上記制御コマンド付き情報信号を得る制御コマンド付加部をさらに備える
ことを特徴とする請求項１に記載の情報信号処理装置。
【請求項３】
上記一部または全部の処理部は、それぞれ、
上記制御コマンド付き情報信号から制御コマンドおよび情報信号を分離して取得する分離手段と、
上記分離手段で分離された情報信号を、上記分離手段で分離された自己の処理部における処理を制御するための制御コマンドに基づいて処理を行う処理手段とを有する
ことを特徴とする請求項１に記載の情報信号処理装置。
【請求項４】
上記一部または全部の処理部の少なくともいずれかは、
上記処理手段で処理された情報信号の所定単位毎に、上記分離手段で分離された制御コマンドを付加して、出力すべき制御コマンド付き情報信号を得る付加手段をさらに有する
ことを特徴とする請求項３に記載の情報信号処理装置。
【請求項５】
上記付加手段は、上記分離手段で分離された制御コマンドのうち、自己の処理部における処理を制御するための制御コマンドを除いた残りの制御コマンドを、上記処理手段で処理された情報信号に付加する
ことを特徴とする請求項４に記載の情報信号処理装置。
【請求項６】
上記付加手段は、上記分離手段で分離された制御コマンドの全てを、上記処理手段で処理された情報信号に付加する
ことを特徴とする請求項４に記載の情報信号処理装置。
【請求項７】
上記情報信号は画像信号であり、
上記一部または全部の処理部に、１フレーム毎に表示位置が異なる子画面用の画像信号を生成するための処理部を含む
ことを特徴とする請求項１に記載の情報信号処理装置。
【請求項８】
上記情報信号は画像信号であり、
上記一部または全部の処理部に、１フレーム毎に、画素位置を変化させるための処理を行う処理部を含む
ことを特徴とする請求項１に記載の情報信号処理装置。
【請求項９】
情報信号に対して複数の処理部で順に処理を行う情報信号処理方法であって、
上記複数の処理部に、情報信号の所定単位毎に上記複数の処理部の一部または全部における処理を制御するための制御コマンドが付加された制御コマンド付き情報信号を供給し、
上記一部または全部の処理部で、それぞれ上記制御コマンド付き情報信号に付加されている制御コマンドのうち自己の処理部における処理を制御するための制御コマンドに基づいて、上記情報信号を処理させる
ことを特徴とする情報信号処理方法。
【請求項１０】
情報信号の所定単位毎に制御コマンドが付加されている制御コマンド付き情報信号から制御コマンドおよび情報信号を分離して取得する分離手段と、
上記分離手段で分離された情報信号を、上記分離手段で分離された自己の処理を制御するための制御コマンドに基づいて処理を行う処理手段と
を備えることを特徴とする情報信号処理装置。
【請求項１１】
上記処理手段で処理された情報信号の所定単位毎に、上記分離手段で分離された制御コマンドを付加して、出力すべき制御コマンド付き情報信号を得る付加手段をさらに備える
ことを特徴とする請求項１０に記載の情報信号処理装置。
【請求項１２】
情報信号の所定単位毎に制御コマンドが付加されている制御コマンド付き情報信号から制御コマンドおよび情報信号を分離して取得する分離ステップと、
上記分離ステップで分離された情報信号を、上記分離ステップで分離された自己の処理を制御するための制御コマンドに基づいて処理を行う処理ステップと
を備えることを特徴とする情報信号処理方法。
【請求項１３】
上記処理ステップで処理された情報信号の所定単位毎に、上記分離ステップで分離された制御コマンドを付加して、出力すべき制御コマンド付き情報信号を得る付加ステップをさらに備える
ことを特徴とする請求項１２に記載の情報信号処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、情報信号に対して複数の処理を順に行う情報信号処理装置および情報信号処理方法に関する。
【０００２】
詳しくは、この発明は、複数の処理部に情報信号の所定単位毎に制御コマンドが付加された制御コマンド付き情報信号を供給し、複数の処理部の一部または全部でそれぞれ制御コマンド付き情報信号に付加されている制御コマンドのうち自己の処理部における処理を制御するための制御コマンドに基づいて情報信号を処理させることによって、所定の処理部における所定単位毎の処理変更を容易に実現できるようにした情報信号処理装置および情報信号処理方法に係るものである。
【背景技術】
【０００３】
処理部（例えば、基板、チップ、装置等）を単位とするアップグレード構造は、処理部の交換、追加を行っていくうちに動作状態を大幅に変更させることができる。例えば、画像信号処理装置を、上述のアップグレード構造で実現することが考えられる。この場合、画像信号処理装置を構成する所定の処理部における処理内容を、所定単位毎、例えばフレーム毎に、変化させたい場合がある。例えば、所定の処理部で、子画面処理を行う場合、フレーム毎に、子画面の表示位置を変更する必要がある。この場合、この所定の処理部に、この所定の処理部に入力される画像信号のフレームに同期して、制御コマンドを供給する必要がある。
【０００４】
特許文献１には、入力データに対してｎ段の演算器でパイプライン方式により演算処理を行うパイプライン演算器が記載されている。このパイプライン演算器では、入力データに同期したフレームパルス等の基準信号を基準にして、ｎ段の演算器の処理内容を変更するようになっている。この場合、ｎ段の演算器の後段にいく程、処理すべきデータも遅延していくので、各演算器における処理内容の変更タイミング、すなわち制御コマンド（命令もしくは係数）の供給タイミングを、遅延器を用いて調整し、処理内容の変更時にも正しい演算処理結果が得られるようになされている。
【０００５】
【特許文献１】特開平０７−２８６４２号公報（図１、３〜５頁参照）
【発明の開示】
【発明が解決しようとする課題】
【０００６】
上述の特許文献１に記載されるパイプライン演算器では、各段の演算器への制御コマンドの供給タイミングを遅延器を用いて調整している。このような手法は、この特許文献１に記載されるパイプライン演算器のように動作が固定的である場合には、簡便でよい。しかし、上述したようにアップグレード構造を持つ画像信号処理装置では、処理部の交換、追加の度に、例えば上述の所定の処理部への制御コマンドの供給タイミングを調整し直す必要があり、アップグレード構造の装置には適用しにくい。
【０００７】
この発明の目的は、情報信号を複数の処理部で順に処理するものにあって、所定の処理部における所定単位毎の処理変更を容易に実現することにある。
【課題を解決するための手段】
【０００８】
この発明に係る情報信号処理装置は、情報信号に対して複数の処理を順に行う情報信号処理装置であって、複数の処理をそれぞれ行う複数の処理部を備え、複数の処理部には、情報信号の所定単位毎にこの複数の処理部の一部または全部における処理を制御するための制御コマンドが付加された制御コマンド付き情報信号が供給され、一部または全部の処理部は、それぞれ制御コマンド付き情報信号に付加されている制御コマンドのうち自己の処理部における処理を制御するための制御コマンドに基づいて、情報信号の処理を行うものである。
【０００９】
また、この発明に係る情報信号処理方法は、情報信号に対して複数の処理部で順に処理を行う情報信号処理方法であって、複数の処理部に、情報信号の所定単位毎にこの複数の処理部の一部または全部における処理を制御するための制御コマンドが付加された制御コマンド付き情報信号を供給し、一部または全部の処理部で、それぞれ制御コマンド付き情報信号に付加されている制御コマンドのうち自己の処理部における処理を制御するための制御コマンドに基づいて、情報信号を処理させるものである。
【００１０】
この発明においては、情報信号に対して、複数の処理部で、複数の処理が順に行われる。この場合、複数の処理部には、情報信号の所定単位毎にこの複数の処理部の一部または全部における処理を制御するための制御コマンドが付加された制御コマンド付き情報信号が供給される。例えば、この制御コマンド付き情報信号は、制御コマンド付加部によって得られる。この制御コマンド付加部では、情報信号の所定単位毎に、複数の処理部の一部または全部における処理を制御するための制御コマンドが付加される。ここで、情報信号は、画像信号、音声信号等である。画像信号の場合、所定単位毎とは、例えば１フレームあるいは複数フレーム毎などである。音声信号の場合、所定単位毎とは、例えば所定サンプル数毎である。
【００１１】
一部または全部の処理部では、それぞれ制御コマンド付き情報信号に付加されている制御コマンドのうち自己の処理部における処理を制御するための制御コマンドに基づいて、情報信号の処理が行われる。例えば、一部または全部の処理部では、それぞれ、制御コマンド付き情報信号から制御コマンドおよび情報信号が分離され、分離された情報信号が、分離された自己の処理部における処理を制御するための制御コマンドに基づいて処理され、処理後の情報信号の所定単位毎に、分離された制御コマンドが付加されて、出力すべき制御コマンド付き情報信号が得られる。
【００１２】
この場合、例えば、出力すべき制御コマンド付き情報信号を得る際、分離された制御コマンドのうち、自己の処理部における処理を制御するための制御コマンドを除いた残りの制御コマンドが、処理後の情報信号に付加される。これは、自己の処理部における処理を制御するための制御コマンドが後の処理に不要な場合である。また例えば、出力すべき制御コマンド付き情報信号を得る際、分離された制御コマンドの全てが、処理後の情報信号に付加される。これは、自己の処理部における処理を制御するための制御コマンドが後の処理に必要な場合である。
【００１３】
このように、複数の処理部には情報信号の所定単位毎にこの複数の処理部の一部または全部における処理を制御するための制御コマンドが付加された制御コマンド付き情報信号が供給され、所定の処理部では情報信号の所定単位毎に、それに付加されている自己の処理部における処理を制御するための制御コマンドに基づいて処理が行われる。したがって、所定の処理部における所定単位毎の処理変更を容易に実現できる。
【００１４】
この発明に係る情報信号処理装置は、情報信号の所定単位毎に制御コマンドが付加されている制御コマンド付き情報信号から制御コマンドおよび情報信号を分離して取得する分離手段と、この分離手段で分離された情報信号を、この分離手段で分離された自己の処理を制御するための制御コマンドに基づいて処理を行う処理手段とを備えるものである。また、この発明に係る情報信号処理装置は、さらに、上述の処理手段で処理された情報信号の所定単位毎に、分離手段で分離された制御コマンドを付加して、出力すべき制御コマンド付き情報信号を得る付加手段を備えるものである。
【００１５】
また、この発明に係る情報信号処理方法は、情報信号の所定単位毎に制御コマンドが付加されている制御コマンド付き情報信号から制御コマンドおよび情報信号を分離して取得する分離ステップと、この分離ステップで分離された情報信号を、この分離ステップで分離された自己の処理を制御するための制御コマンドに基づいて処理を行う処理ステップとを備えるものである。
【００１６】
この発明においては、制御コマンド付き情報信号から、制御コマンドおよび情報信号が分離される。そして、分離された情報信号が、分離された自己の処理を制御するための制御コマンドに基づいて処理される。そして、処理後の情報信号の所定単位毎に、分離された制御コマンドが付加され、出力すべき制御コマンド付き情報信号が得られる。情報信号の所定単位毎に、それに付加されている自己の処理を制御するための制御コマンドに基づいて処理を行うものであり、所定単位毎の処理変更を容易に実現できる。
【発明の効果】
【００１７】
この発明によれば、複数の処理部に情報信号の所定単位毎に制御コマンドが付加された制御コマンド付き情報信号を供給し、当該複数の処理部の一部または全部でそれぞれ制御コマンド付き情報信号に付加されている制御コマンドのうち自己の処理部における処理を制御するための制御コマンドに基づいて情報信号を処理させるものであり、所定の処理部では、情報信号の所定単位毎に、それに付加されている制御コマンドに基づいて処理が行われ、従って所定の処理部における所定単位毎の処理変更を容易に実現できる。
【発明を実施するための最良の形態】
【００１８】
以下、図面を参照しながら、この発明の実施の形態について説明する。図１は、実施の形態としての画像表示装置１００の構成を示している。
【００１９】
この画像表示装置１００は、放送信号より５２５ｉ信号を得、この５２５ｉ信号を５２５ｐ信号に変換し、さらにこの５２５ｐ信号を１０５０ｐ信号に変換し、この１０５０ｐ信号による画像を表示する機能を持っている。ここで、５２５ｉ信号は、ライン数が５２５本でインタレース方式の画像信号であり、５２５ｐ信号はライン数が５２５本でプログレッシブ方式の画像信号であり、さらに１０５０ｐ信号はライン数が１０５０本でプログレッシブ方式の画像信号である。
【００２０】
図２は、５２５ｐ信号と１０５０ｐ信号の空間方向（垂直方向、水平方向）の画素位置関係を示しており、大きなドットが５２５ｐ信号の画素であり、小さいドットが１０５０ｐ信号の画素である。図２から分かるように、１０５０ｐ信号のライン数は５２５ｐ信号の２倍であり、また１０５０ｐ信号の各ラインの画素数は５２５ｐ信号の２倍である。
【００２１】
図１に戻って、画像表示装置１００は、マイクロコンピュータを備え、装置全体の動作を制御するためのシステムコントローラ１０１と、リモコン信号ＲＭを受信するリモコン受信部１０２とを有している。リモコン受信部１０２は、システムコントローラ１０１に接続され、リモコン送信機１０３よりユーザの操作に応じて出力されるリモコン信号ＲＭを受信し、そのリモコン信号ＲＭに対応する操作信号をシステムコントローラ１０１に供給する。
【００２２】
また、画像表示装置１００は、受信アンテナ１０５と、チューナ１０６とを有している。チューナ１０６は、この受信アンテナ１０５で捕らえられた放送信号に対して、選局処理等を行って、ユーザ所望のチャネルの画像信号である５２５ｉ信号を取得する。
【００２３】
また、画像表示装置１００は、制御コマンド付加部１０７を有している。この制御コマンド付加部１０７は、チューナ１０６から出力される５２５ｉ信号の１フレーム毎に、後述するＩＰ変換部１０８、ＤＲＣ(Digital Reality Creation)部１０９および子画面処理部１１０の処理をそれぞれ制御するための制御コマンドＣＭＤを付加し、制御コマンド付き画像信号ＳＶａを生成する。この場合、制御コマンド付加部１０７には、システムコントローラ１０１から、制御コマンドＣＭＤが供給される。なお、ここでいう「１フレーム」は後述する５２５ｐ信号、１０５０ｐ信号等のプログレッシブ方式における１フレームであって、５２５ｉ信号では実際には１フィールドに対応している。
【００２４】
また、画像表示装置１００は、ＩＰ変換部１０８と、ＤＲＣ部１０９と、子画面処理部１１０と、画像メモリ１１１とを有している。ＩＰ変換部１０８は、制御コマンド付加部１０７より出力される制御コマンド付き画像信号ＳＶａを入力し、この画像信号ＳＶａから、１フレーム毎に、制御コマンドおよび画像信号をそれぞれ分離して取得する。また、このＩＰ変換部１０８は、１フレーム毎に、分離取得された制御コマンドに含まれる自己の処理部における処理を制御するための制御コマンドに基づいて、画像信号を５２５ｉ信号から５２５ｐ信号に変換する。さらに、このＩＰ変換部１０８は、１フレーム毎に、分離取得された制御コマンドのうち自己の処理部における処理を制御するための制御コマンドを除いた残りの制御コマンド、つまり他の処理部における処理を制御するための制御コマンドを、処理後の画像信号に付加して、出力すべき制御コマンド付き画像信号ＳＶｂを生成する。
【００２５】
ＤＲＣ部１０９は、ＩＰ変換部１０８より出力される制御コマンド付き画像信号ＳＶｂを入力し、この画像信号ＳＶｂから、１フレーム毎に、制御コマンドおよび画像信号をそれぞれ分離して取得する。また、このＤＲＣ部１０９は、１フレーム毎に、分離取得された制御コマンドに含まれる自己の処理部における処理を制御するための制御コマンドに基づいて、画像信号を５２５ｐ信号から１０５０ｐ信号に変換する。さらに、このＤＲＣ部１０９は、１フレーム毎に、分離取得された制御コマンドのうち自己の処理部における処理を制御するための制御コマンドを除いた残りの制御コマンド、つまり他の処理部における処理を制御するための制御コマンドを、処理後の画像信号に付加して、出力すべき制御コマンド付き画像信号ＳＶｃを生成する。
【００２６】
ユーザは、後述するディスプレイの画面上に表示される画像の解像度、ノイズ除去度を調整できる。ＤＲＣ部１０９では、後述するように、１０５０ｐ信号を構成する各画素データが推定式によって生成されるが、この推定式で用いられる係数データを変更することで解像度、ノイズ除去度を調整できる。このＤＲＣ部１０９の処理を制御するための制御コマンドには、解像度、ノイズ除去度を示すパラメータｒ，ｚが含まれている。
【００２７】
解像度、ノイズ除去度の調整時には、このＤＲＣ部１０９の処理を制御するための１フレーム毎の制御コマンドに含まれる解像度、ノイズ除去度を示すパラメータｒ，ｚは、６種類のものが順次繰り返される。そしてこの場合、ディスプレイの画面上に、６種類のパラメータｒ，ｚに対応した係数データを用いて生成された１０５０ｐ信号による子画面画像が並べて表示される。ユーザは、リモコン送信機１０３の操作によって、ディスプレイの画面上に表示される子画面画像から所望の子画面画像を選択して、所望の解像度、ノイズ除去度を選択できる。
【００２８】
このようにユーザが所望の解像度、ノイズ除去度を選択した後の通常時には、ＤＲＣ部１０９の処理を制御するための１フレーム毎の制御コマンドに含まれる解像度、ノイズ除去度を示すパラメータｒ，ｚは、ユーザが選択した解像度、ノイズ除去度を示すものとされる。これにより、通常時には、ディスプレイの画面上に表示される画像の解像度、ノイズ除去度は、調整時にユーザによって選択された解像度、ノイズ除去度となる。
【００２９】
子画面処理部１１０は、ＤＲＣ部１０９より出力される制御コマンド付き画像信号ＳＶｃを入力し、この画像信号ＳＶｃから、１フレーム毎に、制御コマンドおよび画像信号をそれぞれ分離して取得する。また、この子画面処理部１１０は、１フレーム毎に、分離取得された制御コマンドに含まれる自己の処理部における処理を制御するための制御コマンドに基づいて、分離取得された画像信号からディスプレイの画面に画像を表示するための画像信号ＳＶｄを生成して出力する。
【００３０】
この子画面処理部１１０の処理を制御するための制御コマンドには、通常処理を指示するコマンドあるいは子画面処理を指示するコマンド、さらに子画面処理を指示するコマンドが含まれるときは子画面位置を示す情報が含まれている。上述した解像度、ノイズ除去度の調整時には、この子画面処理部１１０の処理を制御するための１フレーム毎の制御コマンドには、子画面処理であることを示す情報、さらに子画面位置を示す情報が含まれている。
【００３１】
この場合、この子画面位置の情報は、１フレーム毎に、上述した６種類のパラメータｒ，ｚにそれぞれ対応した６位置のものが順次繰り返される。このとき、子画面処理部１１０は、１フレーム毎に、分離取得された画像信号の１／６領域（例えば画面を水平方向に３分割し、垂直方向に２分割した場合、左上の領域）の部分を、画像メモリ１１１の子画面位置の情報に対応したメモリ領域に書き込む。
【００３２】
またこのとき、子画面処理部１１０は、１フレーム毎に、画像メモリ１１１に記憶されている１フレーム分の画像信号を読み出し、ディスプレイの画面に画像を表示するための画像信号ＳＶｄとして出力する。これにより、ディスプレイの画面上に、６種類のパラメータｒ，ｚに対応した係数データを用いて生成された１０５０ｐ信号による子画面画像が並べて表示される。
【００３３】
また、ユーザが所望の解像度、ノイズ除去度を選択した後の通常時には、この子画面処理部１１０の処理を制御するための制御コマンドには、通常処理であることを示す情報が含まれている。この場合、子画面処理部１１０は、１フレーム毎に、分離取得された画像信号を画像メモリ１１１に書き込むと共に、画像メモリ１１１に記憶されている１フレーム分の画像信号を読み出し、ディスプレイの画面に画像を表示するための画像信号ＳＶｄとして出力する。これにより、ディスプレイの画面上に、ユーザによって選択された解像度、ノイズ除去度の通常画像が表示される。
【００３４】
また、画像表示装置１００は、パネルドライバ１１２と、ディスプレイ１１３とを有している。ディスプレイ１１３は、例えばＬＣＤ(Liquid Crystal Display)、ＰＤＰ(Plasma Display Panel)等で構成されるフラットパネルディスプレイである。パネルドライバ１１２は、子画面処理部１１０より出力される画像信号ＳＶｄに基づいてディスプレイ１１３を駆動し、このディスプレイ１１３の画面上に画像信号ＳＶｄによる画像を表示する。
【００３５】
また、画像表示装置１００は、ＯＳＤ(On Screen Display)部１１４と、合成器１１５とを有している。ＯＳＤ部１１４は、システムコントローラ１０１の制御のもと、ディスプレイ１１３の画面上に文字、図形などの表示を行うための表示信号ＳＣＨを発生する。合成器１１５は、ＯＳＤ部１１４で発生される表示信号ＳＣＨを、子画面処理部１１０から出力される画像信号ＳＶｄに合成して、パネルドライバ１１２に供給する。ＯＳＤ部１１４は、例えば上述した解像度、ノイズ除去度の調整時には、ディスプレイ１１３の画面上に並べて表示される各子画面画像を囲む枠および各子画面画像を識別する数字を表示する表示信号ＳＣＨを発生する。
【００３６】
ここで、ＩＰ変換部１０８、ＤＲＣ部１０９、子画面処理部１１０の基本となる処理部１２０について説明する。図３は、この処理部１２０の構成を示している。
【００３７】
処理部１２０は、制御コマンド・画像信号分離部１２１を有している。この制御コマンド・画像信号分離部１２１は、画像信号の１フレーム毎に制御コマンドが付加された制御コマンド付き画像信号ＳＶinを入力し、この画像信号ＳＶinから、１フレーム毎に、制御コマンドおよび画像信号を分離して取得する。
【００３８】
また、処理部１２０は、画像処理部１２２と、遅延部１２３と、制御コマンド付加部１２４とを有している。画像処理部１２２は、１フレーム毎に、分離部１２１で分離された画像信号Ｖ１を、分離部１２１で分離された自己の処理部における処理を制御するための制御コマンドＣＭＤａに基づいて処理をする。遅延部１２３は、分離部１２１で分離された他の処理部における処理を制御するための制御コマンドＣＭＤｂを、上述した画像処理部１２２における処理遅延分だけ遅延させる。制御コマンド付加部１２４は、１フレーム毎に、画像処理部１２２から出力される１フレーム分の画像信号Ｖ２に、遅延部１２３で遅延された制御コマンドＣＭＤｂを付加して、出力すべき制御コマンド付き画像信号ＳＶoutを得る。なお、分離部１２１では、後述するように、各処理部の制御コマンドに含まれている識別子に基づいて、自己の処理部における処理を制御するための制御コマンドＣＭＤａと他の処理部における処理を制御するための制御コマンドＣＭＤｂとの識別が行われる。
【００３９】
図３に示す処理部１２０の動作を説明する。制御コマンド付き画像信号ＳＶinが、制御コマンド・画像信号分離部１２１に供給される。この分離部１２１では、画像信号ＳＶinから、１フレーム毎に、制御コマンドおよび画像信号が分離されて取得される。この分離部１２１で１フレーム毎に分離された、画像信号Ｖ１および自己の処理部における処理を制御するための制御コマンドＣＭＤａは、それぞれ画像処理部１２２に供給される。
【００４０】
画像処理部１２２では、１フレーム毎に、画像信号Ｖ１を制御コマンドＣＭＤａに基づいて処理をする。この画像処理部１２２で処理された後の画像信号Ｖ２は制御コマンド付加部１２４に供給される。また、分離部１２１で分離された、他の処理部における処理を制御するための制御コマンドＣＭＤｂは、遅延部１２３で画像処理部１２２における処理遅延分だけ遅延された後に、制御コマンド付加部１２４に供給される。
【００４１】
制御コマンド付加部１２４では、１フレーム毎に、画像処理部１２２から出力される１フレーム分の画像信号Ｖ２に、遅延部１２３で遅延された制御コマンドＣＭＤｂが付加され、出力すべき制御コマンド付き画像信号ＳＶoutが得られる。この画像信号ＳＶoutが処理部１２０の出力信号となる。
【００４２】
図４のフローチャートは、図３に示す処理部１２０における、制御コマンド付き画像信号ＳＶinの１フレーム分に対する処理手順を示している。
【００４３】
まず、ステップＳＴ１で、処理を開始し、ステップＳＴ２で、制御コマンド付き画像信号ＳＶinから、制御コマンドと画像信号を分離して得る。そして、ステップＳＴ３で、ステップＳＴ２で分離された自己の処理部における処理を制御するための制御コマンドＣＭＤａに基づいて、ステップＳＴ２で分離された画像信号Ｖ１を処理する。そして、ステップＳＴ４で、ステップＳＴ３で処理された後の画像信号Ｖ２に、ステップＳＴ１で分離された他の処理部における処理を制御するための制御コマンドＣＭＤｂを付加して、出力すべき制御コマンド付き画像信号ＳＶoutを得る。そして、ステップＳＴ５で、処理を終了する。
【００４４】
図５Ａは、制御コマンド付加部１０７から出力される制御コマンド付き画像信号ＳＶａを示している。この画像信号ＳＶａは、上述したように、画像信号の１フレーム毎にＩＰ変換部１０８、ＤＲＣ部１０９、子画面処理部１１０における処理を制御するための制御コマンドＣＭＤが付加されたものである。図５Ａにおける画像フレームは、１フレーム分の画像信号を意味している。１フレーム毎の制御コマンドＣＭＤは、図５Ｂに示すように、ＩＰ変換部１０８における処理を制御するためのコマンド１、ＤＲＣ部１０９における処理を制御するためのコマンド２、子画面処理部１１０における処理を制御するためのコマンド３からなっている。
【００４５】
コマンド１には、図５Ｃ，Ｄに示すように、解像度、ノイズ除去度の調整時、および解像度、ノイズ除去度が選択された後の通常時のいずれにあっても、ＩＰ変換部１０８に対する制御コマンドであることを識別するための識別子ＩＤ１、およびＩＰ変換処理を指示するコマンドが含まれている。
【００４６】
コマンド２には、解像度、ノイズ除去度の調整時は、図５Ｃに示すように、ＤＲＣ部１０９に対する制御コマンドであることを識別するための識別子ＩＤ２、ＤＲＣ処理を指示するコマンド、および解像度、ノイズ除去度を示すパラメータｒ，ｚが含まれている。この場合、１フレーム毎の制御コマンドに含まれる解像度、ノイズ除去度を示すパラメータｒ，ｚは、上述したように６種類のものが順次繰り返されるものとなる。また、このコマンド２には、解像度、ノイズ除去度が選択された後の通常時は、図５Ｄに示すように、識別子ＩＤ２、ＤＲＣ処理を指示するコマンド、および選択された解像度、ノイズ除去度を示すパラメータｒs，ｚsが含まれている。
【００４７】
コマンド３には、解像度、ノイズ除去度の調整時は、図５Ｃに示すように、子画面処理部１１０に対する制御コマンドであることを識別するための識別子ＩＤ３、子画面処理を指示するコマンド、および子画面位置を示す情報が含まれている。この場合、１フレーム毎の制御コマンドに含まれる子画面位置を示す情報は、上述したように、６種類のパラメータｒ，ｚにそれぞれ対応した６位置のものが順次繰り返されるものとなる。また、このコマンド３には、解像度、ノイズ除去度が選択された後の通常時は、図５Ｄに示すように、識別子ＩＤ３、および通常処理を指示するコマンドが含まれている。
【００４８】
図３に示す処理部１２０は、上述したように、ＩＰ変換部１０８、ＤＲＣ部１０９、子画面処理部１１０の基本となるものである。個々の処理部について、さらに、説明する。
【００４９】
ＩＰ変換部１０８について説明する。このＩＰ変換部１０８において、画像処理部１２２は、５２５ｉ信号である画像信号Ｖ１を、５２５ｐ信号である画像信号Ｖ２に変換する。この場合、ライン数の増加は、例えば線形補間により行われる。また、このＩＰ変換部１０８において、制御コマンド・画像信号分離部１２１に供給される制御コマンド付き画像信号ＳＶinは、制御コマンド付加部１０７から出力される画像信号ＳＶａであり、その１フレーム毎の制御コマンドＣＭＤは、コマンド１、コマンド２、コマンド３からなっている（図５Ａ，Ｂ参照）。この場合、自己の処理部における処理を制御するための制御コマンドＣＭＤａはコマンド１であり、他の処理部における処理を制御するための制御コマンドＣＭＤｂはコマンド２、コマンド３である。制御コマンド付加部１２４は、１フレーム毎に、画像処理部１２２から出力される１フレーム分の画像信号Ｖ２に、制御コマンドＣＭＤとして、分離部１２１で分離されたコマンド２、コマンド３を付加して、出力すべき制御コマンド付き画像信号ＳＶoutを形成する。
【００５０】
ＤＲＣ部１０９について説明する。このＤＲＣ部１０９において、画像処理部１２２は、５２５ｐ信号である画像信号Ｖ１を、１０５０ｐ信号である画像信号Ｖ２に変換する。また、このＤＲＣ部１０９において、制御コマンド・画像信号分離部１２１に供給される制御コマンド付き画像信号ＳＶinは、ＩＰ変換部１０８から出力される画像信号ＳＶｂであり、その１フレーム毎の制御コマンドＣＭＤは、コマンド２、コマンド３からなっている。この場合、自己の処理部における処理を制御するための制御コマンドＣＭＤａはコマンド２であり、他の処理部における処理を制御するための制御コマンドＣＭＤｂはコマンド３である。制御コマンド付加部１２４は、１フレーム毎に、画像処理部１２２から出力される１フレーム分の画像信号Ｖ２に、制御コマンドＣＭＤとして、分離部１２１で分離されたコマンド３を付加して、出力すべき制御コマンド付き画像信号ＳＶoutを形成する。
【００５１】
子画面処理部１１０について説明する。この子画面処理部１１０において、画像処理部１２２は、１０５０ｐ信号である画像信号Ｖ１に対して、子画面処理あるいは通常処理を行う。子画面処理では、上述したように、１フレーム毎に、画像信号Ｖ１の１／６領域の部分を画像メモリ１１１の子画面位置の情報に対応したメモリ領域に書き込むと共に、画像メモリ１１１に記憶されている１フレーム分の画像信号を読み出して、画像信号Ｖ２を得る。また、通常処理では、上述したように、１フレーム毎に、画像信号Ｖ１を画像メモリ１１１に書き込むと共に、画像メモリ１１１に記憶されている１フレーム分の画像信号を読み出して、画像信号Ｖ２を得る。
【００５２】
また、この子画面処理部１１０において、制御コマンド・画像信号分離部１２１に供給される制御コマンド付き画像信号ＳＶinは、ＤＲＣ部１０９から出力される画像信号ＳＶｃであり、その１フレーム毎の制御コマンドＣＭＤは、コマンド３のみからなっている。この場合、自己の処理部における処理を制御するための制御コマンドＣＭＤａはコマンド３であり、他の処理部における処理を制御するための制御コマンドＣＭＤｂは存在しない。この子画面処理部１１０には、遅延部１２３および制御コマンド付加部１２４は設けられておらず、画像処理部１２２から出力される画像信号Ｖ２を、そのまま画像信号ＳＶｄとして出力する。
【００５３】
次に、図６を参照して、ＤＲＣ部１０９内の画像処理部１２２の構成を説明する。この画像処理部１２２は、処理本体部１３０と、この処理本体部１３０の動作を制御する制御部１４０とからなっている。
【００５４】
制御部１４０には、自己の処理部における処理を制御するための制御コマンドＣＭＤａが供給される。この制御コマンドＣＭＤａは、上述したように、ＤＲＣ処理を指示するコマンド、および解像度、ノイズ除去度を示すパラメータｒ，ｚ（ｒs，ｚs）が含まれている（図５Ｃ，Ｄ参照）。
【００５５】
また、処理本体部１３０は、画像信号Ｖ１（５２５ｐ信号）を一時的に記憶するバッファメモリ１３１と、このバッファメモリ１３１に記憶された画像信号Ｖ１に基づいて、画像信号Ｖ２（１０５０ｐ信号）における注目位置の周辺に位置する複数の画素データを選択的に取り出して出力する第１〜第３のタップ選択回路１３２-1〜１３２-3とを有している。
【００５６】
第１のタップ選択回路１３２-1は、予測に使用する複数の画素データを、予測タップのデータとして選択的に取り出すものである。第２のタップ選択回路１３２-2は、レベル分布パターンに対応するクラス分類に使用する複数の画素データを、空間クラスタップのデータとして選択的に取り出すものである。図７Ａ，Ｂは、それぞれ空間クラスタップ、予測タップの一例を示している。
【００５７】
第３のタップ選択回路１３２-3は、動きに対応するクラス分類に使用する複数の画素データを、動きクラスタップのデータとして選択的に取り出するものである。なお、空間クラスを複数フィールドに属する画素データを使用して決定する場合には、この空間クラスにも動き情報が含まれることになる。
【００５８】
また、処理本体部１３０は、第２のタップ選択回路１３２-2で選択的に取り出される空間クラスタップのデータとしての複数の画素データのレベル分布パターンを検出し、このレベル分布パターンに基づいて空間クラスを検出し、そのクラス情報を出力する空間クラス検出回路１３３を有している。
【００５９】
空間クラス検出回路１３３では、例えば、各画素データを、８ビットデータから２ビットデータに圧縮するような演算が行われる。そして、空間クラス検出回路１３３からは、各画素データに対応した圧縮データが空間クラスのクラス情報として出力される。本実施の形態においては、ＡＤＲＣ（Adaptive Dynamic Range Coding）によって、データ圧縮が行われる。なお、データ圧縮手段としては、ＡＤＲＣ以外にＤＰＣＭ（予測符号化）、ＶＱ（ベクトル量子化）等を用いてもよい。
【００６０】
本来、ＡＤＲＣは、ＶＴＲ（Video Tape Recorder）向け高性能符号化用に開発された適応再量子化法であるが、信号レベルの局所的なパターンを短い語長で効率的に表現できるので、上述したデータ圧縮に使用して好適なものである。ＡＤＲＣを使用する場合、複数の画素データの最大値をＭＡＸ、その最小値をＭＩＮ、複数の画素データのダイナミックレンジをＤＲ（＝ＭＡＸ−ＭＩＮ＋１）、再量子化ビット数をＰとすると、各画素データｋｉに対して、（１）式の演算により、圧縮データとしての再量子化コードｑｉが得られる。ただし、（１）式において、[  ]は切り捨て処理を意味している。空間クラスタップのデータとして、Ｎａ個の画素データがあるとき、ｉ＝１〜Ｎａである。
ｑｉ＝［（ｋｉ−ＭＩＮ＋０．５）＊２P／ＤＲ］      ・・・（１）
【００６１】
また、処理本体部１３０は、第３のタップ選択回路１３２-3で選択的に取り出される動きクラスタップのデータとしての複数の画素データより、主に動きの程度を表すための動きクラスを検出し、そのクラス情報を出力する動きクラス検出回路１３４を有している。
【００６２】
この動きクラス検出回路１３４では、第３のタップ選択回路１３２-3で選択的に取り出される複数の画素データｍｉ，ｎｉからフレーム間差分が算出され、さらにその差分の絶対値の平均値に対してしきい値処理が行われて動きの指標である動きクラスが検出される。すなわち、動きクラス検出回路１３４では、（２）式によって、差分の絶対値の平均値ＡＶが算出される。第３のタップ選択回路１３２-3で、例えば１２個の画素データｍ１〜ｍ６，ｎ１〜ｎ６が取り出されるとき、（２）式におけるＮｂは６である。
【００６３】
【数１】
2005217634.tif 000003
【００６４】
そして、動きクラス検出回路１１５では、上述したように算出された平均値ＡＶが１個または複数個のしきい値と比較されて動きクラスのクラス情報ＭＶが得られる。例えば、３個のしきい値ｔｈ１，ｔｈ２，ｔｈ３（ｔｈ１＜ｔｈ２＜ｔｈ３）が用意され、４つの動きクラスを検出する場合、ＡＶ≦ｔｈ１のときはＭＶ＝０、ｔｈ１＜ＡＶ≦ｔｈ２のときはＭＶ＝１、ｔｈ２＜ＡＶ≦ｔｈ３のときはＭＶ＝２、ｔｈ３＜ＡＶのときはＭＶ＝３とされる。
【００６５】
また、処理本体部１３０は、クラス合成回路１３５を有している。このクラス合成回路１３５は、空間クラス検出回路１３３より出力される空間クラスのクラス情報としての再量子化コードｑｉと、動きクラス検出回路１３４より出力される動きクラスのクラス情報ＭＶに基づき、画像信号Ｖ２における注目位置の画素データが属するクラスを示すクラスコードＣＬを求める。このクラス合成回路１３５では、（３）式によって、クラスコードＣＬの演算が行われる。なお、（３）式において、Ｎａは空間クラスタップのデータとしての複数の画素データの個数、ＰはＡＤＲＣにおける再量子化ビット数を示している。
【００６６】
【数２】
2005217634.tif 000004
【００６７】
また、処理本体部１３０は、係数メモリ１３６を有している。この係数メモリ１３６は、後述する推定予測演算回路１３７で使用される推定式で用いられる係数データＷｉ（ｉ＝１〜ｎ）を、クラス毎に、格納している。この場合、各クラスの係数データＷｉは、それぞれ上述したパラメータｒ，ｚの６種類にそれぞれ対応した係数データＷｉからなっている。この係数データＷｉは、画像信号Ｖ１（５２５ｐ信号）を、画像信号Ｖ２（１０５０ｐ信号）に変換するための情報である。
【００６８】
５２５ｐ信号を１０５０ｐ信号に変換する場合、各フレームにおいて、５２５ｐ信号の１画素に対応して１０５０ｐ信号の４画素を得る必要がある（図２参照）。この場合、各フレームにおける１０５０ｐ信号を構成する２×２の単位画素ブロック内の４画素は、それぞれ中心予測タップに対して異なる位相ずれを持っている。図８は、画像信号Ｖ２（１０５０ｐ信号）を構成する２×２の単位画素ブロック内の４画素ＨＤ1〜ＨＤ4における、画像信号Ｖ１（５２５ｐ信号）の中心予測タップＳＤ0からの位相ずれを示している。ここで、ＨＤ1〜ＨＤ4の位置は、それぞれ、ＳＤ0の位置から水平方向にｋ1〜ｋ4、垂直方向にｍ1〜ｍ4だけずれている。
【００６９】
そのため、上述した各種類に対応した係数データＷｉは、さらに出力画素（ＨＤ1〜ＨＤ4）にそれぞれ対応した係数データＷｉからなっている。結局、係数メモリ１３６には、クラス、パラメータｒ，ｚの種類（６種類）、出力画素（ＨＤ1〜ＨＤ4）の組み合わせ毎に、係数データＷｉが格納されている。この係数データＷｉの生成方法については後述する。
【００７０】
この係数メモリ１３６には、上述したクラス合成回路１３５で得られるクラスコードＣＬが、読み出しアドレス情報として供給される。また、この係数メモリ１３６には、制御部１４０から、コマンドＣＭＤａに含まれていた解像度、ノイズ除去度を示すパラメータｒ，ｚ（ｒｓ，ｚｓ）も、読み出しアドレス情報として供給される。この係数メモリ１３６からは、クラスコードＣＬで示されるクラス、およびパラメータｒ，ｚ（ｒｓ，ｚｓ）の種類に対応した係数データＷｉが読み出され、その係数データＷｉが推定予測演算回路１３７に供給される。
【００７１】
また、処理本体部１３０は、推定予測演算回路１３７を有している。この推定予測演算回路１３７は、第１のタップ選択回路１３２-1で選択的に取り出される予測タップのデータとしての複数の画素データｘｉと、係数メモリ１３６から読み出された係数データＷｉとを用い、（４）式の推定式に基づいて、画像信号Ｖ２（１０５０ｐ信号）における注目位置の画素データｙを求める。
【００７２】
【数３】
2005217634.tif 000005
【００７３】
上述したように、５２５ｐ信号を１０５０ｐ信号に変換する際には、５２５ｐ信号の１画素（ＳＤ0）に対して１０５０ｐ信号の４画素（ＨＤ1〜ＨＤ4）を得る必要がある（図８参照）。この推定予測演算回路１３７は、画像信号Ｖ２（１０５０ｐ信号）を構成する２×２の単位画素ブロック毎に、画素データを求める。すなわち、この推定予測演算回路１３７には、第１のタップ選択回路１３２-1から単位画素ブロック内の４画素（注目画素）に対応した、予測タップのデータとしての複数の画素データｘｉが供給され、また係数メモリ１３６からその単位画素ブロックを構成する４画素分の係数データＷｉが供給される。そして、この推定予測演算回路１３７は、単位画素ブロックを構成する４画素のデータｙ1〜ｙ4を、それぞれ上述した（４）式の推定式で個別に演算する。
【００７４】
また、処理本体部１３０は、推定予測演算回路１３７より順次出力される、単位画素ブロック内の４画素のデータｙ1〜ｙ4を線順次化して１０５０ｐ信号のフォーマットで出力する後処理回路１３８を有している。
【００７５】
次に、図６に示す画像処理部１２２の動作を説明する。
画像信号Ｖ１（５２５ｐ信号）がバッファメモリ１３１に一時的に格納される。第２のタップ選択回路１３２-2では、バッファメモリ１３１に一時的に格納されている画像信号Ｖ１に基づいて、画像信号Ｖ２（１０５０ｐ信号）における注目位置の周辺、つまりその注目位置の単位画素ブロック内の４画素の周辺に位置する、複数の画素データが空間クラスタップのデータとして選択的に取り出される。この複数の画素データは空間クラス検出回路１３３に供給される。空間クラス検出回路１３３では、空間クラスタップのデータとしての複数の画素データのそれぞれに対してＡＤＲＣ処理が施されて空間クラス（主に空間内の波形表現のためのクラス分類）のクラス情報としての再量子化コードｑｉが得られる（（１）式参照）。
【００７６】
また、第３のタップ選択回路１３２-3では、バッファメモリ１３１に一時的に格納されている画像信号Ｖ１に基づいて、画像信号Ｖ２（１０５０ｐ信号）における注目位置の周辺、つまりその注目位置の単位画素ブロック内の４画素の周辺に位置する、複数の画素データが動きクラスタップのデータとして選択的に取り出される。この複数の画素データは動きクラス検出回路１３４に供給される。動きクラス検出回路１３４では、動きクラスタップのデータとしての複数の画素データから動きクラス（主に動きの程度を表すためのクラス分類）のクラス情報ＭＶが得られる。
【００７７】
この動き情報ＭＶと上述した再量子化コードｑｉはクラス合成回路１３５に供給される。このクラス合成回路１３５では、これら動き情報ＭＶと再量子化コードｑｉとから、画像信号Ｖ２（１０５０ｐ信号）を構成する単位画素ブロック毎に、その単位画素ブロック内の４画素（注目画素）が属するクラスを示すクラスコードＣＬが得られる（（３）式参照）。このクラスコードＣＬは、係数メモリ１３６に読み出しアドレス情報として供給される。また、この係数メモリ１３６には、制御部１４０から、コマンドＣＭＤａに含まれていた解像度、ノイズ除去度を示すパラメータｒ，ｚ（ｒｓ，ｚｓ）も、読み出しアドレス情報として供給される。
【００７８】
第１のタップ選択回路１３２-1では、バッファメモリ１３１に一時的に格納されている画像信号Ｖ１に基づいて、画像信号Ｖ２（１０５０ｐ信号）における注目位置の周辺、つまりその注目位置の単位画素ブロック内の４画素の周辺に位置する、複数の画素データｘｉが予測タップのデータとして選択的に取り出される。この複数の画素データｘｉは推定予測演算回路１３７に供給される。
【００７９】
係数メモリ１３６からは、クラスコードＣＬで示されるクラス、およびパラメータｒ，ｚ（ｒｓ，ｚｓ）の種類に対応した、上述の画像信号Ｖ２における注目位置の単位画素ブロックを構成する４画素分の係数データＷｉが読み出され、その係数データＷｉが推定予測演算回路１３７に供給される。推定予測演算回路１３７では、予測タップのデータとしての複数の画素データｘｉおよび４画素分の係数データＷｉが用いられ、注目位置の単位画素ブロックを構成する４画素のデータｙ1〜ｙ4が、それぞれ（４）式の推定式に基づいて、個別に求められる。
【００８０】
画像信号Ｖ２（１０５０ｐ信号）における注目位置が順次変化していくことで、推定予測演算回路１３７からは、画像信号Ｖ２における各注目位置の単位ブロックを構成する画素データｙ1〜ｙ4が順次出力される。後処理回路１３８では、推定予測演算回路１３７から順次供給される各注目位置の単位ブロックを構成する画素データｙ1〜ｙ4が線順次化され、１０５０ｐ信号のフォーマットで出力される。つまり、この後処理回路１３８からは、１０５０ｐ信号である画像信号Ｖ２が出力される。
【００８１】
上述したように、解像度、ノイズ除去度の調整時には、このＤＲＣ部１０９の処理を制御するための１フレーム毎の制御コマンドに含まれる解像度、ノイズ除去度を示すパラメータｒ，ｚは、６種類のものが順次繰り返される。そのため、この解像度、ノイズ除去度の調整時には、出力される画像信号Ｖ２（１０５０ｐ信号）による画像の解像度、ノイズ除去度が、１フレーム毎に、６種類のパラメータｒ，ｚに対応した解像度、ノイズ除去度に順次繰り返し変化していく。
【００８２】
一方、ユーザが所望の解像度、ノイズ除去度を選択した後の通常時には、ＤＲＣ部１０９の処理を制御するための１フレーム毎の制御コマンドに含まれる解像度、ノイズ除去度を示すパラメータｒｓ，ｚｓは、ユーザが選択した解像度、ノイズ除去度を示すものとされる。そのため、この通常時には、画像信号Ｖ２（１０５０ｐ信号）による画像の解像度、ノイズ除去度は、調整時にユーザによって選択された解像度、ノイズ除去度となる。
【００８３】
図１に示す画像表示装置１００の動作を説明する。チューナ１０６で得られた５２５ｉ信号は制御コマンド付加部１０７に供給される。この制御コマンド付加部１０７では、５２５ｉ信号の１フレーム毎に、ＩＰ変換部１０８、ＤＲＣ部１０９および子画面処理部１１０における処理をそれぞれ制御するための制御コマンドＣＭＤが付加され、制御コマンド付き画像信号ＳＶａが得られる（図５Ａ〜Ｄ参照）。
【００８４】
この画像信号ＳＶａはＩＰ変換部１０８に供給される。ＩＰ変換部１０８では、この画像信号ＳＶａから、１フレーム毎に、制御コマンドＣＭＤおよび画像信号Ｖ１がそれぞれ分離されて取得される。また、このＩＰ変換部１０８では、１フレーム毎に、制御コマンドＣＭＤのうち自己の処理部における処理を制御するための制御コマンドＣＭＤａ（コマンド１）に基づいて、画像信号Ｖ１が５２５ｉ信号から５２５ｐ信号に変換される。さらに、このＩＰ変換部１０８では、１フレーム毎に、制御コマンドＣＭＤのうち制御コマンドＣＭＤａを除いた残りの制御コマンド、つまり他の処理部における処理を制御するための制御コマンドＣＭＤｂ（コマンド２，コマンド３）が、処理後の画像信号Ｖ２に付加されて、出力すべき制御コマンド付き画像信号ＳＶｂが得られる。
【００８５】
この画像信号ＳＶｂには、１フレーム毎に、ＤＲＣ部１０９および子画面処理部１１０における処理をそれぞれ制御するための制御コマンドＣＭＤが付加されている。この画像信号ＳＶｂは、ＤＲＣ部１０９に供給される。このＤＲＣ部１０９では、制御コマンド付き画像信号ＳＶｂから、１フレーム毎に、制御コマンドＣＭＤおよび画像信号Ｖ１がそれぞれ分離されて取得される。また、このＤＲＣ部１０９では、１フレーム毎に、制御コマンドＣＭＤに含まれる自己の処理部における処理を制御するための制御コマンドＣＭＤａ（コマンド２）に基づいて、５２５ｐ信号である画像信号Ｖ１を１０５０ｐ信号である画像信号Ｖ２に変換する処理が行われる。さらに、このＤＲＣ部１０９では、１フレーム毎に、制御コマンドＣＭＤのうち制御コマンドＣＭＤａを除いた残りの制御コマンド、つまり他の処理部における処理を制御するための制御コマンドＣＭＤｂ（コマンド３）が、処理後の画像信号Ｖ２に付加されて、出力すべき制御コマンド付き画像信号ＳＶｃが得られる。
【００８６】
この画像信号ＳＶｃには、１フレーム毎に、子画面処理部１１０における処理をそれぞれ制御するための制御コマンドＣＭＤが付加されている。この画像信号ＳＶｃは、子画面処理部１１０に供給される。この子画面処理部１１０では、制御コマンド付き画像信号ＳＶｃから、１フレーム毎に、制御コマンドＣＭＤおよび画像信号Ｖ１がそれぞれ分離されて取得される。また、この子画面処理部１１０では、１フレーム毎に、制御コマンドＣＭＤ、すなわち自己の処理部における処理を制御するための制御コマンドＣＭＤａ（コマンド３）に基づいて、画像信号Ｖ１から、ディスプレイ１１３の画面に画像を表示するための画像信号ＳＶｄが生成される。
【００８７】
この画像信号ＳＶｄ（１０５０ｐ信号）は、合成器１１５を介してパネルドライバ１１２に供給される。パネルドライバ１１２は、画像信号ＳＶｄに基づいて、ディスプレイ１１３を駆動する。これにより、ディスプレイ１１３の画面上には、画像信号ＳＶｄによる画像が表示される。
【００８８】
次に、解像度、ノイズ除去度の調整時の動作について、詳細に説明する。
ユーザは、リモコン送信機１０３の操作によって、解像度、ノイズ除去度の調整時とすることができる。この解像度、ノイズ除去度の調整時には、このＤＲＣ部１０９の処理を制御するための１フレーム毎の制御コマンドＣＭＤに含まれる解像度、ノイズ除去度を示すパラメータｒ，ｚは、６種類のものが順次繰り返される。そのため、この解像度、ノイズ除去度の調整時には、ＤＲＣ部１０９の画像処理部１２２から出力される処理後の画像信号Ｖ２（１０５０ｐ信号）による画像の解像度、ノイズ除去度は、１フレーム毎に、６種類のパラメータｒ，ｚに対応した解像度、ノイズ除去度に順次繰り返し変化していく。
【００８９】
また、この解像度、ノイズ除去度の調整時には、子画面処理部１１０の処理を制御するための１フレーム毎の制御コマンドＣＭＤに、子画面処理であることを示す情報、さらに子画面位置を示す情報が含まれている。この子画面位置の情報は、１フレーム毎に、上述した６種類のパラメータｒ，ｚにそれぞれ対応した６位置のものが順次繰り返される。
【００９０】
そのため、子画面処理部１１０の画像処理部１２２では、１フレーム毎に、画像信号Ｖ１の１／６領域（例えば水平方向に３分割し、垂直方向に２分割した場合、左上の領域）の部分を、画像メモリ１１１の子画面位置の情報に対応したメモリ領域に書き込むことが行われる。さらに、この子画面処理部１１０の画像処理部１２２では、１フレーム毎に、画像メモリ１１１に記憶されている１フレーム分の画像信号を読み出し、ディスプレイ１１３の画面上に画像を表示するための画像信号ＳＶｄを得ることが行われる。
【００９１】
したがって、この解像度、ノイズ除去度の調整時には、ディスプレイ１１３の画面上に、６種類のパラメータｒ，ｚに対応した解像度、ノイズ除去度の子画面画像ＣＤ１〜ＣＤ６が、図９Ａに示すように、並べて表示される。また、この解像度、ノイズ除去度の調整時には、システムコントローラ１０１の制御のもと、ＯＳＤ部１１４から、ディスプレイ１１３の画面上に並べて表示される各子画面画像を囲む枠および各子画面画像を識別する数字を表示する表示信号ＳＣＨが発生される。そして、この表示信号ＳＣＨが、合成器１１５で、画像信号ＳＶｄに合成される。これにより、ディスプレイ１１３の画面上に、子画面画像ＣＤ１〜ＣＤ６を囲む枠ＦＬが表示され、また子画面画像ＣＤ１〜ＣＤ６をそれぞれ識別するための数字ＮＭも表示される。
【００９２】
ユーザは、この解像度、ノイズ除去度の調整時に、リモコン送信機１０３の操作によって、ディスプレイ１１３の画面上に表示される子画面画像ＣＤ１〜ＣＤ６から所望の子画面画像を選択して、所望の解像度、ノイズ除去度を選択できる。この場合、ユーザは、数字ＮＭを用いて、所望の子画面画像を選択できる。
【００９３】
次に、ユーザが所望の解像度、ノイズ除去度を選択した後の通常時の動作について、詳細に説明する。
この通常時には、ＤＲＣ部１０９の処理を制御するための１フレーム毎の制御コマンドに含まれる解像度、ノイズ除去度を示すパラメータｒ，ｚは、ユーザが選択した解像度、ノイズ除去度を示すものとされる。そのため、この通常時には、ＤＲＣ部１０９の画像処理部１２２から出力される処理後の画像信号Ｖ２（１０５０ｐ信号）による画像の解像度、ノイズ除去度は、調整時にユーザによって選択された解像度、ノイズ除去度となる。
【００９４】
また、この通常時には、この子画面処理部１１０の処理を制御するための制御コマンドＣＭＤに、通常処理であることを示す情報が含まれている。そのため、子画面処理部１１０の画像処理部１２２では、１フレーム毎に、分離取得された画像信号Ｖ１が画像メモリ１１１に書き込むことが行われる。さらに、子画面処理部１１０の画像処理部１２２では、１フレーム毎に、画像メモリ１１１に記憶されている１フレーム分の画像信号を読み出し、ディスプレイ１１３の画面上に画像を表示するための画像信号ＳＶｄを得ることが行われる。これにより、ディスプレイ１１３の画面上に、図９Ｂに示すように、ユーザによって選択された解像度、ノイズ除去度の通常画像ＭＤが表示される。
【００９５】
このように、図１に示す画像表示装置１００においては、制御コマンド付加部１０７で、画像信号（５２５ｉ信号）の１フレーム毎に、ＩＰ変換部１０８、ＤＲＣ部１０９および子画面処理部１１０における処理をそれぞれ制御するための制御コマンドＣＭＤを付加して制御コマンド付き画像信号ＳＶａを生成し、ＩＰ変換部１０８、ＤＲＣ部１０９および子画面処理部１１０は、それぞれ制御コマンドＣＭＤのうち自己の処理部における処理を制御するための制御コマンドＣＭＤａに基づいて、画像信号を処理するものであり、ＤＲＣ部１０９および子画面処理部１１０では、解像度、ノイズ除去度の調整時に、１フレーム毎の処理変更を、これらへの制御コマンドの供給タイミングを気にせずに、容易に実現できる。
【００９６】
次に、ＤＲＣ部１０９における画像処理部１２２の係数メモリ１３６（図６参照）に格納される、係数データＷｉ（ｉ＝１〜ｎ）の生成方法について説明する。この係数データＷｉは、学習によって生成される。
【００９７】
まず、学習方法について説明する。上述の（４）式において、学習前は係数データＷ1，Ｗ2，‥‥，Ｗnは未定係数である。学習は、クラス毎に、複数の学習データを用いることで行われる。学習データ数がｍの場合、（４）式に従って、以下に示す（５）式が設定される。ｎは予測タップの数を示している。
【００９８】
ｙk＝Ｗ1×ｘk1＋Ｗ2×ｘk2＋‥‥＋Ｗn×ｘkn   ・・・（５）
（ｋ＝１，２，‥‥，ｍ）
ｍ＞ｎの場合、係数データＷ1，Ｗ2，‥‥，Ｗnは、一意に決まらないので、誤差ベクトルｅの要素ｅkを、以下の（６）式で定義し、（７）式のｅ2を最小にする係数データを求める。いわゆる最小二乗法によって係数データを一意に定める。
ｅk＝ｙk−｛Ｗ1×ｘk1＋Ｗ2×ｘk2＋‥‥＋Ｗn×ｘkn｝  ・・・（６）
（ｋ＝１，２，‥‥ｍ）
【００９９】
【数４】
2005217634.tif 000006
【０１００】
（７）式のｅ2を最小とする係数データを求めるための実際的な計算方法としては、まず、（８）式に示すように、ｅ2を係数データＷｉ(ｉ＝１〜ｎ）で偏微分し、ｉの各値について偏微分値が０となるように係数データＷｉを求めればよい。
【０１０１】
【数５】
2005217634.tif 000007
【０１０２】
（９）式、（１０）式のようにＸji，Ｙiを定義すると、（８）式は、（１１）式の行列式の形に書くことができる。この（１１）式が、係数データを算出するための正規方程式である。この正規方程式を掃き出し法（Gauss-Jordanの消去法）等の一般解法で解くことにより、係数データＷｉ（ｉ＝１〜ｎ）を求めることができる。
【０１０３】
【数６】
2005217634.tif 000008
【０１０４】
【数７】
2005217634.tif 000009
【０１０５】
次に、図１０を参照して、係数データＷｉを生成する係数データ生成装置１５０を説明する。
この係数データ生成装置１５０は、教師信号としての１０５０ｐ信号が入力される入力端子１５１と、この１０５０ｐ信号に対して、水平および垂直の間引き処理を行って、生徒信号としての５２５ｐ信号を得る生徒信号生成回路１５２とを有している。この生徒信号生成回路１５２には、６種類のパラメータｒ，ｚが供給される。この６種類のパラメータｒ，ｚは、上述したＤＲＣ部１０９の処理本体部１３０（図６参照）を構成する係数メモリ１３６に、解像度、ノイズ除去度の調整時に、制御部１４０から供給される６種類のパラメータｒ，ｚに対応したものである。
【０１０６】
生徒信号生成回路１５２では、パラメータｒの値に対応して、１０５０ｐ信号から５２５ｐ信号を生成する際に使用する間引きフィルタの周波数特性が可変される。また、パラメータｚの値に対応して、５２５ｐ信号に加えるノイズの量が可変される。
【０１０７】
１０５０ｐ信号から５２５ｐ信号を生成する際に使用する間引きフィルタの周波数特性を変えることで、解像度の異なる５２５ｐ信号を生成できる。解像度の異なる５２５ｐ信号を用いて学習を行うことで、解像度を上げる効果の異なる係数データＷｉを生成できる。例えばボケ具合の大きな画像が得られる５２５ｐ信号とボケ具合の小さな画像が得られる５２５ｐ信号があった場合、ボケ具合の大きな画像が得られる５２５ｐ信号による学習では解像度を上げる効果の強い係数データＷｉを生成でき、ボケ具合の小さな画像が得られる５２５ｐ信号による学習では解像度を上げる効果の弱い係数データＷｉを生成できる。
【０１０８】
また、５２５ｐ信号に対してノイズを加えることで、ノイズの加わった５２５ｐ信号を生成できる。ノイズ加算量を変化させることで、ノイズ量が異なる５２５ｐ信号が生成され、それによってノイズ除去効果の異なる係数データＷｉを生成できる。例えばノイズをたくさん加えた５２５ｐ信号とノイズを少し加えた５２５ｐ信号とがあった場合、ノイズをたくさん加えた５２５ｐ信号による学習ではノイズ除去効果の強い係数データＷｉを生成でき、ノイズを少し加えた５２５ｐ信号による学習ではノイズ除去効果の弱い係数データＷｉを生成できる。
【０１０９】
また、係数データ生成装置１５０は、生徒信号生成回路１５２より出力される５２５ｐ信号に基づいて、１０５０ｐ信号における注目位置の周辺に位置する複数の画素データを選択的に取り出して出力する第１〜第３のタップ選択回路１５３〜１５５を有している。これら第１〜第３のタップ選択回路１５３〜１５５は、上述したＤＲＣ部１０９の処理本体部１３０（図６参照）を構成する第１〜第３のタップ選択回路１３２-1〜１３２-3と同様に構成される。
【０１１０】
また、係数データ生成装置１５０は、空間クラス検出回路１５７を有している。この空間クラス検出回路１５７は、第２のタップ選択回路１５４で選択的に取り出される空間クラスタップのデータとしての複数の画素データのレベル分布パターンを検出し、このレベル分布パターンに基づいて空間クラスを検出し、そのクラス情報を出力する。この空間クラス検出回路１５７は、上述したＤＲＣ部１０９の処理本体部１３０を構成する空間クラス検出回路１３３と同様に構成される。この空間クラス検出回路１５７からは、複数の画素データのそれぞれに対応した再量子化コードｑｉが空間クラスを示すクラス情報として出力される。
【０１１１】
また、係数データ生成装置１５０は、動きクラス検出回路１５８を有している。この動きクラス検出回路１５８は、第３のタップ選択回路１５５で選択的に取り出される動きクラスタップのデータとしての複数の画素データより、主に動きの程度を表すための動きクラスを検出し、そのクラス情報ＭＶを出力する。この動きクラス検出回路１５８は、上述したＤＲＣ部１０９の処理本体部１３０を構成する動きクラス検出回路１３４と同様に構成される。この動きクラス検出回路１５８では、第３のタップ選択回路１５５で選択的に取り出される複数の画素データからフレーム間差分が算出され、さらにその差分の絶対値の平均値に対してしきい値処理が行われて動きの指標である動きクラスが検出される。
【０１１２】
また、係数データ生成装置１５０は、クラス合成回路１５９を有している。このクラス合成回路１５９は、空間クラス検出回路１５７より出力される空間クラスのクラス情報としての再量子化コードｑｉと、動きクラス検出回路１５８より出力される動きクラスのクラス情報ＭＶに基づき、１０５０ｐ信号における注目位置の画素データが属するクラスを示すクラスコードＣＬを生成する。このクラス合成回路１５９も、上述したＤＲＣ部１０９の処理本体部１３０を構成するクラス合成回路１３５と同様に構成される。
【０１１３】
また、係数データ生成装置１５０は、正規方程式生成部１６０を有している。この正規方程式生成部１６０は、教師信号としての１０５０ｐ信号より得られる、各注目位置の画素データｙと、この各注目位置の画素データｙにそれぞれ対応して第１のタップ選択回路１５３で選択的に取り出される、予測タップのデータとしての複数の画素データｘｉと、各注目位置の画素データｙにそれぞれ対応してクラス合成回路１５９で得られるクラスコードＣＬとから、クラス毎に、係数データＷｉ（ｉ＝１〜ｎ）を得るための正規方程式（（１１）式参照）を生成する。
【０１１４】
この場合、１個の画素データｙとそれに対応する複数個の画素データｘｉとの組み合わせで１個の学習データが生成される。教師信号としての１０５０ｐ信号と生徒信号としての５２５ｐ信号との間で、クラス毎に、多くの学習データが生成されていく。これにより、正規方程式生成部１６０では、クラス毎に、係数データＷｉを得るための正規方程式が生成される。
【０１１５】
またこの場合、生徒信号生成回路１５２に供給するパラメータｒ，ｚを、上述したように６種類のものに順次変更し、それぞれのパラメータｒ，ｚに基づいて生成された５２５ｐ信号を用いることで、各クラスの係数データＷｉを得るための正規方程式として、それぞれ、上述したパラメータｒ，ｚの６種類にそれぞれ対応した正規方程式が生成される。
【０１１６】
またこの場合、正規方程式生成部１６０では、出力画素（図８のＨＤ1〜ＨＤ4参照）毎に、正規方程式が生成される。すなわち、ＨＤ1〜ＨＤ4に対応した正規方程式は、それぞれ、中心予測タップからのずれ値がＨＤ1〜ＨＤ4と同じ関係にある画素データｙから構成される学習データを用いて生成される。
【０１１７】
結局、正規方程式生成部１６０では、クラス、パラメータｒ，ｚの種類（６種類）、出力画素（ＨＤ1〜ＨＤ4）の組み合わせ毎に、正規方程式が生成される。
【０１１８】
また、係数データ生成装置１５０は、係数データ決定部１６１と、係数メモリ１６２とを有している。係数データ決定部１６１は、正規方程式生成部１６０から正規方程式のデータの供給を受け、当該正規方程式を掃き出し法等によって解き、クラス、パラメータｒ，ｚの種類（６種類）、出力画素（ＨＤ1〜ＨＤ4）の組み合わせ毎に、係数データＷｉを求める。係数メモリ１６２は、係数データ決定部１６１で求められた係数データＷｉを格納する。
【０１１９】
図１０に示す係数データ生成装置１５０の動作を説明する。
入力端子１５１に入力される教師信号としての１０５０ｐ信号に対して生徒信号生成回路１５２で水平および垂直の間引き処理が行われて、生徒信号としての５２５ｐ信号が生成される。この場合、生徒信号生成回路１５２には、６種類のパラメータｒ，ｚが制御信号として供給され、周波数特性およびノイズ加算量が変化した６種類の５２５ｐ信号が順次生成されていく。
【０１２０】
また、生徒信号生成回路１５２で生成された５２５ｐ信号（生徒信号）に基づいて、第２のタップ選択回路１５４で、１０５０ｐ信号（教師信号）における注目位置の周辺に位置する、空間クラスタップのデータとしての複数の画素データが選択的に取り出される。この複数の画素データは空間クラス検出回路１５７に供給される。この空間クラス検出回路１５７では、複数の画素データのそれぞれに対してＡＤＲＣ処理が施され、空間クラス（主に空間内の波形表現のためのクラス分類）のクラス情報としての再量子化コードｑｉが得られる（（１）式参照）。
【０１２１】
また、ＳＤ信号生成回路１５２で生成された５２５ｐ信号（生徒信号）に基づいて、第３のタップ選択回路１５５で、１０５０ｐ信号（教師信号）における注目画素の周辺に位置する、動きクラスタップのデータとしての複数の画素データが選択的に取り出される。この複数の画素データは動きクラス検出回路１５８に供給される。この動きクラス検出回路１５８では、複数の画素データが処理され、動きクラス（主に動きの程度を表すためのクラス分類）のクラス情報ＭＶが得られる。
【０１２２】
このクラス情報ＭＶと上述した再量子化コードｑｉはクラス合成回路１５９に供給される。このクラス合成回路１５９では、これらクラス情報ＭＶと再量子化コードｑｉとから、１０５０ｐ信号（教師信号）における注目位置の画素データが属するクラスを示すクラスコードＣＬが得られる（（３）式参照）。
【０１２３】
また、ＳＤ信号生成回路１５２で生成される５２５ｐ信号（生徒信号）に基づいて、第１のタップ選択回路１５３で、１０５０ｐ信号（教師信号）における注目位置の周辺に位置する、予測タップのデータとしての複数の画素データｘｉが選択的に取り出される。
【０１２４】
そして、正規方程式生成部１６０では、１０５０ｐ信号（教師信号）より得られる、各注目位置の画素データｙと、この各注目位置の画素データｙにそれぞれ対応して第１のタップ選択回路１５３で選択的に取り出される、予測タップのデータとしての複数の画素データｘｉと、各注目位置の画素データｙにそれぞれ対応してクラス合成回路１５９で得られるクラスコードＣＬとから、クラス、パラメータｒ，ｚの種類（６種類）、出力画素（ＨＤ1〜ＨＤ4）の組み合わせ毎に、係数データＷｉ（ｉ＝１〜ｎ）を得るための正規方程式（（１１）式参照）が生成される。
【０１２５】
この正規方程式１６０で生成される正規方程式のデータが係数データ決定部１６１に供給される。この係数データ決定部１６１では、それぞれ正規方程式が解かれ、クラス、パラメータｒ，ｚの種類（６種類）、出力画素（ＨＤ1〜ＨＤ4）の組み合わせ毎に、係数データＷｉが求められる。そして、この係数データＷｉは、係数メモリ１６２に格納される。
【０１２６】
このように、図１０に示す係数データ生成装置１５０においては、上述したＤＲＣ部１０９の処理本体部１３０を構成する係数メモリ１３６に格納すべき、クラス、パラメータｒ，ｚの種類（６種類）、出力画素（ＨＤ1〜ＨＤ4）の組み合わせ毎の係数データＷｉ（ｉ＝１〜ｎ）を生成できる。
【０１２７】
なお、上述実施の形態では、解像度、ノイズ除去度の調整時に、子画面処理部１１０は、１フレーム毎に、分離取得された画像信号の１／６領域（例えば画面を水平方向に３分割し、垂直方向に２分割した場合、左上の領域）の部分を、画像メモリ１１１の子画面位置の情報に対応したメモリ領域に書き込むものであるが、このように画像メモリ１１１の子画面位置の情報に対応したメモリ領域に書き込む１／６領域は左上の領域に限定されるものではなく、その他の１／６領域であってもよい。またこの場合、任意の１／６領域を、ユーザが選択できるようにしてもよい。またその場合、画面を水平方向に３分割し、垂直方向に２分割して得られる各領域から任意の１／６領域を選択するだけでなく、この１／６領域を画面上で自由に移動できるようにしてもよい。これにより、ユーザは、画面の任意位置の画像における解像度、ノイズ除去度が、所望の解像度、ノイズ除去度となるように調整できる。
【０１２８】
また、上述実施の形態では、解像度、ノイズ除去度を示すパラメータｒ，ｚの種類が６種類であるものを示したが、これに限定されるものではない。
【０１２９】
次に、この発明の他の実施の形態について説明する。図１１、図１２は、それぞれ、他の実施の形態としての画像信号処理装置（エンコード側）２００Ｅ、画像信号処理装置（デコード側）２００Ｄの構成を示している。
【０１３０】
画像信号処理装置２００Ｅは、入力画像信号Ｖinに対し、ライン内シャフリング、ラインシャフリングおよびフレームシャフリングを行って暗号化されたデータストリームを得た後、このデータストリームに対し、符号化、例えば誤り訂正符号化、変調符号化等を行って伝送信号を得る機能を持っている。画像信号処理装置２００Ｄは、上述した画像信号処理装置２００Ｅで得られた伝送信号に対し、復号化を行って暗号化されたデータストリームを得た後、このデータストリームに対し、フレームデシャフリング、ラインデシャフリング、ライン内デシャフリングを行って、出力画像信号Ｖoutを得る機能を持っている。
【０１３１】
まず、図１１に示す画像信号処理装置２００Ｅについて説明する。この画像信号処理装置２００Ｅは、入力画像信号Ｖinが入力される入力端子２２１と、制御コマンド付加部２２２とを有している。この制御コマンド付加部２２２は、入力端子２２１に入力される入力画像信号Ｖinの１フレーム毎に、後述する水平方向シフト部２２３、垂直方向シフト部２２４およびフレームシャフリング部２２５の処理をそれぞれ制御するための制御コマンドＣＭＤを付加し、制御コマンド付き画像信号ＳＶ１を生成する。
【０１３２】
また、画像信号処理装置２００Ｅは、水平方向シフト部２２３と、垂直方向シフト部２２４と、フレームシャフリング部２２５とを有している。
【０１３３】
水平方向シフト部２２３は、制御コマンド付加部２２２より出力される制御コマンド付き画像信号ＳＶ１を入力し、この制御コマンド付き画像信号ＳＶ１から、１フレーム毎に、制御コマンドおよび画像信号をそれぞれ分離して取得する。
【０１３４】
また、この水平方向シフト部２２３は、１フレーム毎に、分離取得された制御コマンドに含まれる自己の処理部における処理を制御するための制御コマンドに基づいて、各ラインの画素を、水平方向にシフトする処理、つまりライン内シャフリングを行う。本実施の形態において、水平方向シフト部２２３は、図１３に示すように、制御コマンドとしてコード１が供給されるときは画素シフトをせず、制御コマンドとしてコード２が供給されるときは正側に１画素分の画素シフトを行い、制御コマンドとしてコード３が供給されるときは負側に１画素分の画素シフトを行う。
【０１３５】
さらに、この水平方向シフト部２２３は、１フレーム毎に、分離取得された制御コマンドの全て、つまり自己の処理部における処理を制御するための制御コマンドおよび他の処理部における処理を制御するための制御コマンドを、処理後の画像信号に付加して、出力すべき制御コマンド付き画像信号ＳＶ２を生成する。
【０１３６】
垂直方向シフト部２２４は、水平方向シフト部２２３より出力される制御コマンド付き画像信号ＳＶ２を入力し、この制御コマンド付き画像信号ＳＶ２から、１フレーム毎に、制御コマンドおよび画像信号をそれぞれ分離して取得する。
【０１３７】
また、この垂直方向シフト部２２４は、１フレーム毎に、分離取得された制御コマンドに含まれる自己の処理部における処理を制御するための制御コマンドに基づいて、各ラインを、垂直方向にシフトする処理、つまりラインシャフリングを行う。本実施の形態において、垂直方向シフト部２２４は、図１４に示すように、制御コマンドとしてコード１が供給されるときはラインシフトをせず、制御コマンドとしてコード２が供給されるときは正側に１ライン分のラインシフトを行い、制御コマンドとしてコード３が供給されるときは負側に１ライン分のラインシフトを行う。
【０１３８】
さらに、垂直方向シフト部２２４は、１フレーム毎に、分離取得された制御コマンドの全て、つまり自己の処理部における処理を制御するための制御コマンドおよび他の処理部における処理を制御するための制御コマンドを、処理後の画像信号に付加して、出力すべき制御コマンド付き画像信号ＳＶ３を生成する。
【０１３９】
フレームシャフリング部２２５は、垂直方向シフト部２２４より出力される制御コマンド付き画像信号ＳＶ３を入力し、この制御コマンド付き画像信号ＳＶ３から、１フレーム毎に、制御コマンドおよび画像信号をそれぞれ分離して取得する。
【０１４０】
また、このフレームシャフリング部２２５は、３フレーム毎に、分離取得された制御コマンドに含まれる自己の処理部における処理を制御するための制御コマンドに基づいて、３フレーム内で画像フレームの位置を交換する処理、つまりフレームシャフリングを行う。本実施の形態において、フレームシャフリング部２２５は、図１５に示すように、制御コマンドとしてコード１が供給されるときはフレーム＃１とフレーム＃２の位置を交換し、制御コマンドとしてコード２が供給されるときはフレーム＃１とフレーム＃３の位置を交換し、制御コマンドとしてコード３が供給されるときはフレーム＃２とフレーム＃３の位置を交換する。
【０１４１】
さらに、フレームシャフリング部２２５は、１フレーム毎に、分離取得された制御コマンドの全て、つまり自己の処理部における処理を制御するための制御コマンドおよび他の処理部における処理を制御するための制御コマンドを、処理後の画像信号（暗号化されたデータストリーム）に付加して、出力すべき制御コマンド付き画像信号ＳＶ４を生成する。
【０１４２】
また、画像信号処理装置２００Ｅは、符号化部２２６と、出力端子２２７とを有している。符号化部２２６は、フレームシャフリング部２２５から出力される制御コマンド付き画像信号ＳＶ４に対し、符号化、例えば誤り訂正符号化、変調符号化等を行って伝送信号ＴＲＳを生成し、この伝送信号ＴＲＳを出力端子２２７に出力する。
【０１４３】
上述した水平方向シフト部２２３、垂直方向シフト部２２４、フレームシャフリング部２２５の基本となる処理部は、上述の図３に示す処理部１２０と同様に構成される。ただし、制御コマンド付加部１２４には、分離部１２１で分離された制御コマンドＣＭＤそのものが遅延部１２３で遅延された後に供給される。そのため、制御コマンド付加部１２４では、１フレーム毎に、画像処理部１２２から出力される１フレーム分の画像信号Ｖ２に、分離部１２１で分離された制御コマンドＣＭＤそのものが付加され、出力すべき制御コマンド付き画像信号ＳＶoutが得られる。
【０１４４】
また、水平方向シフト部２２３においては、画像処理部１２２は、自己の処理部における処理を制御するための制御コマンドＣＭＤａとしての、上述した画素シフト量を示すコードに基づいて、ライン内シャフリングを行う。垂直方向シフト部２２４においては、画像処理部１２２は、自己の処理部における処理を制御するための制御コマンドＣＭＤａとしての、上述したラインシフト量を示すコードに基づいて、ラインシャフリングを行う。フレームシャフリング部２２５においては、画像処理部１２２は、自己の処理部における処理を制御するための制御コマンドＣＭＤａとしての、フレーム位置の交換情報であるコードに基づいて、フレームシャフリングを行う。
【０１４５】
図１６Ａは、入力端子２２１に入力される入力画像信号Ｖinの、ある３フレーム期間を示している。画像フレーム＃１〜＃３は、それぞれ、１フレーム分の画像信号を意味している。図１６Ｂは、制御コマンド付加部２２２から出力される制御コマンド付き画像信号ＳＶ１を示している。この制御コマンド付き画像信号ＳＶ１は、上述したように、入力画像信号Ｖinの１フレーム毎に、水平方向シフト部２２３、垂直方向シフト部２２４およびフレームシャフリング部２２５の処理をそれぞれ制御するための制御コマンドＣＭＤが付加されたものである。
【０１４６】
１フレーム毎の制御コマンドＣＭＤは、水平方向シフト部２２３における処理を制御するためのコマンド３、垂直方向シフト部２２４における処理を制御するためのコマンド２、フレームシャフリング部２２５における処理を制御するためのコマンド１からなっている。
【０１４７】
コマンド３には、水平方向シフト部２２３に対する制御コマンドであることを識別するための識別子ＩＤ３、および画素シフト量を示すコードが含まれている。例えば、このコードは、画像フレーム＃１、画像フレーム＃２、画像フレーム＃３のそれぞれ対応してコード１、コード２，コード３とされる。コマンド２には、垂直方向シフト部２２４に対する制御コマンドであることを識別するための識別子ＩＤ２、およびラインシフト量を示すコードが含まれている。例えば、このコードは、画像フレーム＃１、画像フレーム＃２、画像フレーム＃３のそれぞれ対応してコード１、コード２，コード３とされる。
【０１４８】
コマンド１には、フレームシャフリング部２２５に対する制御コマンドであることを識別するための識別子ＩＤ１、およびフレーム位置の交換情報であるコードが含まれている。例えば、このコードは、図示の３フレーム期間ではコード１とされ、その次の３フレーム期間ではコード２とされ、さらにその次の３フレーム期間ではコード３とされ、以下その繰り返しとされる。
【０１４９】
また、図１６Ｃは、フレームシャフリング部２２５より出力される制御コマンド付き情報信号ＳＶ４を示している。この画像信号ＳＶ４は、暗号化されたデータストリームの１フレーム毎に、水平方向シフト部２２３、垂直方向シフト部２２４およびフレームシャフリング部２２５の処理をそれぞれ制御した制御コマンドＣＭＤが付加されたものである。ストリームフレーム＃１〜＃３は、それぞれ、１フレーム分の暗号化されたデータストリームを意味している。
【０１５０】
図１１に示す画像信号処理装置２００Ｅの動作を説明する。
入力端子２２１に入力された入力画像信号Ｖinは制御コマンド付加部２２２に供給される。この制御コマンド付加部２２２では、入力画像信号Ｖinの１フレーム毎に、水平方向シフト部２２３、垂直方向シフト部２２４およびフレームシャフリング部２２５における処理をそれぞれ制御するための制御コマンドＣＭＤが付加され、制御コマンド付き画像信号ＳＶ１が得られる（図１６Ｂ参照）。
【０１５１】
この画像信号ＳＶ１は水平方向シフト部２２３に供給される。水平方向シフト部２２３では、この画像信号ＳＶ１から、１フレーム毎に、制御コマンドＣＭＤおよび画像信号Ｖ１がそれぞれ分離されて取得される。また、この水平方向シフト部２２３では、１フレーム毎に、制御コマンドＣＭＤのうち自己の処理部における処理を制御するための制御コマンドＣＭＤａ（コマンド１）に基づいて、画像信号Ｖ１に対して各ラインの画素をシフトする処理、つまりライン内シャフリングが行われる。さらに、この水平方向シフト部２２３では、１フレーム毎に、分離取得された制御コマンドＣＭＤの全て（コマンド１、コマンド２、コマンド３）が、処理後の画像信号Ｖ２に付加されて、出力すべき制御コマンド付き画像信号ＳＶ２が得られる。
【０１５２】
この画像信号ＳＶ２は、垂直方向シフト部２２４に供給される。この垂直方向シフト部２２４では、この画像信号ＳＶ２から、１フレーム毎に、制御コマンドＣＭＤおよび画像信号Ｖ１がそれぞれ分離されて取得される。また、この垂直方向シフト部２２４では、１フレーム毎に、制御コマンドＣＭＤのうち自己の処理部における処理を制御するための制御コマンドＣＭＤａ（コマンド２）に基づいて、画像信号Ｖ１に対して各ラインをシフトする処理、つまりラインシャフリングが行われる。さらに、この垂直方向シフト部２２４では、１フレーム毎に、制御コマンドＣＭＤの全てが、処理後の画像信号Ｖ２に付加されて、出力すべき制御コマンド付き画像信号ＳＶ３が得られる。
【０１５３】
この画像信号ＳＶ３は、フレームシャフリング部２２５に供給される。このフレームシャフリング部２２５では、この画像信号ＳＶ３から、１フレーム毎に、制御コマンドＣＭＤおよび画像信号Ｖ１がそれぞれ分離されて取得される。また、このフレームシャフリング部２２５では、３フレーム毎に、制御コマンドＣＭＤのうち自己の処理部における処理を制御するための制御コマンドＣＭＤａ（コマンド３）に基づいて、３フレーム内で画像フレームの位置を交換する処理、つまりフレームシャフリングが行われる。さらに、このフレームシャフリング部２２５では、１フレーム毎に、制御コマンドＣＭＤの全てが、処理後の画像信号Ｖ２に付加されて、出力すべき制御コマンド付き画像信号ＳＶ４が得られる（図１６Ｃ参照）。
【０１５４】
この画像信号ＳＶ４は符号化部２２６に供給される。この符号化部２２６では、この画像信号ＳＶ４に対し、符号化、例えば誤り訂正符号化、変調符号化等が行われ、伝送信号ＴＲＳが生成される。この伝送信号ＴＲＳは出力端子２２７に出力される。
【０１５５】
次に、図１２に示す画像信号処理装置２００Ｄについて説明する。この画像信号処理装置２００Ｄは、伝送信号ＴＲＳが入力される入力端子２３１と、復号化部２３２とを有している。復号化部２３２は、入力端子２３１に入力される伝送信号ＴＲＳに対し、復号化を行って、制御コマンド付き画像信号ＳＶ４を取得する（図１６Ｃ参照）。
【０１５６】
また、画像信号処理装置２００Ｄは、フレームデシャフリング部２３３と、垂直方向シフト部２３４と、水平方向シフト部２３５と、出力端子２３６とを有している。
【０１５７】
フレームデシャフリング部２３３は、復号化部２３２より出力される制御コマンド付き画像信号ＳＶ４を入力し、この制御コマンド付き画像信号ＳＶ４から、１フレーム毎に、制御コマンドおよび画像信号をそれぞれ分離して取得する。また、このフレームデシャフリング部２３３は、３フレーム毎に、分離取得された制御コマンドに含まれる自己の処理部における処理を制御するための制御コマンド（コマンド１）に基づいて、３フレーム内で画像フレームの位置を、元に戻す処理、つまりフレームデシャフリングを行う。さらに、このフレームデシャフリング部２３３は、１フレーム毎に、分離取得された制御コマンドのうち自己の処理を制御するための制御コマンドを除いた残りの制御コマンド（コマンド２、コマンド３）を、処理後の画像信号に付加して、出力すべき制御コマンド付き画像信号ＳＶ５を生成する。
【０１５８】
垂直方向シフト部２３４は、フレームデシャフリング部２３３より出力される制御コマンド付き画像信号ＳＶ５を入力し、この画像信号ＳＶ５から、１フレーム毎に、制御コマンドおよび画像信号をそれぞれ分離して取得する。また、この垂直方向シフト部２３４は、１フレーム毎に、分離取得された制御コマンドに含まれる自己の処理部における処理を制御するための制御コマンド（コマンド２）に基づいて、各ラインを元に戻す処理、つまりラインデシャフリングを行う。さらに、この垂直方向シフト部２３４は、１フレーム毎に、分離取得された制御コマンドのうち自己の処理を制御するための制御コマンドを除いた残りの制御コマンド（コマンド３）を、処理後の画像信号に付加して、出力すべき制御コマンド付き画像信号ＳＶ６を生成する。
【０１５９】
水平方向シフト部２３５は、垂直方向シフト部２３４より出力される制御コマンド付き画像信号ＳＶ６を入力し、この画像信号ＳＶ６から、１フレーム毎に、制御コマンドおよび画像信号をそれぞれ分離して取得する。また、この水平方向シフト部２３５は、１フレーム毎に、分離取得された制御コマンドに含まれる自己の処理部における処理を制御するための制御コマンド（コマンド３）に基づいて、各ラインの画素を元に戻す処理、つまりライン内デシャフリングを行い、上述した入力画像信号Ｖinに対応した出力画像信号Ｖoutを生成して出力端子２３６に出力する。
【０１６０】
上述したフレームデシャフリング部２３３、垂直方向シフト部２３４、水平方向シフト部２３５の基本となる処理部は、上述の図３に示す処理部１２０と同様に構成される。個々の処理部について、さらに、説明する。
【０１６１】
フレームデシャフリング部２３３においては、画像処理部１２２は、自己の処理部における処理を制御するための制御コマンドＣＭＤａ（コマンド１）としての、上述したフレーム位置の交換情報であるコードに基づいて、フレームデシャフリングを行う。また、このフレームデシャフリング部２３３においては、制御コマンド・画像信号分離部１２１に供給される制御コマンド付き画像信号ＳＶinは、復号化部２３２より出力される画像信号ＳＶ４であり、その１フレーム毎の制御コマンドＣＭＤは、コマンド１、コマンド２、コマンド３からなっている（図１６Ｃ参照）。
【０１６２】
この場合、自己の処理部における処理を制御するための制御コマンドＣＭＤａはコマンド１であり、他の処理部における処理を制御するための制御コマンドＣＭＤｂはコマンド２、コマンド３である。制御コマンド付加部１２４は、１フレーム毎に、画像処理部１２２から出力される１フレーム分の画像信号Ｖ２に、制御コマンドＣＭＤとして、分離部１２１で分離されたコマンド２、コマンド３を付加して、出力すべき制御コマンド付き画像信号ＳＶoutを形成する。
【０１６３】
垂直方向シフト部２３４においては、画像処理部１２２は、自己の処理部における処理を制御するための制御コマンドＣＭＤａ（コマンド２）としての、上述したラインシフト量を示すコードに基づいて、ラインデシャフリングを行う。また、この垂直方向シフト部２３４においては、制御コマンド・画像信号分離部１２１に供給される制御コマンド付き画像信号ＳＶinは、フレームデシャフリング部２３３より出力される画像信号ＳＶ５であり、その１フレーム毎の制御コマンドＣＭＤは、コマンド２、コマンド３からなっている。
【０１６４】
この場合、自己の処理部における処理を制御するための制御コマンドＣＭＤａはコマンド２であり、他の処理部における処理を制御するための制御コマンドＣＭＤｂはコマンド３である。制御コマンド付加部１２４は、１フレーム毎に、画像処理部１２２から出力される１フレーム分の画像信号Ｖ２に、制御コマンドＣＭＤとして、分離部１２１で分離されたコマンド３を付加して、出力すべき制御コマンド付き画像信号ＳＶoutを形成する。
【０１６５】
水平方向シフト部２３５においては、画像処理部１２２は、自己の処理部における処理を制御するための制御コマンドＣＭＤａ（コマンド３）としての、上述した画素シフト量を示すコードに基づいて、ライン内デシャフリングを行う。また、この水平方向シフト部２３５においては、制御コマンド・画像信号分離部１２１に供給される制御コマンド付き画像信号ＳＶinは、垂直方向シフト部２３４より出力される画像信号ＳＶ６であり、その１フレーム毎の制御コマンドＣＭＤは、コマンド３のみからなっている。この場合、自己の処理部における処理を制御するための制御コマンドＣＭＤａはコマンド３であり、他の処理部における処理を制御するための制御コマンドＣＭＤｂは存在しない。この水平方向シフト部２３５には、遅延部１２３および制御コマンド付加部１２４は設けられておらず、画像処理部１２２から出力される画像信号Ｖ２を、そのまま画像信号ＳＶoutとして出力する。
【０１６６】
図１２に示す画像信号処理装置２００Ｄの動作を説明する。
入力端子２３１に入力された伝送信号ＴＲＳは復号化部２３２に供給される。この復号化部２３２では、伝送信号ＴＲＳに対して復号化が行われ、制御コマンド付き画像信号ＳＶ４が得られる（図１６Ｃ参照）。
【０１６７】
この画像信号ＳＶ４はフレームデシャフリング部２３３に供給される。このフレームデシャフリング部２３３では、この画像信号ＳＶ４から、１フレーム毎に、制御コマンドＣＭＤおよび画像信号Ｖ１がそれぞれ分離されて取得される。また、このフレームデシャフリング部２３３では、３フレーム毎に、分離取得された制御コマンドに含まれる自己の処理部における処理を制御するための制御コマンドＣＭＤａ（コマンド１）に基づいて、３フレーム内で画像フレームの位置を、元に戻す処理、つまりフレームデシャフリングが行われる。さらに、このフレームデシャフリング部２３３では、１フレーム毎に、制御コマンドＣＭＤのうち制御コマンドＣＭＤａを除いた残りの制御コマンド、つまり他の処理部における処理を制御するための制御コマンドＣＭＤｂ（コマンド２，コマンド３）が、処理後の画像信号Ｖ２に付加されて、出力すべき制御コマンド付き画像信号ＳＶ５が得られる。
【０１６８】
この画像信号ＳＶ５は垂直方向シフト部２３４に供給される。この垂直方向シフト部２３４では、この画像信号ＳＶ５から、１フレーム毎に、制御コマンドＣＭＤおよび画像信号Ｖ１がそれぞれ分離されて取得される。また、この垂直方向シフト部２３４では、１フレーム毎に、分離取得された制御コマンドに含まれる自己の処理部における処理を制御するための制御コマンドＣＭＤａ（コマンド２）に基づいて、各ラインを元に戻す処理、つまりラインデシャフリングが行われる。さらに、この垂直方向シフト部２３４では、１フレーム毎に、制御コマンドＣＭＤのうち制御コマンドＣＭＤａを除いた残りの制御コマンド、つまり他の処理部における処理を制御するための制御コマンドＣＭＤｂ（コマンド３）が、処理後の画像信号Ｖ２に付加されて、出力すべき制御コマンド付き画像信号ＳＶ６が得られる。
【０１６９】
この画像信号ＳＶ６は水平方向シフト部２３５に供給される。この水平方向シフト部２３５では、この画像信号ＳＶ６から、１フレーム毎に、制御コマンドＣＭＤおよび画像信号Ｖ１がそれぞれ分離されて取得される。また、この水平方向シフト部２３５では、１フレーム毎に、分離取得された制御コマンドに含まれる自己の処理部における処理を制御するための制御コマンドＣＭＤａ（コマンド３）に基づいて、各ラインの画素を元に戻す処理、つまりライン内デシャフリングが行われ、上述した入力画像信号Ｖinに対応した出力画像信号Ｖoutが生成される。この出力画像信号Ｖoutは出力端子２３６に出力される。
【０１７０】
このように、図１１に示す画像信号処理装置２００Ｅにおいては、制御コマンド付加部２２２で、入力画像信号Ｖinの１フレーム毎に、水平方向シフト部２２３、垂直方向シフト部２２４およびフレームシャフリング部２２５における処理をそれぞれ制御するための制御コマンドＣＭＤを付加して制御コマンド付き画像信号ＳＶ１を生成し、水平方向シフト部２２３、垂直方向シフト部２２４およびフレームシャフリング部２２５は、それぞれ制御コマンドＣＭＤのうち自己の処理部における処理を制御するための制御コマンドＣＭＤａに基づいて、画像信号を処理するものであり、これらの処理部では、１フレームあるいは３フレーム毎の処理変更を、これらへの制御コマンドの供給タイミングを気にせずに、容易に実現できる。
【０１７１】
また、図１２に示す画像信号処理装置２００Ｄにおいては、復号化部２３２から出力される画像信号ＳＶ４は、１フレーム毎に、フレームデシャフリング部２３３、垂直方向シフト部２３４、水平方向シフト部２３５における処理をそれぞれ制御するための制御コマンドＣＭＤが付加されたものであり、フレームデシャフリング部２３３、垂直方向シフト部２３４、水平方向シフト部２３５は、それぞれ制御コマンドＣＭＤのうち自己の処理部における処理を制御するための制御コマンドＣＭＤａに基づいて、画像信号を処理するものであり、これらの処理部では、１フレームあるいは３フレーム毎の処理変更を、これらへの制御コマンドの供給タイミングを気にせずに、容易に実現できる。
【０１７２】
次に、この発明のさらに他の実施の形態を説明する。上述した実施の形態は画像信号を取り扱うものであるが、この実施の形態は音声信号を取り扱うものである。図１７、図１８は、それぞれ、他の実施の形態としての音声信号処理装置（エンコード側）３００Ｅ、音声信号処理装置（デコード側）３００Ｄの構成を示している。
【０１７３】
音声信号処理装置３００Ｅは、入力音声信号Ａinに対し、フレーム内シャフリングおよびフレームシャフリングを行って暗号化されたデータストリームを得た後、このデータストリームに対し、符号化、例えば誤り訂正符号化、変調符号化等を行って伝送信号を得る機能を持っている。音声信号処理装置３００Ｄは、上述した音声信号処理装置３００Ｅで得られた伝送信号に対し、復号化を行って暗号化されたデータストリームを得た後、このデータストリームに対し、フレームデシャフリングおよびフレーム内デシャフリングを行って、出力音声信号Ａoutを得る機能を持っている。
【０１７４】
ここで、音声フレームは、所定時間分のサンプルデータで構成される。フレーム内シャフリングは、音声フレーム内でサンプルデータの位置をシフトする処理である。また、フレームシャフリングは、所定数の音声フレーム毎に、その所定数の音声フレーム内で音声フレームの位置を交換する処理である。
【０１７５】
まず、図１７に示す音声信号処理装置３００Ｅについて説明する。この音声信号処理装置３００Ｅは、入力音声信号Ａinが入力される入力端子３２１と、制御コマンド付加部３２２とを有している。この制御コマンド付加部３２２は、入力端子３２１に入力される入力音声信号Ｖinの１音声フレーム毎に、後述するフレーム内シャフリング部３２３およびフレームシャフリング部３２４の処理をそれぞれ制御するための制御コマンドＣＭＤを付加し、制御コマンド付き音声信号ＳＡ１を生成する。この制御コマンド付加部３２２は、上述した図１１に示す画像信号処理装置２００Ｅにおける制御コマンド付加部２２２に対応したものである。
【０１７６】
また、音声信号処理装置３００Ｅは、フレーム内シャフリング部３２３と、フレームシャフリング部３２４とを有している。フレーム内シャフリング部３２３は、制御コマンド付加部３２２より出力される制御コマンド付き音声信号ＳＡ１を入力し、この音声信号ＳＡ１から、１音声フレーム毎に、制御コマンドおよび音声信号をそれぞれ分離して取得する。また、このフレーム内シャフリング部３２３は、１音声フレーム毎に、分離取得された制御コマンドに含まれる自己の処理部における処理を制御するための制御コマンドに基づいて、音声フレーム内のサンプルデータの位置をシフトする処理、つまりフレーム内シャフリングを行う。さらに、このフレーム内シャフリング部３２３は、１フレーム毎に、分離取得された制御コマンドの全て、つまり自己の処理部における処理を制御するための制御コマンドおよび他の処理部における処理を制御するための制御コマンドを、処理後の音声信号に付加して、出力すべき制御コマンド付き音声信号ＳＡ２を生成する。
【０１７７】
フレームシャフリング部３２４は、フレーム内シャフリング部３２３より出力される制御コマンド付き音声信号ＳＡ２を入力し、この音声信号ＳＡ２から、１音声フレーム毎に、制御コマンドおよび画像信号をそれぞれ分離して取得する。また、このフレームシャフリング部３２４は、所定数の音声フレーム毎に、その所定数の音声フレーム内で音声フレームの位置を交換する処理、つまりフレームシャフリングを行う。さらに、フレームシャフリング部３２４は、１音声フレーム毎に、分離取得された制御コマンドの全て、つまり自己の処理部における処理を制御するための制御コマンドおよび他の処理部における処理を制御するための制御コマンドを、処理後の音声信号に付加して、出力すべき制御コマンド付き音声信号ＳＡ３を生成する。
【０１７８】
また、音声信号処理装置３００Ｅは、符号化部３２５と、出力端子３２６とを有している。符号化部３２５は、フレームシャフリング部３２４から出力される制御コマンド付き音声信号ＳＡ３に対し、符号化、例えば誤り訂正符号化、変調符号化等を行って伝送信号ＴＲＳを生成し、この伝送信号ＴＲＳを出力端子３２６に出力する。
【０１７９】
上述したフレーム内シャフリング部３２３、フレームシャフリング部３２４の基本となる処理部は、上述の図３に示す処理部１２０と同様に構成される。ただし、制御コマンド付加部１２４には、分離部１２１で分離された制御コマンドＣＭＤそのものが遅延部１２３で遅延された後に供給される。そのため、制御コマンド付加部１２４では、１音声フレーム毎に、音声処理部（図３の画像処理部１２２に対応）から出力される１音声フレーム分の音声信号Ａ２（図３の画像信号Ｖ２に対応）に、分離部１２１で分離された制御コマンドＣＭＤそのものが付加され、出力すべき制御コマンド付き音声信号ＳＡout（図３の画像信号ＳＶoutに対応）が得られる。
【０１８０】
また、フレーム内シャフリング部３２３においては、音声処理部は、自己の処理部における処理を制御するための制御コマンドＣＭＤａに基づいて、音声信号Ａ１（図３の画像信号Ｖ１に対応）に対してフレーム内シャフリングを行う。フレームシャフリング部３２４においては、音声処理部は、自己の処理部における処理を制御するための制御コマンドＣＭＤａに基づいて、音声信号Ａ１に対してフレームシャフリングを行う。
【０１８１】
図１７に示す音声信号処理装置３００Ｅの動作を説明する。
入力端子３２１に入力された入力音声信号Ａinは制御コマンド付加部３２２に供給される。この制御コマンド付加部３２２では、入力音声信号Ａinの１音声フレーム毎に、フレーム内シャフリング部３２３およびフレームシャフリング部３２４における処理をそれぞれ制御するための制御コマンドＣＭＤが付加され、制御コマンド付き音声信号ＳＡ１が得られる。
【０１８２】
この音声信号ＳＡ１はフレーム内シャフリング部３２３に供給される。このフレーム内シャフリング部３２３では、この音声信号ＳＡ１から、１音声フレーム毎に、制御コマンドＣＭＤおよび音声信号Ａ１がそれぞれ分離されて取得される。また、このフレーム内シャフリング部３２３では、１音声フレーム毎に、制御コマンドＣＭＤのうち自己の処理部における処理を制御するための制御コマンドＣＭＤａに基づいて、音声信号Ａ１に対して音声フレーム内のサンプルデータの位置をシフトする処理、つまりフレーム内シャフリングが行われる。さらに、このフレーム内シャフリング部３２３では、１音声フレーム毎に、分離取得された制御コマンドＣＭＤの全てが、処理後の音声信号Ａ２に付加されて、出力すべき制御コマンド付き音声信号ＳＡ２が得られる。
【０１８３】
この音声信号ＳＡ２は、フレームシャフリング部３２４に供給される。このフレームシャフリング部３２４では、この音声信号ＳＡ２から、１音声フレーム毎に、制御コマンドＣＭＤおよび音声信号Ａ１がそれぞれ分離されて取得される。また、このフレームシャフリング部３２４では、所定数の音声フレーム毎に、その所定数の音声フレーム内で音声フレームの位置を交換する処理、つまりフレームシャフリングが行われる。さらに、このフレームシャフリング部３２４では、１音声フレーム毎に、分離取得された制御コマンドＣＭＤの全てが、処理後の音声信号Ａ２に付加されて、出力すべき制御コマンド付き音声信号ＳＡ３が得られる。
【０１８４】
この音声信号ＳＡ３は符号化部３２５に供給される。この符号化部３２５では、この音声信号ＳＡ３に対し、符号化、例えば誤り訂正符号化、変調符号化等が行われ、伝送信号ＴＲＳが生成される。この伝送信号ＴＲＳは出力端子３２６に出力される。
【０１８５】
次に、図１８に示す音声信号処理装置３００Ｄについて説明する。この音声信号処理装置３００Ｄは、伝送信号ＴＲＳが入力される入力端子３３１と、復号化部３３２とを有している。復号化部３３２は、入力端子２３１に入力される伝送信号ＴＲＳに対し、復号化を行って、制御コマンド付き音声信号ＳＡ３を取得する。
【０１８６】
また、音声信号処理装置３００Ｄは、フレームデシャフリング部３３３と、フレーム内デシャフリング部２３４と、出力端子３３５とを有している。
【０１８７】
フレームデシャフリング部３３３は、復号化部３３２より出力される制御コマンド付き音声信号ＳＡ３を入力し、この音声信号ＳＡ３から、１音声フレーム毎に、制御コマンドおよび音声信号をそれぞれ分離して取得する。また、このフレームデシャフリング部３３３は、所定数の音声フレーム毎に、分離取得された制御コマンドに含まれる自己の処理部における処理を制御するための制御コマンドに基づいて、その所定数の音声フレーム内における音声フレームの位置を元に戻す処理、つまりフレームデシャフリングを行う。さらに、このフレームデシャフリング部３３３は、１音声フレーム毎に、分離取得された制御コマンドのうち自己の処理を制御するための制御コマンドを除いた残りの制御コマンドを、処理後の音声信号に付加して、出力すべき制御コマンド付き音声信号ＳＡ４を生成する。
【０１８８】
フレーム内デシャフリング部３３４は、フレームデシャフリング部３３３より出力される制御コマンド付き音声信号ＳＡ４を入力し、この音声信号ＳＡ４から、１音声フレーム毎に、制御コマンドおよび音声信号をそれぞれ分離して取得する。また、このフレーム内デシャフリング部３３４は、１音声フレーム毎に、分離取得された制御コマンドに含まれる自己の処理部における処理を制御するための制御コマンドに基づいて、音声フレーム内のサンプルデータの位置を元に戻す処理、つまりフレーム内デシャフリングを行い、上述した入力音声信号Ａinに対応した出力音声信号Ａoutを生成して出力端子３３５に出力する。
【０１８９】
上述したフレームデシャフリング部３３３、フレーム内デシャフリング部３３４の基本となる処理部は、上述の図３に示す処理部１２０と同様に構成される。個々の処理部について、さらに、説明する。
【０１９０】
フレームデシャフリング部３３３においては、音声処理部（図３の画像処理部１２２に対応）は、自己の処理部における処理を制御するための制御コマンドＣＭＤａに基づいて、音声信号Ａ１（図３の画像信号Ｖ１に対応）に対してフレームデシャフリングを行う。制御コマンド付加部１２４は、１音声フレーム毎に、音声処理部から出力される１音声フレーム分の音声信号Ａ２（画像信号Ｖ２に対応）に、制御コマンドＣＭＤとして、分離部１２１で分離された他の処理部、つまりフレーム内デシャフリング部３３４における処理を制御するための制御コマンドＣＭＤｂを付加して、出力すべき制御コマンド付き音声信号ＳＡout(画像信号ＳＶoutに対応）を形成する。
【０１９１】
フレーム内デシャフリング部３３４においては、音声処理部は、自己の処理部における処理を制御するための制御コマンドＣＭＤａに基づいて、音声信号Ａ１に対してフレーム内デシャフリングを行う。また、フレーム内デシャフリング部３３４においては、分離部１２１で分離取得された制御コマンドＣＭＤに他の処理部における処理を制御するための制御コマンドが含まれていない。そのため、このフレーム内デシャフリング部３３４には、遅延部１２３および制御コマンド付加部１２４は設けられておらず、音声処理部から出力される音声信号Ａ２を、そのまま音声信号Ａoutとして出力する。
【０１９２】
図１８に示す音声信号処理装置３００Ｄの動作を説明する。
入力端子３３１に入力された伝送信号ＴＲＳは復号化部３３２に供給される。この復号化部３３２では、伝送信号ＴＲＳに対して復号化が行われ、制御コマンド付き音声信号ＳＡ３が得られる。
【０１９３】
この音声信号ＳＡ３はフレームデシャフリング部３３３に供給される。このフレームデシャフリング部３３３では、この音声信号ＳＡ３から、１音声フレーム毎に、制御コマンドＣＭＤおよび音声信号Ａ１がそれぞれ分離されて取得される。また、このフレームデシャフリング部３３３では、所定数の音声フレーム毎に、分離取得された制御コマンドＣＭＤに含まれる自己の処理部における処理を制御するための制御コマンドＣＭＤａに基づいて、その所定数の音声フレーム内における音声フレームの位置を元に戻す処理、つまりフレームデシャフリングが行われる。さらに、このフレームデシャフリング部３３３では、１音声フレーム毎に、制御コマンドＣＭＤのうち制御コマンドＣＭＤａを除いた残りの制御コマンド、つまり他の処理部における処理を制御するための制御コマンドＣＭＤｂが、処理後の音声信号Ａ２に付加されて、出力すべき制御コマンド付き音声信号ＳＡ４が得られる。
【０１９４】
この音声信号ＳＡ４はフレーム内デシャフリング部３３４に供給される。このフレーム内デシャフリング部３３４では、この音声信号ＳＡ４から、１音声フレーム毎に、制御コマンドＣＭＤおよび音声信号Ａ１がそれぞれ分離されて取得される。また、このフレーム内デシャフリング部３３４では、１音声フレーム毎に、分離取得された制御コマンドＣＭＤに含まれる自己の処理部における処理を制御するための制御コマンドＣＭＤａに基づいて、音声フレーム内のサンプルデータの位置を元に戻す処理、つまりフレーム内デシャフリングが行われ、上述した入力音声信号Ａinに対応した出力音声信号Ａoutが生成される。この出力音声信号Ａoutは出力端子３３５に出力される。
【０１９５】
このように、図１７に示す音声信号処理装置３００Ｅにおいては、制御コマンド付加部３２２で、入力音声信号Ａinの１音声フレーム毎に、フレーム内シャフリング部３２３およびフレームシャフリング部３２４における処理をそれぞれ制御するための制御コマンドＣＭＤを付加して制御コマンド付き音声信号ＳＡ１を生成し、フレーム内シャフリング部３２３およびフレームシャフリング部３２４は、それぞれ制御コマンドＣＭＤのうち自己の処理部における処理を制御するための制御コマンドＣＭＤａに基づいて、音声信号を処理するものであり、これらの処理部では、１音声フレームあるいは所定数の音声フレーム毎の処理変更を、これらへの制御コマンドの供給タイミングを気にせずに、容易に実現できる。
【０１９６】
また、図１８に示す音声信号処理装置３００Ｄにおいては、復号化部３３２から出力される音声信号ＳＡ３は、１フレーム毎に、フレームデシャフリング部３３３、フレーム内デシャフリング部３３４における処理をそれぞれ制御するための制御コマンドＣＭＤが付加されたものであり、フレームデシャフリング部３３３、フレーム内デシャフリング部３３４は、それぞれ制御コマンドＣＭＤのうち自己の処理部における処理を制御するための制御コマンドＣＭＤａに基づいて、音声信号を処理するものであり、これらの処理部では、１音声フレームあるいは所定数の音声フレーム毎の処理変更を、これらへの制御コマンドの供給タイミングを気にせずに、容易に実現できる。
【０１９７】
なお、上述せずも、処理部の単位として、基板、あるいはＬＳＩ(Large Scale Integrated circuit)のチップを採用でき、またこれら基板、チップからなる装置を処理部の単位とすることもできる。
【０１９８】
また、上述実施の形態において、画像信号の１フレーム毎、あるいは音声信号の１音声フレーム毎に、複数の処理部における処理を制御するための制御コマンドＣＭＤを付加するものであるが、この制御コマンドＣＭＤを付加する単位は、これに限定されるものではない。
【０１９９】
また、上述実施の形態においては、複数の処理部の全部における処理を制御するための制御コマンドＣＭＤを付加するものを示したが、複数の処理部のうち一部の処理部における処理のみを制御するための制御コマンドＣＭＤを付加することも考えられる。すなわち、所定単位毎に処理を変更する必要がある処理部のみ、制御コマンドＣＭＤの付加対象とすればよく、常に同じ処理を行う処理部については、制御コマンドＣＭＤを付加する必要はない。例えば、上述の図１に示す画像表示装置１００においては、ＩＰ変換部１０８は各フレームで同じ処理を行うので、制御コマンド付加部１０７で付加する制御コマンドＣＭＤには、このＩＰ変換部１０８を制御するための制御コマンド（コマンド１）（図５Ａ〜Ｄ参照）はなくてもよい。
【産業上の利用可能性】
【０２００】
この発明は、所定の処理部における所定単位毎の処理変更を良好に行い得るものであり、画像信号、音声信号等の情報信号に対して、複数の処理部によって順に処理を行う用途に適用できる。
【図面の簡単な説明】
【０２０１】
【図１】実施の形態としての画像表示装置の構成を示すブロック図である。
【図２】５２５ｐ信号と１０５０ｐ信号の画素位置関係を示す図である。
【図３】処理部の構成を示すブロック図である。
【図４】処理部における処理手順（１フレーム分）を示すフローチャートである。
【図５】制御コマンド付き画像信号の構成を説明するための図である。
【図６】ＤＲＣ部内の画像処理部の構成を示すブロック図である。
【図７】クラスタップ、予測タップの一例を示す図である。
【図８】１０５０ｐ信号の単位画素ブロック内の４画素の、５２５ｐ信号における中心予測タップからの位相ずれを示す図である。
【図９】解像度、ノイズ除去度の調整時および通常時における表示画像を示す図である。
【図１０】係数データ生成装置の構成を示すブロック図である。
【図１１】実施の形態としての画像信号処理装置（エンコード側）の構成を示すブロック図である。
【図１２】実施の形態としての画像信号処理装置（デコード側）の構成を示すブロック図である。
【図１３】ライン内シャフリングにおける画素シフトを説明するための図である。
【図１４】ラインシャフリングにおけるラインシフトを説明するための図である。
【図１５】フレームシャフリングにおける画像フレームの位置交換を説明するための図である。
【図１６】エンコード処理を説明するための図である。
【図１７】実施の形態としての音声信号処理装置（エンコード側）の構成を示すブロック図である。
【図１８】実施の形態としての音声信号処理装置（デコード側）の構成を示すブロック図である。
【符号の説明】
【０２０２】
１００・・・画像表示装置、１０１・・・システムコントローラ、１０２・・・リモコン受信部、１０３・・・リモコン送信機、１０５・・・受信アンテナ、１０６・・・チューナ、１０７・・・制御コマンド付加部、１０８・・・ＩＰ変換部、１０９・・・ＤＲＣ部、１１０・・・子画面処理部、１１１・・・画像メモリ、１１２・・・パネルドライバ、１１３・・・ディスプレイ、１１４・・・ＯＳＤ部、１１５・・・合成器、１２０・・・処理部、１２１・・・制御コマンド・画像信号分離部、１２２・・・画像処理部、１２３・・・遅延部、１２４・・・制御コマンド付加部、２００Ｅ・・・画像信号処理装置（エンコード側）、２２１・・・入力端子、２２２・・・制御コマンド付加部、２２３・・・水平方向シフト部、２２４・・・垂直方向シフト部、２２５・・・フレームシャフリング部、２２６・・・符号化部、２２７・・・出力端子、２００Ｄ・・・画像信号処理装置（デコード側）、２３１・・・入力端子、２３２・・・復号化部、２３３・・・フレームデシャフリング部、２３４・・・垂直方向シフト部、２３５・・・水平方向シフト部、２３６・・・出力端子、３００Ｅ・・・音声信号処理装置（エンコード側）、３２１・・・入力端子、３２２・・・制御コマンド付加部、３２３・・・フレーム内シャフリング部、３２４・・・フレームシャフリング部、３２５・・・符号化部、３２６・・・出力端子、３００Ｄ・・・音声信号処理装置（デコード側）、３３１・・・入力端子、３３２・・・復号化部、３３３・・・フレームデシャフリング部、３３４・・・フレーム内デシャフリング部、３３５・・・出力端子
【図１】
2005217634.tif 000010
【図２】
2005217634.tif 000011
【図３】
2005217634.tif 000012
【図４】
2005217634.tif 000013
【図５】
2005217634.tif 000014
【図６】
2005217634.tif 000015
【図７】
2005217634.tif 000016
【図８】
2005217634.tif 000017
【図９】
2005217634.tif 000018
【図１０】
2005217634.tif 000019
【図１１】
2005217634.tif 000020
【図１２】
2005217634.tif 000021
【図１３】
2005217634.tif 000022
【図１４】
2005217634.tif 000023
【図１５】
2005217634.tif 000024
【図１６】
2005217634.tif 000025
【図１７】
2005217634.tif 000026
【図１８】
2005217634.tif 000027