(57)【特許請求の範囲】
【請求項１】
ノンインターレース入力画像をダウンサンプリングして、インターレース画像を形成し符号化を行う第１の符号化手段と、
上記ノンインターレース入力画像から動きベクトル検出手段によって動きベクトルを検出し、上記ノンインターレース入力画像を符号化する第２の符号化手段とを有する画像信号符号化装置において、
上記第１の符号化手段は、
上記ノンインターレース入力画像をダウンサンプリングして、上記インターレース画像を形成するダウンサンプリング手段と、
上記インターレース画像と第１の局所復号画像を減算し、符号化することにより第１の信号を生成する第１の生成手段と、
上記第１の信号を可変長符号化してインターレースの下位レイヤビットストリームを出力する第１の出力手段と、
上記第１の信号を局所復号して上記第１の局所復号画像を形成する第１の局所復号手段と、
上記第１の局所復号画像と第２の局所復号画像を上記動きベクトルに基づいて重み付け補間してアップサンプリング処理により参照画像を形成するアップサンプリング手段とを有し、
上記第２の符号化手段は、
上記ノンインターレース入力画像と予測画像を減算し、符号化することにより第２の信号を生成する第２の生成手段と、
上記第２の信号を可変長符号化してノンインターレースの上位レイヤビットストリームを出力する第２の出力手段と、
上記第２の信号を局所復号して上記第２の局所復号画像を形成する第２の局所復号手段と、
上記第２の局所復号画像と上記参照画像を上記動きベクトルに基づいて重み付けして上記予測画像を形成する予測画像形成手段と
を有することを特徴とする画像信号符号化装置。
【請求項２】
ノンインターレース入力画像をダウンサンプリングして形成されたインターレース画像と第１の局所復号画像を減算し、符号化することにより生成された第１の信号を可変長符号化して生成されたインターレースの下位レイヤビットストリームと、
上記第１の信号を局所復号して形成された上記第１の局所復号画像と第２の信号を局所復号して形成された第２の局所復号画像を、上記ノンインターレース入力画像から検出された動きベクトルに基づいて重み付け補間してアップサンプリング処理により参照画像を形成し、上記参照画像と上記第２の局所復号画像を上記動きベクトルに基づいて重み付けして第１の予測画像を形成し、上記ノンインターレース入力画像と上記第１の予測画像を減算し、符号化することにより上記第２の信号を生成し、上記第２の信号を上記動きベクトルと共に可変長符号化して生成されたノンインターレースの上位レイヤビットストリームと
を入力し、復号化する画像信号復号化装置において、
上記インターレースの下位レイヤビットストリームを復号化してインターレース出力画像を形成する第１の復号化手段と、
上記ノンインターレースの上位レイヤビットストリームを復号化して第３の信号を生成する第２の復号化手段と、
上記第３の信号と第２の予測画像を加算してノンインターレース出力画像を形成する形成手段と、
上記ノンインターレース出力画像について、動き補償を行い第３の予測画像を形成する動き補償手段と、
上記インターレース出力画像と上記第３の予測画像を上記動きベクトルに基づいて重み付け補間してアップサンプリング処理により第４の予測画像を形成するアップサンプリング手段と、
上記第３の予測画像と上記第４の予測画像を上記動きベクトルに基づいて重み付けして上記第２の予測画像を形成する予測画像形成手段と
を有することを特徴とする画像信号復号化装置。
【発明の詳細な説明】
【０００１】
【産業上の利用分野】
本発明は、光ディスクや磁気テープなどの蓄積系動画像メディアを用いた情報記録装置および情報再生装置に関する。また、例えばいわゆるテレビ会議システム、動画電話システム、放送用機器に適用して好適な情報伝送装置／受信装置に関する。
【０００２】
【従来の技術】
動画像符号化／復号化方式において、入力画像と出力画像との間の空間的な解像度的を可変とする方法として、レイヤ符号化／復号化方式がある。レイヤ符号化方式は二つの解像度の異なる符号化器をもち、下位のレイヤでは解像度の低い画像を符号化してビットストリームを作成する。上位レイヤではフル解像度の入力画像と、下位レイヤからの復号化された画像をアップサンプルした画像の差分を符号化する。
【０００３】
このような手法によれば、入力の画像と異なった解像度の再生画像が得られる。図１にレイヤ符号化器の構成図を示す。まず、下位レイヤの動作から説明する。
下位レイヤでは入力画像１はダウンサンプル器２で低解像度の画像に変換される。この画像がＭＰＥＧ符号化器３によって符号化されて下位レイヤ出力ビットストリーム４が得られる。さらにＭＰＥＧ符号化器３の出力はＭＰＥＧ復号化器５によって復号化される。この画像はアップサンプル器６によって高解像度の画像に変換される。
【０００４】
次に上位レイヤの動作を説明する。入力画像１は、上記に説明したアップサンプル器６の出力とともに差分器７へ入力される。ここで差分をとられた画像信号は、ＭＰＥＧ符号化器８へ入力されて符号化され、上位レイヤ出力ビットストリーム９を得る。
図２にレイヤ復号化器の構成図を示す。まず下位レイヤの動作を説明する。下位レイヤ入力ビットストリーム１０はＭＰＥＧ復号化器１１に入力されて下位レイヤ出力映像信号１２を得る。同時にＭＰＥＧ復号化器１１の出力画像はアップサンプル器１３に入力される。
【０００５】
次に上位レイヤについて説明する。上位レイヤ入力ビットストリーム１４はＭＰＥＧ復号化器１５に入力され復号化される。出力画像１５とアップサンプルされた信号１３は加算器１６で合成されて上位レイヤ出力映像信号１７を得る。
【０００６】
【発明が解決しようとする課題】
下位レイヤでは解像度の低い画像を符号化してビットストリームを作成し、上位レイヤではフル解像度の入力画像と下位レイヤからの復号化された画像をアップサンプルした画像の差分を復号化していたが、それは同じ画像（インターレース画像またはノンインターレース画像）の上位レイヤ及び下位レイヤで行われていた。本発明は、更に画質を良くするために、ノンインターレース画像とインターレース画像のコンパチビリティを持たせた出力ビットストリームを得るレイヤ符号化／復号化方式を実現できるようにするものである。
【０００７】
【課題を解決するための手段】
本発明の画像信号符号化装置は、ノンインターレース入力画像をダウンサンプリングして、インターレース画像を形成し符号化を行う第１の符号化手段と、ノンインターレース入力画像から動きベクトル検出手段によって動きベクトルを検出し、ノンインターレース入力画像を符号化する第２の符号化手段とを有する画像信号符号化装置において、第１の符号化手段は、ノンインターレース入力画像をダウンサンプリングして、インターレース画像を形成するダウンサンプリング手段と、インターレース画像と第１の局所復号画像を減算し、符号化することにより第１の信号を生成する第１の生成手段と、第１の信号を可変長符号化してインターレースの下位レイヤビットストリームを出力する第１の出力手段と、第１の信号を局所復号して第１の局所復号画像を形成する第１の局所復号手段と、第１の局所復号画像と第２の局所復号画像を動きベクトルに基づいて重み付け補間してアップサンプリング処理により参照画像を形成するアップサンプリング手段とを有し、第２の符号化手段は、ノンインターレース入力画像と予測画像を減算し、符号化することにより第２の信号を生成する第２の生成手段と、第２の信号を可変長符号化してノンインターレースの上位レイヤビットストリームを出力する第２の出力手段と、第２の信号を局所復号して第２の局所復号画像を形成する第２の局所復号手段と、第２の局所復号画像と参照画像を動きベクトルに基づいて重み付けして予測画像を形成する予測画像形成手段とを有する。
また、本発明の画像信号復号化装置は、ノンインターレース入力画像をダウンサンプリングして形成されたインターレース画像と第１の局所復号画像を減算し、符号化することにより生成された第１の信号を可変長符号化して生成されたインターレースの下位レイヤビットストリームと、上記第１の信号を局所復号して形成された上記第１の局所復号画像と第２の信号を局所復号して形成された第２の局所復号画像を、上記ノンインターレース入力画像から検出された動きベクトルに基づいて重み付け補間してアップサンプリング処理により参照画像を形成し、上記参照画像と上記第２の局所復号画像を上記動きベクトルに基づいて重み付けして第１の予測画像を形成し、上記ノンインターレース入力画像と上記第１の予測画像を減算し、符号化することにより上記第２の信号を生成し、上記第２の信号を上記動きベクトルと共に可変長符号化して生成されたノンインターレースの上位レイヤビットストリームとを入力し、復号化する画像信号復号化装置において、上記インターレースの下位レイヤビットストリームを復号化してインターレース出力画像を形成する第１の復号化手段と、上記ノンインターレースの上位レイヤビットストリームを復号化して第３の信号を生成する第２の復号化手段と、上記第３の信号と第２の予測画像を加算してノンインターレース出力画像を形成する形成手段と、上記ノンインターレース出力画像について、動き補償を行い第３の予測画像を形成する動き補償手段と、上記インターレース出力画像と上記第３の予測画像を上記動きベクトルに基づいて重み付け補間してアップサンプリング処理により第４の予測画像を形成するアップサンプリング手段と、上記第３の予測画像と上記第４の予測画像を上記動きベクトルに基づいて重み付けして上記第２の予測画像を形成する予測画像形成手段とを有する。
【０００８】
【作用】
本発明においては、第１の符号化器によりノンインターレース入力画像をダウンサンプリングして、インターレース画像を形成し符号化を行い、第２の符号化器によりノンインターレース入力画像が符号化される。従って、解像度の異なるノンインターレース画像に対応するビットストリームとインターレース画像に対応するビットストリームとが得られる。
【０００９】
【実施例】
例えば、ノンインターレース画像を入力し、上位レイヤと下位レイヤの走査線数の比が２：１インターレースの画像で動作するとして、本発明による符号化を行いノンインターレース画像とインターレース画像のコンパチビリティをもたせた出力ビットストリームを得るためのシステムについて説明する。
【００１０】
本発明による符号化方式（エンコーダ）図３を用いて説明する。まず下位レイヤブロックについて説明する。
エンコーダーでは、処理をマクロブロック単位で行なっている。入力画像２１はノンインターレース構造を持ちダウンサンプル器２２へ入力され低解像度のインターレース画像に変換される。変換の際には動きベクトル検出回路３７からの動きベクトルを参照してローパスフィルタを通過させるかどうかを適応的に判定している。ここでの動きベクトルは、後述する動きベクトル検出回路２４から供給するようにしてもよいが、この場合は、時間的に前の画像の動きベクトルを使うようになるため、上位レイヤ側の符号化効率は多少低下することもある。
【００１１】
図５にダウンサンプル器の構成を示す。入力された画像７１に対し、切替器７３では動きベクトルによってＬＰＦを作用させた画像と作用させない画像を適応的に切り替えて出力する。切替器７３からの出力は、間引き器７２によって交互に間引かれる。間引かれた後の画像は折り返し成分を含むため通常は一様にローパスフィルタを作用させるが、入力がノンインターレース画像であるという特徴から、動きが少ないときには、間引きされた点と、空間的に同位置で時間的に異なるサンプル点が必ず存在する。例えば静止画のときには図５の点線で囲った２点は全く同じデータであるからフィルタ処理は不用である。
【００１２】
ダウンサンプル器２２でダウンサンプリングされたブロックフォーマットの画像は、フレームメモリ２３に格納され、動きベクトル検出回路２４によって動きベクトルの検出が行われる。動きベクトル検出回路２４は、フレームメモリ２３に保持された画像を前方原画像と後方原画像として、現在の参照画像との間の動きベクトルの検出を行なう。ここで、動きベクトルの検出は、ブロック単位でのフィールド又はフレーム間差分の絶対値和が最小になるものが、その動きベクトルとされる。
【００１３】
動きベクトルの情報は動き補償回路２５に送られ、マクロブロックタイプの選択がなされ、該当する予測画像が差分器２６へ送られる。差分器２６は入力画像と予測画像の差分をとりデイスクリートコサイン変換（ＤＣＴ（ｄｉｓｃｒｅｔｅ  ｃｏｓｉｎｅ  ｔｒａｎｓｆｏｒｍ  ））回路２７に出力するようになされている。
ＤＣＴ回路２７は映像信号の２次元相関を利用して、入力画像データ又は差分データをブロツク単位でデイスクリートコサイン変換し、その結果得られる変換データを量子化回路２８に出力するようになされている。
【００１４】
量子化回路２８は、マクロブロックおよびスライス毎に定まる量子化ステツプサイズでＤＣＴ変換データを量子化し、その結果出力端に得られる量子化データを可変長符号化（ＶＬＣ（ｖａｒｉａｂｌｅ  ｌｅｎｇｔｈ  ｃｏｄｅ））回路２９及び逆量子化回路３０に供給する。
ここでＶＬＣ回路２９は、量子化データを、量子化スケール、マクロブロックタイプ、動きベクトル等と共に可変長符号化処理し、伝送データとして下位レイヤビットストリーム３１を出力する。出力された下位レイヤビットストリーム３１は、後述する上位レイヤビットストリーム、符号化されたオーディオ信号、同期信号等と多重化され、更にエラー訂正用のコードが付加され、所定の変調が加えられた後、レーザ光を介してマスターディスク上に凹凸のピットとして記録される。このマスターディスクを利用して、スタンパーが形成され、更に、そのスタンパーにより、大量の複製ディスク（例えば光ディスク）が形成される。
【００１５】
逆量子化回路３０は、量子化回路２８から送出される量子化データを代表値に逆量子化して逆量子化データに変換し、出力データの量子化回路における変換前の変換データを復号し、逆量子化データをデイスクリートコサイン逆変換ＩＤＣＴ（ｉｎｖｅｒｓｅ  ｄｉｓｃｒｅｔｅ  ｃｏｓｉｎｅ  ｔｒａｓｆｏｒｍ）回路３２に供給するようになされている。
【００１６】
ＩＤＣＴ回路３２は、逆量子化回路３０で復号された逆量子化データをＤＣＴ回路２７とは逆の変換処理で復号画像データに変換し、動き補償回路２５に出力するようになされている。
動き補償回路２５は、動きベクトル検出回路２４から供給された動きベクトルに基づいて動き補償を行い、復号画像を前方予測画像もしくは後方予測画像としてフレームメモリに書き込む。前方／両方向予測の場合は、予測画像からの差分がＩＤＣＴ回路３２の出力として送られてくるために、この差分を加算器３３を用いて予測画像に対して足し込むことで、局所復号が行なわれる。
【００１７】
この予測画像は、デコーダで復号される画像と全く同一の画像であり、次の処理画像はこの予測画像をもとに、前方／両方向予測を行なう。
さらにこの下位レイヤの予測画像はインターレース構造を持っているが、アップサンプル器３４によって上位レイヤと同様のノンインターレース画像に補間を施されて上位レイヤの時空間予測器（Ｓｐａｔｉｏ−Ｔｅｍｐｏｒａｌ  Ｐｒｅｄｉｃｔｏｒ）３９へ入力される。
【００１８】
アップサンプル器３４ではノンインターレースの補間画像をつくる際に上位レイヤからの、フル精度で空間的なサンプル点は同じではあるが時間的なサンプル点は異なる画像と、下位レイヤの間引きによって解像度は低くなっているが時間的に同じサンプル点をもつ画像の両方を動き情報を基に適応的に参照して補間画像を生成する。
【００１９】
図６にアップサンプル器の構成と動作を示す。８３にアップサンプル器の構成を示す。８３の入力は、上位レイヤの空間的に同じ位置だが時間的に異なるデータと、下位レイヤの同一フィールドのサンプル点からの内挿補間のデータと、下位レイヤの異なるフィールドからの対応点のデータであり、動きベクトルから適応的に決定される係数ｗ１、ｗ２、ｗ３を使用して重み付け補間を行う。まず８１に示す様に補間する点に対して下位レイヤの同一フィールド内の隣接点からの内挿補間と下位レイヤの異なるフィールドのサンプル点と上位レイヤの空間的に同じ位置のサンプル点をｗ１からｗ２の係数を使用して重みをつけて補間する。さらにｗ１、ｗ２で得られた値と下位レイヤの同位置の値、すなわち補間すべき点自身の値をｗ３の係数で重みをつけて足し込む。この場合（１−ｗ３）の係数
によって参照される下位レイヤの同位置の点はゼロ内挿された点であり、値が０であるから補間には影響しない。また８２のように補間しようとする同位置に下位レイヤのサンプル点が存在する場合も８１と同様の回路構成で処理される。この場合、（１−ｗ１），（１−ｗ２）の係数によって参照される点はゼロ内挿された点であるから補間には影響しない。
【００２０】
以上の補間の際に係数ｗ１を０にセットすることで、上位レイヤの値を使用せずに、下位レイヤ内の値だけを使用して被補間点の値を発生することも可能である。ダウンサンプル器２２と、アップサンプル器３４は２：１の間引きや、補間以外にも、適当な内挿フィルタと、サンプル点を選択することで他の比率の解像度変換にも適応し得る。
【００２１】
次に上位レイヤの構成について説明する。上位レイヤではノンインターレース画像２１をフル精度のまま処理している。ノンインターレース画像２１はディレイ回路３５で遅延された後にフレームモリ３６に格納され、動きベクトル検出回路３７によって動きベクトルの検出を行う。動きベクトル検出回路３７については動きベクトル検出回路２４と同様の動作を行う。
【００２２】
動きベクトルの情報は動き補償回路３８に送られ、該当する予測画像が時空間予測器（Ｓｐａｔｉｏ−Ｔｅｍｐｏｒａｌ  Ｐｒｅｄｉｃｔｏｒ）３９へ入力される。時空間予測器３９は動き補償回路３８からの予測画像、すなわち時間方向からの予測と、アップサンプリング回路３４からの予測画像、すなわち空間方向からの予測画像を適応的に重み付けによって選択する回路である。
【００２３】
時空間予測器３９は動きベクトル検出回路３７からの動きの情報をもとに係数αを決定して時間方向の予測画像すなわち上位レイヤの予測画像に（１−α）の重みを付け、空間方向の予測画像すなわち下位レイヤからの予測画像にαの重みをつけて足し込み、差分器４０へ送る。
差分器４０は入力画像と予測画像の差分をとりデイスクリートコサイン変換（ＤＣＴ（ｄｉｓｃｒｅｔｅ  ｃｏｓｉｎｅ  ｔｒａｎｓｆｏｒｍ  ））回路４１に出力するようになされている。
【００２４】
ＤＣＴ回路４１は映像信号の２次元相関を利用して、入力画像データ又は差分データをブロツク単位でデイスクリートコサイン変換し、その結果得られる変換データを量子化回路４２に出力するようになされている。
４２の量子化回路は、マクロブロックおよびスライス毎に定まる量子化ステツプサイズでＤＣＴ変換データを量子化し、その結果出力端に得られる量子化データを可変長符号化（ＶＬＣ（ｖａｒｉａｂｌｅ  ｌｅｎｇｔｈ  ｃｏｄｅ））回路４３及び逆量子化回路４４に供給する。
【００２５】
ここでＶＬＣ回路４３は、量子化データを、量子化スケール、マクロブロックタイプ、動きベクトルと共に可変長符号化処理し、伝送データとして上位レイヤビットストリーム４５として出力する。出力されたビットストリーム４５は、上述したように、下位レイヤビットストリームとともに、光ディスク等に記録される。
【００２６】
逆量子化回路４４は、量子化回路４２から送出される量子化データを代表値に逆量子化して逆量子化データに変換し、出力データの量子化回路４２における変換前の変換データを復号し、逆量子化データをデイスクリートコサイン逆変換ＩＤＣＴ（ｉｎｖｅｒｓｅ  ｄｉｓｃｒｅｔｅ  ｃｏｓｉｎｅ  ｔｒａｓｆｏｒｍ）回路４６に供給するようになされている。
【００２７】
ＩＤＣＴ回路４６は、逆量子化回路４４で復号された逆量子化データをＤＣＴ回路４１とは逆の変換処理で復号画像データに変換し、動き補償回路３８に出力するようになされている。
動き補償回路３８は、ＩＤＣＴ回路４６の出力データとマクロブロックタイプ、動きベクトルをもとに局所復号を行ない、局所復号画像を前方予測画像もしくは後方予測画像としてフレームメモリに書き込む。前方／両方向予測の場合は、予測画像からの差分がＩＤＣＴ回路４６の出力として送られてくるために、この差分を加算器４７を用いて予測画像に対して足し込むことで、局所復号を行なっている。
【００２８】
この予測画像は、デコーダで復号される画像と全く同一の画像であり、次の処理画像はこの予測画像をもとに、前方／両方向予測を行なう。
次に、本発明における復号化方式（デコーダ）を図４を用いて説明する。まず下位レイヤブロックの説明をする。下位レイヤのデコーダには光ディスク等の伝送メディアを介して下位ビットストリーム５１が入力される。このビットストリームは可変長復号化（ＩＶＬＣ）回路５２に入力される。可変長復号化回路５２は、ビットストリームから量子化データと、動きベクトル、マクロブロックタイプ、予測モード、量子化スケール等を出力する。
【００２９】
逆量子化回路５３は、可変長復号化回路５２から送出される量子化データを代表値に逆量子化して逆量子化データに変換し、出力データの量子化回路における変換前の変換データを復号し、逆量子化データをデイスクリートコサイン逆変換ＩＤＣＴ（ｉｎｖｅｒｓｅ  ｄｉｓｃｒｅｔｅ  ｃｏｓｉｎｅ  ｔｒａｓｆｏｒｍ）回路５４に供給するようになされている。
【００３０】
ＩＤＣＴ回路５４は、逆量子化回路５３で復号された逆量子化データをＤＣＴ回路２７とは逆の変換処理で復号画像データに変換し、動き補償回路５５に出力するようになされている。さらにこのインターレース構造をもつ復号画像データは同時にアップサンプル器５７への下位レイヤ出力として出力される。
動き補償回路５５は、ＩＤＣＴ回路５４の出力データとマクロブロックタイプ、動きベクトルをもとに復号を行ない、復号画像を前方予測画像もしくは後方予測画像としてフレームメモリに書き込む。前方／両方向予測の場合は、予測画像からの差分がＩＤＣＴ回路５４の出力として送られてくるために、この差分を加算器５６を用いて予測画像に対して足し込むことで復号を行ない、復号画像としてインターレース構造を有する下位レイヤ画像６６が形成される。
【００３１】
この予測画像は、デコーダで復号される画像と全く同一の画像であり、次の処理画像はこの予測画像をもとに、前方／両方向予測を行なう。
同時に下位レイヤの出力画像６６はアップサンプル器５７に入力されて補間を施されノンインターレースの画像に変換されて時空間器予測器（Ｓｐａｔｉｏ−Ｔｅｍｐｏｒａｌ  Ｐｒｅｄｉｃｔｏｒ）５８に入力される。
【００３２】
アップサンプル器５７は、前述のエンコーダの説明にあったアップサンプル器３４と同様の動作を行う。
次に上位レイヤについて説明する。上位レイヤには上位レイヤ入力ビットストリーム５９が入力される。このビットストリームは可変長復号化（ＩＶＬＣ）回路６０に入力される。可変長復号化回路６０は、ビットストリームから量子化データと、動きベクトル、マクロブロックタイプ、量子化スケールを出力する。
【００３３】
逆量子化回路６１は、可変長復号化回路６０から送出される量子化データを代表値に逆量子化して逆量子化データに変換し、出力データの量子化回路における変換前の変換データを復号し、逆量子化データをデイスクリートコサイン逆変換ＩＤＣＴ（ｉｎｖｅｒｓｅ  ｄｉｓｃｒｅｔｅ  ｃｏｓｉｎｅ  ｔｒａｓｆｏｒｍ）回路６２に供給するようになされている。
【００３４】
ＩＤＣＴ回路６２は、逆量子化回路で復号された逆量子化データをエンコーダのＤＣＴ回路４１とは逆の変換処理で復号画像データに変換し、動き補償回路６３に出力するようになされている。さらに復号画像データは同時にノンインターレース構造をもつ上位レイヤ出力画像６５として出力される。
動き補償回路６３は、ＩＤＣＴ回路６２の出力データとマクロブロックタイプ、動きベクトルをもとに復号を行ない、復号画像を前方予測画像もしくは後方予測画像としてフレームメモリに書き込む。
【００３５】
選択されたマクロブロックタイプに該当する画像は時空間予測器（Ｓｐａｔｉｏ−Ｔｅｍｐｏｒａｌ  Ｐｒｅｄｉｃｔｏｒ）５８へ入力される。時空間予測器５８は先述したエンコーダにおける図３の時空間予測器３９と同様の動作を行う。
すなわち空間的に高い解像度を持つが時間的にサンプル点が異なる上位レイヤの予測画と下位レイヤからの空間的な解像度は劣っている可能性があるが時間的なサンプル点は等しい予測画を適応的に重み付けした画像が５８の出力になる。
【００３６】
前方／両方向予測の場合は、予測画像からの差分がＩＤＣＴ回路６２の出力として送られてくるために、この差分を加算器６４を用いて予測画像に対して足し込むことで復号を行なっている。
以上のように、上位レイヤ入力ビットストリームと、下位レイヤ出力ビットストリームからノンインターレース画像の出力とインターレース画像の出力の両方が得られる。
【００３７】
尚、上述の実施例においては、エンコーダーから出力されたビットストリームは、光ディスクに記録するようにしたが、ＩＳＤＮ、衛星通信等の伝送路に送出するようにしてもよい。
【００３８】
【発明の効果】
ノンインターレースの入力画像から、フル解像度のノンインターレース画像に対応するビットストリームと、低解像度のインターレース画像に対応するビットストリームが得られる。
【図面の簡単な説明】
【図１】従来のレイヤコーディングシステムのエンコーダの構成を示すブロック図である。
【図２】従来のレイヤコーディングシステムのデコーダの構成を示すブロック図である。
【図３】上位レイヤがノンインターレース構造を持つエンコーダの構成を示すブロック図である。
【図４】上位レイヤがノンインターレース構造を持つデコーダの構成を示すブロック図である。
【図５】ダウンサンプル器の構成を説明するための図である。
【図６】アップサンプル器の構成を説明するための図である。
【符号の説明】
２２  ダウンサンプル器
３４  アップサンプル器
３９  時空間予測器
５７  アップサンプル器
５８  時空間予測器
【図１】
0003545000.tif 000002
【図２】
0003545000.tif 000003
【図３】
0003545000.tif 000004
【図４】
0003545000.tif 000005
【図５】
0003545000.tif 000006
【図６】
0003545000.tif 000007