"1つの映像が基底レイヤ及び少なくとも1つのエンハンスメントレイヤを含み、前記エンハンスメントレイヤの映像が1つ以上の画質階層に区分される階層構造に基づいた映像処理で映像データの残差映像を符号化する方法であって、前記残差映像を同一のエンハンスメントレイヤ内の参照フレームで動き補償された映像と結合し、前記結合された映像を前記画質階層別に符号化することにより画質階層別ビットストリームを生成するステップと、前記結合された映像を前記画質階層別に符号化する過程で生成された残差差分映像をそれぞれフレームバッファに格納するステップと、前記フレームバッファに格納された映像の動き補償を選択的に実行することにより動き補償された映像を出力するステップと、前記画質階層別ビットストリームを多重化することにより1つのエンハンスメントレイヤビットストリームを出力するステップと、を有することを特徴とする符号化方法。前記残差映像を前記参照フレームで動き補償された映像と結合することにより得られた映像と下位画質階層の映像を符号化する過程で生成された残差差分映像との間の差に対応する映像が画質階層別符号化過程での入力信号として使用される、ことを特徴とする請求項1に記載の符号化方法。前記フレームバッファに格納するステップは、前記画質階層のうちで最上位画質階層及び最下位画質階層の符号化過程で生成された残差差分映像だけをそれぞれフレームバッファに格納する、ことを特徴とする請求項1又は2に記載の符号化方法。前記動き補償された映像を出力するステップは、前記最上位画質階層及び最下位画質階層の符号化過程で生成された残差差分映像のすべてに対して前記動き補償を実行することにより前記動き補償された映像を出力する、ことを特徴とする請求項1乃至3の何れか一項に記載の符号化方法。1つの映像が基底レイヤ及び少なくとも1つのエンハンスメントレイヤを含み、前記エンハンスメントレイヤの映像が1つ以上の画質階層に区分される階層構造に基づいた映像処理で映像データの残差映像を符号化する装置であって、前記残差映像を同一のエンハンスメントレイヤ内の参照フレームで動き補償された映像と結合し、前記結合された映像を前記画質階層別に符号化することにより画質階層別ビットストリーム及び残差差分映像を生成する画質階層符号化部と、前記画質階層符号化部で生成された残差差分映像をそれぞれ格納するフレームバッファと、前記フレームバッファに格納された映像の動き補償を選択的に実行することにより動き補償された映像を出力する動き補償部と、前記画質階層別ビットストリームを多重化することにより1つのエンハンスメントレイヤビットストリームを出力する多重化部と、を有することを特徴とする符号化装置。前記画質階層符号化部は、前記残差映像を前記参照フレームで動き補償された映像と結合されることにより得られた映像と下位画質階層の映像を符号化する過程で生成された残差差分映像との間の差に対応する映像を入力信号として使用する、ことを特徴とする請求項5に記載の符号化装置。前記フレームバッファは、前記画質階層のうちで最上位画質階層及び最下位画質階層の符号化過程で生成された残差差分映像だけをそれぞれフレームバッファに格納する、ことを特徴とする請求項5又は6に記載の符号化装置。前記動き補償部は、前記最上位画質階層及び最下位画質階層の符号化過程で生成された残差差分映像のすべてに対して前記動き補償を実行することにより前記動き補償された映像を出力する、ことを特徴とする請求項5乃至7の何れか一項に記載の符号化装置。1つの映像が基底レイヤ及び少なくとも1つのエンハンスメントレイヤを含み、前記エンハンスメントレイヤの映像が1つ以上の画質階層に区分される階層構造に基づいた映像処理で映像データの残差映像を復号化する方法であって、入力されるエンハンスメントレイヤビットストリームを前記画質階層の順序に対応する1つ以上のビットストリームに逆多重化するステップと、前記ビットストリームを画質階層別に復号化することにより残差映像を復元し、前記復元にされた残差映像をフレームバッファに格納するステップと、同一のエンハンスメントレイヤ内の参照フレームで動き補償された映像を前記復元された残差映像に付加することにより最終に復元された残差映像を出力するステップと、を有することを特徴とする復号化方法。前記最終に復元された残差映像を出力するステップは、各画質階層復号化過程で復元された残差映像をすべて合わせた映像に同一のエンハンスメントレイヤ内の参照フレームで動き補償された映像を付加することにより最終に復元された残差映像を出力する、ことを特徴とする請求項9に記載の復号化方法。前記格納するステップは、前記参照フレームで動き補償された映像を最下位画質階層復号化過程で復元された残差映像に付加することにより得られた映像を前記最下位画質階層に対応する第1のフレームバッファに格納し、前記最終に復元された残差映像を最上位画質階層に対応する第2のフレームバッファに格納する、ことを特徴とする請求項9又は10に記載の復号化方法。前記格納するステップは、最下位画質階層復号化過程で復元された残差映像を前記最下位画質階層に対応する第1のフレームバッファに格納し、前記参照フレームで動き補償された映像を最上位画質階層復号化過程で復元された残差映像に付加することにより得られた映像を前記最終に復元された残差映像として出力し、前記最終に復元された残差映像を前記最上位画質階層に対応する第2のフレームバッファに格納する、ことを特徴とする請求項9又は10に記載の復号化方法。前記第1及び第2のフレームバッファのうちの少なくとも1つに格納された映像は、動き補償を行った後に次のフレームの残差映像の復元のために使用される、ことを特徴とする請求項11又は12に記載の復号化方法。1つの映像が基底レイヤ及び少なくとも1つのエンハンスメントレイヤを含み、前記エンハンスメントレイヤの映像が1つ以上の画質階層に区分される階層構造に基づいた映像処理で映像データの残差映像を復号化する装置であって、入力されるエンハンスメントレイヤビットストリームを前記画質階層の順序に対応する1つ以上のビットストリームに逆多重化する逆多重化部と、前記ビットストリームを画質階層別に復号化することにより残差映像を復元する画質階層復号化部と、前記画質階層復号化部で復元された残差映像を格納するフレームバッファと、同一のエンハンスメントレイヤ内の参照フレームで動き補償された映像を前記復元された残差映像に付加することにより最終に復元された残差映像を出力する動き補償部と、を有することを特徴とする復号化装置。前記動き補償部は、各画質階層復号化過程で復元された残差映像をすべて合わせた映像に同一のエンハンスメントレイヤ内の参照フレームで動き補償された映像を付加することにより最終に復元された残差映像を出力する、ことを特徴とする請求項14に記載の復号化装置。前記フレームバッファは、前記参照フレームで動き補償された映像を最下位画質階層復号化部で復元された残差映像に付加することにより得られた映像を格納する第1のフレームバッファと、前記最終に復元された残差映像を格納する第2のフレームバッファと、を有することを特徴とする請求項14又は15に記載の復号化装置。前記フレームバッファは、最下位画質階層復号化部で復元された残差映像を格納する第1のフレームバッファと、前記参照フレームで動き補償された映像を最上位画質階層復号化部で復元された残差映像に付加することにより得られた映像を前記最終に復元された残差映像として格納する第2のフレームバッファと、を有することを特徴とする請求項14又は15に記載の復号化装置。前記動き補償部は、前記第1及び第2のフレームバッファのうちの少なくとも1つに格納された映像に対して動き補償を実行し、次のフレームの残差映像の復元のために前記動き補償された映像を使用する、ことを特徴とする請求項16又は17に記載の復号化装置。残差符号化部であって、1番目の画質階層符号化部及び最後の画質階層符号化部を含む複数の連続した画質階層符号化部と、動き補償された映像を出力する選択的動き補償部とを含み、前記1番目の画質階層符号化部は、残差映像と前記動き補償された映像との間の差に基づいて1番目の残差差分映像を生成し、前記1番目の残差差分映像は、前記選択的動き補償部及び前記複数の連続した画質階層符号化部のそれぞれに対する次の画質階層符号化部に出力され、前記複数の連続した画質階層符号化部のそれぞれに対する次の画質階層符号化部は、前記残差映像と直前に位置した画質階層符号化部から出力された映像との間の差に基づいてそれぞれ残差差分映像を生成し、前記各残差差分映像は、前記選択的動き補償部及び前記複数の連続した画質階層符号化部のそれぞれに対する次の画質階層符号化部に出力され、前記最後の画質階層符号化部は、残差映像と直前に位置した画質階層符号化部から出力された各残差差分映像との間の差に基づいて最後の残差差分映像を生成し、前記最後の残差差分映像は、前記選択的動き補償部に出力される、ことを特徴とする残差符号化部。前記1番目の残差差分映像及び前記最後の残差差分映像だけを格納するフレームバッファをさらに有する、ことを特徴とする請求項19に記載の残差符号化部。前記複数の連続した画質階層符号化部のそれぞれに対応する残差差分映像を格納するフレームバッファをさらに有する、ことを特徴とする請求項19又は20に記載の残差符号化部。本発明の目的は、少なくとも上述した問題点及び/又は課題に取り組み、少なくとも以下の便宜を提供することにある。すなわち、本発明の目的は、階層的映像処理技術において映像の符号化の間に、特に、残差符号化の間に複雑度を減少させ、画質を改善させる方法及び装置を提供することにある。本発明の他の目的は、階層的映像処理技術において映像の復号化の間に、特に、残差復号化の間に複雑度を減少させ、画質を改善させる方法及び装置を提供することにある。上記のような目的を達成するために、本発明の実施形態の一態様によれば、1つの映像が基底レイヤbasementlayer及び少なくとも1つのエンハンスメントレイヤenhancementlayerを含み、上記エンハンスメントレイヤの映像が1つ以上の画質階層に区分される階層構造に基づいた映像処理で映像データの残差映像を符号化する方法を提供する。上記方法は、上記残差映像を同一のエンハンスメントレイヤ内の参照フレームで動き補償された映像と結合し、上記結合された映像を上記画質階層別に符号化することにより画質階層別ビットストリームを生成するステップと、上記結合された映像を上記画質階層別に符号化する過程で生成された残差差分映像をそれぞれフレームバッファに格納するステップと、上記フレームバッファに格納された映像の動き補償を選択的に実行することにより動き補償された映像を出力するステップと、上記画質階層別ビットストリームを多重化することにより1つのエンハンスメントレイヤビットストリームを出力するステップとを有することを特徴とする。本発明の実施形態の他の態様によれば、1つの映像が基底レイヤ及び少なくとも1つのエンハンスメントレイヤを含み、上記エンハンスメントレイヤの映像が1つ以上の画質階層に区分される階層構造に基づいた映像処理で映像データの残差映像を符号化する装置を提供する。上記装置は、上記残差映像を同一のエンハンスメントレイヤ内の参照フレームで動き補償された映像と結合し、上記結合された映像を上記画質階層別に符号化することにより画質階層別ビットストリーム及び残差差分映像を生成する画質階層符号化部と、上記画質階層符号化部で生成された残差差分映像をそれぞれ格納するフレームバッファと、上記フレームバッファに格納された映像の動き補償を選択的に実行することにより動き補償された映像を出力する動き補償部と、上記画質階層別ビットストリームを多重化することにより1つのエンハンスメントレイヤビットストリームを出力する多重化部とを有することを特徴とする。本発明の実施形態のさらに他の態様によれば、1つの映像が基底レイヤ及び少なくとも1つのエンハンスメントレイヤを含み、上記エンハンスメントレイヤの映像が1つ以上の画質階層に区分される階層構造に基づいた映像処理で映像データの残差映像を復号化する方法を提供する。上記方法は、入力されるエンハンスメントレイヤビットストリームを上記画質階層の順序に対応する1つ以上のビットストリームに逆多重化するステップと、上記ビットストリームを画質階層別に復号化することにより残差映像を復元し、上記復元にされた残差映像をフレームバッファに格納するステップと、同一のエンハンスメントレイヤ内の参照フレームで動き補償された映像を上記復元された残差映像に付加することにより最終に復元された残差映像を出力するステップとを有することを特徴とする。本発明の実施形態のさらなる他の態様によれば、1つの映像が基底レイヤ及び少なくとも1つのエンハンスメントレイヤを含み、上記エンハンスメントレイヤの映像が1つ以上の画質階層に区分される階層構造に基づいた映像処理で映像データの残差映像を復号化する装置を提供する。上記装置は、入力されるエンハンスメントレイヤビットストリームを上記画質階層の順序に対応する1つ以上のビットストリームに逆多重化する逆多重化部と、上記ビットストリームを画質階層別に復号化することにより残差映像を復元する画質階層復号化部と、上記画質階層復号化部で復元された残差映像を格納するフレームバッファと、同一のエンハンスメントレイヤ内の参照フレームで動き補償された映像を上記復元された残差映像に付加することにより最終に復元された残差映像を出力する動き補償部とを有することを特徴とする。本発明の実施形態によれば、ドリフトは、原映像で発生するのではなく残差映像で発生するので、ドリフトによる画質劣化を減少させ、効率的且つスケーラブルな符号化が保証される。添付の図面を参照した下記の説明は、特許請求の範囲の記載及びこれと均等なものの範囲内で定められるような本発明の実施形態の包括的な理解を助けるために提供するものであり、この理解を助けるために様々な特定の詳細を含むが、唯一つの実施形態に過ぎない。従って、本発明の範囲及び趣旨を逸脱することなく、ここに説明する実施形態の様々な変更及び修正が可能であるということは、当該技術分野における通常の知識を有する者には明らかである。また、明瞭性と簡潔性の観点から、当業者に良く知られている機能や構成に関する具体的な説明は省略する。本発明は、階層的映像符号化/復号化過程においてエンハンスメントレイヤビットストリーム/映像を構成する複数の画質階層に対して残差符号化及び/又は復号化を実行する方法及び装置を提供する。まず、本発明で使用される用語を簡略に定義すると次のようである。画質改善:改善データrefinementdataを用いて再構成された残差サンプルの画質を改善するための過程を示す。画質階層qualitylayers:画質改善過程で使用される1つ以上の階層を示す。画質基底レイヤqualitybasementlayer:1つの映像内にある複数の画質階層のうちで再構成された映像のうちで最も低い画質映像を示す階層を示す。画質エンハンスメントレイヤqualityenhancementlayer:1つの映像内にある複数の画質階層のうちで再構成された映像のうちで高い画質映像を示す階層を示す。一般的な階層的映像符号化/復号化装置について説明する。図1は、階層的映像符号化部の構成を示す図である。図1を参照すると、映像符号化部は、基底レイヤと1つ以上のエンハンスメントレイヤとを含む階層構造に従って動作し、符号化のための入力映像を受け入れ、基底レイヤビットストリーム及びエンハンスメントレイヤビットストリームを出力する。基底レイヤの映像及びエンハンスメントレイヤの映像は、相互に異なる解像度、映像サイズ、及び/又は視点を有する映像であることができる。図1の実施形態において、入力映像及びエンハンスメントレイヤで処理される映像は、大きいサイズ又は1つの視点の映像である高解像度映像であることを仮定する。また、基底レイヤで処理される映像は、小さいサイズ又は他の視点の映像である低解像度映像であることを仮定する。フォーマットダウンコンバータformatdownconverter101は、入力映像を基底レイヤの映像フォーマットと同一のフォーマットを有する映像にダウンコンバートする。例えば、フォーマットダウンコンバータ101は、入力映像のサイズ又はフレーム率又は立体映像の視点の観点でダウンコンバージョンを実行する。基底レイヤ符号化部103は、入力された基底レイヤ映像、例えば、VC1,H264,MPEG4Part2Visual,MPEG2Part2Video,AVS,及びJPEG2000のような既存の映像コーデックのうちで任意の映像コーデックを既存の符号化方式に従って符号化することにより生成された基底レイヤビットストリームを出力する。基底レイヤ映像を符号化する過程において、基底レイヤ符号化部103は、再構成された基底レイヤ映像をフォーマットアップコンバータ105に出力する。フォーマットアップコンバータformatupconverter105は、例えば、入力映像のサイズ又はフレーム率又は視点の観点でアップコンバージョンを実行するように構成され、フォーマットダウンコンバータ101の過程の逆である過程を実行するものと見なされることができる。フォーマットアップコンバータ105は、再構成された基底レイヤ映像をエンハンスメントレイヤ映像のフォーマットと同一のフォーマットを有する映像にアップコンバートする。フォーマットダウンコンバータ101に入力される入力映像は、減算器107にも入力される。減算器107は、入力映像からフォーマットアップコンバータ105により出力されたアップコンバートされた映像を減算した残差データを得ることによりフォーマットアップコンバータ105により出力する。残差マッピング/スケーリング部109は、残差データを残差映像に変換する。残差映像は、残差符号化部111に入力され、残差符号化部111は、入力された残差映像の残差符号化を実行することによりエンハンスメントレイヤビットストリームを出力する。1つのエンハンスメントレイヤ内で徐々に画質を改善することができるように残差映像を符号化する方法について説明する。残差符号化部111は、画質階層符号化部図示せず及び動き補償部図示せずを含む。画質階層符号化部は、複数の画質階層で残差映像を符号化するようにそれぞれの画質階層に対して符号化を実行する。図2は、階層的映像復号化部の構成を示す図である。図2を参照すると、映像復号化部は、基底レイヤ及び1つ以上のエンハンスメントレイヤを含む階層構造に従って動作し、図1における映像符号化部によりそれぞれ符号化された基底レイヤビットストリーム及びエンハンスメントレイヤビットストリームを復号化することにより再構成された基底レイヤ映像及び再構成されたエンハンスメントレイヤ映像を出力する。基底レイヤの映像及びエンハンスメントレイヤの映像は、相互に異なる解像度、映像サイズ及び/又は視点を有する映像であることができる。図2の実施形態において、入力映像及びエンハンスメントレイヤで処理される映像は、大きいサイズ又は1つの視点を示す高解像度映像であり、基底レイヤで処理される映像は、小さいサイズ又は他の視点を示す低解像度映像であることを仮定する。基底レイヤ復号化部201は、入力された基底レイヤビットストリームを図1の基底レイヤ符号化部101で使用された任意の映像コーデックに対応する復号化方式に従って復号化して再構成された基底レイヤ映像を出力する。また、基底レイヤ復号化部201により再構成された基底レイヤ映像は、フォーマットアップコンバータ203にも出力される。フォーマットアップコンバータ203は、再構成された基底レイヤの映像をエンハンスメントレイヤの映像フォーマットと同一のフォーマットを有する映像にアップコンバートする。残差復号化部205は、エンハンスメントレイヤビットストリームの入力を受けて残差映像を出力する。このような残差映像は、入力されたエンハンスメントレイヤビットストリームの残差復号化を実行することにより生成され、その次に、残差映像は、残差マッピング/スケーリング部207により残差データに変換される。残差データは、加算器209によりフォーマットアップコンバートされた映像に付加され、その結果、再構成されたエンハンスメントレイヤ映像を生成する。残差復号化部205は、画質階層復号化部図示せず及び動き補償部を含む。画質階層復号化部は、複数の画質階層で残差映像を再構成するようにそれぞれの画質階層に対して復号化を実行する。図3は、本発明の実施形態による残差符号化部の構成を示す図である。図3における残差符号化部が3つの画質階層を有する場合を例を挙げて図示したが、本発明はこれに限定されない。図3を参照すると、残差符号化部は、画質階層の個数に対応する3つの画質階層符号化部301、303、及び305と選択的動き補償部307とを含む。残差符号化部に入力された残差映像は、第1の画質階層符号化部301により第1のビットストリーム及び第1の残差差分映像に符号化される。第2の画質階層符号化部303は、残差映像と第1の残差差分映像との差に対応する映像を第2のビットストリーム及び第2の残差差分映像に符号化する。第3の画質階層符号化部305は、残差映像と第2の残差差分映像との差に対応する映像を第3のビットストリーム及び第3の残差差分映像に符号化する。第1乃至第3の残差差分映像は、選択的動き補償部307に入力される。選択的動き補償部307は、動きベクトルに基づく動き補償を実行し、この動き補償が実行された映像を出力する。残差映像と動き補償された映像との差に対応する映像が第1の画質階層符号化部301にさらに入力される。第1乃至第3のビットストリームは、多重化器図示せずにより1つのビットストリームすなわち、エンハンスメントレイヤビットストリームに統合されたすなわち多重化された後に転送チャネルを介して復号化部に送信される。図4は、本発明の実施形態による画質階層符号化部の構成を示す図である。図4を参照すると、画質階層符号化部は、変換符号化部401、量子化部403、可変長符号化部405、逆量子化部407、及び逆変換符号化部409を含む。変換符号化部401は、画質階層符号化部から受信された差分映像をN×Nブロック単位で変換符号化を実行することにより変換係数を求める。量子化部403は、N×Nブロックの変換係数の量子化を実行し、可変長符号化部405は、量子化されたレベル値からビットストリームを生成する。量子化部403により量子化されたレベル値は、逆量子化部407を通して変換係数値を復元する。逆変換符号化部409は、復元された変換係数値を逆変換して映像を復元することにより再構成された差分映像を出力する。残差映像の漸進的な画質改善を達成するために、図3での画質階層符号化部により再構成された残差差分映像は、第1の差分映像から第3の差分映像に行くほど残差映像の画質が改善する特徴を有する。図4の画質階層符号化部は、量子化部403の量子化パラメータを調節することによりこのような漸進的な画質改善を達成することができる。例えば、第1の画質階層乃至第3の画質階層の順に量子化部403の量子化パラメータを漸進的に減少させることにより順次に画質が改善した差分映像を復元することができる。図5は、本発明の実施形態による選択的動き補償部の構成を示す図である。図5では選択的動き補償部が3つの画質階層を有する場合を例を挙げて図示したが、本発明はこれに限定されない。図5を参照すると、選択的動き補償部は、画質階層の個数に対応する3つのフレームバッファ501、503、及び505と動き補償部507とを含む。各画質階層符号化部で復元された各残差差分映像は、動き補償部507から出力された動き補償された映像に付加されることによりそれぞれのフレームバッファ501、503、及び505に格納される。各フレームバッファに格納された復元された残差映像は、符号化部の制御の下に選択的に動き補償部507に入力され、動き補償のために使用される。この時に、符号化部では、どのフレームバッファを使用して動き補償を実行したかを示す情報をヘッダーに送信することにより復号化部が同一の動作を続いて実行することができるようにする。図6は、本発明の他の実施形態による残差符号化部の構成を示す図である。図6での残差符号化部が3つの画質階層を有するが、本発明はこれに限定されない。図6を参照すると、それぞれの画質階層に対する画質階層符号化部601、603、及び605の構成は図3及び図4に示した構成と同一であり、1番目の画質階層に対する第1の画質階層符号化部601及び最後の画質階層に対する第3の画質階層符号化部603から出力された残差差分映像だけが第1のフレームバッファ607及び第3のフレームバッファ609にそれぞれ格納され、動き補償部611の動き補償のためにすべて使用されるという点が異なる。複数の画質階層を有する残差符号化部において、フレームバッファは常に最下位画質階層及び最上位画質階層の再構成された差分映像のみに対して提供される。すなわち、図6において、2つ又はそれ以上の画質階層を有する残差符号化部は、画質階層の個数に関係なく常に2つのフレームバッファを有する。図7は、本発明の実施形態による階層的映像復号化部での残差復号化部の構成を示す図である。図7の残差復号化部が3つの画質階層を有するが、本発明はこれに限定されない。図7を参照すると、残差復号化部に入力されるエンハンスメントレイヤビットストリームである第1乃至第3のビットストリームは、それぞれの画質階層に対する第1乃至第3の画質階層復号化部710、720、及び730に入力される。第1乃至第3の画質階層復号化部710、720、及び730は、可変長復号化部711、721、及び731と、逆量子化部713、723、及び733と、逆変換符号化部715、725、及び735とを含む。第1のビットストリームは、第1の可変長復号化部711で可変長復号化を用いて量子化されたレベル値に変換され、第1の逆量子化部713で逆量子化動作を用いてN×Nブロックの変換係数に変換される。この変換係数は、第1の逆変換符号化部715においてN×Nブロック単位で逆変換符号化された後に、動き補償部740から動き補償された映像に付加される。この結果は、第1のフレームバッファ750に格納される。第2のビットストリームは、第2の可変長復号化部721で可変長復号化を用いて量子化されたレベル値に変換され、第2の逆量子化部723で逆量子化動作を用いてN×Nブロックの変換係数に変換される。この変換係数は、第2の逆変換符号化部725においてN×Nブロック単位で逆変換符号化された後に、第1の画質階層復号化部710で復元された映像と動き補償部740から動き補償された映像との和に付加される。この結果は、第3の画質階層復号化部730に伝達される。第3のビットストリームは、第3の可変長復号化部731で可変長復号化を用いて量子化されたレベル値に変換され、第3の逆量子化部733で逆量子化動作を用いてN×Nブロックの変換係数に変換される。この変換係数は、第3の逆変換符号化部735においてN×Nブロック単位で逆変換符号化された後に、第1の画質階層復号化部710及び第2の画質階層復号化部720で復元された映像と動き補償部740から動き補償された映像との和に付加される。その結果は、第3のフレームバッファ760に格納される。また、第3のフレームバッファ760に格納された映像は、残差復号化部で最終に復元された残差映像として出力される。第1のフレームバッファ750及び第3のフレームバッファ760に格納された映像は、動き補償部740の動き補償のために使用される。図8は、本発明の他の実施形態による階層的映像復号化部の残差復号化部の構成を示す図である。図8の残差復号化部が3つの画質階層を有するが、本発明はこれに限定されない。図8を参照すると、第1の画質階層復号化部810、第2の画質階層復号化部820、及び第3の画質階層復号化部830の構成及び動作は図7のそれと実質的に同一であり、第1の画質階層復号化部810、第2の画質階層復号化部820、及び第3の画質階層復号化部830の出力段の動作だけ異なる。すなわち、第1の画質階層復号化部810での第1の逆変換符号化部815から出力された映像はそのまま第1のフレームバッファ850に格納され、第2の画質階層復号化部820での第2の逆変換符号化部825から出力された映像は、第1の逆変換符号化部815から出力された映像に付加され、第3の画質階層復号化部830に伝達される。第3の画質階層復号化部830での第3の逆変換符号化部835から出力された映像は、第2の画質階層復号化部820から出力された映像と動き補償部840から動き補償された映像との和に付加され、その結果は、第3のフレームバッファ860に格納される。第3のフレームバッファ860に格納された映像は、残差復号化部で最終に復元された残差映像として出力される。すなわち、本発明におけるように、階層的映像復号化部で映像間の画質改善が適用される場合に、第1の画質階層である画質基底レイヤでは、逆変換符号化されたブロックに動き補償されたブロックを付加することにより残差ブロックが復元され、復元された残差サンプルが画質基底レイヤの映像を構成する。また、画質基底レイヤに接続された画質エンハンスメントレイヤ例えば、図7及び図8での第2及び第3の画質階層の逆変換ブロックは、画質基底レイヤの逆変換ブロックの画質を改善するために使用される。最終的に画質が改善した逆変換ブロックは、動き補償部で動き補償された映像に付加される。画質改善過程の後に、復元された残差サンプルにより画質エンハンスメントレイヤ映像が復元される。図9は、本発明の実施形態による残差符号化過程を示すフローチャートである。図9を参照すると、ステップ901において、残差映像が残差符号化部に入力される場合に、ステップ903において、同一のエンハンスメントレイヤ内の参照フレームで動き補償された映像に付加された後に画質階層符号化部に入力される。ステップ905において、各画質階層符号化部で画質階層別にビットストリームを生成し、残差映像を復元しフレームバッファに格納される。上位画質階層符号化部で復元された残差映像は、その次の下位画質階層符号化部でビットストリームを生成するために使用される。また、フレームバッファは、すべての画質階層に対して存在してもよく、又は最上位画質階層及び最下位画質階層だけに対して存在してもよい。ステップ907において、フレームバッファに格納された映像に対する動き補償を行った後に、次のフレームのビットストリームの生成のために使用する。本実施形態に従って、すべてのフレームバッファに格納された映像のうちの1つの映像に対して選択的に動き補償が行われることもあり、あるいは、最上位画質階層及び最下位画質階層に対応するフレームバッファに格納された映像に対して動き補償が行われることもある。ステップ909において、各画質階層符号化部で生成されたビットストリームを1つのエンハンスメントレイヤビットストリームに多重化した後に復号化部に送信する。図10は、本発明の実施形態による残差復号化過程を示すフローチャートである。図10を参照すると、ステップ1001において、残差復号化部に入力されたエンハンスメントレイヤビットストリームは、画質階層の個数に従って複数のビットストリームに逆多重化される。ステップ1003において、逆多重化されたビットストリームを画質階層復号化部により画質階層別に復号化することにより画質階層別残差映像を復元する。ステップ1005において、復元された画質階層別残差映像は、次のフレームの残差映像の復元のためにそれぞれのフレームバッファに格納された後に動き補償が行われる。ステップ1007において、同一のエンハンスメントレイヤ内の参照フレームの動き補償された映像を画質階層別に復元された残差映像に付加することにより最終に復元された残差映像を出力する。このように復元された残差映像は、基底レイヤ映像と結合されることによりエンハンスメントレイヤ映像として再構成される。一方、本発明の実施形態に従って、画質階層別に復元された残差映像を結合することにより最終に復元された残差映像を作る場合に、最上位画質階層復号化過程で動き補償された映像を反映することもあり、又は最下位画質階層復号化過程で動き補償された映像を反映することもある。また、各画質階層復号化部において、復元された残差映像は、上位画質階層復号化部で残差映像を復元するために使用される。上述した説明からわかるように、本実施形態によれば、複数の残差映像に対して1回だけ動き補償を行うので、低い複雑度の残差符号化部/復号化部を保証することができる。以上、本発明を具体的な実施形態を参照して詳細に説明してきたが、本発明の範囲及び趣旨を逸脱することなく様々な変更が可能であるということは、当業者には明らかであり、本発明の範囲は、上述の実施形態に限定されるべきではなく、特許請求の範囲の記載及びこれと均等なものの範囲内で定められるべきである。"