(57)【要約】【課題】映像信号のエンコーディング方法を提供する。【解決手段】この方法は、映像信号をエンコーディングして第１のレイヤのビットストリームを生成するステップと、第１のレイヤに基づいて映像信号をエンコーディングして第２のレイヤのビットストリームを生成するステップと、を含む。第１のレイヤ内においてイメージ差分に対応するレジデュアルデータがアップサンプリングされて第２のレイヤのエンコーディングに用いられる場合、動き補償に基づいて予測される各ブロックに対してレジデュアルデータがアップサンプリングされる。【選択図】図１
2009502089.tif 000002
【特許請求の範囲】
【請求項１】
映像信号をエンコーディングする方法において、
前記映像信号をエンコーディングして第１のレイヤのビットストリームを生成するステップと、
前記第１のレイヤに基づいて前記映像信号をエンコーディングして第２のレイヤのビットストリームを生成するステップと、を有し、
前記第１のレイヤ内においてイメージ差分に対応するレジデュアルデータがアップサンプリングされて前記第２のレイヤのエンコーディングに用いられる場合、前記レジデュアルデータは、動き補償に応じて予測されたブロックに基づいてアップサンプリングされる、
ことを特徴とする方法。
【請求項２】
前記第１のレイヤと前記第２のレイヤとの解像度の比が２である場合、前記レジデュアルデータはバイリニア補間フィルタを用いてアップサンプリングされる、請求項１に記載の方法。
【請求項３】
前記第１のレイヤと前記第２のレイヤとの解像度の比が２ではない場合、前記レジデュアルデータは６タップ補間フィルタを用いてアップサンプリングされる、請求項１に記載の方法。
【請求項４】
映像信号をエンコーディングする方法において、
前記映像信号をエンコーディングして第１のレイヤのビットストリームを生成するステップと、
前記第１のレイヤに基づいて前記映像信号をエンコーディングして第２のレイヤのビットストリームを生成するステップと、を有し、
前記第１のレイヤがアップサンプリングされて前記第２のレイヤのエンコーディングに用いられる場合、輝度データと色差データにそれぞれ異なるアップサンプリング方法が適用される、
ことを特徴とする方法。
【請求項５】
前記輝度データは６タップ補間フィルタを用いてアップサンプリングされるのに対し、前記色差データはバイリニア補間フィルタを用いてアップサンプリングされる、請求項４に記載の方法。
【請求項６】
前記色差データのアップサンプリングには重み付け値が適用され、前記重み付け値は、前記第１のレイヤと前記第２のレイヤの色差データサンプル間の相対的な位置及び／または位相差に基づいて決められる、請求項５に記載の方法。
【請求項７】
前記第１のレイヤ内においてイメージ差分に対応するレジデュアルデータが前記第１のレイヤと前記第２のレイヤとの比率に対応する２倍にアップサンプリングされる場合、４個の特定の色差データサンプル間に挿入されるサンプルは同じ数式を用いて算出される、請求項４に記載の方法。
【請求項８】
前記挿入されるサンプルのそれぞれは、前記４個のサンプルのうち対角線方向に位置する２つの対応ピクセルの平均値として算出される、請求項７に記載の方法。
【請求項９】
前記第１のレイヤ内においてイメージ差分に対応するレジデュアルデータまたはデコーディングされたデータがアップサンプリングされて前記第２のレイヤのエンコーディングに用いられる、請求項４に記載の方法。
【請求項１０】
エンコーディングされた映像ビットストリームをデコーディングする方法において、
第１のレイヤのビットストリームをデコーディングするステップと、
前記第１のレイヤに基づいて第２のレイヤのビットストリームをデコーディングするステップと、を有し、
前記第１のレイヤ内においてイメージ差分に対応するレジデュアルデータがアップサンプリングされて前記第２のレイヤのデコーディングに用いられる場合、前記レジデュアルデータは動き補償に応じて予測されるブロックに基づいてアップサンプリングされる、
ことを特徴とする方法。
【請求項１１】
前記第１のレイヤと前記第２のレイヤとの解像度の比が２である場合、前記レジデュアルデータはバイリニア補間フィルタを用いてアップサンプリングされる、請求項１０に記載の方法。
【請求項１２】
前記第１のレイヤと前記第２のレイヤとの解像度の比が２ではない場合、前記レジデュアルデータは６タップ補間フィルタを用いてアップサンプリングされる、請求項１０に記載の方法。
【請求項１３】
エンコーディングされた映像ビットストリームをデコーディングする方法において、
第１のレイヤのビットストリームをデコーディングするステップと、
前記第１のレイヤに基づいて第２のレイヤのビットストリームをデコーディングするステップと、を有し、
前記第１のレイヤがアップサンプリングされて前記第２のレイヤのデコーディングに用いられる場合、輝度データと色差データにそれぞれ異なるアップサンプリング方法が適用される、
ことを特徴とする方法。
【請求項１４】
前記輝度データは６タップ補間フィルタを用いてアップサンプリングされるのに対し、前記色差データはバイリニア補間フィルタを用いてアップサンプリングされる、請求項１３に記載の方法。
【請求項１５】
前記色差データのアップサンプリングには重み付け値が適用され、前記重み付け値は、前記第１のレイヤと前記第２のレイヤの色差データサンプル間の相対的な位置及び／または位相差に基づいて決められる、請求項１４に記載の方法。
【請求項１６】
前記第１のレイヤ内においてイメージ差分に対応するレジデュアルデータが前記第１のレイヤと前記第２のレイヤとの解像度の比に対応する２倍にアップサンプリングされる場合、４個の特定の色差データサンプル間に挿入されるサンプルは同じ数式を用いて算出される、請求項１３に記載の方法。
【請求項１７】
前記挿入されるサンプルのそれぞれは、前記４個のサンプルのうち対角線方向に位置する２つの対応ピクセルの平均値として算出される、請求項１６に記載の方法。
【請求項１８】
前記第１のレイヤ内においてイメージ差分に対応するレジデュアルデータまたはデコーディングされたデータがアップサンプリングされて前記第２のレイヤのエンコーディングに用いられる、請求項１３に記載の方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像信号のエンコーディング及びデコーディング方法に関する。
【背景技術】
【０００２】
スケーラブル映像コーデック（ＳＶＣ；Scalable Video Codec）方式は、映像を最高の画質でエンコーディングし、前記エンコーディングにより生成されたピクチャーシーケンスのうち一部（全体のピクチャーシーケンスのうちから間歇的に選ばれるフレームのシーケンス）だけをデコーディングして用いてもイメージをある程度の画質の映像表現を可能にする映像信号エンコーディング方式である。
【０００３】
かようなスケーラブル方式を用いてエンコーディングされたピクチャーシーケンスは、例えば、そのうち一部のシーケンスだけが受信されて処理されるとしても、ある程度の画質で表現可能である。ビットレートが低い場合、画質が相当低下する。このような問題点を解消するために、低ビットレートのための別途の補助ピクチャーシーケンス、例えば、小画面及び／またはフレームレートの低いピクチャーシーケンスが提供可能である。
【０００４】
補助ピクチャーシーケンスはベースレイヤとし、主ピクチャーシーケンスはエンハンスドレイヤまたはエンハンスメントレイヤとする。ベースレイヤ及びそのエンハンスドレイヤは同じソース映像信号をエンコーディングして得られた結果である。これらの２枚のレイヤの信号には、レジデュアル情報（冗長）が存在する。このため、ベースレイヤが提供される場合、コーディング効率を高めるために、ベースレイヤの動き情報及び／またはイメージデータであるテクスチャー情報を用いてエンハンスドレイヤの映像信号を予測し、このような予測に基づいてエンコーディングを行うレイヤ間予測方法(interlayer prediction method)を用いることができる。
【０００５】
ベースレイヤのテクスチャー情報を用いる予測方法には、イントラベース予測モード(intra base prediction mode)とレジデュアル予測モード(residual prediction mode)がある。
【０００６】
イントラベース予測モード（以下、「イントラベースモード」と略す。）は、エンハンスドレイヤのマクロブロックに対応し（マクロブロックを含むフレームと同時間のベースレイヤのフレーム内に位置し、エンハンスドレイヤとベースレイヤの画面サイズの比率により拡大されるとき、マクロブロックをカバーする領域を有するブロックを意味する。）イントラモード(intra mode)にてエンコーディングされたベースレイヤのブロックを基にエンハンスドレイヤのマクロブロックを予測し、エンコーディングする方法である。この場合、ベースレイヤの対応ブロックはイメージデータを有するようにデコーディングされた後、アップサンプリングによりエンハンスドレイヤとベースレイヤの画面サイズの比率にて拡大されて用いられる。
【０００７】
レジデュアル予測モードは、イメージデータを有するエンコーディングされるベースレイヤの対応ブロックを用いるのではなく、イメージ差分値であるレジデュアルデータを有するようにエンコーディングされたベースレイヤの対応ブロックを用いる点を除いては、イントラベースモードに類似している。インターモードにてエンコーディングされてレジデュアルデータを有するベースレイヤの対応ブロックに基づいて、インターモードにてエンコーディングされてレジデュアルデータを有するエンハンスドレイヤのマクロブロックに関する予測データが生成される。このとき、レジデュアルデータを有するベースレイヤの対応ブロックは、イントラベースモードでのように、アップサンプリングにより拡大されて用いられる。
【０００８】
図１は、インターモードにてエンコーディングされてレジデュアルデータを有するエンハンスドレイヤの映像ブロックをベースレイヤのレジデュアルデータを用いてデコーディングする実施形態を示している。
【０００９】
エンハンスドレイヤのイメージブロックがレジデュアル予測モードにてエンコーディングされた旨を示すレジデュアル予測フラグが「１」に設定された場合、ベースレイヤの対応レジデュアルデータがエンハンスドレイヤのレジデュアルデータに加算される。
【００１０】
ベースレイヤとエンハンスドレイヤの空間解像度が互いに一致していない場合、先ず、ベースレイヤのレジデュアルデータがアップサンプリングされる。レジデュアルデータに対するアップサンプリング（以下、「レジデュアルアップサンプリング」と略す。）は、イメージデータへのデコーディング後にアップサンプリングが行われるイントラベースモードにおけるアップサンプリングとは異なり、以下の方式により行われる。
【００１１】
１．エンハンスドレイヤの解像度がベースレイヤの解像度の２倍である場合（ダイアディックの場合）、バイリニア補間方法が用いられる。
【００１２】
２．ダイアディックではない場合(non-dyadic case)、６タップ補間フィルタが用いられる。
【００１３】
３．同じ変換ブロック(transform block)内のピクセルだけを用いてアップサンプリングが行われる。変換ブロックの境界を越えるアップサンプリングフィルタリングは許容されない。
【００１４】
図２は、ダイアディックの場合における、４ｘ４レジデュアルブロックのアップサンプリングの一例を示している。レジデュアルアップサンプリングのために簡易なバイリニア補間が用いられるが、他の変換ブロック内のピクセルを用いることを避けるために、変換ブロックの境界にはバイリニア補間が適用されない。このため、図２に示すように、変換ブロックの境界に存在するピクセルのアップサンプリングのためには、当該ブロックのピクセルだけが用いられる。また、変換ブロックの境界にあるピクセルに対しては、境界に対するピクセルの相対的な位置に応じて異なる演算が行われる。
【００１５】
変換演算は、相異なるブロックサイズに対して行われうるため、変換ブロックの境界はベースレイヤの変換ブロックのサイズ（例えば、４ｘ４、８ｘ８、…など）を考慮して決定されなければならない。
【００１６】
アップサンプリングプロセスは、ベースレイヤとエンハンスドレイヤの解像度の比がダイアディックではない場合にも６タップ補間フィルタが用いられるという点を除いては、基本的に同様である。他の変換ブロック内のピクセルは、レジデュアルアップサンプリングに用いられない。
【００１７】
また、輝度成分の信号及び色差成分の信号に同じアップサンプリングが適用される。
【００１８】
図３は、イントラベースモードにてエンコーディングされたエンハンスドレイヤのイメージブロックをベースレイヤのデコーディングされたイメージデータを用いてデコーディングする実施形態を示している。
【００１９】
イントラベースモードにおけるアップサンプリングにおいては、変換ブロックの境界が考慮されず、輝度信号と色差信号の両方ともに６タップ補間フィルタが適用される。
【発明の開示】
【発明が解決しようとする課題】
【００２０】
このため、本発明は、従来の技術において発生する上述した問題点に着目してなされたものであり、その目的は、レイヤ間予測においてベースレイヤを簡単で且つ効率よくアップサンプリングする方法を提供するところにある。
【課題を解決するための手段】
【００２１】
上述した目的を達成するために、本発明は、映像信号をエンコーディングする方法において、前記映像信号をエンコーディングして第１のレイヤのビットストリームを生成するステップと、前記第１のレイヤに基づいて前記映像信号をエンコーディングして第２のレイヤのビットストリームを生成するステップと、を含み、前記第１のレイヤ内においてイメージ差分に対応するレジデュアルデータがアップサンプリングされて前記第２のレイヤのエンコーディングに用いられる場合、前記レジデュアルデータは、動き補償に応じて予測されるブロックに基づいてアップサンプリングされることを特徴とする。
【００２２】
また、本発明は、エンコーディングされた映像ビットストリームをデコーディングする方法を提供するが、この方法は、第１のレイヤのビットストリームをデコーディングするステップと、前記第１のレイヤに基づいて第２のレイヤのビットストリームをデコーディングするステップと、を含み、前記第１のレイヤ内のレジデュアルデータがアップサンプリングされて前記第２のレイヤのデコーディングのために用いられる場合、前記レジデュアルデータは動き補償に応じて予測されるブロックに基づいてアップサンプリングされることを特徴とする。
【００２３】
一実施形態において、前記第１のレイヤと前記第２のレイヤとの解像度の比が２である場合、前記レジデュアルデータはバイリニア補間フィルタを用いてアップサンプリングされる。これに対し、前記第１のレイヤと前記第２のレイヤとの解像度の比が２ではない場合、前記レジデュアルデータは６タップ補間フィルタを用いてアップサンプリングされる。
【００２４】
また、本発明は、映像信号をエンコーディングする方法を提供するが、この方法は、映像信号をエンコーディングして第１のレイヤのビットストリームを生成するステップと、前記第１のレイヤに基づいて映像信号をエンコーディングして第２のレイヤのビットストリームを生成するステップと、を含み、前記第１のレイヤがアップサンプリングされて前記第２のレイヤのエンコーディングのために用いられる場合、輝度データと色差データにそれぞれ異なるアップサンプリング方式が適用されることを特徴とする。
【００２５】
また、本発明は、エンコーディングされた映像ビットストリームをデコーディングする方法を提供するが、この方法は、第１のレイヤのビットストリームをデコーディングするステップと、前記第１のレイヤに基づいて第２のレイヤのビットストリームをデコーディングするステップと、を含み、前記第１のレイヤがアップサンプリングされて前記第２のレイヤのデコーディングのために用いられる場合、輝度データと色差データにそれぞれ異なるアップサンプリング方式が適用されることを特徴とする。
【００２６】
一実施形態において、前記輝度データは６タップ補間フィルタを用いてアップサンプリングされるのに対し、前記色差データはバイリニア補間フィルタを用いてアップサンプリングされる。この場合、色差データのアップサンプリングに重み付け値が適用されてもよく、この重み付け値は第１のレイヤと第２のレイヤの色差データサンプル間の相対的な位置及び／または位相差に基づいて決定されてもよい。
【００２７】
一実施形態において、イメージ差分に対応する第１のレイヤ内のレジデュアルデータが第１のレイヤと第２のレイヤの解像度の比に対応する２倍にアップサンプリングされる場合、４個の特定の色差データサンプル間に挿入されるサンプルは同じ数式を用いて算出される。この場合、挿入されるサンプルのそれぞれは前記４個のサンプルのうち対角線方向に位置する２つの対応ピクセルの平均値として算出されてもよい。
【発明を実施するための最良の形態】
【００２８】
以下、添付図面に基づき、本発明を詳述する。図中、同じ要素には同じ符号を付してある。
【００２９】
図４は、マクロブロック、変換ブロック及びパーティショニングの複数の例を示している。
【００３０】
マクロブロックは、一般に、１６ｘ１６ピクセルサイズである。ＤＣＴなどの変換は４ｘ４または８ｘ８ブロック単位にて行われるが、この中でコーディング効率の高いものが選ばれる。この場合、「パーティショニング」、「マクロブロックタイプ」または「モード」という用語は、レファレンスブロックを含むレファレンスフレーム（レファレンスインデックス）及び／またはレファレンスブロックに対する変位を示す動きベクトル（レファレンスインデックスと動きベクトルを動き情報と称する。）が互いに一致するサブブロックが併合される種々の形状、または、一部の動き情報が互いに一致するブロックが組み合わせられるマクロブロックのパーティショニングのうちいずれか一方を言う。
【００３１】
例えば、ＡＶＣ規格においては、モードやパーティショニング、レファレンスインデックス及び動きベクトルなどの動き情報が定義される最小単位が定められている。動きベクトルは、最小サイズが４ｘ４のサブブロックに基づいて定義され、レファレンスインデックスは最小サイズが８ｘ８であるサブマクロブロックに基づいて定義される。また、動きベクトルとレファレンスインデックスは最大サイズが１６ｘ１６のマクロブロックに基づいて定義可能である。動きベクトルが同じ４ｘ４サブブロックが互いに併合されるものである場合、４ｘ８、８ｘ４、８ｘ８、８ｘ１６、１６ｘ８または１６ｘ１６単位で動きベクトルが定義可能である。これと同様に、レファレンスインデックスが同じ８ｘ８サブマクロブロックが互いに併合されるものである場合、８ｘ１６、１６ｘ８または１６ｘ１６単位でレファレンスインデックスが定義可能である。
【００３２】
ＭＢ０において、変換ブロックのサイズは４ｘ４であり、パーティショニングは１つの８ｘ８ブロックと、１つの８ｘ８ブロックと、２つの８ｘ４ブロックと、２つの４ｘ８ブロックからなる。ＭＢ１において、変換ブロックのサイズは８ｘ８であり、パーティショニングは１６ｘ８モード、すなわち、２つの１６ｘ８ブロックよりなる。ＭＢ２において、変換ブロックのサイズは８ｘ８であり、パーティショニングは８ｘ１６モード、すなわち、２つの８ｘ１６ブロックよりなる。ＭＢ３において、変換ブロックのサイズは４ｘ４であり、パーティショニングは１６ｘ１６モード、すなわち、一つの１６ｘ１６ブロックからなる。
【００３３】
レジデュアルアップサンプリングにおいて、考慮対象となるブロックの境界に存在するピクセルとブロックの内部に存在するピクセルは、図２に示すように、異なる演算により新たなピクセルが生成される。
【００３４】
考慮対象となるブロックの境界に存在しないピクセルに対しては、バイリニア補間フィルタまたは６タップ補間フィルタが一括して用いられる。ブロックの境界に存在するピクセルに対しては、境界に対するピクセルの位置に応じて異なる演算が行われる。すなわち、別途の演算が行われるピクセルの数、換言すると、境界に存在するピクセルの数を減らし、一括して処理可能なピクセルの数を増やすならば、レジデュアルアップサンプリングが簡素化可能になる。
【００３５】
このため、本発明の第１の実施形態においては、レジデュアルアップサンプリングが行われる場合、変換ブロックの境界の代わりに動き補償予測パーティショニングのための境界だけが考慮される。
【００３６】
すなわち、変換ブロックの境界が動き補償予測パーティショニングのための境界ではない限り、アップサンプリングのためのフィルタリングは変換ブロックの境界を越えて適用される。この場合、変換ブロックの境界及び動き補償予測パーティショニングのための境界として、エンハンスドレイヤの境界ではなく、ベースレイヤの境界が用いられる。
【００３７】
ＭＢ０においては、４ｘ４変換ブロックの境界の代わりに、上２つの８ｘ８予測ブロックと、左下２つの８ｘ４予測ブロックと、右下２つの４ｘ８予測ブロックがブロックの境界として考慮され、この境界に存在するピクセルに対してはレジデュアルアップサンプリングのための異なる演算が行われる。
【００３８】
ＭＢ１においては、８ｘ８変換ブロックの境界の代わりに２つの１６ｘ８予測ブロックの境界がアップサンプリングフィルタを適用するかどうかを決定するブロックの境界である。同様に、ＭＢ２においては、８ｘ８変換ブロックの境界の代わりに２つの８ｘ１６予測ブロックの境界がブロックの境界として考慮される。また、ＭＢ３においては、４ｘ４変換ブロックの境界の代わりに１６ｘ１６マクロブロックの境界がブロックの境界として考慮される。
【００３９】
一般に、映像信号は色差情報Ｃｂ、Ｃｒと関連する成分と輝度情報Ｙと関連する成分が互いに別々に管理される。輝度信号対色差信号のサンプリング比率は、一般に、４：２：０である。色差信号のサンプルは輝度信号のサンプルの間に位置する。すなわち、映像信号に対して、色差信号のサンプルの数は輝度信号のサンプルの数よりも少ない。その理由は、人間の視神経が色差信号よりも輝度信号の方により敏感であるためである。
【００４０】
このため、本発明の第２の実施形態においては、輝度信号と色差信号に対して異なるアップサンプリングフィルタが適用される。輝度信号に対するサンプリングフィルタよりも簡単なサンプリングフィルタが色差信号に適用される。
【００４１】
図５は、本発明の第２の実施形態により、レジデュアルデータを有するベースレイヤの輝度信号と色差信号を異なる方法を用いてアップサンプリングし、インターモードにてエンコーディングされてレジデュアルデータを有するエンハンスドレイヤを前記アップサンプリング結果を用いてデコーディングするプロセスを示している。
【００４２】
図６は、本発明の第２の実施形態により、デコーディングされたイメージデータを有するベースレイヤの輝度信号と色差信号を異なる方法を用いてアップサンプリングし、イントラベースモードにてエンコーディングされていたエンハンスドレイヤを前記アップサンプリング結果を用いてデコーディングするプロセスを示している。
【００４３】
図５及び図６に示すように、輝度信号と色差信号には異なるフィルタリング方法が適用される。図５及び図６のアップサンプリング方法１(upsampling method 1)は、輝度信号をアップサンプリングするフィルタリング方法であり、図５及び図６のアップサンプリング方法２(upsampling method 2)は、色差信号をアップサンプリングするフィルタリング方法である。
【００４４】
本発明の第２の実施形態においては、輝度信号をアップサンプリングするためのフィルタとして、例えば、６タップ補間フィルタが用いられてもよく、色差信号をアップサンプリングするためのフィルタとして、例えば、バイリニア補間フィルタが用いられてもよい。
【００４５】
一方、レジデュアルデータは、エンコーディングしようとする映像ブロックと前記映像ブロックに類似するイメージデータを有するレファレンスブロック間差分値よりなり、データの絶対値は小さくて隣り合うピクセル間の値の変化が少ない。また、上述したように、色差信号は輝度信号に比べて人間の視神経をあまり刺激しない。
【００４６】
これは、レジデュアルデータを有する輝度信号のアップサンプリングに比べて、レジデュアルデータを有する色差信号のアップサンプリングにより簡単な方法が適用可能であることを意味する。また、デコーディングされたイメージデータを有する色差信号のアップサンプリング（イントラベースモード）に比べて、レジデュアルデータを有する色差信号のアップサンプリング（レジデュアル予測モード）により簡単な方法が適用可能であることを意味する。
【００４７】
このため、例えば、ベースレイヤとエンハンスドレイヤの解像度の比がダイアディックである場合、境界（変換ブロックの境界または動き補償予測パーティショニングの境界）内の色差信号のレジデュアルアップサンプリング（図５のレジデュアルアップサンプリング方法２）は、ｈ＝ｖ＝ｄ＝Ａ＋Ｄ＋１＞＞１またはｈ＝ｖ＝ｄ＝Ｂ＋Ｃ＋１＞＞１として定義され、アップサンプリングのための演算負荷が軽減可能である。
【００４８】
この場合、Ａ、Ｂ、Ｃ、Ｄ、ｈ、ｖ及びｄの相対的な位置は、図７に示してある。Ａ、Ｂ、Ｃ及びＤ色差信号のピクセル（サンプル）間に挿入されるピクセルは異なる数式を用いて計算されるのではなく、ピクセルのそれぞれは同じ数式を用いて対角線方向に位置する２つの対応ピクセルの平均値として簡単に算出される。
【００４９】
これに対し、ベースレイヤとエンハンスドレイヤの解像度の比がダイアディックではない場合には、変換ブロックの境界または動き補償予測パーティショニングの境界内の色差信号のレジデュアルアップサンプリングがバイリニア補間フィルタを用いて行われうるが、この場合には、ベースレイヤとエンハンスドレイヤの色差サンプル（ピクセル）間の相対的な位置及び／または位相差を考慮して重み付け値が決定される。
【００５０】
また、イントラベースモードの色差信号のアップサンプリングにおいては（図６のアップサンプリング方法２）、輝度信号に対して用いられる６タップ補間フィルタに比べて簡単なバイリニア補間フィルタを用いてベースレイヤの色差信号のピクセルがアップサンプリングされる。この場合、ベースレイヤとエンハンスドレイヤの色差サンプルとの間の相対的な位置及び／または位相差を考慮して重み付け値が決定される。
【００５１】
一方、エンハンスドレイヤをレジデュアル予測モードまたはイントラベースモードにてエンコーディングする場合、及びレジデュアル予測モードまたはイントラベースモードにてエンコーディングされたエンハンスドレイヤをデコーディングする場合、ベースレイヤのアップサンプリングが行われる。
【００５２】
このため、本発明によるアップサンプリング方法は、レイヤ間予測方法を用いて映像信号をエンコーディングし且つデコーディングするエンコーディング装置及びデコーディング装置にいずれも適用可能である。
【００５３】
また、本発明によるアップサンプリング方法が適用されるデコーディング装置は、携帯用の通信端末または記録媒体再生装置に搭載可能である。
【００５４】
このため、ベースレイヤがレイヤ間予測でアップサンプルされる場合、特に処理さるべきピクセルの数が減り、これにより、アップサンプリングの効率が向上し、より簡素化した演算の適用により演算負荷が軽減可能である。
【産業上の利用可能性】
【００５５】
本発明の好適な実施形態が例示的な目的にて開示されたが、当業者であれば、本発明の思想及び範囲を逸脱することなく、本発明に対する様々な改善、付加及び代替が行われうるという点を理解できるであろう。
【図面の簡単な説明】
【００５６】
本発明の上述した目的及びその他の目的と、特徴及びその他の利点などは、添付図面と一緒に以下の詳細な説明から明らかに理解できるであろう。
【００５７】
【図１】インターモードにてエンコーディングされてレジデュアルデータを有するエンハンスドレイヤが、ベースレイヤのレジデュアルデータを用いてデコーディングされる実施形態を示す図。
【図２】ダイアディックの場合における、４ｘ４レジデュアルブロックをアップサンプリングする実施形態を示す図。
【図３】イントラベースモードにてエンコーディングされたエンハンスドレイヤが、ベースレイヤのデコーディングされたイメージデータを用いてデコーディングされる実施形態を示す図。
【図４】マクロブロック、変換ブロック及びパーティショニングの複数の例を示す図。
【図５】本発明の第２の実施形態により、レジデュアルデータを有するベースレイヤの輝度信号と色差信号を異なる方式を用いてアップサンプリングし、インターモードにてエンコーディングされてレジデュアルデータを有するエンハンスドレイヤをこのようなアップサンプリングの結果を用いてデコーディングする過程を示す図。
【図６】本発明の第２の実施形態により、デコーディングされたイメージデータを有するベースレイヤの輝度信号と色差信号を異なる方式を用いてアップサンプリングし、アップサンプリングの結果を用いてイントラベースモードにてエンコーディングされたエンハンスドレイヤをデコーディングするプロセスを示す図。
【図７】レジデュアルデータを有する色差信号が２倍にアップサンプリングされる本発明の第２の実施形態における各ピクセルの相対的な位置を示す図。
【図１】
2009502089.tif 000003
【図２】
2009502089.tif 000004
【図３】
2009502089.tif 000005
【図４】
2009502089.tif 000006
【図５】
2009502089.tif 000007
【図６】
2009502089.tif 000008
【図７】
2009502089.tif 000009
【国際調査報告】
2009502089.tif 000010
2009502089.tif 000011
2009502089.tif 000012