(57)【要約】  ビデオ画像の階層符号化法  ピクチャ（Ｆ１）及び（Ｆ２）を符号化する方法であって、−ピクチャ（Ｆ２）を符号化して、符号化データフローのベースレイヤーのための符合化データを提供するステップと、−ピクチャ（Ｆ２）をズームして、共通ビデオ部分に関してピクチャ（Ｆ１）と同じサイズの低解像度のズームピクチャ（Ｆｚ）を得るステップと、−高解像度ピクチャ（Ｆ１）を符号化（５）し、以下のモードのうちの少なくとも１つを用いて、符号化データフローの上位レイヤーに符号化データを供給するステップを有する。ここで、上記モードとは、−予測ブロックとこのブロックを定める動きベクトルを先行する低解像度ズームピクチャにおいて求めるレイヤー間予測符号化、−予測ブロックとこのブロックを定める動きベクトルを現在の低解像度ズームピクチャにおいて求めるレイヤー間予測符号化である。
2008517543.tif 000002
【特許請求の範囲】
【請求項１】
符号化されたデータのフローを供給するために異なるノンプロポーショナルフォーマットのビデオ画像を階層的に符号化する方法であって、第１のピクチャ（Ｆ１）はフォーマットＦ１であり、第２のピクチャ（Ｆ２）は第１のフォーマットＦ１よりも解像度の低いフォーマットＦ２であり、画像（Ｆ１）及び（Ｆ２）のビデオ内容が少なくとも１つの共通部分を有している様式の方法において、該方法は、
−ピクチャ（Ｆ２）を符号化（２）して、符号化データフローのベースレイヤーのための符合化データを提供するステップと、
−ピクチャ（Ｆ２）をズーム（３）して、共通ビデオ部分に関してピクチャ（Ｆ１）と同じサイズの低解像度のズームピクチャ（Ｆｚ）を得るステップと、
−高解像度ピクチャ（Ｆ１）を符号化（５）し、以下のモードのうちの少なくとも１つを用いて、符号化データフローの上位レイヤーに符号化データを供給するステップを実行するものであり、上記のモードとは、
−予測ブロックとこのブロックを特定する動きベクトルを先行する低解像度ズームピクチャにおいて求めるレイヤー間予測符号化、
−予測ブロックとこのブロックを特定する動きベクトルを現在の低解像度ズームピクチャにおいて求めるレイヤー間予測符号化であることを特徴とする、異なるノンプロポーショナルフォーマットのビデオ画像を階層的に符号化する方法。
【請求項２】
−予測ピクチャ（Ｆｚ）に対する残差のピクチャを得るために、ビデオ内容の共通するピクチャゾーンを符号化するステップと、
−再構成された共通のゾーンを得るために上記ゾーンを復号化するステップと、
−少なくとも空間間符号化モードを使用して共通でない部分を符号化するステップとに従い、高解像度を実現する、ただし、上記空間間符号化モードとは、予測ブロックを求めるために、再構成された共通モードを予測ピクチャとして使用するものである、請求項１記載の方法。
【請求項３】
ズームに使用されるピクチャ（Ｆ２）は、符号化されたピクチャ（Ｆ２）の局所復号により得られた再構成ピクチャである、請求項１記載の方法。
【請求項４】
レイヤー間予測符号化はサブモードを含んでおり、該サブモードでは、予測マクロブロックは符号化すべきマクロブロックと同じ場所に位置しているマクロブロックである、請求項１記載の方法。
【請求項５】
ズームはピクチャのオーバーサンプリングとフィルタリングとから成る、請求項１記載の方法。
【請求項６】
前記ビデオ画像はウェーブレット方式の時間分解又はソースピクチャのサブバンド符号化によって得られるサブバンドピクチャである、請求項１記載の方法。
【請求項７】
低解像度ピクチャに関係するデータから成る少なくとも１つのベースレイヤーと高解像度ピクチャに関係するデータから成る上位レイヤーとに構造化されたデジタルデータのフローを復号化する方法であって、低解像度ピクチャが高解像度ピクチャの少なくとも１つのビデオ部分に対応している様式の方法において、該方法は、
−低解像度ピクチャに関係するベースレイヤーからデータを取り出し、低解像度ピクチャを復号化するステップと、
−ズーム（Ｆｚ）されたピクチャ（１３）を得るために、復号化されたピクチャ（１３）をズームするステップと、
−上位レイヤーからデータを取り出して復号化し、以下の復号化モードのうちの少なくとも１つを実行するステップを有しており、上記復号化モードとは、
−復号化とズーム（Ｆｚ）の為された先行する低解像度ズームピクチャの中の動きベクトルによって指示されるブロックを用いたレイヤー間予測モード、
−復号化とズームの為された現在の低解像度ピクチャの中の動きベクトルによって指示されるブロックを用いたレイヤー間予測モードであることを特徴とする、デジタルデータのフローを復号化する方法。
【請求項８】
前記上位レイヤーは、低解像度ピクチャと共通する部分の予測ピクチャ（Ｆｚ）に対する残差ピクチャに対応する符号化データと、共通でない部分に関係するエッジ画像に対応する符号化データとから構成されており、高解像度ピクチャを復号化する間、低解像度ピクチャの共通部分（２２）がまず残差ピクチャから復号化され、つぎに、動きベクトルによって決定される前記復号化された共通部分（２２）のブロックを用いた少なくとも１つの空間間モードを実行することにより、ズームピクチャとエッジ画像（２４，２５）が復号化される、請求項７記載の復号化方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は異なるノンプロポーショナルフォーマットのビデオ画像を階層的に符号化及び復号化する方法及び装置に関するものである。本発明は特に共通のビデオ部分を有するピクチャに関係している。例えば、本発明は、ディジタルテレビ信号をＳＤフォーマットとＨＤフォーマットに符号化することに関わる。ここで、ＳＤはＳｔａｎｄａｒｄ  Ｄｅｆｉｎｉｔｉｏｎの頭字語であり、ＨＤはＨｉｇｈ  Ｄｅｆｉｎｉｔｉｏｎの頭字語である。
【０００２】
空間スケーラビリティをもったビデオコーダは公知である。このビデオコーダにより生成されるデータフローはスケーラブルな階層を有しており、符号化されたデータは空間スケーラビリティにより階層的にフローに取り込まれる。これらのコーダに関係のあるビデオフォーマットは、高解像度のサイズが低解像度のサイズの２倍であるようなビデオフォーマットであり、二項分解を可能にする。したがって、高解像度ピクチャをサブサンプリングし、フィルタリングすることにより、サイズ１７６×１４４のＱＣＩＦフォーマットとサイズ３５２×２８８のＣＩＦフォーマットとに対して互換性のある符号化法、又はＣＩＦフォーマットとサイズ７０４×５７６の４ＣＩＦフォーマットとに対して互換性のある符号化法が得られる。なお、ここで、ＱＣＩＦはQuarter Common Intermediate Formatの頭字語である。
【０００３】
階層符号化によれば、低解像度フォーマットに関係するベースレイヤーと高解像度フォーマットに対応する上位レイヤーを得ることができる。上位レイヤーに関係する付加データは一般に以下の方法に従って計算される。
−低解像度ピクチャを符号化し、このピクチャを局所復号して再構成ピクチャを得る。
−再構成された低解像度ピクチャを例えば補間とフィルタリングとによってスケーリング又はズームして、高解像度フォーマットのピクチャを得る。
−ソースピクチャと再構成ピクチャもしくはこの再構成ピクチャに基づいた予測ピクチャとの輝度値のピクセルごとの差を求め、上位レイヤーのデータを構成する残差を得る。
【０００４】
このように、高解像度ピクチャの符号化はスケーリングされた低解像度ピクチャを予測ピクチャとして使用する。
【０００５】
この符号化はピクチャをオーバーレイすることができる場合にしか有効でない。ピクチャの解像度又はフォーマットがプロポーショナルでなければ、高解像度ピクチャの符号化コストは最適化されない。高解像度フォーマットの画像が二項変換によって低解像度フォーマットに関係づけられていなければ、高解像度フォーマットのピクチャの一部は、低解像度ピクチャによって符号化されたゾーンの外にあるビデオゾーンに対応し、したがってこのピクチャは予測ピクチャとして採用されない。したがって、高解像度ピクチャ全体の符号化は、特にこの高解像度ピクチャが低解像度ピクチャと共通していない大きなビデオゾーンを有している場合には、高コストになりかねない。さらに、使用される標準符号化モードは高解像度ピクチャの符号化コストを最適化することができない。
【０００６】
本発明の課題は上記の不利点を克服することである。本発明の目的の１つは、異なるノンプロポーショナルフォーマットのビデオ画像を階層的に符号化する方法により、符号化されたデータのフローを提供することであり、ここで、第１のピクチャ（Ｆ１）はフォーマットＦ１であり、第２のピクチャ（Ｆ２）は第１のフォーマットＦ１よりも解像度の低いフォーマットＦ２であり、画像（Ｆ１）及び（Ｆ２）のビデオ内容は少なくとも１つの共通部分を有している。本発明の方法は以下のステップを実行する：
−ピクチャ（Ｆ２）を符号化して、符号化データフローのベースレイヤーのための符合化データを提供する。
−ピクチャ（Ｆ２）をズームして、共通ビデオ部分に関してピクチャ（Ｆ１）と同じサイズの低解像度のズームピクチャ（Ｆｚ）を得る。
−高解像度ピクチャ（Ｆ１）を符号化し、以下のモードのうちの少なくとも１つを用いて、符号化データフローの上位レイヤーに符号化データを供給する。
−予測ブロックとこのブロックを特定する動きベクトルを先行する低解像度ズームピクチャにおいて求めるレイヤー間予測符号化。
−予測ブロックとこのブロックを特定する動きベクトルを現在の低解像度ズームピクチャにおいて求めるレイヤー間予測符号化。
【０００７】
１つの実施形態によれば、本方法は以下のステップによって高解像度が実現されることを特徴としている：
−予測ピクチャ（Ｆｚ）に対する残差ピクチャを得るために、ビデオ内容の共通するピクチャゾーンを符号化する。
−このゾーンを復号化して、再構成された共通のゾーンを提供する。
−少なくとも空間間符号化モードを使用して共通でない部分を符号化する。なお、空間間符号化モードは、再構成された共通モードを予測ピクチャとして使用して予測ブロックを求めるものである。
【０００８】
１つの実施形態によれば、ズームに使用されるピクチャ（Ｆ２）は、符号化されたピクチャ（Ｆ２）を局所復号することによって得られた再構成ピクチャである。
【０００９】
１つの実施形態によれば、レイヤー間予測符号化はサブモードを含んでおり、このサブモードでは、予測マクロブロックは符号化すべきマクロブロックと同じ場所に位置しているマクロブロックである。
【００１０】
１つの実施形態によれば、ズームはピクチャのオーバーサンプリングとフィルタリングとから成る。
【００１１】
１つの実施形態によれば、ビデオ画像はウェーブレット方式の時間分解又はソースピクチャのサブバンド符号化によって得られるサブバンドピクチャである。
【００１２】
本発明はまた、低解像度ピクチャに関係するデータから成る少なくとも１つのベースレイヤーと高解像度ピクチャに関係するデータから成る上位レイヤーとに構造化されたデジタルデータのフローを復号化する手続きにも関している。なお、ここで、低解像度ピクチャは高解像度ピクチャの少なくとも１つのビデオ部分に対応している。本発明による手続きは以下のステップを有している：
−低解像度ピクチャに関係するベースレイヤーからデータを取り出し、低解像度ピクチャを復号化する。
−ズームピクチャ（Ｆｚ）を得るために、復号化されたピクチャをズームする。
−上位レイヤーからデータを取り出して復号化し、以下の復号化モードのうちの少なくとも１つを実行する。
−復号化とズームの為された先行する低解像度ズームピクチャの中の動きベクトルによって指示されるブロックを用いたレイヤー間予測モード。
−復号化とズームの為された現在の低解像度ピクチャの中の動きベクトルによって指示されるブロックを用いたレイヤー間予測モード。
【００１３】
１つの実施形態によれば、上位レイヤーは、低解像度ピクチャと共通する部分の予測ピクチャ（Ｆｚ）に対する残差ピクチャに対応する符号化データと、共通でない部分に関係するエッジ画像に対応する符号化データとから構成されており、高解像度ピクチャを復号化する間、低解像度ピクチャの共通部分がまず残差ピクチャから復号化され、つぎに、動きベクトルによって決定される前記復号化された共通部分のブロックを用いた少なくとも１つの空間間モードを実行することにより、ズームピクチャとエッジ画像が復号化される。
【００１４】
高解像度ピクチャを符号化するこれらの新しいモードのおかげで、圧縮率が改善される。これらの高解像度ピクチャの符号化コストが同じでも、より高い画質が得られる。
【００１５】
他の特定の特徴及び利点は以下の説明から明らかになる。以下の説明は非限定的な例として提供されているものであり、添付図面を参照している。これら図面のうち、
−図１は符号化法のフローチャートを示しており、
−図２は符号化すべきフォーマットを示しており、
−図３はこれらの符号化モードを図解したものである。
【００１６】
データの符号化法は階層符号化法である、すなわち、符号化されたデータのフローが階層的に構造化され、低解像度フォーマットに関係するデータはベースレイヤー又は下位レイヤーに組み込まれ、高解像度ピクチャのフォーマットに関係する付加データは上位レイヤーに組み込まれる。要求される解像度に対応したレイヤーのみを選択することにより、データフローのレベルで、規格又はフォーマットに関するデータのみを容易に選択することができる。これには、解像度フォーマットに関する規格により要求されるいずれの時間スケーラビリティとも両立する空間スケーラビリティが関係している。
【００１７】
本発明は、共通のビデオ部分を有し、幅及び／又は高さの異なるノンプロポーショナルフォーマットのビデオ内容を符号化することに関するものである。一方のフォーマットは他方のフォーマットよりも解像度が低い。このフォーマットはライン当たりのピクセル数又は共通ビデオ部分を画定するライン数が少なくて低解像度であるか、解像度が同じであれば、サイズが小さいかである。
【００１８】
図１には、本発明による符号化法のフローチャートが示されている。
【００１９】
第１のステップ１は符号化すべき複数の異なるフォーマットを考慮する。コーダの出力側に得られる符号化されたデータのフローはこれらのフォーマットと互換性のあるデコーダに供給される。フォーマットの選択は、ディスプレイ装置、デコーダ、又はパラメータに依存する。ここで、このパラメータとは、例えば、デコーダの上流もしくはデコーダにおいてこの符号化データフローのデータをフィルタリングすることにより生じる伝送速度である。
【００２０】
上記の例では、第１の高解像度フォーマットＦ１と第２の低解像度フォーマットＦ２が使用される。これらのフォーマットの各々は、幅ＬF1，ＬF2、すなわちライン上のピクセル数と、高さＨF1，ＨF2、すなわちライン数とによって定められている。
【００２１】
コーダに供給されるソースビデオはＦ１フォーマットとＦ２フォーマットであると見なされる。これらのソースビデオは、一部についてのみであるが、同じビデオ内容に対応している。一部についてのみとは、これら２つのソースのビデオ内容が異なるものであると想定されているを意味する、すなわち、単なるスケーリングによっては一方のフォーマットを他方のフォーマットに移すことができない、言い換えれば、これらのフォーマットがプロポーショナルでないということを意味している。
【００２２】
２つのフォーマットに共通するビデオ部分を画定する幾何学的パラメータもコーダに送られる。
【００２３】
これらソースピクチャの生成と幾何学的パラメータの計算は次のようにして実行することができる：
選択されたフォーマットから、第１及び第２のビデオ窓のサイズが決定され、各フォーマットで符号化されるべきこのピクチャのビデオ内容を決めるために、これらのビデオ窓が元のピクチャの上で位置決めされる。仮定により、これら２つの窓は少なくとも部分的に重なり合う。これらのビデオ窓はフォーマットＦ１とフォーマットＦ２で符号化すべきビデオ内容を画定する。この第１及び第２の窓のサイズはそれぞれフォーマットＦ１及びＦ２に合わせて選択される。
【００２４】
コーダに送られる高解像度及び低解像度のソースピクチャは、サンプリングとフィルタリングの操作を受けているか否かに応じて、元のピクチャと同じ解像度を有していることもあれば、元のピクチャの解像度とは異なる解像度を有していることもあり、また、これらの中間であることもある。「解像度」という用語は、ここでは、所与のビデオ内容についてのライン当たりのピクセル数又はライン数を意味している。（Ｆ１）と呼ばれる高解像度ピクチャは幾何学的パラメータを決定する際の基準ピクチャとして選択される。幾何学的パラメータには、例えば、ピクチャ（Ｆ１）内におけるフォーマットＦ２のピクチャ（Ｆ２）の位置や、（Ｆ２）のビデオ内容を共通部分のビデオ内容（Ｆ１）とマッチさせるためにピクチャ（Ｆ２）に適用されるズームに対応する精細度関係が含まれる。
【００２５】
ステップ２はビデオピクチャをＦ２フォーマットに符号化する。
【００２６】
ステップ３はこの符号化されたピクチャを復号化し、局所復号されたピクチャ又は再構成ピクチャを提供する。単純化されたバージョンでは、局所復号ピクチャは符号化前の元のピクチャ、すなわち、ソースピクチャ（Ｆ２）から成っていてよい。このピクチャは次に解像度比に関係する幾何学的パラメータに対応する比によってスケーリング又はズームされ、（Ｆｚ）と呼ばれるズームされたピクチャ（Ｆ２）が得られる。
【００２７】
次のステップ４では、ビデオ内容にマッチするように、高解像度ピクチャ（Ｆ１）上でのピクチャ（Ｆ２）の位置がこの位置に関する幾何学的パラメータに従って決定される。
【００２８】
次のステップ５は高解像度ピクチャを符号化する。この符号化は本発明の課題である異なる符号化モードを考慮している。なお、これらの異なる符号化モードについては、後で説明する。
【００２９】
ステップ６は、ピクチャ（Ｆ２）に関係する符号化データをデータフローのベースレイヤーに挿入し、高解像度ピクチャ（Ｆ１）に固有の符号化データを上位レイヤーに挿入する。
【００３０】
図２では、参照番号１１で高解像度符号化フォーマットＦ１が、参照番号１２でサイズＬw、Ｈwの１つの窓が示されている。
この窓は幾何学的パラメータに基づいて画定され、高解像度ピクチャの中に位置決めされている。この窓のビデオ内容は、参照番号１３のサイズＬF2、ＨF2の低解像度符号化フォーマットＦ２でのビデオ内容から計算される。フォーマットＦ２のピクチャは符号化され、後に復号化されて、局所復号ピクチャが得られる。局所復号ピクチャはその後オーバーサンプリングされ、窓１２のサイズにスケーリング又はズームされたピクチャ（Ｆｚ）が得られる。
図３には、本発明に従って高解像度ピクチャ（Ｆ１）を符号化する異なるモードが示されている。オーバーサンプリングされたピクチャ（Ｆｚ）には参照番号２３が付されており、高解像度ピクチャ内に位置決めされた窓には参照番号２２が、ピクチャ（Ｆ１）には参照番号２１が付されている。
【００３１】
この例では、窓はピクチャ（Ｆ１）の中央に位置決めされており、それにより、ピクチャ（Ｆ１）のカバーされていない又は共通でないゾーンとして右ストリップ２４と左ストリップ２５とが生じている。
本発明は、高解像度ピクチャの符号化のために、すでに公知のモードに対して新しい符号化モードを付加する。
【００３２】
公知のモードのうち、イントラ予測符号化と呼ばれる第１の符号化モードは以前に符号化されたマクロブロックのうちの１つを使用する。高精細ピクチャの現在マクロブロックは現在マクロブロックの隣接マクロブロックのうちの１つ、すなわち、現在マクロブロックの左又は上にある現在ピクチャのマクロブロックを考慮して符号化される。この選択は符号化すべき現在マクロブロックとの相関度に従って行われる。
【００３３】
インター予測符号化と呼ばれる同じく公知の別の符号化は以前に符号化された高解像度ピクチャを使用する。高解像度ピクチャの現在マクロブロックは、先行する高解像度ピクチャの探索窓から選択されたピクチャブロックである予測マクロブロックから符号化される。この選択は符号化すべき現在マクロブロック、すなわち、動きベクトルによって定められる選択されたピクチャブロックとの相関度に従って行われる。
【００３４】
高解像度ピクチャ向けに提案される新しい符号化モードを以下に説明する：
レイヤー間予測符号化と呼ばれる符号化モードは、時間レベルで、符号化すべき高解像度ピクチャに相応してスケーリングされた低解像度ピクチャを使用する。この符号化モードは上位レイヤーに属する情報の符号化のためにベースレイヤーに属する情報の符号化を利用する。予測ブロックはピクチャ（Ｆｚ）内で、すなわち、スケーリング又はズームされたフォーマットＦ２の再構成ピクチャ内で探索される。ピクチャ（Ｆｚ）内のブロックの選択は現在マクロブロックとの相関度に依存している。選択されたピクチャブロックを特定するために位置情報が計算され、データフローの中で動きベクトルの形で伝送される。
【００３５】
レイヤー間予測符号化モードの１つの変種であるもう１つのモードはスケーリングされた先行する低解像度ピクチャを使用する。予測ブロックは先行ピクチャ（Ｆｚ）内で、すなわち、スケーリングされた先行する再構成ピクチャ（Ｆ２）内で探索される。ピクチャ（Ｆｚ）内のブロックの選択は現在マクロブロックとの相関度に依存している。ブロックは動きベクトルに基づいて特定される。
【００３６】
前記のモードの変種である「デフォルト」モードは、符号化すべき現在マクロブロックと同じ位置に見つかったピクチャ（Ｆｚ）のマクロブロックを使用する。低解像度ピクチャと共通する高解像度ピクチャのマクロブロックを符号化することにのみ関わるこのケースでは、動きベクトルは伝送されない。このモードはゼロ動きベクトルの符号化を避けるので、低い符号化コストがもたらされる。
空間間モードとして知られる符号化モードは、継起する２つのフェーズで行われる高解像度ピクチャの符号化の特定の構造化に対して適用される。高解像度ピクチャの符号化はテレビジョン方式の走査に従ってマクロブロックごとに逐次的に行われるのではなく、第１フェーズにおいて、Ｆｚと共通する高解像度ピクチャのゾーンの処理が行われ、第２フェーズにおいて、Ｆｚと共通していないビデオ部分の処理が行われる。幾何学的パラメータによって、ビデオ内容の点で低解像度ピクチャと共通する高解像度ピクチャ部分を指定してもよい。ピクチャのこの部分は、第１フェーズの間に、再構成ピクチャ（Ｆ２）又はズームされたソースピクチャ（Ｆ２）を予測ピクチャとして使用することにより符号化される。このようにして、残差ピクチャ又は高周波ピクチャが得られる。第２フェーズは共通でない部分又はエッジ画像を符号化する。本発明は、この符号化動作に関して、種々の符号化モードの中から、空間間モードと呼ばれる特定の符号化モードを提案する。この符号化モードは、ピクチャの共通ゾーンを予測ピクチャとして使用し、共通ゾーン内の予測ブロックの位置を動きベクトルを用いて特定することにより、低解像度ピクチャと共通していないゾーンのマクロブロックを符号化することから成っている。予測ピクチャはズームピクチャや残差ピクチャから再構成してもよいし、このピクチャと共通している部分のみを選択することにより高精細ソースピクチャから導出してもよい。
【００３７】
符号化法のステップ４では、ピクチャ（Ｆｚ）がピクチャＦ１上で位置決めされる。したがって、この方法は、例えば、予測ピクチャとしてピクチャ（Ｆｚ）を考慮して残差を計算することによりこの共通するピクチャ部分を符号化する。その後、残差ピクチャはズームされた再構成ピクチャ（Ｆ２）と結合され、高精細ピクチャと共通していない部分の符号化のための予測として使用できる再結合ピクチャが得られる。
【００３８】
図３を参照すると、空間間符号化モードは、エッジの符号化のための予測ピクチャとして、共通の中心ゾーン２２を利用する。なお、この共通の中心ゾーン２２は、ズームされた低解像度ピクチャ２３とこの共通ゾーンに対応する残差ピクチャとから再構成されたものである。相関計算により得られたこの中央ゾーン２２内のピクチャブロックは図３の動きベクトル２６によって特定されている。
【００３９】
レイヤー間符号化モードは予測ピクチャとしてズームピクチャ２３を使用する。相関計算により得られたズームピクチャ２３内のピクチャブロックは図３の動きベクトル２７によって特定されている。
【００４０】
本発明はまた上記の方法に従って符号化されたソースピクチャの復号化にも関している。
【００４１】
したがって、復号化は低解像度ピクチャに関係するベースレイヤーのデータを取り出し、この低解像度ピクチャを復号化し、復号化されたピクチャをズームしてズームピクチャ（Ｆｚ）を得、以下の復号化モードのうちの少なくとも１つを実施することにより上位レイヤーのデータを取り出して復号化することから成る。
【００４２】
上記復号化モードは、復号化とズームの為された先行する低解像度ピクチャ内のブロックと予測ブロックとを用いたレイヤー間予測モードと、予測ブロックとして復号化とズームの為された現在の低解像度ピクチャ内のブロックを使用するレイヤー間予測モードである。
【００４３】
上位レイヤーが、低解像度ピクチャと共通する部分に関する予測ピクチャ（Ｆｚ）に関係した残差ピクチャと、共通していない部分に関係したエッジ画像とによって構成されている場合、高解像度ピクチャの復号化は２つのフェーズで行われる。まず、ズームされた低解像度ピクチャを予測ピクチャとして使用することにより、高精細ピクチャの共通部分が残差ピクチャから計算される、これが第１フェーズである。次に、高精細ピクチャの共通部分と動きベクトルによって特定されたブロックとからピクチャブロックを復元し、復元したピクチャブロックを空間間モードで符号化されたエッジ画像のマクロブロックの復号化のための予測ブロックとして使用することから成る少なくとも１つの空間間復号化モードを実施することにより、共通していない部分又はエッジ画像が復号化される。
【００４４】
ベースレイヤーと上位レイヤーの符号化のために実施される符号化手続きは、離散コサイン変換又は空間ウェーブレット変換による空間相関とピクチャ間符号化による時間相関とを用いたハイブリッド方式であってもよいし、あるいは、サブバンド符号化又はウェーブレット符号化を用いたサブバンド方式であってもよい。
【００４５】
上では、ビデオソースピクチャに関して符号化法を説明してきた。しかし、本発明の範囲から逸脱することなく、事前処理されたソースピクチャ、例えば、サブバンドピクチャを符号化することもまた可能である。この方法は、空間フィルタリング又は時空間フィルタリングにより得られた低周波及び高周波のサブバンドピクチャのいずれに対して適用可能である。低解像度ピクチャと高解像度ピクチャとに対して同じサブバンド分解が適用されるため、低解像度及び高解像度の同等のサブバンドを本発明で説明した方法に従って符号化することができる。例えば、低解像度ピクチャと高解像度ピクチャの低周波サブバンドがこの方法で符号化できる。これは他のすべての空間的サブバンドについても成り立つ。
【図面の簡単な説明】
【００４６】
【図１】符号化法のフローチャートを示す。
【図２】符号化すべきフォーマットを示す。
【図３】符号化モードを示す。
【図１】
2008517543.tif 000003
【図２】
2008517543.tif 000004
【図３】
2008517543.tif 000005
【手続補正書】
【提出日】平成18年8月18日(2006.8.18)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
符号化されたデータのフローを供給するために異なるノンプロポーショナルフォーマットのビデオ画像を階層的に符号化する方法であって、第１のピクチャ（Ｆ１）はフォーマットＦ１であり、第２のピクチャ（Ｆ２）は第１のフォーマットＦ１よりも解像度の低いフォーマットＦ２であり、画像（Ｆ１）及び（Ｆ２）のビデオ内容が少なくとも１つの共通部分を有している様式の方法において、該方法は、
−ピクチャ（Ｆ２）を符号化（２）して、符号化データフローのベースレイヤーのための符合化データを提供するステップと、
−ピクチャ（Ｆ２）をズーム（３）して、共通ビデオ部分に関してピクチャ（Ｆ１）と同じサイズの低解像度のズームピクチャ（Ｆｚ）を得るステップと、
−共通していない部分のピクチャブロックに関して高解像度ピクチャ（Ｆ１）を符号化（５）し、以下のモードのうちの少なくとも１つを用いて、符号化データフローの上位レイヤーに符号化データを供給するステップを実行するものであり、上記のモードとは、
−予測ブロックとこのブロックを特定する動きベクトルを先行する低解像度ズームピクチャにおいて求めるレイヤー間予測符号化、
−予測ブロックとこのブロックを特定する動きベクトルを現在の低解像度ズームピクチャにおいて求めるレイヤー間予測符号化であることを特徴とする、異なるノンプロポーショナルフォーマットのビデオ画像を階層的に符号化する方法。
【請求項２】
−予測ピクチャ（Ｆｚ）に対する残差のピクチャを得るために、ビデオ内容の共通するピクチャゾーンを符号化するステップと、
−再構成された共通のゾーンを得るために上記ゾーンを復号化するステップと、
−少なくとも空間間符号化モードを使用して共通でない部分を符号化するステップとに従い、高解像度を実現する、ただし、上記空間間符号化モードとは、予測ブロックを求めるために、再構成された共通モードを予測ピクチャとして使用するものである、請求項１記載の方法。
【請求項３】
ズームに使用されるピクチャ（Ｆ２）は、符号化されたピクチャ（Ｆ２）の局所復号により得られた再構成ピクチャである、請求項１記載の方法。
【請求項４】
レイヤー間予測符号化はサブモードを含んでおり、該サブモードでは、予測マクロブロックは符号化すべきマクロブロックと同じ場所に位置しているマクロブロックである、請求項１記載の方法。
【請求項５】
ズームはピクチャのオーバーサンプリングとフィルタリングとから成る、請求項１記載の方法。
【請求項６】
前記ビデオ画像はウェーブレット方式の時間分解又はソースピクチャのサブバンド符号化によって得られるサブバンドピクチャである、請求項１記載の方法。
【請求項７】
低解像度ピクチャに関係するデータから成る少なくとも１つのベースレイヤーと高解像度ピクチャに関係するデータから成る上位レイヤーとに構造化されたデジタルデータのフローを復号化する方法であって、低解像度ピクチャが高解像度ピクチャの少なくとも１つのビデオ部分に対応している様式の方法において、該方法は、
−低解像度ピクチャに関係するベースレイヤーからデータを取り出し、低解像度ピクチャを復号化するステップと、
−ズーム（Ｆｚ）されたピクチャ（１３）を得るために、復号化されたピクチャ（１３）をズームするステップと、
−共通していない部分のピクチャブロックに関して上位レイヤーからデータを取り出して復号化し、以下の復号化モードのうちの少なくとも１つを実行するステップを有しており、上記復号化モードとは、
−復号化とズーム（Ｆｚ）の為された先行する低解像度ズームピクチャの中の動きベクトルによって指示されるブロックを用いたレイヤー間予測モード、
−復号化とズームの為された現在の低解像度ピクチャの中の動きベクトルによって指示されるブロックを用いたレイヤー間予測モードであることを特徴とする、デジタルデータのフローを復号化する方法。
【請求項８】
前記上位レイヤーは、低解像度ピクチャと共通する部分の予測ピクチャ（Ｆｚ）に対する残差ピクチャに対応する符号化データと、共通でない部分に関係するエッジ画像に対応する符号化データとから構成されており、高解像度ピクチャを復号化する間、低解像度ピクチャの共通部分（２２）がまず残差ピクチャから復号化され、つぎに、動きベクトルによって決定される前記復号化された共通部分（２２）のブロックを用いた少なくとも１つの空間間モードを実行することにより、ズームピクチャとエッジ画像（２４，２５）が復号化される、請求項７記載の復号化方法。
【国際調査報告】
2008517543.tif 000006
2008517543.tif 000007
2008517543.tif 000008
2008517543.tif 000009
2008517543.tif 000010
2008517543.tif 000011