"マルチ-レイヤ映像復号システムであって:第1レイヤ映像デコーダを含む第1レイヤと;前記第1レイヤと関連付けられ、第2レイヤ映像デコーダを含む第2レイヤと;前記第1レイヤ映像デコーダの出力を処理し、前記処理済みの出力を前記第2レイヤ映像デコーダに入力するかどうかを選択するための処理セレクタと;前記処理セレクタの後段に位置し、前記処理セレクタの指示に基づき、前記第1レイヤ映像デコーダの出力を処理し、前記処理済みの出力を前記第2レイヤ映像デコーダに入力するための処理モジュールとを含む、マルチ-レイヤ映像復号システム。前記第2レイヤ映像デコーダは、ディスパリティ補償モジュールを含み;前記ディスパリティ補償モジュールは、前記処理モジュールの一部である、請求項1記載のマルチ-レイヤ映像システム。前記処理モジュールは、処理フィルタ及び前記処理フィルタの後段に位置するディスパリティ補償フィルタを含む、請求項1記載のマルチ-レイヤ映像復号システム。前記処理モジュールは、第1ディスパリティ補償フィルタと結合された処理フィルタを含み、前記映像デコーダは、さらに第2ディスパリティ補償フィルタを含み、前記第1ディスパリティ補償フィルタは、前記第1レイヤ映像デコーダの前記出力が処理されるとき、ディルパリティ補償を実行し、前記第2ディスパリティ補償フィルタは、前記第1レイヤ映像デコーダの前記出力が処理されないとき、ディスパリティ補償を実行する、請求項1記載のマルチ-レイヤ映像復号システム。前記処理セレクタは、画像の領域を分析し、前記領域に実行される分析に従って分割処理を選択するための領域分析モジュールを含む、請求項1記載のマルチ-レイヤ映像復号システム。前記領域分析モジュールは、処理が必要な大多数の要素を有する領域、及び処理が必要でない大多数の要素を有する領域間で、前記画像を分割するために前記画像の領域を分析する、請求項5記載のマルチ-レイヤ映像復号システム。前記第2レイヤ映像デコーダは、ディスパリティ補償モジュールを含む、請求項6記載のマルチ-レイヤ映像復号システム。前記処理モジュールは、前記ディスパリティ補償モジュールとは別で、又は前記ディスパリティ補償モジュールと結合されて、前記画像の前記領域を処理することに適する、請求項7記載のマルチ-レイヤ映像復号システム。処理が必要な大多数の要素を有する前記画像の領域は、前記ディスパリティ補償モジュールとは別の前記処理モジュールにより処理され、処理が不要な大多数の要素を有する前記画像の領域は、前記ディスパリティ補償モジュールと結合された前記処理モジュールにより処理される、請求項8記載のマルチ-レイヤ映像復号システム。前記処理セレクタは、処理が必要な大多数の要素を有する前記画像の領域、及び処理が不要な大多数の要素を有する前記画像の領域を定義するための領域分析モジュールを含む、請求項1記載のマルチ-レイヤ映像復号システム。前記領域分析モジュールは、第2レイヤのビットストリーム入力を受信し、前記第2レイヤのビットストリーム入力内に与えられる参照ピクチャ情報に基づいて前記領域を定義する、請求項10記載のマルチ-レイヤ映像復号システム。前記領域分析モジュールは、参照ピクチャ情報及び動きベクトル及び/又はディスパリティベクトル情報に基づいて前記領域を定義する、請求項11記載のマルチ-レイヤ映像復号システム。前記領域分析モジュールは、前記画像、前記画像のスライス、前記画像のスライスの一部に対して、前記第2レイヤのビットストリーム入力に基づいて前記領域を定義する、請求項11記載のマルチ-レイヤ映像復号システム。前記処理セレクタは、画像内で、前記画像のどの領域を処理するか、又は処理しないかを選択する、請求項1記載のマルチ-レイヤ映像復号システム。前記第2レイヤ映像デコーダによる、処理を行わない領域の決定は、以前に復号されたピクチャ、スライス、又は第2レイヤのビットストリーム情報に基づく、請求項1記載のマルチ-レイヤ映像復号システム。前記第1レイヤは、ベースレイヤであり、前記第2レイヤは、エンハンスメントレイヤであり、前記マルチ-レイヤ映像復号システムは、ベースレイヤ及び1つ以上のエンハンスメントレイヤを含むシステムである、請求項1乃至15いずれか一項に記載のマルチ-レイヤ映像復号システム。前記第1レイヤは、第1エンハンスメントレイヤであり、前記第2レイヤは、第2エンハンスメントレイヤであり、前記マルチ-レイヤ映像復号システムは、ベースレイヤ及び複数のエンハンスメントレイヤを含むシステムである、請求項1乃至15いずれか一項に記載のマルチ-レイヤ映像復号システム。前記システムは、フレーム互換3次元3D映像システム、2次元2D互換3D映像システム、2Dスケーラブル映像システム、及び2D又は3Dマルチビューシステムから選択される、請求項1乃至17いずれか一項に記載のマルチ-レイヤ映像復号システム。映像デコーダであって:符号化済みの信号を受信し、復号済みの信号を出力するのに適する復号ループと;前記復号ループに接続され、復号済みの入力信号を受信し、処理された復号済みの入力信号を前記復号ループに送信するのに適する処理モジュールと;前記処理モジュールに接続され、前記復号済みの入力信号を受信し、前記復号済みの入力信号を、前記処理モジュールに送信するか否かを選択するのに適するセレクタと、を含む、映像デコーダ。前記映像デコーダは、ベースレイヤ及び1つ以上のエンハンスメントレイヤを含む復号システムのエンハンスメントレイヤの映像デコーダである、請求項19記載の映像デコーダ。復号された映像情報を選択的に処理するための方法であって:第1レイヤ映像デコーダ及び第2レイヤ映像デコーダを提供する段階と;下記のいずれかを選択する段階と;a前記第1レイヤ映像デコーダの出力を処理するb前記第1レイヤ映像デコーダの出力を処理しないaの場合、前記第1レイヤ映像デコーダの出力を処理し、処理済みの出力を前記第2レイヤ映像デコーダに入力する段階とを含む、方法。処理と共にディスパリティ補償を実行する段階をさらに含む、請求項21記載の方法。映像復号システムにおけるディスパリティ補償を選択的に実行するための方法であって:復号済みの映像信号を提供する段階と;前記復号済みの映像信号に関する情報をa用いるか、b用いないかを選択する段階と;aの場合、前記復号済みの映像信号を処理し、前記処理された復号済みの映像信号に基づいてディスパリティ補償を実行する段階と;bの場合、前記復号済みの映像信号のディスパリティ補償を独立して実行する段階とを含む、方法。前記映像復号システムは、第1レイヤデコーダ及び第2レイヤのデコーダを含み、前記復号済みの映像信号は、前記第1レイヤデコーダの出力であり;ディスパリティ補償は、前記第2レイヤのデコーダで実行される、請求項23記載の方法。映像復号システムにおけるディスパリティ補償を選択的に実行するための方法であって:復号済みの映像信号を提供する段階と;前記復号済みの映像信号に関する情報をa用いるか、b用いないかを選択する段階と;aの場合、第1ディスパリティ補償を実行し、前記第1ディスパリティ補償は、前記復号済みの映像信号の処理に基づき、該処理と同時に実行される、段階と;bの場合、前記第1ディスパリティ補償とは異なる第2ディスパリティ補償を実行する段階とを含む、方法。前記第1ディスパリティ補償で用いられる処理パラメータ及びディスパリティパラメータを提供する段階と;前記第2ディスパリティ補償で用いられるディスパリティパラメータを提供する段階とさらに含み;前記第1ディスパリティ補償で用いられる前記ディスパリティパラメータは、前記第2ディスパリティ補償で用いられる前記パラメータと同一である、請求項25記載の方法。前記第1レイヤは、ベースレイヤであり、前記第2レイヤは、エンハンスメントレイヤである、請求項21乃至26いずれか一項に記載の方法。前記第1レイヤは、第1エンハンスメントレイヤであり、前記第2レイヤは、第2エンハンスメントレイヤである、請求項21乃至26いずれか一項に記載の方法。マルチ-レイヤ符号化システムであって:第1レイヤ映像エンコーダを含む、第1レイヤと;前記第1レイヤと接続され、第2レイヤ映像エンコーダを含み、前記第2レイヤ映像エンコーダはディスパリティ推定モジュール及びディスパリティ補償モジュールを含む、第2レイヤと;前記第1レイヤ映像エンコーダの出力を処理し、前記処理済みの出力を前記ディスパリティ推定モジュール及び前記ディスパリティ補償モジュールに入力する処理モジュールとを含む、マルチ-レイヤ映像符号化システム。前記第1レイヤ映像エンコーダは、ピクチャ参照バッファを含み、前記処理モジュールにより処理された前記第1レイヤ映像エンコーダの前記出力は、前記ピクチャ参照バッファの出力である、請求項29記載のマルチ-レイヤ符号化システム。マルチ-レイヤ符号化システムであって;第1レイヤ映像エンコーダを含む、第1レイヤと;前記第1レイヤと関連付けられ、第2レイヤ映像エンコーダを含み、前記第2レイヤ映像エンコーダはディスパリティ推定モジュール、ディスパリティ補償モジュール及び処理モジュールを含む、第2レイヤとを含み、前記処理モジュールは、前記ディスパリティ補償モジュールと結合され、前記ディスパリティ推定モジュール及び前記ディスパリティ補償モジュールは前記第1レイヤ映像エンコーダの出力を受信する、マルチ-レイヤ符号化システム。前記第1レイヤ映像エンコーダは、ピクチャ参照バッファを含み、前記ディスパリティ推定モジュール及び前記ディスパリティ補償モジュールにより受信された前記第1レイヤ映像エンコーダの前記出力は、前記ピクチャ参照バッファの出力である、請求項31記載のマルチ-レイヤ符号化システム。前記ピクチャ参照バッファの前記出力は、前記ピクチャ参照バッファの処理済みの出力、又は前記ピクチャ参照バッファの未処理の出力から選択される、請求項32記載のマルチ-レイヤ符号化システム。前記ピクチャ参照バッファの前記出力は、前記ピクチャ参照バッファの未処理の出力であり、前記ディスパリティ推定モジュール及び前記ディスパリティ補償モジュールは、ディスパリティ推定及びディスパリティ補償それぞれの前に、前記ピクチャ参照バッファの前記出力の処理を実行する、請求項33記載のマルチ-レイヤ符号化システム。前記ピクチャ参照バッファの前記出力は、前記ピクチャ参照バッファの未処理の出力であり、前記ディスパリティ推定モジュール及び前記ディスパリティ補償モジュールは、ディスパリティ推定及びディスパリティ補償それぞれの前に、前記ピクチャバッファの前記出力の処理を実行しない、請求項33記載のマルチ-レイヤ符号化システム。マルチ-レイヤ符号化システムであって:第1レイヤ映像エンコーダを含む、第1レイヤと;前記第1レイヤと関連付けられ、第2レイヤ映像エンコーダを含む、第2レイヤと;前記第1レイヤ映像エンコーダの出力を処理するか否かを選択するための処理セレクタと;前記処理セレクタの指示に基づき、前記第1レイヤ映像エンコーダの前記出力を処理するための処理モジュールとを含み、前記第1レイヤ映像エンコーダの処理済の出力、及び前記第1レイヤ映像エンコーダの未処理の出力は前記第2レイヤ映像エンコーダに送信される、マルチ-レイヤ符号化システム。前記第2レイヤ映像エンコーダは、ディスパリティ推定モジュール及びディスパリティ補償モジュールを含み、前記第1レイヤ映像エンコーダの処理済みの出力及び前記第1レイヤ映像エンコーダの未処理の出力は、前記ディスパリティ推定モジュール及び前記ディスパリティ補償モジュールに送信される、請求項36記載のマルチ-レイヤ符号化システム。前記第1レイヤ映像エンコーダは、ピクチャ参照バッファを含み、前記第1レイヤ映像エンコーダの前記出力は、前記ピクチャ参照バッファの出力である、請求項36又は37記載のマルチ-レイヤ符号化システム。前記第1レイヤは、ベースレイヤであり、前記第2レイヤは、エンハンスメントレイヤであり、前記マルチ-レイヤ符号化システムは、ベースレイヤ及び1つ以上のエンハンスメントレイヤを含むシステムである、請求項29乃至38いずれか一項に記載のマルチ-レイヤ符号化システム。前記第1レイヤは、第1エンハンスメントレイヤであり、前記第2レイヤは、第2エンハンスメントレイヤであり、前記マルチ-レイヤシステムは、ベースレイヤ及び複数のエンハンスメントレイヤを含むシステムである、請求項29乃至38いずれか一項に記載のマルチ-レイヤ符号化システム。第1ブロック及び第2ブロックを含む画像フレーム、又はスライスを復号するための方法であって:マルチ-レイヤ復号システムの第1レイヤデコーダで前記画像フレーム又はスライスのサンプルを復号する段階と;前記復号済みサンプルを処理する段階と;前記復号済みサンプルを、前記マルチ-レイヤ復号システムの第2レイヤデコーダに送信する段階と;前記処理された復号済みサンプルから、ディスパリティ補償処理を介して、前記画像の第1ブロックを生成する段階と;前記処理された復号済みサンプルから、ディスパリティ補償処理を介して、前記画像の第2ブロックを生成する段階とを含み、前記第2ブロックを生成するのに適した、前記処理された復号済みサンプルの一部は、メモリから取得されるか、又は前記第1ブロックを生成するために既に用いられた事前分析処理された復号済みサンプルである、方法。前記処理された復号済みサンプルはマップ構成を介して記憶される、請求項41記載の方法。前記第1ブロック及び前記第2ブロックは、前記画像フレーム又はスライスの隣接ブロックである、請求項41又は42記載の方法。大変興味がある他の適用は、スケーラブル映像配信アプリケーション例えば、2Dスケーラブル映像符号化を含む。ここで、映像信号は、各レイヤが映像信号の異なる品質レベルや解像度空間的又は時間的を可能とする複数のレイヤを用いて復号されることが望まれている。本願の課題は請求項記載の手段によって解決される。第1態様によれば、マルチ-レイヤ映像復号システムであって:第1レイヤ映像デコーダを含む、第1レイヤと;前記第1レイヤと関連付けられ、第2レイヤ映像デコーダを含む第2レイヤと;前記第1レイヤ映像デコーダの出力を処理し、前記処理済みの出力を前記第2レイヤ映像デコーダに入力するかどうかを選択するための処理セレクタと;前記処理セレクタの後段に位置し、前記処理セレクタの指示に基づき、前記第1レイヤ映像デコーダの出力を処理し、前記処理済みの出力を前記第2レイヤ映像デコーダに入力するための処理モジュールとを含む。第2態様によれば、映像デコーダであって:符号化済みの信号を受信し、復号済みの信号を出力するのに適する復号ループと;前記復号ループに接続され、復号済みの入力信号を受信し、処理された復号済みの入力信号を前記復号ループに送信するのに適する処理モジュールと;前記処理モジュールに接続され、前記復号済みの入力信号を受信し、前記復号済みの入力信号を、前記処理モジュールに送信するか否かを選択するのに適するセレクタと、を含む。第3の態様によれば、復号された映像情報を選択的に処理するための方法であって:第1レイヤ映像デコーダ及び第2レイヤ映像デコーダを提供する段階と;下記のいずれかを選択する段階と;a前記第1レイヤ映像デコーダの出力を処理するb前記第1レイヤ映像デコーダの出力を処理しない、aの場合、前記第1レイヤ映像デコーダの出力を処理し、処理済みの出力を前記第2レイヤ映像デコーダに入力する段階とを含む。第4の態様によれば、映像復号システムにおけるディスパリティ補償を選択的に実行するための方法であって:復号済みの映像信号を提供する段階と;前記復号済みの映像信号に関する情報をa用いるか、b用いないかを選択する段階と;aの場合、前記復号済みの映像信号を処理し、前記処理された復号済みの映像信号に基づいてディスパリティ補償を実行する段階と;bの場合、前記復号済みの映像信号のディスパリティ補償を独立して実行する段階とを含む。第5の態様によれば、映像復号システムにおけるディスパリティ補償を選択的に実行するための方法であって:復号済みの映像信号を提供する段階と;前記復号済みの映像信号に関する情報をa用いるか、b用いないかを選択する段階と;aの場合、第1ディスパリティ補償を実行し、前記第1ディスパリティ補償は、前記復号済みの映像信号の処理に基づき、該処理と同時に実行される、段階と;bの場合、前記第1ディスパリティ補償とは異なる第2ディスパリティ補償を実行する段階とを含む。第6の態様によれば、マルチ-レイヤ符号化システムであって:第1レイヤ映像エンコーダを含む、第1レイヤと;前記第1レイヤと関連付けられ、第2レイヤ映像エンコーダを含み、前記第2レイヤ映像エンコーダはディスパリティ推定モジュール及びディスパリティ補償モジュールを含む、第2レイヤと;前記第1レイヤ映像エンコーダの出力を処理し、前記処理済みの出力を前記ディスパリティ推定モジュール及び前記ディスパリティ補償モジュールに入力する処理モジュールとを含む。第7の態様によれば、マルチ-レイヤ符号化システムであって;第1レイヤ映像エンコーダを含む、第1レイヤと;前記第1レイヤと関連付けられ、第2レイヤ映像エンコーダを含み、前記第2レイヤ映像エンコーダはディスパリティ推定モジュール、ディスパリティ補償モジュール及び処理モジュールを含む、第2レイヤとを含み、前記処理モジュールは、前記ディスパリティ補償モジュールと結合され、前記ディスパリティ推定モジュール及び前記ディスパリティ補償モジュールは前記第1レイヤ映像エンコーダの出力を受信する。第8の態様によれば、マルチ-レイヤ符号化システムであって:第1レイヤ映像エンコーダを含む、第1レイヤと;前記第1レイヤと接続され、第2レイヤ映像エンコーダを含む、第2レイヤと;前記第1レイヤ映像エンコーダの出力を処理するか否かを選択するための処理セレクタと;前記処理セレクタの指示に基づき、前記第1レイヤ映像エンコーダの前記出力を処理するための処理モジュールとを含み、前記第1レイヤ映像エンコーダの処理済の出力、及び前記第1レイヤ映像エンコーダの未処理の出力は前記第2レイヤ映像エンコーダに送信される。第9の態様によれば、第1ブロック及び第2ブロックを含む画像フレーム、又はスライスを復号するための方法であって:マルチ-レイヤ復号システムの第1レイヤデコーダで前記画像フレーム又はスライスのサンプルを復号する段階と;前記復号済みサンプルを処理する段階と;前記復号済みサンプルを、前記マルチ-レイヤ復号システムの第2レイヤデコーダに送信する段階と;前記処理された復号済みサンプルから、ディスパリティ補償処理を介して、前記画像の第1ブロックを生成する段階と;前記処理された復号済みサンプルから、ディスパリティ補償処理を介して、前記画像の第2ブロックを生成する段階とを含み、前記第2ブロックを生成するのに適した、前記処理された復号済みサンプルの一部は、メモリから取得されるか、又は前記第1ブロックを生成するために既に用いられた事前分析処理された復号済みサンプルである。さらに、開示の実施形態は、本出願の明細書、図面及び請求項において提供される。2009年7月4日に出願された、米国仮出願第61/223,027号及び2009年4月に出願された米国仮出願61/170,995号において、両出願とも、ここに参照によってその全体において組み込まれる。両出願のアーキテクチャは、MVCのようなスキーム2D互換のパフォーマンスを拡張するために用いられることができ、また、スケーラブルなフレーム互換のフル解像度3D配信スキーム又はスケーラブルなマルチ-レイヤスキーム、例えば、スケーラブルなマルチ-レイヤ2Dスキームの一部としても用いられることができる。ベースレイヤとエンハンスメントレイヤの2つのレイヤの支援を想定している、米国仮出願第61/223,027号のアーキテクチャは、参照処理ユニットRPU:ReferenceProcessingUnitの構成を追加する。参照処理ユニットは、エンハンスメントレイヤのために、参照ピクチャとして用いる以前にベースレイヤから来る復号されたピクチャに対して処理ステップを課してもよい。図1と2を参照すると、フレーム互換3Dアーキテクチャや2D互換アーキテクチャがそれぞれ示されている。RPUの検討は、しかしながら、処理を実行する装置の計算量や必要なメモリを潜在的に増加させるだろう。本開示は、RPUの必要なメモリを最小化し、計算量を削減しつつ実装される、米国仮出願第61/223,027号のアーキテクチャのようなアーキテクチャを可能とする実施形態を提供する。図3と図4は、RPUの具体的な実装を含むシステムのために用いられるエンコーダ符号器アーキテクチャの説明を与える。当業者であれば、本開示のいくつかの例は2つのレイヤシステムに直接的に関連するが、同じ基準が、レイヤ間に複数のRPUの構成を含むマルチ-レイヤシステムに対しても適用しうるということが理解できるであろう。一例であり、限定されない、マルチ-レイヤシステムは、ベースレイヤ及び1以上のエンハンスメントレイヤを含むことができる。図3と図4に示されるアーキテクチャによれば、ベースレイヤBLの再構成された画像は、ベースレイヤ内の参照ピクチャバッファ305、405に記憶され、処理される310、410。所定の適切な情報は、エンハンスメントレイヤELに対して、適切な予測値315、415を得るためにビットストリームに含まれる。適切な予測は、レート歪み特性のような符号化基準、処理スキームの複雑度などのコンビネーションを用いて導かれてもよい。その処理は、補間、ローパス、又はハイパスのフィルタリング、フェーズシフト、シャープニング、などを含んでもよい。また、特定された、例えば、米国仮出願第61/170,995号において、フィルタの各タイプは画像全体に適用されたり、異なるフィルタは領域ごと、視点ごと、色差成分ごとなどに適用されたりしてもよい。処理されたベースレイヤの画像は、エンハンスメントレイヤの参照ピクチャバッファ320、420に記憶される。そして、参照処理フィルタ情報325、425は、デコーダのために信号化される。エンハンスメントレイヤの参照ピクチャバッファ320、420は、他の、過去の、基準レイヤの参照画、及び/又はエンハンスメントレイヤの再構成された画像に基づく一時的な参照画も含んでもよい。そのとき、エンハンスメントレイヤは、所定の、一般的な、レート歪み最適化決定メカニズム330、430で符号化される。エンハンスメントレイヤの符号化される画像のそれぞれの領域例えばマクロブロック又は画素ピクセル群のブロックに対して、そのようなメカニズム330、430によれば、参照ピクチャバッファ320、420に前もって記憶されうる利用可能な符号化されたサンプルや参照画が与えられると、最適な予測或る符号化基準に従う方法が決定される。レート歪み最適化330、430と、ディスパリティ推定DisparityEstimation335、435との処理は、適切なブロック/マクロブロックのモードと、ディスパリティベクトル、参照画、重み、オフセットなどの予測パラメータを決定する。それらのパラメータなどは、符号化されるエンハンスメントレイヤ画像の最終的な予測値を生成するためにディスパリティ補償処理340、440で用いられ、また、デコーダ復号器に対してELビットストリーム内に信号化される。量子化パラメータと変換、符号化された残差情報は、この処理の後に依然として存在しうる予測誤差を減らすために信号化されてもよい。図5は、RPU処理のためのサポートを提供するデコーダの実装の一例を説明する図である。このデコーダにおいて、図3と図4で示したエンコーダと同様に、ベースレイヤの再構成された画像は、BL参照ピクチャバッファ505に入力され、また、RPU510にも送信され、EL画像の予測値515を得るために処理される。この予測値は、EL参照ピクチャバッファ520に記憶され、必要に応じてディスパリティ補償処理525で用いられる。しかしながら、メモリが抑制される装置では、EL参照ピクチャバッファ520にBLの予測値を記憶することは、コスト的に高く実装されうる。さらに、この実装は、エンハンスメントレイヤにより実際に参照されるベースレイヤの領域がどれくらいであるかを考慮していない。それゆえ、RPU510により処理されたサンプルは、予測のために利用されないということが起こり、従って、復号中に不必要な処理になるという結果をもたらす。そのような処理は、特にパワーが抑制された装置に対し、ほとんどコストがかからず、画素ごとの演算に関して、最善の復号性能を達成するために必要となる。本開示のいくつかの実施形態によれば、RPUの必要なメモリと処理は、デコーダのディスパリティ補償処理に伴う参照処理の段階ステージを統合することで削減できる。図6は、本開示によるデコーダのアーキテクチャの実施形態を説明する。図5に表されるアーキテクチャから異なるところは、参照処理段階605が参照選択610の後に実行され、ディスパリティ補償処理の一部となることである。換言すると、図5に示した以前のアーキテクチャでは、参照処理510は、参照選択の前に実行され、参照選択は、ディスパリティ補償段階525で行われていた。従って、図6の実施形態の第1結果では、完全に処理されたベースレイヤの参照画を記憶する必要がなく、ベースレイヤのデコーダにより扱われた同じメモリが必要とされても、エンハンスメントレイヤのデコーダは参照することができるので、潜在的にメモリを節約する。図6の実施形態のさらなる結果では、復号演算もかなり削減することができる。計算量の削減については、参照処理605が基本的にエンハンスメントレイヤのデコーダで必要とされるときに実行されるという事実に起因する。これは、次のような場合に特に有効である。例えば、いくつかの領域が、全てのスライスでベースレイヤの再構成された画像の参照処理を必要としない場合である。これらのスライスの領域は、前に復号されたエンハンスメントレイヤピクチャからのイントラ空間的予測や時間的予測のような予測の他のタイプを考慮するだけでよい。本開示を通して使用される用語ディスパリティdisparityは、時間的ディスパリティ、空間的、2Dや3D、品質ディスパリティ、解像度などを含む任意のタイプの差異を称する。或る実施形態において、結合された参照処理とディスパリティ補償処理605は、図7に示すように、縦につなぐフィルタセットacascadedfiltersetとして実装されうる。この場合、符号化されるエンハンスメントレイヤの画像のそれぞれの画像領域例えばブロックに対し、参照セレクタ705は、ベースレイヤを参照するか、又はイントラや時間的予測のような異なるタイプの予測を用いるかにより予測値を取得するかどうかを決定する710。ベースレイヤの参照が用いられる場合715、参照処理フィルタ720が実行される。特別なタイプのフィルタ720は、ビットストリームに信号化されたRPUパラメータに依存しうる。そのフィルタリング720は、ディスパリティ補償フィルタ725により要求される入力サンプルを得るために通常は実行され、他のサンプルは処理される必要がない。換言すると、フィルタリング720は、予測の目的のために適用されるのであり、視覚的/ディスプレイの目的のためではない。例えば、MPEG-4AVC/H.264標準において、ディスパリティ補償は、参照画内の1/2の画素位置で画像サンプルを予測するのに、6タップフィルタを用いる。この場合、ディスパリティパラメータ動きベクトルは、参照処理される画像の1/2の画素位置に具体的に位置するとすれば、対応するディスパリティ補償されたエンハンスメントレイヤの予測値の画像サンプルを得るために、わずか6個の隣接サンプルが、参照処理された画像内で生成されるのに必要となる。異なる位置、例えば整数又は1/4画素位置は、動き補償補間のためのいかなる処理の前に、隣接サンプルの処理に関して異なる条件を有してもよい。同様の処理は、輝度及び色差の両方のサンプルに対して考慮されうる。図7の実施形態は、デコーダにおいて、例えば動き補償された補間ブロックのような、存在するブロックの再利用を可能とする。本開示は、さらなる実施形態を開示する。それは、システムの複雑度計算量を削減する実施形態である。一例として、図8の実施形態では、参照処理及びディスパリティ補償フィルタ805は、両方のタスクを実行するシングルフィルタ805を生成するために共に結合されうる。例えば、参照処理とディスパリティ補償の両方が線形フィルタを用いて実行されるとき、結合されたフィルタは、2つの独立したフィルタの畳み込み演算を行うことができる。異なる例では、周波数領域のフィルタは、補間フィルタと共に結合することができ、その結果、異なるフィルタ係数を有する一つのフィルタとなる。図8に示すように、結合されたフィルタパラメータは、RPUフィルタパラメータ810及びディスパリティパラメータ815の両方に依存する。パラメータとしては、例えば、符号化されたビットストリームから生成される動きベクトルの長さがある。しかしながら、制限されたセットのできる限りのRPUフィルタパラメータ810と、制限されたセットのできる限りのディスパリティ補償パラメータ815があるとすれば、全てのできる限りの結合フィルタは事前に計算されることができ、フィルタパラメータはルックアップテーブルを用いて処理される。他の実施形態において、デコーダの計算量は、以前に計算された、いくつかの参照処理サンプル群の位置を示すマップにより削減することができる。参照画は、図9の例で作られうる。ここで、ディスパリティ補償処理は、1枚の参照画が与えられる2つの4×4ブロック、ブロックAとブロックBの水平1/2画素位置を計算するために必要である。MPEG-4AVCにおいて、この処理は、6タップフィルタを必然的に用いてもよい。この図9に示すように、参照処理された、ブロックAを生成するために必要であるサンプル‘X’と、ブロックBを生成するために必要であるサンプル‘X’との間で予測をかなりオーバーラップさせる。したがって、デコーダは、ブロックAを計算するために必要となるサンプルから全てのオーバーラップするサンプルを潜在的に記憶することができる。そして、デコーダは、計算量を削減するためにブロックBを計算するとき、オーバーラップするサンプルを再利用する。図9に示す場合は、一例の場合を示すだけであり、同じ概念がブロックAとブロックBが非-隣接であるとき、ブロック同士が異なるサイズのとき、異なるディスパリティ補償フィルタが用いられるときなどでも適用することができる。一つの実施形態において、以前に計算された全ての参照処理サンプルデータがマップに記憶されてもよいことに注意されるべきである。一方、他の実施形態においては、動きと参照との情報を事前に分析することは、どの参照処理サンプルがマップに必要とされるかかつ、どのサンプルが捨てられるかを決定するためにデコーダで実行されてもよい。そのような事前分析は、任意の動き補償と残差復号を実行する前にビットストリームの情報を分析することで生じさせることができる。さらなる実施形態において、マクロブロック例えば16×16又はサブブロック例えば16×16以下でRPUの利用を可能及び不可にすることから、そのような分析により生じるデコーダの条件分岐を減らすことまで、RPUの検討事項は、領域レベルで行うことができる。具体的に、RPUの処理と参照ピクチャ全体を記憶する代わりに、ピクチャのいくつかの領域のみを処理することができる。そのような実施形態によれば、デコーダは、まずRPUに関するMBsマクロブロック群を探すためにビットストリームを分析する。そして、デコーダは、その情報を覚えておき、RPU処理された参照画を生成する。もし、例えば、或る領域が予測のために使われないということが知られていたら、その領域は処理されない。一方で、もし或る領域が1つ以上のマクロブロックにより予測のために使われるのであれば、この領域に属するサンプルは生成される。図10の実施形態では、参照画を作成することができる。図10の実施形態に示すデコーダは、まず、どのマクロブロックがRPU処理を必要とするかを判定する。デコーダは、復号されるピクチャ又はスライスを異なる領域に分割することもできる。分割は、固定例えば、N×Mマクロブロックに対応されてもよいし、例えば、RPUが利用する分析からの情報や、RPU処理で利用可能な隣接ブロックをできるだけ多く含むように領域を分割すること一般的には長方形領域で、適応的に与えられてもよい。この方法では、デコーダは、図5に示すように、RPU処理の利用可能なマクロブロックを有する領域のみを始めから処理するだけか、低いコストで復号中に、RPU処理の段階的に行われたcascaded又は結合されたcombinedバージョンを適切に計画して処理するかのいずれかを行うことができる。これは、例えば、小さいサイズ、及びシステムにおける利用可能な高速メモリを利用することで実行できる。ハイブリッド方法も検討することができる。そのような方法において、すなわち、RPU処理を頻繁に利用するいくつかの領域の処理は、動き補償前に実行される。一方で、孤立された領域のRPU処理は、即座に実行される。RPU処理を必要とする領域を決定するための或る単純な方法では、ビットストリーム内にある参照情報を分析する。この場合、RPU処理されたサンプルを必要とするほとんどのブロック/サブ領域に対応する領域は、RPU処理のために選択することができる。参照情報に加えて、動き/ディスパリティベクトル情報についても、RPU処理を必要とする領域のさらに正確なマップを生成するために利用してもよい。画像全体、又は各スライス、又はスライスの部分などに対するビットストリームを分析した後に、領域計算が実行されるということに注意する。どの領域に対してRPU処理を利用すべきか、かつ、どの領域に対してすべきでないかを決定するためのビットストリームの分析を実行することに加えて、又は代わりに、そのような領域の決定は、既に復号されたピクチャやスライスに基づくということも可能である。具体的には、2つの隣接ピクチャ、特に同様のツールにより符号化されていれば、同様の特徴を有する可能性が高いだろう。もし、第1に復号されたピクチャがRPU処理を頻繁に行っていれば、第2ピクチャもそうなるであろう。このシナリオにおいて、図5に示した方法を利用することで、このピクチャを復号することに有利な点がありうる。しかしながら、第1ピクチャがRPU処理を利用していない、又は散発的に利用していれば、本開示に従って即座の方法が実行されるべきである。そのような決定は、ビットストリームを分析したり、第1に対して第2ピクチャやスライスのビットやモードが同様であるかどうかを判定したりすることで、拡張することもできる。次の段落では、本開示の実施形態によるエンコーダのアーキテクチャが示されるだろう。詳細については後述するが、図11や図12に示すように、エンコーダは、最終的なディスパリティ補償のために必要でなければ、RPU参照画を処理したり記憶したりするRPUの実行を回避する。ディスパリティ推定処理における判定は、追加のメモリや計算量のいずれも回避して、オリジナル処理されていないの参照画例えば図12参照、又は単純な処理が行われた参照画例えば図11参照を用いることができる。そのような判定も、図11や図12の方法の段階的に行われた又は結合されたバージョンを利用することができる。例えば、その処理は、高速モード判定と結合することができ、特別な参照について確認する必要はなく、このように計算サイクルを節約しながら判定を行ってもよい。図11の実施形態に示すように、RPU1110からの処理された参照画1105は、エンハンスメントレイヤの再構成ピクチャバッファ1115に挿入されず、ディスパリティ推定1120及び補償1125のためにレート歪み最適化ループで直接用いられる。RDORateDistortionOptimizationモジュールにより特定されたモードと参照選択に依存し、ディスパリティ推定モジュール1120は、特定された参照のため、ディスパリティパラメータ例えば動きベクトル、イルミネーションパラメータを推定する。ディスパリティ補償モジュール1125は、特定された参照画から現在画像の予測値を得るために、推定されたディスパリティパラメータを用いる。他の実施形態において、図11での説明や前述したように、エンコーダは、ディスパリティ推定1205の前に、完全なRPU処理の実行を回避してもよい。しかし、エンコーダは、代わりに、ディスパリティ補償1210の一部としてレート歪み最適化ループの中で、RPU処理を実行する。この場合、ディスパリティとRPUパラメータの推定モジュール1205は、提供された参照画が、低いレイヤからのRPU処理された参照画でなければ、単純なディスパリティ推定を実行するか、必要とされるRPU処理を実行するかのいずれかを行ってもよい。RPU処理されたサンプルがディスパリティ推定のために用いられるなら、参照処理とディスパリティ補償モジュール1210は、ディスパリティ補償のために参照処理されたサンプルを用いるだろう。それ以外のためなら、参照処理とディスパリティ補償モジュール1210は、エンハンスメントレイヤの参照ピクチャバッファ内にある時間的参照画からのサンプルを用いるだろう。これは、例えば、レート歪み最適化処理によりモード決定される際に早い終了基準が用いられるならば、有利になりうる。この場合、レート歪み最適化処理1215は、画像の1つ以上の領域に対し、時間的な予測が、必要な映像品質を提供するための所定のビットレートの制約を十分に満足するかを判定してもよい。従って、レート歪み最適化処理は、その領域に対して、RPU処理された予測値を用いるレート-歪み特性を試さないことを選択してもよい。従って、モード決定ループの中でRPU処理を実行することで、エンコーダでも、計算量及び/又は必要なメモリをかなり削減することが可能になる。もちろん、エンコーダも、例えば明示的なフィルタなどの代わりに、より短い1Dや2Dフィルタや、固定フィルタなどのより小さな複雑性のフィルタを検討する柔軟性を有する。これは、完全な事前処理を通じてか、即座処理を通じてかのいずれかにより任意の決定を実行するためや、ベースレイヤの参照画が用いられるかどうかを決定するために柔軟性を有する。ベースレイヤが参照画として選択された場合のみ、最適なフィルタが、最終的な動き補償ステップのためベースレイヤを処理するために用いられる。結果的に、本開示は、RPUを用いるコーデックの参照処理段階に対して、計算量と必要なメモリをかなり削減する方法を提示する。それゆえ、本開示は、RPUに対する提供を含まないコーデックと同様のオーダーの実装コストとなるような、そのようなコーデックのハードウェア及びソフトウェアの実装コストをもたらす。本開示で教示した出願は、映像符号化装置及び映像復号装置ハードウェア及びソフトウェアに限定されるものではなく、映像ディスクプレイヤー例えばブルーレイプレイヤー、放送、衛星、携帯の3D映像装置、IPTVシステムなどを含む。当業者であれば、本開示の教示により、フレーム-互換3D映像システム、2D互換3D映像システム、2Dスケーラブル映像システム、2D又は3Dマルチ-ビューシステムなどの様々なシステム及び/又はアーキテクチャに適用できることを理解するであろう。本開示で記載した方法およびシステムは、ハードウェア、ソフトウェア、ファームウェアまたはそれらの組み合わせにおいて実装されてもよい。ブロック、モジュールまたはコンポーネントとして記載される諸特徴は一緒に実装されてもたとえば集積論理デバイスのような論理デバイスにおいて、別個に実装されてもたとえば別個の接続された論理デバイスとしてよい。本開示の方法のソフトウェア部分は、実行されたときに少なくとも部分的に記載される方法を実行する命令を含むコンピュータ可読媒体を含みうる。コンピュータ可読媒体はたとえば、ランダムアクセスメモリRAMおよび/または読み出し専用メモリROMを含みうる。命令はプロセッサたとえばデジタル信号プロセッサDSP、特定用途向け集積回路ASICまたはフィールドプログラム可能論理アレイFPGAによって実行されてもよい。本明細書において言及されるすべての特許および刊行物は、本開示が属する分野の当業者の技術レベルを示しうる。本開示において引用されるすべての文献は、各文献が個々にその全体において参照によって組み込まれた場合と同じ程度に、参照によって組み込まれる。本開示は特定の方法またはシステムに限定されないことは理解しておくべきである。具体的な方法またはシステムはむろん変わりうるものである。本稿で使われる用語は個別的な実施形態を記述するためだけに使われているのであり、限定することは意図されていないことも理解しておくべきである。本明細書および付属の請求項の用法では、単数形は、内容がそうでないことを明確に示しているのでない限り、複数の被指示物を含む。用語複数は、内容がそうでないことを明確に示しているのでない限り、二つ以上の被指示物を含む。別途定義がされていない限り、本稿で使われるすべての科学技術用語は当業者によって普通に理解されるのと同じ意味をもつ。本開示のいくつかの実施形態について説明してきたが、本開示の精神および範囲から外れることなく様々な修正がなされてもよいことは理解されるであろう。よって、他の実施形態も付属の請求項の範囲内にある。"