【手続補正書】
【提出日】平成21年9月11日(2009.9.11)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
多視点ビデオストリームにおける多視点ビデオデータをデコーディングする方法であって、
ランダムアクセススライスを含むランダムアクセスピクチャを含む前記多視点ビデオデータストリームを受信する段階であって、該ランダムアクセススライスは、該ランダムアクセスピクチャと同じ時間で異なる視点に対応するスライスのみに関連する段階と、
視点間予測に関するランダムアクセスフラグを取得する段階であって、該ランダムアクセスフラグは、ピクチャのタイプが前記ランダムアクセスピクチャであるか否かを示す段階と、
前記ランダムアクセスフラグに基づいて前記ランダムアクセススライスに関する参照ピクチャリストの初期化情報を取得する段階であって、該初期化情報は、視点個数情報及び視点識別情報によって複数の視点間の参照関係を表す段階と、
前記視点個数情報及び前記視点識別情報を用いて前記参照ピクチャリストを初期化する段階と、
前記多視点ビデオデータストリームからタイプ情報に従って差値を取得する段階であって、該差値は、前記初期化した参照ピクチャリストにおける視点間参照インデックスのレジデュアルを表す段階と、
前記差値に従って前記初期化した参照ピクチャリストにおける前記視点間参照インデックスを変更するための割当変更値を決定する段階と、
前記決定した割当変更値を用いて視点間予測のため前記初期化した参照ピクチャリストを変更する段階と、
前記変更した参照ピクチャリストに基づいて前記ランダムアクセスピクチャにおけるマクロブロックの予測値を決定する段階と、
前記予測値を用いて前記マクロブロックをデコーディングする段階と、を有し、
前記初期化情報は、前記複数の視点間のデコーディング順序を示す値に基づいて取得する、ことを特徴とする方法。
【請求項２】
前記視点個数情報は、前記ランダムアクセスピクチャの参照視点の個数を示し、
前記視点識別情報は、前記ランダムアクセスピクチャに関するそれぞれの参照視点の視点識別情報を提供する、請求項１に記載の方法。
【請求項３】
前記多視点ビデオデータは、他の視点から独立した基準視点のビデオデータを含み、該基準視点は、視点間予測を用いないでデコーディングされる視点である、請求項１に記載の方法。
【請求項４】
前記差値は、スライスヘッダから取得される、請求項１に記載の方法。
【請求項５】
前記決定した割当変更値を使用して、前記初期化した参照ピクチャリストにおける前記ランダムアクセスピクチャへの視点間参照インデックスを割り当てる、請求項１に記載の方法。
【請求項６】
前記割当変更値は、前記初期化した参照ピクチャリストにおける視点間参照ピクチャの視点識別情報に関連付けられた変数を表す、請求項１に記載の方法。
【請求項７】
他の残りの任意のピクチャの位置は、前記初期化した参照ピクチャリストにおいて後方に移される、請求項１に記載の方法。
【請求項８】
多視点ビデオストリームにおける多視点ビデオデータをデコーディングする装置であって、
ランダムアクセススライスを含むランダムアクセスピクチャを含む前記多視点ビデオデータストリームを受信することであって、該ランダムアクセススライスは、該ランダムアクセスピクチャと同じ時間で異なる視点に対応するスライスのみに関連することと、視点間予測に関するランダムアクセスフラグを取得することであって、該ランダムアクセスフラグは、ピクチャのタイプが前記ランダムアクセスピクチャであるか否かを示すことと、前記ランダムアクセスフラグに基づいて前記ランダムアクセススライスに関する参照ピクチャリストの初期化情報を取得することであって、該初期化情報は、視点個数情報及び視点識別情報によって複数の視点間の参照関係を表すことと、を行うＮＡＬパージング部と、
前記視点個数情報及び前記視点識別情報を用いて前記参照ピクチャリストを初期化することと、前記多視点ビデオデータストリームからタイプ情報に従って差値を取得することであって、該差値は、前記初期化した参照ピクチャリストにおける視点間参照インデックスのレジデュアルを表すことと、前記差値に従って前記初期化した参照ピクチャリストにおける前記視点間参照インデックスを変更するための割当変更値を決定することと、前記決定した割当変更値を用いて視点間予測のため前記初期化した参照ピクチャリストを変更することと、を行う復号ピクチャバッファ部と、
前記変更した参照ピクチャリストに基づいて前記ランダムアクセスピクチャにおけるマクロブロックの予測値を決定することと、前記予測値を用いて前記マクロブロックをデコーディングすることと、を行うインター予測部と、を有し、
前記初期化情報は、前記複数の視点間のデコーディング順序を示す値に基づいて取得する、ことを特徴とする装置。
【請求項９】
前記視点個数情報は、前記ランダムアクセスピクチャの参照視点の個数を示し、
前記視点識別情報は、前記ランダムアクセスピクチャに関するそれぞれの参照視点の視点識別情報を提供する、請求項８に記載の装置。
【請求項１０】
前記多視点ビデオデータは、他の視点から独立した基準視点のビデオデータを含み、該基準視点は、視点間予測を用いないでデコーディングされる視点である、請求項８に記載の装置。
【請求項１１】
前記差値は、スライスヘッダから取得される、請求項８に記載の装置。
【請求項１２】
前記決定した割当変更値を使用して、前記初期化した参照ピクチャリストにおける前記ランダムアクセスピクチャへの視点間参照インデックスを割り当てる、請求項８に記載の装置。
【請求項１３】
前記割当変更値は、前記初期化した参照ピクチャリストにおける視点間参照ピクチャの視点識別情報に関連付けられた変数を表す、請求項８に記載の装置。
【請求項１４】
他の残りの任意のピクチャの位置は、前記初期化した参照ピクチャリストにおいて後方に移される、請求項８に記載の装置。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】変更
【補正の内容】
【００１８】
このデコーディング装置は、大きく、パージング部１００、エントロピーデコーディング部２００、逆量子化／逆変換部３００、イントラ予測部４００、デブロッキングフィルタ部５００、復号ピクチャバッファ部６００、インター予測部７００などを含む。そして、復号ピクチャバッファ部６００は、大きく、参照ピクチャ保存部６１０、参照ピクチャリスト生成部６２０、参照ピクチャ管理部６５０などを含み、参照ピクチャリスト生成部６２０は、変数誘導部６２５、参照ピクチャリスト初期化部６３０、参照ピクチャリスト再配列部６４０を含む。そして、インター予測部７００は、動き補償部７１０、輝度補償部７２０、輝度差分予測部７３０、視点合成予測部７４０などを含む。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１９
【補正方法】変更
【補正の内容】
【００１９】
パージング部１００では、受信したビデオ映像を復号すべくＮＡＬ単位にパージングを行う。一般的に、１つまたはそれ以上のシーケンスパラメータセットとピクチャパラメータセットが、スライスヘッダとスライスデータがデコーディングされる前にデコーダに転送される。この時、ＮＡＬヘッダ領域またはＮＡＬヘッダの拡張領域には様々な属性情報が含まれることができる。ＭＶＣは、既存ＡＶＣ技術への追加技術であるから、無条件に追加するよりは、ＭＶＣビットストリームである場合にのみ様々な属性情報を追加することがより効率的になり得る。例えば、ＮＡＬヘッダ領域またはＮＡＬヘッダの拡張領域でＭＶＣビットストリームか否かを識別できるフラグ情報を追加することができる。このフラグ情報によって、入力されたビットストリームが多視点映像コーディングされたビットストリームである場合にのみ、多視点映像に関する属性情報を追加することができる。この属性情報は、例えば、時間的レベル（ｔｅｍｐｏｒａｌ  ｌｅｖｅｌ）情報、視点レベル（ｖｉｅｗ  ｌｅｖｅｌ）情報、視点間ピクチャグループ識別情報、視点識別（ｖｉｅｗ  ｉｄｅｎｔｉｆｉｃａｔｉｏｎ）情報などを含むことができる。これについて、図２を参照しつつ詳細に説明する。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００２５
【補正方法】変更
【補正の内容】
【００２５】
パージングされたビットストリームは、エントロピーデコーディング部２００を通じてエントロピーデコーディングされ、各マクロブロックの係数、動きベクトルなどが抽出される。逆量子化／逆変換部３００では、受信した量子化された値に一定の定数を乗じ、変換された係数値を獲得し、この係数値を逆変換することによって画素値を復元する。この復元された画素値を用いてイントラ予測部４００では、現在ピクチャ内のデコーディングされたサンプルから画面内予測を行う。一方、デブロッキングフィルタ部５００は、ブロック歪み現象を減少させるためにそれぞれのコーディングされたマクロブロックに適用される。フィルタはブロックの縁部を穏やかにし、デコーディングされたフレームの画質を向上させる。フィルタリング過程の選択は、境界強度（ｂｏｕｎｄａｒｙ  ｓｔｒｅｎｇｔｈ）と境界周囲のイメージサンプルの変化（ｇｒａｄｉｅｎｔ）によって左右される。フィルタリングを経たピクチャは出力されたり、参照ピクチャとして用いられるために復号ピクチャバッファ部６００に保存される。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００６６
【補正方法】変更
【補正の内容】
【００６６】
復号ピクチャバッファ部６００では、ピクチャ間予測を行う目的で、以前にコーディングされたピクチャを保存したり開放する役割などを果たす。まず、現在ピクチャ以前にコーディングされたピクチャは、参照ピクチャとして用いるために参照ピクチャ保存部６１０に保存される（Ｓ９１）。多視点ビデオコーディングにおいて、以前にコーディングされたピクチャの中には現在ピクチャと異なる視点に在るピクチャもあるので、このようなピクチャを参照ピクチャとして用いるためにはピクチャの視点を識別する視点情報を用いることができる。したがって、デコーダではピクチャの視点を識別する視点情報を獲得しなければならない（Ｓ９２）。例えば、視点情報は、ピクチャの視点を識別するｖｉｅｗ＿ｉｄを含むことができる。復号ピクチャバッファ部６００では、参照ピクチャリストを生成するために復号ピクチャバッファ部６００内で使われる変数を誘導する必要がある。多視点ビデオコーディングにおいては視点間予測がなされることができるので、現在ピクチャが異なる視点に在るピクチャを参照する場合、視点間予測のための参照ピクチャリストを生成する必要がありうる。この時、復号ピクチャバッファ部６００では、獲得された視点情報を用いて、視点間予測のための参照ピクチャリストを生成するために用いられる変数を誘導する必要がある（Ｓ９３）。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】０１５８
【補正方法】変更
【補正の内容】
【０１５８】
図２８で説明した通り、スライスタイプがＶＰ、ＶＢ、混合と定義される場合、既存（例えば、Ｈ．２６４）の加重値予測を行うシンタックスは、図２９及び図３０のように変更されることができる。例えば、スライスタイプが時間的予測によるＰスライスである場合には、「if(slice_type!=VP‖slice_type!=VB)」部分が追加され（２９１０）、スライスタイプが時間的予測によるＢスライスである場合には、if文が「if(slice_type==B‖slice_type==Mixed)」のように変更されることができる（２９２０）。また、ＶＰ及びＶＢスライスタイプが新しく定義されることによって、図２９と類似な形式で新しく追加されることができる（２９３０、２９４０）。この場合、視点に関する情報が追加されるから、シンタックス要素は「視点（ｖｉｅｗ）」部分を含んでいる。その例として、「ｌｕｍａ＿ｌｏｇ２＿ｖｉｅｗ＿ｗｅｉｇｈｔ＿ｄｅｎｏｍ、ｃｈｒｏｍａ＿ｌｏｇ２＿ｖｉｅｗ＿ｗｅｉｇｈｔ＿ｄｅｎｏｍ」などが挙げられる。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】０１９０
【補正方法】変更
【補正の内容】
【０１９０】
図４２（ｂ）は、視点間予測によるスライスタイプ（ＶＰ）、視点間予測によるＢスライスタイプ（ＶＢ）及び両予測が混合された予測による混合スライスタイプ（Ｍｉｘｅｄ）が多視点ビデオコーディング（ＭＶＣ）のためのスライスヘッダに存在することを意味する。言い換えると、本発明によるスライスタイプを多視点ビデオコーディングのためのスライスヘッダで新しく定義したものである。