(57)【要約】      （修正有）【課題】チャネル誤り又は損失が発生した場合、ビデオデータ符号化のようなデータ符号化性能を改良する配信されたソース符号化技術を提供する方法、装置、及びシステム。【解決手段】データの再構築における誤りは、追加情報を送ることによって除去又は低減される。予測されたシーケンスと、オリジナルのシーケンスとの間の相関性は、コードブックを設計し、かつオリジナルイメージを表わすために必要なコセット（ｃｏｓｅｔ）を見つけるために使用することができる。この情報は、別のチャネル、すなわち副チャネルによって送られうる。【選択図】図１
2011061817.tif 000002
【特許請求の範囲】
【請求項１】
無線通信デバイスであって、
入力信号を受信し、前記信号を予測符号化規格に従って符号化し、予測符号化ビットストリームを出力するように構成された予測エンコーダと、
前記入力信号を受信し、前記信号を副チャネル符号化規格に従って符号化し、副チャネル符号化ビットストリームを出力するように構成された副チャネルエンコーダとを備える無線通信デバイス。
【請求項２】
前記予測符号化ビットストリームは、主通信チャネルを介して送信される請求項１に記載の無線通信デバイス。
【請求項３】
前記副チャネル符号化ビットストリームは、副チャネル通信チャネルを介して送信される請求項１に記載の無線通信デバイス。
【請求項４】
前記予測符号化規格は、ＭＰＥＧ−４規格と互換性を持つ規格である請求項１に記載の無線通信デバイス。
【請求項５】
前記予測符号化規格は、Ｈ．２６ｘ規格と互換性を持つ規格である請求項１に記載の無線通信デバイス。
【請求項６】
前記副チャネル符号化規格は、Ｗｙｎｅｒ  Ｚｉｖ技術と互換性を持つ規格である請求項１に記載の無線通信デバイス。
【請求項７】
前記入力信号はビデオ信号である請求項１に記載の無線通信デバイス。
【請求項８】
前記入力信号は、内部符号化されたデータブロックと外部符号化されたデータブロックとを備える請求項１に記載の無線通信デバイス。
【請求項９】
Ｗｙｎｅｒ  Ｚｉｖ技術が、前記外部符号化されたデータブロックに適用される請求項８に記載の無線通信デバイス。
【請求項１０】
前記副チャネルエンコーダは、予め定めた数のコセットを用いて前記入力信号を符号化する請求項１に記載の無線通信デバイス。
【請求項１１】
前記予め定めた数のコセットは、前記副チャネル符号化ビットストリームのヘッダ内に含まれる請求項１０に記載の無線通信デバイス。
【請求項１２】
無線通信デバイスであって、
オリジナル信号のビットストリーム表示を受信し、前記ビットストリームを予測復号規格に従って復号し、再構築された信号を出力するように構成された予測デコーダと、
前記再構築された信号及び前記オリジナル信号のビットストリーム表示を受信し、前記ビットストリームを副チャネル復号規格に従って復号し、前記復号された副チャネルビットストリームと前記再構築された信号を合成して、前記オリジナル信号の最終的な再構築を出力するように構成された副チャネルデコーダとを備える無線通信デバイス。
【請求項１３】
前記予測デコーダによって復号されたビットストリームは、主通信チャネルを介して受信される請求項１２に記載の無線通信デバイス。
【請求項１４】
前記副チャネルデコーダによって復号されるビットストリームは、副チャネル通信チャネルを介して受信される請求項１２に記載の無線通信デバイス。
【請求項１５】
前記予測復号規格は、ＭＰＥＧ−４規格と互換性を持つ規格である請求項１２に記載の無線通信デバイス。
【請求項１６】
前記予測復号規格は、Ｈ．２６ｘ規格と互換性を持つ規格である請求項１２に記載の無線通信デバイス。
【請求項１７】
前記副チャネル復号規格は、Ｗｙｎｅｒ  Ｚｉｖ技術と互換性を持つ規格である請求項１２に記載の無線通信デバイス。
【請求項１８】
前記オリジナル信号はビデオ信号である請求項１２に記載の無線通信デバイス。
【請求項１９】
前記オリジナル信号は、内部符号化されたデータブロックと外部符号化されたデータブロックとを備える請求項１２に記載の無線通信デバイス。
【請求項２０】
Ｗｙｎｅｒ  Ｚｉｖ技術が前記外部符号化されたデータブロックに適用される請求項１９に記載の無線通信デバイス。
【請求項２１】
前記副チャネルデコーダは、予め定めた数のコセットを用いて前記副チャネルビットストリームを復号する請求項１２に記載の無線通信デバイス。
【請求項２２】
前記予め定めた数のコセットは、前記副チャネル符号化ビットストリームのヘッダ内に含まれる請求項２１に記載の無線通信デバイス。
【請求項２３】
無線通信デバイスであって、
入力信号を受信し、前記信号を予測符号化規格に従って符号化し、予測符号化ビットストリームを出力するように構成された予測エンコーダと、
前記入力信号を受信し、前記信号を副チャネル符号化規格に従って符号化し、副チャネル符号化ビットストリームを出力するように構成された副チャネルエンコーダと
を備えるエンコーダと、
ビットストリームを受信し、前記ビットストリームを予測復号規格に従って復号し、再構築された信号を出力するように構成された予測デコーダと、
前記再構築された信号及びビットストリームを受信し、前記ビットストリームを副チャネル復号規格に従って復号し、前記復号されたビットストリームと前記再構築された信号を合成して、オリジナル信号の最終的な再構築を出力するように構成された副チャネルデコーダと
を備えるデコーダとを備える無線通信デバイス。
【請求項２４】
前記予測復号規格は、ＭＰＥＧ−４規格と互換性を持つ規格である請求項２３に記載の無線通信デバイス。
【請求項２５】
前記予測復号規格は、Ｈ．２６ｘ規格と互換性を持つ規格である請求項２３に記載の無線通信デバイス。
【請求項２６】
前記副チャネル復号規格は、Ｗｙｎｅｒ  Ｚｉｖ技術と互換性を持つ規格である請求項２３に記載の無線通信デバイス。
【請求項２７】
前記入力信号はビデオ信号である請求項２３に記載の無線通信デバイス。
【請求項２８】
セル電話である請求項２３に記載の無線通信デバイス。
【請求項２９】
無線インフラストラクチャの一部である請求項２３に記載の無線通信デバイス。
【請求項３０】
無線通信システムであって、
入力信号を受信し、前記信号を予測符号化規格に従って符号化し、前記入力信号の予測符号化ビットストリーム表示を出力するように構成された予測エンコーダと、
前記入力信号を受信し、前記信号を副チャネル符号化規格に従って符号化し、前記入力信号の副チャネル符号化ビットストリーム表示を出力するように構成された副チャネルエンコーダと
を備える第１の無線デバイスと、
前記予測エンコーダによって出力されたビットストリームを受信し、前記ビットストリームを予測復号規格に従って復号し、前記入力信号の再構築された信号を出力するように構成された予測デコーダと、
前記副チャネルエンコーダによって出力されたビットストリームを受信し、前記ビットストリームを副チャネル復号規格に従って復号し、前記復号された副チャネルビットストリームと前記再構築された信号を合成して、前記入力信号の最終的な再構築を出力するように構成された副チャネルデコーダと
を備える第２の無線デバイスとを備える無線通信システム。
【請求項３１】
前記予測復号規格は、ＭＰＥＧ−４規格と互換性を持つ規格である請求項３０に記載の無線通信システム。
【請求項３２】
前記予測復号規格は、Ｈ．２６ｘ規格と互換性を持つ規格である請求項３０に記載の無線通信システム。
【請求項３３】
前記副チャネル復号規格は、Ｗｙｎｅｒ  Ｚｉｖ技術と互換性を持つ規格である請求項３０に記載の無線通信システム。
【請求項３４】
前記第１の無線通信デバイスは、セル電話である請求項３０に記載の無線通信システム。
【請求項３５】
前記第１の無線通信デバイスは、無線インフラストラクチャデバイスの一部である請求項３０に記載の無線通信システム。
【請求項３６】
前記第２の無線通信デバイスは、セル電話である請求項３０に記載の無線通信システム。
【請求項３７】
前記第２の無線通信デバイスは、無線インフラストラクチャデバイスの一部である請求項３０に記載の無線通信システム。
【請求項３８】
データを符号化する方法であって、
入力信号を受信することと、
前記信号を予測符号化規格に従って符号化し、予測符号化ビットストリームを出力することと、
前記信号を副チャネル符号化規格に従って符号化し、副チャネル符号化ビットストリームを出力することとを備える符号化方法。
【請求項３９】
前記予測符号化規格は、ＭＰＥＧ−４規格と互換性を持つ規格である請求項３８に記載の符号化方法。
【請求項４０】
前記予測符号化規格は、Ｈ．２６ｘ規格と互換性を持つ規格である請求項３８に記載の符号化方法。
【請求項４１】
前記副チャネル符号化規格は、Ｗｙｎｅｒ  Ｚｉｖ技術と互換性を持つ規格である請求項３８に記載の符号化方法。
【請求項４２】
前記入力信号はビデオ信号である請求項３８に記載の符号化方法。
【請求項４３】
前記入力信号は、内部符号化されたデータブロックと外部符号化されたデータブロックとを備える請求項３８に記載の符号化方法。
【請求項４４】
Ｗｙｎｅｒ  Ｚｉｖ技術が、前記外部符号化されたデータブロックに適用される請求項４３に記載の符号化方法。
【請求項４５】
前記副チャネルエンコーダは、予め定めた数のコセットを用いて前記入力信号を符号化する請求項３８に記載の符号化方法。
【請求項４６】
前記予め定めた数のコセットは、前記副チャネル符号化ビットストリームのヘッダ内に含まれる請求項４５に記載の符号化方法。
【請求項４７】
データを復号する方法であって、
オリジナル信号の予測符号化ビットストリーム表示を受信することと、
前記予測符号化ビットストリームを予測復号規格に従って復号し、再構築された信号を出力することと、
前記再構築された信号及び前記オリジナル信号の副チャネル符号化ビットストリーム表示を受信することと、
前記副チャネル符号化ビットストリームを副チャネル復号規格に従って復号し、前記復号された副チャネルビットストリームと前記再構築された信号を合成して、前記オリジナル信号の最終的な再構築を出力することとを備える復号方法。
【請求項４８】
前記予測復号規格は、ＭＰＥＧ−４規格と互換性を持つ規格である請求項４７に記載の復号方法。
【請求項４９】
前記予測復号規格は、Ｈ．２６ｘ規格と互換性を持つ規格である請求項４７に記載の復号方法。
【請求項５０】
前記副チャネル復号規格は、Ｗｙｎｅｒ  Ｚｉｖ技術と互換性を持つ規格である請求項４７に記載の復号方法。
【請求項５１】
前記オリジナル信号はビデオ信号である請求項４７に記載の復号方法。
【請求項５２】
前記オリジナル信号は、内部符号化されたデータブロックと外部符号化されたデータブロックとを備える請求項４７に記載の復号方法。
【請求項５３】
Ｗｙｎｅｒ  Ｚｉｖ技術が、前記外部符号化されたデータブロックに適用される請求項５２に記載の復号方法。
【請求項５４】
前記副チャネルデコーダは、予め定めた数のコセットを用いて前記副チャネルビットストリームを復号する請求項４７に記載の復号方法。
【請求項５５】
前記予め定めた数のコセットは、前記副チャネル符号化ビットストリームのヘッダ内に含まれる請求項５４に記載の復号方法。
【請求項５６】
副チャネルエンコーダへのフレーム内ビット割り当てを決定する方法であって、
全てのデータフレームを調べることと、
前記データフレーム内のどのデータブロックがプロトテクトする必要があるかを決定することと、
プロテクトの必要なデータブロックに基づいて、副チャネルに割り当てられ、副チャネルを介して送信されるフレーム内のデータ量を決定することとを備える方法。
【請求項５７】
ソースコードブックの分割を決定する方法であって、
相関雑音推定値を決定することと、
前記相関雑音推定値に基づいてソースコードブックの分割数を決定することとを備える方法。
【請求項５８】
データを符号化する方法を具体化するコンピューター読取可能媒体であって、前記方法は、
入力信号を受信することと、
前記信号を予測符号化規格に従って符号化し、予測符号化ビットストリームを出力することと、
前記信号を副チャネル符号化規格に従って符号化し、副チャネル符号化ビットストリームを出力することとを備えるコンピューター読取可能媒体。
【請求項５９】
データを符号化する方法を具体化するコンピューター読取可能媒体であって、前記方法は、
オリジナル信号の第１のビットストリーム表示を受信することと、
前記第１のビットストリームを予測復号規格に従って復号し、再構築された信号を出力することと、
前記再構築された信号及び前記オリジナル信号の副チャネル符号化ビットストリーム表示を受信することと、
前記副ビットストリームを副チャネル復号規格に従って復号し、前記副チャネルビットストリームと前記再構築された信号を合成して、前記オリジナル信号の最終的な再構築を出力することとを備えるコンピューター読取可能媒体。
【請求項６０】
前記第１のビットストリームは、予測符号化規格に従って符号化される請求項５９に記載の方法。
【請求項６１】
前記第２のビットストリームは、副チャネル符号化規格に従って符号化される請求項５９に記載の方法。
【請求項６２】
無線通信デバイスであって、
入力信号を受信する手段と、
前記信号を予測符号化規格に従って符号化し、予測符号化ビットストリームを出力する手段と、
前記信号を副チャネル符号化規格に従って符号化し、副チャネル符号化ビットストリームを出力する手段とを備える無線通信デバイス。
【請求項６３】
無線通信デバイスであって、
オリジナル信号の第１のビットストリーム表示を受信する手段と、
前記ビットストリームを予測復号規格に従って復号し、再構築された信号を出力する手段と、
前記再構築された信号及び前記オリジナル信号の第２のビットストリーム表示を受信する手段と、
前記第２のビットストリームを副チャネル復号規格に従って復号し、前記復号された副チャネルビットストリームと前記再構築された信号を合成して、前記オリジナル信号の最終的な再構築を出力する手段とを備える無線通信デバイス。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、一般に、誤りを起こしやすい無線ネットワークを介するマルチメディアに関し、特に、無線ネットワークを介するマルチメディアとともに使用されるビデオ符号化技術及びビデオ復号技術に関する。
【背景技術】
【０００２】
例えばＩＴＵ−Ｔ  Ｈ．２６３、Ｈ．２６３＋、Ｈ．２６３＋＋、ＩＳＯ  ＭＰＥＧ−４、及びＪＶＴ  Ｈ．２６４のような現在のビデオ圧縮技術は、ビデオを圧縮する際に益々効率的になった。比較的低いビットレートにおいて良好な視覚品質を達成する能力は、例えば無線チャネルのような帯域幅が制限されたチャネルを介してマルチメディアアプリケーションを出現させる場合においてビデオアプリケーションの人気を増加させた。しかしながら、現在のビデオコデックによって使用される圧縮技術の予測的な性質は、圧縮されるビデオビットストリームを非常に脆弱に、かつチャネル内のパケット損失による劣化に対して影響を受けやすくする。
【０００３】
チャネル誤り又はパケット損失は、ビデオエンコーダとビデオデコーダとの間の同期損失に至る場合がある。更に詳しくは、エンコーダにおいて再構築されたビデオフレームのローカルに復号されたコピーは、デコーダにおいて、対応する再構築されたビデオフレームと一致しないかもしれない。ビデオエンコーダとビデオデコーダとの間の同期の喪失は、しばしば「ドリフト」とも称される。なぜなら、受信機のデコーダと、送り側のデコーダとの間にドリフトが存在するだろうからである。ドリフトは、復号されたビデオ品質における重大な損失に結びつく場合がある。
【０００４】
ドリフトによる復号品質の低下は、現在のビデオコデックの基礎となる予測ベースの符号化の直接の結果である。すなわち、一般に、現在のビデオフレームを復号するためには、前のビデオフレームを全て正確に再構築する必要がある。この問題は、パケット損失が有線ネットワークよりもはるかに頻繁に生じ、バーストが発生する傾向にある無線チャネルでは悪化する。
【０００５】
例えば自動反復要求（ＡＲＱ：Automatic Repeat Request）スキーム又は順方向誤り訂正（ＦＥＣ：Forward Error Correction）スキームのような再送信スキームは、エンコーダとデコーダとの間のドリフト問題と格闘するために使用された。これによって、パケット損失による品質の損失が緩和される。しかしながら、ビデオアプリケーションの待ち時間制約が、そのようなスキームの使用を妨げるかもしれないので、ＡＲＱスキームまたはＦＥＣスキーム（あるいはこれら両方の組み合わせ）の使用は、有効であることを示さないかもしれない。更に、ＦＥＣベースのスキームは、データが受信されるであろうことを保証できず、データが受信されない場合、次の内部フレーム１が受信されるまでドリフトは続く。１内部フレームは、予測ループを中断し、ドリフトを止めるためにビデオエンコーダによって使用される。
【０００６】
Ｗｙｎｅｒ−Ｚｉｖ定理が、A. D. Wyner及びJ. Zivによる１９７６年１月発行の「デコーダにおけるサイド情報を用いたソース符号化のためのレート歪み関数」（The rate distortion function for source coding with side information at the decoder）IEEE Trans. Inf. Theory, vol. 22, 1-10ページ（非特許文献１）で議論されている。この定理は、サイド情報を用いたソース符号化の問題に取り組む。相関する２つのソースＸおよびＹを考慮する。デコーダのみがソースＹにアクセスする場合、エンコーダはソースＸを圧縮する必要がある。平均二乗誤差が、ひずみ測定値及びＸ＝Ｙ＋Ｎ、但しＮはガウス分布、を持つ場合、エンコーダがＹへのアクセスを持つか持たないかに関わらず、符号化に対するレート歪み特性Ｘは同じである。
【０００７】
最近、Ｗｙｎｅｒ−Ｚｉｖフレームワーク内のサイド情報を用いたソース符号化の原理に基づいて、結合ソースチャネル符号化技術（joint source-channel coding techniques）が、ドリフト問題に対処するために提案された。例えば、R. Puri及びK. Ramchandranによる「プリズム：配信圧縮原理に基づく新しいロバストなビデオ符号化アーキテクチャ」（PRISM: A New Robust Video Coding Architecture based on Distributed Compression Principles）、Allerton Conferenceon Communication, Control and Computing, 2002（非特許文献２）、A. Sehgal、A. Jagmohan、及びN. Ahujaによる「ビデオのWyner-ziv符号化：誤りに強い圧縮フレームワーク」（Wyner-ziv Coding of Video: An Error-Resilient Compression Framework）、IEEE Trans. on Multimedia, vol. 6, pp. 249-258, 2004（非特許文献３）、A. Aaron、S. Rane、R. Zhang、及びB. Girodによる「ビデオのWyner-ziv符号化：圧縮及び誤り復元力に対する応用」（"Wyner-Ziv Coding of Video: Applications to compression and error resilience）、Proc. IEEE Data CompressionConf., 2003（非特許文献４）、A. Aaron、S. Rane、D.Rebollo-Monedero、及びB. Girodによる「ビデオ波形のための体系的な損失のある順方向誤り防止」（Systematic Lossy Forward Error Protection for Video Waveforms）、Proc. IEEE Int. Conf. Image Proc., 2003（非特許文献５）を参照されたい。
【０００８】
R. Puri及びK. Ramchandranによる「プリズム：配信圧縮原理に基づく新しいロバストなビデオ符号化アーキテクチャ」（PRISM: A New Robust Video Coding Architecture based on Distributed Compression Principles）、Allerton Conferenceon Communication, Control and Computing, 2002、及び、A. Aaron、S. Rane、R. Zhang、及びB. Girodによる「ビデオのWyner-ziv符号化：圧縮及び誤り復元力に対する応用」（"Wyner-Ziv Coding of Video: Applications to compression and error resilience）、Proc. IEEE Data CompressionConf., 2003で議論されているコデックは、予測的な符号化フレームワークを避ける完全なビデオコデックである。
【０００９】
一方、A. Sehgal、A. Jagmohan、及びN. Ahujaによる「ビデオのWyner-ziv符号化：誤りに強い圧縮フレームワーク」（Wyner-ziv Coding of Video: An Error-Resilient Compression Framework）、IEEE Trans. on Multimedia, vol. 6, pp. 249-258, 2004及び、A. Aaron、S. Rane、D.Rebollo-Monedero、及びB. Girodによる「ビデオ波形のための体系的な損失のある順方向誤り防止」（Systematic Lossy Forward Error Protection for Video Waveforms）、Proc. IEEE Int. Conf. Image Proc., 2003で議論されているコデックは、予測的な符号化フレームワークを保持するが、ドリフトの効果を緩和するためにある追加情報を送る。
【００１０】
これらの進歩にもかかわらず、無線チャネルを介して送信される圧縮ビデオビットストリームに関するパケット損失の効果の緩和を支援することにより、無線チャネルによるロバストなビデオ配信を可能にするのみならず、既存の圧縮技術で動作することができ、低い処理レイテンシを持ち、ビデオエンコーダとビデオデコーダとの間のドリフトを素早く除去／低減し、ビデオコデックによって使用されるものと比較して低いビットレートを必要とするという要求を満足する技術に対し、当該技術におけるニーズがある。
【特許文献１】米国特許出願１０／３９６，９８２
【非特許文献１】D. Wyner and J. Ziv, "The rate distortion function for source coding with side information at the decoder," IEEE Trans. Inf. Theory, vol. 22, pp. 1-10, Jan 1976
【非特許文献２】R. Puri and K. Ramchandran, "PRISM: A New Robust Video Coding Architecture based on Distributed Compression Principles, " in Allerton Conferenceon Communication, Control and Computing, 2002
【非特許文献３】A. Sehgal, A. Jagmohan, and N. Ahuja, "Wyner-ziv Coding of Video: An Error-Resilient Compression Framework," IEEE Trans. on Multimedia, vol. 6, pp. 249-258, 2004
【非特許文献４】A. Aaron, S. Rane, R. Zhang, and B. Girod, "Wyner-Ziv Coding of Video: Applications to compression and error resilience, " in Proc. IEEE Data CompressionConf., 2003
【非特許文献５】A. Aaron, S. Rane, D.Rebollo-Monedero, and B. Girod, "Systematic Lossy Forward Error Protection for Video Waveforms, " in Proc. IEEE Int. Conf. Image Proc., 2003
【非特許文献６】R. Zhang, S. L. Regunathan, and K. Rose, "Optimal intra/inter mode switching for robust video communication over the Internet," in Proc. 33rd Ann. Asilomar Conf. on Sig. Syst. Comp., 1999
【非特許文献７】S. S. Pradhan and K. Ramchandran, "Distributed source coding using syndromes (DISCUS) :Design and construction, " in Proc. IEEE Data Compression Conf. , 1999
【発明の概要】
【００１１】
本特許出願は、２００４年６月１日に出願され、「配信されたソース符号化技術に基づいたサイドチャネルを利用して予測的なビデオコデックのロバスト性を高める装置及びシステム」（METHOD, APPARATUS, AND SYSTEM FOR ENHANCING ROBUSTNESS OF PREDICTIVE VIDEO CODECS USING A SIDE-CHANNEL BASED ON DISTRIBUTED SOURCE CODING TECHNIQUES）と題され、本明細書の譲受人に譲渡され、その全体が、参照によって本明細書に明確に組み込まれている米国仮出願６０／５７６，１９３号の優先権を主張する。
【００１２】
本特許出願は、２００３年３月２４日に出願され、「マルチメディア送信のためのサイド情報の符号化及び復号のための方法、装置、及びシステム」（Method, Apparatus and System for Encoding and Decoding Side Information for Multimedia Transmission）と題され、本明細書の譲受人に譲渡され、参照によって本明細書に明確に組み込まれている同時係属中の米国特許出願１０／３９６，９８２（特許文献１）に関連する。
【００１３】
本明細書に示された実施形態は、チャネル誤りあるいはパケット損失が生じる場合、ビデオ符号化特性を改善する配信されたソース符号化技術を提供することによって、上述したニーズに対処する。
【００１４】
以下次の用語が使用される。  
・主ストリーム：予測的なコデックを用いて圧縮されるビデオデータ。  
・主チャネル：主ストリームが送信される論理チャネル。  
・ＷｙＺＥＲストリーム：配信される符号化原理を用いて構築されるＷｙｎｅｒ  Ｚｉｖ誤り（Ｅｒｒｏｒ）復元力（Ｒｅｓｉｌｅｎｃｅ）ストリーム。  
・副チャネル：ＷｙＺＥＲストリームが送信される論理チャネル。  
・主チャネルエンコーダ：主ストリームを符号化するために使用されるエンコーダ。  
・主チャネルデコーダ：主ストリームを復号するために使用されるデコーダ。  
・ＷｙＺＥＲエンコーダ：ＷｙＺＥＲストリームを符号化するために使用されるエンコーダ。
【００１５】
・ＷｙＺＥＲデコーダ：ＷｙＺＥＲストリームを復号するために使用されるデコーダ。  
・サイド情報：受信機においてフレームを再構築するために、ＷｙＺＥＲデコーダによって使用される復号された主ストリームデータ。
【００１６】
・ＤＳＣ：配信されたソース符号。
【００１７】
チャネル誤りがある状態において、エンコーダにおけるビデオフレームと、デコーダにおいて再構築されたビデオフレームとの間の相関が推定される。１つの実施形態では、この相関は、離散コサイン変換（ＤＣＴ：discrete cosine transform）ドメイン内で計算される。この相関は、２００３年３月２４日に出願され、「マルチメディア送信のためのサイド情報の符号化及び復号のための方法、装置、及びシステム」（Method, Apparatus and System for Encoding and Decoding Side Information for Multimedia Transmission）と題された米国特許出願１０／３９６，９８２号（特許文献１）に記載されているようなコセットの発見の際に使用することができる。
【００１８】
本発明の実施形態は、従来のビデオコデックにおけるドリフト問題の緩和を、ＷｙＺＥＲストリームによって、誤り復元（error resilience）ストリームとして支援することができる。実施形態は、追加情報を送ることにより、ドリフトを低減又は除去することを支援することができる。例えば、１つの実施形態では、ドリフトを停止しビデオ品質を改善するためにＷｙＺＥＲストリームを使用することができる副チャネル技術を使用することができる。予測されたシーケンスとオリジナルシーケンスとの間の相関は、コードブックを設計し、オリジナルイメージを表すために必要なコセットを発見するために使用することができる。この情報は、他のチャネル、すなわち副チャネルによって送られうる。別の実施形態では、要求されるコセット数が、ヘッダ情報の形態で、副チャネルを介してＷｙＺＥＲデコーダに伝達される。
【００１９】
１つの実施形態では、ＤＳＣを使用して、ビデオシーケンスの別の記述を、受信機において再構築されたビデオフレームにおいて、チャネル喪失によって生じた誤りの訂正に使用することができる副チャネルを介して、より低いレートで送ることができる。この副チャネルを介して送られるビットストリームは、予測的なデコーダによって再構築されるビデオフレームの支援を受けて復号することができる。その結果、誤り伝播の効果を緩和することができる。
【００２０】
１つの実施形態では、デコーダが主ストリームデータのみを復号することができるのであれば、副チャネル上で送信された追加情報を破棄するであろう。デコーダが両方のストリームを復号することができるのであれば、デコーダは、まず主ストリームデータを復号し、次に、この情報を用いて、ＷｙＺＥＲストリームデータを復号し、最終的に再構築されたイメージをユーザに提示する。
【図面の簡単な説明】
【００２１】
【図１】図１は、無線通信システムのブロック図である。
【図２ａ】図２ａは、Ｈ．２６３＋エンコーダ及びＤＳＣ技術で符号化されたビデオシーケンスのピーク信号対雑音比（ＰＳＮＲ）とフレーム番号とのプロットである。
【図２ｂ】図２ｂは、Ｈ．２６３＋エンコーダ、ＦＥＣ、及びＤＳＣ技術で符号化されたビデオシーケンスのＰＳＮＲとフレーム番号とのプロットである。
【図２ｃ】図２ｃは、Ｈ．２６３＋エンコーダ、ＦＥＣ、及びＤＳＣ技術で符号化された別のビデオシーケンスのＰＳＮＲとフレーム番号とのプロットである。
【図２ｄ】図２ｄは、Ｈ．２６３＋エンコーダ、ＦＥＣ、及びＤＳＣ技術で符号化された「ステファン」と題されたビデオシーケンスのＰＳＮＲ対誤り率のプロットである。
【図２ｅ】図２ｅは、Ｈ．２６３＋エンコーダ、ＦＥＣ、及びＤＳＣ技術で符号化された「フットボール」と題されたビデオシーケンスのＰＳＮＲ対誤り率のプロットである。
【図２ｆ】図２ｆは、ＦＥＣ、及びＤＳＣ技術で符号化された「フットボール」ビデオシーケンスのためのＰＳＮＲ対平均バースト長のプロットである。
【図３】図３は、ＤＳＣ技術を実装することができる無線通信システムの一部を例示するブロック図である。
【図４】図４は、サイドチャネルエンコーダへのフレーム内ビット割り当ての決定のための実施形態を例示するフローチャートである。
【図５】図５は、サイドチャネルエンコーダによって使用されるソースコードブックの最大分割数を決定する実施形態を例示するフローチャートである。
【図６】図６は、ＷｙＺＥＲエンコーダのブロック図である。
【図７】図７は、ＷｙＺＥＲデコーダのブロック図である。
【発明を実施するための形態】
【００２２】
現在のビデオ符号化規格は、ビデオ信号のための良好な圧縮特性を達成するために、予測的なフレームワークを使用する。そのような圧縮スキームの一例は、ＭＰＥＧ−４、Ｈ．２６３＋、及びＨ．２６４を含んでいる。しかしながら、そのように圧縮されたビットストリームが、誤りを起こし易いチャネルを介して送信される場合、図２（ａ）乃至図２（ｃ）において客観的なＰＳＮＲ数的指標を使用して実証されるように、ビデオ品質は激しく損傷をうける。誤りを起こし易いチャネルの例は、ｃｄｍａ２０００（Ｒ）、ＷＣＤＭＡ、ＧＳＭ（登録商標）、およびその他の新たな無線ネットワークを含む。本発明では、予測的なコデックを使用して圧縮されるビデオデータは「主ストリーム」と呼ばれ、主ストリームが送信される論理チャネルは「主チャネル」と呼ばれる。
【００２３】
チャネル誤りの悪影響を緩和する一例は、誤りを持つ送信単位の再送信（ＲＬＰ再送信、ハイブリッドＡＲＱ等）、誤り復元性のあるパケット化（送信単位において意味論的により重要なビットが、より誤り優れた誤り防止、データインタリーブ等が提供されるデータ分割）、喪失したソースデータの範囲を制限するビットストリームシンタックス（再同期マーカ、可逆的可変長符号化ＲＶＬＣ等の利用）を含む。
【００２４】
本発明では、誤り復元性を改善するために、主ストリームとともに使用される個別のビットストリームが生成される。このストリームは、配信されたソース符号化原理に基づくビデオデータのＷｙｎｅｒ−Ｚｉｖ符号化を用いて構築される。我々はこのストリームをＷｙｎｅｒ  Ｚｉｖ誤り（Ｅｒｒｏｒ）復元（Ｒｅｓｉｌｅｎｃｅ）ストリーム（ＷｙＺＥＲストリーム）と呼ぶ。ＷｙＺＥＲストリームは、例えばＭＰＥＧ−４、Ｈ．２６３＋、及びＨ２６４のようなビデオコデックのために使用される主チャネルとは異なる論理チャネルである「副チャネル」上で送信される。予測的なビデオコーダによって再構築されるビデオフレームは、ＷｙＺＥＲストリームを復号する目的でＷｙＺＥＲデコーダに対するサイド情報として役立つ。
【００２５】
本発明の別の局面によれば、R. Zhang、S. L. Regunathan、及びK. Roseによる「インターネットによるロバストなビデオ通信のための最適な内部／外部モード切替」（Optimal intra/inter mode switching for robust video communication over the Internet）、Proc. 33rd Ann. Asilomar Conf. on Sig. Syst. Comp., 1999（非特許文献６）で詳述された概念の幾つかを用いて、離散コサイン変換（ＤＣＴ）ドメイン内のフレーム自身と、誤って再構築されたフレームとの間の相関を推定するための技術が提供される。
【００２６】
本発明の別の局面によれば、ＤＣＴのエネルギー圧縮特性を利用するために、ＷｙＺＥＲエンコーダがＤＣＴドメイン内で動作する。サイドチャネル及び相関推定値に利用可能なレートに依存して、ＤＣ及び低周波数係数から始まって、できるだけ多くのＤＣＴ係数が符号化される。
【００２７】
クライアントが主ストリーム及びＷｙＺＥＲストリームの両方を受信するが、主ストリームのみしか復号できない場合（すなわち、例えばＭＰＥＧ−４、Ｈ．２６３＋、又はＨ．２６４デコーダのような予測デコーダしか持たない場合）、クライアントは、主ストリームのみを復号し、ＷｙＺＥＲストリームを無視する。予測デコーダ及びＷｙＺＥＲデコーダの両方を備えたクライアントは、両方のビットストリームを復号することができ、従って、予測的なデコーダだけを備えたクライアントよりも、良好な品質の復号されたビデオを受信することができる。
【００２８】
A. Sehgal、A. Jagmohan、及びN. Ahujaによる「ビデオのWyner-ziv符号化：誤りに強い圧縮フレームワーク」（Wyner-ziv Coding of Video: An Error-Resilient Compression Framework）、IEEE Trans. on Multimedia, vol. 6, pp. 249-258, 2004（非特許文献３）と、A. Aaron、S. Rane、D.Rebollo-Monedero、及びB. Girodによる「ビデオ波形のための体系的な損失のある順方向誤り防止」（Systematic Lossy Forward Error Protection for Video Waveforms）、Proc. IEEE Int. Conf. Image Proc., 2003（非特許文献４）とのアルゴリズムが、副チャネルデコーダにおいて、サイド情報として予測的コーダによって再構築される誤りのあるフレームを用いる一方、本発明と、これら文献で開示された技術との間には、多くの重要な差がある。例えば、A. Sehgal、A. Jagmohan、及びN. Ahujaによる「ビデオのWyner-ziv符号化：誤りに強い圧縮フレームワーク」（Wyner-ziv Coding of Video: An Error-Resilient Compression Framework）、IEEE Trans. on Multimedia, vol. 6, pp. 249-258, 2004（非特許文献３）では、著者はあるフレームを「ペグ」フレームとして印する。これらの技術は１つのペグフレームから次のペグフレームへの誤り伝播を生じさせる。各ペグフレームでは、ある追加情報が、エンコーダからデコーダへ送られる。これによって、デコーダは、ペグフレーム内の誤りの修正が可能となる。
【００２９】
対照的に、本発明の局面は、できるだけ早くドリフトを、すなわち誤りを、停止あるいは低減する。これにより、ある程度安定した品質を維持することが可能である。これは、視覚的観点から重要である。
【００３０】
一方、A. Aaron、S. Rane、D.Rebollo-Monedero、及びB. Girodによる「ビデオ波形のための体系的な損失のある順方向誤り防止」（Systematic Lossy Forward Error Protection for Video Waveforms）、Proc. IEEE Int. Conf. Image Proc., 2003（非特許文献５）では、ビデオシーケンスの独立した記述が、各フレームとともに送られるが、量子化が粗い。この粗い記述は、Ｗｙｎｅｒ−Ｚｉｖフレームワークを用いて符号化され、サイド情報として役立つデコーダにおいて、誤ったフレームの助けを借りて復号される。したがって、上記文献の方法は、最良の場合、粗い記述をリカバすることができるので、ドリフトを止めることを試みない。上記文献で説明された技術はまた、ピクセルドメインで動作し、ＤＣＴドメインで動作しないので、空間的な相関の活用に関して断念している。
【００３１】
サイド情報を用いたソース符号化のために、エンコーダは、ひずみ制約内でソースを符号化する必要がある。一方、デコーダは、ソースとサイド情報との間の相関雑音Ｎに従って符号化されたコードワードを復号できる必要がある。一方、ＷｙｎｅｒとＺｉｖによって証明された結果は本来、非建設的で漸近的であるので、それ以来、この問題を解決する多くの建設的な方法が提案された。そこでは、相関雑音Ｎに一致するチャンネルコードのコセットへソースコードが分割される。分割、すなわちコセットの数は、Ｎの統計量に依存する。
【００３２】
図１は、１つの実施形態によって、無線チャネルを介して符号化されるビデオの局面を例示するシステムブロック図である。このシステムは、無線主チャネル２５を介して予測デコーダ２０へビットストリームを通信するフレームバッファを含む予測エンコーダ１０と、無線副チャネル４５を介して副チャネル（ＷｙＺＥＲ）デコーダ４０へビットストリームを通信する副チャネル（ＷｙＺＥＲ）デコーダ３０とを備える。
【００３３】
図１では、予測デコーダ２０が、無線主チャネル２５を介して予測エンコーダ１０からビットストリームを受け取り、信号
【数１】
2011061817.tif 000003
【００３４】
を再構築する。これは、エンコーダ１０へ入力されたビデオ信号Ｘを表現している。ビットストリーム
【数２】
2011061817.tif 000004
【００３５】
を再構築した予測デコーダ２０は、無線チャネルを介したビットストリーム送信における誤りによって悪影響を受けるかもしれない。再構築された信号
【数３】
2011061817.tif 000005
【００３６】
は、最終的な再構築として
【数４】
2011061817.tif 000006
【００３７】
を出力するＷｙＺＥＲデコーダ４０に対するサイド情報として役立つ。
【００３８】
入力されるビデオ信号Ｘは、１つの実施形態では、予測エンコーダ１０によって符号化されている現在のビデオ信号である。予測エンコーダ１０は、入力されたビデオ信号を圧縮し、例えばMotion Estimation（ＭＥ）及び Displaced Frame Differences（ＤＥＤ）変換のような技術に基づいて、圧縮されたビットストリームを送る。ＷｙＺＥＲエンコーダ３０は、Ｗｙｎｅｒ−Ｚｉｖフレームワークを用いて、ＷｙＺＥＲデコーダ４０にＸの独立した記述を送る。
【００３９】
その後、ＷｙＺＥＲデコーダ４０は、副チャネルを介して送られたビットストリームを復号し、再構築された信号
【数５】
2011061817.tif 000007
【００４０】
を用いて、ビデオ信号Ｘの最終的な再構築を
【数６】
2011061817.tif 000008
【００４１】
として出力する。最終的に再構築された信号
【数７】
2011061817.tif 000009
【００４２】
は、一般に、再構築された信号
【数８】
2011061817.tif 000010
【００４３】
よりも良好なオリジナルビデオ信号Ｘの再構築となる。なぜなら、以下に説明するように、ＷｙＺＥＲデコーダ４０は、無線チャネルを介したビットストリームの送信中に生じる誤りのうちのいくつかを訂正できるかもしれないからである。最終的に再構築された信号
【数９】
2011061817.tif 000011
【００４４】
は、予測デコーダ２０のフレームバッファに書き戻されうる。
【００４５】
この実施形態では、ＷｙＺＥＲエンコーダ３０を設計するために、ＷｙＺＥＲエンコーダに割り当てられるレートは固定され、相関構成は
【数１０】
2011061817.tif 000012
【００４６】
であることが仮定される。なお、Ｘはオリジナルの入力信号を表し、
【数１１】
2011061817.tif 000013
【００４７】
は、予測デコーダによるオリジナル信号Ｘの再構築を表し、Ｚは、相関雑音ベクトルを表す。
【００４８】
更に、この実施形態では、演算が、離散コサイン変換（ＤＣＴ）ドメイン内でなされるので、相関雑音ベクトルＺの成分が独立していると仮定される。これら成分は、ガウシアン分布としてモデル化されうる。なぜなら、同じ分散を持つ全ての分布のうち、ガウシアンは、最大のエントロピを有し、最悪のケース分析を与えるからである。ＷｙＺＥＲエンコーダ３０は、Ｚの各成分の分散を知る必要があるので、Ｘにおける各成分についてソースコードブックの分割数、すなわちコセット数を見つける必要がある。これらの分散を見つけるために、以下に説明するような相関推定技術を利用することができる。
【００４９】
例えば、１つの実施形態では、相関推定アルゴリズムは、R. Zhang、S. L. Regunathan、及びK. Roseによる「インターネットによるロバストなビデオ通信のための最適な内部／外部モード切替」（Optimal intra/inter mode switching for robust video communication over the Internet）、Proc. 33rd Ann. Asilomar Conf. on Sig. Syst. Comp., 1999（非特許文献６）で提案されたアルゴリズムの幾つかの局面を利用する。しかしながら、上記文献とは異なり、本発明のこの実施形態はＤＣＴドメイン内で実施される。主チャネル及び副チャネルの両方について、これら２つのチャネルにおけるパケット消去は独立しており、かつ各パケットは独立して復号可能であると仮定される。また、パケットを喪失する確率は、ブロックの情報を喪失する確率と等しいと仮定される。ブロックが喪失される場合、予測デコーダは、このブロックを、前のフレーム内の同じ位置におけるフレームメモリ内のブロックと交換する。主チャネル及び副チャネル上のパケット喪失確率は、それぞれｐ及びｑとして表わされる。
【００５０】
「マルチメディア送信のためのサイド情報の符号化及び復号のための方法、装置、及びシステム」（Method, Apparatus and System for Encoding and Decoding Side Information for Multimedia Transmission）と題された同時係属中の米国特許出願１０／３９６，９８２号（特許文献１）に記載されているように、ＷｙＺＥＲエンコーダは、ＷｙＺＥＲデコーダへコセットインデクスを伝達することができる。そして、ＷｙＺＥＲデコーダは、このインデクスを復号し、一般に、サイド情報とともに結合されたコードワードを含むコセットを識別する。１つの実施形態では、S. S. Pradhan及びK. Ramchandranによる「シンドロームを用いた分散型ソース符号化」（Distributed source coding using syndromes (DISCUS) :Design and construction）in Proc. IEEE Data Compression Conf. , 1999（非特許文献７）で詳述された概念を用いることができる。一般に、ソースコードブックは、任意のチャンネルコードのコセットへ分割することができる。
【００５１】
ＷｙＺＥＲエンコーダの詳細なブロック図を図６に示す。これは、３つのブロック、すなわち、歪み統計量計算機、コセットエンコーダ、及びフレーム統計量計算機からなる。相関雑音の統計量を計算するために、ＷｙＺＥＲエンコーダは、デコーダにおいて予測されるビデオフレーム再構築と、現在のビデオフレームデータとを用いる。これら統計量は、ＷｙＺＥＲビットストリームを生成するためにコセットエンコーダによって使用される。ＷｙＺＥＲがフレームを符号化した後、統計量が更新され、次のフレームにおいて使用可能となる。
【００５２】
図７は、ＷｙＺＥＲデコーダのブロック図を示す。コセットビット及びコセットインデクス情報からなるＷｙＺＥＲビットは、（主デコーダからの）サイド情報とともに使用され、ＷｙＺＥＲ復号された出力が生成される。
【００５３】
R. Zhang、S. L. Regunathan、及びK. Roseによる「インターネットによるロバストなビデオ通信のための最適な内部／外部モード切替」（Optimal intra/inter mode switching for robust video communication over the Internet）、Proc. 33rd Ann. Asilomar Conf. on Sig. Syst. Comp., 1999（非特許文献６）の表記に従って、  
【数１２】
2011061817.tif 000014
【００５４】
を、ｎ番目のフレームのｋ番目のブロックにおけるジグザグスキャン順におけるｉ番目のＤＣＴ係数のオリジナル値とする。また、  
【数１３】
2011061817.tif 000015
【００５５】
は、エンコーダ再構築を意味するものとする。すなわち、  
【数１４】
2011061817.tif 000016
【００５６】
は、  
【数１５】
2011061817.tif 000017
【００５７】
の量子化された表現である。この係数は、予測デコーダによって、  
【数１６】
2011061817.tif 000018
【００５８】
として再構築されるものとする。再構築  
【数１７】
2011061817.tif 000019
【００５９】
は、エンコーダ用の確率変数である。
【００６０】
副チャネルがない状況を考慮する。ブロックが、内部（Ｉブロック）符号化されるケースと、外部（予測的、あるいはＰブロック）符号化されるケースとの２つのケースがある。Ｉブロックは自立的である。すなわち、レンダ又はディスプレイのために必要な全ての情報である完全なデータからなるブロックを含む。Ｐブロックは、自立的ではなく、一般に、例えば動作ベクトルや差分テクスチャ情報のような前のフレームに対する差分情報を含む。ｐは、情報単位がチャネル誤りにより喪失される確率であると考慮されたい。更に、この喪失された情報単位に対応する領域は、前に再構築された、共に用いられるビデオによって埋められるものと仮定されたい。そして、ブロックが、内部符号化された場合、  
【数１８】
2011061817.tif 000020
【００６１】
であり、ブロックが、外部（予測的）符号化された場合、  
【数１９】
2011061817.tif 000021
【００６２】
である。なお、  
【数２０】
2011061817.tif 000022
【００６３】
は、  
【数２１】
2011061817.tif 000023
【００６４】
のための予測変量である。すなわち、ｎ番目のフレームにおけるｋ番目のブロックのための最良の予測変量は、（ｎ−１）番目のフレームにおけるｊ番目のブロックである。ブロックが喪失される場合、ブロックは単に、前のフレームの同じ位置のブロックと交換される。独特のブロックの予測的なビットストリームが誤りなしで受信されても、  
【数２２】
2011061817.tif 000024
【００６５】
は  
【数２３】
2011061817.tif 000025
【００６６】
と等しくないかもしれないことが注目されるべきである。つまり、前に誤りがあったかもしれないので、このブロックも誤りがあるかもしれない。この場合、予測される歪みは、  
【数２４】
2011061817.tif 000026
【００６７】
の通りとなる。
【００６８】
予測される歪み  
【数２５】
2011061817.tif 000027
【００６９】
は、ブロック中の全てのＤＣＴ係数のために計算され、ＷｙＺＥＲエンコーダは、この相関について符号化すべきである。この目標は、誤って構築されたＤＣＴ係数を、誤りのない量子化表示に改善し、ドリフトを止めることである。しかしながら、副チャネルのレート制約を与えられた係数を全て符号化することは可能ではないかもしれない。この正しいアプローチは、利用可能なレートを使用し、予測される歪みを最小にするＤＣＴ係数の部分集合を改善することである。しかしながら、全てのブロックのためにこの最適化を行なうことは極めて複雑である。オフラインテストに基づいて、ほとんどの場合において、最良の戦略は、高次の周波数係数を改善する前に、低次の周波数係数を改善することであることが判明した。これは、視覚的な観点から、直観的の意味もなす。したがって、オンラインアルゴリズムの場合、副チャネルのために与えられたレート内で提供できるｍ個の低い周波数ＤＣＴ係数のみが送信される。これらｍ個のＤＣＴ係数の場合、主ストリームとＷｙＺＥＲストリームの両方が流れる場合、ＷｙＺＥＲデコーダは、デコーダにおいて、エンコーダ再構築を復元する。したがって、これらｍ個のＤＣＴ係数については、デコーダにおける再構築は、次の通りとなる。  
【数２６】
2011061817.tif 000028
【００７０】
ＷｙＺＥＲエンコーダによって符号化されない残りのＤＣＴ係数の場合、  
【数２７】
2011061817.tif 000029
【００７１】
は、上記式（２）によって与えられる。
【００７２】
式（３）を用いて、予測される歪み  
【数２８】
2011061817.tif 000030
【００７３】
を計算するために、  
【数２９】
2011061817.tif 000031
【００７４】
と  
【数３０】
2011061817.tif 000032
【００７５】
とを計算する必要がある（なぜなら、  
【数３１】
2011061817.tif 000033
【００７６】
と  
【数３２】
2011061817.tif 000034
【００７７】
とは既にエンコーダにおいて既知であるからである）。式（１）（２）、及び（４）は、  
【数３３】
2011061817.tif 000035
【００７８】
及び  
【数３４】
2011061817.tif 000036
【００７９】
を、  
【数３５】
2011061817.tif 000037
【００８０】
及び  
【数３６】
2011061817.tif 000038
【００８１】
に関連付けるために使用することができる。したがって、ＷｙＺＥＲエンコーダは、（R. Zhang、S. L. Regunathan、及びK.Roseによる「インターネットによるロバストなビデオ通信のための最適な内部／外部モード切替」（Optimal intra/inter mode switching for robust video communication over the Internet）、Proc. 33rd Ann. Asilomar Conf. on Sig. Syst. Comp. , 1999（非特許文献６）によって使用されたものに類似した）簡単な再帰アルゴリズムを用いて  
【数３７】
2011061817.tif 000039
【００８２】
及び  
【数３８】
2011061817.tif 000040
【００８３】
を計算し、もって、式（３）を用いて  
【数３９】
2011061817.tif 000041
【００８４】
を計算することができる。符号化のために、予測的なエンコーダは、フレームを、オーバラップしない空間ブロックのグリッドに分割することに注意されたい。予測変量ブロック（上記解析における（ｎ−１）番目のフレームにおけるｊ番目のブロック）が、このオーバラップしないブロックのグリッドと並ばない場合、ＷｙＺＥＲエンコーダは、（ｎ−１）番目を符号化する一方、  
【数４０】
2011061817.tif 000042
【００８５】
及び  
【数４１】
2011061817.tif 000043
の値を格納しないであろう（なぜなら、ｊは、（ｎ−１）番目のフレームにおける有効なブロックではないからである）。この場合、（ｎ−１）番目のフレームにおけるｊ番目のブロックに対して最大のオーバラップを有するブロックは有効なブロックであり、計算で使用される。代わりに、ｊ番目のブロックとオーバラップする（ｎ−１）番目のフレーム中の対応するブロックの加重平均を使用することもできる。
【００８６】
相関雑音推定値  
【数４２】
2011061817.tif 000044
【００８７】
は、ソースコードブックの分割数、すなわちコセット数を決定する。この情報、すなわちコセット数は、ヘッダ情報の形態で、副チャネルを介してＷｙＺＥＲデコーダに伝達されうる。ヘッダサイズを制限するために、コセット数がとりうる可能な値は、各係数について制限されうる。可能な値に関するこの制限は、広範囲なテストに基づきうる。
【００８８】
図２（ａ）〜（ｆ）は、上述されたＷｙＺＥＲコデックの有効性を実証する様々な性能比較のためのシミュレーション結果のグラフである。シミュレーションについては、当該技術でよく知られている標準的なビデオシーケンスが、予測的ビデオコデックとして使用されたＨ．２６３＋コーダを用いて符号化された。副チャネルは、主チャネル上のレートの約３０％が割り当てられる。
【００８９】
図２（ａ）は、ピーク信号対雑音比（ＰＳＮＲ）と、上述したＨ．２６３＋エンコーダ２０２及びＤＳＣ技術２０４で符号化されたビデオシーケンスのフレーム番号とのプロットである。図２（ａ）では、標準的な「フラワーガーデン」ビデオシーケンス（３５２ｘ２４０、１５ｆｐｓ、１つの内部フレーム後に２９の外部フレームが続く）の３番目のフレームが落ちている。比較を公平にするために、Ｈ．２６３＋は、同じ量の追加レートで補償されている。図２（ａ）は、ＤＳＣ技術を備えると、ドリフトが修正されるので、ＰＳＮＲは、落ちたフレームの後、３０フレームシーケンスの終わりまで、Ｈ．２６３＋よりも約７〜８ｄＢまで安定して増加することを示している。
【００９０】
また、上述したＤＳＣ技術は、ＣＤＭＡ２０００  １Ｘ規格５に対応する無線ネットワークを介して送信されるマルチメディアデータストリームに対してパケット誤りを加える無線チャネルシミュレータを用いてテストされた。これらのテストのために、ＤＳＣ技術は、副チャネル上のレートの一部が、順方向訂正コード（ＦＥＣ：forward correcting code）に割り当てられ、残りの部分がＷｙＺＥＲストリームに割り当てられるように修正された。この論拠は、ＦＥＣが使用され、消去数がＦＥＣ訂正能力を下回る場合、ＷｙＺＥＲストリームが、損失から瞬間的に回復できない（図２（ａ）参照）ということである。これは、視覚的観点およびＰＳＮＲ観点の両方から重要である。しかしながら、サイドチャネル上の全レートは、ＦＥＣに割り当てられない。なぜなら、前述したように、誤り復元を保証できないからである。これは、著しい誤りバーストをしばしば有する無線チャネルには特に正確である。
【００９１】
図２（ｂ）は、ＰＳＮＲと、上述したＨ．２６３＋エンコーダ２１２、ＦＥＣ  ２１４、及びＤＳＣ技術２１６で符号化されたビデオシーケンスのフレーム番号とのプロットである。図２（ｂ）の作成に使用された標準的なビデオシーケンスは、「ステファン」ビデオシーケンス（共に３５２ｘ２４０、１５ｆｐｓ、１ＧＯＰ）である。図２（ｂ）では、比較された３つの異なる符号化技術は次の通りである。１）主チャネル及び副チャネルに割り当てられた合計に等しいレートで符号化されたＨ．２６３＋（曲線２１２）。２）ＦＥＣに割り当てられた完全（full）副チャネルレート（我々はリードソロモンコードを使用する）（曲線２１４）。３）副チャネル上のレートの一部をＦＥＣに割り当てることによって修正された提案アルゴリズム（ここでもリードソロモンコードが使用される）（曲線２１６）。
【００９２】
ＦＥＣ技術及びＤＳＣ技術の両方について、上記の（２）および（３）について、レイテンシ制約は１フレームである。テストは、（３）のケースにおいて、ＦＥＣ及びＷｙＺＥＲストリームの間の最適なレート分割を見つけるために行われた。ほとんどの場合、ＦＥＣ及びＷｙＺＥＲストリームにおおよそ等しいレートを割り当てることが最良であった。また、これは、ここで示される結果のための設定である。主ストリーム及びＷｙＺＥＲストリームは、同じ（シミュレートされた）無線チャネルを介して送られる。
【００９３】
図２（ｂ）に示すステファンシーケンスの場合、提案されたＷｙＺＥＲ  ２１６アプローチは、ＦＥＣのみの場合２１４よりも２．９ｄＢ高く、ベースラインＨ．２６３＋（曲線２１２）よりも５．２ｄＢ高い平均ＰＳＮＲを達成し、他のものよりも優れている。
【００９４】
図２（ｃ）は、ＰＳＮＲと、上述したＨ．２６３＋エンコーダ２２２、ＦＥＣ２２４、及びＷｙＺＥＲ技術２２６で符号化された他のビデオシーケンスのフレーム番号とのプロットである。図２（ｃ）の作成に使用された標準的なビデオシーケンスは、「フットボール」ビデオシーケンス（共に３５２ｘ２４０、１５ｆｐｓ、１ＧＯＰ）である。図２（ｃ）は、８．５％のパケット喪失率の場合において、ステファンシーケンス及びフットボールシーケンス（共に３５２ｘ２４０、１５ｆｐｓ、１ＧＯＰ）に対する３つの符号化スキームの一般的な性能を示している。
【００９５】
図２（ｃ）では、提案されたＤＳＣ技術２２６のＰＳＮＲは、フレーム２３及び２６における２つの窪みを有するが、両ケースとも、速く回復している。このテストの場合、ＷｙＺＥＲ技術２２６の平均ＰＳＮＲは、ＦＥＣのみの場合２２４よりも３．１ｄＢ高く、ベースラインＨ．２６３＋（曲線２２２）よりも５．６ｄＢ高い。
【００９６】
図２（ｄ）は、ＰＳＮＲと、Ｈ．２６３＋エンコーダ２３２、ＦＥＣ２３４、及びＤＳＣ技術２３６で符号化されたビデオシーケンス「ステファン」の誤り率とのプロットである。図２（ｅ）は、ＰＳＮＲと、Ｈ．２６３＋エンコーダ２４２、ＦＥＣ２４４、及びＤＳＣ技術２４６で符号化されたビデオシーケンス「フットボール」の誤り率とのプロットである。３つの符号化方法の典型的な性能について図２（ｄ）及び図２（ｅ）に示すように、本発明の方法は、一貫して他の２つよりも優れている。結果は、ＳＩＦ（３５２ｘ２４０）シーケンスのみについて示されているが、例えばＱＣＩＦやＣＩＦのような他の空間サイズからなるビデオシーケンスについても同様な挙動が見られる。
【００９７】
実験は、特性に対するバースト長の効果を検討するためも行なわれた。図２（ｆ）は、ＰＳＮＲと、ＦＥＣ２５２及びＤＳＣ２５４で符号化された「フットボール」ビデオシーケンス（１７６×１４４、１５ｆｐｓ、３０フレーム）平均バースト長とのプロットである。図２（ｆ）に示すように、平均バースト長が０．６を越える場合、本発明に従った技術２５４は、ＦＥＣのみのケース２５２よりも優れているが、バースト長が０．６未満である場合、ＦＥＣのみの場合よりも劣る。
【００９８】
したがって、上述した技術を用いたシミュレーション結果は、例えば合理的なレイテンシ制約の下で、順方向誤り訂正コードのような従来の誤り阻止スキームよりも性能において著しい進歩を示している。
【００９９】
説明したＤＳＣ技術は、多くの無線デバイスおよび無線規格で動作しうる。説明したＤＳＣ技術を実装することができる無線デバイスの例は、セル電話、無線通信対応のパーソナルコンピュータや携帯情報端末（ＰＤＡ）、及びその他の無線デバイスを含む。説明したＤＳＣ技術上で動作可能な無線規格の例は、グローバルシステムフォーモバイルコミュニケーション（ＧＳＭ：Global System for Mobile Communication）、汎用パケット無線システム（ＧＰＲＳ：General Packet Radio Service）、エンハンストデータＧＳＭ環境（ＥＤＧＥ：Enhanced Data GSM Environment）、ＴＩＡ／ＥＩＡ−９５−Ｂ（ＩＳ−９５）、ＴＩＡ／ＥＩＡ−９８−Ｃ（ＩＳ−９８）、ＣＤＭＡ２０００、広帯域ＣＤＭＡ（ＷＣＤＭＡ）と称される規格、及びその他を含む。
【０１００】
図３は、ＤＳＣ技術を実装することができる無線通信システムの一部を例示するブロック図である。図示するように、無線通信システムは、第１の無線通信デバイス（ＷＣＤ）３０２を含んでいる。これは、移動局（ＭＳ）とも称される。この無線通信システムは、第２の無線デバイス３０４をも含んでいる。これは、無線インフラストラクチャの一部、別の無線デバイス、あるいは無線インフラストラクチャに接続された地上通信線デバイスでありうる。
【０１０１】
第１の無線デバイス３０２は、ＷｙＺＥＲエンコーダ３０６、ＷｙＺＥＲデコーダ３０８、送信機３１０、及び受信機３１２を含んでいる。第２の無線デバイス３０４は、ＷｙＺＥＲエンコーダ３２０、ＷｙＺＥＲデコーダ３２２、送信機３２４、及び受信機３２４を含んでいる。第２の無線デバイス３０４は、例えばビデオ信号のような入力信号Ｘ１を受信しうる。この入力信号Ｘ１は、ＤＳＣエンコーダ３２０に接続される。ＤＳＣエンコーダ３２０内には、予測エンコーダ３３０及びＷｙＺＥＲエンコーダ３３２が含まれている。この入力信号は、説明したＤＳＣ技術に従って符号化される。また、主ストリーム及びＷｙＺＥＲストリームは、予測エンコーダ３２０及びＷｙＺＥＲエンコーダ３３２から送信機３２４に出力される。
【０１０２】
主ストリームとＷｙＺＥＲストリームは、無線通信チャネル（これら２つのストリームを送信するために多数の論理チャネルを使用することができる）を介して、第１の無線デバイス３０２内の受信機３１２に送信される。主ストリームは、第１の無線デバイス３０２内で、受信機３１２から、ＤＳＣデコーダ３０８内の予測デコーダ３３４へ出力される。ＷｙＺＥＲストリームは、受信機３１２からＷｙＺＥＲデコーダ３３６に出力される。予測デコーダ３３４の出力  
【数４３】
2011061817.tif 000045
【０１０３】
も、ＷｙＺＥＲデコーダ３３６へ入力される。説明したＤＳＣ技術に従って、予測デコーダ及びＷｙＺＥＲデコーダは、協働して入力信号Ｘ１の再構築信号  
【数４４】
2011061817.tif 000046
【０１０４】
を生成し、出力する。
【０１０５】
上述したのと同様な方法で、第１の無線デバイスは、第１の無線デバイス３０２内のＤＳＣエンコーダ３０６に含まれる予測エンコーダ３４０及びＷｙＺＥＲエンコーダ３４２によって符号化される入力信号Ｘ２を受信する。主ストリーム及びＷｙＺＥＲストリームは、ＤＳＣエンコーダ３０６から送信機３１０に出力される。第２の無線通信デバイス３０４の受信機３２６は、ビットストリームを受信し、予測デコーダ３４４に予測ビットストリームを出力し、第２の無線通信デバイス３０４のＤＳＣデコーダ３２２のＷｙＺＥＲデコーダ３４６にＷｙＺＥＲストリームを出力する。予測デコーダ３４４の出力  
【数４５】
2011061817.tif 000047
【０１０６】
も、ＷｙＺＥＲデコーダ３４６へ入力される。説明したＤＳＣ技術に従って、予測デコーダ及びＷｙＺＥＲデコーダは、協働して入力信号Ｘ２の再構築信号  
【数４６】
2011061817.tif 000048
【０１０７】
を生成し、出力する。
【０１０８】
別の実施形態では、無線デバイスは、ＤＳＣエンコーダのみ、あるいはＤＳＣデコーダのみを含んでいるかもしれない。例えば、符号化されたデータをブロードキャストあるいは送信するが、受信しないようにデバイスが構成されていれば、このデバイスは、ブロードキャストされたデータを符号化するＤＳＣエンコーダを有するが、ＤＳＣデコーダを有さないかもしれない。なぜなら、符号化されたデータを受信しないからである。同様に、信号を受信し復号するが、符号化された信号を送信しないように構成されたデバイスは、デコーダを含むが、エンコーダを含まないかもしれない。この種のシステムの一例は、ビデオブロードキャストシステムのようなブロードキャストシステムになるだろう。ここでは、ブロードキャスタが、符号化されたデータを少なくとも１人のユーザ、一般には多くのユーザに送信するが、ユーザは、符号化されたデータをブロードキャスタに送り戻さない。この例では、ブロードキャスタ無線デバイスは、ブロードキャストされるデータを符号化するＤＳＣエンコーダを含み、ユーザ無線デバイスは、受信した符号化ブロードキャストを復号するＤＳＣデコーダを含むであろう。
【０１０９】
図４は、ＷｙＺＥＲエンコーダへのフレーム内ビット割り当てを決定する実施形態を例示するフロー図である。フローは、データブロックに分割された全てのデータフレームが調べられるブロック４０２で開始される。フローは、どのデータブロックがプロテクトされるべきかを決定するブロック４０４に進む。例えば、データブロックは、特定のブロックが失われたり、あるいは破壊された場合、個々のデータブロックの喪失が受信機におけるデータフレームの再構築に関して有する悪影響に基づいて「ランク付け」されうる。その喪失が再構築に対してより悪影響が高いブロックは、高いランクを有する。
【０１１０】
フローは、ＷｙＺＥＲエンコーダに割り当てられるデータ量が決定されるブロック４０６に進む。一般に、割り当てられた最低量のデータを副チャネルに割り当てることが望ましい。なぜなら、割り当てられるデータ量は、副チャネルを介して送信されねばらず、更なるシステムリソースを使用するからである。したがって、特定のデータブロックをプロテクトすることがどのくらい望ましいのかに依存して、より多くのデータが副チャネルに割り当てられ、副チャネルを介して送信される。例えば、データブロックが高く「ランク付け」されている場合、そのブロックに対しては、低く「ランク付け」されたブロックに対してよりも、より多くのデータが副チャネルに割り当てられ、副チャネルを介して送信される。
【０１１１】
図５は、ＷｙＺＥＲエンコーダによって使用されるソースコードブックの最大分割数を決定する実施形態を例示するフローチャートである。フローは、相関雑音推定値が決定されるブロック５０２で開始される。例えば、変換係数の相関雑音は、データブロックを表す予測ビットストリームが予測エンコーダから予測デコーダへ問題なく送信された場合に決定される。たとえブロックが問題なく送信されても、復号されたブロックは、前のブロックにおける誤りによって誤りを持つかもしれない。フローは、データブロックを表すために使用されるソースコードブックの分割数が決定されるブロック５０４に進む。ソースコードブックの分割数は、コセットとも称される。
【０１１２】
１つの実施形態では、コセットの数は、ＷｙＺＥＲストリームのヘッダにおいて、無線副チャネル通信によってＷｙＺＥＲデコーダに通知されうる。
【０１１３】
当技術分野における熟練者であれば、これら情報および信号が、種々異なった技術や技法を用いて表されることを理解するであろう。例えば、上述した記載の全体で引用されているデータ、指示、命令、情報、信号、ビット、シンボル、およびチップは、電圧、電流、電磁波、磁場または磁性粒子、光学場または光学微粒子、あるいはこれら何れかの組み合わせによって表現されうる。
【０１１４】
これら熟練者であれば、更に、ここで開示された実施形態に関連して記載された様々な説明的論理ブロック、モジュール、回路、およびアルゴリズムステップが、電子工学ハードウェア、コンピュータソフトウェア、あるいはこれらの組み合わせとして実現されることを理解するであろう。ハードウェアとソフトウェアとの相互互換性を明確に説明するために、様々に例示された部品、ブロック、モジュール、回路、およびステップが、それらの機能に関して一般的に記述された。それら機能がハードウェアとして又はソフトウェアとして実現されているかは、特定のアプリケーション及びシステム全体に課せられている設計制約に依存する。熟練した技術者であれば、各特定のアプリケーションに応じて変更した方法で上述した機能を実施しうる。しかしながら、この適用判断は、本発明の範囲から逸脱したものと解釈されるべきではない。
【０１１５】
ここで開示された実施形態に関連して記述された種々の説明的論理ブロック、モジュール、および回路は、汎用プロセッサ、デジタル信号プロセッサ（ＤＳＰ）、アプリケーションに固有の集積回路（ＡＳＩＣ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）あるいはその他のプログラマブル論理デバイス、ディスクリートゲートあるいはトランジスタロジック、ディスクリートハードウェア部品、又は上述された機能を実現するために設計された上記何れかの組み合わせを用いて実現又は実行されうる。汎用プロセッサとしてマイクロプロセッサを用いることが可能であるが、代わりに、従来技術によるプロセッサ、コントローラ、マイクロコントローラ、あるいは状態機器を用いることも可能である。プロセッサは、たとえばＤＳＰとマイクロプロセッサとの組み合わせ、複数のマイクロプロセッサ、ＤＳＰコアに接続された１つ以上のマイクロプロセッサ、またはこのような任意の構成である計算デバイスの組み合わせとして実現することも可能である。
【０１１６】
ここで開示された実施形態に関連して記述された方法やアルゴリズムのステップは、ハードウェアや、プロセッサによって実行されるソフトウェアモジュールや、これらの組み合わせによって直接的に具現化される。ソフトウェアモジュールは、ＲＡＭメモリ、フラッシュメモリ、ＲＯＭメモリ、ＥＰＲＯＭメモリ、ＥＥＰＲＯＭメモリ、レジスタ、ハードディスク、リムーバブルディスク、ＣＤ−ＲＯＭ、あるいは当該技術分野で知られているその他の型式の記憶媒体に収納されうる。好適な記憶媒体は、プロセッサがそこから情報を読み取り、またそこに情報を書き込むことができるようにプロセッサに結合される。または、記憶媒体はプロセッサに統合されうる。このプロセッサと記憶媒体は、ＡＳＩＣ内に存在することができる。ＡＳＩＣは、ユーザ端末内に存在することもできる。あるいはこのプロセッサと記憶媒体は、ユーザ端末内のディスクリート部品として存在しうる。
【０１１７】
開示された実施形態における上述の記載は、当該技術分野におけるいかなる人であっても、本発明の活用または利用を可能とするように提供される。これらの実施形態への様々な変形例もまた、当該技術分野における熟練者に対しては明らかであって、ここで定義された一般的な原理は、本発明の主旨または範囲を逸脱せずに他の実施形態にも適用されうる。このように、本発明は、ここで示された実施形態に制限されるものではなく、ここで記載された原理と新規の特徴に一致した最も広い範囲に相当するものを意図している。
【図１】
2011061817.tif 000049
【図２ａ】
2011061817.tif 000050
【図２ｂ】
2011061817.tif 000051
【図２ｃ】
2011061817.tif 000052
【図２ｄ】
2011061817.tif 000053
【図２ｅ】
2011061817.tif 000054
【図２ｆ】
2011061817.tif 000055
【図３】
2011061817.tif 000056
【図４】
2011061817.tif 000057
【図５】
2011061817.tif 000058
【図６】
2011061817.tif 000059
【図７】
2011061817.tif 000060
【手続補正書】
【提出日】平成22年11月12日(2010.11.12)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
無線通信デバイスであって、
オリジナル信号を表示する予測符号化ビットストリーム表示を受信し、前記予測符号化ビットストリームを予測復号技術に従って復号し、再構築された信号を出力するように構成された予測デコーダと、
副チャネル符号化ビットストリームと、前記再構築された信号と、前記副チャネル符号化ビットストリームを符号化するために用いられるコセットの数を含む情報とを受信するように構成された副チャネルデコーダとを備え、
前記副チャネル符号化ビットストリームは前記オリジナル信号を表示し、前記コセットの数は、前記副チャネル符号化ビットストリームの符号化中に計算された相関推定値に基づき、前記副チャネルデコーダは更に、前記副チャネル符号化ビットストリームを前記コセットの数に基づいて、副チャネル復号技術に従って復号し、前記復号された副チャネル符号化ビットストリームと前記再構築された信号を合成して、前記オリジナル信号の最終的な再構築を出力するように構成された無線通信デバイス。
【請求項２】
前記予測符号化ビットストリームは、主通信チャネルを介して受信される請求項１に記載の無線通信デバイス。
【請求項３】
前記副チャネル符号化ビットストリームは、副チャネル通信チャネルを介して受信される請求項１に記載の無線通信デバイス。
【請求項４】
前記予測復号技術は、ＭＰＥＧ−４規格に従う技術である請求項１に記載の無線通信デバイス。
【請求項５】
前記予測復号技術は、Ｈ．２６ｘ規格に従う技術である請求項１に記載の無線通信デバイス。
【請求項６】
前記副チャネル復号技術は、Ｗｙｎｅｒ  Ｚｉｖ技術を備える請求項１に記載の無線通信デバイス。
【請求項７】
前記オリジナル信号はビデオ信号である請求項１に記載の無線通信デバイス。
【請求項８】
前記オリジナル信号は、内部符号化されたデータブロックと外部符号化されたデータブロックとを備える請求項１に記載の無線通信デバイス。
【請求項９】
Ｗｙｎｅｒ  Ｚｉｖ技術が前記外部符号化されたデータブロックに適用される請求項８に記載の無線通信デバイス。
【請求項１０】
前記副チャネルデコーダは、予め定めた数のコセットを用いて前記副チャネル符号化ビットストリームを復号する請求項１に記載の無線通信デバイス。
【請求項１１】
前記予め定めた数のコセットは、前記副チャネル符号化ビットストリームのヘッダ内に含まれる請求項１０に記載の無線通信デバイス。
【請求項１２】
データを復号する方法であって、
オリジナル信号を表示する予測符号化ビットストリームを受信することと、
前記予測符号化ビットストリームを予測復号技術に従って復号し、再構築された信号を出力することと、
副チャネル符号化ビットストリームと、前記再構築された信号と、前記副チャネル符号化ビットストリームを符号化するために用いられるコセットの数を含む情報とを受信することであって、前記副チャネル符号化ビットストリームは前記オリジナル信号を表示し、前記コセットの数は、前記副チャネル符号化ビットストリームの符号化中に計算された相関推定値に基づく、ことと、
前記副チャネル符号化ビットストリームを前記コセットの数に基づいて、副チャネル復号技術に従って復号し、前記復号された副チャネルビットストリームと前記再構築された信号を合成して、前記オリジナル信号の最終的な再構築を出力することと
を備える復号方法。
【請求項１３】
前記予測復号技術は、ＭＰＥＧ−４規格に従う技術である請求項１２に記載の復号方法。
【請求項１４】
前記予測復号技術は、Ｈ．２６ｘ規格に従う技術である請求項１２に記載の復号方法。
【請求項１５】
前記副チャネル復号技術は、Ｗｙｎｅｒ  Ｚｉｖ技術を備える請求項１２に記載の復号方法。
【請求項１６】
前記オリジナル信号はビデオ信号である請求項１２に記載の復号方法。
【請求項１７】
前記オリジナル信号は、内部符号化されたデータブロックと外部符号化されたデータブロックとを備える請求項１２に記載の復号方法。
【請求項１８】
Ｗｙｎｅｒ  Ｚｉｖ技術が、前記外部符号化されたデータブロックに適用される請求項１７に記載の復号方法。
【請求項１９】
前記副チャネルデコーダは、予め定めた数のコセットを用いて前記副チャネルビットストリームを復号する請求項１２に記載の復号方法。
【請求項２０】
前記予め定めた数のコセットは、前記副チャネル符号化ビットストリームのヘッダ内に含まれる請求項１９に記載の復号方法。
【請求項２１】
請求１２乃至２０のうちの何れかに記載の方法をコンピュータに実行させるためのプログラムを記録したコンピュータ読取可能な記録媒体。
【請求項２２】
前記第１のビットストリームは、予測符号化規格に従って符号化される請求項２１に記載の方法をコンピュータに実行させるためのプログラムを記録したコンピュータ読取可能な記録媒体。
【請求項２３】
前記第２のビットストリームは、副チャネル符号化規格に従って符号化される請求項２１に記載の方法をコンピュータに実行させるためのプログラムを記録したコンピュータ読取可能な記録媒体。
【請求項２４】
無線通信デバイスであって、
オリジナル信号を表示する第１のビットストリームを受信する手段であって、前記第１のビットストリームが予測符号化ビットストリームである、手段と、
前記第１のビットストリームを予測復号技術に従って復号し、再構築された信号を出力する手段と、
第２のビットストリームと、前記再構築された信号と、前記第２のビットストリームを符号化するために用いられるコセットの数を含む情報とを受信する手段であって、前記第２のビットストリームはオリジナル信号を表示し、前記コセットの数は、前記第２のビットストリームの符号化中に計算された相関推定値に基づく、手段と、
前記第２のビットストリームを副チャネル復号技術に従って復号し、前記復号された第２のビットストリームと前記再構築された信号を合成して、前記オリジナル信号の最終的な再構築を出力する手段と
を備える無線通信デバイス。
【外国語明細書】
2011061817000001.pdf