(57)【特許請求の範囲】
【請求項１】
受信した信号からダウンミックス信号と付加情報とを抽出するステップと、
前記付加情報から空間情報と補償パラメータとを抽出するステップと、
前記ダウンミックス信号と前記空間情報とに基づいてマルチチャンネルオーディオ信号を生成するステップと、
前記補償パラメータに基づいて前記マルチチャンネルオーディオ信号を補償するステップと、を有し、
前記補償パラメータは、前記ダウンミックス信号のエンベロープと、前記マルチチャンネルオーディオ信号の前記ダウンミックス信号を生成するために用いられる複数チャンネル分のエンベロープとの比を使用することによって算出されることを特徴とするマルチチャンネルオーディオ信号の復号化方法。
【請求項２】
前記空間情報は、チャンネルレベル差、チャンネル間相互相関、チャンネル予測係数のうち、少なくともいずれか一つである、請求項１に記載の復号化方法。
【請求項３】
受信した信号から符号化されたダウンミックス信号と付加情報とを抽出するデマルチプレクサと、
前記符号化されたダウンミックス信号を復号化することによってダウンミックス信号を生成するコアデコーダと、
前記付加情報から空間情報と補償パラメータとを抽出するパラメータデコーダと、
前記ダウンミックス信号と前記空間情報とに基づいてマルチチャンネルオーディオ信号を生成し、前記補償パラメータを用いて前記マルチチャンネルオーディオ信号を補償するマルチチャンネル合成部と、を有し、
前記補償パラメータは、前記ダウンミックス信号のエンベロープと、前記マルチチャンネルオーディオ信号の前記ダウンミックス信号を生成するために用いられる複数チャンネル分のエンベロープとの比を使用して計算されることを特徴とするオーディオ信号の復号化装置。
【請求項４】
マルチチャンネルオーディオ信号の複数チャンネルの信号とダウンミックス信号とに基づいて空間情報を算出するステップと、
前記ダウンミックス信号のエンベロープと、前記マルチチャンネルオーディオ信号の前記ダウンミックス信号を生成するために用いられる前記の複数チャンネル分のエンベロープとの比を使用することによって、補償パラメータを算出するステップであって、前記補償パラメータは、デコーディング端末で前記ダウンミックス信号と前記空間情報とに基づいて生成される前記マルチチャンネルオーディオ信号のチャンネルを補償する、補償パラメータを算出するステップと、
を有することを特徴とする符号化方法。
【請求項５】
マルチチャンネルオーディオ信号の複数チャンネルの信号とダウンミックス信号とに基づいて空間情報を算出する空間情報算出部と、
前記マルチチャンネルオーディオ信号の前記ダウンミックス信号を生成するために用いられる前記の複数チャンネル分のエンベロープと、前記ダウンミックス信号のエンベロープとの比を使用することによって、補償パラメータを算出し、前記補償パラメータは、デコーディング端末で前記ダウンミックス信号と前記空間情報とに基づいて生成される前記マルチチャンネルオーディオ信号のチャンネルを補償する補償パラメータ算出部と、
前記空間情報、前記補償パラメータ及び前記ダウンミックス信号を符号化し、前記符号化の結果を結合することによって、ビットストリームを生成するビットストリーム生成部と、
を有することを特徴とする符号化装置。
【請求項６】
請求項１に記載のステップをコンピュータが実行するためのプログラムが記録されているコンピュータ読取可能記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、符号化及び復号化方法とその装置に関し、より詳しくは、ダウンミックス信号を補償できる付加情報を使用してマルチチャンネルオーディオ信号を符号化及び復号化できる符号化及び復号化方法とその装置に関する。
【背景技術】
【０００２】
一般的なマルチチャンネルオーディオ信号符号化方法では、各々のチャンネル別信号を全て符号化する代わりに、マルチチャンネルオーディオ信号をモノあるいはステレオ信号にダウンミックスした信号を空間情報と共に符号化する方式を使用する。この際、空間情報はダウンミックス信号から本来のマルチチャンネルオーディオ信号を生成することに使われる。
【０００３】
図１は、一般的なマルチチャンネルオーディオ信号符号化／復号化装置の一例に対するブロック図である。図１を参照すると、オーディオ信号エンコーダは、マルチチャンネルオーディオ信号をステレオあるいはモノ信号にダウンミックスしたダウンミックス信号を生成するダウンミックスモジュール、及び空間情報を生成する空間パラメータ予測モジュールを具備する。使用環境によってはダウンミックス信号を外部で加工したアーティスティックダウンミックス信号（Artistic Downmix）にて入力を受けることもある。オーディオ信号デコーダは転送された空間情報を解析した後、これに基づいてダウンミックス信号で本来のマルチチャンネルオーディオ信号を生成する。
【０００４】
ところが、オーディオ信号エンコーダでダウンミックス信号を生成する場合、あるいはアーティスティックダウンミックス信号を生成する場合、互いに異なるチャンネルの信号を合算する過程で信号レベルの減衰が発生する可能性がある。例えば、信号レベルが各々Ｌ１及びＬ２である２つのチャンネルを合算する場合、２つのチャンネルの信号が完壁に重畳されず、一部相殺されて、２つのチャンネルを合算したチャンネルのレベルＤＬ１２がＬ１+Ｌ２より小さくなる場合である。
【０００５】
このような場合、減衰されたダウンミックス信号のレベルは、復号化過程で信号歪みをもたらす可能性がある。例えば、空間情報の中で、相互チャンネル間のレベル差を表すＣＬＤ（チャンネルレベル差）の場合、ＣＬＤ値に相互チャンネル間のレベル関係は分かるが、これらのチャンネルを合算して生成したダウンミックス信号のレベルが減衰されている場合は、復号化された信号は本来の信号より大きさが減ることになる。
【０００６】
このような現象により、復号化されたマルチチャンネルオーディオ信号が特定周波数で信号が上昇されるか、抑制される可能性があり、これによって、全体的に音質の低下が発生することになる。また、信号の一部の相殺により生じるレベル減衰の程度は周波数領域によって異なるので、オーディオ信号エンコーダとデコーダを経ると、周波数によって歪みの程度が変化することになる。したがって、このような現象を防止するために、ダウンミックス信号の特定周波数領域のエネルギーを変化させる方法では解決が容易でない。
【０００７】
また、使用環境によっては必要とされる全ての空間情報が転送できない場合があるので、このような場合、復号化されたマルチチャンネルオーディオ信号の音質が低下することがある。
【発明の開示】
【発明が解決しようとする課題】
【０００８】
本発明の目的は、ダウンミックス信号を補償できる付加情報を使用して符号化する符号化方法及びその装置を提供することにある。
【０００９】
本発明の他の目的は、ダウンミックス信号を補償できる付加情報を使用して符号化されたマルチチャンネルオーディオ信号を復号化する復号化方法とその装置を提供することにある。
【課題を解決するための手段】
【００１０】
上記の目的を達成するための本発明に係る復号化方法は、受信した信号からダウンミックス信号と付加情報とを抽出するステップと、上記付加情報と上記ダウンミックス信号から空間情報を生成するステップと、上記ダウンミックス信号と上記空間情報とを用いてマルチチャンネルオーディオ信号を生成するステップと、を含む。
【００１１】
また、上記の目的を達成するための本発明に係る復号化方法は、受信した信号からダウンミックス信号を生成するステップと、上記ダウンミックス信号から空間情報を推定して生成するステップと、上記ダウンミックス信号と上記空間情報とを用いて、マルチチャンネルオーディオ信号を生成するステップと、を含む。
【００１２】
一方、本発明に係る復号化装置は、受信した信号から符号化されたダウンミックス信号と付加情報とを抽出するデマルチプレクサと、上記ダウンミックス信号を復号化してダウンミックス信号を生成するコアエンコーダと、上記ダウンミックス信号と同期させるためにダウンミックス信号に関するデータを整列させるフレーム化部と、上記付加情報と上記フレーム化部で整列されたダウンミックス信号から空間情報を推定して生成する空間情報推定部と、上記ダウンミックス信号と上記空間情報とを用いてマルチャンネルオーディオ信号を生成するマルチャンネル合成部と、を含む。
【００１３】
本発明によると、符号化されたダウンミックス信号を復号化してダウンミックス信号を生成するコアエンコーダと、上記ダウンミックス信号と同期させるためにダウンミックス信号に関するデータを整列させるフレーム化部と、上記フレーム化部で整列されたダウンミックス信号から空間情報を推定して生成する空間情報推定部と、上記ダウンミックス信号と上記空間情報とを用いてマルチチャンネルオーディオ信号を生成するマルチャンネル合成部と、を含む複合化装置が提供される。
【００１４】
また、本発明によると、マルチチャンネルオーディオ信号とダウンミックス信号とを用いて空間情報を算出するステップと、上記算出した空間情報で選択された情報と、上記ダウンミックス信号を符号化して結合したビットストリームを生成するステップと、を含む符号化方法が提供される。
【００１５】
上記の目的を達成するために、本発明では、上記の方法をコンピュータで実行させるためのプログラムを記録したコンピュータで読取可能な記録媒体を提供する。
【発明の効果】
【００１６】
本発明によると、入力を受けたマルチチャンネルオーディオ信号とダウンミックスされた信号のレベルなどを比較した結果により算出された補償パラメータを付加情報に使用して、復号化されたマルチチャンネルオーディオ信号を補償することができる。また、空間情報の一部を付加情報に使用して転送された付加情報とダウンミックス信号を用いて追加的な空間情報を生成して使用することもできる。したがって、復号化されたマルチチャンネルオーディオ信号が特定周波数で信号が歪曲されることを防止することができ、復号化されたマルチチャンネルオーディオ信号の全体的な音質を向上させることができる。
【発明を実施するための最良の形態】
【００１７】
以下、図面を参照しつつ本発明をより詳細に説明する。
【００１８】
本発明に係る符号化及び復号化方法とその装置は、基本的にマルチチャンネルオーディオ信号の処理過程に適用されるが、必ずしもこれに限定されず、本発明に係る条件を満たす他の信号の処理過程に適用可能である。
【００１９】
図２は、本発明の一実施形態に係る符号化装置のブロック図である。図２を参照すると、本実施形態に係る符号化装置は、ダウンミックス部１１０、補償パラメータ算出部１２０、空間情報算出部１３０、及びビットストリーム生成部１７０を含む。ビットストリーム生成部１７０は、コアエンコーダ１４０、パラメータエンコーダ１５０、及びマルチプレクサ１６０を含む。
【００２０】
ダウンミックス部１１０は、マルチチャンネルオーディオ信号をモノ信号あるいはステレオ信号にダウンミックスしたダウンミックス信号を生成する。補償パラメータ算出部１２０は、ダウンミックス部１１０で生成されるか、あるいはアーティスティックダウンミックスにより入力を受けたダウンミックス信号と、ダウンミックス信号の生成に使われたマルチチャンネルオーディオ信号との間のレベルサイズを比較した結果、あるいはエンベロープを比較した結果などにより、ダウンミックス信号の補償のために使われる補償パラメータを算出する。空間情報算出部１３０は、マルチチャンネルオーディオ信号の空間情報を算出する。
【００２１】
ビットストリーム生成部１７０において、コアエンコーダ１４０はダウンミックス信号を符号化して符号化されたダウンミックス信号を生成し、パラメータエンコーダ１５０は、補償パラメータと空間情報とを符号化して付加情報を生成する。そして、マルチプレクサ１６０は、符号化されたダウンミックス信号と付加情報とを結合したビットストリームを生成する。
【００２２】
このような構成において、ダウンミックス部１１０は、入力されるマルチチャンネルオーディオ信号をダウンミックスしてダウンミックス信号を生成する。例えば、５個のチャンネルを有するマルチチャンネルオーディオ信号をステレオ信号にダウンミックスする場合、ダウンミックスチャンネル１は、マルチチャンネルオーディオ信号で１、３、４チャンネルの成分を組合せて算出することができ、ダウンミックスチャンネル２は、チャンネル２、３、５の成分を組合せて算出することができる。
【００２３】
ダウンミックス信号が生成されると、補償パラメータ算出部１２０は、ダウンミックス信号の補償に使われる補償パラメータを算出する。この際、補償パラメータは多様な方法により算出可能であり、その一例として次のような方法により算出することもできる。
【００２４】
５個のチャンネルを有するマルチチャンネルオーディオ信号において、特定周波数バンドで５個のチャンネルの信号レベルが各々Ｌ１、Ｌ２、Ｌ３、Ｌ４、Ｌ５とし、ダウンミックスチャンネル１は１、３、４チャンネルの成分を有し、ダウンミックスチャンネル２は２、３、５チャンネルの成分を有する場合、ダウンミックスチャンネル１の信号レベルＤＬ１３４と、ダウンミックスチャンネル２の信号レベルＤＬ２３５は、次の数式のような関係を有することになる。
【００２５】
〔式１〕
ＤＬ１３４≦Ｌ１＋ｇ３＊Ｌ３＋ｇ４＊Ｌ４
ＤＬ２３５≦Ｌ２＋ｇ３＊Ｌ３＋ｇ５＊Ｌ５
【００２６】
ここで、ｇ３、ｇ４、ｇ５はダウンミックス時に発生する利得を表す。
【００２７】
復号化過程において、このようなダウンミックス信号からまたマルチチャンネルオーディオ信号に生成する場合、生成された５個のチャンネル信号のレベルＬ１’、Ｌ２’、Ｌ３’、Ｌ４’、Ｌ５’は、各々本来の信号レベルであるＬ１、Ｌ２、Ｌ３、Ｌ４、Ｌ５と等しくなることが理想的である。したがって、このために、ダウンミックスチャンネル１の補償パラメータＣＦ１２３、及びダウンミックスチャンネル２の補償パラメータＣＦ２３５を次の通り算出することができる。
【００２８】
〔式２〕
ＣＦ１３４＝（Ｌ１＋ｇ３＊Ｌ３＋ｇ４＊Ｌ４）／ＤＬ１３４
ＣＦ２３５＝（Ｌ２＋ｇ３＊Ｌ３＋ｇ５＊Ｌ５）／ＤＬ２３５
【００２９】
上記の例では、転送されるデータ量の減少のために、ダウンミックスチャンネル別に補償パラメータを算出したが、補償パラメータはマルチチャンネルオーディオ信号の各チャンネル別に算出することもできる。即ち、ダウンミックス信号と各チャンネルのエネルギーあるいはエンベロープの比で算出することも可能である。
【００３０】
補償パラメータの生成と共に、空間情報算出部１３０は空間情報を算出する。空間情報には、ＣＬＤ（チャンネルレベル差：Channel Level Difference）、ＩＣＣ（チャンネル間相互相関：Inter-channel Cross Correlation）、ＣＰＣ（チャンネル予測係数：Channel Prediction Coefficient）のような情報が含まれる。
【００３１】
コアエンコーダ１４０はダウンミックス信号を符号化し、パラメータエンコーダ１５０は空間情報と補償パラメータとを符号化して付加情報を生成する。この際、補償パラメータは既存のＣＬＤ符号化に使われるのと同様な方式により符号化することができ、あるいは異なる方式により符号化することができる。例えば、補償パラメータは、時間あるいは周波数ディファレンシャル符号化、グループＰＣＭ符号化、パイロット基盤符号化、及びハフマンコードブックなどを用いて符号化することができる。マルチプレクサ１６０は、このようにして生成され、符号化されたダウンミックス信号と付加情報とを結合してビットストリームを生成する。このような過程により、ダウンミックス信号のレベル減衰を補償する補償パラメータが付加情報として含まれたビットストリームを生成することができる。
【００３２】
一方、レベル補償を必要としない場合は、補償パラメータと関連したフラグを‘０’とすることにより、転送される付加情報のビットレートを低減させることができる。また、補償パラメータＣＦ１３４、ＣＦ２３５の値にあまり差がない場合、２つの補償パラメータを転送する代わりに、一つの代表値を有する補償パラメータを使用することもできる。また、補償パラメータが時間によって変化せず、一定の値に維持された場合、特定フラグを通じて以前の値を使用するという情報を与えることもできる。
【００３３】
そして、補償パラメータは、入力を受けたマルチチャンネルオーディオ信号とダウンミックス信号との間のレベルを比較した結果を用いて設定されるが、これと異なる方法により補償パラメータを設定するか、推定して使用することができる。即ち、補償パラメータは本来の信号とダウンミックス信号との間のレベル減衰が生じることをモデリングした値であるので、上記した実施形態のように、レベル比だけでなく、如何なるウェーブ形態や、線形／非線形な特性を有する利得補償値で表現することができる。このように、数学的にモデリングされる値に補償パラメータを使用する場合、はるかに少ないビットでも効率的に転送及び補償が可能になる。
【００３４】
図３は、本発明の一実施形態に係る復号化装置に対するブロック図である。図３を参照すると、本実施形態に係る復号化装置は、デマルチプレクサ３１０、コアデコーダ３２０、パラメータデコーダ３３０、及びマルチチャンネル合成部３４０を含む。
【００３５】
デマルチプレクサ３１０は、伝送を受けたビットストリームで付加情報と符号化されたダウンミックス信号とを各々分離する。コアデコーダ３２０は、デマルチプレクサ３１０から分離された符号化されたダウンミックス信号を復号化してダウンミックス信号を生成する。
【００３６】
パラメータデコーダ３３０は、デマルチプレクサ３１０から分離された付加情報から空間情報と補償パラメータとを生成する。そして、マルチチャンネル合成部３４０は、ダウンミックス信号、空間情報、及び補償パラメータを用いてマルチチャンネルオーディオ信号を生成する。
【００３７】
図４は、本発明の一実施形態に係る復号化装置の動作方法の説明に提供されるフローチャートである。図３及び図４を参照して、本発明の一実施形態に係る復号化装置の動作方法を説明すると、次の通りである。
【００３８】
まず、マルチチャンネルオーディオ信号のビットストリームを受信すると（Ｓ４００）、デマルチプレクサ３１０は、受信したビットストリームで符号化されたダウンミックス信号と付加情報とを各々分離する（Ｓ４０５）。コアデコーダ３２０は、符号化されたダウンミックス信号を復号化してダウンミックス信号を生成する（Ｓ４１０）。そして、パラメータデコーダ３３０は、付加情報データを復号化して補償パラメータ及び空間情報を生成する（Ｓ４２０）。
【００３９】
マルチチャンネル合成部３４０では、空間情報とダウンミックス信号とを用いてマルチチャンネルオーディオ信号を生成し（Ｓ４３０）、生成したマルチチャンネルオーディオ信号を補償パラメータを使用して補償する（Ｓ４４０）。この際、マルチチャンネル合成部３４０は、ダウンミックス信号と空間情報とを使用して復号化されたチャンネルの各エネルギーがＬ１’、Ｌ２’、Ｌ４’、及びＬ５’のように表される場合、次の通り補償パラメータを使用して各チャンネル出力を補償する。
【００４０】
〔式３〕
Ｌ１″＝Ｌ１′＊ＣＦ１３４
Ｌ２″＝Ｌ２′＊ＣＦ２３５
Ｌ３″＝Ｌ３′＊（ＣＦ１２４＋ＣＦ２３５）／２
Ｌ４″＝Ｌ４′＊ＣＦ１３４
Ｌ５″＝Ｌ５′＊ＣＦ２３５
【００４１】
このような過程により、空間情報と共に転送された補償パラメータを用いてマルチチャンネルオーディオ信号の復号化過程に使用して復号化されたマルチチャンネルオーディオ信号を補償することで、特定周波数帯域で信号歪みを防止することができる。
【００４２】
また、前述したような補償パラメータを使用して各チャンネル出力を補償することは一例であり、本発明は前述したような補償パラメータに限定されるものではない。例えば、各補償パラメータとして各チャンネルのエンベロープを転送する場合、空間情報を転送せず、各チャンネルのエンベロープ情報を使用して空間情報に代えて構成することもできる。空間情報が転送されない場合であっても、ダウンミックスされた２つのチャンネル以上の信号のみを用いて復号化装置で疑似空間情報を抽出して、これを用いて復号化過程を実行することもできる。
【００４３】
図５は、本発明の他の実施形態に係る復号化装置に関するブロック図である。図５では、空間情報を付加情報として使用せず、ダウンミックス信号のみを用いてマルチチャンネルオーディオ信号を生成する場合について説明する。
【００４４】
図５を参照すると、本実施形態に係る復号化装置は、コアデコーダ５１０、フレーム化部５２０、空間情報推定部５３０、及びマルチチャンネル合成部５４０を含む。
【００４５】
コアデコーダ５１０は、伝送を受けたビットストリームを復号化してダウンミックス信号を生成してフレーム化部５２０に伝達する。そのダウンミックス信号はPrologicやLogic7等を用いて得られるマトリクスタイプのダウンミックス信号としてもよいが、必ずしもこれに限定されるものではない。
【００４６】
フレーム化部５２０は、コアデコーダ５１０から出力されたダウンミックスされた信号に対し、空間オーディオ符号化（ＳＡＣ，spatial audio cording）フレーム単位で同期させることができるようにデータを整列する。このようなフレーム化過程において、解析フィルタバンクを用いてコアデコーダ５１０によって得られるダウンミックス信号に基づいて直交ミラーフィルタ（ＱＭＦ）及びハイブリッドバンドドメイン信号が生成される場合、ハイブリッドバンドドメイン信号は直ちに復号化過程に使用することができるので、フレーム化部５２０は、ハイブリッドバンドドメイン信号をマルチチャンネル合成部５４０に送信することも可能である。
【００４７】
空間情報推定部５３０は、フレーム化部５２０で整列されたダウンミックス信号のみを用いて、ＣＬＤ、ＩＣＣ、ＣＰＣなどの空間情報を生成する。空間情報推定部５３０は、ＳＡＣフレームに合せて空間情報を生成するが、この場合、フレーム長さだけのダウンミックス信号を集めて処理することもでき、サンプル単位でＰＣＭサンプルに対応する空間情報を生成することもできる。空間情報推定部５３０で生成される空間情報は転送するデータでないため、量子化などの圧縮のための処理過程は不要であるので、可能な限り多くの情報を使用することが有利である。
【００４８】
そして、マルチチャンネル合成部５４０は、フレーム化部５２０を通じて転送されるダウンミックス信号と空間情報推定部５３０を通じて転送される空間情報とを用いてマルチチャンネルオーディオ信号を生成する。
【００４９】
このような構成と動作により、空間情報を付加情報として転送する一般的な方式にビット率を低めることができ、既存のマトリクスタイプのダウンミックスされたコンテンツに対しても同様な方法によりマルチチャンネル信号を生成することができる。
【００５０】
図６は、本発明の更に他の実施形態に係る復号化装置に関するブロック図である。図６では、転送されたビットストリームにダウンミックスオーディオ信号だけでなく、空間情報を含んでいる場合、転送された空間情報を参照して復号化装置で追加的な空間情報を生成し、これを復号化に使用する場合を説明する。
【００５１】
図６を参照すると、本実施形態に係る復号化装置は、デマルチプレクサ６１０、コアデコーダ６２０、フレーム化部６３０、空間情報推定部６４０、マルチチャンネル合成部６５０、及び結合部６６０を含む。
【００５２】
デマルチプレクサ６１０は、伝送されたビットストリームで空間情報と符号化されたダウンミックス信号とを各々分離する。コアデコーダ６２０は、デマルチプレクサ６１０から分離された符号化されたダウンミックス信号を復号化してダウンミックス信号を生成する。
【００５３】
フレーム化部６３０はコアデコーダ６２０から出力されたダウンミックスされた信号に対し、ＳＡＣフレーム単位の同期を合せることができるようにデータを整列する。空間情報推定部６４０は、転送された空間情報を用いて追加的な空間情報を推定して生成する。結合部６６０は、転送された空間情報と空間情報推定部６４０で生成した空間情報とを結合してマルチチャンネル合成部６５０に伝達する。そして、マルチチャンネル合成部６５０は、ダウンミックス信号と空間情報とを用いてマルチチャンネルオーディオ信号を生成する。
【００５４】
このような構成により、転送された空間情報とダウンミックスされた信号などから推定された空間情報を全て利用することができる。この際、転送された空間情報によって、次のような多様な形態の応用が可能である。
【００５５】
まず、足りない時間／周波数解像度を有する空間情報が転送された場合であって、空間情報に対する転送ビット率が低くて、空間情報の周波数解像度（データバンド数）が低い場合や、空間情報の転送頻度が低い場合、この情報とダウンミックスＰＣＭ信号とを全て用いて省略された情報を見付けて、これを用いてマルチチャンネル信号の品質を向上させることができる。例えば、転送された空間情報の周波数解像度が５データバンドの場合、空間情報推定部６４０でダウンミックス信号を参照して２８データバンドの信号に作り出すか、あるいは転送されたスロット数が２つだけである場合、やはりダウンミックス信号を参照して８個のスロットに補間することができる。
【００５６】
また、ＣＬＤ、ＩＣＣ、ＣＰＣのうち、一部データのみ転送された場合、例えばビット率を低めるために、空間情報のうちのＩＣＣのみを転送し、ＣＬＤやＣＰＣは転送しない場合、空間情報推定部６４０でＣＬＤとＣＰＣを推定して生成することによって、マルチチャンネル信号の品質を向上させることができる。同様に、ＣＬＤのみ転送された場合、ＩＣＣを推定して使用する等の方法が可能である。
【００５７】
そして、ＯＴＴ（One-To-Two）／ＴＴＴ（Two-To-Three）ボックスのうちの一方を用いて、符号化装置が入力マルチチャンネル信号をダウンミックス信号にダウンミックスする。一部のＯＴＴあるいはＴＴＴボックスに対応する空間情報のみ受信した場合、空間情報推定部６４０は、推定により、他のＯＴＴあるいはＴＴＴボックスに対応する空間情報を生成し、受信した空間情報及び生成された空間情報に基づいて、マルチチャンネル信号を生成することができる。この場合、空間情報の推定は転送された空間情報に対応するステップまでＳＡＣ復号化を遂行した後、実行することが好ましい。例えば、２つのチャンネル（即ち、左（Ｌ）及び右（Ｒ）チャンネル）のダウンミックス信号とＴＴＴボックスに対応する空間情報のみ受信した場合、受信したダウンミックス信号のＬ及びＲチャンネルに基づいて空間情報推定部６４０は、左（Ｌ）、中央（Ｃ）、右（Ｒ）チャンネルの信号を生成することが可能である。
【００５８】
Ｌ、Ｃ、Ｒ情報まで生成された信号に対し、空間情報推定部６４０で残りのＯＴＴボックスに対応できる空間情報を生成し、これを利用したマルチチャンネル合成部６５０でマルチチャンネルオーディオ信号を生成して、出力チャンネル数が多い場合に出力チャンネル数に対応する信号を生成することが可能である。例えば、５２５フォーマットのビットストリームが７チャンネル再生可能な復号器の入力に入った場合、ＳＡＣ復号化された５チャンネル信号（ハイブリッドドメイン）を先に生成した後、生成された信号に対する空間情報を推定過程を通じて７チャンネルに拡張するために必要とされる空間情報を生成し、追加復号化を実行して一つのビットストリームが提供可能なチャンネル数以上の信号を生成することができる。
【００５９】
一方、本発明は、コンピュータで読取可能な記録媒体にコンピュータが読取できるコードとして実現することが可能である。コンピュータが読取できる記録媒体は、コンピュータシステムにより読取り可能なデータが格納される全ての種類の記録装置を含む。コンピュータが読取できる記録媒体の例には、ＲＯＭ、ＲＡＭ、ＣＤ−ＲＯＭ、磁気テープ、フロッピー（登録商標）ディスク、光データ格納装置などがあり、またインターネットを通じた転送のようなキャリアウェーブの形態で実現される場合も含む。また、コンピュータが読取できる記録媒体はネットワークにより連結されたコンピュータシステムに分散されて、分散方式によりコンピュータが読取できるコードが格納され、実行することができる。
【００６０】
また、以上では、本発明の好ましい実施形態に対して図示及び説明をしたが、本発明は前述した特定の実施形態に限定されず、請求範囲で請求する本発明の要旨を逸脱することなく、当該発明が属する技術分野で通常の知識を有する者により多様な変形実施が可能であることは勿論であり、このような変形実施は本発明の技術的思想や展望から個別的に理解されてはならない。
【００６１】
本発明は、マルチチャンネルオーディオ信号の符号化及び復号化過程などに使われて、付加情報を用いてダウンミックス信号を補償するか、追加的空間情報を生成して使用することで、復号化されたマルチチャンネルオーディオ信号の音質の低下などを防止することができる。
【図面の簡単な説明】
【００６２】
【図１】一般的なマルチチャンネルオーディオ信号符号化／復号化装置の一例を示すブロック図である。
【図２】本発明の一実施形態に係る符号化装置のブロック図である。
【図３】本発明の一実施形態に係る復号化装置のブロック図である。
【図４】本発明の一実施形態に係る復号化装置の動作方法の説明に用いるフローチャートである。
【図５】本発明の他の実施形態に係る復号化装置のブロック図である。
【図６】本発明の更に他の実施形態に係る復号化装置のブロック図である。
【図１】
0005507844.tif 000002
【図２】
0005507844.tif 000003
【図３】
0005507844.tif 000004
【図４】
0005507844.tif 000005
【図５】
0005507844.tif 000006
【図６】
0005507844.tif 000007