(57)【要約】  制作時、少なくとも１つのオーディオ信号をそのチャンネル再構成のための指令を導き出すために処理する。この少なくとも１つのオーディオ信号及び指令は、保存又は伝達される。消費時、この少なくとも１つのオーディオ信号を、前記指令に従いチャンネル再構成する。チャンネル再構成には、アップミキシング、ダウンミキシング、及び空間位置再構成が含まれる。制作時にチャンネル再構成のための指令を決定することにより、消費時の処理資源が減少する。
2008543227.tif 000002
【特許請求の範囲】
【請求項１】
各オーディオ信号が１つのオーディオチャンネルを表現する、少なくとも１つのオーディオ信号、又はこの少なくとも１つのオーディオ信号と同じ数のチャンネルを持つ少なくとも１つのオーディオ信号を修正したものを処理するための方法であって、
少なくとも１つのオーディオ信号又はそれを修正したものをチャンネル再構成するための指令を導き出すステップであって、導き出したものにより受け取られるオーディオ情報のみがこの少なくとも１つのオーディオ信号又はそれを修正したものであることを特徴とするステップと、
（１）前記少なくとも１つのオーディオ信号又はそれを修正したもの、及び（２）前記チャンネル再構成するための指令とを含む出力を出力するステップであって、このようなチャンネルの再構成が、前記チャンネル再構成するための指令の結果である場合は、少なくとも１つのオーディオ信号又はそれを修正したもののチャンネルの再構成は含まれないことを特徴とするステップと、
を具備する方法。
【請求項２】
前記少なくとも１つのオーディオ信号及びそれを修正したものは、それぞれ２以上のオーディオ信号であることを特徴とする請求項１に記載の方法。
【請求項３】
デコードされるとき、前記修正した２以上のオーディオ信号は、前記修正していない２以上のオーディオ信号のデコーディングに関して、改良したマルチチャンネルデコーディングを提供することを特徴とする請求項２に記載の方法。
【請求項４】
前記オーディオ信号は、ステレオ音響のペアとなったオーディオ信号であり、前記修正したものは、前記ステレオ音響のペアとなったオーディオ信号をバイノーラル形式にしたものであることを特徴とする請求項２に記載の方法。
【請求項５】
前記修正した２以上のオーディオ信号は、マトリックスデコーダでデコードされるとき、改良したマルチチャンネルデコーディングを提供することを特徴とする請求項３に記載の方法。
【請求項６】
前記マトリックスデコーダは、能動マトリックスデコーダであることを特徴とする請求項５に記載の方法。
【請求項７】
前記修正した２以上のオーディオ信号は、マトリックスエンコードで修正したものであることを特徴とする請求項２、請求項３、請求項５又は請求項６のいずれか１項に記載の方法。
【請求項８】
前記チャンネル再構成するための指令を導き出すステップでは、アップミックスするための指令によりアップミックスしたとき、結果得られたオーディオ信号の数が、前記少なくとも１つのオーディオ信号又はそれを修正したものからなるオーディオ信号の数より大きくなるように、前記少なくとも１つのオーディオ信号又はそれを修正したものをアップミックスするための指令を導き出すことを特徴とする請求項１乃至請求項７のいずれか１項に記載の方法。
【請求項９】
前記少なくとも１つのオーディオ信号及びそれを修正したものは、それぞれ２以上のオーディオ信号であり、前記チャンネル再構成するための指令を導き出すステップでは、ダウンミックスするための指令によりダウンミックスしたとき、結果得られたオーディオ信号の数が、前記２以上のオーディオ信号からなるオーディオ信号の数より小さくなるように、前記２以上のオーディオ信号をダウンミックスするための指令を導き出すことを特徴とする請求項１乃至請求項７のいずれか１項に記載の方法。
【請求項１０】
前記少なくとも１つのオーディオ信号及びそれを修正したものは、それぞれ２以上のオーディオ信号であり、前記チャンネル再構成するための指令を導き出すステップでは、再構成するための指令により再構成したとき、オーディオ信号の数は同じであるが、このようなオーディオ信号を再生する１以上の空間位置が変化するように、前記２以上のオーディオ信号を再構成するための指令を導き出すことを特徴とする請求項１乃至請求項７のいずれか１項に記載の方法。
【請求項１１】
前記出力において前記少なくとも１つのオーディオ信号又はそれを修正したものは、それぞれ前記少なくとも１つのオーディオ信号又はそれを修正したもののデータ圧縮したものであることを特徴とする請求項１乃至請求項１０のいずれか１項に記載の方法。
【請求項１２】
前記指令を導き出すステップでは、前記チャンネル再構成するための指令の結果再構成したチャンネルを参照することなく、指令を導き出すことを特徴とする請求項１乃至請求項１１のいずれか１項に記載の方法。
【請求項１３】
前記少なくとも１つのオーディオ信号又はそれを修正したものは、周波数帯域に分割され、前記チャンネル再構成するための指令は、このような周波数帯域における信号についてのものであることを特徴とする請求項１乃至請求項１２のいずれか１項に記載の方法。
【請求項１４】
請求項１乃至請求項１３のいずれか１項に記載の方法を実行するオーディオエンコーダ。
【請求項１５】
各オーディオ信号が１つのオーディオチャンネルを表現する、少なくとも１つのオーディオ信号、又はこの少なくとも１つのオーディオ信号と同じ数のチャンネルを持つ少なくとも１つのオーディオ信号を修正したものを処理するための方法であって、
少なくとも１つのオーディオ信号又はそれを修正したものをチャンネル再構成するための指令を導き出すステップであって、導き出したものにより受信されるオーディオ情報のみがこの少なくとも１つのオーディオ信号又はそれを修正したものであることを特徴とするステップと、
（１）前記少なくとも１つのオーディオ信号又はそれを修正したもの、及び（２）前記チャンネル再構成するための指令を含む出力を出力するステップであって、このようなチャンネルの再構成が、前記チャンネル再構成するための指令の結果である場合は、少なくとも１つのオーディオ信号又はそれを修正したもののチャンネルの再構成は含まれないことを特徴とするステップと、
前記出力を受信するステップと、
を具備する方法。
【請求項１６】
前記受信したチャンネル再構成するための指令を用いて、前記受信した少なくとも１つのオーディオ信号又はそれを修正したものをチャンネル再構成するステップをさらに具備することを特徴とする請求項１５に記載の方法。
【請求項１７】
前記少なくとも１つのオーディオ信号及びそれを修正したものは、それぞれ２以上のオーディオ信号であることを特徴とする請求項１５又は請求項１６に記載の方法。
【請求項１８】
前記修正した２以上のオーディオ信号は、修正していない２以上のオーディオ信号のデコーディングに関して、改良したマルチチャンネルデコーディングを提供することを特徴とする請求項１７に記載の方法。
【請求項１９】
前記修正した２以上のオーディオ信号は、マトリックスデコーダでデコードされるとき、改良したマルチチャンネルデコーディングを提供することを特徴とする請求項１８に記載の方法。
【請求項２０】
前記マトリックスデコーダは能動マトリックスデコーダであることを特徴とする請求項１９に記載の方法。
【請求項２１】
前記修正した２以上のオーディオ信号は、マトリックスエンコードで修正したものであることを特徴とする請求項１７乃至請求項２０のいずれか１項に記載の方法。
【請求項２２】
結果得られたオーディオ信号の数が、前記少なくとも１つのオーディオ信号又はそれを修正したものからなるオーディオ信号の数より大きくなるように、前記チャンネル再構成するための指令を導き出すステップでは、前記少なくとも１つのオーディオ信号又はそれを修正したものをアップミックスさせるための指令を導き出し、前記前記チャンネル再構成において、前記少なくとも１つのオーディオ信号又はそれを修正したものをアップミックスすることを特徴とする請求項１５乃至請求項２１のいずれか１項に記載の方法。
【請求項２３】
前記少なくとも１つのオーディオ信号又はそれを修正したものは、２以上のオーディオ信号であり、結果得られたオーディオ信号の数が、前記２以上のオーディオ信号からなるオーディオ信号の数より小さくなるように、前記チャンネル再構成するための指令を導き出すステップでは、前記２以上のオーディオ信号をダウンミックスするための指令を導き出し、前記チャンネル再構成において、前記２以上のオーディオ信号をダウンミックスすることを特徴とする請求項１５乃至請求項２１のいずれか１項に記載の方法。
【請求項２４】
前記少なくとも１つのオーディオ信号又はそれを修正したものは、２以上のオーディオ信号であり、オーディオ信号の数は同じであるが、このようなオーディオ信号を再生する１以上の空間位置が変化するように、前記チャンネル再構成するための指令を導き出すステップでは、前記２以上のオーディオ信号を再構成させるための指令を導き出し、前記チャンネル再構成において、前記２以上のオーディオ信号をダウンミックスすることを特徴とする請求項１５乃至請求項２１のいずれか１項に記載の方法。
【請求項２５】
前記出力において前記少なくとも１つのオーディオ信号又はそれを修正したものは、それぞれ前記少なくとも１つのオーディオ信号又はそれを修正したもののデータ圧縮したものであり、前記出力を受信するステップには、前記少なくとも１つのオーディオ信号又はそれを修正したもののデータ伸張を行うステップが含まれることを特徴とする請求項１５乃至請求項２４のいずれか１項に記載の方法。
【請求項２６】
前記指令を導き出すステップでは、前記チャンネル再構成させるための指令の結果再構成されたチャンネルを参照することなく、指令を導き出すことを特徴とする請求項１５乃至請求項２５のいずれか１項に記載の方法。
【請求項２７】
前記少なくとも１つのオーディオ信号又はそれを修正したものは、周波数帯域に分割され、前記チャンネル再構成するための指令は、このような周波数帯域における信号についてのものであることを特徴とする請求項１５乃至請求項２６のいずれか１項に記載の方法。
【請求項２８】
請求項１５に従属させた、請求項１６及び請求項１７乃至請求項２７のいずれか１項に記載の方法であって、
オーディオ出力を出力するステップと
前記オーディオ出力として、
（１）前記少なくとも１つのオーディオ信号又はそれを修正したもの、又は
（２）前記チャンネル再構成した少なくとも１つのオーディオ信号、
のいずれか１つを選択するステップと、
をさらに具備する方法。
【請求項２９】
前記受信した少なくとも１つのオーディオ信号又はそれを修正したものに応答して、オーディオ出力を出力するステップをさらに具備する請求項１５乃至請求項２７のいずれか１項に記載の方法。
【請求項３０】
前記オーディオ出力中の前記少なくとも１つのオーディオ信号又はそれを修正したものは、２以上のオーディオ信号であり、前記方法は、前記２以上のオーディオ信号をマトリックスデコーディングするステップをさらに具備することを特徴とする請求項２９に記載の方法。
【請求項３１】
請求項１５に従属させた、請求項１６及び請求項１７乃至請求項２７のいずれか１項に記載の方法であって、
前記受信したチャンネル再構成した少なくとも１つのオーディオ信号又はそれを修正したものに応答して、オーディオ出力を出力するステップをさらに具備することを特徴とする方法。
【請求項３２】
請求項１５乃至請求項３１のいずれか１項に記載の方法を実行するオーディオエンコーディングシステム及びオーディオデコーディングシステム。
【請求項３３】
請求項１５乃至請求項３１のいずれか１項に記載の方法を実行するオーディオエンコーダ及びオーディオデコーダ。
【請求項３４】
請求項１５乃至請求項３１のいずれか１項に記載の方法を実行するシステムに用いるオーディオエンコーダ。
【請求項３５】
請求項１５乃至請求項３１のいずれか１項に記載の方法を実行するシステムに用いるオーディオデコーダ。
【請求項３６】
各オーディオ信号が１つのオーディオチャンネルを表現する、少なくとも１つのオーディオ信号、又は前記少なくとも１つのオーディオ信号と同じ数のチャンネルを持つ少なくとも１つのオーディオ信号を修正したものを処理するための方法であって、
少なくとも１つのオーディオ信号又はそれを修正したもの、及び、前記少なくとも１つのオーディオ信号又はそれを修正したもののチャンネル再構成のための指令であるが、前記チャンネル再構成のための指令の結果生じた前記少なくとも１つのオーディオ信号又はそれを修正したもののチャンネル再構成は行わない指令を受信するステップであって、この指令は、受信したオーディオ情報のみがこの少なくとも１つのオーディオ信号又はそれを修正したものとなる指令導出方法により導き出されたものであることを特徴とするステップと、
この指令を用いて、この少なくとも１つのオーディオ信号又はそれを修正したものをチャンネル再構成するステップと、
を具備する方法
【請求項３７】
前記少なくとも１つのオーディオ信号及びそれを修正したものは、それぞれ２以上のオーディオ信号であることを特徴とする請求項３６に記載の方法。
【請求項３８】
前記修正した２以上のオーディオ信号は、デコードされるとき、前記修正していない２以上のオーディオ信号のデコーディングに関して、改良したマルチチャンネルデコーディングを提供することを特徴とする請求項３７に記載の方法。
【請求項３９】
前記修正した２以上のオーディオ信号は、マトリックスデコーダでデコードされるとき、改良したマルチチャンネルデコーディングを提供することを特徴とする請求項３８に記載の方法。
【請求項４０】
前記マトリックスデコーダは能動マトリックスデコーダであることを特徴とする請求項３９に記載の方法。
【請求項４１】
前記修正した２以上のオーディオ信号は、マトリックスエンコードで修正されたものであることを特徴とする請求項３７乃至請求項４０のいずれか１項に記載の方法。
【請求項４２】
前記チャンネル再構成のための指令は、前記少なくとも１つのオーディオ信号及びそれを修正したものをアップミックスするための指令であり、前記チャンネル再構成は、結果得られたオーディオ信号の数が、前記少なくとも１つのオーディオ信号又はそれを修正したものからなるオーディオ信号の数より大きくなるように、前記少なくとも１つのオーディオ信号及びそれを修正したものをアップミックスすることを特徴とする請求項３６乃至請求項４１のいずれか１項に記載の方法。
【請求項４３】
前記少なくとも１つのオーディオ信号又はそれを修正したものは、２以上のオーディオ信号であり、前記チャンネル再構成するための指令は、前記２以上のオーディオ信号をダウンミックスするための指令であり、前記チャンネル再構成するステップでは、結果得られたオーディオ信号の数が、前記２以上のオーディオ信号からなるオーディオ信号の数より小さくなるように、前記２以上のオーディオ信号をダウンミックスすることを特徴とする請求項３６乃至請求項４１のいずれか１項に記載の方法。
【請求項４４】
前記少なくとも１つのオーディオ信号及びそれを修正したものは、それぞれ２以上のオーディオ信号であり、前記チャンネル再構成するための指令は、オーディオ信号の数は同じであるが、このようなオーディオ信号を再生するそれぞれの空間位置が変化するように、前記２以上のオーディオ信号を再構成するための指令であることを特徴とする請求項３６乃至請求項４１のいずれか１項に記載の方法。
【請求項４５】
前記チャンネル再構成するための指令は、アップミキシングを有するバイノーラルステレオ音響を前記少なくとも１つのオーディオ信号及びそれを修正したものの複数のバーチャルなチャンネルにレンダリングする指令であることを特徴とする請求項３６乃至請求項４１のいずれか１項に記載の方法。
【請求項４６】
前記チャンネル再構成するための指令は、バーチャルな空間位置再構成を有するバイノーラルステレオ音響をレンダリングする指令であることを特徴とする請求項３６乃至請求項４１のいずれか１項に記載の方法。
【請求項４７】
前記少なくとも１つのオーディオ信号及びそれを修正したものはデータ圧縮されており、前記方法は、前記少なくとも１つのオーディオ信号及びそれを修正したものをデータ伸張するステップをさらに具備することを特徴とすることを特徴とする請求項３６乃至請求項４６のいずれか１項に記載の方法。
【請求項４８】
前記指令は、前記指令の結果再構成されたチャンネルを参照することなく、導き出されることを特徴とする請求項３６乃至請求項４７のいずれか１項に記載の方法。
【請求項４９】
前記少なくとも１つのオーディオ信号又はそれを修正したものは、周波数帯域に分割され、前記チャンネル再構成するための指令は、このような周波数帯域における信号についてのものであることを特徴とする請求項３６乃至請求項４８のいずれか１項に記載の方法。
【請求項５０】
請求項３６乃至請求項４９のいずれか１項に記載の方法であって、
オーディオ出力を出力するステップと、
前記オーディオ出力として、
（１）前記少なくとも１つのオーディオ信号又はそれを修正したもの、又は
（２）前記チャンネル再構成した少なくとも１つのオーディオ信号、
のいずれか１つを選択するステップと、
をさらに具備する方法。
【請求項５１】
前記受信した少なくとも１つのオーディオ信号又はそれを修正したものに応答して、オーディオ出力を出力するステップをさらに具備する請求項３６乃至請求項４９のいずれか１項に記載の方法。
【請求項５２】
前記少なくとも１つのオーディオ信号及びそれを修正したものは、それぞれ２以上のオーディオ信号であり、前記方法は、前記２以上のオーディオ信号をマトリックスデコーディングするステップをさらに具備することを特徴とする請求項５１に記載の方法。
【請求項５３】
前記受信したチャンネル再構成した少なくとも１つのオーディオ信号に応答して、オーディオ出力を出力するステップをさらに具備する請求項３６乃至請求項４９のいずれか１項に記載の方法。
【請求項５４】
請求項３６乃至請求項５３のいずれか１項に記載の方法を実行するオーディオデコーダ。
【請求項５５】
各オーディオ信号が１つのオーディオチャンネルを表現する、少なくとも２つのオーディオ信号、又は前記少なくとも２つのオーディオ信号と同じ数のチャンネルを持つ少なくとも２つのオーディオ信号を修正したものを処理するための方法であって、
前記少なくとも２つのオーディオ信号、及び、前記少なくとも２つのオーディオ信号のチャンネル再構成のための指令であるが、前記チャンネル再構成のための指令の結果生じた前記少なくとも２つのオーディオ信号のチャンネル再構成は行わない指令を受信するステップであって、この指令は、受信したオーディオ情報のみがこの少なくとも２つのオーディオ信号となる指令導出方法により導き出したものであることを特徴とするステップと、
前記２つ以上のオーディオ信号をマトリックスデコーディングするステップと、
を具備する方法。
【請求項５６】
前記マトリックスデコーディングするステップでは、前記受信した指令を参照しないことを特徴とする請求項５５に記載の方法。
【請求項５７】
前記マトリックスデコーディングするステップでは、前記受信した指令を参照することを特徴とする請求項５５に記載の方法。
【請求項５８】
デコードされるとき、前記修正した２以上のオーディオ信号は、改良したマルチチャンネルデコーディングを提供することを特徴とする請求項５５乃至請求項５７のいずれか１項に記載の方法。
【請求項５９】
前記修正した２以上のオーディオ信号は、前記マトリックスデコーディングによりデコードされるとき、改良したマルチチャンネルデコーディングを提供することを特徴とする請求項５５乃至請求項５７のいずれか１項に記載の方法。
【請求項６０】
前記マトリックスデコーディングは能動マトリックスデコーディングであることを特徴とする請求項５５乃至請求項５７のいずれか１項に記載の方法。
【請求項６１】
前記修正した２以上のオーディオ信号は、マトリックスエンコードで修正したものであることを特徴とする請求項５８乃至請求項６０のいずれか１項に記載の方法。
【請求項６２】
請求項５５乃至請求項６１のいずれか１項に記載の方法を実行するオーディオデコーダ。
【請求項６３】
請求項１乃至請求項１３、請求項１５乃至請求項３１、請求項３６乃至請求項５３、請求項５５乃至請求項６１、又は請求項７２乃至請求項７６のいずれか１項に記載の方法を実施するようにした装置。
【請求項６４】
請求項１乃至請求項１３、請求項１５乃至請求項３１、請求項３６乃至請求項５３、請求項５５乃至請求項６１、又は請求項７２乃至請求項７６のいずれか１項に記載の方法をコンピュータに実行させるために、コンピュータ読み取り可能な媒体に保存したコンピュータプログラム。
【請求項６５】
請求項１乃至請求項１３、請求項１５乃至請求項３１、請求項３６乃至請求項５３、又は請求項５５乃至請求項６１のいずれか１項に記載の方法により作られたビットストリーム。
【請求項６６】
請求項１乃至請求項１３、請求項１５乃至請求項３１、請求項３６乃至請求項５３、又は請求項５５乃至請求項６１のいずれか１項に記載の方法を実施するようにした装置により作られたビットストリーム。
【請求項６７】
各オーディオ信号が１つのオーディオチャンネルを表現する、少なくとも１つのオーディオ信号、又はこの少なくとも１つのオーディオ信号と同じ数のチャンネルを持つ少なくとも１つのオーディオ信号を修正したものを処理するための装置であって、
少なくとも１つのオーディオ信号又はそれを修正したものをチャンネル再構成するための指令を導き出す手段であって、導き出したものにより受け取られるオーディオ情報のみがこの少なくとも１つのオーディオ信号又はそれを修正したものであることを特徴とする手段と、
（１）前記少なくとも１つのオーディオ信号又はそれを修正したもの、及び（２）前記チャンネル再構成するための指令とを含む出力を出力する手段であって、このようなチャンネルの再構成が、前記チャンネル再構成するための指令の結果である場合は、少なくとも１つのオーディオ信号又はそれを修正したもののチャンネルの再構成は含まれないことを特徴とする手段と、
を具備する装置。
【請求項６８】
各オーディオ信号が１つのオーディオチャンネルを表現する、少なくとも１つのオーディオ信号、又はこの少なくとも１つのオーディオ信号と同じ数のチャンネルを持つ少なくとも１つのオーディオ信号を修正したものを処理するための装置であって、
少なくとも１つのオーディオ信号又はそれを修正したものをチャンネル再構成するための指令を導き出す手段であって、導き出したものにより受け取られるオーディオ情報のみがこの少なくとも１つのオーディオ信号又はそれを修正したものであることを特徴とする手段と、
（１）前記少なくとも１つのオーディオ信号又はそれを修正したもの、及び（２）前記チャンネル再構成するための指令とを含む出力を出力する手段であって、このようなチャンネルの再構成が、前記チャンネル再構成するための指令の結果である場合は、少なくとも１つのオーディオ信号又はそれを修正したもののチャンネルの再構成は含まれないことを特徴とする手段と、
前記出力を受信する手段と、
を具備する装置。
【請求項６９】
前記受信したチャンネル再構成するための指令を用いて、前記受信した少なくとも１つのオーディオ信号又はそれを修正したものをチャンネル再構成する手段をさらに具備することを特徴とする請求項６８に記載の方法。
【請求項７０】
各オーディオ信号が１つのオーディオチャンネルを表現する、少なくとも１つのオーディオ信号、又はこの少なくとも１つのオーディオ信号と同じ数のチャンネルを持つ少なくとも１つのオーディオ信号を修正したものを処理するための装置であって、
少なくとも１つのオーディオ信号又はそれを修正したもの、及び、前記少なくとも１つのオーディオ信号又はそれを修正したもののチャンネル再構成のための指令であるが、前記チャンネル再構成のための指令の結果生じた前記少なくとも１つのオーディオ信号又はそれを修正したもののチャンネル再構成は行わない指令を受信する手段であって、この指令は、受信したオーディオ情報のみがこの少なくとも１つのオーディオ信号又はそれを修正したものとなる指令導出方法により導き出されたものであることを特徴とする手段と、
この指令を用いて、この少なくとも１つのオーディオ信号又はそれを修正したものをチャンネル再構成する手段と、
を具備する装置。
【請求項７１】
各オーディオ信号が１つのオーディオチャンネルを表現する、少なくとも２つのオーディオ信号、又は前記少なくとも２つのオーディオ信号と同じ数のチャンネルを持つ少なくとも２つのオーディオ信号を修正したものを処理するための装置であって、
前記少なくとも２つのオーディオ信号、及び、前記少なくとも２つのオーディオ信号のチャンネル再構成のための指令であるが、前記チャンネル再構成のための指令の結果生じた前記少なくとも２つのオーディオ信号のチャンネル再構成は行わない指令を受信する手段であって、この指令は、受信したオーディオ情報のみがこの少なくとも２つのオーディオ信号となる指令導出方法により導き出されたものであることを特徴とする手段と、
前記２つ以上のオーディオ信号をマトリックスデコーディングする手段と、
を具備する装置。
【請求項７２】
マトリックスデコーダでデコードされるとき、修正していない２以上のオーディオ信号のデコーディングに関して、修正した信号が改良されたマルチチャンネルデコーディングを提供するよう、２以上のオーディオ信号を修正する方法であって、各オーディオ信号が１つのオーディオチャンネルを表現し、
前記オーディオ信号同士での固有の信号特性の１以上の差異を修正するステップを具備することを特徴とする方法。
【請求項７３】
前記固有の信号特性には、振幅と位相のうちの一方又は両方が含まれることを特徴とする請求項７２に記載の方法。
【請求項７４】
前記オーディオ信号のうちのいくつかの信号同士での固有の信号特性の１以上の差異を修正するステップには、
修正していない信号を、より多くの数の信号にアップミックスするステップと、
前記アップミックスした信号をマトリックスエンコーダを用いてダウンミックスするステップと、
が含まれることを特徴とする請求項７２又は請求項７３に記載の方法。
【請求項７５】
前記オーディオ信号同士での固有の信号特性の１以上の差異を修正するステップには、
前記オーディオ信号のうちのいくつかの信号同士の相互相関を増大又は減少させるステップ、
が含まれることを特徴とする請求項７２又は請求項７３に記載の方法。
【請求項７６】
前記オーディオ信号同士の相互相関は、１以上の周波数帯域で様々に増大及び／又は減少することを特徴とする請求項７２に記載の方法。
【請求項７７】
マトリックスデコーダでデコードされるとき、修正していない２以上のオーディオ信号のデコーディングに関して、修正した信号が改良されたマルチチャンネルデコーディングを提供するよう、２以上のオーディオ信号を修正する装置であって、各オーディオ信号が１つのオーディオチャンネルを表現し、
前記２以上のオーディオ信号を受信する手段と、
前記オーディオ信号同士での固有の信号特性の１以上の差異を修正する手段と、
を具備する装置。
【請求項７８】
前記固有の信号特性には、振幅と位相のうちの一方又は両方が含まれることを特徴とする請求項７７に記載の装置。
【請求項７９】
前記オーディオ信号のうちのいくつかの信号同士の固有の信号特性の１以上の差異を修正する手段には、
修正していない信号を、より多くの数の信号にアップミックスする手段と、
前記アップミックスした信号をマトリックスエンコーダを用いてダウンミックスする手段と、
が含まれることを特徴とする請求項７７又は請求項７８に記載の装置。
【請求項８０】
前記オーディオ信号同士の固有の信号特性の１以上の差異を修正する手段には、
前記オーディオ信号のうちのいくつかの信号同士の相互相関を増大又は減少させる手段、
が含まれることを特徴とする請求項７７又は請求項７８に記載の装置。
【請求項８１】
前記オーディオ信号同士の相互相関は、１以上の周波数帯域で様々に増大及び／又は減少することを特徴とする請求項８０に記載の方法。
【発明の詳細な説明】
【技術分野】
【０００１】
広くＤＶＤプレーヤーが導入されるようになるとともに、家庭内でマルチチャンネル（３チャンネル以上の）オーディオ再生システムを用いることが一般的になってきている。加えて、マルチチャンネルオーディオシステムを自動車内に搭載するのが普通となり、次世代衛星無線システム及び地上デジタル無線システムでは、マルチチャンネルコンテンツを増大しつつあるマルチチャンネル再生環境に送信することが強く求められている。しかしながら多くの場合、マルチチャンネルコンテンツの将来のプロバイダは、そのような素材が底をつく恐れに直面している。例えば、多くのポピュラー音楽は、依然として、２チャンネル立体音響（ステレオ）トラックだけのものとして存在している。ということで、モノラルの形態（モノ）又はステレオの形態で存在するような「レガシー」コンテンツを「アップミックス」する需要がある。
【背景技術】
【０００２】
この変換を行うための従来技術による解決手段は存在する。例えば、ドルビープロロジックＩＩ（Ｄｏｌｂｙ  Ｐｒｏ  ｌｏｇｉｃ  ＩＩ）は、オリジナルステレオ録音を受け取り、ステレオ録音自身から導き出したステアリング情報に基づきマルチチャンネルのアップミックスを生成する。「ドルビー」、「プロロジック」、及び「プロロジックＩＩ」はドルビー・ラボラトリーズ・ライセンシング・コーポレーションの登録商標である。このようなアップミックスを消費者に配信するために、コンテンツプロバイダは、コンテンツ作成時にアップミックス手段をレガシーコンテンツに適用し、その結果できあがったマルチチャンネル信号を、ドルビーデジタルのような適切なマルチチャンネル配信形態で消費者に送信する。「ドルビーデジタル」は、ドルビー・ラボラトリーズ・ライセンシング・コーポレーションの登録商標である。あるいは、レガシーコンテンツに手を加えず消費者に送ってもよく、消費者はそこで再生時にアップミックス処理を適用する。前者の場合、コンテンツプロバイダは、このアップミックスを生成するための方法を完全に管理することができ、これは、コンテンツプロバイダの観点からは好ましいことである。加えて、制作側での処理における制約は、再生する側での制約より、一般にはるかに少ないので、より洗練されたアップミックス技術を適用することができる。しかし、アップミックスを制作側で行うことにはいくつかの欠点がある。まず第１に、レガシーな形態の信号に比べてマルチチャンネル信号の伝送はオーディオチャンネルの数が増えるので高価となる。また、消費者がマルチチャンネル再生システムを所持していない場合、伝送したマルチチャンネル信号は、通常は再生する前にダウンミックスする必要がある。このダウンミックスした信号は、通常は元のレガシーコンテンツと同一ではなく、多くの場合は元のサウンドより劣るサウンドとなる。
【０００３】
図１及び２は、前記のような、それぞれ制作側と消費側で適用されるアップミックスの従来技術の例を示している。これらの例では、オリジナル信号はＭ＝２チャンネルであり、アップミックスされた信号はＮ＝６チャンネルであると仮定している。図１の例において、アップミックスは制作側で行われる一方、図２では、アップミックスは消費側で行われる。図２におけるようなアップミックスは、アップミックスが適用されるオーディオ信号のみをアップミキサーが受け取り、しばしば「ブラインド」アップミックスと称される。
【０００４】
図１を参照して、オーディオシステムの制作部分２において、Ｍチャンネルのオリジナル信号からなる１以上のオーディオ信号に、Ｎチャンネルのアップミックス信号からなる数を増やしたオーディオ信号を制作するアップミックス装置又はアップミックス機能（アップミックス）４が適用される（この図又は他の図において、各オーディオ信号は、左チャンネル、右チャンネル、等のような、チャンネルで表現されている）。アップミックス信号には、Ｎチャンネルのアップミックス信号を伝送又は記憶に適した形にフォーマットするフォーマッタ装置又はフォーマット機能（フォーマット）６が適用される。このフォーマット機能にはデータ圧縮エンコーディングを含めることができる。フォーマットされた信号は、そこでデフォーマット機能又はデフォーマット装置（デフォーマット）１０によりこのフォーマットされた信号がＮチャンネルのアップミックス信号（又はそれらの近似）に復元される、オーディオシステムの消費部分８で受け取られる。上述のように、場合によっては、ダウンミックス装置又はダウンミックス機能（ダウンミックス）１２により、Ｎチャンネルのアップミックス信号はＭチャンネルのダウンミックス信号（又はそれらの近似）にダウンミックスされる。ここでＭ＜Ｎである。
【０００５】
図２参照して、オーディオシステムの制作部分１４において、Ｍチャンネルのオリジナル信号からなる１以上のオーディオ信号に、このオーディオ信号を伝送又は記憶に適した形にフォーマットするフォーマッタ装置又はフォーマット機能（フォーマット）６が適用される（この図又は他の図において、異なった図において本質的に同じ装置又は機能には同じ参照番号が用いられる）。このフォーマット機能にはデータ圧縮エンコーディングを含めることができる。フォーマットされた信号は、そこでデフォーマット機能又はデフォーマット装置（デフォーマット）１０によりこのフォーマットされた信号がＭチャンネルのオリジナル信号（又はそれらの近似）に復元される、オーディオシステムの消費部分１６で受け取られる。このＭチャンネルのオリジナル信号を出力として供給することができ、これにも、Ｍチャンネルのオリジナル信号をアップミックスしてＮチャンネルのアップミックス信号を作り出す、アップミックス機能又はアップミックス装置（アップミックス）１８が適用される。
【発明の開示】
【０００６】
本発明の特徴によれば、図１及び２の構成に対する代替案が提示される。例えば、本発明の特徴によれば、制作側又は消費側でレガシーコンテンツをアップミックスするのではなく、例えば、エンコーダでの処理によりレガシーコンテンツを分析することで、例えばデコーダでのさらなる処理工程へとレガシーコンテンツのオーディオ情報と一緒に、何らかの方法で、送信される補助的な「サイド」情報、又は「サイドチェーン」情報を生成することができる。サイド情報を送る方法は本発明にとって重要ではない。サイド情報送る多くの方法が知られており、それには、例えば、オーディオ情報内にサイド情報を埋め込むこと（例えばサイド情報を隠すこと）、又は、（例えば、自身のビットストリーム内に、又はオーディオ情報と共に多重化して）サイド情報別に送ることが含まれる。本明細書において、「エンコーダ」と「デコーダ」はそれぞれ、制作に関連する装置又は処理と、消費に関連する装置又は処理とを称し、このような装置又は処理には、データ圧縮「エンコーディング」とデータ圧縮「デコーディング」が含まれても含まれなくてもよい。エンコーダにより生成されるサイド情報は、どのようにレガシーコンテンツをアップミックスするかをデコーダに指示することができる。このようにして、デコーダはサイド情報の助けを得てアップミックスする。アップミックス技法の制御は制作側で行うことができるが、消費側でも、もしマルチチャンネル再生システムが使えない場合に手を加えていない状態で再生することができる未処理のレガシーコンテンツを受信することができる。加えて、エンコーダでレガシーコンテンツを分析するための大きな処理能力を用いて、高品質のアップミックスを行うためのサイド情報生成し、デコーダでは、レガシーコンテンツを導出するのではなくこのサイド情報を適用するだけなので、はるかに少ない処理原資を使うだけでよくなる。最後に、サイド情報のアップミックスのコストは一般に非常に低い。
【０００７】
本発明とその種々の特徴はアナログ信号又はデジタル信号の使用を必要とするが、実際の応用では、ほとんど又は全ての処理又は機能は、オーディオ信号がサンプルにより表現されるデジタル信号ストリーム上のデジタル領域で行われるであろう。本発明による信号処理は、広帯域信号、又はマルチバンドのプロセッサの各周波数帯域に適用され、実施例に応じて、サンプルごとに、又は、デジタルオーディオをブロックに分割したときのサンプルのブロックのような１組のサンプルごとに実行される。マルチバンドの実施形態では、フィルターバンク構成、又は変換処理による構成を採用することができる。したがって、図３、４Ａ〜４Ｃ、５Ａ〜５Ｃ、及び６に示した本発明の実施形態の例では、（例えばＰＣＭ信号のような）時間領域でのデジタル信号を受け取り、人間の耳の臨界帯域に関連付けた複数の周波数帯域での処理のために、適当な時間・周波数変換器又は変換処理を適用する。処理の後、信号は変換して時間領域に戻すことができる。原則として、フィルターバンク、又は信号変換のどちらでも、時間から周波数への変換又はその逆の変換を行うために用いることができる。本明細書に記載した発明の実施形態の詳細例では、時間から周波数への信号変換、すなわち短時間離散フーリエ変換（ＳＴＤＦＴ）を採用する。しかし当然のことながら、本発明はその種々の特徴において、特定の時間から周波数への変換器又は変換処理を用いることに限定されるものではない。
【０００８】
本発明の１つの形態は、各オーディオ信号が１つのオーディオチャンネルを表現する、少なくとも１つのオーディオ信号、又はこの少なくとも１つのオーディオ信号と同じ数のチャンネルを持つ少なくとも１つのオーディオ信号を修正したものを処理するための方法であって、少なくとも１つのオーディオ信号又はそれを修正したものをチャンネル再構成するための指令を導き出すステップであって、導き出したものにより受け取られるオーディオ情報のみがこの少なくとも１つのオーディオ信号又はそれを修正したものであることを特徴とするステップと、（１）少なくとも１つのオーディオ信号又はそれを修正したもの、及び（２）チャンネル再構成するための指令とを含む出力を出力するステップとを具備するが、このようなチャンネルの再構成が、前記チャンネル再構成するための指令の結果である場合は、少なくとも１つのオーディオ信号又はそれを修正したもののチャンネルの再構成は含まれないことを特徴とする方法である。この少なくとも１つのオーディオ信号又はそれを修正したものは、それぞれ、２以上のオーディオ信号となることができ、この場合、修正された２以上の信号はマトリックスエンコードで修正されたものであり、マトリックスデコーダ又は能動マトリックスデコーダでデコードされるとき、修正された２以上のオーディオ信号は、修正されていない２以上のオーディオ信号のデコーディングに関して、改良したマルチチャンネルデコーディングとなることができる。デコーディングは、例えばチャンネル分離、空間イメージング、イメージの安定性、等を含む、マトリックスデコーダのような、どのような既知のデコーダの性能特性からみても「改良」されている。
【０００９】
この少なくとも１つのオーディオ信号及びそれを修正したものが２以上のオーディオ信号であろうとなかろうと、チャンネルを再構成させる指令にはいくつかの代案がある。１つの代案によれば、この指令は、アップミックスするためのこの指令によりアップミックスされたとき、結果得られたオーディオ信号の数が、少なくとも１つのオーディオ信号又はそれを修正したものからなるオーディオ信号の数より大きくなるように、この少なくとも１つのオーディオ信号又はそれを修正したものをアップミックスさせるためのものである。チャンネルを再構成させる指令の他の代案によれば、少なくとも１つのオーディオ信号及びそれを修正したものは２以上のオーディオ信号となっている。最初のこのような代案において、この指令は、ダウンミックスするためのこの指令によりダウンミックスされたとき、結果得られたオーディオ信号の数が、少なくとも１つのオーディオ信号又はそれを修正したものからなるオーディオ信号の数より小さくなるように、２以上のオーディオ信号をダウンミックスさせるためのものである。２つ目のこのような代案において、この指令は、再構成させるための指令により再構成されたとき、オーディオ信号の数は同じであるが、このようなオーディオ信号を再生する１以上の空間位置が変化するように、２以上のオーディオ信号を再構成させるためのものである。出力におけるこの少なくとも１つのオーディオ信号又はそれを修正したものは、それぞれ、少なくとも１つのオーディオ信号又はそれを修正したもののデータ圧縮したものであってもよい。
【００１０】
どの代案においても、データ圧縮なされていてもいなくても、チャンネル再構成させるための指令の結果再構成されたチャンネルを参照することなく、指令を導き出すことができる。この少なくとも１つのオーディオ信号を周波数帯域に分割してもよく、チャンネル再構成させるための指令は、このような周波数帯域のそれぞれに対する指令であってもよい。本発明の他の形態には、このような方法を実行するオーディオエンコーダが含まれる。
【００１１】
本発明の他の１つの形態は、各オーディオ信号が１つのオーディオチャンネルを表現する、少なくとも１つのオーディオ信号、又はこの少なくとも１つのオーディオ信号と同じ数のチャンネルを持つ少なくとも１つのオーディオ信号を修正したものを処理するための方法であって、少なくとも１つのオーディオ信号又はそれを修正したものをチャンネル再構成するための指令を導き出すステップであって、導き出したものにより受け取られるオーディオ情報のみがこの少なくとも１つのオーディオ信号又はそれを修正したものであることを特徴とするステップと、（１）少なくとも１つのオーディオ信号又はそれを修正したもの、及び（２）チャンネルを再構成するための指令とを含むが、このようなチャンネルの再構成が、前記チャンネル再構成するための指令の結果である場合は、少なくとも１つのオーディオ信号又はそれを修正したもののチャンネルの再構成は含まれない出力を出力するステップと、この出力を受信するステップとを具備することを特徴とする方法である。
【００１２】
この方法はさらに、受信したチャンネルの再構成するための指令を用いて、受信した少なくとも１つのオーディオ信号又はそれを修正したもののチャンネルを再構成するステップを具備する。この少なくとも１つのオーディオ信号又はそれを修正したものは、それぞれ、２以上のオーディオ信号となることができ、この場合、修正された２以上の信号はマトリックスエンコードで修正されたものであり、マトリックスデコーダ又は能動マトリックスデコーダでデコードされるとき、修正された２以上のオーディオ信号は、修正されていない２以上のオーディオ信号のデコーディングに関して、改良したマルチチャンネルデコーディングとなることができる。「改良」の語は、本発明の最初の形態における場合と同じ意味で用いられる。
【００１３】
本発明の最初の形態と同様に、チャンネルの再構成するための指令には代案がある。例えば、アップミックスさせること、ダウンミックスさせること、及びオーディオ信号の数は同じであるが、このようなオーディオ信号を再生する１以上の空間位置が変化するように、再構成させることである。本発明の最初の形態と同様に、出力におけるこの少なくとも１つのオーディオ信号又はそれを修正したものは、この少なくとも１つのオーディオ信号又はそれを修正したもののデータ圧縮したものであってもよく、この場合、出力を受信するステップには、この少なくとも１つのオーディオ信号又はそれを修正したもののデータ伸張を行うステップを含むことができる。本発明のこの形態の全ての代案において、データ圧縮及びデータ伸張がなされていてもいなくても、チャンネル再構成させるための指令の結果再構成されたチャンネルを参照することなく、指令を導き出すことができる。
【００１４】
本発明の最初の形態と同様に、この少なくとも１つのオーディオ信号又はそれを修正したものを周波数帯域に分割してもよく、この場合、チャンネルを再構成させるための指令は、このような周波数帯域のそれぞれに対する指令であってもよい。この方法がさらに、受信した少なくとも１つのオーディオ信号又はそれを修正したものを、受信したチャンネル再構成のための指令を用いて再構成するステップを含むときは、この方法はさらに、（１）少なくとも１つのオーディオ信号又はそれを修正したもの、又は（２）少なくとも１つのオーディオ信号のチャンネル再構成したもの、の内の１つ出力をオーディオ出力として選択するステップを具備する。
【００１５】
本方法が、受信したチャンネル再構成のための指令を用いて、受信した少なくとも１つのオーディオ信号又はそれを修正したものを再構成するステップを具備してもしなくても、本方法は、この受信した少なくとも１つのオーディオ信号又はそれを修正したものに応答してオーディオ出力を出力するステップを含むことができ、この場合、このオーディオ出力中のこの少なくとも１つのオーディオ信号又はそれを修正したものが２つ以上のオーディオ信号であるときは、本方法は、この２つ以上のオーディオ信号をマトリックスデコーディングするステップをさらに具備することができる。
【００１６】
本方法が、受信したチャンネル再構成のための指令を用いて、受信した少なくとも１つのオーディオ信号又はそれを修正したものを再構成するステップをさらに具備するときは、本方法は、オーディオ信号を出力するステップをさらに具備することができる。
【００１７】
本発明の他の形態には、このような方法を実行するオーディオエンコーディング及びオーディオデコーディングシステム、このような方法を実行するシステムにおいて用いるオーディオエンコーダ及びオーディオデコーダ、このような方法を実行するシステムにおいて用いるオーディオエンコーダ、並びに、このような方法を実行するシステムにおいて用いるオーディオデコーダが含まれる。
【００１８】
本発明の他の１つの形態は、各オーディオ信号が１つのオーディオチャンネルを表現する、少なくとも１つのオーディオ信号、又はこの少なくとも１つのオーディオ信号と同じ数のチャンネルを持つ少なくとも１つのオーディオ信号を修正したものを処理するための方法であって、少なくとも１つのオーディオ信号又はそれを修正したもの、及び、この少なくとも１つのオーディオ信号又はそれを修正したもののチャンネル再構成のための指令であるが、チャンネル再構成のためのこの指令の結果生じた少なくとも１つのオーディオ信号又はそれを修正したもののチャンネル再構成は行わない指令を受信するステップであって、この指令は、受信したオーディオ情報のみがこの少なくとも１つのオーディオ信号又はそれを修正したものとなる指令導出方法により導き出されたものであることを特徴とするステップと、この指令を用いて、この少なくとも１つのオーディオ信号又はそれを修正したものをチャンネル再構成するステップと、を具備することを特徴とする方法である。この少なくとも１つのオーディオ信号及びそれを修正したものはそれぞれ２以上のオーディオ信号であってもよく、この場合は、修正された２以上の信号は、マトリックスエンコードによる修正であってもよく、マトリックスデコーダ又は能動マトリックスデコーダでデコードされるとき、修正された２以上のオーディオ信号は、修正されていない２以上のオーディオ信号のデコーディングに関して、改良したマルチチャンネルデコーディングとなることができる。「改良」の語は、上述した本発明の他の形態における場合と同じ意味で用いられる。
【００１９】
本発明の他の形態と同様に、チャンネルの再構成するための指令には代案がある。例えば、アップミックスさせること、ダウンミックスさせること、及びオーディオ信号の数は同じであるが、このようなオーディオ信号を再生する１以上の空間位置が変化するように、再構成させることである。
【００２０】
本発明の他の形態と同様に、出力中のこの少なくとも１つのオーディオ信号又はそれを修正したものは、この少なくとも１つのオーディオ信号又はそれを修正したもののデータ圧縮したものであってもよく、この場合、受信するステップにはこの少なくとも１つのオーディオ信号又はそれを修正したものをデータ圧縮するステップを含むことができる。本発明のこの形態の全ての代案において、データ圧縮及びデータ伸張がなされていてもいなくても、チャンネル再構成させるための指令の結果再構成されたチャンネルを参照することなく、指令を導き出すことができる。本発明の他の形態と同様に、この少なくとも１つのオーディオ信号又はそれを修正したものを周波数帯域に分割してもよく、この場合、チャンネルを再構成させるための指令は、このような周波数帯域のそれぞれに対する指令であってもよい。１つの代案では、本発明のこの形態ではさらに、（１）少なくとも１つのオーディオ信号又はそれを修正したもの、又は（２）少なくとも１つのオーディオ信号のチャンネル再構成したもの、の内の１つ出力をオーディオ出力として選択するステップを具備してもよい。もう１つの代案では、本発明のこの形態ではさらに、受信したこの少なくとも１つのオーディオ信号又はそれを修正したものに応答してオーディオ出力を出力するステップを具備してもよく、この場合、この少なくとも１つのオーディオ信号及びそれを修正したものは、それぞれ２以上のオーディオ信号とすることができ、この２以上のオーディオ信号はマトリックスコーディングされる。さらに他の代案では、本発明のこの形態ではさらに、受信した、チャンネル再構成したこの少なくとも１つのオーディオ信号又はそれを修正したものに応答してオーディオ出力を出力するステップを具備してもよい。本発明の他の形態では、これらの何れかの方法を実行するオーディオデコーダが含まれる。
【００２１】
本発明のさらに他の１つの形態は、各オーディオ信号が１つのオーディオチャンネルを表現する、少なくとも１つのオーディオ信号、又はこの少なくとも１つのオーディオ信号と同じ数のチャンネルを持つ少なくとも１つのオーディオ信号を修正したものを処理するための方法であって、少なくとも２つのオーディオ信号、及び、この少なくとも２つのオーディオ信号のチャンネル再構成のための指令であるが、チャンネル再構成のためのこの指令の結果生じた少なくとも２つのオーディオ信号のチャンネル再構成は行わない指令を受信するステップであって、この指令は、受信したオーディオ情報のみがこの少なくとも２つのオーディオ信号となる指令導出方法により導き出されたものであることを特徴とするステップと、この２以上のオーディオ信号をマトリックスデコードするステップとを具備することを特徴とする方法である。このマトリックスデコーディングは、受信した指令を参照してもしなくてもよい。デコードされるとき、修正された２以上のオーディオ信号は、修正されていない２以上のオーディオ信号に関して改良したマルチチャンネルデコーディングを提供することができる。この修正された２以上のマトリックスエンコーディングによる修正でもよく、マトリックスデコーダ又は能動マトリックスデコーダでデコードされるとき、修正された２以上のオーディオ信号は、修正されていない２以上のオーディオ信号のデコーディングに関して、改良したマルチチャンネルデコーディングを提供することができる。「改良」の語は、上述した本発明の他の形態における場合と同じ意味で用いられる。本発明の他の形態には、このような方法を実行するオーディオデコーダが含まれる。
【００２２】
本発明のさらなる形態では、マトリックスデコーダによりデコードされるとき、修正されていない信号のデコーディングに関して、修正された信号が、改良したマルチチャンネルデコーディングを提供することができるように、それぞれがオーディオチャンネルを表している２以上のオーディオ信号が修正される。これは、オーディオ信号同士での本質的な信号特性における１以上の差異を修正することにより行ってもよい。このような本質的な信号特性には、振幅と位相のうちの１つ又は両方が含まれる。オーディオ信号同士での本質的な信号特性における１以上の差異を修正することには、修正されていない信号をアップミックスしてより数の多い信号にすること、及びこのアップミックスされた信号をマトリックスエンコーダを用いてダウンミックスすることが含まれる。あるいは、オーディオ信号同士での本質的な信号特性における１以上の差異を修正することにはまた、オーディオ信号同士での相互相関を増大又は減少させることが含まれてもよい。このオーディオ信号同士での相互相関を、１以上の周波数帯域において、様々に増大及び／又は減少させることができる。
【００２３】
本発明の他の形態には、（１）ここに記載したうちの１つの方法を実行するようにした装置、（２）ここに記載したうちの１つの方法をコンピュータに実行させるために、コンピュータが読み取り可能な媒体に記憶させたコンピュータプログラム、（３）ここに記載したうちの１つの方法で制作されたビットストリーム、及び（４）ここに記載したうちの１つの方法を実行するようにした装置で制作されたビットストリームが含まれる。
【発明を実施するための最良の形態】
【００２４】
［発明の詳細な説明］
図３は、本発明のアップミキシングの実施例を示す。この構成の制作部分２０において、Ｍチャンネルのオリジナル信号は、１以上のアップミックスサイド情報を導き出す（アップミックス情報の導出）装置又は機能２１に入力し、そしてフォーマッタ装置又はフォーマッティング機能（フォーマット）２２に入力される。あるいは、以下に記載の通り、図３のＭチャンネルのオリジナル信号は、レガシーオーディオ信号の修正版であってもよい。フォーマット２２には、例えばＭチャンネルのオリジナル信号、アップミックスサイド情報、及び他のデータを、例えばシリアルビットストリーム又はパラレルビットストリームにフォーマット又は構成するマルチプレクサ又はマルチプレクシング機能を含むことができる。この構成の制作部分２０の出力ビットストリームがシリアルであるかパラレルであるかは本発明にとって重要ではない。フォーマット２２には、ロッシー、ロスレス、又はロッシーとロスレスとを結合したエンコーダ又はエンコーディング機能のような、適切なデータ圧縮エンコーダ又はエンコーディング機能を含むことができる。出力ビットストリームがエンコードされるかどうかは本発明にとって重要ではない。出力ビットストリームは、適切な方法で伝達又は保存される。
【００２５】
図３の実施例の構成における消費部分２４で、出力ビットストリームを受け取り、デフォーマッタ又はデフォーマッティング機能（デフォーマット）２６により、フォーマット２２をアンドゥーし、Ｍチャンネルのオリジナル信号（又はこれに近似する信号）とアップミックス情報を出力する。デフォーマット２６には、必要になるかもしれないので、適切なデータ圧縮デコーダ又はデコーディング機能を含むことができる。アップミックス情報及びＭチャンネルのオリジナル信号（又はこれに近似する信号）は、Ｎチャンネルアップミックス信号を出力するために、アップミックス指令に従ってＭチャンネルのオリジナル信号（又はこれに近似する信号）をアップミックスするアップミキサー装置又はアップミキシング機能に入る。例えば、それぞれが、異なった数のチャンネルにアップミックスする多数のアップミックス指令があってもよい。多数のアップミックス指令がある場合は、その１つ以上が選択される（このような選択は、この構成における消費部分で固定としてもよく、又は、何らかの方法で選択可能としてもよい）。Ｍチャンネルオリジナル信号とＮチャンネルアップミックス信号とは、この構成における消費部分２４の潜在的な出力となる。（図示の通り）一方または両方を出力として出力することができ又は、どちらかを選択することができ、この選択は、（不図示の）選択装置又は選択機能により自動又は手動で、ユーザー又は消費者により実行される。図３では、象徴的にＭ＝２、Ｎ＝６としたが、これは、ＭとＮがこの値に限定されるのではないことは理解できるであろう。
【００２６】
本発明の実際的な応用例の一例では、それぞれステレオサウンドチャンネルを表す２つのオーディオ信号を１つの装置又は工程が受け取り、この２つの信号をアップミキシングして一般に「５．１」チャンネル（実際には６チャンネルであり、１つのチャンネルは非常に少ないデータしか必要としない低周波数効果チャンネルである）と称されるものにするのに適した指令を導き出すことが好ましい。次いで、元の２つのオーディオ信号は、アップミキシング指令と共に、好ましい５．１チャンネル（サイド情報を用いたアップミックス）を出力するために、このアップミキシング指令を２つのオーディオ信号に適用するアップミキサー又はアップミキシング処理へと送られる。しかし、場合によっては元の２つのオーディオ信号と関連するアップミキシング指令は、このアップミキシング指令を用いることのできない装置又は処理により受け取られるかもしれないが、それでも、この受け取った２つのオーディオ信号のアップミックスを行うことができ、このアップミックスは、しばしば上述したような「ブラインド」アップミックスと称される。このようなブラインドアップミックスは、例えば、プロロジックデコーダ、プロロジックＩＩデコーダ、又は
プロロジックＩＩｘデコーダ（プロロジック、プロロジックＩＩ、及び プロロジックＩＩｘはドルビー・ラボラトリーズ・ライセンシング・コーポレーションの登録商標である）のような能動マトリックスデコーダにより提供される。他の能動マトリックスデコーダを用いることもできる。このような能動マトリックスブラインドアップミキサーは、アップミックスを実行するために（入力される信号間の振幅及び／又は位相関係のような）固有の信号特性に依存し、またこの特性に応答して動作する。ブラインドアップミックスにより、アップミックス指令を用いるようにした装置又は機能によりもたらされるものと同じ数のチャンネルが結果として生じるかもしれないし生じないかもしれない（例えば、この例では、ブラインドアップミックスにより５．１チャンネルが結果として生じないかもしれない）。
【００２７】
能動マトリックスデコーダが実行する「ブラインド」アップミックスは、マトリックスエンコーダのような、特にこのデコーダと相補的なマトリックスエンコーダのような、この能動マトリックスデコーダと相性の良い装置又は機能により、入力が前もってエンコードされていたときが最もうまく行く。この場合、入力信号は、能動マトリックスデコーダで用いられる固有の振幅と位相との関係を有する。相性の良い装置で前もってエンコードされているのではない信号、すなわち、振幅と位相との関係のような有用な固有の信号特性を持たない信号（又は最小の有用な固有の信号特性しか持たない信号）の「ブラインド」アップミックスは、以下に説明するように、「芸術的な」アップミックス装置と称されるもの、一般に複雑なアップミックス装置により実施するとうまく行く。
【００２８】
本発明はアップミキシングに有利に用いることができるが、一般に、特定の「チャンネル構成」のために設計した少なくとも１つのオーディオ信号が、１つ以上の今までのものに代わるチャンネル構成で再生するよう改変さられるような場合に用いる。例えば、エンコーダは、デコーダに、例えば、オリジナル信号を、必要に応じて１以上の今までのものに代わるチャンネル構成にどのように改変するかを指令する。ここで「チャンネル構成」には、例えば、オリジナルオーディオ信号に対応する再生オーディオ信号の数だけでなく、オリジナルオーディオ信号の空間位置に関して再生オーディオ信号を再生する空間位置も含まれる。このようにチャンネル「構成」には、例えば、１以上のチャンネルが何らかの方法でより多数のチャンネルにマッピングする「アップミキシング」と、２以上のチャンネルが何らかの方法でより少数のチャンネルにマッピングする「ダウンミキシング」と、チャンネルが再生されようとする位置が又はチャンネルに対応する方向が何らかの方法で変化し又は再マッピングされる空間位置再構成と、（クロストークキャンセルにより、又はクロストークキャンセラーで処理することにより）バイノーラル形式からラウドスピーカ形式への変換又は（「バイノーラリゼーション」により、又はラウドスピーカ形式からバイノーラルに変換する装置、すなわち「バイノーラライザー」により）ラウドスピーカ形式からバイノーラル形式への変換とが含まれる。したがって、本発明によるチャンネル再構成の文脈において、オリジナル信号のおけるチャンネル数は、結果として生じる今までのものに代わるチャンネル構成のチャンネル数より少なくなることもあるし、多くなることもあるし、同じとなることもある。
【００２９】
空間位置構成の例は、４チャンネル構成（左前方、右前方、左後方、右後方の「スクエア」配置）から従来の動画構成（左前方、中央前方、右前方、及びサラウンドの「ダイアモンド」配置）への変換である。
【００３０】
本発明のアップミキシングのない「再構成」の応用例の１つは、Michael  John  Smithersによる２００４年８月３日出願の米国特許出願Ｓ．Ｎ．１０／９１１，４０４、表題「Method  for  Combining  Audio  Signals  Using  Auditory  Scene  Analysis」に記載されている。Smithersの出願には、共通の櫛型フィルターと静的なダウンミックスに付随する位相キャンセレーション効果を避けるような方法で動的に信号をダウンミックスすることについて記載されている。例えば、オリジナル信号は、左チャンネル、中央チャンネル、及び右チャンネルで構成することができるが、多くの再生環境では中央チャンネルは使えない。この場合、中央チャンネル信号は、ステレオで再生するために左右に混合させる必要がある。Smithersにより開示された方法は、再生時に中央チャンネルと左右のチャンネルとの間の全体的な平均遅れを動的に計測する。次いで、櫛型フィルタリングを避けるために、左右のチャンネルに混入される前に、対応する時間遅れ補償を中央チャンネルに適用する。加えて、他の位相相殺効果を除去するために、出力補償が計算され、各ダウンミックスしたチャンネルの各臨界帯域に適用する。この発明は、再生時にこのような時間遅れ補償値や出力補償値を計算するのではなく、エンコーダでサイド情報として、これらを生成し、従来のステレオ構成での再生が要求された場合、この値を随意的にデコーダに適用する。
【００３１】
図４Ａは、一般化されたチャンネル再構成における本発明の実施例を示す。この構成の制作部分３０において、Ｍチャンネルオリジナル信号（レガシーオーディオ信号）が、１以上のチャンネル再構成サイド情報を導き出す装置又は機能（チャンネル再構成情報の導出）３２に適用され、そして、フォーマッタ装置又はフォーマッティング機能（フォーマット）２２（図３の実施例に関連して説明した）に入る。図４ＡのＭチャンネルオリジナル信号は、以下に記載の通り、レガシーオーディオ信号の修正版でも良い。出力ビットストリームは適切な方法で伝達又は保存される。
【００３２】
この構成の消費部分３４において、出力ビットストリームを受け取り、デフォーマッタ装置又はデフォーマッティング機能（デフォーマット）２６（図３の実施例に関連して説明した）が、Ｍチャンネルオリジナル信号（又はその近似）とチャンネル再構成情報とを出力するために、フォーマット２２の動作をアンドゥーする。チャンネル再構成情報とＭチャンネルオリジナル信号（又はその近似）は、Ｎチャンネル再構成信号を出力するための指令に従い、Ｍチャンネルオリジナル信号（又はその近似）をチャンネル再構成する装置又は機能（チャンネル再構成）３６に入力される。図３の実施例のように、複数の指令がある場合は、１つ以上が選択される（チャンネル再構成の選択）（この選択は、この構成における消費部分において固定としてもよくまた何らかの方法で選択可能としてもよい）。図３の実施例のように、Ｍチャンネルオリジナル信号とＮチャンネル再構成信号はこの構成における消費部分３４の潜在的な出力となる。（図示の通り）一方または両方を出力として出力することができ又は、どちらかを選択することができ、この選択は、（不図示の）選択装置又は選択機能により自動又は手動で、例えば、ユーザー又は消費者により実行される。図４Ａでは、象徴的にＭ＝３、Ｎ＝２としたが、これは、ＭとＮがこの値に限定されるのではないことは理解できるであろう。上記の通り、「チャンネル構成」には、例えば、１以上のチャンネルが何らかの方法でより多数のチャンネルにマッピングする「アップミキシング」と、２以上のチャンネルが何らかの方法でより少数のチャンネルにマッピングする「ダウンミキシング」と、チャンネルが再生されようとする位置が何らかの方法で再マッピングされる空間位置再構成と、（クロストークキャンセルにより、又はクロストークキャンセラーで処理することにより）バイノーラル形式からラウドスピーカ形式への変換又は（「バイノーラリゼーション」により、又はラウドスピーカ形式からバイノーラルに変換する装置、すなわち「バイノーラライザー」により）ラウドスピーカ形式からバイノーラル形式への変換とが含まれる。バイノーラリゼーションの場合、チャンネル再構成には、（１）複数のバーチャルなチャンネルにアップミキシングすること、及び／又は（２）２チャンネル立体音響バイノーラル信号にしたバーチャルな空間位置再構成とを含めることができる。バーチャルなアップミキシング及びバーチャルなラウドスピーカ位置については、少なくとも１９６０年代には当業者に知られていた（Atal等の米国特許番号３，２３６，９４９（１９６６年２月２６日）、表題「Apparent  Sound  Source  Translator」、及びBauerの米国特許番号３，０８８，９９７（１９６３年５月７日）、表題「Stereophonic
to  Binaural  Conversion  Apparatus」参照のこと）。
【００３３】
図３及び図４Ａの実施例に関連して上述したように、Ｍチャンネルオリジナル信号の修正版を入力として用いてもよい。あるいは、未修正の信号が２チャンネル立体音響信号であるときは、修正された信号は未修正の信号の２チャンネルバイノーラライズされたものであってもよい。修正されたＭチャンネルオリジナル信号は、未修正の信号と同じ数のチャンネルを有してもよいが、このことは本発明にとって本質的ではない。図４Ｂの実施例を参照して、この構成の制作部分３８において、Ｍチャンネルオリジナル信号（レガシーオーディオ信号）は、代替した又は修正したオーディオ信号を生成する装置又は機能（代替信号の生成）４０に入力され、代替した又は修正したオーディオ信号は、１以上のチャンネル再構成サイド情報のセットを導き出す装置又は機能（チャンネル再構成情報の導出）３２とフォーマッタ装置又はフォーマッティング機能（フォーマット）２２（３２と２２については上述した）に入力される。このチャンネル再構成情報の導出３２は、再構成情報を導き出すことを助けるために代替信号の生成４０から非オーディオ情報を受け取ってもよい。出力ビットストリームは適切な方法で伝達又は保存される。
【００３４】
この構成の消費部分４２において、出力ビットストリームを受け取り、（上述の）デフォーマット２６が、Ｍチャンネル代替信号（又はその近似）とチャンネル再構成情報とを出力するために、フォーマット２２の動作をアンドゥーする。チャンネル再構成情報とＭチャンネル代替信号（又はその近似）は、Ｎチャンネル再構成信号を出力するための指令に従ってＭチャンネルオリジナル信号（又はその近似）をチャンネル再構成する装置又は機能（チャンネル再構成）４４に入力される。図３と図４Ａの実施例と同様に、多くの指令がある場合は、１つを選択する（この選択は、この構成における消費部分において固定してもよくまた何らかの方法で選択可能としてもよい）。図４Ａの実施例で説明したように、「チャンネル構成」には、例えば、「アップミキシング」（２チャンネルのバイノーラル信号が混合されたバーチャルなチャンネルを持つようにした、バーチャルなアップミキシングを含む）、「ダウンミキシング」、空間位置再構成、及びバイノーラル形式からラウドスピーカ形式への変換又はスピーカ形式からバイノーラルへの変換、を含めることができる。Ｍチャンネル代替信号（又はその近似）はまた、Ｐチャンネル再構成信号を出力するために、再構成情報を参照することなしにＭチャンネル代替信号を再構成する装置又は機能（再構成情報なしのチャンネル再構成）４６に入力してもよい。チャンネルＰの数は、チャンネルＮの数と同じである必要はない。先に説明したように、このような装置又は機能は、再構成がアップミキシングのときは、例えば能動マトリックスデコーダ（この例は先に述べた）のようなブラインドアップミキサーでもよい。装置又は機能４６はまた、バイノーラル形式からラウドスピーカ形式への変換又はスピーカ形式からバイノーラルへの変換、をおこなうことができる。図４Ａの実施例の装置又は機能３６と同様に、装置又は機能４６は、２チャンネルのバイノーラル信号をアップミックス及び／又は位置替えを行ったバーチャルなチャンネルを有するようにする、バーチャルなアップミックス及び／又はバーチャルなラウドスピーカの位置替えを行うこともできる。Ｍチャンネル代替信号、Ｎチャンネル再構成信号、及び、Ｐチャンネル再構成信号は、この構成の消費部分４２の潜在的出力となる。出力としてのこれらの組み合わせ（図ではこの３つ全てを示している）、又はこれらのうちの１つ又は１つの組み合わせを選択することができ、この選択は、（不図示の）選択装置又は選択機能により自動又は手動で、例えば、ユーザー又は消費者により実行される。
【００３５】
さらなる代替案が図４Ｃの実施例に示されている。この実施例では、Ｍチャンネルオリジナル信号は修正されるが、チャンネル再構成情報は伝達も保存もされない。したがって、チャンネル再構成情報の導出３２はこの構成の制作部分３８から省略し、Ｍチャンネル代替信号のみがフォーマット２２に入力されるようにしてもよい。このようにして、オーディオ情報に加えて再構成情報を持つことができないかもしれないレガシーな伝達又は保存の構成では、２チャンネル立体音響信号のようなレガシータイプの信号のみを持つことが要求され、この場合、能動マトリックスデコーダのような、民生の複雑でないアップミキサーに応用されるときに良い結果が得られるように修正される。この構成の消費部分４２において、２つの潜在的出力、すなわち、Ｍチャンネル代替信号とＰチャンネル再構成信号のうちの両方又は一方を出力させるためにチャンネル再構成４４を省略してもよい。
【００３６】
先に示したとおり、このようなＭチャンネルオリジナル信号（又はその近似）が、適応型マトリックスデコーダのような民生タイプのアップミキサーにより、システムの消費部分でブラインドアップミキシングするのにより適したものとなるように、オーディオシステムの制作部分に入力されたＭチャンネルオリジナル信号を修正することが好ましいであろう。
【００３７】
最適化されていないオーディオ信号を修正する１つの方法は、（１）（入力される信号同士での振幅及び／又は位相関係のような）固有の信号特性に少ししか依存せず動作する装置又は機能を用いて信号をアップミックスし、（２）予測適応型マトリックスデコーダと互換性のあるマトリックスエンコーダを用いてアップミックスされた信号をエンコードすることである。このような方法を、図５Ａの実施例の関連させて以下に説明する。
【００３８】
このようなオーディオ信号を修正するもうひとつの方法は、１つ以上の公知の「空間化」及び／又は信号合成技術を適用することである。このような技術は、しばしば「擬似ステレオ」又は「擬似４チャンネル」技術として特徴づけられる。例えば、１以上のチャンネルにデコリレートされたコンテンツ及び／又は位相外れのコンテンツを加えることができる。このような処理により、中央音像の安定性を損なうという犠牲を払って、見掛けのサウンドイメージ幅又はサウンドエンベロープメント（sound  envelopment）を改善する。これを図５Ｂの実施例と関連して説明する。これらの信号特性（振幅／エンベロープメント対中央イメージの安定性）同士の平衡点に到達させるために、イメージの振幅とエンベロープメントは主として高周波数で決まる一方、中央イメージの安定性は主として低周波数から中心周波数で決まるという現象をうまく利用する。信号を２つ以上の周波数帯域に分割することによって、最小のデコリレーションを適用することにより低周波数と中央周波数とでのイメージの安定性を保持し、大きなデコリレーションを適用することにより高周波数でのエンベロープメントの感覚を良くするように、オーディオサブ帯域毎に処理することができる。これは図５Ｃの実施例に記載されている。
【００３９】
図５Ａの実施例を参照して、この構成での制作部分４８において、Ｍチャンネル信号は、「芸術的」アップミキサー装置又は「芸術的」アップミキシング機能（芸術的アップミックス）としての特性を有するものによりＰチャンネル信号にアップミックスされる。「芸術的」アップミキサーは、一般に、しかし必ずしもそうとはいえないが、コンピュータによる複雑なアップミキサーであり、能動マトリックスデコーダがアップミックスを行うために用いる（入力される信号同士の振幅及び／又は位相の関係のような）固有の信号特性にほとんどあるいはまったく依存しないで動作する。その代わり、「芸術的」アップミキサーは、アップミキサーの設計者が特定の結果を得るのに適当だと判断するような１以上のプロセスに従い動作する。このような「芸術的」アップミキサーは、は多くの形態をとることができる。一例として図７と「空間コーダに適用した本発明」の見出しをつけた記載とに関連してここに提示する。この図７の実施例によれば、例えば、「中央パイルアップ」を最小限にするための左右の分離性を良くし、又は「エンベロープメント」を改善するための前後の分離性をより良くするという結果を、アップミックスした信号にもたらす。「芸術的」アップミックスを行うためのどの技法を採用するかについては本発明にとって本質的ではない。
【００４０】
さらに図５Ａを参照して、アップミックスしたＰチャンネル信号は、マトリックスデコーダでデコーディングするのに適し振幅及び位相キューのような、固有の信号特性でチャンネルがエンコードされた、少数のチャンネル、Ｍチャンネル代替信号、を出力するマトリックスエンコーダ又はマトリックスエンコーディング機能（マトリックスエンコード）５２に入力される。適切なマトリックスエンコーダは、図８に関連して以下に説明する５：２マトリックスエンコーダである。他のマトリックスエンコーダも適しているかもしれない。マトリックスエンコード出力は、上述したような、例えば、シリアルビットストリーム又はパラレルビットストリームを生成するフォーマット２２に入力される。芸術的アップミックス５０とマトリックスエンコード５２の結合により、理想的には、消費者の一般的なマトリックスデコーダでデコードされたとき、オリジナル信号を芸術的アップミックス５０に入力することにより得られるデコーディングと比較して改善されたリスニング体験が得られる。
【００４１】
図５Ａの構成の消費部分５４において、出力ビットストリームが受け取られ、（上述の）デフォーマットでフォーマット２２の動作をアンドゥーしてＭチャンネル代替信号（又はその近似）を出力する。Ｍチャンネル代替信号（又はその近似）は、１つの出力として出力され、Ｐチャンネル再構成信号を出力するために、再構成情報を参照することなしにＭチャンネル代替信号を再構成する装置又は機能（再構成情報なしのチャンネル再構成）に入力されてもよい。チャンネルＰの数は、チャンネルＭの数と同じである必要はない。先に説明したように、このような装置又は機能５６は、再構成がアップミキシングのときは、例えば（先に述べた）能動マトリックスデコーダ）のようなブラインドアップミキサーでもよい。Ｍチャンネル代替信号とＰチャンネル再構成信号は、この構成における消費部分５４の潜在的出力となる。これらのうちの１つ又は両方を選択することができ、この選択は、（不図示の）選択装置又は選択機能により自動又は手動で、例えば、ユーザー又は消費者により実行される。
【００４２】
図５Ｂの実施例に、最適化されていない入力信号を修正するもう１つの方法、すなわち、チャンネル同士の相関関係が修正される「空間化」の形式が示されている。この構成の制作部分５８において、Ｍチャンネル信号がデコリレーター装置又はデコリレーション機能（デコリレーター）６０に入力される。信号チャンネル同士の相互相関を減少させることは、よく知られたデコリレーション技術を用いて独立に処理することにより行うことができる。あるいは、信号チャンネル同士で独立に処理することでデコリレーションを行うことができる。例えば、チャンネル同士で位相外れのコンテンツ（すなわち、負の相関がある）は、１つのチャンネルからの信号に信号に比率を掛け反転させて他の信号に混合させることにより行うことができる。両方の場合において、この処理は、各チャンネルの処理された信号及び未処理の信号の相対レベルを調整することにより制御することができる。上述のように、見掛けのサウンドイメージ幅又はサウンドエンベロープメントと、中央イメージの安定性の低下とは、トレードオフの関係にある。個々のチャンネルの独立した処理によるデコリレーションの例は、Seefeldt他による米国特許出願Ｓ．Ｎ．６０／６０４，７２５（２００４年８月２５日出願）、米国特許出願Ｓ．Ｎ．６０／７００，１３７（２００５年７月１８日出願）、及びＳ．Ｎ．６０／７０５，７８４（２００５年８月５日出願、代理人の整理番号ＤＯＬ１４９０１）、表題「Multichannel  Decorrelation  in  Spatial  Audio  Coding」に記載されている。個々のチャンネルの独立した処理によるデコリレーションの他の例は、以下に引用するBreebaart他によるＥＡＳ学会誌６０７２及び国際出願ＷＯ０３／０９０２０６に記載されている。相互相関を減少させたＭチャンネル信号は、上述のように、適切な伝達又は保存を行うために１以上のビットストリームのような適切な出力を出力する、フォーマット２２に入力される。図５Ｂの構成の消費部分５４は、図５Ａの構成の消費部分と同じでもよい。
【００４３】
上述のように、１以上のチャンネルにデコリレートされたコンテンツ及び／又は位相外れのコンテンツを加えることにより、中央音像の安定性を損なうという犠牲を払って、見掛けのサウンドイメージ幅又はサウンドエンベロープメント（sound  envelopment）を改善する。これを図５Ｃの実施例において、振幅／エンベロープメントに対する中央音像の安定性との間の平衡点に到達させるために、信号を２つ以上の周波数帯域に分割し、最小のデコリレーションを適用することにより低周波数と中央周波数とでのイメージの安定性を保持し、大きなデコリレーションを適用することにより高周波数でのエンベロープメントの感覚を良くするように、オーディオサブ帯域を処理する。
【００４４】
図５Ｃを参照して、制作部分５８’において、Ｍチャンネル信号は、サブ帯域フィルター又はサブ帯域フィルタリング機能（サブ帯域フィルター）６２に入力される。図５Ｃは、このようなサブ帯域フィルター６２を明確に示しているが、上述のように、このようなフィルター又はフィルタリング機能は他の実施例でも用いることができることは理解されよう。サブ帯域フィルター６２は種々の形態をとることができるが、フィルター又はフィルタリング機能の選択は（例えば、フィルターバンク又は変換の選択は）本発明にとって本質的ではない。サブ帯域フィルター６２はＭチャンネル信号のスペクトルを、それぞれをデコリレーターに入力することができるＲ個の帯域に分割する。図では、帯域１に対するデコリレーター６４、帯域２に対するデコリレーター６６、及び帯域Ｒに対するデコリレーター６８が示されているが、各帯域はそれぞれ独自にデコリレーターを有することが分かる。帯域によってはデコリレーターに入力させなくてもよい。デコリレーターは、Ｍチャンネル信号のすべてのスペクトルより少ないスペクトルで動作する点を除いて図５Ｂの実施例におけるデコリレーター６０と本質的に同じである。分かりやすくするために、図５Ｃは、単一の信号に対してサブ帯域フィルターと関連するデコリレーターが示されているが、各信号はサブ帯域に分割され各サブ帯域はデコリレートされることが分かる。デコリレーションの後、もしあれば、各信号のサブ帯域は、合算器又は合算機能（合算）７０により合算することができる。合算７０の出力は、例えば、上述のようなシリアルビットストリーム又はパラレルビットストリームを生成するフォーマット２２に入力される。図５Ｃの構成の消費部分５４は、図５Ａ及び図５Ｂの構成の消費部分と同じでもよい。
【００４５】
［空間コーディングの組み込み］
最近発表された制限ビットレートコーディング技術（以下の、空間コーディングに関する特許、特許出願、及び出願公開のリスト参照）では、Ｍチャンネル合成信号の音場についてのＮチャンネル入力信号の音場のパラメータモデルを含有するサイド情報を生成するために、Ｍチャンネル合成信号にと同調してＮチャンネル入力信号を（Ｎ＞Ｍ）分析する。一般に、合成信号は、オリジナルＮチャンネル信号と同じマスター素材から導き出される。このサイド情報と合成信号は、オリジナルＮチャンネル信号に近似した音場を再現させるために、合成信号にパラメータモデルを適用させるデコーダに伝達される。このような空間コーディングシステムの第１の目的は、非常に限られた量のデータで元の音場を再現させることである。したがって、これは、元の音場をシミュレートするために使うパラメータモデルの縮減を行う。このような空間コーディングシステムは、一般に、オリジナルＮチャンネル信号の音場をモデル化するための、チャンネル間レベル偏差（ＩＬＤ）、チャンネル間タイム偏差又は位相偏差（ＩＴＤ又はＩＰＤ）、及びチャンネル間コヒーレンス（ＩＣＣ）のような、パラメータを採用する。一般に、このようなパラメータはコード化されたＮチャンネルの入力信号全体に亘る複数のスペクトル帯域に対して予測され、動的に時間的に予測される。
【００４６】
先行技術の空間コーディングの例を図６Ａ，６Ｂ（エンコーダ），及び６Ｃ（デコーダ）に示す。Ｎチャンネルのオリジナル信号は、装置又は機能（時間から周波数）により、よく知られた短時間離散フーリエ変換（ＳＴＤＦＴ）のような、適切な時間・周波数変換を用いて周波数領域に変換される。一般に、この変換は、周波数帯域が耳の臨界帯域を近似するように行われる。チャンネル間振幅偏差、チャンネル間時間偏差又は位相偏差、及びチャンネル間相関の推定値は、帯域の各々に対して計算される（空間サイド情報の生成）。もし、Ｎチャンネルオリジナル信号に対応するＭチャンネル合成信号がまだ存在しない場合は、これらの推定値は（図６Ａの実施例のように）、Ｎチャンネルオリジナル信号をＭチャンネル合成信号にダウンミックス（ダウンミックス）するために用いられる。あるいは、既存のＭチャンネル合成信号を、同じ時間・周波数変換（分かりやすくするため別に示した）により同時に処理してもよく、（図６Ｂの実施例のように）Ｎチャンネルオリジナル信号の空間パラメータを、Ｍチャンネル合成信号の空間パラメータに関して計算してもよい。同様に、Ｎチャンネルオリジナル信号が使えない場合は、Ｎチャンネルオリジナル信号、すなわち、各信号が図６Ｂの実施例のそれぞれの時間・周波数変換装置又は機能への入力を出力する各信号を生成するために、利用可能なＭチャンネル合成信号を時間領域でアップミックスしてもよい。次いで、この合成信号と推定した空間パラメータは、単一のビットストリームにエンコード（フォーマット）される。デコーダにおいて（図６Ｃ）、このビットストリームは、空間サイド情報と同調してＭチャンネル合成信号を生成するためにデコード（デフォーマット）される。この合成信号は、周波数領域にＮチャンネルオリジナル信号を生成するために、デコードされた空間パラメータを対応する帯域で適用する（空間サイド情報の適用）、周波数領域に（時間・周波数）変換される。最後に、それによりＮチャンネルオリジナル信号又はその近似を生成するために、（周波数・時間）周波数・時間変換が適用される。あるいは、空間サイド情報を無視して、再生のためにＭチャンネル合成信号を選択してもよい。
【００４７】
先行技術の空間コーディングシステムは、その音場の低データレートパラメーター表現をそれから予測するＮチャンネル信号の存在を前提とする一方、このようなシステムは開示された発明と協働できるよう修正される。元のＮチャンネル信号から予測するより、このような空間パラメータは、レガシーＭチャンネル信号の分析により直接生成してもよい。ここでＭ＜Ｎである。このようなパラメータがそこで適用されたとき、求めるレガシーＭチャンネル信号のＮチャンネルアップミックスがデコーダで作られるように、このパラメータは生成される。これはエンコーダで実際のＮチャンネルアップミックス信号を生成することなく行うことができるが、Ｍチャンネルレガシー信号から直接求めるアップミックスされた信号の音場のパラメータ表現を作ることにより行うほうがよい。図７は、図６Ｃで示された空間デコーダと互換性のあるアップミキシングエンコーダを示す。このようなパラメータ表現の作成のさらなる詳細については、以下に「空間コーダに適用した本発明」の見出し出説明する。
【００４８】
図７の詳細を参照して、時間領域のＭチャンネルオリジナル信号は、適切な時間・周波数変換（時間・周波数）７２を用いて周波数領域に変換される。装置又は機能７４（サイド情報としてアップミックス情報を導出）は、空間コーディングシステムで空間サイド情報を生成したのと同じ方法でアップミックス指令を導出する。空間コーディングシステムにおいて空間サイド情報を生成することについての詳細は、ここに引用した１以上の参考文献に述べられている。アップミックス指令を構成する空間コーディングパラメータは、Ｍチャンネルオリジナル信号と共に、Ｍチャンネルオリジナル信号と空間コーディングパラメータとを伝達又は記憶に適した形態に変換する装置又は機能（フォーマット）７６に入力される。フォーマッティングにはデータ圧縮エンコーディングを含むことができる。
【００４９】
例えば図６Ｃのデコーダとしてアップミックスされる信号に入力させる装置又は機能と一緒に説明した、パラメータ生成を採用するアップミキサーは、図４Ｂ，４Ｃ，５Ａ，及び５Ｂの例におけるような修正された信号を生成するために用いるコンピュータによる複雑なアップミキサーに適している。
【００５０】
Ｍチャンネルレガシー信号から、好ましいＮチャンネルアップミックス信号をエンコーダで（以下の例のように）生成させることなく、直接パラメータ表現を生成することが好都合であるが、これは本発明の本質ではない。代替的に、好ましいＮチャンネルアップミックス信号をエンコーダで生成させることで、空間パラメータを導き出すことができる。機能的に、このような信号は図７のブロック７４内で生成される。このように、この代替案でも、導き出すための指令を受け取るオーディオ情報のみがＭチャンネルレガシー信号である。
【００５１】
図８は、プロロジックＩＩと互換性のある５：２マトリックス能動エンコーダ（線形時間不変）の一般的な先行技術を示す理想化された機能ブロック図である。このようなエンコーダは、上述の図５Ａの例で用いるのに適している。このエンコーダは、５つの別々の入力すなわち、左、中央、右、左サラウンド、及び右サラウンド（Ｌ，Ｃ，Ｒ，ＬＳ，ＲＳ）を受け取り、二つの最終的な出力、すなわち左トータル及び右トータル（Ｌｔ及びＲｔ）を作る。Ｃ入力は等しく分割され、一定の聴覚パワーを保持するために（減衰器８４により）３ｄＢレベル（振幅）減衰させて、（それぞれ、結合器８０と８２において）Ｌ入力とＲ入力とに加算される。この、Ｌ入力とＲ入力は、それぞれレベルを減少させたＣ入力と加算して、位相とレベルをずらしたＬＳ入力を減算させ、ＲＳ入力を加算させて、結合する。左サラウンド（ＬＳ）入力は、ブロック８６に示すように、理想的には９０度位相シフトさせて、Ｌとレベル減衰させたＣとを加算したものと結合器９０で減算させて結合するために、減衰器８８で１．２ｄＢレベルを減衰させる。次いで、Ｒと、レベル減衰させたＣと、そして、ＲＳの位相をずらし、レベルを減衰させたものと結合器９４で加算させて結合させるために減衰器９２で５ｄＢレベルを減衰させ、次に述べるように、Ｒｔ出力を出力する。右サラウンド（ＲＳ）入力は、ブロック９６に示すように、理想的には９０度位相シフトさせて、Ｒとレベル減衰させたＣとを加算したものと結合器１００で加算させて結合させるために、減衰器９８で１．２ｄＢレベルを減衰させる。次いで、Ｒと、レベル減衰させたＣと、そして、ＬＳの位相をずらし、レベルを減衰させたものと結合器１０４で減算させ結合させるために減衰器１０２で５ｄＢレベルを減衰させ、Ｌｔ出力を出力する。
【００５２】
一般に、図に示すように各サラウンド入力経路の９０度の位相シフトブロックのみが必要である。実際には、９０度の位相シフトは実現できないので、４つのすべての経路の回路網に、好ましい９０度の位相シフトを実現するために、適切な位相シフトを用いてもよい。すべての経路の回路網に用いることは、処理するオーディオ信号の音色（周波数スペクトル）に影響を与えないという利点がある。エンコードされた左トータル信号（Ｌｔ）及びエンコードされた右トータル信号（Ｒｔ）とは、
Lt=L+m(-3)dB*C-j*[m(-1.2)dB*Ls+m(-6.2)dB*Rs]、及び、
Rt=R+m(-3)dB*C+j*[(m(-l.2)dB*Rs+m(-6.2)dB*Ls)
で表すことができ、
ここで、Ｌは左入力信号、Ｒは右入力信号、Ｃは中央入力信号、Ｌｓは左サラウンド入力信号、Ｒｓは右サラウンド入力信号、ｊはマイナス１（−１）の平方根（９０度の位相シフト）、そして、ｍはデシベル単位での減衰（したがって、ｍ（−３）ｄＢ＝３ｄＢ減衰）を表したものとの乗算を表す。
【００５３】
代替的に、この式は以下のように表してもよい。すなわち、
Lt=L+(0.707)*C-j*(0.87*Ls+0.56*Rs)、及び
Rt=R+(0.707)*C+j*(0.87*Rs+0.56*Ls)
ここで、０．７０７は、３ｄＢ減衰の近似値、０．８７は、１．２３ｄＢ減衰の近似値、そして、０．５６は、６．２ｄＢ減衰の近似値である。この値（０．７０７，０．８７，及び０．５６）は、本質的ではない。他の値を用いて許容できる結果を得ることもできる。他の値を採用することのできる範囲は、システムの設計者が聞こえた結果が許容できると判断する範囲で決まる。
【００５４】
［発明を実施するための最良の形態］
［空間コーディングの背景］
チャンネル間のレベル偏差（ＩＬＤ）の臨界帯域毎の推定値と、Ｎチャンネル信号のチャンネル間のコヒーレンス（ＩＣＣ）をサイド情報として用いる、空間コーディングを考える。合成信号のチャンネル数をＭ＝２と仮定し、元の信号のチャンネル数をＮ＝５と仮定する。以下のように記号を定義する。
【００５５】
Ｘｊ［ｂ，ｔ］：帯域ｂ、時間ブロックｔにおける合成信号ｘのチャンネルｊでの周波数領域での表現である。この値は、デコーダに送られた合成信号ｘに時間・周波数変換を適用することにより導き出される。
【００５６】
Ｚｊ［ｂ，ｔ］：帯域ｂ、時間ブロックｔにおける元の信号の推定値ｚのチャンネルｉでの周波数領域での表現である。この値は、サイド情報をＸｊ［ｂ，ｔ］に適用することにより導き出される。
【００５７】
ＩＬＤｉｊ［ｂ，ｔ］：帯域ｂ、時間ブロックｔにおける合成信号のチャンネルｊについての元の信号のチャンネルｉでのチャンネル間レベル偏差である。この値はサイド情報として伝送される。
【００５８】
ＩＣＣｉ［ｂ，ｔ］：帯域ｂ、時間ブロックｔにおける元の信号のチャンネルｉでのチャンネル間レベル偏差である。この値はサイド情報として伝送される。
【００５９】
デコーディングの最初のステップとして、Ｎチャンネル信号の中間周波数領域での表現を、チャンネル間レベル偏差を以下のように合成信号に適用することにより生成する。
【数１】
2008543227.tif 000003
【００６０】
次いで、一意的なデコリレーションフィルターＨｉを各チャンネルｉに適用することにより、デコリレートしたＹｉを生成し、ここで、フィルターの適用は、周波数領域で乗算することにより達成することができる。すなわち、
【数２】
2008543227.tif 000004
【数３】
2008543227.tif 000005
【００６１】
次いで、周波数・時間変換をＺｉ［ｂ，ｔ］に適用することにより、最後の信号ｚを生成する。
【００６２】
［空間コーダに適用した本発明］
ここで、Ｍ＝２チャンネルの信号をＮ＝６チャンネルの信号にアップミックスするために、上述の空間デコーダを用いる、開示した発明の実施形態を説明する。このエンコーディングは、上述のように、サイド情報ＩＬＤｉｊ［ｂ，ｔ］とサイド情報ＩＣＣｉ［ｂ，ｔ］とがＸｊ［ｂ，ｔ］に適用されるとき、好ましいアップミックスがデコーダで生成されるように、Ｘｊ［ｂ，ｔ］からサイド情報ＩＬＤｉｊ［ｂ，ｔ］とサイド情報ＩＣＣｉ［ｂ，ｔ］とを合成することを必要とする。上述のように、適用するこの方法は、アップミックスされた信号が次にマトリックスエンコーダに適用されるとき、民生型マトリックスデコーダのような複雑でないアップミキサーでアップミックスするのに適した代替信号を生成するために用いるのに適した、コンピュータで計算する複雑なアップミックスを出力する。
【００６３】
ブラインドアップミキシングシステムの最初のステップは２チャンネル入力をスペクトル領域に変換することである。スペクトル領域へのこの変換は、デコレレーションフィルターに起因する、巡回畳み込み効果を防ぐために、ゼロパッドのブロックの５０％と７５％重複してＤＦＴｓを行うことにより達成することができる。この、ＤＦＴ構想は、空間コーディングシステムの好ましい実施の形態で用いられる時間・周波数変換構想に適合する。次いで、この信号の周波数表現は、等価な直角帯域（ＥＲＢ）スケールを近似する複数の帯域に分割される。ここで、この帯域構成は、サイド情報をデコーダでブラインドアップミキシングするのに用いることのできるように、空間コーディングシステムで用いられるものと同じである。各帯域ｂにおいて、共分散マトリックスが以下の式で示されるように計算される。
【数４】
2008543227.tif 000006
【００６４】
2008543227.tif 000007
【００６５】
共分散マトリックスにおける瞬時推定値は、次に、以下の式に示すように各帯域での共分散マトリックスに適用する、簡単な一次ＨＦフィルターを用いて各ブロックで平滑化される。
【数５】
2008543227.tif 000008
【００６６】
簡単な２から６までのブラインドアップミキシングシステムについて、チャンネル順序づけを以下のように定義する。
【表１】
2008543227.tif 000009
【００６７】
上記チャンネルマッピングを用いて、我々は、平滑化された共分散マトリックスに関するチャンネルの各々に対して帯域ＩＬＤ及びＩＣＣ毎に以下のように展開する。
【数６】
2008543227.tif 000010
【００６８】
次いで、チャンネル１（左）に対して：
【数７】
2008543227.tif 000011
【００６９】
チャンネル２（中央）に対して：
【数８】
2008543227.tif 000012
【００７０】
チャンネル３（右）に対して：
【数９】
2008543227.tif 000013
【００７１】
チャンネル４（左サラウンド）に対して：
【数１０】
2008543227.tif 000014
【００７２】
チャンネル５（右サラウンド）に対して：
【数１１】
2008543227.tif 000015
【００７３】
チャンネル６（ＬＦＥ）に対して：
【数１２】
2008543227.tif 000016
【００７４】
実際には、上述の例による構成でうまく行くことが分かっている。すなわち、周囲音から直接のサウンドを分離し、直接のサウンドを左右のチャンネルにし、周囲音を後方チャンネルにもってゆく。より複雑な構成を、空間コーディングシステム内で伝達されたサイド情報を用いることで作り上げることもできる。
【００７５】
［参照としての編入］
以下の特許、特許出願、及び、刊行物は参照としてそのすべてを本明細書に編入する。
【００７６】
［バーチャルなサウンド処理］
Atal他による、米国特許３，２３６，９４９、表題「Apparent  Sound  Source  Translator」（１９６６年２月２６日）、
Bauerによる、米国特許３，０８８，９９７、表題「Stereophonic  to  Binaural  Conversion  Apparatus」（１９６３年５月７日）。
【００７７】
［ＡＣ−３（ドルビーデジタル）］
ＡＴＳＣ標準Ａ５２／Ａ：Digital  Audio  Compression  Standard  (AC-3),  Revision A、Advanced  Television  Systems  Committee、２００１年８月２０日。このＡ５２／Ａ書面は、ワールドワイドウェブhttp://www.atsc.orR/standards.html.にて参照することができる。
【００７８】
Steve  Vernon  /EEE  Trans．による、１９９５年８月のConsumer  Electronics，Vol.41,No. 3、「Design  and  Implementation  of  AC-3  Coders」、
Mark Davisによる、１９９３年１０月のAudio  Engineering  Society  Preprint  3774,  95th  AES  Convention,「The  AC-3  Multichannel  Coder」、
Bosi他による、１９９２年１０月のAudio  Engineering  Society  Preprint  3365,  93rd  AES  Convention,「High  Quality,  Low-Rate  Audio  Transform  Coding  for  Transmission  and  Multimedia  Applications」、
米国特許、５，５８３，９６２と、５，６３２，００５と、５，６３３，９８１と、５，７２７，１１９と、６，０２１，３８６。
【００７９】
［空間コーディング］
米国特許出願公開公報ＵＳ２００３／００２６４４１、２００３年２月６日公開、
米国特許出願公開公報ＵＳ２００３／００３５５５３、２００３年２月２０日公開、
米国特許出願公開公報ＵＳ２００３／０２１９１３０（Baumgarte  &  Faller）、２００３年１１月２７日公開、
Audio  Engineering  Society  論文５８５２、２００３年３月、
国際公開公報ＷＯ０３／０９０２０６、２００３年１０月３０日公開、
国際公開公報ＷＯ０３／０９０２０７、２００３年１０月３０日公開、
国際公開公報ＷＯ０３／０９０２０８、２００３年１０月３０日公開、
国際公開公報ＷＯ０３／００７６５６、２００３年１月２２日公開、
Baumgarte他による、２００３年１２月２５日に公開された、米国特許出願公開公報ＵＳ２００３／０２３６５８３Ａｌ、表題「Hybrid  Multi-Channel/Cue  Coding/Decoding  of  Audio  Signals」、出願番号Ｓ．Ｎ．１０／２４６，５７０、
Faller他による、Audio  Engineering  Society  Convention  Paper  5574,  112th  Convention,  Munich,  May  2002、「Binaural  Cue  Coding  Applied  to  Stereo  and  Multi-Channel  Audio  Compression」、
Baumgarte他による、Audio  Engineering  Society  Convention  Paper  5575,  112th  Convention,  Munich,  May  2002「Why  Binaural  Cue  Coding  is  Better  than  Intensity  Stereo  Coding」、
Baumgarte他による、Audio  Engineering  Society  Convention  Paper  5706,  113th  Convention,  Los  Angeles,  October  2002、「Design  and  Evaluatin  of  Binaural  Cue  Coding  Schemes」、
Faller他による、IEEE  Workshop  on  Applications  of  Signal  Processing  to  Audio  and  Acoustics  2001,  New  Paltz,  New
York,  October  2001,  pp.199-202、「Efficient  Representation  of  Spatial  Audio  Using  Perceptual  Parametrization」、
Baumgarte他による、Proc.  ICASSP  2002,  Orlando,  Florida,  May  2002,  pp.II-1801-1804、「Estimation  of  Auditory  Spatial  Cues  for  Binaural  Cue  Coding」、
Faller他による、Proc.  ICASSP  2002,  Orlando,  Florida,  May  2002,  pp.II-1841II-1844、「Binaural  Cue  Coding:  A  Novel  and  Efficient  Representation  of  Spatial  Audio」、
Breebaart他による、Audio  Engineering  Society  Convention  Paper  6072,  116th  Convention,  Berlin,  May  2004、「High-quality  parametric  spatial  audio  coding  at  low  bitrates」、
Baumgarte他による、Audio  Engineering  Society  Convention  Paper  6060,  116th  Convention,  Berlin,  May
2004、「Audio  Coder  Enhancement  using  Scalable  Binaural  Cue  Coding  with  Equalized  Mixing」、
Schuijers他による、Audio  Engineering  Society  Convention  Paper  6073,  116th  Convention,  Berlin,  May
2004、「Low  complexity  parametric  stereo  coding」、
Engdegard他による、Audio  Engineering  Society  Convention  Paper  6074,  116th  Convention,  Berlin,  May
2004、「Synthetic  Ambience  in  Parametric  Stereo  Coding」。
【００８０】
［その他］
Kenneth  James  Gundryによる米国特許６，７６０，４４８、表題「Compatible  Matrix-Encoded  Surround-Sound  Channels  in  a  Discrete  Digital  Sound  Format」、
Michael  John  Smithersによる米国特許出願Ｓ．Ｎ．１０／９１１，４０４、表題「Method  for  Combining  Audio  Signals  Using  Auditory  Scene  Analysis」、２００４年８月３日出願、
Seefeldt他による米国特許出願Ｓ．Ｎ．６０／６０４，７２５（２００４年８月２５日出願）、Ｓ．Ｎ．６０／７００，１３７（２００５年７月１８日出願）、及びＳ．Ｎ．６０／７０５，７８４（２００５年８月５日出願、代理人の整理番号ＤＯＬ１４９０１）、それぞれの表題「Multichannel  Decorrelation  in  Spatial  Audio  Coding」、
国際公開公報ＷＯ０３／０９０２０６、２００３年１０月３０日公開、
Breebaart他による、Audio  Engineering  Society  Convention  Paper  6072,  116th  Convention,  Berlin,  May
2004、「High-quality  parametric  spatial  audio  coding  at  low  bitrates」。
【００８１】
（実施の形態）
本発明は、ハードウェア又はソフトウェア又は両方を組み合わせたもの（例えば、プログラマブルロジックアレー）で実施することができる。他に記載がない限り、本発明の１部に含まれるアルゴリズム又はプロセスは、特定のコンピュータ又は特定の装置に本質的に関連するようなものではない。とりわけ、種々の汎用機をここの記載に従って書かれたプログラムと共に用いてもよい、あるいは、要求の方法を実行するために、より特化した装置（例えば、集積回路）を構成することが便利かもしれない。このように、本発明は、それぞれ少なくとも１つのプロセッサ、少なくとも１つの記憶システム（揮発性及び非揮発性メモリー及び／又は記憶素子を含む）、少なくとも１つの入力装置又は入力ポート、及び少なくとも１つの出力装置又は出力ポートを具備する、１つ以上のプログラマブルコンピュータシステム上で実行される１つ以上のコンピュータプログラムにより実現することができる。ここに記載した機能を遂行し、出力情報を出力させるために入力データにプログラムコードを適用する。この出力情報は、公知の方法で、１以上の出力装置に適用される。
【００８２】
このようなプログラムの各々は、コンピュータシステムとの通信のために、必要とされるどんなコンピュータ言語（機械語、アセンブリ、又は、高級な、手続言語、論理型言語、又は、オブジェクト指向言語を含む）ででも実現することができる。いずれにせよ、言語はコンパイル言語であってもインタープリタ言語であってもよい。
【００８３】
このようなコンピュータプログラムの各々は、ここに記載の手順を実行するために、コンピュータにより記憶媒体又は記憶装置を読み込んだとき、コンピュータを設定し動作させるための、汎用プログラマブルコンピュータ又は専用プログラマブルコンピュータにより、読み込み可能な記憶媒体又は記憶装置（例えば、半導体メモリー又は半導体媒体、又は磁気又は光学媒体）に保存又はダウンロードすることが好ましい。本発明のシステムはまた、コンピュータプログラムにより構成されるコンピュータにより読み込み可能な記憶媒体として実行することを考えることもできる。ここで、この記憶媒体は、コンピュータシステムを、ここに記載した機能を実行するために、具体的にあらかじめ定めた方法で動作させる。
【００８４】
本発明の多くの実施の形態について記載した。しかしながら、本発明の精神と技術範囲を逸脱することなく多くの修正を加えることができることは明らかであろう。例えば、ここに記載したステップのいくつかの順序は独立であり、従って、記載とは異なる順序で実行することができる。
【図面の簡単な説明】
【００８５】
【図１】制作部分と消費部分とを有し、アップミキシングが消費部分で行われる、アップミキシングのための先行技術における構成の機能ブロック図である。
【図２】制作部分と消費部分とを有し、アップミキシングが制作部分で行われる、アップミキシングのための先行技術における構成の機能ブロック図である。
【図３】本発明のアップミキシングの実施の形態であって、アップミキシングの指令が制作部分で導き出されこの指令が消費部分に適用される形態の一例を示す機能ブロック図である。
【図４Ａ】本発明の一般的なチャンネル再構成の実施の形態であって、チャンネル再構成の指令が制作部分で導き出されこの指令が消費部分に適用される形態の一例を示す機能ブロック図である。
【図４Ｂ】本発明の他の一般的なチャンネル再構成の実施の形態であって、チャンネル再構成の指令が制作部分で導き出されこの指令が消費部分に適用される形態の一例を示す機能ブロック図である。制作部分に適用する信号は、このようなチャンネル再構成が消費部分でチャンネル再構成の指令を参照しないでなされるとき、このチャンネル再構成を改良するように修正することができる。
【図４Ｃ】本発明の他の一般的なチャンネル再構成の実施の形態を示す機能ブロック図である。制作部分に適用する信号は、このようなチャンネル再構成が消費部分でチャンネル再構成の指令を参照しないでなされるとき、このチャンネル再構成を改良するように修正される。再構成情報は制作部分から消費部分に送られない。
【図５Ａ】制作部分が、アップミキシング又はアップミキシング機能及びマトリックスエンコーダ又はマトリックスエンコーディング機能により、入力された信号を修正する構成の機能ブロック図である。
【図５Ｂ】制作部分が、相互相関を減少させることにより、入力された信号を修正する構成の機能ブロック図である。
【図５Ｃ】制作部分が、サブ帯域に基づく相互相関を減少させることにより、入力された信号を修正する構成の機能ブロック図である。
【図６Ａ】エンコーダが空間コーディングシステムにおいてデコーダにより再生されることが求められるＮチャンネル信号を受信する、空間コーディングシステムにおけるエンコーダの先行技術の一例を示す機能ブロック図である。
【図６Ｂ】エンコーダが空間コーディングシステムにおいてデコーダにより再生されることが求められるＮチャンネル信号を受け取り、また、エンコーダからデコーダに送られるＭチャンネル合成信号を受信する、空間コーディングシステムにおけるエンコーダの先行技術の一例を示す機能ブロック図である。
【図６Ｃ】図６Ａのエンコーダ又は図６Ｂのエンコーダで使用可能な空間コーディングシステムにおけるデコーダの先行技術の一例を示す機能ブロック図である。
【図７】空間コーディングシステムで使用可能な本発明のデコーダの実施例の一例を示す機能ブロック図である。
【図８】２：５能動マトリックスデコーダで使用可能な５：２マトリックスエンコーダの理想化された先行技術を示す機能ブロック図である。
【図１】
2008543227.tif 000017
【図２】
2008543227.tif 000018
【図３】
2008543227.tif 000019
【図４Ａ】
2008543227.tif 000020
【図４Ｂ】
2008543227.tif 000021
【図４Ｃ】
2008543227.tif 000022
【図５Ａ】
2008543227.tif 000023
【図５Ｂ】
2008543227.tif 000024
【図５Ｃ】
2008543227.tif 000025
【図６Ａ】
2008543227.tif 000026
【図６Ｂ】
2008543227.tif 000027
【図６Ｃ】
2008543227.tif 000028
【図７】
2008543227.tif 000029
【図８】
2008543227.tif 000030
【国際調査報告】
2008543227.tif 000031
2008543227.tif 000032
2008543227.tif 000033