(57)【要約】オーディオ入力信号からフィルタリング済みオーディオ信号を生成する装置（１００）である。この装置（１００）は、入力高さ情報に依存してフィルタ情報を決定するフィルタ情報決定部（１１０）を含み、前記入力高さ情報は仮想音源（４９２）の高さに依存している。さらに、装置（１００）は、前記フィルタ情報に依存して前記オーディオ入力信号をフィルタリングし、前記フィルタリング済みオーディオ信号を取得するフィルタユニット（１２０）を含む。フィルタ情報決定部（１１０）は、前記入力高さ情報に依存して、複数のフィルタ曲線から１つの選択フィルタ曲線を選択することを使用して、前記フィルタ情報を決定するか、又はフィルタ情報決定部（１１０）は、エレベーション情報に依存して、基準フィルタ曲線を修正することにより修正フィルタ曲線を決定することで、前記フィルタ情報を決定する。【選択図】  図１ｂ
2019500823.tif 000002
【特許請求の範囲】
【請求項１】
オーディオ入力信号からフィルタリング済みオーディオ信号を生成する装置（１００）であって、前記装置（１００）は、
入力高さ情報に依存してフィルタ情報を決定するよう構成されたフィルタ情報決定部（１１０）であって、前記入力高さ情報は仮想音源（４９２）の高さに依存している、フィルタ情報決定部（１１０）と、
前記フィルタ情報に依存して前記オーディオ入力信号をフィルタリングし、前記フィルタリング済みオーディオ信号を取得するよう構成された、フィルタユニット（１２０）と、を備え、
前記フィルタ情報決定部（１１０）は、前記入力高さ情報に依存して、複数のフィルタ曲線から１つの選択フィルタ曲線を選択することを使用して、前記フィルタ情報を決定するよう構成されるか、又は
前記フィルタ情報決定部（１１０）は、エレベーション情報に依存して、基準フィルタ曲線を修正することにより修正フィルタ曲線を決定することを使用して、前記フィルタ情報を決定するよう構成される、
装置（１００）。
【請求項２】
前記フィルタユニット（１２０）が前記オーディオ入力信号の第１スペクトル部分を修正し、かつ前記フィルタユニット（１２０）が前記オーディオ入力信号の第２スペクトル部分を修正しないように、前記フィルタ情報決定部（１１０）は前記フィルタ情報を決定するよう構成される、請求項１に記載の装置（１００）。
【請求項３】
前記フィルタユニット（１２０）が前記オーディオ入力信号の第１スペクトル部分を第１増幅値によって増幅し、かつ前記フィルタユニット（１２０）が前記オーディオ入力信号の第２スペクトル部分を第２増幅値によって増幅するように、前記フィルタ情報決定部（１１０）は前記フィルタ情報を決定するよう構成され、前記第１増幅値は前記第２増幅値と異なる、請求項１に記載の装置（１００）。
【請求項４】
前記入力高さ情報は、座標系の１つの座標の少なくとも１つの座標値を示し、前記座標は前記仮想音源の位置を示している、請求項１〜３のいずれか１項に記載の装置（１００）。
【請求項５】
前記座標系は３次元デカルト座標系であり、前記入力高さ情報は前記３次元デカルト座標系の１つの座標、若しくは前記３次元デカルト座標系の前記座標の３つの座標値の１つの座標値であり、又は
前記座標系は極座標系であり、前記入力高さ情報は前記極座標系の１つの極座標の仰角である、
請求項４に記載の装置（１００）。
【請求項６】
前記フィルタ情報決定部（１１０）は、前記入力高さ情報に依存して、前記複数のフィルタ曲線から選択フィルタ曲線を選択することを使用して、前記フィルタ情報を決定するよう構成され、
前記入力高さ情報は、入力座標値である、前記３次元デカルト座標系の前記座標の３つの座標値の前記座標値であり、前記複数のフィルタ曲線の各フィルタ曲線は当該フィルタ曲線に割り当てられた座標値を有し、前記フィルタ情報決定部（１１０）は、前記複数のフィルタ曲線から前記選択フィルタ曲線として１つのフィルタ曲線を選択するよう構成され、そのフィルタ曲線は、全ての複数のフィルタ曲線の中で、前記入力座標値と当該フィルタ曲線に割当てられている座標値との間に最小の絶対値差を有するか、又は
前記入力高さ情報は、入力仰角である仰角であり、前記複数のフィルタ曲線の各フィルタ曲線は当該フィルタ曲線に割り当てられた仰角を有し、前記フィルタ情報決定部（１１０）は、前記複数のフィルタ曲線から前記選択フィルタ曲線として１つのフィルタ曲線を選択するよう構成され、そのフィルタ曲線は、全ての複数のフィルタ曲線の中で、前記入力仰角と前記フィルタ曲線に割当てられている仰角との間に最小の絶対値差を有する、
請求項５に記載の装置（１００）。
【請求項７】
前記フィルタ情報決定部（１１０）は、前記選択フィルタ曲線を決定された増幅値によって増幅し、処理済みフィルタ曲線を取得するよう構成され、又は前記フィルタ情報決定部（１１０）は、前記選択フィルタ曲線を決定された減衰値によって減衰させ、前記処理済みフィルタ曲線を取得するよう構成され、
前記フィルタユニット（１２０）は、前記処理済みフィルタ曲線に依存して前記オーディオ入力信号をフィルタリングし、フィルタリング済みオーディオ信号を取得するよう構成され、
前記フィルタ情報決定部（１１０）は、前記入力座標値と前記選択フィルタ曲線に割当てられている座標値との差に依存して、前記決定された増幅値又は前記決定された減衰値を決定するよう構成されるか、又は前記フィルタ情報決定部（１１０）は、前記仰角と前記選択フィルタ曲線に割当てられている仰角との差に依存して、前記決定された増幅値又は前記決定された減衰値を決定するよう構成される、
請求項６に記載の装置（１００）。
【請求項８】
前記フィルタ情報決定部（１１０）は、前記エレベーション情報に依存して前記基準フィルタ曲線を修正することにより前記修正フィルタ曲線を決定することで、前記フィルタ情報を決定するよう構成され、
前記フィルタ情報決定部（１１０）は、前記基準フィルタ曲線を決定された増幅値によって増幅し、処理済みフィルタ曲線を取得するよう構成されるか、又は前記フィルタ情報決定部（１１０）は、前記基準フィルタ曲線を決定された減衰値によって減衰させ、処理済みフィルタ曲線を取得するよう構成される、
請求項１〜５のいずれか１項に記載の装置（１００）。
【請求項９】
前記フィルタ情報決定部（１１０）は、前記入力高さ情報に依存して複数のフィルタ曲線から前記選択フィルタ曲線を第１の選択フィルタ曲線として選択することを使用して、前記フィルタ情報を決定するよう構成され、
前記フィルタ情報決定部（１１０）は、前記入力高さ情報に依存して複数のフィルタ曲線から第２の選択フィルタ曲線を選択することを使用して、前記フィルタ情報を決定するよう構成され、かつ
前記フィルタ情報決定部（１１０）は、前記第１の選択フィルタ曲線と前記第２の選択フィルタ曲線との間を補間することにより、補間済みフィルタ曲線を決定するよう構成される、
請求項１〜５のいずれか１項に記載の装置（１００）。
【請求項１０】
前記フィルタ情報決定部（１１０）は、前記入力高さ情報に依存して、複数のフィルタ曲線から前記選択フィルタ曲線を選択することを使用して、前記フィルタ情報を決定するよう構成され、前記複数のフィルタ曲線の各々は７００Ｈｚと２０００Ｈｚとの間に最大値又は最小値を有するか、又は
前記フィルタ情報決定部（１１０）は、前記エレベーション情報に依存して、前記基準フィルタ曲線を修正することにより修正フィルタ曲線を決定することで、前記フィルタ情報を決定するよう構成され、前記基準フィルタは７００Ｈｚと２０００Ｈｚとの間に最大値又は最小値を有する、
請求項１〜９のいずれか１項に記載の装置（１００）。
【請求項１１】
前記フィルタ情報決定部（１１０）は、前記入力高さ情報と入力方位角情報とに依存してフィルタ情報を決定するよう構成され、
前記フィルタ情報決定部（１１０）は、前記入力高さ情報と前記入力方位角情報とに依存して、複数のフィルタ曲線から前記選択フィルタ曲線を選択することを使用して、前記フィルタ情報を決定するよう構成されるか、又は
前記フィルタ情報決定部（１１０）は、前記エレベーション情報と前記方位角情報とに依存して、基準フィルタ曲線を修正することにより修正フィルタ曲線を決定することで、前記フィルタ情報を決定するよう構成される、
請求項１〜１０のいずれか１項に記載の装置（１００）。
【請求項１２】
前記フィルタユニット（１２０）は、前記フィルタ情報に依存して前記オーディオ入力信号をフィルタリングし、フィルタリング済みオーディオ信号として正に２つのオーディオチャネルを有する１つの両耳オーディオ信号を取得するよう構成され、
前記フィルタ情報決定部（１１０）は、入力頭部伝達関数に関する入力情報を受信するよう構成され、
前記フィルタ情報決定部（１１０）は、前記選択フィルタ曲線又は前記修正フィルタ曲線に依存して前記入力頭部伝達関数を修正することにより修正頭部伝達関数を決定することで、前記フィルタ情報を決定するよう構成されている、
請求項１〜１１のいずれか１項に記載の装置（１００）。
【請求項１３】
前記入力頭部伝達関数はスペクトルドメインで表現され、
前記選択フィルタ曲線はスペクトルドメインで表現されるか、又は前記修正フィルタ曲線はスペクトルドメインで表現され、
前記フィルタ情報決定部（１１０）は、前記選択フィルタ曲線もしくは前記修正フィルタ曲線のスペクトル値を前記入力頭部伝達関数のスペクトル値に加算することにより、前記修正頭部伝達関数を決定するよう構成されるか、又は
前記フィルタ情報決定部（１１０）は、前記選択フィルタ曲線若しくは前記修正フィルタ曲線のスペクトル値と前記入力頭部伝達関数のスペクトル値とを乗算することにより、前記修正頭部伝達関数を決定するよう構成されるか、又は
前記フィルタ情報決定部（１１０）は、前記入力頭部伝達関数のスペクトル値から前記選択フィルタ曲線もしくは前記修正フィルタ曲線のスペクトル値を減算するか、又は前記選択フィルタ曲線もしくは前記修正フィルタ曲線のスペクトル値から前記入力頭部伝達関数のスペクトル値を減算することにより、前記修正頭部伝達関数を決定するよう構成されるか、又は
前記フィルタ情報決定部（１１０）は、前記入力頭部伝達関数のスペクトル値を前記選択フィルタ曲線もしくは前記修正フィルタ曲線のスペクトル値で除算するか、又は前記選択フィルタ曲線もしくは前記修正フィルタ曲線のスペクトル値を前記入力頭部伝達関数のスペクトル値で除算することにより、前記修正頭部伝達関数を決定するよう構成される、
請求項１２に記載の装置（１００）。
【請求項１４】
前記入力頭部伝達関数は時間ドメインで表現され、
前記選択フィルタ曲線は時間ドメインで表現されるか、又は前記修正フィルタ曲線は時間ドメインで表現され、
前記フィルタ情報決定部（１１０）は、前記選択フィルタ曲線もしくは前記修正フィルタ曲線と前記入力頭部伝達関数とを畳み込むことにより、前記修正頭部伝達関数を決定するよう構成されるか、又は
前記フィルタ情報決定部（１１０）は、前記選択フィルタ曲線若しくは前記修正フィルタ曲線を非再帰型フィルタ構造でフィルタリングすることにより、前記修正頭部伝達関数を決定するよう構成されるか、又は
前記フィルタ情報決定部（１１０）は、前記選択フィルタ曲線若しくは前記修正フィルタ曲線を再帰型フィルタ構造でフィルタリングすることにより、前記修正頭部伝達関数を決定するよう構成される
請求項１２に記載の装置（１００）。
【請求項１５】
オーディオ入力信号からフィルタリング済みオーディオ信号を生成する請求項１２〜１４のいずれか１項に記載の装置（１００）と、
方向修正情報を提供する装置（２００）と、を備えるシステム（３００）であって、
前記方向修正情報を提供する装置（２００）は、
複数のラウドスピーカ（２１１，２１２）であって、それらの各々が再生オーディオ信号を再生するよう構成され、前記複数のラウドスピーカ（２１１，２１２）の第１スピーカが第１高さの第１位置に配置され、前記複数のラウドスピーカ（２１１，２１２）の第２スピーカが第２高さの第２位置に配置され、前記第２高さは第１高さと異なり、かつ第２位置は第１位置とは異なる、ラウドスピーカ（２１１，２１２）と、
２個のマイクロホン（２２１，２２２）であって、それらの各々が前記複数のラウドスピーカ（２１１，２１２）の各ラウドスピーカから、前記オーディオ信号を再生する時に前記ラウドスピーカによって放射された音波を受信することにより、録音オーディオ信号を録音するよう構成された、マイクロホン（２２１，２２２）と、
前記複数のラウドスピーカ（２１１，２１２）の各ラウドスピーカについて、前記ラウドスピーカによって再生される前記再生オーディオ信号に依存し、かつ前記再生オーディオ信号が前記ラウドスピーカによって再生されたとき前記２個のマイクロホン（２２１，２２２）の各々によって録音される録音オーディオ信号の各々に依存して、１つの両耳室内インパルス応答を決定することにより、複数の両耳室内インパルス応答を決定するよう構成された両耳室内インパルス応答決定部（２３０）と、
前記複数の両耳室内インパルス応答の２つに依存して、少なくとも１つのフィルタ曲線を生成するよう構成された、フィルタ曲線生成部（２４０）と、を備え、
前記方向修正情報は前記少なくとも１つのフィルタ曲線に依存しており、
請求項１２〜１４のいずれか１項に記載の装置（１００）の前記フィルタ情報決定部（１１０）は、入力高さ情報に依存して複数のフィルタ曲線から選択フィルタ曲線を選択することを使用して、フィルタ情報を決定するよう構成されるか、又は、
請求項１２〜１４のいずれか１項に記載の装置（１００）の前記フィルタ情報決定部（１１０）は、前記エレベーション情報に依存して基準フィルタ曲線を修正することにより修正フィルタ曲線を決定するよう構成され、
前記方向修正情報を提供する装置（２００）によって提供される方向修正情報は、前記複数のフィルタ曲線又は前記基準フィルタ曲線を含む、
システム（３００）。
【請求項１６】
前記方向修正情報を提供する装置（２００）のフィルタ曲線生成部（２４０）は、前記複数の両耳室内インパルス応答に依存して１つ以上の中間曲線を生成し、かつ前記１つ以上の中間曲線の各々を複数の異なる減衰値の各々によって増幅することによって、２つ以上のフィルタ曲線を取得するよう構成される、
請求項１５に記載のシステム（３００）。
【請求項１７】
前記方向修正情報を提供する装置（２００）のフィルタ曲線生成部（２４０）は、前記両耳室内インパルス応答の各々から１つの頭部伝達関数を抽出することにより、前記複数の両耳室内インパルス応答から複数の頭部伝達関数を決定するよう構成され、
前記複数の頭部伝達関数はスペクトルドメインで表現され、
前記複数の頭部伝達関数の各々に１つの高さ値が割り当てられ、
前記方向修正情報を提供する装置（２００）のフィルタ曲線生成部（２４０）は２つ以上のフィルタ曲線を生成するよう構成され、
前記方向修正情報を提供する装置（２００）のフィルタ曲線生成部（２４０）は、前記複数の頭部伝達関数の第１伝達関数のスペクトル値から前記複数の頭部伝達関数の第２伝達関数のスペクトル値を減算するか、又は前記複数の頭部伝達関数の第１伝達関数のスペクトル値を前記複数の頭部伝達関数の第２伝達関数のスペクトル値によって除算することにより、前記２つ以上のフィルタ曲線の各々を生成するよう構成され、
前記方向修正情報を提供する装置（２００）のフィルタ曲線生成部（２４０）は、前記複数の頭部伝達関数の第２伝達関数に割り当てられた高さ値から前記複数の頭部伝達関数の第１伝達関数に割り当てられた高さ値を減算することにより、前記２つ以上のフィルタ曲線の各々に１つの高さ値を割り当てるよう構成され、
前記方向修正情報は、前記２つ以上のフィルタ曲線の各々と当該フィルタ曲線に割り当てられた高さ値とを含む、
請求項１５に記載のシステム（３００）。
【請求項１８】
前記方向修正情報を提供する装置（２００）のフィルタ曲線生成部（２４０）は、前記両耳室内インパルス応答の各々から１つの頭部伝達関数を抽出することにより、前記複数の両耳室内インパルス応答から複数の頭部伝達関数を決定するよう構成され、
前記複数の頭部伝達関数はスペクトルドメインで表現され、
前記複数の頭部伝達関数の各々に１つの高さ値が割り当てられ、
前記方向修正情報を提供する装置（２００）のフィルタ曲線生成部（２４０）は唯一のフィルタ曲線を生成するよう構成され、
前記方向修正情報を提供する装置（２００）のフィルタ曲線生成部（２４０）は、前記複数の頭部伝達関数の第１伝達関数のスペクトル値から前記複数の頭部伝達関数の第２伝達関数のスペクトル値を減算するか、又は前記複数の頭部伝達関数の第１伝達関数のスペクトル値を前記複数の頭部伝達関数の第２伝達関数のスペクトル値によって除算することにより、前記唯一のフィルタ曲線を生成するよう構成され、
前記方向修正情報を提供する装置（２００）のフィルタ曲線生成部（２４０）は、前記複数の頭部伝達関数の第２伝達関数に割り当てられた高さ値から前記複数の頭部伝達関数の第１伝達関数に割り当てられた高さ値を減算することにより、前記唯一のフィルタ曲線に１つの高さ値を割り当てるよう構成され、
前記方向修正情報は、前記唯一のフィルタ曲線と前記唯一のフィルタ曲線に割り当てられた高さ値とを含む、
請求項１５に記載のシステム（３００）。
【請求項１９】
方向修正情報を提供する装置（２００）であって、前記装置（２００）は、
複数のラウドスピーカ（２１１，２１２）であって、それらの各々が再生オーディオ信号を再生するよう構成され、前記複数のラウドスピーカ（２１１，２１２）の第１スピーカが第１高さの第１位置に配置され、前記複数のラウドスピーカ（２１１，２１２）の第２スピーカが第２高さの第２位置に配置され、前記第２高さは第１高さと異なり、かつ第２位置は第１位置とは異なる、ラウドスピーカ（２１１，２１２）と、
２個のマイクロホン（２２１，２２２）であって、それらの各々が前記複数のラウドスピーカ（２１１，２１２）の各ラウドスピーカから、前記オーディオ信号を再生する時に前記ラウドスピーカによって放射された音波を受信することにより、録音オーディオ信号を録音するよう構成された、マイクロホン（２２１，２２２）と、
前記複数のラウドスピーカ（２１１，２１２）の各ラウドスピーカについて、前記ラウドスピーカによって再生される前記再生オーディオ信号に依存し、かつ前記再生オーディオ信号が前記ラウドスピーカによって再生されたとき前記２個のマイクロホン（２２１，２２２）の各々によって録音される録音オーディオ信号の各々に依存して、１つの両耳室内インパルス応答を決定することにより、複数の両耳室内インパルス応答を決定するよう構成された両耳室内インパルス応答決定部（２３０）と、
前記複数の両耳室内インパルス応答の２つに依存して、少なくとも１つのフィルタ曲線を生成するよう構成された、フィルタ曲線生成部（２４０）と、を備え、
前記方向修正情報は前記少なくとも１つのフィルタ曲線に依存している、
装置（２００）。
【請求項２０】
前記フィルタ曲線生成部（２４０）は、前記複数の両耳室内インパルス応答に依存して１つ以上の中間曲線を生成し、かつ前記１つ以上の中間曲線の各々を複数の異なる減衰値の各々によって増幅することによって、２つ以上のフィルタ曲線を取得するよう構成される、
請求項１９に記載の装置（２００）。
【請求項２１】
前記フィルタ曲線生成部（２４０）は、前記両耳室内インパルス応答の各々から１つの頭部伝達関数を抽出することにより、前記複数の両耳室内インパルス応答から複数の頭部伝達関数を決定するよう構成され、
前記複数の頭部伝達関数はスペクトルドメインで表現され、
前記複数の頭部伝達関数の各々に１つの高さ値が割り当てられ、
前記フィルタ曲線生成部（２４０）は２つ以上のフィルタ曲線を生成するよう構成され、
前記フィルタ曲線生成部（２４０）は、前記複数の頭部伝達関数の第１伝達関数のスペクトル値から前記複数の頭部伝達関数の第２伝達関数のスペクトル値を減算するか、又は前記複数の頭部伝達関数の第１伝達関数のスペクトル値を前記複数の頭部伝達関数の第２伝達関数のスペクトル値によって除算することにより、前記２つ以上のフィルタ曲線の各々を生成するよう構成され、
前記フィルタ曲線生成部（２４０）は、前記複数の頭部伝達関数の第２伝達関数に割り当てられた高さ値から前記複数の頭部伝達関数の第１伝達関数に割り当てられた高さ値を減算することにより、前記２つ以上のフィルタ曲線の各々に１つの高さ値を割り当てるよう構成され、
前記方向修正情報は、前記２つ以上のフィルタ曲線の各々と当該フィルタ曲線に割り当てられた高さ値とを含む、
請求項１９に記載の装置（２００）。
【請求項２２】
前記フィルタ曲線生成部（２４０）は、前記両耳室内インパルス応答の各々から１つの頭部伝達関数を抽出することにより、前記複数の両耳室内インパルス応答から複数の頭部伝達関数を決定するよう構成され、
前記複数の頭部伝達関数はスペクトルドメインで表現され、
前記複数の頭部伝達関数の各々に１つの高さ値が割り当てられ、
前記フィルタ曲線生成部（２４０）は唯一のフィルタ曲線を生成するよう構成され、
前記フィルタ曲線生成部（２４０）は、前記複数の頭部伝達関数の第１伝達関数のスペクトル値から前記複数の頭部伝達関数の第２伝達関数のスペクトル値を減算するか、又は前記複数の頭部伝達関数の第１伝達関数のスペクトル値を前記複数の頭部伝達関数の第２伝達関数のスペクトル値によって除算することにより、前記唯一のフィルタ曲線の各々を生成するよう構成され、
前記フィルタ曲線生成部（２４０）は、前記複数の頭部伝達関数の第２伝達関数に割り当てられた高さ値から前記複数の頭部伝達関数の第１伝達関数に割り当てられた高さ値を減算することにより、前記唯一のフィルタ曲線に１つの高さ値を割り当てるよう構成され、
前記方向修正情報は、前記唯一のフィルタ曲線と前記唯一のフィルタ曲線に割り当てられた高さ値とを含む、
請求項１９に記載の装置（２００）。
【請求項２３】
オーディオ入力信号からフィルタリング済みオーディオ信号を生成する方法であって、
入力高さ情報に依存してフィルタ情報を決定するステップであって、前記入力高さ情報は仮想音源（４９２）の高さに依存している、ステップと、
前記フィルタ情報に依存して前記オーディオ入力信号をフィルタリングし、前記フィルタリング済みオーディオ信号を取得するステップと、を備え、
前記フィルタ情報を決定するステップは、前記入力高さ情報に依存して、複数のフィルタ曲線から選択フィルタ曲線を選択することを含むか、又は
前記フィルタ情報を決定するステップは、エレベーション情報に依存して、基準フィルタ曲線を修正することにより修正フィルタ曲線を決定することを含む、
方法。
【請求項２４】
方向修正情報を提供する方法であって、
複数のラウドスピーカの各々について、当該ラウドスピーカによって再生オーディオ信号を再生し、前記再生オーディオ信号を再生する時に前記ラウドスピーカから放射された音波を２つのマイクロホンにより録音して、前記２つのマイクロホンの各々について録音オーディオ信号を取得するステップであって、前記複数のラウドスピーカの第１スピーカが第１高さの第１位置に配置され、前記複数のラウドスピーカの第２スピーカが第２高さの第２位置に配置され、前記第２高さは第１高さと異なり、かつ第２位置は第１位置とは異なる、ステップと、
前記複数のラウドスピーカの各ラウドスピーカについて、前記ラウドスピーカによって再生される前記再生オーディオ信号に依存し、かつ前記再生オーディオ信号が前記ラウドスピーカによって再生されたとき前記２個のマイクロホンの各々によって録音される録音オーディオ信号の各々に依存して、１つの両耳室内インパルス応答を決定することにより、複数の両耳室内インパルス応答を決定するステップと、
前記複数の両耳室内インパルス応答の２つに依存して、少なくとも１つのフィルタ曲線を生成するステップと、を備え、
前記方向修正情報は前記少なくとも１つのフィルタ曲線に依存している、
方法。
【請求項２５】
コンピュータ又は信号プロセッサ上で実行されるとき、請求項２３又は２４に記載の方法を実行するためのコンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明はオーディオ信号処理に関し、特に、エレベーション・レンダリングを実現するフィルタリング済みオーディオ信号を生成する装置および方法に関する。
【背景技術】
【０００２】
オーディオ処理において、振幅パニングは通常適用される概念である。例えば、ステレオ音響を考慮した場合、２つのラウドスピーカの間に仮想音源を仮想的に配置することは通常の技術である。仮想音源をスイートスポットから左遠方に配置するためには、対応する音響が左側のラウドスピーカによって高い振幅で再生され、右側のラウドスピーカによって低い振幅で再生される。この概念は、両耳オーディオについても同様に適用される。
【０００３】
さらに、同様の概念は水平平面におけるラウドスピーカとエレベーションありのラウドスピーカ（elevated loudspeakers）との間に仮想音源をパンするために存在している。しかしながら、ここで適用される手法は、両耳オーディオのために適用されるものとは同じではない。
【０００４】
したがって、両耳オーディオのための仮想音源を上昇または下降させるための概念が提供されれば、それは非常に望ましいものである。
【０００５】
同様に、ラウドスピーカのための仮想音源を上昇または下降させるための概念が提供され、全てのラウドスピーカが同じ平面に配置され、かつ１つのラウドスピーカも他のラウドスピーカに対して物理的に高位又は低位とされないならば、それは非常に望ましいものである。
【先行技術文献】
【非特許文献】
【０００６】
【非特許文献１】[001]  Rubak, P. and Johansen, L., “Artificial reverberation based on a pseudo-random impulse response 2”, Proceedings of the 106th AES Convention, 4875, May 8-11, 1999
【非特許文献２】[002]  Kuttruff H. Room Acoustics, Fouth Edition, Spon Press, 2000
【非特許文献３】[003]  Jens Blauert, Raeumliches Hoeren, S. Hirzel Verlag, Stuttgart, 1974
【非特許文献４】[004]https://commons.wikimedia.org/wiki/File:Akustik_-_Richtungsb%C3%A4nder.svg
【非特許文献５】[005]  Litovsky et. al., Precedence effect, J. Acoust. Soc. Am. Vol. 106, No. 4. Pt. 1. Oct 1999
【非特許文献６】[006]  V. Pullki, M. Karjalainen, Communication Acoustics, Wiley, 2015
【非特許文献７】[007]http://www.sengpielaudio.com/PraktischeDatenZurStereo-Lokalisation.pdf
【非特許文献８】[008] http://www.sengpielaudio.com/Haas-Effekt.pdf
【非特許文献９】[009]  G. Theile. On the Standardization of the Frequency Response of High Quality Studio Headphones. AES convention 77, 1985
【非特許文献１０】[010]  F. Fleischmann, Messung, Vergleich and psychoakustische Evaluierung von Kopfhoerer-Uebertragungsma゜en, FAU Erlangen, Diplomarbeit, 2011
【非特許文献１１】[011]  A Simple, Robust Measure of Reverberation Echo Density, J. Abel, P. Huang, AES 121st Convention, 2006 October 5-8
【非特許文献１２】[012]  Perceptual Evaluation of Model- and Signal-Based Predictors of the Mixing Time in Binaural Room Impulse Responses, A. Lindau, L. Kosanke, S. Weinzierl, J. Audio Eng. Soc., Vol. 60, No. 11, 2012 November
【非特許文献１３】[013]  Rubak, P. and Johansen, L., “Artificial reverberation based on a pseudo-random impulse response,” in Proceedings of the 104th AES Convention, preprint 4875, Amsterdam, Netherlands, May 16 - 19, 1998.
【非特許文献１４】[014]  Rubak, P. and Johansen, L., “Artificial reverberation based on a pseudo-random impulse response II,”in Proceedings of the 106th AES Convention, preprint 4875, Munich, Germany, May 8 - 11, 1999.
【非特許文献１５】[015]  Jot, J.-M., Cerveau, L., and Warusfel, O., “Analysis and synthesis of room reverberation based on a statistical time-frequency model,”in Proceedings of the 103rd AES Convention, preprint 4629, New York, September 26 - 29, 1997.
【非特許文献１６】[016]  Stanley Smith Stevens: Psychoacoustics. John Wiley ＆ Sons, 1975
【非特許文献１７】[017]http://www.mathworks.com/matlabcentral/mlc-downloads/downloads/submissions/ 43856/versions/8/screenshot.jpg
【非特許文献１８】[018]  Fourier Acoustics, Sound Radiation and Nearfield Acoustical Holography, Earl. G. Williams, Academic Press, 1999
【非特許文献１９】[019]  Richtungsdetektion mit dem Eigenmike Mikrofonarray, Messung und Analyse, M. Brandner, IEM, Kunst Uni Graz, 2013
【非特許文献２０】[020]  Bandwidth Extension for Microphone Arrays, B. Bernschuetz, AES 8751, October 2012
【非特許文献２１】[021]  Zotter, F. (2009): Analysis and Synthesis of Sound-Radiation with Spherical Arrays. Dissertation, University of Music and Performing Arts Graz
【非特許文献２２】[022]  Sank J.R., Improved Real-Ear Test for Stereophones. J. Audio Eng Soc 28 (1980), Nr. 4, S.206-218
【非特許文献２３】[023]  Spikofski, G. Das Diffusfeldsonden-Uebertragungsmass eines Studiokopfhoerers. Rundfunktechnische Mitteilung Nr. 3, 1988
【非特許文献２４】[024]  Vision and Technique behind the New Studios and Listening Rooms of the Fraunhofer IIS Audio Laboratory, A. Silzle, AES 7672, May 2009
【非特許文献２５】[025]  https://hps.oth-regensburg.de/~elektrogitarre/pdfs/kunstkopf.pdf
【非特許文献２６】[026]  Localization with Binaural Recordings from Artificial and Human Heads, P. Minhaar, S. Olesen, F. Christensen, H. Moller, J Audio Eng. Soc, Vol 49, No 5, 2001 May
【非特許文献２７】[027]  http://www.f07.fh-koeln.de/einrichtungen/nachrichtentechnik/ forschung_kooperationen/aktuelle_projekte/asar/00534/index.html
【非特許文献２８】[028]  Entwurf und Aufbau eines variable sphaerischen Mikrofonarrays fuer Forschungsanwendungen in Raumakustik und Virtual Audio. B. Bernschuetz, C. Poerschmann, S. Spors, S. Weinzierl, DAGA 2010, Berlin
【非特許文献２９】[029]  Farina, A. Advances in Impulse Response Measurements by Sine Sweeps. AES Convention 122. Wien, Mai 2007
【非特許文献３０】[030]  Weinzierl, S. et. al. Generalized multiple sweep measurement. AES Convention 126, 7767. Munich, Mai 2009
【非特許文献３１】[031]  Weinzierl, S. Handbuch der Audiotechnik. Springer, 2008
【非特許文献３２】[032]https://web.archive.org/web/20160615231517/https://code.google.com/p/sofia-toolbox/wiki/WELCOME
【非特許文献３３】[033]  E. C. Cherry. “Some experiments on the recognition of speech with one and with two ears”. J. Acoustical Soc. Am. vol. 25 pp. 975-979 (1953).
【非特許文献３４】[034]https://ccrma.stanford.edu/~jos/bbt/Equivalent_Rectangular_Bandwidth.html
【非特許文献３５】[035]  http://de.mathworks.com/help/signal/ref/rceps.html
【発明の概要】
【発明が解決しようとする課題】
【０００７】
本発明の目的は、オーディオ信号処理のための改善された概念を提供することである。本発明の目的は、請求項１に記載の装置、請求項１９に記載の装置、請求項２３に記載の方法、請求項２４に記載の方法、及び請求項２５に記載のコンピュータプログラムによって解決される。
【課題を解決するための手段】
【０００８】
オーディオ入力信号からフィルタリング済みオーディオ信号を生成する装置が提供される。この装置は、入力高さ情報(input height information)に依存してフィルタ情報を決定するよう構成されたフィルタ情報決定部であって、前記入力高さ情報は仮想音源の高さに依存している、フィルタ情報決定部を含む。さらにこの装置は、前記フィルタ情報に依存して前記オーディオ入力信号をフィルタリングし、前記フィルタリング済みオーディオ信号を取得するよう構成されたフィルタユニットを含む。フィルタ情報決定部は、前記入力高さ情報に依存して複数のフィルタ曲線から選択フィルタ曲線を選択することを使用して、前記フィルタ情報を決定するよう構成されるか、又はフィルタ情報決定部は、エレベーション情報(elevation information)に依存して基準フィルタ曲線を修正することにより修正フィルタ曲線を決定することを使用して、前記フィルタ情報を決定するよう構成される。
【０００９】
さらに、方向修正情報を提供する装置を提供する。この装置は複数のラウドスピーカを含み、それらの各々が再生オーディオ信号を再生するよう構成され、前記複数のラウドスピーカの第１スピーカが第１高さの第１位置に配置され、前記複数のラウドスピーカの第２スピーカが第２高さの第２位置に配置され、前記第２高さは第１高さと異なり、かつ第２位置は第１位置とは異なる。さらにこの装置は２個のマイクロホンを含み、それらの各々が前記複数のラウドスピーカの各ラウドスピーカから、前記オーディオ信号を再生する時に前記ラウドスピーカによって放射された音波を受信することにより、録音オーディオ信号を録音するよう構成される。さらにこの装置は両耳室内インパルス応答決定部を含み、この決定部は、前記再生オーディオ信号が前記ラウドスピーカによって再生されるとき、前記ラウドスピーカによって再生される前記再生オーディオ信号に依存し、かつ前記２個のマイクロホンの各々によって録音される録音オーディオ信号の各々に依存して、前記複数のラウドスピーカの各ラウドスピーカについて１つの両耳室内インパルス応答を決定することにより、複数の両耳室内インパルス応答を決定するよう構成される。さらにこの装置は、前記複数の両耳室内インパルス応答の２つに依存して、少なくとも１つのフィルタ曲線を生成するよう構成された、フィルタ曲線生成部を含む。前記方向修正情報は前記少なくとも１つのフィルタ曲線に依存している。
【００１０】
更に、オーディオ入力信号からフィルタリング済みオーディオ信号を生成する方法を提供する。この方法は、
−入力高さ情報に依存してフィルタ情報を決定するステップであって、前記入力高さ情報は仮想音源の高さに依存している、ステップと、
−前記フィルタ情報に依存して前記オーディオ入力信号をフィルタリングし、前記フィルタリング済みオーディオ信号を取得するステップと、
を備える。
【００１１】
前記フィルタ情報を決定するステップは、前記入力高さ情報に依存して、複数のフィルタ曲線から選択フィルタ曲線を選択することを含むか、又は
前記フィルタ情報を決定するステップは、エレベーション情報に依存して、基準フィルタ曲線を修正することにより修正フィルタ曲線を決定することを含む。
【００１２】
さらに、方向修正情報を提供する方法を提供する。この方法は、
−複数のラウドスピーカの各々について、当該ラウドスピーカによって再生オーディオ信号を再生し、前記再生オーディオ信号を再生する時に前記ラウドスピーカから放射された音波を２つのマイクロホンにより録音して、前記２つのマイクロホンの各々について録音オーディオ信号を取得するステップであって、前記複数のラウドスピーカの第１スピーカが第１高さの第１位置に配置され、前記複数のラウドスピーカの第２スピーカが第２高さの第２位置に配置され、前記第２高さは第１高さと異なり、かつ第２位置は第１位置とは異なる、ステップと、
−前記再生オーディオ信号が前記ラウドスピーカによって再生されるとき、前記ラウドスピーカによって再生される前記再生オーディオ信号に依存し、かつ前記２個のマイクロホンの各々によって録音される録音オーディオ信号の各々に依存して、前記複数のラウドスピーカの各ラウドスピーカについて１つの両耳室内インパルス応答を決定することにより、複数の両耳室内インパルス応答を決定するステップと、
−前記複数の両耳室内インパルス応答の２つに依存して、少なくとも１つのフィルタ曲線を生成するステップと、
を含み、前記方向修正情報は前記少なくとも１つのフィルタ曲線に依存している。
【００１３】
さらに、コンピュータプログラムが提供され、そのコンピュータプログラムのそれぞれが、コンピュータ又は信号プロセッサ上で実行されるとき、上述の方法の１つを実行するよう構成される。
【００１４】
以下に、本発明の実施形態について図面を参照しながら詳細に説明する。
【図面の簡単な説明】
【００１５】
【図１ａ】一実施形態に従ってオーディオ入力信号からフィルタリング済みオーディオ信号を生成するための装置を示す。
【図１ｂ】一実施形態に従って方向修正情報を提供するための装置を示す。
【図１ｃ】一実施形態に従うシステムを示す。
【図２】３つの反射タイプを示す図である。
【図３】反射の時間的表現の幾何学的表現と反射の幾何学的表現を示す図である。
【図４】定位作業の水平面及び正中面を示す図である。
【図５】正中面における指向性聴覚を示す。
【図６】仮想音源を創造することを示す。
【図７】異なる音圧レベルにおける狭帯域ノイズ信号のマスキング閾値曲線を示す。
【図８】後方及び前方マスキング効果のテンポラル・マスキング曲線を示す。
【図９】関連付けモデル（Association Model）の簡略図を示す。
【図１０】ＢＲＩＲ（両耳室内インパルス応答）の同側のチャネルの時間的及びＳＴＦＴ図を示す。
【図１１】ＢＲＩＲの各チャネルの遷移点の推定を示す。
【図１２】５つの三角形の帯域通過フィルタ、低域通過フィルタ及び高域通過フィルタを持つＭｅｌフィルタバンクを示す。
【図１３】Ｍｅｌフィルタバンクの周波数応答及びインパルス応答を示す。
【図１４】次数(order)ｎ＝５までのルジャンドル多項式(Legendre polynomials)を示す
【図１５】次数ｎ＝４までの球面調和関数(spherical harmonics)と対応するモードとを示す。
【図１６】球体上のレベデフ求積法（Lebedev-Quadrature）及びガウス・ルジャンドル求積法（Gauss-Legendre-Quadrature）を示す。
【図１７】ｂn（ｋｒ）の逆関数を示す。
【図１８】両耳測定用頭部と球状マイクロホンアレーとが８個のラウドスピーカの中央に配置された場合の２つの測定構成を示す。
【図１９】受聴テスト室を示す。
【図２０】両耳測定用頭部とマイクロホンアレー測定システムとを示す。
【図２１】ＢＲＩＲ測定に使用される信号系列を示す。
【図２２】音場分析アルゴリズムの概略を示す。
【図２３】オフセットをもたらす、各測定セットにおける最近マイクロホンの異なる位置を示す。
【図２４】音場分析とＢＲＩＲ測定との結果を視覚的に結合する、グラフィカル・ユーザー・インターフェースを示す。
【図２５】両耳測定と球状測定とを相関させるグラフィカル・ユーザー・インターフェースの出力を示す。
【図２６】反射の異なる時間的段階を示す。
【図２７】第１の構成を持つ水平及び垂直反射分布を示す。
【図２８】第２の構成を持つ水平及び垂直反射分布を示す。
【図２９】一対のエレベーションありのＢＲＩＲ（elevated BRIRs）を示す。
【図３０】全ての初期反射の累積性空間分布を示す。
【図３１】３つの条件を含みながら、聴取テストにおいて修正ＢＲＩＲと比較してテストされていた無修正ＢＲＩＲを示す。
【図３２】各チャネルについて、エレベーションなしのＢＲＩＲが、それ自身であってエレベーションありのＢＲＩＲの初期反射を含むものと知覚的に比較された図を示す。
【図３３】エレベーションなしのＢＲＩＲの初期反射（チャネル毎にエレベーションありのＢＲＩＲの初期反射により色付けされている初期反射を追加的に含むものがそれ自身と知覚的に比較されている）を示す。
【図３４】エレベーションなし、エレベーションあり及び修正済みの初期反射のスペクトル包絡を示す。
【図３５】エレベーションなし、エレベーションあり及び修正済みの初期反射の可聴部分のスペクトル包絡を示す。
【図３６】複数の補正曲線を示す。
【図３７】増幅された高い仰角(elevation angle)から聴取者に到達する４つの選択された反射を示す。
【図３８】ある音源についての両方の天井反射の図を示す。
【図３９】Ｍｅｌフィルタバンクを使用する各チャネルについてのフィルタリング処理を示す。
【図４０】方位角(azimuth angle)α＝２２５°からの音源のパワーベクトルを示す。
【図４１】異なる指数によって生起される異なる増幅曲線を示す。
【図４２】ＰR,i,225°(m) 及びＰR,i(m)に適用される異なる指数を示す。
【図４３】平均化手順についての同側及び反対側チャネルを示す。
【図４４】ＰR,IpCo 及びＰFrontBackを示す。
【図４５】他の実施形態にかかる指向性音（directional sound）を生成する装置と、他の実施形態にかかる方向修正フィルタ係数を提供する装置とを含む、他の特別な実施形態にかかるシステムを示す。
【図４６】追加的実施形態にかかる指向性音を生成する装置と、追加的実施形態にかかる方向修正フィルタ係数を提供する装置とを含む、追加的な特別な実施形態にかかるシステムを示す。
【図４７】さらに追加的実施形態にかかる指向性音を生成する装置と、さらに追加的実施形態にかかる方向修正フィルタ係数を提供する装置とを含む、さらに追加的な特別な実施形態にかかるシステムを示す。
【図４８】一実施形態にかかる指向性音を生成する装置と、一実施形態にかかる方向修正フィルタ係数を提供する装置とを含む、特別な実施形態にかかるシステムを示す。
【図４９】聴取者と、２つの異なるエレベーションにおける２個のスピーカと、仮想音源とを示す概略図を示す。
【図５０】異なる増幅値（延伸ファクタ）を中間曲線に適用することにより得られるフィルタ曲線を示す。
【図５１】方位角＝０°の補正フィルタ曲線を示す。
【図５２】方位角＝３０°の補正フィルタ曲線を示す。
【図５３】方位角＝４５°の補正フィルタ曲線を示す。
【図５４】方位角＝６０°の補正フィルタ曲線を示す。
【図５５】方位角＝９０°の補正フィルタ曲線を示す。
【発明を実施するための形態】
【００１６】
本発明を詳細に説明する前に、本発明が依拠する幾つかの概念について説明する。
【００１７】
まず、室内音響概念について考察する。
【００１８】
図２は、反射の３つのタイプの説明図である。反射面（左）は、入射音の音響的挙動をほぼ維持するが、吸収面および拡散面は、音をより強く修正する。通常は、複数のタイプの表面の組合せが見受けられる。
【００１９】
室内音響や音印象に影響を与える室内反射には、多くのタイプが存在する。反射面により反射された音波は、オリジナル音とほぼ同程度の音量と明瞭さとを有する可能性がある。他方、吸収面からの反射は、強度が低くなり、明瞭さも鈍くなることが多い。入射音波と反射音波とが同じ角度を有する反射面と吸収面とに比較して、拡散面で反射された音波は、そこからあらゆる方向に伝搬する。よって、不明瞭で濁った音印象が発生する。通常は、あらゆる種類の反射挙動が見受けられ、明瞭音と不明瞭音との混合が音印象を形成している。
【００２０】
現実には、音波は、特に低周波数が考慮される限り、音源からあらゆる方向に伝搬する。
【００２１】
図３は、反射の幾何学的表現（左）と、反射の時間的表現の幾何学的表現（右）とを示す。直接音は直結経路上を受聴者へと到達し、最短距離を有する（図３（左）を参照）。周囲環境の幾何学的形状に依存して、多くの反射と拡散的に反射された部分とが、後で様々な方向から受聴者へと到達する。各反射の次数とその経路長とに依存して、増加する密度を有する時間的な反射分布が観測される。
【００２２】
図３（右）に見られるように、反射密度が低い期間は、初期反射期として定義される。反対に、高密度の部分は残響場と呼ばれる。初期反射と残響との間の遷移点を取り扱う様々な研究が存在する。非特許文献１と２においては、２０００〜４０００エコー／秒のオーダーの反射率が遷移の尺度として定義されている。ここで、残響は、例えば「統計学的な残響」として解釈され得る。
【００２３】
次に、両耳リスニングについて説明する。
【００２４】
まず、定位キュー（Localization Cues）について考察する。
【００２５】
人間の聴覚系は、音源の位置を分析するために両方の耳を使用する。水平面と正中面上の定位の間には区別が存在する。
【００２６】
図４は定位作業についての水平面および正中面の図解を示す。
【００２７】
水平面上では、我々は、音が左側から到来するか、又は右側から到来するかを区別する。この場合、２個のパラメータが必要となる。第１のパラメータは両耳間時間差（ＩＴＤ）である。音波が音源から左右の耳に到達するまでの距離が異なれば、同側の耳（ipsilateral ear：音源に近い耳）に到達する音は、反対側の耳（contralateral ear：音源から遠い耳）よりも早く到達する。その結果として生まれる時間差がＩＴＤである。音源が受聴者頭部の正に正面または背後にある場合にはＩＴＤが最小、例えばゼロであり、音源が完全に左側または右側にある場合にはＩＴＤが最大となる。
【００２８】
第２のパラメータは両耳間レベル差（ＩＬＤ）である。音の波長が頭部サイズに比べて短い場合、頭部は音響的陰又は障害物として作用し、反対側の耳に到達する波形の音圧レベルを減衰させる。
【００２９】
定位の分析は周波数依存である。８００Ｈｚ未満であって、波長が頭部サイズに対して長い場合には、両耳間の位相差を評価しながら、分析はＩＴＤに基づく。１６００Ｈｚを超えると、分析はＩＬＤ及びグループ遅延差の評価に基づく。例えば１００Ｈｚ未満では、定位は例えば不可能にもなり得る。それら２つの限界の間にある周波数領域においては、分析方法のオーバーラップがある。
【００３０】
正中面上では、音が受聴者の前方または後方に存在するかどうかとともに、垂直方向が評価される。聴覚系は耳介のフィルタリング効果から情報を得る。Jens Blauertにより既に研究されたように(非特許文献３参照)、自然音源を受聴しているとき、正中面上の定位のためには所定の周波数領域の増幅だけが重要である。両耳には評価可能なＩＴＤ又はＩＬＤがないので、聴覚系は信号スペクトルから情報を得ることができる。例えば、７〜１０kHzの間の領域で増大すると、受聴者が音を上方から知覚するようになる（図５参照）。
【００３１】
図５は、正中面における指向性受聴(directional hearing)を示す。正中面上での定位は、信号スペクトルの所定の周波数領域の増幅と強い相関関係がある（非特許文献４を参照）。
【００３２】
信号処理に関し、既に上述した定位キューは、周波数ドメインにおける頭部伝達関数（ＨＲＴＦ）又は時間ドメインにおける頭部インパルス応答（ＨＲＩＲ）として集団的に知られている。室内音響に言及すれば、ＨＲＩＲは受聴者の各耳に到達する直接音に匹敵する。更に、ＨＲＩＲはまた、音波の肩や胴体との複雑な相互作用をも含む。これらの（拡散的な）反射が直接音とほぼ同時に耳に到達するので、強いオーバーラップが存在する。このため、それらは別々に考慮することができない。
【００３３】
反射は、肩および胴体と同様に、外耳とも相互作用を持つ。従って、反射の入射方向に依存して、聴覚系によって評価される前に、対応するＨＲＴＦによりフィルタリングされるであろう。各耳における室内インパルス応答の尺度は、両耳室内インパルス応答（ＢＲＩＲ）として定義され、周波数ドメインにおいては両耳室内伝達関数（ＢＲＴＦ）として定義される。
【００３４】
次に、仮想音源について考察する。現実に、受聴者が自然環境において自然音源から到来する音を聞く場合、彼は音源を定位するために、その所与の音響を脳内に記憶された刺激パターンと比較する。その音響が記憶されたパターンに近似している場合、受聴者は容易に音源を定位するであろう。両耳室内インパルス応答を利用して、ヘッドホンを介して自然に聞こえる仮想環境を創造することが可能である。
【００３５】
図６は仮想音源の創造を示す。録音された音は、別の環境で測定されたＢＲＩＲを用いてフィルタリングされ、仮想空間の中で音の位置決めをしながらヘッドホンを介して再生される。
【００３６】
図６に示すように、励振信号を再生する音源として、ラウドスピーカが使用される。所望の各位置について、各耳におけるマイクロホンを含む両耳測定頭部によりラウドスピーカが測定されて、ＢＲＩＲを創造する。ＢＲＩＲの各ペアは、ラウドスピーカから各耳（内耳）への（直接音と反響との）音響経路を表すので、仮想音源として認識されることができる。１つのＢＲＩＲペアを用いて１つの音をフィルタリングすることで、その音は、測定されたラウドスピーカと同じ環境で同じ位置にあるように、音響的に感じられるであろう。録音室音響とＢＲＩＲにおいて捕捉された音響とを混合しないことが望ましい。よって、音は（ほぼ）無響室内で録音される。
【００３７】
両耳用にレンダリングされたオーディオ信号を受聴する最も簡易な方法は、ヘッドホンを使用することである。なぜなら、各耳がそのコンテンツを別々に受け取るからである。そのような受聴を行う際、ヘッドホンの伝達関数は除外されるべきである。これは、以下に説明する拡散音場等化処理(diffuse field equalization)により実行され得る。
【００３８】
以下に、音響心理原理について説明する。
【００３９】
まず、先行音効果(precedence effect)について考察する。
【００４０】
先行音効果は、空間的受聴にとって重要な定位メカニズムである。それは、残響環境の中で音源の方向を検出可能にする一方で、初期反射の知覚を抑制する。その原理によれば、ある音が一方向から受聴者へと到達し、同じ音が時間遅延された状態で別の方向から到達する場合、受聴者は２番目の音が１番目の方向から来たと知覚する。
【００４１】
Litovskyらは、先行音効果についての種々の研究をまとめた（非特許文献５を参照）。その結果、この効果の品質に影響を与える多数のパラメータが存在することが示されている。まず、第１の音と第２の音との間の時間差が重要である。種々の実験設定から、種々の時間値（５〜５０ｍｓ）が決定された。受聴者らは、音の種類が異なる場合だけでなく、音の長さが異なる場合にも、異なる反応を示す。短い時間間隔の場合、音は２つの音源の間に知覚される。これは主に水平面上で適用可能であり、ファントム音源として一般に知られている（非特許文献７を参照）。長い時間間隔の場合、２個の空間的に別々の聴覚事象が生成され、通常はエコーとして知覚される（非特許文献８を参照）。更に、２番目の音の音量が重要である。２番目の音の音量が大きくなる程、それは可聴となる可能性が高くなる（非特許文献６を参照）。この場合、それは別々の聴覚事象というより、寧ろ音質(timbre)の違いとして知覚される。
【００４２】
実験でのシナリオは現実の音響環境とはほぼ無関係であるので、異なる設定に起因して、実験を通して研究された値に依存することは困難である（非特許文献５を参照）。しかしながら、空間的受聴を強力に支援する、ある効果が存在することは明らかである。
【００４３】
もう一つの概念はスペクトルマスキングであり、これは、ある音が非類似のスペクトル挙動を有する別の音の知覚を困難にする効果を示し、その場合、両方の音スペクトルはオーバーラップする必要はない。この原理は、１ｋＨｚに中央周波数を有する狭帯域ノイズをマスキング音として使用して、実証され得る。音圧レベルLCBに依存して、それは同じ包絡を有する異なるレベルのマスキング曲線を生成する。これら曲線の１つよりスペクトル的に下側にある他の任意の音は、対応するマスキング音によって抑制されるであろう。広帯域マスキング音については、より広い帯域幅がマスキングされる。
【００４４】
次に、テンポラル・マスキングについて考察する。
【００４５】
図８においてハッチングで示す、時間ドメインにおける聴覚事象は、先行する音および後続する音の知覚に影響を与える。よって、後方または前方マスキング曲線の下方に位置するあらゆる音が抑制されるであろう。前方マスキングと比較して、後方マスキング曲線はより高い傾きを有し、より短い期間に影響を与える。両曲線の影響は、マスキング音を増大させることで高くなる。マスカー音の長さに依存して、前方マスキングは２００ｍｓの領域をカバーし得る（非特許文献５を参照）。
【００４６】
図７は、種々の音圧レベルLCBにおける狭帯域ノイズ信号についてのマスキング閾値曲線を示す（非特許文献５を参照）。
【００４７】
図８は、後方および前方のマスキング効果についてのテンポラル・マスキング曲線を示す。ハッチングされた線は、マスカー音の開始と終了とを示す（非特許文献５を参照）。
【００４８】
外耳の影響が人間の聴覚系によってどのように分析されるかを示す、関連付けモデルがThelieによって説明されている（非特許文献９を参照）。
【００４９】
図９は関連付けモデル（非特許文献１０を参照）の簡易図を示す。耳によって捕捉された音は、まず内部基準と比較され、方向を割り当てようと試みる（図９を参照）。定位処理が満足すれば、次に聴覚系は耳介に起因するスペクトル歪みを補償することができる。適切な基準パターンが見つからない場合には、歪みは音質の変化として知覚される。
【００５０】
以下に、デジタル信号処理ツールについて説明する。
【００５１】
まず、ＢＲＩＲにおける遷移点(Transition Points)の推定について提示する。
【００５２】
初期反射は直接音と残響との間に存在する。両耳室内インパルス応答におけるそれらの影響を研究するために、初期反射の開始点と終了点とが時間ドメインで定義されなければならない。
【００５３】
図１０は、ＢＲＩＲの同側チャネル（方位角：４５°、仰角：５５°）の時間的グラフ（上）及びＳＴＦＴグラフ(下)を示す。破線１０１０は、左側のＨＲＩＲと右側の初期反射との間の遷移を示す。
【００５４】
直接音とＨＲＩＲの一部ではない反射である一次反射との間の遷移点は、図１０に示すように、時間的作図及びＳＴＦＴグラフから決定され得る。明瞭な大きさによって、一次反射は視覚的に決定され得る。よって、遷移点は一次反射の遷移局面の前に設定される。一次反射に関する到達時間差についての理論的計算値は、視覚的に発見された値とほぼ正確に対応する。
【００５５】
初期反射と残響との間の遷移点の決定は、AbelとHuang（非特許文献１１を参照）の方法によって実行される。この手法は、Lindau,Kosanke及びWeinzierlにより、非特許文献１２において彼らの研究における意義深い結果に基づいて推奨されている。
【００５６】
残響環境において、エコー密度は時間経過とともに急速に増大する傾向がある。時間が十分に経過した後で、次にエコーは統計的に扱われ（非特許文献１３及び１４参照）、インパルス応答の残響部分は、色とレベルとを除いてガウスノイズから区別できないようになるであろう（非特許文献１５を参照）。
【００５７】
残響の音圧振幅がガウス分布に従うと仮定すれば、これは１つの基準として使用できる。それはインパルス応答の統計値と比較され、スライディング窓における統計的キューが基準のそれと類似する場合、その点に対して遷移点が推定される。
【００５８】
第１ステップとして、各時間インデックスについて標準偏差σを計算するために、スライディング窓が使用される（式１）。
【数１】
2019500823.tif 000003
【００５９】
この窓の標準偏差の外側にある振幅の量は、ガウス分布について予期されるそれにより、式（２）において決定され、正規化される。
【数２】
2019500823.tif 000004
【００６０】
ここで、ｈ（ｔ）は残響インパルス応答であり、２δ＋１はスライディング窓の長さであり、１｛・｝はその引き数が真であれば１に戻り、その他の場合にはゼロに戻る指示関数である。ガウス分布について平均から、標準偏差の外側に位置するサンプルの想定される小数部は、次式によって与えられる。
2019500823.tif 000005
時間と反射密度とが増大するにつれて、η（ｔ）は１に近づく。統計的に完全な拡散に到達したとき、その時間インデックスにおいて遷移点が定義される。
【００６１】
この方法はＢＲＩＲの各チャネルに対して個別に適用される。このため、２個の別々の遷移点が推定されるであろう（図１１参照）。重要な情報が除外されないようにするため、以下の研究においてはより高い（例えば遅い）遷移点が常に選択される。
【００６２】
図１１は、ＢＲＩＲの各チャネルについて、遷移点（線１１０１、１１０２）の推定を示す。
【００６３】
ここで、Ｍｅｌフィルタバンクについて説明する。
【００６４】
人間の聴覚系は、凡そ１６Ｈｚ〜２０ｋＨｚの間の範囲に制限されているが、ピッチと周波数との関係は線形ではない。Stanley Smith Stevens（非特許文献１６参照）によれば、ピッチは以下の式で与えられたＭｅｌで測定され得る。
Ｍｅｌ（ｆ）＝ｍ
【数３】
2019500823.tif 000006
【数４】
2019500823.tif 000007
【００６５】
更に、聴覚情報（例えばピッチ、ラウドネス、到来方向）は周波数帯域において分析される。従って、非線形周波数分解能および帯域毎の処理を模倣するために、Ｍｅｌフィルタバンクが使用され得る。
【００６６】
図１２は、周波数軸にわたるＭｅｌフィルタバンクの三角帯域通過フィルタの可能な配置を示す。中心周波数とフィルタの帯域幅とは式２．２により制御される。通常、Ｍｅｌフィルタバンクは２４個のフィルタから成る。特に、図１２は、５個の三角帯域通過フィルタ１２１０と低域通過フィルタ１２０１と高域通過フィルタ１２０２とを有するＭｅｌフィルタバンクを示す。
【００６７】
正確な分析および合成のために、以下の２つの条件が満たされなければならない。第１に、フィルタバンクの全域通過特性を確保するため、追加的な低域通過および高域通過フィルタが設計される。よって、周波数ドメインにおける全てのフィルタＨｉの加算は、線形周波数応答をもたらすことになるであろう。
2019500823.tif 000008
（Ｍ：フィルタの合計）
【００６８】
フィルタバンクの第２の条件は、線形位相応答によって表現される。非線形フィルタリングに起因する追加的な位相修正が防止されなければならないので、この属性は重要である。この場合、次式によってシフト済みインパルスがインパルス応答として想定される。
2019500823.tif 000009
(τはフィルタバンクの待ち時間)。前記２つの条件は図１３で示される。
【００６９】
特に、図１３は、Ｍｅｌフィルタバンクの周波数応答（左）とインパルス応答(右)とを示す。そのフィルタバンクは線形位相ＦＩＲ全域通過フィルタに対応している。５１２サンプルのフィルタ次数は、２５６サンプルの待ち時間をもたらす。
【００７０】
以下に、球面調和関数及び空間フーリエ変換について考察する。
【００７１】
残響室の中で放射された音は、環境内のオブジェクトや表面と相互作用して、反射を作り出す。球状マイクロホンアレーを使用することで、それらの反射を室内のある固定点において測定し、到来波方向を視覚化することが可能である。
【００７２】
マイクロホンアレーに到達する反射は、マイクロホン球体にわたる音圧分布をもたらすであろう。残念ながら、その音圧分布から直観的に到来波方向を読み出すことは不可能である。従って、音圧分布をその構成要素、平面波へと分解することが必要となる。
【００７３】
分解の過程で、音場はまず球面調和関数ドメインへと変換される。比喩的に、空間形状の組合せ（図１５の下方を参照）が見いだされ、これは球体上の所与の音圧分布を示している。空間フィルタリング又はビーム形成に匹敵する、波面分解(wave field decomposition)が次にそのドメインで実行されることができ、それら形状を入射波方向へと集中させる。
【００７４】
まず、ルジャンドル多項式について考察する。
【００７５】
仰角βにわたる球面調和関数を定義するために、直交関数のセットが必要となる。ルジャンドル多項式は区間[−１，１]上で直交している。最初の６個の多項式が式（５）で与えられる。
【数５】
2019500823.tif 000010
【００７６】
対応する図が図１４に示され、図１４はルジャンドル多項式を次数ｎ＝５まで示している。
【００７７】
仰角は［０，π］の間で定義される。よって、全ての直交関係は単位球面（unit sphere）へと変換されなければならない。式（６）は有効であるから、関連するルジャンドル多項式Ｌn（ｃｏｓβ）が次式において使用され得る。
【数６】
2019500823.tif 000011
【００７８】
ここで、球面調和関数について考察する。
【００７９】
ある音圧関数Ｐ（ｒ，β，α，ｋ)を球面座標系において考察し、ここで、βとαとは仰角と方位角とであり、ｒは半径であり、ｋは波数（ｋ＝ω／ｃ）である。Ｐ（ｒ，β，α，ｋ)が両方の角度にわたって自乗可積分(square integrable)であると仮定すると、それは球面調和関数ドメインで表現され得る。
【００８０】
式（７）に見られるように、球面調和関数は、関連するルジャンドル多項式Ｌnmと指数項ｅ+jmαと正規項(normalization term)とから構成されている。ルジャンドル多項式は仰角β付近の形状を担当しており、指数項は方位形状(azimuthal shape)を担当している。
【数７】
2019500823.tif 000012
【００８１】
図１５は次数ｎ＝４までの球面調和関数とその対応するモードとを、−ｍからｍまで示す（非特許文献１７参照）。各次数は２ｍ＋１個のモードから成る。球面調和関数の正負符号は、正１５０１又は負１５０２のいずれかである。
【００８２】
球面調和関数は、球上のラプラス演算子(Laplace operator)の角度成分の固有関数(Eigenfunctions)の完全かつ正規直交のセットであり、それは波動方程式を記述するために使用される（非特許文献１８及び１９参照）。
【００８３】
ここで、空間フーリエ変換について説明する。
【００８４】
式（８）は、空間フーリエ係数
2019500823.tif 000013
が、空間フーリエ変換を使用してどのように計算され得るかを記述している。
【数８】
2019500823.tif 000014
【００８５】
ここで、Ｐ（ｒ，β，α，ｋ)は周波数および角度に依存する（複素）音圧であり、Ｙnm（β，α）*は複素共役型(complex conjugated)球面調和関数である。複素係数は、球上の分析された音圧を記述するために、各球面調和関数の向き(orientation)と重み付けに関する情報を含む。
【００８６】
空間フーリエ係数が与えられた場合に、球面にわたる音圧の合成に係る式は次式（９）で示される。
【数９】
2019500823.tif 000015
【００８７】
その変換は波数ｋ＝ω／ｃに依存するので、音圧分布は各周波数について個別に分析されなければならない。
【００８８】
以下に、球面サンプリングについて説明する。
【００８９】
離散周波数波数スペクトル
2019500823.tif 000016
は、サンプリング点が無限個数ある場合にのみ理論的に正確であり、その場合、連続的な球面が必要となるであろう。実用的な視点から見ると、現実的な演算量や計算時間を達成するためには、有限のスペクトル分解能だけが合理的と言える。離散サンプリング点に限定すると、適切なサンプリング格子が選択されるべきである。球面をサンプリングするための複数の方策が存在する（非特許文献２１を参照）。よく使われる格子の１つはレベデフ求積法である。
【００９０】
図１６は、レベデフ求積法とガウス・ルジャンドル求積法とを球面上に示す。レベデフ求積法は３５０個のサンプリング点を有する。ガウス・ルジャンドル求積法は１８×１９＝３４２個のサンプリング点を有する。
【００９１】
他の格子と比較して、レベデフ求積法は均一に分布するサンプリング点を有し、サンプリング点の所定総数(amount)についてより高いサンプリング次数(sampling order)を達成する。例えば、Ｎ＝１５のサンプリング次数を達成するために、レベデフ求積法は３５０個のサンプリング点だけを必要とし、ガウス・ルジャンドル求積法は５１２個のサンプリング点を必要とする。
【００９２】
次に、平面波分解について説明する。
【００９３】
音圧分布から直観的に到来波方向を読み出すことは不可能であるので、平面波分解が必要となる。これにより、半径方向の到来波成分および出射波成分を除去し、無限数の球面サンプリング点についての音場を入射波方向についてのディラックインパルス(Dirac impulses)へと削減する。
【００９４】
球面ベッセル(Bessel)関数およびハンケル(Hankel)関数はラプラス演算子の半径成分の固有関数であるから、それらは到来波および出射波の半径方向伝播を記述している。
【００９５】
球内に音源が無く、カージオイド極パターン(cardioid polar pattern)マイクロホンが使用されると仮定すると、平面波分解処理の中で式（１０）が使用され得る（非特許文献２０参照）。式（１０）において、ｊn（ｋｒ）は第１種のベッセル関数である。
【数１０】
2019500823.tif 000017
【００９６】
この分解は、球面調和関数ドメインにおいて、合成式（９）の中で空間フーリエ係数をｂn（ｋｒ）で除算することにより、実行される。
【数１１】
2019500823.tif 000018
【００９７】
以下に、分析制限(analysis restrictions)について議論する。
【００９８】
図１７はｂn（ｋｒ）の逆を示す。次数ｎに依存して、小さなｋｒ値に対して高いゲインが得られる。
【００９９】
図１７に示すように、ｂn（ｋｒ）による除算は、次数ｎに依存して、小さなｋｒ値に対して高いゲインをもたらす。その場合、小さなＳＮＲ値を用いた測定は歪みをもたらし得る。視覚的アーチファクトを克服するため、小さなｋｒ値について、空間フーリエ変換の次数を制限することが合理的である。
【０１００】
第２の制限は、空間エイリアシング基準ｋｒ＜＜Ｎであり、ここでＮは最大球面サンプリング次数である。つまり、高い半径値との組み合わせの高周波の分析は、高い空間サンプリング次数をもたらすことになり、その結果、視覚的アーチファクトを発生させるであろう。１つの分析半径、即ち人間の頭部の半径だけに着目すれば、検査は所定の制限周波数ｆAliasまで実行されるであろう。
【数１２】
2019500823.tif 000019
【０１０１】
ここで、拡散音場等化処理について説明する。
【０１０２】
人間の肩、頭部および外耳または人工頭部は、衝突する音波のスペクトルを歪ませる。
【０１０３】
あるスピーカからある人工頭部への伝達関数と、同一位置のマイクロホンを用いて録音された伝達関数とを比較すると、スペクトルにおける差が観察され得る。人工頭部の大きさ伝達関数は、ピークとくぼみが存在する。それらキューの幾つかは方向に依存するが、方向に依存しないキューも存在する。
【０１０４】
閉塞された外耳道の最初の部分で測定すると、測定用頭部の伝達関数のスペクトルにおいて、２ｋＨｚと５ｋＨｚとの範囲間に凡そ１０ｄＢの増大が観測され得る（非特許文献２２参照）。スピーカのために作成された信号をヘッドホンで再生する場合、スピーカから耳への伝達関数は消失する。この消失した経路を補償するため、ヘッドホンは、２〜５ｋＨｚの間のプレゼンス領域において同じブーストを示す作り付けの等化処理、所謂「拡散音場等化処理」を示すことが多い（非特許文献２３参照）。
【０１０５】
両耳録音を拡散音場等化処理されたヘッドホンで適切に聞くためには、ヘッドホン伝達関数の中に既に含まれたそのプレゼンスピークを除去するべくＢＲＩＲが処理されなければない。この機能は「Ｃｏｒｔｅｘ」（登録商標）の装置に既に含まれている。
【０１０６】
両耳録音を非処理のヘッドホンで再生できるようにするため、スペクトル非依存性のキューは除外される
【０１０７】
ここで、測定について考察する。
【０１０８】
測定の設定については、両耳室内インパルス応答の反射を空間的に解釈するため、この研究では球状マイクロホンアレーが使用される。ＢＲＩＲと平面波分布との間の正確な相互相関を創造するため、両耳測定及び球面測定の両方が同一位置で実行されなければならない。更に、球面測定の半径は、両耳測定用頭部の半径と一致しなければならない。これにより、両方のシステムについて同じ到達時間（ＴＯＡ）値が確保され、望ましくないオフセットを防止できる。
【０１０９】
図１８には、２つの測定構成が示されている。両耳測定用頭部と球状マイクロホンアレーとが、８個のラウドスピーカの中央に配置されている。どちらの場合でも、４個のエレベーションなしのラウドスピーカ(non-elevated loudspeaker)と４個のエレベーションありのラウドスピーカ(elevated loudspeaker)とが測定される。エレベーションなしラウドスピーカは、測定用頭部の耳およびマイクロホンアレーの原点と同じレベルにある。エレベーションありのラウドスピーカはエレベーションなしのラウドスピーカに対してＥＬ＝３５°の角度を有する。８個のラウドスピーカは各々、正中面に対してＡＺ＝４５°の方位角を有する。事前のテストから、対角線状に配置された音源への修正は、定位および音質において最大の相違を生むことが分かっている。
【０１１０】
測定環境として、受聴テスト室［Ｗ×Ｈ×Ｄ：９．３×４．２×７．５ｍ］、即ちフラウンホーファーＩＩＳ社の測定環境「モーツァルト」(商標名)が使用された。この部屋は、背景ノイズレベル及び残響時間に関してＩＴＵ−Ｒ  ＢＳ．１１１６−３に適合しており、より臨場感があり自然な音印象をもたらすものである。その部屋には既存のラウドスピーカが２つの金属環にわたって装備され（図１９参照）、２つの金属環は一方が他方の上方に配置されている。それら金属環の高さは調節可能であるため、正確なラウドスピーカ位置が定義され得る。各金属環は３メートルの半径を有し、両方が部屋の中央に配置されている。
【０１１１】
図１９は、エルランゲンのフラウンホーファーＩＩＳ社にある受聴テスト室「モーツァルト」を示し、ＩＴＵ−Ｒ  ＢＳ．１１１６−３へと標準化されている（非特許文献２４参照）。図１９における巨大な木製ラウドスピーカは、測定期間中には室内に存在していなかった。
【０１１２】
マイクロホンアレー及び両耳測定用頭部（例えば人工頭部または両耳ダミー）は、ラウドスピーカ設定の「スイートスポット」内に交互に配置された。レーザーベースの距離計測器が、各測定システムから下位の環の各ラウドスピーカまでの正確な距離を計測するために使用された。耳の中心と地面との間の距離は１．３４ｍの高さが選択された。
【０１１３】
非特許文献２６において、ミンハーら(Minhaar et.al.)は、定位の品質を分析することにより、複数の人間および人工両耳頭部の測定値を比較した。
【０１１４】
図２０は、両耳測定用頭部「Cortex Manikin MK1」（左）（非特許文献２５参照）と、マイクロホンアレー測定システム「VariSphear」（右)（非特許文献２７参照）とを示す。システム自体に起因する反射を防止するため、非残響成分（例えば黄色のレーザーシステム）は排除されている。
【０１１５】
人間の頭部を用いた測定値の方が、時にはより良好な定位をもたらすことが明らかになってきた。この研究の初期には類似の結果が観察されているが、取り扱いの容易さや測定期間中に一定位置を遵守できることから、人工測定用頭部が使用されている。
【０１１６】
図２０の球状マイクロホンアレー「VariSphear」（非特許文献２８参照）は、垂直および水平のステッピングモータを有する操縦可能なマイクロホン保持システムである。これにより、マイクロホンは、可変半径を有する球面上の任意の位置に移動でき、０．０１°の角度分解能を有する。この測定システムは、Ｍａｔｌａｂに基づくそれ自身の制御ソフトウエアを具備している。ここでは、種々の測定パラメータが設定され得る。必須のパラメータは以下に与えられる。
【０１１７】
サンプリング格子：レベデフ求積法
サンプリング点の個数：３５０（サンプリング次数Ｎ＝１５，エイリアシング制限ｆAlias＝８１９０Ｈｚ）
球の半径：０．１ｍ（人体解剖学に対応する）
サンプリング周波数：４８０００Ｈｚ
励振信号：スイープ（対数的に増大する）
【０１１８】
VariSphearは、サンプリング格子の全ての位置についての室内インパルス応答を自動的に測定でき、それらをＭａｔｌａｂファイル内に保存できる。
【０１１９】
以下に、スイープ測定(sweep measurement)について考察する。
【０１２０】
室内音響を測定する場合、その部屋は大きな線形かつ時不変系とみなされ、その複素伝達関数またはインパルス応答を得るために、既定の刺激によって励振され得る。励振信号として、正弦スイープが音響測定に良好に適していることが分かってきた。最も重要な利点は、スイープ持続時間を増大させることで向上し得る、高い信号対ノイズ比である。更に、そのスペクトルエネルギー分布を所望の形状に整形でき、信号系列における非線形性はその信号を窓掛けすることで単純に除去され得る（非特許文献３０参照）。
【０１２１】
この研究で使用された励振信号は対数スイープ信号(Log-Sweep Signal)である。時間にわたって一定の振幅と指数関数的に増大する周波数とを有する正弦関数である。数学的には、それは式（１３）により表現できる（非特許文献２９参照）。ここで、ｘは振幅、ｔは時間、Ｔはスイープ信号の持続時間、ω1は開始周波数、ω2は終了周波数を示す。
【数１３】
2019500823.tif 000020
【０１２２】
この研究では、室内インパルス応答を測定するためにWeinzierlの手法（非特許文献３１参照）が使用され、これについては以下に説明する。
【０１２３】
測定ステップを図２１に説明する。図２１は、ＢＲＩＲ測定に使用されている信号系列を示す。スイープは、ラウドスピーカを励振するために使用され、且つスペクトルドメインにおける逆畳み込みのための基準としても使用される。アナログ信号へと変換されかつ増幅された後で、スイープ信号はラウドスピーカを通して再生される。同時に、スイープ信号は基準として使用され、ゼロパディングによって２倍の長さへと拡張される。ラウドスピーカにより再生された信号は、測定用頭部の２個の耳マイクロホンによって捕捉され、増幅され、デジタル信号へと変換され、且つ基準と同様にゼロパディングされる。
【０１２４】
この時点で、両方の信号がＦＦＴを介して周波数ドメインへと変換され、実測のシステム出力Ｙ（ｅjω）は基準スペクトルＸ（ｅjω）により除算される。その除算は時間ドメインにおける逆畳み込みに匹敵し、複素伝達関数Ｈ（ｅjω）をもたらし、これがＢＲＩＲである。逆ＦＦＴをその伝達関数へと適用することで、両耳室内インパルス応答（ＢＲＩＲ）が取得される。ＢＲＩＲの後半は、信号系列内で発生し得る非線形性を含む。それら非線形性はインパルス応答を窓掛けすることにより廃棄され得る。
【０１２５】
以下では、両耳測定用頭部および球状マイクロホンアレーからの測定値が合体されるであろう。ついで、ＢＲＩＲの反射を空間的に分類するための作業の流れが導出されるであろう。ここで、球状マイクロホンアレーの測定は、単に付加的なツールであって、この作業の本質部分ではないことを強調しなければならない。多大な経費に起因して、ＢＲＩＲの反射を自動的に検出し且つ空間的に分類するための方法の開発は追及されていない。代わりに、視覚的な比較に基づく方法が開発されてきた。
【０１２６】
このような理由から、室内音響の両方の表現を視覚化するためのグラフィカル・ユーザー・インターフェース（ＧＵＩ）が創造されてきた。ＧＵＩは、平面波分布と対応するＢＲＩＲの両方のインパルス応答との時間依存のスナップショットを含む。スライディングマーカーは、室内音響の両方の表現間の時間的関係を示す。
【０１２７】
次に、音場分析について説明する。
【０１２８】
第１ステップにおいて、球面室内インパルス応答セットに基づく音場分析が実行される。この目的で、ＦＨ  Ｋｏｅｌｎは、マイクロホンアレーデータを分析する「ＳＯＦｉＡ」というツールボックスを提供している（非特許文献３２参照）。ここで、上述した制限を考慮しなければならず、従って、ツールボックスのコアＭａｔｌａｂ関数だけが使用可能である。しかしながら、これらはカスタム分析アルゴリズムへと統合されなければならない。これらの関数は異なる算術的計算に焦点を当て、以下のように説明される。
【０１２９】
Ｆ／Ｄ／Ｔ（周波数ドメイン変換）に関し、この関数は、各インパルス応答について高速フーリエ変換（ＦＦＴ）を使用して、時間ドメインアレイデータを周波数ドメインデータへと変換する。スペクトルデータは離散的であるので、スペクトルは離散的周波数目盛上に定義される。この目盛と球面測定の半径とに基づいて、１つのｋｒ目盛が計算される。それは均等目盛であって、後続の計算を通して使用されるであろう。
【０１３０】
Ｓ／Ｔ／Ｃ（空間変換コア）に関し、空間変換コアは、複素（スペクトル）フーリエ係数を使用して空間フーリエ係数を計算する。変換はｋｒ目盛上で実行されるので、周波数依存である。このため、アレイデータは事前にスペクトルドメインへと変換されていた。
【０１３１】
ここで、Ｍ／Ｆ（モード・ラジアル・フィルタ：modal radial filters）について考察する。
【０１３２】
球の構成およりマイクロホンタイプに依存して、Ｍ／Ｆは平面波分解を実行すべくモード・ラジアル・フィルタを生成することができる。それは、ベッセル関数およびハンケル関数を使用してラジアル・フィルタ係数を計算する。これらの測定に使用される構成に関し、フィルタ係数ｄn（ｋｒ）は例えば式（１０）の逆である。
【数１４】
2019500823.tif 000021
【０１３３】
Ｐ／Ｄ／Ｃ（平面波分解）に関し、この関数は、空間フーリエ係数を使用して逆空間フーリエ変換を計算する。このステップにおいて、空間フーリエ係数はモード・ラジアル・フィルタにより乗算される。これにより、平面波分解された球面音場分布がもたらされる。
【０１３４】
図２２は音場分析アルゴリズムの概観を示す。細線は情報またはパラメータを伝送し、太線はデータを伝送する。関数２２０１，２２０２，２２０３，２２０４はＳＯＦｉＡツールボックスのコア関数である。４個のＳＯＦｉＡツールボックス関数は、以下に説明する１つのアルゴリズムへと統合される。対応する構造は図２２に示される。
【０１３５】
ここで、スライディング窓の概念について考察する。分解された波面の短時間表現に注目し、分析のために球面インパルス応答を短時間に制限するために、スライディング窓が作成された。一方では、矩形窓は有意な視覚的結果を得るために十分な長さを持たなければならない。演算量を少なくするため、スペクトルフーリエ変換次数はＮfft＝１２８に制限される。このため、特に非常に短い期間については不正確なスペクトル分析がもたらされ、よって、空間分析もまた不正確になるであろう。他方では、単位時間当りより多くのスナップショットを得るためには、時間期間はできるだけ短くなければならない。試行錯誤を繰り返すことで、Ｌwin＝４０サンプル（４８ｋＨｚにおいて）が合理的な窓長として決定されてきた。残念ながら、４０サンプルの時間分解能は、個別の反射を検出するためには十分に正確と言えない。
【０１３６】
一次元短時間フーリエ変換に影響されて、隣接する時間区間のオーバーラップが包含される。Ｌwin＝４０サンプルの長さを有する窓が１０サンプル毎に分析される。結果的に、７５％のオーバーラップが達成される。その結果、４倍高い時間分解能が可能となる。
【０１３７】
図２３は、各測定セットにおける最も近いマイクロホンの異なる位置がオフセットをもたらすことを示す。図２３に見られるように、オーバーラップは平滑化の挙動をもたらすが、これは更なる研究に対して影響を与えるものではない。
【０１３８】
高いゲインは回避されなければならない。例えばモード・ラジアル・フィルタに起因する高い増幅を防止するため、空間フーリエ変換の次数は小さなｋｒ値に制限されなければならない。このため、フィルタゲインを所与のｋｒ値に依存して比較する１つの関数が構成された。閾値はＧthreshold＝１０ｄＢへと設定され、よって、その閾値が許可する増幅よりも小さな増幅を引き起こすフィルタ曲線だけが使用される。この制限を実施するために、空間フーリエ変換の次数はＮmax(kr)に制限されなければならない。
【０１３９】
エイリアシングを防止するためのエイリアシング基準の遵守を確保するため、他の関数がこのアルゴリズム内に組み込まれる。それは最大限に許可されるｋｒ値を計算し、ｋｒベクトル内の対応するインデックスを見つける。この情報は次に、（Ｓ／Ｔ／Ｃ及びＰ／Ｄ／Ｃにおける）分析を既定値までに制限するために使用される。
【０１４０】
Ｓ／Ｔ／Ｃ及びＰ／Ｄ／Ｃの計算は各ｋｒ値について個別に実行されなければならないので、音場分析の最終ステップは、例えばｋｒに依存する全ての結果の加算であってもよい。分解された波面の視覚化のために、Ｐ／Ｄ／Ｃ出力データの絶対値が加算される。
【０１４１】
音場分析の結果は、例えば次にそれらを両耳インパルス応答と相関させるために使用されてもよい。関係する音源の方向に従って、両方がＧＵＩ内で図示される（図２４参照）。
【０１４２】
しかし、まず、例えば幾つかの事前措置が採られてもよい。
【０１４３】
時間調節のために、両方の測定値は関数「Estimate ＴＯＡ」によって分析され、ここで、ラウドスピーカから最短のマイクロホンまでの音の持続時間が推定される。両耳セットにおいて、最短のマイクロホンは常に同側に位置する。よって、対応するＢＲＩＲチャネルがＴＯＡを推定するために選択される。このインパルス応答を使用することで、最大値が決定され、最大値の２０パーセントである閾値が作成される。直接音はインパルス応答における時間的に最初の事象であり、また最大値を含むので、ＴＯＡは閾値を超える第１ピークとして定義される。球面セットにおいて、最短のマイクロホンのインパルス応答は、時間的に各インパルス応答の最大値を比較することで推定される。次に、ＴＯＡ推定のための同様の処置が、最も早い最大値を有するインパルス応答に対して適用される。
【０１４４】
球面セットの最短のマイクロホンは、両耳セット（図２３）のマイクロホンと同じ位置にある訳ではない。しかしながら、この作業では対角線上に配置されたラウドスピーカだけが測定されるので、それらの間の距離は常に同じであろう。よって、約７．５ｃｍ又は（４８ｋＨｚにおいて）１０サンプル程度の相違があり、これは音場分析の時間分解能において１ステップのオフセットに対応する。そのオフセットを考慮すると、ＴＯＡ推定のこの簡易な方法は著しく良好な結果をもたらす。
【０１４５】
上述のようなＴＯＡ推定と遷移点推定とを使用して、音場分析はそれらの時間インデックスへと時間的に制限される。ＢＲＩＲセットはまた、それらの制限内に納まるように窓掛けされるであろう（図２４参照）。
【０１４６】
図２４は、グラフィカル・ユーザー・インターフェースが音場分析の結果とＢＲＩＲ測定値とを視覚的に結合させることを示している。
【０１４７】
図２５は、両耳測定値と球面測定値とを相関させるための、グラフィカル・ユーザー・インターフェースの出力を示す。現時点のスライダー位置について、耳レベルよりも僅かに高い後方から頭部に到達する反射が検出されている。ＢＲＩＲ表現において、この反射はスライディング窓によりマークされる（線２５１１，２５１２，２５１３，２５１４）。
【０１４８】
ＢＲＩＲの２個のチャネルがＧＵＩの下方部分に図示されており、絶対値を示している。反射をより良好に認識するため、値の範囲は０．１５に制限される。線２５１１，２５１２，２５１３，２５１４は、音場分析で使用されてきた４０サンプルの長いスライディング窓を表す。上述したように、両方の測定値間の時間的関係はＴＯＡ推定に基づいている。スライディング窓の位置は、ＢＲＩＲ図内においてだけ推定される。
【０１４９】
分解された波面のスナップショットは左上図に示される。ここで球面は、各方位角および仰角についての（均等目盛またはｄＢ目盛の）大きさを有する２次元平面上に投影される。あるスライダーが、スナップショットのための観察時間を制御し、ＢＲＩＲ図におけるスライディング窓の対応する位置を選択する。
【０１５０】
分解された波面の時間的分布を両方の角度について１つの図内で見ることは不可能である。従って、それは水平および垂直の表現へと分離されなければならない。水平分布のために、全ての仰角についてのデータの合計が計算されており、１つの平面へと削減されている。垂直分布のために、全ての方位角についてのデータの合計が計算されている。初期における詳細が見えるように、両方の図は２０００サンプルに制限される。ＨＲＩＲの初めの１２０サンプルは範囲外であり、視覚的表現の中にクリップされている。
【０１５１】
以下に、ＢＲＩＲにおける反射の検出と分類の作業流れを提示する。
【０１５２】
時間ドメインにおいてオーバーラップしている強い反射に起因して、単一反射を個別に切り出すことは完全には可能ではない。たとえ初期には一次の反射同士がそれら自身の間でオーバーラップしない場合でも、同時にマイクロホンに到達する散乱がある可能性がある。よって、本研究においては、ＢＲＩＲ及び分解された波面表現において際立つピークを有する反射の部分だけを考慮すべきである。
【０１５３】
図２６は、両方の測定において捕捉されたある反射の異なる時間的ステージを示す。２番目の横列で見られるように、反射は音場分析の分析窓において際立っている。同様の挙動がＢＲＩＲにおいて見られる。この例では、反射は、両方のチャネルにおいて、その間近の周囲内で最高値を有するピークを発生させている。それを更なる研究に使用するため、開始時点と終了時点とを決定する必要がある。
【０１５４】
このため、遷移点を見つけるため、現在から以前の反射へと幾つかの時間ステップを遡る必要がある。このプロセスは図２６の１番目の横列に詳細に示される。分析窓は２つの反射の間に位置している。視覚的査定に基づいて、開始点は例えばサンプル９１０に設定され得る。両方のチャネルにおいて、極小値が存在する。その場合、反射は後方から出現するため、同じ値が両方のインパルス応答について選択され得る。これは、ＢＲＩＲにおいてＩＴＤ又はＩＬＤは殆ど存在しないことを意味する。その他の場合、方位角に依存して、ＩＴＤが加算されるべきである。同様の処理が終了点についても実行される。
【０１５５】
図２６は、分解された波面およびＢＲＩＲ図において表現された、反射の異なる時間的ステージを示す。左の縦列は開始時を示す。その時点では、別の反射が次第に消滅してゆく。中央の縦列では、所望の反射が分析窓の中で際立っている。右の縦列では、その反射は次第に弱くなり、他の反射の間にゆっくりと消えていき、散乱していく。
【０１５６】
次に、初期反射の影響について議論する。
【０１５７】
この作業は、高さ知覚に対する初期反射の影響を研究することに焦点を当てているが、両耳処理における反射の挙動および役割を理解することが必要である。特に、反射とは直接音の修正された反復である。マスキング効果および先行音効果が発生し得るので、全ての反射が可聴となる訳ではないと推定することが合理的であろう。ここで問題となるのは、全ての反射が定位および全体的音印象の保存にとって重要かどうかである。どの反射が高さ知覚にとって必要になり得るのかどうか。音印象を破壊せずかつ自然度を保ちながら、追加テストがどのように計画され得るのかどうか。
【０１５８】
両耳知覚において反射がどのように抑制されるかを説明する一般的規則を見つけ出すことは、この作業の意図ではない。寧ろ、上述の問題に対する答えを探すことが目的である。従って、関連性のない反射は、マスキング効果及び先行音効果の原理を使用しながら、聴覚査定に基づいて決定される。
【０１５９】
ここで、反射の空間的分布について、上述したモーツァルト受聴環境を参照しながら考察する。
【０１６０】
図２７は、音源方向：方位角４５°，仰角５５°を有する場合のモーツァルトにおける水平および垂直の反射分布を示す。この室内では、初期反射は３方向へと分離され得る。即ち、１．［サンプル：１２０−８００］直接音とほぼ同一方向から到来する反射。２．［サンプル：８００−１４９０］反対方向から到来する反射。３．［サンプル：１４９０−遷移点］全ての方向から到来し、より低いパワーを有する反射。
【０１６１】
種々の音源方向についての初期反射の水平および垂直分布を評価することで、典型的な分布パターンが観察され得る。空間的分布は３つの領域へと分割され得る。第１セクションは直接音の直後にサンプル１２０で開始し、サンプル８００の付近で終了する。水平表現から、反射は音源とほぼ同じ方向からスイートスポットに到達することが見て取れる（図２７の左側）。エレベーション図（図２７の右側）は、この領域において全ての波が地面または天井によって反射されていること示す。
【０１６２】
第２セクションにおいて、反射は音源の反対側から到来する。この時間区間はサンプル８００で開始し、サンプル１４９０で終了する。ここで、正面方向（４５°／３１５°）からの音源は、１７０°／１９０°付近の方位角の明瞭な反射を引き起こす。これは、後方にある強い反射表面を有する大きな窓によるものである。他方、後方（１３５°／２２５°）からの音源は、正面に強い反射面がないことから、反対側コーナー（３１５°／４５°）において明瞭な反射を引き起こす。高さ分布については、明確な特徴は提示できない。
【０１６３】
第３セクションは、サンプル１４９０で開始し、推定遷移点で終了する。ここで、幾つかの例外を除き、反射はほぼ全ての方向および高さから到来する。更に、音圧レベルは強く低減されている。
【０１６４】
以下に、聴覚的に意味のある反射への縮小について考察する。
【０１６５】
初期反射音を１つのＢＲＩＲペア（音源方位角４５°，仰角５５°）における主音(essentials)へと低減する試みがなされる。抑制された反射が決定されてゼロに設定され、無修正のＢＲＩＲと比較される。定位は、スペクトルキューとの相関関係、従って音の音質との強い相関関係があるので、定位と音印象とは分離され得ない。ＢＲＩＲから反射を除外することは、如何なる知覚的相違をもたらすべきではない。
【０１６６】
抑制された反射を決定する際、幾つかの空間特性に留意すべきである。２つの音だけが関係する古い実験と比較して、ＢＲＩＲにおいては多数の反射がマスキング及び先行音効果の挙動に影響を与える。更に、反射インパルス応答は、それがフィルタリングする音に依存して種々の効果長および品質をもたらすので、インパルス応答に対して規則を直に適用することは不可能である。加えて、ＢＲＩＲを取り扱う場合、両耳キューはマスキングに影響を与え得る。なぜなら、受聴者はマスキング音およびマスキングされた音の２つのバージョンを受け取るからである。両方のバージョンは、ＩＴＤ，ＩＬＤ及びスペクトル成分において異なっている。その場合、受聴者はより多くの情報に戻る。顕著な実例は「カクテルパーティ効果」（非特許文献３３参照）であり、聴覚システムは混雑した室内で一人に焦点を当てることができる。
【０１６７】
図２８は、「モーツァルト」における水平および垂直の反射分布を示し、音源方向は方位角４５°、仰角５５°である。このとき、可聴反射だけが両図のプロット内に残される。
【０１６８】
図２９は、エレベーションありのＢＲＩＲのペアを示し、音源方向は方位角４５°、仰角５５°である。セクション２９１１，２９１２，２９１３，２９１４，２９１５；２９３１，２９３２，２９３３，２９３４，２９３５は、インパルス応答２９０１，２９０２，２９０３，２９０４，２９０５；２９２１，２９２２，２９２３，２９２４，２９２５においてゼロに設定される。
【０１６９】
抑制された反射を決定する手法は以下の通りである。初期反射の第１セクションにおいて、サンプル３００と６５０との間の全てがゼロに設定される。ここでの反射は第１の地面および天井反射の空間的反復である（図２９参照）。それらは、可能性のある先行音またはマスキングの効果により、ＢＲＩＲにおいて知覚的に無関係と推定され得る。最初の２つの反射音の顕著性もまた、ＢＲＩＲ図内で見つけることができる（図３０参照）。これは上述の推定を支持するものである。サンプル６５０と８００との間の範囲は比較的弱い反射を含むが、それら反射は重要に見える。そこまで延びる抑制効果はないと考えられ、それらを除外しても小さな知覚的差異しか引き起こせないが、それらはＢＲＩＲ内に残る。
【０１７０】
第２セクションの開始（８００−９００）も、同様に抑制されていないように見える。ここの反射音は、ＢＲＩＲ図内で高いピークを示し、反対方向から発生する。サンプル９１０における反射は、サンプル１０８０におけるより強い反射の先行反復であり、よって知覚的には無関係である。サンプル９００と１０４０との間の範囲は除外されている。サンプル１０４０から１２５０までについては、反射音の顕著なグループがあり、除外できない。第１セクションの終了と比較して、第２セクションの終了（１２５０−１４９０）は知覚的にはあまり明確でないが、しかし依然として重要である。
【０１７１】
２つの例外（１６３０−１６８０，１９６０−２１００）を除いて、完全な第３セクションがゼロに設定される。ほぼ全ての方向からスイートスポットへと到達するので、反射音の成分は明らかに指向性キューを持たない。
【０１７２】
図３０は、全ての初期反射（左）について及び知覚的に関連する初期反射（右）だけについて、音場分析の全ての「スナップショット」の加算を示す。
【０１７３】
特に、図３０の左は、全ての初期反射の累積的な空間分布を示す。この図において、第１と第２のセクションは容易に認識され得る。方位角４５°にある音源について、第１反射グループは音源方向から到来し、第２グループは約１７０°から到来する。この分布は明らかに音キューを生じ、それらは自然な音印象および良好な定位をもたらす。なぜなら、それらは人間の聴覚システム内に記憶されたキューに匹敵するからである。
【０１７４】
更に、図３０は、無関係な反射音を除外する前（左）と後（右）の累積的な空間分布を示しており、その中で、重要でない反射は排除されている。更に、定位に関係のある顕著な反射音を示すことが容易である。この知見は、初期反射における高さ知覚キューを探索する中で、以下において活用される。
【０１７５】
図３１は、受聴テストにおいて修正ＢＲＩＲと比較してテストされた無修正ＢＲＩＲを示し、３つの追加条件を含む。第１の追加条件は全ての初期反射を除外することであり、第２の条件は以前に除外された反射だけを残すことであり、第３の条件は初期反射の第１および第２のセクションを除外することだけである（図３１参照）。
【０１７６】
図３１は、エレベーションなしのＢＲＩＲペア（１，２列）と、エレベーションありのＢＲＩＲペア（３，４列）と、修正ＢＲＩＲペア（５，６列）とを示す。最後の場合には、エレベーションありのＢＲＩＲの初期反射がエレベーションなしのＢＲＩＲの中に挿入されている。
【０１７７】
第１条件で受聴しているとき、直接音はあまり仰角を持たない角度から知覚される。更に、２つの個別の事象（直接音と残響）が可聴である。非公式の受聴テストでは、初期反射が結合特性を持ち得ることが示されるように見える。
【０１７８】
以下に、特に本発明の基礎となる概念を提示する。
【０１７９】
まず、高さ知覚のキューについて考察する。
【０１８０】
上述に基づいて、初期反射が高さ知覚をサポートするかどうかについて考察する。また、初期反射のスペクトル包絡は高さ知覚のキューを含んでいるかについても考察する。以下の実験では、聴覚的評価が数人の専門の受聴者のフィードバックに基づいている。
【０１８１】
初期反射は高さ知覚をサポートする。これは、エレベーションなしのＢＲＩＲの初期反射とエレベーションありのＢＲＩＲの初期反射との間に可能性のある差が存在する場合に、高さ知覚に関して分析する初期テストにおいて実証された。４５°の方位角に対し、ＢＲＩＲの２個のペアが選択された。エレベーションなしのＢＲＩＲの初期反射を置換するため、エレベーションありのＢＲＩＲの初期反射が用いられた（図３２参照）。これにより、エレベーションなしのＢＲＩＲはより高い仰角から知覚されるであろうと予想される。
【０１８２】
図３２は、各チャネルについて、エレベーションなしのＢＲＩＲ（左）が、それ自身（右）であってエレベーションありのＢＲＩＲの初期反射（図３２の右側のボックス）を含むものと知覚的に比較された図を示す。
【０１８３】
初期反射と残響との間の遷移点を推定するアルゴリズムが、各ＢＲＩＲに対して個別に適用される。従って、初期反射領域についての４個の異なる値と４個の異なる長さとが想定される。ＢＲＩＲの初期反射を交換するために、各チャネルについて同一長さが求められる。この場合、初期反射部分の終了部の除外による削減によって、残響の領域への拡張が好ましい。初期反射と比較して、残響は指向性情報を全く含まず、他の場合に想定されるように実験に大きな歪みを与えることはないであろう。図３１（５列及び６列）に見られるように、チャネル１の初期反射はサンプル１２０で開始し、２３６０で終了する。チャネル２においては、初期反射はサンプル１２０で開始し、２５３３で終了する。
【０１８４】
エレベーションなしの音源は、確かに高い仰角から知覚される。これは、初期反射が、自然に知覚されている直接音をサポートしているだけでなく、可聴の方向依存特性を有することを意味する。
【０１８５】
スペクトル包絡は高さ知覚についての情報を含む。音源の高さ知覚についての興味から、スペクトル情報だけを使用しながら前の実験が繰り返された。特に、正中面上での定位がスペクトルキューによって（及び例えばさらに直接音と残響との間の時間差によって）制御されることから、実験目的は、スペクトルドメインに対する修正が同じ効果を達成するために十分かどうかを見極めることである。このとき、同じＢＲＩＲと、初期反射領域を表す同じ開始点および終了点とが使用された。
【０１８６】
図３３では、エレベーションなしのＢＲＩＲ（左）の初期反射が知覚的にそれ自身（右）と比較されており、ここでは、初期反射はチャネル毎にエレベーションありのＢＲＩＲの初期反射により色付けされている（図３３の右側のボックス）。エレベーションありのＢＲＩＲの初期反射は、チャネル毎にエレベーションなしのＢＲＩＲの初期反射をフィルタリングするための基準として使用されている。
【０１８７】
各チャネルのフィルタリング処理に従えば、
−エレベーションありのＢＲＩＲの初期反射について離散フーリエ変換が計算され、ＥＲel,fftが取得される。エレベーションなしのＢＲＩＲの初期反射について離散フーリエ変換が計算され、ＥＲnon-el,fftが取得される。
−ＥＲel,fft及びＥＲnon-el,fftの大きさは、ＥＲＢ目盛にわたってスライディングしながら、矩形窓によって平滑化され（非特許文献３４参照）、矩形窓が人間の聴覚におけるフィルタの帯域幅への近似を与え、ＥＲel,fft,smooth及びＥＲnon-el,fft,smoothを取得する。
−補正フィルタを計算するために、まず基準曲線が実際の曲線により除算される。これにより、補正曲線ＣＣsmooth＝ＥＲel,fft,smooth／ＥＲnon-el,fft,smoothが得られる。
−ケプストラム・ドメインにおいて適切な窓掛けをすることで（非特許文献３５参照）、最小位相インパルス応答ＩＲcorrection をＣＣsmoothから作成することが可能である。
−ＩＲcorrection は、エレベーションなしのＢＲＩＲの初期反射をフィルタリングするために後で使用される。
【０１８８】
簡易な補正曲線を取得するために、ここで平滑化が実行される。
【０１８９】
チャネル１についての４．３パーセントのエネルギー差と、チャネル２についての３．０パーセントの値とが取得される。これらの小さな差は、図３４において、スペクトル包絡３４１１，３４１２と点線のスペクトル包絡３４０１，３４０２との間に見つけることができる。
【０１９０】
図３４はエレベーションなしの初期反射３４２１，２４２２とエレベーションありの初期反射３４１１，２４１２と修正済み（点線）の初期反射３４０１，３４０２との各スペクトル包絡（第１横列）を示す。対応する補正曲線は第２横列に示される。
【０１９１】
エレベーションなしのＢＲＩＲとスペクトル修正済みのＢＲＩＲとの聴覚的比較は、仰角の増大を示さない。また、補正曲線は６ｄＢのダイナミックレンジしか有しない。全ての初期反射のスペクトルが高さについての情報を有する訳ではないように見える。
【０１９２】
上述のことから、初期反射の全体領域が可聴という訳ではなく、最後の実験のスペクトル修正に含まれた非可聴部分が結果を歪ませることが分かる。特に、反射が全方向から来る初期反射領域の第３部分は、補正曲線の低いダイナミックレンジの原因となっている可能性がある。よって、最後の実験を繰り返し、今回は可聴の初期反射にのみ焦点を当てる。
【０１９３】
可聴の反射のために選択されたセクションは表１で与えられる。
【表１】
2019500823.tif 000022
【０１９４】
表１はエレベーションありおよびエレベーションなしのＢＲＩＲの初期反射の可聴セクションを示す。強いオーバーラップに起因して、ＩＴＤはここでは考慮されない。セクションにフェードイン及びフェードアウトするために、チューキー窓（Tukey-Window）が使用され、残りはゼロに設定される。
【０１９５】
図３５は、エレベーションなしの初期反射３５２１，３５２２と、エレベーションありの初期反射３５１１，３５１２と、修正済み（点線）の初期反射３５０１，３５０２との各可聴部分のスペクトル包絡（第１横列）を示す。対応する補正曲線を第２横列に示す。
【０１９６】
以下に、スペクトル包絡の分析を行う。
【０１９７】
上述したように、正中面上での定位は所定の周波数範囲の増幅によって制御される。従って、スペクトルキューはエレベーションありの角度から音源を知覚することに関係しており、この作業における研究は、スペクトルドメインにおける所望のキューを見つけることに焦点を当てている。
【０１９８】
エレベーションありＢＲＩＲの初期反射のスペクトル包絡を用いてエレベーションなしのＢＲＩＲを修正することは、音源の仰角を増大させることにはならなかった。全ての初期反射のスペクトル包絡と単一反射のスペクトル包絡とを比較することで、単一反射は可聴領域においてよりダイナミックなスペクトル推移を有する（２０ｋＨｚまで）と言える。対照的に、全体的なスペクトルは寧ろ平坦な曲線（図３６参照）を示す。
【０１９９】
図３６はスペクトル包絡の比較を示す。全ての初期反射または全ての可聴初期反射のスペクトル包絡は、可聴領域において平坦な曲線（２０ｋＨｚまで）を示す。対照的に、単一反射のスペクトル（第２横列）は、よりダイナミックな推移を有する。
【０２００】
特に、図３６は結果的な補正曲線を示す。ここではパターン及びダイナミックレンジが変化しているが、知覚的には仰角に関して有意な変化はない。同側の耳（ＣＨ１）のスペクトル包絡においては少なくとも４．５ｄＢの差があるが、反対側の耳の包絡間においては本質的な差はない。それらが修正するレンジは顕著な直接音の後に存在することを考慮すれば、これらの値は比較的小さい。
【０２０１】
初期反射がグループとして音の印象の自然さに対して重要な影響を持つことは可能であり、これは、仮想音源を受聴する場合に高さ知覚を導入するために必須である。しかし、高さ知覚のためのキューが単一反射のスペクトル内に位置していることは理にかなっている。マイクロホンアレー測定によって獲得された反射の空間分布についての知見は、以下の実験で使用されている。
【０２０２】
ここで、高い仰角からの初期反射を増幅させる概念を提示する。
【０２０３】
高さ知覚のためのキューを含む反射を、それらを増幅することによって決定する。直観的には、これらのキューを含む何らかの単一反射があれば、それらはより高い仰角から受聴者へと到達し得る。
【０２０４】
以前のテストでは、低い仰角から来る反射からのエネルギーを高い仰角から来る反射へとシフトすることが試みられた。残念ながら、非可聴範囲内にはない低い仰角からの反射は２つだけである。この状況は、「モーツァルト」内での測定用ラウドスピーカの幾何学的特性がほぼ同一であるため、全ての方向において観察された。これと比較して、高い仰角から来る反射が非可聴セクション内にある場合は、致命的ではない。これらの反射を増幅させることにより、それらは抑制効果を超越して知覚可能になるであろう。しかしこの場合、隣接する反射に対する強いオーバーラップ領域を持たない、４つの反射がインパルス応答から分離され得る。対応する値は表ＴＡ２において与えられる。この実験で使用される少量の反射に起因して、第１チャネルについては１．１４だけ及び第２チャネルについては１．３３のゲイン値が得られる。それらは高さ知覚における強化を誘起するには十分ではない。他の部分から高い仰角を有する４つの反射へと体系的にエネルギーをシフトする幾つかの他の手法も、同様な結果となった。
【０２０５】
このため、聴覚的に評価されたチューニングに基づいて、適切なゲイン値を見つけるための試みがなされた。４つの反射の各々を増幅するため、範囲３と１５との間における異なる値が選択された。これらの反射は図３７に示される。
【０２０６】
図３７は、高い仰角から受聴者に到達し、値３で増幅される、４つの選択された反射３７０１，３７０２，３７０３，３７０４；３７１１，３７１２，３７１３，３７１４を示す。サンプル１１００の後ろにある反射は、隣接する反射に対して強いオーバーラップを有し、ゆえにインパルス応答から分離できない。
【０２０７】
それら反射は増幅されて、曲線３７０１，３７０２，３７０３，３７０４及び曲線３７１１，３７１２，３７１３，３７１４によって表される。増幅された反射を知覚的に比較すると、二次反射３７０２；３７１２と三次反射３７０３；３７１３とは、正中面よりも方位角平面上において空間的シフトを引き起こすことが分かった。これは、強い残響音印象をもたらす。
【０２０８】
一次反射３７０１；３７１１と四次反射３７０４；３７１４との増幅は、知覚された仰角の強化につながる。それらを比較すると、一次反射３７０１；３７１１の増幅は、四次反射３７０４；３７１４よりも音質においてより大きな変化をもたらす。更に、四次反射３７０４；３７１４の場合には、音源はよりコンパクトに聞こえる。しかしながら、それらを同時に増幅させると、知覚的には最良の結果を生む。両方のゲイン値の関係が重要である。第４のゲイン値は第１のゲイン値よりも高くなければならないことが分かった。複数回の試行の後で、４及び１５のゲイン値が、最大かつできるだけ自然な効果を有することが、専門の受聴者によって発見されかつ確認された。これらの値の偏差は、小さな効果の変化しか生まないことに留意すべきである。従って、それら値は以下の実験において指向値（orientation values)として使用されるであろう。
【０２０９】
以下に、本発明の具体的実施例を挙げる。
【０２１０】
特に、仮想音源にエレベーションを付ける概念について説明する。
【０２１１】
上述した結果から、高い仰角から現れる２つの反射は、高さ印象について重要な役割を果たすキューを確かに含むことを示している。ＢＲＩＲ内のそれらのオリジナル位置において増幅されることで、時間的キューは変化しない。高さ強化が時間的キューではなくスペクトルキューによって引き起こされることを確保するため、スペクトルはフィルタを作成するために隔離される。
【０２１２】
その高い音レベルにより、直接音は定位プロセスを支配する。初期反射の重要度は２番目であり、個別の聴覚事象として知覚されない。先行音効果による影響を受けて、初期反射は直接音をサポートする。よって、ＨＲＴＦを修正するため、作成されたフィルタを直接音に適用するのが合理的である。
【０２１３】
２つの反射音の幾何学的分析は、ＢＲＩＲにおける両方の反射の位置および空間分布表現における仰角を考察すると、反射は一次及び二次の天井反射として識別され得る、という知見を提供する。
【０２１４】
図３８はある音源についての両方の天井反射の図を示す。受聴者およびラウドスピーカに関する平面図（左）と背面図（右）である。
【０２１５】
特に、図３８は平面図と背面図における幾何学的状況を示す。二次反射は勿論より弱く、２回反射しているので、一次反射よりも直接音との音響的類似性が低い。しかしながら、二次反射はより高い仰角から受聴者へと到来する。上述したように決定された１５のゲイン値が、その重要性を補強している。
【０２１６】
図３８の左図において、両方の反射が直接音と同じ方向から出現することが分かる一方で、異なる仰角を有する（右図）ことが分かる。測定用設定の対称性に起因して、この幾何学的状況は、エレベーションありの環上で測定される４個の（対角線）ラウドスピーカの各々に対して与えられている。対応するＢＲＩＲにおける両方の反射の位置は、常に同じであることが見て取れる。従って、方位角α∈｛０°，９０°，１８０°，２７０°｝にあるラウドスピーカについての音場分析結果を持たずに、それらは以下の研究においても使用可能である。
【０２１７】
以下に、実施形態に係る直接音のスペクトル修正について説明する。
【０２１８】
フィルタ目標曲線は２つの天井反射の組合せによって形成される。ここでは、絶対ゲイン値（４および１５）ではなくそれらの関係だけが使用される。よって、一次反射は１により増幅され、二次反射は４により増幅される。両方の反射は時間ドメインにおいて１つの信号へと連続的に融合される。直接音のスペクトル修正のために、Ｍｅｌフィルタバンクが使用される。フィルタバンクの次数はＭ＝２４に設定され、フィルタ長はＮMFB＝２０４８に設定される。
【０２１９】
図３９は、Ｍｅｌフィルタバンクを用いた各チャネルのフィルタリング処理を示す。入力信号ｘDS,i,α（ｎ）がＭ個のフィルタの各々を用いてフィルタリングされる。Ｍ個のサブバンド信号はパワーベクトルＰR,i,α（ｍ）と乗算され、最終的に１つの信号ｙDS,i,α（ｎ）に加算される。
【０２２０】
図３９に示されるフィルタリング処理をステップ毎に説明する。
１．直接音ｘDS,i,α（ｎ）がＭｅｌフィルタバンクによりフィルタリングされて、Ｍ個のサブバンド信号ｘDS,i,α（ｎ，ｍ）を取得する。インデックスｉ∈｛１，２｝はチャネルを示し、αは音源の方位角を示し、ｎはサンプル位置を示し、ｍ∈｛１，Ｍ｝はサブバンドを示す。
２．反射の組合せｘR,i,α（ｎ）はＭｅｌフィルタバンクによりフィルタリングされて、Ｍ個のサブバンド信号ｘR,i,α（ｎ，ｍ）と各サブバンド信号のパワーとを取得し、パワーベクトルＰR,i,α（ｍ）内に格納される。パワーは式（１５）により計算される。
【数１５】
2019500823.tif 000023
３．フィルタ目標曲線を暗示的に含むパワーベクトルＰR,i,α（ｍ）は、各サブバンドにおいてｘDS,i,α（ｎ，ｍ）を重み付けするために使用される。
４．時間ドメインでｘDS,i,α（ｎ，ｍ）がＰR,i,α（ｍ）と乗算された後で、重み付きサブバンド信号は一緒に加算され、完全なフィルタリング済み信号ｙDS,i,α（ｎ）を取得する。
【０２２１】
フィルタリングの後で、直接音インパルス同士のＩＬＤが変化する。それは各チャネルにおける両方の反射の組合せを介して定義される。よって、修正済み直接音インパルスは、それらのオリジナルレベル値へと補正されなければならない。直接音のパワーは、フィルタリングの前（ＰBefore,i,α）と後（ＰAfter,i,α）で計算され、補正値
2019500823.tif 000024
がチャネル毎に計算される。各直接音インパルスは、次に対応する補正値によって重み付けされ、オリジナルレベルを取得する。
【０２２２】
図４０は、方位角α＝２２５°からの音源のパワーベクトルＰR,i,α（ｍ）を示す。ここで、曲線４００１は同側の耳での補正をもたらし、曲線４０１１は反対側の耳での補正をもたらす。
【０２２３】
図４０の補正は、中央領域におけるサブバンド信号パワーの増加において表現される。同側および反対側の補正ベクトルの形状は類似している。非公式の受聴テストの後で、受聴者らは、未修正ＢＲＩＲに対する明瞭な高度差について報告した。エレベーションありの音はより大きな距離とより小さな音量とを持って知覚された。幾つかの方位角について、定位をより困難にする残響の増加が可聴であった。
【０２２４】
以下に、実施形態に係る可変の高さ生成について考察する。
【０２２５】
図４１は、異なる指数に起因する異なる増幅曲線を示す。指数関数ｘ1/2を考慮する場合、１より小さい値は増幅され、１より大きな値は減衰されるであろう（図４１参照）。指数値を変更すると、異なる増幅が取得される。１の場合は、修正は何も実行されない。
【０２２６】
図４２は、異なる指数がＰR,i,225°(m)（左）とＰR,i(m)（右）とに対して適用される様子を示す。結果として、異なる形状が達成される。左図において、方位角はα＝２２５°である。ここで、ＣＨ１は反対側のチャネルを指し、ＣＨ２は同側のチャネルを指している。右図において、曲線は全ての角度にわたって平均化されているので、ＣＨ１は左耳を指し、ＣＨ２は右耳を指している。
【０２２７】
このメカニズムをＰR,αに適用すると、異なる曲線強調(curve emphasis)が達成され得る。図４２に見られるように、直接音のスペクトル修正の強さは指数値によって制御可能であり、フィルタ曲線、及び従って音源の高さ強化の制御ができる。対照的に、負の指数は、中央領域におけるサブバンド信号を減衰させることで、帯域停止の挙動をもたらす。修正済みの直接音インパルスは、後で、それらのオリジナルレベル値へと再度補正される。
【０２２８】
非公式の受聴テストが行われ、評価された。指数を増大させることにより、音源を上方に移動させることが報告された。負の指数は、音源を下方に移動させた。また、音源を下降させると、音質が強く変化することも報告された。非常に「鈍い」音質へと変化する。更に、指数の範囲を［−０．５，１．５］に制限することが合理的であることも観察された。より小さい値及び高い値は、強い音質変化を引き起こす一方で、高度差を小さくする傾向がある。
【０２２９】
以下に、実施形態に係る方向独立型の処理について説明する。
【０２３０】
これまで、処理は各方位角について個別に実行されてきた。図３８に示すように、方位角方向に依存して、各音源はそれ自身の反射によって修正されていた。処理に含まれる反射は常にＢＲＩＲにおいて同じ位置に現れることが既知であるので、処理は簡素化され得る。各方向についてのＰR,i,α（ｍ）を比較すると、全ての曲線が帯域通過の挙動を示すように見えることが分かる。従って、全ての方位角にわたって平均化することにより、ＰR,i,α（ｍ）はＰR,i（ｍ）へと削減される。
【０２３１】
ＰR,i（ｍ）は、処理が同側の耳で実行されるか又は反対側の耳で実行されるか、に依然として依存している点に留意すべきである。図４３に示すように、平均化プロセスはケース依存で実行される。左側では、全ての同側の信号が平均化され、右側では、全ての反対側の信号が平均化される。方位角α＝０°及びα＝１８０°におけるラウドスピーカについては、両方のチャネルで対称性がある。このため、同側と反対側との間に区別はなく、両方が各ケースにおいて使用される。
【０２３２】
図４３は、平均化処理のための同側（左）及び反対側（右）のチャネルを示す。測定用頭部の前後にある２つのラウドスピーカは、対称的なチャネルを有する。従って、これらの角度に関し、同側と反対側と間の区別はない。
【０２３３】
図４２（右）に見られるように、平均化処理の後、チャネル間の差は低減されている。非公式の受聴テストの結果、１指数あたり１つだけの曲線ＰR（ｍ）を取得するための両方のチャネルにわたる追加の平均化は、聴覚的な差を生まないことが分かる。平均化された曲線は図４４（左）に示される。
【０２３４】
以下に、前後の区別について考察する。
【０２３５】
「前後の区別」にとって重要なスペクトルキューは、直接音と目標フィルタ曲線とに含まれる。直接音内のキューはフィルタリングによって抑制され、目標フィルタ曲線内のキューは全ての方位角にわたってＰR,i,α（ｍ）を平均化することによって抑制される。従って、より強い「前後の区別」を獲得するために、これらのキューは再度強調される必要がある。これは以下の方法で達成され得る。
１．全てのチャネルと全てのα∈［９０°，２７０°］とでＰR,i,α（ｍ）を平均化してＰBack（ｍ）を取得する。
２．全てのチャネルと全てのα∈［２７０°，９０°］とでＰR,i,α（ｍ）を平均化してＰFront（ｍ）を取得する。
３．ＰFrontBack,max（ｍ）＝ＰFront（ｍ）／ＰBack（ｍ）を計算して、図４４（右）に示すような前方と後方との間の差分曲線を取得する。より強い平滑化効果を達成するために、α＝９０°及びα＝２７０°についてＰR,i,α（ｍ）が２度使用される。それらは前面(frontal plane)上に位置しているので前方または後方の情報を何も含まず、結果的な曲線を歪ませることもない。仮に、この曲線をα＝１８０°にあるエレベーションありの音源に適用した場合には、それをα＝０°へと移動させることになるであろう。
４．音源方向に依存して、この曲線はハーフコサインＰFrontBack（ｍ，α）＝ＰFrontBack,max（ｍ）0.5*cos(α)により指数関数的に重み付けされる。α＝０°について、ＰFrontBack,max（ｍ）はその最大限の半分を有し、α＝１８０°についてはその逆の半分を有する。α＝９０°及びα＝２７０°についてはコサインがゼロになるので、それは１となる。
５．フィルタリング処理の中で、ＰFrontBack（ｍ，α）はＰR（ｍ）と乗算される。
【０２３６】
図４４はＰR,IpCo（左）とＰFrontBack（右）とを示す。
【０２３７】
ＰR（ｍ）及びＰFrontBack（ｍ，α）を用いて、仰角β＝５５°の環上で測定される全ての音源の高さ知覚を連続的に強化することができる。この強化方法は、「モーツァルト」内のエレベーションなしの環上で測定される音源に対して適用されてきた。またこの場合、高さ強化も知覚できた。更に、エレベーションなしの音源を、それら自身の反射を使用しながら上昇させる試行も行われた。残念ながら、その場合、二次の天井反射は他の反射によって強くオーバーラップされた。しかしながら、一次の天井反射だけを使用すると、高度差は知覚可能である。
【０２３８】
更なるステップにおいて、この方法は、「Ｃｏｒｔｅｘ」を用いて測定されるＢＲＩＲの反射を使用しながら、人間の頭部を用いて測定されるＢＲＩＲに適用された。「Ｃｏｒｔｅｘ」のＢＲＩＲは修正無しの状態で既に高く聞こえるが、この方法は明確に知覚可能な高度差をもたらす。
【０２３９】
高位の環上にある音源によって引き起こされる反射に対してＰR（ｍ）及びＰFrontBack（ｍ，α）を適用することで、この高さ強化方法は受聴テスト内で知覚的に研究されている。
【０２４０】
以下に、実施形態に係る、パラメータ化された可変方向レンダリングについて説明する。
【０２４１】
このシステムの目的は、まずベース方向上でレンダリングを実行し、次に１セットのベースフィルタから取得された１セットの属性を用いてその方向を補正することにより、両耳レンダリングにおける知覚方向を補正することである。
【０２４２】
オーディオ信号とユーザー方向入力とは、可変の方向知覚を有する両耳レンダリングを作成する「オンライン両耳レンダリング」ブロックへと供給される。
【０２４３】
実施形態に係るオンライン両耳レンダリングは、例えば以下のように実行されてもよい。
【０２４４】
入力信号の両耳レンダリングは、基準方向のフィルタを使用して実行される（「基準高さ両耳レンダリング」）。
【０２４５】
第１ステージにおいて、基準高さレンダリングは、１セット（１つ又はそれ以上）の離散方向両耳室内インパルス応答（ＢＲＩＲ）を使用して実行される。
【０２４６】
第２ステージ、例えば方向補正部フィルタ処理部において、例えば追加的フィルタが知覚方向（方位角及び／又は仰角の正または負の方向）を適応させるレンダリングに対して適用されてもよい。このフィルタは、例えば（可変の）ユーザー方向入力（例えば方位角：０°〜３６０°，仰角：−９０°〜＋９０°における）と例えば１セットの方向ベースフィルタ係数とを用いて、例えば実際のフィルタパラメータを計算することにより、作成されてもよい。
【０２４７】
第１および第２のステージフィルタは、演算量を節約するために、（例えば加算または乗算により）結合されてもよい。
【０２４８】
本発明は上述した知見に基づいている。
【０２４９】
ここで、本発明の実施形態について詳細に説明する。
【０２５０】
図１ａは、一実施形態に従ってオーディオ入力信号からフィルタリング済みオーディオ信号を生成する装置１００を示す。
【０２５１】
この装置１００は、入力高さ情報に依存してフィルタ情報を決定するよう構成されたフィルタ情報決定部１１０を含み、入力高さ情報は仮想音源の高さに依存している。
【０２５２】
更に、装置１００は、フィルタ情報に依存してオーディオ入力信号をフィルタリングし、フィルタリング済みオーディオ信号を取得するよう構成されたフィルタユニット１２０を備える。
【０２５３】
フィルタ情報決定部１１０は、入力高さ情報に依存して、複数のフィルタ曲線から１つの選択フィルタ曲線を選択することを使用して、フィルタ情報を決定するよう構成される。又は、フィルタ情報決定部１１０は、エレベーション情報（elevation information）に依存して、基準フィルタ曲線を修正することにより修正フィルタ曲線を決定することを使用して、フィルタ情報を決定するよう構成される。
【０２５４】
本発明は特に、オーディオ入力信号を適切にフィルタリングすることにより、仮想音源を（仮想的に）上昇または下降させることが達成可能であるという知見に基づいている。フィルタ曲線は複数のフィルタ曲線から入力高さ情報に依存して選択されてもよく、次にその選択フィルタ曲線は、仮想音源を（仮想的に）上昇または下降させるために、オーディオ入力信号をフィルタリングするよう使用されてもよい。又は、仮想音源を（仮想的に）上昇または下降させるために、入力高さ情報に依存して基準フィルタ曲線が修正されてもよい。
【０２５５】
一実施形態において、入力高さ情報は、ある座標系の１つの座標の例えば少なくとも１つの座標値を示してもよく、その座標は仮想音源の位置を示してもよい。
【０２５６】
例えば、その座標系は、例えば３次元のデカルト座標系であってもよく、入力高さ情報は、３次元デカルト座標系の１つの座標であるか、又は３次元デカルト座標系の１つの座標の３個の座標値の１つの座標値であってもよい。
【０２５７】
例えば、３次元デカルト座標系における１つの座標は、ｘ値とｙ値とｚ値、即ち（ｘ，ｙ，ｚ）を含んでもよく、例えば（ｘ，ｙ，ｚ）＝（５，３，４）であってもよい。その場合、座標（５，３，４）は、例えば入力高さ情報であってもよい。又は、デカルト座標系の座標（５，３，４）の座標値の１つであるｚ値のｚ＝４が、例えば入力高さ情報であってもよい。
【０２５８】
又は、例えば座標系は、例えば極座標系であってもよく、入力高さ情報は、例えば極座標系の１つの極座標の仰角であってもよい。
【０２５９】
例えば、３次元極座標系における１つの座標が例えば方位角ψと仰角θと半径ｒ、即ち（ψ，θ，ｒ）を含み、例えば（ψ，θ，ｒ）＝（４０°，３０°，５）であってもよい。仰角θ＝３０°は、極座標系の座標（４０°，３０°，５）の仰角である。
【０２６０】
例えば、極座標系において、入力高さ情報は例えば極座標系の仰角を示してもよく、その場合、仰角は、目標方向と基準方向との間、又は目標方向と基準平面との間のエレベーションを示してもよい。
【０２６１】
仮想音源を（仮想的に）上昇又は下降させる上述の概念は、例えば両耳オーディオにとって特に適している。更に、上述の概念はラウドスピーカ設定にも使用され得る。例えば、全てのラウドスピーカ設定が同一平面内に配置され、かつ、高位または低位のラウドスピーカが存在しない場合、仮想音源を仮想的に上昇または仮想的に下降させることが可能になる。
【０２６２】
一実施形態によれば、フィルタ情報決定部１１０は、例えば、入力高さ情報に依存して、複数のフィルタ曲線から選択フィルタ曲線を選択することを使用して、フィルタ情報を決定するよう構成されてもよい。入力高さ情報は入力仰角である仰角であり、複数のフィルタ曲線の各フィルタ曲線は当該フィルタ曲線に割り当てられた仰角を有し、フィルタ情報決定部１１０は、例えば、複数のフィルタ曲線から選択フィルタ曲線として１つのフィルタ曲線を選択するよう構成されてもよく、その選択フィルタ曲線は、全ての複数のフィルタ曲線の中で、入力仰角とそのフィルタ曲線に割り当てられた仰角との間に最小の絶対値差を有するものであってもよい。
【０２６３】
そのような手法により、特に適切なフィルタ曲線が選択されることが実現できる。例えば、複数のフィルタ曲線は、例えば仰角０°，＋３°，−３°，＋６°，−６°，＋９°，−９°，＋１２°，−１２°等である、複数の仰角についてのフィルタ曲線を含み得る。例えば、入力高さ情報が＋４°の仰角を特定した場合には、＋３°の仰角のためのフィルタ曲線が選択されるであろう。なぜなら、全てのフィルタ曲線の中で、＋４°の入力高さ情報とその特定のフィルタ曲線に割り当てられた＋３°の仰角との間の絶対値差が全てのフィルタ曲線の中で最小、即ち、｜（＋４°）−（＋３°）｜＝１°であるからである。
【０２６４】
他の実施形態によれば、フィルタ情報決定部１１０は、例えば、入力高さ情報に依存して、複数のフィルタ曲線から選択フィルタ曲線を選択することを使用して、フィルタ情報を決定するよう構成されてもよい。入力高さ情報は、例えば入力座標値である、３次元直交座標系の座標の３つの座標値の前記座標値であってもよく、複数のフィルタ曲線の各フィルタ曲線は当該フィルタ曲線に割り当てられた座標値を有し、フィルタ情報決定部１１０は、選択フィルタ曲線として例えば複数のフィルタ曲線から１つのフィルタ曲線を選択するよう構成され、そのフィルタ曲線は、全ての複数のフィルタ曲線の中で、入力座標値と前記フィルタ曲線に割当てられている座標値との間に最小の絶対値差を有するものである。
【０２６５】
そのような手法によれば、例えば、複数のフィルタ曲線は、３次元デカルト座標系の１つの座標の例えばｚ座標の複数の値について、例えば０，＋４，−４，＋８，−８，＋１２°，−１２，＋１６，−１６等のｚ値について、のフィルタ曲線を含んでもよい。例えば、入力高さ情報が＋５のｚ座標値を特定している場合には、＋４のｚ座標値のためのフィルタ曲線が選択されるであろう。なぜなら、全てのフィルタ曲線の中で、＋５の入力高さ情報とその特定のフィルタ曲線に割り当てられた＋４のｚ座標値との間の絶対値差分が全てのフィルタ曲線の中で最小、即ち、｜（＋５）−（＋４）｜＝１であるからである。
【０２６６】
一実施形態において、フィルタ情報決定部１１０は、決定された増幅値によって選択フィルタ曲線を増幅し、処理済みフィルタ曲線を取得するよう構成されてもよく、又はフィルタ情報決定部１１０は、決定された減衰値によって選択フィルタ曲線を減衰させ、処理済みフィルタ曲線を取得するよう構成されてもよい。フィルタユニット１２０は、処理済みフィルタ曲線に依存してオーディオ入力信号をフィルタリングし、フィルタリング済みオーディオ信号を取得するよう構成されてもよい。フィルタ情報決定部１１０は、例えば入力座標値と選択フィルタ曲線に割当てられている座標値との差に依存して、決定された増幅値又は決定された減衰値を決定するよう構成されてもよい。又は、フィルタ情報決定部１１０は、例えば、仰角と選択フィルタ曲線に割当てられている仰角との差に依存して、決定された増幅値又は決定された減衰値を決定するよう構成されてもよい。
【０２６７】
フィルタ曲線が対数目盛と関係している（対数目盛に関して特定されている）場合、増幅値または減衰値は、増幅ファクタ又は減衰ファクタである。増幅ファクタ又は減衰ファクタは、次に選択フィルタ曲線の各値と乗算されて、修正スペクトルフィルタ曲線が取得される。
【０２６８】
そのような実施形態では、選択後に選択フィルタ曲線を適応させることができる。仰角と関係する上述の第１の実例において、＋４°の仰角の入力高さ情報は、選択フィルタ曲線に割り当てられた＋３°の仰角と厳密には同一ではない。同様に、座標値と関係する上述の第２の実例において、ｚ座標値に係る＋５の入力高さ情報は、選択フィルタ曲線に割り当てられた＋４のｚ座標値と厳密には同一ではない。従って、両方の実例において、選択フィルタ曲線の適応が有益と考えられる。
【０２６９】
フィルタ曲線が均等目盛と関連している（均等目盛に関して特定される）場合、増幅値または減衰値は、指数増幅値または指数減衰値である。その場合、指数増幅値／指数減衰値は、指数関数の冪指数として使用される。指数増幅値または指数減衰値を冪指数として有する指数関数の結果は、次に選択フィルタ曲線の各値と乗算されて、修正スペクトルフィルタ曲線が取得される。
【０２７０】
一実施形態によれば、フィルタ情報決定部１１０は、エレベーション情報に依存して基準フィルタ曲線を修正することにより修正フィルタ曲線を決定することを使用して、フィルタ情報を決定するよう構成されてもよい。更に、フィルタ情報決定部１１０は、基準フィルタ曲線を決定された増幅値によって増幅して処理済みフィルタ曲線を取得するか、又はフィルタ情報決定部１１０は、基準フィルタ曲線を決定された減衰値によって減衰させて処理済みフィルタ曲線を取得するよう構成されてもよい。
【０２７１】
そのような実施形態においては、ただ１つのフィルタ曲線、即ち基準フィルタ曲線だけが存在する。その場合、フィルタ情報決定部１１０は、入力高さ情報に依存して基準フィルタ曲線を適応させる。
【０２７２】
一実施形態において、フィルタ情報決定部１１０は、例えば入力高さ情報に依存して複数のフィルタ曲線から選択フィルタ曲線を第１の選択フィルタ曲線として選択することを使用して、フィルタ情報を決定するよう構成されてもよい。更に、フィルタ情報決定部１１０は、例えば入力高さ情報に依存して複数のフィルタ曲線から第２の選択フィルタ曲線を選択することを使用して、フィルタ情報を決定するよう構成されてもよい。更に、フィルタ情報決定部１１０は、例えば第１の選択フィルタ曲線と第２の選択フィルタ曲線との間を補間することにより、補間済みフィルタ曲線を決定するよう構成されてもよい。
【０２７３】
一実施形態において、フィルタ情報決定部１１０は、例えばフィルタユニット１２０がオーディオ入力信号の第１スペクトル部分を修正し、かつフィルタユニット１２０がオーディオ入力信号の第２スペクトル部分を修正しないように、フィルタ情報を決定するよう構成されてもよい。
【０２７４】
オーディオ入力信号の第１スペクトル部分を修正することで、仮想音源を上昇または下降させることが実現される。しかし、オーディオ入力信号の他のスペクトル部分は、仮想音源を上昇または下降させるために修正されることはない。
【０２７５】
一実施形態によれば、フィルタ情報決定部１１０は、例えば、フィルタユニット１２０がオーディオ入力信号の第１スペクトル部分を第１増幅値によって増幅し、かつフィルタユニット１２０がオーディオ入力信号の第２スペクトル部分を第２増幅値によって増幅し、第１増幅値が第２増幅値と異なるように、フィルタ情報を決定するよう構成されてもよい。
【０２７６】
上述の実施形態は、幾つかの周波数部分を特別に増幅させ、他の周波数部分を低減することで、仮想音源を仮想的に上昇させ又は下降させることが達成される、という知見に基づいている。よって、実施形態において、オーディオ入力信号からフィルタリング済みオーディオ信号を生成することが、オーディオ入力信号を異なる増幅値（異なるゲイン値）で増幅（又は減衰）させることと対応するように、フィルタリングが実行される。
【０２７７】
一実施形態において、フィルタ情報決定部１１０は、例えば入力高さ情報に依存して複数のフィルタ曲線から選択フィルタ曲線を選択することを使用して、フィルタ情報を決定するよう構成されてもよく、その場合、複数のフィルタ曲線の各々は７００Ｈｚと２０００Ｈｚとの間に最大値又は最小値を有する。又は、フィルタ情報決定部１１０は、例えばエレベーション情報に依存して基準フィルタ曲線を修正することにより修正フィルタ曲線を決定することを使用して、フィルタ情報を決定するよう構成されてもよく、その場合、基準フィルタは７００Ｈｚと２０００Ｈｚとの間に最大値又は最小値を有する。
【０２７８】
図５１〜図５５は、仮想音源を上昇または下降させる効果を生み出すのに適した複数の異なるフィルタ曲線を示す。仮想音源を上昇または下降させる効果を生み出すためには、特に７００Ｈｚと２０００Ｈｚとの間の範囲内の幾つかの周波数が、仮想音源を仮想的に上昇または仮想的に下降させるために特別に増幅されるか又は特別に減衰される必要がある、ということが発見された。
【０２７９】
特に、図５１において正の（０よりも大きい）増幅値を持つフィルタ曲線は、１０００Ｈｚの付近、即ち７００Ｈｚと２０００Ｈｚとの間に、最大値５１０１，５１０２，５１０３，５１０４を有する。
【０２８０】
同様に、図５２、図５３、図５４、図５５において正の増幅値を持つフィルタ曲線は、１０００Ｈｚの付近、即ち７００Ｈｚと２０００Ｈｚとの間に、最大値５２０１，５２０２，５２０３，５２０４と、５３０１，５３０２，５３０３，５３０４と、５４０１，５４０２，５４０３，５４０４と、を有する。
【０２８１】
一実施形態によれば、フィルタ情報決定部１１０は、例えば入力高さ情報に依存し更に入力方位情報にも依存して、フィルタ情報を決定するよう構成されてもよい。更に、フィルタ情報決定部１１０は、例えば入力高さ情報に依存しかつ入力方位情報にも依存して、複数のフィルタ曲線から選択フィルタ曲線を選択することを使用して、フィルタ情報を決定するよう構成されてもよい。又は、フィルタ情報決定部１１０は、例えばエレベーション情報に依存しかつ方位情報にも依存して、基準フィルタ曲線を修正することにより修正フィルタ曲線を決定することを使用して、フィルタ情報を決定するよう構成されてもよい。
【０２８２】
上述の図５１〜図５５は、異なる方位値に割り当てられたフィルタ曲線を示す。
【０２８３】
特に、図５１は方位＝０°に関する補正フィルタ曲線を示し、図５２は方位＝３０°に関する補正フィルタ曲線を示し、図５３は方位＝４５°に関する補正フィルタ曲線を示し、図５４は方位＝６０°に関する補正フィルタ曲線を示し、図５５は方位＝９０°に関する補正フィルタ曲線を示す。
【０２８４】
フィルタ曲線は異なる方位値に割り当てられているため、図５１〜図５５における対応するフィルタ曲線は僅かに異なっている。よって、幾つかの実施形態においては、入力方位情報、例えば仮想音源の位置に基づく方位角もまた考慮に入れなくてはならない。
【０２８５】
一実施形態において、フィルタユニット１２０は、例えばフィルタ情報に依存してオーディオ入力信号をフィルタリングし、フィルタリング済みオーディオ信号として正に２つのオーディオチャネルを有する両耳オーディオ信号を取得するよう構成されてもよい。フィルタ情報決定部１１０は、例えば入力頭部伝達関数に関する入力情報を受信するよう構成されてもよい。更に、フィルタ情報決定部１１０は、選択フィルタ曲線に依存し又は修正フィルタ曲線に依存して入力頭部伝達関数を修正することにより修正頭部伝達関数を決定することで、フィルタ情報を決定するよう構成されてもよい。
【０２８６】
上述した概念は、特に両耳オーディオに適している。両耳レンダリングを実行するとき、頭部伝達関数はオーディオ入力信号に適用されて、正に２個のオーディオチャネルを含むオーディオ出力信号（ここではフィルタリング済みオーディオ信号）を生成する。実施形態によれば、頭部伝達関数それ自体が修正（例えばフィルタリング）された後で、その結果として得られる修正頭部伝達関数がオーディオ入力信号へと適用される。
【０２８７】
一実施形態によれば、入力頭部伝達関数は、例えばスペクトルドメインで表現されてもよい。選択フィルタ曲線は例えばスペクトルドメインで表現されてもよく、又は修正フィルタ曲線がスペクトルドメインで表現されてもよい。
【０２８８】
フィルタ情報決定部１１０は、例えば
−選択フィルタ曲線もしくは修正フィルタ曲線のスペクトル値を入力頭部伝達関数のスペクトル値に加算することにより、修正頭部伝達関数を決定するよう構成されるか、又は
−選択フィルタ曲線もしくは修正フィルタ曲線のスペクトル値と入力頭部伝達関数のスペクトル値とを乗算することにより、修正頭部伝達関数を決定するよう構成されるか、又は
−入力頭部伝達関数のスペクトル値から選択フィルタ曲線もしくは修正フィルタ曲線のスペクトル値を減算するか、又は選択フィルタ曲線もしくは修正フィルタ曲線のスペクトル値から入力頭部伝達関数のスペクトル値を減算することにより、修正頭部伝達関数を決定するよう構成されるか、又は
−入力頭部伝達関数のスペクトル値を選択フィルタ曲線もしくは修正フィルタ曲線のスペクトル値で除算するか、又は選択フィルタ曲線もしくは修正フィルタ曲線のスペクトル値を入力頭部伝達関数のスペクトル値で除算することにより、修正頭部伝達関数を決定するよう構成されてもよい。
【０２８９】
そのような実施形態では、頭部伝達関数はスペクトルドメインで表現され、頭部伝達関数を修正するためにスペクトルドメインフィルタ曲線が使用される。例えば加算または減算は、例えば頭部伝達関数およびフィルタ曲線が対数目盛に関連する場合に使用されてもよい。例えば乗算または除算は、例えば頭部伝達関数およびフィルタ曲線が均等目盛に関連する場合に使用されてもよい。
【０２９０】
一実施形態において、入力頭部伝達関数は、例えば時間ドメインで表現されてもよい。選択フィルタ曲線は時間ドメインで表現されるか、又は修正フィルタ曲線は時間ドメインで表現される。フィルタ情報決定部１１０は、例えば選択フィルタ曲線又は修正フィルタ曲線と入力頭部伝達関数とを畳み込むことにより、修正頭部伝達関数を決定するよう構成されてもよい。
【０２９１】
そのような実施形態では、頭部伝達関数は時間ドメインで表現され、頭部伝達関数とフィルタ曲線とを畳み込むことにより、修正頭部伝達関数が取得される。
【０２９２】
他の実施形態において、フィルタ情報決定部１１０は、例えば非再帰型フィルタ構造を持つ選択フィルタ曲線又は修正フィルタ曲線をフィルタリングすることにより、修正頭部伝達関数を決定するよう構成されてもよい。例えば、ＦＩＲフィルタ（有限インパルス応答フィルタ）を用いたフィルタリングが実行されてもよい。
【０２９３】
更なる実施形態において、フィルタ情報決定部１１０は、例えば再帰型フィルタ構造を持つ選択フィルタ曲線又は修正フィルタ曲線をフィルタリングすることにより、修正頭部伝達関数を決定するよう構成されてもよい。例えば、ＩＩＲフィルタ（無限インパルス応答フィルタ）を用いたフィルタリングが実行されてもよい。
【０２９４】
図１ｂは、一実施例に係る方向修正情報を提供する装置２００を示す。
【０２９５】
装置２００は複数のラウドスピーカ２１１，２１２を含み、複数のラウドスピーカ２１１，２１２の各々が、再生オーディオ信号を再生するよう構成されており、複数のラウドスピーカ２１１，２１２の第１のラウドスピーカは第１高さの第１位置に配置され、複数のラウドスピーカ２１１，２１２の第２のラウドスピーカは、第１高さと異なる第２高さにある、第１位置と異なる第２位置に配置されている。
【０２９６】
更に、装置２００は２個のマイクロホン２２１，２２２を含み、２個のマイクロホン２２１，２２２の各々は、複数のラウドスピーカ２１１，２１２の各ラウドスピーカから、オーディオ信号を再生するときにそれらラウドスピーカによって放射される音波を受信することによって、録音オーディオ信号を録音するよう構成されている。
【０２９７】
更に、装置２００は、前記再生されるオーディオ信号が前記ラウドスピーカによって再生されるとき、前記ラウドスピーカによって再生される再生オーディオ信号に依存し、かつ２個のマイクロホン２２１，２２２の各々によって録音される録音されるオーディオ信号の各々に依存して、複数のラウドスピーカ２１１，２１２の各ラウドスピーカについて両耳室内インパルス応答を決定することにより、複数の両耳室内インパルス応答を決定するよう構成された、両耳室内インパルス応答決定部２３０を含む。
【０２９８】
両耳室内インパルス応答を決定することはこの技術で公知である。ここでは、両耳室内インパルス応答が、例えば異なる高さ、例えば異なる仰角を示し得る位置に配置されたラウドスピーカについて決定される。
【０２９９】
更に、装置２００は、複数の両耳室内インパルス応答の２つに依存して、少なくとも１つのフィルタ曲線を生成するよう構成されたフィルタ曲線生成部２４０を含む。方向修正情報はその少なくとも１つのフィルタ曲線に依存する。
【０３００】
例えば（基準）両耳室内インパルス応答は、基準仰角（例えばその基準仰角は例えば０°であり得る）にある基準位置に配置されたラウドスピーカについて決定されている。その場合、第２両耳室内インパルス応答は、例えば第２仰角、例えば−１５°の仰角を有する第２位置に配置されたラウドスピーカについて決定されたインパルス応答と考えられ得る。
【０３０１】
０°の第１角度は、第１ラウドスピーカが第１高さに配置されていることを特定する。−１５°の第２角度は、第２ラウドスピーカが第１高さよりも低い第２高さに配置されていることを特定する。これは図４９に示される。図４９において、第１ラウドスピーカ２１１は、第２ラウドスピーカ２１２が配置されている第２高さよりも低い第１高さに配置されている。
【０３０２】
両方の両耳室内インパルス応答は、例えばスペクトルドメインで表現されてもよいし、又は時間ドメインからスペクトルドメインへと変換されてもよい。フィルタ曲線の１つを取得するために、スペクトルドメインでは第１信号である基準両耳室内インパルス応答から、スペクトルドメインでは第２信号である第２の両耳室内インパルス応答が減算されてもよい。結果としての信号は、少なくとも１つのフィルタ曲線の１つである。スペクトルドメインで表現される結果信号は、最終的なフィルタ曲線を取得するために時間ドメインへ変換されてもよいが、必ずしも時間ドメインへ変換される必要はない。
【０３０３】
一実施形態では、フィルタ曲線生成部２４０は、複数の両耳室内インパルス応答に依存して１つ以上の中間曲線を生成することによって、かつ１つ以上の中間曲線の各々を複数の異なる減衰値の各々によって増幅することにより、２つ以上のフィルタ曲線を取得するよう構成される。
【０３０４】
よって、フィルタ曲線生成部２４０によってフィルタ曲線を生成することは、２つの段階によって実行される。最初に１つ以上の中間曲線が生成される。次に、複数の減衰値の各々が１つ以上の中間曲線に適用され、複数の異なるフィルタ曲線を得る。例えば、図５１では異なる減衰値、すなわち−０．５、０、０．５、１、１．５、２の減衰値が中間曲線に適用されてきた。実際上、０の減衰値を適用することは、常にゼロ関数をもたらすので、不要であり、１の減衰値を適用することは、既に存在する中間曲線を修正しないので、不要である。
【０３０５】
一実施形態によれば、フィルタ曲線生成部２４０は、両耳室内インパルス応答の各々から１つの頭部伝達関数を抽出することによって、複数の両耳室内インパルス応答から複数の頭部伝達関数を決定するよう構成される。複数の頭部伝達関数は例えばスペクトルドメインで表現されてもよい。高さ値は、例えば複数の頭部伝達関数のそれぞれに割り当てられても良い。フィルタ曲線生成部２４０は、例えば２つ以上のフィルタ曲線を生成するよう構成されてもよい。フィルタ曲線生成部２４０は、例えば複数の頭部伝達関数の１番目の関数のスペクトル値から複数の頭部伝達関数の２番目の関数のスペクトル値を減算することにより、又は複数の頭部伝達関数の１番目の関数のスペクトル値を複数の頭部伝達関数の２番目の関数のスペクトル値によって除算することにより、２つ以上のフィルタ曲線のそれぞれを生成するよう構成される。さらに、フィルタ曲線生成部２４０は、例えば複数の頭部伝達関数の２番目に割り当てられた高さ値から複数の頭部伝達関数の１番目に割り当てられた高さ値を減算することにより、２つ以上のフィルタ曲線の各々に１つの高さ値を割り当てるよう構成される。さらに、方向修正情報は、２つ以上のフィルタ曲線の各々と、そのフィルタ曲線に割り当てられた高さ値とを含む。高さ値は、例えば仰角であってもよく、例えば極座標系の座標の仰角であってもよい。又は、高さ値は、例えばデカルト座標系の座標の座標値であってもよい。
【０３０６】
そのような実施形態では、複数のフィルタ曲線が生成される。このような実施形態は、複数のフィルタ曲線から１つの選択フィルタ曲線を選択する図１ａの装置１００と相互作用するのに適している可能性がある。
【０３０７】
ある実施形態では、フィルタ曲線生成部２４０は、両耳室内インパルス応答の各々から１つの頭部伝達関数を抽出することによって、複数の両耳室内インパルス応答から複数の頭部伝達関数を決定するよう構成される。複数の頭部伝達関数はスペクトルドメインで表現される。高さ値は、例えば複数の頭部伝達関数のそれぞれに割り当てられても良い。フィルタ曲線生成部２４０は、例えば正に１つのフィルタ曲線を生成するよう構成されてもよい。さらに、フィルタ曲線生成部２４０は、例えば複数の頭部伝達関数の１番目の関数のスペクトル値から複数の頭部伝達関数の２番目の関数のスペクトル値を減算することにより、又は複数の頭部伝達関数の１番目の関数のスペクトル値を複数の頭部伝達関数の２番目の関数のスペクトル値によって除算することにより、正に１つのフィルタ曲線を生成するよう構成されてもよい。フィルタ曲線生成部２４０は、例えば複数の頭部伝達関数の２番目に割り当てられた高さ値から複数の頭部伝達関数の１番目に割り当てられた高さ値を減算することにより、正に１つのフィルタ曲線に１つの高さ値を割り当てるよう構成されても良い。方向修正情報は、例えば正に１つのフィルタ曲線と、その正に１つのフィルタ曲線に割り当てられた高さ値とを含んでも良い。高さ値は、例えば仰角であってもよく、例えば極座標系の座標の仰角であってもよい。又は、高さ値は、例えばデカルト座標系の座標の座標値であってもよい。
【０３０８】
そのような実施形態では、単一のフィルタ曲線だけが生成される。このような実施形態は、基準フィルタ曲線を修正する図１ａの装置１００と相互作用するのに適している可能性がある。
【０３０９】
図１ｃは、一実施形態に係るシステム３００を示す。
【０３１０】
このシステム３００は、方向修正情報を提供する図１ｂの装置２００を含む。
【０３１１】
さらに、システム３００は図１ａの装置１００を含む。図１ｃによって示された実施形態では、図１ａの装置１００のフィルタユニット１２０が、フィルタ情報に依存してオーディオ入力信号をフィルタリングし、フィルタリング済みオーディオ信号として正に２つのオーディオチャネルを有する１つの両耳オーディオ信号を取得するよう構成される。
【０３１２】
図１ｃの実施形態では、図１ａの装置１００のフィルタ情報決定部１１０が、入力高さ情報に依存して複数のフィルタ曲線から１つの選択フィルタ曲線を選択することを使用して、フィルタ情報を決定するよう構成される。又は、図１ｃの実施形態において、図１ａの装置１００のフィルタ情報決定部１１０は、エレベーション情報に依存して基準フィルタ曲線を修正することにより修正フィルタ曲線を決定することにより、フィルタ情報を決定するよう構成される。
【０３１３】
図１ｃの実施形態において、図１ｂの装置２００によって提供された方向修正情報は、複数のフィルタ曲線又は基準フィルタ曲線を含む。
【０３１４】
さらに、図１ｃの実施形態では、図１ａの装置１００のフィルタ情報決定部１１０が入力頭部伝達関数に関する入力情報を受信するよう構成される。さらに、図１ａの装置１００のフィルタ情報決定部１１０は、入力頭部伝達関数を選択フィルタ曲線又は修正フィルタ曲線に依存して入力頭部伝達関数を修正することによって修正頭部伝達関数を決定することにより、フィルタ情報を決定するよう構成される。
【０３１５】
図４５は特殊な実施形態にかかるシステムを示し、図４８のシステムは一実施形態に従ってオーディオ入力信号からフィルタリング済みオーディオ信号を生成する装置１００と、一実施形態に従って方向修正情報を提供する装置２００とを含む。
【０３１６】
図４６〜図４８においても同様に、特殊な実施形態にかかるシステムが示され、図４６〜図４８のそれぞれの各システムは、一実施形態に従ってオーディオ入力信号からフィルタリング済みオーディオ信号を生成する装置１００と、一実施形態に従って方向修正情報を提供する装置２００とを含む。
【０３１７】
図４５〜図４８のそれぞれには、個々の実施形態に従ってオーディオ入力信号からフィルタリング済みオーディオ信号を生成する装置１００が、各図の方向修正情報を提供する装置２００を具備せずに実現され得る、実施例が示されている。同様に、図４５〜図４８のそれぞれには、各図の実施形態に従って方向修正情報を提供する装置２００が、各図のオーディオ入力信号からフィルタリング済みオーディオ信号を生成する装置１００を具備せずに実現され得る、実施例が示されている。よって、図４５〜図４８について提示された説明は、個々のシステムに関する説明だけでなく、方向修正情報を提供する装置２００を用いずに実現される実施例にかかる、オーディオ入力信号からフィルタリング済みオーディオ信号を生成する装置１００の説明でもあり、また指向性音を生成する装置を用いずに実現される実施例にかかる、方向修正情報を提供する装置２００の説明でもある。
【０３１８】
最初に、実施形態にかかるオフライン両耳フィルタ準備について説明する。
【０３１９】
図４５には、特殊な実施形態にかかる方向修正情報を提供する装置２００が図示されている。図１ｂのラウドスピーカ２１１及び２１２と、マイクロホン２２１及び２２２とは、図解上の理由から図示されていない。
【０３２０】
異なる位置に配置された複数の異なるラウドスピーカ２１１、２１２のために決定されていたＢＲＩＲ（両耳室内インパルス応答）のセットは、両耳室内インパルス応答決定部２３０によって生成される。複数の異なるラウドスピーカの少なくとも幾つかは、異なる位置に異なるエレベーションで（例えばこれらラウドスピーカの位置が異なる仰角を表す）配置されている。決定されたＢＲＩＲは、例えばＢＲＩＲ記憶部２５１（例えばメモリ又はデータベース）に格納されてもよい。
【０３２１】
図４５において、フィルタ曲線生成部２４０は方向キュー分析部２４１と方向修正フィルタ生成部２４２とを含む。
【０３２２】
基準ＢＲＩＲのセットから、方向キュー分析部２４１は、例えばエレベーション・キュー分析において、例えば方向知覚のための重要なキューを隔離してもよい。このようにして、エレベーション・ベースフィルタ係数は例えば創り出されてもよい。重要なキューは、例えば基準ＢＲＩＲフィルタセットの特異部分の周波数依存の属性、時間依存の属性、又は位相依存の属性であってもよい。
【０３２３】
壁又は天井からの音響反射のような「基準ＢＲＩＲフィルタセット」の特異部分を捕捉するだけのために、前記抽出は、例えば球状マイクロホンアレー又は幾何学的室内モデルのようなツールを使用して実行されてもよい。
【０３２４】
方向修正情報を提供する装置２００は、球状マイクロホンアレー又は幾何学的室内モデルのようなツールを含んでいてもよいが、そのようなツールを必ずしも含む必要はない。
【０３２５】
幾つかの実施形態では、方向修正フィルタ係数を提供する装置が球状マイクロホンアレー又は幾何学的室内モデルのようなツールを含まず、球状マイクロホンアレー又は幾何学的室内モデルのようなツールからのデータは、例えば方向修正フィルタ係数を提供する装置への入力として提供されてもよい。
【０３２６】
図４５の方向修正フィルタ係数を提供する装置は、さらに方向修正フィルタ生成部２４２を含む。例えば方向キュー分析部によって実行される方向キュー分析からの情報は、方向修正フィルタ生成部２４２によって使用され、１つ以上の中間曲線を生成する。方向修正フィルタ生成部２４２は次に、例えば中間曲線を延伸し又は圧縮することにより、１つ以上の中間曲線から複数のフィルタ曲線を生成する。結果としてのフィルタ曲線、例えばそれらの係数は、次にフィルタ曲線記憶部２５２（例えばメモリ又はデータベース内）に格納されてもよい。
【０３２７】
例えば、方向修正フィルタ生成部２４２は、唯一の中間曲線を生成してもよい。次に、幾つかのエレベーション（例えば仰角−１５°、−５５°及び−９０°）について、生成済みの中間曲線に依存して方向修正フィルタ生成部２４２によってフィルタ曲線が生成されてもよい。
【０３２８】
両耳室内インパルス決定部２３０と、図４５のフィルタ曲線生成部２４０とを、図４９及び図５０を参照して詳細に説明する。
【０３２９】
図４９は、受聴者４９１と、２つの異なるエレベーションの２つのラウドスピーカ２１１，２１２と、仮想音源４９２とを示す概略図である。
【０３３０】
図４９では、０°のエレベーションを持つ第１ラウドスピーカ２１１と−１５°のエレベーションを持つ第２ラウドスピーカ２１２とが示されている。
【０３３１】
第１ラウドスピーカ２１１は、例えば図１ｂの２つのマイクロホン２２１、２２２（図４９には図示せず）によって録音された第１信号を放射する。両耳室内インパルス決定部２３０（図４９には図示せず）は第１両耳室内インパルス応答を決定し、第１ラウドスピーカ２１１の０°のエレベーションは、その第１両耳室内インパルス応答に割り当てられる。
【０３３２】
次に、第２ラウドスピーカ２１２は、これも例えば２つのマイクロホン２２１、２２２によって録音された第２信号を放射する。両耳室内インパルス決定部２３０は第２両耳室内インパルス応答を決定し、第２ラウドスピーカ２１２の−１５°のエレベーションがその第２両耳室内インパルス応答に割り当てられる。
【０３３３】
図４５の方向キュー分析部２４１は、例えば２つの両耳室内インパルス応答の各々から頭部伝達関数を抽出してもよい。
【０３３４】
その後、方向修正フィルタ生成部２４２は、例えば２つの決定された頭部伝達関数間のスペクトル差を決定してもよい。
【０３３５】
スペクトル差は、例えば上述ように中間曲線として考慮されてもよい。この決定されたスペクトル差から複数のフィルタ曲線を決定するために、方向修正フィルタ生成部２４２がこの中間曲線を複数の異なる延伸ファクタ（増幅値とも呼ばれる）を用いて重み付けしてもよい。適用された各増幅値は新たな各フィルタ曲線を生成し、新たな各仰角と関連付けられる。
【０３３６】
延伸ファクタがより大きくなると、中間曲線の補正／修正、例えば中間曲線の（−１５°であった）エレベーションはさらに減少する（例えば−３０°へと減少し、新たなエレベーション＜−１５°となる）。
【０３３７】
例えば、負の延伸ファクタが適用された場合には、中間曲線の補正／修正、例えば中間曲線の（−１５°であった）エレベーションは増大する（エレベーションは−１５°よりも大きくなり、新たなエレベーション＞−１５°となる）。
【０３３８】
図５０は、一実施形態に従って、異なる増幅値（延伸ファクタ）を中間曲線に適用することからもたらされるフィルタ曲線を示している。
【０３３９】
図４５に戻って、フィルタリング済みオーディオ信号を生成する装置１００は、フィルタ情報決定部１１０とフィルタユニット１２０とを含む。図４５では、フィルタ情報決定部１１０は方向修正フィルタ選択部１１１と方向修正フィルタ情報処理部１１５とを含む。方向修正情報フィルタ処理部１１５は、例えば選択フィルタ曲線を両耳室内インパルス応答の時間的始点に適用してもよい。
【０３４０】
方向修正フィルタ選択部１１１は、装置２００によって提供された複数のフィルタ曲線の内の１つを選択フィルタ曲線として選択する。特に、図４５の方向修正フィルタ選択部１１１は、方向入力に依存して、特にエレベーション情報に依存して、選択フィルタ曲線（補正曲線とも呼ばれる）を選択する。
【０３４１】
選択フィルタ曲線は、例えばフィルタ曲線記憶部２５２（方向フィルタ係数コンテナとも呼ばれる）から選択されてもよい。フィルタ曲線記憶部２５２では、フィルタ曲線は例えばそのフィルタ係数を格納することにより、又はそのスペクトル値を格納することにより、格納されてもよい。
【０３４２】
次いで、方向修正フィルタ情報処理部１１５は、選択フィルタ曲線のフィルタ係数またはスペクトル値を入力頭部伝達関数に適用し、修正頭部伝達関数を取得する。修正頭部伝達関数は、次に両耳レンダリングのために図４５の装置１００のフィルタユニット１２０によって使用される。
【０３４３】
入力頭部伝達関数は、例えば装置２００によって決定されてもよい。
【０３４４】
図４５のフィルタユニット１２０は、例えば現存する（かつ例えば可能な前処理済みの）ＢＲＩＲ測定値に基づいて両耳レンダリングを行ってもよい。
【０３４５】
装置２００に関して、図４６の実施形態は、フィルタ曲線生成部２４０が方向修正フィルタ生成部２４２に代えて方向修正ベースフィルタ生成部２４３を有する点で図４５の実施形態とは異なる。
【０３４６】
方向修正ベースフィルタ生成部２４３は、両耳室内インパルス応答から基準フィルタ曲線（ベース補正フィルタ曲線とも呼ばれる）として単一のフィルタ曲線だけを生成するよう構成されている。
【０３４７】
装置１００に関して、図４６の実施形態は、フィルタ情報決定部が方向修正フィルタ生成部I１１２を有する点で図４５の実施形態とは異なる。方向修正フィルタ生成部I１１２は装置２００からの基準フィルタ曲線を、例えば基準フィルタ曲線を（入力高さ情報に依存して）延伸又は圧縮することによって、修正するよう構成されている。
【０３４８】
図４７において、装置２００は図４５の装置２００に対応している。装置２００は複数のフィルタ曲線を生成する。
【０３４９】
図４７の装置１００は、図４５の装置１００とは、図４７の装置１００のフィルタ情報決定部１１０が、方向修正フィルタ選択部１１１に代えて方向修正フィルタ生成部II１１３を有する点で異なる。
【０３５０】
方向修正フィルタ生成部II１１３は装置２００によって提供された複数のフィルタ曲線の１つを選択フィルタ曲線として選択する。特に、図４５の方向修正フィルタ選択部１１１は、方向入力に依存して、特にエレベーション情報に依存して、選択フィルタ曲線（補正曲線とも呼ばれる）を選択する。選択フィルタ曲線を選択した後、方向修正フィルタ生成部II１１３は、選択フィルタ曲線を、例えば基準フィルタ曲線を（入力高さ情報に依存して）延伸又は圧縮することによって修正する。
【０３５１】
代替的実施形態では、方向修正フィルタ生成部II１１３は、例えば入力高さ情報に依存して、装置２００によって提供された複数のフィルタ曲線の２つの間を補間し、さらにこれら２つのフィルタ曲線から補間済みフィルタ曲線を生成する。
【０３５２】
図４８は、フィルタリング済みオーディオ信号を生成する、異なる実施形態にかかる装置１００を示す。
【０３５３】
図４８の実施形態では、フィルタ情報決定部１１０は、例えば図４５の実施形態、図４６の実施形態、又は図４７の実施形態のように構成されてもよい。
【０３５４】
図４８の実施形態では、フィルタユニット１２０は、２つの中間オーディオチャネルを含む１つの中間両耳オーディオ信号を取得するために、両耳レンダリングを行う両耳レンダラー１２１を含む。
【０３５５】
さらに、フィルタユニット１２０は、フィルタ情報決定部１１０により提供されたフィルタ情報に依存して、中間両耳オーディオ信号の２つの中間オーディオチャネルをフィルタリングするよう構成された、方向−補正フィルタ処理部１２２を含む。
【０３５６】
よって、図４８の実施形態において、最初に両耳レンダリングが行われる。仮想エレベーション適応は、方向−補正フィルタ処理部１２２の後で実行される。
【０３５７】
これまで幾つかの態様を装置の文脈で説明してきたが、これらの態様は対応する方法の説明をも表しており、１つのブロック又は装置が１つの方法ステップ又は方法ステップの特徴に対応することは明らかである。同様に、方法ステップを説明する文脈で示した態様もまた、対応する装置の対応するブロックもしくは項目又は特徴を表している。方法ステップの幾つか又は全ては、例えばマイクロプロセッサ、プログラム可能なコンピュータ又は電子回路などのハードウエア装置により（又は使用して）実行されてもよい。幾つかの実施形態において、最も重要な方法ステップの１つ以上が、そのような装置によって実行されてもよい。
【０３５８】
所定の実施要件にもよるが、本発明の実施形態は、ハードウエア若しくはソフトウエアにおいて、又は少なくとも一部がハードウエア若しくはソフトウエアにおいて、実施可能である。この実施は、電子的に読み取り可能な制御信号が中に格納された、本発明の各方法が実行されるようにプログラム可能なコンピュータシステムと協働する（又は協働可能な）、デジタル記憶媒体、例えばフレキシブルディスク，ＤＶＤ，ブルーレイ，ＣＤ，ＲＯＭ，ＰＲＯＭ，ＥＰＲＯＭ，ＥＥＰＲＯＭ，フラッシュメモリなどのデジタル記憶媒体を使用して実行することができる。従って、デジタル記憶媒体はコンピュータ読み取り可能であり得る。
【０３５９】
本発明に従う幾つかの実施形態は、上述した方法の１つを実行するよう、プログラム可能なコンピュータシステムと協働可能で、電子的に読み取り可能な制御信号を有するデータキャリアを含む。
【０３６０】
一般的に、本発明の実施形態は、プログラムコードを有するコンピュータプログラム製品として構成することができ、そのプログラムコードは当該コンピュータプログラム製品がコンピュータ上で作動するときに、本発明の方法の一つを実行するよう作動可能である。そのプログラムコードは例えば機械読み取り可能なキャリアに記憶されていても良い。
【０３６１】
他の実施形態は、上述した方法の１つを実行するための、機械読み取り可能なキャリアに格納されたコンピュータプログラムを含む。
【０３６２】
換言すれば、本発明方法の一実施形態は、コンピュータプログラムがコンピュータ上で作動するときに、上述した方法の１つを実行するためのプログラムコードを有するコンピュータプログラムである。
【０３６３】
従って本発明方法の他の実施形態は、上述した方法の１つを実行するために記録されたコンピュータプログラムを含む、データキャリア（又はデジタル記憶媒体、又はコンピュータ読み取り可能な媒体）である。そのデータキャリア、デジタル記憶媒体又は記録された媒体は、典型的には有形及び／又は非一時的である。
【０３６４】
従って本発明方法の他の実施形態は、上述した方法の１つを実行するためのコンピュータプログラムを表現するデータストリーム又は信号列である。データストリーム又は信号列は、例えばインターネットのようなデータ通信接続を介して伝送されるよう構成されても良い。
【０３６５】
他の実施形態は、上述した方法の１つを実行するように構成又は適応された、例えばコンピュータ又はプログラム可能な論理デバイスのような処理手段を含む。
【０３６６】
他の実施形態は、上述した方法の１つを実行するためのコンピュータプログラムがインストールされたコンピュータを含む。
【０３６７】
本発明に係るさらなる実施形態は、上述した方法の１つを実行するためのコンピュータプログラムを受信器へ（例えば電子的又は光学的に）伝送するよう構成された装置又はシステムを含む。受信器は、例えばコンピュータ、モバイル装置、メモリ装置等であってもよい。この装置又はシステムは、例えばコンピュータプログラムを受信器へと送信するためのファイルサーバを含み得る。
【０３６８】
幾つかの実施形態においては、（例えば書換え可能ゲートアレイのような）プログラム可能な論理デバイスが、上述した方法の幾つか又は全ての機能を実行するために使用されても良い。幾つかの実施形態では、書換え可能ゲートアレイは、上述した方法の１つを実行するためにマイクロプロセッサと協働しても良い。一般的に、そのような方法は、好適には任意のハードウエア装置によって実行される。
【０３６９】
本明細書に記載した装置は、ハードウエア装置、コンピュータ、又はハードウエア装置とコンピュータとの結合を使用して構成され得る。
【０３７０】
本明細書に記載した方法は、ハードウエア装置、コンピュータ、又はハードウエア装置とコンピュータとの結合を使用して実行され得る。
【０３７１】
上述した実施形態は、本発明の原理を単に例示的に示したに過ぎない。本明細書に記載した構成及び詳細について修正及び変更が可能であることは、当業者にとって明らかである。従って、本発明は、本明細書に実施形態の説明及び解説の目的で提示した具体的詳細によって限定されるものではなく、添付した特許請求の範囲によってのみ限定されるべきである。
【図１ａ】
2019500823.tif 000025
【図１ｂ】
2019500823.tif 000026
【図１ｃ】
2019500823.tif 000027
【図２】
2019500823.tif 000028
【図３】
2019500823.tif 000029
【図４】
2019500823.tif 000030
【図５】
2019500823.tif 000031
【図６】
2019500823.tif 000032
【図７】
2019500823.tif 000033
【図８】
2019500823.tif 000034
【図９】
2019500823.tif 000035
【図１０】
2019500823.tif 000036
【図１１】
2019500823.tif 000037
【図１２】
2019500823.tif 000038
【図１３】
2019500823.tif 000039
【図１４】
2019500823.tif 000040
【図１５】
2019500823.tif 000041
【図１６】
2019500823.tif 000042
【図１７】
2019500823.tif 000043
【図１８】
2019500823.tif 000044
【図１９】
2019500823.tif 000045
【図２０】
2019500823.tif 000046
【図２１】
2019500823.tif 000047
【図２２】
2019500823.tif 000048
【図２３】
2019500823.tif 000049
【図２４】
2019500823.tif 000050
【図２５】
2019500823.tif 000051
【図２６】
2019500823.tif 000052
【図２７】
2019500823.tif 000053
【図２８】
2019500823.tif 000054
【図２９】
2019500823.tif 000055
【図３０】
2019500823.tif 000056
【図３１】
2019500823.tif 000057
【図３２】
2019500823.tif 000058
【図３３】
2019500823.tif 000059
【図３４】
2019500823.tif 000060
【図３５】
2019500823.tif 000061
【図３６】
2019500823.tif 000062
【図３７】
2019500823.tif 000063
【図３８】
2019500823.tif 000064
【図３９】
2019500823.tif 000065
【図４０】
2019500823.tif 000066
【図４１】
2019500823.tif 000067
【図４２】
2019500823.tif 000068
【図４３】
2019500823.tif 000069
【図４４】
2019500823.tif 000070
【図４５】
2019500823.tif 000071
【図４６】
2019500823.tif 000072
【図４７】
2019500823.tif 000073
【図４８】
2019500823.tif 000074
【図４９】
2019500823.tif 000075
【図５０】
2019500823.tif 000076
【図５１】
2019500823.tif 000077
【図５２】
2019500823.tif 000078
【図５３】
2019500823.tif 000079
【図５４】
2019500823.tif 000080
【図５５】
2019500823.tif 000081
【手続補正書】
【提出日】平成30年6月7日(2018.6.7)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
オーディオ入力信号からフィルタリング済みオーディオ信号を生成する装置（１００）であって、前記装置（１００）は、
入力高さ情報に依存してフィルタ情報を決定するよう構成されたフィルタ情報決定部（１１０）であって、前記入力高さ情報は仮想音源（４９２）の高さに依存している、フィルタ情報決定部（１１０）と、
前記フィルタ情報に依存して前記オーディオ入力信号をフィルタリングし、前記フィルタリング済みオーディオ信号を取得するよう構成された、フィルタユニット（１２０）と、を備え、
前記フィルタ情報決定部（１１０）は、前記入力高さ情報に依存して、複数のフィルタ曲線から１つの選択フィルタ曲線を選択することを使用して、前記フィルタ情報を決定するよう構成されるか、又は
前記フィルタ情報決定部（１１０）は、前記入力高さ情報に依存して、基準フィルタ曲線を修正することにより修正フィルタ曲線を決定することを使用して、前記フィルタ情報を決定するよう構成される、
装置（１００）。
【請求項２】
前記フィルタユニット（１２０）が前記オーディオ入力信号の第１スペクトル部分を修正し、かつ前記フィルタユニット（１２０）が前記オーディオ入力信号の第２スペクトル部分を修正しないように、前記フィルタ情報決定部（１１０）は前記フィルタ情報を決定するよう構成される、請求項１に記載の装置（１００）。
【請求項３】
前記フィルタユニット（１２０）が前記オーディオ入力信号の第１スペクトル部分を第１増幅値によって増幅し、かつ前記フィルタユニット（１２０）が前記オーディオ入力信号の第２スペクトル部分を第２増幅値によって増幅するように、前記フィルタ情報決定部（１１０）は前記フィルタ情報を決定するよう構成され、前記第１増幅値は前記第２増幅値と異なる、請求項１に記載の装置（１００）。
【請求項４】
前記入力高さ情報は、座標系の１つの座標の少なくとも１つの座標値を示し、前記座標は前記仮想音源の位置を示している、請求項１〜３のいずれか１項に記載の装置（１００）。
【請求項５】
前記座標系は３次元デカルト座標系であり、前記入力高さ情報は前記３次元デカルト座標系の１つの座標、若しくは前記３次元デカルト座標系の前記座標の３つの座標値の１つの座標値であり、又は
前記座標系は極座標系であり、前記入力高さ情報は前記極座標系の１つの極座標の仰角である、
請求項４に記載の装置（１００）。
【請求項６】
前記フィルタ情報決定部（１１０）は、前記入力高さ情報に依存して、前記複数のフィルタ曲線から選択フィルタ曲線を選択することを使用して、前記フィルタ情報を決定するよう構成され、
前記入力高さ情報は、入力座標値である、前記３次元デカルト座標系の前記座標の３つの座標値の前記座標値であり、前記複数のフィルタ曲線の各フィルタ曲線は当該フィルタ曲線に割り当てられた座標値を有し、前記フィルタ情報決定部（１１０）は、前記複数のフィルタ曲線から前記選択フィルタ曲線として１つのフィルタ曲線を選択するよう構成され、そのフィルタ曲線は、全ての複数のフィルタ曲線の中で、前記入力座標値と当該フィルタ曲線に割当てられている座標値との間に最小の絶対値差を有するか、又は
前記入力高さ情報は、入力仰角である仰角であり、前記複数のフィルタ曲線の各フィルタ曲線は当該フィルタ曲線に割り当てられた仰角を有し、前記フィルタ情報決定部（１１０）は、前記複数のフィルタ曲線から前記選択フィルタ曲線として１つのフィルタ曲線を選択するよう構成され、そのフィルタ曲線は、全ての複数のフィルタ曲線の中で、前記入力仰角と前記フィルタ曲線に割当てられている仰角との間に最小の絶対値差を有する、
請求項５に記載の装置（１００）。
【請求項７】
前記フィルタ情報決定部（１１０）は、前記選択フィルタ曲線を決定された増幅値によって増幅し、処理済みフィルタ曲線を取得するよう構成され、又は前記フィルタ情報決定部（１１０）は、前記選択フィルタ曲線を決定された減衰値によって減衰させ、前記処理済みフィルタ曲線を取得するよう構成され、
前記フィルタユニット（１２０）は、前記処理済みフィルタ曲線に依存して前記オーディオ入力信号をフィルタリングし、フィルタリング済みオーディオ信号を取得するよう構成され、
前記フィルタ情報決定部（１１０）は、前記入力座標値と前記選択フィルタ曲線に割当てられている座標値との差に依存して、前記決定された増幅値又は前記決定された減衰値を決定するよう構成されるか、又は前記フィルタ情報決定部（１１０）は、前記入力仰角と前記選択フィルタ曲線に割当てられている仰角との差に依存して、前記決定された増幅値又は前記決定された減衰値を決定するよう構成される、
請求項６に記載の装置（１００）。
【請求項８】
前記フィルタ情報決定部（１１０）は、前記入力高さ情報に依存して前記基準フィルタ曲線を修正することにより前記修正フィルタ曲線を決定することで、前記フィルタ情報を決定するよう構成され、
前記フィルタ情報決定部（１１０）は、前記基準フィルタ曲線を決定された増幅値によって増幅し、処理済みフィルタ曲線を取得するよう構成されるか、又は前記フィルタ情報決定部（１１０）は、前記基準フィルタ曲線を決定された減衰値によって減衰させ、処理済みフィルタ曲線を取得するよう構成される、
請求項１〜５のいずれか１項に記載の装置（１００）。
【請求項９】
前記フィルタ情報決定部（１１０）は、前記入力高さ情報に依存して複数のフィルタ曲線から前記選択フィルタ曲線を第１の選択フィルタ曲線として選択することを使用して、前記フィルタ情報を決定するよう構成され、
前記フィルタ情報決定部（１１０）は、前記入力高さ情報に依存して複数のフィルタ曲線から第２の選択フィルタ曲線を選択することを使用して、前記フィルタ情報を決定するよう構成され、かつ
前記フィルタ情報決定部（１１０）は、前記第１の選択フィルタ曲線と前記第２の選択フィルタ曲線との間を補間することにより、補間済みフィルタ曲線を決定するよう構成される、
請求項１〜５のいずれか１項に記載の装置（１００）。
【請求項１０】
前記フィルタ情報決定部（１１０）は、前記入力高さ情報に依存して、複数のフィルタ曲線から前記選択フィルタ曲線を選択することを使用して、前記フィルタ情報を決定するよう構成され、前記複数のフィルタ曲線の各々は７００Ｈｚと２０００Ｈｚとの間に最大値又は最小値を有するか、又は
前記フィルタ情報決定部（１１０）は、前記入力高さ情報に依存して、前記基準フィルタ曲線を修正することにより修正フィルタ曲線を決定することで、前記フィルタ情報を決定するよう構成され、前記基準フィルタ曲線は７００Ｈｚと２０００Ｈｚとの間に最大値又は最小値を有する、
請求項１〜９のいずれか１項に記載の装置（１００）。
【請求項１１】
前記フィルタ情報決定部（１１０）は、前記入力高さ情報と入力方位角情報とに依存してフィルタ情報を決定するよう構成され、
前記フィルタ情報決定部（１１０）は、前記入力高さ情報と前記入力方位角情報とに依存して、複数のフィルタ曲線から前記選択フィルタ曲線を選択することを使用して、前記フィルタ情報を決定するよう構成されるか、又は
前記フィルタ情報決定部（１１０）は、前記入力高さ情報と前記方位角情報とに依存して、基準フィルタ曲線を修正することにより修正フィルタ曲線を決定することで、前記フィルタ情報を決定するよう構成される、
請求項１〜１０のいずれか１項に記載の装置（１００）。
【請求項１２】
前記フィルタユニット（１２０）は、前記フィルタ情報に依存して前記オーディオ入力信号をフィルタリングし、フィルタリング済みオーディオ信号として正に２つのオーディオチャネルを有する１つの両耳オーディオ信号を取得するよう構成され、
前記フィルタ情報決定部（１１０）は、入力頭部伝達関数に関する入力情報を受信するよう構成され、
前記フィルタ情報決定部（１１０）は、前記選択フィルタ曲線又は前記修正フィルタ曲線に依存して前記入力頭部伝達関数を修正することにより修正頭部伝達関数を決定することで、前記フィルタ情報を決定するよう構成されている、
請求項１〜１１のいずれか１項に記載の装置（１００）。
【請求項１３】
前記入力頭部伝達関数はスペクトルドメインで表現され、
前記選択フィルタ曲線はスペクトルドメインで表現されるか、又は前記修正フィルタ曲線はスペクトルドメインで表現され、
前記フィルタ情報決定部（１１０）は、前記選択フィルタ曲線もしくは前記修正フィルタ曲線のスペクトル値を前記入力頭部伝達関数のスペクトル値に加算することにより、前記修正頭部伝達関数を決定するよう構成されるか、又は
前記フィルタ情報決定部（１１０）は、前記選択フィルタ曲線若しくは前記修正フィルタ曲線のスペクトル値と前記入力頭部伝達関数のスペクトル値とを乗算することにより、前記修正頭部伝達関数を決定するよう構成されるか、又は
前記フィルタ情報決定部（１１０）は、前記入力頭部伝達関数のスペクトル値から前記選択フィルタ曲線もしくは前記修正フィルタ曲線のスペクトル値を減算するか、又は前記選択フィルタ曲線もしくは前記修正フィルタ曲線のスペクトル値から前記入力頭部伝達関数のスペクトル値を減算することにより、前記修正頭部伝達関数を決定するよう構成されるか、又は
前記フィルタ情報決定部（１１０）は、前記入力頭部伝達関数のスペクトル値を前記選択フィルタ曲線もしくは前記修正フィルタ曲線のスペクトル値で除算するか、又は前記選択フィルタ曲線もしくは前記修正フィルタ曲線のスペクトル値を前記入力頭部伝達関数のスペクトル値で除算することにより、前記修正頭部伝達関数を決定するよう構成される、
請求項１２に記載の装置（１００）。
【請求項１４】
前記入力頭部伝達関数は時間ドメインで表現され、
前記選択フィルタ曲線は時間ドメインで表現されるか、又は前記修正フィルタ曲線は時間ドメインで表現され、
前記フィルタ情報決定部（１１０）は、前記選択フィルタ曲線もしくは前記修正フィルタ曲線と前記入力頭部伝達関数とを畳み込むことにより、前記修正頭部伝達関数を決定するよう構成されるか、又は
前記フィルタ情報決定部（１１０）は、前記選択フィルタ曲線若しくは前記修正フィルタ曲線を非再帰型フィルタ構造でフィルタリングすることにより、前記修正頭部伝達関数を決定するよう構成されるか、又は
前記フィルタ情報決定部（１１０）は、前記選択フィルタ曲線若しくは前記修正フィルタ曲線を再帰型フィルタ構造でフィルタリングすることにより、前記修正頭部伝達関数を決定するよう構成される
請求項１２に記載の装置（１００）。
【請求項１５】
オーディオ入力信号からフィルタリング済みオーディオ信号を生成する請求項１２〜１４のいずれか１項に記載の装置（１００）と、
方向修正情報を提供する装置（２００）と、を備えるシステム（３００）であって、
前記方向修正情報を提供する装置（２００）は、
複数のラウドスピーカ（２１１，２１２）であって、それらの各々が再生オーディオ信号を再生するよう構成され、前記複数のラウドスピーカ（２１１，２１２）の第１スピーカが第１高さの第１位置に配置され、前記複数のラウドスピーカ（２１１，２１２）の第２スピーカが第２高さの第２位置に配置され、前記第２高さは第１高さと異なり、かつ第２位置は第１位置とは異なる、ラウドスピーカ（２１１，２１２）と、
２個のマイクロホン（２２１，２２２）であって、それらの各々が前記複数のラウドスピーカ（２１１，２１２）の各ラウドスピーカから、前記オーディオ信号を再生する時に前記ラウドスピーカによって放射された音波を受信することにより、録音オーディオ信号を録音するよう構成された、マイクロホン（２２１，２２２）と、
前記複数のラウドスピーカ（２１１，２１２）の各ラウドスピーカについて、前記ラウドスピーカによって再生される前記再生オーディオ信号に依存し、かつ前記再生オーディオ信号が前記ラウドスピーカによって再生されたとき前記２個のマイクロホン（２２１，２２２）の各々によって録音される録音オーディオ信号の各々に依存して、１つの両耳室内インパルス応答を決定することにより、複数の両耳室内インパルス応答を決定するよう構成された両耳室内インパルス応答決定部（２３０）と、
前記複数の両耳室内インパルス応答の２つに依存して、少なくとも１つのフィルタ曲線を生成するよう構成された、フィルタ曲線生成部（２４０）と、を備え、
前記方向修正情報は前記少なくとも１つのフィルタ曲線に依存しており、
請求項１２〜１４のいずれか１項に記載の装置（１００）の前記フィルタ情報決定部（１１０）は、入力高さ情報に依存して複数のフィルタ曲線から選択フィルタ曲線を選択することを使用して、フィルタ情報を決定するよう構成されるか、又は、
請求項１２〜１４のいずれか１項に記載の装置（１００）の前記フィルタ情報決定部（１１０）は、前記入力高さ情報に依存して基準フィルタ曲線を修正することにより修正フィルタ曲線を決定するよう構成され、
前記方向修正情報を提供する装置（２００）によって提供される方向修正情報は、前記複数のフィルタ曲線又は前記基準フィルタ曲線を含む、
システム（３００）。
【請求項１６】
前記方向修正情報を提供する装置（２００）のフィルタ曲線生成部（２４０）は、前記複数の両耳室内インパルス応答に依存して１つ以上の中間曲線を生成し、かつ前記１つ以上の中間曲線の各々を複数の異なる減衰値の各々によって増幅することによって、２つ以上のフィルタ曲線を取得するよう構成される、
請求項１５に記載のシステム（３００）。
【請求項１７】
前記方向修正情報を提供する装置（２００）のフィルタ曲線生成部（２４０）は、前記両耳室内インパルス応答の各々から１つの頭部伝達関数を抽出することにより、前記複数の両耳室内インパルス応答から複数の頭部伝達関数を決定するよう構成され、
前記複数の頭部伝達関数はスペクトルドメインで表現され、
前記複数の頭部伝達関数の各々に１つの高さ値が割り当てられ、
前記方向修正情報を提供する装置（２００）のフィルタ曲線生成部（２４０）は２つ以上のフィルタ曲線を生成するよう構成され、
前記方向修正情報を提供する装置（２００）のフィルタ曲線生成部（２４０）は、前記複数の頭部伝達関数の第１伝達関数のスペクトル値から前記複数の頭部伝達関数の第２伝達関数のスペクトル値を減算するか、又は前記複数の頭部伝達関数の第１伝達関数のスペクトル値を前記複数の頭部伝達関数の第２伝達関数のスペクトル値によって除算することにより、前記２つ以上のフィルタ曲線の各々を生成するよう構成され、
前記方向修正情報を提供する装置（２００）のフィルタ曲線生成部（２４０）は、前記複数の頭部伝達関数の第２伝達関数に割り当てられた高さ値から前記複数の頭部伝達関数の第１伝達関数に割り当てられた高さ値を減算することにより、前記２つ以上のフィルタ曲線の各々に１つの高さ値を割り当てるよう構成され、
前記方向修正情報は、前記２つ以上のフィルタ曲線の各々と当該フィルタ曲線に割り当てられた高さ値とを含む、
請求項１５に記載のシステム（３００）。
【請求項１８】
前記方向修正情報を提供する装置（２００）のフィルタ曲線生成部（２４０）は、前記両耳室内インパルス応答の各々から１つの頭部伝達関数を抽出することにより、前記複数の両耳室内インパルス応答から複数の頭部伝達関数を決定するよう構成され、
前記複数の頭部伝達関数はスペクトルドメインで表現され、
前記複数の頭部伝達関数の各々に１つの高さ値が割り当てられ、
前記方向修正情報を提供する装置（２００）のフィルタ曲線生成部（２４０）は唯一のフィルタ曲線を生成するよう構成され、
前記方向修正情報を提供する装置（２００）のフィルタ曲線生成部（２４０）は、前記複数の頭部伝達関数の第１伝達関数のスペクトル値から前記複数の頭部伝達関数の第２伝達関数のスペクトル値を減算するか、又は前記複数の頭部伝達関数の第１伝達関数のスペクトル値を前記複数の頭部伝達関数の第２伝達関数のスペクトル値によって除算することにより、前記唯一のフィルタ曲線を生成するよう構成され、
前記方向修正情報を提供する装置（２００）のフィルタ曲線生成部（２４０）は、前記複数の頭部伝達関数の第２伝達関数に割り当てられた高さ値から前記複数の頭部伝達関数の第１伝達関数に割り当てられた高さ値を減算することにより、前記唯一のフィルタ曲線に１つの高さ値を割り当てるよう構成され、
前記方向修正情報は、前記唯一のフィルタ曲線と前記唯一のフィルタ曲線に割り当てられた高さ値とを含む、
請求項１５に記載のシステム（３００）。
【請求項１９】
方向修正情報を提供する装置（２００）であって、前記装置（２００）は、
複数のラウドスピーカ（２１１，２１２）であって、それらの各々が再生オーディオ信号を再生するよう構成され、前記複数のラウドスピーカ（２１１，２１２）の第１スピーカが第１高さの第１位置に配置され、前記複数のラウドスピーカ（２１１，２１２）の第２スピーカが第２高さの第２位置に配置され、前記第２高さは第１高さと異なり、かつ第２位置は第１位置とは異なる、ラウドスピーカ（２１１，２１２）と、
２個のマイクロホン（２２１，２２２）であって、それらの各々が前記複数のラウドスピーカ（２１１，２１２）の各ラウドスピーカから、前記オーディオ信号を再生する時に前記ラウドスピーカによって放射された音波を受信することにより、録音オーディオ信号を録音するよう構成された、マイクロホン（２２１，２２２）と、
前記複数のラウドスピーカ（２１１，２１２）の各ラウドスピーカについて、前記ラウドスピーカによって再生される前記再生オーディオ信号に依存し、かつ前記再生オーディオ信号が前記ラウドスピーカによって再生されたとき前記２個のマイクロホン（２２１，２２２）の各々によって録音される録音オーディオ信号の各々に依存して、１つの両耳室内インパルス応答を決定することにより、複数の両耳室内インパルス応答を決定するよう構成された両耳室内インパルス応答決定部（２３０）と、
前記複数の両耳室内インパルス応答の２つに依存して、少なくとも１つのフィルタ曲線を生成するよう構成された、フィルタ曲線生成部（２４０）と、を備え、
前記方向修正情報は前記少なくとも１つのフィルタ曲線に依存している、
装置（２００）。
【請求項２０】
前記フィルタ曲線生成部（２４０）は、前記複数の両耳室内インパルス応答に依存して１つ以上の中間曲線を生成し、かつ前記１つ以上の中間曲線の各々を複数の異なる減衰値の各々によって増幅することによって、２つ以上のフィルタ曲線を取得するよう構成される、
請求項１９に記載の装置（２００）。
【請求項２１】
前記フィルタ曲線生成部（２４０）は、前記両耳室内インパルス応答の各々から１つの頭部伝達関数を抽出することにより、前記複数の両耳室内インパルス応答から複数の頭部伝達関数を決定するよう構成され、
前記複数の頭部伝達関数はスペクトルドメインで表現され、
前記複数の頭部伝達関数の各々に１つの高さ値が割り当てられ、
前記フィルタ曲線生成部（２４０）は２つ以上のフィルタ曲線を生成するよう構成され、
前記フィルタ曲線生成部（２４０）は、前記複数の頭部伝達関数の第１伝達関数のスペクトル値から前記複数の頭部伝達関数の第２伝達関数のスペクトル値を減算するか、又は前記複数の頭部伝達関数の第１伝達関数のスペクトル値を前記複数の頭部伝達関数の第２伝達関数のスペクトル値によって除算することにより、前記２つ以上のフィルタ曲線の各々を生成するよう構成され、
前記フィルタ曲線生成部（２４０）は、前記複数の頭部伝達関数の第２伝達関数に割り当てられた高さ値から前記複数の頭部伝達関数の第１伝達関数に割り当てられた高さ値を減算することにより、前記２つ以上のフィルタ曲線の各々に１つの高さ値を割り当てるよう構成され、
前記方向修正情報は、前記２つ以上のフィルタ曲線の各々と当該フィルタ曲線に割り当てられた高さ値とを含む、
請求項１９に記載の装置（２００）。
【請求項２２】
前記フィルタ曲線生成部（２４０）は、前記両耳室内インパルス応答の各々から１つの頭部伝達関数を抽出することにより、前記複数の両耳室内インパルス応答から複数の頭部伝達関数を決定するよう構成され、
前記複数の頭部伝達関数はスペクトルドメインで表現され、
前記複数の頭部伝達関数の各々に１つの高さ値が割り当てられ、
前記フィルタ曲線生成部（２４０）は唯一のフィルタ曲線を生成するよう構成され、
前記フィルタ曲線生成部（２４０）は、前記複数の頭部伝達関数の第１伝達関数のスペクトル値から前記複数の頭部伝達関数の第２伝達関数のスペクトル値を減算するか、又は前記複数の頭部伝達関数の第１伝達関数のスペクトル値を前記複数の頭部伝達関数の第２伝達関数のスペクトル値によって除算することにより、前記唯一のフィルタ曲線の各々を生成するよう構成され、
前記フィルタ曲線生成部（２４０）は、前記複数の頭部伝達関数の第２伝達関数に割り当てられた高さ値から前記複数の頭部伝達関数の第１伝達関数に割り当てられた高さ値を減算することにより、前記唯一のフィルタ曲線に１つの高さ値を割り当てるよう構成され、
前記方向修正情報は、前記唯一のフィルタ曲線と前記唯一のフィルタ曲線に割り当てられた高さ値とを含む、
請求項１９に記載の装置（２００）。
【請求項２３】
オーディオ入力信号からフィルタリング済みオーディオ信号を生成する方法であって、
入力高さ情報に依存してフィルタ情報を決定するステップであって、前記入力高さ情報は仮想音源（４９２）の高さに依存している、ステップと、
前記フィルタ情報に依存して前記オーディオ入力信号をフィルタリングし、前記フィルタリング済みオーディオ信号を取得するステップと、を備え、
前記フィルタ情報を決定するステップは、前記入力高さ情報に依存して、複数のフィルタ曲線から選択フィルタ曲線を選択することを含むか、又は
前記フィルタ情報を決定するステップは、前記入力高さ情報に依存して、基準フィルタ曲線を修正することにより修正フィルタ曲線を決定することを含む、
方法。
【請求項２４】
方向修正情報を提供する方法であって、
複数のラウドスピーカの各々について、当該ラウドスピーカによって再生オーディオ信号を再生し、前記再生オーディオ信号を再生する時に前記ラウドスピーカから放射された音波を２つのマイクロホンにより録音して、前記２つのマイクロホンの各々について録音オーディオ信号を取得するステップであって、前記複数のラウドスピーカの第１スピーカが第１高さの第１位置に配置され、前記複数のラウドスピーカの第２スピーカが第２高さの第２位置に配置され、前記第２高さは第１高さと異なり、かつ第２位置は第１位置とは異なる、ステップと、
前記複数のラウドスピーカの各ラウドスピーカについて、前記ラウドスピーカによって再生される前記再生オーディオ信号に依存し、かつ前記再生オーディオ信号が前記ラウドスピーカによって再生されたとき前記２個のマイクロホンの各々によって録音される録音オーディオ信号の各々に依存して、１つの両耳室内インパルス応答を決定することにより、複数の両耳室内インパルス応答を決定するステップと、
前記複数の両耳室内インパルス応答の２つに依存して、少なくとも１つのフィルタ曲線を生成するステップと、を備え、
前記方向修正情報は前記少なくとも１つのフィルタ曲線に依存している、
方法。
【請求項２５】
コンピュータ又は信号プロセッサ上で実行されるとき、請求項２３又は２４に記載の方法を実行するためのコンピュータプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０１９０
【補正方法】変更
【補正の内容】
【０１９０】
図３４はエレベーションなしの初期反射３４２１，３４２２とエレベーションありの初期反射３４１１，３４１２と修正済み（点線）の初期反射３４０１，３４０２との各スペクトル包絡（第１横列）を示す。対応する補正曲線は第２横列に示される。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０２０４
【補正方法】変更
【補正の内容】
【０２０４】
以前のテストでは、低い仰角から来る反射からのエネルギーを高い仰角から来る反射へとシフトすることが試みられた。残念ながら、非可聴範囲内にはない低い仰角からの反射は２つだけである。この状況は、「モーツァルト」内での測定用ラウドスピーカの幾何学的特性がほぼ同一であるため、全ての方向において観察された。これと比較して、高い仰角から来る反射が非可聴セクション内にある場合は、致命的ではない。これらの反射を増幅させることにより、それらは抑制効果を超越して知覚可能になるであろう。しかしこの場合、隣接する反射に対する強いオーバーラップ領域を持たない、４つの反射がインパルス応答から分離され得る。この実験で使用される少量の反射に起因して、第１チャネルについては１．１４だけ及び第２チャネルについては１．３３のゲイン値が得られる。それらは高さ知覚における強化を誘起するには十分ではない。他の部分から高い仰角を有する４つの反射へと体系的にエネルギーをシフトする幾つかの他の手法も、同様な結果となった。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０３０１
【補正方法】変更
【補正の内容】
【０３０１】
０°の第１角度は、第１ラウドスピーカが第１高さに配置されていることを特定する。−１５°の第２角度は、第２ラウドスピーカが第１高さよりも低い第２高さに配置されていることを特定する。これは図４９に示される。図４９において、第１ラウドスピーカ２１１は、第２ラウドスピーカ２１２が配置されている第２高さよりも高い第１高さに配置されている。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】０３１５
【補正方法】変更
【補正の内容】
【０３１５】
図４５は特殊な実施形態にかかるシステムを示し、図４５のシステムは一実施形態に従ってオーディオ入力信号からフィルタリング済みオーディオ信号を生成する装置１００と、一実施形態に従って方向修正情報を提供する装置２００とを含む。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】０３１７
【補正方法】変更
【補正の内容】
【０３１７】
図４５〜図４８のそれぞれには、個々の実施形態に従ってオーディオ入力信号からフィルタリング済みオーディオ信号を生成する装置１００が、各図の方向修正情報を提供する装置２００を具備せずに実現され得る、実施例が示されている。同様に、図４５〜図４８のそれぞれには、各図の実施形態に従って方向修正情報を提供する装置２００が、各図のオーディオ入力信号からフィルタリング済みオーディオ信号を生成する装置１００を具備せずに実現され得る、実施例が示されている。よって、図４５〜図４８について提示された説明は、個々のシステムに関する説明だけでなく、方向修正情報を提供する装置２００を用いずに実現される実施例にかかる、オーディオ入力信号からフィルタリング済みオーディオ信号を生成する装置１００の説明でもあり、またフィルタリング済みオーディオ信号を生成する装置を用いずに実現される実施例にかかる、方向修正情報を提供する装置２００の説明でもある。
【国際調査報告】
2019500823.tif 000082
2019500823.tif 000083
2019500823.tif 000084
2019500823.tif 000085
2019500823.tif 000086