(57)【要約】【課題】三次元オーディオデータ及び関連データを記録するシステム、方法、及び装置を提供する。【解決手段】一実施形態では、装置は、ベースと、ベースに対してＸ軸方向又はＹ軸方向のいずれかで移動するように動作可能なスティックと、スティックの部分に取り付けられ、Ｘ軸方向又はＹ軸方向のいずれかでのユーザ入力を受け取るように動作可能なペダルと、ベースに対するペダルのスライドを促進するように動作可能なスライド機構とを含むことができ、ペダルは、Ｚ軸方向に対応する別のユーザ入力を受け取るように更に動作可能である。特定の実施形態では、装置は、ベースに対するペダルのスライドを制限するユーザ入力を受信するように動作可能なロック機構を含むこともできる。【選択図】図１
2019097204.tif 000002
【特許請求の範囲】
【請求項１】
少なくとも１つのメモリと通信する少なくとも１つのプロセッサであって、コンピュータ実行可能命令を実行するように動作可能な、少なくとも１つのプロセッサと、
入力装置であって、
予め定義されるリスニング環境でのソニック空間データに対応するユーザ入力を受け取り、
前記ユーザ入力を少なくとも１つのプロセッサに送信する
ように動作可能な、入力装置と、
を含み、
前記コンピュータ実行可能命令は、
前記ユーザ入力を受信し、
前記ユーザ入力をソニック空間データに変換し、
前記ソニック空間データに時間コードを関連付け、
前記ソニック空間データ、オーディオ信号、及び時間コードを記憶する
ように使用可能である、システム。
【請求項２】
前記コンピュータ実行可能命令は、
前記ソニック空間データ、前記オーディオ信号、及び前記時間コードを、記憶のために、３Ｄ−ＥＡオーディオ出力ファイルにフォーマットするように更に使用可能である、請求項１に記載のシステム。
【請求項３】
前記入力装置は、以下：フットペダル、ジョイスティック装置、手制御装置、光センサ、ジェスチャ制御装置、又は音声入力装置のうちの少なくとも１つを含む、請求項１に記載のシステム。
【請求項４】
前記ユーザ入力は、Ｘ軸座標データ、Ｙ軸座標データ、及びＺ軸座標データを含む、請求項１に記載のシステム。
【請求項５】
前記ユーザ入力をソニック空間データに変換するように動作可能な前記コンピュータ実行可能命令は、
前記オーディオ信号の音量又は遅延に対する少なくとも１つの調整を決定するように使用可能なコンピュータ実行可能命令を含む、請求項１に記載のシステム。
【請求項６】
ベースと、
前記ベースに対してＸ軸方向又はＹ軸方向のいずれかで移動するように動作可能なスティックと、
ペダルであって、
前記スティックの部分に取り付けられ、
前記Ｘ軸方向又は前記Ｙ軸方向のいずれかでのユーザ入力を受け取る
ように動作可能なペダルと、
スライド機構であって、
前記ベースに対する前記ペダルのスライドを促進するように動作可能である、スライド機構と、
を含み、
前記ペダルは、Ｚ軸方向に対応する別のユーザ入力を受け取るように更に動作可能である、装置。
【請求項７】
前記ベースに対する前記ペダルのスライドを制限するユーザ入力を受け取るように動作可能なロック機構を更に含む、請求項６に記載の装置。
【請求項８】
前記ロック機構は、押下されて、前記ベースに対する前記ペダルのスライドを制限するように更に動作可能であるとともに、再び押下されて、前記ベースに対する前記ペダルのスライドを許可するように更に動作可能である、請求項７に記載の装置。
【請求項９】
無線通信インタフェースと、
表示装置と、
開始／停止スイッチと、
ミリ秒遅延要素と、
デシベル単位カウンタ又はセレクタと、
を更に含む、請求項６に記載の装置。
【請求項１０】
入力装置を介してユーザ入力を受け取ることであって、前記ユーザ入力は、オーディオ信号に関連付けられたソニック空間データに対応するＸ軸方向又はＹ軸方向を示す、ユーザ入力を受け取ることと、
前記入力装置を介して追加のユーザ入力を受け取ることであって、前記追加のユーザ入力は、オーディオ信号に関連付けられたソニック空間データに対応するＺ軸方向を示す、追加のユーザ入力を受け取ることと、
を含む、方法。
【請求項１１】
前記受け取ったユーザ入力をソニック空間データに変換することと、
前記ソニック空間データをオーディオ信号及び時間コードと共に３Ｄ−ＥＡオーディオ出力ファイルに記憶することと、
を更に含む、請求項１０に記載の方法。
【請求項１２】
前記受け取ったユーザ入力をソニック空間データに変換することと、
前記ソニック空間データをオーディオ信号及び時間コードと共に、３Ｄ−ＥＡオーディオ出力ファイルに記録するために、フォーマットすることと、
を更に含む、請求項１０に記載の方法。
【請求項１３】
前記入力装置は、支持ベースによって支持されるスティックに取り付けられるペダルを含み、更に、前記入力装置は、前記支持ベースに対して前記ペダルをスライドさせるように動作可能なスライド機構を含む、請求項１０に記載の方法。
【請求項１４】
前記入力装置は、前記支持ベースに対する前記ペダルのスライドを制限するように動作可能なロック機構を含む、請求項１０に記載の方法。
【請求項１５】
前記入力装置は、以下：フットペダル、ジョイスティック装置、光センサ、手制御装置、ジェスチャ制御装置、又は音声入力装置のうちの少なくとも１つを含む、請求項１０に記載の方法。
【発明の詳細な説明】
【技術分野】
【０００１】
関連出願の相互参照
本願は、２０１２年１２月２０日に出願された「Systems, Methods, and Apparatus for Assigning Three-Dimensional Spatial Data to Sounds and Audio Files」という名称の米国特許出願第６１／７４０，０３５号の利益を主張するとともに、２０１３年３月１５日に出願された「Systems and Methods for Providing Three Dimensional Enhanced Audio」という名称の米国特許出願第６１／８０１，２７８号の利益を更に主張するものであり、これら両方の内容を参照により本明細書に援用する。
【０００２】
開示の分野
本開示は、一般的には音響オーディオ処理に関し、より詳細には、三次元オーディオデータ及び関連データを記録するシステム、方法、及び装置に関する。
【背景技術】
【０００３】
背景
「マルチチャネルオーディオ」又は「サラウンド音響」という用語は一般に、聴き手の周囲の複数の方向から発せられるように聞こえる音響を生成することができるシステムを指す。Microsoft（登録商標）X-Box（登録商標）、PlayStation（登録商標）3、及び様々なNintendo（登録商標）型システム等のコンピュータゲーム及びゲームコンソールの近年の普及に伴い、ゲーム設計者によっては、ゲーム内のプレーヤの「完全な没入感」を達成したいことがある。Dolby（登録商標）Digital、ＤＴＳ（登録商標）、及びSony（登録商標）Dynamic Digital Sound（ＳＤＤＳ）を含む従来の市販されているシステム及び技法を使用して、水平面（方位角）において音響を再現することができるが、そのような従来のシステムは、頭上又は足元から来る音響経験を再生成するために、仰角での音響効果を適宜再現することができないことがある。
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特定の従来のサラウンド音響システムは、「フラフープ」手法を利用して、音響効果を提供する。しかし、この従来の手法では、人間の真の音響知覚を反映することができず、また、正確な頭上音響配置も可能ではない。別の従来のサラウンド音響システムは、シアターリスニング環境で最高で６４個のスピーカを利用する。しかし、この従来のシステムは、ホームシアターリスニング環境等の特定のユーザ又は聴き手にとっては費用効率的ではないことがある。
【課題を解決するための手段】
【０００５】
開示の概要
本開示の実施形態は、上述したニーズの幾つか又は全てに対処することができる。本開示の実施形態によれば、三次元オーディオデータ及び関連データを記録するシステム、方法、及び装置が開示される。
【０００６】
一実施形態では、システムを提供することができる。本システムは、少なくとも１つのメモリと通信する少なくとも１つのプロセッサを含むことができ、少なくとも１つのプロセッサは、コンピュータ実行可能命令を実行するように動作可能である。本システムは、予め定義されるリスニング環境での音響空間データに対応するユーザ入力を受け取り、ユーザ入力を少なくとも１つのプロセッサに送信するように動作可能な入力装置を含むこともできる。コンピュータ実行可能命令は、ユーザ入力を受け取り、ユーザ入力を音響空間データに変換し、音響空間データに時間コードを関連付け、音響空間データ、オーディオ信号、及び時間コードを記憶するように使用可能であることができる。
【０００７】
本実施形態の少なくとも１つの態様では、コンピュータ実行可能命令は、音響空間データ、オーディオ信号、及び時間コードを、記憶のために、３Ｄ−ＥＡオーディオ出力ファイルにフォーマットするように更に使用可能であることができる。
【０００８】
本実施形態の少なくとも１つの態様では、入力装置は、以下：フットペダル、ジョイスティック装置、手制御装置、光センサ、ジェスチャ制御装置、又は音声入力装置のうちの少なくとも１つを含むことができる。
【０００９】
本実施形態の少なくとも１つの態様では、ユーザ入力は、Ｘ軸座標データ、Ｙ軸座標データ、及びＺ軸座標データを含むことができる。
【００１０】
本実施形態の少なくとも１つの態様では、コンピュータ実行可能命令は、ユーザ入力を音響空間データに変換するように使用可能であることができ、オーディオ信号の音量又は遅延に対する少なくとも１つの調整を決定するように使用可能なコンピュータ実行可能命令を含む。
【００１１】
別の実施形態では、装置を提供することができる。本装置は、ベースと、ベースに対してＸ軸方向又はＹ軸方向のいずれかで移動するように動作可能なスティックと、スティックの部分に取り付けられ、Ｘ軸方向又はＹ軸方向のいずれかでのユーザ入力を受け取るように動作可能なペダルと、ベースに対するペダルのスライドを促進するように動作可能なスライド機構とを含むことができ、ペダルは、Ｚ軸方向に対応する別のユーザ入力を受け取るように更に動作可能である。
【００１２】
本実施形態の少なくとも１つの態様では、本装置は、ベースに対するペダルのスライドを制限するユーザ入力を受け取るように動作可能なロック機構を含むことができる。
【００１３】
本実施形態の少なくとも１つの態様では、ロック機構は、押下されて、ベースに対するペダルのスライドを制限するように更に動作可能であるとともに、再び押下されて、ベースに対するペダルのスライドを許可するように更に動作可能であることができる。
【００１４】
本実施形態の少なくとも１つの態様では、本装置は、無線通信インタフェースと、表示装置と、開始／停止スイッチと、ミリ秒遅延要素と、デシベル単位カウンタ又はセレクタとを更に含むことができる。
【００１５】
更に別の実施形態では、方法を提供することができる。本方法は、入力装置を介してユーザ入力を受け取ることであって、ユーザ入力は、オーディオ信号に関連付けられた音響空間データに対応するＸ軸方向又はＹ軸方向を示す、ユーザ入力を受け取ることと、入力装置を介して追加のユーザ入力を受け取ることであって、追加のユーザ入力は、オーディオ信号に関連付けられた音響空間データに対応するＺ軸方向を示す、追加のユーザデータを受け取ることとを含むことができる。
【００１６】
本実施形態の少なくとも１つの態様では、本方法は、受け取ったユーザ入力を音響空間データに変換することと、音響空間データをオーディオ信号及び時間コードと共に３Ｄ−ＥＡオーディオ出力ファイルに記憶することとを含むことができる。
【００１７】
本実施形態の少なくとも１つの態様では、本方法は、受け取ったユーザ入力を音響空間データに変換することと、音響空間データをオーディオ信号及び時間コードと共に、記憶のために、３Ｄ−ＥＡオーディオ出力ファイルにフォーマットすることとを含むことができる。
【００１８】
本実施形態の少なくとも１つの態様では、入力装置は、支持ベースによって支持されるスティックに取り付けられるペダルを含むことができ、更に、入力装置は、支持ベースに対してペダルをスライドさせるように動作可能なスライド機構を含む。
【００１９】
本実施形態の少なくとも１つの態様では、入力装置は、支持ベースに対するペダルのスライドを制限するように動作可能なロック機構を含むことができる。
【００２０】
本実施形態の少なくとも１つの態様では、入力装置は、以下：フットペダル、ジョイスティック装置、手制御装置、光センサ、ジェスチャ制御装置、又は音声入力装置のうちの少なくとも１つを含むことができる。
【００２１】
本開示の他の実施形態、特徴、及び態様が、本明細書において詳細に説明され、特許請求される開示の一部であるとみなされる。他の実施形態及び態様は、以下の詳細な説明、添付図面、及び提案される特許請求の範囲を参照して理解することができる。
【００２２】
これより、必ずしも一定の縮尺で描かれているわけではない添付の表及び図面を参照する。
【図面の簡単な説明】
【００２３】
【図１】開示の一実施形態による、３Ｄオーディオを再生する３Ｄ−ＥＡシステム例のブロック図を示す。
【図２】本開示の一実施形態例による、３Ｄ−ＥＡシステムの再生構成要素装置例のハードウェア概略を示す。
【図３】本開示の一実施形態例による、３Ｄ−ＥＡシステムの再生構成要素装置例のハードウェア及びユーザインタフェース概略を示す。
【図４】本開示の一実施形態による３Ｄ−ＥＡシステムのスピーカ視点配置例を示す。
【図５】本開示の一実施形態による３Ｄ−ＥＡシステムの上から下を見たスピーカ配置図例を示す。
【図６】本開示の一実施形態例による３Ｄオーディオを記録する３Ｄ−ＥＡシステム例のブロック図を示す。
【図７】本開示の一実施形態による３Ｄ−ＥＡシステムのコントローラインタフェース構成要素装置例を示す。
【図８】本開示の一実施形態による入力制御装置例を示す。
【図９】本開示の一実施形態による入力制御装置例を示す。
【図１０】本開示の一実施形態による入力制御装置例を示す。
【図１１】本開示の一実施形態による入力制御装置例を示す。
【図１２】本開示の一実施形態による入力制御装置例を示す。
【図１３】本開示の一実施形態による入力制御装置例を示す。
【図１４】本開示の一実施形態による入力制御装置例を示す。
【図１５】本開示の一実施形態例による３Ｄ−ＥＡ音響ローカリゼーションマップを示す。
【図１６】本開示の一実施形態例による図６の３Ｄ−ＥＡローカリゼーション領域に音響を配置する相対スピーカ音量レベルのルックアップテーブル例を示す。
【図１７】本開示の実施形態による３Ｄ−ＥＡシステム例に関連付けられた方法例を示す。
【図１８】本開示の実施形態による３Ｄ−ＥＡシステム例に関連付けられた方法例を示す。
【図１９】本開示の実施形態による３Ｄ−ＥＡシステム例に関連付けられた方法例を示す。
【図２０】本開示の実施形態による３Ｄ−ＥＡシステム例に関連付けられた方法例を示す。
【図２１】本開示の実施形態による３Ｄ−ＥＡシステム例に関連付けられた方法例を示す。
【図２２】本開示の実施形態による３Ｄ−ＥＡシステム例に関連付けられた方法例を示す。
【図２３】本開示の実施形態による３Ｄ−ＥＡシステム例に関連付けられた方法例を示す。
【図２４】本開示の実施形態による３Ｄ−ＥＡシステム例に関連付けられた方法例を示す。
【図２５】本開示の実施形態による３Ｄ−ＥＡシステム例に関連付けられた方法例を示す。
【図２６】本開示の実施形態による３Ｄ−ＥＡシステム例に関連付けられた方法例を示す。
【発明を実施するための形態】
【００２４】
詳細な説明
これより、本開示の実施形態について、添付図面を参照してより十分に以下に説明する。しかし、本開示は多くの異なる形態で実施することができ、本明細書に記載される実施形態に限定されるものとして解釈されるべきではなく、むしろ、実施形態は、本開示が完全で完成されたものとなり、本開示の範囲を伝えることになるように提供されている。
【００２５】
本開示の一実施形態では、３Ｄ又は仮想リスニング環境をシミュレート又は生成するシステム、方法、及び装置が提供される。本開示の別の実施形態例によれば、３Ｄオーディオ再生及びコンテンツ作成のシステム、方法、及び装置が提供される。少なくとも1つの実施形態では、３Ｄ拡張オーディオ（３Ｄ−ＥＡ）システムを提供することができる。
３Ｄ−ＥＡシステムは、少なくとも１つの実施形態では、３Ｄ−ＥＡ再生構成要素装置を含むことができ、この装置は、２Ｄ（ステレオ）出力から３Ｄリスニング環境をシミュレートするか、又は他の様式でマルチチャネル３Ｄオーディオコンテンツを受け入れることができる。別の実施形態では、３Ｄ−ＥＡシステムは、フットペダルコントローラ装置と、関連付けられたコントローラインタフェース構成要素装置とを含むことができ、これらは両方とも、３Ｄ−ＥＡコンテンツ作成に役立つことができる。更に別の実施形態では、３Ｄ−ＥＡシステムは、独自の構成に特に位置決めされるか、又は他の様式で配置される少なくとも６個の出力スピーカを含むことができ、リアルなドーム形３Ｄリスニング環境又はユーザ若しくは聴き手を囲む音響場を生成する。
【００２６】
特定の実施形態では、３Ｄ−ＥＡシステムは、音響空間マップ（ＳＳＭ）アルゴリズムに従って音響圧レベル（音量）及び遅延を調整することにより、少なくとも６個のスピーカによって生成されるドーム形音響場内の様々な音響要素を操作することができる。従来の音響システムは、左又は右から発せられるように聞こえ得るか、又は場合によっては後方から制限されて発せられるように聞こえ得る音響を生成し出力することができる。３Ｄ−ＥＡシステムを使用して、ユーザ又は聴き手の左、右、前、後ろ、上、及び下から聞こえるような音響を生成し出力することができる。３Ｄ−ＥＡシステムによって生成される音響が、例えば、ビデオソースからのビデオ要素と対になると、生成される音響は、ビデオ要素又は表示画面で起こっているものをより正確にトラックすることができる。
【００２７】
特定の実施形態では、３Ｄ−ＥＡシステムは、フットペダルコントローラ装置及び関連付けられたコントローラインタフェース構成要素装置等のユーザフレンドリなインタフェースを３Ｄ−ＥＡコンテンツ作成に提供することができる。例えば、ライブパフォーマンス及び／又はサウンドトラックの設計中、ユーザは、３Ｄ−ＥＡシステムのフットペダルコントローラ装置を利用して、ソニック空間データ（ＳＳＤ）を生成することができる。ＳＳＤは、関連付けられたコントローラインタフェース構成要素装置に送信することができ、これは、ＳＳＤを処理し、ソニックデータファイル（ＳＤＦ）又はソニックデータフォーマット等の３Ｄ−ＥＡファイル、３Ｄ−ＥＡオーディオ出力ファイル、符号化オーディオファイル、及び／又は３Ｄ−ＥＡフォーマットで記憶することができる。
【００２８】
したがって、本開示の特定の実施形態により、ホームシアターユーザ、ビデオゲームプレーヤ、ミュージシャン、又はＤＪ等のユーザ又は聴き手へのより没入感が強いリスニング経験の提供を含むが、これに限定されない１つ又は複数の技術的解決策を達成することができる。
【００２９】
３Ｄ−ＥＡ再生構成要素装置例
図１は、開示の一実施形態による一例としてのシステム１００を示す。３Ｄオーディオコンバータ／アンプ１０２は、３Ｄ−ＥＡ再生構成要素装置としても知られ、外部オーディオソース１０６からオーディオを受け入れ、処理することができ、外部オーディオソース１０６は、例えば、ゲームコンソールからのステレオオーディオ出力、標準ＣＤプレーヤからのステレオオーディオ、テープデック、又はＤＶＤプレーヤからの他のハイファイステレオソース等を含み得る。オーディオソース１０６及びビデオソース１０４は、３Ｄオーディオコンバータ／アンプの別個の入力ポートに接続してもよく、又はオーディオソース１０６及びビデオソース１０４は、ＨＤＭＩ（登録商標）等の１本のケーブルを通して結合し、オーディオ及びビデオを３Ｄオーディオコンバータ／アンプ１０２内で分離して、更に処理してもよい。
【００３０】
本開示の一実施形態例によれば、３Ｄコンバータ／アンプ１０２は、入力ジャック及び出力ジャックの両方を提供して、例えば、表示画面に都合良く中継するようにビデオを通せるようにし得る。３Ｄオーディオコンバータ／アンプ１０２の詳細な実施形態については、図２を参照して以下に説明するが、一般に、３Ｄオーディオコンバータ／アンプ１０２は、処理、ルーティング、スプリット、フィルタリング、変換、圧縮、リミット、増幅、減衰、遅延、パン、フェージング、ミキシング、送信、バイパス等を提供して、ユーザ又は聴き手の周囲の水平面（方位角）及び垂直面（高さ）の両方で、リスニング環境内で３Ｄ−ＥＡ音響を生成又は再現し得る。
【００３１】
一実施形態例によれば、３Ｄオーディオコンバータ／アンプ１０２は、ビデオソース１０４の入力を含み得る。本開示の一実施形態例では、３Ｄ−ＥＡ音響ローカリゼーション又はソニック情報の装置方向性は、ビデオ画像の二次元平面内の物体の位置に関連して符号化し、且つ／又は生成し得る。本開示の他の実施形態によれば、オーディオに符号化される物体位置状態は、３Ｄオーディオコンバータ／アンプ１０２によって処理して、リスニング環境１２２内に複数の３Ｄ−ＥＡ音響を動的に位置決めし、且つ／又は配置し、任意選択的に、関連付けられたビデオ内の複数の物体の位置決め及び／又は配置に相関付け得る。
【００３２】
本開示の一実施形態例によれば、例えば、スピーカ１１０〜１２０を含むスピーカアレイは、３Ｄオーディオコンバータ／アンプ１０２と通信し得、３Ｄオーディオコンバータ／アンプ１０２によって生成される信号に応答し得る。図１の実施形態では、６個のスピーカ１１０〜１２０が含まれるが、７個以上のスピーカを他の実施形態と併用し得る。一実施形態では、システム１００は、図１に示されるように、部屋較正マイクロホン１０８を含むこともできる。一実施形態例によれば、部屋較正マイクロホン１０８は、１つ又は複数のダイアフラムを含んでもよく、又は全方向性であり、１つ若しくは複数の方向から同時に音響を検出してもよい。部屋較正マイクロホン１０８は、スピーカ１１０〜１２０によって生成される時変音響圧レベル信号に応答し得、較正入力を３Ｄオーディオコンバータ／アンプ１０２に提供して、３Ｄオーディオコンバータ／アンプ１０２内の様々なパラメータ（例えば、処理、ルーティング、スプリット、イコライズ、フィルタリング、変換、圧縮、リミット、増幅、減衰、遅延、パン、ミキシング、送信、バイパス）を適宜セットアップして、特定の部屋に向けてシステム１００を較正し得る。部屋較正マイクロホン１０８は、３Ｄオーディオコンバータ／アンプ１０２内の較正トーン生成器及びリスニング環境内に適宜配置されたスピーカ１１０〜１２０と組み合わせて利用して、システム１００を自動的に較正することもできる。本開示の実施形態例によるこの較正手順の詳細について、特定の図に関連して以下に考察する。
【００３３】
図２は、本開示の一実施形態例による、図１の１０２と同様の、一例としての３Ｄオーディオコンバータ／アンプ２００のブロック図表現を示す。入力端子２０４〜２１０は、事前処理された３Ｄ−ＥＡを含む１つ又は複数の入力オーディオ及び／又はビデオ信号ソースの受信に利用することができる。入力端子２０４〜２１０は、ＲＣＡ、ＸＬＲ、Ｓ／ＰＤＩＦ、デジタルオーディオ、同軸、光学、１／４インチステレオ又はモノ、１／８インチミニステレオ又はモノ、ＤＩＮ、ＨＤＭＩ、及び他のタイプの標準接続を含むが、これらに限定されない様々なソース接続に役立つ複数の入力端子を含み得る。一実施形態例によれば、オーディオ入力端子２０４、２０６、２０８は、２１２等の少なくとも１つのオーディオマイクロプロセッサと通信し得る。２１２等のマイクロプロセッサのうちの少なくとも１つは、メモリ装置２５０と通信し得、同じ又は異なる集積回路に存在し得る。
【００３４】
本開示の一実施形態例によれば、２１２等のオーディオマイクロプロセッサの少なくとも１つは、端子選択デコーダＡ／Ｄモジュール２１４を含み得、これは、入力端子２０４〜２０８から信号を受信し得る。デコーダ２１４は入力スプリッタ／ルータ２１６と通信し得、入力スプリッタ／ルータ２１６はマルチチャネルレベリングアンプ２１８と通信し得る。マルチチャネルレベリングアンプ２１８はマルチチャネルフィルタ／クロスオーバ２２０と通信し得、これはマルチチャネル遅延モジュール２２２と通信し得る。マルチチャネル遅延モジュール２２２はマルチチャネルプリアンプ２２４と通信し得、このプリアンプはマルチチャネルミキサ２２４と通信し得、このミキサは出力Ｄ／Ａコンバータ２２８と通信し得る。オーディオマイクロプロセッサ２１２の出力は、複数の選択可能なプリアンプ２４６と通信し得る。Ｄ／Ａコンバータ２２８、プリアンプ２４６、又はこれら両方からの出力は、マルチチャネル出力アンプ２３０及び無線スピーカへの送信器２５０と通信し得る。出力段２４８及び／又はマルチチャネル出力アンプ２３０、又はそれら両方の出力は、出力端子２２２と通信し得、この端子２２２は更にスピーカと通信する。一実施形態例によれば、無線スピーカへの送信器２５０は、無線スピーカ（図示せず）に関連付けられた受信器と通信し得る。一実施形態例によれば、ルーティングバス２４２及びサミング／ミキシング／ルーティングノード２４４を利用して、オーディオマイクロプロセッサ２１２内の上述した任意のモジュールに、且つそれらの任意のモジュールから全てのデジタル信号をルーティングし接続し得る。
【００３５】
３Ｄオーディオコンバータ／アンプ２００は、様々なシステム設定を制御し表示する、少なくとも１つのオーディオマイクロプロセッサ２１２と通信するタッチスクリーンディスプレイ及びコントローラ２３４を含むこともできる。一実施形態例によれば、３Ｄオーディオコンバータ／アンプ２００は、図１に示される部屋較正マイクロホン１０８と通信する無線システムと、無線リモート制御装置とを含み得る。電源２０２は、３Ｄオーディオコンバータ／アンプ２００の全ての回路に電力を提供し得る。
【００３６】
一実施形態例によれば、３Ｄオーディオコンバータ／アンプ２００は、ビデオ情報の１つ又は複数の入力端子２１０を含み得る。例えば、１つの端子はビデオ情報専用であり得、一方、別の端子はビデオ時間コード専用である。任意選択的に、ビデオ入力端子２１０はビデオマイクロプロセッサ（図示せず）と通信し得る。任意選択的なビデオマイクロプロセッサ２３８は更に、少なくとも１つのオーディオマイクロプロセッサ２１２と通信し得る。
【００３７】
ここでも図２を参照すると、３Ｄオーディオコンバータ／アンプ２００内の少なくとも１つのオーディオマイクロプロセッサ２１２のブロックについて、本開示の実施形態例に従ってこれより説明する。入力端子選択デコーダ及びＡ／Ｄモジュール２１４は、必要に応じて、１つ又は複数の入力オーディオ信号を入力端子２０４〜２０８から（又は他の入力端子から）選択的に受信し変換し得る。一実施形態例によれば、情報が、デジタル光学信号の形態で光学／ＳＰＤＩＦ端子２０４に存在する場合、デコーダ２１４は、光学信号の存在を検出し得、適切な切り換え及び光学／電気変換を実行し得る。本開示の実施形態例によれば、デコーダ２１４は、信号検出プロセスを介して入力端子を自動的に選択し得るか、又は特に複数の入力信号が存在し得、１つの特定の入力が望ましい場合、ユーザによる手動入力を必要とし得る。本開示の実施形態例によれば、端子選択デコーダ及びＡ／Ｄモジュール２１４は、端子検知、端子切り換え、光学信号−電気信号変換を実行し、デジタル信号又はアナログ信号のフォーマットを検知し、アナログ信号からデジタル信号への変換を実行する追加のサブモジュールを含み得る。一実施形態例によれば、アナログオーディオ信号は、端子選択デコーダＡ／Ｄモジュール２１４内のＡ／Ｄコンバータを介してデジタル信号に変換し得、したがって、増幅されスピーカに送信される前に、Ｄ／Ａモジュール２２８において元のアナログに変換されるまでデジタルフォーマットのままであり得る。逆に、入力端子に存在するデジタル信号は、既にデジタルフォーマットであるため、Ａ／Ｄサブモジュール処理をバイパスし得る。図２での信号フローは、本開示の一実施形態例により、デジタル信号を破線として示すが、本開示の他の実施形態例によれば、入力信号（アナログ又はデジタル）を、モジュール２１６〜２２８のうちの１つ又は複数をバイパスするようにルーティングし得、更に本開示の他の実施形態では、モジュール２１４〜２２８のうちの１つ又は複数は、デジタル情報又はアナログ情報のいずれかを処理する能力を含み得る。
【００３８】
図２を引き続き参照すると、本開示の一実施形態例によれば、複数のサミング／ミキシング／ルーティングノード２４４を有するマルチ信号バス２４２を、任意のモジュール２１４〜２２８及び／又は較正トーン生成器２４０への、及びそれ（ら）からの信号のルーティング、ダイレクティング、サミング、ミキシングに利用し得る。一実施形態例によれば、入力スプリッタ／ルータモジュール２１６は、デジタル信号をデコーダ２１４から受信し得、単独で、又はバス２４２及びサミング／ミキシング／ルーティングノード２４４と組み合わせて、オーディオ信号の入力ミキサ／ルータとして機能し得る。入力スプリッタ／ルータモジュール２１６はまた、システムの残りの部分を通して適宜ルーティングするために、較正トーン生成器２４０から信号を受信することもできる。本開示の一実施形態例によれば、入力スプリッタ／ルータモジュール２１６は、オーディオマイクロプロセッサ２１２に対して初期オーディオバス２４２入力ルーティングを実行し得、したがって、次に概説するように、下流モジュールと並列通信し得る。
【００３９】
本開示の一実施形態例によれば、少なくとも１つのオーディオマイクロプロセッサ２１２はマルチチャネルレベリングアンプ２１８を含み得、このアンプを利用して、入力オーディオチャネルを正規化するか、又は特定のバス２４２信号を他の様式で選択的にブースト若しくは減衰させ得る。一実施形態例によれば、レベリングアンプ２１８は、入力スプリッタ／ルータ２１６に先行し得る。一実施形態例によれば、レベリングアンプ２１８は、並列オーディオバス２４２及びサミング／ミキシング／ルーティングノード２４４を介して任意のモジュール２２０〜２２８及び２４０と並列通信し得る。一実施形態例によれば、少なくとも１つのオーディオマイクロプロセッサ２１２はマルチチャネルフィルタ／クロスオーバモジュール２２０を含むこともでき、このモジュールは、オーディオ信号の選択的イコライズに利用し得る。一実施形態例によれば、マルチチャネルフィルタ／クロスオーバモジュール２２０の一機能は、例えば、比較的中間及び高い周波情報のみが、例えば、図１に示される上中心前方スピーカ１１８及び上中心後方スピーカ１２０に向けられるか、又は全てのチャネルからの低周波内容のみがサブウーファースピーカに向けられるように、特定のオーディオチャネルの周波数内容を選択的に変更することであり得る。
【００４０】
引き続き図２を参照すると、一実施形態例によれば、少なくとも１つのオーディオマイクロプロセッサ２１２はマルチチャネル遅延モジュール２２２を含み得、このモジュールは、並列オーディオバス２４２及びサミング／ミキシング／ルーティングノード２４４を介して任意の組み合わせで、又は入力スプリッタルータ２１６により、上流モジュール２１４〜２２０、２４０から信号を受信し得る。マルチチャネル遅延モジュール２２２は、可変遅延を、最終的にスピーカに送信し得るオーディオの個々のチャネルに付与するように動作可能であり得る。マルチチャネル遅延モジュール２２２は、位相遅延を付与して、例えば、３Ｄ−ＥＡリスニングスフィア若しくはドーム等のリスニング環境１２２内に建設的干渉若しくは相殺的干渉を選択的に追加するか、又はリスニング環境１２２、３Ｄ−ＥＡリスニングスフィア、若しくは３Ｄ−ＥＡリスニングドームのサイズ及び位置を調整し得るサブモジュールを含むこともできる。
【００４１】
本開示の一実施形態例によれば、少なくとも１つのオーディオマイクロプロセッサ２１２は、高速レベル制御を用いるマルチチャネルプリアンプ２２４を更に含み得る。このモジュール２２４は、並列オーディオバス２４２及びサミング／ミキシング／ルーティングノード２４４を介して、少なくとも１つのオーディオマイクロプロセッサ２１２内の他の全てのモジュールと並列通信し得、少なくとも部分的に、オーディオ信号内に存在する符号化３Ｄ情報によって制御し得る。高速レベル制御を用いるマルチチャネルプリアンプ２２４によって提供される機能の一例は、３Ｄ−ＥＡ音響が特定の方向から向けられているように聞こえるように、１つ又は複数のチャネルの音量を選択的に調整することであり得る。特定の実施形態では、これは、本開示の特定の実施形態により、３Ｄ−ＥＡコンテンツ作成プロセス中、１つ又は複数の空間データファイルによって達成することもできる。本開示の一実施形態例によれば、ミキサ２２６は、上流信号の最終的な結合を実行し得、特定のチャネルを向けるのに適切な出力ルーティングを実行し得る。ミキサ２２６の後にマルチチャネルＤ／Ａコンバータ２２８が続き得、全てのデジタル信号をアナログに再変換してから、信号を更にルーティングする。一実施形態例によれば、Ｄ／Ａ２２８からの出力信号は、任意選択的に、プリアンプ２４６によって増幅して、送信器２５０にルーティングし無線スピーカに送信し得る。別の実施形態例によれば、Ｄ／Ａ２２８からの出力は、（ａ）プリアンプ２４６、（ｂ）マルチチャネル出力アンプ２３０、又は（ｃ）スピーカに接続する出力端子２３２に向けられる前のうちの１つ又は複数の組み合わせによって増幅し得る。本開示の一実施形態例によれば、マルチチャネル出力アンプ２３０は、出力端子２３２に接続されたスピーカへの任意の破損を最小に抑えるか、又は破損若しくは短絡したスピーカ若しくは短絡した端子２３２からアンプ２３０を保護する保護装置を含み得る。
【００４２】
一実施形態例によれば、特定の３Ｄ−ＥＡ出力オーディオ信号は、出力端子２３２にルーティングして、更に処理し、且つ／又はコンピュータインタフェースすることができる。特定の場合、出力端子２３２は、ＸＬＲ、ＡＥＳＩ、光学、ＵＳＢ、ファイアワイヤ、ＲＣＡ、ＨＤＭＩ、クイックリリース又は端子ロックスピーカケーブルコネクタ、Neutrik Speakonコネクタ等を含むが、これらに限定されない様々なタイプの家庭用及び／又はプロ用品質出力を含み得る。
【００４３】
本開示の一実施形態例によれば、３Ｄオーディオ再生システムで使用されるスピーカは、セットアップ手順の一環として、特定のリスニング環境に向けて較正又は初期化し得る。セットアップ手順は、１つ又は複数の較正マイクロホン２３６の使用を含み得る。本開示の一実施形態例では、１つ又は複数の較正マイクロホン２３６は、聴き手位置の約１０ｃｍ以内に配置し得る。一実施形態例では、較正トーンを生成し、スピーカを通して向けることができ、１つ又は複数の較正マイクロホン２３６で検出し得る。本開示の特定の実施形態では、較正トーンを生成し、スピーカを通して選択的に方向付け、検出し得る。特定の実施形態では、較正トーンは、インパルス、チャープ、ホワイトノイズ、ピンクノイズ、震音、変調トーン、位相シフトトーン、マルチトーン、又は可聴プロンプトのうちの１つ又は複数を含むことができる。
【００４４】
実施形態例によれば、較正トーンは、個々に、又は組み合わせて複数のスピーカに選択的にルーティングし得る。実施形態例によれば、較正トーンは、スピーカを駆動するように増幅し得る。本開示の実施形態例によれば、複数のスピーカを通して較正トーンを選択的にルーティングし、較正マイクロホン２３６を用いて較正トーンを検出することにより、１つ又は複数のパラメータを決定し得る。例えば、パラメータは、位相、遅延、周波数応答、インパルス応答、１つ又は複数の較正マイクロホンからの距離、１つ又は複数の較正マイクロホンに相対する位置、スピーカ軸方向角度、音量、スピーカラジアル角、又はスピーカ方位角のうちの１つ又は複数を含み得る。本開示の一実施形態例によれば、音量及び／又は遅延を含む１つ又は複数の設定は、較正又はセットアッププロセスに基づいて３Ｄ−ＥＡシステムに関連付けられたスピーカのそれぞれで変更し得る。本開示の実施形態によれば、変更された設定又は較正パラメータは、メモリ２５２に記憶し得る。本開示の一実施形態例によれば、較正パラメータは、メモリ２５２から検索し、初期セットアップ後にシステムを続けて使用する際にスピーカを自動的に初期化するのに利用し得る。
【００４５】
図３を参照して、一例としての３Ｄ−ＥＡ再生構成要素装置３００の様々なハードウェア及びユーザインタフェースを示す。この実施形態では、３Ｄ−ＥＡ再生構成要素装置３００は、任意の数のオーディオソース又は信号の記録、再生、及びミキシングを行う様々な機能を有することができる。例えば、コントローラインタフェース構成要素装置３００は、ソニック空間データ（ＳＳＤ）と同時に、又は非同時に少なくとも４つのアナログオーディオチャネルを記録し、再生し、ミキシングすることができる。図３に示される実施形態では、装置３００は、フロントパネル空間ディスプレイ及びプリセットセクション又は部分３０２、トランスポート制御セクション又は部分３０４、入力制御セクション又は部分３０６、及びリアセクション又は部分３０８を含むが、これらに限定されない少なくとも４つのユーザアクセス可能なセクションを有することができる。
【００４６】
図３の装置３００のフロント部分３０２は、図の下部３０８に示され、装置３００のリア部分は図の上部に示される。装置３００は、１つ又は複数の信号ソースを受信するように動作可能であることができ、装置３００は、図１のシステム１００に関して説明した処理と同様の１つ又は複数の信号ソースを処理することができる。信号ソースは、携帯電話、スマートフォン、音楽ファイルプレーヤ、ゲームコンソール、タブレット、コンピュータ、ラップトップコンピュータ、標準ＣＤプレーヤからのストレオオーディオ、テープデック、又は他のハイファイステレオソース、モノオーディオソース（ギターのような楽器、ベース、マイク等）、又はＤＶＤプレーヤからのソース等を含むことができるが、これらに限定されない。装置３００は、１つ又は複数の信号ソースを処理し、リスニング環境において、１１０〜１２０等の１つ又は複数のスピーカを介して３Ｄ−ＥＡ音響を生成又は再現することができる。１つ又は複数のスピーカは、６．０又は６．１スピーカアレイであることができる。
【００４７】
任意の数の制御入力及び／又は出力を、図３に示される装置３００と併用することができる。例えば、制御入力及び／又は出力は、Ｘ軸データ、Ｙ軸データ、及びＺ軸データを示す３Ｄディスプレイ３１０と、プリセットボタン３１２と、開始及び停止ボタンと、オーディオデータファイル（ＡＤＦ）再生及び録音ボタンと、空間データファイル（ＳＤＦ）再生及び記録ボタンと、タッチスクリーンインタフェース及び／又はメニューと、時間コードインジケータ又はカウンタと、トランスポート制御機能と、チャネルアクティブ／ソロと、入力利得メータと、入力利得レベルと、チャネル出力メータと、ライン／マイクと、ファンタム電源と、送信／リターンと、チューナーつまみと、１／４インチジャック等のヘッドフォンジャックと、ヘッドフォンレベルと、出力メータと、出力レベル／ミックスと、マスタ出力レベルメータと、マスタ出力レベルとを含むことができるが、これらに限定されない。他の実施形態は、同様及び／又は他の制御入力及び／又は出力を含むことができる。
【００４８】
図３に示される実施形態では、３Ｄディスプレイ３１０は、幾つか又は４つ全てのチャネルの３Ｄ同時表現を提供することができる。特定の場合、チャネル１〜４等の特定の入力を識別する代表的なマーカは、マーカの各番号によって３Ｄディスプレイ３１０上で指定することができる。例えば、マーカは、各チャネルの３Ｄ位置を３Ｄディスプレイ３１０上で示すことができ、各マーカは、相対信号強度を示すように脈動することができる。幾つかの場合、マーカは、赤への変更のように色を変更して、クリップを示すことができる。幾つかの場合、マーカは、空間データファイル（ＳＤＦ）に従ってリアルタイムで移動することができる。
【００４９】
さらに、図３に示される実施形態では、プリセットボタン３１２は、１〜５のボタン等のプログラマブルプリセットボタンを含むことができる。これらのプリセットボタン３１２は、ユーザが装置３００のフロントパネルを操作することにより、又はユーザが入力制御装置若しくは図８〜図１４に示される８００と同様の他のフットペダル制御装置を操作することにより、最高で５つまでのデータセット等のソニック空間データセットを記憶することができる。特定の場合、各プリセットボタン３１２は、ユーザが各プリセットボタンに、チャネル１〜４等の特定のチャネルを割り当てられるようにするクイック割り当て特徴を含むことができる。幾つかの場合、１〜１００ＡＤＦ又はＳＤＦ等のメモリバンクの幾つか又は全てを、各プリセットボタン３１２に割り当てられたチャネルの記憶に割り当てることができる。使用に際して、ユーザが、所望のチャネルボタンを押下することによって特定のチャネルボタンを選択すると、ユーザは、所望のプリセットボタンを押下することにより、対応するプリセットボタン３１２を素早く割り当てることができる。メモリバンクは、チャネルボタンのユーザ選択及びプリセットボタン３１２を記憶して、ユーザが特定のプリセットボタンを選択した場合、前に記録されたチャネルを続けて呼び出すことができる。
【００５０】
さらに、図３に示される実施形態では、開始及び停止ボタン、並びにＡＤＦ及びＳＤＦ再生及び記録ボタン又は制御機構を使用して、チャネル１〜４等の特定のチャネルのソニック空間データ（ＳＳＤ）及び／又は空間データファイル（ＳＤＦ）の記録及び／又は再生をそれぞれ行うことができる。例えば、割り当てられたチャネルへのＳＤＦを記録するためには、ユーザは、各ＳＤＦ記録ボタンを選択し、次に、開始ボタンを選択することができる。更なる例として、割り当てられたチャネルのＡＤＦを再生するためには、ユーザは各ＡＤＦ再生ボタンを選択し、次に、開始ボタンを選択することができる。
【００５１】
特定の場合、特定のチャネルについて再生ボタンも記録ボタンも選択されない場合、そのチャネルは、オーディオ及びソニック空間データをプレイスルーとして受け入れる。
【００５２】
図３に示される実施形態では、タッチスクリーンインタフェース及び／又はメニューは、アクティブチャネルについての情報を表示し、データ入力用のポップアップキーボードを提供し、プリセットボタン割り当てに役立ち、保存動作、削除動作、及び割り当て動作等のファイル管理に役立つことができる。
【００５３】
図３に示される実施形態では、トランスポート制御機能は、停止、再生、一時停止、早送り、高速又はクイック先送り、巻き戻し、及び高速又はクイック巻き戻しのタッチスクリーンディスプレイ又は各コマンドボタン及び／又は制御機構を含むことができる。４つのオーディオチャネルのそれぞれは、前に定義したような各制御機構を有することができる。特定の場合、各トラックは、オーディオトラックをサーチして再生するトランスポート制御機構を有することができる。
【００５４】
さらに、図３に示される実施形態では、チューナーつまみは、比較的細かいチューニング及び／又は制御を提供する押下可能な機能選択特徴を有するフライホィールチューナーつまみを含むことができる。
【００５５】
さらに、図３に示される実施形態では、１つ又は複数のオーディオ入力制御機構を提供することができる。入力制御機構は、利得制御、レベルメータ、及びファンタム電源用のボタン、送信／リターン用のインサート、出力レベル制御及びインジケータ、各チャネルの出力イネーブルボタン、マスタ音量制御、並びにマスタレベルメータを提供することができる。
【００５６】
装置３００のリア部分を参照すると、任意の数の制御入力及び／又は出力を使用することができる。図３に示される実施形態では、制御入力及び／又は出力は、電源オン／オフスイッチ、電源コネクタインタフェース、第２のインタフェースコントローラ（ＩＣ）へのチェーンリンク、マルチチャネル（１〜６＋サブアウト）出力コネクタ（Ｄ−２５）、ファイアワイヤ入／出力、ヘッドフォン出力ジャック、少なくとも４つのモノオーディオチャネル入力、一連の送信入力、一連のリターン入力、１組のフロントＸＬＲ又は１／４インチＴＲＳ入力、及びＵＳＢ入／出力を含むことができるが、これらに限定されない。４つの入力は、ファンタム電源及び／又は補助オーディオ機器を接続するインサートについてのオプションを有することができる。図８〜図１４に示される８００と同様の、最高で４つまでの入力制御装置又は同様のフットペダルへの接続を提供することができる。これらの接続はそれぞれ、指定された入力チャネルのソニック空間データ（ＳＳＤ）の提供又は他の様式での制御を行うことができる。装置３００のリア部分の入力及び／又は出力のうちの少なくとも幾つかを使用して、複数のユニットが装置３００とインタフェースすることができる。他の実施形態は、同様及び／又は他の制御入力及び／又は出力を含むことができる。
【００５７】
一実施形態では、３００等のコントローラインタフェース構成要素装置は、任意の出力定格の１つ又は複数の給電スピーカと共に動作することができる。例えば、３Ｄオーディオ再生ユニットは、２０Ｗ、４０Ｗ、１００Ｗ、２００Ｗ、１０００Ｗスピーカ等の様々なスピーカと併用することができる。したがって、この実施形態では、３Ｄ−ＥＡ再生装置３００は、給電スピーカがユニットと併用されるため、信号ソースの増幅を提供する必要がない。さらに、３Ｄ−ＥＡ再生装置３００には、任意の数の入力及び／又は出力インタフェースを構成して、１つ又は複数の信号ソースに適宜対応することができる。例えば、３Ｄ−ＥＡ再生装置３００は、ＸＬＲ、ＡＥＳＩ、光学、ＵＳＢ、ファイアワイヤ、ＲＣＡ、ＨＤＭＩ、クックリリース、端子ロックスピーカケーブルコネクタNeutrik Speakonコネクタ等であるが、これらに限定されないインタフェースを含むことができる。
【００５８】
使用に際して、３Ｄ−ＥＡ再生装置３００を使用して、任意の数の信号ソースでのソニック空間データ（ＳＳＤ）を受信し、監視し、調整することができる。装置３００は、ＳＳＤ及び従来のオーディオ信号を受信し、監視し、調整する様々な入力及び出力制御機構をユーザに提供することができる。このようにして、他のオーディオ信号と共にＳＳＤの編集、ミキシング、及び記録を、３Ｄ−ＥＡ再生装置３００を使用して実行することができる。
【００５９】
特定の実施形態では、３Ｄ−ＥＡ再生装置３００は、受信した２チャネルオーディオ信号を６チャネルオーディオ信号に変換又は増強する１組のコンピュータ実行可能命令を有する１つ又は複数のモジュールを含むことができる。１つ又は複数のモジュールは、３Ｄ−ＥＡスピーカアレイを介して２チャネル信号を再生又は他の様式で出力する１組のコンピュータ実行可能命令を含むこともできる。さらに、１つ又は複数のモジュールは、３Ｄ−ＥＡスピーカアレイを介して変換又は増強された６チャネル信号を再生又は他の様式で出力する１組のコンピュータ実行可能命令を含むことができる。
【００６０】
図４は、本開示の一実施形態による３Ｄ−ＥＡシステムにおける図１の１２２と同様の一例としてのリスニング環境４００でのスピーカ視点配置又は３Ｄ−ＥＡスピーカアレイを示す。一実施形態例によれば、スピーカは、３Ｄオーディオコンバータ／アンプ１０２と通信し、左１１０、右１１２、左サラウンド１１４、右サラウンド１１６、上中心前方１１８、及び上中心後方１２０として示すことができる。他の実施形態例によれば、スピーカの数及び物理的レイアウトは、環境４００内で可変であり、サブウーファー（図示せず）を含むこともできる。本開示の一実施形態例によれば、左１１０、右１１２、左サラウンド１１４、右サラウンド１１６のスピーカは、聴き手位置４０２から予め定義された位置に配置することができる。例えば、左１１０及び右１１２は、中心から約３５度ずれるなど、中心から約３０〜４０度ずれて概ね耳の高さに位置決めすることができ、左サラウンド１１４及び右サラウンド１１６は、中心から約１２０度ずれるなど、中心から約１１０〜１３０度ずれて概ね耳の高さに位置決めすることができ、上中心前方１１８は、聴き手に向かって１０〜２０度傾斜して耳の高さよりも約８〜９フィート（約２．４ｍ〜２．７ｍ）上に位置決めすることができ、上中心後方１２０は、聴き手に向かって１０〜２０度傾斜して耳の高さよりも約８〜９フィート（約２．４ｍ〜２．７ｍ）上に位置決めすることができる。一例では、正三角形に近い三角形を左１１０スピーカと右１１２スピーカと聴き手位置４０２との間に形成することができる。別の例では、左１１０及び右１１２スピーカは、スピーカ１１０、１１２、及び聴き手位置４０２との間に形成される二等辺三角形の鋭角が約４０度〜約６０度であるように向けることができる。
【００６１】
図４は、本開示の一実施形態による上中心前方スピーカ１１８及び上中心後方スピーカ１２０も示す。これらのスピーカ１１８、１２０はそれぞれ、聴き手位置４０２よりも垂直に高いリスニング環境４００の前方及び後方に配置することができ、約１０度〜約６５度だけ下方に傾斜して、音響を聴き手に向かって下方に向けることができる。上中心前方１１８スピーカは、通常、表示画面（図示せず）よりも上で、環境４００又は部屋の前方に配置することができ、上中心後方１２０スピーカは、聴き手位置４０２の背後且つ上方に配置することができる。この実施形態では、上中心後方１２０及び上中心前方１１８のスピーカは、正確なソニック反射が聴き手の両耳内の軟骨の選択的領域を振動させて、垂直又は方位角方向知覚を保証するように、聴き手位置４０２にいる聴き手に向かって下方を向くことができる。本開示の一実施形態例によれば、スピーカのうちの１つ又は複数は、２つのスピーカ導電ワイヤを使用して３Ｄオーディオコンバータ／アンプ１０２に直接接続し得る。本開示の別の実施形態例によれば、スピーカのうちの１つ又は複数は、３Ｄオーディオコンバータ／アンプ１０２に無線で接続し得る。
【００６２】
図４には、部屋較正マイクロホン１０８も示されている。特定の図に関連して以下に更に考察するように、較正マイクロホン１０８は、有線であってもよく、又は無線であってもよく、３Ｄオーディオコンバータ／アンプ１０２と通信し得る。一実施形態例によれば、較正マイクロホンは、３Ｄオーディオコンバータ／アンプ１０２及びスピーカ１１０〜１２０と協働して、以下のうちの任意に利用し得る：（ａ）特定の部屋又はリスニング環境４００に向けてのスピーカ１１０〜１２０の較正、（ｂ）最適な３Ｄ−ＥＡ性能に向けての個々のスピーカのセットアップ及び配置の支援、（ｃ）個々のチャネル及びスピーカへのイコライズパラメータのセットアップ、及び／又は（ｄ）様々なパラメータ、スピーカパラメータ等の設定へのフィードバックの利用等。特定の実施形態では、上記較正プロセスを使用して、ＰＡＲに向けて全てのスピーカを較正することができる。すなわち、スピーカは、まるでそれらが全て聴き手から等しい距離及び大きさであるかのように聞こえるように較正することができる。これは、同時及び３Ｄ−ＥＡ再生モードで、左サラウンド１１４、右サラウンド１１６、上中心前方１１８、及び上中心後方１２０スピーカ等の各スピーカの音量及び遅延を、左１１０及び右１１２スピーカに相対して調整することによって促進することができる。
【００６３】
一実施形態例では、図４のスピーカ配置は、スピーカの配置が部屋又は環境４００の中心部の着座位置にいる聴き手に使用される場合、頭上スピーカ１１８、１２０を、部屋又は環境４００の中心部に立っている聴き手に向けて位置決めすることによって較正することができる。すなわち、図４のスピーカ配置は、部屋又は環境４００の中心部にいる着座した聴き手の耳の高さよりもわずかに上に向けることができる。
【００６４】
図５は、本開示の一実施形態例による、図１の１２２及び／又は図４の４００と同様の、一例としての３Ｄ−ＥＡリスニング環境５００又は３Ｄ−ＥＡスピーカアレイの上から下を見た図を示す。上中心前方１１８及び上中心後方１２０のスピーカを二分する中心線５０６に相対して測定される場合、左１１０スピーカは、聴き手の位置から延び、中心線５０６に対して角度５０４をなす線５０８上にセンタリングし得る。部屋の構成及び最適な３Ｄ−ＥＡ音響に関連して他の要因に応じて、角度４０４は変化し得る。例えば、左１１０及び右１１２は、中心から約３５度ずれるなど、中心から約３０〜４０度ずれて概ね耳の高さに位置決めすることができ、左サラウンド１１４及び右サラウンド１１６は、中心から約１２０度ずれるなど、中心から約１１０〜１３０度ずれて概ね耳の高さに位置決めすることができ、上中心前方１１８は、聴き手に向けて１０度〜２０度傾斜して地面の高さから約８〜９フィート（約２．４ｍ〜２．７ｍ）上に位置決めすることができ、上中心後方１２０は、聴き手に向けて１０度〜２０度傾斜して地面の高さから約８〜９フィート（約２．４ｍ〜２．７ｍ）上に位置決めすることができる。右１１２及び右サラウンド１１６のスピーカは、左１１０及び左サラウンド１１４のスピーカに対してそれぞれ、中心線５０６に関して鏡像に配置し得る。図４及び図５に示されるように、上中心前方１１８及び上中心後方１２０スピーカは、概ね中心線上に（それぞれの名称が示唆するように）配置し得、他のスピーカと同様に、３Ｄ−ＥＡ音響を聴き手に向けるように向け得る。本開示の実施形態例によれば、較正マイクロホン１０８（図４）の位置で示されるように、聴き手位置４０２（図４）にいる聴き手と、個々のスピーカ１１０〜１２０との直線距離は、可変であり、部屋の構成、部屋の物理的制限、最適な３Ｄ−ＥＡ音響に関連する要因、及び１人又は複数の聴き手に対して３Ｄ−ＥＡ音響を再生するために必要な３Ｄ−ＥＡリスニングスフィア又はドーム５１２のサイズに依存し得る。通常、３Ｄ−ＥＡリスニングスフィア又はドーム５１２は、最も近いスピーカ１１０〜１２０までの距離よりも小さな半径を有することになる。しかし、本開示の一実施形態例によれば、３Ｄリスニングスフィア又はドーム５１２のサイズは、選択的処理、ルーティング、音量制御、及び／又は各スピーカ１１０〜１２０のそれぞれに向けられる駆動エネルギーの位相制御によって拡大又は縮小し得る。特定の実施形態では、３Ｄリスニングスフィア又はドーム５１２内の聴き手からの幾つか又は全てのスピーカの等距離配置が最適であり得る。
【００６５】
一実施形態例では、聴き手から各スピーカが等距離であり、スピーカを聴き手から約５フィート（約１．５ｍ）、７フィート（約２．１ｍ）、及び１０フィート（約３ｍ）に位置決めして、ＰＡＲ状況及び同様の性能を生み出すことにより、図５のスピーカ配置をテストすることができる。
【００６６】
図６を参照すると、この図には、本開示の一実施形態による、３Ｄオーディオ情報を記録又は符号化する一例としての３Ｄ−ＥＡシステム６００が示される。システム６００を利用して、ソース環境からの３Ｄオーディオ情報を記録し、且つ／又は他の様式で符号化し得る。一実施形態例によれば、３Ｄ−ＥＡ記録システム６００は、特定のシーン又は環境内の自然発生する方向性情報を符号化して、撮影後に普通なら行われ得る３Ｄ−ＥＡ音響の手動処理を最小に抑えることに役立ち得る。一実施形態例によれば、３Ｄ−ＥＡ記録システム６００は、モノ信号（mono signals）を記録し、空間データファイル（ＳＤＦ）を割り当てることができるか、又は複数のマイクロホンが、配置に従って各チャネルで記録することができる。一実施形態例によれば、バイノーラルマイクロホンシステム（図示せず）をオーディオの記録に利用し得る。典型的なバイノーラル記録ユニットは、ダミーヘッドに取り付けられた２つのハイファイマイクロホンを有し、マイクロホンは耳の形状の型に挿入されて、音響が人間の頭部を包み、外耳及び内耳の形態によって「整形」される際に自然に発生し得るオーディオ周波数調整の幾つか又は全てを完全に捕捉する。別の実施形態例によれば、図１に上述された較正マイクロホン１０８と同様であり得る３Ｄマイクロホン６１０を利用して、複数の方向からの音響を選択的に記録し得る。一実施形態例によれば、３Ｄマイクロホンは、方向性感度及び符号化の空間次元当たり少なくとも１つのダイアフラム要素を有し得る。３Ｄマイクロホン６１０によって生成される信号は、複数の入力と、記憶チャネルとを有する３Ｄ音響レコーダモジュール６０２を介して受信し記録し得る。本開示の一実施形態例によれば、３Ｄ音響レコーダモジュール６０２は、ビデオカメラ６０６によって提供される時間コード６０８を同時に記録し得る。本開示の一実施形態例によれば、３Ｄ音響レコーダモジュール６０２は、３Ｄ音響レコーダモジュール６０２内の時間コード生成器によって提供される時間コード６０８を同時に記録し得る。オーディオ及び時間コードを記録した後、情報は、オンライン及び／又はオフライン音響プロセッサ６０４にダウンロードするか、又は他の様式で転送して、更に処理又は記憶し得る。本開示の一実施形態例によれば、オーディオ情報及び時間コード情報は、例えば、ビデオ、オーディオ記録、又はコンピュータゲームと併用するために更に編集し処理し得る。
【００６７】
図７を参照して、図３の３００等の３Ｄ−ＥＡシステムと併用される一例としてのコントローラインタフェース構成要素装置７００を示す。図７の例としての装置７００では、装置７００は、プロセッサ７０２と、メモリ７０４と、１つ又は複数の組のコンピュータ実行可能命令又はモジュール７０６〜７１０と、入力インタフェース７１２と、出力インタフェース７１４とを含むことができる。プロセッサ７０２は、メモリ７０４に記憶されたコンピュータ実行可能命令又はモジュール７０６〜７１０にアクセスし、実行し、又は他の様式で読み出すように構成することができる。コンピュータ実行可能命令又はモジュール７０６〜７１０は、ランダムアクセスメモリ（ＲＡＭ）、フラッシュＲＡＭ、磁気媒体、光学媒体、固体状態媒体等の非一時的な媒体を含むが、これらに限定されない様々なコンピュータ可読媒体に記憶することができる。
【００６８】
入力モジュール７０６は、図６の３Ｄ音響レコーダモジュール６０２と同様に、図６の３Ｄマイクロホン６１０からなど、任意の数のオーディオ又は信号ソースから１つ又は複数のオーディオ信号を受信するように使用可能な１組のコンピュータ実行可能命令を含むことができる。特定の実施形態では、入力モジュール７０６は、図６の６０６等のビデオカメラ等から１つ又は複数のビデオ信号を受信するように使用可能な１組のコンピュータ実行可能命令を含むことができる。特定の実施形態では、入力モジュール７０６は、ビデオカメラ、例えば６０６等から１つ又は複数のビデオ信号に関連付けられた、図６の６０８等の時間コードを受信するように使用可能な１組のコンピュータ実行可能命令を含むことができる。特定の実施形態では、入力モジュール７０６は、図８〜図１４の８００等のフットペダルコントローラ装置から、又はコントローラインタフェース構成要素装置に関連付けられた１つ若しくは複数のボタン若しくはタッチスクリーンディスプレイからなど、１つ又は複数のユーザ入力に対応するソニック空間データ（ＳＳＤ）を受信するように使用可能な１組のコンピュータ実行可能命令を含むことができる。特定の実施形態では、入力モジュール７０６は、１つ又は複数の予め定義された音量入力及び／又は遅延入力を１つ又は複数受信するように使用可能な１組のコンピュータ実行可能命令を含むことができ、音量入力及び／又は遅延入力は、図１６の１６００等のデータ構造又はテーブルに前に記録されたものであってもよく、又は他の様式で、コントローラインタフェース構成要素装置に関連付けられた１つ若しくは複数のボタン若しくはタッチスクリーンディスプレイを介して、対応するユーザ入力を介して受信したものであってもよい。
【００６９】
図８〜図１４は、本開示の一実施形態による一例としての入力制御装置８００を示す。図８〜図１４に示される入力制御装置８００又はフットペダル入力制御装置は、スタジオ内ミキシング、ライブパフォーマンス、及び３Ｄオーディオ出力信号の記録中等、音楽のミキシング及び／又は録音を行いながら、ソニック空間データ（ＳＳＤ）に関して１つ又は複数のユーザ入力をリアルタイムで捕捉するのに使用することができる。したがって、図８〜図１４の入力制御装置８００は、リアルタイムでの直接ソニック空間データ（ＳＳＤ）制御に役立つことができる。例えば、入力制御装置８００から受信したユーザ入力は、ソニック空間マップ（ＳＳＭ）の音量及び遅延値に同時に影響することができ、音量範囲及び遅延範囲を通して比較的平滑な遷移を提供することができる。特定の場合、ユーザが圧力増大を入力制御装置８００に加えると、遷移の速度を増大させることができる。特定の場合、入力制御装置８００を使用して、予め定義される遅延範囲に対するｄＢシフトを制御することができる。
【００７０】
一実施形態では、ユーザは、図８〜図１４の入力制御装置を、関連付けられたフットペダル８０２に圧力を加えることによって操作することができる。ペダル圧は、音量及び遅延を操作することで、音響配置に影響することができる。例えば、フットペダル８０２が、標準又は中央位置にあり、ユーザが圧力をフットペダル８０２に掛けていない場合、音量又は遅延の入力はなされない。すなわち、フットペダル８０２の位置の相対変化がない場合、音量及び／又は遅延の変更に相関付けることができるいかなるＸ軸、Ｙ軸、又はＺ軸変更も生成されない。音響が聴き手から離れて動いている特定の場合、音量は低減し、遅延は増大する。ユーザは、音響配置に影響する音量及び／又は遅延の適する変化に相関する特定のＸ軸、Ｙ軸、及び／又はＺ軸変更でフットペダル８０２を操作することができる。同様に、音響が聴き手に向かって動いている特定の場合、音量は増大し、遅延は存在しない。ここでもユーザは、音響配置に影響する音量及び／又は遅延の適する変化に相関する特定のＸ軸、Ｙ軸、及び／又はＺ軸変更でフットペダル８０２を操作することができる。
【００７１】
図８〜図１４に示されるように、入力制御装置８００は、支持ベース８０４に枢動可能に取り付けられたフットペダル８０２を含むことができる。フットペダル８０２は、比較的軽量の合金フットペダルであり得る。特定の実施形態では、フットペダル８０２は、ユーザの足又は他の附属器官の形状に概ね合うような輪郭を有し得る。示される入力制御装置８００は、３Ｄオーディオ出力信号の制御又は他の様式での変更に関する少なくとも１つのユーザコマンドを入力するように動作可能であることができる。入力制御装置８００は、フットペダル８０２を、ペダル８０２を二分する垂直軸に関して左及び／又は右に枢動させることにより、Ｘ軸制御を実施することができる。入力制御装置８００は、フットペダル８０２を、ペダルを二分する水平軸に関して前方及び／又は後方に枢動させることにより、Ｙ軸制御を実施することができる。したがって、示される実施形態では、フットペダル８０２は、Ｘ−Ｙ軸ジョイスティック型装置８０６に取り付けることができる。入力制御装置８００は、フットペダル８０２を支持ベース８０４に関して前方及び／又は後方にスライドさせることにより、Ｚ軸制御を実施することができる。したがって、フットペダル８０２は、Ｚ軸スライドベース装置８０８に取り付けることもできる。ロック装置８１０は、ユーザがフットペダル８０２の中央部分を押下することによってアクティブ化することができ、ペダル８０２を支持ベース８０４に対してスライドさせるか、又は比較的静止した状態を保てるようにすることができる。すなわち、ロック装置８１０がアクティブ化されている場合、フットペダル８０２の位置は、支持ベース８０４に対して比較的静止した位置に保持することができる。したがって、支持ベース８０４は、フットペダル８０２、Ｘ−Ｙジョイスティック型装置８０６、及びＺ軸スライドベース装置８０８を支持する比較的重い装置であることができる。支持ベース８０４の、フットペダル８０２から離れた一部において、追加のユーザ制御機構を提供することができる。追加のユーザ制御機構としては、例えば、表示装置８１２、開始／停止スイッチ８１４、ミリ秒遅延要素及び／又はデシベル単位カウンタ又はセレクタ８１６、及びバイパススイッチ８１８を含むことができる。
【００７２】
図８〜図１４に示される実施形態では、表示装置８１２は、入力制御装置８００の１つ又は複数の現在設定を出力することができる。例えば、現在設定は、プリセットチャネル、ロック／アンロックインジケータ、時間コードカウンタ、及びバイパス（ミュート）インジケータを含むことができるが、これらに限定されない。
【００７３】
示される入力制御装置８００は、ユーザの足を用いて操作されるように動作可能であることができるが、他の実施形態は、ユーザの手、他の人体部位、音声、光、又はユーザによって提供される他のコマンド若しくはジェスチャによって操作可能である。例えば、入力制御装置８００は、ユーザの手が楽器で占有されている場合、足を使用してユーザによって操作可能である。使用に際して、ユーザが演奏し録音する際、ユーザは同時に、足を用いて入力制御装置８００を操作して、入力制御装置８００のユーザの操作によって影響を受けるソニック空間データ（ＳＳＤ）を捕捉することができる。ユーザが、いかなる圧力もフットペダル８０２にかけない場合、ペダル８０２は標準又は中央位置に戻ることができる。したがって、入力制御装置８００は、Ｘ軸データ、Ｙ軸データ、及び／又はＺ軸データを含むユーザ入力データを出力することができる。
【００７４】
図８〜図１４に示される入力制御装置８００は、幾つかの場合、１つ若しくは複数のリチウム型若しくは充電式電池等の従来の電池によって給電することができ、又は直流電源若しくは交流電源に接続し得る。
【００７５】
さらに、図８〜図１４に示される入力制御装置８００は、直接接続、無線、Bluetooth（登録商標）、無線周波、ネットワーク、インターネット、又は他の従来の通信モードにより、図１の１００と同様の３Ｄ−ＥＡシステム又は３Ｄ−ＥＡ再生構成要素装置等の関連付けられたインタフェースコントローラユニット及び／又はオーディオ音響システムと通信することができる。
【００７６】
本開示の実施形態によれば、ジョイスティック、トラックボール、手操作装置、光インタフェース、及びジェスチャ制御型装置等の他のタイプ又は構成の制御装置への入力制御装置８００の特徴及び態様の適用可能性が認識されよう。
【００７７】
図１５は、本開示の一実施形態例による３Ｄ−ＥＡ音響ローカリゼーションマップ１５００を示す。３Ｄ−ＥＡ音響ローカリゼーションマップ１５００は、空間内で、中心位置に対する３Ｄ−ＥＡ音響ローカリゼーションの相対配置を空間において記述する助けとして機能し得る。一実施形態例によれば、３Ｄ−ＥＡ音響ローカリゼーションマップ１５００は、３つの垂直レベルを含み得、各レベルは９つのサブ領域を有し、合計で２７のサブ領域が、中心サブ領域１４の周囲に三次元で配置される。上部レベルはサブ領域１〜９からなり得、中間レベルはサブ領域１０〜１８からなり得、下部レベルはサブ領域１９〜２７からなり得る。リスニング環境の向きの一例では、中心サブ領域１４を聴き手の頭部には配置し得る。聴き手は、前を向き、前中心サブ領域１１をまっすぐ見ることができる。他の実施形態によれば、３Ｄ−ＥＡ音響ローカリゼーションマップ１５００は、より多数又はより少数のサブ領域を含み得るが、ソニック情報の一般的な方向、ベクトル、ローカリゼーション等を定義するために、３Ｄ−ＥＡ音響ローカリゼーションマップ１５００は、本開示に都合のよい３Ｄ枠組みを提供し得る。先の段落で、特に図１に関連して考察したように、３Ｄオーディオコンバータ／アンプ１０２の一態様は、３Ｄ−ＥＡ音響の全て又は部分が三次元空間内の特定の領域に動的にローカライズされるように、複数のオーディオチャネルのパラメータをリアルタイム又は準リアルタイムで調整することである。他の実施形態例によれば、３Ｄ−ＥＡ音響ローカリゼーションマップ１５００は、より多数又はより少数のサブ領域を含み得る。別の実施形態例によれば、３Ｄ−ＥＡ音響ローカリゼーションマップ１５００は、図４に示される中心領域に対して垂直の中心ずれを有し得る。３Ｄ−ＥＡ音響ローカリゼーションマップ１５００は、図１６を用いてサブ領域１〜２７のうちのいずれか１つに３Ｄ−ＥＡをローカライズするように、各スピーカに送信されるオーディオレベルに関して更に説明し定義し得る。
【００７８】
本開示の一実施形態例によれば、図１６は、３Ｄ−ＥＡ音響を２７個のサブ領域のうちの任意のサブ領域付近にローカライズするために設定し得る相対音量レベル（デシベル単位）のルックアップテーブルの一例を示す。記号「＋」、「−」、「０」、及び「オフ」は、図１５に示されるように、２７個のサブ領域のうちの１つに３Ｄ−ＥＡ音響をローカライズする各スピーカの相対信号レベルを表す。本開示の一実施形態例によれば、「０」記号は、特定のスピーカの音量のデフォルトレベルを表し得、デフォルトレベルはスピーカ毎に異なり得る。本開示の一実施形態例によれば、「＋」記号は＋６ｄＢ、又はデフォルト「０」信号レベルの約２倍の音量を表し得る。「−」記号は、約−６ｄＢ、又は信号のデフォルト「０」レベルの約半分の音量を表し得る。記号「オフ」は、その特定のスピーカに送信される信号がないことを示す。他の実施形態例では、「＋」記号は、１人又は複数の聴き手に対して３Ｄ−ＥＡ音響を再生するために必要な３Ｄ−ＥＡリスニングスフィア又はドーム３１２のサイズ等の要因に応じて、約＋１ｄＢ〜約＋２０ｄＢのレベル範囲を表し得る。同様に、「−」記号は、約−１ｄＢ〜約−２０ｄＢのレベル範囲を表し得る。本開示の一実施形態例によれば、図４の３Ｄ−ＥＡリスニングスフィア又はドーム４１２のサイズは、「＋」及び「−」記号に割り当てられる信号レベルの値によって拡大又は圧縮し得る。
【００７９】
特定の実施形態では、２０ｄＢ範囲が使用される場合、値がソニック空間マップ（ＳＳＭ）上で０であるとき、開始点は−１０ｄＢであることができる。
【００８０】
本開示の実施形態例によれば、信号を調整して、三次元リスニング環境での音響の見掛けのローカリゼーションを制御し得る。一実施形態例では、オーディオ信号は、遅延及び／又は音量のうちの１つ又は複数を調整することによって選択的に処理し得る。一実施形態例では、オーディオ信号は、１つ又は複数のオーディオチャネルに関連付けられた復号化データの受信に基づいて、選択的に処理し得る。一実施形態例によれば、復号化データは、特定の音響を特定のスピーカに向けるため、又は音響をあるスピーカ（又は１組のスピーカ）から別のスピーカに移して、移動をエミュレートするためのルーティングデータを含み得る。実施形態例によれば、１つ又は複数のオーディオチャネルを１つ又は複数のスピーカにルーティングすることは、少なくとも部分的にルーティングデータに基づき得る。特定の実施形態では、ルーティングは、１つ又は複数のオーディオチャネルの増幅、複製、及び／又は分割を含み得る。一実施形態例では、ルーティングは、１つ又は複数のオーディオチャネルを６つ以上の処理チャネルに向けることを含み得る。
【００８１】
３Ｄオーディオ音響をシミュレートする方法例
図１７は、本開示の一実施形態による、三次元オーディオ音響をシミュレートするプロセスを示す。ブロック１７１０において、モノオーディオ信号を受信することができる。ブロック１７１０の後に任意選択的なブロック１７２０が続き、モノオーディオ信号は６チャネル信号に変換される。ブロック１７２０の後にブロック１７３０が続き、モノオーディオ信号の再生又は６チャネル信号の再生が、３Ｄ−ＥＡスピーカアレイにわたって行われる。特定の実施形態では、モノオーディオ信号の処理及び再生は、３Ｄ−ＥＡシミュレーションとして知ることができる。特定の実施形態では、６チャネルオーディオ信号の変換及び再生は、３Ｄ−ＥＡピュアプレイとして知ることができる。本方法は、ブロック１７３０後に終了することができる。
【００８２】
３Ｄ−ＥＡオーディオを録音する方法例
本開示の一実施形態例による、３Ｄオーディオを録音する方法について、図６と、図１８及び図２０のフローチャートとに関連してこれより説明する。図１８では、例としての第１の方法１８００がブロック１８０２において開始され、３Ｄマイクロホン６１０がマルチチャネルレコーダ６０２に接続される。３Ｄマイクロホン６１０は複数のダイアフラム又は要素を有し得、各ダイアフラム又は要素は、要素の向きに応じて、特定の方向からのソニック情報を選択的に検出し得る方向性感度を有する。方向性受信要素又はダイアフラムは、コンデンサ要素、動的要素、結晶要素、圧電要素等を含み得る。ダイアフラムは、カージオイド又は超カージオイド感度パターンを有し得、許容度又は感度パターンが部分的に重複するように、最近傍ダイアフラムに対して向け得る。３Ｄマイクロホン６１０は、部分３Ｄ又は全体スフィアカバレッジのために３つ以上のダイアフラムを有し得る。３Ｄマイクロホン６１０は、特定の空間内での適切な指向性向きについてのインジケータ又は印を有し得る。
【００８３】
方法１８００は任意選択的なブロック１８０４に続き、ビデオカメラ６０６（又は他の時間コード生成機器）からの時間コード６０８を３Ｄレコーダ６０２に入力し、別個のチャネルに記録し、後の再生同期に使用し得る。任意選択的に、３Ｄレコーダ６０２は内部時間コード生成器（図示せず）を含み得る。
【００８４】
方法１８００は任意選択的なブロック１８０５に続き、ステレオカメラシステム６１２からの視差情報を利用して、物体の深度情報を検出し得る。物体に関連付けられた視差情報を更に利用して、物体に関連付けられたオーディオの相対ソニック空間位置、方向、及び／又は移動を符号化し得る。
【００８５】
方法はブロック１８０６に続き、３Ｄオーディオ情報（及び時間コード）をマルチチャネルレコーダ６０２に記録し得る。マルチチャネル３Ｄ音響レコーダ６０２は、マイクロホンプレアンプ、自動利得制御（ＡＧＣ）、アナログ／デジタルコンバータ、及びハードドライブ又はフラッシュメモリ等のデジタル記憶装置を含み得る。自動利得制御は、マイクロホンダイアフラムのうちの１つからの入力に基づいて、全てのチャネルの利得及び減衰を調整することができるリンクＡＧＣであり得る。この種のリンクＡＧＣ又はＬＡＧＣは、ソニック空間情報を保存し、最大音響をレコーダのダイナミックレンジ内に制限し、そのままでは聞こえないおそれがある静かな音響をブーストし得る。
【００８６】
方法１８００はブロック１８０８に続き、記録された３Ｄオーディオ情報が処理される。３Ｄオーディオ情報の処理は、オンラインで処理してもよく、又は任意選択的に外部コンピュータ若しくは記憶装置６０４に転送して、オフラインで処理してもよい。本開示の一実施形態例によれば、３Ｄオーディオ情報の処理は、オーディオ信号を解析して、方向性情報を抽出することを含み得る。説明のための一例として、３Ｄレコーダは、道路脇で話している２人の人のシーンの記録に使用されており、マイクロホンが道路と人々との間に位置決めされると考える。推定上、全てのマイクロホンチャネルが会話を捕捉するが、話している人々に最も近いダイアフラムに関連付けられたチャネルは、より大きな振幅の信号レベルを有することになる可能性が高く、したがって、マイクロホンの位置に相対する会話の方向性情報を提供し得る。ここで、車が通りを走ると仮定する。車が動くにつれて、音響は、車に向けられたマイクロホンダイアフラムに関連付けられた１つのチャネルで優勢であり得るが、優勢信号は、チャネルからチャネルに移り、ここでも、時間に関する車の位置についての方向性情報を提供し得る。本開示の一実施形態例によれば、複数ダイアフラム情報を上述したように使用して、マルチチャネルオーディオに方向性情報を符号化し得る。方法１８００は、ブロック１８１０後、ブロック１８１２において終了することができ、ブロック１８１２において、処理済みの３Ｄ情報を複数のオーディオチャネルに符号化し得る。
【００８７】
多次元オーディオを記録する別の方法について、特定の図を参照して以下に考察する。本開示の一実施形態例によれば、３Ｄマイクロホンを使用して記録された信号は、適切で自然な方向性を有する、それ以上の処理が必要ない十分な品質のものであり得る。しかし、別の実施形態例によれば、３Ｄマイクロホンは、意図される再生システム内のスピーカの数よりも多数又は少数のダイアフラムを有し得、したがって、オーディオチャネルは、意図されるスピーカレイアウトに対応するチャネルにマッピングし得る。さらに、高品質の専用マイクロホンを使用する従来の録音技法が必要な状況では、３Ｄマイクロホンは主に、３Ｄ−ＥＡソニック方向性情報を抽出するために利用し得る。そのような情報を使用して、方向性情報を、３Ｄマイクロホンなしで録音された可能性がある他のチャネルに符号化し得る。状況によっては、３Ｄ音響情報の処理は、３Ｄマイクロホン信号だけではソニック方向性を特定することができない場合、手動入力を保証し得る。ビデオフレーム内の物体又は人物の相対位置に基づいて、方向性情報をマルチチャネルオーディオに符号化することが望ましい他の状況も考えられる。したがって、処理及び符号化の方法は、マルチチャネルオーディオを手動又は自動で処理することの提供を含む。
【００８８】
本開示の特定の実施形態によれば、録音環境内の異なる方向から発せられる音響は、複数の受信要素を有する３Ｄマイクロホンを使用して捕捉して記録し得、各受信要素は、３Ｄマイクロホンの向きに相対して特定の方向から優勢的にやって来る音響を優先的に捕捉するように向け得る。実施形態例によれば、３Ｄマイクロホンは、３つ以上の方向性受信要素を含み得、各要素は、所定の空間方向から来る音響を受信するように向け得る。本開示の実施形態によれば、方向受信要素によって選択的に受信される音響は、３Ｄ音響レコーダの別個の記録チャネルに記録し得る。
【００８９】
一実施形態例によれば、３Ｄレコーダは、時間コードを少なくとも１つのチャネルに記録し得る。一実施形態では、時間コードは、ＳＭＴＰＥ又は他の業界標準フォーマットを含み得る。別の実施形態では、時間コードは、他の装置との同期を可能にする相対タイムスタンプ情報を含み得る。一実施形態例によれば、時間コードは、３Ｄレコーダの少なくとも１つのチャネルに記録し得、時間コードは少なくとも１つのビデオカメラに関連付け得る。
【００９０】
本開示の実施形態例によれば、３Ｄレコーダによって記録されるチャネルは、６．０又は６．１等の所定のスピーカレイアウトに対応する出力パスにマッピングし得るか、又は向け得る。特定の実施形態では、記録されたチャネルは、６つのスピーカに対応する出力パスにマッピングし得るか、又は向け得る。特定の実施形態例では、記録されたチャネルは、ビデオフレーム内の物体の相対位置に対応する出力チャネルに向け得る。
【００９１】
３Ｄ−ＥＡシステムを較正する方法例
図１９は、本開示の一実施形態例による、３Ｄオーディオシステム１００をセットアップし較正する方法１９００を示す。ブロック１９０２において開始され、無線又は有線で較正マイクロホン１０８を３Ｄオーディオコンバータ／アンプに接続し得る。本開示の一実施形態例によれば、較正マイクロホン１０８は、１つ又は複数の方向性高感度ダイアフラムを含み得、したがって、上述した３Ｄマイクロホン１０８、６１０と同様又は同一であり得る。特定の実施形態では、単一の全方向性マイクロホンを利用することができる。方法はブロック１９０４に続き、スピーカ１１０〜１２０は対応する出力端子２３２に接続される。任意選択的に、スピーカのうちの１つ又は複数が無線である場合、無線スピーカの送信器２５０と通信することができる。３Ｄオーディオコンバータ／アンプ電力のセットアップモードは、手動で入力してもよく、又は較正マイクロホンの存在に基づいて自動的に入力してもよい。セットアップ／較正方法はブロック１９０６に続き、本開示の一実施形態例によれば、較正マイクロホンは、３Ｄオーディオコンバータアンプ内の較正トーン生成器２４０によって生成され、スピーカ１１０〜１２０を通して出力される空間トーンの相対位相及び振幅を測定し得る。較正トーン生成器２４０によって生成されるトーンは、インパルス、チャープ、ホワイトノイズ、ピンクノイズ、震音、変調トーン、位相シフトトーン、及びマルチトーンを含み得、スピーカの配置又は較正マイクロホンの配置を調整するようにユーザに指示する可聴プロンプトを与え得る自動プログラムで生成し得る。
【００９２】
方法１９００はブロック１９０８に続き、本開示の一実施形態例によれば、較正マイクロホン１０８、６１０によって測定される信号は、部屋及びスピーカの音響を正規化するために、フィルタリング、遅延、振幅、及びルーティング等を含むシステム１００又は装置３００のパラメータを設定するためのフィードバックとして使用し得る。方法はブロック１９１０に続き、較正プロセスはブロック１９０６にループバックして、追加のパラメータ、残りのスピーカ、又は較正マイクロホン１０８、６１０の配置をセットアップすることができる。較正手順を通してのループは、システムが３Ｄ−ＥＡリスニングスフィア又はドーム５１２を適宜セットアップすることができるように、例えば、「較正マイクロホンを約２フィート（約６１ｃｍ）左に動かし、次にｅｎｔｅｒを押す」という可聴又は可視のプロンプトによって達成し得る。その他の場合、全ての較正手順が完了したとき、方法はブロック１９１２に続き得、較正プロセス中に計算される様々な較正パラメータは、不揮発性メモリ２５２に記憶して、システムが続けて電源投入される都度、自動的に呼び出されてセットアップし得、それにより、較正が必要なのは、システムが最初に部屋でセットアップされる場合、ユーザが３Ｄ−ＥＡリスニングスフィア若しくはドーム５１２の直径を変更したい場合、他の専用パラメータが、本開示の他の実施形態によりセットアップされる場合のみである。方法１９００は、ブロック１９１４後に終了することができる。
【００９３】
３Ｄ−ＥＡシステムに関連付けられたスピーカを初期化し、且つ／又は較正する追加の方法について、以下に更に説明する。
【００９４】
本開示の一実施形態例によれば、３Ｄオーディオコンバータ／アンプを再生に利用する方法２０００を図２０に示す。ブロック２００２において開始され、入力装置（オーディオソース、ビデオソース）を、３Ｄオーディオコンバータ／アンプ１０２の入力端子に接続し得る。次に、ブロック２００３において、システムは任意選択的に、図１９のフローチャートを参照して上述したように較正することができる。例えば、システムが部屋について前に較正されていた場合、様々な事前計算されたパラメータを不揮発性メモリ２５２から読み出し得、較正は必要ないことがある。方法２０００はブロック２００４に続き、入力端子は、手動で、又は端子への入力を検出することによって自動的に選択される。次に、方法２００は、判断ブロック２００６に続き得、オーディオの復号化について判断することができる。端子選択デコーダＡ／Ｄ２１４モジュールが、選択された入力オーディオが符号化されていることを検出する場合、ブロック２００８に示されるように、オーディオを復号化し得る。一実施形態例によれば、ブロック１００８での復号化は、例えば、別個にルーティングし処理するために、シリアルデータストリームを幾つかの並列チャネルに分割することを含み得る。復号化後、端子選択デコーダＡ／Ｄ２１４モジュールは、ブロック２０１０においてアナログ信号をデジタル信号に変換するために使用することもできるが、復号化信号が既にデジタルフォーマットである場合、このＡ／Ｄブロックは迂回し得る。判断ブロック２００６において、オーディオが、符号化がない一般アナログステレオオーディオであると判断される場合、方法はブロック２０１２に進み得、マルチチャネルＡ／Ｄコンバータを介してアナログ信号をデジタルに変換し得る。一実施形態例によれば、方法はブロック２０１０又はブロック２０１２からブロック２０１６に進むことができ、マルチチャネルバス２４２及びサミング／ミキシング／ルーティングノード２４４と通信する入力スプリッタ／ルータモジュール２１６により、ルーティング機能を制御し得る。本開示の複数の実施形態例によれば、ブロック２０１６後、信号のルーティング及び結合の任意の数の独自の組み合わせをオーディオマイクロプロセッサ２１２によって提供し得る。ルーティング及び結合は、ブロック２０１８〜２０２６のうちの任意若しくは全てからのデジタル信号の処理を含んでもよく、又は含まなくてもよい。例えば、オーディオの複数のチャネルは全て、レベリングアンプ５１８及び高速レベル制御を用いるマルチチャネルプリアンプを通してルーティングし得るが、チャネルの幾つかは、クロスオーバ２２０及び／又は遅延モジュール２２２を通してルーティングすることもできる。他の実施形態例では、全てのチャネルは、全てのモジュール２１８〜２２６を通してルーティングし得る（図２０のブロック２０１８〜２０２６に対応する）が、特定のチャネルのみをモジュールによって処理し得る。
【００９５】
本開示の一実施形態例によれば、ブロック２０１４は、オーディファイルと対にし得るビデオ情報を示す。
【００９６】
信号処理後、方法２０００はＤ／Ａブロック２０２８に続き、更にルーティングする前に、デジタル信号をアナログに変換し得る。方法はブロック２０３０に続き得、アナログ信号は、プリアンプ、ソリッドステートプリアンプ、又はソリッドステートとプリアンプとの混合によって事前増幅することができる。一実施形態例によれば、ブロック２０３０の出力事前増幅を迂回することもできる。次に、事前増幅されるか、又は迂回された信号は、ブロック２０３２に示されるように、１つ又は複数のパスに続き得る。一実施形態例では、信号は、出力端子に送信する前に、マルチチャネル出力アンプ２３０によって出力増幅し得る。一実施形態例によれば、マルチチャネル出力アンプは、６以上の電力アンプを含み得る。別の実施形態例によれば、信号は、出力端子にルーティングされる前に、出力段２４８によって出力増幅し得る。更に別の実施形態例では、信号は、マルチチャネル無線送信器２５０に送信して、無線スピーカに送信し得る。この実施形態では、ラインレベル信号を無線送信器に送信することができ、プリアンプ２４６の暖かさをなお、無線スピーカ内の別個のアンプにルーティングされる信号に利用し得る。別の実施形態例によれば、ブロック２０３２を参照して、無線出力、チューブ出力、ソリッドステート出力、並びに無線出力、チューブ出力、及びソリッドステート出力の組み合わせを含め、上述した出力パスの任意の組み合わせを提供することができる。図２０の方法はブロック２０３４において終了するが、方法が動的なものであり、システムが動作するにつれて、特にブロック２０１６からブロック２０２８まで連続して繰り返し得ることを理解されたい。
【００９７】
３次元リスニング環境での音響の見掛けのローカリゼーションを制御する追加の方法について、以下に更に説明する。
【００９８】
本開示の一実施形態例によれば、３Ｄ−ＥＡ再生で利用されるスピーカ又はトランスデューサは、ヘッドフォン内に搭載し得、１つ又は複数の有線又は無線接続を介して３Ｄオーディオコンバータ／アンプ１０２と通信し得る。別の実施形態例によれば、３Ｄヘッドフォンは、３Ｄオーディオコンバータ／アンプ１０２とインタフェースするか、又は他のオーディオソースと他の様式でインタフェースし得る。例えば、３Ｄヘッドフォンは、１つ又は複数の有線又は無線接続を介して３Ｄオーディオコンバータ／アンプ１０２に接続し得る。オーディオ信号を３Ｄオーディオコンバータ／アンプ１０２から３Ｄヘッドフォンに送信する無線情報は、無線スピーカ５４８の送信器を含み得る。別の実施形態によれば、多導体出力ジャックを出力端子２３２内に含め、別個のアンプが必要なくてよいように、増幅オーディオをヘッドフォンに提供し得る。
【００９９】
３Ｄ音響再生システム内の複数のスピーカを初期化又は較正する別例としての方法２１００を図２１に示す。本開示の一実施形態例によれば、方法２１００はブロック２１０２において開始され、１つ又は複数の較正マイクロホンを聴き手位置の近傍に位置決めすることを含む。ブロック２１０４において、方法２１００は、較正トーンを生成することを含む。ブロック２１０６において、方法２１００は、複数のスピーカのうちの１つ又は複数に較正トーンを選択的にルーティングすることを含む。方法２１００はブロック２１０８に続き、このブロックは、生成された較正トーンに基づいて、複数のスピーカから可聴トーンを生成することを含む。ブロック２１１０において、方法２１００は、１つ又は複数の較正マイクロホンを用いて、複数のスピーカからの可聴トーンを検知することを含む。ブロック２１１２において、方法２１００は、可聴トーンの検知に基づいて、複数のスピーカに関連付けられた１つ又は複数のパラメータを決定することを含む。ブロック２１１４において、方法２１００は、１つ又は複数の決定されたパラメータに基づいて、３Ｄ音響再生システムの設定を変更することを含む。ブロック２１１４後、方法２１００は終了する。
【０１００】
三次元リスニング環境での音響の見掛けのロケーションを制御する、一例としての方法２２００を図２２に示す。本開示の一実施形態例によれば、方法２２００はブロック２２０２において開始され、１つ又は複数のオーディオチャネルを受信することを含む。ブロック２２０４において、方法は、１つ又は複数のオーディオチャネルに関連付けられた復号化データを受信することを含む。ブロック２２０６において、方法は、１つ又は複数のオーディオチャネルを複数の処理チャネルにルーティングすることを含む。ブロック２２０８において、方法は、少なくとも部分的に、受信した復号化データに基づいて、複数の処理チャネルに関連付けられたオーディオを選択的に処理することを含む。ブロック２２１０において、方法は、処理されたオーディオを複数のスピーカに出力することを含む。ブロック２２１０後、方法２２００は終了する。
【０１０１】
特定の実施形態において、多次元オーディオを記録する、別例としての方法２３００を提供することができる。方法２３００はブロック２３０２において開始し得、このブロックは、所定の空間方向に関して三次元（３Ｄ）マイクロホンを向けることを含む。方法２３００はブロック２３０４に続き、このブロックは、方向性受信要素に対応する１つ又は複数の方向から音響を選択的に受信することを含む。方法２３００はブロック２３０６に続き、このブロックは、複数の記録チャネルを有する３Ｄレコーダに、選択的に受信した音響を記録することを含む。方法２３００はブロック２３０８に続き、このブロックは、時間コードを３Ｄレコーダの少なくとも１つのチャネルに記録することを含む。そして、方法２３００はブロック２３１０に続き、このブロックは、記録されたチャネルを複数の出力チャネルにマッピングすることを含む。次に、方法２３００は終了し得る。
【０１０２】
本開示の実施形態例によれば、３Ｄオーディオコンバータ／アンプ１０２は、１つ又は複数のリモート制御装置、１つ又は複数の無線マイクロホン、並びに１つ又は複数の無線又はリモートスピーカ又はスピーカ受信器及び増幅モジュールと無線で通信するための１つ又は複数のリモート制御受信器、送信器、及び／又は送受信器を含み得る。一実施形態例では、無線又はリモートスピーカ受信器及び増幅モジュールは、３Ｄ−ＥＡ信号を無線送信器２５０から受信することができ、無線送信器２５０は、Bluetooth等の無線周波送信機能を含み得る。別の実施形態例では、無線送信器５４８は、無線スピーカ又はモジュールと通信する赤外線（光学）送信機能を含み得る。更に別の実施形態例では、電源５０２は、出力Ｄ／Ａコンバータ２２８又はプリアンプ２４６と通信して、部屋又は施設内の既存の配電線を利用して、オーディオ信号をリモートスピーカに送信する、Ｘ１０モジュール２５４等の送信器を含み得、リモートスピーカは、対応するＸ１０受信器及びアンプを有し得る。
【０１０３】
一実施形態例では、無線又は有線リモート制御装置は、３Ｄオーディオコンバータ／アンプ１０２と通信し得る。一実施形態例では、無線又は有線リモート制御装置は、３Ｄオーディオコンバータ／アンプ１０２と通信して、例えば、スピーカ較正のセットアップ、音量の調整、部屋内の３Ｄ−ＥＡ音響のイコライズのセットアップ、オーディオソースの選択、又は再生モードの選択を行い得る。別の実施形態例では、無線又は有線リモート制御装置は、３Ｄオーディオコンバータ／アンプ１０２と通信して、部屋拡張特徴（room expander feature）のセットアップ又は３Ｄ−ＥＡリスニングスフィア若しくはドーム５１２のサイズの調整を行い得る。別の実施形態例では、無線又は有線リモート制御装置は、スピーカ較正を設定する１つ又は複数のマイクロホンを含み得る。
【０１０４】
添付図に関して示され説明される方法の構成及び編成は、単なる例として示され、他の構成及び編成のシステムモジュールが、本開示の他の実施形態により存在することができる。
【０１０５】
一実施形態例によれば、本開示は、コンピュータゲーム及び家庭用途に向けて特に設計し得る。別の実施形態例によれば、本開示は、映画館及びコンサートホール等の専門的なオーディオ用途に向けて設計し得る。
【０１０６】
本開示の実施形態は、聴き手等に有益であり得る様々な技術的効果を提供することができる。本開示の一実施形態の一態様では、システム例及び方法例は、正確に較正される場合、ステレオ及び／又はサラウンド音響として約２倍大きく（＋６ｄＢ）鳴らすことができ、また約１／６（＋１ｄＢ）だけ大きくなり得る。
【０１０７】
本開示の一実施形態の別の態様では、システム例及び方法例は、従来のステレオ又はサラウンド音響と比較して、音が約１／６大きいことがあり得るにもかかわらず、壁、床、及び天井の音の貫通度を低減し得る。このようにして、改良された音響システムを、リスニング環境外の人々が相対的な静かさを享受したいことがあるアパート、ホテル、マンション、マルチプレックスシアター、及び家庭に提供することができる。
【０１０８】
本開示の一実施形態の別の態様では、システム例及び方法例は、標準の従来のステレオ音響フォーマットを用いて動作することができる。
【０１０９】
本開示の一実施形態の別の態様では、システム例及び方法例は、ラジオ、テレビ、ケーブル、衛星ラジオ、デジタルラジオ、ＣＤ、ＤＶＤ、ＤＶＲ、ビデオゲーム、カセット、レコード、ブルーレイを含むが、これらに限定されない様々な従来の音響ソースを用いて動作することができる。
【０１１０】
本開示の一実施形態の別の態様では、システム例及び方法例は、３Ｄ移動の感覚を生み出すように位相を変更し得る。
【０１１１】
データファイルを作成する方法例
７００等のコントローラインタフェース構成要素装置を使用する方法の一例を図２４に示す。方法２４００はブロック２４１０において開始され、オーディオデータが受信される。
【０１１２】
ブロック２４１０の後にブロック２４２０が続き、ソニック空間データが受信される。
【０１１３】
ブロック２４２０の後にブロック２４３０が続き、オーディオデータ及びソニック空間データは、少なくとも１つの時間コードと結合される。
【０１１４】
図２５は、本開示の一実施形態による、音響ファイルを記録する方法例のフローチャートを示す。ソニック空間データ（ＳＳＤ）を使用して、ユーザは、他のオーディオ信号を有する音響ファイルを記録することができるか、又は他の様式で３Ｄ音響記録フォーマットファイルを生成することができる。方法２５００はブロック２５１０において開始することができ、オーディオ信号が受信される。例えば、オーディオ信号は、モノ信号又はステレオ信号であることができる。特定の場合、オーディオ信号は、データ記憶装置若しくはオーディオファイルに記憶された、予め記録されるモノ又はステレオ信号であってもよく、又はオーディオソースから受信されるライブ若しくは他の様式で遅延されたモノ若しくはステレオ信号であることができる。図２５の実施形態では、図３の３００と同様の３Ｄオーディオ再生ユニット又はインタフェースコントローラを使用して、オーディオ信号を受信することができる。特定の実施形態では、ユニット３００又はインタフェースコントローラは、オーディオ信号を記憶して、続けて再生又は処理することができる。
【０１１５】
ブロック２５１０の後にブロック２５２０が続き、ソニック空間データが受信される。例えば、ソニック空間データは、図４のリスニング環境４００又は図５のリスニング環境５００に示されるスピーカ配置での６つのスピーカそれぞれに１つずつ、６つの音量レベル及び６つの遅延レベルを含むが、これらに限定されない１２のデータ点を含むことができる。特定の実施形態では、６．１オーディオ出力の場合、サブチャネルを合算して、ソニック空間データの別のデータ点として使用することができる。図２５の実施形態では、図３の３００と同様の３Ｄオーディオ再生ユニット又はインタフェースコントローラを使用して、ソニック空間データを受信することができる。ユニット３００又はインタフェースコントローラは、図８〜図１４の８００と同様の１つ又は複数の入力制御装置又はフットペダルと通信し得、入力制御装置又はフットペダルは、ソニック空間データに関する１つ又は複数のユーザ入力を受信し得る。特定の実施形態では、ユニット３００又はインタフェースコントローラは、ソニック空間データを記憶し、続けて再生又は処理することができる。
【０１１６】
ブロック２５２０の後にブロック２５３０が続き、ソニック空間データにオーディオ信号が関連付けられ、ソニック空間データに更に時間コードが関連付けられる。図２５の実施形態では、図３の３００と同様の３Ｄオーディオ再生ユニット又はインタフェースコントローラは、ソニック空間データにオーディオ信号に関連付けることができる。さらに、ユニット３００又はインタフェースコントローラは、ソニック空間データに時間コードを関連付けることができる。いずれの場合でも、ユニット３００又はインタフェースコントローラを使用して、１２のデータ点のうちの幾つか又は全てを独立して、リアルタイムで制御し調整することができる。
【０１１７】
ブロック２５３０の後にブロック２５４０が続き、ファイルが生成されて、ソニック空間データ、オーディオ信号、及び時間コードを記憶する。図２５の実施形態では、図１５の３００と同様の３Ｄオーディオ再生ユニット又はインタフェースコントローラは、ファイルを生成して、ソニック空間データ、オーディオ信号、及び時間コードを記憶することができる。
【０１１８】
一実施形態では、図３の３００と同様の３Ｄオーディオ再生ユニットの１つ若しくは複数のチャネル又はインタフェースコントローラは、オーディオデータファイル、空間データファイル、符号化オーディオファイル、３Ｄ−ＥＡオーディオ出力ファイル、又は同様のファイルを、それぞれ予め割り当てられたプリセットボタンを通して再生又は他の様式で記録することができる。
【０１１９】
一実施形態では、オーディオデータファイル、空間データファイル、符号化オーディオファイル、又は３Ｄ−ＥＡオーディオ出力ファイルは、相互交換可能であり、記録可能であり、再生可能であり、且つ保存可能であることができる。
【０１２０】
入力装置を使用する方法例
図２６は、本開示の一実施形態による、ソニック空間データを制御し記憶する方法例のフローチャートを示す。方法２６００はブロック２６１０において開始することができ、Ｘ軸、Ｙ軸、及び／又はＺ軸制御機構を使用する入力制御装置を提供することができる。例えば、図８〜図１４に示される８００等の入力制御装置を提供することができる。
【０１２１】
ブロック２６１０の後にブロック２６２０が続き、Ｘ軸、Ｙ軸、及びＺ軸制御機構の入力コマンドを受信することができる。例えば、ユーザは、入力制御装置８００を操作して、Ｘ軸、Ｙ軸、及び／又はＺ軸についてのコマンドを入力することができる。
【０１２２】
ブロック２６２０の後にブロック２６３０が続き、対応するＸ軸、Ｙ軸、及び／又はＺ軸ソニック空間データを記憶することができる。例えば、入力制御装置８００は、ユーザからのＸ軸入力、Ｙ軸入力、及び／又はＺ軸入力を記憶することができ、入力制御装置８００及び／又は関連付けられたコンピュータ実行可能命令は、入力を対応するソニック空間データに変換することができる。
【０１２３】
本開示の実施形態例によれば、３Ｄオーディオコンバータ／アンプ３００は、１つ又は複数のリモート制御装置、１つ又は複数の無線マイクロホン、並びに１つ又は複数の無線又はリモートスピーカ又はスピーカ受信器及び増幅モジュールと無線で通信するための１つ又は複数のリモート制御受信器、送信器、及び／又は送受信器を含み得る。一実施形態例では、無線又はリモートスピーカ受信器及び増幅モジュールは、３Ｄ−ＥＡ信号を無線送信器２５０から受信することができ、無線送信器２５０は、Bluetooth等の無線周波送信機能を含み得る。別の実施形態例では、無線送信器２５０は、無線スピーカ又はモジュールと通信する赤外線（光学）送信機能を含み得る。更に別の実施形態例では、電源２０２は、出力Ｄ／Ａコンバータ２２８又はプリアンプ２４６と通信して、部屋又は施設内の既存の配電線を利用して、オーディオ信号をリモートスピーカに送信する、Ｘ１０モジュール２５４等の送信器を含み得、リモートスピーカは、対応するＸ１０受信器及びアンプを有し得る。
【０１２４】
一実施形態例では、無線又は有線リモート制御装置は、３Ｄオーディオコンバータ／アンプ１０２と通信し得る。一実施形態例では、無線又は有線リモート制御装置は、３Ｄオーディオコンバータ／アンプ１０２と通信して、例えば、スピーカ較正のセットアップ、音量の調整、部屋内の３Ｄ−ＥＡ音響のイコライズのセットアップ、オーディオソースの選択、又は再生モードの選択を行い得る。別の実施形態例では、無線又は有線リモート制御装置は、３Ｄオーディオコンバータ／アンプ１０２と通信して、部屋拡張特徴のセットアップ又は３Ｄ−ＥＡリスニングスフィア若しくはドーム５１２のサイズの調整を行い得る。別の実施形態例では、無線又は有線リモート制御装置は、スピーカ較正を設定する１つ又は複数のマイクロホンを含み得る。
【０１２５】
開示の他の実施形態
少なくとも１つの実施形態によれば、三次元オーディオ音響を再生する方法は、モノオーディオ信号を受信することと、モノオーディオ信号を６チャネル信号に変換することとを含むことができ、６チャネル信号は、３Ｄ−ＥＡスピーカアレイにわたって再生され、３Ｄ−ＥＡスピーカアレイは、聴き手を中心としたドーム形リスニング環境に役立つ。
【０１２６】
本実施形態の少なくとも１つの態様では、変換することは、３Ｄ−ＥＡスピーカアレイ内の６つのスピーカのうちの少なくとも１つに出力される６チャネル信号に関連付けられた音量及び／又は遅延を変更することを含む。
【０１２７】
本実施形態の少なくとも１つの態様では、変換することは、ソニック空間データを受信することと、少なくとも部分的にソニック空間データに基づいて、６チャネル信号に関連付けられた音量及び／又は遅延を変更することとを含む。
【０１２８】
本実施形態の少なくとも１つの態様では、ソニック空間データはテーブル又は空間データファイルに記憶される。
【０１２９】
本実施形態の少なくとも１つの態様では、ソニック空間データは、タッチスクリーン装置又は入力制御装置への１つ又は複数のユーザ入力から受信される。
【０１３０】
本実施形態の少なくとも１つの態様では、ソニック空間データは、予め定義されるソニック空間マップを含むリスニング環境への遅延又は音量調整を含む。
【０１３１】
本実施形態の少なくとも１つの態様では、３Ｄ−ＥＡスピーカアレイは、聴き手に対して前方左位置にある、６つのスピーカのうちの少なくとも１つと、聴き手に対して前方右位置にある、６つのスピーカのうちの少なくとも１つと、聴き手に対して後方左位置にある、６つのスピーカのうちの少なくとも１つと、聴き手に対して後方右位置にある、６つのスピーカのうちの少なくとも１つと、聴き手に対して前方上位置にある、６つのスピーカのうちの少なくとも１つと、聴き手に対して後方上位置にある、６つのスピーカのうちの少なくとも１つとを含む。
【０１３２】
少なくとも１つの実施形態によれば、三次元オーディオ音響を再生するシステムは、モノオーディオ信号を受信するように動作可能な少なくとも１つの入力モジュールと、モノオーディオ信号を６チャネル信号に変換するように動作可能な少なくとも１つの処理モジュールとを含むことができ、６チャネル信号は、３Ｄ−ＥＡスピーカアレイにわたって再生され、３Ｄ−ＥＡスピーカアレイは、聴き手の周囲のドーム形リスニング環境に役立つ。
【０１３３】
本実施形態の少なくとも１つの態様では、変換することは、３Ｄ−ＥＡスピーカアレイ内の６つのスピーカのうちの少なくとも１つに出力する６チャネル信号に関連付けられた音量及び／又は遅延を変更することを含む。
【０１３４】
本実施形態の少なくとも１つの態様では、少なくとも１つの処理モジュールは、ソニック空間データを受信することと、少なくとも部分的にソニック空間データに基づいて、６チャネル信号に関連付けられた音量及び／又は遅延を変更するように更に動作可能である。
【０１３５】
本実施形態の少なくとも１つの態様では、ソニック空間データは、テーブル又は空間データファイルに記憶される。
【０１３６】
本実施形態の少なくとも１つの態様では、ソニック空間データは、タッチスクリーン装置又は入力制御装置への１つ又は複数のユーザ入力から受信される。
【０１３７】
本実施形態の少なくとも１つの態様では、ソニック空間データは、予め定義されるソニック空間マップを含むリスニング環境への遅延又は音量調整を含む。
【０１３８】
本実施形態の少なくとも１つの態様では、３Ｄ−ＥＡスピーカアレイのうちの少なくとも１つは、聴き手に対して前方左位置にあり、３Ｄ−ＥＡスピーカアレイのうちの少なくとも１つは、聴き手に対して前方右位置にあり、３Ｄ−ＥＡスピーカアレイのうちの少なくとも１つは、聴き手に対して後方左位置にあり、３Ｄ−ＥＡスピーカアレイのうちの少なくとも１つは、聴き手に対して後方右位置にあり、３Ｄ−ＥＡスピーカアレイのうちの少なくとも１つは、聴き手に対して前方上位置にあり、３Ｄ−ＥＡスピーカアレイのうちの少なくとも１つは、聴き手に対して後方上位置にある。
【０１３９】
少なくとも１つの実施形態によれば、コンピュータ実行可能命令を記憶した１つ又は複数のコンピュータ可読媒体であって、命令は、少なくとも１つのプロセッサによって実行されると、モノオーディオ信号を受信し、モノオーディオ信号を６チャネル信号に変換するように、少なくとも１つのプロセッサを構成し、６チャネル信号は、３Ｄ−ＥＡスピーカアレイにわたって再生され、３Ｄ−ＥＡスピーカアレイは、聴き手を中心としたドーム形リスニング環境に役立つ。
【０１４０】
本実施形態の少なくとも１つの態様では、コンピュータ実行可能命令は、ソニック空間データを受信し、少なくとも部分的にソニック空間データに基づいて、６チャネル信号に関連付けられた音量及び／又は遅延を変更するように、少なくとも１つのプロセッサを更に構成する。
【０１４１】
本実施形態の少なくとも１つの態様では、ソニック空間データはテーブル又は空間データファイルに記憶される。
【０１４２】
本実施形態の少なくとも１つの態様では、ソニック空間データは、タッチスクリーン装置又は入力制御装置への１つ又は複数のユーザ入力から受信される。
【０１４３】
本実施形態の少なくとも１つの態様では、ソニック空間データは、予め定義されるソニック空間マップを含むリスニング環境への遅延又は音量調整を含む。
【０１４４】
本実施形態の少なくとも１つの態様では、３Ｄ−ＥＡスピーカアレイは、聴き手に対して前方左位置にある、６つのスピーカのうちの少なくとも１つと、聴き手に対して前方右位置にある、６つのスピーカのうちの少なくとも１つと、聴き手に対して後方左位置にある、６つのスピーカのうちの少なくとも１つと、聴き手に対して後方右位置にある、６つのスピーカのうちの少なくとも１つと、聴き手に対して前方上位置にある、６つのスピーカのうちの少なくとも１つと、聴き手に対して後方上位置にある、６つのスピーカのうちの少なくとも１つとを含む。
【０１４５】
少なくとも１つの実施形態によれば、方法は、少なくとも１つのオーディオ信号を受信することと、ソニック空間データを受信することと、ソニック空間データに少なくとも１つの時間コードを関連付けることと、ソニック空間データ、少なくとも１つのオーディオ信号、及び時間コードを符号化音響ファイルに記憶することとを含むことができる。
【０１４６】
本実施形態の少なくとも１つの態様では、ソニック空間データに少なくとも１つのオーディオ信号を関連付けることは、ソニック空間データからＸ軸データ、Ｙ軸データ、又はＺ軸データを復号化することと、少なくとも部分的に、復号化されたＸ軸データ、Ｙ軸データ、又はＺ軸データに基づいて、少なくとも１つのオーディオ信号での遅延又は音量への調整を決定することとを更に含む。
【０１４７】
本実施形態の少なくとも１つの態様では、ソニック空間データは、Ｘ軸データ、Ｙ軸データ、又はＺ軸データを含み、ソニック空間データに少なくとも１つのオーディオ信号を関連付けることは、少なくとも部分的に、復号化されたＸ軸データ、Ｙ軸データ、又はＺ軸データに基づいて、少なくとも１つのオーディオ信号での遅延又は音量への調整を決定することを更に含む。
【０１４８】
本実施形態の少なくとも１つの態様では、少なくとも１つのオーディオ信号は複数のオーディオ信号又はチャネルを含み、ソニック空間データは、複数のオーディオ信号又はチャネルでの遅延及び音量への調整を決定するためのＸ軸データ、Ｙ軸データ、及びＺ軸データを含む。
【０１４９】
本実施形態の少なくとも１つの態様では、調整は、少なくとも部分的に、予め定義されるソニック空間マップに記憶される遅延又は音量の調整に基づく。
【０１５０】
本実施形態の少なくとも１つの態様では、調整は、少なくとも部分的に、予め定義されるソニック空間マップに記憶される遅延又は音量調整に基づく。
【０１５１】
少なくとも１つの実施形態によれば、システムは、コンピュータ実行可能命令を記憶するように動作可能なメモリと、コンピュータ実行可能命令を実行するように動作可能なプロセッサとを含むことができ、命令は、オーディオ信号を受信し、ソニック空間データを受信し、ソニック空間データにオーディオ信号を関連付け、オーディオ信号及びソニック空間データに時間コードを関連付け、ソニック空間データ、オーディオ信号、及び時間コードを符号化音響ファイルに記憶するように使用可能である。
【０１５２】
本実施形態の少なくとも１つの態様では、プロセッサは、ソニック空間データからＸ軸データ、Ｙ軸データ、又はＺ軸データを復号化し、少なくとも部分的に、復号化されたＸ軸データ、Ｙ軸データ、又はＺ軸データに基づいて、少なくとも１つのオーディオ信号での遅延又は音量への調整を決定するように動作可能なコンピュータ実行可能命令を実行するように更に動作可能である。
【０１５３】
本実施形態の少なくとも１つの態様では、ソニック空間データは、Ｘ軸データ、Ｙ軸データ、又はＺ軸データを含み、プロセッサは、少なくとも部分的に、Ｘ軸データ、Ｙ軸データ、又はＺ軸データに基づいて、少なくとも１つのオーディオ信号での遅延又は音量への調整を決定するように動作可能なコンピュータ実行可能命令を実行するように更に動作可能である。
【０１５４】
本実施形態の少なくとも１つの態様では、少なくとも１つのオーディオ信号は、複数のオーディオ信号又はチャネルを含み、ソニック空間データは、複数のオーディオ信号又はチャネルでの遅延及び音量への調整を決定するためのＸ軸データ、Ｙ軸データ、及びＺ軸データを含む。
【０１５５】
本実施形態の少なくとも１つの態様では、調整は、少なくとも部分的に、予め定義されるソニック空間マップに記憶される遅延又は音量調整に基づく。
【０１５６】
本実施形態の少なくとも１つの態様では、調整は、少なくとも部分的に、予め定義されるソニック空間マップに記憶される遅延又は音量調整に基づく。
【０１５７】
少なくとも１つの実施形態によれば、コンピュータ実行可能命令を記憶した１つ又は複数のコンピュータ可読媒体であって、命令は、少なくとも１つのプロセッサによって実行されると、少なくとも１つのオーディオ信号を受信し、ソニック空間データを受信し、ソニック空間データに少なくとも１つのオーディオ信号を関連付け、少なくとも１つのオーディオ信号及びソニック空間データに時間コードを関連付け、ソニック空間データ、少なくとも１つのオーディオ信号、及び時間コードを符号化音響ファイルに記憶するように、少なくとも１つのプロセッサを構成する。
【０１５８】
本実施形態の少なくとも１つの態様では、コンピュータ実行可能命令は、ソニック空間データからＸ軸データ、Ｙ軸データ、又はＺ軸データを復号化し、少なくとも部分的に、復号化されたＸ軸データ、Ｙ軸データ、又はＺ軸データに基づいて、少なくとも１つのオーディオ信号での遅延又は音量への調整を決定するように、少なくとも１つのプロセッサを更に構成する。
【０１５９】
本実施形態の少なくとも１つの態様では、ソニック空間データは、Ｘ軸データ、Ｙ軸データ、又はＺ軸データを含み、コンピュータ実行可能命令は、少なくとも部分的に、復号化されたＸ軸データ、Ｙ軸データ、又はＺ軸データに基づいて、少なくとも１つのオーディオ信号での遅延又は音量への調整を決定するように、少なくとも１つのプロセッサを更に構成する。
【０１６０】
本実施形態の少なくとも１つの態様では、少なくとも１つのオーディオ信号は、複数のオーディオ信号又はチャネルを含み、ソニック空間データは、複数のオーディオ信号又はチャネルでの遅延及び音量への調整を決定するためのＸ軸データ、Ｙ軸データ、及びＺ軸データを含む。
【０１６１】
本実施形態の少なくとも１つの態様では、調整は、少なくとも部分的に、予め定義されるソニック空間マップに記憶される遅延又は音量調整に基づく。
【０１６２】
本実施形態の少なくとも１つの態様では、調整は、少なくとも部分的に、予め定義されるソニック空間マップに記憶される遅延又は音量調整に基づく。
【０１６３】
本明細書に開示される方法は、単なる例としてのものであり、本開示の実施形態による他の方法は、本明細書に記載される方法例よりも少数又はより多数の要素又はステップ及びこれら又は他のステップの様々な組み合わせを含め、他の要素又はステップを含むことができる。
【０１６４】
上記説明は多くの詳細を含むが、これらの詳細は、本開示の範囲への限定として解釈されるべきではなく、開示される実施形態の単なる例示として解釈されたい。本開示の範囲内で、当業者は多くの他の可能な変形を考案するだろう。
【０１６５】
本開示は、本開示の実施形態例によるシステム、方法、装置、及び／又はコンピュータプログラム製品のブロック及び流れ図を参照して上述されている。ブロック図及び流れ図の１つ又は複数のブロック並びにブロック図及び流れ図内のブロックの組み合わせをそれぞれ、コンピュータ実行可能プログラム命令によって実施可能なことが理解されよう。同様に、ブロック図及び流れ図の幾つかのブロックは、必ずしも、提示される順序で実行される必要がないこともあれば、本開示の幾つかの実施形態により、全く実行する必要がないこともある。
【０１６６】
これらのコンピュータ実行可能プログラム命令は、汎用コンピュータ、専用コンピュータ、プロセッサ、又は他のプログラマブルデータ処理装置にロードして、コンピュータ、プロセッサ、又は他のプログラマブルデータ処理装置で実行される命令が、フローチャートの１つ又は複数のブロックにおいて指定される１つ又は複数の機能を実施する手段を生成するような特定のマシンを生成し得る。これらのコンピュータプログラム命令は、コンピュータ可読メモリに記憶することもでき、このメモリは、コンピュータ可読メモリに記憶された命令が、流れ図の１つ又は複数のブロックで指定される１つ又は複数の機能を実施する命令手段を含む製品を生成するような特定の様式で機能するように、コンピュータ又は他のプログラマブルデータ処理装置に指示することができる。一例として、本開示の実施形態は、コンピュータ可読プログラムコード又はプログラム命令が埋め込まれたコンピュータ使用可能媒体を含むコンピュータプログラム製品を提供し得、上記コンピュータ可読プログラムコードは、実行されて、流れ図の１つ又は複数のブロックで指定される１つ又は複数の機能を実施するように構成される。コンピュータプログラム命令は、コンピュータ又は他のプログラマブルデータ処理装置にロードして、一連の動作要素又はステップをコンピュータ又は他のプログラマブル装置で実行させて、コンピュータ又は他のプログラマブル装置で実行される命令が、流れ図の１つ又は複数のブロックで指定される機能を実施する要素又はステップを提供するようなコンピュータ実施プロセスを生成することもできる。
【０１６７】
したがって、ブロック図及び流れ図のブロックは、指定される機能を実行する手段の組み合わせ、指定された機能を実行する要素又はステップの組み合わせ、及び指定された機能を実行するプログラム命令手段をサポートする。ブロック図及び流れ図の各ブロック並びにブロック図及び流れ図でのブロックの組み合わせを、指定された機能、要素、若しくはステップを実行する専用ハードウェアベースコンピュータシステム又は専用ハードウェア及びコンピュータ命令の組み合わせによっても実施可能なことが理解されよう。
【０１６８】
特定の実施形態では、指定された機能、要素、又はステップの実行は、製品を別の状態又は物に変換することができる。例えば、本開示の実施形態例は、符号化オーディオ電子信号を時変音響圧レベルに変換する特定のシステム及び方法を提供することができる。本開示の実施形態例は、位置情報を方向性オーディオに変換する更なるシステム及び方法を提供することができる。
【０１６９】
本明細書に記載される本開示の多くの変更及び他の実施形態が、上記説明及び関連する図面に提示される教示を利用して明らかになろう。したがって、本開示が開示される特定の実施形態に限定されず、変更及び他の実施形態が添付の範囲内に含まれることが意図されることを理解されたい。本明細書では特定の用語が利用されるが、それらは、限定ではなく、一般的で記述的な意味でのみ使用されている。
【図１】
2019097204.tif 000003
【図２】
2019097204.tif 000004
【図３】
2019097204.tif 000005
【図４】
2019097204.tif 000006
【図５】
2019097204.tif 000007
【図６】
2019097204.tif 000008
【図７】
2019097204.tif 000009
【図８】
2019097204.tif 000010
【図９】
2019097204.tif 000011
【図１０】
2019097204.tif 000012
【図１１】
2019097204.tif 000013
【図１２】
2019097204.tif 000014
【図１３】
2019097204.tif 000015
【図１４】
2019097204.tif 000016
【図１５】
2019097204.tif 000017
【図１６】
2019097204.tif 000018
【図１７】
2019097204.tif 000019
【図１８】
2019097204.tif 000020
【図１９】
2019097204.tif 000021
【図２０】
2019097204.tif 000022
【図２１】
2019097204.tif 000023
【図２２】
2019097204.tif 000024
【図２３】
2019097204.tif 000025
【図２４】
2019097204.tif 000026
【図２５】
2019097204.tif 000027
【図２６】
2019097204.tif 000028
【手続補正書】
【提出日】平成31年3月20日(2019.3.20)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
少なくとも１つのメモリと通信する少なくとも１つのプロセッサであって、コンピュータ実行可能命令を実行するように動作可能な、少なくとも１つのプロセッサと、
入力装置であって、
予め定義されるリスニング環境でのソニック空間データに対応するユーザ入力を受け取り、
前記ユーザ入力を少なくとも１つのプロセッサに送信するように動作可能な、入力装置と、
を含み、
前記コンピュータ実行可能命令は、
前記ユーザ入力を受信し、
ソニック空間データ内の第１および第２のデータ点の少なくとも一方を独立して調整することにより、前記ユーザ入力を前記ソニック空間データに変換し、前記第１のデータ点のセットは複数の独立調整可能な音量レベルに対応し、前記第２のデータ点のセットは複数の独立調整可能な遅延レベルに対応し、
前記ソニック空間データに時間コードを関連付け、
前記ソニック空間データ、オーディオ信号、及び時間コードを記憶するように使用可能である、システム。
【請求項２】
前記コンピュータ実行可能命令は、
前記ソニック空間データ、オーディオ信号、及び時間コードを、記憶のために、３Ｄ−ＥＡオーディオ出力ファイルにフォーマットするように更に使用可能である、請求項１に記載のシステム。
【請求項３】
前記入力装置は、以下：フットペダル、ジョイスティック装置、手制御装置、光センサ、ジェスチャ制御装置、又は音声入力装置のうちの少なくとも１つを含む、請求項１に記載のシステム。
【請求項４】
前記ユーザ入力は、Ｘ軸座標データ、Ｙ軸座標データ、及びＺ軸座標データを含む、請求項１に記載のシステム。
【請求項５】
前記ユーザ入力をソニック空間データに変換するように動作可能な前記コンピュータ実行可能命令は、
前記オーディオ信号の音量又は遅延に対する少なくとも１つの調整を決定するように使用可能なコンピュータ実行可能命令を含む、請求項１に記載のシステム。
【請求項６】
入力装置を介してユーザ入力を受け取ることであって、前記ユーザ入力は、オーディオ信号に関連付けられたソニック空間データに対応するＸ軸方向又はＹ軸方向を示すことと、
前記入力装置を介して追加のユーザ入力を受け取ることであって、前記追加のユーザ入力は、オーディオ信号に関連付けられたソニック空間データに対応するＺ軸方向を示すことと、
ソニック空間データ内の第１および第２のデータ点の少なくとも一方を独立して調整することにより、前記受け取ったユーザ入力を前記ソニック空間データに変換することであって、前記第１のデータ点のセットは複数の独立調整可能な音量レベルに対応し、前記第２のデータ点のセットは複数の独立調整可能な遅延レベルに対応することと、
を含む、方法。
【請求項７】
前記ソニック空間データをオーディオ信号及び時間コードと共に３Ｄ−ＥＡオーディオ出力ファイルに記憶することをさらに含む、請求項６に記載の方法。
【請求項８】
前記ソニック空間データをオーディオ信号及び時間コードと共に、３Ｄ−ＥＡオーディオ出力ファイルに記録するために、フォーマットすることを更に含む、請求項６に記載の方法。
【請求項９】
前記入力装置は、支持ベースによって支持されるスティックに取り付けられるペダルを含み、更に、前記入力装置は、前記支持ベースに対して前記ペダルをスライドさせるように動作可能なスライド機構を含む、請求項６に記載の方法。
【請求項１０】
前記入力装置は、前記支持ベースに対する前記ペダルのスライドを制限するように動作可能なロック機構を含む、請求項９に記載の方法。
【請求項１１】
前記入力装置は、以下：フットペダル、ジョイスティック装置、光センサ、手制御装置、ジェスチャ制御装置、又は音声入力装置のうちの少なくとも１つを含む、請求項６に記載の方法。
【外国語明細書】
2019097204000001.pdf