(57)【要約】【課題】収録時の音場を容易に再現することができるようにする。【解決手段】音声入力部１１−１乃至１１−ｍからの出力に基づいて、収録環境で発生された音声のデータが取得される。また、このとき、音声入力部１１−１乃至１１−ｍのそれぞれの識別情報、位置、向き、タイプ、指向性、周波数特性、インピーダンス等の情報からなる音声入力部情報が取得される。例えば、収録環境を撮影した画像から、音声入力部１１−１乃至１１−ｍのそれぞれの識別情報、位置、向きが取得され、取得された識別情報に基づいて、あらかじめ用意されたテーブルが参照されることによって、音声入力部情報のうちの他の情報が取得される。取得された音声入力部情報は、音声データを再生するときに用いられる。本発明は、音声の収録装置と、収録された音声を再生する再生装置に適用することができる。【選択図】図２
2006261886.tif 000002
【特許請求の範囲】
【請求項１】
収録装置と再生装置からなる収録再生システムにおいて、
前記収録装置は、
収録に用いられるマイクロフォンの位置、向きを表す情報と、前記マイクロフォンの特性を表す情報とからなるマイクロフォン情報を取得する第１の取得手段と、
収録により得られた音声と、前記第１の取得手段により取得された前記マイクロフォン情報を併せて提供する提供手段と
を備え、
前記再生装置は、
再生対象とする音声のデータとともに、前記マイクロフォン情報を取得する第２の取得手段と、
再生対象とする前記音声のデータを、前記第２の取得手段により取得された前記マイクロフォン情報に基づいて編集し、再生させる再生制御手段と
を備えることを特徴とする収録再生システム。
【請求項２】
収録に用いられるマイクロフォンの位置、向きを表す情報と、前記マイクロフォンの特性を表す情報とからなるマイクロフォン情報を取得する取得手段と、
収録により得られた音声と、前記取得手段により取得された前記マイクロフォン情報を併せて提供する提供手段と
を備えることを特徴とする収録装置。
【請求項３】
前記取得手段は、前記マイクロフォン情報の取得を、収録が行われている間繰り返し行う
ことを特徴とする請求項２に記載の収録装置。
【請求項４】
前記取得手段は、さらに、取得した前記マイクロフォン情報に基づいて、前記マイクロフォンの収録可能範囲を、前記マイクロフォンが設置されている収録環境を表す画面上に表示させる
ことを特徴とする請求項２に記載の収録装置。
【請求項５】
収録に用いられるマイクロフォンの位置、向きを表す情報と、前記マイクロフォンの特性を表す情報とからなるマイクロフォン情報を取得する取得ステップと、
収録により得られた音声と、前記取得ステップの処理により取得された前記マイクロフォン情報を併せて提供する提供ステップと
を含むことを特徴とする収録方法。
【請求項６】
収録に用いられるマイクロフォンの位置、向きを表す情報と、前記マイクロフォンの特性を表す情報とからなるマイクロフォン情報を取得する取得ステップと、
収録により得られた音声と、前記取得ステップの処理により取得された前記マイクロフォン情報を併せて提供する提供ステップと
を含む処理をコンピュータに実行させるプログラム。
【請求項７】
再生対象とする音声のデータとともに、その音声の収録のときに取得された、収録に用いられたマイクロフォンの位置、向きを表す情報と、前記マイクロフォンの特性を表す情報とからなるマイクロフォン情報を取得する取得手段と、
再生対象とする前記音声のデータを、前記取得手段により取得された前記マイクロフォン情報に基づいて編集し、再生させる再生制御手段と
を備えることを特徴とする再生装置。
【請求項８】
再生対象とする音声のデータとともに、その音声の収録のときに取得された、収録に用いられたマイクロフォンの位置、向きを表す情報と、前記マイクロフォンの特性を表す情報とからなるマイクロフォン情報を取得する取得ステップと、
再生対象とする前記音声のデータを、前記取得ステップの処理により取得された前記マイクロフォン情報に基づいて編集し、再生させる再生制御ステップと
を含むことを特徴とする再生方法。
【請求項９】
再生対象とする音声のデータとともに、その音声の収録のときに取得された、収録に用いられたマイクロフォンの位置、向きを表す情報と、前記マイクロフォンの特性を表す情報とからなるマイクロフォン情報を取得する取得ステップと、
再生対象とする前記音声のデータを、前記取得ステップの処理により取得された前記マイクロフォン情報に基づいて編集し、再生させる再生制御ステップと
を含む処理をコンピュータに実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、収録再生システム、収録装置および方法、再生装置および方法、並びにプログラムに関し、特に、収録環境の音場を容易に再現することができるようにする収録再生システム、収録装置および方法、再生装置および方法、並びにプログラムに関する。
【背景技術】
【０００２】
従来より、映画館などにはマルチサラウンドスピーカが配置され、それにより、大型スクリーンに投影される映像に併せて、臨場感のあるサラウンド音声を再生することが可能となっていた。このようなサラウンド音声の再生は、比較的低価格なサラウンドシステムの普及に伴い、近年、一般家庭でも可能なものになりつつある。
【０００３】
現在、サラウンド音声の再生には５．１チャンネルのサラウンドシステムが用いられることが一般的である。５．１チャンネルのサラウンドシステムは、音声を再生する再生装置と、前方センター・前方左右・後方左右の５つのスピーカと重低音強調効果を出すサブウーファの計６つのスピーカとから構成される。これらの６つのスピーカを用いることにより、実際のスピーカの位置とは異なる位置に仮想的な音源を配置することができ、ステレオ出力よりも立体的で、臨場感のある音響環境を実現することが可能になっている。
【０００４】
ところで、サラウンド音声の再生を実現するためには、５．１チャンネルのサラウンドシステムに対応した音声データが必要である。例えば、「Mark of the Unicorn(MOTU)」から発売されているソフトウェアである「Digital Performer」（商標）や、「Apple Computer, Inc.」から発売されているソフトウェアである「Logic Pro」（商標）では、例えば、音声データの作成者は、収録された各トラックデータの仮想音源位置を２次元グラフィック上で設定することができ、これにより、５．１チャンネルの音声データを容易に作成することができる。
【０００５】
例えば、特許文献１には、映像とサラウンドシステムを組み合わせ、映像の動きに合わせて動的に音声データを生成し、映像に合わせたサラウンド音場を再現する技術が開示されている。
【特許文献１】特開２００２−３４５０９７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
従来の技術では、各トラックデータの仮想音源位置を、音声データの作成者、もしくは視聴者が入力しなければならず、煩雑であるという課題がある。
【０００７】
例えば、上述したようなソフトウェアにより、誰もが仮想音源位置を設定することが可能なユーザインタフェースが提供されているが、収録時のマイクの数が増加し、トラックデータが増えると、全トラックデータの仮想音源位置を設定するのは非常に手間のかかる作業となる。また、それらのソフトウェアを用いて仮想音源位置を設定することによって、ユーザは、自分の好みに合わせてサラウンド音場を自由に構築することができるというメリットはあるが、収録時のサラウンド音場を忠実に再現することは難しい。
【０００８】
一方、特許文献１のように、全天球状に複数のマイクロフォンを並べて収録することによって、仮想音源位置を自動的に計算するようにすることは可能であるが、この方法は、ライブやコンサートの収録のように、楽器ごとに複数のマイクロフォンを配置する必要がある状況などには不向きであり、ライブやコンサートのサラウンド再生を実現するためには、各マイクロフォンの位置を、例えば、音声データの作成者が手動で入力する必要がある。
【０００９】
また、マイクロフォンによって、種類、周波数特性、指向性、インピーダンスなどの特性が異なるため、これらの特性を仮想音源に反映させることは困難である。
【００１０】
本発明はこのような状況に鑑みてなされたものであり、収録環境の音場を、容易に再現することができるようにするものである。
【課題を解決するための手段】
【００１１】
本発明の収録再生システムは、収録装置と再生装置からなる収録再生システムであって、収録装置は、収録に用いられるマイクロフォンの位置、向きを表す情報と、マイクロフォンの特性を表す情報とからなるマイクロフォン情報を取得する第１の取得手段と、収録により得られた音声と、第１の取得手段により取得されたマイクロフォン情報を併せて提供する提供手段とを備え、再生装置は、再生対象とする音声のデータとともに、マイクロフォン情報を取得する第２の取得手段と、再生対象とする音声のデータを、第２の取得手段により取得されたマイクロフォン情報に基づいて編集し、再生させる再生制御手段とを備えることを特徴とする。
【００１２】
提供手段による提供には、ネットワークを介して行われる提供の他、記録媒体に記録させた形で行われる提供が含まれる。
【００１３】
本発明の収録装置は、収録に用いられるマイクロフォンの位置、向きを表す情報と、マイクロフォンの特性を表す情報とからなるマイクロフォン情報を取得する取得手段と、収録により得られた音声と、取得手段により取得されたマイクロフォン情報を併せて提供する提供手段とを備えることを特徴とする。
【００１４】
本発明の再生装置は、再生対象とする音声のデータとともに、その音声の収録のときに取得された、収録に用いられたマイクロフォンの位置、向きを表す情報と、マイクロフォンの特性を表す情報とからなるマイクロフォン情報を取得する取得手段と、再生対象とする音声のデータを、取得手段により取得されたマイクロフォン情報に基づいて編集し、再生させる再生制御手段とを備えることを特徴とする。
【００１５】
本発明の収録再生システムのうちの収録装置においては、収録に用いられるマイクロフォンの位置、向きを表す情報と、マイクロフォンの特性を表す情報とからなるマイクロフォン情報が取得され、収録により得られた音声と、取得されたマイクロフォン情報が併せて提供される。また、再生装置においては、再生対象とする音声のデータとともに、マイクロフォン情報が取得され、再生対象とする音声のデータが、取得されたマイクロフォン情報に基づいて編集され、再生が行われる。
【００１６】
本発明の収録装置においては、収録に用いられるマイクロフォンの位置、向きを表す情報と、マイクロフォンの特性を表す情報とからなるマイクロフォン情報が取得され、収録により得られた音声と、取得されたマイクロフォン情報が併せて提供される。
【００１７】
本発明の再生装置においては、再生対象とする音声のデータとともに、その音声の収録のときに取得された、収録に用いられたマイクロフォンの位置、向きを表す情報と、マイクロフォンの特性を表す情報とからなるマイクロフォン情報が取得され、再生対象とする音声のデータが、取得されたマイクロフォン情報に基づいて編集され、再生が行われる。
【発明の効果】
【００１８】
本発明によれば、収録環境の音場を、容易に再現することができる。
【発明を実施するための最良の形態】
【００１９】
以下に本発明の実施の形態を説明するが、本明細書に記載の発明と、発明の実施の形態との対応関係を例示すると、次のようになる。この記載は、請求項に記載されている発明をサポートする実施の形態が本明細書に記載されていることを確認するためのものである。従って、発明の実施の形態中には記載されているが、発明に対応するものとして、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その発明に対応するものではないことを意味するものではない。逆に、実施の形態が発明に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その発明以外の発明には対応しないものであることを意味するものでもない。
【００２０】
さらに、この記載は、本明細書に記載されている発明の全てを意味するものではない。換言すれば、この記載は、本明細書に記載されている発明であって、この出願では請求されていない発明の存在、すなわち、将来、分割出願されたり、補正により追加される発明の存在を否定するものではない。
【００２１】
請求項１に記載の収録再生システムは、収録装置と再生装置からなる収録再生システムであって、前記収録装置は、収録に用いられるマイクロフォン（例えば、図２の音声入力部１１−１乃至１１−ｍ）の位置、向きを表す情報と、前記マイクロフォンの特性を表す情報とからなるマイクロフォン情報（音声入力部情報）を取得する第１の取得手段（例えば、図２の音声入力部情報測定部１４）と、収録により得られた音声と、前記第１の取得手段により取得された前記マイクロフォン情報を併せて提供する提供手段（例えば、図２の登録制御部１６）とを備え、前記再生装置は、再生対象とする音声のデータとともに、前記マイクロフォン情報を取得する第２の取得手段（例えば、図５の通信部３１）と、再生対象とする前記音声のデータを、前記第２の取得手段により取得された前記マイクロフォン情報に基づいて編集し、再生させる再生制御手段（例えば、図５の音声データ編集部３４）とを備えることを特徴とする。
【００２２】
請求項２に記載の収録装置においても、各手段が対応する実施の形態（但し一例）は、請求項１に記載の収録再生システムを構成する収録装置と同様である。
【００２３】
請求項５に記載の収録方法は、収録に用いられるマイクロフォン（例えば、図２の音声入力部１１−１乃至１１−ｍ）の位置、向きを表す情報と、前記マイクロフォンの特性を表す情報とからなるマイクロフォン情報（音声入力部情報）を取得する取得ステップ（例えば、図３のステップＳ４）と、収録により得られた音声と、前記取得ステップの処理により取得された前記マイクロフォン情報を併せて提供する提供ステップ（例えば、図３のステップＳ７）とを含むことを特徴とする。
【００２４】
請求項６に記載のプログラムにおいても、各ステップが対応する実施の形態（但し一例）は、請求項５に記載の収録方法と同様である。
【００２５】
請求項７に記載の再生装置においても、各手段が対応する実施の形態（但し一例）は、請求項１に記載の収録再生システムを構成する再生装置と同様である。
【００２６】
請求項８に記載の再生方法は、再生対象とする音声のデータとともに、その音声の収録のときに取得された、収録に用いられたマイクロフォン（例えば、図２の音声入力部１１−１乃至１１−ｍ）の位置、向きを表す情報と、前記マイクロフォンの特性を表す情報とからなるマイクロフォン情報（音声入力部情報）を取得する取得ステップ（例えば、図６のステップＳ２２）と、再生対象とする前記音声のデータを、前記取得ステップの処理により取得された前記マイクロフォン情報に基づいて編集し、再生させる再生制御ステップ（例えば、図６のステップＳ２６）とを含むことを特徴とする。
【００２７】
請求項９に記載のプログラムにおいても、各ステップが対応する実施の形態（但し一例）は、請求項８に記載の再生方法と同様である。
【００２８】
以下、本発明の実施の形態について図を参照して説明する。
【００２９】
図１は、本発明の一実施形態に係る収録再生システムの構成例を示す図である。
【００３０】
図１に示すように、この録音・再生システムは、サラウンド音場収録装置１、サラウンド音場再生装置２、サラウンドデータ蓄積装置３が、通信網４を介して接続されることによって構成される。
【００３１】
サラウンド音場収録装置１は、複数のマイクロフォンを使用して収録環境内で発生する音を収録（集音）し、収録により得られたサラウンドデータを、通信網４を介してサラウンドデータ蓄積装置３にアップロードする。
【００３２】
サラウンド音場再生装置２は、サラウンドデータ蓄積装置３に蓄積されているサラウンドデータを通信網４を介してダウンロードし、得られたサラウンドデータを、再生環境に適した形で再生する。
【００３３】
例えば、５．１チャンネルに対応したホームシアターシステムの再生環境で再生する場合、サラウンド音場再生装置２は、サラウンドデータ蓄積装置３から取得したサラウンドデータのトラックを５．１チャンネルにミックスダウンして再生する。ミックスダウンとは、収録された複数のトラック（例えば、４８トラック）を、５．１チャンネルの再生環境の場合、６トラックに変換することである。
【００３４】
また、サラウンド音場再生装置２は、サラウンドデータの再生時に、それぞれのトラックの音量や定位、エフェクタなどを必要に応じて調節する。
【００３５】
なお、ここでは、サラウンド音場収録装置１で収録されたサラウンドデータは、サラウンドデータ蓄積装置３に一度蓄積され、その後、通信網４を介してサラウンド音場再生装置２に提供されるものとしたが、磁気テープ、CD(Compact Disk)、DVD(Digital Versatile Disc)、Blu-ray Disc（登録商標）等の記録媒体を介して、サラウンド音場収録装置１からサラウンド音場再生装置２に提供されるようにしてもよい。
【００３６】
サラウンドデータ蓄積装置３は、サラウンド音場収録装置１から通信網４を介して送信されてきたサラウンドデータを受信し、内蔵する記憶媒体に記憶（蓄積）させる。また、サラウンドデータ蓄積装置３は、記憶しているサラウンドデータを、通信網４を介して、所定のタイミングでサラウンド音場再生装置２に送信する。
【００３７】
このような装置からなる収録再生システムにおいては、後に詳述するように、音声の収録時に、音声データとともに、位置や向きなどの、収録に用いられたマイクロフォンの特性を表す特性情報がサラウンド音場収録装置１により自動的に収録される。
【００３８】
また、再生時には、再生対象とする音声データとともに提供されるマイクロフォンの特性情報をもとに、サラウンド音場再生装置２により音声データが編集され、再生環境に適した音声が出力される。これにより、収録環境と同じ音場が再現される。
【００３９】
次に、図１のサラウンド音場収録装置１とサラウンド音場再生装置２の構成と動作についてそれぞれ説明する。
【００４０】
はじめに、サラウンド音場収録装置１の構成と動作について説明する。
【００４１】
図２は、サラウンド音場収録装置１の機能構成例を示すブロック図である。
【００４２】
音声入力部１１−１乃至１１−ｍはマイクロフォンであり、周囲で発生され、集音した音の信号をオーディオインタフェース１２にそれぞれ出力する。音声入力部の数は収録対象によって任意に変更可能である。例えば、収録対象が音楽ライブの場合、各楽器ごとに、音声入力部を配置することができる。
【００４３】
オーディオインタフェース１２は、例えば、録音を開始することがユーザから指示されたとき、音声入力部１１−１乃至１１−ｍから供給されてきた信号のレベルを揃え、A/D(Analog /Digital)変換を行う。A/D変換等の処理によりオーディオインタフェース１２により得られた音声データは音声データ録音部１３に出力される。
【００４４】
なお、音声入力部の数が多い場合、オーディオインタフェース１２と音声データ録音部１３が複数用意され、それぞれのオーディオインタフェース１２により、分散して、音声入力部からの入力が処理されるようにしてもよい。この場合、オーディオインタフェース１２により得られた音声データ間の同期を取るため、タイムコードジェネレーターにより生成された同一のタイムコード、例えば、SMPTE(Society of Motion Picture and Television Engineers)が、音声データに付加される。
【００４５】
音声データ録音部１３は、オーディオインタフェース１２から供給されてきた音声データを例えばHDD(Hard Disk Drive)などの記憶媒体に記憶させる。音声データ録音部１３により記憶媒体に記憶された音声データは、適宜、登録制御部１６により読み出される。
【００４６】
音声入力部情報測定部１４は、例えば、録音を開始することがユーザから指示されたとき、音声入力部１１−１乃至１１−ｍのそれぞれの位置、向きを表す情報と、タイプ、指向性、周波数特性、インピーダンス等の特性を表す情報とからなる音声入力部情報を取得する。
【００４７】
音声入力部情報のうちのタイプ、指向性、周波数特性、インピーダンスといった情報は、音声入力部１１−１乃至１１−ｍの特有の情報である。従って、音声入力部情報測定部１４は、音声入力部１１−１乃至１１−ｍのそれぞれを識別することができれば、識別情報と、タイプ、指向性、周波数特性、インピーダンス等を表す情報が対応付けられたテーブル（商品仕様）を参照することによって、それらの情報を取得することができる。
【００４８】
このテーブルは、サラウンド音場収録装置１にあらかじめ用意されるものであってもよいし、通信網４を介して接続される所定のサーバにより管理されるものであってもよい。
【００４９】
これらの音声入力部１１−１乃至１１−ｍの特有の情報（特有の情報を得るために必要な識別情報）と、位置、向きの情報は、例えば、本出願人により出願された特願２００２−０５７８３７号の明細書（特開２００３−２５４７１６号公報）に記載された技術を用いて、同時に、音声入力部情報測定部１４により測定される。
【００５０】
特開２００３−２５４７１６号公報に記載されている技術によっては、マーカといわれる発光体が表面上に複数配設された測定対象物体をカメラで撮影することによって、マーカの発行パターンから光学的識別情報を取得するとともに、マーカの位置関係などから測定対象物体の３次元的な位置と向きを測定することができるようになされている。
【００５１】
なお、音声入力部情報を取得するために、特開２００３−２５４７１６号公報に記載されているもの以外の技術が用いられるようにしてもよい。また、音声入力部情報のうちの、位置、向きを表す情報と、タイプ、指向性、周波数特性、インピーダンス等の特性を表す情報とは、同時にではなく、別々に取得されるようにしてもよい。
【００５２】
例えば、音声入力部の識別情報については、音声入力部１１−１乃至１１−ｍの表面にプリントされる２次元バーコードや、配設されるRFIDタグから取得されるようにしてもよい。また、位置については、無線LAN(Local Area Network)、RFID、UWB(Ultra Wide Band)などの無線通信を利用した位置検知システムが用いられ、取得されるようにしてもよいし、収録環境が屋外である場合、GPS(Global Positioning System)やPHS(Personal Handyphone System)により取得されるようにしてもよい。向きについては、音声入力部１１−１乃至１１−ｍに搭載されたジャイロセンサの出力から取得されるようにしてもよい。
【００５３】
音声入力部情報測定部１４は、このようにして取得した音声入力部情報を音声入力部情報蓄積部１５に出力する。
【００５４】
音声入力部情報蓄積部１５は、音声入力部情報測定部１４から供給されてきた音声入力部情報を記憶する。音声入力部情報蓄積部１５により記憶された音声入力部情報も、適宜、登録制御部１６により読み出される。
【００５５】
登録制御部１６は、サラウンドデータが、通信網４を介してサラウンド音場再生装置２に提供されるものである場合、音声データ録音部１３により記憶されたサラウンドデータと、音声入力部情報蓄積部１５により記憶された音声入力部情報を読み出し、読み出したデータを併せて通信部１７に出力する。
【００５６】
また、登録制御部１６は、サラウンドデータが、所定の記録媒体を介してサラウンド音場再生装置２に提供されるものである場合、音声データ録音部１３により記憶されたサラウンドデータと、音声入力部情報蓄積部１５により記憶された音声入力部情報を読み出し、読み出したデータを記録媒体に記録させる。
【００５７】
通信部１７は、登録制御部１６から供給されてきたデータを、通信網４を介してサラウンドデータ蓄積装置３にアップロードする。
【００５８】
ここで、図３のフローチャートを参照して、サラウンド音場収録装置１の収録処理について説明する。この処理は、例えば、収録の開始が収録者（ユーザ）により指示されたときに開始される。
【００５９】
ステップＳ１において、オーディオインタフェース１２は、収録を終了するか否かを判定する。例えば、収録の開始／終了は、サラウンド音場収録装置１に設けられる収録開始ボタンや収録終了ボタンがユーザにより押されたことに応じて、あるいは、「１０分後に収録開始、３０分後に終了」などのように、あらかじめ決められたルールに応じて行われる。なお、記憶媒体の空き容量がなくなったときや、オーバーフローエラー等のシステムエラーが生じたときに収録が終了されるようにしてもよい。
【００６０】
オーディオインタフェース１２は、ステップＳ１において、収録を終了しない（収録を行う）と判定した場合、ステップＳ２に進む。
【００６１】
ステップＳ２において、音声入力部１１−１乃至１１−ｍは集音を行い、得られた音の信号をオーディオインタフェース１２に出力する。
【００６２】
ステップＳ３において、オーディオインタフェース１２は、音声入力部１１−１乃至１１−ｍから供給されてきた信号から音声データを取得し、取得した音声データを音声データ録音部１３により記憶させる。
【００６３】
ステップＳ４において、音声入力部情報測定部１４は、音声入力部１１−１乃至１１−ｍの音声入力部情報を上述したようにして取得し、取得した音声入力部情報を音声入力部情報蓄積部１５に出力する。
【００６４】
ステップＳ５において、音声入力部情報蓄積部１５は、音声入力部情報測定部１４から供給されてきた音声入力部情報を記憶する。
【００６５】
図４は、音声入力部情報蓄積部１５により記憶される音声入力部情報の例を示す図である。
【００６６】
図４に示すように、音声入力部情報は、例えば、ID、位置、向き、タイプ、指向性、周波数特性、インピーダンスなどの情報から構成される。IDは、音声入力部１１−１乃至１１−ｍのそれぞれに割り当てられている識別情報であり、これに他の情報が対応付けられることによって管理されている。
【００６７】
図４の例においては、例えば、「０００１」のIDが割り当てられた音声入力部の音声入力部情報は、位置が「（−９８，１０３，１１９）」、向きが「（２２，０，１７４）」、タイプが「ダイナミック型」、指向性が「単一指向性」、周波数特性が「５０Hz−１６kHz」、インピーダンスが「１５０Ω」とされている。
【００６８】
音声入力部１１−１乃至１１−ｍの位置は、例えば、収録環境の中心を（０，０，０）とした３次元空間上の位置で表され、向きは、３次元空間上のオイラー角により表される。すなわち、再生時には、中心（０，０，０）で表される位置をリスナーの位置とすることによって、収録環境と同じ音場が再現される。
【００６９】
位置と向きは３次元空間上で表されるものとしたが、２次元空間上で表されるようにしてもよい。この場合、上下方向の音の定位はないものとして扱われる。
【００７０】
音声入力部１１−１乃至１１−ｍのタイプは、音声入力部１１−１乃至１１−ｍの構成上の違いであり、ダイナミック型やコンデンサ型、カーボン型、ベロシティ型、クリスタル型等に分類される。
【００７１】
音声入力部１１−１乃至１１−ｍの指向性は、前後左右から入るそれぞれの音に対してどの程度の感度を有するのかを表すものであり、単一指向性型、無指向性型、双指向性型に大別される。単一指向性型は、さらに、カーディオイド、スーパーカーディオイド、ハイパーカーディオイド等に分類されるようにしてもよい。
【００７２】
音声入力部１１−１乃至１１−ｍの周波数特性は、収録可能な周波数（音の高低）の範囲と、感度の変化を表したものである。
【００７３】
音声入力部１１−１乃至１１−ｍのインピーダンスは、出力側から見た音声入力部内部の交流抵抗の値である。インピーダンスが高いほど、信号伝送効率はよいがノイズに弱いという特性がある。
【００７４】
図３の説明に戻り、音声入力部情報を記憶した後、処理はステップＳ１に戻り、それ以降の処理が繰り返される。すなわち、収録を終了すると判定されるまで、音声データの蓄積や、音声入力部情報の蓄積などが繰り返される。
【００７５】
ステップＳ１において、オーディオインタフェース１２は、収録を終了することが指示されたと判定した場合、ステップＳ６に進む。
【００７６】
ステップＳ６において、登録制御部１６は、以上の処理で収録されたサラウンドデータ（音声データと音声入力部情報）を、サラウンドデータ蓄積装置３に送信するか否かを、例えば、ユーザによる指示に従って判定し、送信しないと判定した場合、処理を終了させる。この場合、収録されたサラウンドデータはローカルファイルとしてサラウンド音場収録装置１の記憶媒体に記憶され、所定のタイミングで、CDなどの記録媒体に書き込まれて提供される。
【００７７】
一方、登録制御部１６は、ステップＳ６において、収録されたサラウンドデータをサラウンドデータ蓄積装置３に送信すると判定した場合、ステップＳ７に進み、通信部１７を制御して、サラウンドデータをサラウンドデータ蓄積装置３に送信させる。
【００７８】
以上のように、音声データと音声入力部情報を同時に保存することで、サラウンド音場収録装置１は、収録環境の音場を再現するために必要な情報を得ることが可能になる。
【００７９】
ここで、図３の処理においては、音声データの収録とともに、音声入力部情報の測定が繰り返し行われるものとしたが、これは、音声入力部情報が時間の経過に伴って変化する状況に対応するために行われるものである。
【００８０】
例えば、ライブの収録などにおいては音声入力部１１−１乃至１１−ｍの位置や向きが時間の経過に伴って変わることになるが、このような場合であっても、音声データの収録とともに音声入力部情報の測定が繰り返し行われることにより、収録環境の音場を再現するための情報を取得することが可能になる。
【００８１】
なお、音声入力部情報が時間の経過に伴って変化しない場合、収録開始時、もしくは収録終了時に音声入力部情報が１度だけ測定されるようにしてもよい。
【００８２】
次に、サラウンド音場再生装置２の構成と動作について説明する。
【００８３】
図５は、サラウンド音場再生装置２の機能構成例を示すブロック図である。
【００８４】
通信部３１は、サラウンドデータ蓄積装置３からサラウンドデータをダウンロードし、取得したサラウンドデータを音声データ解析部３２と音声入力部情報解析部３３に出力する。サラウンドデータ蓄積装置３に記憶されているサラウンドデータには、上述したように、音声データと音声入力部情報が含まれている。
【００８５】
なお、サラウンドデータ蓄積装置３からのダウンロードにより取得されるのではなく、CDなどの記録媒体を介してサラウンドデータが取得される場合、図示せぬドライブにより記録媒体から読み出されたサラウンドデータが、音声データ解析部３２と音声入力部情報解析部３３に出力される。
【００８６】
音声データ解析部３２は、例えば、通信部３１から供給されてきたサラウンドデータを解析することによって音声データを取得し、取得した音声データを音声データ編集部３４に出力する。
【００８７】
音声入力部情報解析部３３は、例えば、通信部３１から供給されてきたサラウンドデータを解析することによって音声入力部情報を取得し、取得した音声入力部情報を音声データ編集部３４に出力する。
【００８８】
音声データ編集部３４は、音声入力部情報解析部３３から供給されてきた音声入力部情報に基づいて、再生環境に適した音声データになるように、音声データ解析部３２から供給されてきた音声データを編集する。
【００８９】
例えば、音声データ編集部３４は、音声入力部情報により指定される位置に仮想音源の位置がくるように、対応する音声データを配置したり、音声入力部情報に基づいたエフェクトを加えるなどして音場を構築する。また、音声データ編集部３４は、例えば、音声データに含まれるトラックデータ（例えば４８トラック）を、音声出力部の数（例えば５．１チャンネルの場合６）に応じたトラックデータにミックスダウンするなどのように、音声出力部３６−１乃至３６−ｎを用いて音場を再現するために、音声データ解析部３２から供給されてきた音声データを、音声出力部３６−１乃至３６−ｎのそれぞれから出力させる音声データに変換する。
【００９０】
音声データ編集部３４により得られた音声データはオーディオインタフェース３５に出力される。
【００９１】
オーディオインタフェース３５は、音声データ編集部３４から供給されてきた音声データのD/A変換を行い、得られた音声信号を音声出力部３６−１乃至３６−ｎのそれぞれに出力する。
【００９２】
音声出力部３６−１乃至３６−ｎはスピーカであり、オーディオインタフェース３５から供給されてきた信号に対応する音声を出力する。
【００９３】
ここで、図６のフローチャートを参照して、サラウンド音場再生装置２の再生処理について説明する。この処理は、例えば、サラウンドデータの再生を開始することがユーザ（リスナー）により指示されたときに開始される。
【００９４】
ステップＳ２１において、音声データ解析部３２は、再生を終了するか否かを判定する。例えば、再生の開始／終了は、サラウンド音場再生装置２に設けられる再生開始ボタンや再生終了ボタンがユーザにより押されたことに応じて、あるいは、「１０分後に再生開始、３０分後に終了」などのように、あらかじめ決められたルールに応じて行われる。
【００９５】
音声データ解析部３２は、ステップＳ２１において、再生を終了しない（再生を行う）と判定した場合、ステップＳ２２に進む。
【００９６】
ステップＳ２２において、音声データ解析部３２は、通信部３１を制御してサラウンドデータ蓄積装置３からダウンロードすることによって、または、所定の記録媒体から読み出すことによって、再生対象とするサラウンドデータを取得する。どのサラウンドデータを取得するのかは、ユーザからの指示に従って判断される。なお、このとき、音声データ解析部３２により取得されたサラウンドデータと同じデータが、音声入力部情報解析部３３にも供給されている。
【００９７】
サラウンドデータ蓄積装置３からのダウンロードや記録媒体からの読み出しは、再生対象とするサラウンドデータがサラウンド音場再生装置２のローカルファイルやキャッシュにすでに記憶されている場合、行われないようにすることも可能である。また、サラウンド音場再生装置２にサラウンドデータがすでに記憶されている場合、そのサラウンドデータと、同じタイトルの、ダウンロード可能なものとしてサラウンドデータ蓄積装置３に用意されているサラウンドデータとの同一性が確認され、一致しないときにダウンロードが行われるようにしてもよい。
【００９８】
ステップＳ２３において、音声データ解析部３２は、取得したサラウンドデータを解析することによって音声データを取得し、取得した音声データを音声データ編集部３４に出力する。
【００９９】
ステップＳ２４において、音声入力部情報解析部３３は、取得したサラウンドデータを解析することによって音声入力部情報を取得し、取得した音声入力部情報を音声データ編集部３４に出力する。
【０１００】
ステップＳ２５において、音声データ編集部３４は、音声入力部情報解析部３３から供給されてきた音声入力部情報に基づいて、再生環境に適した音声データになるように、音声データ解析部３２から供給されてきた音声データを上述したようにして編集する。音声データ編集部３４は、編集して得られた音声データをオーディオインタフェース３５に出力する。
【０１０１】
ステップＳ２６において、オーディオインタフェース３５は、音声データ編集部３４から供給されてきた音声データのD/A変換を行い、得られた音声信号を音声出力部３６−１乃至３６−ｎのそれぞれに出力して再生させる。
【０１０２】
その後、処理はステップＳ２１に戻り、それ以降の処理が繰り返される。すなわち、再生を終了すると判定されるまで、サラウンドデータの編集や、編集して得られたサラウンドデータの再生などが繰り返される。
【０１０３】
ステップＳ２１において、再生を終了すると判定された場合、処理は終了される。
【０１０４】
以上のような処理により、サラウンド音場収録装置１により得られたサラウンドデータに基づいて、収録環境の音場が、再生環境に合わせて再現されることになる。
【０１０５】
なお、図６の処理においては、サラウンドデータが入力（取得）される度に、音声入力部情報の解析が行われるものとしたが、これは、音声入力部情報が時間の経過に伴って変化する状況に対応するために行われるものである。従って、音声入力部情報が時間の経過に伴って変化しないものである場合、再生開始時に、１度だけ解析が行われるようにしてもよい。
【０１０６】
以上のような収録再生システムにより、収録を行う者は、収録時に、マイクロフォンの位置や向き等を、サラウンドデータの編集のときに参照するためにメモに残しておいたりする必要がない。
【０１０７】
また、サラウンド音場再生装置２のユーザは、再生時に、各音声データを録音したマイクロフォンの位置等を、収録環境の情報を元に入力したりする必要がない。すなわち、ユーザは、容易に、収録環境の音場を再現することが可能となる。
【０１０８】
なお、以上においては、音声入力部情報は音場を再現するために用いられるものとしたが、それ以外にも、例えば、収録環境における、それぞれのマイクロフォンの位置関係などをディスプレイに表示するために用いられるようにしてもよい。
【０１０９】
これにより、収録者は、収録時のマイクロフォンの位置や向きの設定のときに、ディスプレイの表示を見ながらそれを行うことによって、収録される音声の「かぶり」を避けることが可能になる。
【０１１０】
図７は、音声入力部情報に基づいて表示される画面の例を示す図である。この画面は、例えば、音声入力部情報測定部１４によって表示される。図７の画面は、複数のマイクロフォンが設置されるピアノの演奏の収録環境を表している。
【０１１１】
図７の画面において、色が付されている丸印は、音声入力部情報の「位置」に基づいて表示される音声入力部（マイクロフォン）の位置を表す。その丸印からの引き出し線で示されるIDは、音声入力部情報の「ID」に基づいて表示されるそれぞれの音声入力部のIDである。また、色が付されている丸印の上、またはその周りに示す実線は、音声入力部情報の「向き」、「タイプ」、「指向性」などより求められる収録可能領域を表す。
【０１１２】
例えば、IDが「１０１」である音声入力部は「無指向性」の音声入力部であり、そのため、その音声入力部によって収録（集音）が可能な領域は図に示すようにほぼ円形となっている。また、IDが「００１」である音声入力部は「単一指向性」の音声入力部であり、向きによって収録可能領域が変化するから、図に示すようなものになっている。また、収録可能領域の大きさは、音声入力部の感度によって変化する。
【０１１３】
このように、各音声入力部の収録可能領域がグラフィカルに表示されることによって、収録者は、どの領域に「かぶり」が集中しているのかを視覚的に判断することが可能となる。
【０１１４】
また、図７の画面の表示を見ながら、収録中に、音声入力部の位置や向きを変更することによって、収録者は、サラウンド音場収録装置１により得られた情報を、音声入力部の位置関係に動的に反映させることが可能となる。
【０１１５】
なお、音声入力部情報のうちのID、位置、向き、指向性に基づく表示だけでなく、音声入力部から取得された他の情報も表示されるようにしてもよい。例えば、周波数帯域毎の収録可能領域が表示されるようにすることによって、収録者は、収録環境内の重低音の「かぶり」の状況、高音の「かぶり」の状況といったように、周波数帯域毎の「かぶり」の状況を確認することができる。
【０１１６】
また、図７の画面の例においては、音声入力部の位置関係を把握しやすくするため、ピアノの外観の画像も表示されているが、音声の「かぶり」を防止する目的だけであるなら、必ずしも表示される必要はない。
【０１１７】
さらに、図４に示すような音声入力部情報が取得されている場合、それぞれの音声入力部の収録可能領域を２次元で表す図７に示すような画面ではなく、３次元で表す画面が表示されるようにしてもよい。
【０１１８】
このように、収録可能領域という、実際には目で見ることのできない情報が表示されるようにすることによって、収録者は、音場の情報を視覚的に確認することが可能となる。
【０１１９】
上述した一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。この場合、そのソフトウェアは、例えば、図８に示されるようなパーソナルコンピュータにより実行される。
【０１２０】
図８において、CPU(Central Processing Unit)５１は、ROM(Read Only Memory)５２に記憶されているプログラム、または、記憶部５８からRAM(Random Access Memory)５３にロードされたプログラムに従って各種の処理を実行する。RAM５３にはまた、CPU５１が各種の処理を実行する上において必要なデータなどが適宜記憶される。
【０１２１】
CPU５１、ROM５２、およびRAM５３は、バス５４を介して相互に接続されている。このバス５４にはまた、入出力インタフェース５５も接続されている。
【０１２２】
入出力インタフェース５５には、キーボード、マウスなどよりなる入力部５６、LCD(Liquid Crystal Display)などよりなるディスプレイ、並びにスピーカなどよりなる出力部５７、ハードディスクなどより構成される記憶部５８、ネットワークを介しての通信処理を行う通信部５９が接続されている。
【０１２３】
入出力インタフェース５５にはまた、必要に応じてドライブ６０が接続される。ドライブ６０には、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどよりなるリムーバブルメディア６１が適宜装着され、それから読み出されたコンピュータプログラムが必要に応じて記憶部５８にインストールされる。
【０１２４】
一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば、汎用のパーソナルコンピュータなどに、ネットワークや記録媒体からインストールされる。
【０１２５】
この記録媒体は、図８に示されるように、装置本体とは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM(Compact Disk-Read Only Memory)，DVD(Digital Versatile Disk)を含む）、光磁気ディスク（MD（登録商標）(Mini-Disk)を含む）、もしくは半導体メモリなどよりなるリムーバブルメディア６１により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される、プログラムが記録されているROM５２や、記憶部５８に含まれるハードディスクなどで構成される。
【０１２６】
なお、本明細書において、各ステップは、記載された順序に従って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【０１２７】
また、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。
【図面の簡単な説明】
【０１２８】
【図１】本発明の一実施形態に係る収録再生システムの構成例を示す図である。
【図２】サラウンド音場収録装置の機能構成例を示すブロック図である。
【図３】サラウンド音場収録装置の収録処理について説明するフローチャートである。
【図４】音声入力部情報の例を示す図である。
【図５】サラウンド音場再生装置の機能構成例を示すブロック図である。
【図６】サラウンド音場再生装置の再生処理について説明するフローチャートである。
【図７】音声入力部情報に基づいて表示される画面の例を示す図である。
【図８】パーソナルコンピュータの構成例を示すブロック図である。
【符号の説明】
【０１２９】
１  サラウンド音場収録装置，  ２  サラウンド音場再生装置，  ３  サラウンドデータ蓄積装置，  ４  通信網，  １１−１乃至１１−ｍ  音声入力部，  １２  オーディオインタフェース，  １３  音声データ録音部，  １４  音声入力部情報測定部，  １５  音声入力部情報蓄積部，  １６  登録制御部，  １７  通信部，  ３１  通信部，  ３２  音声データ解析部，  ３３  音声入力部情報解析部，  ３４  音声データ編集部，  ３５  オーディオインタフェース，  ３６−１乃至３６−ｎ  音声出力部
【図１】
2006261886.tif 000003
【図２】
2006261886.tif 000004
【図３】
2006261886.tif 000005
【図４】
2006261886.tif 000006
【図５】
2006261886.tif 000007
【図６】
2006261886.tif 000008
【図７】
2006261886.tif 000009
【図８】
2006261886.tif 000010