(57)【要約】【課題】従来よりもライブ演奏の再現性が高い再生システムおよび再生方法を提供する。【解決手段】再生システム（１）は、演奏音または歌唱音がトラック毎のオーディオデータとして記録されたマルチトラックデータを出力するデータ出力装置（１０）と、前記マルチトラックデータに含まれる前記オーディオデータのうちアコースティック楽器のオーディオデータに基づいて、アコースティック楽器を加振して発音させる加振装置（１５）と、前記オーディオデータに基づいて、前記演奏音または歌唱音を出力するスピーカ（１２Ｌ，１２Ｒ）と、を備える。【選択図】図４
2019205105.tif 000002
【特許請求の範囲】
【請求項１】
演奏音または歌唱音がトラック毎の複数のオーディオデータとして記録されたマルチトラックデータを出力する出力装置と、
前記マルチトラックデータに含まれる前記複数のオーディオデータのうちアコースティック楽器のオーディオデータに基づいて、アコースティック楽器を加振して発音させる加振装置と、
前記複数のオーディオデータに基づいて、前記演奏音または歌唱音を出力するスピーカと、
を備えた再生システム。
【請求項２】
前記スピーカは、メインスピーカと、楽器用アンプスピーカと、を含む、
請求項１に記載の再生システム。
【請求項３】
前記マルチトラックデータは、信号処理パラメータを含み、
前記信号処理パラメータに基づいて、前記複数のオーディオデータを処理し、信号処理後のオーディオデータを前記加振装置および前記スピーカに出力する信号処理装置をさらに備える、
請求項１または請求項２に記載の再生システム。
【請求項４】
前記マルチトラックデータに含まれる前記複数のオーディオデータのうち前記加振装置に入力されるトラックのオーディオデータに基づいて、前記演奏音を出力する補助スピーカを備える、
請求項１乃至請求項３のいずれかに記載の再生システム。
【請求項５】
前記マルチトラックデータは、時間情報を含む、
請求項１乃至請求項４のいずれかに記載の再生システム。
【請求項６】
前記マルチトラックデータは、演奏者または歌唱者を撮影した映像データを含む
請求項１乃至請求項５のいずれかに記載の再生システム。
【請求項７】
前記トラック毎のオーディオデータに遅延を付与する遅延部を備えた、
請求項１乃至請求項６のいずれかに記載の再生システム。
【請求項８】
演奏音または歌唱音がトラック毎の複数のオーディオデータとして記録されたマルチトラックデータを入力し、
前記マルチトラックデータに含まれる前記複数のオーディオデータのうちアコースティック楽器のオーディオデータに基づいて、アコースティック楽器を加振して発音させ、
前記複数のオーディオデータに基づいて、前記演奏音または歌唱音を出力する、
再生方法。
【請求項９】
前記演奏音を楽器用アンプスピーカから出力する、
請求項８に記載の再生方法。
【請求項１０】
前記マルチトラックデータは、信号処理パラメータを含み、
前記信号処理パラメータに基づいて、前記複数のオーディオデータを処理し、
信号処理後のオーディオデータに基づいて、前記アコースティック楽器を加振して発音させ、
信号処理後のオーディオデータに基づいて、前記演奏音または歌唱音を出力する、
請求項８または請求項９に記載の再生方法。
【請求項１１】
前記マルチトラックデータに含まれる前記複数のオーディオデータのうち前記アコースティック楽器を加振させるためのトラックのオーディオデータに基づいて、前記演奏音を補助スピーカから出力する、
請求項８乃至請求項１０のいずれかに記載の再生方法。
【請求項１２】
前記マルチトラックデータは、時間情報を含む、
請求項８乃至請求項１１のいずれかに記載の再生方法。
【請求項１３】
前記マルチトラックデータは、演奏者または歌唱者を撮影した映像データを含む
請求項８乃至請求項１２のいずれかに記載の再生方法。
【請求項１４】
前記トラック毎のオーディオデータに遅延を付与する、
請求項８乃至請求項１３のいずれかに記載の再生方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明の一実施形態は、オーディオデータを再生する再生システムおよび再生方法に関する。
【背景技術】
【０００２】
特許文献１には、楽器毎に異なるチャンネルで演奏音を収録し、自動演奏ピアノの演奏データを収録する構成が開示されている。自動演奏ピアノは、収録した演奏データに基づいて自動演奏を行なう。他の楽器の音は、各チャンネルに対応するスピーカから出力される。同時に、プロジェクタは、演奏者の映像を再生する。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】実開平６−２１０９７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
自動演奏ピアノは、演奏者が不在であるにも関わらず鍵盤等の部材が動く。この様に、演奏者がいないにも関わらず、アコースティック楽器において鍵盤等の部材を物理的に駆動させると、視聴者は、たとえ演奏者の映像を再生したとしても、演奏者がその場所にいるとは知覚できずに、違和感を覚える。したがって、従来の構成では、ライブ演奏の再現性に乏しい。
【０００５】
そこで、この発明の一実施形態は、従来よりもライブ演奏の再現性の高い再生システムおよび再生方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
再生システムは、演奏音または歌唱音がトラック毎のオーディオデータとして記録されたマルチトラックデータを出力するデータ出力装置と、前記マルチトラックデータに含まれる前記オーディオデータのうちアコースティック楽器のオーディオデータに基づいて、アコースティック楽器を加振して発音させる加振装置と、前記オーディオデータに基づいて、前記演奏音または歌唱音を出力するスピーカと、を備える。
【発明の効果】
【０００７】
この発明の一実施形態は、鍵盤等の操作子を物理的に駆動することなくアコースティック楽器を発音させることができるため、従来よりもライブ演奏の再現性が高くなる。
【図面の簡単な説明】
【０００８】
【図１】再生システム１の構成を示すブロック図である。
【図２】出力装置１０の構成を示すブロック図である。
【図３】マルチトラックデータの構成を示す概略図である。
【図４】ミキサ１１の構成を示すブロック図である。
【図５】信号処理部２０４およびＣＰＵ２０６で実現される信号処理の機能的ブロック図である。
【図６】ある入力チャンネルｉの処理構成を示す図である。
【図７】ライブ演奏の再生状態を示す模式図である。
【図８】ライブ演奏の再生状態を示す模式図である。
【図９】ドラムセットのうち、シンバル７０の断面図である。
【図１０】加振器１５の詳細を示す断面図である。
【図１１】加振器１５の一部透過平面図である。
【図１２】変形例に係る加振器１５の詳細を示す断面図である。
【図１３】応用例に係る加振器１５の構成を示す断面図である。
【図１４】再生システムの動作を示すフローチャートである。
【図１５】出力ステップのより詳細な動作を示したフローチャートである。
【図１６】出力装置１０が遅延調整を受け付ける場合の、ＣＰＵ１０４の機能的構成を示すブロック図である。
【発明を実施するための形態】
【０００９】
図１は、再生システム１の構成を示すブロック図である。再生システム１は、出力装置１０、ミキサ１１、スピーカ１２Ｌ、スピーカ１２Ｒ、ギターアンプ１３、ベースアンプ１４、加振器１５、投影機１６、および照明コントローラ１７を備えている。
【００１０】
各機器は、ネットワークを介して接続されている。ただし、本発明において、各機器は、ネットワークを介して接続される態様に限るものではない。例えば、ＵＳＢケーブル、ＨＤＭＩ（登録商標）、またはＭＩＤＩ等の通信線で接続されていてもよい。また、各機器は、直接にネットワークに接続される必要はない。各機器は、オーディオ信号用の端子およびネットワーク端子を備えたＩＯ機器を介してネットワークに接続されてもよい。
【００１１】
図２は、出力装置１０の主要構成を示すブロック図である。出力装置１０は、表示器１０１、ユーザインタフェース（Ｉ／Ｆ）１０２、フラッシュメモリ１０３、ＣＰＵ１０４、ＲＡＭ１０５、およびネットワークインタフェース（Ｉ／Ｆ）１０６を備えている。
【００１２】
出力装置１０は、パーソナルコンピュータ、スマートフォン、またはタブレット型コンピュータ等の一般的な情報処理装置である。表示器１０１は、例えばＬＣＤ（Liquid Crystal Display）またはＯＬＥＤ（Organic Light-Emitting Diode）等からなり、種々の情報を表示する。ユーザＩ／Ｆ１０２は、スイッチ、キーボード、マウス、トラックボール、またはタッチパネル等からなり、ユーザの操作を受け付ける。ユーザＩ／Ｆ１０２がタッチパネルである場合、該ユーザＩ／Ｆ１０２は、表示器１０１とともに、ＧＵＩ（Graphical User Interface以下略）を構成する。
【００１３】
ＣＰＵ１０４は、記憶媒体であるフラッシュメモリ１０３に記憶されているプログラムをＲＡＭ１０５に読み出して、所定の機能を実現する。例えば、ＣＰＵ１０４は、表示器１０１にユーザの操作を受け付けるための画像を表示し、ユーザＩ／Ｆ１０２を介して、当該画像に対する選択操作等を受け付けることで、ＧＵＩを実現する。また、ＣＰＵ１０４は、ユーザＩ／Ｆ１０２で受け付けた内容に基づいて、フラッシュメモリ１０３、または外部から所定のデータを読み出して、デコードする。ＣＰＵ１０４は、デコードしたデータを他の機器に出力する。
【００１４】
なお、ＣＰＵ１０４が読み出すプログラムは、自装置内のフラッシュメモリ１０３に記憶されている必要はない。例えば、プログラムは、サーバ等の外部装置の記憶媒体に記憶されていてもよい。この場合、ＣＰＵ１０４は、該サーバから都度プログラムをＲＡＭ１０５に読み出して実行すればよい。
【００１５】
ＣＰＵ１０４が読み出すデータは、演奏音または歌唱音がトラック毎のオーディオデータとして記録されたマルチトラックデータである。図３は、マルチトラックデータの構成を示す概略図である。マルチトラックデータは、設定データ、タイムコード、トラック毎のオーディオデータ、映像データ、照明データ、および信号処理パラメータを含む。
【００１６】
設定データは、ミキサの基本設定に対応するデータである。ミキサの基本設定は、例えばオーディオ信号のサンプリング周波数、ワードクロック、パッチ設定、またはネットワーク設定等を含む。
【００１７】
図４は、ミキサ１１の構成を示すブロック図である。ミキサ１１は、本発明の信号処理装置の一例である。ミキサ１１は、表示器２０１、ユーザＩ／Ｆ２０２、オーディオＩ／Ｏ（Ｉｎｐｕｔ／Ｏｕｔｐｕｔ）２０３、信号処理部（ＤＳＰ）２０４、ネットワークＩ／Ｆ２０５、ＣＰＵ２０６、フラッシュメモリ２０７、およびＲＡＭ２０８を備えている。これら構成は、バス１７１を介して接続されている。
【００１８】
ＣＰＵ２０６は、ミキサ１１の動作を制御する制御部である。ＣＰＵ２０６は、記憶媒体であるフラッシュメモリ２０７に記憶された所定のプログラムをＲＡＭ２０８に読み出して実行することにより各種の動作を行なう。
【００１９】
なお、ＣＰＵ２０６が読み出すプログラムも、自装置内のフラッシュメモリ２０７に記憶されている必要はない。例えば、プログラムは、サーバ等の外部装置の記憶媒体に記憶されていてもよい。この場合、ＣＰＵ２０６は、該サーバから都度プログラムをＲＡＭ２０８に読み出して実行すればよい。
【００２０】
信号処理部２０４は、各種信号処理を行なうためのＤＳＰから構成される。信号処理部２０４は、オーディオＩ／Ｏ２０３またはネットワークＩ／Ｆ２０５を介して入力されるオーディオ信号に、ミキシング、ゲイン調整、イコライジング、またはコンプレッシング等の信号処理を施す。信号処理部２０４は、信号処理後のオーディオ信号を、オーディオＩ／Ｏ２０３またはネットワークＩ／Ｆ２０５を介して、スピーカ１２Ｌまたはスピーカ１２Ｒ等の他の機器に出力する。
【００２１】
図５は、信号処理部２０４およびＣＰＵ２０６で実現される信号処理の機能的ブロック図である。図５に示すように、信号処理は、機能的に、入力パッチ３０１、入力チャンネル３０２、バス３０３、出力チャンネル３０４、および出力パッチ３０５によって行なわれる。
【００２２】
入力パッチ３０１は、オーディオＩ／Ｏ２０３における複数の入力ポート（例えばアナログ入力ポートまたはデジタル入力ポート）からオーディオ信号を入力して、複数のポートのうちいずれか１つのポートを、複数チャンネル（例えば１６ｃｈ）の少なくとも１つのチャンネルに割り当てる。これにより、オーディオ信号が入力チャンネル３０２の各チャンネルに供給される。
【００２３】
入力チャンネル３０２の各チャンネルは、入力されたオーディオ信号に対して、各種の信号処理を施す。
【００２４】
図６は、ある入力チャンネルｉの処理構成を示す図である。入力チャンネル３０２の各チャンネルは、信号処理ブロック３５１において、入力パッチ３０１から供給されたオーディオ信号に対して、各種の信号処理を施す。図６の例では、信号処理ブロック３５１は、アッテネータ（ＡＴＴ）、イコライザ（ＥＱ）、ゲート（ＧＡＴＥ）、およびコンプレッサ（ＣＯＭＰ）の信号処理を施す。
【００２５】
信号処理後のオーディオ信号は、フェーダ部（ＦＡＤＥＲ）３５２でレベル調整された後に、パン部（ＰＡＮ）３５３を介して、後段のバス３０３に送出される。パン部３５３は、バス３０３のステレオバス（マスタ出力となるＬチャンネルおよびＲチャンネルのバス）に供給する信号のバランスを調整する。
【００２６】
入力チャンネル３０２の各チャンネルは、信号処理後のオーディオ信号を、後段のバス３０３へ出力する。
【００２７】
バス３０３は、入力されるオーディオ信号をそれぞれミキシングして出力する。バス３０３は、複数のバス（例えば、Ｌチャンネルバス、Ｒチャンネルバス、ＳＥＮＤバス、およびＡＵＸバス等）を有する。
【００２８】
各バスから出力されるオーディオ信号は、出力チャンネル３０４で信号処理が施される。出力チャンネル３０４においても、イコライジング等の信号処理が施される。その後、信号処理を施されたオーディオ信号は、出力パッチ３０５に出力される。出力パッチ３０５は、各出力チャンネルを、アナログ出力ポートまたはデジタル出力ポートにおける複数のポートのうちいずれか１つのポートに割り当てる。あるいは、出力パッチ３０５は、各出力チャンネルを、スピーカ１２Ｌまたはスピーカ１２Ｒ等のネットワーク経由で接続されるスピーカに割り当てる。よって、ミキシング等の信号処理が施されたオーディオ信号が、オーディオＩ／Ｏ２０３またはネットワークＩ／Ｆ２０５に供給される。
【００２９】
以上の信号処理の内容は、通常、ライブ演奏の前にオペレータによって設定される。信号処理の内容を示す信号処理パラメータは、フラッシュメモリ２０７またはＲＡＭ２０８に記憶される。また、ミキサ１１は、フラッシュメモリ２０７またはＲＡＭ２０８において、信号処理パラメータを記憶するシーンメモリを備えている。オペレータは、シーンメモリの呼び出しを指示するだけで、過去に設定した値を即座に呼び出すことができる。これにより、ユーザは、例えばコンサートのリハーサル中に事前に設定したシーン毎に最適な値を、ライブ演奏中に呼び出すことができる。つまり、信号処理の内容は、ライブ演奏中にも変化する。
【００３０】
ただし、信号処理の内容は、パッチ設定等の、ライブ演奏中に変更されない基本設定と、ライブ演奏中に変更されるもの（例えば利用するエフェクトの種類、順序、およびそれぞれのパラメータ等）と、がある。ライブ演奏中に変更されない基本設定は、図３で示したマルチトラックデータのうち、設定データに含まれる。ライブ演奏中に変更されるものは、図３で示したマルチトラックデータのうち、信号処理パラメータに含まれる。
【００３１】
図７は、ライブ演奏の状態を示す模式図である。マルチトラックデータは、ライブ演奏中に作成される。ライブ演奏では、演奏者または歌唱者毎にマイクが設置される。例えば、歌唱者Ｖｏには、歌唱音を収音するためのマイクが設置される。ギター奏者Ｇ、ベース奏者Ｂ、およびドラム奏者Ｄｒには、この例ではマイクが設置されていない。ただし、ギター奏者Ｇ、ベース奏者Ｂ、またはドラム奏者Ｄｒがコーラス等の歌唱を行なう場合には、これら奏者にもマイクが設置される。ドラムの演奏音を収音するためのマイクは、ドラムセットを構成する各楽器（シンバル、タム、およびバスドラム等）のそれぞれに設置される。
【００３２】
演奏音および歌唱音は、これらマイクを介してミキサ１１に入力される。ギターまたはベース等の楽器は、演奏音に応じたアナログオーディオ信号またはデジタルオーディオ信号を、ミキサ１１に供給する。また、ギターおよびベースは、それぞれギターアンプ１３およびベースアンプ１４にアナログオーディオ信号またはデジタルオーディオ信号を供給する。なお、ギターアンプ１３またはベースアンプ１４には、ギターまたはベースの演奏音を収音するためのマイクが設置されていてもよい。
【００３３】
ミキサ１１は、マイクまたは楽器から供給されたオーディオ信号に、パッチ処理、ミキシング処理、およびエフェクト処理等の信号処理を行なう。ミキサ１１は、信号処理後のオーディオ信号をスピーカ１２Ｌおよびスピーカ１２Ｒに出力する。
【００３４】
これにより、ライブ演奏においては、スピーカ１２Ｌおよびスピーカ１２Ｒから歌唱音および演奏音が出力される。スピーカ１２Ｌおよびスピーカ１２Ｒは、フロア用のメインスピーカである。スピーカ１２Ｌおよびスピーカ１２Ｒから出力された音は、観客に到達する。また、ドラムは、アコースティック楽器であるため、ドラムを構成する各楽器で発生した音も、観客に到達する。また、ギターおよびベースの音は、それぞれギターアンプ１３およびベースアンプ１４等の楽器用アンプスピーカから出力される音も、観客に到達する。
【００３５】
そして、ミキサ１１は、信号処理の内容を示す信号処理パラメータを出力装置１０に送信する。また、ミキサ１１は、基本設定（設定データ）も、出力装置１０に送信する。また、ミキサ１１は、出力装置１０に対して、各入力チャンネルのオーディオ信号を、トラック別のオーディオデータとして送信する。
【００３６】
出力装置１０は、照明コントローラ１７から照明データを入力する。図７に示す様に、カメラ５５は、演奏者または歌唱者毎に設置されている。カメラ５５は、所定の形式（例えばＭＰＥＧ４）撮影した映像データを、出力装置１０に送信する。ただし、本発明において、カメラ５５を演奏者または歌唱者毎に設置することは必須ではない。例えば、カメラ５５は、１台でライブ演奏の全演奏者および歌唱者を撮影してもよい。
【００３７】
また、照明コントローラ１７は、ライブ演奏に利用される各種の照明をコントロールするための所定の形式（例えばＤＭＸ５１２）のデータを読み出し、照明をコントロールする。照明コントローラ１７は、照明データを出力装置１０に送信する。
【００３８】
出力装置１０は、ミキサ１１から信号処理パラメータおよびトラック別のオーディオデータを受信する。出力装置１０は、カメラ５５から映像データを受信する。また、出力装置１０は、照明コントローラ１７から照明データを受信する。出力装置１０は、これら受信したデータにタイムコードを付与して、図３に示したマルチトラックデータとしてエンコードする。タイムコードは、ライブ演奏が開始され、データの記録が開始されたタイミングを０として、ライブ演奏の開始からの経過時間を記録した時間情報である。なお、信号処理パラメータは、例えばシーンメモリの呼び出しがあった場合等、信号処理パラメータの内容に変化があった時のみ、マルチトラックデータ内にイベントデータとして記録されてもよい。この場合、マルチトラックデータのデータ量が削減される。
【００３９】
以上のようにして、ライブ演奏を記録したマルチトラックデータが作成される。
【００４０】
図８は、ライブ演奏の再生状態を示す模式図である。ライブ演奏の再生会場では、演奏者または歌唱者に応じた位置に、スクリーンが設置される。出力装置１０は、マルチトラックデータをデコードして、設定データ、タイムコード、および映像データを取り出す。出力装置１０は、設定データを投影機１６に出力する。投影機１６は、設定データに基づいて、基本設定を行なう。出力装置１０は、タイムコードに同期して映像データを投影機１６に出力する。これにより、スクリーンには、投影機１６から、演奏者または歌唱者の映像が投影される。
【００４１】
図８の例では、透過型スクリーンが設置される。透過型スクリーンの前面、後面、または近傍には、実際に楽器が設置される。例えば、ドラム奏者の映像が投影されるスクリーンの近くにはドラムセットが設置される。また、ギター奏者の映像が投影されるスクリーンの近くには、ギターおよびギターアンプ１３が設置される。ベース奏者の映像が投影されるスクリーンの近くには、ベースおよびベースアンプ１４が設置される。この様に、各楽器または楽器用アンプスピーカの近くに演奏者が投影されるため、視聴者は、高い再現性でライブ演奏を視聴することができる。
【００４２】
なお、スクリーンによる投影は、本願発明において必須の構成ではない。例えば、液晶ディスプレイ等の表示器により、演奏者または歌唱者の映像を表示してもよい。なお、スクリーンは、透過型であってもよいし、非透過型であってもよい。ただし、透過型スクリーンを用いることで、視聴者は、演奏者の映像に重畳して実際の楽器が設置されているように知覚することができるため、よりライブ演奏の再現性が向上する。また、歌唱者が投影されたスクリーンのさらに後ろにさらにドラム奏者が投影されるため、視聴者は、実際のライブに参加している様に知覚できる。
【００４３】
出力装置１０は、マルチトラックデータをデコードして、設定データ、タイムコード、および照明データを取り出す。出力装置１０は、設定データを照明コントローラ１７に出力する。照明コントローラ１７は、設定データに基づいて、基本設定を行なう。出力装置１０は、タイムコードに同期して照明データを照明コントローラ１７に出力する。これにより、ライブ演奏時の照明が再現される。
【００４４】
また、出力装置１０は、マルチトラックデータをデコードして、設定データ、タイムコード、信号処理パラメータ、および各トラックのオーディオデータを取り出す。出力装置１０は、設定データをミキサ１１に出力する。ミキサ１１は、設定データに基づいて、基本設定を行なう。これにより、パッチ設定、入力チャンネルの設定、および出力チャンネルの設定等が完了する。ライブ演奏の再生開始操作がなされると、出力装置１０は、タイムコードに同期して、信号処理パラメータおよび各トラックのオーディオデータをミキサ１１に出力する。なお、信号処理パラメータは、常に出力されてもよいが、信号処理の内容に変化があった場合に限り出力されてもよい。また、オーディオデータは、出力装置１０においてデジタルオーディオ信号に変換してもよいし、ミキサ１１のＤＳＰにおいてデジタルオーディオ信号に変換してもよい。
【００４５】
ミキサ１１は、各トラックのオーディオデータを入力する。ミキサ１１は、設定された信号所の内容に基づいて各トラックのオーディオデータを処理する。ミキサ１１は、信号処理した後のオーディオデータを、スピーカ１２Ｌおよびスピーカ１２Ｒにオーディオ信号を送信する。これにより、ライブ演奏と同じ状態で、スピーカ１２Ｌおよびスピーカ１２Ｒから歌唱音および演奏音が出力される。スピーカ１２Ｌおよびスピーカ１２Ｒから出力された音は、観客に到達する。
【００４６】
なお、図７のライブ会場および図８の再生会場の例では、いずれも同じ設備構成を有しているが、ライブ会場と再生会場との設備構成は、同じであるとは限らない。したがって、設定データおよび信号処理パラメータは、再生会場における設備構成に応じて、調整可能になっている。ミキサ１１のオペレータは、出力装置１０から設定データおよび信号処理パラメータを入力した後に、再生会場の設備構成に応じて、設定データおよび信号処理パラメータの内容を変更できる。または、オペレータは、出力装置１０のユーザＩ／Ｆ１０２を用いて、設定データおよび信号処理パラメータの内容を調整して、出力装置１０からミキサ１１に当該信号処理パラメータを出力させることができる。
【００４７】
例えば、再生会場で１つのスピーカしか設置されていない場合、再生会場のオペレータは、出力側のチャンネルおよびパッチ設定を変更する。例えば、オペレータは、出力側の２つのチャンネルを１つのチャンネルにミックスダウンして出力側の信号処理を行なう設定を行なうように設定する。
【００４８】
また、例えば、ハウリングが生じ易い周波数は、会場内の音響的な伝達特性に応じて変化する。したがって、ミキサ１１のオペレータは、再生会場においてハウリングが生じない様に、イコライザの設定を変更する。
【００４９】
また、ミキサ１１は、各再生会場の設備構成に応じて、信号処理パラメータを自動的に調整してもよい。例えば、ミキサ１１は、会場内の各スピーカからテスト音を発生させて、会場内の各スピーカから各マイクに至る伝達特性を取得する。ミキサ１１は、取得した伝達特性に応じて、イコライザの設定を変更する。例えば、ミキサ１１は、取得した伝達特性の周波数特性を求め、当該周波数特性のうち急峻なピークを有する周波数にノッチフィルタを設定する。さらに、ミキサ１１は、ＬＭＳ（Learning Management System）等の学習アルゴリズムを適用することで、動的にノッチフィルタの設定を変更することもできる。このようにして、ミキサ１１は、会場の設備構成に応じて、信号処理パラメータを自動調整することも可能である。
【００５０】
さらに、出力装置１０は、各楽器から出力されたオーディオ信号に係るトラックのオーディオデータを読み出す。図８の例では、出力装置１０は、ギターから出力されたオーディオ信号、およびベースから出力されたオーディオ信号のオーディオデータを読み出す。出力装置１０は、これらオーディオ信号を取り出して、対応するギターアンプ１３およびベースアンプ１４に出力する。これにより、ギターおよびベースの音は、メインのスピーカ１２Ｌおよびスピーカ１２Ｒからだけではなく、それぞれギターアンプ１３およびベースアンプ１４から出力される音も、観客に到達する。したがって、ライブ演奏の再現性が顕著に向上する。
【００５１】
また、出力装置１０は、アコースティック楽器に設置したマイクに対応するオーディオデータを読み出す。図８の例では、出力装置１０は、ドラムセットの各楽器に設置されたマイクのオーディオデータを読み出す。出力装置１０は、これらオーディオデータを加振器１５に出力する。
【００５２】
加振器１５は、本発明の加振装置の一例である。加振器１５は、出力装置１０から入力したオーディオデータに基づいて、ドラムセットの各楽器を加振して発音させる。
【００５３】
図９は、ドラムセットのうち、シンバル７０の断面図である。加振器１５は、シンバル７０に固定される。図１０は、加振器１５の詳細を示す断面図である。図１１は、加振器１５の一部透過平面図である。
【００５４】
加振器１５は、アクチュエータ１５１、板金１５２、クッション１５３、および磁石１５４を備えている。アクチュエータ１５１は、薄い円柱形状である。アクチュエータ１５１は、オーディオ信号を入力する。アクチュエータ１５１は、入力したオーディオ信号に基づいてボイスコイル（不図示）を駆動し、高さ方向（法線方向）に振動する。
【００５５】
アクチュエータ１５１の上面は、平板状の板金１５２に接着されている。板金１５２は、平面視して円形状である。板金１５２は、アクチュエータ１５１よりも平面視して面積が大きい。
【００５６】
板金１５２は、アクチュエータ１５１の上面に接着されているため、アクチュエータ１５１の振動に従って振動する。板金１５２は、クッション１５３を介して、シンバル７０の下面に接続される。クッション１５３は、例えば、粘着材からなる。クッション１５３は、曲面形状のシンバル７０の下面と、平面形状の板金１５２の隙間を埋める機能を有する。これにより、板金１５２とシンバル７０との接触点で振動時に生じるノイズ音を低減できる。また、板金１５２は、磁性体である。したがって、板金１５２は、シンバル７０の上面に配置された磁石１５４の磁力によりシンバル７０を挟み込む。
【００５７】
図１１の平面図に示す様に、この例では２つの磁石１５４が配置されている。アクチュエータ１５１は、平面視して中央に、ボイスコイルが配置されている。ボイスコイルは、オーディオ信号に基づく磁界の変化により駆動し、シンバル７０に振動を伝える。ここで、仮に磁石１５４をアクチュエータ１５１に近づけると、磁石１５４の磁界がボイスコイルの磁界に影響する可能性がある。そこで、磁石１５４は、ボイスコイルの位置から離れた位置に設置されることが好ましい。
【００５８】
すなわち、加振器は、以下の様な構成を有することが好ましい。  
（１）オーディオ信号に基づいて振動するアクチュエータ。  
（２）前記アクチュエータを磁力により楽器に接続する接続部。  
（３）前記接続部は、前記アクチュエータの軸から離れた位置で、前記アクチュエータを前記楽器に接続する。
【００５９】
また、接続部（磁石１５４）は、図１２に示す様に、アクチュエータの軸上に配置されていてもよい。この場合、加振器は、アクチュエータ１５１と板金１５２との間に樹脂等の絶縁体１５７が配置されている。絶縁体１５７は、アクチュエータ１５１と板金１５２との距離を遠くする機能を有する。
【００６０】
すなわち、加振器は、以下の様な構成を有する態様であってもよい。  
（１）オーディオ信号に基づいて振動するアクチュエータ。  
（２）前記アクチュエータを磁力により楽器に接続する接続部。  
（３）前記接続部は、磁石と、前記磁石に磁性体と、を備える。  
（４）前記アクチュエータと前記磁性体との間に、絶縁層が配置される。
【００６１】
これら構成により、加振器は、シンバル等のアコースティック楽器に取り付ける際に、磁石の影響を受けずにアコースティック楽器を加振することができる。また、加振器は、磁石によりアコースティック楽器に固定されるため、容易に着脱することが可能である。したがって、アコースティック楽器は、加振器１５を取り外してライブ演奏に使用することも容易である。
【００６２】
なお、上記実施形態の加振器１５は、シンバル７０を加振する例について説明したが、他のドラムセットの楽器も全て同じ構成および機能により、加振することができる。ただし、加振器１５の構成は、図１１および図１２に示した構造に限らない。例えば、加振器１５は、アクチュエータ１５１をアコースティック楽器に一方向から押し当てる様な構造でもよい。例えば、加振器１５は、タムのリムに取り付けられる複数のクランプと、複数のクランプ間に接続される板金と、を備え、アクチュエータ１５１が板金に取り付けられて、該アクチュエータ１５１がヘッドに押し当てられる様な構造でもよい。
【００６３】
また、加振器１５は、ドラムセットに限らず、他のアコースティック楽器を加振して音を生じさせることができる。例えば、加振器１５は、ピアノの響板に取り付けられ、響板を加振して音を生じさせることもできる。
【００６４】
以上の構成により、アコースティック楽器の音は、メインのスピーカ１２Ｌおよびスピーカ１２Ｒからだけではなく、それぞれのアコースティック楽器から発生した音も、観客に到達する。したがって、ライブ演奏の再現性が顕著に向上する。
【００６５】
図１３は、応用例に係る加振器１５の構成を示す断面図である。シンバル７０に接続される構成は図９、図１０および図１１に示した構成と同一であり、説明を省略する。
【００６６】
加振器１５は、さらにバッフル９０、補助スピーカ９０１および補助スピーカ９０２を備えている。バッフル９０は、薄い円板形状である。バッフル９０は、平面視して、シンバル７０の面積と同一またはわずかに小さい面積を有する。図示はしていないが、バッフル９０には、円形の孔または凹みが形成されている。円形の孔または凹みには、補助スピーカ９０１および補助スピーカ９０２がはめ込まれている。
【００６７】
補助スピーカ９０１および補助スピーカ９０２の放音方向は、シンバル７０の下側に向けられている。ただし、補助スピーカ９０１および補助スピーカ９０２の放音方向は、シンバル７０の上側に向けられていてもよい。
【００６８】
補助スピーカ９０１は、低音用（またはフルレンジ）のスピーカである。補助スピーカ９０１は、ライブ演奏でシンバル７０から発生した音のうち、アクチュエータ１５１では再現できない程度の低域（例えば５００Ｈｚ以下）の音を出力する。また、補助スピーカ９０２は、高音用のスピーカである。補助スピーカ９０２は、ライブ演奏でシンバル７０から発生した音のうち、アクチュエータ１５１では再現できない程度の高域（例えば４ｋＨｚ以上）の音を出力する。
【００６９】
加振器１５は、ミキサ１１から入力されたオーディオ信号を分岐して、ローパスフィルタ処理を行なう。あるいは、加振器１５は、ミキサ１１でローパスフィルタ処理された後のオーディオ信号を受信する。同様に、加振器１５は、ミキサ１１から入力されたオーディオ信号を分岐して、ハイパスフィルタ処理を行なう。あるいは、加振器１５は、ミキサ１１でハイパスフィルタ処理された後のオーディオ信号を受信する。
【００７０】
加振器１５は、ローパスフィルタ処理後のオーディオ信号を補助スピーカ９０１に入力する。また、加振器１５は、ハイパスフィルタ処理後のオーディオ信号を補助スピーカ９０２に入力する。
【００７１】
以上の構成により、加振器１５は、スピーカで高域および低域を補うため、ライブ演奏時の音をより高く再現することができる。また、バッフル９０、補助スピーカ９０１および補助スピーカ９０２は、シンバル７０の直近に配置されている。したがって、スピーカからシンバル７０の音を発する場合でも、視聴者は、シンバル７０が鳴っているように知覚することができる。
【００７２】
また、シンバル７０以外のアコースティック楽器についても、補助スピーカを配置することにより、高域または低域の音を補うことで、ライブ演奏時の音をより高く再現することができる。また、上述の例では、バッフル９０を介して補助スピーカが取り付けられ、シンバル７０の直近に補助スピーカが取り付けられているが、例えばドラムセットの近くに補助スピーカを配置する場合も、視聴者は、シンバル７０が鳴っているように知覚することができる。
【００７３】
次に、図１４は、本実施形態の再生システムの動作を示すフローチャートである。再生システムは、マルチトラックデータの出力ステップ（Ｓ１１）、アコースティック楽器の加振ステップ（Ｓ１２）、およびスピーカから放音するステップ（Ｓ１３）を含む。ただし、オーディオデータは、タイムコードにより同期されるため、アコースティック楽器の加振ステップ（Ｓ１２）、およびスピーカから放音するステップ（Ｓ１３）は、同時に行なわれる。
【００７４】
出力装置１０は、演奏音または歌唱音がトラック毎のオーディオデータとして記録されたマルチトラックデータを出力する。図１５は、出力ステップのより詳細な動作を示したフローチャートである。図１５の各動作は、ＣＰＵ１０４により実行される。ＣＰＵ１０４は、フラッシュメモリ１０３に記憶されているプログラムをＲＡＭ１０５に読み出して実行することにより、図１５に示す動作を行なう。
【００７５】
ＣＰＵ１０４は、フラッシュメモリ１０３またはサーバ等の他の記憶装置からマルチトラックデータを読み出す（Ｓ２１）。ＣＰＵ１０４は、マルチトラックデータをデコードして、基本データ、タイムコード、オーディオデータ、映像データ、照明データ、および信号処理パラメータを取り出す（Ｓ２２）。
【００７６】
その後、ＣＰＵ１０４は、例えば表示器１０１に確認画面を表示することにより、信号処理パラメータの調整を受け付ける（Ｓ２３）。上述の様に、ライブ会場と再生会場との設備構成は、同じであるとは限らない。したがって、オペレータは、出力装置１０のユーザＩ／Ｆ１０２を用いて、基本データおよび信号処理パラメータの内容を調整する。
【００７７】
その後、ＣＰＵ１０４は、例えば表示器１０１に確認画面を表示することにより、遅延調整を受け付ける（Ｓ２４）。図１６は、出力装置１０が遅延調整を受け付ける場合の、ＣＰＵ１０４の機能的構成を示すブロック図である。
【００７８】
ＣＰＵ１０４は、機能的に、複数の遅延部１７２と、デコーダ１７５と、を備えている。デコーダ１７５は、Ｓ２２のステップで説明した様に、マルチトラックデータをデコードして、タイムコード、オーディオデータ、映像データ、照明データ、および信号処理パラメータを取り出す。また、デコーダ１７５は、タイムコードにより、オーディオデータ、映像データ、照明データ、および信号処理パラメータを同期する。
【００７９】
複数の遅延部１７２は、それぞれ同期されたオーディオデータ、映像データ、照明データ、および信号処理パラメータを入力する。複数の遅延部１７２は、それぞれタイムコード、オーディオデータ、映像データ、照明データ、および信号処理パラメータに遅延を付与する。複数の遅延部１７２における遅延量は、オペレータにより手動で設定される。
【００８０】
上述のように、ライブ会場と再生会場との設備構成は、同じであるとは限らない。また、各装置の処理能力、および会場内におけるネットワークの能力も異なる場合がある。したがって、オーディオデータ、映像データ、照明データ、および信号処理パラメータを同期しても、再生会場によって、視聴者に到達する音、映像、および光は、大きくずれる場合がある。オペレータは、出力装置１０のユーザＩ／Ｆ１０２を用いて、オーディオデータ、映像データ、照明データ、および信号処理パラメータの遅延量を調整し、音、映像、および光の視聴者に到達するタイミングを調整する。
【００８１】
以上の調整操作が完了し、ライブ演奏の再生時において、オペレータは、ユーザＩ／Ｆ１０２を用いて、各データの出力を指示する。ＣＰＵ１０４は、オーディオデータ、映像データ、照明データ、および信号処理パラメータを同期して、各機器に出力する（Ｓ２５）。
【００８２】
本実施形態の説明は、すべての点で例示であって、制限的なものではないと考えられるべきである。本発明の範囲は、上述の実施形態ではなく、特許請求の範囲によって示される。さらに、本発明の範囲には、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。例えば、ミキサ１１は、出力装置１０の機能を内蔵していてもよい。また、出力装置１０は、複数の装置を組み合わせることにより実現されてもよい。
【符号の説明】
【００８３】
１…再生システム
１０…出力装置
１１…ミキサ
１２Ｌ…スピーカ
１２Ｒ…スピーカ
１３…ギターアンプ
１４…ベースアンプ
１５…加振器
１６…投影機
１７…照明コントローラ
５５…カメラ
７０…シンバル
９０…バッフル
１０１…表示器
１０２…ユーザＩ／Ｆ
１０３…フラッシュメモリ
１０４…ＣＰＵ
１０５…ＲＡＭ
１０６…ネットワークＩ／Ｆ
１５１…アクチュエータ
１５２…板金
１５３…クッション
１５４…磁石
１５７…絶縁体
１７１…バス
１７２…遅延部
１７５…デコーダ
２０１…表示器
２０２…ユーザＩ／Ｆ
２０３…オーディオＩ／Ｏ
２０４…信号処理部
２０５…ネットワークＩ／Ｆ
２０６…ＣＰＵ
２０７…フラッシュメモリ
２０８…ＲＡＭ
３０１…入力パッチ
３０２…入力チャンネル
３０３…バス
３０４…出力チャンネル
３０５…出力パッチ
３５１…信号処理ブロック
３５３…パン部
９０１，９０２…補助スピーカ
【図１】
2019205105.tif 000003
【図２】
2019205105.tif 000004
【図３】
2019205105.tif 000005
【図４】
2019205105.tif 000006
【図５】
2019205105.tif 000007
【図６】
2019205105.tif 000008
【図７】
2019205105.tif 000009
【図８】
2019205105.tif 000010
【図９】
2019205105.tif 000011
【図１０】
2019205105.tif 000012
【図１１】
2019205105.tif 000013
【図１２】
2019205105.tif 000014
【図１３】
2019205105.tif 000015
【図１４】
2019205105.tif 000016
【図１５】
2019205105.tif 000017
【図１６】
2019205105.tif 000018