(57)【特許請求の範囲】
【請求項１】
特定のタイミングにおける自端末の基準方向からの自端末の角度変化を表す方向情報を検出するセンサと、
聴取者が自端末を携帯しているときに、前記基準方向からの自端末の角度変化を表す複数の方向に対応して用意された複数の音源情報のうち、前記センサによって検出された方向情報から求められる、現在の自端末の、前記基準方向からの角度変化を表す方向に対応する音源情報を再生するように制御する再生制御部と、
を含み、
２次元の仮想空間上において、前記複数の音源情報は、前記仮想空間上に配置され、
前記再生制御部は、現在の自端末の、前記基準方向からの角度変化を表す方向に対応する仮想聴取点を決定し、前記仮想聴取点と、前記複数の音源情報の配置位置との距離及び定位に応じて、現在の自端末の、前記基準方向からの角度変化を表す方向に対応する音源情報を再生するように制御する
携帯情報端末。
【請求項２】
特定のタイミングにおける自端末の基準方向からの自端末の角度変化を表す方向情報を検出するセンサと、
聴取者が自端末を携帯しているときに、前記基準方向からの自端末の角度変化を表す複数の方向に対応して用意された複数の音源情報のうち、前記センサによって検出された方向情報から求められる、現在の自端末の、前記基準方向からの角度変化を表す方向に対応する音源情報を再生するように制御する再生制御部と、
を含み、
３次元の仮想空間上において、前記複数の音源情報は、前記仮想空間上に配置され、
前記再生制御部は、現在の自端末の、前記基準方向からの角度変化を表す方向に対応する仮想聴取点を決定し、前記仮想聴取点と、前記複数の音源情報の配置位置との距離及び定位に応じて、現在の自端末の、前記基準方向からの角度変化を表す方向に対応する音源情報を再生するように制御する
携帯情報端末。
【請求項３】
聴取者が携帯情報端末を携帯しているときに、特定のタイミングにおける前記携帯情報端末の基準方向からの前記携帯情報端末の角度変化を表す複数の方向に対する複数の音源情報のうち、前記基準方向からの前記携帯情報端末の角度変化を表す方向情報を検出するセンサによって検出された方向情報から求められる、現在の前記携帯情報端末の、前記基準方向からの角度変化を表す方向に対応する音源情報を再生するように制御する再生制御部
を含み、
２次元の仮想空間上において、前記複数の音源情報は、前記仮想空間上に配置され、
前記再生制御部は、現在の前記携帯情報端末の、前記基準方向からの角度変化を表す方向に対応する仮想聴取点を決定し、前記仮想聴取点と、前記複数の音源情報の配置位置との距離及び定位に応じて、現在の前記携帯情報端末の、前記基準方向からの角度変化を表す方向に対応する音源情報を再生するように制御する
情報処理装置。
【請求項４】
聴取者が携帯情報端末を携帯しているときに、特定のタイミングにおける前記携帯情報端末の基準方向からの前記携帯情報端末の角度変化を表す複数の方向に対する複数の音源情報のうち、前記基準方向からの前記携帯情報端末の角度変化を表す方向情報を検出するセンサによって検出された方向情報から求められる、現在の前記携帯情報端末の、前記基準方向からの角度変化を表す方向に対応する音源情報を再生するように制御する再生制御部
を含み、
３次元の仮想空間上において、前記複数の音源情報は、前記仮想空間上に配置され、
前記再生制御部は、現在の前記携帯情報端末の、前記基準方向からの角度変化を表す方向に対応する仮想聴取点を決定し、前記仮想聴取点と、前記複数の音源情報の配置位置との距離及び定位に応じて、現在の前記携帯情報端末の、前記基準方向からの角度変化を表す方向に対応する音源情報を再生するように制御する
情報処理装置。
【請求項５】
コンピュータを、
聴取者が携帯情報端末を携帯しているときに、特定のタイミングにおける前記携帯情報端末の基準方向からの前記携帯情報端末の角度変化を表す複数の方向に対する複数の音源情報のうち、前記基準方向からの前記携帯情報端末の角度変化を表す方向情報を検出するセンサによって検出された方向情報から求められる、現在の前記携帯情報端末の、前記基準方向からの角度変化を表す方向に対応する音源情報を再生するように制御する再生制御部
として機能させるためのプログラムであって、
２次元の仮想空間上において、前記複数の音源情報は、前記仮想空間上に配置され、
前記再生制御部は、現在の前記携帯情報端末の、前記基準方向からの角度変化を表す方向に対応する仮想聴取点を決定し、前記仮想聴取点と、前記複数の音源情報の配置位置との距離及び定位に応じて、現在の前記携帯情報端末の、前記基準方向からの角度変化を表す方向に対応する音源情報を再生するように制御する
プログラム。
【請求項６】
コンピュータを、
聴取者が携帯情報端末を携帯しているときに、特定のタイミングにおける前記携帯情報端末の基準方向からの前記携帯情報端末の角度変化を表す複数の方向に対する複数の音源情報のうち、前記基準方向からの前記携帯情報端末の角度変化を表す方向情報を検出するセンサによって検出された方向情報から求められる、現在の前記携帯情報端末の、前記基準方向からの角度変化を表す方向に対応する音源情報を再生するように制御する再生制御部
として機能させるためのプログラムであって、
３次元の仮想空間上において、前記複数の音源情報は、前記仮想空間上に配置され、
前記再生制御部は、現在の前記携帯情報端末の、前記基準方向からの角度変化を表す方向に対応する仮想聴取点を決定し、前記仮想聴取点と、前記複数の音源情報の配置位置との距離及び定位に応じて、現在の前記携帯情報端末の、前記基準方向からの角度変化を表す方向に対応する音源情報を再生するように制御する
プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、携帯情報端末、情報処理装置、及びプログラムに係り、特に、音源を再生する携帯情報端末、情報処理装置、及びプログラムに関する。
【背景技術】
【０００２】
従来より、立体音響技術は、あくまでも頭部を固定した状態での聴取を前提としている。
【０００３】
様々な種類の立体音響技術があるが、ほぼ全てが聴取者の頭部回転に対応する事なく、聴取者の固定された頭部の周囲に音源を定位させる方式である（例えば、特許文献１）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１３−２１１７１２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
上述した従来の方式では、例えば聴取者が後ろを向くといった動作には対応出来ず、想定した効果を得る事は難しい。
【０００６】
本発明は、上記の事情を鑑みてなされたもので、聴取者の向きに応じた音源を再生することができる携帯情報端末、情報処理装置、及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記の目的を達成するために第１の発明に係る携帯情報端末は、自端末の方向情報を検出するセンサと、聴取者が自端末を携帯しているときに、複数の方向に対応して用意された複数の音源情報のうち、前記センサによって検出された方向情報から求められる、現在の自端末の方向に対応する音源情報を再生するように制御する再生制御部と、を含んで構成されている。
【０００８】
第２の発明に係る情報処理装置は、聴取者が携帯情報端末を携帯しているときに、複数の方向に対する複数の音源情報のうち、前記携帯情報端末の方向情報を検出するセンサによって検出された方向情報から求められる、現在の前記携帯情報端末の方向に対応する音源情報を再生するように制御する再生制御部を含んで構成されている。
【０００９】
第３の発明に係るプログラムは、コンピュータを、聴取者が携帯情報端末を携帯しているときに、複数の方向に対する複数の音源情報のうち、携帯情報端末の方向情報を検出するセンサによって検出された方向情報から求められる、現在の携帯情報端末の方向に対応する音源情報を再生するように制御する再生制御部として機能させるためのプログラムである。
【００１０】
第４の発明に係る情報処理装置は、聴取者が向いている方向情報の入力を受け付ける入力部と、複数の方向に対応して用意された複数の音源情報のうち、前記入力部によって受け付けた方向情報から求められる、現在の聴取者の方向に対応する音源情報を再生するように制御する再生制御部と、を含んで構成されている。
【００１１】
第５の発明に係る情報処理装置は、聴取者が向いている方向情報が入力されたときに、複数の方向に対する複数の音源情報のうち、前記聴取者の方向情報から求められる、現在の前記聴取者の方向に対応する音源情報を再生するように制御する再生制御部を含んで構成されている。
【００１２】
第６の発明に係るプログラムは、コンピュータを、聴取者が向いている方向情報が入力されたときに、複数の方向に対応して用意された複数の音源情報のうち、前記聴取者の方向情報から求められる、現在の聴取者の方向に対応する音源情報を再生するように制御する再生制御部として機能させるためのプログラムである。
【００１３】
上記のプログラムは、記憶媒体に格納して提供することができる。
【発明の効果】
【００１４】
以上説明したように、本発明の携帯情報端末、情報処理装置、及びプログラムによれば、聴取者が携帯情報端末を携帯しているときに、センサによって検出された自端末の方向情報から求められる、現在の携帯情報端末の方向に対応する音源情報を再生するように制御することにより、携帯情報端末を持つ聴取者の向きに応じた音源を再生することができる、という効果が得られる。またパノラマ映像等の再生に於いても、携帯情報端末に表示される視覚情報と同期した音が得られる為、仮想現実の効果を最大限に発揮する事が可能となる。
【００１５】
また、本発明の情報処理装置及びプログラムによれば、聴取者の方向情報が入力されるときに、入力された方向情報から求められる、現在の聴取者の方向に対応する音源情報を再生するように制御することにより、聴取者の向きに応じた音源を再生することができる、という効果が得られる。
【図面の簡単な説明】
【００１６】
【図１】本発明の第１の実施の形態に係る携帯情報端末の構成を示す概略図である。
【図２】複数の発音源の配置と仮想聴取点の軌道の一例を示す図である。
【図３】音源の最大距離の設定の一例を示す図である。
【図４】仮想聴取点の軌道の一例を示す図である。
【図５】ロールオフ係数の一例を示す図である。
【図６】本発明の第１の実施の形態に係る携帯情報端末の再生制御処理ルーチンの内容を示すフローチャートである。
【図７】複数の方向の音源情報に対応した複数の発音源の配置の一例を示す図である。
【図８】音源の最大距離の設定の一例を示す図である。
【図９】複数の発音源の一例を示す図である。
【図１０】本発明の第３の実施の形態に係る再生システムの構成を示す概略図である。
【図１１】本発明の第４の実施の形態に係る再生システムの構成を示す概略図である。
【発明を実施するための形態】
【００１７】
以下、図面を参照して本発明の実施の形態を詳細に説明する。
【００１８】
＜本発明の実施の形態の概要＞
全方位音源、若しくは多方向音源を収録し、任意の聴取角に対応する音源を選択して聴取する方法について説明する。
【００１９】
聴取したい全ての方向の音源を予め収録、若しくはリアルタイム収録し、聴取者が携帯情報端末を携帯しているときに、携帯情報端末の向きを、聴取者の身体の向きや頭部方向等として、ジャイロセンサ等で検知する事により、その方向の音源及び音場を選択的に聴取可能とする。
【００２０】
これにより、選択した聴取角に指向性マイクを向けているかの様な聴取体験が可能となる。
【００２１】
＜第１の実施の形態＞
＜システム構成＞
図１に示すように、本発明の実施の形態に係る携帯情報端末１０は、携帯情報端末１０の角速度を検出するジャイロセンサ１２と、制御部１４と、スピーカ又はヘッドホンである音源出力部１６とを備えている。
【００２２】
携帯情報端末１０は、携帯電話、スマートフォン、頭部装着ディスプレイ、ウェアラブル端末、メガネ型端末、時計型端末、あるいはノート型・ブック型コンピュータ端末等からなる。なお、携帯情報端末１０を、スマートフォンを一例として以下、説明する。携帯情報端末１０は、インターネットなどのネットワークに接続されている。
【００２３】
制御部１４は、ＣＰＵ、ＲＯＭ、ＲＡＭ、及びＨＤＤやフラッシュメモリ等を備えたコンピュータで構成されており、ＨＤＤやフラッシュメモリ等には、Ｗｅｂサーバ（図示省略）が提供するサイトからダウンロードし、かつ、インストールした、後述する各種処理ルーチンを含む音源再生アプリケーションソフトが記憶されている。制御部１４は、機能的には次に示すように構成されている。制御部１４は、方向算出部２０、音源記憶部２４、及び再生制御部２６を備えている。
【００２４】
方向算出部２０は、ジャイロセンサ１２によって検出された水平面の回転角速度を積算することにより、水平面における自端末の基準方向からの角度変化を、自端末の方向として算出する。例えば、音源再生アプリケーションソフトが起動されたときを基準方向として、音源再生アプリケーションソフトが起動されたときから現時点までに検出された水平面の回転角速度を積算することにより、当該基準方向からの自端末の角度変化を算出する。
【００２５】
音源記憶部２４には、複数の方向に対応する複数の音源情報からなるマルチ音源が記憶されている。例えば、mp4、mov等の動画や、aac、aif、wav等の音データとして記憶されている。
【００２６】
図２に示すように、複数の発音源は、２次元の仮想空間上において、聴取者の仮想位置を中心とし、半径を所定距離とした円周（図２の聴取軌道を参照）上に配置され、複数の方向に対応している。
【００２７】
また、後述するように、仮想聴取点と、発音源の配置位置との距離と定位に応じた音量と音場で、再生するように制御する。例えば、仮想聴取点が、発音源の配置位置から離れる程、音は聴こえなくなる。
【００２８】
この場合の、音量が最小になる地点から発音源までの距離を音源の最大距離とする。音源の最大距離の設定により、聴取範囲の制御が可能となり、目的に応じた立体感を得る事が出来る。図３（Ａ）、（Ｂ）、（Ｃ）にその例を示す。
【００２９】
図３（Ａ）では、音源の最大距離と、聴取者の仮想位置と発音源の距離が一致するように、音源の最大距離が設定されている例を示している。
【００３０】
図３（Ｂ）では、音源の最大距離が、聴取者の仮想位置と発音源の距離より短くなるように、音源の最大距離が設定されている例を示している。この例では、別の方向の発音源との重なりを防ぐことができる。
【００３１】
図３（Ｃ）では、音源の最大距離が、聴取者の仮想位置と発音源の距離より長くなるように、音源の最大距離が設定されている例を示す。この例では、方向間の自然な表現と立体感が得られる。
【００３２】
また、仮想現実空間をよりリアルに構築する為には、どの方向を向いても明確な音源の定位が得られるよう予め全ての方向に対して頭部伝達関数(Head-Related Transfer Function, HRTF)を畳み込んだ発音源を用意しておく。線形時不変システムでは伝達関数Ｈ（ｆ）は以下の式で表される。
【００３３】
【数１】
0006651231.tif 000002
【００３４】
また、以下の式に示すように、周波数領域に於いて発音源Ｓ（ω）に頭部伝達関数HRTFL(d,e,a,ω)とHRTFR(d,e,a,ω)を掛ける事により、左耳用の信号ＸL(ω)と右耳用の信号ＸR(ω)が得られる。
【００３５】
【数２】
0006651231.tif 000003
【００３６】
ただし、ωは角周波数を表し、d、e、aは発音源の位置（距離、仰角、水平角）を表す。同様に、時間領域に於いてはベクトルＳ（ｔ）と頭部インパルス応答を畳み込む事により左耳用の信号ＸL(ｔ)と右耳用の信号XR(ｔ)が得られる。
【００３７】
上記のようにして得られた全方位音源を、全方向に対して収録しておく事で、より自然で臨場感のある仮想現実音空間を構築する事が出来、頭部回転などにより携帯情報端末１０がどの方向を向いても、明瞭な音像定位を実現する事が可能となる。
【００３８】
再生制御部２６は、方向算出部２０によって算出された現在の自端末の方向に対応する、聴取角内の仮想聴取点を決定し、仮想聴取点と複数の発音源の配置位置との距離や定位に応じて、各発音源の音量や音場を制御する。例えば、聴取角内の発音源の位置を仮想聴取点として決定し、聴取角内の発音源の音のみが聴こえるよう、音量や音場を制御する。
【００３９】
なお、図４（Ａ）に示すように、ステレオ音源等、２つの発音源間での聴取がメインの場合には、聴取点から両発音源までの距離が短い程クリアに聴こえるので、両発音源を結んだ線上に仮想聴取点を決定するのが望ましい。この場合には、仮想聴取点の軌道となる円周の半径と、聴取者の仮想位置と発音源の距離の比は、１対√２になる。また、仮想空間における発音源の配位位置は円周上ではない位置となる。または、図４（Ｂ）に示すように、発音源間を結んだ線を聴取軌道として設定する事も効果的である。
【００４０】
再生制御部２６は、聴取角に応じて各発音源の音量や音場を制御し、音源出力部１６へ受け渡す。このとき、仮想聴取点と発音源の配置位置との距離が長いほど、小さい音量で、再生するように再生データを生成する。
【００４１】
ここで、発音源から音源の最大距離に至るまでの間で音量を減衰させる際に、ロールオフ係数を設定する事により、目的に応じた音量減衰を得る事が出来る。図５にその例を示す。
【００４２】
例えば、発音源から離れるほど聴こえなくなるように音量を減衰させるロールオフ係数（図５の直線Ａを参照）、発音源から少し離れると急に聴こえなくなるように音量を減衰させるロールオフ係数（図５の曲線Ｂを参照）、発音源から離れていくと自然に聴こえなくなるように音量を減衰させるロールオフ係数（図５の曲線Ｃを参照）、及び発音源から離れていくと急に聴こえなくなるように音量を減衰させるロールオフ係数（図５の曲線Ｄを参照）等を設定することができる。これにより、特にパノラマ映像等の視覚情報との整合が図れる。
【００４３】
＜携帯情報端末の作用＞
【００４４】
次に、本発明の第１の実施の形態に係る携帯情報端末１０の作用について説明する。
【００４５】
まず、聴取者が、携帯情報端末１０を手に携帯し、携帯情報端末１０を操作して、音源再生アプリケーションを起動すると、携帯情報端末１０は、図６に示す再生制御処理ルーチンを実行する。
【００４６】
まず、ステップＳ１００において、ジャイロセンサ１２によって検出された水平面の回転角速度を取得する。聴取者が携帯情報端末１０を手に携帯したまま、向きを変えると、それに応じた水平面の回転角速度がジャイロセンサ１２によって検出される。そして、ステップＳ１０２において、上記ステップＳ１００で現時点までに取得された水平面の回転角速度を積算することにより、水平面における自端末の基準方向からの角度変化を、自端末の方向として算出する。
【００４７】
そして、ステップＳ１０４において、上記ステップＳ１０２で算出された自端末の方向に基づいて、仮想聴取点の位置を決定し、複数の発音源の各々に対して、当該発音源の配位位置と仮想聴取点の位置との間の距離と定位を算出し、聴取角内の音のみが聴こえるよう、各発音源の音量と音場を制御する。
【００４８】
ステップＳ１０６では、上記ステップＳ１０４で算出された、各発音源の仮想聴取点からの距離と定位に応じた音量と音場で、音源を再生するように、音源出力部１６に受け渡し、ステップＳ１０８において、終了指示があったか否かを判定し、終了指示がない場合には、上記ステップＳ１００へ戻り、一方、終了指示があった場合には、再生制御処理ルーチンを終了する。
【００４９】
以上説明したように、本発明の第１の実施の形態に係る携帯情報端末によれば、聴取者が携帯情報端末を手に携帯しているときに、ジャイロセンサによって検出された携帯情報端末の回転角速度から求められる、現在の携帯情報端末の方向に対応する各発音源の音量と音場を制御することにより、聴取者は携帯情報端末の向きに応じた音源を選択聴取することができる。
【００５０】
また、任意の自端末方向の先にある発音源を選択して聴取可能にする為には、仮想聴取点を選択音源に近づける必要がある。ジャイロセンサの検出によって得られた回転角速度に対して、発音源の近くを通る聴取軌道を設定する事により、仮想聴取点と各発音源との距離に差が生まれる為、仮想聴取点から近い距離の音源のみを選択聴取する事が可能となる。
【００５１】
また、各発音源上を結ぶ聴取軌道を設定する事により、選択発音源と同じ位置にある仮想聴取点では、距離による遅延が無くなり、音源をよりクリアに聴取する事が可能となる。これにより、あたかも自端末方向の先にある発音場所で聴取しているような効果を得る事が出来る。
【００５２】
また、ジャイロセンサの検出によって得られた回転角速度に対して、発音源近くを通る聴取軌道上を、仮想聴取点が移動する事により、シームレスな音像定位が可能となる。これにより、全方位の中心に聴取者の仮想位置があるのに対し、仮想聴取点が、自端末方向の発音源に近くなり、その他の発音源との距離が、その発音源の最大距離を超える為、自端末方向の発音源のみを選択聴取する事が可能となる。
【００５３】
＜第２の実施の形態＞
次に、第２の実施の形態に係る携帯情報端末について説明する。なお、第２の実施の形態に係る携帯情報端末の構成は、第１の実施の形態と同様であるため、説明を省略する。
【００５４】
第２の実施の形態では、３次元の仮想空間に、複数の発音源が配置されている点が、第１の実施の形態と異なっている。
【００５５】
第２の実施の形態に係る携帯情報端末の方向算出部２０は、ジャイロセンサ１２によって検出された３軸の回転角速度を積算することにより、３次元における自端末の基準方向からの角度変化を、自端末の方向として算出する。
【００５６】
音源記憶部２４には、複数の方向に対応する複数の音源情報からなるマルチ音源が記憶されている。図７に示すように、例えば、複数の発音源は、３次元の仮想空間上において、聴取者の仮想位置を中心とし、半径を所定距離とした球面上に配置され、複数の方向に対応している。
【００５７】
また、上記の第１の実施の形態と同様に、図８に示すように、複数の発音源の各々では、音源の最大距離が設定されている。
【００５８】
再生制御部２６は、方向算出部２０によって算出された現在の自端末の方向に対応する、聴取角内の仮想聴取点を決定し、仮想聴取点と複数の発音源の配置位置との距離や定位に応じて、各発音源の音量や音場を制御する。例えば、聴取角内の発音源の位置を仮想聴取点として決定し、聴取角内の発音源の音のみが聴こえるよう、音量や音場を制御する。
【００５９】
再生制御部２６は、聴取角に応じて各発音源の音量や音場を制御し、音源出力部１６へ受け渡す。このとき、仮想聴取点と発音源の配置位置との距離が長いほど、小さい音量で、再生するように再生データを生成する。
【００６０】
なお、第２の実施の形態に係る携帯情報端末の他の構成及び作用については、第１の実施の形態と同様であるため、説明を省略する。
【００６１】
以上説明したように、本発明の第２の実施の形態に係る携帯情報端末によれば、聴取者が携帯情報端末を手に携帯しているときに、ジャイロセンサによって検出された携帯情報端末の回転角速度から求められる、３次元における現在の携帯情報端末の方向に対応する各発音源の音量と音場を制御することにより、聴取者は携帯情報端末の向きに応じた音源を選択聴取することができる。
【００６２】
また、全方位に対応する事が可能な為、例えば３６０度パノラマ映像等に取り入れる事で、視聴者の視覚と聴覚を融合する事が可能である。この場合には、携帯情報端末の表示画面に相当する、見える窓内の発音源を選択して聴取することが可能となる（図９（Ｂ）参照）。また、視覚の中心にある発音源をクローズアップして聴くという、新しい聴取体験を可能とする。
【００６３】
また、頭部回転や携帯情報端末の回転によって聴きたい発音源をアクティブ聴取出来る為、予め多言語を収録し、頭部回転や携帯情報端末の回転により言語を選択するといった使い方も可能である（図９（Ａ）参照）。また、前を向いた時と後ろを向いた時で、別のアーティストの演奏をクローズアップ聴取したり、様々な新しい聴取形態が可能となる。
【００６４】
＜第３の実施の形態＞
次に、第３の実施の形態に係る再生システムについて説明する。なお、第１の実施の形態と同様となる部分については、同一符号を付して、説明を省略する。
【００６５】
第３の実施の形態では、再生制御をサーバ側で行っている点が、第１の実施の形態と異なっている。
【００６６】
図１０に示すように、第３の実施の形態に係る再生システム３００は、携帯情報端末２１０と、サーバ２２０とを備えている。携帯情報端末２１０とサーバ２２０とはネットワーク２３０を介して接続されている。
【００６７】
携帯情報端末２１０は、ジャイロセンサ１２と、通信部２１４と、音源出力部１６とを備えている。
【００６８】
通信部２１４は、ジャイロセンサ１２によって逐次検出された回転角速度をサーバ２２０へ送信すると共に、サーバ２２０から受信した再生データを、音源出力部１６により出力する。
【００６９】
サーバ２２０は、ＣＰＵ、ＲＯＭ、ＲＡＭ、及びＨＤＤやフラッシュメモリ等を備えたコンピュータで構成されている。サーバ２２０は、機能的には次に示すように構成されている。サーバ２２０は、通信部２２２、方向算出部２２４、音源記憶部２４、及び再生制御部２２６を備えている。
【００７０】
通信部２２２は、携帯情報端末２１０から送信された回転角速度を受信し、方向算出部２２４へ受け渡す。また、通信部２２２は、再生制御部２２６から出力された再生データを、携帯情報端末２１０へ送信する。
【００７１】
方向算出部２２４は、通信部２２２によって受信した回転角速度を積算することにより、自端末の基準方向からの角度変化を、携帯情報端末２１０の方向として算出する。
【００７２】
再生制御部２２６は、方向算出部２２４によって算出された現在の携帯情報端末２１０の方向に対応する、聴取角内の仮想聴取点を決定し、仮想聴取点と複数の発音源の配置位置との距離や定位に応じて、各発音源の音量や音場を制御する。
【００７３】
再生制御部２２６は、聴取角に応じて各発音源の音量や音場を制御し、通信部２２２へ受け渡す。このとき、仮想聴取点と発音源の配置位置との距離が長いほど、小さい音量で、再生するように再生データを生成する。
【００７４】
＜再生システムの作用＞
次に、本発明の第３の実施の形態に係る再生システム３００の作用について説明する。
【００７５】
まず、聴取者が、携帯情報端末２１０を手に携帯し、音源再生アプリケーションを起動すると、携帯情報端末２１０は、ジャイロセンサ１２によって逐次検出された回転角速度をサーバ２２０へ送信する。
【００７６】
サーバ２２０は、携帯情報端末２１０から受信した回転角速度を取得すると、現時点までに取得された回転角速度を積算することにより、携帯情報端末２１０の基準方向からの角度変化を、携帯情報端末２１０の方向として算出する。
【００７７】
そして、サーバ２２０は、算出された携帯情報端末２１０の方向に基づいて、仮想聴取点の位置を決定し、複数の発音源の各々に対して、当該発音源の配位位置と仮想聴取点の位置との間の距離や定位を算出し、各発音源の音量や音場を制御した上で音源を再生するように再生データを生成し、携帯情報端末２１０へ送信する。
【００７８】
そして、携帯情報端末２１０は、サーバ２２０から受信した再生データを、音源出力部１６により出力する。
【００７９】
以上説明したように、本発明の第３の実施の形態に係る再生システムによれば、聴取者が携帯情報端末を手に携帯しているときに、ジャイロセンサによって検出された携帯情報端末の回転角速度から求められる、現在の携帯情報端末の方向に対応する各発音源の音量と音場を制御した再生データを生成し、サーバから携帯情報端末へ送信することにより、聴取者は、携帯情報端末の向きに応じた音源を選択聴取することができる。
【００８０】
なお、上記の第１の実施の形態と第２の実施の形態では、発音源が聴取者の仮想位置を中心とした円周上や球面上に配置されている場合を例に説明したが、これに限定されるものではなく、円周上や球面上ではない位置に発音源が配置されていてもよい。
【００８１】
また、上記の第１の実施の形態〜第３の実施の形態では、聴取者が携帯情報端末を手に携帯している場合を例に説明したがこれに限定されるものではなく、携帯情報端末がメガネ型端末や時計型端末のように聴取者に取り付けられることにより携帯している場合であってもよい。
【００８２】
また、ジャイロセンサを用いる場合を例に説明したが、これに限定されるものではなく、携帯情報端末の方向情報が得られれば、他のセンサを用いてもよい。例えば、方位センサを用いて、携帯情報端末の方向情報として方角を検出してもよい。この場合には、各方角に対応して発音源を用意すればよい。
【００８３】
＜第４の実施の形態＞
次に、第４の実施の形態に係る再生システムについて説明する。なお、第１の実施の形態〜第３の実施の形態と同様となる部分については、同一符号を付して、説明を省略する。
【００８４】
第４の実施の形態では、聴取者が仮想的に向いている方向を入力操作で受け付けている点が、第３の実施の形態と異なっている。
【００８５】
図１１に示すように、第４の実施の形態に係る再生システム４００は、情報処理装置４１０と、サーバ４２０とを備えている。情報処理装置４１０とサーバ４２０とはネットワーク２３０を介して接続されている。
【００８６】
情報処理装置４１０は、入力部４１２と、通信部４１４と、音源出力部１６とを備えている。
【００８７】
入力部４１２は、ユーザのマウス操作、キーボード操作、又はジョイスティック操作などにより聴取者が仮想的に向いている方向情報を受け付ける。
【００８８】
通信部４１４は、入力部４１２により受け付けた方向情報をサーバ４２０へ送信すると共に、サーバ４２０から受信した再生データを、音源出力部１６により出力する。
【００８９】
サーバ４２０は、ＣＰＵ、ＲＯＭ、ＲＡＭ、及びＨＤＤやフラッシュメモリ等を備えたコンピュータで構成されている。サーバ４２０は、機能的には次に示すように構成されている。サーバ４２０は、通信部４２２、方向算出部４２４、音源記憶部２４、及び再生制御部２２６を備えている。
【００９０】
通信部４２２は、情報処理装置４１０から送信された方向情報を受信し、方向算出部４２４へ受け渡す。また、通信部４２２は、再生制御部２２６から出力された再生データを、情報処理装置４１０へ送信する。
【００９１】
方向算出部４２４は、通信部４２２によって受信した方向情報に基づいて、聴取者の仮想的な方向を算出する。
【００９２】
再生制御部２２６は、方向算出部４２４によって算出された現在の聴取者の仮想的な方向に対応する、聴取角内の仮想聴取点を決定し、仮想聴取点と複数の発音源の配置位置との距離や定位に応じて、各発音源の音量や音場を制御する。
【００９３】
再生制御部２２６は、聴取角に応じて各発音源の音量や音場を制御し、通信部４２２へ受け渡す。このとき、仮想聴取点と発音源の配置位置との距離が長いほど、小さい音量で、再生するように再生データを生成する。
【００９４】
＜再生システムの作用＞
次に、本発明の第４の実施の形態に係る再生システム４００の作用について説明する。
【００９５】
まず、聴取者が、マウス操作、キーボード操作、又はジョイスティック操作などにより、情報処理装置４１０に、聴取者の仮想的な向きを示す方向情報を入力すると、情報処理装置４１０は、受け付けた方向情報をサーバ４２０へ送信する。
【００９６】
サーバ４２０は、情報処理装置４１０から受信した方向情報を取得すると、聴取者の仮想的な方向を算出する。
【００９７】
そして、サーバ４２０は、算出された聴取者の仮想的な方向に基づいて、仮想聴取点の位置を決定し、複数の発音源の各々に対して、当該発音源の配位位置と仮想聴取点の位置との間の距離や定位を算出し、各発音源の音量や音場を制御した上で音源を再生するように再生データを生成し、情報処理装置４１０へ送信する。
【００９８】
そして、情報処理装置４１０は、サーバ４２０から受信した再生データを、音源出力部１６により出力する。
【００９９】
以上説明したように、本発明の第４の実施の形態に係る再生システムによれば、聴取者の方向情報が入力されるときに、入力された方向情報から求められる、現在の聴取者の方向に対応する各発音源の音量と音場を制御した再生データを生成し、サーバから情報処理装置へ送信することにより、聴取者は、入力した向きに応じた音源を選択聴取することができる。
【０１００】
なお、上記第４の実施の形態において、サーバ４２０を用いずに、情報処理装置４１０が、方向算出部４２４、再生制御部２２６、及び音源記憶部２４を備えているように構成してもよい。
【符号の説明】
【０１０１】
１０ 携帯情報端末
１２ ジャイロセンサ
１４ 制御部
１６ 音源出力部
２０ 方向算出部
２４ 音源記憶部
２６ 再生制御部
２１０ 携帯情報端末
２１４、４１４ 通信部
２２０、４２０ サーバ
２２２、４２２ 通信部
２２４、４２４ 方向算出部
２２６ 再生制御部
２３０ ネットワーク
３００、４００ 再生システム
４１０ 情報処理装置
４１２ 入力部
【図１】
0006651231.tif 000004
【図２】
0006651231.tif 000005
【図３】
0006651231.tif 000006
【図４】
0006651231.tif 000007
【図５】
0006651231.tif 000008
【図６】
0006651231.tif 000009
【図７】
0006651231.tif 000010
【図８】
0006651231.tif 000011
【図９】
0006651231.tif 000012
【図１０】
0006651231.tif 000013
【図１１】
0006651231.tif 000014