(57)【要約】【課題】適切なサラウンド音場を構築させるためのスピーカ装置の設定作業を簡易且つ精度よく行うことが可能なサラウンドシステムを提供する。【解決手段】情報処理端末と情報処理端末に無線接続されたスピーカ装置とを備え、情報処理端末は、スピーカ装置と音声を聴くユーザとを撮影するカメラ部と、撮影された撮像情報に基づきスピーカ装置およびユーザの位置情報ならびにユーザの顔の向き情報を取得し、自情報処理端末およびスピーカ装置それぞれについて、出力対象のオーディオ信号のチャンネルを決定する設定情報処理部と、当該オーディオ信号から、決定されたチャンネルの信号を選択する第１チャンネル選択部と、選択されたオーディオ信号を出力する第１スピーカ部とを有する。スピーカ装置は、当該オーディオ信号から、決定されたチャンネルの信号を選択する第２チャンネル選択部と、選択されたオーディオ信号を出力する第２スピーカ部とを有する。【選択図】図２
2020191539.tif 000002
【特許請求の範囲】
【請求項１】
情報処理端末と、前記情報処理端末に無線接続された少なくとも１台のスピーカ装置とを備え、
前記情報処理端末は、
前記スピーカ装置と、自情報処理端末および前記スピーカ装置から出力される音声を聴くユーザとを撮影するカメラ部と、
前記カメラ部で撮影された撮像情報に基づき、前記スピーカ装置および前記ユーザの位置情報ならびに前記ユーザの顔の向き情報を取得し、取得した情報に基づいて、自情報処理端末および前記スピーカ装置それぞれについて、出力対象のオーディオ信号のチャンネルを決定する設定情報処理部と、
複数チャンネルで構成されたオーディオ信号から、前記設定情報処理部で決定されたチャンネルの信号を選択する第１チャンネル選択部と、
前記第１チャンネル選択部で選択されたオーディオ信号を出力する第１スピーカ部と、
を有し、
前記スピーカ装置は、
前記オーディオ信号から、前記情報処理端末で決定されたチャンネルの信号を選択する第２チャンネル選択部と、
前記第２チャンネル選択部で選択されたオーディオ信号を出力する第２スピーカ部と
を有することを特徴とするサラウンドシステム。
【請求項２】
前記情報処理端末の設定情報処理部はさらに、取得した前記スピーカ装置および前記ユーザの位置情報に基づいて、自情報処理端末および前記スピーカ装置それぞれについて、出力対象のオーディオ信号の音量および出力タイミングを決定し、
前記情報処理端末の第１スピーカ部は、前記第１チャンネル選択部で選択されたオーディオ信号を、前記設定情報処理部で決定された音量および出力タイミングで出力し、
前記スピーカ装置の第２スピーカ部は、前記第２チャンネル選択部で選択されたオーディオ信号を、前記設定情報処理部で決定された音量および出力タイミングで出力する
ことを特徴とする請求項１に記載のサラウンドシステム。
【請求項３】
前記スピーカ装置は複数台設置され、各スピーカ装置は、自スピーカ装置の識別情報を、前記カメラ部から撮影可能な状態で設置した識別体を有し、
前記情報処理端末の設定情報処理部は、前記カメラ部で撮影された撮像情報に基づき前記識別体の識別情報を認識することで、各スピーカ装置の位置情報を取得する
ことを特徴とする請求項１または２に記載のサラウンドシステム。
【請求項４】
前記スピーカ装置は、
前記情報処理端末および前記ユーザを撮影する第２カメラ部と、
前記第２カメラ部で撮影された撮像情報に基づき、前記情報処理端末およびユーザの位置情報ならびに当該ユーザの顔の向き情報を取得する第２設定情報処理部とを有し、
前記情報処理端末の設定情報処理部は、前記スピーカ装置の前記第２設定情報処理部で決定された情報を含めて、該当する装置について、出力対象のオーディオ信号のチャンネル、音量、および出力タイミングを決定する
ことを特徴とすることを特徴とする請求項２または３に記載のサラウンドシステム。
【請求項５】
少なくとも１台のスピーカ装置に無線接続され、
前記スピーカ装置と、自情報処理端末および前記スピーカ装置から出力される音声を聴くユーザとを撮影するカメラ部と、
前記カメラ部で撮影された撮像情報に基づき、前記スピーカ装置および前記ユーザの位置情報ならびに前記ユーザの顔の向き情報を取得し、取得した情報に基づいて、自情報処理端末について出力対象のオーディオ信号のチャンネルを決定する設定情報処理部と、
複数チャンネルで構成されたオーディオ信号から、前記設定情報処理部で決定されたチャンネルの信号を選択するチャンネル選択部と、
前記チャンネル選択部で選択されたオーディオ信号を出力するスピーカ部と
を備えることを特徴とする情報処理端末。
【請求項６】
少なくとも１台のスピーカ装置に無線接続された情報処理端末が、
前記スピーカ装置と、自情報処理端末および前記スピーカ装置から出力される音声を聴くユーザとを撮影し、
撮影された撮像情報に基づき、前記スピーカ装置および前記ユーザの位置情報ならびに前記ユーザの顔の向き情報を取得し、取得した情報に基づいて、自情報処理端末について出力対象のオーディオ信号のチャンネルを決定し、
複数チャンネルで構成されたオーディオ信号から、決定したチャンネルの信号を選択して出力する
ことを特徴とする情報処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数のスピーカ装置を用いてサラウンド音場を構築させるためのサラウンドシステム、これに用いる情報処理端末、および情報処理方法に関する。
【背景技術】
【０００２】
従来、複数のスピーカ装置を用いたサラウンドシステムが広く普及している。サラウンドシステムを用いて適切なサラウンド音場を構築させるためには、各スピーカ装置を適切な位置関係で設置し、各スピーカ装置に対してユーザのリスニング位置および顔の向きに応じたオーディオ信号のチャンネルを設定するとともに、ユーザのリスニング位置までの距離に応じた音量やオーディオ信号の出力タイミングを設定する必要がある。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−４３３２０号公報
【特許文献２】特開２０１５−２２８６２５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上述したようにスピーカ装置への設定を行う際に、リスニング位置にいるユーザがカメラ装置で各スピーカ装置を撮影した撮像情報を解析し、当該ユーザから各スピーカ装置までの距離を算出する技術を用いることで、簡易且つ精度よく設定処理を行うことができる。
【０００５】
しかし、この技術を用いてもなお、ユーザがスピーカ装置を撮影する作業が必要であり、手間がかかるという問題があった。
【０００６】
本発明は、適切なサラウンド音場を構築させるためのスピーカ装置の設定作業を簡易且つ精度よく行うことが可能な、サラウンドシステム、これに用いる情報処理端末、および情報処理方法を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記目的を達成するための本発明のサラウンドシステムは、情報処理端末と、前記情報処理端末に無線接続された少なくとも１台のスピーカ装置とを備え、前記情報処理端末は、前記スピーカ装置と、自情報処理端末および前記スピーカ装置から出力される音声を聴くユーザとを撮影するカメラ部と、前記カメラ部で撮影された撮像情報に基づき、前記スピーカ装置および前記ユーザの位置情報ならびに前記ユーザの顔の向き情報を取得し、取得した情報に基づいて、自情報処理端末および前記スピーカ装置それぞれについて、出力対象のオーディオ信号のチャンネルを決定する設定情報処理部と、複数チャンネルで構成されたオーディオ信号から、前記設定情報処理部で決定されたチャンネルの信号を選択する第１チャンネル選択部と、前記第１チャンネル選択部で選択されたオーディオ信号を出力する第１スピーカ部とを有し、前記スピーカ装置は、前記オーディオ信号から、前記情報処理端末で決定されたチャンネルの信号を選択する第２チャンネル選択部と、前記第２チャンネル選択部で選択されたオーディオ信号を出力する第２スピーカ部とを有することを特徴とする。
【０００８】
また、本発明の情報処理端末は、少なくとも１台のスピーカ装置に無線接続され、前記スピーカ装置と、自情報処理端末および前記スピーカ装置から出力される音声を聴くユーザとを撮影するカメラ部と、前記カメラ部で撮影された撮像情報に基づき、前記スピーカ装置および前記ユーザの位置情報ならびに前記ユーザの顔の向き情報を取得し、取得した情報に基づいて、自情報処理端末について出力対象のオーディオ信号のチャンネルを決定する設定情報処理部と、複数チャンネルで構成されたオーディオ信号から、前記設定情報処理部で決定されたチャンネルの信号を選択するチャンネル選択部と、前記チャンネル選択部で選択されたオーディオ信号を出力するスピーカ部とを備えることを特徴とする。
【０００９】
また、本発明の情報処理方法は、少なくとも１台のスピーカ装置に無線接続された情報処理端末が、前記スピーカ装置と、自情報処理端末および前記スピーカ装置から出力される音声を聴くユーザとを撮影し、撮影された撮像情報に基づき、前記スピーカ装置および前記ユーザの位置情報ならびに前記ユーザの顔の向き情報を取得し、取得した情報に基づいて、自情報処理端末について出力対象のオーディオ信号のチャンネルを決定し、複数チャンネルで構成されたオーディオ信号から、決定したチャンネルの信号を選択して出力することを特徴とする。
【発明の効果】
【００１０】
本発明のサラウンドシステム、これに用いる情報処理端末、および情報処理方法によれば、適切なサラウンド音場を構築させるためのスピーカ装置の設定作業を簡易且つ精度よく行うことができる。
【図面の簡単な説明】
【００１１】
【図１】本発明の第１および第２実施形態によるサラウンドシステムの構成を示す全体図である。
【図２】本発明の第１実施形態によるサラウンドシステムに用いる情報処理端末および第２実施形態によるサラウンドシステムに用いるスピーカ装置の構成を示すブロック図である。
【図３】本発明の第１実施形態によるサラウンドシステムに用いるスピーカ装置を示す外観斜視図である。
【図４】本発明の第１実施形態によるサラウンドシステムに用いるスピーカ装置の構成を示すブロック図である。
【図５】本発明の第１実施形態によるサラウンドシステムにおいてサラウンド音場を構築させる際に実行される設定処理を示すフローチャートである。
【図６】本発明の第２実施形態によるサラウンドシステムに用いるスピーカ装置を示す外観斜視図である。
【図７】本発明の第２実施形態によるサラウンドシステムにおいてサラウンド音場を構築させる際に実行される設定処理を示すフローチャートである。
【発明を実施するための形態】
【００１２】
《第１実施形態》
〈第１実施形態によるサラウンドシステムの構成〉
本発明の第１実施形態によるサラウンドシステム１Ａの構成について、図１を参照して説明する。本実施形態によるサラウンドシステム１Ａは、５台のスピーカ装置１０−１〜１０−５と、ユーザ端末２０とを備える。これらの５台のスピーカ装置１０−１〜１０−５のうち、スピーカ装置１０−１はスマートフォンやタブレット端末等の音声出力機能（スピーカ部）および撮像機能（カメラ部）を有する情報処理端末で構成され、他のスピーカ装置１０−２〜１０−５およびユーザ端末２０と無線接続されている。図１においては情報処理端末１０−１に接続されたスピーカ装置が４台の場合を示したが、この数には限定されず、１〜３台または５台以上でもよい。以下、スピーカ装置１０−１については、「情報処理端末１０−１」とも記載する。
【００１３】
これら５台のスピーカ装置１０−１〜１０−５は、サラウンドシステム１Ａのユーザのリスニングポイントとして想定されるリスニング位置Ｐに前面を向け、当該リスニング位置Ｐを囲み、後述するスピーカ装置１０−１のカメラ部１５−１の撮影範囲にスピーカ装置１０−２〜１０−５およびリスニング位置Ｐが入るように設置されている。
【００１４】
ユーザ端末２０はスマートフォンやタブレット端末、パーソナルコンピュータ等のユーザインタフェースを備えた情報処理端末で構成され、ユーザによりサラウンド音場を構築させるための設定処理を指示する操作が行われると、当該指示の情報を情報処理端末１０−１に無線送信する。
【００１５】
情報処理端末１０−１は、図２に示すように、無線通信部１１−１と、制御部１２−１と、増幅部１３−１と、スピーカ部１４−１と、カメラ部１５−１とを有する。無線通信部１１−１は、スピーカ装置１０−２〜１０−５およびユーザ端末２０との無線通信を行う。カメラ部１５−１は、広角レンズを備え、スピーカ装置１０−２〜１０−５およびリスニング位置Ｐにいるユーザを撮影する。
【００１６】
制御部１２−１はＣＰＵで構成され、チャンネル選択部１２１−１と、信号処理部１２２−１と、設定情報処理部１２３−１とを有する。チャンネル選択部１２１−１は、複数チャンネルで構成された出力対象のオーディオ信号から、設定されたチャンネルの信号を選択する。信号処理部１２２−１は、チャンネル選択部１２１−１で選択されたチャンネルのオーディオ信号を、設定された音量、且つ設定された出力タイミングで出力されるように調整して増幅部１３−１に送出する。
【００１７】
設定情報処理部１２３−１は、ユーザ端末２０から、サラウンド音場を構築させるための設定指示の情報を取得すると、カメラ部１５−１で撮影された撮像情報を解析し、撮像情報の中から後述する識別体１６−２〜１６−５の識別情報を認識することで各スピーカ装置１０−２〜１０−５を特定する。そして、特定した情報に基づいて各スピーカ装置１０−２〜１０−５の位置情報を取得するとともに、リスニング位置Ｐにいるユーザの位置情報および顔の向き情報を取得する。また、取得した情報に基づいて、リスニング位置Ｐにいるユーザに対してサラウンド効果を有する音声を提供するように、自情報処理端末１０−１およびスピーカ装置１０−２〜１０−５それぞれについて、出力対象のオーディオ信号のチャンネル、音量、および出力タイミングを決定する。また、自情報処理端末１０−１に関して決定したチャンネルの情報をチャンネル選択部１２１−１に設定する。また、自情報処理端末１０−１に関して決定した音量および出力タイミングの情報を、信号処理部１２２−１に設定する。さらに、スピーカ装置１０−２〜１０−５に関して決定した情報を、それぞれ該当するスピーカ装置に無線通信部１１−１を介して無線送信する。
【００１８】
増幅部１３−１は、信号処理部１２２−１から送出されたオーディオ信号を増幅させる。スピーカ部１４−１は、増幅部１３−１で増幅されたオーディオ信号を出力する。
【００１９】
スピーカ装置１０−２〜１０−５はそれぞれ、図３および図４に示すように、無線通信部１１−２〜１１−５と、制御部１２−２〜１２−５と、増幅部１３−２〜１３−５と、スピーカ部１４−２〜１４−５と、識別体１６−２〜１６−５とを有する。無線通信部１１−２〜１１−５は、情報処理端末１０−１との無線通信を行う。
【００２０】
制御部１２−２〜１２−５はＣＰＵで構成され、チャンネル選択部１２１−２〜１２１−５と、信号処理部１２２−２〜１２２−５と、設定情報処理部１２３−２〜１２３−５とを有する。チャンネル選択部１２１−２〜１２１−５はそれぞれ、複数チャンネルで構成された出力対象のオーディオ信号から、設定されたチャンネルの信号を選択する。信号処理部１２２−２〜１２２−５はそれぞれ、チャンネル選択部１２１−２〜１２１−５で選択されたチャンネルのオーディオ信号を、設定された音量、且つ出力タイミングで出力されるように調整して増幅部１３−２〜１３−５に送出する。
【００２１】
設定情報処理部１２３−２〜１２３−５はそれぞれ、情報処理端末１０−１から送信される情報に基づいて、出力対象のチャンネルの情報をチャンネル選択部１２１−２〜１２１−５に設定するとともに、出力対象の音量および出力タイミングの情報を信号処理部１２２−２〜１２２−５に設定する。
【００２２】
増幅部１３−２〜１３−５は、信号処理部１２２−２〜１２２−５から送出されたオーディオ信号を増幅させる。スピーカ部１４−２〜１４−５は、増幅部１３−２〜１３−５で増幅されたオーディオ信号を出力する。
【００２３】
識別体１６−２〜１６−５は、例えば２次元バーコードで構成され、それぞれ自スピーカ装置の識別情報を含む。識別体１６−２〜１６−５は、情報処理端末１０−１のカメラ部１５−１から撮影可能な位置に設置される。識別体１６−２〜１６−５は、スピーカ装置１０−２〜１０−５の複数箇所に設置してもよい。
【００２４】
〈第１実施形態によるサラウンドシステムの動作〉
次に、本実施形態によるサラウンドシステム１Ａにおいて、情報処理端末１０−１およびスピーカ装置１０−２〜１０−５を用いて５チャンネル（センターチャンネル、レフトチャンネル、ライトチャンネル、サラウンドレフトチャンネル、およびサラウンドライトチャンネル）のオーディオ信号を出力させてサラウンド音場を構築させるための設定処理を行う際の動作について説明する。
【００２５】
まず、情報処理端末１０−１およびスピーカ装置１０−２〜１０−５で囲まれた空間外から、ユーザがサラウンド音場を構築させるためにユーザ端末２０でスピーカ位置の特定処理を指示する操作を行うと、当該指示の情報が情報処理端末１０−１に送信される。当該指示情報が取得された情報処理端末１０−１で実行される処理について、図５のフローチャートを参照して説明する。
【００２６】
情報処理端末１０−１では、ユーザ端末２０から送信されたスピーカ位置の特定処理の指示情報が設定情報処理部１２３−１で取得され（Ｓ１の「YES」）、カメラ部１５−１により、スピーカ装置１０−２〜１０−５の撮影が開始される（Ｓ２）。
【００２７】
そして、設定情報処理部１２３−１により、カメラ部１５−１で撮影された撮像情報が解析され、撮像情報の中から各スピーカ装置１０−２〜１０−５の識別体１６−２〜１６−５の情報を読み取ることで、各スピーカ装置１０−２〜１０−５が識別され（Ｓ３）、自情報処理端末１０−１から各スピーカ装置１０−２〜１０−５までの相対位置情報が取得される（Ｓ４）。
【００２８】
各スピーカ装置までの相対位置情報は、例えば、設定情報処理部１２３−１に予め保持した各識別体１６−２〜１６−５の形状および大きさの情報と、撮像情報から取得した各識別体１６−２〜１６−５の形状情および大きさとの違いや歪み状態から算出される。また他の例では、各スピーカ装置の前面、側面等、複数の異なる位置に識別体を設置し、設定情報処理部１２３−１に各識別体の形状および大きさの情報と設置位置情報とを予め保持しておき、撮像情報から取得した各識別体の形状および大きさと検出位置の情報とを、保持した情報と比較することで、各スピーカ装置までの相対位置情報が算出される。情報処理端末１０−１から各スピーカ装置１０−２〜１０−５までの相対位置情報が取得されると、スピーカ位置の特定処理が完了したことを示す情報が、ユーザ端末２０に送信される。
【００２９】
送信された情報は、ユーザ端末２０の画面（図示せず）等に出力される。ユーザは、出力された情報を視認することでスピーカ位置の特定処理の完了を認識し、ユーザ端末２０を携帯した状態でリスニング位置Ｐに移動し、ユーザ端末２０でリスニング位置Ｐの特定処理を指示する操作を行う。ユーザ端末２０でリスニング位置Ｐの特定処理を指示する操作が行われると、当該指示の情報が情報処理端末１０−１に送信される。情報処理端末１０−１では、ユーザ端末２０から送信されたリスニング位置Ｐの特定処理の指示情報が設定情報処理部１２３−１で取得され（Ｓ５の「YES」）、カメラ部１５−１により、リスニング位置Ｐにいるユーザの撮影が開始される（Ｓ６）。
【００３０】
そして、設定情報処理部１２３−１により、カメラ部１５−１で撮影された撮像情報が解析され、当該ユーザの顔の向きが検出される（Ｓ７）。ユーザの顔の向きの検出方法としては、例えば、特開２００１−２９１１０８号公報に開示されている方法により、予め複数人の正面顔データを取得して平均顔情報を作成し、平均顔情報を３Ｄモデルに張り合わせて任意の角度回転させた画像を生成しておき、入力画像と最も相関度の高い角度の画像を特定することで、入力画像に含まれる人の顔の向きが検出される。
【００３１】
次に、検出されたユーザの顔の向き情報に基づいて、設定情報処理部１２３−１において、リスニング位置Ｐにいるユーザに対してサラウンド効果を有する音声を提供するように、情報処理端末１０−１およびスピーカ装置１０−２〜１０−５それぞれについて、出力対象のオーディオ信号のチャンネルが決定される。例えば、ユーザが図１のリスニング位置Ｐで情報処理端末１０−１側を向いている場合、ユーザの正面の情報処理端末１０−１に対しては「センターチャンネル」、ユーザの右前面のスピーカ装置１０−２に対しては「ライトチャンネル」、ユーザの右後方のスピーカ装置１０−３に対しては「サラウンドライトチャンネル」、ユーザの左後方のスピーカ装置１０−４に対しては「サラウンドレフトチャンネル」、ユーザの左前面の情報処理端末１０−５に対しては「レフトチャンネル」が、出力対象のオーディオ信号のチャンネルとして決定される。
【００３２】
そして、情報処理端末１０−１に対して決定された「センターチャンネル」の情報がチャンネル選択部１２１−１に設定される。また、スピーカ装置１０−２に対して決定された「ライトチャンネル」の情報がスピーカ装置１０−２に無線送信され、チャンネル選択部１２１−２に設定される。また、スピーカ装置１０−３に対して決定された「サラウンドライトチャンネル」の情報がスピーカ装置１０−３に無線送信され、チャンネル選択部１２１−３に設定される。また、スピーカ装置１０−４に対して決定された「サラウンドレフトチャンネル」の情報がスピーカ装置１０−４に無線送信され、チャンネル選択部１２１−４に設定される。また、スピーカ装置１０−５に対して決定された「レフトチャンネル」の情報がスピーカ装置１０−５に無線送信され、チャンネル選択部１２１−５に設定される（Ｓ８）。
【００３３】
次に、設定情報処理部１２３−１により、さらに撮像情報が解析され、自情報処理端末１０−１から当該ユーザまでの相対位置情報が取得される（Ｓ９）。そして、取得された当該ユーザまでの相対位置情報と、ステップＳ４で取得された各スピーカ装置１０−２〜１０−５までの相対位置情報とに基づいて、自情報処理端末１０−１および各スピーカ装置１０−２〜１０−５それぞれから当該ユーザまでの距離が算出される。そして、算出された距離に基づいて、設定情報処理部１２３−１において、情報処理端末１０−１およびスピーカ装置１０−２〜１０−５それぞれについて、オーディオ信号出力時の音量および出力タイミングが決定される。
【００３４】
情報処理端末１０−１およびスピーカ装置１０−２〜１０−５の音量はそれぞれ、出力対象のオーディオ信号がリスニング位置Ｐのユーザに同じ音量で到達するように決定される。例えば、情報処理端末１０−１およびスピーカ装置１０−２〜１０−５のうち、最大音量で出力させた音声がユーザに到達するときに最も小さくなるスピーカ装置を基準として、他のスピーカ装置の出力音量を決定する。このとき、無線通信信号に含まれる各スピーカ装置１０−１〜１０−５の型番情報に基づいて取得される各装置のスペック情報を考慮して、各スピーカ装置の音量を決定してもよい。
【００３５】
また、情報処理端末１０−１およびスピーカ装置１０−２〜１０−５の出力タイミングはそれぞれ、出力対象のオーディオ信号がリスニング位置Ｐのユーザに同じタイミングで到達するように決定される。具体的には、情報処理端末１０−１およびスピーカ装置１０−２〜１０−５のうち、当該ユーザに最も遠い装置と当該ユーザとの距離を基準として、他の装置のオーディオ信号の出力開始タイミングの遅延量が算出され、該当する装置の出力タイミングとして決定される。
【００３６】
そして、情報処理端末１０−１に対して決定された音量および出力タイミングが信号処理部１２２−１に設定される。また、スピーカ装置１０−２に対して決定された音量および出力タイミングがスピーカ装置１０−２に無線送信され、信号処理部１２２−２に設定される。同様に、スピーカ装置１０−３〜１０−５に対して決定された音量および出力タイミングがそれぞれスピーカ装置１０−３〜１０−５に無線送信され、信号処理部１２２−３〜１２２−５に設定される（Ｓ１０）。以上で、サラウンドシステム１Ａでサラウンド音場を構築させるための設定処理が完了する。
【００３７】
このように設定されたサラウンドシステム１Ａに、５チャンネルで構成されたオーディオ信号が入力され、情報処理端末１０−１およびスピーカ装置１０−２〜１０−５から再生されると、それぞれのスピーカ装置において設定されたチャンネルのオーディオ信号が、設定された音量で、設定された分遅延されたタイミングで出力され、リスニング位置Ｐにいるユーザがサラウンド効果を有した音声を聴くことができる。
【００３８】
以上の第１実施形態によれば、ユーザによる簡易な操作で、ユーザが任意に設置した複数台のスピーカを用いてサラウンド音場を構築させることができる。
【００３９】
上述した第１実施形態において、スピーカ装置１０−２〜１０−５にもそれぞれカメラ部を設置するとともにユーザ端末２０に無線接続させ、ユーザ端末２０からサラウンド音場を構築させるための設定指示が送信されたときに、設定情報処理部１２３−２〜１２３−５において該当装置内のカメラ部で撮影された撮像情報を解析することで、情報処理端末１０−１、他のスピーカ装置、およびユーザの位置情報と、当該ユーザの顔の向き情報とを取得し、情報処理端末１０−１に送信するようにしてもよい。情報処理端末１０−１は、各スピーカ装置１０−２〜１０−５から取得した情報を含めて、自情報処理端末１０−１およびスピーカ装置１０−２〜１０−５に関するチャンネル、音量、および出力タイミングを決定することで、より高い精度で、サラウンド音場を構築させるための設定処理を実行することができる。
【００４０】
《第２実施形態》
〈第２実施形態によるサラウンドシステムの構成〉
本発明の第２実施形態によるサラウンドシステム１Ｂは、図１に示すように、リスニング位置Ｐを囲み、リスニング位置Ｐ方向に前面を向けて設置された５台のスピーカ装置１０−６〜１０−１０と、ユーザ端末２０とで構成されている。スピーカ装置１０−６〜１０−１０はそれぞれ、図６および図２に示すように、カメラ部１５−６〜１５−１０を有する他は、第１実施形態で説明したスピーカ装置１０−２〜１０−５と同様の構成を有するため、同一機能を有する部分の詳細な説明は省略する。スピーカ装置１０−６〜１０−１０は、スマートデバイス等の情報処理端末で構成してもよい。
【００４１】
スピーカ装置１０−６〜１０−１０は、無線通信部１１−６〜１１−１０と、制御部１２−６〜１２−１０と、増幅部１３−６〜１３−１０と、スピーカ部１４−６〜１４−１０と、カメラ部１５−６〜１５−１０と、識別体１６−６〜１６−１０とを有する。制御部１２−６〜１２−１０はそれぞれ、チャンネル選択部１２１−６〜１２１−１０と、信号処理部１２２−６〜１２２−１０と、設定情報処理部１２３−６〜１２３−１０とを有する。カメラ部１５−６〜１５−１０はそれぞれ、広角レンズを備え、他のスピーカ装置およびリスニング位置Ｐにいるユーザを撮影する。
【００４２】
設定情報処理部１２３−６〜１２３−１０はそれぞれ、ユーザ端末２０から、スピーカ装置１０−６〜１０−１０によりサラウンド音場を構築させるための設定指示情報を取得すると、カメラ部１５−６〜１５−１０で撮影された撮像情報を解析することで、撮像情報の中から他のスピーカ装置を識別して、他のスピーカ装置およびリスニング位置Ｐにいるユーザの位置情報を取得するとともに、当該ユーザの顔の向き情報を取得する。また、取得した情報に基づいて、リスニング位置Ｐにいるユーザに対してサラウンド効果を有する音声を提供するように、自スピーカ装置について、出力対象のオーディオ信号のチャンネル、音量、および出力タイミングを決定する。また、決定したチャンネルの情報を、自スピーカ装置１０−６〜１０−１０のチャンネル選択部１２１−６〜１２１−１０に設定する。また、決定した音量および出力タイミングの情報を、自スピーカ装置１０−６〜１０−１０の信号処理部１２２−６〜１２２−１０に設定する。
【００４３】
〈第２実施形態によるサラウンドシステムの動作〉
次に、本実施形態によるサラウンドシステム１Ｂにおいて、スピーカ装置１０−６〜１０−１０を用いて５チャンネルのオーディオ信号を出力させてサラウンド音場を構築させる際の動作について説明する。
【００４４】
まず、スピーカ装置１０−６〜１０−１０で囲まれた空間外から、ユーザがユーザ端末２０でスピーカ位置の特定処理を指示する操作を行うと、当該指示の情報がスピーカ装置１０−６〜１０−１０に送信される。当該指示情報を取得したスピーカ装置の１つであるスピーカ装置１０−６で実行される処理について、図７のフローチャートを参照して説明する。
【００４５】
スピーカ装置１０−６では、ユーザ端末２０から送信されたスピーカ位置の特定処理の指示情報が設定情報処理部１２３−６〜１２３−１０で取得され（Ｓ１１の「YES」）、カメラ部１５−６により、他のスピーカ装置１０−７〜１０−１０の撮影が開始される（Ｓ１２）。
【００４６】
そして、設定情報処理部１２３−６により、カメラ部１５−６で撮影された撮像情報が解析され、撮像情報の中から他のスピーカ装置１０−７〜１０−１０の識別体１６−７〜１６−１０の情報を読み取ることで、各スピーカ装置１０−７〜１０−１０が識別され（Ｓ１３）、自スピーカ装置１０−６から各スピーカ装置１０−７〜１０−１０までの相対位置情報が取得される（Ｓ１４）。スピーカ装置１０−６から各スピーカ装置１０−７〜１０−１０までの相対位置情報が取得されたことにより、スピーカ位置の特定処理が完了したことを示す情報がユーザ端末２０に送信され、出力される。
【００４７】
出力された情報を認識したユーザがユーザ端末２０を携帯した状態でリスニング位置Ｐに移動し、ユーザ端末２０でリスニング位置Ｐの特定処理を指示する操作を行う。ユーザ端末２０でリスニング位置Ｐの特定処理を指示する操作が行われると、当該指示の情報がスピーカ装置１０−６に送信される。スピーカ装置１０−６では、ユーザ端末２０から送信されたリスニング位置Ｐの特定処理の指示情報が設定情報処理部１２３−６で取得され（Ｓ１５の「YES」）、カメラ部１５−６により、リスニング位置Ｐにいるユーザの撮影が開始される（Ｓ１６）。ユーザの撮影が開始されると、設定情報処理部１２３−６により、カメラ部１５−６で撮影された撮像情報が解析され、当該ユーザの顔の向きが検出される（Ｓ１７）。
【００４８】
次に、検出されたユーザの顔の向き情報に基づいて、設定情報処理部１２３−６において、リスニング位置Ｐにいるユーザに対してサラウンド効果を有する音声を提供するように、スピーカ装置１０−６に対する出力対象のオーディオ信号のチャンネルが決定される。ここでは、ユーザが図１のリスニング位置Ｐでスピーカ装置１０−６側を向いているため、ユーザの正面のスピーカ装置１０−６に対して「センターチャンネル」が出力対象のオーディオ信号のチャンネルとして決定される。決定された「センターチャンネル」の情報は、チャンネル選択部１２１−６に設定される（Ｓ１８）。
【００４９】
次に、設定情報処理部１２３−６により、さらに撮像情報が解析され、自スピーカ装置１０−６から当該ユーザまでの相対位置情報が取得される（Ｓ１９）。そして、取得された当該ユーザまでの相対位置情報と、ステップＳ１４で取得された各スピーカ装置１０−７〜１０−１０までの相対位置情報とに基づいて、自スピーカ装置１０−６および各スピーカ装置１０−７〜１０−１０それぞれから当該ユーザまでの距離が算出される。そして、算出された距離に基づいて、設定情報処理部１２３−６において、スピーカ装置１０−６について、オーディオ信号出力時の音量および出力タイミングが決定される。
【００５０】
スピーカ装置１０−６の音量は、リスニング位置Ｐのユーザに、出力対象のオーディオ信号が他のスピーカ装置１０−７〜１０−１０から出力される音声と同じ音量で到達するように決定される。このとき、予め保持されたスピーカ装置１０−６のスペック情報、および無線通信信号に含まれる各スピーカ装置１０−７〜１０−１０の型番情報に基づいて取得される各装置のスペック情報を考慮して、リスニング位置Ｐのユーザに同じ音量で到達するように音量を決定してもよい。
【００５１】
また、スピーカ装置１０−６の出力タイミングは、リスニング位置Ｐのユーザに、出力対象のオーディオ信号が他のスピーカ装置１０−７〜１０−１０から出力される音声と同じタイミングで到達するように決定される。具体的には、スピーカ装置１０−６〜１０−１０のうち、当該ユーザに最も遠い装置と当該ユーザとの距離を基準として、他の装置のオーディオ信号の出力開始タイミングの遅延量が算出され、該当する装置の出力タイミングとして決定される。決定された音量および出力タイミングは、信号処理部１２２−６に設定される（Ｓ２０）。これらの設定処理により、サラウンドシステム１Ｂでサラウンド音場を構築させるための設定処理が完了する。上述したステップＳ１１〜Ｓ２０の処理は、スピーカ装置１０−７〜１０−１０においても同様に実行され、それぞれの装置内で、チャンネル、音量、および出力タイミングの情報が設定される。
【００５２】
このように設定されたサラウンドシステム１Ｂに、５チャンネルで構成されたオーディオ信号が入力され、スピーカ装置１０−６〜１０−１０から再生されると、それぞれのスピーカ装置において設定されたチャンネルのオーディオ信号が、設定された音量で、設定された分遅延されたタイミングで出力され、リスニング位置Ｐにいるユーザがサラウンド効果を有した音声を聴くことができる。
【００５３】
以上の第２実施形態によれば、ユーザによる簡易な操作で、ユーザが任意に設置した複数台のスピーカを用いてサラウンドシステムを構築させることができる。
【００５４】
上述した第２実施形態において、各スピーカ装置１０−６〜１０−１０の設定情報処理部１２３−６〜１２３−１０で取得された他のスピーカ装置およびユーザの位置情報を他のスピーカ装置それぞれに送信するようにしてもよい。各スピーカ装置１０−６〜１０−１０は、他のスピーカ装置から取得した情報を含めて、自スピーカ装置に関するチャンネル、音量、および出力タイミングを決定することで、より高い精度で、サラウンド音場を構築させるための設定処理を実行することができる。
【００５５】
その際は、各装置間で相互に情報を提供することができるため、各スピーカ装置は、他のいずれか１台のスピーカ装置から撮影可能な状態で設置されていればよい。これにより、第１実施形態のサラウンドシステム１Ａのように情報処理端末１０−１からスピーカ装置１０−２〜１０−５すべてが撮影可能な状態で設置する場合よりも、スピーカ装置の設置に関する自由度が高くなる。
【００５６】
上述した第１実施形態および第２実施形態では、各スピーカ装置に識別体を設置しておき、これらのスピーカ装置を撮影した撮像情報の中から各識別体の情報を読み取ることで各スピーカ装置の位置情報を取得する場合について説明した。しかし、これには限定されず、カメラ部を備えたスピーカ装置の設定情報処理部に予め他のスピーカ装置の形状や大きさ等の外観特徴情報を含む識別情報をデータベース化して保持しておき、他のスピーカ装置と無線通信をした際に取得される各装置の識別情報から該当するスピーカ装置の外観特徴情報を取得し、これに基づいて各スピーカ装置の位置情報を算出するようにしてもよい。
【符号の説明】
【００５７】
１Ａ，１Ｂ  サラウンドシステム
１０−１  スピーカ装置（情報処理端末）
１０−２〜１０−１０  情報処理端末
１１−１〜１１−１０  無線通信部
１２−１〜１２−１０  制御部
１３−１〜１３−１０  増幅部
１４−１〜１４−１０  スピーカ部
１５−１，１５−６〜１５−１０  カメラ部
１６−２〜１６−１０  識別体
２０  ユーザ端末
１２１−１〜１２１−１０  チャンネル選択部
１２２−１〜１２２−１０  信号処理部
１２３−１〜１２３−１０  設定情報処理部
【図１】
2020191539.tif 000003
【図２】
2020191539.tif 000004
【図３】
2020191539.tif 000005
【図４】
2020191539.tif 000006
【図５】
2020191539.tif 000007
【図６】
2020191539.tif 000008
【図７】
2020191539.tif 000009