(57)【要約】【課題】視聴者の存在位置を動的に把握し、視聴者の存在位置に応じて音響出力を制御することが可能な音響制御装置及び音響制御方法を提供すること。【解決手段】本発明に係る音響制御装置は、複数のスピーカが配置されたスピーカ配置空間内に位置するマイク及び当該マイクに近接する近接物の少なくとも何れかの撮像画像に基づいて算出した前記マイクの位置と、前記複数のスピーカのそれぞれから出力された信号音の前記マイクによる集音結果と、に基づいて、前記スピーカ配置空間における前記複数のスピーカのそれぞれの位置を算出するスピーカ位置算出部と、前記スピーカ配置空間内のユーザを撮像した撮像画像に基づいて前記ユーザの位置を算出するとともに、当該ユーザの位置と前記複数のスピーカのそれぞれとの離隔距離を算出し、算出結果に応じて、前記複数のスピーカから出力される音を制御する音響制御部と、を備える。【選択図】図６
2012104871.tif 000002
【特許請求の範囲】
【請求項１】
複数のスピーカが配置されたスピーカ配置空間内に位置するマイク及び当該マイクに近接する近接物の少なくとも何れかの撮像画像に基づいて算出した前記マイクの位置と、前記複数のスピーカのそれぞれから出力された信号音の前記マイクによる集音結果と、に基づいて、前記スピーカ配置空間における前記複数のスピーカのそれぞれの位置を算出するスピーカ位置算出部と、
前記スピーカ配置空間内のユーザを撮像した撮像画像に基づいて前記ユーザの位置を算出するとともに、当該ユーザの位置と前記複数のスピーカのそれぞれとの離隔距離を算出し、算出結果に応じて、前記複数のスピーカから出力される音を制御する音響制御部と、
を備える、音響制御装置。
【請求項２】
前記スピーカ位置算出部は、前記マイクの位置と、前記マイクが集音した各スピーカから出力された前記信号音の大きさを利用して算出した前記複数のスピーカのそれぞれと前記マイクとの離隔距離と、に基づいて、前記複数のスピーカのそれぞれの位置を算出する、請求項１に記載の音響制御装置。
【請求項３】
前記音響制御部は、前記ユーザの位置と複数のスピーカのそれぞれとの離隔距離を利用して、前記複数のスピーカから出力される音を定位させる位置を動的に変更する、請求項１又は２に記載の音響制御装置。
【請求項４】
前記音響制御装置は、前記ユーザを撮像した撮像画像に対して画像処理を行う画像処理部を更に備え、
前記画像処理部は、前記ユーザを撮像した撮像画像に基づいて、ユーザに関するメタデータ、撮像画像中に存在するユーザの人数、ユーザが実施したジェスチャの少なくとも何れかを抽出し、
前記音響制御部は、前記ユーザに関するメタデータ、撮像画像中に存在するユーザの人数、ユーザが実施したジェスチャの少なくとも何れかに応じて、前記複数のスピーカから出力される音の定位及び音質調整の少なくとも何れかを実施する、請求項３に記載の音響制御装置。
【請求項５】
前記音響制御装置は、前記マイク及び前記近接物の少なくとも何れかの撮像画像に対して画像処理を行う画像処理部を更に備え、
前記画像処理部は、前記近接物として、前記マイクに近接するユーザの顔を検出する、請求項１に記載の音響制御装置。
【請求項６】
前記音響制御装置は、前記マイク及び前記近接物の少なくとも何れかの撮像画像に対して画像処理を行う画像処理部を更に備え、
前記画像処理部は、前記マイク又は当該マイクに設けられたビジュアルマーカを検出する、請求項１に記載の音響制御装置。
【請求項７】
前記スピーカ位置算出部は、モノラルマイク、ステレオマイク又はマルチチャンネルマイクを利用して集音した前記複数のスピーカから出力される信号音の集音結果に基づいて、前記マイクの位置を算出する、請求項１に記載の音響制御装置。
【請求項８】
複数のスピーカが配置されたスピーカ配置空間内に位置するマイク及び当該マイクに近接する近接物の少なくとも何れかの撮像画像に基づいて、前記マイクの位置を算出するステップと、
算出された前記マイクの位置と、前記複数のスピーカのそれぞれから出力された信号音の前記マイクによる集音結果と、に基づいて、前記スピーカ配置空間における前記複数のスピーカのそれぞれの位置を算出するステップと、
算出された前記ユーザの位置及び前記ユーザの位置と複数のスピーカのそれぞれとの離隔距離に応じて、前記複数のスピーカから出力される音を制御するステップと、
を含む、音響制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、音響制御装置及び音響制御方法に関する。
【背景技術】
【０００２】
近年、情報処理技術の発達に伴い、時刻や視聴者の状態に応じてオーディオを制御する技術が提案されるようになってきた。
【０００３】
例えば、以下に示す特許文献１では、電源投入時の時刻に応じて、予め設定された方向、映像輝度及び音量となるように、スイベル機構などを用いてＴＶの表示画面の方向を調整する技術が記載されている。また、以下に示す特許文献２では、映像及び音声を鑑賞中の視聴者の状態を解析し、鑑賞以外のことに集中し始めたと判断した際に、邪魔にならないように音量を下げるという技術が記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８−１９９４４９号公報
【特許文献２】特開２００４−３１２４０１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上記特許文献１及び特許文献２に記載されている技術は、予め設定された設定条件に応じて音響出力の制御を実施するものであって、視聴者の位置を動的に把握して音響出力の制御を行うものではない。
【０００６】
また、最近では、ＴＶに搭載したカメラで検出した視聴者の視聴位置に応じて、複数のスピーカからなるサラウンドシステムを制御するという技術が提案され始めている。しかしながら、このような技術であっても、スピーカとＴＶ（カメラ）の位置関係は既知であることを前提としており、この前提が成り立たない場合には、かかる技術を適用することは困難である。
【０００７】
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、視聴者の存在位置を動的に把握し、視聴者の存在位置に応じて音響出力を制御することが可能な、音響制御装置及び音響制御方法を提供することにある。
【課題を解決するための手段】
【０００８】
上記課題を解決するために、本発明のある観点によれば、複数のスピーカが配置されたスピーカ配置空間内に位置するマイク及び当該マイクに近接する近接物の少なくとも何れかの撮像画像に基づいて算出した前記マイクの位置と、前記複数のスピーカのそれぞれから出力された信号音の前記マイクによる集音結果と、に基づいて、前記スピーカ配置空間における前記複数のスピーカのそれぞれの位置を算出するスピーカ位置算出部と、前記スピーカ配置空間内のユーザを撮像した撮像画像に基づいて前記ユーザの位置を算出するとともに、当該ユーザの位置と前記複数のスピーカのそれぞれとの離隔距離を算出し、算出結果に応じて、前記複数のスピーカから出力される音を制御する音響制御部と、を備える音響制御装置が提供される。
【０００９】
前記スピーカ位置算出部は、前記マイクの位置と、前記マイクが集音した各スピーカから出力された前記信号音の大きさを利用して算出した前記複数のスピーカのそれぞれと前記マイクとの離隔距離と、に基づいて、前記複数のスピーカのそれぞれの位置を算出することが好ましい。
【００１０】
前記音響制御部は、前記ユーザの位置と複数のスピーカのそれぞれとの離隔距離を利用して、前記複数のスピーカから出力される音を定位させる位置を動的に変更することが好ましい。
【００１１】
前記音響制御装置は、前記ユーザを撮像した撮像画像に対して画像処理を行う画像処理部を更に備え、前記画像処理部は、前記ユーザを撮像した撮像画像に基づいて、ユーザに関するメタデータ、撮像画像中に存在するユーザの人数、ユーザが実施したジェスチャの少なくとも何れかを抽出し、前記音響制御部は、前記ユーザに関するメタデータ、撮像画像中に存在するユーザの人数、ユーザが実施したジェスチャの少なくとも何れかに応じて、前記複数のスピーカから出力される音の定位及び音質調整の少なくとも何れかを実施してもよい。
【００１２】
前記音響制御装置は、前記マイク及び前記近接物の少なくとも何れかの撮像画像に対して画像処理を行う画像処理部を更に備え、前記画像処理部は、前記近接物として、前記マイクに近接するユーザの顔を検出してもよい。
【００１３】
前記音響制御装置は、前記マイク及び前記近接物の少なくとも何れかの撮像画像に対して画像処理を行う画像処理部を更に備え、前記画像処理部は、前記マイク又は当該マイクに設けられたビジュアルマーカを検出してもよい。
【００１４】
前記スピーカ位置算出部は、モノラルマイク、ステレオマイク又はマルチチャンネルマイクを利用して集音した前記複数のスピーカから出力される信号音の集音結果に基づいて、前記マイクの位置を算出してもよい。
【００１５】
また、上記課題を解決するために、本発明の別の観点によれば、複数のスピーカが配置されたスピーカ配置空間内に位置するマイク及び当該マイクに近接する近接物の少なくとも何れかの撮像画像に基づいて、前記マイクの位置を算出するステップと、算出された前記マイクの位置と、前記複数のスピーカのそれぞれから出力された信号音の前記マイクによる集音結果と、に基づいて、前記スピーカ配置空間における前記複数のスピーカのそれぞれの位置を算出するステップと、算出された前記ユーザの位置及び前記ユーザの位置と複数のスピーカのそれぞれとの離隔距離に応じて、前記複数のスピーカから出力される音を制御するステップと、を含む音響制御方法が提供される。
【発明の効果】
【００１６】
以上説明したように本発明によれば、視聴者の存在位置を動的に把握し、視聴者の存在位置に応じて音響出力を制御することが可能である。
【図面の簡単な説明】
【００１７】
【図１】音源の位置の定位について説明するための説明図である。
【図２】音源の位置の定位について説明するための説明図である。
【図３】音源の位置の定位について説明するための説明図である。
【図４】本発明の実施形態に係るサラウンド調整システムについて説明するための説明図である。
【図５】同実施形態に係るサラウンド調整システムの一例を示した説明図である。
【図６】同実施形態に係る音響制御装置の構成の一例を示したブロック図である。
【図７】同実施形態に係る音響制御装置が備える画像処理部の構成の一例を示したブロック図である。
【図８】同実施形態に係る音響制御装置が備えるスピーカ位置算出部の構成の一例を示したブロック図である。
【図９】同実施形態に係る音響制御装置が備える音響制御部の構成の一例を示したブロック図である。
【図１０】同実施形態に係るスピーカ位置の算出方法について説明するための説明図である。
【図１１Ａ】同実施形態に係るスピーカ位置の算出方法について説明するための説明図である。
【図１１Ｂ】同実施形態に係るスピーカ位置の算出方法について説明するための説明図である。
【図１２】同実施形態に係るスピーカ位置の算出方法について説明するための説明図である。
【図１３】同実施形態に係るスピーカ位置の算出方法について説明するための説明図である。
【図１４】同実施形態に係るマイク位置の算出方法について説明するための説明図である。
【図１５】同実施形態に係るマイク位置の算出方法について説明するための説明図である。
【図１６】同実施形態に係るマイク位置の算出方法について説明するための説明図である。
【図１７】同実施形態に係る音響制御方法について説明するための説明図である。
【図１８】同実施形態に係る音響制御方法の流れの一例を示した流れ図である。
【図１９】同実施形態に係る音響制御方法の流れの一例を示した流れ図である。
【図２０】本発明の実施形態に係る音響制御装置のハードウェア構成を示したブロック図である。
【発明を実施するための形態】
【００１８】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００１９】
なお、説明は、以下の順序で行うものとする。
（１）音響制御装置及び音響制御方法の概要
（２）第１の実施形態
（２−１）サラウンド調整システムについて
（２−２）音響制御装置の構成について
（２−３）スピーカ位置の算出方法の具体例
（２−４）マイク位置の算出方法の変形例
（２−５）用いるマイクの種類について
（２−６）音響制御方法の流れについて
（３）本発明の実施形態に係る音響制御装置のハードウェア構成について
【００２０】
（音響制御装置及び音響制御方法の概要）
本発明の実施形態に係る音響制御装置及び音響制御方法について説明するに先立ち、従来の音源の位置の定位方法と対比しながら、本発明の実施形態に係る音響制御装置及び音響制御方法の概要について簡単に説明する。図１〜図３は、音源の位置の定位について説明するための説明図である。図４は、本発明の実施形態に係るサラウンド調整システムについて説明するための説明図である。
【００２１】
ＤＶＤやＢｌｕ−Ｒａｙディスク等に収録された映像及び音声からなるコンテンツやテレビ放送等を、テレビ（ＴＶ）とその周囲に設置された複数のスピーカとを用いて視聴する、いわゆるホームシアターの普及が進んでいる。
【００２２】
例えば図１に示したように、ＴＶの周囲に４つのスピーカ（サラウンドスピーカ）を配置する場合を考える。かかる場合において、４つのスピーカの適切な配置場所は、視聴者を中心とした円周上となるが、設置場所の広さや形状によっては、図１に示したように、視聴位置に対して適切な位置にスピーカを配置できない場合がある。かかる場合には、サラウンドのバランスが崩れてしまうという問題が生じることとなる。
【００２３】
このような問題を解決するために、視聴位置にマイクを設置してスピーカから出力された音声をマイクで集音し、サラウンドのキャリブレーションを行う技術が提案され始めている。かかる技術は、マイクを設置した位置（すなわち、視聴位置）に対して最適な位置に、スピーカから出力される音声を定位させるものである。これにより、スピーカの配置位置は、物理的には視聴位置に対して適切な位置になっていないにも関わらず、視聴者はマイクを設置した位置でコンテンツを視聴することで、最適なサラウンド環境で音声を聴取することが可能となる。
【００２４】
このようなサラウンドのキャリブレーション技術として、例えば図２に示したようなモノラルマイクを利用する方法と、例えば図３に示したようなステレオマイクを利用する方法の２種類がある。
【００２５】
ここで、図２に示したモノラルマイクを用いる方法では、音声をモノラルで集音するという特性上、マイクとスピーカとを結ぶ直線上しか音源を定位させることができない（すなわち、１次元上の移動しか行うことができない）。また、図３に示したステレオマイクを用いる方法の場合、音声をステレオで集音することが可能であるため、マイクに対するスピーカの方向を２次元で特定することできる。その結果、音源の位置を平面上で定位させて、４つのスピーカで互いに対称となるようにすることが可能となる。また、ステレオマイクではなく、３チャンネル以上で音声を集音することが可能なマルチチャンネルマイクを利用することで、平面上だけでなく、３次元的に音源を配置する（定位する）ことが可能となる。
【００２６】
しかしながら、このようなサラウンドのキャリブレーション技術は、マイクを設置した位置以外でコンテンツを視聴する場合には、サラウンドのバランスが崩れてしまうという問題がある。
【００２７】
本発明者は、かかる問題を解決するために、視聴者の存在位置を動的に把握し、視聴者の存在位置に応じて音響出力を制御することが可能な技術について鋭意検討を行った結果、以下で説明するような音響制御方法に想到した。以下で説明する本発明の実施形態に係る音響制御装置及び音響制御方法では、図４に示したように、視聴者の視聴位置の変化を把握して、音源を定位させる位置を動的に変更する。これにより、視聴者の視聴位置に関わらず、いつでもバランスの良いサラウンドを視聴者に対して提供することが可能となる。
【００２８】
（第１の実施形態）
＜サラウンド調整システムについて＞
まず、図５を参照しながら、本発明の第１の実施形態に係るサラウンド調整システム１について、簡単に説明する。図５は、本実施形態に係るサラウンド調整システムの一例を示した説明図である。
【００２９】
本実施形態に係るサラウンド調整システム１は、図５に示したように、映像コンテンツを表示するＴＶ等の画像表示装置３と、音響制御装置１０とを有する。
【００３０】
画像表示装置３は、映像及び音声からなるコンテンツのうち、映像コンテンツを表示することが可能な装置である。また、画像表示装置３には、画像表示装置３の周囲の映像を撮像可能なカメラが設けられている。かかるカメラは、動画像や静止画像を撮像可能なビデオカメラであってもよく、静止画像を撮像可能なスチルカメラであってもよい。画像表示装置３は、このようなカメラで撮像した撮像画像を、本実施形態に係る音響制御装置１０に対して出力することが可能である。
【００３１】
ここで、以下の説明では、画像表示装置３に、画像表示装置３の周囲の映像を撮像可能なカメラが設けられている場合を取り上げるが、本実施形態に係るサラウンド調整システム１は、かかる例に限定されるわけではない。画像表示装置３にカメラが設置されていない場合であっても、音響制御装置１０が、外部に設けられたカメラから複数のスピーカが設けられた空間の撮像画像を取得することが可能であればよい。
【００３２】
音響制御装置１０は、以下で説明する音響制御方法を用いてコンテンツの音響を制御して、視聴者に対して適切なサラウンドを提供する装置である。この音響制御装置１０は、複数のスピーカ５に対して音声コンテンツを出力したり、マイク７によって集音された音声を取得したりすることが可能である。また、本実施形態に係る音響制御装置１０は、外部に設けられた各種のカメラや、カメラ機能付きの携帯機器（例えば、携帯電話等）から、これらの機器によって撮像された撮像画像を取得することも可能である。
【００３３】
本実施形態に係る音響制御装置１０には、図５に示したように、ＤＶＤレコーダやＢｌｕ−Ｒａｙレコーダのようなコンテンツ記録・再生装置９が接続されていてもよい。また、音響制御装置１０には、ＣＤプレーヤ、ＭＤプレーヤ、ＤＶＤプレーヤ、Ｂｌｕ−Ｒａｙプレーヤのようなコンテンツ再生装置が接続されていてもよい。
【００３４】
なお、図５に示した例では、音響制御装置１０を、画像表示装置３やコンテンツ記録・再生装置９とは別個の装置として図示しているが、本実施形態に係る音響制御装置１０は、かかる例に限定されるわけではない。すなわち、音響制御装置１０は、画像表示装置３と一体に形成されていてもよく、コンテンツ記録・再生装置９と一体に形成されていてもよい。また、以下で説明する音響制御装置１０は、画像表示装置３やコンテンツ記録・再生装置９の一機能として、これらの装置に実装されていてもよい。
【００３５】
＜音響制御装置の構成について＞
［全体構成］
続いて、図６を参照しながら、本実施形態に係る音響制御装置１０の全体構成を説明する。図６は、本実施形態に係る音響制御装置１０の構成の一例を示したブロック図である。
【００３６】
本実施形態に係る音響制御装置１０は、図６に示したように、統括制御部１０１、ユーザ操作情報取得部１０３、画像取得部１０５、画像処理部１０７、位置算出用信号制御部１０９、音響情報取得部１１１、スピーカ位置算出部１１３、音響制御部１１５、表示制御部１１７及び記憶部１１９を主に備える。
【００３７】
統括制御部１０１は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）、ＤＳＰ（Ｄｉｇｉｔａｌ  Ｓｉｇｎａｌ  Ｐｒｏｃｅｓｓｏｒ）、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、通信装置等により実現される。統括制御部１０１は、本実施形態に係る音響制御装置１０の動作の全般を統括的に制御する処理部である。また、統括制御部１０１は、音響制御装置１０が備える各処理部が動作を開始するトリガーを出力したり、ある処理部で生成されたデータや情報を他の処理部に伝達したりする。本実施形態に係る音響制御装置１０が備える各処理部は、統括制御部１０１が仲立ちを行うことにより、互いに連携して機能することが可能となる。
【００３８】
ユーザ操作情報取得部１０３は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ、入力装置、通信装置等により実現される。ユーザが、例えば、装置に対応するリモートコントローラを操作したり、装置に設けられたタッチパネルや各種ボタン等の入力キーを操作したりする等といったユーザ操作を実施することがある。かかる場合に、ユーザ操作情報取得部１０３は、ユーザ操作に対応する情報（ユーザ操作情報）を取得して、取得したユーザ操作情報を統括制御部１０１に出力する。統括制御部１０１は、出力されたユーザ操作情報を参照して、ユーザ操作に対応する機能を統括する処理部に対して、ユーザ操作に対応する機能を実施するように要請する。
【００３９】
画像取得部１０５は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ、通信装置等により実現される。画像取得部１０５は、音響制御装置１０が通信可能なカメラにより生成された、複数のスピーカの配置された空間（以下、スピーカ配置空間とも称する。）を撮像した撮像画像に対応するデータを取得する。カメラにより生成されたスピーカ配置空間を撮像した撮像画像の例としては、以下で説明するように、スピーカ配置空間内に配置されたマイク及びマイクに近接する近接物の少なくとも何れかを撮像した撮像画像や、スピーカ配置空間内に存在するユーザ（視聴者）を撮像した撮像画像等を挙げることができる。
【００４０】
画像取得部１０５は、上記のような撮像画像を装置の外部に設けられたカメラ（例えば、画像表示装置３に実装されたカメラ等）から取得すると、取得した撮像画像に対応するデータを、統括制御部１０１に出力する。統括制御部１０１は、このような撮像画像を取得すると、取得した画像を後述する画像処理部１０７に伝送する。また、統括制御部１０１は、画像取得部１０５から出力された各種の撮像画像を、これらの撮像画像を取得した日時に関する情報等と関連付けて、後述する記憶部１１９等に履歴情報として格納してもよい。
【００４１】
画像処理部１０７は、例えば、ＣＰＵ、ＧＰＵ（Ｇｒａｐｈｉｃｓ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）、ＲＯＭ、ＲＡＭ等により実現される。画像処理部１０７は、画像取得部１０５により取得された各種の撮像画像に対して、各種の画像処理を実施する処理部である。ここで、画像処理部１０７は、各種の画像処理を実施するに際して、後述する記憶部１１９等に格納されている各種のプログラムやデータベースや設定パラメータ等を参照することが可能である。画像処理部１０７による画像処理の結果は統括制御部１０１に出力され、統括制御部１０１から各処理部へと伝送される。
【００４２】
なお、本実施形態に係る画像処理部１０７の詳細な構成については、以下で改めて説明する。
【００４３】
位置算出用信号制御部１０９は、例えば、ＣＰＵ、ＤＳＰ、ＲＯＭ、ＲＡＭ等により実現される。位置算出用信号制御部１０９は、統括制御部１０１がスピーカ配置空間内に配置された各スピーカの位置の算出を開始する際に、統括制御部１０１から出力された所定のトリガーに応じて、スピーカ位置の算出に用いられる信号（以下、位置算出用信号とも称する。）の出力制御を行う。位置算出用信号制御部１０９により位置算出用信号の出力制御が実施されることで、例えば、スピーカ配置空間内に設けられた複数のスピーカが、個別に、所定の位置算出用信号（例えば、ビープ音等）を出力することとなる。
【００４４】
なお、統括制御部１０１は、例えば、ユーザがリモートコントローラ等の所定のボタン等を操作した旨を表すユーザ操作情報がユーザ操作情報取得部１０３から伝送された場合に、位置算出用信号の出力を開始させるためのトリガーを出力する。かかるトリガーを受けて、位置算出用信号制御部１０９は、位置算出用信号の出力制御を開始する。
【００４５】
また、位置算出用信号としては、ビープ音以外にも各種の信号を利用することが可能であり、位置算出用信号の周波数等は適宜設定することが可能である。
【００４６】
音響情報取得部１１１は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ、通信装置等により実現される。音響情報取得部１１１は、音響制御装置１０に接続された各種のマイク（例えば、モノラルマイク、ステレオマイク、マルチチャンネルマイク等）から、当該マイクによって集音された音に関する情報（以下、音響情報とも称する。）を取得する。このような音響情報の一つとして、例えば、位置算出用信号制御部１０９によって各スピーカから個別に出力された位置算出用信号の集音結果を表す情報を挙げることができる。また、本実施形態に係る音響情報は、かかる例に限定されるわけではなく、マイクが集音した各種の情報（例えば、ユーザの発声を集音したもの等）が音響情報として取り扱われる。
【００４７】
音響情報取得部１１１は、取得した音響情報を統括制御部１０１に出力する。統括制御部１０１は、このような音響情報を取得すると、取得した画像を実施する処理に応じて各処理部に伝送する。また、統括制御部１０１は、音響情報取得部１１１から出力された各種の音響情報を、これらの音響情報を取得した日時に関する情報等と関連付けて、後述する記憶部１１９等に履歴情報として格納してもよい。
【００４８】
スピーカ位置算出部１１３は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ等により実現される。スピーカ位置算出部１１３は、画像処理部１０７により生成された撮像画像に対する画像処理結果と、音響情報取得部１１１によって取得された位置算出用信号の集音結果とを利用して、スピーカ配置空間内に存在するスピーカそれぞれの位置を算出する。具体的には、スピーカ位置算出部１１３は、スピーカ配置空間内に位置するマイク及び当該マイクに近接する近接物の少なくとも何れかの撮像画像に基づいて算出したマイクの位置と、各スピーカから出力された信号音のマイクによる集音結果とに基づき、スピーカ配置空間における各スピーカの位置を算出する。
【００４９】
スピーカ位置算出部１１３は、これらの情報に基づいてスピーカ配置空間における各スピーカの位置を算出すると、得られた算出結果（すなわち、スピーカの配置位置に関するスピーカ位置情報）を、統括制御部１０１に出力する。統括制御部１０１は、スピーカ位置情報を取得すると、取得した情報を後述する音響制御部１１５に伝送する。また、統括制御部１０１は、スピーカ位置算出部１１３から出力されたスピーカ位置情報を、かかる情報を取得した日時に関する情報等と関連付けて、後述する記憶部１１９等に履歴情報として格納してもよい。
【００５０】
なお、本実施形態に係るスピーカ位置算出部１１３の詳細な構成については、以下で改めて説明する。
【００５１】
音響制御部１１５は、例えば、ＣＰＵ、ＤＳＰ、ＲＯＭ、ＲＡＭ等により実現される。音響制御部１１５は、スピーカ配置空間内のユーザを撮像した撮像画像（より詳細には、ユーザを撮像した撮像画像の画像処理結果）に基づいて、ユーザの位置を算出する。また、音響制御部１１５は、算出したユーザの位置を利用して、ユーザの位置と複数のスピーカのそれぞれとの離隔距離を算出する。その後、音響制御部１１５は、算出したこれらの結果に応じて、複数のスピーカから出力される音を制御する。
【００５２】
ここで、音響制御部１１５が実施する音の制御としては、例えば、ユーザ（視聴者）の位置に適した音源の定位処理や、ユーザの特徴（例えば、性別や年齢等のメタデータ）に応じた音質調整処理等を挙げることができる。
【００５３】
なお、本実施形態に係る音響制御部１１５の詳細な構成については、以下で改めて説明する。
【００５４】
表示制御部１１７は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ、通信装置等により実現される。表示制御部１１７は、本実施形態に係る音響制御装置１０が備えるディスプレイや表示パネル等の表示装置の表示制御を行う。これにより、本実施形態に係る音響制御装置１０が備える各処理部は、処理が終了した旨を表すメッセージ又は表示や、処理結果を表すメッセージ又は表示等を、ユーザに伝達することができる。
【００５５】
また、本実施形態に係る表示制御部１１７は、上述のような音響制御装置１０における各処理の終了通知や処理結果等を、画像表示装置３等の外部の装置に表示させることも可能である。これにより、例えば、音響制御装置１０によるサウンドキャリブレーションの処理結果を、画像表示装置３の表示画面に表示することも可能となる。
【００５６】
記憶部１１９は、本実施形態に係る音響制御装置１０が備えるストレージ装置の一例である。記憶部１１９には、スピーカ位置算出部１１３により算出されたスピーカ配置空間内での各スピーカの位置を表すスピーカ位置情報等が格納される。また、記憶部１１９には、本実施形態に係る音響制御装置１０で生成された各種の情報やデータ等が格納されていてもよい。更に、記憶部１１９には、本実施形態に係る音響制御装置１０が、何らかの処理を行う際に保存する必要が生じた様々なパラメータや処理の途中経過等、または、各種のデータベースやプログラム等が、適宜記録される。
【００５７】
以上、本実施形態に係る音響制御装置１０の全体構成について、詳細に説明した。
【００５８】
［画像処理部］
続いて、図７を参照しながら、本実施形態に係る音響制御装置１０が備える画像処理部１０７の構成について説明する。図７は、本実施形態に係る音響制御装置１０が備える画像処理部１０７の構成を示したブロック図である。
【００５９】
本実施形態に係る画像処理部１０７は、図７に示したように、顔検出部１３１と、年齢・性別判定部１３３と、ジェスチャ認識部１３５と、物体検出部１３７と、顔認識部１３９と、を更に備える。
【００６０】
顔検出部１３１は、例えば、ＣＰＵ、ＧＰＵ、ＲＯＭ、ＲＡＭ等により実現される。顔検出部１３１は、画像取得部１０５が取得した各種撮像画像（マイク及び／又はマイクに近接する近接物の撮像画像や、視聴者を撮像した撮像画像）を参照して、これら撮像画像の中に含まれている可能性のある人間の顔に対応する部分を検出する。撮像画像の中に人間の顔に対応する部分が含まれている場合には、顔検出部１３１は、かかる顔に対応する部分を撮像画像の中から検出して、顔に対応する部分の画素座標や、顔に対応する部分の大きさ等を特定する。
【００６１】
また、かかる顔検出処理により、顔検出部１３１は、各種撮像画像中に存在する視聴者の人数を把握することも可能である。撮像画像中に複数の視聴者が存在する場合には、顔検出部１３１は、各視聴者ついて、顔に対応する部分の画素座標や、顔に対応する部分の大きさ等を特定することができる。また、顔検出部１３１は、複数の顔の重心位置など、視聴者の集合を特徴付ける各種の特徴量を算出してもよい。
【００６２】
顔検出部１３１は、得られた検出結果等を統括制御部１０１に出力する。これにより、統括制御部１０１は、得られた検出結果を、スピーカ位置検出部１１３や音響制御部１１５等に出力する。また、顔検出部１３１は、得られた検出結果を、画像処理部１０７が備える他の処理部に提供し、他の処理部と連携しながら処理を実施することが可能である。
【００６３】
ここで、顔検出部１３１が実施する顔検出処理については、例えば、特開２００７−６５７６６号公報や、特開２００５−４４３３０号公報に掲載されている技術など、公知のあらゆる技術を適用することが可能である。
【００６４】
年齢・性別判定部１３３は、例えば、ＣＰＵ、ＧＰＵ、ＲＯＭ、ＲＡＭ等により実現される。年齢・性別判定部１３３は、顔検出部１３１により検出された顔の画像を利用して、顔の特徴的な部分（例えば、眉毛、目、鼻、口等）を検出する。かかる顔の特徴的な部分の検出処理には、例えば、ＡＡＭ（Ａｃｔｉｖｅ  Ａｐｐｅａｒａｎｃｅ  Ｍｏｄｅｌ）と呼ばれる方法など、公知のあらゆる技術を利用することが可能である。
【００６５】
続いて、年齢・性別判定部１３３は、検出した顔の特徴的な部分に着目して、かかる顔の持ち主の年齢や性別を判定する。これにより、視聴者の年齢、性別などといった、視聴者に関するメタデータを抽出することができる。顔の特徴的な部分に着目して、年齢や性別を判定する方法についても、公知のあらゆる技術を利用することが可能である。
【００６６】
年齢・性別判定部１３３は、得られた判定結果（すなわち、視聴者に関する年齢や性別等のメタデータ）を統括制御部１０１に出力する。これにより、統括制御部１０１は、得られた判定結果を、音響制御部１１５等に出力する。また、年齢・性別判定部１３３は、得られた検出結果を、画像処理部１０７が備える他の処理部に提供し、他の処理部と連携しながら処理を実施することが可能である。
【００６７】
ジェスチャ認識部１３５は、例えば、ＣＰＵ、ＧＰＵ、ＲＯＭ、ＲＡＭ等により実現される。ジェスチャ認識部１３５は、画像取得部１０５が取得した各種撮像画像（マイク及び／又はマイクに近接する近接物の撮像画像や、視聴者を撮像した撮像画像）や当該画像の時間変化に着目して、これらの画像中に含まれる視聴者が行っているジェスチャを認識する。これにより、ジェスチャ認識部１３５は、視聴者が実施している特定のジェスチャ（例えば、手を振っている、ピースマークを作っている等）を認識することができる。
【００６８】
ジェスチャ認識部１３５が実施するジェスチャ認識処理は、公知のあらゆる技術を適用することが可能である。
【００６９】
ジェスチャ認識部１３５は、得られたジェスチャ認識結果を統括制御部１０１に出力する。これにより、統括制御部１０１は、得られたジェスチャ認識結果を、音響制御部１１５等に出力する。また、ジェスチャ認識部１３５は、得られた検出結果を、画像処理部１０７が備える他の処理部に提供し、他の処理部と連携しながら処理を実施することが可能である。
【００７０】
物体検出部１３７は、例えば、ＣＰＵ、ＧＰＵ、ＲＯＭ、ＲＡＭ等により実現される。物体検出部１３７は、画像取得部１０５が取得した各種撮像画像（マイク及び／又はマイクに近接する近接物の撮像画像や、視聴者を撮像した撮像画像）を参照して、これら撮像画像の中に含まれている可能性のある特定の物体に対応する部分を検出する。物体検出部１３７が検出する特定の物体の例として、例えば、スピーカ配置空間に設置されたマイクそのものや、マイクに設けられたサイバーコード等のビジュアルマーカ等を挙げることができる。
【００７１】
撮像画像の中にかかる物体に対応する部分が含まれている場合には、物体検出部１３７は、かかる物体に対応する部分を撮像画像の中から検出して、物体に対応する部分の画素座標や、物体に対応する部分の大きさ等を特定する。
【００７２】
また、かかる物体検出処理により、物体検出部１３７は、各種撮像画像中に存在する物体の個数や種別（例えば、マイクの種別等）を把握することも可能である。撮像画像中に複数の物体が存在する場合には、物体検出部１３７は、各物体ついて、物体に対応する部分の画素座標や、物体に対応する部分の大きさ等を特定することができる。また、物体検出部１３７は、複数の物体の重心位置など、物体の集合を特徴付ける各種の特徴量を算出してもよい。
【００７３】
物体検出部１３７は、得られた検出結果等を統括制御部１０１に出力する。これにより、統括制御部１０１は、得られた検出結果を、スピーカ位置検出部１１３や音響制御部１１５等に出力する。また、物体検出部１３７は、得られた検出結果を、画像処理部１０７が備える他の処理部に提供し、他の処理部と連携しながら処理を実施することが可能である。
【００７４】
ここで、物体検出部１３７が実施する物体検出処理については、公知のあらゆる技術を適用することが可能である。
【００７５】
顔認識部１３９は、例えば、ＣＰＵ、ＧＰＵ、ＲＯＭ、ＲＡＭ等により実現される。顔認識部１３９は、顔検出部１３１により検出された顔について、識別を行う処理部である。顔認識部１３９は、顔検出部１３１により検出された顔の特徴的な部分等に着目して局所特徴量を算出し、算出した局所特徴量と、検出された顔画像とを関連付けて記憶することで、視聴者データベースを構築する。顔認識部１３９は、かかる視聴者データベースを利用することで、顔検出部１３１により検出された視聴者の顔の識別を実施することができる。
【００７６】
なお、顔の識別方法については、特開２００７−６５７６６号公報や、特開２００５−４４３３０号公報に掲載されている技術など、公知のあらゆる技術を適用することが可能である。
【００７７】
顔認識部１３９は、得られた認識結果等を統括制御部１０１に出力する。これにより、統括制御部１０１は、得られた認識結果を音響制御部１１５等に出力する。また、顔認識部１３９は、得られた認識結果を、画像処理部１０７が備える他の処理部に提供し、他の処理部と連携しながら処理を実施することが可能である。
【００７８】
以上、図７を参照しながら、本実施形態に係る画像処理部１０７の構成について簡単に説明したが、本実施形態に係る画像処理部１０７は、上述の処理部以外にも、画像処理に関するあらゆる処理部を更に有していてもよい。
【００７９】
［スピーカ位置算出部］
続いて、図８を参照しながら、本実施形態に係る音響制御装置１０が備えるスピーカ位置算出部１１３の構成について説明する。図８は、本実施形態に係る音響制御装置１０が備えるスピーカ位置算出部１１３の構成を示したブロック図である。
【００８０】
本実施形態に係るスピーカ位置算出部１１３は、例えば図８に示したように、マイク位置算出部１５１と、マイク位置離隔量算出部１５３と、スピーカ位置特定部１５５と、を更に備える。
【００８１】
マイク位置算出部１５１は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ等により実現される。マイク位置算出部１５１は、画像処理部１０７による画像処理結果や、音響情報取得部１１１が取得した音響情報に基づいて、スピーカ配置空間内に設けられたマイクの位置（マイク位置）を算出する。
【００８２】
例えば、マイク位置算出部１５１は、画像処理部１０７による顔検出結果を利用し、サウンドキャリブレーションの実行時にマイクを設置する際には、ユーザの顔の近傍にマイクがあると仮定して、顔検出結果に基づいてマイク位置を算出することができる。また、マイク位置算出部１５１は、画像処理部１０７による物体検出結果（例えば、マイクの検出結果や、サイバーコード等のビジュアルマーカの検出結果）等を利用して、マイク位置を算出することも可能である。また、マイク位置算出部１５１は、スピーカから出力された音声をマイクで集音した集音結果（音響情報）そのものを利用して、マイク位置を算出してもよい。
【００８３】
以下では、画像表示装置３に設置されたカメラにより撮像された撮像画像に基づくユーザの顔の検出結果を利用して、ユーザ位置（≒マイク位置）を算出する場合を例にとって、算出方法を具体的に説明する。
【００８４】
例えば、マイク位置算出部１５１は、画像処理部１０７による各種の画像処理結果や、画像表示装置３等に設置されたカメラの画角や解像度の情報等に関する光学情報を利用し、カメラ光軸に対するユーザの相対位置（方向［φ１，θ１］、距離ｄ１）を算出する。
【００８５】
ここで、画像処理部１０７からは、撮像画像と、撮像画像内におけるユーザの顔検出情報（例えば、顔検出位置［ａ１，ｂ１］、顔サイズ［ｗ１，ｈ１］等）が、出力されているものとする。
【００８６】
マイク位置算出部１５１は、ユーザの相対位置のうちの方向［φ１，θ１］を、撮像画像のサイズ［ｘｍａｘ，ｙｍａｘ］で正規化された顔検出位置［ａ１，ｂ１］と、カメラの画角［φ０，θ０］とから、以下の式１０１及び式１０２に基づいて算出する。
【００８７】
水平方向：φ１＝φ０×ａ１  ・・・（式１０１）
垂直方向：θ１＝θ０×ｂ１  ・・・（式１０２）
【００８８】
また、マイク位置算出部１５１は、ユーザの相対位置のうちの距離ｄ１を、基準距離ｄ０における基準顔サイズ［ｗ０，ｈ０］に基づいて、以下の式１０３により算出する。
【００８９】
距離：ｄ１＝ｄ０×（ｗ０／ｗ１）  ・・・（式１０３）
【００９０】
その後、マイク位置算出部１５１は、カメラ光軸に対するユーザの相対位置の算出結果と、カメラの位置や角度等に関する情報（以下、取付情報とも称する。）に基づいて、画像表示装置３の装置中心及び正面方向軸に対するユーザの３次元位置を算出する。
【００９１】
例えば、画像表示装置３の装置中心を［０，０，０］とし、カメラの設置位置を［Δｘ，Δｙ，Δｚ］とし、設置角度としての角度差分を［Δφ，Δθ］とする。また、画像表示装置３の表示画面正面方向を［０，０，ｚ］とする。
【００９２】
かかる座標系において、マイク位置算出部１５１は、画像表示装置３の装置中心［０，０，０］からのユーザの位置［ｘ１，ｙ１，ｚ１］を、以下の式１０４〜式１０６により算出する。
【００９３】
ｘ１＝ｄ１×ｃｏｓ（θ１−Δθ）×ｔａｎ（φ１−Δφ）−Δｘ・・・（式１０４）
ｙ１＝ｄ１×ｔａｎ（θ１−Δθ）−Δｙ  ・・・（式１０５）
ｚ１＝ｄ１×ｃｏｓ（θ１−Δθ）×ｃｏｓ（φ１−Δφ）−Δｚ・・・（式１０６）
【００９４】
以上説明したような方法により、マイク位置算出部１５１は、撮像画像中のユーザの顔検出結果から、ユーザの位置（≒マイク位置）を算出することができる。なお、以上説明した方法はあくまでも一例であって、マイク位置算出部１５１は、上記方法以外の方法により、マイク位置を算出することが可能である。例えば、上記例において、顔検出位置や基準顔サイズを、マイク検出位置や基準マイクサイズと置き換えることで、撮像画像か抽出されたマイクの検出結果を利用したマイク位置の算出を行うことが可能となる。
【００９５】
マイク位置算出部１５１は、算出したマイク位置に関する情報を、後述するスピーカ位置特定部１５５に出力する。
【００９６】
マイク位置離隔量算出部１５３は、例えば、ＣＰＵ、ＤＳＰ、ＲＯＭ、ＲＡＭ等により実現される。マイク位置離隔量算出部１５３は、音響情報取得部１１１が取得した、各スピーカから個別に出力された位置算出用信号の集音結果に基づいて、各スピーカとマイク位置との間の離隔量を算出する。
【００９７】
具体的には、マイク位置離隔量算出部１５３は、各スピーカから個別に出力された位置算出用信号の集音結果（集音した位置算出用信号の大きさ［ｄＢ］）を利用して、特開２００９−１０９９２号公報に記載された方法に則して、離隔量を算出する。
【００９８】
マイク位置離隔量算出部１５３は、算出したマイク位置離隔量に関する情報を、後述するスピーカ位置特定部１５５に出力する。
【００９９】
スピーカ位置特定部１５５は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ等により実現される。スピーカ位置特定部１５５は、マイク位置算出部１５１が算出したスピーカ配置空間内のマイクの位置と、マイク位置離隔量算出部１５３が算出したマイク位置離隔量とに基づいて、スピーカ配置空間内におけるスピーカの位置を特定する。
【０１００】
マイク位置算出部１５１によって、スピーカ配置空間内に設けられたマイクの位置が算出され、マイク位置離隔量算出部１５３によって、マイクの位置を中心として、スピーカ配置空間内に設けられた各スピーカとの離隔量が算出される。従って、各スピーカは、マイク位置を中心として、着目しているスピーカとの離隔量を半径とする球面のいずれかの場所に、着目しているスピーカが存在することとなる。従って、スピーカ位置特定部１５５は、スピーカ配置空間内の最大３箇所（モノラルマイクを用いた場合）において、マイク位置と、マイクとスピーカとの離隔量とを取得できれば、着目しているスピーカの位置を特定することができる。これにより、スピーカ配置空間内に設けられた各スピーカの座標（例えば、画像表示装置３の装置中心を原点とする座標系における座標）が算出される。
【０１０１】
マイク位置算出部１５１は、スピーカ配置空間内に配置された全てのスピーカの配置位置を特定すると、スピーカの配置位置を表す情報（スピーカ位置情報）を生成して、マイク位置離隔量算出部１５３及び統括制御部１０１に出力する。
【０１０２】
スピーカ位置算出部１１３は、以上説明したような処理を実施することによって、スピーカ配置空間内に位置する各スピーカの位置を算出することができる。なお、スピーカ位置の算出方法の具体例については、以下で改めて説明する。
【０１０３】
［音響制御部］
続いて、図９を参照しながら、本実施形態に係る音響制御装置１０が備える音響制御部１１５の構成について説明する。図９は、本実施形態に係る音響制御装置１０が備える音響制御部１１５の構成を示したブロック図である。
【０１０４】
本実施形態に係る音響制御部１１５は、図９に示したように、視聴位置算出部１７１と、スピーカ離隔量算出部１７３と、ユーザシグナル判定部１７５と、音響調整部１７７と、サラウンド調整部１７９と、音響出力部１８１と、を更に備える。
【０１０５】
視聴位置算出部１７１は、例えば、ＣＰＵ、ＧＰＵ、ＲＯＭ、ＲＡＭ等により実現される。視聴位置算出部１７１は、スピーカ配置空間内に存在する視聴者を撮像した撮像画像の画像処理結果に基づいて、視聴者の位置を算出する。すなわち、視聴位置算出部１７１は、画像処理部１０７により生成されたスピーカ配置空間内に存在する視聴者の顔検出結果を取得すると、マイク位置算出部１５１と同様の方法を用いて、視聴者の存在する位置（すなわち、視聴者がコンテンツを視聴する位置）を算出する。これにより、スピーカ配置空間内に存在する視聴者の座標（例えば、画像表示装置３の装置中心を原点とする座標系における座標）が算出される。
【０１０６】
この際、視聴者がスピーカ配置空間内に複数存在する場合には、視聴位置算出部１７１は、各視聴者に対応する視聴位置を算出するとともに、複数の視聴者の集合を考えた場合の重心位置等を算出してもよい。
【０１０７】
視聴位置算出部１７１は、このようにして得られた算出結果（視聴位置に関する視聴位置情報）を、スピーカ離隔量算出部１７３及びサラウンド調整部１７９に出力する。
【０１０８】
スピーカ離隔量算出部１７３は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ等により実現される。スピーカ離隔量算出部１７３は、視聴位置算出部１７１により算出された視聴位置情報と、スピーカ位置算出部１１３により生成されたスピーカ位置情報とに基づいて、視聴位置と各スピーカとの離隔量を算出する。視聴位置情報及びスピーカ位置情報の双方とも、ある座標系（例えば、画像表示装置３の装置中心を原点とする座標系）における座標値に関する情報を含んでいる。そのため、スピーカ離隔量算出部１７３は、２つの座標間の距離を幾何学的に算出することにより、スピーカ配置空間内に存在する各スピーカと視聴位置との離隔量を、それぞれ算出することができる。
【０１０９】
スピーカ離隔量算出部１７３は、算出したスピーカ離隔量に関する情報（スピーカ離隔量情報）を、サラウンド調整部１７９に出力する。
【０１１０】
ユーザシグナル判定部１７５は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ等により実現される。ユーザシグナル判定部１７５は、画像処理部１０７から出力されたジェスチャ認識結果等を利用して、視聴者が実施した様々なジェスチャについて、特別な意味を持つジェスチャが存在するか否かを判定する。
【０１１１】
例えば、「手を振っている視聴者の位置を中心としてサラウンドキャリブレーションを実施する」という設定が予めなされている場合に、ユーザシグナル判定部１７５は、「手を振っている」というジェスチャが検出されたか否かを判定する。このように、特別な意味を持つジェスチャを行っている視聴者を検出することで、例えば、そのようなジェスチャを行っている視聴者を中心として、サラウンドキャリブレーションを実施することが可能となる。
【０１１２】
また、ユーザシグナル判定部１７５は、画像処理部１０７による顔識別結果等を利用して、複数の視聴者が存在する場合に各視聴者に対して優先順位を付加してもよい。すなわち、登録されている視聴者に付与されている優先度や、画像表示装置３との距離の遠近や、視聴者の視聴状態（最も注目してコンテンツを視聴しているか）等のポリシーに準じて、ユーザシグナル判定部１７５は、視聴者間に優先順位を付加する。
【０１１３】
また、本実施形態に係る音響制御装置１０が音声認識機能を有している場合、ユーザシグナル判定部１７５は、例えば、言葉を発している視聴者が存在するか否かを判定してもよい。言葉を発している視聴者を検出することで、例えば、かかる視聴者を中心として、サラウンドキャリブレーションを実施することが可能となる。
【０１１４】
ユーザシグナル判定部１７５は、上述のような判定を行った結果を、後述する音響調整部１７７及びサラウンド調整部１７９に出力する。
【０１１５】
音響調整部１７７は、例えば、ＣＰＵ、ＤＳＰ、ＲＯＭ、ＲＡＭ等により実現される。音響調整部１７７は、画像処理部１０７から出力された、視聴者の年齢や性別等の視聴者メタデータ等を含む画像処理結果や、ユーザシグナル判定部１７５から出力された判定結果等に基づいて、出力するサラウンドの音質等の調整を実施する。
【０１１６】
例えば、音響調整部１７７は、視聴者が所定の年齢以上の高齢者である場合には、高音域を持ちあげるとともに、出力音量の設定値を上昇させる調整を実施することができる。また、音響調整部１７７は、視聴者が所定の年齢未満の幼児である場合には、音のダイナミックレンジを圧縮する調整を実施することができる。このような処理を実施することで、視聴者の身体的な特徴に応じたサラウンドを提供することが可能となる。
【０１１７】
また、音響調整部１７７は、顔識別処理の識別結果を利用して、個人の好みに合わせたサラウンドのイコライジングを実施することも可能である。
【０１１８】
また、音響調整部１７７は、視聴者が複数存在した場合に、視聴者間の優先度を考慮する（例えば、高齢者を優先する、幼児を優先する等）、全ての視聴者の条件を満足するイコライジングを実施する、特定のジェスチャや発声を実施している視聴者を優先する、など、各種の設定条件に則して、音質の調整等を実施することが可能である。
【０１１９】
音響調整部１７７は、上述のようなサラウンドの調整が終了すると、決定したサラウンドの出力設定（音質等に関する出力設定）を、音響出力部１８１に出力する。
【０１２０】
サラウンド調整部１７９は、例えば、ＣＰＵ、ＤＳＰ、ＲＯＭ、ＲＡＭ等により実現される。サラウンド調整部１７９は、視聴位置算出部１７１の算出した視聴位置や、スピーカ離隔量算出部１７３が算出したスピーカ離隔量や、ユーザシグナル判定部１７５による判定結果等に応じて、サラウンドの調整（サラウンドキャリブレーション）を実施する。
【０１２１】
具体的には、サラウンド調整部１７９は、視聴者の位置を中心としたスイートスポットが生成されるように、サラウンドの調整を行う。ここで、スイートスポットの形状は、視聴者を内包し、面積が最小となる円形状又は楕円形状とすることが好ましい。
【０１２２】
また、視聴者が複数存在する場合には、サラウンド調整部１７９は、例えば、複数の視聴者の重心を中心とする、更に広がりを持ったスイートスポットが生成されるようにサラウンドの調整を実施してもよい。また、ユーザシグナル判定部１７５により視聴者の優先順位が設定されている場合には、サラウンド調整部１７９は、かかる優先順位に従って、優先度の高い視聴者を中心としてスイートスポットが生成されるようにサラウンドの調整を実施してもよい。また、サラウンド調整部１７９は、顔認識結果を利用して、特定の人物の位置にスイートスポットが生成されるようにサラウンドの調整を実施してもよい。
【０１２３】
サラウンド調整部１７９は、サラウンドを調整するための設定を確定すると、確定した設定に関する情報を、音響出力部１８１に出力する。
【０１２４】
なお、サラウンド調整部１７９が実施するサラウンドキャリブレーションの方法は、公知のあらゆる方法を利用することが可能である。
【０１２５】
音響出力部１８１は、例えば、ＣＰＵ、ＤＳＰ、ＲＯＭ、ＲＡＭ等により実現される。音響出力部１８１は、音響調整部１７７及びサラウンド調整部１７９から出力された音響出力設定に基づいて、コンテンツのサラウンド音声を、スピーカ配置空間内に設置された各スピーカから出力する。
【０１２６】
以上、図９を参照しながら、本実施形態に係る音響制御部１１５の構成について、詳細に説明した。
【０１２７】
以上、本実施形態に係る音響制御装置１０の機能の一例を示した。上記の各構成要素は、汎用的な部材や回路を用いて構成されていてもよいし、各構成要素の機能に特化したハードウェアにより構成されていてもよい。また、各構成要素の機能を、ＣＰＵ等が全て行ってもよい。従って、本実施形態を実施する時々の技術レベルに応じて、適宜、利用する構成を変更することが可能である。
【０１２８】
なお、上述のような本実施形態に係る音響制御装置の各機能を実現するためのコンピュータプログラムを作製し、パーソナルコンピュータ等に実装することが可能である。また、このようなコンピュータプログラムが格納された、コンピュータで読み取り可能な記録媒体も提供することができる。記録媒体は、例えば、磁気ディスク、光ディスク、光磁気ディスク、フラッシュメモリなどである。また、上記のコンピュータプログラムは、記録媒体を用いずに、例えばネットワークを介して配信してもよい。
【０１２９】
＜スピーカ位置の算出方法の具体例＞
続いて、図１０〜図１３を参照しながら、スピーカ位置の算出方法の具体例について、簡単に説明する。図１０〜図１３は、本実施形態に係るスピーカ位置の算出方法について説明するための説明図である。
【０１３０】
以下の説明では、図１０に示したように、画像表示装置３の装置中心を原点とする座標系を考え、カメラ（より詳細には、カメラの光軸）がＺ軸上に存在するものとする。また、このような空間内に、スピーカＡ〜スピーカＤの４つのスピーカが設置されているものとする。また、以下の例では、マイクとしてモノラルマイクを使用する場合について説明する。
【０１３１】
かかる場合において、スピーカ位置を算出するために、ユーザは、モノラルマイクを持って（例えば、位置特定誤差を小さくするために顔の近くにマイクを持って）、空間内のある点Ｐに静止したものとする。この場合、画像表示装置３に設けられたカメラは、モノラルマイクを持ったユーザを撮像し、モノラルマイクと、当該モノラルマイクの近接物であるユーザの顔とが撮像された撮像画像を生成する。その後、カメラは、画像表示装置３を介して、ＨＤＭＩケーブル等で接続された音響制御装置１０（図示せず。）に対して、撮像画像を出力する。
【０１３２】
音響制御装置１０は、モノラルマイクとユーザの顔とを含む撮像画像を取得すると、先に説明したような方法で、ユーザの顔の位置（すなわち、マイクの設置位置）を算出する。本例では、ユーザ（≒マイク）の位置Ｐが（ｘ１，ｙ１，ｚ１）という座標で表されるものであったとする。
【０１３３】
その後、音響制御装置１０は、各スピーカＡ〜Ｄから、個別にビープ音等の位置算出用信号を出力して、位置Ｐに存在するモノラルマイクに、各スピーカから出力された信号音を集音させる。音響制御装置１０は、モノラルマイクの集音結果を音響情報として取得して、集音結果に含まれる信号音の大きさから、マイクとスピーカとの離隔量を算出する。
【０１３４】
図１０に示した例では、スピーカＡとの離隔量｜ＡＰ｜がＡ１であり、スピーカＢとの離隔量｜ＢＰ｜がＢ１であり、スピーカＣとの離隔量｜ＣＰ｜がＣ１であり、スピーカＤとの離隔量｜ＤＰ｜がＤ１であったとする。
【０１３５】
ユーザは、モノラルマイクを持ちながら空間内を移動し、音響制御装置１０は、位置Ｐとは異なる２カ所（位置Ｑ及び位置Ｒ）において、同様の処理を実施する。
【０１３６】
その結果、音響制御装置１０は、図１１Ａに示したような、位置Ｐ、位置Ｑ及び位置Ｒの座標を表すデータと、図１１Ｂに示したような、各スピーカと各マイク位置との離隔量を表すデータと、を算出することができる。
【０１３７】
図１２は、音響制御装置１０がスピーカＡの位置を算出する場合の処理について図示したものである。図１１Ａ及び図１１Ｂに示したように、音響制御装置１０は、スピーカＡは、位置Ｐとの離隔量がＡ１であり、位置Ｑとの離隔量がＡ２であり、かつ、位置Ｒとの離隔量がＡ３である位置に存在していると判断する。そこで、音響制御装置１０は、図１２に示したように、球ＡＰ、球ＡＱ及び球ＡＲという３種類の球体の球面に着目し、これら３つの球面の交点を算出する。これにより、音響制御装置１０は、スピーカＡの位置（ｘａ，ｙａ，ｚａ）を算出することができる。
【０１３８】
音響制御装置１０は、同様の処理を、スピーカＢ〜スピーカＤについても実施する。これにより、音響制御装置１０は、スピーカ配置空間内における各スピーカの位置座標を算出することができる。
【０１３９】
このように各スピーカの位置座標が特定されることによって、ある時点でのユーザの存在位置（例えば、図１３に示した位置Ｘ（ｘ，ｙ，ｚ））が特定されると、音響制御装置１０は、スピーカ離隔量｜ＡＸ｜、｜ＢＸ｜、｜ＣＸ｜、｜ＤＸ｜を容易に算出することができる。音響制御装置１０は、ユーザの位置を画像表示装置３やカメラにポーリングする、画像表示装置３やカメラとの間でユーザ位置が変化したら撮像画像を出力するように取り決めておく、等といった方法を採用することよって、ユーザの位置の変化を動的に把握できる。これにより、音響制御装置１０は、ユーザの視聴位置の変化を随時把握することが可能となり、サラウンドをユーザの視聴位置に動的に適応させることが可能となる。
【０１４０】
なお、以上説明した例では、相異なる３カ所に設置したマイクを利用してスピーカ位置の算出を行う場合について説明した。ここで、スピーカ及び人間の高さ方向（図中のＹ軸方向）を無視してもよいという仮定が成立するのであれば、相異なる２カ所に設置したマイクを利用することで、スピーカ位置を算出することも可能である。
【０１４１】
＜マイク位置の算出方法の変形例＞
以下では、図１４〜図１６を参照しながら、マイク位置の算出方法の変形例について、簡単に説明する。図１４〜図１６は、本実施形態に係るマイク位置の算出方法について説明するための説明図である。
【０１４２】
図１０〜図１３に示した具体例では、モノラルマイクに近接したユーザの顔に着目してマイク位置を算出する場合について説明したが、以下で説明するような方法を用いてマイク位置を算出することも可能である。
【０１４３】
例えば、図１４に示した例では、モノラルマイクにサイバーコード等のビジュアルマーカを添付することで、マイク位置を算出する方法について図示している。マイクにビジュアルマーカを添付して、相異なる３つの位置に当該マイクを設置することにより、音響制御装置１０は、ビジュアルマーカの添付されたマイクの撮像画像を画像処理することで、マイク位置を算出することが可能となる。
【０１４４】
また、図１４に示した例では、２次元のビジュアルマーカをマイクに設置する場合について示したが、図１５に示したように、３次元的な姿勢を算出することが可能なビジュアルマーカを添付することで、マイク位置を算出することも可能である。かかる場合には、ビジュアルマーカの決められた面を各スピーカの方向に向けた状態で、位置算出用信号をスピーカから出力する。
【０１４５】
これにより、画像処理によってビジュアルマーカを検出することでマイク位置が検出可能となるのみならず、マーカの位置と方向、及び、マーカ−スピーカ間の離隔量に基づいて、スピーカ位置の算出を行うことも可能となる。これにより、モノラルマイクを移動することなくサウンドキャリブレーションを実施することが可能となる。
【０１４６】
また、図１５に示したような３次元的なビジュアルマーカではなく、人間の顔を用いても位置と姿勢とを推定することが可能となるため、人間の顔をスピーカの方向に向けるという方法を利用することも可能である。
【０１４７】
また、図１４及び図１５に示したような方法ではなく、図１６に示したように、スピーカ配置空間内の指定された位置にマイクを設置することでも、マイクの位置を特定することが可能であることは言うまでもない。
【０１４８】
＜用いるマイクの種類について＞
以上説明した例では、モノラルマイクを用いる場合について説明を行ってきたが、モノラルマイクは安価であるというメリットを有する一方、相異なる３カ所にマイクを設置することが必要である。
【０１４９】
他方、ステレオマイクは、スピーカから出力された音声を、ステレオサウンドとして集音するため、スピーカとの離隔距離だけでなく、方向を計算することが可能となる。その結果、ステレオマイクを用いることで、図１７に示したように、スピーカの存在位置をある円周上まで絞り込むことが可能となる。従って、本実施形態に係る音響制御方法においてステレオマイクを利用することで、マイクの移動回数を２回に削減することが可能となる。
【０１５０】
また、３チャンネルマイクは、スピーカから出力された音声を、３つのチャンネルで集音するため、図１７に示したように、スピーカの存在位置を、互いに対称な点のどちらかまで絞り込むことが可能となる。従って、本実施形態に係る音響制御方法において３チャンネルマイクを利用することで、マイクの移動回数を１回に削減することが可能となる。
【０１５１】
＜音響制御方法の流れについて＞
続いて、図１８及び図１９を参照しながら、本実施形態に係る音響制御方法の流れの一例について、簡単に説明する。図１８及び図１９は、本実施形態に係る音響制御方法の流れの一例を示した流れ図である。
【０１５２】
まず、図１８を参照しながら、スピーカ位置の算出方法の流れを簡単に説明する。
音響制御装置１０の統括制御部１０１は、まず、カメラに対して、撮像画像を出力するように要求する（ステップＳ１０１）。すると、カメラは、マイク及びマイクに近接する近接物の少なくとも何れかを撮像した撮像画像を、音響制御装置１０に対して出力する（ステップＳ１０３）。
【０１５３】
音響制御装置１０の画像取得部１０５は、カメラから出力された撮像画像を取得すると、取得した撮像画像を、統括制御部１０１に出力する。統括制御部１０１は、画像取得部１０５から出力された撮像画像を、画像処理部１０７に伝送する。
【０１５４】
音響制御装置１０の画像処理部１０７は、統括制御部１０１から出力された撮像画像に対して、顔検出処理、物体検出処理、ジェスチャ認識処理等の画像処理を実施し（ステップＳ１０５）、得られた画像処理結果を、統括制御部１０１に出力する。統括制御部１０１は、画像処理部１０７から出力された画像処理結果を、スピーカ位置算出部１１３に伝送する。
【０１５５】
音響制御装置１０のスピーカ位置算出部１１３は、統括制御部１０１から、マイク及びマイクに近接する近接物の少なくとも何れかを含む撮像画像の画像処理結果が伝送されると、取得した画像処理結果を、マイク位置算出部１５１に伝送する。マイク位置算出部１５１は、伝送された画像処理結果を用いて、先に説明したような方法により、マイクの位置を算出する（ステップＳ１０７）。
【０１５６】
その一方で、統括制御部１０１は、位置算出用信号制御部１０９に処理の開始を要請し、位置算出用信号制御部１０９は、各スピーカから個別に信号音を出力させる（ステップＳ１０９）。ある位置に設けられたマイクは、各スピーカから個別に出力された信号音をそれぞれ集音して（ステップＳ１１１）、音響制御装置１０に出力する。
【０１５７】
音響制御装置１０の音響情報取得部１１１は、マイクから出力された集音結果を取得して、統括制御部１０１に出力する。統括制御部１０１は、音響情報取得部１１１から出力された音響情報を取得すると、取得した音響情報を、スピーカ位置算出部１１３に伝送するとともに、異なる３カ所のマイク位置で集音が行われたか否かを判断する（ステップＳ１１３）。異なる３カ所のマイク位置で集音が行われていない場合には、音響制御装置１０は、ステップＳ１０１に戻って処理を継続する。
【０１５８】
他方、異なる３カ所のマイク位置で集音がなされている場合には、統括制御部１０１は、スピーカ位置算出部１１３にスピーカ位置の算出を要請する。スピーカ位置算出部１１３のマイク位置離隔量算出部１５３は、マイク位置算出部１５１が算出したマイク位置と、統括制御部１０１から伝送された音響情報とに基づいて、マイク位置離隔量を算出する。その後、スピーカ位置特定部１５５は、算出されたマイク位置及びマイク位置離隔量に基づいて、スピーカの位置を特定する。これにより、スピーカ配置空間内に設置されたスピーカの位置が算出されたこととなる（ステップＳ１１５）。
【０１５９】
次に、図１９を参照しながら、サウンド調整方法の流れを簡単に説明する。
音響制御装置１０の統括制御部１０１は、まず、カメラに対して、撮像画像を出力するように要求する（ステップＳ１５１）。すると、カメラは、スピーカ配置空間内の視聴者を撮像した撮像画像を、音響制御装置１０に対して出力する（ステップＳ１５３）。
【０１６０】
音響制御装置１０の画像取得部１０５は、カメラから出力された撮像画像を取得すると、取得した撮像画像を、統括制御部１０１に出力する。統括制御部１０１は、画像取得部１０５から出力された撮像画像を、画像処理部１０７に伝送する。
【０１６１】
音響制御装置１０の画像処理部１０７は、統括制御部１０１から出力された撮像画像に対して、顔検出処理、物体検出処理、ジェスチャ認識処理等の画像処理を実施し（ステップＳ１５５）、得られた画像処理結果を、統括制御部１０１に出力する。統括制御部１０１は、画像処理部１０７から出力された画像処理結果を、音響制御部１１５に伝送する。
【０１６２】
音響制御部１１５の視聴位置算出部１７１は、統括制御部１０１から伝送された画像処理結果に基づいて、先に説明したような方法により、視聴者の位置を算出する（ステップＳ１５７）。
【０１６３】
ここで、音響制御装置１０の統括制御部１０１又は音響制御部１１５は、視聴者の位置に変化があるか否かを判断してもよい（ステップＳ１５９）。視聴者の位置に変化がない場合には、音響制御装置１０は、ステップＳ１５１に戻って処理を継続する。また、視聴者の位置に変化がある場合には、音響制御装置１０は、動的なサラウンドキャリブレーションを実施する必要があると判断し、後述するステップＳ１６１を実施する。
【０１６４】
音響制御部１１５のスピーカ離隔量算出部１７３は、記憶部１１９等に格納されているスピーカ位置情報と、視聴位置算出部１７１の算出した視聴者の位置とに基づいて、スピーカ離隔量を算出する（ステップＳ１６１）。
【０１６５】
音響制御部１１５のユーザシグナル判定部１７５は、画像処理結果に基づいて、視聴者のメタデータやジェスチャ等について、判定を実施する（ステップＳ１６３）。その後、音響制御部１１５の音響調整部１７７は、視聴者のメタデータ（例えば、年齢等）に基づいて、出力予定のサウンドの音質等を調整し（ステップＳ１６５）、その設定を、音響出力部１８１に伝送する。
【０１６６】
また、音響制御部１１５のサラウンド調整部１７９は、視聴位置算出部１７１、スピーカ離隔量算出部１７３及びユーザシグナル判定部１７５の処理結果に基づいて、音源の位置を定位する処理を実施する（ステップＳ１６７）。その後、サラウンド調整部１７９は、音源の定位に関する設定を、音響出力部１８１に出力する。
【０１６７】
音響制御部１１５の音響出力部１８１は、音響調整部１７７及びサラウンド調整部１７９から出力された設定に基づいて、各スピーカから音を出力する（ステップＳ１６９）。これにより、視聴者の位置に適合したサラウンドが、各スピーカから出力されることとなる。
【０１６８】
以上、図１８及び図１９を参照しながら、本実施形態に係る音響制御方法の流れについて、簡単に説明した。
【０１６９】
（ハードウェア構成について）
次に、図２０を参照しながら、本発明の実施形態に係る音響制御装置１０のハードウェア構成について、詳細に説明する。図２０は、本発明の実施形態に係る音響制御装置１０のハードウェア構成を説明するためのブロック図である。
【０１７０】
音響制御装置１０は、主に、ＣＰＵ９０１と、ＲＯＭ９０３と、ＲＡＭ９０５と、を備える。また、音響制御装置１０は、更に、ホストバス９０７と、ブリッジ９０９と、外部バス９１１と、インターフェース９１３と、入力装置９１５と、出力装置９１７と、ストレージ装置９１９と、ドライブ９２１と、接続ポート９２３と、通信装置９２５とを備える。
【０１７１】
ＣＰＵ９０１は、演算処理装置および制御装置として機能し、ＲＯＭ９０３、ＲＡＭ９０５、ストレージ装置９１９、またはリムーバブル記録媒体９２７に記録された各種プログラムに従って、音響制御装置１０内の動作全般またはその一部を制御する。ＲＯＭ９０３は、ＣＰＵ９０１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ９０５は、ＣＰＵ９０１が使用するプログラムや、プログラムの実行において適宜変化するパラメータ等を一次記憶する。これらはＣＰＵバス等の内部バスにより構成されるホストバス９０７により相互に接続されている。
【０１７２】
ホストバス９０７は、ブリッジ９０９を介して、ＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ  Ｃｏｍｐｏｎｅｎｔ  Ｉｎｔｅｒｃｏｎｎｅｃｔ／Ｉｎｔｅｒｆａｃｅ）バスなどの外部バス９１１に接続されている。
【０１７３】
入力装置９１５は、例えば、マウス、キーボード、タッチパネル、ボタン、スイッチおよびレバーなどユーザが操作する操作手段である。また、入力装置９１５は、例えば、赤外線やその他の電波を利用したリモートコントロール手段（いわゆる、リモコン）であってもよいし、音響制御装置１０の操作に対応した携帯電話やＰＤＡ等の外部接続機器９２９であってもよい。さらに、入力装置９１５は、例えば、上記の操作手段を用いてユーザにより入力された情報に基づいて入力信号を生成し、ＣＰＵ９０１に出力する入力制御回路などから構成されている。音響制御装置１０のユーザは、この入力装置９１５を操作することにより、音響制御装置１０に対して各種のデータを入力したり処理動作を指示したりすることができる。
【０１７４】
出力装置９１７は、取得した情報をユーザに対して視覚的または聴覚的に通知することが可能な装置で構成される。このような装置として、ＣＲＴディスプレイ装置、液晶ディスプレイ装置、プラズマディスプレイ装置、ＥＬディスプレイ装置およびランプなどの表示装置や、スピーカおよびヘッドホンなどの音声出力装置や、プリンタ装置、携帯電話、ファクシミリなどがある。出力装置９１７は、例えば、音響制御装置１０が行った各種処理により得られた結果を出力する。具体的には、表示装置は、音響制御装置１０が行った各種処理により得られた結果を、テキストまたはイメージで表示する。他方、音声出力装置は、再生された音声データや音響データ等からなるオーディオ信号をアナログ信号に変換して出力する。
【０１７５】
ストレージ装置９１９は、音響制御装置１０の記憶部の一例として構成されたデータ格納用の装置である。ストレージ装置９１９は、例えば、ＨＤＤ（Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）等の磁気記憶部デバイス、半導体記憶デバイス、光記憶デバイス、または光磁気記憶デバイス等により構成される。このストレージ装置９１９は、ＣＰＵ９０１が実行するプログラムや各種データ、および外部から取得した各種のデータを格納する。
【０１７６】
ドライブ９２１は、記録媒体用リーダライタであり、音響制御装置１０に内蔵、あるいは外付けされる。ドライブ９２１は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記録媒体９２７に記録されている情報を読み出して、ＲＡＭ９０５に出力する。また、ドライブ９２１は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記録媒体９２７に記録を書き込むことも可能である。リムーバブル記録媒体９２７は、例えば、ＤＶＤメディア、ＨＤ−ＤＶＤメディア、Ｂｌｕ−ｒａｙメディア等である。また、リムーバブル記録媒体９２７は、コンパクトフラッシュ（登録商標）（ＣｏｍｐａｃｔＦｌａｓｈ：ＣＦ）、フラッシュメモリ、または、ＳＤメモリカード（Ｓｅｃｕｒｅ  Ｄｉｇｉｔａｌ  ｍｅｍｏｒｙ  ｃａｒｄ）等であってもよい。また、リムーバブル記録媒体９２７は、例えば、非接触型ＩＣチップを搭載したＩＣカード（Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ  ｃａｒｄ）または電子機器等であってもよい。
【０１７７】
接続ポート９２３は、機器を音響制御装置１０に直接接続するためのポートである。接続ポート９２３の一例として、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ）ポート、ＩＥＥＥ１３９４ポート、ＳＣＳＩ（Ｓｍａｌｌ  Ｃｏｍｐｕｔｅｒ  Ｓｙｓｔｅｍ  Ｉｎｔｅｒｆａｃｅ）ポート等がある。接続ポート９２３の別の例として、ＲＳ−２３２Ｃポート、光オーディオ端子、ＨＤＭＩ（Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ  Ｍｕｌｔｉｍｅｄｉａ  Ｉｎｔｅｒｆａｃｅ）ポート等がある。この接続ポート９２３に外部接続機器９２９を接続することで、音響制御装置１０は、外部接続機器９２９から直接各種のデータを取得したり、外部接続機器９２９に各種のデータを提供したりする。
【０１７８】
通信装置９２５は、例えば、通信網９３１に接続するための通信デバイス等で構成された通信インターフェースである。通信装置９２５は、例えば、有線または無線ＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、またはＷＵＳＢ（Ｗｉｒｅｌｅｓｓ  ＵＳＢ）用の通信カード等である。また、通信装置９２５は、光通信用のルータ、ＡＤＳＬ（Ａｓｙｍｍｅｔｒｉｃ  Ｄｉｇｉｔａｌ  Ｓｕｂｓｃｒｉｂｅｒ  Ｌｉｎｅ）用のルータ、または、各種通信用のモデム等であってもよい。この通信装置９２５は、例えば、インターネットや他の通信機器との間で、例えばＴＣＰ／ＩＰ等の所定のプロトコルに則して信号等を送受信することができる。また、通信装置９２５に接続される通信網９３１は、有線または無線によって接続されたネットワーク等により構成され、例えば、インターネット、家庭内ＬＡＮ、赤外線通信、ラジオ波通信または衛星通信等であってもよい。
【０１７９】
以上、本発明の実施形態に係る音響制御装置１０の機能を実現可能なハードウェア構成の一例を示した。上記の各構成要素は、汎用的な部材を用いて構成されていてもよいし、各構成要素の機能に特化したハードウェアにより構成されていてもよい。従って、本実施形態を実施する時々の技術レベルに応じて、適宜、利用するハードウェア構成を変更することが可能である。
【０１８０】
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
【符号の説明】
【０１８１】
１    サラウンド調整システム
３    画像表示装置
５    スピーカ
７    マイク
９    コンテンツ記録・再生装置
１０    音響制御装置
１０１    統括制御部
１０３    ユーザ操作情報取得部
１０５    画像取得部
１０７    画像処理部
１０９    位置算出用信号制御部
１１１    音響情報取得部
１１３    スピーカ位置算出部
１１５    音響制御部
１１７    表示制御部
１１９    記憶部
１３１    顔検出部
１３３    年齢・性別判定部
１３５    ジェスチャ認識部
１３７    物体検出部
１３９    顔識別部
１５１    マイク位置算出部
１５３    マイク位置離隔量算出部
１５５    スピーカ位置特定部
１７１    視聴位置算出部
１７３    スピーカ離隔量算出部
１７５    ユーザシグナル判定部
１７７    音響調整部
１７９    サラウンド調整部
１８１    音響出力部
【図１】
2012104871.tif 000003
【図２】
2012104871.tif 000004
【図３】
2012104871.tif 000005
【図４】
2012104871.tif 000006
【図５】
2012104871.tif 000007
【図６】
2012104871.tif 000008
【図７】
2012104871.tif 000009
【図８】
2012104871.tif 000010
【図９】
2012104871.tif 000011
【図１０】
2012104871.tif 000012
【図１１Ａ】
2012104871.tif 000013
【図１１Ｂ】
2012104871.tif 000014
【図１２】
2012104871.tif 000015
【図１３】
2012104871.tif 000016
【図１４】
2012104871.tif 000017
【図１５】
2012104871.tif 000018
【図１６】
2012104871.tif 000019
【図１７】
2012104871.tif 000020
【図１８】
2012104871.tif 000021
【図１９】
2012104871.tif 000022
【図２０】
2012104871.tif 000023