(57)【要約】  入力オーディオ信号からリア音を生成するリア音信号生成部と、リア音信号生成部により生成されたリア音をリア音用スピーカに出力する出力部とを有するサウンドバーである。図２
2020144937.tif 000002
【特許請求の範囲】
【請求項１】
入力オーディオ信号からリア音を生成するリア音信号生成部と、
前記リア音信号生成部により生成されたリア音をリア音用スピーカに出力する出力部と
を有するサウンドバー。
【請求項２】
前記リア音信号生成部は、前記リア音の再生タイミングを遅延させる時間を調整する遅延時間調整部を有する
請求項１に記載のサウンドバー。
【請求項３】
前記リア音信号生成部は、頭部伝達関数に基づく演算を施したリア音を生成する
請求項１に記載のサウンドバー。
【請求項４】
前記頭部伝達関数は、視聴者の撮像画像に基づいて決定される
請求項３に記載のサウンドバー。
【請求項５】
前記リア音信号生成部は、波面合成処理がなされたリア音を生成する
請求項１に記載のサウンドバー。
【請求項６】
前記入力オーディオ信号に基づいてフロント音を生成するフロント音信号生成部を有する
請求項１に記載のサウンドバー。
【請求項７】
前記フロント音信号生成部は、前記フロント音の再生タイミングを遅延させる時間を調整する遅延時間調整部を有する
請求項６に記載のサウンドバー。
【請求項８】
前記フロント音信号生成部は、頭部伝達関数に基づく演算を施したフロント音を生成する
請求項６に記載のサウンドバー。
【請求項９】
前記フロント音信号生成部は、テレビジョン装置が有するディスプレイにより反射させるフロント音を生成する
請求項６に記載のサウンドバー。
【請求項１０】
前記フロント音信号生成部は、前記フロント音の位相と逆相であるキャンセル信号を生成するキャンセル信号生成部を有する
請求項９に記載のサウンドバー。
【請求項１１】
前記フロント音信号生成部は、前記ディスプレイの非振動領域で反射させるフロント音を生成する
請求項９に記載のサウンドバー。
【請求項１２】
前記テレビジョン装置から送信される情報に基づいて前記非振動領域を判別する
請求項１１に記載のサウンドバー。
【請求項１３】
視聴者及び／又は前記テレビジョン装置を撮影する撮像装置を有する
請求項９に記載のサウンドバー。
【請求項１４】
前記リア音信号生成部は、前記撮像装置により撮影された視聴者及び／又は前記テレビジョン装置に基づいて前記リア音を生成する
請求項１３に記載のサウンドバー。
【請求項１５】
リア音信号生成部が、入力オーディオ信号からリア音を生成し、
出力部が、前記リア音信号生成部により生成されたリア音をリア音用スピーカに出力する
サウンドバーにおけるオーディオ信号処理方法。
【請求項１６】
リア音信号生成部が、入力オーディオ信号からリア音を生成し、
出力部が、前記リア音信号生成部により生成されたリア音をリア音用スピーカに出力する
サウンドバーにおけるオーディオ信号処理方法をコンピュータに実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、サウンドバー、オーディオ信号処理方法及びプログラムに関する。
【背景技術】
【０００２】
従来から、テレビジョン装置の下側に置かれ、テレビジョン放送の音声等を再生するサウンドバーが知られている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１７−１６９０９８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、一般的なサウンドバーはテレビジョン装置側、即ち、視聴者の面前に置かれるため、テレビジョン装置やサウンドバーに接続される配線が視聴者から見え、与える印象が良くない等の問題があった。【０００５】
本開示は、視聴者の後方に配置され、リア音を再生するサウンドバー、オーディオ信号処理方法及びプログラムを提供することを目的の一つとする。
【課題を解決するための手段】
【０００６】
本開示は、例えば、
入力オーディオ信号からリア音を生成するリア音信号生成部と、
リア音信号生成部により生成されたリア音をリア音用スピーカに出力する出力部と
を有するサウンドバーである。【０００７】
また、本開示は、例えば、
リア音信号生成部が、入力オーディオ信号からリア音を生成し、
出力部が、リア音信号生成部により生成されたリア音をリア音用スピーカに出力する
サウンドバーにおけるオーディオ信号処理方法である。【０００８】
また、本開示は、例えば、
リア音信号生成部が、入力オーディオ信号からリア音を生成し、
出力部が、リア音信号生成部により生成されたリア音をリア音用スピーカに出力する
サウンドバーにおけるオーディオ信号処理方法をコンピュータに実行させるプログラムである。
【図面の簡単な説明】
【０００９】
【図１】図１は、実施の形態において考慮すべき問題を説明するための図である。
【図２】図２は、実施の形態にかかる再生システムの構成例を示す図である。
【図３】図３は、実施の形態にかかるテレビジョン装置の構成例を説明する際に参照される図である。
【図４】図４は、実施の形態にかかるサウンドバーの配設面の構成例を説明するための図である。
【図５】図５は、実施の形態にかかるサウンドバーの内部構成例を説明するための図である。
【図６】図６は、実施の形態における第１の処理例を説明する際に参照される図である。
【図７】図７は、実施の形態における第１の処理例の変形例を説明する際に参照される図である。
【図８】図８は、実施の形態における第２の処理例を説明する際に参照される図である。
【図９】図９は、実施の形態における第３の処理例を説明する際に参照される図である。
【図１０】図１０は、実施の形態における第４の処理例を説明する際に参照される図である。
【図１１】図１１は、実施の形態における第５の処理例を説明する際に参照される図である。
【図１２】図１２は、実施の形態における第６の処理例を説明する際に参照される図である。
【発明を実施するための形態】
【００１０】
以下、本開示の実施の形態等について図面を参照しながら説明する。なお、説明は以下の順序で行う。
＜考慮すべき問題＞
＜実施の形態＞
＜変形例＞
以下に説明する実施の形態等は本開示の好適な具体例であり、本開示の内容がこれらの実施の形態等に限定されるものではない。
【００１１】
＜考慮すべき問題＞
始めに、本実施の形態において考慮すべき問題について説明する。図１は、サウンドバーを使用した一般的な再生システムを示す図である。図１に示すように、視聴者１の前面には、テレビジョン装置２及びサウンドバー３が設置されている。視聴者１は、テレビジョン装置２により再生される映像及びサウンドバー３により再生される音声を視聴する。サウンドバー３により再生される音声は、特定の方向への放射処理（ビーム処理）や頭部伝達関数（ＨＲＴＦ）に基づく処理等により音像定位がなされた後、実線又は点線の矢印により模式的に示されるようにして視聴者１に届き聴取される。
【００１２】
図１に示す一般的な再生システムでは、テレビジョン装置２の周囲が、サウンドバー３等の装置や配線により雑多になってしまい、テレビジョン装置２のデザインとその周囲の配置態様とがマッチしない虞がある。また、視聴者１とテレビジョン装置２との位置関係がはっきりせずに音像がぼやけてしまう虞がある。また、視聴者１の後方（リア）に実際のスピーカが配置されないため、リアの正確な音場表現が難しくなる虞がある。また、近年、カメラをテレビジョン装置２に設け、視聴者１を撮影可能なテレビジョン装置２も提案されている。テレビジョン装置２にカメラがついていることが視聴者１にもわかるので、視聴者１は、自身が撮影されているかもしれないという、心理的な抵抗感を抱く虞がある。以上の点を考慮しつつ、本開示の実施の形態について詳細に説明する。
【００１３】
＜実施の形態＞
［再生システムの構成例］
図２は、実施の形態にかかる再生システム（再生システム５）の構成例を示す図である。視聴者１Ａの前面には、テレビジョン装置（以下、テレビジョン装置をテレビと略称する場合がある。）１０が置かれており、視聴者１Ａは、テレビジョン装置１０の映像を視る。また、視聴者１Ａの後方、より具体的には、後方の鉛直方向にサウンドバー２０が設置されている。サウンドバー２０は、壁面や天井に対してビスや係止部材等の適宜な方法により支持されている。視聴者１Ａは、サウンドバー２０により再生される音声（実線及び点線の矢印により模式的に示されている）を聴取する。
【００１４】
［テレビジョン装置の構成例］
次に、図３を参照して、テレビジョン装置１０の構成例について説明する。テレビジョン装置１０は、例えば、テレビ音声信号生成部１０１、テレビ音声出力部１０２、ディスプレイ振動領域情報生成部１０３及び第１通信部１０４を有している。なお、図示は省略しているが、テレビジョン装置１０は、チューナー等の公知の構成を有している。
【００１５】
テレビ音声信号生成部１０１は、テレビジョン装置１０から出力される音声を生成する。テレビ音声信号生成部１０１は、センター音信号生成部１０１Ａ及び遅延時間調整部１０１Ｂを有している。センター音信号生成部１０１Ａは、テレビジョン装置１０から出力されるセンター音の信号を生成する。遅延時間調整部１０１Ｂは、テレビジョン装置１０から出力される音声の遅延時間を調整する。
【００１６】
テレビ音声出力部１０２は、テレビジョン装置１０から音声を出力するための構成を総称したものである。本実施の形態にかかるテレビ音声出力部１０２は、テレビスピーカ１０２Ａ及び振動ディスプレイ部１０２Ｂを有している。テレビスピーカ１０２Ａは、テレビジョン装置１０に設けられるスピーカである。振動ディスプレイ部１０２Ｂは、映像が再生されるテレビジョン装置１０のディスプレイ（ＬＣＤ(Liquid Crystal Display)やＯＬＥＤ（Organic Light Emitting Diode）等のパネル部分）及び当該ディスプレイを振動させる圧電素子等の加振部を含む構成である。本実施の形態では、テレビジョン装置１０のディスプレイを加振部により振動させることにより音声が再生されるように構成されている。
【００１７】
ディスプレイ振動領域情報生成部１０３は、ディスプレイ振動領域情報を生成する。ディスプレイ振動領域情報は、例えば、実際に振動しているディスプレイの領域である振動領域を示す情報である。振動領域は、例えば、ディスプレイの裏面に設置された加振部の周辺領域である。振動領域は、予め設定されている領域でも良いし、オーディオ信号の再生に伴って変更され得る、動作中の加振部周辺の領域でも良い。周辺領域の大きさは、ディスプレイの大きさ等に応じて適宜、設定することができる。ディスプレイ振動領域情報生成部１０３によって生成されたディスプレイ振動領域情報は、第１通信部１０４を介して、サウンドバー２０に対して送信される。なお、ディスプレイ振動領域情報は、ディスプレイの振動していない領域を示す非振動領域の情報であっても良い。
【００１８】
第１通信部１０４は、サウンドバー２０と有線及び無線の少なくとも一方による通信を行う構成であり、通信規格に応じた変復調回路等を有している。無線通信としては、ＬＡＮ（Local Area Network）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、Ｗｉ−Ｆｉ（登録商標）、またはＷＵＳＢ（Wireless USB）等が挙げられる。なお、サウンドバー２０は、テレビジョン装置１０の第１通信部１０４と通信を行う構成である第２通信部２０４を有している。
【００１９】
［サウンドバーについて］
（サウンドバーの外観例）
次に、サウンドバー２０について説明する。始めに、サウンドバー２０の外観例について説明する。サウンドバー２０は、例えば、箱状且つ棒状の形状を有しており、その一面が、スピーカ及びカメラが設けられる配設面とされている。勿論、サウンドバー２０の形状は、棒状のものに限定されるものではなく、薄板状であって壁にかけられる形状でも良いし、球形状等であっても良い。
【００２０】
図４は、サウンドバー２０のスピーカ等が配設される配設面（音声が放射される面）２０Ａの構成例を示す図である。配設面２０Ａの上側中央付近には、撮像装置であるカメラ２０１が設けられている。カメラ２０１は、視聴者１Ａ及び／又はテレビジョン装置１０を撮影する。
【００２１】
カメラ２０１の左右それぞれには、リア音を再生するリア音用スピーカが設けられている。例えば、カメラ２０１の左右それぞれに、２個ずつのリア音用スピーカ（リア音用スピーカ２０２Ａ、２０２Ｂ及びリア音用スピーカ２０２Ｃ、２０２Ｄ）が設けられている。なお、個々のリア音用スピーカを区別する必要がない場合は、リア音用スピーカ２０２と適宜、称する。また、配設面２０Ａの下側には、フロント音を再生するフロント音用スピーカが設けられている。例えば、配設面２０Ａの下側に、３個のフロント音用スピーカ（フロント音用スピーカ２０３Ａ、２０３Ｂ、２０３Ｃ）が等間隔で設けられている。なお、個々のフロント音用スピーカを区別する必要がない場合は、フロント音用スピーカ２０３と適宜、称する。
【００２２】
（サウンドバーの内部構成例）
次に、図５を参照して、サウンドバー２０の内部構成例について説明する。上述したように、サウンドバー２０は、カメラ２０１、リア音用スピーカ２０２、フロント音用スピーカ２０３及び第２通信部２０４を有している。また、サウンドバー２０は、入力オーディオ信号からリア音を生成するリア音信号生成部２１０、及び、入力オーディオ信号に基づいてフロント音を生成するフロント音信号生成部２２０を有している。入力オーディオ信号は、例えば、テレビジョン放送における音声である。入力オーディオ信号がマルチチャンネルの信号である場合には、リアのチャンネルに対応するオーディオ信号がリア音信号生成部２１０に供給され、フロントのチャンネルに対応するオーディオ信号がフロント音信号生成部２２０に供給される。なお、リア音又はフロント音は、信号処理により生成されても良い。即ち、入力オーディオ信号は、マルチチャンネルの信号に限定されるものではない。
【００２３】
リア音信号生成部２１０は、例えば、遅延時間調整部２１０Ａ、キャンセル信号生成部２１０Ｂ、波面合成処理部２１０Ｃ及びリア音信号出力部２１０Ｄを有している。遅延時間調整部２１０Ａは、リア音の再生タイミングを遅延させる時間を調整する処理を行う。遅延時間調整部２１０Ａによる処理により、リア音の再生タイミングが適宜、遅延される。キャンセル信号生成部２１０Ｂは、サウンドバー２０から直接（反射させないで）視聴者１Ａに届くフロント音をキャンセルするためのキャンセル信号を生成する。波面合成処理部２１０Ｃは、公知の波面合成処理を行う。リア音信号出力部２１０Ｄは、リア音信号生成部２１０により生成されたリア音をリア音用スピーカ２０２に出力するインタフェースである。
【００２４】
なお、図示はしていないが、リア音信号生成部２１０は、頭部伝達関数（ＨＲＴＦ）を用いた演算を入力オーディオ信号に行うことにより、例えば視聴者１Ａの側面から聞こえるような音（サラウンド成分）を生成することも可能とされている。頭部伝達関数は、例えば、人間の平均的な頭部の形状に基づいて予め設定されている。また、複数の頭部の形状に対応付けられた頭部伝達関数をメモリ等に記憶しておき、カメラ２０１により撮影された視聴者１Ａの頭部の形状に近い頭部伝達関数がメモリから読み出されるようにしても良い。そして、読み出された頭部伝達関数がリア音信号生成部２１０による演算に用いられるようにしても良い。
【００２５】
フロント音信号生成部２２０は、遅延時間調整部２２０Ａ、ビーム処理部２２０Ｂ及びフロント音信号出力部２２０Ｃを有している。遅延時間調整部２２０Ａは、フロント音の再生タイミングを遅延させる時間を調整する処理を行う。遅延時間調整部２２０Ａによる処理により、フロント音の再生タイミングが適宜、遅延される。ビーム処理部２２０Ｂは、フロント音用スピーカ２０３から再生されるフロント音が特定の方向への指向性を持つようにするための処理（ビーム処理）を行う。フロント音信号出力部２２０Ｃは、フロント音信号生成部２２０により生成されたフロント音をフロント音用スピーカ２０３に出力するインタフェースである。
【００２６】
なお、第２通信部２０４により受信されたテレビジョン装置１０からのディスプレイ振動領域情報は、フロント音信号生成部２２０に供給される。また、カメラ２０１により取得される撮像画像は、適宜な画像処理がなされた後に、リア音信号生成部２１０及びフロント音信号生成部２２０のそれぞれに供給される。例えば、リア音信号生成部２１０は、カメラ２０１により撮影された視聴者１Ａ及び／又はテレビジョン装置１０に基づいてリア音を生成する。
【００２７】
以上、実施の形態にかかるサウンドバー２０の構成例について説明した。なお、サウンドバー２０の構成は、後述する各処理の内容に応じて、適宜、変更することができる。
【００２８】
［再生システムにおける処理例］
（第１の処理例）
次に、再生システム５で行われる複数の処理例について説明する。始めに、図６を参照して、第１の処理例について説明する。図６に示すように、サウンドバー２０のリア音用スピーカ２０２から、リア音ＲＡＳが視聴者１Ａに向かって再生され、リア音ＲＡＳが視聴者１Ａに直接届く。リア音ＲＡＳは、例えば、カメラ２０１により撮影された撮影画像に基づいて検出された視聴者１Ａに向けて再生される。また、サウンドバー２０のフロント音用スピーカ２０３からは、フロント音ＦＡＳが再生される。本例では、フロント音ＦＡＳが、テレビジョン装置１０のディスプレイに反射されることにより届く。例えば、カメラ２０１の撮影画像に基づいて、テレビジョン装置１０のディスプレイの空間的位置が判別され、判別された空間的位置にフロント音ＦＡＳが指向性を有するように、ビーム処理部２２０Ｂによるビーム処理が行われる。
【００２９】
ところで、リア音ＲＡＳが先に視聴者１Ａに届くため、フロント音ＦＡＳ及びリア音ＲＡＳの同期をとる必要がある。そこで、本例では、リア音ＲＡＳの再生タイミングを所定時間遅延させる遅延処理が遅延時間調整部２１０Ａにより行われる。遅延時間調整部２１０Ａは、例えば、カメラ２０１により取得される撮影画像に基づいて、遅延時間を決定する。例えば、遅延時間調整部２１０Ａは、撮影画像に基づいて、サウンドバー２０から視聴者１Ａまでの距離、及び、サウンドバー２０からテレビジョン装置１０までの距離とテレビジョン装置１０から視聴者１Ａまでの距離とを合計した距離をそれぞれ求め、求めた距離の差分に応じた遅延時間を設定する。なお、視聴者１Ａが動いた場合には、遅延時間調整部２１０Ａは、再度、遅延時間を計算して設定するようにしても良い。
【００３０】
本例によれば、リア音が視聴者１Ａの後方から直接届くため、一般的に視聴者１Ａが認識しづらいとされるリア音の位置や方向を明確に認識することができる。一方で、フロント音はテレビジョン装置１０により反射されるため、定位感が失われる虞がある。しかしながら、テレビジョン装置１０では映像が再生されているため、視覚に引っ張られることにより音像の位置が多少ずれたとしても視聴者１Ａは気にならない。また、本例によれば、カメラ２０１が視聴者１Ａに見えない領域にあるため、視聴者１Ａが、自身が撮影されているという心理的な抵抗感を抱いてしまうことを防止することができる。また、サウンドバー２０がリアに配置されているので、テレビジョン装置１０の周囲の配線が雑多になってしまうことを防止することができる。
【００３１】
なお、テレビジョン装置１０のディスプレイに反射させることによりフロント音ＦＡＳを視聴者１Ａに再生する際に、図７に示すように、テレビジョン装置１０のディスプレイにより反射されて視聴者１Ａに届くフロント音ＦＡＳ１の他に、リアから視聴者１Ａにフロント音ＦＡＳ２（直接音）が直接、届く。このため、フロント音ＦＡＳ１とフロント音ＦＡＳ２とが干渉し、音質が低下する虞がある。そこで、フロント音ＦＡＳ２をキャンセルするキャンセル音ＣＡＳがキャンセル信号生成部２１０Ｂにより生成され、生成されたキャンセル音ＣＡＳが再生されるようにしても良い。キャンセル音ＣＡＳは、フロント音ＦＡＳ２の位相と逆相の位相の信号である。キャンセル音ＣＡＳを再生することにより、フロント音ＦＡＳ２に起因して音質が低下してしまうことを防止することができる。
【００３２】
（第２の処理例）
次に、図８を参照して、第２の処理例について説明する。フロント音ＦＡＳ（例えば、センター音）は、テレビ音声信号生成部１０１によって生成され、テレビ音声出力部１０２のテレビスピーカ１０２Ａから再生される。また、リア音ＲＡＳは、サウンドバー２０のリア音信号生成部２１０により生成され、リア音用スピーカ２０２から再生される。なお、サラウンド成分がサウンドバー２０により生成され、サラウンド成分が視聴者１Ａに直接若しくは反射により再生されるようにしても良い。また、カメラ２０１により取得される撮影画像に基づいて、例えばテレビジョン装置１０と視聴者１Ａとの間の距離が、サウンドバー２０と視聴者１Ａとの間の距離より小さいことが判別された場合には、遅延時間調整部２１０Ａがフロント音ＦＡＳの再生タイミングを遅延させる処理を行っても良い。
【００３３】
（第３の処理例）
次に、図９を参照して、第３の処理例について説明する。図９に示すように、リア音ＲＡＳがリア音信号生成部２１０により生成され、リア音用スピーカ２０２から再生される。また、フロント音ＦＡＳ３がテレビジョン装置１０から再生される。本例では、テレビジョン装置１０の振動ディスプレイ部１０２Ｂが動作、振動することにより、フロント音ＦＡＳ３が再生される。フロント音ＦＡＳ３は、バーチャルサラウンドの一要素（例えば、センター音）である。また、サウンドバー２０のフロント音信号生成部２２０によりフロント音ＦＡＳ４が生成される。フロント音ＦＡＳ４は、例えば、フロント音ＦＡＳ３とは異なるバーチャルサラウンドの要素（例えば、Ｌ(Left)，Ｒ（Right））である。生成されたフロント音ＦＡＳ４がフロント音用スピーカ２０３から再生される。本例では、フロント音用スピーカ２０３から再生されたフロント音ＦＡＳ４がテレビジョン装置１０のディスプレイ（振動ディスプレイ部１０２Ｂ）により反射されて視聴者１Ａに届くように構成されている。
【００３４】
ところで、振動ディスプレイ部１０２Ｂは振動しているため、振動領域にフロント音ＦＡＳ４を反射させると、入射角と出力角とが異なることにより意図しない位置や方向へフロント音ＦＡＳ４が反射されてしまう虞がある。そこで、本例では、第２通信部２０４により受信されたディスプレイ振動領域情報をフロント音信号生成部２２０に供給する。そして、ディスプレイ振動領域情報に基づいてビーム処理部２２０Ｂが、振動領域を避けた領域、即ち、振動していない若しくは振動が一定以下である非振動領域を判別し、当該非振動領域でフロント音ＦＡＳ４が反射されるようにフロント音ＦＡＳ４の指向性を調整するビーム処理を行う。これにより、意図しない位置や方向にフロント音ＦＡＳ４が反射されてしまうことを防止することができる。
【００３５】
なお、本例において、フロント音ＦＡＳ３及びフロント音ＦＡＳ４の同期をとる処理が行われても良い。図９に示す例では、フロント音ＦＡＳ４の方が音の伝搬距離が長いため、フロント音ＦＡＳ３が遅延されて再生される。例えば、サウンドバー２０が、カメラ２０１により取得される撮影画像からフロント音ＦＡＳ３の伝搬距離とフロント音ＦＡＳ４の伝搬距離との差分を求め、当該差分に基づいて遅延時間を算出する。そして、サウンドバー２０は、第２通信部２０４を介して、算出した遅延時間をテレビジョン装置１０に送信する。テレビジョン装置１０の遅延時間調整部１０１Ｂは、サウンドバー２０から送信された遅延時間だけフロント音ＦＡＳ４の再生タイミングを遅延させる。なお、フロント音ＦＡＳ３の再生タイミングを遅延させる必要がある場合には、フロント音信号生成部２２０の遅延時間調整部２２０Ａがフロント音ＦＡＳ３の再生タイミングを適宜、遅延させる。
【００３６】
（第４の処理例）
次に、図１０を参照して、第４の処理例について説明する。第４の処理例では、サウンドバー２０がスクリーン等に映像を投影するプロジェクターの機能を有している。かかるプロジェクターの機能としては、公知の機能及び当該機能を実現するための構成（映像処理回路等）を適用することができる。
【００３７】
図１０に示すように、例えば、天井の所定位置（例えば、視聴者１Ａの視聴位置に対して後ろ側の位置）にプロジェクター機能が付いているサウンドバー２０が設置されている。また、視聴者１Ａの前方には、スクリーン３０が設置されている。スクリーン３０は、壁面であっても良い。サウンドバー２０により生成された映像信号ＶＳがスクリーン３０に投影され、視聴者１Ａに対して映像が再生される。また、サウンドバー２０のリア音信号生成部２１０によりリア音ＲＡＳが生成される。そして、リア音ＲＡＳがリア音用スピーカ２０２から視聴者１Ａに対して再生される。また、サウンドバー２０のフロント音信号生成部２２０により生成されたフロント音ＦＡＳがフロント音用スピーカ２０３から再生される。本例では、フロント音ＦＡＳがスクリーン３０により反射されて視聴者１Ａに届くように構成されている。本例によれば、画像及び音声の再生に関する構成を集約することができるので、省スペース化が可能となりスクリーン３０の周囲が煩雑となることを防止することができる。
【００３８】
（第５の処理例）
次に、図１１を参照して、第５の処理例について説明する。視聴者１Ａの前方に、ディスプレイ４０が配置されている。ディスプレイ４０には、美術映像、スポーツ映像等の映像が再生される。本例におけるディスプレイ４０としては、複数のＬＥＤ(Light Emitting Diode)モジュールにより構成される高精細のディスプレイであり、比較的、大型のディスプレイ（街頭や競技場等に設定されるようなディスプレイ）が想定される。このようなディスプレイ４０の前方にスピーカを配置することは、デザイン性の観点から好ましくない。そこで、視聴者１Ａの背面から音声ＡＳ５を再生する。音声ＡＳ５は、例えば、リア音信号生成部２１０により生成される。音声ＡＳ５を生成する際に、リア音信号生成部２１０の波面合成処理部２１０Ｃが公知の波面合成処理を行うことにより様々な演出を可能とすることができる。例えば、ディスプレイ４０に再生された映像の説明のために、英語とフランス語と日本語がそれぞれ聞こえるエリアを設定することが可能となる。
【００３９】
（第６の処理例）
次に、図１２を参照して、第６の処理例について説明する。図１２に示すように、本例では、視聴者１Ａの前方にテレビジョン装置１０が配置されている。また、視聴者１Ａの後方上側にはサウンドバー２０が配置されている。また、視聴者１Ａと同じ空間にエージェント装置５０が配置されている。エージェント装置５０は、スマートスピーカ等とも称され、ユーザ（本例では、視聴者１Ａ）との対話を通じてユーザに各種の情報を主に音声により提供する装置である。エージェント装置５０は、公知の構成、例えば、音声処理回路、音声処理回路による処理がなされた音声データを再生するスピーカ、ネットワーク上のサーバに接続したりサウンドバー２０と通信を行う通信部等を有している。
【００４０】
テレビジョン装置１０からテレビジョン放送の音声（音声ＴＡ１）が再生される。音声ＴＡ１は、テレビスピーカ１０２Ａから再生されても良いし、振動ディスプレイ部１０２Ｂが振動することにより再生されても良い。ここで、テレビジョン装置１０から再生される音声ＴＡ１とエージェント装置５０から再生される音声とが混在して視聴者１Ａが聞き取りづらくなる虞がある。また、テレビジョン装置１０の映像内容によっては、視聴者１Ａは、自身が聴取した音声がテレビジョン放送の音声ＴＡ１であるのか、若しくは、エージェント装置５０が再生した音声であるのかがわからない虞もある。
【００４１】
かかる点に鑑みて、本例では、エージェント装置５０が再生する音声（音声ＡＳ６）を例えば無線通信によりサウンドバー２０に送信する。そして、音声ＡＳ６に対応する音声データが、第２通信部２０４により受信され、リア音用スピーカ２０２及びフロント音用スピーカ２０３の少なくとも一方を使用して再生される。即ち、本例では、本来はエージェント装置５０により再生される音声ＡＳ６が、エージェント装置５０ではなくサウンドバー２０により再生される。なお、サウンドバー２０のリア音信号生成部２１０が頭部伝達関数を使用した演算を音声データに施すことにより音声ＡＳ６が視聴者１Ａの耳元で再生されるようにしても良い。また、フロント音信号生成部２２０がビーム処理を音声データに施すことにより音声ＡＳ６が視聴者１Ａの耳元で再生されるようにしても良い。これにより、視聴者１Ａは、テレビジョン放送の音声ＴＡ１と音声ＡＳ６とを聞き分けることが可能となる。また、例えば、複数の人物（例えば、テレビジョン装置１０の視聴者）が居た場合でも、本人（対象者）に対してのみメールの着信音等を再生してメール着信を知らせることもできる。
【００４２】
なお、本例におけるテレビジョン装置１０は、エージェント装置５０と一体化されたエージェント機能付きテレビであっても良い。エージェント機能付きテレビから音声ＡＳ６に対応する音声データをサウンドバー２０に送信し、エージェント機能付きテレビからテレビジョン音声を、サウンドバー２０からはエージェント機能に基づく音声ＡＳ６を再生する。これにより、テレビジョン装置１０がエージェント機能を有する場合であっても、テレビジョン音声の再生を中断させずに、サウンドバー２０からエージェント機能に基づく音声を再生することができる。
【００４３】
＜変形例＞
以上、本開示の実施の形態について具体的に説明したが、本開示の内容は上述した実施の形態に限定されるものではなく、本開示の技術的思想に基づく各種の変形が可能である。
【００４４】
上述した実施の形態において、サウンドバーに入力されるオーディオ信号は、オブジェクト毎の音が規定され、より音の移動が明確となるようにされた、所謂、オブジェクトオーディオであっても良い。例えば、サウンドバーのカメラで視聴者の位置を追尾し、視聴者の位置に応じた周辺位置に所定のオブジェクトの音を再生することにより、視聴者の動きに追従した音の再生を行うことが可能となる。
【００４５】
サウンドバーは、プロジェクターに限らず、エアコンや照明と一体化されたものであっても良い。また、ティスプレイは、テレビジョン装置のディスプレイやスクリーンに限定されることはなく、眼鏡型のディスプレイや、ＨＵＤ(Head Up Display)であっても良い。
【００４６】
上述した実施の形態において、フロント音をテレビジョン装置のディスプレイに反射させずにサウンドバーから直接、視聴者に届くようにしても良い。例えば、フロント音信号生成部２２０が、視聴者の頭部の形状に応じた所定の頭部伝達関数を用いた演算を音声データに施すことにより視聴者の側面から前方に回り込む音声を生成する。当該音声が再生されることにより、サウンドバーから視聴者に対してフロント音が直接、届くようにすることができる。
【００４７】
上述した実施の形態における各処理例は組み合わされて行われても良い。サウンドバーやテレビジョン装置の構成は、各装置が行う処理の内容に応じて、適宜、変更することができる。例えば、リア音信号生成部が、ビーム処理部を有していても良い。また、視聴者は、必ずしも座っている必要はなく、立って移動する場合にも本開示を適用することができる。
【００４８】
本開示は、装置、方法、プログラム、システム等により実現することもできる。例えば、上述した実施の形態で説明した機能を行うプログラムをダウンロード可能とし、実施の形態で説明した機能を有しない装置が当該プログラムをダウンロードしてインストールすることにより、当該装置において実施の形態で説明した制御を行うことが可能となる。本開示は、このようなプログラムを配布するサーバにより実現することも可能である。また、各実施の形態、変形例で説明した事項は、適宜組み合わせることが可能である。また、本明細書で例示された効果により本開示の内容が限定して解釈されるものではない。
【００４９】
本開示は、以下の構成も採ることができる。
（１）
入力オーディオ信号からリア音を生成するリア音信号生成部と、
前記リア音信号生成部により生成されたリア音をリア音用スピーカに出力する出力部と
を有するサウンドバー。
（２）
前記リア音信号生成部は、前記リア音の再生タイミングを遅延させる時間を調整する遅延時間調整部を有する
（１）に記載のサウンドバー。
（３）
前記リア音信号生成部は、頭部伝達関数に基づく演算を施したリア音を生成する
（１）又は（２）に記載のサウンドバー。
（４）
前記頭部伝達関数は、視聴者の撮像画像に基づいて決定される
（３）に記載のサウンドバー。
（５）
前記リア音信号生成部は、波面合成処理がなされたリア音を生成する
（１）乃至（３）までの何れかに記載のサウンドバー。
（６）
前記入力オーディオ信号に基づいてフロント音を生成するフロント音信号生成部を有する
（１）乃至（５）までの何れかに記載のサウンドバー。
（７）
前記フロント音信号生成部は、前記フロント音の再生タイミングを遅延させる時間を調整する遅延時間調整部を有する
（６）に記載のサウンドバー。
（８）
前記フロント音信号生成部は、頭部伝達関数に基づく演算を施したフロント音を生成する
（６）又は（７）に記載のサウンドバー。
（９）
前記フロント音信号生成部は、テレビジョン装置が有するディスプレイにより反射させるフロント音を生成する
（６）乃至（８）までの何れかに記載のサウンドバー。
（１０）
前記フロント音信号生成部は、前記フロント音の位相と逆相であるキャンセル信号を生成するキャンセル信号生成部を有する
（９）に記載のサウンドバー。
（１１）
前記フロント音信号生成部は、前記ディスプレイの非振動領域で反射させるフロント音を生成する
（９）又は（１０）に記載のサウンドバー。
（１２）
前記テレビジョン装置から送信される情報に基づいて前記非振動領域を判別する
（１１）に記載のサウンドバー。
（１３）
視聴者及び／又は前記テレビジョン装置を撮影する撮像装置を有する
（９）乃至（１１）までの何れかに記載のサウンドバー。
（１４）
前記リア音信号生成部は、前記撮像装置により撮影された視聴者及び／又は前記テレビジョン装置に基づいて前記リア音を生成する
（１３）に記載のサウンドバー。
（１５）
リア音信号生成部が、入力オーディオ信号からリア音を生成し、
出力部が、前記リア音信号生成部により生成されたリア音をリア音用スピーカに出力する
サウンドバーにおけるオーディオ信号処理方法。
（１６）
リア音信号生成部が、入力オーディオ信号からリア音を生成し、
出力部が、前記リア音信号生成部により生成されたリア音をリア音用スピーカに出力する
サウンドバーにおけるオーディオ信号処理方法をコンピュータに実行させるプログラム。
【符号の説明】
【００５０】
１０・・・テレビジョン装置、２０・・・サウンドバー、２０１・・・カメラ、２０２・・・リア音用スピーカ、２０３・・・フロント音用スピーカ、２０４・・・第２通信部、２１０・・・リア音信号生成部、２１０Ａ・・・・遅延時間調整部、２１０Ｂ・・・キャンセル信号生成部、２１０Ｃ・・・波面合成処理部、２１０Ｄ・・・リア音信号出力部、２２０・・・フロント音信号生成部、２２０Ａ・・・遅延時間調整部、２２０Ｂ・・・ビーム処理部、２２０Ｃ・・・フロント音信号出力部
【図１】
2020144937.tif 000003
【図２】
2020144937.tif 000004
【図３】
2020144937.tif 000005
【図４】
2020144937.tif 000006
【図５】
2020144937.tif 000007
【図６】
2020144937.tif 000008
【図７】
2020144937.tif 000009
【図８】
2020144937.tif 000010
【図９】
2020144937.tif 000011
【図１０】
2020144937.tif 000012
【図１１】
2020144937.tif 000013
【図１２】
2020144937.tif 000014
【国際調査報告】
2020144937.tif 000015
2020144937.tif 000016
2020144937.tif 000017
2020144937.tif 000018
2020144937.tif 000019
2020144937.tif 000020