(57)【要約】【課題】テレビジョン番組を視聴しながら映像／音声通話した際にライブ感が得られるテレビジョン装置を提供する。【解決手段】映像／音声通話部１２１は、ネットワークを介して映像／音声通話を行う。音声出力部１３０は、映像／音声通話の通話音声及び他の映像／音声ソースの音声を、複数のスピーカで出力する。映像／音声出力調整部１２２は、音声出力部１３０に、複数のスピーカのうちＲＬスピーカ７０、ＲＲスピーカ８０、及びサブウーファ６０から通話音声を出力させるよう調整する。また、映像／音声出力調整部１２２は、他の映像／音声ソースの音声については、音声出力部１３０に、ＦＬスピーカ３０、ＦＲスピーカ４０、Ｃスピーカ５０、ＲＬスピーカ７０、ＲＲスピーカ８０、サブウーファ６０から出力させる。【選択図】  図２
2013138352.tif 000002
【特許請求の範囲】
【請求項１】
ネットワークを介して他のユーザとの間で映像／音声通話を行う映像／音声通話部と、
前記映像／音声通話の通話音声及び他の映像／音声ソースの音声を、複数のスピーカで出力する音声出力部と、
前記音声出力部に、前記通話音声を、後方とサブウーファの音声信号出力に対応する前記スピーカから出力させ、前方と後方と前記サブウーファの音声出力に対応する前記スピーカから他の映像／音声ソースの音声を出力させるよう調整する映像／音声出力調整部とを備える
ことを特徴とするテレビジョン装置。
【請求項２】
前記映像／音声出力調整部は、後方の音声出力に対応する前記スピーカの周波数特性に合わせて前記通話音声の出力を調整する
ことを特徴とする請求項１に記載のテレビジョン装置。
【請求項３】
前記映像／音声通話部は、
複数の前記ユーザの表示画面上の立ち位置を設定し、
前記映像／音声出力調整部は、前記立ち位置から、後方の音声出力に対応する前記スピーカにおける左右の出力の重み付けを行う
ことを特徴とする請求項１又は２に記載のテレビジョン装置。
【請求項４】
前記映像／音声出力調整部は、
前記通話音声の前記サブウーファの音声出力について、後方の音声出力と相関する重み付けをしない
ことを特徴とする請求項１乃至３のいずれか１項に記載のテレビジョン装置。
【請求項５】
前記映像／音声出力調整部は、
前記音声出力部に、前記通話音声を、前方の音声信号出力に対応する前記スピーカからも、後方の音声信号出力よりも小音量で出力させる
ことを特徴とする請求項１乃至４のいずれか１項に記載のテレビジョン装置。
【請求項６】
前記映像／音声通話部は、
複数の前記ユーザのテレビジョン装置の１つをマスターとし、それ以外の前記ユーザのテレビジョン装置をスレーブと設定し、前記マスターのユーザの指示を検知して、他の映像／音声ソースを切り換える
ことを特徴とする請求項１乃至５のいずれか１項に記載のテレビジョン装置。
【請求項７】
前記映像／音声通話部により、ネットワークを介して映像／音声通話を行い、
音声出力部により、前記映像／音声通話の通話音声及び他の映像／音声ソースの音声を、複数のスピーカで出力し、
映像／音声出力調整部により、前記音声出力部に、前記通話音声を、後方とサブウーファの音声信号出力に対応する前記スピーカから出力させ、前方と後方と前記サブウーファの音声出力に対応する前記スピーカから他の映像／音声ソースの音声を出力させるよう調整する
ことを特徴とするテレビジョン装置の制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明はテレビジョン装置及びテレビジョン装置の制御方法に係り、特に音響の制御をするテレビジョン装置及びテレビジョン装置の制御方法に関する。
【背景技術】
【０００２】
近年、インターネット接続等を用いて遠隔地のユーザと、例えばＳｋｙｐｅ（登録商標）のような方式を用いて、映像／音声通話を行うことが可能となっている。
この映像／音声通話は、従来は、ＰＣ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ）や携帯電話等を用いて行われていた。しかしながら、近年、家庭用のテレビジョン装置でも、映像／音声通話ができるようになってきた。
【０００３】
ここで図８と図９とを参照して、従来のテレビジョン装置１１による映像／音声通話の例について説明する。
図８によると、従来のテレビジョン装置１１は、大画面の液晶、プラズマ、有機ＥＬ等のディスプレイパネルによる表示部１１０を備えており、例えばＳｋｙｐｅ（登録商標）や各種メッセンジャー等による映像／音声通話に対応している。
テレビジョン装置１１は、例えば上部に、ＵＳＢカメラ等であるカメラ２１を備える。加えて、テレビジョン装置１１は、例えば、５．１チャンネル・サラウンド方式（以下、「５．１ｃｈ方式」と呼ぶ。）の各音声チャンネルに対応した音声出力用の各スピーカを接続している。
図８の例では、テレビジョン装置１１は、各スピーカとして、ＦＬスピーカ３０、ＦＲスピーカ４０、Ｃスピーカ５０、ＲＬスピーカ７０、ＲＲスピーカ８０のような音声出力用のスピーカを備えて配置される。
【０００４】
図９によると、一般的に、ユーザＰ１がテレビジョン装置１１を５．１ｃｈ方式で視聴する場合、ユーザＰ１がテレビジョン装置１１を閲覧する方向であるフロント（前方）には、ＦＬスピーカ３０、Ｃスピーカ５０、ＦＲスピーカ４０が配置される。サブウーファ６０は、指向性の低い低音専用のスピーカであるので、どこに配置してもよいが、テレビジョン装置１１のフロント側面等に置かれることが多い。また、リア（後方）からの「サラウンド」音声を再生するために、ユーザＰ１の後方にＲＬスピーカ７０と、ＲＲスピーカ８０が配置される。
図９は、このような状態で、テレビジョン装置１１を視聴するユーザＰ１が、遠隔地のユーザＰ２と、いわゆる「音声チャット」として映像／音声通話する例について示している。図９の例で、映像／音声通話の通話音声は、一般的に、フロント・スピーカである、ＦＬスピーカ３０、Ｃスピーカ５０、ＦＲスピーカ４０と、サブウーファ６０で再生される。これは、映像／音声通話の通話音声は、５．１ｃｈの音声ソースではなく、通常はモノラルかＬＲステレオの音声ソースのためである。
この際、テレビジョン装置１１の番組等の他の映像／音声ソースの音声は、ＦＬスピーカ３０〜ＲＲスピーカ８０のすべてのスピーカから同時に再生されることとなる。
【０００５】
ここで、特許文献１を参照すると、多画面表示機能を有するテレビジョン装置において音声出力回路の簡素化するため、音声出力切り替え機能制御手段を備えたことを特徴とするテレビジョン受信装置が記載されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００８−３１１９６４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、従来のテレビジョン装置や特許文献１に開示された技術では、テレビジョン装置１１で同じ番組を見ながら通話する場合、フロント・スピーカで映像／音声通話の通話音声と、番組等の他の映像／音声ソースの音声の大半が混ざることとなり、聞きづらくなっていた。
また、テレビジョン装置１１の正面から映像／音声通話の通話音声が聞こえている状況では、映像／音声通話の接続相手であるユーザＰ２が正面にいるように感じられる。このため、スポーツ等の番組の視聴をしていると、ユーザ同士のライブ感や一体感が得づらいという課題があった。
【０００８】
本発明は、このような状況に鑑みてなされたものであり、上述の課題を解消することを課題とする。
【課題を解決するための手段】
【０００９】
本発明のテレビジョン装置は、ネットワークを介して他のユーザとの間で映像／音声通話を行う映像／音声通話部と、前記映像／音声通話の通話音声及び他の映像／音声ソースの音声を、複数のスピーカで出力する音声出力部と、前記音声出力部に、前記通話音声を、後方とサブウーファの音声信号出力に対応する前記スピーカから出力させ、前方と後方と前記サブウーファの音声出力に対応する前記スピーカから他の映像／音声ソースの音声を出力させるよう調整する映像／音声出力調整部とを備えることを特徴とする。
本発明のテレビジョン装置は、前記映像／音声出力調整部が、後方の音声出力に対応する前記スピーカの周波数特性に合わせて前記通話音声の出力を調整することを特徴とする。
本発明のテレビジョン装置は、前記映像／音声通話部が、複数の前記ユーザの表示画面上の立ち位置を設定し、前記映像／音声出力調整部は、前記立ち位置から、後方の音声出力に対応する前記スピーカにおける左右の出力の重み付けを行うことを特徴とする。
本発明のテレビジョン装置は、前記映像／音声出力調整部は、前記通話音声の前記サブウーファの音声出力について、後方の音声出力と相関する重み付けをしないことを特徴とする。
本発明のテレビジョン装置は、前記映像／音声出力調整部が、前記音声出力部に、前記通話音声を、前方の音声信号出力に対応する前記スピーカからも、後方の音声信号出力よりも小音量で出力させることを特徴とする。
本発明のテレビジョン装置は、前記映像／音声通話部が、複数の前記ユーザのテレビジョン装置の１つをマスターとし、それ以外の前記ユーザのテレビジョン装置をスレーブと設定し、前記マスターのユーザの指示を検知して、他の映像／音声ソースを切り換えることを特徴とする。
本発明のテレビジョン装置の制御方法は、前記映像／音声通話部により、ネットワークを介して映像／音声通話を行い、音声出力部により、前記映像／音声通話の通話音声及び他の映像／音声ソースの音声を、複数のスピーカで出力し、映像／音声出力調整部により、前記音声出力部に、前記通話音声を、後方とサブウーファの音声信号出力に対応する前記スピーカから出力させ、前方と後方と前記サブウーファの音声出力に対応する前記スピーカから他の映像／音声ソースの音声を出力させるよう調整することを特徴とする。
【発明の効果】
【００１０】
本発明によれば、映像／音声通話の音声をリア・スピーカとサブウーファから出力することで、映像／音声通話を行うと同時に他の映像／音声ソースを視聴していても、映像／音声通話の音声が聞き取りやすくユーザ同士のライブ感や一体感が得られるテレビジョン装置及びテレビジョン装置の制御方法を提供できる。
【図面の簡単な説明】
【００１１】
【図１】本発明の実施の形態に係る映像／音声通話システムのシステム構成図である。
【図２】本発明の実施の形態に係るテレビジョン装置、カメラ、５．１ｃｈスピーカの構成を示す制御ブロック図である。
【図３】本発明の実施の形態に係る通話音声出力重み付け処理を示すフローチャートである。
【図４】本発明の実施の形態に係る主な音声と通話音声との関係を示す概念図である。
【図５】本発明の実施の形態に係る音声出力の重み付けの概念図である。
【図６】本発明の実施の形態に係る各スピーカの入力信号と周波数応答との関係を示す概念図である。
【図７】本発明の実施の形態に係る３人での映像／音声通話処理における、主な音声と各ユーザの通話音声との関係を示す概念図である。
【図８】従来のテレビジョン装置、カメラ、及び５．１ｃｈスピーカの外観の概念図である。
【図９】従来のテレビジョン装置、カメラ、及び５．１ｃｈスピーカの配置の概念図である。
【発明を実施するための形態】
【００１２】
＜実施の形態＞
〔映像／音声通話システムＸの構成〕
まず、図１を参照すると、本発明の実施の形態に係るテレビジョン装置１０は、ネットワーク５を介して、他のテレビジョン装置１０と、ロビーサーバ１６とに接続される。
テレビジョン装置１０は、テレビジョン放送、ＤＶＤ／Ｂｌｕ−ｒａｙディスク、ネットワーク映像配信等に対応した表示装置である。また、テレビジョン装置１０は、Ｓｋｙｐｅ（登録商標）等の映像／音声通話に対応し、カメラ２０（図２）や、例えば５．１ｃｈの音声出力システムを備えている。テレビジョン装置１０は、主に自機器のテレビジョン装置１０のユーザであるユーザＰ１（図２）と、他機器であるテレビジョン装置１０のユーザであるユーザＰ２、Ｐ３等（他のユーザ）同士で映像／音声通話を行う。また、各テレビジョン装置１０は、他のテレビジョン装置１０に対して、映像／音声通話時に後述する「マスター」「スレーブ」を選択させることができる。
ロビーサーバ１６は、各テレビジョン装置１０との間で映像／音声通話を行うために、各テレビジョン装置１０のネットワーク５での接続状態を検知し、接続の仲介をする。
【００１３】
〔テレビジョン装置１０、カメラ２０、及び各スピーカの構成〕
次に、図２を参照すると、本発明の実施の形態に係るテレビジョン装置１０は、５．１ｃｈ方式の音声の再生と、映像／音声通話に対応する部位として、従来のテレビジョン装置１１（図８）と同様にカメラ２０と、各スピーカであるＦＬスピーカ３０、ＦＲスピーカ４０、Ｃスピーカ５０、サブウーファ６０、ＲＬスピーカ７０、及びＲＲスピーカ８０と接続している。
各スピーカのうち、ＦＬスピーカ３０、Ｃスピーカ５０、ＦＲスピーカ４０、及びサブウーファ６０がフロント・スピーカである。また、各スピーカのうち、ＲＬスピーカ７０及びＲＲスピーカ８０がリア・スピーカである。
【００１４】
カメラ２０は、映像／音声通話のためのＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）やＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサによる電子撮像機能を備えたＵＳＢカメラ等である。カメラ２０は、ＣＣＤやＣＭＯＳイメージセンサで入力した動画像や静止画像を、所定のフォーマットでデジタル化して、ＵＳＢ２．０／３．０規格等を用いて映像信号としてテレビジョン装置１０に出力する。
カメラ２０は、モード切り換えボタン２１０（映像／通話モード移行手段）と、音声入力部２２０（音声入力手段）とを備えている。
モード切り換えボタン２１０は、映像／音声通話の作動状態（モード）に移行するためのボタンやスイッチ等である。カメラ２０は、切り換えスイッチの押下を指示信号として、テレビジョン装置１０へ送信する。
音声入力部２２０は、指向性／無指向性のマイクロフォン、マイクロフォン・アンプ、Ａ／Ｄコンバータ等を備えた部位である。カメラ２０は、音声入力部２２０から入力したアナログ又はデジタルの音声信号を、テレビジョン装置１０へ出力する。テレビジョン装置１０は、この音声信号を、ユーザＰ１の映像／音声通話に係る通話音声の信号として用いる。
なお、カメラ２０は、接続状態等を報知するＬＥＤ等の報知部も備えていてもよい。
また、カメラ２０として無線接続のウェブカメラやインターネットカメラを用いることもできる。さらに、スマートフォン等の携帯端末のカメラを用いることもできる。また、音声入力部は、別途、テレビジョン装置１０に備えられていてもよい。
【００１５】
ＦＬスピーカ３０は、前方左側のスピーカである。ＦＬスピーカ３０は、例えば、床置き（フロア）型のダイナミック・スピーカであり、２０〜４，００００Ｈｚといった広帯域の周波数応答をする。このため、ＦＬスピーカ３０は、５．１ｃｈではＦＬ音声を高音質で再生する。
【００１６】
ＦＲスピーカ４０は、例えば、床置き（フロア）タイプの前方右（Ｆｒｏｎｔ  Ｒｉｇｈｔ）スピーカである。このため、ＦＲスピーカ４０は、ＦＬスピーカ３０と、各スピーカユニットの配置を線対称としたような、ほぼ同一の構成のものを用いる。よって、ＦＲスピーカ４０は、５．１ｃｈ音声のＦＲ音声を、高音質で再生する。
【００１７】
Ｃスピーカ５０は、例えば、ブックシェルフ型のセンタースピーカである。
Ｃスピーカ５０は、例えば、主にヒトの会話に対応する５００〜８０００Ｈｚ程度の帯域に対して特に音声出力の周波数応答の特性がよいフルレンジのスピーカユニットを備えている。
Ｃスピーカ５０は、５．１ｃｈでは、主に映画の台詞等のセンター音声を再生することができる。
【００１８】
サブウーファ６０は、例えば、床置き型の低音専用のサブウーファ（Ｓｕｂｗｏｏｆｅｒ）である。サブウーファ６０は、５．１ｃｈでは、通常の音声信号より情報量の少ない「．１」のサブウーファ信号を出力する。
このサブウーファ信号は、効果音のように、ほぼ無指向性の低音として記録されていることが多い。このため、サブウーファ６０は、例えば、１５０Ｈｚ程度以下の低音を大口径のスピーカユニット、ヘルムホルツ共鳴、ダブルドライブ、エキサイタ等を用いて再生することができる。
【００１９】
ＲＬスピーカ７０は、例えば、床置き型やブックシェルフ型の後方左スピーカである。ＲＬスピーカ７０は、５．１ｃｈ音声において、主にサラウンド音声であるＲＬ信号を出力する。
５．１ｃｈ方式において、ＲＬ／ＲＲ信号は、ＦＬ／ＦＲ信号のように広帯域ではなくてもよい。このためＲＬスピーカ７０は、８〜１０ｃｍフルレンジのスピーカユニット等から構成することができる。つまり、ＲＬスピーカ７０は、例えば、１５０〜１８０００Ｈｚ程度の周波数帯域の音声を出力できる。
【００２０】
ＲＲスピーカ８０は、例えば、床置き型やブックシェルフ型の後方右スピーカである。ＲＲスピーカ８０は、５．１ｃｈ音声において、主にサラウンド音声であるＲＲ信号を出力する。
このため、ＲＲスピーカ８０は、ＲＬスピーカ７０とほぼ同様の構成のものを用いることができる。
【００２１】
なお、テレビジョン装置１０に接続する各スピーカとして、５．１ｃｈ方式以外にも、７．１ｃｈ方式や６ｃｈ方式等、他のサラウンド方式のスピーカを用いてもよい。
また、例えばＣスピーカ５０を、テレビジョン装置１０のスピーカで兼用したり、Ｃスピーカ５０やサブウーファ６０がない構成も用いることができる。
【００２２】
テレビジョン装置１０は、映像／音声通話の通話音声出力重み付け処理（図３）に対応する部位として、制御部１００（制御手段）、表示部１１０（表示手段）、映像／音声制御部１２０（映像／音声処理手段）、音声出力部１３０（音声出力手段）、ネットワーク接続部１４０（ネットワーク接続手段）を備えている。
【００２３】
制御部１００は、一般的なＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）やＭＰＵ（Ｍｉｃｒｏ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）等の回路である。
制御部１００は、映像／音声処理部１２０の記憶部１２３に記憶されたプログラムやデータに従って、後述する音声通話出力割り当て重み付け処理を、ハードウェア資源を用いて実行する。
【００２４】
表示部１１０は、液晶やプラズマやリアプロジェクタ等のフラットパネル・ディスプレイである。
表示部１１０は、カメラ２０により取得された映像／音声通話の映像と、テレビ番組等の映像を重ね合わせ（スーパーインポーズ）して表示することができる。
【００２５】
映像／音声処理部１２０は、ＣＰＵ、ＤＳＰ（Ｄｉｇｉｔａｌ  Ｓｉｇｎａｌ  Ｐｒｏｃｅｓｓｏｒ）、ＧＰＵ（Ｇｒａｐｈｉｃｓ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ  Ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ）等の制御演算手段と、記憶部を含む部位である。
映像／音声処理部１２０は、主に後述する音声通話出力割り当て重み付け処理の、ユーザ・インターフェイスを提供し、各スピーカへの割り当てや重み付けのための演算等を行う。
【００２６】
音声出力部１３０は、例えば、５．１ｃｈ方式の音声を出力するためのＤＳＰ、デコーダ、サラウンドプロセッサ、デジタルミキサ、デジタルアンプ等を含む部位である。
音声出力部１３０は、例えば、テレビジョンの番組や光学メディア等の他の映像／音声ソースを再生した際の５．１ｃｈの音声信号を、各スピーカに割り振って出力できる。また、音声出力部１３０は、映像／音声通話のモノラルやステレオの通話音声を、音量の重み付け等を行った上で、各スピーカに出力することができる。
その他の機能として、音声出力部１３０は、いわゆるバーチャルサラウンド等の音場付加処理により、サラウンド音声を残響処理等してフロント・スピーカから出力することができる。この場合でも、リア・スピーカに対応する音声信号を、フロント・スピーカから出力できる。
また、Ｃスピーカ５０やサブウーファ６０がない構成の場合には、これらの音声信号を他のスピーカに割り当てることもできる。この場合でも、音声出力部１３０は、Ｃスピーカ５０やサブウーファ６０に対応する音声信号を、他のスピーカから出力できる。
なお、音声出力部１３０は、各音声チャンネルの数Ｖ程度の音声信号の出力のみ行い、別途各音声信号を増幅するアンプ等を備えるような構成とすることもできる。この場合、各スピーカとして、アンプ内蔵のシアター・システム等を用いることもできる。
【００２７】
ネットワーク接続部１４０は、ネットワーク５と接続するための、例えば無線ＬＡＮ、有線ＬＡＮ、携帯電話等のインターフェイスである。
テレビジョン装置１０は、ネットワーク接続部１４０を介して、映像／音声通話の映像の信号や通話の音声信号を、他のテレビジョン装置１０との間で送受信する。
【００２８】
これに加えて、テレビジョン装置１０は、電源部、リモートコントローラの受光／受信回路や各種のボタン等である入力部、ＲＦ（Ｒａｄｉｏ  Ｆｒｅｑｕｅｎｃｙ）部、ＤＶＤ／Ｂｌｕ−ｒａｙディスク等の光学記憶媒体用ドライブ部、外部ＨＤＤ等接続用のＵＳＢ端子やフラッシュメディアカードインターフェイス等も備えている。
つまり、テレビジョン装置１０は、地上／衛星テレビジョン放送やカメラ２０以外からの他の映像／音声ソースの映像信号を表示部１１０に表示し、音声信号を各スピーカから出力できる。この際、５．１ｃｈに対応している音声信号は、音声出力部１３０から各スピーカへ出力する。
また、テレビジョン装置１０は、音声出力部１３０のいわゆる「バーチャルサラウンド」により、ステレオやモノラルの音声ソースも、ステレオ化して残響を加える等の手法で５．１ｃｈ化して各スピーカから出力することができる。
【００２９】
また、テレビジョン装置１０の映像／音声処理部１２０は、主に映像／音声通話部１２１（映像／音声通話手段）、映像／音声出力調整部１２２（音声出力調整手段）、及び記憶部１２３（記憶手段）を備えている。
【００３０】
映像／音声通話部１２１は、テレビジョン装置１０の映像／音声通話に係る処理を行う部位である。
映像／音声通話部１２１は、複数の他のテレビジョン装置１０との間で、カメラ２０から取得した画像と音声を、映像／音声信号に変換して、送受信することで映像／音声通話を行う。
また、映像／音声通話部１２１は、映像／音声通話に係るユーザ・インターフェイスを提供する。このため、映像／音声通話部１２１は、テレビジョン装置１０のネットワーク接続を確認し、ロビーサーバ１６に接続する。
また、映像／音声通話部１２１は、後述するように、テレビジョン番組や記憶媒体の動画ファイルやネットワーク動画等である「他の映像／音声ソース」を、他のユーザと一致して再生させるための「マスター」／「スレーブ」の設定を行い、記憶部１２３に設定情報として記憶する。
また、映像／音声通話部１２１は、表示部１１０上の「立ち位置」を設定し、記憶部１２３に設定情報として記憶する。ここで、本実施形態の「立ち位置」は、各ユーザの位置や並び等の関係を示す情報である。立ち位置の情報は、表示部１１０内に表示される、映像／音声通話の映像表示枠（以下、「ウィンドウ」という。）の座標、大きさ、透過率、フレームの形状等を含む。
【００３１】
映像／音声出力調整部１２２は、他のユーザの映像／音声通話に係る通話音声を、音声出力部１３０に接続された各スピーカへ割り当て、重み付けをして出力する処理を行う部位である。映像／音声出力調整部１２２は、この各スピーカへの音声出力の重み付けを、後述する相関関数によって行う。
また、映像／音声出力調整部１２２は、「他の映像／音声ソース」と、他ユーザからの映像／音声通話の画像を、表示部１１０に重ねて表示する。
この際、映像／音声出力調整部１２２は、他ユーザからの映像／音声通話の画像を、各ユーザの立ち位置の設定情報に従って配置して表示する。
さらに、映像／音声出力調整部１２２は、立ち位置の設定情報に従って、各スピーカへ通話音声の出力の割り当てと重み付けを行う。
なお、映像／音声通話部１２１と映像／音声出力調整部１２２とを、専用の回路を用いて実現することもできる。
【００３２】
記憶部１２３は、ＲＡＭ、ＲＯＭ、フラッシュメモリ等を含む記憶部位であり、制御部１００が音声通話出力割り当て重み付け処理を実行し、映像／音声通話部１２１や映像／音声出力調整部１２２を含む各部位を制御するためのプログラムやデータ等を記憶している。
【００３３】
〔通話音声出力割り当て／重み付け処理〕
次に、図３〜図７を参照して、本発明の実施の形態に係る音声通話出力割り当て重み付け処理について説明する。
本実施形態の音声通話出力割り当て重み付け処理において、制御部１００は、映像／音声通話部１２１と映像／音声出力調整部１２２とを用いて：
１）映像／音声通話と、「他の映像／音声ソース」が入力されたときに、各スピーカへの音声割り当てを行う。
２）割り当てに加え、表示部１１０の画面上の位置等に係る「立ち位置」の設定情報により、各スピーカの音声出力の重み付けを行う。
３）複数のテレビジョン装置１０間で、マスター／スレーブの設定をして、マスターの指示信号により、同じ映像／音声を出力する。また、ユーザ同士の立ち位置の関係に応じて、各スピーカへの割り当てや重み付けを行い、カメラ２０の映像の表示位置を連動させる。
以下で、図３のフローチャートを参照して、音声通話出力割り当て重み付け処理の各処理についてステップ毎に詳しく説明する。
【００３４】
（ステップＳ１０１）
まず、制御部１００は、映像／音声通話部１２１を用いて、モード切り換えボタン検知処理を行う。
ここでは、制御部１００は、ユーザが映像／音声通話を行うためのモード切り換えボタン２１０の押下を検知する。なお、このモード切り換えボタンは、カメラ２０又は図示しないリモコンとテレビジョン装置１０の入力部とに備えられている。
検知後、制御部１００は、ＯＳＤ（Ｏｎ  Ｓｃｒｅｅｎ  Ｄｉｓｐｌａｙ）画面等で、映像／音声通話モードに移行する旨、表示部１１０に表示し、音声出力部１３０から確認音声を出力する。
この際、制御部１００は、自機器のユーザＰ１に、例えば「通常映像／音声通話モード」又は「複数拠点同映像／音声ソース視聴モード」を選択させることができる。
通常映像／音声通話モードは、主に２人のユーザ間で、映像／音声通話を行うモードである。
また、複数拠点同映像／音声ソース視聴モードは、２人以上のユーザが映像／音声通話をすると同時に、同じテレビジョン番組等の他の映像／音声ソースを視聴する。つまり、このモードでは、映像／音声通話の接続相手のユーザのテレビジョン装置１０に、同じ番組等を表示する。これにより、スポーツ番組や同じネットワーク動画等を、複数のユーザでほぼ同時に鑑賞することができる。
【００３５】
（ステップＳ１０２）
次に、制御部１００は、映像／音声通話部１２１を用いて、テレビジョン装置１０がネットワーク５に接続され映像／音声通話が可能な状態になっているか否かを判定する。
制御部１００は、ネットワーク接続部１４０でネットワーク５への接続を検知でき、ロビーサーバ１６に接続が可能である場合、Ｙｅｓと判定する。それ以外の場合は、映像／音声通話が不可能としてＮｏと判定する。
Ｙｅｓの場合、制御部１００は、処理をステップＳ１０４に進める。
Ｎｏの場合、制御部１００は、処理をステップＳ１０３に進める。
【００３６】
（ステップＳ１０３）
制御部１００は、映像／音声通話が不可能である場合、映像／音声通話部１２１を用いて、ネット接続催促処理を行う。
ネットワーク５に接続できない場合、例えば、制御部１００は、ＯＳＤにて表示部１１０にネットワーク設定の画面を表示する。そして、制御部１００は、ユーザＰ１の指示を入力部から検知し、ＩＰアドレスや無線ＬＡＮのＳＳＩＤやパスワード等を設定する。
また、制御部１００は、例えば、ロビーサーバ１６への接続が不可能である場合、ＯＳＤにて表示部１１０に、「サーバに接続できません。ネットワーク接続を確認して下さい」等のメッセージを表示する。また、制御部１００は、ロビーサーバ１６のアクセス認証等が失敗した場合には、例えば、アカウントのＩＤやパスワードを入力させるダイアログボックス等を表示して、ユーザＰ１に設定させる。
その後、制御部１００は、処理をステップＳ１０１に戻し、接続等をまた確認する。
【００３７】
（ステップＳ１０４）
制御部１００は、ネットワーク５に接続されて映像／音声通話が可能な場合、映像／音声通話部１２１を用いて、マスター／スレーブ設定処理を行う。
この処理で、まず、制御部１００は、入力部のユーザＰ１の指示を検知し、映像／音声通話を行う１人又は複数の他のユーザを選択する。
具体的に、制御部１００は、まず、ロビーサーバ１６にアクセスして、映像／音声通話が可能な「オンライン」のユーザを、ユーザＰ１の入力部からの指示により選択する。
【００３８】
次に、制御部１００は、「マスター」と「スレーブ」とを設定する。マスターは、映像／音声通話で他のユーザへ設定情報を送信するテレビジョン装置１０で、スレーブは当該設定情報を受信してマスターと同様の設定を行うテレビジョン装置１０である。
マスターとなったテレビジョン装置１０は、複数拠点同映像／音声ソース視聴モードにおいて、テレビジョン番組や記憶媒体／ネットワーク配信の動画等の「他の映像／音声ソース」を選択できる。つまりマスターは、「他の映像／音声ソース」の設定情報を、スレーブのテレビジョン装置１０へ送信する。複数拠点同映像／音声ソース視聴モードの場合、マスター及びスレーブのテレビジョン装置１０は、ほぼ同一の「他の映像／音声ソース」を表示部１１０に、ほぼ同時に表示する。なお、スレーブのテレビジョン装置１０は、通常は、「他の映像／音声ソース」を選択することはできない。
【００３９】
制御部１００は、通常、モード切り換えボタン２１０を押下したユーザのテレビジョン装置１０をマスターに設定する。そして、制御部１００は、映像／音声通話の通話相手である他のユーザをすべてスレーブに設定し、その設定情報を送信する。
以下では、図３のユーザＰ１の自機器であるテレビジョン装置１０をマスター、それ以外のユーザのテレビジョン装置１０をスレーブとして説明する。
なお、制御部１００は、モード切り換えボタン２１０の押下を検知した後、マスター／スレーブの設定をユーザに、別途行わせることもできる。また、複数のテレビジョン装置１０をマスターとすることもできる。
【００４０】
（ステップＳ１０５）
次に、制御部１００は、映像／音声通話部１２１を用いて、自機器のテレビジョン装置１０にカメラ２０が接続されているか否かを判定する。この際、制御部１００は、音声入力部２２０から所定レベルで音声信号が入力できるか否かも判定する。制御部１００は、カメラ２０が接続され、音声入力部２２０から音声信号も入力できた場合、Ｙｅｓと判定する。それ以外の場合には、Ｎｏと判定する。
Ｙｅｓの場合、制御部１００は、処理をステップＳ１０７に進める。
Ｎｏの場合、制御部１００は、処理をステップＳ１０６に進める。
【００４１】
（ステップＳ１０６）
制御部１００は、カメラ２０が接続されていないか音声信号が入力できない場合、映像／音声通話部１２１を用いて、カメラ接続催促表示処理を行う。
具体的には、カメラ２０が接続されていない場合、制御部１００は、自機器のテレビジョン装置１０に対して、「カメラを接続して下さい」等と表示部１１０に表示させ、ユーザＰ１へ、カメラ２０の接続を促す。
また、音声信号が入力できない場合、制御部１００は、「音声入力のテストを行いますか？」等と表示部１１０に表示させる。
制御部１００は、カメラ２０の接続が確認でき、所定レベルでの音声入力が確認できた場合、処理をステップＳ１０７に進める。
【００４２】
（ステップＳ１０７）
制御部１００は、映像／音声通話部１２１を用いて、自機器の音声出力部１３０から５．１ｃｈ音声出力等の「サラウンド接続」が行われているか否か判定する。
制御部１００は、各スピーカが接続され、５．１ｃｈ等のサラウンド音声の出力が可能である場合には、Ｙｅｓと判定する。これに対して、制御部１００は、例えば、ＦＬスピーカ３０とＦＲスピーカ４０等だけが接続されたステレオＬＲ出力の場合は、Ｎｏと判定する。
Ｙｅｓの場合、制御部１００は、処理をステップＳ１０８に進める。
Ｎｏの場合、制御部１００は、音声出力部１３０をバーチャルサラウンド等の音声出力モードに設定して、処理をステップＳ１１０に進める。
【００４３】
（ステップＳ１０８）
制御部１００は、映像／音声通話部１２１を用いて、自機器が「サラウンド接続」になっている場合、映像／音声通話を行う全ユーザが接続されたか否か判定する。
制御部１００は、他機器のテレビジョン装置１０が、５．１ｃｈ等のサラウンド接続されている場合に、Ｙｅｓと判定する。制御部１００は、それ以外の場合には、Ｎｏと判定する。
Ｙｅｓの場合、制御部１００は、処理をステップＳ１１０に進める。
Ｎｏの場合、制御部１００は、処理をステップＳ１０９に進める。
【００４４】
（ステップＳ１０９）
自機器の制御部１００は、映像／音声通話部１２１を用いて、全てのユーザが映像／音声通話が可能でないかサラウンド接続されていない場合、サラウンド音声切り換え処理を行う。
具体的には、自機器の制御部１００は、５．１ｃｈ等のサラウンド接続されていない他機器のテレビジョン装置１０に対して、ネットワーク接続部１４０を介して、サラウンド音声に切り換える指示信号を送信する。
これを受信した他機器の制御部１００は、ＲＬスピーカ７０とＲＲスピーカ８０が接続されているにも関わらず、５．１ｃｈ等のサラウンド接続ではない音声出力モードになっていた場合には、サラウンド音声を出力するモードに変更する。また、制御部１００は、他機器がステレオＬＲ出力の場合には、バーチャルサラウンド等に設定する。
【００４５】
（ステップＳ１１０）
全てのユーザがサラウンド接続となり、映像／音声通話が可能となった場合、自機器の制御部１００は、映像／音声通話部１２１を用いて、マスター／スレーブ開始指示処理を行う。
この処理では、自機器の制御部１００は、映像／音声通話が可能な他機器へ、映像／音声通話を開始する指示信号を送信する。
すると、マスターの制御部１００は、スレーブとなるテレビジョン装置１０にモード設定開始の指示信号を送信する。これにより、マスターとスレーブの全ユーザのテレビジョン装置１０の制御部１００は、表示部１１０に設定に係るＯＳＤ表示を行う。
この上で、マスターの制御部１００は、マスターのユーザの設定画面での指示を検知して、設定情報として送信する。この設定情報を受信した、スレーブのテレビジョン装置１０の制御部１００は、表示部１１０にＯＳＤ表示する。このように、マスターとスレーブとの間で、設定画面を同期させる（以下、設定画面連動という。）ことができる。
【００４６】
（ステップＳ１１１）
次に、制御部１００は、映像／音声通話部１２１を用いて、立ち位置パターン設定処理を行う。
この処理では、マスターのテレビジョン装置１０は、各ユーザの「立ち位置」を設定して、設定情報として送信する。
マスターのテレビジョン装置１０は、あらかじめ用意された所定の立ち位置のパターンの中から、マスターのユーザが選択することができる。つまり、マスターがスレーブのユーザの立ち位置も決定する。
マスターのテレビジョン装置１０の制御部１００は、設定された立ち位置を、設定情報として記憶部１２３に記憶する。
【００４７】
この立ち位置のパターンとして、例えば、マスターのウィンドウを表示部１１０の画面下部の中央に配置し、この左右に他のスレーブのウィンドウを固定し、いわゆる「マルチ画面」表示を行うように設定できる。このパターンでは、マスターの表示部１１０は、マスターのウィンドウ自体は表示しない。
この他の立ち位置のパターンとして、スレーブのウィンドウを画面の上下左右の端に配置したり、所定の三次元画像に重ねて配置することもできる。ウィンドウの大きさとしては、画面全体〜画面の１／１６程度のパターンを選択できる。また、フレームの形状も、金色の額や動物の絵といった複数の形状から選択できる。
【００４８】
また、立ち位置のパターンには、複数拠点同映像／音声ソース視聴モードで通話と同時に表示される「他の映像／音声ソース」のウィンドウの座標、大きさ、透過率、フレームの形状等も含まれる。すなわち、「他の映像／音声ソース」が全画面表示され、マスターとスレーブの映像／音声通話の映像のウィンドウが手前に表示される設定をしたり、「他の映像／音声ソース」を画面の上半分に表示し、映像／音声通話の映像のウィンドウを画面の下部に並べる「タイリング」の設定をしたりできる。
マスターの制御部１００は、設定画面をリアルタイム（実時間）でスレーブに送信する設定画面連動を行う。
なお、マスターがリモコンの十字ボタンと決定ボタン等を用いて、スレーブのユーザの立ち位置を自由に決定するように構成してもよい。
【００４９】
（ステップＳ１１２）
ここで、制御部１００は、映像／音声通話部１２１を用いて、立ち位置情報送信処理を行う。
この処理では、マスターのテレビジョン装置１０の制御部１００が、記憶部１２３から決定された立ち位置の設定情報を取得し、各スレーブのテレビジョン装置１０へ設定情報として送信する。
【００５０】
（ステップＳ１１３）
制御部１００は、映像／音声出力調整部１２２を用いて、スピーカ割り当て／重み付け処理を行う。
具体的には、マスターとスレーブの各テレビジョン装置１０の制御部１００は、立ち位置の設定情報に従って、表示部１１０に映像／音声通話の映像のウィンドウを配置する。この上で、制御部１００は、映像／音声通話の通話音声について、「スピーカ割り当て」と「重み付け」の情報の計算を行う。
【００５１】
〔立ち位置情報からのスピーカ割り当ての例〕
図４を参照して説明すると、本実施形態においては、制御部１００は、立ち位置の設定情報に従って、各スピーカへの音声の出力の割り当て及びバランス（重み付け）を決定する。つまり、制御部１００は、表示部１１０上の画面上のユーザの表示位置により、音声の出力も変化させる。
【００５２】
図４は、スレーブのユーザＰ２が表示部１１０の右寄り下にウィンドウ１１１として表示される例である。
このような位置情報の場合、まず、制御部１００は、映像／音声通話の相手方であるユーザＰ２の通話音声を主にＲＬスピーカ７０、ＲＲスピーカ８０、及びサブウーファ６０で出力するように割り当てる。そして、制御部１００は、後述するように、音声出力部１３０を用い、ユーザＰ２の通話音声が右寄りから聞こえるよう重み付けして出力する。
また、制御部１００は、「他の映像／音声ソース」を、表示部１１０に表示する。この際に、制御部１００は、テレビジョン番組等の「他の映像／音声ソース」の音声は、ＦＬスピーカ３０〜ＲＲスピーカ８０の全てのスピーカから、５．１ｃｈの音声を出力するよう割り当てる。
なお、「他の映像／音声ソース」の音声をフロント・スピーカのみから出力するように設定することもできる。このように構成しても、リア・スピーカに対応する音声をバーチャル・サラウンドで再生することで、サラウンド再生と、明瞭な通話音声の再生を両立させることができる。
【００５３】
〔立ち位置の設定情報からの重み付けの例〕
次に、図５を参照して、音声出力の再生割合を変更する「重み付け」の例について説明する。
図５は、通話音声をリア・スピーカであるＲＬスピーカ７０、ＲＲスピーカ８０から出力する際の重み付けの例である。この場合、例えば、下記の相関関数の式（１）のように重み付けを設定する：
ｆｌ（ｘ）＋ｆｒ（ｘ）＝Ａ  ……式（１）
上記の式（１）において、ｆｌ（ｘ），ｆｒ（ｘ）≧０、Ａ＝所定値である。また、ｆｌ（ｘ）はＲＬスピーカ７０の重み付け関数、ｆｒ（ｘ）はＲＲスピーカ８０の重み付け関数である。
式（１）において、Ａは、例えば、通話音声を出力する際の出力レベルの最大値で計算しやすい値である、Ａ＝１．０、１０、２５６等の値を設定する。図５では、Ａ＝１０の例を示す。
また、ｆｌ（ｘ）、ｆｒ（ｘ）のｘは、マスターの右側を「＋」とした場合の、マスターとスレーブとの距離を示す。
このｘは、例えば、立ち位置の設定情報の画面上の座標とＡとを基に、下記の式（２）で算出する。
ｘ＝（画面上の座標−画面の中心）／画面の大きさ＊Ａ  ……式（２）
つまり、例えば、ユーザＰ２のウィンドウの座標が表示部１１０の画面の右側で、画面の大きさが横１９２０ｐｘ（ｐｉｘｅｌ）でユーザＰ２のウィンドウの横（Ｘ軸）座標の中心が１５３６ｐｘの場合、１９２０／２＝９６０が画面の中心となり、
ｘ＝（１５３６−９６０）／１９２０＊１０＝＋３
と算出できる。
【００５４】
また、サブウーファ６０に関しては、制御部１００は、上述の式（１）、（２）とは関係なく、つまりリア・スピーカの出力と相関する重み付けを行わない。つまり、制御部１００は、サブウーファ６０からは、通話音声を所定音量でそのまま出力する。
サブウーファ６０から、通話音声を重み付けせず出力することで、複数のユーザでの通話音声と、他の映像ソースの音声の低音がそのまま放出される。これにより、通話音声が背後のみから聞こえる感じを和らげることができる。つまり、他のユーザが近くにいるように感じられるため、一体感が得られる。
なお、制御部１００は、立ち位置の設定情報におけるユーザのウィンドウの大きさを基に、重み付けすることもできる。すなわち、制御部１００は、サブウーファ６０においても式（１）と式（２）を用い、ウィンドウが大きいほど、Ａまでの範囲でｘを大きくするといった処理も可能である。
【００５５】
なお、この上述の式（１）と式（２）はＸ軸の座標に注目して、リア・スピーカの音声出力についての重み付けを行う例であるが、これ以外の重み付けも可能である。たとえば、ユーザの映像／音声通話のウィンドウの画面上の上下位置の座標（Ｙ座標）により、リア・スピーカの音声出力を変更することもできる。
また、ユーザＰ２の通話音声を、フロント・スピーカから、重み付けして、通常はリア・スピーカよりも小音量で再生することもできる。この場合も、リア・スピーカから重み付けされた音声を出力する。また、後述するように、フロント・スピーカは通話音声の残響成分のみ再生するような構成も可能である。このように構成すると、映像／音声通話の接続相手が背後にいるように聞こえることを防ぐことができる。これは、他の映像／音声ソースが５．１ｃｈの音声の場合、リア・スピーカからも音声が再生されるためである。つまり、映像／音声通話の通話音声をフロント・スピーカにも重み付けし、小音量で再生することで、より自ユーザの近くに、他ユーザの通話音声を音像定位させることができるため、ライブ感、一体感が高まる。
【００５６】
図５（ａ）は、自機器のユーザＰ１がマスターの際、スレーブのユーザＰ２の位置関係の例を示す図である。つまり、図５（ａ）は、ユーザＰ２の立ち位置の情報が、ユーザＰ１の右側＋３の位置であることを示している。
図５（ｂ）は、ｘ＝＋３の際の、ｆｌ（ｘ）の値を示すグラフである。この図では、ｆｌ（ｘ）が＋２となる。
図５（ｃ）は、ｘ＝＋３の際の、ｆｒ（ｘ）の値を示すグラフである。この図では、ｆｒ（ｘ）が＋８となる。
【００５７】
次に、図６を参照して、ＲＬスピーカ７０とＲＲスピーカ８０の最終的な出力信号について説明する。
ＲＬスピーカ７０、ＲＲスピーカ８０の出力信号（出力ゲイン）は、上述の重み付けの相関関数のｘにより、通話音声の周波数帯域毎の音声信号と、それぞれのスピーカの周波数特性を基に、下記の式（３）及び式（４）で一意的に決定される。
Ｓ＿Ｏｕｔ，ｌ（ｆ）＝Ｓ＿Ｉｎ（ｆ）＊Ｇｌ（ｆ）＊ｆｌ（ｘ）／Ａ  ……式（３）
Ｓ＿Ｏｕｔ，ｒ（ｆ）＝Ｓ＿Ｉｎ（ｆ）＊Ｇｒ（ｆ）＊ｆｒ（ｘ）／Ａ  ……式（４）
上述の式（３）と式（４）において、Ｓ＿Ｏｕｔ，ｌ（ｆ）、Ｓ＿Ｏｕｔ，ｒ（ｆ）とは、それぞれ、ＲＬスピーカ７０、ＲＲスピーカ８０における、周波数帯域毎の出力信号である。
また、Ｓ＿Ｉｎ（ｆ）は、映像／音声通話における、各他機器からの周波数帯域毎の通話音声の信号である。
また、Ｇｌ（ｆ）、Ｇｒ（ｆ）は、それぞれ、ＲＬスピーカ７０、ＲＲスピーカ８０の周波数特性の値である。
サブウーファ６０に関しては、制御部１００は、低音域のみ出力するため、周波数帯域に対応した演算をせず、音量のみ調整して音声出力することができる。
【００５８】
図６（ａ）は、上述の式（３）と式（４）のＳ＿Ｉｎ（ｆ）の例を示す概念図である。このように、Ｓ＿Ｉｎ（ｆ）は、例えば数ｍｓ程度の所定時間範囲の入力信号をＦＦＴ（高速フーリエ変換）等して、周波数帯域ｆ’毎に入力のレベルを算出したものである。
図６（ｂ）は、式（３）と式（４）のＧｌ（ｆ）又はＧｒ（ｆ）の例を示す概念図である。Ｇｌ（ｆ）又はＧｒ（ｆ）は、周波数帯域ｆ’毎の周波数応答（ｄＢ）等の計算式やテーブル等を用いる。この計算式やテーブル等は、それぞれのスピーカに合わせて、各テレビジョン装置１０でユーザがいくつかのパターン等から設定できる。また、制御部１０００は、音声入力部２２０から、各スピーカの周波数応答を測定し。各スピーカにおけるＧｌ（ｆ）又はＧｒ（ｆ）に対応する周波数応答のデータを作成し、記憶部１２３に記憶することもできる。
【００５９】
具体例として、図５のようにスレーブのユーザＰ２が、マスターのユーザＰ１の右側＋３の位置にいるとした場合、マスターのスピーカの音分布は｛ｆｌ（ｘ）、ｆｒ（ｘ）｝＝（２，８）となる。
この際、制御部１００は、周波数ｆ'の出力信号を、下式で計算できる。
Ｓ＿Ｏｕｔ，ｌ（ｆ'）＝Ｓ＿Ｉｎ（ｆ'）＊Ｇｌ（ｆ'）×２／１０
Ｓ＿Ｏｕｔ，ｒ（ｆ'）＝Ｓ＿Ｉｎ（ｆ'）＊Ｇｒ（ｆ'）×８／１０
このように、本実施形態では、リア・スピーカの周波数応答に合わせた出力信号を出力する。これにより、フロント・スピーカのように周波数特性が広帯域でないリア・スピーカに左右の重み付けして出力しても、明瞭な通話音声を出力することができる。
【００６０】
なお、上述の式（３）と式（４）では、リア・スピーカの周波数応答についての出力調整を行ったが、これに限られない。たとえば、制御部１００は、音声出力部１３０により、映像／音声通話の位相応答や残響レベル等を調整することもできる。これにより、フロント・スピーカからも残響成分を出力し、他のユーザがあたかも自機器のユーザの側にいるかのような音場を作成できる。
また、映像／音声通話のウィンドウの画面上の上下位置の座標（Ｙ座標）の値、ウィンドウの大きさ、及び種類により、フロント・スピーカ及びリア・スピーカから出力する音量や残響を調整することもできる。たとえば、ウィンドウの大きさが大きかったり、Ｙ座標が上であると、フロント・スピーカからの出力音量を大きくすることができる。これにより、映像／音声通話の臨場感を調整することができる。
【００６１】
図７は、三人横並びで、マスターを中心にして、左右下にスレーブのユーザＰ２、Ｐ３のウィンドウ１１２、１１３がそれぞれ表示される例である。この例でも、「他の映像／音声ソース」が、表示部１１０に全画面表示されている。
ここで、ユーザＰ２の上述の式（２）でｘ＝−３、ユーザＰ３の式（２）でｘ＝＋３とすると、
ユーザＰ２：｛ｆｌ（ｘ）、ｆｒ（ｘ）｝＝（８，２）
ユーザＰ３：｛ｆｌ（ｘ）、ｆｒ（ｘ）｝＝（２，８）
となる。
これらの重み付けに従って、制御部１００は、立ち位置が左側のユーザＰ２では、映像／音声通話の通話音声について、ＲＬスピーカ７０に対して音量を大きくするよう重み付けして出力する。また、制御部１００は、右側のユーザＰ３の通話音声に対しては、ＲＲスピーカ８０の音量を大きくするよう重み付けして出力する。
また、制御部１００は、サブウーファ６０からは、ユーザＰ２、ユーザＰ３とも、映像／音声通話の音声をほぼ同一の音量で出力する。
このように、本実施形態では、リア・スピーカから、立ち位置の設定情報に従って重み付けをして映像／音声通話の音声を出力する。
これにより、接続相手のユーザＰ２、Ｐ３が、自機器のユーザＰ１の左隣や右隣にいるかのような音場を生成できる。
【００６２】
（ステップＳ１１４）
ここで、制御部１００は、映像／音声通話部１２１を用いて、番組決定／送信処理を行う。
この処理において、マスターのテレビジョン装置１０の制御部１００は、マスターのユーザによる、リモコン等の入力部による「他の映像／音声ソース」の選択を検知する。この上で、マスターのテレビジョン装置１０の制御部１００は、各ユーザのテレビジョン装置１０に、検知した選択に係る制御信号を送信する。
これを受信した各スレーブのテレビジョン装置１０の制御部１００は、「他の映像／音声ソース」を切り換える。
【００６３】
（ステップＳ１１５）
次に制御部１００は、映像／音声通話部１２１を用い、映像／音声出力処理を行う。
具体的には、マスターのテレビジョン装置１０の制御部１００は、全ユーザのテレビジョン装置１０で設定ＯＳＤ表示を閉じるよう指示信号を送信する。
これにより、全ユーザのテレビジョン装置１０で、制御部１００は、立ち位置の設定情報に従って、表示部１１０の映像／音声通話のウィンドウ内に映像出力する。
この上で、各テレビジョン装置１０の制御部１００は、立ち位置の設定情報に従った上述の演算の結果により、音声出力部１３０のＤＳＰやミキサ等を制御する。
これにより、各スピーカへ映像／音声通話の通話音声を割り振り、重み付けされた音声が出力開始される。
以上により、本発明の実施の形態に係る音声通話出力割り当て重み付け処理を終了する。
【００６４】
以上のように構成することで、以下のような効果を得ることができる。
まず、本発明の実施の形態に係るテレビジョン装置１０は、映像／音声通話と、他の映像／音声ソースの視聴を同時にするときに、主に、ＲＬスピーカ７０、ＲＲスピーカ８０、及びサブウーファ６０から映像／音声通話の通話音声を出力する。これにより、映像／音声通話の通話音声とＴＶ映像の音声が混ざって、どちらの音声も聞きづらくなることを避けることができる。この際、リア・スピーカ以外にサブウーファ６０からも通話音声を出力することで、通話音声が背後に音像定位することを防ぎ、臨場感が得られる。
また、テレビジョン装置１０は、二つ以上の異なるユーザと映像／音声通話をするときに、立ち位置の設定情報に従って、画面の描画と通話音声の各スピーカへの割り振りと重み付けを制御できる。これにより、それぞれのテレビジョン装置１０の設置場所で、まるで横に並んでスポーツ観戦等の番組を視聴しているかのようなライブ感、一体感が得られる。
【００６５】
なお、上述の実施の形態においては、テレビジョン装置１０を用いて映像／音声通話をする例について説明した。
しかしながら、本発明は、テレビジョン装置１０の表示部１１０を用いない音声通話においても対応できる。つまり、音声通話の通話音声を、５．１ｃｈ等のサラウンド出力する場合でも、スピーカの割り当てと重み付けをすることが可能である。これにより、複数のユーザ同士での音声チャットにおいて、臨場感、ライブ感、一体感が得られる。また、テレビジョン装置以外にも、ＡＶアンプ・システム、ＤＬＮＡネットワークプレーヤ、プロジェクタ、ＢＤ／ＤＶＤプレーヤ／レコーダ、ＰＣ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ）等においても用いることができる。
また、５．１ｃｈでない、例えば７．１ｃｈのサラウンド音声の場合は、同じくリア側のスピーカの位置関係に従った重み付けを行うことができる。
また、音声出力部１３０が音の方向性を強調する演算を行うことで、例えば、他の映像／音声ソースの台詞等のヒトの声をＣスピーカ５０から主に出力するようにする構成も可能である。この場合、映像／音声通話の通話音声は、リア・スピーカの他に、ユーザ毎にＦＬスピーカ３０又はＦＲスピーカ４０から出力しても、通話音声と台詞等とを区別しやすい。
また、いわゆる「サウンドビーム」方式のように、フロント側に設置された複数のスピーカの位相を調整して、壁等の反射を用いてリア側の音声を再生させる方式や、バーチャルサラウンド方式の場合でも、リア・スピーカに対応する音声出力の重み付けを行うことが好適である。つまり、この重み付けを行った音声信号を、対応するスピーカから出力することができる。
また、テレビジョン装置１０が３Ｄ（三次元）映像を表示するテレビジョン装置の場合には、立ち位置の設定情報に、三次元座標での情報を用いることもできる。この場合、各ユーザの奥行き情報を基に、フロント・スピーカとリア・スピーカの間で重み付けをすることができる。
【００６６】
なお、上記実施の形態の構成及び動作は例であって、本発明の趣旨を逸脱しない範囲で適宜変更して実行することができることは言うまでもない。
【符号の説明】
【００６７】
５  ネットワーク
１０、１１  テレビジョン装置
１６  ロビーサーバ
２０、２１  カメラ
３０  ＦＬスピーカ
４０  ＦＲスピーカ
５０  Ｃスピーカ
６０  サブウーファ
７０  ＲＬスピーカ
８０  ＲＲスピーカ
１００  制御部
１１０  表示部
１１１、１１２、１１３  ウィンドウ
１２０  映像／音声処理部
１２１  映像／音声通話部
１２２  映像／音声出力調整部
１２３  記憶部
１３０  音声出力部
１４０  ネットワーク接続部
２１０  モード切り換えボタン
２２０  音声入力部
Ｐ１、Ｐ２、Ｐ３  ユーザ
Ｘ  映像／音声通話システム
【図１】
2013138352.tif 000003
【図２】
2013138352.tif 000004
【図３】
2013138352.tif 000005
【図４】
2013138352.tif 000006
【図５】
2013138352.tif 000007
【図６】
2013138352.tif 000008
【図７】
2013138352.tif 000009
【図８】
2013138352.tif 000010
【図９】
2013138352.tif 000011