(57)【要約】【課題】会話音声を優先して相手に聞かせたい場合、自分（送話）側から操作することにより、相手（受話）側の出音レベル設定が変更されて会話音声が優先して出音されるように設定し、相手の操作による出音レベル設定の変更を禁止もしくは制限する。【解決手段】通話装置１０１ａは、通話装置１０１ｂと音声を含む通話を行うと共に、通話装置１０１ｂ間でコンテンツ音声を同時に出力可能とし、通話装置１０１ｂの出音レベル設定を変更指示するためのモード情報を通話装置１０１ｂに送信する手段を備える。通話装置１０１ａは、前記モード情報を送信することにより、利用者（Ａさん）が発した会話音声の音量が通話装置１０１ｂにおけるコンテンツ音声の音量よりも大きくなるように通話装置１０１ｂの出音レベル設定を変更すると共に、通話装置１０１ｂにモード情報を送信した後に、一時的に、通話装置１０１ｂによる出音レベル設定の変更を禁止あるいは制限する。【選択図】図１
2006295552.tif 000002
【特許請求の範囲】
【請求項１】
通話相手が使用する他の通話装置と音声を含む通話を行うと共に、該他の通話装置との間で前記音声以外の他の音声を同時に出力可能な通話装置であって、前記他の通話装置の出音レベル設定を変更指示するための出音レベル設定変更指示情報を前記他の通話装置に送信する手段を備え、該出音レベル設定変更指示情報を送信することにより、前記通話装置の利用者が発した会話音声が前記他の通話装置において明瞭に聞こえるように、前記他の通話装置の出音レベル設定を変更することを特徴とする通話装置。
【請求項２】
請求項１に記載の通話装置であって、前記他の音声は、コンテンツに付随するコンテンツ音声であり、該コンテンツ音声を前記通話装置と前記他の通話装置から出力可能とし、該他の通話装置におけるコンテンツ音声の出力に同期させて該コンテンツ音声を出力する手段を備えていることを特徴とする通話装置。
【請求項３】
請求項１に記載の通話装置であって、前記他の音声は、コンテンツに付随するコンテンツ音声であり、該コンテンツ音声を入力する手段と、該入力したコンテンツ音声を出力する手段と、該入力したコンテンツ音声を前記他の通話装置に送信する手段とを備えていることを特徴とする通話装置。
【請求項４】
請求項２又は３に記載の通話装置であって、前記出音レベル設定変更指示情報は、前記他の通話装置において前記通話装置の利用者が発した会話音声の音量が前記コンテンツ音声の音量よりも大きくなるように指示する情報であることを特徴とする通話装置。
【請求項５】
請求項２又は３に記載の通話装置であって、前記出音レベル設定変更指示情報は、前記他の通話装置において前記コンテンツ音声の音量が前記通話装置の利用者が発した会話音声の音量よりも小さくなるように指示する情報であることを特徴とする通話装置。
【請求項６】
請求項２又は３に記載の通話装置であって、前記他の通話装置が多チャネル音声を再生可能なスピーカを備えており、前記出音レベル設定変更指示情報は、前記他の通話装置において前記通話装置の利用者が発した会話音声と前記コンテンツ音声を異なるスピーカで独立して出音させるよう制御する情報であることを特徴とする通話装置。
【請求項７】
請求項１乃至６のいずれか１に記載の通話装置であって、前記他の通話装置に前記出音レベル設定変更指示情報を送信した後、一時的に、前記他の通話装置による出音レベル設定の変更を禁止することを特徴とする通話装置。
【請求項８】
請求項１乃至６のいずれか１に記載の通話装置であって、前記他の通話装置に前記出音レベル設定変更指示情報を送信した後、一時的に、前記他の通話装置による出音レベル設定の変更を制限することを特徴とする通話装置。
【請求項９】
請求項７又は８に記載の通話装置であって、前記出音レベル設定変更指示情報による出音レベル設定変更指示を解除するための出音レベル設定変更終了指示情報を送信する手段を備え、前記他の通話装置に前記出音レベル設定変更指示情報を送信してから、前記出音レベル設定変更終了指示情報を送信するまでの期間、前記他の通話装置による出音レベル設定の変更を禁止もしくは制限することを特徴とする通話装置。
【請求項１０】
請求項９に記載の通話装置であって、前記他の通話装置に前記出音レベル設定変更指示情報を送信するための操作手段を備え、前記通話装置の利用者が前記操作手段を操作している間、前記他の通話装置に前記出音レベル設定変更指示情報を送信し、前記操作手段の操作をやめたときに、前記他の通話装置に前記出音レベル設定変更終了指示情報を送信することを特徴とする通話装置。
【請求項１１】
請求項９に記載の通話装置であって、前記他の通話装置に前記出音レベル設定変更指示情報を送信するための操作手段を備え、前記通話装置の利用者が前記操作手段を操作したときに、前記他の通話装置に前記出音レベル設定変更指示情報を送信し、該出音レベル設定変更指示情報を送信してから所定時間が経過した後に、前記他の通話装置に前記出音レベル設定変更終了指示情報を送信することを特徴とする通話装置。
【請求項１２】
請求項１乃至１１のいずれか１に記載の通話装置であって、前記他の通話装置に前記出音レベル設定変更指示情報を送信する際に、前記他の通話装置の利用者が発した会話音声が前記通話装置において明瞭に聞こえるように、前記通話装置の出音レベル設定を変更する手段を備えていることを特徴とする通話装置。
【請求項１３】
通話相手が使用する他の通話装置と音声を含む通話を行うと共に、該他の通話装置との間で前記音声以外の他の音声を同時に出力可能な通話装置であって、前記他の通話装置から出音レベル設定変更指示情報を受信する手段と、該出音レベル設定変更指示情報を受信した際に、前記他の通話装置の利用者が発した会話音声が前記通話装置において明瞭に聞こえるように、前記通話装置の出音レベル設定を変更する手段とを備えていることを特徴とする通話装置。
【請求項１４】
請求項１３に記載の通話装置であって、前記他の音声は、コンテンツに付随するコンテンツ音声であり、該コンテンツ音声を前記通話装置と前記他の通話装置から出力可能とし、該他の通話装置におけるコンテンツ音声の出力に同期させて該コンテンツ音声を出力する手段を備えていることを特徴とする通話装置。
【請求項１５】
請求項１３に記載の通話装置であって、前記他の音声は、コンテンツに付随するコンテンツ音声であり、該コンテンツ音声を入力する手段と、該入力したコンテンツ音声を出力する手段と、該入力したコンテンツ音声を前記他の通話装置に送信する手段とを備えていることを特徴とする通話装置。
【請求項１６】
請求項１４又は１５に記載の通話装置であって、前記出音レベル設定変更指示情報は、前記通話装置において前記他の通話装置の利用者が発した会話音声の音量が前記コンテンツ音声の音量よりも大きくなるように指示する情報であることを特徴とする通話装置。
【請求項１７】
請求項１４又は１５に記載の通話装置であって、前記出音レベル設定変更指示情報は、前記通話装置において前記コンテンツ音声の音量が前記他の通話装置の利用者が発した会話音声の音量よりも小さくなるように指示する情報であることを特徴とする通話装置。
【請求項１８】
請求項１４又は１５に記載の通話装置であって、前記他の通話装置が多チャネル音声を再生可能なスピーカを備えており、前記出音レベル設定変更指示情報は、前記他の通話装置において前記通話装置の利用者が発した会話音声と前記コンテンツ音声を異なるスピーカで独立して出音させるよう制御する情報であることを特徴とする通話装置。
【請求項１９】
請求項１３乃至１８のいずれか１に記載の通話装置であって、前記他の通話装置から前記出音レベル設定変更指示情報を受信した後、一時的に、前記通話装置の出音レベル設定の変更を禁止することを特徴とする通話装置。
【請求項２０】
請求項１３乃至１８のいずれか１に記載の通話装置であって、前記他の通話装置から前記出音レベル設定変更指示情報を受信した後、一時的に、前記通話装置の出音レベル設定の変更を制限することを特徴とする通話装置。
【請求項２１】
請求項１９又は２０に記載の通話装置であって、前記出音レベル設定変更指示情報による出音レベル設定変更指示を解除するための出音レベル設定変更終了指示情報を受信する手段を備え、前記他の通話装置から前記出音レベル設定変更指示情報を受信してから、前記出音レベル設定変更終了指示情報を受信するまでの期間、前記通話装置の出音レベル設定の変更を禁止もしくは制限することを特徴とする通話装置。
【請求項２２】
請求項１９又は２０に記載の通話装置であって、前記他の通話装置から前記出音レベル設定変更指示情報を受信した後から所定期間、前記通話装置の出音レベル設定の変更を禁止もしくは制限することを特徴とする通話装置。
【請求項２３】
請求項１９乃至２２のいずれか１に記載の通話装置であって、前記通話装置の出音レベル設定の変更を一時的に禁止もしくは制限した後、該出音レベル設定の変更が可能となったときに、前記出音レベル設定の変更が禁止もしくは制限される直前の出音レベル設定に戻すことを特徴とする通話装置。
【請求項２４】
請求項１９乃至２２のいずれか１に記載の通話装置であって、前記他の通話装置からの前記出音レベル設定変更指示情報による出音レベル設定変更指示を利用者が無効にする変更指示無効手段を備え、前記出音レベル設定変更指示を無効にした際、前記出音レベル設定変更指示情報を受信した場合でも前記通話装置の出音レベル設定が変更されないことを特徴とする通話装置。
【請求項２５】
通話相手が使用する他の通話装置と音声を含む通話を行うと共に、該他の通話装置との間で前記音声以外の他の音声を同時に出力可能な通話装置であって、該通話装置の利用者が発した会話音声と前記他の音声との混合の音量比を指定するための混合音量比情報を前記他の通話装置から受信する手段と、該受信した混合音量比情報に従って前記会話音声と前記他の音声を混合して前記他の通話装置に送信する混合音声を生成する手段とを備えていることを特徴とする通話装置。
【請求項２６】
請求項２５に記載の通話装置であって、前記他の音声は、コンテンツに付随するコンテンツ音声であり、該コンテンツ音声を前記通話装置と前記他の通話装置から出力可能とし、該他の通話装置におけるコンテンツ音声の出力に同期させて該コンテンツ音声を出力する手段を備えていることを特徴とする通話装置。
【請求項２７】
請求項２５又は２６に記載の通話装置であって、前記他の通話装置に送信する混合音声の混合音量比を変更する手段を備え、前記通話装置の利用者が発した会話音声が前記他の通話装置において明瞭に聞こえるように、前記他の通話装置に送信する混合音声の混合音量比を変更することを特徴とする通話装置。
【請求項２８】
請求項２７に記載の通話装置であって、前記他の音声は、コンテンツに付随するコンテンツ音声であり、前記混合音声の混合音量比の変更は、前記通話装置の利用者が発した会話音声の比を大きくし、前記コンテンツ音声の比を小さくする変更であることを特徴とする通話装置。
【請求項２９】
請求項２７に記載の通話装置であって、前記他の音声は、コンテンツに付随するコンテンツ音声であり、前記他の通話装置が多チャネル音声を再生可能なスピーカを備えており、前記混合音声の混合音量比の変更は、前記他の通話装置において前記通話装置の利用者が発した会話音声と前記コンテンツ音声を異なるスピーカで独立して出音させるよう混合する変更であることを特徴とする通話装置。
【請求項３０】
請求項２７乃至２９のいずれか１に記載の通話装置であって、前記他の通話装置に送信する混合音声の混合音量比を変更した後、一時的に、前記他の通話装置の操作による混合音量比の変更を禁止することを特徴とする通話装置。
【請求項３１】
請求項２７乃至２９のいずれか１に記載の通話装置であって、前記他の通話装置に送信する混合音声の混合音量比を変更した後、一時的に、前記他の通話装置の操作による混合音量比の変更を制限することを特徴とする通話装置。
【請求項３２】
請求項３０又は３１に記載の通話装置であって、前記他の通話装置に送信する混合音声の混合音量比を変更した後、該変更を解除する手段を備え、混合音量比を変更してから変更を解除するまでの期間、前記他の通話装置の操作による混合音量比の変更を禁止もしくは制限することを特徴とする通話装置。
【請求項３３】
請求項３０又は３１に記載の通話装置であって、前記他の通話装置に送信する混合音声の混合音量比を変更した後から所定時間、前記他の通話装置の操作による混合音量比の変更を禁止もしくは制限することを特徴とする通話装置。
【請求項３４】
請求項３０乃至３３のいずれか１に記載の通話装置であって、前記他の通話装置の操作による混合音量比の変更が禁止もしくは制限された後、前記他の通話装置の操作による混合音量比の変更が可能となったときに、前記混合音量比の変更が禁止もしくは制限される直前の混合音量比設定に戻すことを特徴とする通話装置。
【請求項３５】
請求項３０乃至３３のいずれか１に記載の通話装置であって、前記他の通話装置に送信する混合音声の混合音量比を前記通話装置が変更するのを無効にする指示情報を、前記他の通話装置から受信する手段を備え、該指示情報を受信した際、前記他の通話装置に送信する混合音声の混合音量比は、前記通話装置によって変更されないことを特徴とする通話装置。
【請求項３６】
通話相手が使用する他の通話装置と音声を含む通話を行うと共に、該他の通話装置との間で前記音声以外の他の音声を同時に出力可能な通話装置であって、前記他の通話装置の利用者が発した会話音声と前記他の音声との混合の音量比を指定するための混合音量比情報を前記他の通話装置に送信する手段と、該送信した混合音量比情報に従って前記他の通話装置の利用者が発した会話音声と前記他の音声が混合された混合音声を前記他の通話装置から受信する手段とを備えていることを特徴とする通話装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、通話装置、より詳細には、電話通信などネットワークを介して双方向音声通話を行なう際に、通常の音声通話で扱っている話者の声や周りの音を意味する会話音声と、ネットワーク上にある動画ファイルの音声やビデオデッキに録画された番組などのコンテンツの音を意味するコンテンツ音声といった複数の音声を同時に出力しながら音声コミュニケーションを行なう通話装置に関する。
【背景技術】
【０００２】
従来、通話する相手（通話相手）に自分の声を聞かせるために、通話相手の通話装置の音量を制御する技術が知られている。例えば、特許文献１には、自動車などの車両に搭載されて、交通事故、急病などの緊急時に警察、緊急通報センタなど緊急通報システムを管轄するセンタに現在の車両の位置情報、登録車両などのデータを送信する緊急通報システム端末機器に関し、特に、緊急通報連絡時のハンズフリーによる音声通話において、緊急通報システムを管轄するセンタからの音声信号の音量レベル制御を行なう緊急通報システムが開示されている。この技術を用いることにより、緊急通報時のハンズフリー通話の音量レベルが一定レベル以上になるように制御することによって、緊急通報センタからの受信音声を確実に鳴音させることが可能となる。
【特許文献１】特開２０００−２２２６６２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、会話音声とコンテンツ音声といった複数の音声を同時に出力しながら音声コミュニケーションを行なうような状況で会話音声を相手に確実に聞かせるためには、相手の通話装置で会話音声の音量レベルが一定レベル以上になるように制御するだけでは不十分である。
【０００４】
図３０は、従来のシステムにおいて会話音声とコンテンツ音声といった複数の音声を同時に出力しながら音声コミュニケーションを行なう状況を説明するための概念図で、図中、５０１ａはＡさん宅の通話装置である情報処理端末、５０１ｂはＢさん宅の通話装置である情報処理端末、５０２はネットワーク、５０３は各種コンテンツを提供可能なコンテンツサーバを示す。本例では、運動会のビデオコンテンツを音声コミュニケーション両方の端末（情報処理端末５０１ａと情報処理端末５０１ｂ）で流しながら会話を行なっている。すなわち、情報処理端末５０１ａでは、運動会のビデオコンテンツの音声「わーわー」と相手（情報処理端末５０１ｂのユーザであるＢさん）の会話音声「よかったね」とが出力されている。また、情報処理端末５０１ｂでは、運動会のビデオコンテンツの音声「わーわー」と相手（情報処理端末５０１ａのユーザであるＡさん）の会話音声「運動会楽しかったよ」とが出力されている。
【０００５】
このような状況で、会話を確実に相手側に聞かせたいときに、相手側で出音される会話音声の音量レベルが一定レベル以上になるよう制御できる機能を備えているだけでは、会話を確実に相手に聞かせられるとは限らない。その詳細を下記の図３１に基づいて説明する。
【０００６】
図３１は、図３０に示した従来システムで発生する問題点を説明するための図である。まず、Ａさんが会話を確実に相手に聞かせるために、Ｂさん側で出音される会話音声の音量レベルを上げたとすると、情報処理端末５０１ｂで出力される会話音声「運動会楽しかったよ」の音量が大きくなる。しかし、そのときＢさんがビデオコンテンツの音声の音量レベルを会話音声の音量レベルと同等、もしくは上回るよう調整したとする。この場合、情報処理端末５０１ｂで出力されるビデオコンテンツの音声「わーわー」の音量が、会話音声「運動会楽しかったよ」の音量と同等もしくは上回って設定されるため、Ｂさん側では会話音声がコンテンツ音声にかき消されて、Ｂさんは会話音声を十分に聞き取れない。つまり、Ａさんの意図と異なりＢさんに会話を聞かすことができず、コミュニケーション不良を引き起こすという問題がある。
【０００７】
本発明は、上述のごとき実情に鑑みてなされたものであり、会話音声とコンテンツ音声といった複数の音声を同時に出力しながら音声コミュニケーションを行なう状況においても、送話側から操作することにより、相手（受話）側において会話音声の出音を優先させて、会話音声を確実に相手に聞かせることができる通話装置を提供すること、をその目的とする。
【０００８】
すなわち、本発明の目的は、会話音声を優先して相手に聞かせたい場合、自分（送話）側から操作することにより、相手（受話）側の出音レベル設定が変更されて会話音声が優先して出音されるように設定し、同時に、相手の操作による出音レベル設定の調整を禁止もしくは制限する手段を提供することにある。
【課題を解決するための手段】
【０００９】
上記課題を解決するために、本発明の第１の技術手段は、通話相手が使用する他の通話装置と音声を含む通話を行うと共に、該他の通話装置との間で前記音声以外の他の音声を同時に出力可能な通話装置であって、前記他の通話装置の出音レベル設定を変更指示するための出音レベル設定変更指示情報を前記他の通話装置に送信する手段を備え、該出音レベル設定変更指示情報を送信することにより、前記通話装置の利用者が発した会話音声が前記他の通話装置において明瞭に聞こえるように、前記他の通話装置の出音レベル設定を変更することを特徴としたものである。
なお、ここで述べる通話装置は、少なくとも音声通信を備えるが、通常のテレビ電話と同様に音声通信と共に映像通信を行なってもよく、固定電話、テレビ電話、携帯電話、ＰＣなど様々な形態が考えられる。
【００１０】
第２の技術手段は、第１の技術手段において、前記他の音声は、コンテンツに付随するコンテンツ音声であり、該コンテンツ音声を前記通話装置と前記他の通話装置から出力可能とし、該他の通話装置におけるコンテンツ音声の出力に同期させて該コンテンツ音声を出力する手段を備えていることを特徴としたものである。
【００１１】
第３の技術手段は、第１の技術手段において、前記他の音声は、コンテンツに付随するコンテンツ音声であり、該コンテンツ音声を入力する手段と、該入力したコンテンツ音声を出力する手段と、該入力したコンテンツ音声を前記他の通話装置に送信する手段とを備えていることを特徴としたものである。
【００１２】
第４の技術手段は、第２又は第３の技術手段において、前記出音レベル設定変更指示情報は、前記他の通話装置において前記通話装置の利用者が発した会話音声の音量が前記コンテンツ音声の音量よりも大きくなるように指示する情報であることを特徴としたものである。
【００１３】
第５の技術手段は、第２又は第３の技術手段において、前記出音レベル設定変更指示情報は、前記他の通話装置において前記コンテンツ音声の音量が前記通話装置の利用者が発した会話音声の音量よりも小さくなるように指示する情報であることを特徴としたものである。
【００１４】
第６の技術手段は、第２又は第３の技術手段において、前記他の通話装置が多チャネル音声を再生可能なスピーカを備えており、前記出音レベル設定変更指示情報は、前記他の通話装置において前記通話装置の利用者が発した会話音声と前記コンテンツ音声を異なるスピーカで独立して出音させるよう制御する情報であることを特徴としたものである。
【００１５】
第７の技術手段は、第１乃至第６のいずれか１の技術手段において、前記他の通話装置に前記出音レベル設定変更指示情報を送信した後、一時的に、前記他の通話装置による出音レベル設定の変更を禁止することを特徴としたものである。
【００１６】
第８の技術手段は、第１乃至第６のいずれか１の技術手段において、前記他の通話装置に前記出音レベル設定変更指示情報を送信した後、一時的に、前記他の通話装置による出音レベル設定の変更を制限することを特徴としたものである。
【００１７】
第９の技術手段は、第７又は第８の技術手段において、前記出音レベル設定変更指示情報による出音レベル設定変更指示を解除するための出音レベル設定変更終了指示情報を送信する手段を備え、前記他の通話装置に前記出音レベル設定変更指示情報を送信してから、前記出音レベル設定変更終了指示情報を送信するまでの期間、前記他の通話装置による出音レベル設定の変更を禁止もしくは制限することを特徴としたものである。
【００１８】
第１０の技術手段は、第９の技術手段において、前記他の通話装置に前記出音レベル設定変更指示情報を送信するための操作手段を備え、前記通話装置の利用者が前記操作手段を操作している間、前記他の通話装置に前記出音レベル設定変更指示情報を送信し、前記操作手段の操作をやめたときに、前記他の通話装置に前記出音レベル設定変更終了指示情報を送信することを特徴としたものである。
【００１９】
第１１の技術手段は、第９の技術手段において、前記他の通話装置に前記出音レベル設定変更指示情報を送信するための操作手段を備え、前記通話装置の利用者が前記操作手段を操作したときに、前記他の通話装置に前記出音レベル設定変更指示情報を送信し、該出音レベル設定変更指示情報を送信してから所定時間が経過した後に、前記他の通話装置に前記出音レベル設定変更終了指示情報を送信することを特徴としたものである。
【００２０】
第１２の技術手段は、第１乃至第１１のいずれか１の技術手段において、前記他の通話装置に前記出音レベル設定変更指示情報を送信する際に、前記他の通話装置の利用者が発した会話音声が前記通話装置において明瞭に聞こえるように、前記通話装置の出音レベル設定を変更する手段を備えていることを特徴としたものである。
【００２１】
第１３の技術手段は、通話相手が使用する他の通話装置と音声を含む通話を行うと共に、該他の通話装置との間で前記音声以外の他の音声を同時に出力可能な通話装置であって、前記他の通話装置から出音レベル設定変更指示情報を受信する手段と、該出音レベル設定変更指示情報を受信した際に、前記他の通話装置の利用者が発した会話音声が前記通話装置において明瞭に聞こえるように、前記通話装置の出音レベル設定を変更する手段とを備えていることを特徴としたものである。
【００２２】
第１４の技術手段は、第１３の技術手段において、前記他の音声は、コンテンツに付随するコンテンツ音声であり、該コンテンツ音声を前記通話装置と前記他の通話装置から出力可能とし、該他の通話装置におけるコンテンツ音声の出力に同期させて該コンテンツ音声を出力する手段を備えていることを特徴としたものである。
【００２３】
第１５の技術手段は、第１３の技術手段において、前記他の音声は、コンテンツに付随するコンテンツ音声であり、該コンテンツ音声を入力する手段と、該入力したコンテンツ音声を出力する手段と、該入力したコンテンツ音声を前記他の通話装置に送信する手段とを備えていることを特徴としたものである。
【００２４】
第１６の技術手段は、第１４又は第１５の技術手段において、前記出音レベル設定変更指示情報は、前記通話装置において前記他の通話装置の利用者が発した会話音声の音量が前記コンテンツ音声の音量よりも大きくなるように指示する情報であることを特徴としたものである。
【００２５】
第１７の技術手段は、第１４又は第１５の技術手段において、前記出音レベル設定変更指示情報は、前記通話装置において前記コンテンツ音声の音量が前記他の通話装置の利用者が発した会話音声の音量よりも小さくなるように指示する情報であることを特徴としたものである。
【００２６】
第１８の技術手段は、第１４又は第１５の技術手段において、前記他の通話装置が多チャネル音声を再生可能なスピーカを備えており、前記出音レベル設定変更指示情報は、前記他の通話装置において前記通話装置の利用者が発した会話音声と前記コンテンツ音声を異なるスピーカで独立して出音させるよう制御する情報であることを特徴としたものである。
【００２７】
第１９の技術手段は、第１３乃至第１８のいずれか１の技術手段において、前記他の通話装置から前記出音レベル設定変更指示情報を受信した後、一時的に、前記通話装置の出音レベル設定の変更を禁止することを特徴としたものである。
【００２８】
第２０の技術手段は、第１３乃至第１８のいずれか１の技術手段において、前記他の通話装置から前記出音レベル設定変更指示情報を受信した後、一時的に、前記通話装置の出音レベル設定の変更を制限することを特徴としたものである。
【００２９】
第２１の技術手段は、第１９又は第２０の技術手段において、前記出音レベル設定変更指示情報による出音レベル設定変更指示を解除するための出音レベル設定変更終了指示情報を受信する手段を備え、前記他の通話装置から前記出音レベル設定変更指示情報を受信してから、前記出音レベル設定変更終了指示情報を受信するまでの期間、前記通話装置の出音レベル設定の変更を禁止もしくは制限することを特徴としたものである。
【００３０】
第２２の技術手段は、第１９又は第２０の技術手段において、前記他の通話装置から前記出音レベル設定変更指示情報を受信した後から所定期間、前記通話装置の出音レベル設定の変更を禁止もしくは制限することを特徴としたものである。
【００３１】
第２３の技術手段は、第１９乃至第２２のいずれか１の技術手段において、前記通話装置の出音レベル設定の変更を一時的に禁止もしくは制限した後、該出音レベル設定の変更が可能となったときに、前記出音レベル設定の変更が禁止もしくは制限される直前の出音レベル設定に戻すことを特徴としたものである。
【００３２】
第２４の技術手段は、第１９乃至第２２のいずれか１の技術手段において、前記他の通話装置からの前記出音レベル設定変更指示情報による出音レベル設定変更指示を利用者が無効にする変更指示無効手段を備え、前記出音レベル設定変更指示を無効にした際、前記出音レベル設定変更指示情報を受信した場合でも前記通話装置の出音レベル設定が変更されないことを特徴としたものである。
【００３３】
第２５の技術手段は、通話相手が使用する他の通話装置と音声を含む通話を行うと共に、該他の通話装置との間で前記音声以外の他の音声を同時に出力可能な通話装置であって、該通話装置の利用者が発した会話音声と前記他の音声との混合の音量比を指定するための混合音量比情報を前記他の通話装置から受信する手段と、該受信した混合音量比情報に従って前記会話音声と前記他の音声を混合して前記他の通話装置に送信する混合音声を生成する手段とを備えていることを特徴としたものである。
【００３４】
第２６の技術手段は、第２５の技術手段において、前記他の音声は、コンテンツに付随するコンテンツ音声であり、該コンテンツ音声を前記通話装置と前記他の通話装置から出力可能とし、該他の通話装置におけるコンテンツ音声の出力に同期させて該コンテンツ音声を出力する手段を備えていることを特徴としたものである。
【００３５】
第２７の技術手段は、第２５又は第２６の技術手段において、前記他の通話装置に送信する混合音声の混合音量比を変更する手段を備え、前記通話装置の利用者が発した会話音声が前記他の通話装置において明瞭に聞こえるように、前記他の通話装置に送信する混合音声の混合音量比を変更することを特徴としたものである。
【００３６】
第２８の技術手段は、第２７の技術手段において、前記他の音声は、コンテンツに付随するコンテンツ音声であり、前記混合音声の混合音量比の変更は、前記通話装置の利用者が発した会話音声の比を大きくし、前記コンテンツ音声の比を小さくする変更であることを特徴としたものである。
【００３７】
第２９の技術手段は、第２７の技術手段において、前記他の音声は、コンテンツに付随するコンテンツ音声であり、前記他の通話装置が多チャネル音声を再生可能なスピーカを備えており、前記混合音声の混合音量比の変更は、前記他の通話装置において前記通話装置の利用者が発した会話音声と前記コンテンツ音声を異なるスピーカで独立して出音させるよう混合する変更であることを特徴としたものである。
【００３８】
第３０の技術手段は、第２７乃至２９のいずれか１の技術手段において、前記他の通話装置に送信する混合音声の混合音量比を変更した後、一時的に、前記他の通話装置の操作による混合音量比の変更を禁止することを特徴としたものである。
【００３９】
第３１の技術手段は、第２７乃至２９のいずれか１の技術手段において、前記他の通話装置に送信する混合音声の混合音量比を変更した後、一時的に、前記他の通話装置の操作による混合音量比の変更を制限することを特徴としたものである。
【００４０】
第３２の技術手段は、第３０又は第３１の技術手段において、前記他の通話装置に送信する混合音声の混合音量比を変更した後、該変更を解除する手段を備え、混合音量比を変更してから変更を解除するまでの期間、前記他の通話装置の操作による混合音量比の変更を禁止もしくは制限することを特徴としたものである。
【００４１】
第３３の技術手段は、第３０又は第３１の技術手段において、前記他の通話装置に送信する混合音声の混合音量比を変更した後から所定時間、前記他の通話装置の操作による混合音量比の変更を禁止もしくは制限することを特徴としたものである。
【００４２】
第３３の技術手段は、第３０又は第３１の技術手段において、前記他の通話装置に送信する混合音声の混合音量比を変更した後から所定時間、前記他の通話装置の操作による混合音量比の変更を禁止もしくは制限することを特徴としたものである。
【００４３】
第３４の技術手段は、第３０乃至３３のいずれか１の技術手段において、前記他の通話装置の操作による混合音量比の変更が禁止もしくは制限された後、前記他の通話装置の操作による混合音量比の変更が可能となったときに、前記混合音量比の変更が禁止もしくは制限される直前の混合音量比設定に戻すことを特徴としたものである。
【００４４】
第３５の技術手段は、第３０乃至３３のいずれか１の技術手段において、前記他の通話装置に送信する混合音声の混合音量比を前記通話装置が変更するのを無効にする指示情報を、前記他の通話装置から受信する手段を備え、該指示情報を受信した際、前記他の通話装置に送信する混合音声の混合音量比は、前記通話装置によって変更されないことを特徴としたものである。
【００４５】
第３６の技術手段は、通話相手が使用する他の通話装置と音声を含む通話を行うと共に、該他の通話装置との間で前記音声以外の他の音声を同時に出力可能な通話装置であって、前記他の通話装置の利用者が発した会話音声と前記他の音声との混合の音量比を指定するための混合音量比情報を前記他の通話装置に送信する手段と、該送信した混合音量比情報に従って前記他の通話装置の利用者が発した会話音声と前記他の音声が混合された混合音声を前記他の通話装置から受信する手段とを備えていることを特徴としたものである。
【発明の効果】
【００４６】
本発明によれば、会話音声とコンテンツ音声といった複数の音声を同時に出力しながら音声コミュニケーションを行なう状況においても、任意のタイミングで、相手（受話側）に自分（送話側）の会話音声を明瞭に聞かせることができる。
具体的には、送話側から操作することにより、相手（受話）側で会話音声の音量レベルを上げることにより会話音声を聞きやすくしたり、逆に、コンテンツ音声の音量レベルを下げることにより会話音声を聞きやすくしたり、さらに、会話音声の音量レベルを上げつつコンテンツ音声の音量レベルを下げることにより会話音声を聞きやすくする。他にも、ステレオスピーカにてコンテンツ音声と会話音声を異なるチャネルで分けて出音させることによりコンテンツ音声と会話音声を聞き分けやすくする。
【発明を実施するための最良の形態】
【００４７】
（実施例１）
本発明の通話装置の動作例を、以下に示す各実施例を用いて具体的に説明する。
図１は、本発明を適用した情報処理システムにおいて会話音声とコンテンツ音声といった複数の音声を同時に出力しながら音声コミュニケーションを行なう状況の一例を説明するための概念図で、図中、１０１ａはＡさん宅の通話装置である情報処理端末、１０１ｂはＢさん宅の通話装置である情報処理端末、１０２はネットワーク、１０３はコンテンツを提供可能なコンテンツサーバを示す。
【００４８】
図１において、まず、ＡさんがＢさんに会話音声を優先して聞かせるための操作を行なわず、通常に会話をしていたとする。この場合、Ｂさんは自分の端末の出音レベル設定を任意に変更できる。ここで、Ａさんが会話音声を優先して相手に聞かせるため、リモコンなどで情報処理端末１０１ａの操作を行ったとする。この場合、Ｂさん宅の情報処理端末１０１ｂは、会話音声（本例では、「運動会楽しかったよ」）が優先して出音される設定に変更され、同時に、Ｂさんは自分の情報処理端末１０１ｂの出音レベル設定を変更できなくなる。つまり、この間は、Ｂさんの操作に関わらず、Ａさんからの会話音声「運動会楽しかったよ」を、確実にＢさんに聞かせることができるようになる。
【００４９】
そして、Ａさんが会話音声を優先して相手（Ｂさん）に聞かせるのをやめようと、リモコンなどで情報処理端末１０１ａの操作を行ったとする。この場合、Ｂさん宅の情報処理端末１０１ｂは、会話音声が優先して出音される直前の設定に戻り、同時に、Ｂさんは自分の情報処理端末１０１ｂの出音レベル設定を変更できるようになる。
【００５０】
本実施例の情報処理（通話）システムでは、ネットワーク１０２上のＷＷＷ（Ｗｏｒｌｄ  Ｗｉｄｅ  Ｗｅｂ）サーバ、すなわちコンテンツサーバ１０３上に格納されている運動会の動画ファイルなどネットワーク１０２上にあるコンテンツを、Ａさん宅の情報処理端末１０１ａとＢさん宅の情報処理端末１０１ｂの両方で同期出力し、同時にＡさんとＢさんの間で会話も楽しむことができる。つまり、本実施例の情報処理端末からなる情報処理システムは、コンテンツを共有しながら会話できるため、今まで以上につながり感のあるコミュニケーションが実現できるように構成されている。ここでいう同期出力とは、Ａさん宅とＢさん宅において同じタイミングでコンテンツが再生されることを示しており、同じタイミングとは、完全にタイミングが一致したものである必要はなく、通信網の遅延などによる多少のタイミングの不一致を許容するものとする。
【００５１】
図２は、実施例１の情報処理システムの概要構成例を説明するための図である。本実施例の情報処理システムは、ネットワーク１０２を介して接続された情報処理端末１０１ａ（Ａさん宅）と情報処理端末１０１ｂ（Ｂさん宅）とコンテンツサーバ１０３とによって構成される。ここでは、例えば、情報処理端末１０１ａはＡさんが操作するテレビ電話機、情報処理端末１０１ｂはＢさんが操作するテレビ電話機を想定する。また、コンテンツサーバ１０３は、コンテンツを保持するＷＷＷサーバを想定しており、指定されたコンテンツをストリームデータとして情報処理端末１０１ａと情報処理端末１０１ｂとに同時に配信する。
【００５２】
情報処理端末１０１ａは、Ａさんの会話音声１１ａを情報処理端末１０１ｂへ送信すると共に、ネットワーク１０２を介してコンテンツサーバ１０３から受信したコンテンツ音声１３ａと情報処理端末１０１ｂから受信したＢさんの会話音声１２ａとを混合して混合音声１４ａとして出音する。同様に、情報処理端末１０１ｂは、Ｂさんの会話音声１２ｂを情報処理端末１０１ａへ送信すると共に、ネットワーク１０２を介してコンテンツサーバ１０３から受信したコンテンツ音声１３ｂと情報処理端末１０１ａから受信したＡさんの会話音声１１ｂとを混合して混合音声１４ｂとして出音する。なお、本実施例の情報処理システムでは、通常のテレビ電話と同様に音声通信と共に映像通信も行なうが、本発明は音声通信に関するものであるため、映像通信に関する説明は省略する。
【００５３】
図３は、実施例１の情報処理端末１０１ａの構成例を示すブロック図で、情報処理端末１０１ａは、通信部１１０、会話音声入力部１１１、音声出力部１１２、会話音声送信部１１３、会話音声受信部１１４、コンテンツ音声受信部１１５、出音音声混合部１１６、混合音量変更入力部１１７、モード変更入力部１１８、モード変更送信部１１９、モード変更受信部１２０、及び出音制御部１２１によって構成される。なお、情報処理端末１０１ａと情報処理端末１０１ｂは同じ構成とする。以下、情報処理端末１０１ａあるいは情報処理端末１０１ｂをしばしば情報処理端末１０１という。
【００５４】
通信部１１０は、ネットワーク１０２を介して通信相手の情報処理端末（情報処理端末１０１ｂ）やコンテンツサーバ１０３と有線通信または無線通信を行なう手段であり、例えばネットワークカードやＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）接続端子などで構成される。
【００５５】
会話音声入力部１１１は、Ａさんの発する音声や周囲の音を電気信号に変換して会話音声を生成する手段であり、具体的にはマイクなどの音声入力装置である。音声出力部１１２は、通信相手であるＢさんの会話音声とコンテンツ音声とを混合した電気信号である混合音声を出音する手段であり、具体的にはスピーカなどの音声出力装置である。会話音声送信部１１３は、会話音声入力部１１１から伝えられた会話音声を、通信部１１０を介してネットワーク１０２へ送信する手段である。
【００５６】
会話音声受信部１１４は、ネットワーク１０２を介して情報処理端末１０１ｂから会話音声を受信する手段である。また、コンテンツ音声受信部１１５は、ネットワーク１０２を介してコンテンツサーバ１０３からコンテンツ音声を受信する手段である。
【００５７】
出音音声混合部１１６は、定められた混合音量情報に基づき、会話音声受信部１１４で受信した会話音声と、コンテンツ音声受信部１１５で受信したコンテンツ音声との音量をそれぞれ設定し、混合して混合音声を生成する。混合音量情報は、例えば、会話音声とコンテンツ音声との音量比率を「７：３」のような形で指定する。その場合、出音音声混合部１１６は、会話音声の音量とコンテンツ音声の音量の比率が７対３になるように設定して混合する。なお、比率を算出するときに必要な基準単位は、ＴＶの音量レベルの目盛りのようなものや、ｄＢなど音響学的な音の単位など、何でもよい。また、混合音量情報は必ずしも比率でなくともよく、各々の絶対音量を指定する形式であってもよい。
【００５８】
混合音量変更入力部１１７は、Ａさんが情報処理端末１０１ａで出音する音声の混合音量情報を変更するときに操作する手段であり、Ａさんの操作に応じた混合音量変更信号を生成する。具体的にはリモコンなどの操作装置である。
【００５９】
モード変更入力部１１８は、Ａさんが通信相手であるＢさんの情報処理端末１０１ｂのモードを切り替えるときに操作する手段であり、Ａさんの操作に応じたモード変更信号（すなわち、本発明の出音レベル設定変更指示情報）を生成する。具体的にはリモコンなどの操作装置である。なお、モードの種類は、例えば、通常通りの出音レベル設定で会話を行なう通常モードと、会話音声を優先して出音する会話優先出音モードの２種類である。なお、モード変更信号が会話優先出音モードである場合は、通信相手であるＢさんの情報処理端末１０１ｂの出音レベル設定をこちら（Ａさん側）から強制的に変更することになるため、この効果はあくまでも一時的なものとなるように考慮する。例えば、図２８において後述するリモコン１０１３にモードボタン１０１６を設けて、Ａさんがリモコンの所定の操作キーを押し続けている間だけ有効とする、もしくは、リモコンの操作キーを押下してから所定時間（例えば１０秒間）のみ有効とする、などの方法が考えられる。このモードボタン１０１６をリモコン１０１３に実装した例については、図２８を用いて詳細に説明する。
【００６０】
モード変更送信部１１９は、モード変更入力部１１８から伝えられたモード変更信号を、通信部１１０を介してネットワーク１０２へ送信する手段である。送信されたモード変更信号が会話優先出音モードの場合、情報処理端末１０１ｂでは会話音声が優先して出音されるような設定に変更され、同時に、Ｂさんの操作によって情報処理端末１０１ｂの出音レベル設定が変更されることが禁止あるいは制限される。
【００６１】
ここで、情報処理端末１０１ａは、情報処理端末１０１ｂにモード変更信号（出音レベル設定変更指示情報）を送信した後から、その出音レベル設定変更指示を解除するための出音レベル設定変更終了指示情報を送信するまでの期間、情報処理端末１０１ｂによる出音レベル設定の変更を禁止もしくは制限されるようにしてもよい。上記出音レベル設定変更終了指示情報は、モード変更信号により出音レベル設定変更指示した情報処理端末１０１ｂに対して、その出音レベル設定変更指示を解除するためのモード解除信号で、情報処理端末１０１ａから送信される。
【００６２】
例えば、情報処理端末１０１ａを操作するリモコンにモード変更信号を送信するための操作キーを備え、情報処理端末１０１ａの利用者が操作キーを押下したとき、情報処理端末１０１ｂにモード変更信号を送信し（会話優先出音モードが有効）、利用者が操作キーの押下をやめたときに、情報処理端末１０１ｂにモード解除信号を送信するようにしてもよい。
【００６３】
また、情報処理端末１０１ａの利用者が操作キーを押下したときに、情報処理端末１０１ｂにモード変更信号を送信し、そのモード変更信号を送信してから所定時間（例えば１０秒）が経過した後に、情報処理端末１０１ｂにモード解除信号を送信するようにしてもよい。モード解除信号を受信した情報処理端末１０１ｂは、出音レベル設定の操作が可能となり、出音レベル設定の禁止もしくは制限される直前の出音レベル設定、すなわち、会話音声の優先出音レベル設定前の出音レベル設定に戻すようにしてもよい。
【００６４】
また、上記方法と異なる方法として、情報処理端末１０１ａが情報処理端末１０１ｂにモード変更信号（出音レベル設定変更指示情報）を送信した後から、一定時間の間、情報処理端末１０１ｂによる出音レベル設定の変更が禁止もしくは制限されるようにしてもよい。この場合、出音レベル設定変更終了指示情報は必要なく、情報処理端末１０１ｂは、出音レベル設定変更指示情報を受信して一定時間が経過すると、出音レベル設定の操作が可能となる。また、このとき出音レベル設定の禁止もしくは制限される直前の出音レベル設定、すなわち、会話音声の優先出音レベル設定前の出音レベル設定に戻すようにしてもよい。
【００６５】
モード変更受信部１２０は、通信部１１０を介してネットワーク１０２から、情報処理端末１０１ｂからのモード変更信号を受信する手段である。この際、受信したモード変更信号が会話優先出音モードの場合は、情報処理端末１０１ａでは会話音声が優先して出音されるような設定に変更され、同時に、Ａさんの操作によって情報処理端末１０１ａの出音レベル設定が変更されることが禁止あるいは制限される。
【００６６】
出音制御部１２１は、情報処理端末１０１ａの混合音量変更信号と情報処理端末１０１ｂから受信したモード変更信号を入力し、それに基づいた混合音量情報を決定し、保持する手段である。
【００６７】
図４は、出音制御部１２１の詳細な構成例を示すブロック図で、出音制御部１２１は、混合音量制御部１２１ａ、混合音量情報保持部１２１ｂ、モード情報保持部１２１ｃ、元設定混合音量情報保持部１２１ｄ、会話優先混合音量情報保持部１２１ｅによって構成されている。
【００６８】
混合音量制御部１２１ａは、情報処理端末１０１ａの混合音量変更信号１２３と、情報処理端末１０１ｂから受信したモード変更信号１２４を入力し、それに基づいた混合音量情報１２２を決定し、混合音量情報保持部１２１ｂへ書き込む手段である。このとき、混合音量制御部１２１ａは、必要に応じて、混合音量情報保持部１２１ｂ、モード情報保持部１２１ｃ、元設定混合音量情報保持部１２１ｄ、会話優先混合音量情報保持部１２１ｅの４つの情報保持部に対して情報を書き込み、あるいは、４つの情報保持部から情報を読み込む処理を行う。
【００６９】
混合音量情報保持部１２１ｂは、混合音量情報を保持する。モード情報保持部１２１ｃは、会話優先出音モードであるか通常モードであるかのモード情報を保持する。元設定混合音量情報保持部１２１ｄは、会話優先出音モードから通常モードになった場合に設定する混合音量情報を保持する。このときの混合音量情報は、会話優先出音モードになる直前の出音レベル設定である。会話優先混合音量保持部１２１ｅは、会話優先出音モードの場合に設定する混合音量情報を保持する。なお、この混合音量情報はあらかじめ決定されていてもよいし、情報処理端末１０１ｂから指定するようにしてもよい。
【００７０】
実施例１における情報処理端末１０１ａの動作例を以下に示すフロー図を用いて説明する。なお、情報処理端末１０１ａを中心に説明するが、情報処理端末１０１ｂの動作も同様である。
（音声通話）
図５は、実施例１における情報処理端末１０１ａの音声通話処理の一例を説明するためのフロー図である。尚、本例は、図３及び図４に示した構成に基づいて説明するものとする。また、実際には送信プロセスと受信プロセスは同時に行なわれているが、説明のためそれぞれのプロセスを分けて示している。
【００７１】
図５（Ａ）に示す送信プロセスにおいて、まず、情報処理端末１０１ａは、Ａさんの会話音声を会話音声入力部１１１により取り込み（ステップＳ１）、取り込んだ会話音声を通信部１１０を介してネットワーク１０２へ送信する（ステップＳ２）。一方、図５（Ｂ）に示す受信プロセスにおいて、情報処理端末１０１ａは、通信部１１０を介してネットワーク１０２からＢさんの会話音声を受信し、同時にコンテンツ音声を受信する（ステップＳ３）。続いて、出音音声混合部１１６は、これらふたつの音声を混合するため、混合音量情報保持部１２１ｂから混合音量情報を読み出し（ステップＳ４）、その比率に基づいて会話音声とコンテンツ音声を混合して混合音声を生成し（ステップＳ５）、生成した混合音声を、音声出力部１１２から出音する（ステップＳ６）。なお、ステップＳ１〜Ｓ２の送信プロセスと、ステップＳ３〜Ｓ６の受信プロセスは同時に実行されているものとする。
【００７２】
（混合音量変更）
図６は、実施例１における情報処理端末１０１ａで出音される音声の混合音量変更処理の一例を説明するためのフロー図である。尚、本例は、図３及び図４に示した構成に基づいて説明するものとする。まず、情報処理端末１０１ａは、Ａさんが混合音量を変更するために行なった操作により入力された信号を、混合音量変更入力部１１７を通して混合音量変更信号１２３に変換し（ステップＳ１１）、その混合音量変更信号１２３を混合音量制御部１２１ａに入力する。次に、混合音量制御部１２１ａは、モード情報保持部１２１ｃから今のモード情報を読み出し、会話優先出音モードであるか通常モードであるかをチェックする（ステップＳ１２）。
【００７３】
次に、混合音量制御部１２１ａは、ステップＳ１２において、通常モードである場合（図中、通常モードの場合）、混合音量変更信号１２３に基づいた混合音量情報１２２を混合音量情報保持部１２１ｂへ書き込み、混合音量情報１２２を変更し（ステップＳ１４）、その結果を表示する（ステップＳ１５）。一方、ステップＳ１２において、会話優先出音モードである場合（図中、会話優先出音モードの場合）、混合音量情報１２２を変更しないで、その結果を表示する（ステップＳ１３）。
【００７４】
ここで、図７に示すように、通常モードにおいて、情報処理端末１０１ａで出音される音声の混合音量を変更できれば、変更できたことを利用者に伝えるための情報を情報処理端末１０１ａの画面に表示する。本例の情報処理端末１０１ａは、「変更しました  会話Ｘ：コンテンツＹ」を表示する。なお、会話Ｘ：コンテンツＹとは、会話音声とコンテンツ音声の音量比率がＸ：Ｙであることを示す。一方、会話優先出音モードにおいて、情報処理端末１０１ａで出音される音声の混合音量を変更することができなければ、変更できないことを利用者に伝えるための情報を情報処理端末１０１ａの画面に表示する。本例の情報処理端末１０１ａは、「変更できません  会話優先出音中」を表示する。
【００７５】
（会話優先送信）
図８は、実施例１において情報処理端末１０１ａが情報処理端末１０１ｂに対してモード変更の操作を行なった際の動作例を説明するためのフロー図である。尚、本例は、図３及び図４に示した構成に基づいて説明する。まず、情報処理端末１０１ａは、Ａさんが情報処理端末１０１ｂのモードを切り替えるために行なった操作により入力された信号を、モード変更入力部１１８を通してモード変更信号に変換し（ステップＳ２１）、そのモード変更信号をモード変更送信部１１９によって、通信部１１０を介してネットワーク１０２へ送信する（ステップＳ２２）。
【００７６】
次に、情報処理端末１０１ａは、送信したモード変更信号が通常モードか会話優先出音モードかをチェックし（ステップＳ２３）、会話優先出音モードの場合（図中、会話優先出音モードの場合）、その結果を表示する（ステップＳ２４）。一方、ステップＳ２３において、通常モードの場合（図中、通常モードの場合）、その結果を表示する（ステップＳ２５）。上記ステップＳ２４及びステップＳ２５における送信結果の表示例を図９に示す。このように、送信したモード変更信号が会話優先出音モード、通常モードのどちらであるかを知らせるための情報を、情報処理端末１０１ａの画面に表示させ、利用者に伝える。
【００７７】
図９に示す画面例において、会話優先出音モードが送信された場合、情報処理端末１０１ａは、その画面上に「会話優先送信中」を表示し、通常モードが送信された場合、「会話優先送信解除」を表示する。
【００７８】
（会話優先受信）
図１０は、実施例１において情報処理端末１０１ａが情報処理端末１０１ｂからモード変更の操作を受けた際の動作例を説明するためのフロー図である。尚、本例は、図３及び図４に示した構成に基づいて説明する。まず、情報処理端末１０１ａは、情報処理端末１０１ｂからモード変更信号１２４をモード変更受信部１２０で受信し、混合音量制御部１２１ａへ伝える（ステップＳ３１）。続いて、混合音量制御部１２１ａは、このモード変更信号１２４が会話優先出音モードか通常モードかをチェックし（ステップＳ３２）、会話優先出音モードである場合（図中、会話優先出音モードの場合）、混合音量制御部１２１ａは、モード情報保持部１２１ｃへモード情報として会話優先出音モードを書き込む（ステップＳ３３）。次に、元設定の混合音量情報を保持しておくため、混合音量情報保持部１２１ｂから現在の混合音量情報を読み出し、元設定混合音量情報保持部１２１ｄへ書き込み（ステップＳ３４）、その後、会話優先混合音量情報保持部１２１ｅから会話優先出音モード用の出音レベル設定を読み出し、混合音量情報保持部１２１ｂへ書き込む（ステップＳ３５）。最後に、どちらのモードを受信したか示す情報を画面上に表示する（ステップＳ３６）。
【００７９】
一方、ステップＳ３２において、モード変更信号１２４が通常モードである場合（図中、通常モードの場合）、混合音量制御部１２１ａは、モード情報保持部１２１ｃへモード情報として通常モードを書き込む（ステップＳ３７）。次に、元設定の混合音量に戻すため、元設定混合音量情報保持部１２１ｄから混合音量情報を読み出し、混合音量情報保持部１２１ｂへ書き込む（ステップＳ３８）。最後に、どちらのモードを受信したか示す情報を画面上に表示する（ステップＳ３９）。上記ステップＳ３６及びステップＳ３９における受信結果の表示例を図１１に示す。このように、受信したモード変更信号が会話優先出音モード、通常モードのどちらであるかを知らせるための情報を、情報処理端末１０１ａの画面に表示させ、利用者に伝える。
【００８０】
図１１に示す画面例において、会話優先出音モードを受信した場合、情報処理端末１０１ａは、その画面上に「会話優先出音中」を表示し、通常モードを受信した場合、「会話優先出音解除  会話Ｘ：コンテンツＹ」を表示する。この会話Ｘ：コンテンツＹは、モード変更前の元の出音レベル設定を示す。
【００８１】
図１２は、混合音量情報及びモード情報のデータ構造の一例を示す図である。図１２（Ａ）に示す混合音量情報及び混合音量変更信号は、会話音声とコンテンツ音声の比率で表される。このとき、比率の値を音量レベルとみなすことにより、比率だけではなく絶対音量の情報を付け加えることも可能である。また、図１２（Ｂ）に示すモード情報及びモード変更信号は、会話音声を優先して出音するための会話優先出音モード、通常の出音レベル設定で会話を行うための通常モードのいずれかで表される。
【００８２】
（会話優先出音モードにならない機能）
本実施例の情報処理システムの使用場面を想定すると、コンテンツをじっくりと観たいときなど、コンテンツ音声を集中して聞きたい場合があると思われる。そういう場合のために、情報処理端末１０１に会話優先出音モードにならない機能を備えるようにしてもよい。この機能を有効にすると、通信相手から受信したモード変更信号を無視して、情報処理端末１０１の出音レベル設定を任意に設定でき、コンテンツ音声を集中して聞くことができる。例えば、情報処理端末１０１を操作するリモコンなどにモード変更信号を無効にするための操作キーを備え、利用者により操作キーが押下されると、モード変更信号を受信した場合でも情報処理端末１０１の出音レベル設定が変更されないようにしてもよい。
【００８３】
（会話優先出音モードでもある程度操作できる機能）
また、本実施例の情報処理システムの使用場面を想定すると、会話優先出音モードになったときの出音レベル設定を、自分が聞きやすいように微調整したい場合があると思われる。そういう場合のために、会話優先出音モードであっても、情報処理端末１０１にある程度出音操作できる機能を備えるようにしてもよい。この機能を有効にすると、会話優先出音モード中であっても、会話音声が優先して出力されるような範囲内で情報処理端末１０１の出音レベル設定を調整することができる。
【００８４】
（お互いに会話優先出音モードになる機能）
また、本実施例の情報処理システムの使用場面を想定すると、相手側に会話音声を優先して出音させたいときは、お互いに会話をするのが目的であることが多いため、相手からの会話音声もこちらで優先して出音したい場合があると思われる。そういう場合のために、情報処理端末１０１にお互いに会話優先出音モードになる機能を備えるようにしてもよい。この機能を有効にすると、相手（受話）側に会話音声を優先して出音させようとモード変更の操作を行なった場合、相手（受話）側の情報処理端末１０１が会話優先出音モードになるとともに、自分（送話）側の情報処理端末１０１でも相手からの会話音声が優先して出音されるような設定に変更される。
【００８５】
（ステレオスピーカを用いて出力音声をチャネルで分ける機能）
また、コンテンツ音声を会話音声とコンテンツ音声が明瞭に聞き分けられるように、それぞれの音声を別の場所から出音させる機能があってもよい。図１３は、ステレオスピーカを用いて出力音声をチャネルで分ける機能の一例を説明するための概念図である。
【００８６】
図１３に示す例では、左右２つのスピーカを用いて左チャネルと右チャネルの２チャネルの音声、つまりステレオ音声を出音できるステレオスピーカを想定している。通常の場合は、会話音声とコンテンツ音声が同時に出音される。すなわち、左スピーカからは会話音声のＬ音声とコンテンツ音声のＬ音声が混合された音声が、右スピーカからは、会話音声のＲ音声とコンテンツ音声のＲ音声とが混合された音声が、それぞれ出音される。この場合、会話音声もコンテンツ音声も２チャンネルのステレオ音声で出音されるため、臨場感あふれる音声を聞くことができるが、左スピーカでも右スピーカでも会話音声とコンテンツ音声が混合した音が出音されるため、会話音声とコンテンツ音声を聞き分けることが困難である。そこで、会話音声とコンテンツ音声を聞き分けたい場合、すなわち、情報処理端末１０１ｂからモード変更の操作を受けた際は、会話音声とコンテンツ音声それぞれに関して、会話音声を左チャネル、コンテンツ音声を右チャネルというようにチャネルを分けて別々のスピーカから独立して出音する。このとき、元の音声信号がステレオ音声である場合は、ステレオ音声を合成して１チャネルの音声であるモノラル音声を生成してからチャネルを分けて出音させる。このような制御により、会話音声とコンテンツ音声は別々のスピーカから独立して出音されるため、聞き分けやすくなるという効果が期待できる。
【００８７】
（コンテンツ音声を優先して相手側で出音させる機能）
また、本実施例の情報処理システムの使用場面を想定すると、コンテンツ共有時に、重要な見せ場など特定のシーンを強調して相手に聞かせたい場合があると考えられる。そういう場合のために、会話音声を優先させる会話優先出音モードと同様に、コンテンツ音声を優先させるモードがあってもよい。一例として、ボタンを押している間だけ相手側でコンテンツ音声が優先して出音されるという方法が考えられる。
【００８８】
（エコーキャンセラの設定がモードと連動して切り替わる機能）
本実施例の情報処理システムをハンズフリーで使用する場合、エコーキャンセラが必須となる。また、会話優先出音モードの場合は交互に会話をやりとりする半二重通話の状態が多くなり、通常モードの場合は同時に音声が流れる全二重通話の状態が多くなる。つまり、モードにより通話の特徴が異なるため、エコーキャンセラの適切な設定はモード毎に異なる。
【００８９】
このことを考慮して、会話優先出音モードを設定した側(情報処理端末１０１ａ側)では、自分の会話音声１１ａを積極的に相手に送るが、相手からの会話音声１２ａはあまり送られてこないという状況に合わせてエコーキャンセラの設定を行ない、一方、会話優先出音モードを受けた側(情報処理端末１０１ｂ側)では、相手からの会話音声１１ｂは積極的に送られてくるが自分の会話音声１２ｂはあまり送らないという状況に合わせてエコーキャンセラの設定を行なう、そして、通常モードでは、双方向で音声を送受信するという状況に合わせてエコーキャンセラの設定を行なうという機能があってもよい。
【００９０】
（コンテンツを共有してないとき会話優先出音モードを自動的に無効にする機能）
また、コンテンツ共有をしていない場合、相手側は会話に適した出音レベル設定にしていると思われ、会話優先出音モードの機能はあまり意味がない。したがって、コンテンツを共有していない場合は、常に通常モードとなるようにしてもよい。
【００９１】
（会話音声の音量レベルに応じてモード変更する機能）
会話優先出音モードと通常モードの切り替えを、会話音声１１ａに応じて行なう機能があってもよい。具体的には、波形を解析してＡさんの会話音声が入力されたと認識したら会話優先出音モードになる、あるいは、会話音声１１ａの音量レベルに応じてモード変更を行なうという例が考えられる。
【００９２】
図１４を用いて、音量レベルに応じてモード変更を行なう例について説明する。図１４に示すグラフ（特性曲線）は会話音声の音量レベルの時間変化の一例を表したものである。会話優先出音モードへの切り替えは、会話音声の音量レベルが一定時間以上、設定レベル以上のときに行なう。一方、通常モードへの切り替えは、会話音声の音量レベルが一定時間以下、解除レベル以下のときに行なう。なお、モードが頻繁に切り替わることを防ぐため、一度モードが切り替わったら、そのモードは切り替えアルゴリズムに関わらず一定期間は続くものとする。
【００９３】
図１４において、時刻ｔ１では音量レベルが設定レベル以上になっているが、その時間帯Ａが一定時間以上でないため会話優先出音モードにはならない、一方、時刻ｔ２では、音量レベルが設定レベル以上になっている時間帯Ｂが一定時間以上であるため会話優先出音モードに切り替わっている。また、時刻ｔ３では、音量レベルが解除レベル以下であり、その時間帯Ｃが一定時間以上であるため、通常モードに切り替わる条件は満たしているが、会話優先出音モードに切り替わってから一定期間内であるため、モードは切り替わらない。最後に、時刻ｔ４では、音量レベルが解除レベル以下になっている時間帯Ｄが一定時間以上であり、さらに、会話優先出音モードに切り替わってから一定期間後であるため、通常モードに切り替わっている。
【００９４】
なお、前述した会話優先出音モードにならない機能、会話優先出音モードでもある程度操作できる機能、お互いに会話優先出音モードになる機能、ステレオスピーカを用いて出力音声をチャネルで分ける機能、コンテンツ音声を優先して相手側で出音させる機能、エコーキャンセラの設定がモードと連動して切り替わる機能、コンテンツを共有してないとき会話優先出音モードを自動的に無効にする機能、会話音声の音量レベルに応じてモード変更する機能の各機能は、実施例１だけでなく、以下に説明する実施例２，３にも同様に適用することができる。
【００９５】
（実施例２）
図１５は、実施例２の情報処理システムの概要構成例を説明するための図である。本実施例の情報処理システムの特徴は、Ａさんが所有しているコンテンツを共有しながらＡさんとＢさんで会話を楽しめるというものである。Ａさんが所有しているコンテンツは、例えば、情報処理端末に録画されたものでもよいし、ビデオデッキやデジタルビデオカメラなどを情報処理端末の外部入力端子に接続して読み込んだものでもよいし、ＳＤ（Ｓｅｃｕｒｅ  Ｄｉｇｉｔａｌ）メモリーカードなどの記録媒体を情報処理端末のメモリーカードスロットに挿入して読み込んだものでもよく、様々な形態が考えられる。
【００９６】
本実施例の情報処理システムは、ネットワーク２０２を介して接続された情報処理端末２０１ａと情報処理端末２０１ｂとコンテンツ保持部２０３とによって構成される。本実施例の情報処理システムが、前述の実施例１と大きく異なる点は、コンテンツ保持部２０３と情報処理端末２０１ａが接続され、Ａさんの情報処理端末２０１ａからＢさんの情報処理端末２０１ｂにコンテンツを送信するようにした点である。本例のコンテンツ保持部２０３は、例えば、情報処理端末２０１ａに内蔵された記憶媒体や、情報処理端末２０１ａに外部接続可能な記憶媒体など、コンテンツを保持、提供可能なものであればよく、実施例１と同様にネットワーク上のコンテンツサーバであってもよい。
【００９７】
情報処理端末２０１ａは、Ａさんの会話音声２１ａを情報処理端末２０１ｂへ送信すると共に、コンテンツ保持部２０３から取得したコンテンツ音声２３ａと情報処理端末２０１ｂから受信したＢさんの会話音声２２ａとを混合して混合音声２４ａとして出音する。同様に、情報処理端末２０１ｂは、Ｂさんの会話音声２２ｂを情報処理端末２０１ａへ送信すると共に、情報処理端末２０１ａから受信したコンテンツ音声２３ｂと情報処理端末２０１ａから受信したＡさんの会話音声２１ｂとを混合して混合音声２４ｂとして出音する。
【００９８】
図１６は、実施例２の情報処理端末２０１ａの構成例を示すブロック図で、情報処理端末２０１ａは、通信部２１０、会話音声入力部２１１、音声出力部２１２、会話音声送信部２１３、会話音声受信部２１４、出音音声混合部２１５、混合音量変更入力部２１６、モード変更入力部２１７、モード変更送信部２１８、モード変更受信部２１９、コンテンツ音声抽出部２２０、コンテンツ音声送信部２２１、出音制御部２２２、及びコンテンツ保持部２０３によって構成される。なお、本例における情報処理端末２０１ｂは、前述の図３に示した実施例１の情報処理端末１０１ａと同じ構成をとるものとする。
【００９９】
図１６において、コンテンツ音声抽出部２２０、コンテンツ音声送信部２２１、コンテンツ保持部２０３以外の各部（すなわち、通信部２１０、会話音声入力部２１１、音声出力部２１２、会話音声送信部２１３、会話音声受信部２１４、出音音声混合部２１５、混合音量変更入力部２１６、モード変更入力部２１７、モード変更送信部２１８、モード変更受信部２１９、出音制御部２２２）は、図３に示した実施例１の各部と同じ機能となるため、ここでの説明は省略する。なお、出音制御部２２２は、図４に示した出音制御部１２１と同様に、混合音量制御部、混合音量情報保持部、モード情報保持部、元設定混合音量情報保持部、会話優先混合音量情報保持部によって構成されている。
【０１００】
コンテンツ音声抽出部２２０は、コンテンツ保持部２０３からコンテンツ音声を抽出する手段である。コンテンツ音声送信部２２１は、コンテンツ音声抽出部２２０から伝えられたコンテンツ音声を、通信部２１０を介してネットワーク２０２へ送信する手段である。
【０１０１】
以下、図１７に示すフローに基づいて、情報処理端末２０１ａの動作例を中心に説明する。なお、情報処理端末２０１ｂの動作例は、前述の図５、図６、図８、図１０に示した実施例１のフローと同様であるため説明を省略する。
【０１０２】
（音声通話）
図１７は、実施例２の情報処理端末２０１ａの音声通話処理の一例を説明するためのフロー図である。尚、本例は、図１６に示した構成に基づいて説明する。また、実際には送信プロセスと受信プロセスは同時に行なわれているが、説明のためそれぞれのプロセスを分けて示している。
【０１０３】
図１７（Ａ）に示す送信プロセスにおいて、まず、情報処理端末２０１ａは、Ａさんの会話音声を会話音声入力部２１１により取り込み、同時にコンテンツ音声をコンテンツ音声抽出部２２０により取り込む（ステップＳ４１）。その後、情報処理端末２０１ａは、会話音声送信部２１３により会話音声を、コンテンツ音声送信部２２１によりコンテンツ音声を、通信部２１０を介してネットワーク２０２へ送信する（ステップＳ４２）。
【０１０４】
一方、図１７（Ｂ）に示す受信プロセスにおいて、まず、情報処理端末２０１ａは、通信部２１０を介してネットワーク２０２からＢさんからの会話音声を受信し、同時にコンテンツ音声をコンテンツ音声抽出部２２０により取り込む（ステップＳ４３）。続いて、実施例１の場合と同様に、出音音声混合部２１５は、これらふたつの音声を混合するため、出音制御部２２２の混合音量情報保持部から混合音量情報を読み出し（ステップＳ４４）、その比率に基づいて会話音声とコンテンツ音声を混合して混合音声を生成し（ステップＳ４５）、生成した混合音声を、音声出力部２１２から出音する（ステップＳ４６）。なお、ステップＳ４１〜Ｓ４２の送信プロセスと、ステップＳ４３〜Ｓ４６の受信プロセスは同時に実行されているものとする。
【０１０５】
その他の処理、すなわち、混合音量変更、会話優先送信，会話優先受信の処理フローは、前述の図６、図８、図１０に示した実施例１の場合と同様であるため説明を省略する。
【０１０６】
（外部入力端子が接続されていないときコンテンツを共有してないと判断する機能）
本発明の情報処理端末において、コンテンツサーバのデータを入力する外部入力端子に何も接続されていないときは、コンテンツを共有していないと判断する機能があってもよい。コンテンツを共有していないと判断した後、実施例１で記述した（コンテンツを共有してないときに会話優先出音モードを自動的に無効にする機能）を用いてもよい。
【０１０７】
なお、上記外部入力端子が接続されていないときコンテンツを共有してないと判断する機能は実施例２だけでなく、以下に説明する実施例３にも同様に適用することができる。
【０１０８】
（実施例３）
図１８は、実施例３の情報処理システムの概要構成例を説明するための図である。本実施例の情報処理システムの特徴は、前述の実施例２と同様に、Ａさんが所有しているコンテンツを共有しながらＡさんとＢさんで会話を楽しめるというものであるが、実施例２と異なる点は、ＡさんからＢさんへ会話音声とコンテンツ音声を別々に送信するのではなく、Ａさんの情報処理端末で混合してから送信するという点である。つまり、音声信号をひとつのデータとして送信できるため、既存のＴＶ電話システムを利用できる。さらに、別々にふたつのデータとして送信していたときと比べて通信帯域を１／２に節約できるなどの効果を奏する。ただし、本実施例では、会話優先出音モードにおける出音レベル設定は絶対音量ではなく音量比率に制限される。
【０１０９】
本実施例の情報処理システムは、ネットワーク３０２を介して接続された情報処理端末３０１ａと情報処理端末３０１ｂとコンテンツ保持部３０３とによって構成される。本実施例の情報処理システムが実施例２と大きく異なる点は、情報処理端末３０１ａから情報処理端末３０１ｂへ送る音声が、会話音声とコンテンツ音声ではなく、既に混合された混合音声であるという点である。
【０１１０】
情報処理端末３０１ａは、コンテンツ保持部３０３から取得したコンテンツ音声３３ａとＡさんの会話音声３１ａとを混合して混合音声３５ａとしてＢさんの情報処理端末３０１ｂに送信すると共に、コンテンツ保持部３０３から取得したコンテンツ音声３３ａと情報処理端末３０１ｂから受信したＢさんの会話音声３２ａとを混合して混合音声３４ａとして出音する。同様に、情報処理端末３０１ｂは、Ｂさんの会話音声３２ｂを情報処理端末２０１ａへ送信すると共に、情報処理端末３０１ａから受信した混合音声３１ｂを出音する。
【０１１１】
図１９は、実施例３の情報処理端末３０１ａの構成例を示すブロック図で、情報処理端末３０１ａは、通信部３１０、会話音声入力部３１１、音声出力部３１２、会話音声受信部３１３、出音音声混合部３１４ａ，３１４ｂ、混合音量変更入力部３１５、モード変更入力部３１６、モード変更受信部３１７、コンテンツ音声抽出部３１８、混合音声送信部３１９、混合音量変更受信部３２０、出音制御部３２１ａ，３２１ｂ、及びコンテンツ保持部３０３によって構成される。
【０１１２】
図１９において、出音音声混合部３１４ｂ、混合音量変更受信部３２０、混合音声送信部３１９、出音制御部３２１ｂ以外の各部（すなわち、コンテンツ保持部３０３、通信部３１０、会話音声入力部３１１、音声出力部３１２、会話音声受信部３１３、出音音声混合部３１４ａ、混合音量変更入力部３１５、モード変更入力部３１６、モード変更受信部３１７、コンテンツ音声抽出部３１８、出音制御部３２１ａ）は、図１６に示した実施例２の各部と同じ機能となるため、ここでの説明は省略する。なお、出音制御部３２１ａ，３２１ｂは、図４に示した出音制御部１２１と同様に、混合音量制御部、混合音量情報保持部、モード情報保持部、元設定混合音量情報保持部、会話優先混合音量情報保持部によって構成されている。
【０１１３】
出音音声混合部３１４ｂは、会話音声入力部３１１からの会話音声と、コンテンツ音声抽出部３１８からのコンテンツ音声とを混合して混合音声を混合音声送信部３１９に入力する。混合音声送信部３１９は、出音音声混合部３１４ｂから伝えられた混合音声を、通信部３１０を介してネットワーク３０２へ送信する。混合音量変更受信部３２０は、通信部３１０を介してネットワーク３０２から、情報処理端末３０１ｂからの混合音量変更情報（音声比率の変更情報）を受信し、その混合音量変更情報を出音制御部３２１ｂへ入力する。出音音声混合部３１４ｂは、出音制御部３２１ｂの混合音量情報保持部から混合音量情報を読み出し、その比率に基づいて混合音声を生成し、生成した混合音声は混合音声送信部３１９からネットワーク３０２へ送信される。
【０１１４】
（音声通話）
図２０は、実施例３の情報処理端末３０１ａの音声通話処理の一例を説明するためのフロー図である。尚、本例は、図１９に示した構成に基づいて説明する。また、実際には送信プロセスと受信プロセスは同時に行なわれているが、説明のためそれぞれのプロセスを分けて示している。
【０１１５】
図２０（Ａ）に示す送信プロセスでは、まず、情報処理端末３０１ａは、Ａさんの会話音声が会話音声力部３１１により取り込まれ、同時に、コンテンツ音声がコンテンツ音声抽出部３１８により取り込まれる（ステップＳ５１）。次に、出音音声混合部３１４ｂは、これらふたつの音声を混合するため、出音制御部３２１ｂの混合音量情報保持部から混合音量情報を読み出し（ステップＳ５２）、その比率に基づいて混合音声を生成する（ステップＳ５３）。その後、情報処理端末３０１ａは、生成した混合音声を通信部３１０を介してネットワーク３０２へ送信する（ステップＳ５４）。
【０１１６】
一方、図２０（Ｂ）に示す受信プロセスにおいて、まず、情報処理端末３０１ａは、通信部３１０を介してネットワーク３０２からＢさんからの会話音声を受信し、同時にコンテンツ音声をコンテンツ音声抽出部３１８により取り込む（ステップＳ５５）。続いて、実施例２の場合と同様に、出音音声混合部３１４ａは、これらふたつの音声を混合するため、出音制御部３２１ａの混合音量情報保持部から混合音量情報を読み出し（ステップＳ５６）、その比率に基づいて会話音声とコンテンツ音声を混合して混合音声を生成し（ステップＳ５７）、生成した混合音声を、音声出力部３１２から出音する（ステップＳ５８）。なお、ステップＳ５１〜Ｓ５４の送信プロセスと、ステップＳ５５〜Ｓ５８の受信プロセスは同時に実行されているものとする。
【０１１７】
なお、情報処理端末３０１ａにおける混合音量変更プロセスは、図６に示した実施例１の場合と同様であるため説明を省略する。
【０１１８】
（会話優先送信）
図２１は、実施例３において情報処理端末３０１ａが情報処理端末３０１ｂに対してモード変更の操作を行なった際の動作例を説明するためのフロー図である。尚、本例は、図１９に示した構成に基づいて説明する。まず、情報処理端末３０１ａは、Ａさんが情報処理端末３０１ａのモードを切り替えるために行なった操作により入力された信号を、モード変更入力部３１６を通してモード変更信号に変換する（ステップＳ６１）。続いて、モード変更信号を出音制御部３２１ｂ内の混合音量制御部へ伝え、混合音量制御部は、このモード変更信号が会話優先出音モードか通常モードかをチェックし（ステップＳ６２）、会話優先出音モードである場合（図中、会話優先出音モードの場合）、混合音量制御部は、モード情報保持部へモード情報として会話優先出音モードを書き込む（ステップＳ６３）。
【０１１９】
次に、元設定の混合音量情報を保持しておくため、混合音量情報保持部から現在の混合音量情報を読み出し、元設定混合音量情報保持部へ書き込み（ステップＳ６４）、その後、会話優先混合音量情報保持部から会話優先出音モード用の出音レベル設定を読み出し、混合音量情報保持部へ書き込む（ステップＳ６５）。最後に、どちらのモードを送信したか示す情報を画面上に表示する（ステップＳ６６）。
【０１２０】
一方、ステップＳ６２において、モード変更信号が通常モードである場合（図中、通常モードの場合）、混合音量制御部は、モード情報保持部へモード情報として通常モードを書き込む（ステップＳ６７）。次に、元設定の混合音量に戻すため、元設定混合音量情報保持部から混合音量情報を読み出し、混合音量情報保持部へ書き込む（ステップＳ６８）。最後に、どちらのモードを送信したか示す情報を画面上に表示する（ステップＳ６９）。上記ステップＳ６６及びステップＳ６９における受信結果の表示例を図９に示す。このように、送信したモード変更信号が会話優先出音モード、通常モードのどちらであるかを知らせるための情報を、情報処理端末３０１ａの画面に表示させ、利用者（Ａさん）に伝える。
【０１２１】
なお、情報処理端末３０１ａにおける会話優先受信プロセスは、図１０に示した実施例１の場合と同様であるため説明を省略する。
【０１２２】
（混合音量変更：通信相手の出音レベル設定）
図２２は、実施例３の情報処理端末３０１ａにおいて、情報処理端末３０１ｂから受信した混合音量変更信号に応じて、情報処理端末３０１ｂの出音レベル設定を変更する際の動作例を説明するためのフロー図である。尚、本例は、図１９に示した構成に基づいて説明する。まず、情報処理端末３０１ａは、情報処理端末３０１ｂから混合音量変更信号を混合音量変更受信部３２０で受信し、出音制御部３２１ｂの混合音量制御部に伝える（ステップＳ７１）。次に、混合音量制御部は、モード情報保持部から今のモード情報を読み出し、会話優先出音モードであるか通常モードであるかをチェックする（ステップＳ７２）。その結果、通常モードである場合（図中、通常モードの場合）、情報処理端末３０１ｂからの混合音量変更信号に基づいた混合音量情報を混合音量情報保持部へ書き込み、情報処理端末３０１ｂの混合音量情報を変更する（ステップＳ７３）。一方、ステップＳ７２において、会話優先出音モードである場合（図中、会話優先出音モードの場合）、混合音量情報を変更しないでそのまま終了する。
【０１２３】
図２３は、実施例３の情報処理端末３０１ｂの構成例を示すブロック図で、情報処理端末３０１ｂは、通信部４１０、会話音声入力部４１１、音声出力部４１２、会話音声送信部４１３、混合音量変更入力部４１４、モード変更入力部４１５、モード変更送信部４１６、混合音声受信部４１７、及び混合音量変更送信部４１８によって構成される。
【０１２４】
図２３において、混合音声受信部４１７、混合音量変更送信部４１８以外の各部（すなわち、通信部４１０、会話音声入力部４１１、音声出力部４１２、会話音声送信部４１３、混合音量変更入力部４１４、モード変更入力部４１５、モード変更送信部４１６）は、図６に示した実施例２の各部と同じ機能となるため、ここでの説明は省略する。
【０１２５】
混合音声受信部４１７は、通信部４１０を介してネットワーク３０２から混合音声を受信する手段である。混合音量変更送信部４１８は、混合音量変更入力部４１４から伝えられた混合音量変更信号を、通信部４１０を介してネットワーク３０２へ送信する手段である。
【０１２６】
（音声通話）
図２４は、実施例３の情報処理端末３０１ｂの音声通話処理の一例を説明するためのフロー図である。尚、本例は、図２３に示した構成に基づいて説明する。また、実際には送信プロセスと受信プロセスは同時に行なわれているが、説明のためそれぞれのプロセスを分けて示している。
【０１２７】
図２４（Ａ）に示す送信プロセスにおいて、まず、情報処理端末３０１ｂは、Ｂさんの会話音声を会話音声入力部４１１により取り込み（ステップＳ８１）、取り込んだ会話音声を通信部４１０を介してネットワーク３０２へ送信する（ステップＳ８２）。一方、図２４（Ｂ）に示す受信プロセスにおいて、情報処理端末３０１ｂは、通信部４１０を介してネットワーク３０２から混合音声を受信し（ステップＳ８３）、受信した混合音声を音声出力部４１２から出音する（ステップＳ８４）。なお、ステップＳ８１〜Ｓ８２の送信プロセスと、ステップＳ８３〜Ｓ８４の受信プロセスは同時に実行されているものとする。
【０１２８】
（混合音量変更）
図２５は、実施例３の情報処理端末３０１ｂで出音される音声の混合音量変更処理の一例を説明するためのフロー図である。尚、本例は、図２３に示した構成に基づいて説明する。まず、情報処理端末３０１ｂは、Ｂさんが混合音量を変更するために行なった操作により入力された信号を、混合音量変更入力部４１４を通して混合音量変更信号に変更する（ステップＳ９１）。続いて、混合音量変更送信部４１８は、取得された混合音量変更信号を通信部４１０を介してネットワーク３０２へ送信し、情報処理端末３０１ａへ伝える（ステップＳ９２）。そして、実際の混合音量変更処理は、図２２に示したフローに従って情報処理端末３０１ａで実行される。
【０１２９】
なお、情報処理端末３０１ｂにおける会話優先送信プロセスは、図８に示した実施例１の場合と同様であるため説明を省略する。
【０１３０】
また、会話優先受信プロセスについて、情報処理端末３０１ｂで行なう処理はない。実施例３の情報処理システムでは、情報処理端末３０１ｂにおける会話優先受信、混合音量変更のプロセスが、情報処理端末３０１ａ上で行なわれる。したがって、結果を情報処理端末３０１ｂ側で表示するためには新たな制御情報の通知が必要である。このための制御情報通知の機能を情報処理端末に備えるようにしてもよい。
【０１３１】
（プログラム実装）
なお、本発明の情報処理端末は、プログラムとしても実現可能である。このプログラムはコンピュータで読み取り可能な記録媒体に格納されており、各処理は上記プログラムによって実現される。記録媒体の例としては、磁気テープやカセットテープなどのテープ系、フロッピー（登録商標）ディスクやハードディスク等の磁気ディスク系、ＣＤ−ＲＯＭ／ＭＯ／ＭＤ／ＤＶＤなどの光ディスクなどからなるディスク系、ＩＣカードや光カード等のカード系、マスクＲＯＭ、ＦＰＲＯＭ、ＥＥＰＲＯＭ、フラッシュＲＯＭ等による半導体メモリを含めた固定的にプログラムを担持する媒体などいずれであってもよい。
【０１３２】
（筐体レイアウトの例）
図２６は、本発明に係る情報処理端末の各ブロック間の接続構成の一例を説明するための接続構成図である。図２６に示す情報処理端末１０１ａは、テレビ受像機１０１１、テレビ電話用のカメラ及びマイク内蔵型のセットトップユニット１０１２、利用者が操作するリモコンユニット１０１３、有線又は無線回線を用いたネットワーク１０２を介して、他の情報処理装置１０１ｂとの間で映像、音声の送受信を行なうアダプタユニット１０１０とを少なくとも備えている。
【０１３３】
セットトップユニット１０１２は、有線又は無線によりアダプタユニット１０１０と接続され、ネットワーク１０２を介して受信すべき情報の選択指示をしたり、内蔵のカメラで撮影した画像データの送信を指示したりする。また、アダプタユニット１０１０は、有線又は無線により、ネットワーク１０２と接続されると共に、テレビ受像機１０１１と接続されていて、ネットワーク１０２を介して受信した映像、音声などの情報をテレビ受像機１０１１に伝えると共に、セットトップユニット１０１２の内蔵カメラが撮影した画像データをネットワーク１０２を介して指定された他の情報処理装置に送信する。また、リモコンユニット１０１３は、赤外線又は無線信号により、利用者からの指示を、セットトップユニット１０１２に、又は、セットトップユニット１０１２を介してアダプタユニット１０１０に伝える。テレビ受像機１０１１は、アダプタユニット１０１０やセットトップユニット１０１２からの映像や音声、あるいは、テキスト情報を表示出力する。
【０１３４】
また、図２７は、本発明に係る情報処理装置の各ブロック間の接続構成の他の例を説明するための接続構成図であり、図２７に示す情報処理装置１０１ａの変形例を示している。即ち、図２７に示す情報処理装置１０１ａ′は、図２６に示した構成とは異なり、情報処理装置１０１ａのアダプタユニット１０１０を通信部１０１０′とし、この通信部１０１０′がテレビ受像機１０１１′に内蔵されて一体化された一体型情報処理装置の場合を示している。なお、図示していないが、テレビ受像機１０１１′が更にセットトップユニット１０１２′と一体となっている構成であっても良い。また、通信部１０１０′には、外部機器から映像や音声を入力するために、外部入力端子がついている。図２７に示す例では、外部入力端子としてＲＣＡピンジャック３個(映像１、音声２)が設けられているが、ＲＣＡピン以外の入力形式であっても構わない。
【０１３５】
（リモコンレイアウトの例）
図２８は、リモコンユニット１０１３のレイアウトの一例を説明するため図である。本例に示すリモコンユニット１０１３は、電源ボタン１０１４、様々な設定項目を表示するメニューボタン１０１５、会話優先出音モードと通常モードを切り替えるモードボタン１０１６、メニューボタン１０１５で表示された項目を選択して決定する上下、決定ボタン１０１７、第１の音量調整ボタン１０１８、第２の音量調整ボタン１０１９とを少なくとも備えている。メニューボタン１０１５で表示される設定項目の中には、出音レベル設定を音量比率で調整するか音量レベルで調整するかの項目、会話優先出音モードを禁止するかの項目などが含まれる。
【０１３６】
音量比率で調整する際には、第１の音量調整ボタン１０１８で全体の音量レベルを調整し、第２の音量調整ボタン１０１９で会話音声とコンテンツ音声の音量比率を調整する。一方、音量レベルで調整する際には、第１の音量調整ボタン１０１８で会話音声の音量レベルを調整し、第２の音量調整ボタン１０１９でコンテンツ音声の音量レベルを調整する。
【０１３７】
（音量調整時の画面表示の例）
図２９は、音量調整の際の画面表示例を示す図である。なお、前述した図７とは別の例である。本例における表示画面は、会話音声アイコン１０２０、コンテンツ音声アイコン１０２１、会話音声レベルバー１０２２、コンテンツ音声レベルバー１０２３から構成される。会話音声アイコン１０２０は、会話音声レベルバー１０２２が会話音声の音量レベルを表していることをわかりやすくするための表示であり、コンテンツ音声アイコン１０２１は、コンテンツ音声レベルバー１０２３がコンテンツ音声の音量レベルを表していることをわかりやすくするための表示である。
【０１３８】
また、会話音声レベルバー１０２２は、上下に伸びるバーの形をした表示で会話音声の音量レベルを表しており、上に伸びるほど音量レベルが大きいことを表している。コンテンツ音声レベルバー１０２３は、上下に伸びるバーの形をした表示でコンテンツ音声の音量レベルを表しており、上に伸びるほど音量レベルが大きいことを表している。また、通常モードの場合は、会話音声レベルバー１０２２とコンテンツ音声レベルバー１０２３を緑色で表示し、一方、会話優先出音モードの場合は、会話音声レベルバー１０２２とコンテンツ音声レベルバー１０２３を赤色で表示するなどして、会話優先出音モードの場合は変更できないことを強調してもよい。
【図面の簡単な説明】
【０１３９】
【図１】本発明を適用した情報処理システムにおいて会話音声とコンテンツ音声といった複数の音声を同時に出力しながら音声コミュニケーションを行なう状況の一例を説明するための概念図である。
【図２】実施例１の情報処理システムの概要構成例を説明するための図である。
【図３】実施例１の情報処理端末の構成例を示すブロック図である。
【図４】出音制御部の詳細な構成例を示すブロック図である。
【図５】実施例１における情報処理端末の音声通話処理の一例を説明するためのフロー図である。
【図６】実施例１における情報処理端末で出音される音声の混合音量変更処理の一例を説明するためのフロー図である。
【図７】本発明において混合音量を変更したときの画面表示例を示す図である。
【図８】実施例１において情報処理端末が相手先の情報処理端末に対してモード変更の操作を行なった際の動作例を説明するためのフロー図である。
【図９】本発明において会話優先を指示したときの画面表示例を示す図である。
【図１０】実施例１において情報処理端末が相手先の情報処理端末からモード変更の操作を受けた際の動作例を説明するためのフロー図である。
【図１１】本発明において会話優先を相手から指示されたときの画面表示例を示す図である。
【図１２】混合音量情報及びモード情報のデータ構造の一例を示す図である。
【図１３】ステレオスピーカを用いて出力音声をチャネルで分ける機能の一例を説明するための概念図である。
【図１４】会話音声音量レベルに応じてモード変更する機能の一例を説明するための図である。
【図１５】実施例２の情報処理システムの概要構成例を説明するための図である。
【図１６】実施例２の情報処理端末の構成例を示すブロック図である。
【図１７】実施例２の情報処理端末の音声通話処理の一例を説明するためのフロー図である。
【図１８】実施例３の情報処理システムの概要構成例を説明するための図である。
【図１９】実施例３の情報処理端末の構成例を示すブロック図である。
【図２０】実施例３の情報処理端末の音声通話処理の一例を説明するためのフロー図である。
【図２１】実施例３において情報処理端末が相手先の情報処理端末に対してモード変更の操作を行なった際の動作例を説明するためのフロー図である。
【図２２】実施例３の情報処理端末において、相手先の情報処理端末から受信した混合音量変更信号に応じて、その相手先の情報処理端末の出音レベル設定を変更する際の動作例を説明するためのフロー図である。
【図２３】実施例３の情報処理端末の構成例を示すブロック図である。
【図２４】実施例３の情報処理端末の音声通話処理の一例を説明するためのフロー図である。
【図２５】実施例３の情報処理端末で出音される音声の混合音量変更処理の一例を説明するためのフロー図である。
【図２６】本発明に係る情報処理端末の各ブロック間の接続構成の一例を説明するための接続構成図である。
【図２７】本発明に係る情報処理端末の各ブロック間の接続構成の他の例を説明するための接続構成図である。
【図２８】本発明に係る情報処理端末で用いるリモコンユニットのレイアウトの一例を示す図である。
【図２９】音量調整の際の画面表示例を示す図である。
【図３０】従来のシステムにおいて会話音声とコンテンツ音声といった複数の音声を同時に出力しながら音声コミュニケーションを行なう状況を説明するための概念図である。
【図３１】図３０に示した従来システムで発生する問題点を説明するための図である。
【符号の説明】
【０１４０】
１１ａ，１１ｂ，２１ａ，２１ｂ，３１ａ…Ａの会話音声、１２ａ，１２ｂ，２２ａ，２２ｂ，３２ａ，３２ｂ…Ｂの会話音声、１３ａ，１３ｂ，２３ａ，２３ｂ，３３ａ…コンテンツ音声、１４ａ，１４ｂ，２４ａ，２４ｂ，３１ｂ，３４ａ…混合音声、１０１ａ，１０１ｂ，２０１ａ，２０１ｂ，３０１ａ，３０１ｂ，５０１ａ，５０１ｂ…情報処理端末（通話装置）、１０２，１０２′，２０２，３０２，５０２…ネットワーク、１０３，１０３′，５０３…コンテンツサーバ、１１０，２１０，３１０，４１０…通信部、１１１，２１１，３１１，４１１…会話音声入力部、１１２，２１２，３１２，４１２…音声出力部、１１３，２１３，４１３…会話音声送信部、１１４，２１４，３１３…会話音声受信部、１１５…コンテンツ音声受信部、１１６，２１５，３１４ａ，３１４ｂ…出音音声混合部、１１７，２１６，３１５，４１４…混合音量変更入力部、１１８，２１７，３１６，４１５…モード変更入力部、１１９，２１８，４１６…モード変更送信部、１２０，２１９，３１７…モード変更受信部、１２１，２２２，３２１ａ，３２１ｂ…出音制御部、１２１ａ…混合音量制御部、１２１ｂ…混合音量情報保持部、１２１ｃ…モード情報保持部、１２１ｄ…元設定混合音量情報保持部、１２１ｅ…会話優先混合音量情報保持部、１２２…混合音量情報、１２３…混合音量変更信号、１２４…モード変更信号、２０３，３０３…コンテンツ保持部、２２０，３１８…コンテンツ音声抽出部、２２１…コンテンツ音声送信部、３１９…混合音声送信部、３２０…混合音量変更受信部、４１７…混合音声受信部、４１８…混合音量変更送信部、１０１０…アダプタユニット、１０１１，１０１１′…テレビ受像機、１０１２，１０１２′…セットトップユニット、１０１３，１０１３′…リモコンユニット、１０１０′…通信部、１０１４…電源ボタン、１０１５…メニューボタン、１０１６…モードボタン、１０１７…上下、決定ボタン、１０１８…第１の音量調整ボタン、１０１９…第２の音量調整ボタン、１０２０…会話音声アイコン、１０２１…コンテンツ音声アイコン、１０２２…会話音声レベルバー、１０２３…コンテンツ音声レベルバー。
【図１】
2006295552.tif 000003
【図２】
2006295552.tif 000004
【図３】
2006295552.tif 000005
【図４】
2006295552.tif 000006
【図５】
2006295552.tif 000007
【図６】
2006295552.tif 000008
【図７】
2006295552.tif 000009
【図８】
2006295552.tif 000010
【図９】
2006295552.tif 000011
【図１０】
2006295552.tif 000012
【図１１】
2006295552.tif 000013
【図１２】
2006295552.tif 000014
【図１３】
2006295552.tif 000015
【図１４】
2006295552.tif 000016
【図１５】
2006295552.tif 000017
【図１６】
2006295552.tif 000018
【図１７】
2006295552.tif 000019
【図１８】
2006295552.tif 000020
【図１９】
2006295552.tif 000021
【図２０】
2006295552.tif 000022
【図２１】
2006295552.tif 000023
【図２２】
2006295552.tif 000024
【図２３】
2006295552.tif 000025
【図２４】
2006295552.tif 000026
【図２５】
2006295552.tif 000027
【図２６】
2006295552.tif 000028
【図２７】
2006295552.tif 000029
【図２８】
2006295552.tif 000030
【図２９】
2006295552.tif 000031
【図３０】
2006295552.tif 000032
【図３１】
2006295552.tif 000033