(57)【要約】【課題】  送信者の声と同時に音声付動画等のコンテンツが送信される場合でも、受信者が送信者の通話音声を明瞭に聞き取ることができる双方向通信システム、通信端末、および通信方法を提供する。【解決手段】  ビデオストリーミングメールと音声通話とが同時に行われる状態であっても、コンテンツ音響除去データ生成部１４で生成されたコンテンツ音響除去データに基づいて、通話音声の音質を損なうことなくビデオストリーミングメールの音声を受信者ＰＢが任意のレベルで可変できるので、ビデオストリーミングメールと音声通話とで音声が混合されて聞き取り難くなることを防ぐことができる。【選択図】        図１
2005347857.tif 000002
【特許請求の範囲】
【請求項１】
ネットワークに接続されて被接続先と音声通話を行い、前記被接続先と音声通話を行いながら前記ネットワークを介して音声を含むコンテンツを送信する第１の通信端末と、
前記ネットワークを介して前記第１の通信端末と接続されて前記音声を含むコンテンツから所定のレベルで前記音声を除去して前記第１の通信端末と音声通話を行う第２の通信端末とを有する双方向通信システム。
【請求項２】
前記第１の通信端末は、前記第２の通信端末に送信する前記音声を含むコンテンツの前記音声についての音量データを同時に送信することを特徴とする請求項１記載の双方向通信システム。
【請求項３】
前記第２の通信端末は、前記第１の通信端末から前記ネットワークを介して送信される前記音声を含むコンテンツについての音量データに基づいて前記音声を含むコンテンツから前記音声を除去することを特徴とする請求項１記載の双方向通信システム。
【請求項４】
前記第２の通信端末は、前記第１の通信端末から前記ネットワークを介して送信される前記音声を含むコンテンツから抽出された音情報に基づいて前記音声を含むコンテンツから前記音声を除去することを特徴とする請求項１記載の双方向通信システム。
【請求項５】
接続先の通信端末とネットワークを介して接続されて音声通話を行う通話部と、
前記ネットワークを介して送信される音声を含むコンテンツを蓄積するコンテンツ蓄積部と、
前記通信端末との前記音声通話時に前記音声を含むコンテンツとともに前記音声を含むコンテンツに含まれる前記音声についての音量データを前記ネットワークを介して送信する通信部とを有する通信端末。
【請求項６】
接続先の通信端末とネットワークを介して接続されて音声通話を行う通話部と、
前記ネットワークを介して送信される音声を含むコンテンツを蓄積するコンテンツ蓄積部と、
前記通信端末との前記音声通話時に前記通信端末から受信した前記音声を含むコンテンツに含まれる前記音声を除去するコンテンツ音声除去部とを有する通信端末。
【請求項７】
前記コンテンツ音声除去部は、前記ネットワークを介して他の通信端末から送信される前記音声を含むコンテンツの前記音声についての音量データに基づいて前記音声を含むコンテンツから前記音声を除去することを特徴とする請求項６記載の通信端末。
【請求項８】
送信側の通信端末からネットワークを介して受信側の通信端末と音声通話を確立する音声通話確立段階と、
前記送信側の通信端末から前記ネットワークを介して前記受信側の通信端末に前記音声通話に基づく通話音声とともに音声を含むコンテンツを送信するコンテンツ送信段階と、
前記受信側の通信端末で前記ネットワークを介して受信した前記音声を含むコンテンツから前記音声を除去する音声除去段階と、
前記音声を除去されたコンテンツを表示するコンテンツ表示段階と、
前記受信側の通信端末で前記音声を除去されたコンテンツを表示して前記送信側の通信端末と音声通話を行う音声通話段階とを含む通信方法。
【請求項９】
前記音声除去段階は、前記送信側の通信端末から前記音声を含むコンテンツに含まれる前記音声についての音量データに基づいて所定のレベルで前記コンテンツから前記音声を除去することを特徴とする請求項８記載の通信方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、通信端末間で双方向にデータの通信を行う双方向通信システム、通信端末、および通信方法に関し、特に、通信時に送信者の通話音声と同時に音声付動画等のコンテンツが送信される場合でも、受信者が送信者の通話音声を明瞭に聞き取ることのできる双方向通信システム、通信端末、および通信方法に関する。
【背景技術】
【０００２】
従来、ＩＰ(Internet Protocol)ネットワークを利用してコンピュータ等の通信端末を接続し、端末間で音声、画像（動画、静止画）等の通信を行う双方向通信システムが知られている。
【０００３】
このような双方向通信システムでは、例えば、通話者を撮影するカメラ、通話者の音声を入力するマイク、音声を出力するスピーカをコンピュータに接続し、コンピュータに接続されたマウス、キーボード等の入力装置を操作することにより、受信者は送信者から送信された画像をディスプレイで見ながら送信者と通話することができる。
【０００４】
ＩＰネットワークを利用した双方向通信システムでは、既存の電話回線を利用する通信システムに対して運用コストが安価であり、動画等のサイズが大なるデータを送信する用途に適する反面、通信品質にばらつきがあり、特に、通話の用途にあっては既存の電話システムとの比較において音声が聞き取りにくいという問題が指摘されている。
【０００５】
かかる問題を解消する双方向通信システムとして、会話の意味（相手の意思）を明確に伝えることを可能とするものがある（例えば、特許文献１参照。）。
【０００６】
特許文献１に記載された双方向通信システムは、音声認識の成否を判断する判断手段と、音声認識ができなかったと判定された場合に、音声情報に対して聴覚的な認識度の向上を意図した一又は複数の処理を行う処理手段を有している。
【０００７】
特許文献１に記載された双方向通信システムによると、音声認識部での音声認識処理において音声信号認識不能であった場合は、利得制御部に利得制御信号を送出する。利得制御部は、利得制御信号を受けるとアンプの利得を増大して、認識不可部分におけるスピーカからの音圧を増大する音声出力調整を行うようにしている。
【特許文献１】特開２００３−２０９６００号公報（[００３２]、[００３３]）
【発明の開示】
【発明が解決しようとする課題】
【０００８】
しかし、特許文献１に記載された情報収集システムによると、通信時に通話音声とは異なる音声データが送信される場合、例えば、図７に示すように送信者が送信した音声付動画等のコンテンツ（ストリームデータ）を受信者と通話しながら視聴している状況では、受信者側に通話音声とコンテンツのストリームデータの視聴音とが通話者ＰＢに同時に送信されるため、通話音声と視聴音とが混合されてノイズ化し、通話者ＰＡの通話音声が聞き取り難くなるという問題がある。
【０００９】
従って、本発明の目的は、送信者の音声と同時に音声付動画等のコンテンツが送信される場合でも、受信者が送信者の通話音声を明瞭に聞き取ることのできる双方向通信システム、通信端末、および通信方法を提供することにある。
【課題を解決するための手段】
【００１０】
第１の発明は、上記した目的を達成するため、ネットワークに接続されて被接続先と音声通話を行い、前記被接続先と音声通話を行いながら前記ネットワークを介して音声を含むコンテンツを送信する第１の通信端末と、前記ネットワークを介して前記第１の通信端末と接続されて前記音声を含むコンテンツから所定のレベルで前記音声を除去して前記第１の通信端末と音声通話を行う第２の通信端末とを有する双方向通信システムを提供する。
【００１１】
また、第２の発明は、上記した目的を達成するため、接続先の通信端末とネットワークを介して接続されて音声通話を行う通話部と、前記ネットワークを介して送信される音声を含むコンテンツを蓄積するコンテンツ蓄積部と、前記通信端末との前記音声通話時に前記音声を含むコンテンツとともに前記音声を含むコンテンツに含まれる前記音声についての音量データを前記ネットワークを介して送信する通信部とを有する通信端末を提供する。
【００１２】
また、第３の発明は、上記した目的を達成するため、接続先の通信端末とネットワークを介して接続されて音声通話を行う通話部と、前記ネットワークを介して送信される音声を含むコンテンツを蓄積するコンテンツ蓄積部と、前記通信端末との前記音声通話時に前記通信端末から受信した前記音声を含むコンテンツに含まれる前記音声を除去するコンテンツ音声除去部とを有する通信端末を提供する。
【００１３】
また、第４の発明は、上記した目的を達成するため、送信側の通信端末からネットワークを介して受信側の通信端末と音声通話を確立する音声通話確立段階と、前記送信側の通信端末から前記ネットワークを介して前記受信側の通信端末に前記音声通話に基づく通話音声とともに音声を含むコンテンツを送信するコンテンツ送信段階と、前記受信側の通信端末で前記ネットワークを介して受信した前記音声を含むコンテンツから前記音声を除去する音声除去段階と、前記音声を除去されたコンテンツを表示するコンテンツ表示段階と、前記受信側の通信端末で前記音声を除去されたコンテンツを表示して前記送信側の通信端末と音声通話を行う音声通話段階とを含む通信方法を提供する。
【発明の効果】
【００１４】
本発明によれば、送信者の通話音声と同時に音声付動画等のコンテンツが送信される場合でも、受信者が送信者の通話音声を明瞭に聞き取ることができる。
【発明を実施するための最良の形態】
【００１５】
以下、本発明の双方向通信システム、通信端末、および通信方法による実施の形態を説明する。この実施の形態は、ネットワークに接続された通信端末Ａ，Ｂ間で双方向に音声通話を行いながらコンテンツとしてビデオストリーミングメールを送信する双方向通信システムに係るものである。
【００１６】
（双方向通信システムの構成）
図１は、本発明の実施の形態に係る双方向通信システムを示す全体図である。図１では、それぞれ固有のＩＰアドレスを有する通信端末Ａ，Ｂがネットワーク１００に接続された構成を示している。
【００１７】
通信端末Ａ，Ｂは、例えば、パーソナルコンピュータ（ＰＣ）であり、文字、画像、動画、音声等のコンテンツをネットワークを介して送受信する通信部１と、コンテンツに含まれる画像データについて種々の処理を行う画像処理部２と、コンテンツに含まれる音声（視聴音）および通話に係る通話音声について種々の処理を行う音声処理部３と、視聴音を任意のレベル、又は全て除去するコンテンツ音声除去部４と、コンテンツを蓄積するコンテンツ蓄積部５と、通信端末間の音声通話を行う通話部６とを有する。
【００１８】
また、通信端末Ａ，Ｂは、図示しない構成としてマウス、キーボード、ペンタブレット等の入力装置を有している。
【００１９】
（通信端末の構成）
図２は、通信端末の構成を示すブロック図である。本実施の形態では、通信端末Ａ，Ｂは同一の構成を有することから、受信者側である通信端末Ｂについて説明する。また、コンテンツは、データ転送を実行しながら受信側でリアルタイムに再生が行われるストリームデータとして送信される。
【００２０】
通信端末Ｂは、ネットワーク１００を介してデータを入出力する送受信インタフェース部１１と、通話音声と視聴音を含む通話データ、コンテンツのストリームデータ、および送信者側で視聴されている同じコンテンツの視聴音の情報（以下、音量データという）を各データに分離する分離部１２と、コンテンツのストリームデータから視聴音についての音データを抽出する音情報抽出部１３と、音情報抽出部１３で抽出された音データに基づいてコンテンツ音響除去データを生成するコンテンツ音響除去データ生成部１４と、分離部１２から基準信号として入力する同期信号に基づいて通話データとコンテンツ音響除去データの入力タイミングを制御する同調回路部１５と、コンテンツ音響除去データに基づいて通話データから視聴音であるコンテンツ音響データを除去するフィルタ部１６と、フィルタ部１６から入力する視聴音を除去された通話データをデジタル／アナログ変換するＤ／Ａ部１７と、Ｄ／Ａ部１７から入力する通話データのアナログ信号を入力する通話部１８と、通話部１８に着脱自在に接続されて通話データのアナログ信号に基づく音声を出力する送受信器１９と、送受信器１９で通話者ＰＢの発した音声に基づくアナログ信号をアナログ／デジタル変換して送受信インタフェース部１１に出力するＡ／Ｄ部２０と、コンテンツに基づく動画、静止画等の画像を表示する表示部２１と、コンテンツデータを格納するＨＤＤ（Hard Disk Drive）等の記録デバイスである蓄積部２２と、通信端末Ｂの各部を制御する制御部２３と、コンテンツの音響除去レベルを通話者ＰＢ側で手操作するための操作部２４とを有し、端末本体１０の外部に通話部１８、表示部２１、および蓄積部２２を独立して設けている。
【００２１】
（各部の構成）
ネットワーク１００は、例えば、ＡＤＳＬ（Asymmetric Digital Subscriber Line），ＦＴＴＨ(Fiber To The Home)等の、放送や通信に利用することのできる帯域幅の広い高速通信網であり、電話等の通話情報に加えて、動画や音声、その他様々なメディアを同時にリアルタイムに通信することが可能である。
【００２２】
具体的には、送受信者が電話で会話しながら、双方同時に同じビデオストリーミングメールを視聴でき、同じビデオストリーミングメールを見ながら、あれこれと電話で話すことが可能である。なお、コンテンツは、ビデオストリーミングメール等の動画だけでなく、ファイル名、タイトル名、テキスト情報等の付加情報なども同時に送信できる。
【００２３】
また、ネットワーク１００を介して送信されるデータとして、上記した通話データ、ビデオストリーミングメールデータに加えてビデオストリーミングメールの音量データがパラメータとして同時に送信される。さらに、受信側の視聴に関するインタフェースを制御する、例えば、再生・停止・早送り・巻戻し・終了等の制御データも送信される。
【００２４】
コンテンツ音響除去データ生成部１４は、音情報抽出部１３から入力する音データに値に比例したコンテンツ音響除去データを生成する。音データの値が大であればコンテンツ音響除去データも大になる。従って、コンテンツ音響除去データは送信側の通信端末Ａで視聴しているビデオストリーミングメールの音情報になる。
【００２５】
同調回路部１５は、ディレイ回路等のタイミング調整回路を有し、コンテンツ音響除去データ生成部１４から入力するコンテンツ音響除去データと、フィルタ部１６に入力する通話データとの同期を取る処理を行う。
【００２６】
フィルタ部１６は、通話データである通話デジタル信号と、コンテンツ音響除去データであるコンテンツ音響除去信号を周波数成分に分解する周波数成分分解回路を有する。このような周波数成分分解回路としては、例えば、ＤＦＴ（Discrete Fourier Transform）やＤＣＴ（Discrete Cosine Transform）、又はＭＤＣＴ（Modified Discrete Cosine Transform）等のスペクトル変換回路を挙げることができ、時間領域における上記した信号を複数の周波数帯域の周波数成分へ分割する。
【００２７】
この帯域分割処理により、時間領域における上記した信号が複数のサンプルデータ毎にブロック化され、ブロック毎のサンプルデータをスペクトル変換することでスペクトル成分が得られる。
【００２８】
このことにより、フィルタ部１６では、周波数分解された通話デジタル信号から同じく周波数分解されたコンテンツ音響除去信号をフィルタリングすることで、ビデオストリーミングメールの視聴音をフィルタリングした通話デジタル信号が生成される。フィルタリングのレベルは通話者ＰＢの操作に応じて設定することが可能であり、フィルタリングのレベルを最大にすると視聴音を含まない純粋な通話デジタル信号が生成される。
【００２９】
送受信器１９は、例えば、マイクとヘッドホンが一体化されたヘッドセットである。
【００３０】
蓄積部２２は、ビデオストリーミングメールを蓄積する。このビデオストリーミングメールは、送信時に送受信インタフェース部１１に出力され、送受信インタフェース部１１からブロードバンド情報に変換されてネットワーク１００に送信される。このとき、送信側では表示部２１にビデオストリーミングメールを表示して受信者と同じタイミングで視聴することができる。さらに、送信者の視聴状況を把握するために、受信側からビデオストリーミングメールのストリーム情報を受信することもできる。
【００３１】
また、蓄積部２２は、ＨＤＤ等の記録デバイスの他に、ＩＥＥＥ１３９４（the Institute of Electrical and Electronics Engineers 1394）、ＵＳＢ（Universal Serial Bus）等のインタフェースを介して外部の記録デバイスを着脱自在に接続することにより、外部の記録デバイスからビデオストリーミングメール等のデータを取り込んで送信・視聴することができる。
【００３２】
（ビデオストリーミングメールの送信画面）
次に、ビデオストリーミングメールの送信画面について説明する。
【００３３】
図３は、送信者側の通信端末Ａの表示部２１に表示される表示画像２００を示す図である。表示画像は２００は、送信者が送信中のビデオストリーミングメールを表示するコンテンツ表示部２１０と、コンテンツ表示部２１０の下方にファイル名表示部２１１と、コンテンツ表示部２１０について入力されたテキスト情報を表示する題目２１２とを有し、更にコンテンツ操作エリアとして画像上に設けられる再生ボタン２１３Ａ，再生停止ボタン２１３Ｂ，終了ボタン２１３Ｃと、画像の大きさ２１４と、音量レベル２１５と、文字サイズ２１６とを有する。
【００３４】
題目２１２は、コンテンツ表示部２１０で表示されるビデオストリーミングメールについてのテキスト情報（例えば、受信者へのメッセージ）を表示する。テキスト情報の入力はキーボード等の入力装置により行うか、予めメッセージをひな型化して用意しておき、必要に応じて呼び出して選択的に入力するようにしても良い。
【００３５】
また、題目２１２に対してペンタブレット等の入力操作が可能な構成とし、ペンタブレットの入力開始から終了までの一連の動作を動画で記録してテキスト情報の代わりにストリーミング表示させるようにしても良い。
【００３６】
画像の大きさ２１４は、画像サイズ（６８０×４８０、１０２４×８６０）を選択するチェックボックスを有する。
【００３７】
音量レベル２１５は、音量レベルの設定値を表示するとともに設定値を増減させる小ボタン２１５Ａおよび大ボタン２１５Ｂを有する。
【００３８】
文字サイズ２１６は、文字サイズの設定値を表示するとともに設定値を増減させる小ボタン２１６Ａおよび大ボタン２１６Ｂを有する。
【００３９】
送信者は、通信端末Ａの表示部２１に表示される表示画像２００を見ながら、再生ボタン２１３Ａをマウス等の入力装置で選択することにより、図示する子供の動作が再生される。送信者は、再生時に必要に応じて画像の大きさ２１４、音量レベル２１５、および文字サイズ２１６を自由に調整できる。
【００４０】
コンテンツ操作エリアは、送信者が操作すると同時にその制御データが受信側の通信端末Ｂに送信される。従って、操作の内容が通信端末Ｂに表示されるビデオストリーミングメールの表示画像に反映される。
【００４１】
また、送信者は、電話で受信者からビデオストリーミングメールの音量を大にするように要求された場合は、コンテンツ操作エリアの音量レベル２１５について大ボタン２１５Ｂを操作することにより、音量を大にすることができる。
【００４２】
（ビデオストリーミングメールの受信画面）
次に、ビデオストリーミングメールの受信画面について説明する。
【００４３】
図４は、受信者側の通信端末Ｂの表示部２１に表示される表示画像２００を示す図である。表示画像２００は、送信者から送信されたビデオストリーミングメールを表示するコンテンツ表示部２１０と、コンテンツ表示部２１０の下方に表示される題目表示部２１０Ａと、コンテンツ表示部２１０および題目表示部２１０Ａの右側に表示されるメニュー画像２２０とを有する。
【００４４】
メニュー画像２２０は、文字の大きさ２２１、音量２２２、映像サイズ２２３、再生時間２２４Ａ、再生状況表示部２２４Ｂの各項目を有し、文字の大きさ２２１は、文字縮小ボタン２２１Ａ、拡大ボタン２２１Ｂを有する。音量２２２は、音量小ボタン２２２Ａ、音量大ボタン２２２Ｂを有する。映像サイズ２２３は、映像縮小ボタン２２３Ａ、映像大ボタン２２３Ｂとを有する。
【００４５】
題目表示部２１０Ａは、受信されたビデオストリーミングメールにテキスト情報等が含まれていれば、そのテキスト情報等を表示する。ここでは、図３の題目２１２に入力されたテキスト情報が表示されている。
【００４６】
図５は、本実施の形態における双方向通信の流れを示す概略図である。ここでは、送信者ＰＡと受信者ＰＢとがネットワークを介して音声通話を行うとともに、送信者ＰＡの通信端末Ａから受信者ＰＢの通信端末Ｂに対してビデオストリーミングメールを送信する。
【００４７】
各動作については、
（１）音声通話の確立（通話確立）
（２）音声通話（通話）
（３）ビデオストリーミングメールの送信準備（送信準備）
（４）通信端末Ａからビデオストリーミングメールの送信（送信）
（５）通信端末Ｂでビデオストリーミングメールの受信（受信）
（６）通信端末Ｂでのビデオストリーミングメール音声除去（音声除去１）
（７）通信端末Ａでのビデオストリーミングメール音声除去（音声除去２）
についてそれぞれ説明する。
【００４８】
図６は、通信端末Ａと通信端末Ｂとがネットワークを介して通信する通信手順を示す図である。以下に、通信の内容について説明する。
【００４９】
（１）通話確立
まず、送信者ＰＡは、送受信器１９からダイヤルトーンが出力されていることを確認し、通信端末Ａのキーボードを操作して受信者ＰＢの電話番号を入力する（Ｓ１）。
【００５０】
通信端末Ｂは、通信端末Ａからの通話要求（Ｓ２）に基づいてアラーティングメッセージを出力する（Ｓ３）。送信者ＰＡ側の送受信器１９では、アラーティングメッセージに呼応してリングバックトーンが鳴ることにより、通信端末Ｂが着信していることが確認される。
【００５１】
ここで、受信者ＰＢがアラーティングメッセージに応答して送受信器１９をオンにすると（Ｓ４）、通信端末Ｂがネットワークを介して通信端末Ａと接続し（Ｓ５）、送信者ＰＡ側の送受信器１９でリングバックトーンが停止するとともに送信者ＰＡ側と音声通話が可能な状態となる。
【００５２】
（２）通  話
送信者ＰＡおよび受信者ＰＢは、送受信器１９を介して音声通話を行う（Ｓ６）。送信側の通話音声はＡ／Ｄ部２０を介してデジタル信号に変換され、送受信インタフェース部１１を介してネットワーク１００に送信される。
【００５３】
また、受信側では、ネットワーク１００から送受信インタフェース部１１で通話音声に応じたデジタル信号を受信し、Ｄ／Ａ部１７を介してアナログ信号に変換することにより送受信器１９から通話音声として出力される。
【００５４】
（３）送信準備
次に、送信者ＰＡは、受信者ＰＢに対してビデオストリーミングメールを送信することを告げる。送信者ＰＡは、予め撮影しておいたビデオストリーミングメールのデータを蓄積部２２から通信端末Ａに読み込み、表示部２１に表示させる（Ｓ７）。このとき、受信者ＰＢの通信端末Ｂには、通信端末Ａの表示部２１に表示されたビデオストリーミングメールに応じた画像がネットワーク１００を介して送信され、表示部２１に表示される。
【００５５】
（４）送  信
次に、送信者ＰＡは、表示部２１の表示画像２００の一部として表示されている再生ボタン２１３Ａをマウスで選択し、操作することによってビデオストリーミングメールを送信する（Ｓ８）。ビデオストリーミングメールは、動画がストリームデータとしてネットワークを介して送信され、通信端末Ｂで受信される（Ｓ９）。受信されたストリームデータは順次速やかに再生される（Ｓ１０）。また、動画のストリームデータに同期して視聴音がネットワークを介して通信端末Ｂに送信される。
【００５６】
（５）受  信
次に、受信者ＰＢは、表示部２１の表示画像２００を見ながら送信者ＰＡと音声通話を行う（Ｓ１１）。このとき、送信者ＰＡの声と視聴音とが被って相手の声が聞きにくい状況が生じることがある。このような場合、受信者ＰＢは、操作部２４を操作して、コンテンツ音響除去データ生成部１４におけるコンテンツ音響除去データの除去レベルを大にする（Ｓ１２）。
【００５７】
（６）音声除去１
フィルタ部１６は、コンテンツ音響除去データ生成部１４から入力する除去レベルを大にされたコンテンツ音響除去データに基づいて、通話データに含まれる視聴音をフィルタリングする（Ｓ１３）ことにより、通話音声の聞き取り易さを向上させた通話デジタル信号をＤ／Ａ部１７に出力する（Ｓ１０）。Ｄ／Ａ部１７は、通話デジタル信号をアナログ信号に変換して通話部１８に出力する。通話部１８は、接続されている送受信器１９にアナログ信号を出力することにより、送受信器１９からアナログ信号に応じた、視聴音の抑制された音声（通話音声）が出力される（Ｓ１４）。
【００５８】
（７）音声除去２
また、通信端末Ｂにおいて、ビデオストリーミングメールを観た受信者ＰＢが発した言葉はネットワークを介して通信端末Ａに送信される。このとき、通信端末Ａでは、受信者ＰＢが発した言葉とビデオストリーミングメールの視聴音とが被って受信者ＰＢの声が聞きにくい状況が生じることがある。このような場合でも音声除去１で説明した視聴音のフィルタリングは有効である。通信端末Ａは、蓄積部２２にビデオストリーミングメールを蓄積しているので、蓄積されたビデオストリーミングメールの音量データに基づいて視聴音の除去を行うことで、ビデオストリーミングメールを観ながら受信者ＰＢと相互に良好な通話が行える。
【００５９】
（本実施の形態の効果）
上記した本発明の実施の形態によれば、以下の効果が得られる。
【００６０】
（１）ビデオストリーミングメールと音声通話とが同時に行われる状態であっても、コンテンツ音響除去データ生成部１４で生成されたコンテンツ音響除去データに基づいて通話音声の音質を損なうことなくビデオストリーミングメールの音声を受信者ＰＢが任意のレベルで可変できるので、ビデオストリーミングメールと音声通話とで音声が混合されて聞き取り難くなることを防ぐことができる。
【００６１】
（２）コンテンツ音響除去データは、ネットワークを介して送信されるビデオストリーミングメールから抽出されるので、実際の音声レベルに応じた音声除去性に優れるフィルタリングを実行できる。
【００６２】
（３）送信者ＰＡ側でビデオストリーミングメールの音声についての調整を行わなくとも受信者ＰＢで音量調整が可能となるので、送信者ＰＡ側から送信するビデオストリーミングメールのデータ操作を簡素化でき、特別なデータ操作を必要とせずにデータ送信を容易に行うことができる。
【００６３】
なお、上記した実施の形態では、双方向通信においてビデオストリーミングメールを送信する構成を説明したが、その要旨を変更しない範囲内で種々な変形が可能である。例えば、コンテンツはビデオストリーミングメールに限定されるものではなく、音声のみのコンテンツであっても良い。
【図面の簡単な説明】
【００６４】
【図１】本発明の実施の形態に係る双方向通信システムを示す全体図である。
【図２】通信端末の構成を示すブロック図である。
【図３】送信者側の通信端末Ａの表示部に表示される表示画像を示す図である。
【図４】受信者側の通信端末Ｂの表示部に表示される表示画像を示す図である。
【図５】本実施の形態における双方向通信の流れを示す概略図である。
【図６】通信端末Ａと通信端末Ｂとがネットワークを介して通信する通信手順を示す図である。
【図７】送信者が送信した音声付動画等のコンテンツ（ストリームデータ）を受信者と通話しながら視聴している状況を示す図である。
【符号の説明】
【００６５】
１、通信部  ２、画像処理部  ３、音声処理部  ４、コンテンツ音声除去部
５、コンテンツ蓄積部  ６、通話部  １０、端末本体
１１、送受信インタフェース部  １２、分離部  １３、音情報抽出部
１４、コンテンツ音響除去データ生成部  １５、同調回路部
１６、フィルタ部  １７、Ｄ／Ａ部  １８、通話部
１９、送受信器  ２０、Ａ／Ｄ部  ２１、表示部  ２２、蓄積部
２３、制御部  ２４、操作部  １００、ネットワーク  ２００、表示画像
２１０、コンテンツ表示部  ２１０Ａ、題目表示部
２１１、ファイル名表示部  ２１２、題目  ２１３Ａ、再生ボタン
２１３Ｂ、再生停止ボタン  ２１３Ｃ、終了ボタン  ２１４、画像の大きさ
２１５、音量レベル  ２１５Ａ、小ボタン  ２１５Ｂ、大ボタン
２１６、文字サイズ  ２１６Ａ、小ボタン  ２１６Ｂ、大ボタン
２２０、メニュー画像  ２２１Ａ、文字縮小ボタン  ２２１Ｂ、拡大ボタン
２２２、音量  ２２２Ａ、音量小ボタン  ２２２Ｂ、音量大ボタン
２２３、映像サイズ  ２２３Ａ、映像縮小ボタン  ２２３Ｂ、映像大ボタン
２２４Ａ、再生時間  ２２４Ｂ、再生状況表示部
【図１】
2005347857.tif 000003
【図２】
2005347857.tif 000004
【図３】
2005347857.tif 000005
【図４】
2005347857.tif 000006
【図５】
2005347857.tif 000007
【図６】
2005347857.tif 000008
【図７】
2005347857.tif 000009