(57)【要約】【課題】  通話音声とは異なる外部音を、通話音声と同時に出力する際に、通話音声が聞き取りにくくならないことを可能にする。【解決手段】  第１話者が第２話者と通話する通話装置（端末１００）は、第２話者の音声データ（符号化系列Ｂ２）を入力する入力手段（第２音声受信部１０４）と、第２話者の音声とは異なる外部音（コンテンツＶ３）を、第２話者の音声（通話音声Ｖ２）の特性に応じて調整する調整手段（コンテンツ調整部１１２）と、調整された前記第２話者の音声とは異なる外部音を出力する出力手段（コンテンツ出力部１１３）と、を備える。【選択図】図２
2017092608.tif 000002
【特許請求の範囲】
【請求項１】
通信網を介して通話を行う通話装置において、
前記通信網を介して通話音声および当該通話音声とは異なる外部音を入力する入力手段と、
前記入力手段により入力された外部音を、前記通話音声の特性に応じて調整する調整手段と、
前記調整手段により調整された外部音を、通話音声とともに出力する出力手段と、
を備える通話装置。
【請求項２】
前記調整手段は、前記通話音声とは異なる外部音を、前記通話音声の音声周波数帯域に応じて調整する、
請求項１に記載の通話装置。
【請求項３】
前記調整手段は、前記通話音声とは異なる外部音を、通話に利用される音声コーデックの種類、サンプリングレートまたは通話相手の通信装置の種別の少なくとも一つに応じて調整する、
請求項１に記載の通話装置。
【請求項４】
前記調整手段は、前記通話音声の特性に基づいて前記外部音の音声周波数帯域から所定の帯域を特定し、当該所定の帯域におけるパワーを調整する、
請求項１〜３のいずれか１項に記載の通話装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、通話のほかに音楽等の外部音を通話相手に提供する通話装置に関する。
【背景技術】
【０００２】
従来より、携帯電話機などを用いた音声通話に、話者の音声（通話音声）とは異なる音（外部音）を提供する技術が提案されている。たとえば下記特許文献１は、通話中に背景楽音を再生することができる電話端末装置を開示する。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−２１７６１４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１の電話端末装置のように、機器に保持された音源を外部からの制御信号により再生する場合、音源を保持する機器からは伝送に伴う劣化のない高品質な音を再生することができる。しかしながら、それらの音を音声通話中の背景音として利用する場合、伝送に伴う劣化を含む音声に対し、高品質な背景音が際立ってしまい、音声が聞き取りづらくなるおそれがある。
【０００５】
本発明は、上記問題点に鑑みてなされたものであり、通話音声とは異なる外部音が当該通話音声と同時に出力される際に、通話音声が聞き取りにくくならない通話装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上述の課題を解決するために、本発明の通話装置は、通信網を介して通話を行う通話装置において、前記通信網を介して通話音声および当該通話音声とは異なる外部音を入力する入力手段と、前記入力手段により入力された外部音を、前記通話音声の特性に応じて調整する調整手段と、前記調整手段により調整された外部音を、通話音声とともに出力する出力手段と、を備える。
【０００７】
この発明によれば、通話相手の音声とは異なる外部音は、通話相手の音声の特性に応じて調整されて出力されるため、当該外部音を、通話音声と同時に出力する際に、通話音声が聞き取りにくくならない。
【０００８】
また、本発明の通話装置において、前記調整手段は、前記通話音声とは異なる外部音を、前記通話音声の音声周波数帯域に応じて調整するようにしてもよい。
この発明によれば、通話相手の音声の音声周波数帯域に応じて通話相手の音声とは異なる外部音を調整することで、通話相手の音声の聞き取りやすさを損なわないように調整することができる。
【０００９】
また、本発明の通話装置において、前記調整手段は、前記通話音声とは異なる外部音を、通話に利用される音声コーデックの種類、サンプリングレートまたは通話相手の通信装置の種別の少なくとも一つに応じて調整するものである。これにより、通話相手の音声の聞き取りやすさを損なわないようにすることができる。
【００１０】
また、本発明の通話装置における前記調整手段は、前記通話音声の特性に基づいて前記外部音の音声周波数帯域から所定の帯域を特定し、当該所定の帯域におけるパワーを調整する。これにより、前記通話相手の音声とは異なる外部音が同時に出力される場合にも、通話相手の音声の聞き取りやすさを損なわないように調整することができる。
【発明の効果】
【００１１】
本発明によれば、通話音声とは異なる外部音を、通話音声の特性に応じて調整して出力することによって、通話音声とは異なる外部音を、通話音声と同時に出力する際に、通話音声が聞き取りにくくならないことが可能になる。
【図面の簡単な説明】
【００１２】
【図１】本発明の通話装置に係る通話システムの概略構成を示す図である。
【図２】本発明の通話装置の機能ブロックを示す図である。
【図３】本発明の通話装置に係る端末のハードウェア構成図である。
【図４】本発明の通話装置において実行される処理の一例を示すフローチャートである。
【発明を実施するための形態】
【００１３】
以下、本発明の実施形態について、図面を参照しながら説明する。なお、図面の説明において同一要素には同一符号を付し、重複する説明は省略する。
【００１４】
図１は、本発明の通話装置に係る通話システムの概略構成を示す図である。図１に示すように、通話システムにおいて、ユーザ１（第１話者）とユーザ２（第２話者）との通話が行われる。通話システムでは、第１端末（後述の端末１００）および第２端末（後述の端末２００、端末１００と同じ構成が好ましい）が、通話装置として用いられる。ユーザ１が第１端末を利用し、ユーザ２が第２端末を利用することによって、ユーザ１とユーザ２との音声通話が実現される。
【００１５】
通話システムにおいて、たとえば端末１００および端末２００は、通信ネットワーク３（通信網）を介して通信可能に構成されている。さらに、サーバ３００が、通信ネットワーク３を介して、端末１００および端末２００と通信可能に構成されていてもよい。
【００１６】
通話システムの動作概要の一例について説明する。たとえば、端末２００においてユーザ１の通話相手であるユーザ２の通話音声Ｖ２が入力されると、符号化された後、符号化系列として出力されて端末１００へ送信される。同時に、ユーザ２の端末２００の操作（ユーザ操作）によって端末１００内に保持されているコンテンツＶ３（通話音声とは異なる外部音）を再生するための指示信号が生成され、端末１００へ送信される。
【００１７】
具体的に、図１に示される通り、端末１００と端末２００とにおいて、コンテンツのセットであるコンテンツａ〜ｃが、各コンテンツを再生するための指示信号ａ〜ｃと対応付けられて保持されている。ユーザ２が選択したコンテンツに対応した指示信号がユーザ１の端末１００に送信され、端末１００で指示信号に対応するコンテンツが再生されることでユーザ２が所望するコンテンツを端末１００で再生することができる。これによって、ユーザ１は、ユーザ２の通話音声Ｖ２だけでなく、ユーザ２が所望するコンテンツＶ３も聞くことができる。同時に、ユーザ２もコンテンツＶ３を聞くことができてもよい。端末１００と端末２００とに保持されているコンテンツのセットは、すべて同じものであってもよい。また、少なくともユーザ２が選択したコンテンツが端末１００に保持されていてもよい。
【００１８】
端末１００と端末２００との構成が同じであることで、逆にユーザ２は、ユーザ１の通話音声Ｖ１だけでなく、ユーザ１が所望するコンテンツＶ３も聞くことができる。このとき、ユーザ１もコンテンツＶ３を聞くことができてもよい。
【００１９】
コンテンツＶ３の例として、たとえば効果音や、ＢＧＭのような音楽が挙げられる、ただし、コンテンツＶ３は音楽に限定されるものでなく、鳥のさえずりや駅の雑踏のような環境音、あるいはセリフなどの音声であってもよい。
【００２０】
ここで、通話システムでは、通話音声Ｖ１またはＶ２の特性に基づいてコンテンツＶ３を調整することができる。たとえば、ユーザ１が通話音声Ｖ２とコンテンツＶ３を同時に聞く場合、この通信システムは、通話音声Ｖ２の音声周波数帯域に応じて、コンテンツＶ３の音声周波数帯域や音量を調整することで、通話音声Ｖ２とコンテンツＶ３を同時に聞く場合でも、ユーザ１が通話音声Ｖ２を聞き取りづらくならないようにすることができる。
【００２１】
なお、本発明はコンテンツが端末１００に保持されてない場合にも適用できる。その場合、コンテンツＶ４が端末２００またはサーバ３００に保持され、ユーザ２の操作に応じて端末１００に送信されてもよい。端末１００は、通話音声Ｖ２の音声周波数帯域に応じて、受信したコンテンツＶ４の音声周波数帯域や音量を調整する。この場合、以降の説明におけるコンテンツＶ３はコンテンツＶ４に置き換えられる。
【００２２】
図２は、本発明の通話装置の機能ブロックを示す図である。図１に示したように、第１の通話装置である端末１００（第１端末）と、第２の通話装置である端末２００（第２端末）とによって、ユーザ１とユーザ２との通話が行われる。
【００２３】
図２に示すように、端末１００は、第１音声入力部１０１と、第１音声符号化部１０２と、第１音声送信部１０３と、第２音声受信部１０４（入力手段）と、第２音声復号部１０５と、第２音声出力部１０６と、第１コンテンツ再生指示信号入力部１０７と、第１コンテンツ再生指示信号送信部１０８と、第２コンテンツ再生指示信号受信部１０９と、コンテンツ保持部１１０と、音声特性保持部１１１と、コンテンツ調整部１１２（調整手段）と、コンテンツ出力部１１３（出力手段）とを含む。
【００２４】
第１音声入力部１０１は、一方の話者（図１のユーザ１）の通話音声Ｖ１を入力する部分である。第１音声入力部１０１は、たとえばマイクロフォンを含んで構成される。
第１音声符号化部１０２は、第１音声入力部１０１に入力された通話音声Ｖ１を符号化して、符号化系列Ｂ１を生成する部分である。
【００２５】
第１音声送信部１０３は、第１音声符号化部１０２によって符号化された通話音声Ｖ１を送信する部分である。具体的に、第１音声送信部１０３は、通話音声Ｖ１が符号化された符号化系列Ｂ１を、端末２００に送信する。
【００２６】
第２音声受信部１０４は、通話相手（図１のユーザ２）の符号化された通話音声Ｖ２を受信する部分である。具体的に、第２音声受信部１０４は、端末２００においてユーザ２の通話音声Ｖ２が符号化された符号化系列Ｂ２を受信する。
第２音声復号部１０５は、第２音声受信部１０４が受信した符号化系列Ｂ２を復号する部分である。
【００２７】
第２音声出力部１０６は、第２音声復号部１０５によって復号された符号化系列Ｂ２に応じた音（つまりユーザ２の通話音声Ｖ２）を出力する部分である。第２音声出力部１０６は、たとえばスピーカを含んで構成されており、通話音声Ｖ２を出力する。これにより、ユーザ１は、ユーザ２の通話音声Ｖ２を聞くことができる。
【００２８】
第１コンテンツ再生指示信号入力部１０７は、ユーザ操作に基づいて、第１コンテンツ再生指示信号Ｃ１を入力する部分である。ユーザ操作は、たとえばユーザ１（図１）が端末１００に設けられた操作盤やタッチパネルなどのデバイスを操作することによって行われる。また、ユーザ操作は、たとえば先に図１を参照して説明したように、種々のコンテンツａ〜ｃなどから、ユーザ１が所望する音をコンテンツＶ３として選択する操作や、コンテンツＶ３の再生を停止する操作を含む。さらに、上記の操作盤やタッチパネルなどのデバイスが、ユーザ操作に応じて選択されたコンテンツに対応した第１コンテンツ再生指示信号Ｃ１を発生させ、その第１コンテンツ再生指示信号Ｃ１が第１コンテンツ再生指示信号入力部１０７に入力される。
【００２９】
第１コンテンツ再生指示信号送信部１０８は、第１コンテンツ再生指示信号入力部１０７に入力された第１コンテンツ再生指示信号Ｃ１を送信する部分である。具体的に、第１コンテンツ再生指示信号送信部１０８は、第１コンテンツ再生指示信号Ｃ１を、端末２００に送信する。
【００３０】
なお、第１コンテンツ再生指示信号送信部１０８が、第１コンテンツ再生指示信号を送信する代わりに、第１音声符号化部１０２が、第１コンテンツ再生指示信号Ｃ１が指示するコンテンツＶ３を通話音声Ｖ１に重畳し、重畳された第１音声を符号化し、第１音声送信部１０３が送信してもよい。または、第１音声入力部１０１と、第１音声符号化部１０２との間に重畳処理部を配置しておき、当該重畳処理部が、後述するコンテンツ保持部１１０から出力されたコンテンツＶ３の再生音を通話音声Ｖ１に重畳し、第１音声送信部１０３から符号化系列Ｂ１として送信するようにしてもよい。
【００３１】
さらに、端末２００がユーザ１の所望するコンテンツを保持していない場合、コンテンツ送信部を設け、後述するコンテンツ保持部１１０から出力されたコンテンツＶ４を端末２００に送信しても良い。この場合、以降の説明におけるコンテンツＶ３はコンテンツＶ４に置き換えられる。
【００３２】
第２コンテンツ再生指示信号受信部１０９は、端末２００（図１）から送信された第２コンテンツ再生指示信号Ｃ２を受信する部分である。第２コンテンツ再生指示信号Ｃ２は第１コンテンツ再生指示信号Ｃ１と同様にユーザ２（図１）によって生成され、後述するコンテンツ保持部１１０に保持されている種々のコンテンツａ〜ｃなどから、ユーザ２が所望する音の再生を指示する。
【００３３】
コンテンツ保持部１１０は、通話音声とは異なる外部音であるコンテンツＶ３を保持する部分である。具体的には、コンテンツ保持部１１０は、図１に示したように種々のコンテンツａ〜ｃなどを、コンテンツａ〜ｃなどを再生指示信号ａ〜ｃなどと対応付けて保持している。コンテンツ保持部１１０は、第１コンテンツ再生指示信号Ｃ１あるいは第２コンテンツ再生指示信号Ｃ２を入力すると、再生指示信号に対応したコンテンツＶ３を出力する。たとえば、入力された第１コンテンツ再生指示信号Ｃ１が、コンテンツａの再生を指示する再生指示信号aであった場合、コンテンツ保持部１１０はコンテンツＶ３として、コンテンツａを出力する。なお、言うまでもなく、コンテンツ保持部１１０が保持するコンテンツは所定のコンテンツａ〜ｃに限定されるものではなく、たとえば、外部のサーバから新たなコンテンツのセットをダウンロードし、コンテンツＶ３として利用することができる。
【００３４】
また、コンテンツ保持部１１０に入力されるのは、第２コンテンツ再生指示信号Ｃ２の代わりに、外部のサーバあるいは端末２００から送信されてきたコンテンツＶ４であってもよい。その場合は、コンテンツ保持部１１０は受信したコンテンツＶ４を出力する。この場合、以降の説明におけるコンテンツＶ３はコンテンツＶ４に置き換えられる。
【００３５】
音声特性保持部１１１は、通話相手の音声の特性を保持する部分である。具体的には、音声特性保持部１１１に保持される特性は、通話に利用されているコーデックや、サンプリングレートや、音声周波数帯域である。あるいは、通話相手が使用している通話装置の種類、例えば固定電話か、スマートフォンの機種などでも良い。一般的に、コーデックや、サンプリングレートに基づいて、音声周波数帯域を把握することが可能である。また、固定電話か携帯電話かによっても、使用される音声周波数帯域が異なり、さらに、携帯電話の機種によっても使用される音声周波数帯域が異なる場合があることから、それら情報を音声特性として保持しておくようにしてもよい。
【００３６】
この特性は、通話開始時に取得することが好ましく、コーデックの種類やサンプリングレート、通信装置の種別（固定電話であるか否か）は、通信のセッションを確立するときにそれら情報を取得することが可能であり、このとき、通話に利用されているコーデックや、サンプリングレートや、音声周波数帯域や、通話装置の種類から出力される通話音声Ｖ２の特性を知ることができる。
【００３７】
また、音声特性保持部１１１に保持される特性は、復号された第２音声を解析することで得られても良い。特性として、たとえば、通話音声Ｖ２に含まれる音声周波数の分布や、音量レベルなどが考えられる。通話音声Ｖ２の解析を逐次実行することで、後述するコンテンツ調整部１１２において動的な制御を行うこともできる。この場合、音声特性保持部１１１の代わりに音声解析部を設け、解析結果を逐次コンテンツ調整部１１２に入力しても良い。コンテンツ調整部１１２は、第２音声に含まれる音声周波数の分布と音量レベルとの一方に応じた調整をしても良いし、両方に応じた調整をしても良い。
【００３８】
コンテンツ調整部１１２は、コンテンツ保持部から出力されたコンテンツＶ３を通話相手の音声の特性に応じて調整する部分（調整手段）である。具体的には、通話音声Ｖ２よりも、コンテンツＶ３の方が際立ち、通話音声Ｖ２とコンテンツＶ３とが同時に出力された場合に、通話音声Ｖ２が聞き取りづらくならないようにコンテンツＶ３の音声周波数帯域や音量を調整する。例えば、コンテンツＶ３に、通話音声Ｖ２よりも高い音声周波数帯域の音が含まれないようにしたり、高い音声周波数帯域（所定範囲の音声周波数帯域）のパワーを小さくしたりする、などの調整が考えられる。
【００３９】
さらに、コンテンツ調整部１１２は、コンテンツＶ３の音声周波数帯域ごとのパワーが、基準となる通話音声Ｖ２の音声周波数帯域ごとのパワーを、その帯域ごとにあらかじめ定めた割合（ｘ％）、上回る場合には、その音声周波数帯域ごとにおけるパワーを所定量（ｆ（ｘ）［ｄＢ］）下げるようにするようにしてもよい。これにより、通話音声Ｖ２に応じたコンテンツＶ３のきめ細かな調整制御を可能にすることができる。
【００４０】
コンテンツ調整部１１２が行う調整方法は、ダイナミクス処理、フィルタリング処理、イコライジング処理など、一般的なオーディオ処理でも良いし、符号化および復号処理でも良い。符号化および復号処理の場合は、音声通話に使用されている符号化および復号方法と同じ方法を使用することが好ましい。
【００４１】
コンテンツ調整部１１２は、特定の条件が満たされた場合、調整の有無を含めた調整方法を変えても良い。例えば、通話に利用されているコーデックによっては調整しない（あるいは調整を軽度にする）、通話音声Ｖ２に含まれる音声周波数の帯域によっては調整しない（あるいは調整を軽度にする）、などの制御が考えられる。その場合、前記の特性は音声特性保持部１１１から入力されることが好ましい。他の例としては、通話相手が発話せず、通話音声Ｖ２が出力されない間はコンテンツＶ３の調整は行わない（あるいは調整を軽度にする）、などの制御が考えられる。その場合、通話音声Ｖ２の符号化データまたは復号された通話音声Ｖ２がコンテンツ調整部１１２に入力されることが好ましい。ここで、調整を軽度にするということは、調整対象となる周波数帯域を狭くしたり、その調整量となるパワーの増減幅を小さくしたりすることなどである。
【００４２】
また、コンテンツ調整部１１２は、入力されるコンテンツＶ３が、第１コンテンツ再生指示信号Ｃ１に由来するか、あるいは第２コンテンツ再生指示信号Ｃ２に由来するかに応じて、調整の有無を含めた調整方法を変えても良い。たとえば、第１コンテンツ再生指示信号Ｃ１に由来する場合はコンテンツＶ３の調整は行わない（あるいは調整を軽度にする）などの制御が考えられる。その場合、入力されるコンテンツＶ３が、第１コンテンツ再生指示信号Ｃ１に由来するか、あるいは第２コンテンツ再生指示信号Ｃ２に由来するかを示す情報がコンテンツ調整部１１２に入力されることが好ましい。また、その情報は、第１コンテンツ再生指示信号Ｃ１ならびに第２コンテンツ再生指示信号Ｃ２が、コンテンツ調整部１１２に直接入力されても良い。
【００４３】
さらに、コンテンツ調整部１１２は、別途入力されるユーザからの指示に応じて調整の有無を含めた調整方法を変えても良い、たとえば、ユーザ操作によって調整の有無を切り替える（あるいは調整の程度を変更する）、などの制御が考えられる。その場合、ユーザインターフェースを介したユーザからの指示情報がコンテンツ調整部１１２に入力されることが好ましい。
【００４４】
コンテンツ調整部１１２が調整を行う代わりに、あらかじめ調整されたコンテンツを選択することでコンテンツの調整を実現しても良い。その場合、コンテンツ保持部１１０にあらかじめ調整されたコンテンツが保持され、音声特性保持部１１１から入力される特性に応じて、コンテンツを選択することが望ましい。ここで、あらかじめ施される調整とは、コンテンツ調整部１１２が行う調整と同じであることが好ましい。
【００４５】
なお、コンテンツ調整部１１２は、コンテンツ保持部１１０が保持するコンテンツＶ３を入力する代わりに、外部から受信したコンテンツＶ４を、コンテンツ保持部１１０を介して、あるいは介さずに直接、入力しても良い。たとえば、通話相手が第２コンテンツ再生指示信号の代わりにコンテンツＶ４を送信し、コンテンツ調整部１１２は、そのコンテンツＶ４を入力する、あるいは通話相手が送信した再生指示信号をネットワーク上のサーバが受け、サーバがコンテンツＶ４を送信し、コンテンツ調整部１１２は、そのコンテンツＶ４を入力するなどの形態が考えられる。この場合、以降の説明におけるコンテンツＶ３はコンテンツＶ４に置き換えられる。
【００４６】
コンテンツ出力部１１３は、コンテンツ調整部から１１２から入力されたコンテンツＶ３を出力する部分である。コンテンツ出力部１１３は、たとえばスピーカを含んで構成される。具体的に、コンテンツ出力部１１３は、コンテンツＶ３を出力する。これにより、ユーザ１は、ユーザ２が所望したコンテンツＶ３の再生音を聞くことができる。
【００４７】
コンテンツ出力部１１３が、コンテンツＶ３の再生音を出力する代わりに、復号された通話音声Ｖ２にコンテンツＶ３の再生音を重畳し、前記重畳された通話音声を第２音声出力部１０６から出力してもよい。その場合、第２音声復号部１０５と、第２音声出力部１０６との間で、コンテンツ調整部１１２から出力されたコンテンツＶ３の再生音が重畳されることが好ましい。
【００４８】
ここで、図３を参照して、端末１００のハードウェア構成について説明する。図３は、端末１００のハードウェア構成図である。図３に示されるように、端末１００は、物理的には、１または複数のＣＰＵ（Central  Processing  unit）２１、主記憶装置であるＲＡＭ（Random  Access  Memory）２２およびＲＯＭ（Read  Only  Memory)２３、データ送受信デバイスである通信モジュール２６、半導体メモリなどの補助記憶装置２７、操作盤（操作ボタンを含む）やタッチパネルなどのユーザの入力を受け付ける入力装置２８、ディスプレイなどの出力装置２９、などのハードウェアを備えるコンピュータとして構成することができる。図２における端末１００の各機能は、たとえば、ＣＰＵ２１、ＲＡＭ２２などのハードウェア上に１または複数の所定のコンピュータソフトウェアを読み込ませることにより、ＣＰＵ２１の制御のもとで通信モジュール２６、入力装置２８、出力装置２９を動作させるとともに、ＲＡＭ２２および補助記憶装置２７におけるデータの読み出しおよび書き込みを行うことで実現することができる。なお、端末２００についても、端末１００と同様のハードウェア構成とすることができる。
【００４９】
次に、図４を参照して、本発明に係る通話装置の動作（端末１００によって実行される通話方法）について説明する。図４は、端末１００において実行される処理の一例を示すフローチャートである。このフローチャートの処理は、端末１００を利用するユーザ１（図１）と、端末２００を利用するユーザ２との通話中に実行される。
【００５０】
図４に示すように、端末１００においては、４系統の処理フロー（Ｓ１０１〜Ｓ１０３、Ｓ１０４〜Ｓ１０９、Ｓ１１０〜Ｓ１１２、Ｓ１１３〜Ｓ１１７）の複数を並列に実行可能である。
【００５１】
まずは、Ｓ１０１〜Ｓ１０３の処理フローについて説明する。はじめに、端末１００において、第１音声を入力する（ステップＳ１０１）。具体的には、第１音声入力部１０１が、ユーザ１の通話音声Ｖ１を入力する。
【００５２】
さらに、端末１００は、第１音声を符号化する（ステップＳ１０２）。具体的には、第１音声符号化部１０２が、ユーザ１の通話音声Ｖ１を符号化する。
【００５３】
さらに、端末１００は、符号化系列を送信する（ステップＳ１０３）。具体的には、第１音声送信部１０３が、符号化系列Ｂ１を、端末２００に送信する。
【００５４】
次に、Ｓ１０４〜Ｓ１０９の処理フローについて説明する。はじめに、端末１００において、第１コンテンツ再生指示信号を入力する（ステップＳ１０４）。具体的には、第１コンテンツ再生指示信号入力部１０７がユーザ操作に基づいて、第１コンテンツ再生指示信号Ｃ１を入力する。
【００５５】
さらに、端末１００は、第１コンテンツ再生指示信号を送信する（ステップＳ１０５）。具体的には、第１コンテンツ再生指示信号送信部１０８が、第１コンテンツ再生指示信号Ｃ１を端末２００に送信する。
【００５６】
なお、端末２００がユーザ１の所望するコンテンツを保持していない場合、第１コンテンツ再生指示信号Ｃ１の代わりに、コンテンツＶ４を端末２００に送信しても良い。この場合、以降の説明におけるコンテンツＶ３はコンテンツＶ４に置き換えられる。
【００５７】
また、端末１００は、コンテンツを読み込む（ステップＳ１０６）。具体的には、コンテンツ保持部１１０が、保持しているコンテンツのうち、第１コンテンツ再生指示信号Ｃ１よって指示されたコンテンツＶ３を出力し、コンテンツ調整部１１２が読み込む。
【００５８】
また、端末１００は、音声特性を読み込む（ステップＳ１０７）。具体的には、音声特性保持部１１１が、保持している通話相手の音声の特性を出力し、コンテンツ調整部１１２が読み込む。音声特性保持部１１１に保持される特性が、復号された通話音声Ｖ２を解析することで得られる場合には、ステップＳ１０７の処理は後述するステップＳ１１１の処理が実行された後に実行される。
【００５９】
なお、上記ステップＳ１０６、Ｓ１０７の処理については、ステップＳ１０６の処理が実行された後にステップＳ１０７の処理が実行されてもよいし、ステップＳ１０７の処理が実行された後にステップＳ１０６の処理が実行されてもよい。
さらに、端末１００はコンテンツを調整する（ステップＳ１０８）。具体的には、コンテンツ調整部１１２が、コンテンツ保持部から出力されたコンテンツＶ３を通話相手の音声の特性に応じて調整する。
【００６０】
さらに、端末１００は調整されたコンテンツを出力する（ステップＳ１０９）。具体的には、コンテンツ出力部１１３が、調整されたコンテンツＶ３を出力する。
【００６１】
なお、上記ステップＳ１０５、Ｓ１０６〜Ｓ１０９の処理については、ステップＳ１０５の処理が実行された後にステップＳ１０６〜Ｓ１０９の処理が実行されてもよいし、ステップＳ１０６〜Ｓ１０９の処理が実行された後にステップＳ１０５の処理が実行されてもよい。
【００６２】
次に、Ｓ１１０〜Ｓ１１２の処理フローについて説明する。はじめに、端末１００において、通話音声Ｖ２を受信する（ステップＳ１１０）。具体的には、第２音声受信部１０４が、符号化系列Ｂ２を受信する。
【００６３】
さらに、端末１００は、通話音声Ｖ２を復号する（ステップＳ１１１）。具体的には、第２音声復号部１０５が、符号化系列Ｂ２を復号する。
【００６４】
さらに、端末１００は、通話音声Ｖ２を出力する（ステップＳ１１２）。具体的には、復号された符号化系列Ｂ２に応じた音（つまりユーザ２の通話音声Ｖ２）を出力する。
【００６５】
次に、Ｓ１１３〜Ｓ１１７の処理フローについて説明する。はじめに、端末１００において、第２コンテンツ再生指示信号を受信する（ステップＳ１１３）。具体的には、第２コンテンツ再生指示信号受信部１０９が、第２コンテンツ再生指示信号Ｃ２を受信する。
【００６６】
さらに、端末１００は、コンテンツを読み込む（ステップＳ１１４）。具体的には、コンテンツ保持部１１０が、保持しているコンテンツのうち、第２コンテンツ再生指示信号Ｃ２よって指示されたコンテンツＶ３を出力し、コンテンツ調整部１１２が読み込む。
【００６７】
なお、ステップＳ１１３とステップＳ１１４では第２コンテンツ再生指示信号Ｃ２の代わりに、端末２００あるいは外部のサーバから送信されたコンテンツＶ４を受信し、出力しても良い。この場合、以降の説明におけるコンテンツＶ３はコンテンツＶ４に置き換えられる。
【００６８】
また、端末１００は、音声特性を読み込む（ステップＳ１１５）。具体的には、音声特性保持部１１１が、保持している通話相手の音声の特性を出力し、コンテンツ調整部１１２が読み込む。音声特性保持部１１１に保持される特性が、復号された通話音声Ｖ２を解析することで得られる場合には、ステップＳ１１５の処理はステップＳ１１１の処理が実行された後に実行される。
【００６９】
なお、上記ステップＳ１１４、Ｓ１１５の処理については、ステップＳ１１４の処理が実行された後にステップＳ１１５の処理が実行されてもよいし、ステップＳ１１５の処理が実行された後にステップＳ１１４の処理が実行されてもよい。
さらに、端末１００はコンテンツを調整する（ステップＳ１１６）。具体的には、コンテンツ調整部１１２が、コンテンツ保持部から出力されたコンテンツＶ３を通話相手の音声の特性に応じて調整する。
【００７０】
さらに、端末１００は調整されたコンテンツを出力する（ステップＳ１１７）。具体的には、コンテンツ出力部１１３が、調整されたコンテンツＶ３を出力する。
【００７１】
上述した４系統の処理フロー（Ｓ１０１〜Ｓ１０３、Ｓ１０４〜Ｓ１０９、Ｓ１１０〜Ｓ１１２、Ｓ１１３〜Ｓ１１７）を実行した後、端末１００は再び４系統の処理フローを実行する（並列に実行可能）である。このようにして図４のフローチャートの処理が繰り返し実行されることによって、ユーザ１とユーザ２との通話が進められる。
【００７２】
次に、端末１００の作用効果について説明する。端末１００では、第１音声入力部１０１がユーザ１の通話音声Ｖ１を入力し（ステップＳ１０１）、第１音声符号化部１０２が通話音声Ｖ１を符号化し（ステップＳ１０２）、第１音声送信部１０３が符号化された通話音声Ｖ１である符号化系列Ｂ１を送信する（ステップＳ１０３）。
【００７３】
また、第２音声受信部１０４が、符号化されたユーザ２の通話音声Ｖ２である符号化系列Ｂ２を受信し（ステップＳ１１０）、第２音声復号部１０５が符号化系列Ｂ２を復号し（ステップＳ１１１）、第２音声出力部１０６が、復号された符号化系列Ｂ２に応じた音（つまりユーザ２の通話音声Ｖ２）を出力する（ステップＳ１１２）。
【００７４】
また、第１コンテンツ再生指示信号入力部１０７が、ユーザ操作に基づいて、第１コンテンツ再生指示信号Ｃ１を入力し（ステップＳ１０４）、第１コンテンツ再生指示信号送信部１０８が、第１コンテンツ再生指示信号Ｃ１を送信し（ステップＳ１０５）、また、第２コンテンツ再生指示信号受信部１０９が、第２コンテンツ再生指示信号Ｃ２を受信し（ステップＳ１１３）、コンテンツ保持部１１０が保持し、第１コンテンツ再生指示信号Ｃ１あるいは第２コンテンツ再生指示信号Ｃ２に対応した通話音声とは異なる外部音であるコンテンツＶ３を出力し（ステップＳ１０６またはＳ１１４）、音声特性保持部１１１が、通話相手の音声の特性を出力し（ステップＳ１０７またはＳ１１５）、コンテンツ調整部１１２が、コンテンツＶ３を通話相手の音声の特性に応じて調整し（ステップＳ１０８またはＳ１１６）、コンテンツ出力部１１３は、調整されたコンテンツＶ３を出力する（ステップＳ１０９またはＳ１１７）。
【００７５】
コンテンツ調整部１１２によって実行される処理（ステップＳ１０８またはＳ１１６）は、通話相手の通話音声Ｖ２とは異なる外部音であるコンテンツＶ３を、通話相手の音声の特性に応じて調整する処理である。端末１００によれば、たとえば、コンテンツ調整部１１２は、通話に利用される音声コーデックや、通話相手の音声の音声周波数帯域に基づいて、通話相手の音声とは異なる外部音の音声周波数帯域から所定の帯域を特定し、その帯域におけるパワーを調整することで、通話相手の音声とは異なる外部音が同時に出力される場合にも、通話相手の音声の聞き取りやすさを損なわないようにすることができる。
【００７６】
本発明は、上述した実施形態に限定されるものではない。実施形態に含まれる各手段や処理ステップの特徴部分を適宜組み合わせた構成についても、本発明の実施形態とすることができる。
【符号の説明】
【００７７】
１００…端末、１０１…第１音声入力部、１０２…第１音声符号化部、１０３…第１音声送信部、１０４…第２音声受信部、１０５…第２音声復号部、１０６…第２音声出力部、１０７…第１コンテンツ再生指示信号入力部、１０８…第１コンテンツ再生指示信号送信部、１０９…第２コンテンツ再生指示信号受信部、１１０…コンテンツ保持部、１１１…音声特性保持部、１１２…コンテンツ調整部、１１３…コンテンツ出力部、２００…端末、３００…サーバ。
【図１】
2017092608.tif 000003
【図２】
2017092608.tif 000004
【図３】
2017092608.tif 000005
【図４】
2017092608.tif 000006