(57)【要約】【課題】  従来、通信回線の品質や帯域について何ら考慮されていないため、通信回線の品質が悪かったり、帯域が不足している場合など、音声が途切れてスムーズに会話ができない、という問題がある。【解決手段】  音声・文字情報統合手段１３は、音声入力手段１１から出力された送話音声信号を示す音声情報と、音声認識手段１２により音声認識して得られた送話音声を示す文字情報とを統合した統合データを作成して、統合データ送信手段１４より受信側の電話機５宛に送信する。受信側の電話機５は、受信した統合データから音声情報と文字情報を音声・文字情報分離手段５２で分離し、音声歪み解析手段５４で音声情報の歪み量を測定する。音声補完手段５５は、音声情報を出力するが、音声の歪み量がしきい値以上の時には音声合成手段５３により音声合成処理して得られた音声合成信号で音声情報を補完する。【選択図】            図１
2006270143.tif 000002
【特許請求の範囲】
【請求項１】
送信側電話端末から送話音声信号を音声認識して得られた音声認識信号を受信側電話端末で受信して音声合成して送話音声信号を復元する電話音声認識システムにおいて、
前記送信側電話端末は、前記送話音声信号を音声認識して得られた送話音声の文字情報と前記送話音声信号の音声情報とからなる統合データを生成して送信する手段を有し、
前記受信側電話端末は、前記統合データを受信して前記文字情報と前記音声情報とに分離し、分離した前記音声情報の歪み量が設定したしきい値以上であるときは前記文字情報を音声合成して得られた音声合成信号を選択し、前記歪み量が前記しきい値未満であるときには前記分離した音声情報を選択する分離・選択手段と、選択した音声合成信号又は前記音声情報を送話音声として発音する音声出力手段とを有することを特徴とする電話音声認識システム。
【請求項２】
送信側電話端末から送話音声信号を音声認識して得られた音声認識信号を受信側電話端末で受信して音声合成して送話音声信号を復元する電話音声認識システムにおいて、
前記送信側電話端末は、
送話音声を送話音声信号として取り込む音声入力手段と、
前記送話音声信号を音声認識処理により送話音声の文字情報を得る音声認識手段と、
前記音声入力手段から出力される前記送話音声信号を音声情報とし、前記音声認識手段から出力される前記文字情報と共に所定単位で統合した統合データを生成する統合手段と、
前記統合データを相手電話端末へ送信する送信手段とを有し、
前記受信側電話端末は、
前記統合データを受信する受信手段と、
前記受信手段で受信された前記統合データを前記音声情報と前記文字情報とに分離する分離手段と、
分離された前記音声情報の歪み量を測定する歪み解析手段と、
分離された前記文字情報に対して音声合成処理を行って音声合成信号を出力する音声合成手段と、
前記歪み解析手段により測定された前記歪み量が、設定したしきい値以上であるときは前記音声合成信号を選択し、前記歪み量が前記しきい値未満であるときには前記ひずみ量が測定された前記音声情報を選択する補完手段と、
前記補完手段から出力された前記音声合成信号又は前記音声情報を音声として外部へ発音する音声出力手段とを有することを特徴とする電話音声認識システム。
【請求項３】
前記統合データ中の前記音声情報は、単音毎のアナログ音声信号である前記送話音声信号であり、前記統合データ中の前記文字情報は、前記送話音声の単音毎のディジタル信号である音声認識信号であることを特徴とする請求項１又は２記載の電話音声認識システム。
【請求項４】
送信側電話端末から送話音声信号を音声認識して得られた音声認識信号を受信側電話端末で受信して音声合成して送話音声信号を復元する電話音声認識システムにおいて、
前記送信側電話端末は、前記送話音声信号を音声認識して得られた送話音声の文字情報と前記送話音声信号の音声情報と受話音声の声質情報とからなる統合データを生成して送信する手段を有し、
前記受信側電話端末は、前記統合データを受信して前記文字情報と前記音声情報と前記声質情報とに分離し、分離した前記音声情報の歪み量が設定したしきい値以上であるときは、前記文字情報を前記声質情報が示す声質に近似した音声合成音を得る音声合成処理により得られた音声合成信号を選択し、前記歪み量が前記しきい値未満であるときには、前記分離した音声情報を選択する分離・選択手段と、選択した音声合成信号又は前記音声情報を送話音声として発音する音声出力手段とを有することを特徴とする電話音声認識システム。
【請求項５】
送信側電話端末から送話音声信号を音声認識して得られた音声認識信号を受信側電話端末で受信して音声合成して送話音声信号を復元する電話音声認識システムにおいて、
前記送信側電話端末は、
送話音声を送話音声信号として取り込む音声入力手段と、
前記送話音声信号を音声認識処理により送話音声の文字情報を得る音声認識手段と、
前記音声入力手段から出力される前記送話音声信号である音声情報と、前記音声認識手段から出力される前記文字情報と、受話音声の声質を示す声質情報とを所定単位で統合した統合データを生成する統合手段と、
前記統合データを相手電話端末へ送信する送信手段とを有し、
前記受信側電話端末は、
前記統合データを受信する受信手段と、
前記受信手段で受信された前記統合データを前記音声情報と前記文字情報と前記声質情報とに分離する分離手段と、
分離された前記音声情報の歪み量を測定する歪み解析手段と、
分離された前記文字情報と前記声質情報とに基づいて、前記文字情報を前記声質情報が示す声質に近似した音声合成音の音声合成信号を出力する音声合成手段と、
前記歪み解析手段により測定された前記歪み量が、設定したしきい値以上であるときは前記音声合成信号を選択し、前記歪み量が前記しきい値未満であるときには前記ひずみ量が測定された前記音声情報を選択する補完手段と、
前記補完手段から出力された前記音声合成信号又は前記音声情報を音声として外部へ発音する音声出力手段とを有することを特徴とする電話音声認識システム。
【請求項６】
前記統合データ中の前記音声情報は、単音毎のアナログ音声信号である前記送話音声信号であり、前記統合データ中の前記文字情報は、前記送話音声の単音毎のディジタル信号である音声認識信号であり、前記統合データ中の前記声質情報は、送話者又は好みの声質の音声波形を示すディジタル信号であることを特徴とする請求項４又は５記載の電話音声認識システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は電話音声認識システムに係り、特に電話音声を音声認識する電話音声認識システムに関する。
【背景技術】
【０００２】
従来から音声認識装置を電話音声に適用した電話音声認識システムが知られている（例えば、特許文献１参照）。この従来の電話音声認識システムは、各種メモリが搭載されたＣＰＵボードと、アナログ信号をディジタル信号に変換するＡ／Ｄ変換ボードと、網終端装置やディジタルスイッチが搭載され、電話回線接続端子が設けられた電話応答ボードと、これら各ボードを電気的に接続する通電体と、前記ＣＰＵボードから出力される信号を合成音声信号に生成して前記電話応答ボードに供給する音声合成装置とから構成されている電話音声認識・応答装置を、クライアントとして複数組ネットワークに接続し、そのネットワークを介して、サーバに認識結果を伝送したり、サーバからの指令を受け取って、それに対応した処理をクライアントが自動的に行うようにしたものである。
【０００３】
このような構成を有する従来の電話音声認識システムは次のように動作する。電話応答ボードの電話回線接続端子に接続された電話回線から送られてくるアナログ信号を、電話応答ボードからＡ／Ｄ変換ボードへ伝送してＡ／Ｄ変換ボードでディジタル信号に変換し、そのディジタル信号をＣＰＵボードに伝送して、認識処理を実行し、その認識結果を音声合成装置で合成音声にした後に、電話応答ボードから電話回線に送信する。
【０００４】
【特許文献１】特開２０００−２２８３０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかし、この従来の電話音声認識システムは、通信回線の品質や帯域について何ら考慮されていないため、電話回線から送られてくるアナログ信号は歪みがないことを前提にした動作をしてしまい、歪みがあるアナログ信号に対して合成音声処理を行ってしまうことである。このため、上記の従来の電話音声認識システムでは、通信回線の品質が悪かったり、帯域が不足している場合など、音声が途切れてスムーズに会話ができない、という問題がある。
【０００６】
本発明は、以上の点に鑑みなされたもので、電話音声認識と音声合成による電話音声補完を行うことにより、通信回線の品質が悪かったり帯域が不足している場合においても途切れのない会話ができる電話音声認識システムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記の目的を達成するため、本発明は、送信側電話端末から送話音声信号を音声認識して得られた音声認識信号を受信側電話端末で受信して音声合成して送話音声信号を復元する電話音声認識システムにおいて、送信側電話端末は、送話音声信号を音声認識して得られた送話音声の文字情報と送話音声信号の音声情報とからなる統合データを生成して送信する手段を有し、受信側電話端末は、統合データを受信して文字情報と音声情報とに分離し、分離した音声情報の歪み量が設定したしきい値以上であるときは文字情報を音声合成して得られた音声合成信号を選択し、歪み量がしきい値未満であるときには分離した音声情報を選択する分離・選択手段と、選択した音声合成信号又は音声情報を送話音声として発音する音声出力手段とを有することを特徴とする。この発明では、通信回線の品質が悪かったり、帯域が不足している場合など、音声情報が歪んでいても、音声合成された音声信号を用いて音声情報を補完することができる。
【０００８】
また、上記の目的を達成するため、本発明は、送信側電話端末から送話音声信号を音声認識して得られた音声認識信号を受信側電話端末で受信して音声合成して送話音声信号を復元する電話音声認識システムにおいて、送信側電話端末は、送話音声を送話音声信号として取り込む音声入力手段と、送話音声信号を音声認識処理により送話音声の文字情報を得る音声認識手段と、音声入力手段から出力される送話音声信号を音声情報とし、音声認識手段から出力される文字情報と共に所定単位で統合した統合データを生成する統合手段と、統合データを相手電話端末へ送信する送信手段とを有し、
受信側電話端末は、統合データを受信する受信手段と、受信手段で受信された統合データを音声情報と文字情報とに分離する分離手段と、分離された音声情報の歪み量を測定する歪み解析手段と、分離された文字情報に対して音声合成処理を行って音声合成信号を出力する音声合成手段と、歪み解析手段により測定された歪み量が、設定したしきい値以上であるときは音声合成信号を選択し、歪み量がしきい値未満であるときにはひずみ量が測定された音声情報を選択する補完手段と、補完手段から出力された音声合成信号又は音声情報を音声として外部へ発音する音声出力手段とを有することを特徴とする。
【０００９】
この発明では、通信回線の品質が悪かったり、帯域が不足している場合など、音声情報が歪んでいても、音声合成された音声信号を用いて音声情報を補完することができる。
【００１０】
ここで、上記の統合データ中の音声情報は、単音毎のアナログ音声信号である送話音声信号であり、統合データ中の文字情報は、送話音声の単音毎のディジタル信号である音声認識信号であることを特徴とする。
【００１１】
また、本発明は上記の目的を達成するため、送信側電話端末から送話音声信号を音声認識して得られた音声認識信号を受信側電話端末で受信して音声合成して送話音声信号を復元する電話音声認識システムにおいて、送信側電話端末は、送話音声信号を音声認識して得られた送話音声の文字情報と送話音声信号の音声情報と受話音声の声質情報とからなる統合データを生成して送信する手段を有し、受信側電話端末は、統合データを受信して文字情報と音声情報と声質情報とに分離し、分離した音声情報の歪み量が設定したしきい値以上であるときは、文字情報を声質情報が示す声質に近似した音声合成音を得る音声合成処理により得られた音声合成信号を選択し、歪み量がしきい値未満であるときには、分離した音声情報を選択する分離・選択手段と、選択した音声合成信号又は音声情報を送話音声として発音する音声出力手段とを有することを特徴とする。
【００１２】
この発明では、送話音声信号を音声認識して得られた送話音声の文字情報と送話音声信号の音声情報と受話音声の声質情報とからなる統合データを送受信するようにしたため、通信回線の品質が悪かったり、帯域が不足している場合など、音声情報が歪んでいても、音声合成された音声信号を用いて音声情報を補完することができ、更に、声質情報に基づいた声質の受話音声を得ることができる。
【００１３】
また、上記の目的を達成するため、本発明は、送信側電話端末から送話音声信号を音声認識して得られた音声認識信号を受信側電話端末で受信して音声合成して送話音声信号を復元する電話音声認識システムにおいて、
送信側電話端末は、送話音声を送話音声信号として取り込む音声入力手段と、送話音声信号を音声認識処理により送話音声の文字情報を得る音声認識手段と、音声入力手段から出力される送話音声信号である音声情報と、音声認識手段から出力される文字情報と、受話音声の声質を示す声質情報とを所定単位で統合した統合データを生成する統合手段と、統合データを相手電話端末へ送信する送信手段とを有し、
受信側電話端末は、統合データを受信する受信手段と、受信手段で受信された統合データを音声情報と文字情報と声質情報とに分離する分離手段と、分離された音声情報の歪み量を測定する歪み解析手段と、分離された文字情報と声質情報とに基づいて、文字情報を声質情報が示す声質に近似した音声合成音の音声合成信号を出力する音声合成手段と、歪み解析手段により測定された歪み量が、設定したしきい値以上であるときは音声合成信号を選択し、歪み量がしきい値未満であるときにはひずみ量が測定された音声情報を選択する補完手段と、補完手段から出力された音声合成信号又は音声情報を音声として外部へ発音する音声出力手段とを有することを特徴とする。
【００１４】
この発明では、送話音声信号を音声認識して得られた送話音声の文字情報と送話音声信号の音声情報と受話音声の声質情報とからなる統合データを送受信するようにしたため、通信回線の品質が悪かったり、帯域が不足している場合など、音声情報が歪んでいても、音声合成された音声信号を用いて音声情報を補完することができ、更に、声質情報に基づいた声質の受話音声を得ることができる。
【００１５】
ここで、上記の統合データ中の音声情報は、単音毎のアナログ音声信号である送話音声信号であり、統合データ中の文字情報は、送話音声の単音毎のディジタル信号である音声認識信号であり、統合データ中の声質情報は、送話者又は好みの声質の音声波形を示すディジタル信号であることを特徴とする。
【発明の効果】
【００１６】
本発明によれば、通信回線の品質が悪かったり、帯域が不足している場合など、音声情報が歪んでいても、音声合成された音声信号で補完するようにしたため、通信回線の品質が悪かったり帯域が不足している場合においても途切れのない会話ができる。
【００１７】
また、本発明によれば、送話音声信号を音声認識して得られた送話音声の文字情報と送話音声信号の音声情報と受話音声の声質情報とからなる統合データを送受信することにより、音声情報が歪んでいる場合は、音声合成された音声信号を用いて音声情報を補完すると共に、声質情報に基づいた声質の受話音声を得るようにしたため、補完された音声合成音を違和感無く聞くことができる。
【発明を実施するための最良の形態】
【００１８】
次に、本発明の実施の形態の構成について図面を参照して詳細に説明する。図１は本発明になる電話音声認識システムの一実施の形態のシステム構成図を示す。同図において、本実施の形態の電話音声認識システムは、音声を送信する側の電話機１と、音声を受信する側の電話機５と、通信回線である公衆網３と、電話機１及び電話機５と公衆網３とを接続するための交換機２及び交換機４とから構成されている。
【００１９】
音声送信側の電話機１は、音声入力手段１１と、音声認識手段１２と、音声・文字情報統合手段１３と、統合データ送信手段１４とを含む。一方、音声受信側の電話機５は、統合データ受信手段５１と、音声・文字情報分離手段５２と、音声合成手段５３と、音声歪み解析手段５４と、音声補完手段５５と、音声出力手段５６とを含む。
【００２０】
音声・文字情報統合手段１３で統合された統合データ６は、図２（Ａ）に示すように、音声情報６１と文字情報６２とから構成されている。また、公衆網３、交換機４を介して統合データ受信手段５１で受信された統合データ６’は、図２（Ｂ）に示すように、音声情報６１’と文字情報６２とから構成されている。
【００２１】
上記の音声情報６１及び６１’は、例えば単音のアナログ音声信号であり、文字情報６２は当該単音の音声認識結果により得られたディジタル音声信号である。アナログ音声信号は伝送時の通信回線の品質や帯域などにより歪む場合があるので、送信側の音声情報６１は受信側では音声情報６１’として表わされる。これに対し、文字情報６２はディジタル音声信号であり、受信側では通常はディジタル信号処理時の誤り訂正が可能であるので、受信側では送信側と同じ文字情報６２を復元できるものとして表わされている。
【００２２】
これらの手段はそれぞれ概略次のように動作する。音声入力手段１１は、外部からの音声を電話機１に取り込むための手段である。音声認識手段１２は、音声入力手段１１で取り込んだ外部からの音声を文字情報６２に変換するための手段である。音声・文字情報統合手段１３は、音声入力手段１１で取り込んだ、外部からの音声そのものである音声情報６１と、音声認識手段１２で変換された文字情報６２とを統合して一つの統合データ６にするための手段である。統合データ送信手段１４は、統合データ６を交換機２に送信するための手段である。
【００２３】
一方、音声受信側の電話機５において、統合データ受信手段５１は、交換機４から統合データ６’を受信するための手段である。音声・文字情報分離手段５２は、統合データ６’を音声情報６１’と、文字情報６２に分離するための手段である。音声合成手段５３は、音声・文字情報分離手段５２で統合データ６’から分離した、文字情報６２を合成された音声に変換するための手段である。音声歪み解析手段５４は、音声・文字情報分離手段５２で統合データ６’から分離した、音声情報６１’の歪みを測定すると共に音声情報６１’を出力するための手段である。音声補完手段５５は、音声歪み解析手段５４で、歪みを検出した音声情報６１’に対して音声合成手段５３で変換した合成された音声に置換するための手段である。音声出力手段５６は、入力された音声信号を電気−音響変換して音声（音波）として出力する手段である。
【００２４】
次に、図１及び図２を参照して本発明の実施の形態の動作について詳細に説明する。送信側の音声（送話音声）は、電話機１の音声入力手段１１により音響−電気変換されて送話音声信号として取り込まれる。取り込まれた送話音声信号は、アナログ音声信号であり、音声認識手段１２により従来から公知の方法で単音毎に音声認識され、送話音声を文字列として示すディジタル信号である文字情報に変換される。
【００２５】
音声・文字情報統合手段１３は、音声入力手段１１から出力された送話音声信号を示す音声情報（図２（Ａ）に６１で示す）と、音声認識手段１２から出力された文字情報（図２（Ａ）に６２で示す）とを、単音毎に統合して図２（Ａ）に示したフォーマットの統合データ６を作成する。統合データ送信手段１４は、音声・文字情報統合手段１３から出力された統合データ６を、受信側の電話機５宛に交換機２を介して公衆網３へ送信する。
【００２６】
交換機２は、受信した統合データ６を公衆網３及び交換機４を介して受信側の電話機５へ送信する。電話機５の統合データ受信手段５１は、交換機４から送信された統合データを受信して図２（Ｂ）に示したフォーマットの受信統合データ６’を得る。音声・文字情報分離手段５２は、統合データ受信手段５１により受信された受信統合データ６’を構成する図２（Ｂ）に示した音声情報６１’と文字情報６２とに分離し、文字情報６２は音声合成手段５３へ出力し、音声情報６１’は音声歪み解析手段５４へ出力する。
【００２７】
音声合成手段５３は、入力された文字情報６２に対して公知の音声合成処理を行い、合成されたアナログ音声信号を作成する。一方、音声歪み解析手段５４は、入力された音声情報６１’の歪み量を測定する。この歪み量は例えば、アナログ音声信号である音声情報６１’のレベルの大きさなどに基づいて測定される。音声補完手段５５は、音声情報６１’の測定歪み量が予め設定した閾値以上に歪んでいる場合には、歪んでいる音声情報６１’を、音声合成手段５３からの合成された音声信号と置き換えて音声出力手段５６へ出力し、測定歪み量が予め設定した閾値未満であり、歪んでいないとみなせる場合には、音声歪み解析手段５４を介して入力された受信した音声情報６１’を音声出力手段５６へ出力する。
【００２８】
音声出力手段５６は、音声補完手段５５から入力されたアナログ音声信号である音声情報６１’又はアナログ音声信号である音声合成信号を、電気−音響変換して電話機５の受話音声として外部へ発音する。このように、本実施の形態によれば、受信側の電話機５で受信した電話音声信号（統合データ６’）中のアナログ音声信号である音声情報６１’が歪んでいない場合は、送信側の電話機１の個人の送話音声を発音させ、音声情報６１’が歪んでいる場合に限り、音声合成手段５３で音声合成した合成音を発音させるようにしたため、通信回線の品質が悪かったり帯域が不足している場合においても途切れのない会話ができると共に、送信側の電話機１の個人の送話音声の発音を優先するようにしているため、味気のない音声合成による合成音よりも、できるだけ送話者の声で発音させることができる。
【００２９】
次に、具体例を用いて本実施の形態の動作について、図３と共に更に詳細に説明する。いま、音声入力手段１１に入力された音声が、例えば、図３に示すように、「あ」、「い」、「う」であったとする（図３のステップＳ１）。その送話音声「あ」、「い」、「う」は、電話機１の音声入力手段１１により音響−電気変換されてアナログ音声信号の音声情報６１として取り込まれる。
【００３０】
取り込まれた音声情報６１（「あ」、「い」、「う」）は、音声認識手段１２による公知の音声認識処理により、単音毎のディジタル信号である文字情報６２（「ア」、「イ」、「ウ」）に変換される（図３のステップＳ２）。音声・文字情報統合手段１３は、音声入力手段１１により取り込まれた音声情報６１（「あ」、「い」、「う」）と、音声認識手段１２により音声認識して得られた文字情報６２（「ア」、「イ」、「ウ」）とを統合して図２（Ａ）に示したフォーマットの統合データ６（「あ」と「ア」、「い」と「イ」、「う」と「ウ」）を作成する（図３のステップＳ３）。
【００３１】
統合データ送信手段１４は上記の統合データ６（「あ」と「ア」、「い」と「イ」、「う」と「ウ」）を送信相手の電話機５宛に交換機２へ送信する。交換機２は、受信した統合データ６’（「あ」と「ア」、「？」と「イ」、「う」と「ウ」）を、公衆網３を介して交換機４に送信する。このとき、通信回線の品質が悪かったり、帯域が不足していることなどに起因して、統合データ６は交換機２への伝送時に音声情報「い」が歪み、交換機４への伝送時に音声情報「う」が歪んだものとする。これにより、電話機５の統合データ受信手段５１は、統合データ６’（「あ」と「ア」、「？」と「イ」、「？」と「ウ」）を受信する（図３のステップＳ４）。
【００３２】
この受信統合データ６’（「あ」と「ア」、「？」と「イ」、「？」と「ウ」）は、音声・文字情報分離手段５２により、音声情報６１’（「あ」、「？」、「？」）と、文字情報６２（「ア」、「イ」、「ウ」）とに分離される。分離されたディジタル信号である文字情報６２（「ア」、「イ」、「ウ」）は、音声合成手段５３に供給されて公知の音声合成処理により音声合成されたアナログ音声信号に変換される（図３のステップＳ５）。
【００３３】
一方、分離されたアナログ音声信号である音声情報６１’（「あ」、「？」、「？」）は、音声歪み解析手段５４に供給されて歪み量が測定される（図３のステップＳ６）。ここでは、音声情報６１’のうち、１番目の「あ」の音声情報は測定歪み量が閾値未満であるが、２番目と３番目の音声情報の測定歪み量が閾値以上であり、音声が歪んでいると判断されるため、音声補完手段５５は、歪んでいない１番目の音声「あ」の音声情報は、音声歪み解析手段５４から取り出してそのまま出力し、歪んでいる２番目と３番目の音声情報は、それらに替えて、音声合成手段５３から入力される音声合成された音声「イ」、「ウ」の音声信号と置き換える（図３のステップＳ７）。音声出力手段５６は、音声補完手段５５から出力された音声信号（「あ」、「イ」、「ウ」）を電気−音響変換して音声として外部へ発音する（図３のステップＳ８）。
【００３４】
従って、本実施の形態によれば、通信回線の品質が悪かったり、帯域が不足している場合など、音声が歪んでいても音声合成された音声信号を用いて音声を補完するように構成しているため、途切れのない会話ができる。
【００３５】
次に、本発明の他の実施の形態について図面を参照して詳細に説明する。本実施の形態のシステム構成は、図１とほぼ同様であるが、本実施の形態では、送信側の電話機１は図４（Ａ）に示すフォーマットの統合データ７を送信し、受信側の電話機５は図４（Ｂ）に示すフォーマットの統合データ７’を受信処理する点に特徴がある。
【００３６】
ここで、図４（Ａ）に示すように、統合データ７は、前記統合データ６の音声情報６１及び文字情報６２に加えて、受話音声の声質（例えば、送話者の声質）を示す声質情報７１が付加されている。この声質情報７１は、図１に示した音声認識手段１２において、音声入力手段１１で取り込まれた送話者のアナログ送話音声信号に基づいて、公知の方法で単音毎の音声認識結果である音声情報６１と共に生成される、声質を示す音声波形に関するディジタル信号である。
【００３７】
図１の音声・文字情報統合手段１３は、音声入力手段１１から出力された送話音声信号を示す音声情報（図４（Ａ）に６１で示す）と、音声認識手段１２から出力された文字情報（図４（Ａ）に６２で示す）及び声質情報（図４（Ａ）に７１で示す）とを、単音毎に統合して図４（Ａ）に示したフォーマットの統合データ７を作成する。統合データ送信手段１４は、音声・文字情報統合手段１３から出力された統合データ７を、受信側の電話機５宛に交換機２を介して公衆網３へ送信する。
【００３８】
交換機２は、受信した統合データ７を公衆網３及び交換機４を介して受信側の電話機５へ送信する。電話機５の統合データ受信手段５１は、交換機４から送信された統合データを受信して図４（Ｂ）に示したフォーマットの受信統合データ７’を得る。音声・文字情報分離手段５２は、統合データ受信手段５１により受信された受信統合データ７’を構成する図４（Ｂ）に示した音声情報６１’と文字情報６２と声質情報７１とに分離し、文字情報６２と声質情報７１は音声合成手段５３へ出力し、音声情報６１’は音声歪み解析手段５４へ出力する。
【００３９】
音声合成手段５３は、入力された文字情報６２と声質情報７１に基づいて、公知の音声合成処理により文字情報６２が示す文字の音声合成音を生成するが、このとき、その音声合成音が声質情報７１が示す声質に近似した音声合成音となるように生成する。一方、図１の音声歪み解析手段５４は、入力された音声情報６１’の歪み量を測定する。
【００４０】
音声補完手段５５は、音声情報６１’の測定歪み量が予め設定した閾値以上に歪んでいる場合には、歪んでいる音声情報６１’を、音声合成手段５３からの合成された音声合成信号と置き換えて音声出力手段５６へ出力し、測定歪み量が予め設定した閾値未満であり、歪んでいないとみなせる場合には、受信した音声情報６１’を音声出力手段５６へ出力する。音声出力手段５６は、音声補完手段５５から入力されたアナログ音声信号である音声情報６１’又はアナログ音声信号である音声合成信号を、電気−音響変換して電話機５の受話音声として外部へ発音する。
【００４１】
このように、本実施の形態によれば、受信側の電話機５で受信した電話音声信号（統合データ７’）中のアナログ音声信号である音声情報６１’が歪んでいない場合は、送信側の電話機１の個人の送話音声を発音させ、音声情報６１’が歪んでいる場合に限り、音声合成手段５３で音声合成した合成音を発音させるようにしたため、通信回線の品質が悪かったり、帯域が不足している場合においても、途切れのない会話ができると共に、音声合成音が送話者の声に近似した声質で発音されるため、音声６１’が歪んでいた場合、合成された音声音が送話者の音声に対し違和感無く置き換えられて、受話者に聞くことができるという新たな効果を有する。
【００４２】
なお、本発明は以上の実施の形態に限定されるものではなく、例えば、声質情報７１は、受話音声の声質を定めるものであり、上記の実施の形態のような送話者の声質ではなく、送話者あるいは受話者の好みの声質情報を設定しておき、受信側の電話機５で生成する音声合成音をその好みの声質の音声合成音とすることも考えられる。また、電話回線のみでなく、携帯電話や無線環境といった用途にも本発明を適用でき、更には雑音環境下での会話といった用途にも適用可能である。すなわち、本発明は、固定電話機のみならず、携帯電話機や簡易型携帯電話機（ＰＨＳ）等の電話端末一般に適用可能である。
【図面の簡単な説明】
【００４３】
【図１】本発明の一実施の形態のシステム構成図である。
【図２】本発明の一実施の形態で送信及び受信される統合データのフォーマットの一例を示す図である。
【図３】本発明の一実施の形態の具体例を説明するシステム構成図である。
【図４】本発明の他の実施の形態で送信及び受信される統合データのフォーマットの一例を示す図である。
【符号の説明】
【００４４】
１  送信側電話機
２、４  交換機
３  公衆網
５  受信側電話機
６、７  送信された統合データ
６’、７’  受信された統合データ
１１  音声入力手段
１２  音声認識手段
１３  音声・文字情報統合手段
１４  統合データ送信手段
５１  統合データ受信手段
５２  音声・文字情報分離手段
５３  音声合成手段
５４  音声歪み解析手段
５５  音声補完手段
５６  音声出力手段
６１、６１’  音声情報
６２  文字情報
７１  声質情報
【図１】
2006270143.tif 000003
【図２】
2006270143.tif 000004
【図３】
2006270143.tif 000005
【図４】
2006270143.tif 000006