(57)【要約】【課題】通信端末装置１２０に音声認識部を設けることなく、通話内容をリアルタイムに確認する。【解決手段】通信端末装置２０は、ネットワーク１０を介して配信されたテキストデータを表示する表示部２１を備え、他の通信端末装置とネットワーク１０を介して通話するとともに、通話内容の音声データをネットワーク１０を介して音声認識部１１へ通話中に送信し、音声認識部１１は、通信端末装置２０から受信した音声データを音声認識し、テキストデータ生成部１２は、音声認識部１１の音声認識結果からテキストデータを生成し、ネットワーク１０を介して通信端末装置２０へテキストデータをリアルタイム配信する。【選択図】　　　　図１
2004048277.tif 000002
【特許請求の範囲】
【請求項１】
通信を媒介するネットワークと、上記ネットワークを介して他と通信を行う通信端末装置とを備えた通信システムにおいて、
上記通信端末装置から音声データを受信すると、上記音声データを音声認識する音声認識部と、上記音声認識結果からテキストデータを生成して上記通信端末装置へリアルタイム配信するテキストデータ生成部とを上記ネットワークに備え、
上記通信端末装置は、上記テキストデータ生成部から配信されたテキストデータを表示する表示部を備えるとともに、通話内容の上記音声データを上記音声認識部へ通話中に送信することを特徴とする通信システム。
【請求項２】
通信端末装置から音声データが送信されると、上記通信端末装置の通話者が使用する言語を識別する通話者言語識別部と、
上記識別した通話者の言語に対応して選択され、上記通話者言語識別部からの音声データを音声認識する複数の音声認識部と、
上記複数の音声認識部に対応して設けられ、上記音声認識部の音声認識結果からテキストデータを生成し、上記通信端末装置へリアルタイム配信する複数のテキストデータ生成部とをネットワークに備えることを特徴とする請求項１記載の通信システム。
【請求項３】
音声認識部の音声認識結果を指定言語に翻訳してテキストデータ生成部へ与える翻訳部をネットワークに備えることを特徴とする請求項２記載の通信システム。
【請求項４】
通信を媒介するネットワークと、上記ネットワークを介して他と通信を行う通信端末装置とを備えた通信システムにおいて、
上記通信端末装置からメール配信先のアドレスが指定されるアドレス帳と、上記通信端末装置から音声データを受信すると、上記音声データを音声認識する音声認識部と、上記音声認識結果からテキストデータを生成するテキストデータ生成部と、上記テキストデータを蓄積するとともに、通話終了後に、上記アドレス帳に指定された上記メール配信先のアドレスへ上記テキストデータのメール配信を行う蓄積部とを上記ネットワークに備え、
上記通信端末装置は、上記蓄積部から配信されたテキストデータを表示する表示部を備えるとともに、通話内容の上記音声データを上記音声認識部へ通話中に送信することを特徴とする通信システム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
この発明は、通信端末装置がネットワークを介して他と通信を行う通信システムに係り、特に、通信端末装置における通話内容を確認するための通信システムに関するものである。
【０００２】
【従来の技術】
図５は従来の通信システムの構成を示す図である。
図５において、１１０は従来の通信システムのネットワーク、１２０は従来の通信システムの通信端末装置である。通信端末装置１２０には、メモリ部１２２が内蔵されている。また例えば、特開２００１−１１１６８６公報に開示された通信端末装置１２０には、メモリ部１２２に加えて、音声認識部１２１も設けられている。
【０００３】
次に動作について説明する。
不図示の他の通信端末装置とネットワーク１１０を介して通話中の通信端末装置１２０は、必要に応じて通話内容を音声データとしてメモリ部１２２に保存する。通話終了後に、通信端末装置１２０の通話者は、メモリ部１２２から音声データを読み出して保存した通話内容を確認できる。
【０００４】
また、メモリ部１２２と音声認識部１２１とを備えた通信端末装置１２０の場合には、通話内容の音声データを音声認識部１２１によって文字データとして認識し、メモリ部１２２に文字データを保存する。通信端末装置１２０で送信・受信した音声データを対応する文字データに変換して保存・表示するため、通話者は、通話終了後に通話内容を確認できるばかりでなく、通話中であっても通話内容をリアルタイムで把握可能になっている。さらに、その保存した文字データを不図示の無線基地局へ送信し、無線基地局のサーバに文字データを格納することもできる。
【０００５】
【発明が解決しようとする課題】
従来の通信システムは以上のように構成されているので、通話内容を音声データとしてメモリ部に保存するため、通話内容を通話中に確認できないという課題があった。
【０００６】
また、従来の通信システムは、通話内容の音声データを音声認識して文字データとして保存するため、通信端末装置に音声認識部を設ける必要があり、通信端末装置が大型化してしまうという課題があった。
【０００７】
この発明は上記のような課題を解決するためになされたもので、通信端末装置に音声認識部を設けることなく、通話内容をリアルタイムに確認できる通信システムを提供することを目的とする。
【０００８】
【課題を解決するための手段】
この発明に係る通信システムは、通信端末装置から音声データを受信すると、音声データを音声認識する音声認識部と、音声認識結果からテキストデータを生成して通信端末装置へリアルタイム配信するテキストデータ生成部とをネットワークに備え、テキストデータ生成部から配信されたテキストデータを表示する表示部を通信端末装置が備えるとともに、通話内容の音声データを通信端末装置が音声認識部へ通話中に送信するようにしたものである。
【０００９】
この発明に係る通信システムは、通信端末装置から音声データが送信されると、通信端末装置の通話者が使用する言語を識別する通話者言語識別部と、識別した通話者の言語に対応して選択され、通話者言語識別部からの音声データを音声認識する複数の音声認識部と、複数の音声認識部に対応して設けられ、音声認識部の音声認識結果からテキストデータを生成し、通信端末装置へリアルタイム配信する複数のテキストデータ生成部とをネットワークに備えるようにしたものである。
【００１０】
この発明に係る通信システムは、音声認識部の音声認識結果を指定言語に翻訳してテキストデータ生成部へ与える翻訳部をネットワークに備えるようにしたものである。
【００１１】
この発明に係る通信システムは、通信端末装置からメール配信先のアドレスが指定されるアドレス帳と、通信端末装置から音声データを受信すると、音声データを音声認識する音声認識部と、音声認識結果からテキストデータを生成するテキストデータ生成部と、テキストデータを蓄積するとともに、通話終了後に、アドレス帳に指定されたメール配信先のアドレスへテキストデータのメール配信を行う蓄積部とをネットワークに備え、通信端末装置が、蓄積部から配信されたテキストデータを表示する表示部を備えるとともに、通話内容の音声データを音声認識部へ通話中に送信するようにしたものである。
【００１２】
【発明の実施の形態】
以下、この発明の実施の一形態を説明する。
実施の形態１．
図１はこの発明の実施の形態１による通信システムの構成を示す図である。
図１において、１０は実施の形態１による通信システムのネットワーク、２０は実施の形態１による通信システムの通信端末装置である。ネットワーク１０には音声認識部１１とテキストデータ生成部１２とが設けられており、また通信端末装置２０は表示部２１を備えている。
【００１３】
次に動作について説明する。
図１において、通信端末装置２０と不図示の他の通信端末装置がネットワーク１０を媒介して通話中に、通話内容の音声データ（上り・下りとも）がネットワーク１０を介して音声認識部１１へ送信される。音声認識部１１は、通信端末装置２０や不図示の他の通信端末装置から受信した音声データを音声認識してテキストデータ生成部１２へ送る。テキストデータ生成部１２は、音声認識部１１の音声認識結果から文字データであるテキストデータを生成する。
【００１４】
ネットワーク１０は、音声データの通信チャネルとは別の通信チャネルを利用して、テキストデータ生成部１２が生成したテキストデータを通話者側の通信端末装置２０へリアルタイム配信する。２本の通信チャネルのうちの一方を介して受信したテキストデータは、通信端末装置２０の表示部２１に表示されるため、通信端末装置２０の通話者は、通話内容を通話中にリアルタイムで確認することができる。
【００１５】
ここで、通信端末装置２０は、ネットワーク１０と２本の通信チャネルで通信している。２本の通信チャネルとは、音声データ用の一方の通信チャネルとテキストデータ用の他方の通信チャネルである。例えば、ネットワーク１０が無線通信システムの場合には、Ｗ−ＣＤＭＡシステムのトランスポートチャネルＤＣＨを複数用いて、音声データとテキストデータとをリアルタイムに通信する。また例えば、ネットワーク１０が有線通信システムの場合には、ＩＳＤＮでＢチャネルを通信チャネルとして２本用いて、一方のＢチャネルを用いて音声データを、他方のＢチャネルを用いてテキストデータをリアルタイムに通信する。
【００１６】
このように、通信端末装置２０では、音声データ用の通信チャネルを用いて、他の通信端末装置と音声データの通話が行われると同時に、テキストデータ用の通信チャネルを用いて、通話内容のテキストデータがテキストデータ生成部１２によってネットワーク１０から通話中にリアルタイム配信されるようになっている。通信端末装置２０は受信したテキストデータを表示部２１に表示するので、通信端末装置２０に音声認識部を設けることなく、ユーザは通話中にリアルタイムで通話内容を確認できる。また、リアルタイムで通話内容をテキストデータとして確認できるため、聴覚障害者の利用や騒音環境下での利用も可能になる。
【００１７】
以上のように、この実施の形態１によれば、通信端末装置２０は、ネットワーク１０を介して配信されたテキストデータを表示する表示部２１を備え、他の通信端末装置とネットワーク１０を介して通話するとともに、通話内容の音声データをネットワーク１０を介して音声認識部１１へ通話中に送信し、音声認識部１１は、通信端末装置２０から受信した音声データを音声認識し、テキストデータ生成部１２は、音声認識部１１の音声認識結果からテキストデータを生成し、ネットワーク１０を介して通信端末装置２０へテキストデータをリアルタイム配信するようにしたので、通信端末装置２０に音声認識部を設けることなく、通話者は通話中に通話内容をリアルタイムで確認できるという効果が得られる。加えて、聴覚障害者の利用や騒音環境下での利用が可能になるという効果が得られる。
【００１８】
実施の形態２．
実施の形態１では、通話内容のテキストデータを通話中にリアルタイム配信するようにしたが、このテキストデータを通話者の言語に対応したテキストデータに変換しても良い。
【００１９】
図２はこの発明の実施の形態２による通信システムの構成を示す図である。図１と同一符号は同一または相当する構成を示している。図２において、１３は通話者言語識別部、１１−１〜１１−Ｎはそれぞれ各言語の音声認識部、１２−１〜１２−Ｎはそれぞれ各言語音声認識部１１−１〜１１−Ｎに対応したテキストデータ生成部である。
【００２０】
次に動作について説明する。
通話者言語識別部１３は、ネットワーク１０を介して通信端末装置２０から音声データが送信されると、通信端末装置２０の通話者が使用している言語を識別する。ここで、通話者言語識別部１３は、例えば通話者の通信端末装置２０の電話番号や認証情報などから通話者の言語を識別する。次に、識別した通話者の言語に対応する音声認識部１１−１〜１１−Ｎの一つを通話者言語識別部１３が選択して音声データを与えると、選択された音声認識部１１−１〜１１−Ｎは音声データを音声認識する。
【００２１】
各言語の音声認識部１１−１〜１１−Ｎはそれぞれ各言語に対応したテキストデータ生成部１２−１〜１２−Ｎと接続されており、テキストデータ生成部１２−１〜１２−Ｎは音声認識部１１−１〜１１−Ｎの音声認識結果から該当言語のテキストデータを生成し、通信端末装置２０へリアルタイム配信する。以下、実施の形態１と同様に、通信端末装置２０で受信したテキストデータが表示部２１に表示される。通話者言語識別部１３，各言語の音声認識部１１−１〜１１−Ｎ，テキストデータ生成部１２−１〜１２−Ｎを備えることにより、多様な通話者の言語に対応してテキストデータを生成でき、通話者は通話中に通話内容の確認をリアルタイムに行うことができる。
【００２２】
以上のように、この実施の形態２によれば、ネットワーク１０を介して通信端末装置２０から音声データが送信されると、通信端末装置２０の通話者が使用している言語を識別する通話者言語識別部１３と、識別した通話者の言語に対応して選択され、通話者言語識別部１３からの音声データを音声認識する音声認識部１１−１〜１１−Ｎと、音声認識部１１−１〜１１−Ｎに対応して設けられ、音声認識部１１−１〜１１−Ｎの音声認識結果からテキストデータを生成し、通信端末装置２０へリアルタイム配信するテキストデータ生成部１２−１〜１２−Ｎとを備えるようにしたので、多様な通話者の言語に対応してテキストデータを生成でき、通信端末装置２０に音声認識部を設けることなく、通話者は通話中に通話内容をリアルタイムで確認できるという効果が得られる。
【００２３】
実施の形態３．
実施の形態２では、通話者の使用言語を識別して、その該当言語でテキストデータを生成して配信するようにしたが、テキストデータ生成の際の言語を特定し、その言語に翻訳しても良い。このことにより、通話者言語に依存することなく、異言語同士の通話者間においても、テキストデータの配信が可能になる。
【００２４】
図３はこの発明の実施の形態３による通信システムの構成を示す図である。図１，図２と同一符号は同一または相当する構成を示している。図３において、１４は翻訳部である。
【００２５】
次に動作について説明する。
まず実施の形態２と同様に、通話者言語識別部１３は、ネットワーク１０を介して通信端末装置２０から音声データが送信されると、通信端末装置２０の通話者が使用している言語を識別する。次に、識別した通話者の言語に対応する音声認識部１１−１〜１１−Ｎの一つを通話者言語識別部１３が選択して音声データを与えると、選択された音声認識部１１−１〜１１−Ｎは音声データを音声認識する。
【００２６】
そして、テキストデータ生成部１２−１〜１２−Ｎは、通話者の使用している言語（指定言語）または予め設定した言語（指定言語）に音声認識結果を翻訳する翻訳部１４を通じてテキストデータを生成し、通信端末装置２０へリアルタイム配信する。以下、実施の形態１と同様に、通信端末装置２０で受信したテキストデータが表示部２１に表示される。このように、翻訳部１４で指定言語に翻訳したテキストデータを配信することで、言語の異なる者どうしの通話内容も、通信端末装置２０でテキストデータとしてリアルタイムに確認できる。
【００２７】
なお、指定言語の認証機能を翻訳部１４に設けるようにし、通信端末装置２０毎に用いる指定言語を予め特定しておき、通信開始時に、翻訳部１４の認証機能によってその通信端末装置２０の指定言語を特定するようにしても良く、通話者の指定言語の設定を省くことができる。
【００２８】
以上のように、この実施の形態３によれば、音声認識部１１−１〜１１−Ｎの音声認識結果を指定言語に翻訳してテキストデータ生成部１２−１〜１２−Ｎへ与える翻訳部１４をネットワーク１０に備えるようにしたので、言語の異なる通話者どうしが音声通話を行う場合でも、テキストデータとして通話内容を確認できるという効果が得られる。
【００２９】
実施の形態４．
実施の形態１〜実施の形態３では、通話内容のテキストデータをリアルタイム配信するようにしたが、通話内容をテキストデータとしてネットワークに蓄積しておき、通話終了後に配信しても良い。
【００３０】
図４はこの発明の実施の形態４による通信システムの構成を示す図である。図１と同一符号は同一または相当する構成を示している。図４において、１５はアドレス帳、１６は蓄積部である。
【００３１】
次に動作について説明する。
通話開始時に、通信端末装置２０からネットワーク１０のアドレス帳１５へメール配信先のアドレスを指定しておく。蓄積部１６は、通話中に逐次得られた通話内容のテキストデータを蓄積するものであり、通話終了後に、アドレス帳１５に指定されたメール配信先のアドレスへテキストデータのメール配信を行う。このようにすることで、通話終了後に、メール配信されたテキストデータを読み出して通話内容を確認でき、議事録として利用できる。
なお、この実施の形態４は、実施の形態１〜実施の形態３と組み合わせて通信システムを構築しても良いし、テキストデータをリアルタイム配信しない場合の通信システムに単独で適用しても良く、いずれの場合も、メール配信されたテキストデータは全通話内容の議事録として利用価値がある。
【００３２】
以上のように、この実施の形態４によれば、通信端末装置２０からメール配信先のアドレスが指定されるアドレス帳１５と、音声認識部１１，テキストデータ生成部１２によって通話中に得られた通話内容のテキストデータを蓄積するとともに、通話終了後に、アドレス帳１５に指定されたメール配信先のアドレスへテキストデータのメール配信を行う蓄積部１６とをネットワーク１０に備えるようにしたので、通話終了後に、メール配信されたテキストデータを読み出して通話内容を確認できるという効果が得られ、例えば議事録などに利用可能という効果が得られる。
【００３３】
【発明の効果】
以上のように、この発明によれば、通信端末装置から音声データを受信すると、音声データを音声認識する音声認識部と、音声認識結果からテキストデータを生成して通信端末装置へリアルタイム配信するテキストデータ生成部とをネットワークに備え、テキストデータ生成部から配信されたテキストデータを表示する表示部を通信端末装置が備えるとともに、通話内容の音声データを通信端末装置が音声認識部へ通話中に送信するようにしたので、通信端末装置に音声認識部を設けることなく、通話者は通話中に通話内容をリアルタイムで確認できるという効果が得られる。
【図面の簡単な説明】
【図１】この発明の実施の形態１による通信システムの構成を示す図である。
【図２】この発明の実施の形態２による通信システムの構成を示す図である。
【図３】この発明の実施の形態３による通信システムの構成を示す図である。
【図４】この発明の実施の形態４による通信システムの構成を示す図である。
【図５】従来の通信システムの構成を示す図である。
【符号の説明】
１０　ネットワーク、１１，１１−１〜１１−Ｎ　音声認識部、１２，１２−１〜１２−Ｎ　テキストデータ生成部、１３　通話者言語識別部、１４　翻訳部、１５　アドレス帳、１６　蓄積部、２０　通信端末装置、２１　表示部。
【図１】
2004048277.tif 000003
【図２】
2004048277.tif 000004
【図３】
2004048277.tif 000005
【図４】
2004048277.tif 000006
【図５】
2004048277.tif 000007