(57)【要約】【課題】会話中に端末装置の受け渡しを行う必要がなく、スムーズに会話可能な音声翻訳システム、及び、端末装置を提供する。【解決手段】同一の装置であり、一方は、第一使用者Ｈ１の音声Ｖ１１の言語の種類の特定と翻訳開始の指示を、もう一方は、第二使用者Ｈ２の音声Ｖ２１の言語の種類の特定と翻訳開始の指示とを行う端末装置１１、１２と、音声の入力、及び、入力された音声を端末装置１１、１２で特定された言語の種類の情報に基づいてなる翻訳音声データＤ１２、Ｄ２２を作成、並びに、翻訳音声データＤ１２、Ｄ２２に基づく合成音声Ｖ１２、Ｖ２２の出力を行う翻訳装置１３とを備える。【選択図】図２
2019121291.tif 000002
【特許請求の範囲】
【請求項１】
音声翻訳前後の言語の種類を選択する第三の言語選択部と、音声を受け、該音声を音声データに変換する第三の音声入力部と、音声翻訳の開始を指示するための第三信号又は第四信号を作成する第三のトリガー部と、前記第三信号又は第四信号を受けて、前記第三の言語選択部で選択された第一言語又は第二言語で入力されたと推定される音声データを前記第三の言語選択部で選択された第二言語又は第一言語の音声データである第一翻訳音声データ又は第二翻訳音声データに変換するデータ変換部と、前記第一翻訳音声データ又は前記第二翻訳音声データに基づいて、第一翻訳音声又は第二翻訳音声を出力する第三の音声出力部と、を有する翻訳装置を用い、前記第一言語を話す第一使用者及び前記第二言語を話す第二使用者間の会話の翻訳を行う音声翻訳システムであって、
前記翻訳装置とは離間しており、前記第一使用者が入力する音声の言語の種類を特定し、該特定した言語の情報に基づいて第一の選択言語データを作成する第一の言語選択部と、前記データ変換部に翻訳の開始を指示するための第一信号を作成する第一のトリガー部と、前記第一の選択言語データ及び第一信号を前記翻訳装置に送信する第一の通信部と、を有する第一の端末装置を備え、
前記翻訳装置は、さらに、前記第一の端末装置から、前記第一の選択言語データ及び第一信号を受信する第三の通信部を有し、前記データ変換部が、前記第三の通信部にて受信した第一信号を受けて、前記第三の通信部にて受信した第一の選択言語データに基づいて、前記第一翻訳音声データへの変換を開始することを特徴とする音声翻訳システム。
【請求項２】
請求項１に記載の音声翻訳システムであって、さらに、
前記翻訳装置及び第一の端末装置と離間しており、前記第二使用者が入力する音声の言語の種類を特定し、該特定した言語の情報に基づいて第二の選択言語データを作成する第二の言語選択部と、前記データ変換部に翻訳の開始を指示するための第二信号を作成する第二のトリガー部と、前記第二の選択言語データ及び第二信号を前記翻訳装置に送信する第二の通信部と、を有する第二の端末装置を備え、
前記翻訳装置は、前記第三の通信部が、前記第二の端末装置から、前記第二の選択言語データ及び第二信号を受信し、前記データ変換部が、前記第三の通信部にて受信した第二信号を受けて、前記第三の通信部にて受信した第二の選択言語データに基づいて、前記第二翻訳音声データへの変換を開始することを特徴とする音声翻訳システム。
【請求項３】
音声翻訳前後の言語の種類を選択する第三の言語選択部と、音声を受け、該音声を音声データに変換する第三の音声入力部と、音声翻訳の開始を指示するための第三信号又は第四信号を作成する第三のトリガー部と、前記第三信号又は第四信号を受けて、前記第三の言語選択部で選択された第一言語又は第二言語で入力されたと推定される音声データを前記第三の言語選択部で選択された第二言語又は第一言語の音声データである第一翻訳音声データ又は第二翻訳音声データに変換するデータ変換部と、前記第一翻訳音声データ又は前記第二翻訳音声データに基づいて、第一翻訳音声又は第二翻訳音声を出力する第三の音声出力部と、を有する翻訳装置を用い、前記第一言語を話す第一使用者及び前記第二言語を話す第二使用者間の会話の翻訳を行う音声翻訳システムにおける前記翻訳装置に指示を与えるための端末装置であって、
前記翻訳装置とは離間しており、
前記第一使用者が入力する音声の言語の種類を特定し、該特定した言語の情報に基づいて第一の選択言語データを作成する第一の言語選択部と、
前記データ変換部に翻訳の開始を指示するための第一信号を作成する第一のトリガー部と、
前記第一の選択言語データ及び第一信号を前記翻訳装置に送信する第一の通信部と、を有する第一の端末装置を備え、
前記翻訳装置は、さらに、前記第一の端末装置から、前記第一の選択言語データ及び第一信号を受信する第三の通信部を有し、前記データ変換部が、前記第三の通信部にて受信した第一信号を受けて、前記第三の通信部にて受信した第一の選択言語データに基づいて、前記第一翻訳音声データへの変換を開始することを特徴とする端末装置。
【請求項４】
請求項３に記載の端末装置であって、さらに、
前記翻訳装置及び第一の端末装置と離間しており、前記第二使用者が入力する音声の言語の種類を特定し、該特定した言語の情報に基づいて第二の選択言語データを作成する第二の言語選択部と、前記データ変換部に翻訳の開始を指示するための第二信号を作成する第二のトリガー部と、前記第二の選択言語データ及び第二信号を前記翻訳装置に送信する第二の通信部と、を有する第二の端末装置を備え、
前記翻訳装置は、前記第三の通信部が、前記第二の端末装置から、前記第二の選択言語データ及び第二信号を受信し、前記データ変換部が、前記第三の通信部にて受信した第二信号を受けて、前記第三の通信部にて受信した第二の選択言語データに基づいて、前記第二翻訳音声データへの変換を開始することを特徴とする端末装置。
【請求項５】
第一言語を話す第一使用者及び第二言語を話す第二使用者間の会話の翻訳を行う音声翻訳システムであって、
前記第一使用者の音声を受け、該音声を第一音声データに変換する第一の音声入力部と、前記第二使用者の音声の音声データである第二音声データが前記第一言語に翻訳された音声データである第二翻訳音声データに基づいて、第二翻訳音声を出力する第一の音声出力部と、前記第一音声データを送信するとともに、前記第二翻訳音声データを受信する第一の通信部と、を有する第一の端末装置と、
前記第一の端末装置とは離間しており、前記第二使用者の音声を受け、該音声を前記第二音声データに変換する第二の音声入力部と、前記第一音声データが前記第二言語に翻訳された音声データである第一翻訳音声データに基づいて、第一翻訳音声を出力する第二の音声出力部と、前記第二音声データを送信するとともに、前記第一翻訳音声データを受信する第二の通信部と、を有する第二の端末装置と、
前記第一の端末装置及び第二の端末装置と離間しており、前記第一の端末装置から受信した前記第一音声データを前記第一翻訳音声データへ変換するとともに、前記第二の端末装置から受信した前記第二音声データを前記第二翻訳音声データへ変換するデータ変換部と、前記第一の音声入出力装置から前記第一音声データを受信するとともに、前記第二の端末装置から前記第二音声データを受信し、前記第一の端末装置へ前記第二翻訳音声データを送信するとともに、前記第二の端末装置へ前記第一翻訳音声データを送信する第三の通信部と、を有する翻訳装置と、
を備える音声翻訳システム。
【請求項６】
請求項５に記載の音声翻訳システムであって、
前記第一の端末装置は、前記第一使用者が入力する音声の言語の種類を特定し、該特定した言語の情報に基づいて第一の選択言語データを作成する第一の言語選択部と、前記データ変換部に翻訳の開始を指示するための第一信号を作成する第一のトリガー部と、を有し、前記第一の通信部が、前記第一の選択言語データ及び第一信号を前記翻訳装置に送信し、
前記第二の端末装置は、前記第二使用者が入力する音声の言語の種類を特定し、該特定した言語の情報に基づいて第二の選択言語データを作成する第二の言語選択部と、前記データ変換部に翻訳の開始を指示するための第二信号を作成する第二のトリガー部と、を有し、前記第二の通信部が、前記第二の選択言語データ及び第二信号を前記翻訳装置に送信し、
前記翻訳装置は、前記第三の通信部が、前記第一の端末装置から、前記第一の選択言語データ及び第一信号を受信し、前記データ変換部が、前記第三の通信部にて受信した第一信号を受けて、前記第三の通信部にて受信した第一の選択言語データに基づいて、前記第一翻訳音声データへの変換を開始するとともに、前記第二の端末装置から、前記第二の選択言語データ及び第二信号を受信し、前記データ変換部が、前記第三の通信部にて受信した第二信号を受けて、前記第三の通信部にて受信した第二の選択言語データに基づいて、前記第二翻訳音声データへの変換を開始することを特徴とする音声翻訳システム。
【請求項７】
第一使用者が使用する第一の端末装置と第二使用者が使用する第二の端末とを介して前記第一使用者及び第二使用者が対話できるように構成された端末装置であって、
前記第一の端末装置は、
第一言語を話す前記第一使用者の音声を受け、該音声の音声データである第一音声データに変換する第一の音声入力部と、
第二言語を話す前記第二使用者の音声の音声データである第二音声データが前記第一言語に翻訳された音声データである第二翻訳音声データに基づいて、第二翻訳音声を出力する第一の音声出力部と、
前記第一音声データを送信するとともに、前記第二翻訳音声データを受信する第一の通信部と、を有し、
前記第二の端末装置は、
前記第一の端末装置とは離間しており、
前記第二使用者の音声を受け、該音声を前記第二音声データに変換する第二の音声入力部と、
前記第一音声データが前記第二言語に翻訳された音声データである第一翻訳音声データに基づいて、第一翻訳音声を出力する第二の音声出力部と、
前記第二音声データを送信するとともに、前記第一翻訳音声データを受信する第二の通信部と、を有し、
前記第一の端末装置及び第二の端末装置と離間して設けられた翻訳装置によって、前記第一の端末装置から前記第一音声データを受信し、該前記第一音声データを前記第一翻訳音声データに変換し、前記第二の音声入出力装置へ前記第一翻訳音声データを送信するとともに、前記第二の端末装置から前記第二音声データを受信し、該第二音声データを前記第二翻訳音声データに変換し、前記第一の端末装置へ前記第二翻訳音声データを送信することを特徴とする端末装置。
【請求項８】
請求項７に記載の端末装置であって、
前記第一の端末装置は、前記第一使用者が入力する音声の言語の種類を特定し、該特定した言語の情報に基づいて第一の選択言語データを作成する第一の言語選択部と、前記データ変換部に翻訳の開始を指示するための第一信号を作成する第一のトリガー部と、を有し、前記第一の通信部が、前記第一の選択言語データ及び第一信号を前記翻訳装置に送信し、
前記第二の端末装置は、前記第二使用者が入力する音声の言語の種類を特定し、該特定した言語の情報に基づいて第二の選択言語データを作成する第二の言語選択部と、前記データ変換部に翻訳の開始を指示するための第二信号を作成する第二のトリガー部と、を有し、前記第二の通信部が、前記第二の選択言語データ及び第二信号を前記翻訳装置に送信し、
前記翻訳装置は、前記第三の通信部が、前記第一の端末装置から、前記第一の選択言語データ及び第一信号を受信し、前記データ変換部が、前記第三の通信部にて受信した第一信号を受けて、前記第三の通信部にて受信した第一の選択言語データに基づいて、前記第一翻訳音声データへの変換を開始するとともに、前記第二の端末装置から、前記第二の選択言語データ及び第二信号を受信し、前記データ変換部が、前記第三の通信部にて受信した第二信号を受けて、前記第三の通信部にて受信した第二の選択言語データに基づいて、前記第二翻訳音声データへの変換を開始することを特徴とする端末装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、使用者間での端末装置の受け渡しが不要で、スムーズな会話が可能な音声翻訳システム、及び、端末装置に関する。
【背景技術】
【０００２】
近年、グローバル化や、海外旅行者数の増加に伴い、異なる国の人同士での交流が盛んになっている。自身が国内にいる場合も例外ではなく、仕事上で外国人とのやり取りが必要となったり、外国人旅行者に道を尋ねられたり等、日常生活においても、外国人と交流する機会がある。このような対面状態における、コミュニケーションの基本となるのは会話であるが、両者が共通して使用可能な言語が無い場合、円滑にコミュニケーションを取ることができない。
【０００３】
前記問題を解決するため、音声翻訳装置の開発が行われており、例えば、特許文献１や特許文献２には、音声を入力するためのマイクロフォンと、翻訳処理を行う処理部と、翻訳した結果を音声として出力するスピーカーを備える音声翻訳装置の発明が開示されている。これらの音声翻訳装置は、片手で把持した状態で使用する小型の音声翻訳装置であるため、手軽に持ち歩くことができる。これにより、例えば、仕事で外国人と打合せがあるとき、海外旅行に行くとき等、携帯しておくことで、必要な時に好適に使用することができる。
【０００４】
しかしながら、これら従来の音声翻訳装置は、会話をする使用者間で、１つの装置を使い回す態様であるため、装置の受け渡しにもたついてしまうと、スムーズな会話をすることができない。このため従来の音声翻訳装置は、例えば、小売店のレジや、娯楽施設のチケット売り場等での使用は、むしろ業務を遅延させる虞があり、商業施設における音声翻訳の用途には適しているとはいえなかった。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０００−３１５２０５号公報
【特許文献２】特開２０１７−１５１６１９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
本発明は、従来のこのような問題点に鑑みてなされたものである。本発明の主な目的は、会話中に音声翻訳装置の受け渡しを行う必要がなく、スムーズに会話可能な音声翻訳システム、及び、端末装置を提供することにある。
【課題を解決するための手段及び効果】
【０００７】
本発明の第１の側面に係る音声翻訳システムによれば、音声翻訳前後の言語の種類を選択する第三の言語選択部と、音声を受け、該音声を音声データに変換する第三の音声入力部と、音声翻訳の開始を指示するための第三信号又は第四信号を作成する第三のトリガー部と、前記第三信号又は第四信号を受けて、前記第三の言語選択部で選択された第一言語又は第二言語で入力されたと推定される音声データを前記第三の言語選択部で選択された第二言語又は第一言語の音声データである第一翻訳音声データ又は第二翻訳音声データに変換するデータ変換部と、前記第一翻訳音声データ又は前記第二翻訳音声データに基づいて、第一翻訳音声又は第二翻訳音声を出力する第三の音声出力部と、を有する翻訳装置を用い、前記第一言語を話す第一使用者及び前記第二言語を話す第二使用者間の会話の翻訳を行う音声翻訳システムであって、前記翻訳装置とは離間しており、前記第一使用者が入力する音声の言語の種類を特定し、該特定した言語の情報に基づいて第一の選択言語データを作成する第一の言語選択部と、前記データ変換部に翻訳の開始を指示するための第一信号を作成する第一のトリガー部と、前記第一の選択言語データ及び第一信号を前記翻訳装置に送信する第一の通信部と、を有する第一の端末装置を備え、前記翻訳装置は、さらに、前記第一の端末装置から、前記第一の選択言語データ及び第一信号を受信する第三の通信部を有し、前記データ変換部が、前記第三の通信部にて受信した第一信号を受けて、前記第三の通信部にて受信した第一の選択言語データに基づいて、前記第一翻訳音声データへの変換を開始するよう構成できる。前記構成により、第一の端末装置が翻訳装置と離間して設けられるので、使用者間で装置の受け渡しをすることなく、各々の使用者が、自身の使用する言語の設定を行うことができる。
【０００８】
また、本発明の第２の側面に係る音声翻訳システムによれば、さらに、前記翻訳装置及び第一の端末装置と離間しており、前記第二使用者が入力する音声の言語の種類を特定し、該特定した言語の情報に基づいて第二の選択言語データを作成する第二の言語選択部と、前記データ変換部に翻訳の開始を指示するための第二信号を作成する第二のトリガー部と、前記第二の選択言語データ及び第二信号を前記翻訳装置に送信する第二の通信部と、を有する第二の端末装置を備え、前記翻訳装置は、前記第三の通信部が、前記第二の端末装置から、前記第二の選択言語データ及び第二信号を受信し、前記データ変換部が、前記第三の通信部にて受信した第二信号を受けて、前記第三の通信部にて受信した第二の選択言語データに基づいて、前記第二翻訳音声データへの変換を開始するよう構成できる。
【０００９】
さらにまた、本発明の第３の側面に係る端末装置によれば、音声翻訳前後の言語の種類を選択する第三の言語選択部と、音声を受け、該音声を音声データに変換する第三の音声入力部と、音声翻訳の開始を指示するための第三信号又は第四信号を作成する第三のトリガー部と、前記第三信号又は第四信号を受けて、前記第三の言語選択部で選択された第一言語又は第二言語で入力されたと推定される音声データを前記第三の言語選択部で選択された第二言語又は第一言語の音声データである第一翻訳音声データ又は第二翻訳音声データに変換するデータ変換部と、前記第一翻訳音声データ又は前記第二翻訳音声データに基づいて、第一翻訳音声又は第二翻訳音声を出力する第三の音声出力部と、を有する翻訳装置を用い、前記第一言語を話す第一使用者及び前記第二言語を話す第二使用者間の会話の翻訳を行う音声翻訳システムにおける前記翻訳装置に指示を与えるための端末装置であって、前記翻訳装置とは離間しており、前記第一使用者が入力する音声の言語の種類を特定し、該特定した言語の情報に基づいて第一の選択言語データを作成する第一の言語選択部と、前記データ変換部に翻訳の開始を指示するための第一信号を作成する第一のトリガー部と、前記第一の選択言語データ及び第一信号を前記翻訳装置に送信する第一の通信部と、を有する第一の端末装置を備え、前記翻訳装置は、さらに、前記第一の端末装置から、前記第一の選択言語データ及び第一信号を受信する第三の通信部を有し、前記データ変換部が、前記第三の通信部にて受信した第一信号を受けて、前記第三の通信部にて受信した第一の選択言語データに基づいて、前記第一翻訳音声データへの変換を開始するよう構成できる。
【００１０】
さらにまた、本発明の第４の側面に係る端末装置によれば、さらに、前記翻訳装置及び第一の端末装置と離間しており、前記第二使用者が入力する音声の言語の種類を特定し、該特定した言語の情報に基づいて第二の選択言語データを作成する第二の言語選択部と、前記データ変換部に翻訳の開始を指示するための第二信号を作成する第二のトリガー部と、前記第二の選択言語データ及び第二信号を前記翻訳装置に送信する第二の通信部と、を有する第二の端末装置を備え、前記翻訳装置は、前記第三の通信部が、前記第二の端末装置から、前記第二の選択言語データ及び第二信号を受信し、前記データ変換部が、前記第三の通信部にて受信した第二信号を受けて、前記第三の通信部にて受信した第二の選択言語データに基づいて、前記第二翻訳音声データへの変換を開始するよう構成できる。
【００１１】
さらにまた、本発明の第５の側面に係る音声翻訳システムによれば、前記第一使用者の音声を受け、該音声を第一音声データに変換する第一の音声入力部と、前記第二使用者の音声の音声データである第二音声データが前記第一言語に翻訳された音声データである第二翻訳音声データに基づいて、第二翻訳音声を出力する第一の音声出力部と、前記第一音声データを送信するとともに、前記第二翻訳音声データを受信する第一の通信部と、を有する第一の端末装置と、前記第一の端末装置とは離間しており、前記第二使用者の音声を受け、該音声を前記第二音声データに変換する第二の音声入力部と、前記第一音声データが前記第二言語に翻訳された音声データである第一翻訳音声データに基づいて、第一翻訳音声を出力する第二の音声出力部と、前記第二音声データを送信するとともに、前記第一翻訳音声データを受信する第二の通信部と、を有する第二の端末装置と、前記第一の端末装置及び第二の端末装置と離間しており、前記第一の端末装置から受信した前記第一音声データを前記第一翻訳音声データへ変換するとともに、前記第二の端末装置から受信した前記第二音声データを前記第二翻訳音声データへ変換するデータ変換部と、前記第一の音声入出力装置から前記第一音声データを受信するとともに、前記第二の端末装置から前記第二音声データを受信し、前記第一の端末装置へ前記第二翻訳音声データを送信するとともに、前記第二の端末装置へ前記第一翻訳音声データを送信する第三の通信部と、を有する翻訳装置と、を備えることができる。前記構成により、第一の端末装置、及び、第二の端末装置が翻訳装置と離間して設けられるので、使用者のうち一方が第一の端末装置を、もう一方が第二の端末装置を使用することで、使用者間で装置の受け渡しをすることなく、各々の使用者が、自身の使用する言語の設定を行うことができる。さらに、第一の端末装置、及び、第二の端末装置が、それぞれ、音声入力部と音声出力部とを備えるので、使用者の距離が離れていても使用することができる。
【００１２】
さらにまた、本発明の第６の側面に係る音声翻訳システムによれば、前記第一の端末装置は、前記第一使用者が入力する音声の言語の種類を特定し、該特定した言語の情報に基づいて第一の選択言語データを作成する第一の言語選択部と、前記データ変換部に翻訳の開始を指示するための第一信号を作成する第一のトリガー部と、を有し、前記第一の通信部が、前記第一の選択言語データ及び第一信号を前記翻訳装置に送信し、前記第二の端末装置は、前記第二使用者が入力する音声の言語の種類を特定し、該特定した言語の情報に基づいて第二の選択言語データを作成する第二の言語選択部と、前記データ変換部に翻訳の開始を指示するための第二信号を作成する第二のトリガー部と、を有し、前記第二の通信部が、前記第二の選択言語データ及び第二信号を前記翻訳装置に送信し、前記翻訳装置は、前記第三の通信部が、前記第一の端末装置から、前記第一の選択言語データ及び第一信号を受信し、前記データ変換部が、前記第三の通信部にて受信した第一信号を受けて、前記第三の通信部にて受信した第一の選択言語データに基づいて、前記第一翻訳音声データへの変換を開始するとともに、前記第二の端末装置から、前記第二の選択言語データ及び第二信号を受信し、前記データ変換部が、前記第三の通信部にて受信した第二信号を受けて、前記第三の通信部にて受信した第二の選択言語データに基づいて、前記第二翻訳音声データへの変換を開始するよう構成できる。
【００１３】
さらにまた、本発明の第７の側面に係る端末装置によれば、第一使用者が使用する第一の端末装置と第二使用者が使用する第二の端末とを介して前記第一使用者及び第二使用者が対話できるように構成された端末装置であって、前記第一の端末装置は、第一言語を話す前記第一使用者の音声を受け、該音声の音声データである第一音声データに変換する第一の音声入力部と、第二言語を話す前記第二使用者の音声の音声データである第二音声データが前記第一言語に翻訳された音声データである第二翻訳音声データに基づいて、第二翻訳音声を出力する第一の音声出力部と、前記第一音声データを送信するとともに、前記第二翻訳音声データを受信する第一の通信部と、を有し、前記第二の端末装置は、前記第一の端末装置とは離間しており、前記第二使用者の音声を受け、該音声を前記第二音声データに変換する第二の音声入力部と、前記第一音声データが前記第二言語に翻訳された音声データである第一翻訳音声データに基づいて、第一翻訳音声を出力する第二の音声出力部と、前記第二音声データを送信するとともに、前記第一翻訳音声データを受信する第二の通信部と、を有し、前記第一の端末装置及び第二の端末装置と離間して設けられた翻訳装置によって、前記第一の端末装置から前記第一音声データを受信し、該前記第一音声データを前記第一翻訳音声データに変換し、前記第二の音声入出力装置へ前記第一翻訳音声データを送信するとともに、前記第二の端末装置から前記第二音声データを受信し、該第二音声データを前記第二翻訳音声データに変換し、前記第一の端末装置へ前記第二翻訳音声データを送信するよう構成できる。
【００１４】
さらにまた、本発明の第８の側面に係る端末装置によれば、前記第一の端末装置は、前記第一使用者が入力する音声の言語の種類を特定し、該特定した言語の情報に基づいて第一の選択言語データを作成する第一の言語選択部と、前記データ変換部に翻訳の開始を指示するための第一信号を作成する第一のトリガー部と、を有し、前記第一の通信部が、前記第一の選択言語データ及び第一信号を前記翻訳装置に送信し、前記第二の端末装置は、前記第二使用者が入力する音声の言語の種類を特定し、該特定した言語の情報に基づいて第二の選択言語データを作成する第二の言語選択部と、前記データ変換部に翻訳の開始を指示するための第二信号を作成する第二のトリガー部と、を有し、前記第二の通信部が、前記第二の選択言語データ及び第二信号を前記翻訳装置に送信し、前記翻訳装置は、前記第三の通信部が、前記第一の端末装置から、前記第一の選択言語データ及び第一信号を受信し、前記データ変換部が、前記第三の通信部にて受信した第一信号を受けて、前記第三の通信部にて受信した第一の選択言語データに基づいて、前記第一翻訳音声データへの変換を開始するとともに、前記第二の端末装置から、前記第二の選択言語データ及び第二信号を受信し、前記データ変換部が、前記第三の通信部にて受信した第二信号を受けて、前記第三の通信部にて受信した第二の選択言語データに基づいて、前記第二翻訳音声データへの変換を開始するよう構成できる。
【図面の簡単な説明】
【００１５】
【図１】本発明を適用した音声翻訳システム１の構成図である。
【図２】本発明を適用した音声翻訳システム１の機能ブロック図である。
【図３】本発明を適用した音声翻訳システム１の端末装置の外観図である。
【図４】音声翻訳システム１の音声翻訳の流れを示すフローチャートである。
【図５】音声翻訳システム１の使用方法の手順を示すフローチャートである。
【図６】本発明を適用した音声翻訳システム２の構成図である。
【図７】本発明を適用した音声翻訳システム２の機能ブロック図である。
【図８】本発明を適用した音声翻訳システム２の端末装置の外観図である。
【図９】本発明を適用した音声翻訳システム２の端末装置の外観図である。
【図１０】音声翻訳システム２の使用方法の手順を示すフローチャートである。
【発明を実施するための形態】
【００１６】
以下、本発明の実施の形態を図面に基づいて説明する。ただし、以下に示す実施の形態は、本発明の技術思想を具体化するための音声翻訳システム、及び、端末装置を例示するものであって、本発明はそれらを以下のものに特定しない。また、本明細書は特許請求の範囲に示される部材を、実施の形態の部材に特定するものでは決してない。特に実施の形態に記載されている構成部品の寸法、材質、形状、その相対的配置等は特に特定的な記載がない限りは、本発明の範囲をそれのみに限定する趣旨ではなく、単なる説明例にすぎない。なお、各図面が示す部材の大きさや位置関係等は、説明を明確にするため誇張していることがある。さらに以下の説明において、同一の名称、符号については同一もしくは同質の部材を示しており、詳細説明を適宜省略する。さらに、本発明を構成する各要素は、複数の要素を同一の部材で構成して一の部材で複数の要素を兼用する態様としてもよいし、逆に一の部材の機能を複数の部材で分担して実現することもできる。
（音声翻訳システム１）
【００１７】
本発明の第一の実施例に係る音声翻訳システム１について図１〜図５に基づいて説明する。
【００１８】
音声翻訳システム１は、図１の構成図及び図２の機能ブロック図に示すように、端末装置１１、１２と、翻訳装置１３とで構成される。以下では、音声翻訳システム１が、第一言語Ｌ１を話す第一使用者Ｈ１と、第二言語Ｌ２を話す第二使用者Ｈ２との間で使用されると想定して、各装置についての説明を行う。
（端末装置１１、１２）
【００１９】
端末装置１１（特許請求の範囲における「第一の端末装置」の一例に対応する。）、１２（特許請求の範囲における「第二の端末装置」の一例に対応する。）は、図３の端末装置の外観図に示すように、同一の装置であり、一方は、第一使用者Ｈ１の音声Ｖ１１の言語の種類の特定と翻訳開始の指示を、もう一方は、第二使用者Ｈ２の音声Ｖ２１の言語の種類の特定と翻訳開始の指示とを行う。なお、以下の説明では、便宜上、端末装置１１は前者を、端末装置１２は後者を行うこととする。また、端末装置１１及び端末装置１２の構成は同じであるため、端末装置１２については、構成の説明を省略する。
【００２０】
端末装置１１は、第一使用者Ｈ１の音声Ｖ１１の言語の種類が何であるかを翻訳装置１３に指示するための言語選択ボタン１１１（特許請求の範囲における「第一の言語選択部」の一例に対応する。）と、音声Ｖ１１の音声翻訳の開始を指示するためのトリガーボタン１１２（特許請求の範囲における「第一のトリガー部」の一例に対応する。）と、データの送受信を行う通信部１１３（特許請求の範囲における「第一の通信部」の一例に対応する。）とからなる装置である。
（言語選択ボタン１１１）
【００２１】
言語選択ボタン１１１は、例えば、英語、日本語、中国語、韓国語、フランス語にそれぞれ対応するよう設けられた５つのボタンであって、第一使用者Ｈ１の音声Ｖ１１の言語の種類が何であるかを第一使用者Ｈ１自らが選択するための入力装置である。言語選択ボタン１１１にて選択された言語は、選択言語データＤ１３として、通信部１１３から翻訳装置１３の通信部１３５（特許請求の範囲における「第三の通信部」の一例に対応する。）に送信される。
【００２２】
なお、言語選択ボタン１１１の数や選択できる言語種類は、前記のものに限定されない。また、特許請求の範囲における「言語選択部」は、前述のボタンの態様に限られず、例えば、タッチ画面であってもよい。さらにまた、例えば、翻訳装置１３の翻訳ソフトウェア１３６（特許請求の範囲における「データ変換部」の一例に対応する。）に音声Ｖ１１の言語を特定するプログラムを備えておけば、言語選択ボタンを必ずしも設ける必要はない。この場合、特許請求の範囲における「第一の言語選択部」は、翻訳ソフトウェア１３６がその役割を担うことになる。
（トリガーボタン１１２）
【００２３】
トリガーボタン１１２は、翻訳装置１３に翻訳の開始を指示するボタンであって、トリガーボタン１１２が押されることでトリガー信号Ｓ１（特許請求の範囲における「第一信号」の一例に対応する。）を作成し、通信部１１３から翻訳装置１３の通信部１３５に送信する。なお、トリガーボタン１１２の態様は、上記のものに限定されず、例えば、トリガーボタン１１２を押し続けている間に、トリガー信号Ｓ１を送信し続けるような態様としてもよい。この態様であれば、翻訳の開始に加え、トリガー信号Ｓ１が途切れたことを基準として、信号の終了も指示することができる。
（通信部１１３）
【００２４】
通信部１１３は、Ｂｌｕｅｔｏｏｔｈ（登録商標）を用いた無線通信により、選択言語データＤ１３及びトリガー信号Ｓ１を翻訳装置１３の通信部１３５に送信する。なお、通信方法は、Ｂｌｕｅｔｏｏｔｈに限定されず、有線通信であってもよい。
（翻訳装置１３）
【００２５】
翻訳装置１３は、音声Ｖ１１及び音声Ｖ２１を翻訳（翻訳の方法についての詳細は後述する。）し翻訳音声データＤ１２、Ｄ２２を作成する装置である。
【００２６】
翻訳装置１３は、マイクロフォン１３１（特許請求の範囲における「第三の音声入力部」の一例に対応する。）と、スピーカー１３２（特許請求の範囲における「第三の音声出力部」の一例に対応する。）と、言語選択ボタン１３３ａ、１３３ｂ（特許請求の範囲における「第三の言語選択部」の一例に対応する。）と、トリガーボタン１３４ａ、１３４ｂ（特許請求の範囲における「第三のトリガー部」の一例に対応する。）と、通信部１３５と、翻訳ソフトウェア１３６とで構成される。
（マイクロフォン１３１）
【００２７】
マイクロフォン１３１は、所謂マイクであって、入力された音声を電気信号である音声データに変換する装置である。以下では、便宜上、音声Ｖ１１が変換されてなる音声データを音声データＤ１１、音声Ｖ２１が変換されてなる音声データを音声データＤ２１とする。
（スピーカー１３２）
【００２８】
スピーカー１３２は、音声データＤ１１が翻訳されてなる翻訳音声データＤ１２（特許請求の範囲における「第一翻訳音声データ」の一例に対応する。）を合成音声Ｖ１２とし、音声データＤ２１が翻訳されてなる翻訳音声データＤ２２（特許請求の範囲における「第二翻訳音声データ」の一例に対応する。）を合成音声Ｖ２２として出力する装置である。
（言語選択ボタン１３３ａ、１３３ｂ）
【００２９】
言語選択ボタン１３３ａ、１３３ｂは、それぞれ、例えば、英語、日本語、中国語、韓国語、フランス語にそれぞれ対応する５つのボタンであって、言語選択ボタン１３３ａは第一使用者Ｈ１の、言語選択ボタン１３３ｂは第二使用者Ｈ２の言語の種類が何であるかを選択するための入力装置である。言語選択ボタン１３３ａにて選択された言語は選択言語データＤ１３として、言語選択ボタン１３３ｂにて選択された言語は選択言語データＤ２３として翻訳ソフトウェア１３６に送信される。
（トリガーボタン１３４ａ、１３４ｂ）
【００３０】
トリガーボタン１３４ａ、１３４ｂは、翻訳装置１３に翻訳の開始を指示するボタンであって、トリガーボタン１３４ａが押されることでトリガー信号Ｓ３（特許請求の範囲における「第三信号」の一例に対応する。）を作成し、トリガーボタン１３４ｂが押されることでトリガー信号Ｓ４（特許請求の範囲における「第四信号」の一例に対応する。）を作成し、それぞれ翻訳ソフトウェア１３６に伝達する。
【００３１】
トリガー信号Ｓ１〜Ｓ４は、端末装置１１、１２及び翻訳装置１３におけるそれぞれのトリガーボタンの押下状態を翻訳ソフトウェア１３６に伝達するための信号を意味しており、それぞれ独立した信号の態様であっても、そうでなくても構わない。すなわち、トリガー信号Ｓ３とトリガー信号Ｓ１とが翻訳ソフトウェア１３６に伝達される信号としては区別のない同一の信号であってもよく、同様に、トリガー信号Ｓ４とトリガー信号Ｓ２とが同一の信号であってもよい。
【００３２】
また、例えば、トリガーが入った状態を１（ＯＮ）、入っていない状態を０（ＯＦＦ）とする（勿論逆でもよい。）フラッグパラメータを用いて、トリガーボタン１３４ａ、１３４ｂ、１１２、１２２が押下されると、それぞれのトリガーボタンの押下状態を示すフラッグパラメータの値が翻訳ソフトウェア１３６に伝達されるようにしてもよい。すなわち、トリガー信号Ｓ３とトリガー信号Ｓ１とを区別することなく同一のフラッグパラメータの態様で実現することも可能であり、同様に、トリガー信号Ｓ４とトリガー信号Ｓ２とを同一のフラッグパラメータを用いて実現してもよい。また、トリガー信号Ｓ１〜Ｓ４を一つのフラッグパラメータを用いて実現することも可能である。
（通信部１３５）
【００３３】
通信部１３５は、Ｂｌｕｅｔｏｏｔｈ（登録商標）を用いた無線通信により、端末装置１１から選択言語データＤ１３及びトリガー信号Ｓ１を、端末装置１２から選択言語データＤ２３及びトリガー信号Ｓ２（特許請求の範囲における「第二信号」の一例に対応する。）を受信する。また、後述する翻訳ソフトウェア１３６がクラウド上の翻訳ソフトウェアである場合、インターネット回線を用いたクラウドとの通信も行う。インターネット回線へは、例えばＢｌｕｅｔｏｏｔｈを使用して接続してもよいし、その他、有線やＷｉ−Ｆｉ（登録商標）、携帯電話のデータ通信規格等を使用して接続してもよい。
（翻訳ソフトウェア１３６）
【００３４】
翻訳ソフトウェア１３６は、大別して、（１）音声認識工程、（２）言語変換工程、（３）音声データ作成工程の３つの工程を経て、音声データＤ１１、Ｄ２１を翻訳音声データＤ１２、Ｄ２２に変換するソフトウェアである。以下で翻訳の方法について説明する。なお、翻訳ソフトウェア１３６は、必ずしも翻訳装置１３に組み込まれている必要はなく、クラウド上の翻訳ソフトウェアを含むものである。これにより、翻訳プログラムを動作させるためのＣＰＵや、翻訳の際に必要となる言語データ等を保存しておくためのメモリが不要となる等、情報端末としての機能があれば足りるので、製造コストを抑えることができる。
（翻訳の方法）
【００３５】
翻訳ソフトウェア１３６が行う、翻訳（音声データＤ１１、Ｄ２１から翻訳音声データＤ１２、Ｄ２２への変換）の方法について、図４のフローチャートに基づいて説明する。また、音声Ｖ１１が「あなたの名前は何ですか」である場合を具体例として示す。
【００３６】
最初のステップＳＴ１０１は、音声認識の工程であり、音声データＤ１１（音声データＤ２１）から、音声Ｖ１１（音声Ｖ２１）の文字列を作成する。具体例の場合、音声Ｖ１１は、「ＡＮＡＴＡＮＯＮＡＭＡＥＷＡＮＡＮＩＤＥＳＵＫＡ」に変換される。
【００３７】
次のステップＳＴ１０２は、言語変換の工程であり、第１に、ステップＳＴ１０２−１で、前述の文字列を、第一言語Ｌ１（第二言語Ｌ２）の辞書データに基づいて、第一言語Ｌ１（第二言語Ｌ２）の言葉に変換する。具体例の場合、「ＡＮＡＴＡＮＯＮＡＭＡＥＷＡＮＡＮＩＤＥＳＵＫＡ」が「あなたの  名前は  何ですか」に変換される。
【００３８】
第２に、ステップＳＴ１０２−２で、ステップＳＴ１０２−１で変換されて得られた言葉を、第一言語Ｌ１及び第二言語Ｌ２の辞書データに基づいて、単語毎に、第二言語Ｌ２（第一言語Ｌ１）の同じ意味を持つ単語に変換する。具体例の場合、「あなたの  名前は  何ですか」が「Ｙｏｕｒ  Ｎａｍｅ  Ｗｈａｔ  Ｉｓ」に変換される。
【００３９】
第３に、ステップＳＴ１０２−３で、ステップＳＴ１０２−２で変換されて得られた言葉を第二言語Ｌ２（第一言語Ｌ１）の文法データに基づいて、単語を並び替え、翻訳文章を作成する。これにより、翻訳の工程を終了する。具体例の場合、「Ｙｏｕｒ  Ｎａｍｅ  Ｗｈａｔ  Ｉｓ」が「Ｗｈａｔ  Ｉｓ  Ｙｏｕｒ  Ｎａｍｅ」に並び替えられる。
【００４０】
最後のステップＳＴ１０３は、音声データを作成する工程であり、前工程で作成した翻訳文章から、第二言語Ｌ２（第一言語Ｌ１）の辞書データの発音情報を基に、音声データＤ１２（音声データＤ２２）を作成する。
（音声翻訳システム１の使用方法）
【００４１】
音声翻訳システム１の使用方法について、図５のフローチャートに基づいて説明する。
【００４２】
まず、ステップＳＴ２０１で、音声Ｖ１１及び音声Ｖ２１の言語の種類を特定する。音声Ｖ１１の言語の種類は端末装置１１の言語選択ボタン１１１又は翻訳装置１３の言語選択ボタン１３３ａで特定でき、音声Ｖ２１の言語の種類は端末装置１２の言語選択ボタン１２１又は翻訳装置１３の言語選択ボタン１３３ｂで特定できる。言語の種類の特定は、端末装置１１の言語選択ボタン１１１及び端末装置１２の言語選択ボタン１２１の入力が優先され、これらの入力がない場合、翻訳装置１３の言語選択ボタン１３３ａ、１３３ｂによる入力が参照される。さらに翻訳装置１３でも入力がない場合、直近の設定が記憶されており、その設定に基づいて後続の処理が実行される。
【００４３】
次に、ステップＳＴ２０２で、第一使用者Ｈ１又は第二使用者Ｈ２が翻訳装置１３のマイクロフォン１３１に音声を入力するとともに、第一使用者Ｈ１はトリガーボタン１１２又はトリガーボタン１３４ａを、第二使用者Ｈ２はトリガーボタン１２２又はトリガーボタン１３４ｂを押し翻訳ソフトウェア１３６に翻訳の開始を指示する。翻訳開始の指示は、端末装置１１、１２のトリガーボタン１１２、１２２の入力が優先され、これらの入力がない場合、翻訳装置１３のトリガーボタン１３４ａ、１３４ｂによる入力が参照される。
【００４４】
次いで、ステップＳＴ２０３で、音声データが、翻訳（ＳＴ１０１〜ＳＴ１０３）され、翻訳音声データが作成される。具体的に、翻訳ソフトウェア１３６は、音声データとともにトリガー信号Ｓ１又はトリガー信号Ｓ３を受けた場合、該音声データが音声データＤ１１であると特定し、該音声データを第一言語Ｌ１から第二言語Ｌ２に翻訳する。一方、音声データとともにトリガー信号Ｓ２又はトリガー信号Ｓ４を受けた場合、該音声データが音声データＤ２１であると特定し、該音声データを第二言語Ｌ２から第一言語Ｌ１に翻訳する。
【００４５】
最後に、ステップＳＴ２０４で、翻訳音声データＤ１２（翻訳音声データＤ２２）が、合成音声Ｖ１２（合成音声Ｖ２２）に変換され、スピーカー１３２から出力される。
【００４６】
以上説明したように、音声翻訳システム１は、一使用者に対して１つの端末装置が割り振られ、各使用者は、この割り振られた端末を用いて、自身の用いる言語の種類と、翻訳の開始とを指示する実施形態である。この実施形態は、使用者間で１つの装置を使い回すことが常識化しつつある従来の音声翻訳装置の実施形態とは大きく異なっている。
【００４７】
言い換えると、音声翻訳システム１では、音声翻訳の際に、装置の受け渡しが不要となり、スムーズに会話することができる。特に、音声翻訳システム１は、業務を遅延させないために、顧客とスムーズにコミュニケーションを取ることが求められる小売店のレジや、娯楽施設のチケット売り場等での使用に適した実施形態であるといえる。
（音声翻訳システム２）
【００４８】
本発明の第二の実施例に係る音声翻訳システム２について図６〜１０に基づいて説明する。
【００４９】
本発明の第二の実施例に係る音声翻訳システム２は、図６の構成図及び図７の機能ブロック図に示すように前述の音声翻訳システム１と同じく２つの端末装置２１、２２と、翻訳装置２３とで構成されるシステムであるが、これらの装置の構成に差異がある。
【００５０】
具体的に、端末装置２１（端末装置２２）は、図８に示すように、マイクロフォン２１１（マイクロフォン２２１）、スピーカー２１２（スピーカー２２２）、言語選択ボタン２１３（言語選択ボタン２２３）、トリガーボタン２１４（トリガーボタン２２４）及び通信部２１５（通信部２２５）で構成され、翻訳装置２３は、通信部２３１及び翻訳ソフトウェア２３２で構成され、マイクロフォン及びスピーカーを端末装置に備える点において音声翻訳システム１と異なっている。また、音声翻訳システム２は、翻訳装置２３に言語選択ボタン及びトリガーボタンを備えない点においても音声翻訳システム１と異なっている。
【００５１】
なお、音声翻訳システム２の端末装置２１、２２は、必ずしも、トリガーボタン２１４、２２４を備える必要はない（詳細は後述する）。また、翻訳装置は、必ずしも装置である必要はなく、クラウド上の翻訳システムであってもよい。さらにまた、端末装置２１、２２の形状は図８に限定されず、例えば、図９に示すように、マイクロフォン２１１'、ヘッドフォン２１２'、言語選択ボタン２１３'、トリガーボタン２１４'及び通信部２１５'を備えるヘッドセット２１'のような態様としてもよい。このように、端末装置の形状を適宜変更することで、使用用途、使用環境に適した音声翻訳システム２を提供することができる。
（音声翻訳システム２の使用方法）
【００５２】
以上のような構成の違いにより、音声翻訳システム２は音声翻訳システム１と使用方法が異なる。音声翻訳システム２の使用方法について、図１０のフローチャートに基づいて説明する。
【００５３】
まず、ステップＳＴ３０１で、音声Ｖ１１及び音声Ｖ２１の言語の種類を特定する。音声Ｖ１１の言語の種類は端末装置２１の言語選択ボタン２１３で特定でき、音声Ｖ２１の言語の種類は端末装置２２の言語選択ボタン２２３で特定できる。
【００５４】
次に、ステップＳＴ３０２で、第一使用者Ｈ１は端末装置２１のマイクロフォン２１１に音声Ｖ１１を入力するとともにトリガーボタン２１４を押し翻訳ソフトウェア２３２に翻訳の開始を指示する。また、第二使用者Ｈ２は端末装置２２のマイクロフォン２２１に音声Ｖ２１を入力するとともにトリガーボタン２２４を押し翻訳ソフトウェア２３２に翻訳の開始を指示する。
【００５５】
次いで、ステップＳＴ３０３で、音声データが、翻訳（ＳＴ１０１〜ＳＴ１０３）され、翻訳音声データが作成される。具体的に、翻訳ソフトウェア２３２は、音声データとともにトリガー信号Ｓ１を受けた場合、該音声データが音声データＤ１１であると特定し、該音声データを第一言語Ｌ１から第二言語Ｌ２に翻訳する。一方、音声データとともにトリガー信号Ｓ２を受けた場合、該音声データが音声データＤ２１であると特定し、該音声データを第二言語Ｌ２から第一言語Ｌ１に翻訳する。
【００５６】
なお、端末装置２１、２２がトリガーボタン２１４、２２４を備えない実施形態の場合は、音声がマイクロフォン２１１、２２１の何れから入力されたかで、第一言語Ｌ１から第二言語Ｌ２への翻訳か、第二言語Ｌ２から第一言語Ｌ１への翻訳かの判別を行う。具体的に、翻訳ソフトウェア２３２は、マイクロフォン２１１から音声が入力された場合、該音声データが音声データＤ１１であると特定し、該音声データを第一言語Ｌ１から第二言語Ｌ２に翻訳し、マイクロフォン２２１から音声が入力された場合、該音声データが音声データＤ２１であると特定し、該音声データを第二言語Ｌ２から第一言語Ｌ１に翻訳する。
【００５７】
最後に、ステップＳＴ２０４で、翻訳音声データＤ１２が合成音声Ｖ１２に、翻訳音声データＤ２２が合成音声Ｖ２２に変換され、それぞれ、スピーカー２２２、２１２から出力される。
【００５８】
以上説明したように、音声翻訳システム２は、音声翻訳システム１と同様に、音声翻訳の際に、装置の受け渡しが不要なのでスムーズに会話することができる。加えて、端末装置がそれぞれ、マイクとスピーカーを備えるので、通信可能な距離であれば使用者が離れていても使用することができる。
【産業上の利用可能性】
【００５９】
本発明に係る音声翻訳システム、及び、端末装置は、会話中に音声翻訳装置の受け渡しを行う必要がなく、スムーズに会話できるので、特に、小売店のレジや、娯楽施設のチケット売り場等の商業施設における音声翻訳の用途に適用できる。
【符号の説明】
【００６０】
１…音声翻訳システム
１１、１２…端末装置
１１１、１２１…言語選択ボタン；１１２、１２２…トリガーボタン；１１３、１２３…通信部
１３…翻訳装置
１３１…マイクロフォン；１３２…スピーカー；１３３ａ、１３３ｂ…言語選択ボタン；１３４ａ、１３４ｂ…トリガーボタン；１３５…通信部；１３６…翻訳ソフトウェア
２…音声翻訳システム
２１、２２…端末装置
２１１、２２１…マイクロフォン；２１２、２２２、…スピーカー；２１３、２２３…言語選択ボタン；２１４、２２４、…トリガーボタン；２１５、２２５…通信部
２１'…ヘッドセット
２１１'…マイクロフォン；２１２'…ヘッドフォン；２１３'…言語選択ボタン；２１４'…トリガーボタン；２１５'…通信部
２３…翻訳装置
２３１…通信部
２３２…翻訳ソフトウェア
Ｈ１…第一使用者
Ｈ２…第二使用者
Ｌ１…第一言語
Ｌ２…第二言語
Ｖ１１、Ｖ２１…音声
Ｖ１２、Ｖ２２…合成音声
Ｄ１１、Ｄ２１…音声データ
Ｄ１２、Ｄ２２…翻訳音声データ
Ｄ１３、Ｄ２３…選択言語データ
Ｓ１、Ｓ２、Ｓ３、Ｓ４…トリガー信号
【図１】
2019121291.tif 000003
【図２】
2019121291.tif 000004
【図３】
2019121291.tif 000005
【図４】
2019121291.tif 000006
【図５】
2019121291.tif 000007
【図６】
2019121291.tif 000008
【図７】
2019121291.tif 000009
【図８】
2019121291.tif 000010
【図９】
2019121291.tif 000011
【図１０】
2019121291.tif 000012