(57)【要約】      （修正有）【課題】使用される言語毎に、言語が異なることを指定する必要がなく、かつ、相手に関する情報が一切なく、会話するのが初めてという状況であっても、会話をスムーズに翻訳する音声翻訳システム及び音声翻訳方法を提供する。【解決手段】音声翻訳システム１において、各ユーザが異なる言語を使用する会話の音声を入力することができ、入力されたユーザの音声の内容を当該ユーザが使用する言語と異なる言語で出力する情報端末１０と、情報端末とネットワーク３０を介して接続され、情報端末に入力されたユーザの音声の内容をそのユーザが使用する言語と異なる言語に翻訳する翻訳サーバ２０とを具備する。翻訳サーバは、会話の音声から、その会話に使用される複数の言語を特定する言語特定手段２１と、ユーザの音声の内容を、言語特定手段によって特定された複数の言語のうち、そのユーザが使用する言語と異なる言語に翻訳する翻訳手段２２とを有する。【選択図】図１
2020119043.tif 000002
【特許請求の範囲】
【請求項１】
各ユーザが異なる言語を使用する会話の音声を入力することができ、入力されたユーザの音声の内容を当該ユーザが使用する言語と異なる言語で出力する情報端末と、
前記情報端末とネットワークを介して接続され、前記情報端末に入力されたユーザの音声の内容を当該ユーザが使用する言語と異なる言語に翻訳する翻訳サーバとを具備する音声翻訳システムであって、
翻訳サーバは、会話の音声から、当該会話に使用される複数の言語を特定する言語特定手段と、
ユーザの音声の内容を、前記言語特定手段によって特定された複数の言語のうち、当該ユーザが使用する言語と異なる言語に翻訳する翻訳手段と、を有する、
ことを特徴とする音声翻訳システム。
【請求項２】
前記翻訳手段は、人工知能を用いて翻訳を行うことを特徴とする請求項１に記載の音声翻訳システム。
【請求項３】
前記情報端末からの出力が、音声として出力されることを特徴とする請求項１または２に記載の音声翻訳システム。
【請求項４】
前記情報端末は、言語指定手段を有し、
前記翻訳サーバは、前記言語指定手段により指定された言語を、前記言語特定手段により特定される言語に加える
ことを特徴とする前請求項１〜３の何れか１項に記載の音声翻訳システム。
【請求項５】
ユーザの耳またはその近傍に取り付けられると共に前記情報端末および前記翻訳サーバの少なくとも何れか一方とネットワークを介して接続され、
前記翻訳サーバによって異なる言語に翻訳されたユーザの音声の内容を音声として出力する音声出力端末をさらに具備することを特徴とする請求項１〜４に記載の音声翻訳システム。
【請求項６】
各ユーザが異なる言語を使用する会話のうち、入力されたユーザの音声の内容を当該ユーザが使用する言語と異なる言語で出力する音声翻訳方法であって、
会話の音声から、当該会話に使用される複数の言語を特定する言語特定ステップと、
ユーザの音声の内容を、前記言語特定ステップによって特定された複数の言語のうち、当該ユーザが使用する言語と異なる言語に翻訳する翻訳ステップと、
を具備することを特徴とする音声翻訳方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、音声翻訳システムおよび音声翻訳方法に関する。
【背景技術】
【０００２】
互いの言語を理解できない人同士の会話、例えばタクシーの乗務員と日本語以外の言語でしか話すことができない顧客（海外からの観光客等）との会話を母国語で理解できるようにするために、話し手の音声を聞き手の母国語に翻訳する翻訳システムが多数提案されている。
【０００３】
例えば、特許文献１には、音声の入力及び出力が可能であり、入力された音声の内容を異なる言語に翻訳して音声として出力する音声翻訳装置と、音声の入力及び出力が可能であると共に、前記音声翻訳装置と無線接続された音声入出力装置と、を備え、前記音声翻訳装置は、前記音声入出力装置に入力された音声の内容を異なる言語に翻訳して当該音声翻訳装置から音声出力すると共に、当該音声翻訳装置に入力された音声の内容を異なる言語に翻訳して前記音声入出力装置から音声出力させる、音声翻訳システムが開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１８−１７３９１０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上述した音声翻訳システムでは、最初に、音声翻訳システムで使用する言語を指定しなければならないという問題点があった。
【０００６】
また、使用する言語を指定するためには、相手がどの言語を話すのか予め知っておく必要があり、例えばタクシーの乗務員と顧客との関係等のように、相手に関する情報が一切なく、会話するのが初めてという場合には、上述した音声翻訳システムを利用しにくいという問題点があった。
【０００７】
さらに、上述した音声翻訳システムでは、会話ごと、すなわち話し手が変わるごとに、言語が異なることを指定する必要があるという問題点があった。
【０００８】
本発明は上述した事情に鑑み、会話ごとに、言語が異なることを指定する必要がなく、かつ相手に関する情報（どの言語を話すか等の情報）が一切なく、会話するのが初めてという状況であっても、会話をスムーズに翻訳することができる音声翻訳システムおよび音声翻訳方法を提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明の発明者は、上述した問題点に関して鋭意研究・開発を続けた結果、以下のような画期的な音声翻訳システムおよび音声翻訳方法を見出した。
【００１０】
上記課題を解決するための本発明の第１の態様は、各ユーザが異なる言語を使用する会話の音声を入力することができ、入力されたユーザの音声の内容をユーザが使用する言語と異なる言語で出力する情報端末と、情報端末とネットワークを介して接続され、情報端末に入力されたユーザの音声の内容をユーザが使用する言語と異なる言語に翻訳する翻訳サーバとを具備する音声翻訳システムであって、翻訳サーバは、会話の音声から、会話に使用される複数の言語を特定する言語特定手段と、ユーザの音声の内容を、言語特定手段によって特定された複数の言語のうち、ユーザが使用する言語と異なる言語に翻訳する翻訳手段と、を有することを特徴とする音声翻訳システムにある。
【００１１】
ここで、「出力」とは、音声として出力することだけでなく、音声の内容を文字で表示する場合を含む概念である。また、「音声」とは、音声だけではなく音声データを含む概念である。ただし、「音声出力」または「音声で出力」とは、音声データではなく音声として出力されることをいう。
【００１２】
かかる第１の態様では、会話ごとに、会話に使用される言語を指定することなく、かつ相手に関する情報が一切なく、会話するのが初めてという状況であっても、会話をスムーズに翻訳することができる。
【００１３】
本発明の第２の態様は、翻訳手段は、人工知能を用いて翻訳を行うことを特徴とする第１の態様に記載の音声翻訳システムにある。
【００１４】
かかる第２の態様では、より正確な翻訳を提供することができる。
【００１５】
本発明の第３の態様は、情報端末からの出力が、音声として出力されることを特徴とする第１または第２の態様に記載の音声翻訳システムにある。
【００１６】
かかる第３の態様では、翻訳が音声として出力されるので、異なる言語を使用した会話をスムーズに行うことができる。
【００１７】
本発明に係る第４の態様は、情報端末は、言語指定手段を有し、翻訳サーバは、言語指定手段により指定された言語を、言語特定手段により特定される言語に加えることを特徴とする第１〜第３の態様の何れか１つに記載の音声翻訳システムにある。
【００１８】
かかる第４の態様では、使用される言語のうち、少なくとも１つの言語を指定しておくことができるので、より正確に入力された音声の内容を翻訳することができる。
【００１９】
本発明の第５の態様は、ユーザの耳またはその近傍に取り付けられると共に情報端末および翻訳サーバの少なくとも何れか一方とネットワークを介して接続され、翻訳サーバによって異なる言語に翻訳されたユーザの音声の内容を音声として出力する音声出力端末をさらに具備することを特徴とする第１〜第４の態様の何れか１つに記載の音声翻訳システムにある。
【００２０】
ここで、「ユーザの耳の近傍」とは、出力された音声をユーザが確実に聞き取れるような場所を言い、例えば、耳の上部や首元等が挙げられる。
【００２１】
かかる第５の態様では、翻訳された音声を容易に聞き取ることができるので、異なる言語を使用した会話をよりスムーズに行うことができる。
【００２２】
本発明の第６の態様は、各ユーザが異なる言語を使用する会話のうち、入力されたユーザの音声の内容をユーザが使用する言語と異なる言語で出力する音声翻訳方法であって、会話の音声から、会話に使用される複数の言語を特定する言語特定ステップと、ユーザの音声の内容を、言語特定ステップによって特定された複数の言語のうち、ユーザが使用する言語と異なる言語に翻訳する翻訳ステップと、を具備することを特徴とする音声翻訳方法にある。
【００２３】
かかる第６の態様では、会話に使用される言語を指定することなく、かつ相手に関する情報が一切なく、例えば、会話するのが初めてという状況であっても、会話をスムーズに翻訳することができる。
【００２４】
なお、本発明において、「手段」、「システム」とは、単に物理的手段を意味するものではなく、その「手段」、「システム」が有する機能をソフトウェアによって実現する場合も含まれる。また、１つの「手段」、「システム」が有する機能が２つ以上の物理的手段や装置により実現されても、２つ以上の「手段」、「システム」の機能が１つの物理的手段や装置により実現されてもよい。
【図面の簡単な説明】
【００２５】
【図１】図１は実施形態１に係る音声翻訳システムの概略概念図である。
【図２】図２は実施形態１に係る音声翻訳システムの動作を示すフローチャートである。
【図３】図３は実施形態２に係る音声翻訳システムの概略概念図である。
【発明を実施するための形態】
【００２６】
以下に添付図面を参照して、本発明に係る音声翻訳システムの実施形態を説明する。なお、本発明は、以下の実施形態に限定されるものではない。
（実施形態１）
【００２７】
図１は、本実施形態に係る音声翻訳システムの概略概念図である。この図に示すように、音声翻訳システム１は、情報端末１０と、情報端末１０にネットワーク３０を介して接続された翻訳サーバ２０と、情報端末１０と接続された複数（３つ）の音声出力端末４０とで構成されている。
【００２８】
情報端末１０は、ユーザ１００ａ〜１００ｃが話す音声を入力することができるものであれば特に限定されない。なお、情報端末１０は、後述する翻訳された音声を出力できるようにスピーカー等の音声出力装置を有していてもよい。情報端末１０としては、例えば、携帯電話、スマートフォンや音声入出力機能を有する専用端末などが挙げられる。ここで、ユーザ１００ａ〜１００ｂはそれぞれ異なる言語で会話する人物である。
【００２９】
翻訳サーバ２０は、ユーザ１００ａ〜１００ｃの会話から、各ユーザ１００ａ〜１００ｃが使用する言語を特定する言語特定手段２１と、ユーザの音声の内容を、言語特定手段２１によって特定された複数の言語のうち、そのユーザが使用する言語と異なる言語に翻訳する翻訳手段２２とを有している。
【００３０】
言語特定手段２１としては、各ユーザ１００ａ〜１００ｃが使用する言語を特定する機能を有するものであれば特に限定されず、例えば、そのような機能を有するプログラム等が挙げられる。具体的には、例えば、ユーザ１００ａは日本語を話し、ユーザ１００ｂは英語を話し、ユーザ１００ｃはフランス語を話す場合に、言語特定手段２１としては、ユーザ１００ａの音声から会話に日本語が使われていることを特定し、ユーザ１００ｂの音声から会話に英語が使われていることを特定し、ユーザ１００ｃの音声から会話にフランス語が使われていることを特定するプログラム等が挙げられる。ここで、言語を特定する方法としては、例えば、入力された音声に含まれる単語を検出し、その単語からどの言語が使用されているか判断するという方法等が挙げられる。
【００３１】
また、翻訳手段２２としては、言語特定手段２１によって特定された複数の言語のうち、そのユーザが使用する言語と異なる言語に翻訳する機能（例えば、まず音声情報をテキストデータ等に変換し、そのテキストデータ等を別の言語に翻訳された翻訳テキストデータに変換し、さらにその翻訳テキストデータを翻訳音声情報に変換する機能等）を有するものであれば特に限定されず、例えば、そのような機能を有するプログラム等が挙げられる。具体的には、例えば、ユーザ１００ａは日本語を話し、ユーザ１００ｂは英語を話し、ユーザ１００ｃはフランス語を話す場合に、翻訳手段２２としては、ユーザ１００ａの音声の内容（日本語で表現された内容）を英語に翻訳したり、フランス語に翻訳するプログラム等が挙げられる。
【００３２】
なお、翻訳手段２２としては、ユーザが使用する言語と異なる言語に、そのユーザの音声の内容を翻訳できるものであれば特に限定されないが、人工知能（ＡＩ）を利用して翻訳できるものが好ましい。人工知能を利用することによって、人工知能の学習効果によって、より正確に翻訳できるようになる。人工知能としては、特に限定されず、翻訳に利用できる公知の技術を用いることができる。
【００３３】
翻訳サーバ２０は、上述した言語特定手段２１および翻訳手段２２を有するものであれば特に限定されない。翻訳サーバ２０としては、例えば、パーソナルコンピュータやそれらを並列に接続したコンピュータシステムなどが挙げられる。
【００３４】
ネットワーク３０は、情報端末１０と翻訳サーバ２０とを接続（有線での接続や無線での接続を含む）できるものであれば特に限定されず、インターネットやイントラネット等が挙げられる。
【００３５】
音声出力端末４０は、情報端末１０と接続（有線での接続や無線での接続を含む）することができ、翻訳サーバ２０によって異なる言語に翻訳されたユーザ１００ａ〜１００ｃの音声の内容を音声出力することができるものであれば特に限定されない。音声出力端末４０としては、例えば、情報端末１０に無線を介して接続されるイヤホンやスピーカー等が挙げられるが、イヤホンが好ましい。イヤホンを用いることによって、外部環境音等のノイズの影響を抑えることができるので、翻訳された音声を分かり易くユーザ１００ａ〜１００ｃに聞かせることができる。
【００３６】
次に、音声翻訳システム１の動作を説明する。図２は、音声翻訳システム１の動作を示すフローチャートである。
【００３７】
この図に示すように、情報端末１０の電源や翻訳のスタートボタンが押されると、音声翻訳システム１が動作を始め、まずユーザ１００ａ〜１００ｃの会話の音声が情報端末１０に入力される（Ｓ１）。
【００３８】
すると、情報端末１０は、入力された音声を翻訳サーバに送信する（Ｓ２）。送信された音声を受信すると、翻訳サーバ２０は、言語特定手段２１により、その会話に使用されている言語を特定する（Ｓ３）。具体的には、送信された音声には、日本語、英語およびフランス語が使用されていると特定する。
【００３９】
次に、翻訳サーバ２０は、言語特定手段２１によって特定された複数の言語のうち、その音声に使用されている言語と異なる言語にその音声の内容を翻訳する（Ｓ４）。具体的には、日本語の音声の内容を英語の音声とフランス語の音声に翻訳する。すなわち、日本語の音声を二ヵ国語（英語、フランス語）に翻訳する。
【００４０】
そして、翻訳サーバ２０は、異なる外国語に翻訳された音声を情報端末１０に送信する（Ｓ５）。すると、情報端末１０は、その翻訳された音声を音声出力端末４０に送信する（Ｓ６）。
【００４１】
音声出力端末４０は、自動音声として翻訳された音声を出力する（Ｓ７）。具体的には、音声出力端末４０は、例えば、英語の音声を出力した後、フランス語の音声を出力する。そして、Ｓ４〜Ｓ７のステップが、会話が終了するまで繰り返され（Ｓ８）、会話が終了すると、音声翻訳システム１は停止する。
【００４２】
以上説明したように、本実施形態に係る音声翻訳システム１を構成することによって、会話に使用される言語を指定することなく、かつ相手に関する情報が一切なく、会話するのが初めてという状況であっても、会話をスムーズに翻訳することができる。
（実施形態２）
【００４３】
上述した実施形態１では、会話で使用する言語を指定しなかったが、使用する言語が決まっている場合には、使用する言語を予め指定できるように音声翻訳システムを構成してもよい。
【００４４】
例えば、図３に示す本実施形態に係る音声翻訳システム１Ａは、情報端末１０Ａと、情報端末１０Ａにネットワーク３０を介して接続された翻訳サーバ２０とで構成されており、実施形態１に係る音声翻訳システムと異なり、音声出力端末は存在しない。
【００４５】
情報端末１０Ａは、ユーザ１００ａ、１００ｂが話す音声を入力することができ、かつ翻訳された音声を出力することができる機能に加え、ユーザ１００ａ、１００ｂのどちらかが使用する言語を指定することができる言語指定手段（図示しない）を有するものであれば特に限定されない。
【００４６】
言語指定手段としては、例えば液晶画面等の表示部に、英語表記で言語名を表示し、その言語名に指でタッチすることにより言語を指定することができるプログラム等が挙げられる。
【００４７】
情報端末１０Ａとしては、例えば、携帯電話、スマートフォンや上述した機能を有する専用端末などが挙げられる。なお、翻訳サーバ２０およびネットワーク３０は、実施形態１と同様である。
【００４８】
本実施形態では、例えばユーザ１００ａが使用する言語は分かっているものとする。したがって、ユーザ１００ａとユーザ１００ｂとが会話を始める前に、情報端末１０に、使用する言語を言語指定手段によって予め入力することができる。入力された言語に関する情報は、翻訳サーバ２０に送信され、言語特定手段２１によって指定される言語に加えられる。すると、会話に使用される言語（少なくとも１つの言語）が誤って指定されることはなくなる。その結果、翻訳サーバ２０によって音声が誤って翻訳される確率が低減される。
【００４９】
以上説明したように、本実施形態に係る音声翻訳システム１Ａを構成することによって、より正確に翻訳することができる音声翻訳システムを提供することができる。
（他の実施形態）
【００５０】
上述した実施形態では、音声翻訳システムを使用するユーザが２〜３人の場合について説明したが、本発明はこれに限定されず、より多くのユーザが参加する会話についても本発明に係る音声翻訳システムを使用できることは言うまでもない。
【００５１】
また、上述した実施形態では、最終的に自動音声として翻訳された音声を出力するように音声翻訳システムを構成したが、本発明はこれに限定されない。例えば、情報端末に表示部を設け、その表示部に翻訳された音声のテキストデータを表示させるようにしてもよい。このようにしても、上述した実施形態と同様の効果が得られる。
【００５２】
さらに、上述した実施形態では、１つの情報端末で音声翻訳システムを構成したが、複数の情報端末を翻訳サーバに接続して音声翻訳システムを構成してもよい。このように音声翻訳システムを構成しても、上述した実施形態と同様の効果が得られる。
【符号の説明】
【００５３】
１、１Ａ    音声翻訳システム
１０、１０Ａ    情報端末
２０    翻訳サーバ
２１    言語特定手段
２２    翻訳手段
３０    ネットワーク
４０    音声出力端末
【図１】
2020119043.tif 000003
【図２】
2020119043.tif 000004
【図３】
2020119043.tif 000005