(57)【要約】【課題】スマートフォンあるいはタブレット等の携帯端末を使用者端末として使用し、携帯端末所有者である特定話者発話の音声認識機能の学習による通訳性能の向上を可能にした、簡易通訳装置。【解決手段】話者発話入力機能に入力され、音声認識機能の認識結果である表示機能出力は標準語・共通語の単一あるいは複数候補のテキストデータとして出力され、発話者は前記出力されたテキストデータが単一の場合はその正否判断を、複数の場合は複数の候補中からの最適結果の特定を、それぞれ行い、その結果と必要に応じての再度の話者発話による音声入力とを音声認識機能にフィードバックして学習する通訳装置を、例えばスマートフォン等の携帯端末と携帯端末にインターネット接続したサーバによって構成する。【選択図】図１
2016151718.tif 000002
【特許請求の範囲】
【請求項１】
話者発話音声の入力機能、入力した話者音声の認識機能、音声認識結果の話者言語による文字表示機能、文字表示された発話の対話者言語への翻訳機能、翻訳された対話者言語の音声出力機能、を有する通訳装置において、認識機能は当該認識機能を有する通訳装置端末所有者に限定した話者発話音声入力と、その認識結果である話者言語による文字表示出力の話者による対比・選択による特定話者音声認識学習機能を有することを特徴とする通訳装置。
【請求項２】
音声認識機能は、前記音声入力情報に対応すると話者により特定された文字表示出力情報及び／あるいは改めて発話者が入力した音声入力情報によって、学習を行う話者限定（特定話者）音声認識機能を有することを特徴とする通訳装置。
【請求項３】
認識機能による認識結果は、標準語・共通語での単数あるいは複数の構文・慣用句による候補のテキストデータとして文字表示出力されることを特徴とする通訳装置。
【請求項４】
学習の結果、音声認識結果の信頼性が十分向上した時点で、認識結果の表示機能への表示を省略して直接翻訳機能に入力することを特徴とする請求項１記載の通訳装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、互いに異なる言語を使用して会話する話者間の会話を通訳する通訳装置の最重要機能である音声認識の方法およびその学習による認識信頼性の向上方法に関する。
【背景技術】
【０００２】
言語の異なる対話者間で話者の発話を相手に正確に伝達するする通訳装置の主たる課題は、話者の発話を正確に認識すること、認識した発話を正確に相手の言語へ翻訳すること、である。    
これら課題への対処方法として、発話連接モデルを用いて発話の正確な認識に役立てる方法
【特許文献１】、学習用音声をあらかじめ入力・登録して学習する方法
【特許文献２】、あるいは発話者を特定する方法
【特許文献３】等、種々の方法が提案されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１４−０１６４７５
【特許文献２】特開２００３−１６２２９２
【特許文献３】特開２００３−１６２２９３
【発明の概要】
【発明が解決しようとする課題】
【０００４】
本願発明は、通訳装置使用者が自己の発話を正確に対話者言語に翻訳できるよう、話者を、通訳装置端末の所有者に、特定しての学習によって音声認識効率の向上を図り、少なくとも話者音声入力、話者音声認識結果の表示出力および前記表示出力の正誤判定あるいは複数候補中からの最適表示出力選択のための発話者による入力機能、および翻訳結果である音声出力機能をスマートフォンあるいはタブレット等の携帯端末に持たせるとともにその他の機能を前記携帯端末にインターネット接続されたサーバに持たせた、簡易かつ高信頼な通訳装置を提供しようとするものである。
【課題を解決するための手段】
【０００５】
発話者の音声入力は基本的には標準語・共通語（文法、語彙、慣用句等）に基づく口語とする。音声入力機能への入力は、音声認識装置によって認識され、認識結果は表示手段により文字表示出力される。認識結果があいまいな場合は複数の候補として出力表示される。
【０００６】
発話者は文字表示出力された音声入力認識結果の正否、あるいは複数の候補中から自己の発話と同等な認識結果、を特定・選択する。
前記文字表示出力中から正しいと特定された、あるいは選択された認識結果は翻訳機能により対話者言語に翻訳され音声変換されて対話者に音声出力される。
【０００７】
上記操作において、話者に話者発話の正しい音声認識結果として特定された表示出力は、対話者言語に翻訳される一方音声認識機能の学習用として音声認識機能にフィードバックされ音声認識機能の信頼性向上を図る。
【０００８】
前記音声認識機能による認識結果が、話者によって正しくない、あるいは正しい認識結果が複数の候補中にないと判定された場合は、発話者は改めて音声入力機能に対して音声入力を行う。
この場合の音声入力は、標準語・共通語であることに留意した口語による音声とする。
【発明の効果】
【０００９】
本願発明によって、本願発明による通訳装置端末所有者に発話者を限定した音声認識機能の向上した簡易通訳装置が実現可能となると同時に、発話者（端末所有者）の標準語・共通語による音声入力学習が期待されることから、例えば音声入力による検索装置用の発話者言語の口語改善、あるいは発話者の標準・共通口語による会話能力の向上も図ることができる。
例えば、我が国において、英語の学習を小学生時代から行うことをせずとも、本願発明による通訳装置を用いての日本語の標準語・共通語による発話訓練を行うことによって、日本語−英語間のコミュニケーションは勿論、英語以外の他国語とのコミュニケーションを図ることが可能となる。
【図面の簡単な説明】
【００１０】
【図１】図１は本願発明による簡易通訳装置説明のための機能ブロック図である。
【発明を実施するための形態】
【００１１】
簡易通訳装置とするため、使用者は音声入力機能、表示および表示内容の選択・特定機能、および音声出力機能を有する端末装置を所持し、その他の機能（音声認識機能、認識結果の学習機能および翻訳機能）は通信によって端末装置に接続されたインターネットサーバ等のセンター装置で行う。
【００１２】
本願発明の実施例の機能ブロックを１図に示す。
１図において、
１１は、発話者の音声をディジタル変換して入力する音声入力機能、
１２は、音声入力機能１１で入力した発話者音声を認識する音声認識機能であり、認識結果である表示機能出力の（発話者の判断による）正否あるいは複数選択肢中からの正しい認識結果の選択結果をもって音響モデル、言語モデルの学習を行う学習機能を有する。
【００１３】
１３は、音声認識機能で認識した音声を標準語・共通語による構文・慣用句でのテキストデータとして文字表示出力する文字表示出力機能、および
発話者の発話者言語による文字表示出力を見ての、自己の発話内容が正しく認識・表示されているか否かを判定あるいは複数の認識・表示結果候補中からの正しい結果を選択し、その結果を、学習機能を含む音声認識機能１２にフィードバックすると同時に、正しい認識結果がない場合は再度発話者に音声入力を指示する、発話者による認識結果判定・選択信号入力機能。
本音声認識機能の特定話者認識能力が十分向上した後においては、上記表示機能に表示される発話内容の判定・選択機能を省略して、認識結果を直接翻訳機能に入力することもできる。
【００１４】
１４は、表示装置の表示出力が発話者の内容を正しく表示している場合、あるいは選択肢中に正しい内容がある場合、それを対話者言語に翻訳する翻訳機能、
１５は、翻訳機能１４で翻訳された対話者言語を音声に変換して対話者に向けて出力する音声出力機能、
である。
【００１５】
対話者が本願発明によると同等の機能を有する通訳装置を有することによって、発話者および対話者の両通訳装置を使っての発話者−対話者間の正確なコミュニケーションが可能となる。
【産業上の利用可能性】
【００１６】
本願発明による通訳装置は、通訳装置端末所有者の対話者との異言語によるコミュニケーション以外にも、発話者言語の正しい発話の訓練用あるいは特定話者言語の認識機能向上のための学習にも用いることができる。
また、本願発明による通訳装置用音声認識機能は、音声入力による検索用としても有効である。
【符号の説明】
【００１７】
図１において、
１１：音声入力機能
１２：学習機能付き音声認識機能
１３：音声認識結果の表示出力および発話者による認識結果判定・選択信号入力機能
１４：翻訳機能
１５：音声出力機能
【図１】
2016151718.tif 000003
【手続補正書】
【提出日】平成27年7月27日(2015.7.27)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
話者発話音声の入力機能、入力した話者発話音声の認識機能、認識機能による話者発話音声認識結果の話者言語による文字表示機能、文字表示機能により文字表示された話者発話音声の対話者言語への翻訳機能、翻訳機能により翻訳された対話者言語の音声出力機能、を有する通訳装置において、
前記認識機能による認識結果は、話者言語による標準語・共通語での単一あるいは複数の構文・慣用句による候補のテキストデータとして文字表示機能から出力され、前記翻訳機能は前記文字表示機能出力中から発話者によって特定・選択された単一のテキストデータによる文字表示出力を翻訳する、ことを特徴とする通訳装置。
【請求項２】
認識機能は、当該通訳装置端末所有者による話者発話音声入力に限定しての認識を行い、
発話者により前記話者発話音声入力情報に対応すると認定された文字表示出力情報及び／あるいは改めて発話者が入力した音声入力情報によって学習を行う特定話者音声認識学習機能を有すること、を特徴とする請求項１記載の通訳装置。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００２
【補正方法】変更
【補正の内容】
【０００２】
言語の異なる対話者間で話者の発話を相手に正確に伝達するする通訳装置の主たる課題は、話者の発話を正確に認識すること、認識した発話を正確に相手の言語へ翻訳すること、である。    
これら課題への対処方法として、発話連接モデルを用いて発話の正確な認識に役立てる方法（特許文献１）、学習用音声をあらかじめ入力・登録して学習する方法（特許文献２）、あるいは発話者を特定する方法（特許文献３）等、種々の方法が提案されている。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００４
【補正方法】変更
【補正の内容】
【０００４】
本願発明は、通訳装置使用者が自己の発話を正確に対話者言語に翻訳できるよう、話者を通訳装置端末の所有者に特定しての学習によって音声認識能力の向上を図り、少なくとも話者音声入力、話者音声認識結果の表示出力、および前記表示出力の正誤判定あるいは複数候補中からの最適認識結果選択のための発話者による入力機能、および翻訳結果である音声出力機能、をスマートフォンあるいはタブレット等の携帯端末に持たせるとともに、その他の機能を前記携帯端末にインターネット接続されたサーバに持たせた、簡易かつ高信頼な通訳装置を提供しようとするものである。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】変更
【補正の内容】
【０００７】
上記操作において、話者に話者発話の正しい音声認識結果として特定された表示出力は、対話者言語に翻訳される一方音声認識機能の学習用として音声認識機能にフィードバックされ音声認識機能の信頼性向上に役立てる。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
前記音声認識機能による認識結果が、話者によって正しくない、あるいは正しい認識結果が複数の候補表示出力中にない、と判定された場合は、発話者は改めて音声入力機能に対して音声入力を行う。
この場合の音声入力は、標準語・共通語であることに留意した口語による音声とする。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
本願発明によって、通訳装置端末所有者に発話者を限定した音声認識機能を有する簡易通訳装置が実現可能となると同時に、発話者（端末所有者）の標準語・共通語による音声入力能力の学習による向上が期待されることから、例えば音声入力による検索装置用の発話者言語の口語改善、あるいは発話者の標準・共通口語による会話能力の向上も図ることができる。
例えば、我が国において、英語の学習を小学生時代から行うことをせずとも、本願発明による通訳装置を用いての日本語の標準語・共通語による発話訓練を行うことによって、日本語−英語間のコミュニケーションは勿論、英語以外の他国語とのコミュニケーション能力の向上を図ることが可能となる。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正の内容】
【００１２】
本願発明の実施例の機能ブロックを図１に示す。
図１において、
１１は、発話者の音声をディジタル変換して入力する音声入力機能、
１２は、音声入力機能１１で入力した発話者音声を認識する音声認識機能であり、認識結果である表示機能出力の（発話者の判断による）正否あるいは複数選択肢中からの正しい認識結果の選択結果をもって音響モデル、言語モデルの学習を行う学習機能を有する。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００１３
【補正方法】変更
【補正の内容】
【００１３】
１３は、音声認識機能で認識した音声を標準語・共通語による構文・慣用句でのテキストデータとして文字表示出力する文字表示出力機能であり、
発話者が発話者言語による文字表示出力を見て、自己の発話内容が正しく認識・表示されているか否かを判定、あるいは複数の認識・表示結果中からの正しい結果を選択し、その結果を、学習機能を含む音声認識機能１２にフィードバックすると同時に、正しい認識結果がない場合は再度発話者に音声入力機能への発話音声入力を指示する、発話者による認識結果判定・選択信号入力機能を有する。
本音声認識機能の特定話者認識能力が十分向上した後においては、上記文字表示出力機能に表示される発話内容の発話者による判定・選択機能を省略して、認識結果を直接翻訳機能に入力することもできる。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００１４
【補正方法】変更
【補正の内容】
【００１４】
１４は、文字表示出力機能１３の表示出力が発話者の内容を正しく表示している場合、あるいは選択肢中から発話者により正しい内容が選択抽出された場合、それを対話者言語に翻訳する翻訳機能、
１５は、翻訳機能１４で翻訳された対話者言語を音声に変換して対話者に向けて出力する音声出力機能、
である。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００１５
【補正方法】変更
【補正の内容】
【００１５】
対話者が発話者言語に通じていない場合でも、対話者も本願発明によると同等の機能を有する通訳装置を使用することによって、発話者−対話者間の正確なコミュニケーションが可能となる。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００１７
【補正方法】変更
【補正の内容】
【００１７】
図１において、
１１：音声入力機能
１２：学習機能付き音声認識機能
１３：音声認識結果の文字表示出力、および発話者による認識結果判定・選択信号入力機能
１４：翻訳機能
１５：音声出力機能
【手続補正書】
【提出日】平成28年3月21日(2016.3.21)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
前記音声認識機能による認識結果が、話者によって正しくない、あるいは正しい認識結果が複数の候補表示出力中にない、と判定された場合は、発話者は改めて音声入力機能に対して音声入力を行う。
この場合の音声入力は、当初の話者発話による音声入力時と同様標準語・共通語であることに留意した口語、即ち音声入力認識結果の翻訳機能による翻訳に際し、誤ることなく正しく翻訳できる口語、による音声とする。