【手続補正書】
【提出日】平成28年2月24日(2016.2.24)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
少なくとも１つのマイクロホンと、
スクリーンディスプレイと、
少なくとも１つのプログラム可能プロセッサおよびディジタルデータを記憶する少なくとも１つのデータストレージユニットと
を含み、前記少なくとも１つのプログラム可能プロセッサは、前記少なくとも１つのマイクロホンおよび前記スクリーンディスプレイと通信しており、前記少なくとも１つのプログラム可能プロセッサは、
前記少なくとも１つのマイクロホンによって受信される第１の話者による音声入力を自動的に認識するステップであって、前記認識するステップは、
前記第１の話者による前記音声入力を受信するステップと、
受信した前記音声入力に基づいて認識された音声結果を決定するステップと、
コンピュータベースの音声翻訳システムによって、認識された第１の話者の音声に認識の曖昧さが存在するか否かを決定するステップであって、前記認識の曖昧さは、認識された前記音声結果について１より多くの一致の可能性を示す、ステップとを含む、ステップと、
コンピュータベースの前記音声翻訳システムによって、認識された第１の話者の第１の言語による音声結果を第２の言語に翻訳するステップと、
コンピュータベースの前記音声翻訳システムによって、認識された第１の話者の前記第１の言語による音声結果から第２の言語への翻訳における１以上の単語に翻訳の曖昧さが存在するか否かを決定するステップであって、前記翻訳の曖昧さは、前記１以上の単語について１より多くの翻訳の可能性を示す、ステップと、
コンピュータベースの前記音声翻訳システムによる、
（ｉ）認識された前記第１の話者による音声結果における認識の曖昧さ、または、
（ｉｉ）認識された第１の話者の前記第１の言語による音声結果から第２の言語への翻訳における翻訳の曖昧さ、
が存在することの決定に際し、前記認識の曖昧さまたは前記翻訳の曖昧さに基づいて、信頼度スコアを決定するステップと、
前記信頼度スコアがしきい値より低いことに応答して、コンピュータベースの前記音声翻訳システムによって、前記音声翻訳システムのユーザインタフェースを介して前記第１の話者に曖昧さ除去クエリを発行するステップであって、前記曖昧さ除去クエリに対す
る応答は、前記認識の曖昧さまたは前記翻訳の曖昧さを解消する、ステップと、
が行われるようにプログラムされる
デバイス。
【請求項２】
前記少なくとも１つのプログラム可能プロセッサは、
前記少なくとも１つのマイクロホンによって受信される第２の話者による音声を自動的に認識するステップと、
認識された前記第２の話者による音声から少なくとも情報を抽出するステップと、
前記コンピュータシステムの前記少なくとも１つのデータストレージユニットに記憶され前記スクリーンディスプレイ上のグラフィカルユーザインタフェース内に表示される電子フォームに、認識された第２の話者による前記音声から抽出された前記情報を入力するステップと、
が行われるようにさらにプログラムされる、請求項１に記載のデバイス。
【請求項３】
前記第１の話者は、第１の言語を話し、
前記第２の話者は、前記第１の言語とは異なる第２の言語を話し、
前記少なくとも１つのプログラム可能プロセッサは、
認識された第２の話者による前記第２の言語の音声を、前記第１の言語に自動的に翻訳するステップと、
前記第１の言語に翻訳された、認識された第２の話者による音声の翻訳から少なくとも情報を抽出することによって、認識された第２の話者による音声から少なくとも情報を抽出するステップと、
前記第１の言語に翻訳された、認識された第２の話者による音声の翻訳から抽出された情報を前記少なくとも１つのデータストレージユニットに記憶される電子フォームに入力することによって、抽出された情報を入力するステップと、が行われるようにさらにプログラムされる、請求項２に記載のデバイス。
【請求項４】
前記プロセッサは、
認識された前記第１の話者による前記第１の言語の音声結果から少なくとも情報を抽出するステップと、
認識された前記第１の話者による前記第１の言語の音声結果から抽出された情報を電子フォームに入力するステップと、
が行われるようにさらにプログラムされる、請求項３に記載のデバイス。
【請求項５】
前記プロセッサは、セマンティック文法によって前記翻訳を構文解析することによって前記第１の言語に翻訳された、認識された第２の話者による音声の翻訳から情報を抽出するステップが行われるようにプログラムされる、請求項３に記載のデバイス。
【請求項６】
前記プロセッサは、抽出された情報に関する１以上の文書を遠隔のデータベースから取り出すステップが行われるようにさらにプログラムされる、請求項５に記載のデバイス。
【請求項７】
前記プロセッサは、翻訳内の１以上のキーワードを検出することによって前記第１の言語に翻訳された、認識された第２の話者による音声の翻訳から情報を抽出するステップが行われるようにプログラムされる、請求項３に記載のデバイス。
【請求項８】
前記プロセッサは、抽出された情報に関する１以上の文書を遠隔のデータベースから取り出すステップが行われるようにさらにプログラムされる、請求項７に記載のデバイス。
【請求項９】
前記プロセッサは、抽出された情報を電子フォームに入力する前に、前記第１の話者および前記第２の話者のうちの少なくとも１つにフィードバックを提示するステップが行わ
れるようにさらにプログラムされる、請求項１に記載のデバイス。
【請求項１０】
前記少なくとも１つのプログラム可能プロセッサは、前記デバイスのユーザによって前記スクリーンディスプレイを介して入力される、電子フォーム内の抽出された情報に対する編集を認識し、受信するステップが行われるようにプログラムされる、請求項１に記載のデバイス。
【請求項１１】
前記少なくとも１つのプログラム可能プロセッサは、
前記第１の話者と前記第２の話者との間の対話中に、前記スクリーンディスプレイ上に表示されるグラフィカルユーザインタフェースの第１部分に、認識された第１の話者の前記音声結果と認識された第２の話者の前記音声とを出力するステップと、
前記スクリーンディスプレイ上に表示されるグラフィカルユーザインタフェースの第２部分上に、前記第１の話者と前記第２の話者との間の対話から抽出された情報を有するフォームを出力するステップと、
が行われるようにさらにプログラムされる、請求項１に記載のデバイス。
【請求項１２】
前記少なくとも１つのプログラム可能プロセッサは、前記グラフィカルユーザインタフェースの第２部分上に前記フォーム内において出力するために、前記第１の話者と前記第２の話者との間の対話から情報を抽出するステップが行われるようにさらにプログラムされる、請求項１１に記載のデバイス。
【請求項１３】
前記少なくとも１つのプログラム可能プロセッサは、
前記グラフィカルユーザインタフェースの前記第１部分に、認識された第１の話者の前記音声結果と識別された第２の話者の前記音声との翻訳を表示するステップが行われるようにプログラムされる、請求項１２に記載のデバイス。
【請求項１４】
前記少なくとも１つのプログラム可能プロセッサは、前記デバイスのユーザによる前記スクリーンディスプレイを介して入力される、抽出された情報に対する編集を認識し、受信するステップが行われるようにプログラムされる、請求項１２に記載のデバイス。
【請求項１５】
コンピュータベースのデバイスであって、
少なくとも１つのマイクロホンと、
スクリーンディスプレイと、
ディジタルデータを記憶する少なくとも１つのデータストレージユニットと、
前記少なくとも１つのマイクロホンによって受信される第１の話者による音声入力を自動的に認識する第１の自動音声認識モジュールであって、前記第１の話者による音声入力を自動的に認識することには、
前記第１の話者による前記音声入力を受信すること、および、
受信した前記音声入力に基づいて認識された音声結果を決定すること、
を含む、第１の自動音声認識モジュールと、
認識された第１の話者による前記音声結果に認識の曖昧さが存在するか否かを決定するための、および、認識された前記第１の話者による第１の言語の音声結果から第２の言語への翻訳において１以上の単語に翻訳の曖昧さが存在するか否かを決定するための、対話型曖昧さ除去モジュールであって、前記認識の曖昧さは、認識された前記音声結果に対して１より多くの一致の可能性を示し、前記翻訳の曖昧さは、前記１以上の単語の１より多くの翻訳の可能性を示す、対話型曖昧さ除去モジュールと、
認識された前記第１の話者による前記第１の言語の音声結果を第２の言語に翻訳するための第１の機械翻訳モジュールと、を備え、
前記対話型曖昧さ除去モジュールは、
（ｉ）認識された前記第１の話者の音声結果における認識の曖昧さ、または、（ｉｉ
）認識された第１の話者による前記第１の言語の音声結果の第２の言語への翻訳における翻訳の曖昧さが存在することの決定に際し、前記認識の曖昧さまたは前記翻訳の曖昧さに基づいて、信頼度スコアを決定するステップと、前記信頼度スコアがしきい値より低いことに応答して、コンピュータベースの音声翻訳システムによって、前記音声翻訳システムのユーザインタフェースを介して第１の話者に曖昧さ除去クエリを発行するステップであって、前記曖昧さ除去クエリに対する応答は、前記認識の曖昧さまたは前記翻訳の曖昧さを解消する、ステップと、
が行われるようにさらに構成される
デバイス。
【請求項１６】
前記第１の話者は、第１の言語を話し、
第２の話者は、前記第１の言語とは異なる第２の言語を話し、
前記デバイスは、
前記少なくとも１つのマイクロホンによって受信される前記第２の話者による音声を自動的に認識するための第２の自動音声認識モジュールと、
認識された第２の話者による前記第２の言語の音声を前記第１の言語に自動的に翻訳するための第２の機械翻訳モジュールと、
前記第１の言語に翻訳された、認識された第２の話者による音声の翻訳から少なくとも情報を抽出することによって、認識された第２の話者による音声から少なくとも情報を抽出し、および、前記第１の言語に翻訳された、認識された第２の話者による音声の翻訳から抽出された情報を前記少なくとも１つのデータストレージユニットに記憶される電子フォームに入力することによって、抽出された情報を入力するための、情報抽出モジュールと、を備える、請求項１５に記載のデバイス。
【請求項１７】
前記情報抽出モジュールは、さらに、
認識された第１の話者による前記第１の言語の音声結果から少なくとも情報を抽出し、
認識された第１の話者による前記第１の言語の音声結果から抽出された情報を電子フォームに入力するためのものである、請求項１６に記載のデバイス。
【請求項１８】
前記情報抽出モジュールは、セマンティック文法によって前記翻訳を構文解析することによって前記第１の言語に翻訳された、認識された第２の話者による音声の翻訳から情報を抽出する、請求項１６に記載のデバイス。
【請求項１９】
抽出された情報に関する１以上の文書を遠隔のデータベースから取り出すための情報リトリーバモジュールをさらに含む、請求項１８に記載のデバイス。
【請求項２０】
前記情報抽出モジュールは、翻訳内の１以上のキーワードを検出することによって前記第１の言語に翻訳された、認識された第２の話者による音声の翻訳から情報を抽出する、請求項１６に記載のデバイス。
【請求項２１】
抽出された情報に関する１以上の文書を遠隔のデータベースから取り出すための情報リトリーバモジュールをさらに含む、請求項２０に記載のデバイス。
【請求項２２】
抽出された情報を電子フォームに入力する前に、第１の話者および第２の話者のうちの少なくとも１つにフィードバックを提示するマルチモーダル対話インタフェースをさらに含む、請求項１５に記載のデバイス。
【請求項２３】
コンピュータ実装される方法であって、
コンピュータベースの音声翻訳システムによって、第１の言語の第１の話者による音声入力を認識するステップであって、
前記第１の話者による前記音声入力を受信するステップと、
受信した前記音声入力に基づいて認識された音声結果を決定するステップと、
コンピュータベースの前記音声翻訳システムによって、認識された第１の話者の音声結果に認識の曖昧さが存在するか否かを決定するステップであって、前記認識の曖昧さは、認識された前記音声結果について１より多くの一致の可能性を示す、ステップと、
を含むステップと、
コンピュータベースの前記音声翻訳システムによって、認識された第１の話者の第１の言語による音声結果を第２の言語に翻訳するステップと、
コンピュータベースの前記音声翻訳システムによって、認識された第１の話者の前記第１の言語による音声結果から第２の言語への翻訳における１以上の単語に翻訳の曖昧さが存在するか否かを決定するステップであって、前記翻訳の曖昧さは、前記１以上の単語について１より多くの翻訳の可能性を示す、ステップと、
コンピュータベースの前記音声翻訳システムによる、（ｉ）認識された前記第１の話者による音声結果における認識の曖昧さ、または、（ｉｉ）認識された第１の話者の前記第１の言語による音声結果から第２の言語への翻訳における翻訳の曖昧さが存在することの決定に際し、前記認識の曖昧さまたは前記翻訳の曖昧さに基づいて、信頼度スコアを決定するステップと、
前記信頼度スコアがしきい値より低いことに応答して、コンピュータベースの前記音声翻訳システムによって、前記音声翻訳システムのユーザインタフェースを介して前記第１の話者に曖昧さ除去クエリを発行するステップであって、前記曖昧さ除去クエリに対する応答は、前記認識の曖昧さまたは前記翻訳の曖昧さを解消する、ステップと、
を含む方法。
【請求項２４】
コンピュータベースの情報抽出デバイスの少なくとも１つのマイクロホンによって、人間対人間の対話の一部として前記第１の話者が第２の話者に対して前記第１の言語により話した音声を受信するステップと、
前記コンピュータベースの情報抽出デバイスによって、第２の言語の第２の話者による音声を自動的に認識するステップと、
前記コンピュータベースの情報抽出デバイスによって、認識された第２の話者による音声から少なくとも情報を抽出するステップと、
前記コンピュータベースの情報抽出デバイスによって、前記情報抽出デバイスの少なくとも１つのデータストレージユニットに記憶される電子フォームに、認識された第２の話者による音声から抽出された情報を入力するステップと、をさらに含む、請求項２３に記載の方法。
【請求項２５】
前記コンピュータベースの情報抽出デバイスのスクリーンディスプレイ上にフォームを表示するステップをさらに含む、請求項２４に記載の方法。
【請求項２６】
前記第１の話者は、第１の言語を話し、前記第２の話者は、前記第１の言語とは異なる第２の言語を話し、前記方法は、
前記コンピュータベースの情報抽出デバイスによって、認識された第１の話者による前記第１の言語の音声結果を前記第２の言語に自動的に翻訳するステップと、
前記コンピュータベースの情報抽出デバイスによって、認識された第２の話者による前記第２の言語の音声を前記第１の言語に自動的に翻訳するステップと、をさらに含み、
少なくとも情報を抽出するステップは、前記コンピュータベースの情報抽出デバイスによって、前記第１の言語に翻訳された、認識された前記第２の話者による音声の翻訳から少なくとも情報を抽出するステップを含み、
抽出された情報を入力するステップは、前記第１の言語に翻訳された、認識された第２の話者による音声の翻訳から抽出された情報を前記情報抽出デバイスの少なくとも１つのデータストレージユニットに記憶される電子フォームに、前記コンピュータベースの情報
抽出デバイスによって抽出された情報を入力することを含む、請求項２５に記載の方法。
【請求項２７】
認識された前記第１の話者による前記第１の言語の音声結果から少なくとも情報を抽出するステップと、
認識された前記第１の話者による前記第１の言語の音声結果から抽出された情報を電子フォームに入力するステップと、をさらに含む、請求項２６に記載の方法。
【請求項２８】
前記第１の言語に翻訳された、認識された前記第２の話者による音声の翻訳から情報を抽出するステップは、セマンティック文法によって前記翻訳を構文解析するステップを含む、請求項２６に記載の方法。
【請求項２９】
前記コンピュータベースの情報抽出デバイスによって、抽出された情報に関する１以上の文書を遠隔のデータベースから取り出すステップをさらに含む、請求項２８に記載の方法。
【請求項３０】
前記第１の言語に翻訳された、認識された第２の話者による音声の翻訳から情報を抽出するステップは、翻訳内の１以上のキーワードを検出するステップを含む、請求項２６に記載の方法。
【請求項３１】
前記コンピュータベースの情報抽出デバイスによって、抽出された情報に関する１以上の文書を遠隔のデータベースから取り出すステップをさらに含む、請求項３０に記載の方法。
【請求項３２】
前記コンピュータベースの情報抽出デバイスによって、抽出された情報を電子フォームに入力する前に、第１の話者および第２の話者のうちの少なくとも１つにフィードバックを提示するステップをさらに含む、請求項２６に記載の方法。
【請求項３３】
前記コンピュータベースの情報抽出デバイスのスクリーンディスプレイは、タッチスクリーンディスプレイを含む、請求項２６に記載の方法。
【請求項３４】
前記第１の話者に発行される曖昧さ除去クエリは、認識された第１の話者の音声結果に曖昧さが存在する時と、認識された第１の話者による前記第１の言語の音声結果の前記第２の言語への翻訳に曖昧さが存在する時とでは異なる、請求項２３に記載の方法。
【請求項３５】
認識された第１の話者の音声結果に曖昧さが存在するか否かの決定は、複数の要因に基づき、前記要因は、
認識された第１の話者の音声結果の聴覚信頼度スコアと、
前記第１の話者と前記第２の話者との間における前記対話のコンテキストと、
第２の話者による１以上の発声の前記第２の言語から前記第１の言語への翻訳によって与えられる言語コンテキストと、を含む、請求項２３に記載の方法。
【請求項３６】
認識された第１の話者の音声結果の、前記第１の言語の前記第２の言語への翻訳に曖昧さが存在するか否かの決定は、複数の要因に基づき、前記要因は、
最高スコアリング出力翻訳のスコアリングのしきい値差以内に１以上の代替出力翻訳が存在するか否かと、
前記最高スコアリング出力翻訳のスコアリングのしきい値差以内に代替出力翻訳が存在しない場合に、最高スコアリング出力翻訳のスコアが最小しきい値未満であるか否かと、を含む、請求項２３に記載の方法。
【請求項３７】
前記音声翻訳システムのユーザインタフェースは、タッチスクリーンディスプレイを含
む、請求項２３に記載の方法。