【手続補正書】
【提出日】平成16年11月12日(2004.11.12)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】発明の名称
【補正方法】変更
【補正の内容】
【発明の名称】音声変換装置、音声変換方法、プログラム、及び記録媒体
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】特許請求の範囲
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
第１の言語の音声を入力するための音声入力手段と、
前記入力された音声を音声認識するための音声認識手段と、
前記音声の認識結果に対応する、前記第１の言語の一つ又は複数の単語列を抽出し、表示する第１の抽出・表示手段と、
前記表示された単語列から、第２の言語への変換対象となる予定の何れかの単語列を選定するための変換対象選定手段と、
前記選定された単語列の全部又は一部が特定された際、その特定された内容に対応する用語の候補を抽出し、表示する第２の抽出・表示手段と、
前記表示された前記候補から何れかの候補を選定するための候補選定手段と、
前記選定された単語列と、前記選定された候補とに基づいて、前記第２の言語への変換対象を決定し、その決定された変換対象を前記第２の言語の音声言語に変換する変換手段と、
を備えた音声変換装置。
【請求項２】
前記第１の抽出・表示手段は、前記選定の対象となる複数の単語列と、前記選定された単語列とを、それぞれ予め定められた領域に表示するための表示画面を備えた表示部を有しており、
前記第２の抽出・表示手段は、前記用語の候補を、前記表示画面の一部の領域にウインドウ状に重ねて表示する手段である請求項１記載の音声変換装置。
【請求項３】
前記第１の抽出・表示手段は、前記選定された単語列を前記表示画面上に表示する際、前記単語列の一部に対して、前記対応する用語の候補の表示が可能である旨の情報をも付加して表示する手段である請求項２記載の音声変換装置。
【請求項４】
前記付加された情報が表示されている前記単語列の一部を、前記表示画面上で特定するための画面表示特定手段を備えた請求項３記載の音声変換装置。
【請求項５】
前記変換手段は、前記単語列の内、前記特定された前記一部を、前記選定された候補の用語に置き換えた結果を、前記変換対象として決定する請求項１記載の音声変換装置。
【請求項６】
第１の言語の音声を入力する音声入力ステップと、
前記入力された音声を音声認識するための音声認識ステップと、
前記音声の認識結果に対応する、前記第１の言語の一つ又は複数の単語列を抽出し、表示する第１の抽出・表示ステップと、
前記表示された単語列から、第２の言語への変換対象となる予定の何れかの単語列を選定するための変換対象選定ステップと、
前記選定された単語列の全部又は一部が特定された際、その特定された内容に対応する用語の候補を抽出し、表示する第２の抽出・表示ステップと、
前記表示された前記候補から何れかの候補を選定するための候補選定ステップと、
前記選定された単語列と、前記選定された候補とに基づいて、前記第２の言語への変換対象を決定し、その決定された変換対象を前記第２の言語の音声言語に変換する変換ステップと、
を備えた音声変換方法。
【請求項７】
請求項６記載の音声変換方法の、前記音声認識ステップと、前記第１の表示・抽出ステップと、前記変換対象選定ステップと、前記第２の表示・抽出ステップと、前記候補選定ステップと、前記変換ステップとをコンピュータに実行させるためのプログラム。
【請求項８】
請求項７記載のプログラムを記録した記録媒体であって、コンピュータにより処理可能な記録媒体。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００１
【補正方法】変更
【補正の内容】
【０００１】
【発明の属する技術分野】
本発明は、例えば、音声入力された原言語の発声を目的言語に変換して音声出力する音声変換装置、音声変換方法、プログラム、及び記録媒体に関するものである。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
又、本発明に関連する技術の他の発明は、上記従来の翻訳装置のこの様な第２の課題を考慮し、従来に比べて表示内容についての使用性の向上を図る事が出来る音声変換装置、音声変換方法、プログラム、及び媒体を提供することを目的とする。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】削除
【補正の内容】
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１９
【補正方法】変更
【補正の内容】
【００１９】
又、第７の本発明（請求項７記載の本発明に対応）は、上記第６の本発明の音声変換方法の、前記音声認識ステップと、前記第１の表示・抽出ステップと、前記変換対象選定ステップと、前記第２の表示・抽出ステップと、前記候補選定ステップと、前記変換ステップとをコンピュータに実行させるためのプログラムである。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００２０
【補正方法】削除
【補正の内容】
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００２１
【補正方法】変更
【補正の内容】
【００２１】
又、第８の本願発明（請求項８記載の本発明に対応）上記第７の本発明のプログラムを記録した記録媒体であって、コンピュータにより処理可能な記録媒体である。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００２３
【補正方法】変更
【補正の内容】
【００２３】
尚、上記従来技術における第２の課題を解決するための、本発明に関連する技術の第１〜第１４の他の発明について以下に述べる。
第１の他の発明は、第１又は第２の言語の音声を入力するための入力部と、
（１）前記入力部から前記第１の言語の音声を受け取った場合、それを音声認識し、且つ、所定の制御指示に基づいて、（１−ａ）前記音声認識された前記第１の言語の表記データを出力する、又は（１−ｂ）前記音声認識された認識結果に基づいて決定される変換対象を前記第２の言語に変換し、その変換後の言語の少なくとも表記データを出力し、（２）前記入力部から前記第２の言語の音声を受け取った場合、それを音声認識し、且つ、所定の制御指示に基づいて、（２−ａ）前記音声認識された前記第２の言語の表記データを出力する、又は（２−ｂ）前記音声認識された認識結果に基づいて決定される変換対象を前記第１の言語に変換し、その変換後の言語の少なくとも表記データを出力する翻訳部と、
前記翻訳部の前記変換対象の決定を支援するための支援部と、
前記翻訳部から出力される前記変換後の言語の前記表記データを、前記所定の制御指示に基づいて表示するための表示部と、
前記所定の制御指示を、少なくとも前記翻訳部及び前記表示部に対して行う制御部と、を備えた音声変換装置である。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００２４
【補正方法】変更
【補正の内容】
【００２４】
又、第２の他の発明は、前記第１の言語を使用する利用者と、前記第２の言語を使用する他の利用者との対話の際に前記入力部により入力された音声に基づいた前記表記データを逐次保持して、履歴情報として前記表示部に出力するための対話履歴管理部を備えた上記第１の本発明の音声変換装置である。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００２５
【補正方法】変更
【補正の内容】
【００２５】
又、第３の他の発明は、前記第１の言語から第２の言語、又は前記第２の言語から第１の言語への何れの翻訳が前記音声翻訳部により行われるべきかの翻訳方向を決定するための情報を検出する言語変換方向検出部を備え、
前記制御部は、前記検出結果に基づいて、前記音声翻訳部に対して前記翻訳方向を指定し、かつ、前記入力部を制御する上記第１の他の発明の音声変換装置である。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００２６
【補正方法】変更
【補正の内容】
【００２６】
又、第４の他の発明は、前記制御部の前記入力部に対する制御とは、前記入力部が複数の音声入力部によって構成される場合に、発声する利用者の音声を最も良く集音する前記音声入力部を選択することである上記第３の他の発明の音声変換装置である。
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】００２７
【補正方法】変更
【補正の内容】
【００２７】
又、第５の他の発明は、前記制御部は、前記翻訳方向に応じて、前記表示部の表示内容を、その表示部の表示画面を基準として実質上１８０度回転するように制御することを特徴とする上記第３の他の発明の音声変換装置である。
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】００２８
【補正方法】変更
【補正の内容】
【００２８】
又、第６の他の発明は、前記言語変換方向検出部は、ボタンスイッチで構成されており、発声する利用者が前記ボタンスイッチを押して翻訳方向を選択する構成である上記第３の他の発明の音声変換装置である。
【手続補正１５】
【補正対象書類名】明細書
【補正対象項目名】００２９
【補正方法】変更
【補正の内容】
【００２９】
又、第７の他の発明は、前記言語変換方向検出部は、可動式のマイクの音響的指向性の最も良い方向を検出する角度センサーで構成されており、発声する利用者がマイクの方向を変えて前記翻訳方向を選択する上記第３の他の発明の音声入力翻訳装置である。
【手続補正１６】
【補正対象書類名】明細書
【補正対象項目名】００３０
【補正方法】変更
【補正の内容】
【００３０】
又、第８の他の発明は、前記言語変換方向検出部は、前記音声変換装置の内部に設置されたジャイロセンサーで構成されており、発声する利用者が前記音声変換装置を手に持つ位置で前記翻訳方向を選択する上記第３の他の発明の音声変換装置である。
【手続補正１７】
【補正対象書類名】明細書
【補正対象項目名】００３１
【補正方法】変更
【補正の内容】
【００３１】
又、第９の他の発明は、前記言語変換方向検出部は、マイクアレーユニットで構成される入力部の、音源方向検出装置によって構成されており、発声する利用者の前記マイクアレーユニットに対する発声位置で翻訳方向を選択する上記第３の他の発明の音声変換装置である。
【手続補正１８】
【補正対象書類名】明細書
【補正対象項目名】００３２
【補正方法】変更
【補正の内容】
【００３２】
又、第１０の他の発明は、第１又は第２の言語の音声を入力し、出力する音声入力ステップと、
（１）前記音声入力ステップにより出力された前記第１の言語の音声を受け取った場合、それを音声認識し、且つ、所定の制御指示に基づいて、（１−ａ）前記音声認識された前記第１の言語の表記データを出力する、又は（１−ｂ）前記音声認識された認識結果に基づいて決定される変換対象を前記第２の言語に変換し、その変換後の言語の少なくとも表記データを出力し、（２）前記音声入力ステップにより出力された前記第２の言語の音声を受け取った場合、それを音声認識し、且つ、所定の制御指示に基づいて、（２−ａ）前記音声認識された前記第２の言語の表記データを出力する、又は（２−ｂ）前記音声認識された認識結果に基づいて決定される変換対象を前記第１の言語に変換し、その変換後の言語の少なくとも表記データを出力する翻訳ステップと、
前記翻訳ステップでの前記変換対象の決定を支援するための支援ステップと、
前記翻訳ステップにより出力される前記変換後の言語の前記表記データを、前記所定の制御指示に基づいて表示するための表示ステップと、
前記所定の制御指示を、少なくとも前記翻訳ステップ及び前記表示ステップに対して行う制御ステップと、を備えた音声変換方法である。
【手続補正１９】
【補正対象書類名】明細書
【補正対象項目名】００３３
【補正方法】変更
【補正の内容】
【００３３】
又、第１１の他の発明は、上記第１〜９の何れか一つの他の発明の音声変換装置の、前記翻訳部と、前記支援部と、前記表示部と、前記対話履歴管理部との全部又は一部としてコンピュータを機能させるためのプログラムである。
【手続補正２０】
【補正対象書類名】明細書
【補正対象項目名】００３４
【補正方法】変更
【補正の内容】
【００３４】
又、第１２の他の発明は、上記第１０の他の発明の音声変換方法の、前記翻訳ステップと、前記支援ステップと、前記表示ステップと、前記対話履歴管ステップとの全部又は一部をコンピュータに実行させるためのプログラムである。
【手続補正２１】
【補正対象書類名】明細書
【補正対象項目名】００３５
【補正方法】変更
【補正の内容】
【００３５】
又、第１３の他の発明は、上記第１１の他の発明のプログラムを担持した媒体であって、コンピュータにより処理可能なことを特徴とする媒体である。
【手続補正２２】
【補正対象書類名】明細書
【補正対象項目名】００３６
【補正方法】変更
【補正の内容】
【００３６】
又、第１４の他の発明は、上記第１２の他の発明のプログラムを担持した媒体であって、コンピュータにより処理可能なことを特徴とする媒体である。
【手続補正２３】
【補正対象書類名】明細書
【補正対象項目名】００３７
【補正方法】変更
【補正の内容】
【００３７】
上記本発明に関連する技術の他の発明の構成によれば、例えば、音声変換装置としてユーザが片手で持ってボタンやタッチパネルで簡単に操作できるものを用いる。そして、対面する２人の使用者（一方の使用者が、第１の言語を使用し、他方の使用者が第２の言語を使用する）が、操作権限を手動で獲得する手段、あるいは、操作権限を手動で相手に与える手段、あるいは、自動的に獲得する手段を追加して、どちらに操作権限があるかを明示的に示し、かつ、その使用者が操作しやすい表示と入力手段を提供する。これにより、例えば、表示電力を増加させることなく、従来に比べて表示内容についての使用性の向上を図る事が出来る。
【手続補正２４】
【補正対象書類名】明細書
【補正対象項目名】０１１８
【補正方法】変更
【補正の内容】
【０１１８】
次に、上記従来技術における上記第２の課題を解決するための、本願発明に関連する技術の他の発明である音声変換装置の一実施の形態の音声入力翻訳装置について、図面を参照しながら説明する。
【手続補正２５】
【補正対象書類名】明細書
【補正対象項目名】０１２４
【補正方法】変更
【補正の内容】
【０１２４】
図２６において、言語変換方向制御部４１０５は２人の利用者の、どちらに翻訳装置の操作権限があるかを決定し、音声入力部４１０１の入力形態を制御し、音声翻訳部４１０２に対して翻訳方向を指定し、表示部４１０３の表示内容を指示する。ここで、２人の利用者の内、一方は日本語（本発明に関連する技術の他の発明の第１の言語に対応）を使用し、他方は英語（本発明に関連する技術の他の発明の第２の言語に対応）を使用するものとする。
【手続補正２６】
【補正対象書類名】明細書
【補正対象項目名】０１２６
【補正方法】変更
【補正の内容】
【０１２６】
以下の例では、図２７等を参照しながら、日本語と英語についての翻訳装置の動作について説明するとともに、本発明に関連する技術の他の発明の音声変換方法の一実施の形態についても同時に述べる。
【手続補正２７】
【補正対象書類名】明細書
【補正対象項目名】０１６７
【補正方法】変更
【補正の内容】
【０１６７】
なお、タッチパネル、ボタン、音声の各入力モダリティを組み合わせたり、ボタンをタッチパネルで置換して操作することも可能である。また、一例として日本語と英語を取り上げたが、中国語など他の言語についても同様に実施可能であり、本発明に関連する技術の他の発明は言語に依存しない。
【手続補正２８】
【補正対象書類名】明細書
【補正対象項目名】０１８７
【補正方法】削除
【補正の内容】
【手続補正２９】
【補正対象書類名】明細書
【補正対象項目名】図２６
【補正方法】変更
【補正の内容】
【図２６】
本発明に関連する技術の他の発明の一実施の形態の音声入力翻訳装置の構成を示すブロック図
【手続補正３０】
【補正対象書類名】明細書
【補正対象項目名】図３９
【補正方法】変更
【補正の内容】
【図３９】
本発明に関連する技術の他の発明の別の実施の形態の音声翻訳装置の日本語の利用を説明するための図
【手続補正３１】
【補正対象書類名】明細書
【補正対象項目名】図４０
【補正方法】変更
【補正の内容】
【図４０】
本発明に関連する技術の他の発明の別の実施の形態の音声翻訳装置の英語の利用を説明するための図
【手続補正３２】
【補正対象書類名】明細書
【補正対象項目名】図４１
【補正方法】変更
【補正の内容】
【図４１】
本発明に関連する技術の他の発明の更に別の実施の形態の音声翻訳装置の日本語の利用における代替単語の機能を説明するための図
【手続補正３３】
【補正対象書類名】明細書
【補正対象項目名】図４２
【補正方法】変更
【補正の内容】
【図４２】
本発明に関連する技術の他の発明の更に別の実施の形態の音声翻訳装置の日本語の利用における代替単語の機能を説明するための図
【手続補正３４】
【補正対象書類名】明細書
【補正対象項目名】図４３
【補正方法】変更
【補正の内容】
【図４３】
本発明に関連する技術の他の発明の更に別の実施の形態の音声翻訳装置の日本語の利用における代替単語の機能を説明するための図
【手続補正３５】
【補正対象書類名】明細書
【補正対象項目名】図４４
【補正方法】変更
【補正の内容】
【図４４】
本発明に関連する技術の他の発明の更に別の実施の形態の音声翻訳装置の日本語の利用における代替単語の機能を説明するための図