(57)【要約】【課題】現に利用している言語及び利用可能な言語を利用者に容易に認識させることができる多言語音声入出力装置を提供することにある。【解決手段】音声入出力装置１００は、中央処理装置（ＣＰＵ）１０２、入力装置１０５、表示装置１０６、音声出力装置（スピーカー）１０７、及び音声入力装置（マイクロフォン）１０８を備えている。表示装置１０６は、その言語が主に話されている国の国旗マークで示しており、その時点で扱える言語（この例では日本語）に対応する国旗マークとともに、設定変更により使用できる言語（英語、フランス語、ドイツ語）に対応する国旗マークを併せて表示してある。さらに、その時点で扱える言語（日本語）に対応する国旗マークと設定変更により使用できる言語とは表示方法を変えて表示している。【選択図】      図１
2004272363.tif 000002
【特許請求の範囲】
【請求項１】
複数の言語による音声入出力が可能な音声入出力装置であって、音声入力可能な言語及び音声出力可能な言語を表示する表示手段を備えることを特徴とする音声入出力装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、音声入出力装置に関し、特に音声入力可能な言語及び音声出力可能な言語を表示する音声入出力装置に関する。
【０００２】
【従来の技術】
従来、音声認識装置や音声合成装置は利用者の母国語等の単一の言語のみに対応しており、利用者は母国語に対応した音声認識装置や音声合成装置を使用していたため、音声認識装置や音声合成装置が扱える言語を稼動時に表示する必要は特になかった。近年、複数の言語の音声を認識して、出力する多言語音声認識装置や、多言語音声合成装置が開発され、単一の装置で複数の言語の音声入出力が可能になりつつある。このような装置では、利用者に対してどの言語が利用できるのかを表示する必要がある。例えば、言語を選択することによって英語又は日本語で観光案内する装置があった場合、利用者に対して、まず現在はどの言語で案内をしており、どの言語に切り替えられるのかを表示する必要がある。
【０００３】
従来、このように多言語を扱う装置で、扱える言語を利用者に通知する例として、複数の言語のメッセージを表示する銀行のキャッシュディスペンサ（ＣＤ）端末における言語選択に関する方法が開示されている（例えば、特許文献１）。この方法では、ＣＤ端末が対応可能な言語を象徴する国旗マークをタッチパネル上に表示し、利用者が所望の言語に対応する国旗マークに触れるとＣＤ端末の表示画面に用いられるメッセージの言語が所望の言語に切り替えられる。この方法では、表示中の言語のうち用いられていないものについては、選択できないようにするか、又は表示画面上への表示を削除するかして、ＣＤ端末表示画面上には切り替え可能な言語に対応する国旗マークを表示している。
【０００４】
同様な例は、インターネット上のＷＥＢページにも見られる。同一内容のコンテンツを複数の言語に翻訳して公開しているページでは、先のＣＤ端末の例と同様に、コンテンツのある言語に関して対応する国旗アイコン又は言語名アイコンを表示している。表示部分は対応する言語で記述されたコンテンツへのリンクである場合が多く、ＣＤ端末同様、国旗アイコンや言語名アイコンをクリックするとその言語で記述されたコンテンツのページに切り替わる。
【０００５】
ここで説明したＣＤ端末及びＷＥＢページの例では、利用者は表示されている内容から設定されている言語を判断することができる。仮に表示されているものがどの言語かわからない場合でも、表示されている言語が利用者が所望する言語ではないことだけは判断できる。つまり、利用者は、利用にあたって言語を切り替えるかどうかを表示画面から判断できる。したがって、その時点で設定されている言語が何であるかを明示的に示す必要はなかった。
【０００６】
【特許文献１】
特開平６−１６１６９２号公報
【０００７】
【発明が解決しようとする課題】
しかしながら、音声入出力装置は、入力、出力とも音声だけで行うことが可能なため、文字の表示が特に必要ない場合があり、このような音声入出力装置が多言語に対応している場合、従来例と同様に選択可能な言語のみを表示する手法を用いると、利用者は表示されている言語以外のどの言語で話せばいいのか、又は表示されている言語以外のどの言語で音声出力されるのか判断することができない。つまり、多言語に対応した音声入出力装置の場合は、その時点で入力可能な言語を明示的に示す必要がある。
【０００８】
また、多言語を扱う音声認識装置の中には、同時に複数の言語を認識できる装置も開発されている。例えば、英語と日本語に対応している場合は、利用者が英語で話しても日本語で話しても音声認識を行うことができる。さらにこの装置が言語の設定により、他の言語、例えばフランス語と中国語にも対応できる場合、利用者に対して何らかの方法で、その時点で利用している言語、設定変更により利用可能な言語を表示する必要がある。
【０００９】
本発明の目的は、現に利用している言語及び利用可能な言語を利用者に容易に認識させることができる多言語音声入出力装置を提供することにある。
【００１０】
【課題を解決するための手段】
上述の目的を達成するために、請求項１記載の音声入出力装置は、複数の言語による音声入出力が可能な音声入出力装置であって、音声入力可能な言語及び音声出力可能な言語を表示する表示手段を備えることを特徴とする。
【００１１】
【発明の実施の形態】
以下、本発明の実施の形態に係る音声入出力装置を図面を参照して詳述する。
【００１２】
図１は、本発明の実施の形態に係る音声入出力装置の概略構成を示すブロック図である。
【００１３】
本実施の形態に係る音声入出力装置は、音声対話システムとして実装された場合を想定しているが、本発明はこれに限定されるものではなく単独の音声入力装置若しくは単独の音声合成装置、又は他の形態の装置であってもよい。
【００１４】
図１において、音声入出力装置１００は、制御メモリ（ＲＯＭ）１０１、中央処理装置（ＣＰＵ）１０２、メモリ（ＲＡＭ）１０３、外部記憶装置１０４、入力装置１０５、表示装置１０６、音声出力装置（スピーカ）１０７、及び音声入力装置（マイクロフォン）１０８を備え、これらはバス１０９を介して夫々接続されている。
【００１５】
本音声入出力装置１００を実現するための制御プログラムやその制御プログラムで用いるデータは、外部記憶装置１０４に記憶される。これらの制御プログラムやデータは、中央処理装置１０２の制御のもと、バス１０９を介して適宜メモリ１０３に取り込まれ、中央処理装置１０２によって実行される。制御プログラムやデータは制御メモリ１０１に記憶してもよい。
【００１６】
図２は、図１の音声入出力装置のモジュール構成を示すブロック図である。
【００１７】
図１の音声入出力装置１００は、言語設定部２０１、設定言語表示部２０２、及び音声対話制御部２０３を有する。言語設定部２０１は、音声入出力装置の言語設定及び設定言語の変更を行い、設定言語表示部２０２は言語設定部２０１で設定された言語を利用者に表示し、音声対話制御部２０３は音声認識及び音声合成の制御及び音声入出力を用いる利用者との対話を制御する。
【００１８】
また、言語設定部２０１は、設定言語を変更する際に、音声認識や音声合成に必要なデータ、例えば音声認識用の音響モデル、音声認識文法、音声合成用の波形辞書などを設定された言語のデータに変更する。
【００１９】
図１の音声入出力装置は、日本語のほか、英語、フランス語、ドイツ語による音声入出力に対応しており、起動時には日本語による音声入出力を行うことができる。
【００２０】
図３は、図１の音声入出力装置によって実行される設定言語表示処理を示すフローチャートである。
【００２１】
図３において、まず、装置を起動すると、初期設定が行われる（ステップ３０１）。本装置では起動時には日本語のみの音声入出力に対応しており、ここでは、音声対話制御部２０３で日本語の音声認識や音声合成に必要なデータを設定する。
【００２２】
次に、図４に示すように、表示装置１０６は設定されている言語、すなわちその時点で扱える言語を表示装置１０６上に表示する（ステップＳ３０２）。ここで、言語を表示する際に、その時点で扱える言語以外に、設定を変更することによって使用できる言語を併せて表示する。また、その時点で扱える言語と設定変更によって扱える言語は表示方法を変えて表示する。
【００２３】
図４の例では、表示装置１０６は、その言語が主に話されている国の国旗マークで示しており、その時点で扱える言語（この例では日本語）に対応する国旗マークとともに、設定変更により使用できる言語（英語、フランス語、ドイツ語）に対応する国旗マークを併せて表示している。さらに、その時点で扱える言語（日本語）に対応する国旗マークと設定変更により使用できる言語とは表示方法を変えて表示している。図４の例では、その時点で扱える日本語に対応する日本の国旗を他の言語の国旗よりも大きく表示、さらに太い線で縁取りをすることで強調している。また、別の表示方法として、図５のように、設定変更しないと使用できない言語の国旗に、その旨わかるような記号を付加して、その時点で扱える言語と区別して表示してもよい。
【００２４】
続くステップＳ３０３では、利用者が設定言語の変更を行うか否かを判別し、変更する場合は、音声対話制御部２０３で設定されている日本語の音声認識、日本語の音声合成で音声対話を行い（ステップＳ３０４）、次に、音声入出力装置作動を終了するまでは（ステップＳ３０５でＮＯ）、ステップＳ３０３以降の処理を繰り返すと共に、音声入出力装置作動を終了する場合は、本処理を終了する。
【００２５】
ステップＳ３０３の判別の結果、利用者が設定言語を変更するときは、本音声入出力装置では起動時の言語が日本語のみに設定されているので、利用者が、例えば英語で音声対話を行うために、設定言語を例えば英語に変更した場合、ステップＳ３０６で言語設定部２０１により設定言語を英語に変更する。その際、音声対話制御部２０３では、英語の音声入出力に必要なデータを設定する。次に、ステップＳ３０２に進み、英語が扱える言語であることを表示する。この際、同時に扱えるのが一言語の装置の場合は、図６のように英語を表す米国の国旗のみを強調して表示する。また、同時に複数の言語が扱える場合は、図７のように日本及び米国の国旗を強調して表示する。後者の場合、音声入出力装置は、日本語及び英語による音声入力を受け付け、日本語の音声入力に対しては日本語の音声出力で、英語の音声入力に対しては英語の音声出力を行う。設定言語の変更は、例えば専用の変更ボタンを設置してもよいし、表示装置１０６を液晶タッチパネルにして、利用者が表示されている所望の言語の国旗に触れることでその言語に切り替えられるようにしてもよい。
【００２６】
本発明の実施の形態に係る音声入出力装置において、言語を表示する際にその言語が主に話される国の国旗マークを用いて表示したが、これに限るものではなく、その言語に対応した略号又は記号などで表示してもよい。図８に略号を用いた場合の例を示す。図８では、日本語、英語、フランス語、ドイツ語をそれぞれ、ＪＰＮ、ＥＮＧ、ＦＲＡ、ＧＥＲという略号を用いて表現している。また、日本語が使用可能であることを表示するため、ＪＰＮを太字で表し、さらに下線を加えて強調している。
【００２７】
本発明の実施の形態に係る音声入出力装置において、音声入力と音声出力の言語が同じ場合について説明したが、これに限るものではない。本来、音声入力と音声出力の言語は一緒であることが望ましいが、音声入出力装置によっては、例えば音声入力は日本語、英語、フランス語、ドイツ語に対応していても、音声出力は、日本語と英語しか対応していないという場合もある。このような場合は、音声入力で対応している言語と音声出力で対応している言語を個別に表示する必要がある。図９にその一例を示す。図９では、音声入力可能な言語をマイクの記号に続いて表示し、音声出力可能な言語をスピーカの記号に続いて表示している。また、音声入力は、４ヶ国語全てでできるが、音声出力は日本語と英語のみ対応しており、そのうち現在の音声出力は英語になっていることを示している。
【００２８】
本発明は、上述した実施の形態の機能を実現するソフトウェアのプログラム（図３のフローチャート）をコンピュータ又はＣＰＵに供給し、そのコンピュータ又はＣＰＵが該供給されたプログラムを読出して実行することによって、達成することができる。
【００２９】
この場合、上記プログラムは、該プログラムを記録した記憶媒体から直接供給されるか、又はインターネット、商用ネットワーク、若しくはローカルエリアネットワーク等に接続される不図示の他のコンピュータやデータベース等からダウンロードすることにより供給される。
【００３０】
上記プログラムの形態は、オブジェクトコード、インタプリタにより実行されるプログラムコード、ＯＳ（オペレーティングシステム）に供給されるスクリプトデータ等の形態から成ってもよい。
【００３１】
また、本発明は、上述した実施の形態の機能を実現するソフトウェアのプログラムを記憶した記憶媒体をコンピュータ又はＣＰＵに供給し、そのコンピュータ又はＣＰＵが記憶媒体に記憶されたプログラムを読出して実行することによっても、達成することができる。
【００３２】
この場合、格納媒体から読出されたプログラムコード自体が上述した各実施の形態の機能を実現すると共に、そのプログラムコードを記憶した記憶媒体は本発明を構成する。
【００３３】
プログラムコードを記憶する記憶媒体としては、例えば、ＲＯＭ、ＲＡＭ、ＮＶ−ＲＡＭ、フロッピー（登録商標）ディスク、ハードディスク、光ディスク（登録商標）、光磁気ディスク、ＣＤ−ＲＯＭ、ＭＯ、ＣＤ−Ｒ、ＣＤ−ＲＷ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＤＶＤ−ＲＷ、ＤＶＤ＋ＲＷ、磁気テープ、不揮発性のメモリカード等がある。
【００３４】
上述した実施の形態の機能は、コンピュータから読出されたプログラムコードを実行することによるばかりでなく、コンピュータ上で稼動するＯＳ等がプログラムコードの指示に基づいて実際の処理の一部又は全部を行うことによっても実現することができる。
【００３５】
〔実施態様１〕  複数の言語による音声入出力が可能な音声入出力装置であって、音声入力可能な言語及び音声出力可能な言語を表示する表示手段を備えることを特徴とする音声入出力装置。
【００３６】
〔実施態様２〕  前記表示手段は、前記音声入力可能な言語及び前記音声出力可能な言語を個別に表示することを特徴とする請求項１記載の音声入出力装置。
【００３７】
〔実施態様３〕  前記表示手段は、その時点で扱える言語と、設定変更を行うことによって扱える言語とを区別して表示することを特徴とする請求項１又は２記載の音声入出力装置。
【００３８】
〔実施態様４〕  前記表示手段は、その言語が主に使用されている国の国旗マークを用いて表示することを特徴とする請求項１乃至３のいずれか１項に記載の音声入出力装置。
【００３９】
〔実施態様５〕  前記表示手段は、その言語が主に使用されている国の略号を用いて表示することを特徴とする請求項１乃至３のいずれか１項に記載の音声入出力装置。
【００４０】
〔実施態様６〕  複数の言語による音声入出力が可能な音声入出力方法であって、音声入力可能な言語及び音声出力可能な言語を表示する表示工程を備えることを特徴とする音声入出力方法。
【００４１】
〔実施態様７〕  前記表示工程は、前記音声入力可能な言語及び音声出力可能な言語を個別に表示することを特徴とする請求項６記載の音声入出力方法。
【００４２】
〔実施態様８〕  前記表示工程は、その時点で扱える言語と設定変更を行うことによって扱える言語を区別して表示することを特徴とする請求項６又は７記載の音声に入出力方法。
【００４３】
〔実施態様９〕  前記表示工程は、その言語が主に使用されている国の国旗マークを用いて表示することを特徴とする請求項６乃至８のいずれか１項に記載の音声入出力装置。
【００４４】
〔実施態様１０〕  前記表示工程は、その言語が主に使用されている国の略号を用いて表示することを特徴とする請求項６乃至８のいずれか１項に記載の音声入出力装置。
【００４５】
〔実施態様１１〕  複数の言語による音声入出力が可能な音声入出力方法をコンピュータに実行させる音声入出力プログラムにおいて、音声入力可能な言語及び音声出力可能な言語を表示する表示モジュールを備えることを特徴とする音声入出力プログラム。
【００４６】
〔実施態様１２〕  請求項１１記載の音声入出力プログラムを格納することを特徴とするコンピュータ読取り可能な記憶媒体。
【００４７】
【発明の効果】
以上詳細に説明したように、請求項１記載の音声入出力装置によれば、音声入力可能な言語及び音声出力可能な言語を表示するので、現に利用している言語及び利用可能な言語を利用者に容易に認識させることができる。
【図面の簡単な説明】
【図１】本発明の実施の形態に係る音声入出力装置の概略構成を示すブロック図である。
【図２】図１の音声入出力装置のモジュール構成を示すブロック図である。
【図３】図１の音声入出力装置によって実行される設定言語表示処理を示すフローチャートである。
【図４】使用できる図１における表示装置１０６の言語の表示例を説明する図である。
【図５】日本語が使用可能な場合の図１における表示装置１０６の表示例を説明する図である。
【図６】英語が使用可能な場合の図１における表示装置１０６の表示の例を説明する図である。
【図７】英語と日本語が使用可能な場合の図１における表示装置１０６の表示例を説明する図である。
【図８】本発明の実施の形態に係る音声入出力装置において、言語を略号を用いて表示した場合の図１における表示装置１０６の表示例を説明する図である。
【図９】音声入力が対応している言語と音声出力が対応している言語とを個別に表示した場合の図１における表示装置１０６の表示例を説明する図である。
【符号の説明】
１００  音声入出力装置
１０１  制御メモリ（ＲＯＭ）
１０２  中央処理装置（ＣＰＵ）
１０３  メモリ（ＲＡＭ）
１０４  外部記憶装置
１０５  入力装置
１０６  表示装置
１０７  音声出力装置（スピーカー）
１０８  音声出力装置（マイクロフォン）
２０１  言語設定部
２０２  設定言語提示部
２０３  音声対話制御部
【図１】
2004272363.tif 000003
【図２】
2004272363.tif 000004
【図３】
2004272363.tif 000005
【図４】
2004272363.tif 000006
【図５】
2004272363.tif 000007
【図６】
2004272363.tif 000008
【図７】
2004272363.tif 000009
【図８】
2004272363.tif 000010
【図９】
2004272363.tif 000011