(57)【要約】【課題】双方向の対話の音声翻訳を、１台で容易に行うことができる音声翻訳装置【解決手段】第１の言語による音声を収音する第１マイクロフォンと、第１マイクロフォンが出力する信号が表す音声を第２の言語に変換する翻訳処理を行う第１翻訳部と、第１翻訳部が出力した信号の音声を出力する第１スピーカ部と、第２の言語による音声を収音する第２マイクロフォンと、前記第２マイクロフォンが出力する信号が表す音声を第１の言語に変換する翻訳処理を行う第２翻訳部と、前記第２翻訳部が出力した信号の音声を出力する第２スピーカ部とを具備し、前記第１マイクロフォンが最も効率良く収音可能な音源の方向と、前記第２スピーカ部が音声を出力する方向とが略一致し、前記第２マイクロフォンが最も効率良く収音可能な音源の方向と、前記第１スピーカ部が音声を出力する方向とが略一致している。【選択図】図１
2010026220.tif 000002
【特許請求の範囲】
【請求項１】
第１の言語による音声を収音し、該収音した音声を信号に変換して出力する第１マイクロフォンと、
前記第１マイクロフォンが出力する信号を受け、該信号が表す音声を第２の言語に変換した音声を表す信号を生成する翻訳処理を行い、該翻訳処理結果の信号を出力する第１翻訳部と、
前記第１翻訳部が出力した信号の音声を出力する第１スピーカ部と、
第２の言語による音声を収音し、該収音した音声を信号に変換して出力する第２マイクロフォンと、
前記第２マイクロフォンが出力する信号を受け、該信号が表す音声を第１の言語に変換した音声を表す信号を生成する翻訳処理を行い、該翻訳処理結果の信号を出力する第２翻訳部と、
前記第２翻訳部が出力した信号の音声を出力する第２スピーカ部と
を具備し、
前記第１マイクロフォンが最も効率良く収音可能な音源の方向と、前記第２スピーカ部が音声を出力する方向とが略一致し、
前記第２マイクロフォンが最も効率良く収音可能な音源の方向と、前記第１スピーカ部が音声を出力する方向とが略一致していることを特徴とする音声翻訳装置。
【請求項２】
前記第１スピーカ部および前記第２スピーカ部は、指向性を持たせて音声を出力する指向性スピーカであることを特徴とする請求項１に記載の音声翻訳装置。
【請求項３】
第２翻訳部が前記第２マイクロフォンから翻訳対象の信号を受け取り中であることを、前記第２スピーカ部が音声を出力する方向に通知する第１翻訳状態通知部と、
第１翻訳部が前記第１マイクロフォンから翻訳対象の信号を受け取り中であることを、前記第１スピーカ部が音声を出力する方向に通知する第２翻訳状態通知部と
を具備することを特徴とする請求項２に記載の音声翻訳装置。
【請求項４】
前記第１翻訳部が翻訳処理中であることを、前記第２スピーカ部が音声を出力する方向に通知する第１翻訳状態通知部と、
前記第２翻訳部が翻訳処理中であることを、前記第１スピーカ部が音声を出力する方向に通知する第２翻訳状態通知部と
を具備することを特徴とする請求項２に記載の音声翻訳装置。
【請求項５】
前記第１翻訳部が翻訳処理結果の音声の信号を出力中であることを、前記第２スピーカ部が音声を出力する方向に通知する第１翻訳状態通知部と、
前記第２翻訳部が翻訳処理結果の音声の信号を出力中であることを、前記第１スピーカ部が音声を出力する方向に通知する第２翻訳状態通知部と
を具備することを特徴とする請求項２に記載の音声翻訳装置。
【請求項６】
前記第１スピーカ部は、前記第１翻訳部が出力した信号の音声に加えて、前記第２翻訳部が出力した信号の音声を出力し、
前記第２スピーカ部は、前記第２翻訳部が出力した信号の音声に加えて、前記第１翻訳部が出力した信号の音声を出力すること
を特徴とする請求項２に記載の音声翻訳装置。
【請求項７】
前記第１翻訳部は、さらに前記第２翻訳部が翻訳処理した結果の信号を受け、該信号が表す音声を第２の言語に変換した音声を表す信号を生成する翻訳処理を行い、該翻訳処理結果の信号を出力し、
前記第２翻訳部は、さらに前記第１翻訳部が翻訳処理した結果の信号を受け、該信号が表す音声を第１の言語に変換した音声を表す信号を生成する翻訳処理を行い、該翻訳処理結果の信号を出力すること
を特徴とする請求項２に記載の音声翻訳装置。
【請求項８】
前記第１翻訳部による翻訳処理の開始指示を受けつける第１翻訳開始指示部と、
前記第２翻訳部による翻訳処理の開始指示を受けつける第２翻訳開始指示部と
を具備し、
前記第１翻訳部は、前記第１翻訳開始指示部が翻訳開始の指示を受けると、前記第１マイクロフォンが出力する信号を受けて第１の言語に変換する翻訳処理を開始し、
前記第２翻訳部は、前記第２翻訳開始指示部が翻訳開始の指示を受けると、前記第１マイクロフォンが出力する信号を受けて第１の言語に変換する翻訳処理を開始すること
を特徴とする請求項１に記載の音声翻訳装置。
【請求項９】
前記第２翻訳開始指示部は、前記第１スピーカ部の出力方向を撮像する撮像部を備え、該撮像部による撮像結果から前記翻訳開始の指示を検出すること
を特徴とする請求項８に記載の音声翻訳装置。
【請求項１０】
前記第２翻訳開始指示部は、前記第２マイクロフォンが出力する信号を受け、該信号から前記翻訳開始の指示を検出すること
を特徴とする請求項８に記載の音声翻訳装置。
【請求項１１】
音声翻訳装置における音声翻訳方法において、
前記音声翻訳装置の第１のマイクロフォンが、第１の言語による音声を収音し、該収音した音声を信号に変換して出力する第１の過程と、
前記音声翻訳装置が、前記第１の過程にて出力した信号を受け、該信号が表す音声を第２の言語に変換した音声を表す信号を生成する翻訳処理を行い、該翻訳処理結果の信号を出力する第２の過程と、
前記音声翻訳装置が、前記第２の過程にて出力した信号の音声を、前記音声翻訳装置の第２マイクロフォンが最も効率良く収音可能な音源の方向と略一致する方向に出力する第３の過程と、
前記音声翻訳装置の第２のマイクロフォンが、第２の言語による音声を収音し、該収音した音声を信号に変換して出力する第４の過程と、
前記音声翻訳装置が、前記第４の過程にて出力した信号を受け、該信号が表す音声を第１の言語に変換した音声を表す信号を生成する翻訳処理を行い、該翻訳処理結果の信号を出力する第５の過程と、
前記音声翻訳装置が、前記第５の過程にて出力した信号の音声を、前記第１マイクロフォンが最も効率良く収音可能な音源の方向と略一致する方向に出力する第６の過程と
有することを特徴とする音声翻訳方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、音声翻訳装置、および音声翻訳方法に関する。
【背景技術】
【０００２】
従来の音声翻訳装置は、翻訳入力マイクに加えて、集音マイクを備え、集音マイクから入力された音声に基づき周囲環境を判定し、判定した周囲環境を用いて、翻訳入力マイクから入力された音声を翻訳し、翻訳した結果の音声を、翻訳出力スピーカから出力している（例えば、特許文献１）。
【０００３】
また、特許文献２には、可聴帯域の音声信号を、可聴帯域より高い周波数帯域（超音波帯）の信号に変調し、スピーカから出力することで、指向性を持たせて音声を出力する超指向性スピーカの技術とともに、この超指向性スピーカの技術を用いて、複数の番組を表示しているテレビジョン受像機が、各番組の音声をそれぞれ異なる方向に指向性を持たせて出力する技術が記載されている。また、両面ディスプレイの各々の面に対応して、超指向性スピーカを設けた両面映像ディスプレイ装置もある（例えば、特許文献３）。
また、携帯電話端末などの携帯端末装置が、複数の超指向性スピーカを備え、通話内容などが使用者以外に聞こえないようにしたものもある（例えば、特許文献４）。
【特許文献１】特開２００３−１０８５５１号公報
【特許文献２】特開平１１−２６２０８４号公報
【特許文献３】特開２００７−２５１３３１号公報
【特許文献４】特開２００６−０６７３８６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来の音声翻訳装置にあっては、双方向の対話をするには、対話者の人数分の音声翻訳装置を用いなければならない、あるいは、１台の音声翻訳装置を対話者の間で交互に用いなければならず煩雑であるという問題がある。
なお、特許文献２のテレビジョン受像機および特許文献３の両面ディスプレイは、複数の人に個別に音声を出力するものの、対話および音声翻訳は行えず、特許文献４の携帯電話端末は、音声翻訳は行えないものの、双方向の対話を行うことはできるが、対話者の人数分の装置が必要である。
【０００５】
本発明は、このような事情に鑑みてなされたもので、その目的は、双方向の対話の音声翻訳を、１台で容易に行うことができる音声翻訳装置を提供することにある。
【課題を解決するための手段】
【０００６】
（１）この発明は上述した課題を解決するためになされたもので、本発明の音声翻訳装置は、第１の言語による音声を収音し、該収音した音声を信号に変換して出力する第１マイクロフォンと、前記第１マイクロフォンが出力する信号を受け、該信号が表す音声を第２の言語に変換した音声を表す信号を生成する翻訳処理を行い、該翻訳処理結果の信号を出力する第１翻訳部と、前記第１翻訳部が出力した信号の音声を出力する第１スピーカ部と、第２の言語による音声を収音し、該収音した音声を信号に変換して出力する第２マイクロフォンと、前記第２マイクロフォンが出力する信号を受け、該信号が表す音声を第１の言語に変換した音声を表す信号を生成する翻訳処理を行い、該翻訳処理結果の信号を出力する第２翻訳部と、前記第２翻訳部が出力した信号の音声を出力する第２スピーカ部とを具備し、前記第１マイクロフォンが最も効率良く収音可能な音源の方向と、前記第２スピーカ部が音声を出力する方向とが略一致し、前記第２マイクロフォンが最も効率良く収音可能な音源の方向と、前記第１スピーカ部が音声を出力する方向とが略一致していることを特徴とする。
【０００７】
（２）また、本発明の音声翻訳装置は、上述の音声翻訳装置であって、前記第１スピーカ部および前記第２スピーカ部は、指向性を持たせて音声を出力する指向性スピーカであることを特徴とする。
【０００８】
（３）また、本発明の音声翻訳装置は、上述の音声翻訳装置であって、第２翻訳部が前記第２マイクロフォンから翻訳対象の信号を受け取り中であることを、前記第２スピーカ部が音声を出力する方向に通知する第１翻訳状態通知部と、第１翻訳部が前記第１マイクロフォンから翻訳対象の信号を受け取り中であることを、前記第１スピーカ部が音声を出力する方向に通知する第２翻訳状態通知部とを具備することを特徴とする。
【０００９】
（４）また、本発明の音声翻訳装置は、上述の音声翻訳装置であって、前記第１翻訳部が翻訳処理中であることを、前記第２スピーカ部が音声を出力する方向に通知する第１翻訳状態通知部と、前記第２翻訳部が翻訳処理中であることを、前記第１スピーカ部が音声を出力する方向に通知する第２翻訳状態通知部とを具備することを特徴とする。
【００１０】
（５）また、本発明の音声翻訳装置は、上述の音声翻訳装置であって、前記第１翻訳部が翻訳処理結果の音声の信号を出力中であることを、前記第２スピーカ部が音声を出力する方向に通知する第１翻訳状態通知部と、前記第２翻訳部が翻訳処理結果の音声の信号を出力中であることを、前記第１スピーカ部が音声を出力する方向に通知する第２翻訳状態通知部とを具備することを特徴とする。
【００１１】
（６）また、本発明の音声翻訳装置は、上述の音声翻訳装置であって、前記第１スピーカ部は、前記第１翻訳部が出力した信号の音声に加えて、前記第２翻訳部が出力した信号の音声を出力し、前記第２スピーカ部は、前記第２翻訳部が出力した信号の音声に加えて、前記第１翻訳部が出力した信号の音声を出力することを特徴とする。
【００１２】
（７）また、本発明の音声翻訳装置は、上述の音声翻訳装置であって、前記第１翻訳部は、さらに前記第２翻訳部が翻訳処理した結果の信号を受け、該信号が表す音声を第２の言語に変換した音声を表す信号を生成する翻訳処理を行い、該翻訳処理結果の信号を出力し、前記第２翻訳部は、さらに前記第１翻訳部が翻訳処理した結果の信号を受け、該信号が表す音声を第１の言語に変換した音声を表す信号を生成する翻訳処理を行い、該翻訳処理結果の音声の信号を出力することを特徴とする。
【００１３】
（８）また、本発明の音声翻訳装置は、上述の音声翻訳装置であって、前記第１翻訳部による翻訳処理の開始指示を受けつける第１翻訳開始指示部と、前記第２翻訳部による翻訳処理の開始指示を受けつける第２翻訳開始指示部とを具備し、前記第１翻訳部は、前記第１翻訳開始指示部が翻訳開始の指示を受けると、前記第１マイクロフォンが出力する信号を受けて第１の言語に変換する翻訳処理を開始し、前記第２翻訳部は、前記第２翻訳開始指示部が翻訳開始の指示を受けると、前記第１マイクロフォンが出力する信号を受けて第１の言語に変換する翻訳処理を開始することを特徴とする。
【００１４】
（９）また、本発明の音声翻訳装置は、上述の音声翻訳装置であって、前記第２翻訳開始指示部は、前記第１スピーカ部の出力方向を撮像する撮像部を備え、該撮像部による撮像結果から前記翻訳開始の指示を検出することを特徴とする。
【００１５】
（１０）また、本発明の音声翻訳装置は、上述の音声翻訳装置であって、前記第２翻訳開始指示部は、前記第２マイクロフォンが出力する信号を受け、該信号から前記翻訳開始の指示を検出することを特徴とする。
【００１６】
（１１）また、本発明の音声翻訳方法は、音声翻訳装置における音声翻訳方法において、前記音声翻訳装置の第１のマイクロフォンが、第１の言語による音声を収音し、該収音した音声を信号に変換して出力する第１の過程と、前記音声翻訳装置が、前記第１の過程にて出力した信号を受け、該信号が表す音声を第２の言語に変換した音声を表す信号を生成する翻訳処理を行い、該翻訳処理結果の信号を出力する第２の過程と、前記音声翻訳装置が、前記第２の過程にて出力した信号の音声を、前記音声翻訳装置の第２マイクロフォンが最も効率良く収音可能な音源の方向と略一致する方向に出力する第３の過程と、前記音声翻訳装置の第２のマイクロフォンが、第２の言語による音声を収音し、該収音した音声を信号に変換して出力する第４の過程と、前記音声翻訳装置が、前記第４の過程にて出力した信号を受け、該信号が表す音声を第１の言語に変換した音声を表す信号を生成する翻訳処理を行い、該翻訳処理結果の信号を出力する第５の過程と、前記音声翻訳装置が、前記第５の過程にて出力した信号の音声を、前記第１マイクロフォンが最も効率良く収音可能な音源の方向と略一致する方向に出力する第６の過程と有することを特徴とする。
【発明の効果】
【００１７】
この発明によれば、第１マイクロフォンが最も効率良く収音可能な音源の方向と、第２スピーカ部が音声を出力する方向とが略一致し、第２マイクロフォンが最も効率良く収音可能な音源の方向と、第１スピーカ部が音声を出力する方向とが略一致しているので、双方向の対話の音声翻訳を、１台で容易に行うことができる。
【発明を実施するための最良の形態】
【００１８】
［第１の実施形態］
以下、図面を参照して、本発明の第１の実施形態について説明する。図１は、この発明の第１の実施形態による音声翻訳装置１の構成を示す概略ブロック図である。音声翻訳装置１は、第１マイクロフォン１０、第１翻訳部１１、第１音声記憶部１２、第１指向性スピーカ部１３、第１翻訳状態通知部１６、表示部１７、第１翻訳開始指示部１８、第２マイクロフォン２１、第２翻訳部２２、第２音声記憶部２３、第２指向性スピーカ部２４、第２翻訳状態通知部２７、ＬＥＤ（Ｌｉｇｈｔ  Ｅｍｉｔｔｉｎｇ  Ｄｉｏｄｅ；発光ダイオード）２８、第２翻訳開始指示部２９を具備する。音声翻訳装置１は、設定により、様々な言語間の音声翻訳を行うことが可能であるが、以下では、第１の言語を理解する対話者Ａと、第２の言語を理解する対話者Ｂとの双方向の対話を音声翻訳する場合を、説明する。
【００１９】
第１翻訳開始指示部１８は、第１翻訳部１１による翻訳処理、すなわち対話者Ａの音声の翻訳処理の開始指示を、外部から受けつける。本実施形態では、第１翻訳開始指示部１８は、当該音声翻訳装置１の表面に設けられ、押されたこと（加圧）を検出するキーボタン（外面の特定領域）である操作部（検出部）２０と、操作部２０のキーボタンが押されたことを翻訳処理の開始指示として検出する第１指示検出部１９とを具備する。ここで、キーボタンは複数有り、上下左右の方向の各々、０〜９の数字の各々、「＃」、「＊」、「決定」などが対応付けられており、第１指示検出部１９は、これらのうちのいずれか一つが押されたことを翻訳処理の開始指示として検出するようにしてもよいし、特定の一つ、例えば「決定」のキーボタンが押されたことを翻訳処理の開始指示として検出するようにしてもよい。なお、本実施形態においては、操作部２０は、音声翻訳装置１の表面に設けられ、押されたことを検出するキーボタンであるとして説明したが、タッチパネルのように外面の特定領域への接触を検出するようにしてもよい。
【００２０】
第１マイクロフォン１０は、収音可能な周波数帯域に人の声の周波数帯域を含むマイクロフォンであり、対話者Ａの外部からの第１の言語による音声を収音し、該収音した音声を信号に変換して出力する。
第１翻訳部１１は、第１マイクロフォン１０が出力する信号、すなわち対話者Ａの音声の信号を受け、該信号が表す音声を第２の言語に変換した音声を表す信号を生成する翻訳処理を行い、該翻訳処理結果の信号を出力する。より詳細には、第１翻訳部１１は、第１翻訳開始指示部１８が翻訳開始の指示を受けると、第１マイクロフォン１０が出力する信号を受け、音声認識処理を行い、該信号が表す音声を第１の言語の文字列に変換して第１音声記憶部１２に記憶させる。次に、第１翻訳部１１は、翻訳処理を行うことで、第１音声記憶部１２に記憶させた第１の言語の文字列を第２の言語の文字列に変換する。さらに、第１翻訳部１１は、音声合成処理を行って、この第２の言語の文字列から第２の言語の音声の信号を生成し、出力する。第１音声記憶部１２は、ＲＡＭ（Random Access Memory）、ハードディスクなどの読書き可能なメモリである。
【００２１】
第１指向性スピーカ部（第１スピーカ部）１３は、第１翻訳部１１が出力した信号の音声、すなわち対話者Ａによる第１の言語の音声を第２の言語に翻訳した音声を出力する。本実施形態では、第１指向性スピーカ部１３は、第１指向性制御部１４と第１スピーカ１５とを備え、指向性を持たせて音声を出力する機能を営む。第１指向性制御部１４は、第１翻訳部１１から受けた音声の信号（可聴帯域の音声信号）を、可聴帯域より高い周波数帯域（超音波帯）の信号に変調する。第１スピーカ１５は、第１指向性制御部１４による変調結果の周波数帯域の超音波を出力可能な超音波発生素子である。第１スピーカ１５は、第１指向性制御部１４により変調された信号の超音波を出力することで、第１指向性制御部１４にて変調した音声を、指向性を持たせて出力する。なお、このように音声信号を可聴帯域より高い周波数帯域（超音波帯）の信号に変調し、該信号の超音波をスピーカで出力することで、指向性を持たせて音声を出力することは公知の技術であり、このときに用いる変調方式には、振幅変調、周波数変調、位相変調などがあり、いずれを用いても良い。
【００２２】
第２翻訳開始指示部２９は、第２翻訳部２２による翻訳処理、すなわち対話者Ｂの音声の翻訳処理の開始指示を、外部から受けつける。本実施形態では、第２翻訳開始指示部２９は、当該音声翻訳装置１の表面に設けられ、第１スピーカの音声の出力方向を撮像する（すなわち、対話者Ｂを撮像する）カメラ（撮像部）３１と第２指示検出部３０とを備える。第２指示検出部３０は、カメラ３１による撮像結果の画像中からの予め決められた形状または被写体の動きの検出を開始指示の検出とする。これにより、対話者Ａが音声翻訳装置１を携帯しているときに、対話者Ｂは、特定のポーズ（予め決められた形状）をとること、あるいは特定の動きをすることにより、翻訳開始を指示することができる。
【００２３】
第２マイクロフォン２１は、収音可能な周波数帯域に人の声の周波数帯域を含むマイクロフォンであり、対話者Ｂによる外部からの第２の言語による音声を収音し、該収音した音声を信号に変換して出力する。
第２翻訳部２２は、第２マイクロフォン２１が出力する信号、すなわち対話者Ｂの音声の信号を受け、該信号が表す音声を第１の言語に変換した音声を表す信号を生成する翻訳処理を行い、該翻訳処理結果の信号を出力する。より詳細には、第２翻訳部２２は、第２翻訳開始指示部２９が翻訳開始の指示を受けると、第２マイクロフォン２１が出力する信号を受け、音声認識処理を行い、該信号が表す音声を第１の言語の文字列に変換して第２音声記憶部２３に記憶させる。次に、第２翻訳部２２は、翻訳処理を行うことで、第２音声記憶部２３に記憶させた第２の言語の文字列を第１の言語の文字列に変換する。さらに、第２翻訳部２２は、音声合成処理を行って、この第１の言語の文字列から第１の言語の音声の信号を生成し、出力する。第２音声記憶部２３は、ＲＡＭ（Random Access Memory）、ハードディスクなどの読書き可能なメモリである。
【００２４】
第２指向性スピーカ部（第２スピーカ部）２４は、第２翻訳部２２が出力した信号の音声、すなわち対話者Ｂによる第２の言語の音声を第１の言語に翻訳した音声を出力する。本実施形態では、第２指向性スピーカ部２４は、第２指向性制御部２５と第２スピーカ２６とを備え、指向性を持たせて音声を出力する機能を営む。第２指向性制御部２５は、第１指向性制御部１４と同様に、第２翻訳部２２から受けた音声の信号（可聴帯域の音声信号）を、可聴帯域より高い周波数帯域（超音波帯）の信号に変調する。第２スピーカ２６は、第２指向性制御部２５による変調結果の周波数帯域の超音波を出力可能な、第１スピーカ１５と同様の超音波発生素子である。第２スピーカ２６は、第２指向性制御部２５により変調された信号の超音波を出力することで、第２指向性制御部２５にて変調した音声を、指向性を持たせて出力する。なお、第１指向性スピーカ部１３の説明でも述べたように、このように指向性を持たせて音声を出力することは公知の技術であり、このときに用いる変調方式には、振幅変調、周波数変調、位相変調などがあり、いずれを用いてもよい。
【００２５】
第１翻訳状態通知部１６は、第１翻訳部１１および第２翻訳部２２から通知されて、それらの動作状態を取得し、取得した状態に応じて、第２翻訳部２２が第２マイクロフォン２１から翻訳対象の信号を受け取り中であること、第１翻訳部１１が翻訳処理中であること、および、第１翻訳部１１が翻訳処理結果の音声の信号を出力中であること、すなわち第２スピーカ２６が翻訳結果の音声を出力中であることを、それぞれを表す文字、図形などを、液晶または有機ＥＬ（Ｏｒｇａｎｉｃ  Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ；有機エレクトロルミネセンス）などのディスプレイである表示部１７に表示して、通知する。
【００２６】
表示部１７は、第２指向性スピーカ部２４が音声を出力する方向に表示するディスプレイである。すなわち表示部１７の表示面は、第２指向性スピーカ部２４の第２スピーカ２６と同一の方向を向くように音声翻訳装置１の表面に設けられており、第２指向性スピーカ部２４が出力した音声を聞き取れる位置から、表示部１７の表示内容を見ることができる。
【００２７】
第２翻訳状態通知部２７は、第１翻訳部１１および第２翻訳部２２から通知されて、それらの動作状態を取得し、取得した状態に応じて、第１翻訳部１１が第１マイクロフォン１０から翻訳対象の信号を受け取り中であること、第２翻訳部２２が翻訳処理中であること、および、第２翻訳部２２が翻訳処理結果の音声の信号を出力中であること、すなわち第１スピーカ１５が翻訳結果の音声を出力中であることを表す色または点滅などの発光パターンでＬＥＤ２８を発光させて通知するが、この通知の態様はこれに限定されない。
【００２８】
ＬＥＤ２８は、第１指向性スピーカ部１３が音声を出力する方向に表示する、すなわち第１指向性スピーカ部１３が出力した音声を聞き取れる位置から、表示内容を見ることができるように、当該音声翻訳装置１の表面に設けられている。
また、第１マイクロフォン１０が最も効率良く収音可能な音源の方向と、第２指向性スピーカ部２４の第２スピーカ２６が音声を出力する方向とが略一致し、第２マイクロフォン２１が最も効率良く収音可能な音源の方向と、第１指向性スピーカ部１３の第１スピーカ１５が音声を出力する方向とが略一致している。
【００２９】
このように第１マイクロフォン１０、第２スピーカ２６、第２マイクロフォン２１、第１スピーカ１５が配置されているので、対話者Ａは、第２スピーカ２６から出力された第１の言語に翻訳された音声が聞こえる位置で、第１マイクロフォン１０に向かって第１の言語で話せばよく。対話者Ｂは、第１スピーカ１５から出力された第２の言語に翻訳された音声が聞こえる位置で、第２マイクロフォン２１に向かって第２の言語で話せばよい。このため、双方向の対話の音声翻訳を、１台で容易に行うことができる。
【００３０】
また、表示部１７は、第２指向性スピーカ部２４の第２スピーカ２６が音声を出力する方向に表示するので、対話者Ａは、第２スピーカ２６から出力された第１の言語に翻訳された音声が聞こえる位置にいれば、表示部１７に表示される第１翻訳状態通知部１６による通知を見て、音声翻訳の状態を認識することができる。すなわち、第１翻訳状態通知部１６による通知のうち、第２翻訳部２２が第２マイクロフォン２１から翻訳対象の信号を受け取り中であることの通知を認識することで、対話者Ａは、現在、対話相手の対話者Ｂが話している内容が翻訳されて、後に第２スピーカ２６から出力されるであろうことを認識できる。
【００３１】
また、第１翻訳部１１が翻訳処理中であることの通知を認識することで、対話者Ａは、先に自分が話した内容が翻訳中であり、未だ対話相手の対話者Ｂに伝わっていないことを認識できる。また、第２スピーカ２６が翻訳結果の音声を出力中であることの通知を認識することで、対話者Ａは、先に自分が話した内容を、対話相手の対話者Ｂが聞いている最中であることを認識できる。これにより、本実施形態のように、指向性スピーカを用いているために翻訳結果が聞こえなくても、話し手は、音声翻訳装置１の動作状態と、対話相手に翻訳結果が通知されているか否かとがわかる。
【００３２】
また、ＬＥＤ２８は、第１指向性スピーカ部１３の第１スピーカ１５が音声を出力する方向に表示する。このため、対話者Ｂは、第１スピーカ１５から出力された第２の言語に翻訳された音声が聞こえる位置にいれば、上述の対話者Ａと同様に音声翻訳の状態を認識することができる。
また、第１指向性スピーカ部１３、第２指向性スピーカ部２４は、翻訳結果の音声を指向性を持たせて出力するので、これらの出力した音声を、第１マイクロフォン１０、第２マイクロフォン２１が収音してしまい、収音した音声を再度翻訳するなどの誤動作を防ぐことができる。また、翻訳結果を対話相手以外の第３者に聞かれる可能性を小さくすることができる。また、話し手に翻訳結果が聞こえて、翻訳結果を気にしてしまい、話し手が話し難くなることを避けることができる。
【００３３】
図２は、本実施形態における音声翻訳装置１の外観を示す概略外観図である。本実施形態において、音声翻訳装置１は、クラムシェルタイプの携帯電話端末に備えられている。図２（ａ）は、音声翻訳装置１を備えた携帯電話端末を開いた状態の内側の外観図であり、図２（ｂ）は、開いた状態の外側の外観図である。図２（ａ）に示すように、第２スピーカ２６、表示部１７、第１マイクロフォン１０は、同一の方向を向いており、さらに、この内側の面に操作部２０が設けられている。また、図２（ｂ）に示すように、ＬＥＤ２８、カメラ３１、第１スピーカ１５、第２マイクロフォン２１は、同一の方向を向いている。
【００３４】
すなわち、第１マイクロフォン１０が最も効率良く収音可能な音源の方向と、第２指向性スピーカ部２４の第２スピーカ２６が音声を出力する方向とが略一致し、第２マイクロフォン２１が最も効率良く収音可能な音源の方向と、第１指向性スピーカ部１３の第１スピーカ１５が音声を出力する方向とが略一致している。なお、第１マイクロフォン１０および第２マイクロフォン２１の最も効率良く収音可能な音源の方向は、これらマイクロフォン各々に音波を誘導するために設けられた開口部の方向である。また、表示部１７は、第２スピーカ２６が音声を出力する方向に表示し、ＬＥＤ２８は、第１スピーカ１５が音声を出力する方向に表示する。さらに、第１スピーカ１５と、第２スピーカ２６との音声を出力する方向は逆方向である。
このような配置により、図２（ａ）に示す内側を音声翻訳装置１を保持している対話者Ａ自らに向け、図２（ｂ）に示す外側を対話相手である対話者Ｂに向けると、音声翻訳装置１を使用しやすくなっている。
【００３５】
図３は、本実施形態における音声翻訳装置１の動作を説明するフローチャートである。対話者Ａが話す第１の言語から第２の言語へ翻訳する場合を例に採り、説明する。まず、第１指示検出部１９は、操作部２０のキーボタン、例えば「決定」のキーボタンが押されているかの検出処理、すなわち、翻訳開始指示の検出処理を行う（Ｓ１）。このとき、対話者Ａが操作部２０のキーボタンを押下しておらず、第１指示検出部１９は、翻訳開始指示なしと判定したときは（Ｓ２−Ｎｏ）、ステップＳ１に戻って、検出処理を繰り返す。
【００３６】
一方、対話者Ａが操作部２０のキーボタンを押下しており、ステップＳ２にて第１指示検出部１９が、翻訳開始指示有りと判定したときは（Ｓ２−Ｙｅｓ）、第１翻訳部１１は、第１マイクロフォン１０からの翻訳対象の信号の受け付け開始を、第２翻訳状態通知部２７にＬＥＤ２８を用いて通知させる（Ｓ３）とともに、第１マイクロフォン１０からの翻訳対象の音声信号（第１の言語の音声信号）の受け付けを開始する（Ｓ４）。第１翻訳部１１は、受け付けた音声信号を音声認識処理して、第１の言語の文字列に変換し、第１音声記憶部１２に記憶させる。第１翻訳部１１は、予め決められた時間より長い無音部分が続くなどを条件に会話の区切り目を検出すると、翻訳対象の音声信号の受け付けを停止し、さらに翻訳中であることを通知するように、第１翻訳状態通知部１６、および第２翻訳状態通知部２７に指示する（Ｓ５）。
【００３７】
次に、第１翻訳部１１は、第１音声記憶部１２に記憶させた第１の言語の文字列を読み出して、第２の言語への翻訳処理を行う（Ｓ６）。第１翻訳部１１は、翻訳処理が終了すると、翻訳結果の出力中であることを通知するように、第１翻訳状態通知部１６に指示する（Ｓ７）。次に、第１翻訳部１１は、翻訳結果の音声信号を、第１指向性スピーカ部１３から出力させる（Ｓ８）。
【００３８】
なお、自分が話したことの翻訳結果を確認したい場合などには、第１スピーカ１５が、第１翻訳部１１が出力した信号の音声に加えて、第２翻訳部２２が出力した信号の音声を出力し、第２スピーカ２６が、第２翻訳部２２が出力した信号の音声に加えて、第１翻訳部１１が出力した信号の音声を出力するようにしてもよい。
【００３９】
また、第１翻訳部１１が、さらに第２翻訳部２２から、第２マイクロフォン２１が出力した信号を翻訳処理した結果の信号を受け、該信号が表す音声を第２の言語に変換した音声を表す信号を生成する翻訳処理を行い、該翻訳処理結果の信号を、第１指向性スピーカ部１３に出力し、第２翻訳部２２が、さらに第１翻訳部１１から、第１マイクロフォン１０が出力した信号を翻訳処理した結果の信号を受け、該信号が表す音声を第１の言語に変換した音声を表す信号を生成する翻訳処理を行い、該翻訳処理結果の信号を、第２指向性スピーカ部２４に出力するようにしてもよい。これにより、翻訳結果を再翻訳した結果を聞き、翻訳の妥当性を知ることができる。
【００４０】
また、本実施形態では、第２翻訳開始指示部２９は、カメラ３１が撮像した画像から、予め決められた形状または被写体の動作の検出を、翻訳開始の指示とするとして説明したが、第２マイクロフォン２１が出力する信号を受け、該信号が予め決められた条件（例えば、予め決められた言葉、周波数など）を満たしていることの検出を翻訳開始の指示とするようにしてもよい。
また、本実施形態において、第１翻訳部１１は、第１翻訳開始指示部１８による翻訳開始の指示を受けると、第１マイクロフォン１０からの信号の受付を開始し、続いて翻訳処理を行うとして説明したが、第１翻訳部１１は、第１マイクロフォン１０からの信号を受け付けて、音声信号あるいは音声認識により変換した文字列を、第１音声記憶部１２に記憶させておき、第１翻訳開始指示部１８による翻訳開始の指示を受けると、第１音声記憶部１２から音声信号あるいは文字列を読み出して、翻訳処理を開始するようにしてもよい。第２翻訳部２１についても、上述の第１翻訳部１１と同様に、第２翻訳開始指示部２９による翻訳開始の指示を受けると、第２音声記憶部２３から音声信号あるいは文字列を読み出して、翻訳処理を開始するようにしてもよい。
【００４１】
［第２の実施形態］
以下、図面を参照して、本発明の第２の実施形態について説明する。図４は、本実施形態による音声翻訳装置１ａの構成を示す概略ブロック図である。同図において図１の各部に対応する部分には同一の符号（１０〜１５、１８〜２６、２９〜３１）を付け、その説明を省略する。音声翻訳装置１ａは、第１マイクロフォン１０、第１翻訳部１１、第１音声記憶部１２、第１指向性スピーカ部１３、第１翻訳状態通知部１６ａ、第１翻訳開始指示部１８、第２マイクロフォン２１、第２翻訳部２２、第２音声記憶部２３、第２指向性スピーカ部２４、第２翻訳状態通知部２７ａ、第２翻訳開始指示部２９を具備する。
【００４２】
音声翻訳装置１ａは、図１の音声翻訳装置１とは、表示部１７およびＬＥＤ２８を備えず、第１翻訳状態通知部１６および第２翻訳状態通知部２７に替えて、第１翻訳状態通知部１６ａおよび第２翻訳状態通知部２７ａを具備する点が異なる。第１翻訳状態通知部１６ａは、第１翻訳部１１および第２翻訳部２２から通知されて、それらの動作状態を取得し、取得した状態を表す音の信号を生成して、第２指向性制御部２５に出力する。これにより、第１翻訳状態通知部１６ａは、取得した状態を表す音を、第２スピーカ２６に指向性を持たせて出力させる。また、第２翻訳状態通知部２７ａは、第１翻訳部１１および第２翻訳部２２から通知されて、それらの動作状態を取得し、取得した状態を表す音の信号を生成して、第１指向性制御部１４に出力する。これにより、第２翻訳状態通知部２７ａは、取得した状態を表す音を、第１スピーカ１５に指向性を持たせて出力させる。
【００４３】
このように、第１翻訳部１１、第２翻訳部２２の状態を表す音を、第１スピーカ１５あるいは第２スピーカ２６から指向性を持たせて出力することで、第１の実施形態における音声翻訳装置１のように表示部１７およびＬＥＤ２８を備えていなくても、音声翻訳装置１ａを使用しているユーザは、これらの状態を把握することができる。
なお、第１翻訳部１１および第２翻訳部２２の動作状態を、第１の実施形態では第１翻訳状態通知部１６が表示部１７に表示させて対話者Ａに通知し、第２翻訳状態通知部２７がＬＥＤ２８を点灯させて対話者Ｂに通知し、第２の実施形態では第１翻訳状態通知部１６ａは第２スピーカ２６に音声を出力させて対話者Ａに通知し、第２翻訳状態通知部２７ａは第１スピーカ１５に音声を出力させて対話者Ｂに通知するとして説明した。しかし、第１翻訳状態通知部１６、１６ａによる通知は、第２指向性スピーカ部２４が音声を出力する方向に向かって行われればよく、第２翻訳状態通知部２７、２７ａによる通知は、第１指向性スピーカ部１３が音声を出力する方向に向かって行われればよく、通知の態様は、上述の形態に限定されない。
【００４４】
なお、この図１における第１翻訳部１１、第１指向性制御部１４、第１翻訳状態通知部１６、第１指示検出部１９、第２翻訳部２２、第２指向性制御部２５、第２翻訳状態通知部２７、第２指示検出部３０、および図４における第１翻訳状態通知部１６ａ、第２翻訳状態通知部２７ａは専用のハードウェアにより実現されるものであってもよく、また、これらの各部はメモリおよびＣＰＵ（中央演算装置）により構成され、各部の機能を実現するためのプログラムをメモリにロードして実行することによりその機能を実現させるものであってもよい。
【００４５】
また、図１における第１翻訳部１１、第１指向性制御部１４、第１翻訳状態通知部１６、第１指示検出部１９、第２翻訳部２２、第２指向性制御部２５、第２翻訳状態通知部２７、第２指示検出部３０、および図４における第１翻訳状態通知部１６ａ、第２翻訳状態通知部２７ａの機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより各部の処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。
【００４６】
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含むものとする。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。
【００４７】
以上、この発明の実施形態を図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計変更等も含まれる。
【産業上の利用可能性】
【００４８】
本発明は、携帯電話端末、ＰＤＡ（Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ａｓｓｉｓｔａｎｔｓ；携帯情報端末）、電子辞書装置などの携帯情報機器に用いて好適であるが、これらに限定されない。
【図面の簡単な説明】
【００４９】
【図１】この発明の第１の実施形態による音声翻訳装置１の構成を示すブロック図である。
【図２】同実施形態における音声翻訳装置１の外観を示す概略外観図である。
【図３】同実施形態における音声翻訳装置１の動作を説明するフローチャートである。
【図４】この発明の第２の実施形態による音声翻訳装置１ａの構成を示すブロック図である。
【符号の説明】
【００５０】
１、１ａ…音声翻訳装置
１０…第１マイクロフォン
１１…第１翻訳部
１２…第１音声記憶部
１３…第１指向性スピーカ部
１４…第１指向性制御部
１５…第１スピーカ
１６、１６ａ…第１翻訳状態通知部
１７…表示部
１８…第１翻訳開始指示部
１９…第１指示検出部
２０…操作部
２１…第２マイクロフォン
２２…第２翻訳部
２３…第２音声記憶部
２４…第２指向性スピーカ部
２５…第２指向性制御部
２６…第２スピーカ
２７、２７ａ…第２翻訳状態通知部
２８…ＬＥＤ
２９…第２翻訳開始指示部
３０…第２指示検出部
３１…カメラ
【図１】
2010026220.tif 000003
【図２】
2010026220.tif 000004
【図３】
2010026220.tif 000005
【図４】
2010026220.tif 000006