(57)【要約】【課題】外国人に対する接客時の会話を自然にかつ円滑に進め、接客の最適化を図る。【解決手段】本発明の一態様による音声翻訳装置は、ユーザ等の音声を入力するための入力部、入力音声の内容を異なる言語の内容に翻訳する翻訳部、入力音声の翻訳内容を音声等で出力する出力部、少なくとも１つの上位フレーズを含む上位フレーズ群、及び、各上位フレーズに関連付けられた少なくとも１つの下位フレーズを含む複数の下位フレーズ群を階層的に記憶する記憶部、及び、上位フレーズ群を表示し、上位フレーズのなかから特定のフレーズが選択されたときに、それに関連付けられた下位フレーズを含む下位フレーズ群を表示する処理を、階層的に順次実行する表示部を備える。【選択図】図３
2017181662.tif 000002
【特許請求の範囲】
【請求項１】
ユーザ及び／又は対話者の音声を入力するための入力部、入力音声の内容を異なる言語の内容に翻訳する翻訳部、及び、前記入力音声の翻訳内容を音声及び／又はテキストで出力する出力部を備える音声翻訳装置であって、
少なくとも１つの上位フレーズを含む上位フレーズ群、及び、該各上位フレーズに関連付けられた少なくとも１つの下位フレーズを含む複数の下位フレーズ群を階層的に記憶する記憶部と、
前記上位フレーズ群を表示し、前記上位フレーズのなかから特定のフレーズが選択されたときに、該特定のフレーズに関連付けられた下位フレーズを含む下位フレーズ群を表示する処理を、階層的に順次実行する表示部と、
を更に備える音声翻訳装置。
【請求項２】
前記表示部は、前記上位フレーズ群及び前記下位フレーズ群を、それぞれ別画面として表示する、
請求項１記載の音声翻訳装置。
【請求項３】
前記表示部は、前記上位フレーズとして特定の質問事項が含まれており、該特定の質問事項が選択されたときに、該特定の質問事項への回答を入力するための画面を表示する、
請求項１又は２記載の音声翻訳装置。
【請求項４】
前記上位フレーズ及び前記下位フレーズは、前記ユーザが属する業種毎又は前記ユーザの店舗毎に、自動又は手動で予め設定されたものである、
請求項１乃至３の何れか記載の音声翻訳装置。
【請求項５】
前記記憶部は、前記各上位フレーズ及び前記各下位フレーズの選択回数を記憶し、
前記表示部は、前記選択回数がより多い前記上位フレーズを前記第１フレーズ群の表示画面においてより高い順位に表示し、かつ、前記選択回数がより多い前記下位フレーズを前記下位フレーズ群の表示画面においてより高い順位に表示する、
請求項１乃至４の何れか記載の音声翻訳装置。
【請求項６】
前記特定のフレーズが注文の問い合わせであり、該特定のフレーズに関連付けられた前記下位フレーズを含む下位フレーズ群が複数の注文品のリストである場合、
前記記憶部は、前記各注文品の選択回数、又は、前記各注文品の利益率を記憶し、
前記表示部は、前記選択回数がより多い注文品、又は、前記利益率がより高い注文品を前記下位フレーズ群の表示画面においてより高い順位に表示する、
請求項１乃至５の何れか記載の音声翻訳装置。
【請求項７】
前記表示部が、前記各上位フレーズ及び前記各下位フレーズの異なる言語による訳文を表示し、又は、前記出力部が、前記各上位フレーズ及び前記各下位フレーズの異なる言語による訳文を音声で出力する、
請求項１乃至６の何れか記載の音声翻訳装置。
【請求項８】
入力部、翻訳部、出力部、記憶部、及び表示部を備える音声翻訳装置を用い、
前記入力部が、ユーザ及び／又は対話者の音声を入力するステップと、
前記翻訳部が、入力音声の内容を異なる言語の内容に翻訳するステップと、
前記出力部が、前記入力音声の翻訳内容を音声及び／又はテキストで出力するステップと、
前記記憶部が、少なくとも１つの上位フレーズを含む上位フレーズ群、及び、該各上位フレーズに関連付けられた少なくとも１つの下位フレーズを含む複数の下位フレーズ群を階層的に記憶するステップと、
前記表示部が、前記上位フレーズ群を表示し、前記上位フレーズのなかから特定のフレーズが選択されたときに、該特定のフレーズに関連付けられた下位フレーズを含む下位フレーズ群を表示する処理を、階層的に順次実行するステップと、
を含む音声翻訳方法。
【請求項９】
コンピュータを、
ユーザ及び／又は対話者の音声を入力するための入力部と、
入力音声の内容を異なる言語の内容に翻訳する翻訳部と、
前記入力音声の翻訳内容を音声及び／又はテキストで出力する出力部と、
少なくとも１つの上位フレーズを含む上位フレーズ群、及び、該各上位フレーズに関連付けられた少なくとも１つの下位フレーズを含む複数の下位フレーズ群を階層的に記憶する記憶部と、
前記上位フレーズ群を表示し、前記上位フレーズのなかから特定のフレーズが選択されたときに、該特定のフレーズに関連付けられた下位フレーズを含む下位フレーズ群を表示する処理を、階層的に順次実行する表示部と、
して機能させる音声翻訳プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、音声翻訳装置、音声翻訳方法、及び音声翻訳プログラムに関する。
【背景技術】
【０００２】
互いの言語を理解できない人同士の会話、例えば店舗の店員と外国人客との会話を可能ならしめるべく、話者の発話音声をテキスト化し、そのテキストの内容を相手の言語に機械翻訳した上で画面に表示したり、或いは、音声合成技術を用いてそのテキストの内容を音声再生したりする音声翻訳技術が提案されている（例えば特許文献１）。また、かかる音声翻訳技術を具現化したスマートフォン等の情報端末で動作する音声翻訳アプリケーションも実用化されている（例えば非特許文献１）。さらに、ユーザが会話を行いたいシチュエーションを選択することにより、目的別の会話パターンがリスト表示される翻訳アプリケーションも知られている（例えば非特許文献２）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平９−３４８９５号公報
【非特許文献】
【０００４】
【非特許文献１】Ｕ−ＳＴＡＲコンソーシアムホームページ［平成２８年２月２３日検索］、インターネット＜ＵＲＬ：http://www.ustar-consortium.com/app_ja/app.html＞
【非特許文献２】会話シミュレーションができる！日中韓英対応の翻訳アプリ『［旅行アプリ１位］TS会話翻訳機［CJK］』［平成２８年２月２３日検索］、インターネット＜ＵＲＬ：http://andronavi.com/2012/08/208376＞
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、例えば非特許文献２に記載された翻訳アプリケーションでは、目的別の会話パターンとして、複数の質問文と各質問文に対する複数の回答文の両方が、一画面に列記されて表示される。発話者は、それらの例文のなかから所望のものを選択することとなるが、そうすると、単に１つの例文を選んで発話するだけなので、会話は単発的なものとなってしまう。また、そのように例文が一画面に列記されていると、それらの例文のなかから所望のものを選択するために、その都度画面をスクロールして検索する必要がある。その結果、例えば接客時において、一連の会話を自然にかつ円滑に行うことができず、それに起因して、適切な接客を行い難いといった不都合がある。
【０００６】
そこで、本発明は、かかる事情に鑑みてなされたものであり、接客時のユーザと対話者（外国人客）の会話を自然にかつ円滑に進めることができ、これにより、接客の最適化に資することができる音声翻訳装置、音声翻訳方法、及び音声翻訳プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記課題を解決するため、本発明の一態様による音声翻訳装置は、ユーザ及び／又は対話者の音声を入力するための入力部、入力音声の内容を異なる言語の内容に翻訳する翻訳部、及び、入力音声の翻訳内容（対訳）を音声及び／又はテキストで出力する出力部を備える。そして、当該音声翻訳装置は、少なくとも１つの上位フレーズを含む上位フレーズ群、及び、各上位フレーズに関連付けられた少なくとも１つの下位フレーズを含む複数の下位フレーズ群を階層的に記憶する記憶部と、上位フレーズ群を表示し、上位フレーズのなかから特定のフレーズが選択されたときに、その特定のフレーズに関連付けられた下位フレーズ群を表示する処理を、階層的に順次実行する表示部とを更に備える。なお、「フレーズ」には、文、節、句、語、及び数字が含まれ、また、それらに付随して画像又は記号が含まれていてもよい。また、換言すれば、本発明の一態様による音声翻訳装置は、かかる複数のフレーズ群の言わば樹形図を用意しておき、それらの階層的な表示とフレーズの選択を順次（繰り返して）実行するフロー処理を提供する。
【０００８】
より具体的には、表示部が、上位フレーズ群及び下位フレーズ群を、それぞれ別画面として表示するように構成しても好適である。
【０００９】
また、表示部は、上位フレーズとして特定の質問事項が含まれており、その特定の質問事項が選択されたときに、その特定の質問事項への回答を入力するための画面を表示してもよい。
【００１０】
また、上位フレーズ及び下位フレーズは、ユーザが属する業種毎又はユーザの店舗毎に、自動又は手動で予め設定されたものであってもよい。
【００１１】
さらに、記憶部が、各上位フレーズ及び各下位フレーズの選択回数を記憶し、表示部は、選択回数がより多い上位フレーズを上位フレーズ群の表示画面においてより高い順位に表示し、かつ、選択回数がより多い下位フレーズを下位フレーズ群の表示画面においてより高い順位に表示するようにしてもよい。
【００１２】
またさらに、特定のフレーズが注文の問い合わせであり、その特定のフレーズに関連付けられた下位フレーズを含む下位フレーズ群が複数の注文品のリストである場合、記憶部が、各注文品の選択回数、又は、各注文品の利益率を記憶し、表示部は、選択回数がより多い注文品、又は、利益率がより高い注文品を下位フレーズ群の表示画面においてより高い順位に表示することもできる。
【００１３】
さらにまた、表示部が、各上位フレーズ及び各下位フレーズの異なる言語による訳文を表示し、又は、出力部が、各上位フレーズ及び各下位フレーズの異なる言語による訳文を音声で出力するようにしてもよい。なお、「訳文」は、記憶部に予め記憶しておいてもよく、或いは、上位フレーズ又は下位フレーズの選択の都度、翻訳部により翻訳するようにしてもよい。
【００１４】
また、本発明の一態様による音声翻訳方法は、入力部、翻訳部、出力部、記憶部、及び表示部を備える音声翻訳装置を用いる方法である。すなわち、当該方法は、ユーザ及び／又は対話者の音声を入力するステップと、翻訳部が、入力音声の内容を異なる言語の内容に翻訳するステップと、出力部が、入力音声の翻訳内容を音声及び／又はテキストで出力するステップと、記憶部が、少なくとも１つの上位フレーズを含む上位フレーズ群、及び、各上位フレーズに関連付けられた少なくとも１つの下位フレーズを含む複数の下位フレーズ群を階層的に記憶するステップと、表示部が、上位フレーズ群を表示し、上位フレーズのなかから特定のフレーズが選択されたときに、その特定のフレーズに関連付けられた下位フレーズを含む下位フレーズ群を表示する処理を、階層的に順次実行するステップを含む。
【００１５】
また、本発明の一態様による音声翻訳プログラムは、コンピュータ（単数又は単一種に限られず、複数又は複数種でもよい；以下同様）を、ユーザ及び／又は対話者の音声を入力するための入力部と、入力音声の内容を異なる言語の内容に翻訳する翻訳部と、入力音声の翻訳内容を音声及び／又はテキストで出力する出力部と、少なくとも１つの上位フレーズを含む上位フレーズ群、及び、各上位フレーズに関連付けられた少なくとも１つの下位フレーズを含む複数の下位フレーズ群を階層的に記憶する記憶部と、上位フレーズ群を表示し、上位フレーズのなかから特定のフレーズが選択されたときに、その特定のフレーズに関連付けられた下位フレーズを含む下位フレーズ群を表示する処理を、階層的に順次実行する表示部として機能させる。
【発明の効果】
【００１６】
本発明によれば、ユーザと対話者との会話において、上位フレーズ群に含まれる上位フレーズのなかから特定のフレーズを選択すると、それに関連付けて記憶された下位フレーズを含む下位フレーズ群が表示される一連の処理が、階層的に順次（繰り返して）実行される。これにより、所定の想定されるシチュエーションにおいて、発話の都度、質問や回答の内容を熟慮することなく、会話を滞りなく続けることができる。したがって、ユーザと対話者との会話を自然にかつ円滑に進めることができ、これにより、接客の最適化を図ることが可能となる。
【図面の簡単な説明】
【００１７】
【図１】本発明による音声翻訳装置に係るネットワーク構成等の好適な一実施形態を概略的に示すシステムブロック図である。
【図２】本発明による音声翻訳装置の好適な一実施形態における処理の流れ（一部）の一例を示すフローチャートである。
【図３】本発明による音声翻訳装置の好適な一実施形態における処理の流れ（一部）の一例を示すフローチャートである。
【図４】（Ａ）乃至（Ｄ）は、情報端末における表示画面の遷移の一例を示す平面図である。
【図５】（Ａ）乃至（Ｄ）は、情報端末における表示画面の遷移の一例を示す平面図である。
【図６】フレーズデータベースのデータ構造の一例を示す模式図である。
【発明を実施するための形態】
【００１８】
以下、本発明の実施の形態について詳細に説明する。なお、以下の実施の形態は、本発明を説明するための例示であり、本発明をその実施の形態のみに限定する趣旨ではない。また、本発明は、その要旨を逸脱しない限り、さまざまな変形が可能である。さらに、当業者であれば、以下に述べる各要素を均等なものに置換した実施の形態を採用することが可能であり、かかる実施の形態も本発明の範囲に含まれる。またさらに、必要に応じて示す上下左右等の位置関係は、特に断らない限り、図示の表示に基づくものとする。さらにまた、図面における各種の寸法比率は、その図示の比率に限定されるものではない。
【００１９】
（装置構成）
図１は、本発明による音声翻訳装置に係るネットワーク構成等の好適な一実施形態を概略的に示すシステムブロック図である。この例において、音声翻訳装置１００は、ユーザが使用する情報端末１０（ユーザ装置）にネットワークＮを介して電子的に接続されるサーバ２０を備える（但し、これに限定されない）。
【００２０】
情報端末１０は、例えば、タッチパネル等のユーザインターフェイス及び視認性が高いディスプレイを採用する。また、ここでの情報端末１０は、ネットワークＮとの通信機能を有するスマートフォンに代表される携帯電話を含む可搬型のタブレット型端末装置である。さらに、情報端末１０は、プロセッサ１１、記憶資源１２、音声入出力デバイス１３、通信インターフェイス１４、入力デバイス１５、表示デバイス１６、及びカメラ１７を備えている。また、情報端末１０は、インストールされた音声翻訳アプリケーションソフト（本発明の一実施形態による音声翻訳プログラムの少なくとも一部）が動作することにより、本発明の一実施形態による音声翻訳装置の一部又は全部として機能するものである。
【００２１】
プロセッサ１１は、算術論理演算ユニット及び各種レジスタ（プログラムカウンタ、データレジスタ、命令レジスタ、汎用レジスタ等）から構成される。また、プロセッサ１１は、記憶資源１２に格納されているプログラムＰ１０である音声翻訳アプリケーションソフトを解釈及び実行し、各種処理を行う。このプログラムＰ１０としての音声翻訳アプリケーションソフトは、例えばサーバ２０からネットワークＮを通じて配信可能なものであり、手動で又は自動でインストール及びアップデートされてもよい。
【００２２】
なお、ネットワークＮは、例えば、有線ネットワーク（近距離通信網（ＬＡＮ）、広域通信網（ＷＡＮ）、又は付加価値通信網（ＶＡＮ）等）と無線ネットワーク（移動通信網、衛星通信網、ブルートゥース（Bluetooth（登録商標））、ＷｉＦｉ(Wireless Fidelity)、ＨＳＤＰＡ(High Speed Downlink Packet Access)等）が混在して構成される通信網である。
【００２３】
記憶資源１２は、物理デバイス（例えば、半導体メモリ等のコンピュータ読み取り可能な記録媒体）の記憶領域が提供する論理デバイスであり、情報端末１０の処理に用いられるオペレーティングシステムプログラム、ドライバプログラム、各種データ等を格納する。ドライバプログラムとしては、例えば、音声入出力デバイス１３を制御するための入出力デバイスドライバプログラム、入力デバイス１５を制御するための入力デバイスドライバプログラム、表示デバイス１６を制御するための表示デバイスドライバプログラム等が挙げられる。さらに、音声入出力デバイス１３は、例えば、一般的なマイクロフォン、及びサウンドデータを再生可能なサウンドプレイヤである。
【００２４】
通信インターフェイス１４は、例えばサーバ２０との接続インターフェイスを提供するものであり、無線通信インターフェイス及び／又は有線通信インターフェイスから構成される。また、入力デバイス１５は、例えば、表示デバイス１６に表示されるアイコン、ボタン、仮想キーボード、テキスト等のタップ動作による入力操作を受け付けるインターフェイスを提供するものであり、タッチパネルの他、情報端末１０に外付けされる各種入力装置を例示することができる。
【００２５】
表示デバイス１６は、画像表示インターフェイスとして各種の情報をユーザや対話者（会話の相手方）に提供するものであり、例えば、有機ＥＬディスプレイ、液晶ディスプレイ、ＣＲＴディスプレイ等が挙げられる。また、カメラ１７は、種々の被写体の静止画や動画を撮像するためのものである。
【００２６】
サーバ２０は、例えば、演算処理能力の高いホストコンピュータによって構成され、そのホストコンピュータにおいて所定のサーバ用プログラムが動作することにより、サーバ機能を発現するものであり、例えば、音声認識サーバ、翻訳サーバ、及び音声合成サーバとして機能する単数又は複数のホストコンピュータから構成される（図示においては単数で示すが、これに限定されない）。そして、各サーバ２０は、プロセッサ２１、通信インターフェイス２２、及び記憶資源２３を備える。
【００２７】
プロセッサ２１は、算術演算、論理演算、ビット演算等を処理する算術論理演算ユニット及び各種レジスタ（プログラムカウンタ、データレジスタ、命令レジスタ、汎用レジスタ等）から構成され、記憶資源２３に格納されているプログラムＰ２０を解釈及び実行し、所定の演算処理結果を出力する。また、通信インターフェイス２２は、ネットワークＮを介して情報端末１０に接続するためのハードウェアモジュールであり、例えば、ＩＳＤＮモデム、ＡＤＳＬモデム、ケーブルモデム、光モデム、ソフトモデム等の変調復調装置である。
【００２８】
記憶資源２３は、例えば、物理デバイス（ディスクドライブ又は半導体メモリ等のコンピュータ読み取り可能な記録媒体等）の記憶領域が提供する論理デバイスであり、それぞれ単数又は複数のプログラムＰ２０、各種モジュールＬ２０、各種データベースＤ２０、及び各種モデルＭ２０が格納されている。また、記憶資源２３には、ユーザが対話者へ話しかけるために予め用意された複数の質問定型文、入力音声の履歴データ、各種設定用のデータ、後述するフレーズデータ等も記憶されている。
【００２９】
プログラムＰ２０は、サーバ２０のメインプログラムである上述したサーバ用プログラム等である。また、各種モジュールＬ２０は、情報端末１０から送信されてくる要求及び情報に係る一連の情報処理を行うため、プログラムＰ１０の動作中に適宜呼び出されて実行されるソフトウェアモジュール（モジュール化されたサブプログラム）である。かかるモジュールＬ２０としては、音声認識モジュール、翻訳モジュール、音声合成モジュール等が挙げられる。
【００３０】
また、各種データベースＤ２０としては、音声翻訳処理のために必要な各種コーパス（例えば、日本語と英語の音声翻訳の場合、日本語音声コーパス、英語音声コーパス、日本語文字（語彙）コーパス、英語文字（語彙）コーパス、日本語辞書、英語辞書、日英対訳辞書、日英対訳コーパス等）、音声データベース、ユーザに関する情報を管理するための管理用データベース、後述する階層構造を有するフレーズデータベース等が挙げられる。また、各種モデルＭ２０としては、音声認識に使用する音響モデルや言語モデル等が挙げられる。
【００３１】
（処理）
以上のとおり構成された音声翻訳装置１００における音声翻訳処理の操作及び動作の一例について、以下に更に説明する。図２及び図３は、音声翻訳装置１００における処理の流れ（の一部）の一例を示すフローチャートである。また、図４（Ａ）乃至（Ｄ）及び図５（Ａ）乃至（Ｄ）は、情報端末１０の画面表示における遷移（の一部）の一例を示す平面図である。なお、ここでは、情報端末１０のユーザが日本語を話す飲食店等の店員であり、対話者（会話の相手）が英語を話す外国人客である場合の会話を想定する（但し、言語やシチュエーションはこれに限定されない）。
【００３２】
まず、ユーザ（店員）が当該アプリケーションを起動する（ステップＳＵ１）と、情報端末１０の表示デバイス１６に、図４（Ａ）に示す対話者の言語選択画面が表示される（ステップＳＪ１）。この言語選択画面には、対話者に言語を尋ねることをユーザに促すための日本語のテキストＴ１、対話者に言語を尋ねる旨の英語のテキストＴ２、及び、想定される複数の代表的な言語（ここでは、英語、中国語（例えば書体により２種類）、ハングル語）を示す言語ボタン４１が表示される。さらにその下方には、言語選択画面を閉じて当該アプリケーションを終了するためのキャンセルボタンＢ１も表示される。
【００３３】
このとき、図４（Ａ）に示す如く、日本語のテキストＴ１及び英語のテキストＴ２は、プロセッサ１１及び表示デバイス１６により、情報端末１０の表示デバイス１６の画面において、異なる領域によって区分けされ、且つ、互いに逆向き（互いに異なる向き；図示において上下逆向き）に表示される。これにより、ユーザと対話者が対面している状態で会話を行う場合、ユーザは日本語のテキストＴ１を確認し易い一方、対話者は、英語のテキストＴ２を確認し易くなる。また、日本語のテキストＴ１と英語のテキストＴ２が区分けして表示されるので、両者を明別して更に視認し易くなる利点がある。
【００３４】
ユーザがその言語選択画面における英語のテキストＴ２の表示を対話者に提示し、対話者に例えば英語（Ｅｎｇｌｉｓｈ）のボタンをタップしてもらうことにより、又は、ユーザが自ら、対話者の言語を選択することができる。こうして対話者の言語が選択されると、サーバ２０のプロセッサ２１及び情報端末１０のプロセッサ１１により、ホーム画面として、日本語と英語の音声入力の待機画面が表示デバイス１６に表示される（図４（Ｂ）；ステップＳＪ２）。この待機画面には、ユーザと対話者の言語の何れを発話するかを問う日本語のテキストＴ３、並びに、日本語の音声入力を行うための入力ボタン４２ａ及び英語の音声入力を行うための入力ボタン４２ｂが表示される。
【００３５】
また、この待機画面には、予め設定されている複数の質問定型文のリスト表示を選択するためのお声がけボタン４３、図４（Ａ）の言語選択画面に戻って対話者の言語を切り替える（言語選択をやり直す）ための言語選択ボタン４４、これまでになされた音声入力内容の履歴表示を選択するための履歴ボタン４５、予め用意された複数の推奨フレーズ群のなかから所望のフレーズを選択して会話を進めることができるサジェスト機能を実行するためのサジェストボタン４６、及び当該アプリケーションソフトの各種設定を行うための設定ボタン４７も表示される。
【００３６】
［通常の音声翻訳による会話］
ここで、図２を参照して、ユーザと対話者の会話及び／又は会話準備における通常の音声翻訳処理の一例について説明する。まず、図４（Ｂ）に示す待機画面において、ユーザが日本語の入力ボタン４２ａをタップして日本語の音声入力を選択すると、その音声入力が可能な状態となる。この状態で、ユーザが対話者への伝達事項等を発話する（ステップＳＵ２）と、音声入出力デバイス１３を通して音声入力が行われる（ステップＳＪ３）。情報端末１０のプロセッサ１１は、その音声入力に基づいて音声信号を生成し、その音声信号を通信インターフェイス１４及びネットワークＮを通してサーバ２０へ送信する。このとおり、情報端末１０自体、又はプロセッサ１１及び音声入出力デバイス１３が「入力部」として機能する。
【００３７】
サーバ２０のプロセッサ２１は、通信インターフェイス２２を通してその音声信号を受信し、音声認識処理を行う（ステップＳＪ４）。このとき、プロセッサ２１は、記憶資源２３から、必要なモジュールＬ２０、データベースＤ２０、及びモデルＭ２０（音声認識モジュール、日本語音声コーパス、音響モデル、言語モデル等）を呼び出し、入力音声の「音」を「読み」（文字）へ変換する。このとおり、プロセッサ２１、又は、サーバ２０が全体として「音声認識サーバ」として機能する。
【００３８】
次に、プロセッサ２１は、認識された音声の「読み」（文字）を他の言語に翻訳する多言語翻訳処理へ移行する（ステップＳＪ５）。このとき、プロセッサ２１は、記憶資源２３から、必要なモジュールＬ２０及びデータベースＤ２０（翻訳モジュール、日本語文字コーパス、日本語辞書、英語辞書、日英対訳辞書、日英対訳コーパス等）を呼び出し、認識結果である入力音声の「読み」（文字列）を適切に並び替えて日本語の句、節、文等へ変換し、その変換結果に対応する英語を抽出し、それらを英文法に従って並び替えて自然な英語の句、節、文等へと変換する。このとおり、プロセッサ２１は、「翻訳部」としても機能し、サーバ２０は、全体として「翻訳サーバ」としても機能する。なお、入力音声が正確に認識されなかった場合には、音声の再入力を行うことができる（画面表示を図示せず）。
【００３９】
また、プロセッサ２１は、認識された入力音声の内容を記憶資源２３に記憶する。次に、多言語翻訳処理、及び、入力音声の内容の記憶処理が完了すると、プロセッサ２１は、音声合成処理へ移行する（ステップＳＪ６）。このとき、プロセッサ２１は、記憶資源２３から、必要なモジュールＬ２０、データベースＤ２０、及びモデルＭ２０（音声合成モジュール、英語音声コーパス、音響モデル、言語モデル等）を呼び出し、翻訳結果である英語の句、節、文等を自然な音声に変換する。このとおり、プロセッサ２１は、「音声合成部」としても機能し、サーバ２０は、全体として「音声合成サーバ」としても機能する。
【００４０】
次いで、プロセッサ２１は、合成された音声に基づいて音声出力用の音声信号を生成し、通信インターフェイス２２及びネットワークＮを通して、情報端末１０へ送信する。情報端末１０のプロセッサ１１は、通信インターフェイス１４を通してその音声信号を受信し、音声入出力デバイス１３を用いて、音声出力処理を行う（ステップＳＪ７）。このとおり、プロセッサ１１及び音声入出力デバイス１３が、「出力部」として機能する。
【００４１】
［サジェスト機能による会話］
次に、図３を参照して、ユーザと対話者の会話及び／又は会話準備において、サジェスト機能を用いる場合の処理の一例について説明する。例えば、対話者（外国人客）がユーザの店舗（例えば飲食サービスを提供する店舗）に入店したときに、ユーザが、図４（Ｂ）に示す待機画面のサジェストボタン４６をタップする（ステップＳＵ３）。そうすると、情報端末１０のプロセッサ１１は、ユーザが属する業種の店舗での接客において多用されるフレーズ群を表示するための指令信号をサーバ２０へ送信する。その指令信号を受信したサーバ２０のプロセッサ２１は、記憶資源２３に記憶されたデータベースＤ２０に含まれるフレーズデータベースＤ６０にアクセスする。
【００４２】
ここで、図６は、フレーズデータベースＤ６０のデータ構造の一例を示す模式図である。同図に示す如く、フレーズデータベースＤ６０は、階層化された複数のフレーズ群（データ）６１，６２，６３（図示の都合上、３階層まで記載したが、これに限定されない；以下同様）を備えている。それらのフレーズ群６１，６２，６３は、それぞれ複数の日本語のフレーズＸ１１〜Ｘ５５，Ｙ１１〜Ｙ５５，Ｚ１１〜Ｚ５５及びそれらの異なる言語による訳文を含んでおり、上位階層のフレーズ群に含まれるフレーズのそれぞれに、複数のフレーズとそれらを含む下位階層のフレーズ群が関連付けられている。このように、フレーズ群６１，６２，６３等からフレーズの言わば樹形図が構成されており、これにより、フレーズの連続的なフローが提供される。また、フレーズが特定の質問事項である場合、当該フレーズには質問事項フラグが付されている。そして、その質問事項への回答を入力するための画面データが、そのフレーズに関連付けて、フレーズ群の一部として、フレーズデータベースＤ６０又は他の適宜のデータベースに記憶されている。このとおり、記憶資源２３が、「記憶部」として機能する。
【００４３】
より具体的には、フレーズ群６１とフレーズ群６２は、それぞれ「上位フレーズ群」と「下位フレーズ群」の関係を有しており、フレーズ群６１に含まれる例えばフレーズＸ１１（上位フレーズ）に、フレーズＹ１１〜Ｙ５５（下位フレーズ）及びそれらを含むフレーズ群６２が関連付けられている。同様に、フレーズ群６２とフレーズ群６３も、それぞれ「上位フレーズ群」と「下位フレーズ群」の関係を有しており、フレーズ群６２に含まれる例えばフレーズＹ１１（上位フレーズ）に、フレーズＺ１１〜Ｚ５５（下位フレーズ）及びそれらを含むフレーズ群６３が関連付けられている。また、特定の質問事項であるフレーズＸ１１には質問事項フラグＦが付されており、その特定の質問事項への回答を入力するための画面データが、フレーズＸ１１に関連付けてフレーズ群６２の一部として記憶されている。
【００４４】
かかるフレーズデータベースＤ６０にアクセスしたサーバ２０のプロセッサ２１は、まず、上位階層のフレーズ群６１に含まれるフレーズＸ１１〜Ｘ５５を呼び出し、それらのリストの表示画像データを作成して情報端末１０のプロセッサ１１へ送信する。プロセッサ１１は、その表示画像データに基づいて、例えば図４（Ｃ）に示すフレーズ群画面を表示デバイス１６に表示する（ここまでステップＳＪ８）。
【００４５】
この図４（Ｃ）のフレーズ群画面には、複数の日本語のフレーズテキスト（上位フレーズ）とそれらの英語による訳文を示す英語のフレーズテキストが、フレーズ毎に併記された状態でフレーズリストＰ１として表示される。図４（Ｃ）に示すとおり、フレーズリストＰ１には、飲食店の店員が来店した客に対して最初に声がけする際によく発話される複数のフレーズが含まれている。ユーザは、それらのテキスト部分をタップすることにより、所望の特定のフレーズを選択することができる。また、このフレーズ群画面において、フレーズリストＰ１の上方及び下方には、それぞれ、図４（Ａ）の言語選択画面において対話者の言語として選択された言語（つまり対訳言語）が英語であることを示す日本語のテキストＴ４、及び、フレーズ群画面を閉じて図４（Ｂ）の待機画面へ戻るための閉じるボタンＢ２も表示される（以下同様）。
【００４６】
ここで、ユーザが、フレーズリストＰ１のなかから例えば人数を問い合わせる旨のフレーズ（「何名様ですか？」：特定のフレーズかつ特定の質問事項）のテキストＴ５（フレーズ群６１の例えばフレーズＸ１１に相当）をタップして選択する（ステップＳＵ４）と、情報端末１０のプロセッサ１１は、その選択指令信号をサーバ２０のプロセッサ２１へ送信する。それを受信したプロセッサ２１は、テキストＴ５の英語による訳文の音声出力データをプロセッサ１１へ返信し、プロセッサ１１は、その音声を音声入出力デバイス１３から出力する。
【００４７】
また、プロセッサ２１は、フレーズデータベースＤ６０に再度アクセスし、選択されたテキストＴ５に相当するフレーズＸ１１が、特定の質問事項であるか否かを判定する（ステップＳＪ９）。ここで、フレーズＸ１１には質問事項フラグＦが付されている（ステップＳＪ９で「Ｙｅｓ」）ので、プロセッサ２１は、フレーズＸ１１に関連付けられたフレーズ群６２の一部として記憶された回答入力画面データを呼び出し、プロセッサ１１へ返信する。それを受信したプロセッサ１１は、対話者が来店人数を入力するための画面として、例えば図４（Ｄ）に示す回答入力画面を表示デバイス１６に表示する（ここまでステップＳＪ１０）。この図４（Ｄ）の回答入力画面には、人数を入力するための数字キー４８が表示され、ユーザがこの回答入力画面を対話者に提示し、対話者が画面をタップして来店人数（ここでは例えば２人）を入力する（ステップＳＵ５）と、その数字がカラム４９に表示される。
【００４８】
こうして、特定の質問事項であるフレーズＸ１１（テキストＴ５）に対する回答（人数）が入力されると、情報端末１０のプロセッサ１１は、その入力完了信号をサーバ２０のプロセッサ２１へ送信する。それを受信したプロセッサ２１は、フレーズデータベースＤ６０に再度アクセスし、フレーズＸ１１に関連付けられた下位階層のフレーズ群６２に含まれるフレーズＹ１１〜Ｙ５５を呼び出し、それらのリストの表示画像データを作成して情報端末１０のプロセッサ１１へ送信する。プロセッサ１１は、その表示画像データに基づいて、例えば図５（Ａ）に示すフレーズ群画面を表示デバイス１６に表示する（ここまでステップＳＪ１１）。このとおり、プロセッサ１１，２１及び表示デバイス１６が、「表示部」として機能する。
【００４９】
この図５（Ａ）のフレーズ群画面には、図４（Ｃ）に示すフレーズリストＰ１と同様の形態で複数のフレーズテキスト（下位フレーズ）を含むフレーズリストＰ２が表示される。図５（Ａ）に示すとおり、フレーズリストＰ２には、飲食店の店員が来店した客の人数を確認した後によく発話されるフレーズが含まれている。ここで、ユーザは、フレーズリストＰ１と同様に、フレーズリストＰ２におけるテキスト部分をタップすることにより、所望の特定のフレーズを選択することができる。以下、このようにして、上位フレーズ群のフレーズリストの表示、それらのなかから特定のフレーズの選択、及び特定のフレーズに関連付けられた下位フレーズを含む下位フレーズ群の表示といった一連の処理を、階層的に順次（繰り返して）実行することにより、ユーザと対話者の会話を進めることができる。このとおり、上位フレーズ群であるフレーズリストＰ１の下位フレーズ群として表示されたフレーズリストＰ２は、次に表示される更なる下位フレーズ群に対する上位フレーズ群に該当する。
【００５０】
次に、ユーザが、フレーズリストＰ２のなかから例えば空席に案内する旨のフレーズ（「お席へご案内します。」：特定のフレーズ）のテキストＴ６（フレーズ群６２の例えばフレーズＹ１１に相当）をタップして選択する（ステップＳＵ４）と、情報端末１０のプロセッサ１１は、その選択指令信号をサーバ２０のプロセッサ２１へ送信する。それを受信したプロセッサ２１は、テキストＴ６の英語による訳文の音声出力データをプロセッサ１１へ返信し、プロセッサ１１は、その音声を音声入出力デバイス１３から出力する。
【００５１】
また、プロセッサ２１は、フレーズデータベースＤ６０に再度アクセスし、選択されたテキストＴ６に相当するフレーズＹ１１が、特定の質問事項であるか否かを判定する（ステップＳＪ９）。ここで、フレーズＹ１１には質問事項フラグＦが付されていない（ステップＳＪ９で「Ｎｏ」）ので、プロセッサ２１は、フレーズＹ１１に関連付けられた更に下位階層のフレーズ群６３に含まれるフレーズＺ１１〜Ｚ５５を呼び出し、それらのリストの表示画像データを作成して情報端末１０のプロセッサ１１へ送信する。プロセッサ１１は、その表示画像データに基づいて、例えば図５（Ｂ）に示すフレーズ群画面を表示デバイス１６に表示する（ここまでステップＳＪ１１）。
【００５２】
この図５（Ｂ）のフレーズ群画面には、図４（Ｃ）に示すフレーズリストＰ１と同様の形態で複数のフレーズテキスト（下位フレーズ）を含むフレーズリストＰ３が表示される。図５（Ｂ）に示すとおり、フレーズリストＰ３には、客が席に着いたタイミングでよく発話されるフレーズが含まれている。
【００５３】
次いで、ユーザは、フレーズリストＰ３のなかから例えば飲み物の注文を問い合わせる旨のフレーズ（「お飲み物はいかがなさいますか？」：特定のフレーズ）のテキストＴ７（フレーズ群６３の例えばフレーズＺ１１に相当）をタップして選択する（ステップＳＵ４）と、情報端末１０のプロセッサ１１は、その選択指令信号をサーバ２０のプロセッサ２１へ送信する。それを受信したプロセッサ２１は、テキストＴ７の英語による訳文の音声出力データをプロセッサ１１へ返信し、プロセッサ１１は、その音声を音声入出力デバイス１３から出力する。
【００５４】
さらに、プロセッサ２１は、フレーズデータベースＤ６０に再度アクセスし、選択されたテキストＴ７に相当するフレーズＺ１１が、特定の質問事項であるか否かを判定する（ステップＳＪ９）。このフレーズＺ１１にも質問事項フラグＦが付されていない（ステップＳＪ９で「Ｎｏ」）ので、プロセッサ２１は、フレーズＺ１１に関連付けられた更に下位階層のフレーズ群に含まれるフレーズを呼び出し、それらのリストの表示画像データを作成して情報端末１０のプロセッサ１１へ送信する。プロセッサ１１は、その表示画像データに基づいて、例えば図５（Ｃ）に示すフレーズ群画面を表示デバイス１６に表示する（ここまでステップＳＪ１１）。
【００５５】
この図５（Ｃ）のフレーズ群画面には、図４（Ｃ）に示すフレーズリストＰ１と同様の形態で複数のフレーズテキスト（下位フレーズ）を含むフレーズリストＰ４が表示される。図５（Ｃ）に示すとおり、フレーズリストＰ４には、複数の飲み物のメニュー名が含まれており、また、対話者がユーザに対してメニューを要求する旨のテキストＴ８も含まれている。ユーザがこのフレーズ群画面を対話者に提示し、所望の飲み物のメニュー名をタップして貰うことにより、注文をとることができる。或いは、対話者の所望の飲み物のメニュー名がフレーズリストＰ４にない場合、対話者は、テキストＴ８の部分をタップすることにより、店員であるユーザに対してメニューの閲覧を求めることができる（ステップＳＵ４）。
【００５６】
このようにして、対話者が、フレーズリストＰ４のなかから所望のメニュー名を表すフレーズ又はメニューの閲覧を依頼する旨のフレーズ（何れも特定のフレーズ）のテキストをタップして選択する（ステップＳＵ４）と、情報端末１０のプロセッサ１１は、その選択指令信号をサーバ２０のプロセッサ２１へ送信する。それを受信したプロセッサ２１は、そのテキストの日本語の音声出力データをプロセッサ１１へ返信し、プロセッサ１１は、その音声を音声入出力デバイス１３から出力する。
【００５７】
また、プロセッサ２１は、フレーズデータベースＤ６０に再度アクセスし、選択されたテキストに相当するフレーズが、特定の質問事項であるか否かを判定する（ステップＳＪ９）。ここで、フレーズリストＰ４に含まれるフレーズには質問事項フラグＦが付されていない（ステップＳＪ９で「Ｎｏ」）ので、プロセッサ２１は、そのフレーズに関連付けられた更に下位階層のフレーズ群に含まれる複数のフレーズを呼び出し、それらのリストの表示画像データを作成して情報端末１０のプロセッサ１１へ送信する。プロセッサ１１は、その表示画像データに基づいて、例えば図５（Ｄ）に示すフレーズ群画面を表示デバイス１６に表示する（ここまでステップＳＪ１１）。
【００５８】
この図５（Ｄ）のフレーズ群画面には、図４（Ｃ）に示すフレーズリストＰ１と同様の形態で複数のフレーズテキスト（下位フレーズ）を含むフレーズリストＰ５が表示される。図５（Ｄ）に示すとおり、フレーズリストＰ５には、客からの注文や依頼を受けた場合によく発話されるフレーズが含まれている。そして、ユーザが、フレーズリストＰ５のなかから所望のフレーズのテキスト部分をタップして選択する（ステップＳＵ４）と、これまでの処理と同様にして、そのフレーズの英語による訳文の音声出力が行われ、ユーザは、当該アプリケーションを適宜終了することができる（ステップＳＵ６）。なお、この図５（Ｄ）に示すフレーズリストＰ５は、図５（Ｃ）に示すフレーズリストＰ４に含まれる何れのフレーズに対する下位フレーズ群としても有効である。このように、異なる上位フレーズに対して、複数の同じ下位フレーズを含むフレーズ群が関連付けられていてもよい。
【００５９】
以上のように構成された音声翻訳装置１００及びそれを用いた音声翻訳方法並びに音声翻訳プログラムによれば、ユーザと対話者との会話において、上位フレーズ群に含まれる上位フレーズのなかから特定のフレーズを選択すると、それに関連付けて記憶された下位フレーズを含む下位フレーズ群が画面表示され、かかる一連の処理が階層的に順次（繰り返し）実行される。例えば、図４（Ｃ）→図４（Ｄ）→図５（Ａ）→図５（Ｂ）→図５（Ｃ）→図５（Ｄ）に示す画面表示の階層的な遷移に従って所望のフレーズを選択することにより、飲食店における接客といったシチュエーションにおける会話を進行させることができる。このとおり、本発明によれば、所定の想定されるシチュエーションにおいて、発話の都度、質問や回答の内容を熟慮することなく、会話を滞りなく続けることができるので、ユーザと対話者との会話を自然かつ円滑ならしめ、これにより、接客の最適化を図ることが可能となる。
【００６０】
また、図４（Ｃ）及び（Ｄ）並びに図５（Ａ）乃至（Ｄ）に示す如く、上位フレーズ群と下位フレーズ群を、それぞれ別画面として表示デバイス１６に順次表示するので、会話の進行に応じた所望のフレーズを簡易かつ的確に選択し易くなり、ユーザと対話者との会話をより自然かつ円滑ならしめることができる。
【００６１】
さらに、上位フレーズとして特定の質問事項（例えば図４（Ｃ）に示すテキストＴ５のフレーズＸ１１）が含まれており、それが選択されたときに、その特定の質問事項への回答を入力するための例えば図４（Ｄ）に示す画面が表示される。よって、フレーズのみを順次表示していく場合に比して、会話の選択肢又は会話の幅を広げることができ、また、これにより、より多くのシチュエーションにおける会話へ柔軟に対応することができる。
【００６２】
またさらに、フレーズ群６１，６２，６３等（フレーズリストＰ１〜Ｐ５）のそれぞれに設定された複数のフレーズ（つまり上位フレーズ及び下位フレーズ）は、上述の如く、ユーザが属する業種毎に予め設定されたものであるので、その業種における接客に特化した会話を、より円滑にかつより適切に実施して、接客の最適化を更に図ることができる。また、かかるフレーズを、ユーザの店舗毎に予め設定しておくこともでき、この場合、店舗毎の特徴や店舗の状況を反映したよりきめ細かい接客が可能となる。
【００６３】
さらに、これらの上位フレーズ及び下位フレーズの設定は、自動で行っても手動で行ってもよい。自動で設定する例としては、まず、当該翻訳アプリケーションの利用に際し、ユーザ情報の１つとしてユーザの業種を登録しておき、サーバ２０のプロセッサ２１が、その業種の会話で頻出するフレーズのコーパスや履歴のなかから特に多用されるフレーズを選定してフレーズ群として階層化する形態が挙げられる。或いは、同業種の複数のユーザが発話したフレーズを、その発話頻度とともに適宜のデータベースに記憶し、サーバ２０のプロセッサ２１が、それらのフレーズのなかから特に多用されているフレーズを選定してフレーズ群として階層化するようにしてもよい。一方、手動で設定する例としては、ユーザが所望のフレーズを選定し、階層的なフレーズ群としてカスタマイズする形態が挙げられる。
【００６４】
その際、各フレーズ群６１，６２，６３等（フレーズリストＰ１〜Ｐ５）に含まれるフレーズを、当初の設定のまま維持（フレーズリストの固定）してもよく、或いは、それらに含まれるフレーズを、必要に応じて適宜変更してもよい。すなわち、後者の場合、例えば、各フレーズ（上位フレーズ及び下位フレーズ）が選択された回数を記憶資源２３に記憶しておき、サーバ２０のプロセッサ２１が、選択回数のより多いフレーズを各フレーズ群６１，６２，６３等（フレーズリストＰ１〜Ｐ５）の表示画面においてより高い順位に表示（例えば画面の上方に表示したり強調や拡大して表示したり）するようにしてもよい。これにより、ユーザの業種や店舗の実情に即したフレーズを表示し易くなり、かつ、選択し易くなる利点があり、また、ユーザと対話者のコミュニケーションを更に高速化することができる。
【００６５】
また、図５（Ｂ）及び（Ｃ）に示す如く、特定のフレーズが注文（飲み物）の問い合わせ（テキストＴ７のフレーズＺ１１）であり、その特定のフレーズに関連付けられた下位フレーズを含む下位フレーズ群が複数の注文品（メニュー名）のリストである場合、以下の処理を行ってもよい。すなわち、各注文品について過去の所定期間に選択された回数（オーダー数）、又は、各注文品の利益率を、記憶資源２３に記憶しておき、サーバ２０のプロセッサ２１が、その選択回数がより多い注文品、又は、利益率がより高い注文品を、例えば図５（Ｃ）に示すフレーズ群の表示画面においてより高い順位に表示してもよい。これにより、対話者（外国人客）に対し、人気が高いメニューや客単価が高いメニューを積極的に推奨することができ、その結果、ユーザの店舗の売上及び利益の向上を図ることができる。
【００６６】
またさらに、図４（Ｃ）及び（Ｄ）並びに図５（Ａ）乃至（Ｄ）に示す如く、フレーズ群画面において、フレーズ毎の日本語のフレーズテキストと英語による訳文を示す英語のフレーズテキストが、フレーズリストＰ１〜Ｐ５において併記され、また、各フレーズの異なる言語による訳文が音声で出力される。よって、ユーザ及び対話者は、画面の視認に加えて、又は、画面を視認しなくとも、相手の発話内容をより確実に確認することができる。
【００６７】
なお、上述したとおり、上記の各実施形態は、本発明を説明するための一例であり、本発明をその実施形態に限定する趣旨ではない。また、本発明は、その要旨を逸脱しない限り、様々な変形が可能である。例えば、当業者であれば、実施形態で述べたリソース（ハードウェア資源又はソフトウェア資源）を均等物に置換することが可能であり、そのような置換も本発明の範囲に含まれる。
【００６８】
また、図４（Ｃ）及び（Ｄ）並びに図５（Ａ）乃至（Ｄ）において、日本語のフレーズテキストと英語のフレーズテキストを、図４（Ａ）のテキストＴ１，Ｔ２のように、互いに逆向き（互いに異なる向き；図示において上下逆向き）に表示してもよい。さらに、これらの日本語のフレーズテキストと英語のフレーズテキストを併記せず、何れか一方のみ表示するようにしてもよい。またさらに、図４（Ｄ）に示す回答入力を、音声入力で行うことができるように構成してもよい。さらにまた、ユーザの業種に拘わらず、その他の業種用に設定されたフレーズ群を選択することができるようにしてもよい。また、図５（Ｃ）に示すフレーズ群の表示画面（メニュー名）には、その時点における在庫が多い材料を使用したメニュー名やユーザ又はユーザの店舗が独自に推奨するメニュー名を表示することもできる。
【００６９】
また、音声認識、翻訳、音声合成等の各処理をサーバ２０によって実行する例について記載したが、これらの処理を情報端末１０において実行するように構成してもよい。この場合、それらの処理に用いるモジュールＬ２０は、情報端末１０の記憶資源１２に保存されていてもよいし、サーバ２０の記憶資源２３に保存されていてもよい。さらに、音声データベースであるデータベースＤ２０、及び／又は、音響モデル等のモデルＭ２０も、情報端末１０の記憶資源１２に保存されていてもよいし、サーバ２０の記憶資源２３に保存されていてもよい。このとおり、音声翻訳装置は、ネットワークＮ及びサーバ２０を備えなくてもよい。
【００７０】
また、情報端末１０とネットワークＮとの間には、両者間の通信プロトコルを変換するゲートウェイサーバ等が介在してももちろんよい。また、情報端末１０は、携帯型装置に限らず、例えば、デスクトップ型パソコン、ノート型パソコン、タブレット型パソコン、ラップトップ型パソコン等でもよい。
【産業上の利用可能性】
【００７１】
本発明によれば、接客時のユーザと対話者（外国人客）の会話を自然にかつ円滑に進めることができ、これにより、接客の最適化に資することができるので、例えば、互いの言語を理解できない人同士の会話に関するサービスの提供分野における、プログラム、装置、システム、及び方法の設計、製造、提供、販売等の活動に広く利用することができる。
【符号の説明】
【００７２】
１０  情報端末
１１  プロセッサ
１２  記憶資源
１３  音声入出力デバイス
１４  通信インターフェイス
１５  入力デバイス
１６  表示デバイス
１７  カメラ
２０  サーバ
２１  プロセッサ
２２  通信インターフェイス
２３  記憶資源
４１  言語ボタン
４２ａ  日本語の入力ボタン
４２ｂ  英語の入力ボタン
４３  お声がけボタン
４４  言語選択ボタン
４５  履歴ボタン
４６  サジェストボタン
４７  設定ボタン
４８  数字キー
４９  カラム
６１，６２，６３  フレーズ群
１００  音声翻訳装置
Ｂ１  キャンセルボタン
Ｂ２  閉じるボタン
Ｄ２０  データベース
Ｄ６０  フレーズデータベース
Ｆ  質問事項フラグ
Ｌ２０  モジュール
Ｍ２０  モデル
Ｎ  ネットワーク
Ｐ１〜Ｐ５  フレーズリスト
Ｐ１０  プログラム
Ｐ２０  プログラム
Ｔ１〜Ｔ８  テキスト
Ｘ１１〜Ｘ５５  フレーズ
Ｙ１１〜Ｙ５５  フレーズ
Ｚ１１〜Ｚ５５  フレーズ
【図１】
2017181662.tif 000003
【図２】
2017181662.tif 000004
【図３】
2017181662.tif 000005
【図４】
2017181662.tif 000006
【図５】
2017181662.tif 000007
【図６】
2017181662.tif 000008
【手続補正書】
【提出日】平成28年11月4日(2016.11.4)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
ユーザ及び／又は対話者の音声を入力するための入力部、入力音声の内容を異なる言語の内容に翻訳する翻訳部、及び、前記入力音声の翻訳内容を音声及び／又はテキストで出力する出力部を備える音声翻訳装置であって、
少なくとも１つの上位フレーズを含む上位フレーズ群、及び、該各上位フレーズに関連付けられた少なくとも１つの下位フレーズを含む複数の下位フレーズ群を階層的に記憶する記憶部と、
前記上位フレーズ群を表示し、前記上位フレーズのなかから特定のフレーズが選択されたときに、該特定のフレーズに関連付けられた下位フレーズを含む下位フレーズ群を表示する処理を、階層的に順次実行する表示部と、
を更に備え、
前記上位フレーズ群には、前記上位フレーズとして特定の質問事項が含まれており、
前記表示部は、前記特定の質問事項が選択されたときに、前記下位フレーズの表示とは異なる表示形態で、該特定の質問事項への任意の回答を入力するための画面を表示する、
音声翻訳装置。
【請求項２】
前記表示部は、前記上位フレーズ群及び前記下位フレーズ群を、それぞれ別画面として表示する、
請求項１記載の音声翻訳装置。
【請求項３】
前記記憶部は、前記特定の質問事項である上位フレーズに質問事項フラグを付して記憶し、かつ、該特定の質問事項への前記任意の回答を入力するための画面データを、該特定の質問事項である上位フレーズに関連付けて記憶し、
前記表示部は、前記特定の質問事項が選択されたか否かを、前記質問事項フラグの有無により判定し、前記特定の質問事項が選択されたと判定したときに、前記特定の質問事項への前記任意の回答を入力するための画面データに基づいて、前記任意の回答を入力するための画面を表示する、
請求項１又は２記載の音声翻訳装置。
【請求項４】
前記上位フレーズ及び前記下位フレーズは、前記ユーザが属する業種毎又は前記ユーザの店舗毎に、自動又は手動で予め設定されたものである、
請求項１乃至３の何れか記載の音声翻訳装置。
【請求項５】
前記記憶部は、前記各上位フレーズ及び前記各下位フレーズの選択回数を記憶し、
前記表示部は、前記選択回数がより多い前記上位フレーズを前記第１フレーズ群の表示画面においてより高い順位に表示し、かつ、前記選択回数がより多い前記下位フレーズを前記下位フレーズ群の表示画面においてより高い順位に表示する、
請求項１乃至４の何れか記載の音声翻訳装置。
【請求項６】
前記特定のフレーズが注文の問い合わせであり、該特定のフレーズに関連付けられた前記下位フレーズを含む下位フレーズ群が複数の注文品のリストである場合、
前記記憶部は、前記各注文品の選択回数、又は、前記各注文品の利益率を記憶し、
前記表示部は、前記選択回数がより多い注文品、又は、前記利益率がより高い注文品を前記下位フレーズ群の表示画面においてより高い順位に表示する、
請求項１乃至５の何れか記載の音声翻訳装置。
【請求項７】
前記表示部が、前記各上位フレーズ及び前記各下位フレーズの異なる言語による訳文を表示し、又は、前記出力部が、前記各上位フレーズ及び前記各下位フレーズの異なる言語による訳文を音声で出力する、
請求項１乃至６の何れか記載の音声翻訳装置。
【請求項８】
入力部、翻訳部、出力部、記憶部、及び表示部を備える音声翻訳装置を用い、
前記入力部が、ユーザ及び／又は対話者の音声を入力するステップと、
前記翻訳部が、入力音声の内容を異なる言語の内容に翻訳するステップと、
前記出力部が、前記入力音声の翻訳内容を音声及び／又はテキストで出力するステップと、
前記記憶部が、少なくとも１つの上位フレーズを含む上位フレーズ群、及び、該各上位フレーズに関連付けられた少なくとも１つの下位フレーズを含む複数の下位フレーズ群を階層的に記憶するステップと、
前記表示部が、前記上位フレーズ群を表示し、前記上位フレーズのなかから特定のフレーズが選択されたときに、該特定のフレーズに関連付けられた下位フレーズを含む下位フレーズ群を表示する処理を、階層的に順次実行するステップと、
を含み、
前記上位フレーズ群には、前記上位フレーズとして特定の質問事項が含まれており、
前記表示部は、前記特定の質問事項が選択されたときに、前記下位フレーズの表示とは異なる表示形態で、該特定の質問事項への任意の回答を入力するための画面を表示する、音声翻訳方法。
【請求項９】
コンピュータを、
ユーザ及び／又は対話者の音声を入力するための入力部と、
入力音声の内容を異なる言語の内容に翻訳する翻訳部と、
前記入力音声の翻訳内容を音声及び／又はテキストで出力する出力部と、
少なくとも１つの上位フレーズを含む上位フレーズ群、及び、該各上位フレーズに関連付けられた少なくとも１つの下位フレーズを含む複数の下位フレーズ群を階層的に記憶する記憶部と、
前記上位フレーズ群を表示し、前記上位フレーズのなかから特定のフレーズが選択されたときに、該特定のフレーズに関連付けられた下位フレーズを含む下位フレーズ群を表示する処理を、階層的に順次実行する表示部と、
して機能させ、
前記上位フレーズ群には、前記上位フレーズとして特定の質問事項が含まれており、
前記表示部は、前記特定の質問事項が選択されたときに、前記下位フレーズの表示とは異なる表示形態で、該特定の質問事項への任意の回答を入力するための画面を表示する、音声翻訳プログラム。
【手続補正書】
【提出日】平成29年4月26日(2017.4.26)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
ユーザ及び／又は対話者の音声を入力するための入力部、入力音声の内容を異なる言語の内容に翻訳する翻訳部、及び、前記入力音声の翻訳内容を音声及び／又はテキストで出力する出力部を備える音声翻訳装置であって、
少なくとも１つの上位フレーズを含む上位フレーズ群、及び、該各上位フレーズに関連付けられた少なくとも１つの下位フレーズを含む複数の下位フレーズ群を階層的に記憶する記憶部と、
前記上位フレーズ群を表示し、前記上位フレーズのなかから特定のフレーズが選択されたときに、該特定のフレーズに関連付けられた下位フレーズを含む下位フレーズ群を表示する処理を、階層的に順次実行する表示部と、
を更に備え、
前記上位フレーズ群には、前記上位フレーズとして特定の質問事項が含まれており、
前記表示部は、前記特定の質問事項が選択されたときに、前記下位フレーズの表示とは異なる表示形態で、該特定の質問事項への任意の回答を入力するための画面を表示し、
前記上位フレーズ及び前記下位フレーズは、前記ユーザが属する業種毎又は前記ユーザの店舗毎に、自動又は手動で予め設定されたものであり、
前記記憶部は、前記各上位フレーズ及び前記各下位フレーズの選択回数を記憶し、
前記表示部は、前記選択回数がより多い前記上位フレーズを前記第１フレーズ群の表示画面においてより高い順位に表示し、かつ、前記選択回数がより多い前記下位フレーズを前記下位フレーズ群の表示画面においてより高い順位に表示し、
前記特定のフレーズが注文の問い合わせであり、該特定のフレーズに関連付けられた前記下位フレーズを含む下位フレーズ群が複数の注文品のリストである場合、
前記記憶部は、前記各注文品の選択回数、又は、前記各注文品の利益率を記憶し、
前記表示部は、前記選択回数がより多い注文品、又は、前記利益率がより高い注文品を前記下位フレーズ群の表示画面においてより高い順位に表示する、
音声翻訳装置。
【請求項２】
前記表示部は、前記上位フレーズ群及び前記下位フレーズ群を、それぞれ別画面として表示する、
請求項１記載の音声翻訳装置。
【請求項３】
前記記憶部は、前記特定の質問事項である上位フレーズに質問事項フラグを付して記憶し、かつ、該特定の質問事項への前記任意の回答を入力するための画面データを、該特定の質問事項である上位フレーズに関連付けて記憶し、
前記表示部は、前記特定の質問事項が選択されたか否かを、前記質問事項フラグの有無により判定し、前記特定の質問事項が選択されたと判定したときに、前記特定の質問事項への前記任意の回答を入力するための画面データに基づいて、前記任意の回答を入力するための画面を表示する、
請求項１又は２記載の音声翻訳装置。
【請求項４】
前記表示部が、前記各上位フレーズ及び前記各下位フレーズの異なる言語による訳文を表示し、又は、前記出力部が、前記各上位フレーズ及び前記各下位フレーズの異なる言語による訳文を音声で出力する、
請求項１乃至３の何れか記載の音声翻訳装置。
【請求項５】
入力部、翻訳部、出力部、記憶部、及び表示部を備える音声翻訳装置を用い、
前記入力部が、ユーザ及び／又は対話者の音声を入力するステップと、
前記翻訳部が、入力音声の内容を異なる言語の内容に翻訳するステップと、
前記出力部が、前記入力音声の翻訳内容を音声及び／又はテキストで出力するステップと、
前記記憶部が、少なくとも１つの上位フレーズを含む上位フレーズ群、及び、該各上位フレーズに関連付けられた少なくとも１つの下位フレーズを含む複数の下位フレーズ群を階層的に記憶するステップと、
前記表示部が、前記上位フレーズ群を表示し、前記上位フレーズのなかから特定のフレーズが選択されたときに、該特定のフレーズに関連付けられた下位フレーズを含む下位フレーズ群を表示する処理を、階層的に順次実行するステップと、
を含み、
前記上位フレーズ群には、前記上位フレーズとして特定の質問事項が含まれており、
前記表示部は、前記特定の質問事項が選択されたときに、前記下位フレーズの表示とは異なる表示形態で、該特定の質問事項への任意の回答を入力するための画面を表示し、
前記上位フレーズ及び前記下位フレーズは、前記ユーザが属する業種毎又は前記ユーザの店舗毎に、自動又は手動で予め設定されたものであり、
前記記憶部は、前記各上位フレーズ及び前記各下位フレーズの選択回数を記憶し、
前記表示部は、前記選択回数がより多い前記上位フレーズを前記第１フレーズ群の表示画面においてより高い順位に表示し、かつ、前記選択回数がより多い前記下位フレーズを前記下位フレーズ群の表示画面においてより高い順位に表示し、
前記特定のフレーズが注文の問い合わせであり、該特定のフレーズに関連付けられた前記下位フレーズを含む下位フレーズ群が複数の注文品のリストである場合、
前記記憶部は、前記各注文品の選択回数、又は、前記各注文品の利益率を記憶し、
前記表示部は、前記選択回数がより多い注文品、又は、前記利益率がより高い注文品を前記下位フレーズ群の表示画面においてより高い順位に表示する、
音声翻訳方法。
【請求項６】
コンピュータを、
ユーザ及び／又は対話者の音声を入力するための入力部と、
入力音声の内容を異なる言語の内容に翻訳する翻訳部と、
前記入力音声の翻訳内容を音声及び／又はテキストで出力する出力部と、
少なくとも１つの上位フレーズを含む上位フレーズ群、及び、該各上位フレーズに関連付けられた少なくとも１つの下位フレーズを含む複数の下位フレーズ群を階層的に記憶する記憶部と、
前記上位フレーズ群を表示し、前記上位フレーズのなかから特定のフレーズが選択されたときに、該特定のフレーズに関連付けられた下位フレーズを含む下位フレーズ群を表示する処理を、階層的に順次実行する表示部と、
して機能させ、
前記上位フレーズ群には、前記上位フレーズとして特定の質問事項が含まれており、
前記表示部は、前記特定の質問事項が選択されたときに、前記下位フレーズの表示とは異なる表示形態で、該特定の質問事項への任意の回答を入力するための画面を表示し、
前記上位フレーズ及び前記下位フレーズは、前記ユーザが属する業種毎又は前記ユーザの店舗毎に、自動又は手動で予め設定されたものであり、
前記記憶部は、前記各上位フレーズ及び前記各下位フレーズの選択回数を記憶し、
前記表示部は、前記選択回数がより多い前記上位フレーズを前記第１フレーズ群の表示画面においてより高い順位に表示し、かつ、前記選択回数がより多い前記下位フレーズを前記下位フレーズ群の表示画面においてより高い順位に表示し、
前記特定のフレーズが注文の問い合わせであり、該特定のフレーズに関連付けられた前記下位フレーズを含む下位フレーズ群が複数の注文品のリストである場合、
前記記憶部は、前記各注文品の選択回数、又は、前記各注文品の利益率を記憶し、
前記表示部は、前記選択回数がより多い注文品、又は、前記利益率がより高い注文品を前記下位フレーズ群の表示画面においてより高い順位に表示する、
音声翻訳プログラム。