(57)【要約】      （修正有）【課題】口の形状を考慮して音声を出したユーザを特定し、当該ユーザと、当該ユーザの音声の翻訳結果とを識別可能に表示する。【解決手段】ユーザの口の形状情報と、口の形状情報の口の形状における音声とが関連付けられた関連テーブルを記憶する記憶手段と、撮像結果を解析することにより、被写体のユーザを識別するユーザ識別情報に関連付けられた、当該ユーザの口の形状情報を取得する取得手段と、音声入力手段により入力されたユーザの音声が関連テーブルに関連付けられ記憶されている口の形状情報に一致する、取得手段により取得された口の形状情報に関連付けられたユーザ識別情報により識別されるユーザを、音声入力手段により入力された音声を出したユーザとして特定し、音声入力手段により入力されたユーザの音声の翻訳結果と、当該特定されたユーザとを識別可能に表示する表示手段を備える。【選択図】図３
2017117377.tif 000002
【特許請求の範囲】
【請求項１】
入力された音声を翻訳して表示する情報処理装置であって、
ユーザの口の形状情報と、前記口の形状情報の口の形状における音声とが関連付けられた関連テーブルを記憶する記憶手段と、
ユーザを撮像する撮像手段と、
前記撮像手段による撮像結果を表示する表示手段と、
ユーザの音声を入力する音声入力手段と、
前記撮像手段による撮像結果を解析することにより、被写体のユーザを識別するユーザ識別情報に関連付けられた、当該ユーザの口の形状情報を取得する取得手段と、
前記音声入力手段により入力されたユーザの音声が前記関連テーブルに関連付けられ記憶されている前記口の形状情報に一致する、前記取得手段により取得された前記口の形状情報に関連付けられたユーザ識別情報により識別されるユーザを、前記音声入力手段により入力された音声を出したユーザとして特定する特定手段と、
を備え、
前記表示手段は、前記音声入力手段により入力されたユーザの音声の翻訳結果と、前記特定手段により特定されたユーザとを識別可能に表示することを特徴とする情報処理装置。
【請求項２】
前記撮像手段により撮像された被写体のユーザを特定する特定手段と、
前記特定手段により特定されたユーザごとに、当該ユーザを識別するユーザ識別情報を付与する付与手段と、
を更に備え、
前記取得手段は、前記撮像手段による撮像結果を解析することにより、
前記付与手段により付与されたユーザ識別情報に関連付けられた、当該ユーザ識別情報により識別されるユーザの口の形状情報を取得することを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記表示手段により表示されたユーザの選択を受け付ける受付手段を更に備え、
前記取得手段は、前記受付手段による選択を受け付けたユーザを識別するユーザ識別情報に関連付けられた、当該ユーザの口の形状情報を取得することを特徴とする請求項１又は２に記載の情報処理装置。
【請求項４】
ユーザの口の形状情報と、前記口の形状情報の口の形状における音声とが関連付けられた関連テーブルを記憶する記憶手段を備え、入力された音声を翻訳して表示する情報処理装置における制御方法であって、
撮像手段が、ユーザを撮像する撮像工程と、
表示手段が、前記撮像工程による撮像結果を表示する表示工程と、
音声入力手段が、ユーザの音声を入力する音声入力工程と、
取得手段が、前記撮像工程による撮像結果を解析することにより、被写体のユーザを識別するユーザ識別情報に関連付けられた、当該ユーザの口の形状情報を取得する取得工程と、
特定手段が、前記音声入力工程により入力されたユーザの音声が前記関連テーブルに関連付けられ記憶されている前記口の形状情報に一致する、前記取得工程により取得された前記口の形状情報に関連付けられたユーザ識別情報により識別されるユーザを、前記音声入力工程により入力された音声を出したユーザとして特定する特定工程と、
を備え、
前記表示工程は、前記音声入力工程により入力されたユーザの音声の翻訳結果と、前記特定手段により特定されたユーザとを識別可能に表示することを特徴とする制御方法。
【請求項５】
ユーザの口の形状情報と、前記口の形状情報の口の形状における音声とが関連付けられた関連テーブルを記憶する記憶手段を備え、入力された音声を翻訳して表示する情報処理装置で読み取り実行可能なプログラムであって、
前記情報処理装置を、
ユーザを撮像する撮像手段と、
前記撮像手段による撮像結果を表示する表示手段と、
ユーザの音声を入力する音声入力手段と、
前記撮像手段による撮像結果を解析することにより、被写体のユーザを識別するユーザ識別情報に関連付けられた、当該ユーザの口の形状情報を取得する取得手段と、
前記音声入力手段により入力されたユーザの音声が前記関連テーブルに関連付けられ記憶されている前記口の形状情報に一致する、前記取得手段により取得された前記口の形状情報に関連付けられたユーザ識別情報により識別されるユーザを、前記音声入力手段により入力された音声を出したユーザとして特定する特定手段として機能させ、
前記表示手段は、前記音声入力手段により入力されたユーザの音声の翻訳結果と、前記特定手段により特定されたユーザとを識別可能に表示することを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置、及びその制御方法、プログラムに関し、特に、口の形状を考慮して音声を出したユーザを特定し、当該ユーザと、当該ユーザの音声の翻訳結果とを識別可能に表示する技術に関するものである。
【背景技術】
【０００２】
従来、特許文献１には、画像データ中から人物領域を抽出し、その画像特徴量を算出し、該画像特徴量により人物を推定するとともに、音声データから音声特徴量を算出し、該音声特徴量により人物を推定し、前記画像データから推定された人物と、音声データから推定された人物とが同一シーン内に同時に発生する状況の統計をとり、前記統計の結果に基づいて、前記音声データを発した人物を特定し、前記音声データを文字化して、表示画面上で前記特定された人物の近くに表示することが提案されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−５６２８６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１は、口の形状と音声を考慮して音声を出したユーザを特定し、ユーザの音声の翻訳結果と、当該特定されたユーザとを識別可能に表示するものではない。
【０００５】
そのため、たとえば、従来、カメラの修理会場に修理の依頼に来た外国人グループの誰が、何をしゃべっているのかが分かり難く、カメラの修理担当者は、誰に対して、返答すればよいのか分かり難かった。
【０００６】
そこで、本発明の目的は、口の形状を考慮して音声を出したユーザを特定し、当該ユーザと、当該ユーザの音声の翻訳結果とを識別可能に表示する仕組みを提供することである。
【課題を解決するための手段】
【０００７】
本発明は、入力された音声を翻訳して表示する情報処理装置であって、ユーザの口の形状情報と、前記口の形状情報の口の形状における音声とが関連付けられた関連テーブルを記憶する記憶手段と、ユーザを撮像する撮像手段と、前記撮像手段による撮像結果を表示する表示手段と、ユーザの音声を入力する音声入力手段と、前記撮像手段による撮像結果を解析することにより、被写体のユーザを識別するユーザ識別情報に関連付けられた、当該ユーザの口の形状情報を取得する取得手段と、前記音声入力手段により入力されたユーザの音声が前記関連テーブルに関連付けられ記憶されている前記口の形状情報に一致する、前記取得手段により取得された前記口の形状情報に関連付けられたユーザ識別情報により識別されるユーザを、前記音声入力手段により入力された音声を出したユーザとして特定する特定手段と、を備え、前記表示手段は、前記音声入力手段により入力されたユーザの音声の翻訳結果と、前記特定手段により特定されたユーザとを識別可能に表示することを特徴とする。
【０００８】
また、本発明は、ユーザの口の形状情報と、前記口の形状情報の口の形状における音声とが関連付けられた関連テーブルを記憶する記憶手段を備え、入力された音声を翻訳して表示する情報処理装置における制御方法であって、撮像手段が、ユーザを撮像する撮像工程と、表示手段が、前記撮像工程による撮像結果を表示する表示工程と、音声入力手段が、ユーザの音声を入力する音声入力工程と、取得手段が、前記撮像工程による撮像結果を解析することにより、被写体のユーザを識別するユーザ識別情報に関連付けられた、当該ユーザの口の形状情報を取得する取得工程と、特定手段が、前記音声入力工程により入力されたユーザの音声が前記関連テーブルに関連付けられ記憶されている前記口の形状情報に一致する、前記取得工程により取得された前記口の形状情報に関連付けられたユーザ識別情報により識別されるユーザを、前記音声入力工程により入力された音声を出したユーザとして特定する特定工程と、を備え、前記表示工程は、前記音声入力工程により入力されたユーザの音声の翻訳結果と、前記特定手段により特定されたユーザとを識別可能に表示することを特徴とする。
【０００９】
また、本発明は、ユーザの口の形状情報と、前記口の形状情報の口の形状における音声とが関連付けられた関連テーブルを記憶する記憶手段を備え、入力された音声を翻訳して表示する情報処理装置で読み取り実行可能なプログラムであって、前記情報処理装置を、ユーザを撮像する撮像手段と、前記撮像手段による撮像結果を表示する表示手段と、ユーザの音声を入力する音声入力手段と、前記撮像手段による撮像結果を解析することにより、被写体のユーザを識別するユーザ識別情報に関連付けられた、当該ユーザの口の形状情報を取得する取得手段と、前記音声入力手段により入力されたユーザの音声が前記関連テーブルに関連付けられ記憶されている前記口の形状情報に一致する、前記取得手段により取得された前記口の形状情報に関連付けられたユーザ識別情報により識別されるユーザを、前記音声入力手段により入力された音声を出したユーザとして特定する特定手段として機能させ、前記表示手段は、前記音声入力手段により入力されたユーザの音声の翻訳結果と、前記特定手段により特定されたユーザとを識別可能に表示することを特徴とする。
【発明の効果】
【００１０】
本発明によれば、口の形状を考慮して音声を出したユーザを特定し、当該ユーザと、当該ユーザの音声の翻訳結果とを識別可能に表示することができる。
【図面の簡単な説明】
【００１１】
【図１】本発明の実施形態に係る情報処理装置の構成を示す図である。
【図２】図１に示した情報処理装置１００のハードウエア構成の一例を示す図である。
【図３】担当者１０５の音声データを登録する、又は、音声の翻訳を開始する指示を受け付ける画面３０１、音声登録の開始指示、及び終了指示を受け付ける画面３０２の一例を示す図である。
【図４】特定された人物ごとに、ユニークな番号を採番する（ナンバリング）して、表示部に表示された画面の一例を示す図である。
【図５】情報処理装置１００に、担当者１０５の音声データを登録する処理の一例を示すフローチャートである。
【図６】情報処理装置１００がマイクロフォン１０２から入力された音声データを翻訳して表示又は翻訳結果をスピーカー１０３から出力する処理の一例を示すフローチャートである。
【図７】関連テーブル７０１、担当者の音声データテーブル７０２の一例を示す図である。
【発明を実施するための形態】
【００１２】
以下、図面を参照して、本発明の実施形態を詳細に説明する。
図１は、本発明の実施形態に係る情報処理装置の構成を示す図である。
【００１３】
図１に示す情報処理装置１００は、デジタルカメラなどの撮像装置１０１、マイクロフォン（マイクとも言う）、スピーカー１０３を備えている。
【００１４】
そして、情報処理装置１００は、例えば、カメラの修理業者などの担当者１０５が、情報処理装置１００を操作し、客であるユーザ１０４が発声する音声をマイクロフォン１０２が音声データに変換して、当該変換された音声データを翻訳して表示する機能を備えている。
【００１５】
また、情報処理装置１００は、担当者１０５が発声した音声をマイクロフォン１０２が音声データに変換して、当該変換された音声データを翻訳して、表示したり、スピーカー１０３から音声を出力する（出す）機能を備えている。
【００１６】
以下、図２を用いて、図１に示した情報処理装置１００のハードウエア構成の一例について説明する。
【００１７】
図１の情報処理装置１００は、デジタルカメラなどの撮像装置１０１、マイクロフォン（マイクとも言う）、スピーカー１０３を備えているが、既に、図１で説明しているため、図２では、これらの構成については説明を省略する。
図２は、図１に示した情報処理装置１００のハードウエア構成の一例を示す図である。
【００１８】
図２において、２０１はＣＰＵで、システムバス２０４に接続される各デバイスやコントローラを統括的に制御する。また、ＲＯＭ２０３あるいは外部メモリ２１１には、ＣＰＵ２０１の制御プログラムであるＢＩＯＳ（Ｂａｓｉｃ  Ｉｎｐｕｔ  ／  Ｏｕｔｐｕｔ  Ｓｙｓｔｅｍ）やオペレーティングシステムプログラム（以下、ＯＳ）や、各サーバ或いは各ＰＣの実行する機能を実現するために必要な各種プログラム、図７に示す各テーブル等が記憶されている。
【００１９】
２０２はＲＡＭで、ＣＰＵ２０１の主メモリ、ワークエリア等として機能する。ＣＰＵ２０１は、処理の実行に際して必要なプログラム等をＲＯＭ２０３あるいは外部メモリ２１１からＲＡＭ２０２にロードして、該ロードしたプログラムを実行することで各種動作を実現するものである。
【００２０】
また、２０５は入力コントローラで、入力装置２０９等からの入力を制御する。２０６はビデオコントローラで、液晶ディスプレイ等の表示装置２１０（表示部）への表示を制御する。なお、ディスプレイ装置は、液晶ディスプレイに限られず、ＣＲＴディスプレイなどであっても良い。これらは必要に応じてクライアントが使用するものである。
【００２１】
２０７はメモリコントローラで、ブートプログラム，各種のアプリケーション，フォントデータ，ユーザファイル，編集ファイル，各種データ等を記憶するハードディスク（ＨＤ）や、フレキシブルディスク（ＦＤ）、或いはＰＣＭＣＩＡカードスロットにアダプタを介して接続されるコンパクトフラッシュ（登録商標）メモリ等の外部メモリ２１１へのアクセスを制御する。
【００２２】
２０８は通信Ｉ／Ｆコントローラで、ネットワーク（例えば、図１に示したＬＡＮ１０３）を介して外部機器と接続・通信するものであり、ネットワークでの通信制御処理を実行する。例えば、ＴＣＰ／ＩＰを用いた通信等が可能である。
【００２３】
なお、ＣＰＵ２０１は、例えばＲＡＭ２０２内の表示情報用領域へアウトラインフォントの展開（ラスタライズ）処理を実行することにより、表示装置２１０上での表示を可能としている。また、ＣＰＵ２０１は、表示装置２１０上の不図示のマウスカーソル等でのユーザ指示を可能とする。
【００２４】
ハードウエア上で動作する各種プログラムは、外部メモリ２１１に記録されており、必要に応じてＲＡＭ２０２にロードされることによりＣＰＵ２０１によって実行されるものである。
【００２５】
次に、図５を用いて、情報処理装置１００に、担当者１０５の音声データを登録する処理について説明する。
【００２６】
図５は、情報処理装置１００に、担当者１０５の音声データを登録する処理の一例を示すフローチャートである。
【００２７】
図５に示す各ステップの処理は、情報処理装置１００のメモリに記憶されているプログラムによる制御に従って情報処理装置１００のＣＰＵが実行する。
まず、情報処理装置１００は、図３の３０１に示す画面を表示部に表示する。
【００２８】
図３の３０１は、担当者１０５の音声データを登録する、又は、音声の翻訳を開始する指示を受け付ける画面の一例である。
【００２９】
そして、情報処理装置１００は、担当者１０５から、担当者音声登録ボタン３０３の押下を受け付ける（Ｓ５０１）。
【００３０】
次に、情報処理装置１００は、複数の担当者のボタン３０２の中から、現在操作している担当者のボタンの押下を受け付ける（Ｓ５０２）。
【００３１】
すると、情報処理装置１００は、画面３０５を表示部に表示して、担当者１０５による登録開始ボタン３０６の押下を受け付ける（Ｓ５０３）。そして、情報処理装置１００は、マイクロフォン１０２から入力される音声データの登録を開始する。
そして、担当者１０５は、所定の言葉をマイクロフォン１０２に対して発声する。
【００３２】
情報処理装置１００は、マイクロフォン１０２から入力された担当者１０５の音声データをメモリに登録（録音）する。
【００３３】
そして、情報処理装置１００は、ユーザによる登録完了ボタン３０７の押下を受け付けると、マイクロフォン１０２から入力された担当者１０５の音声データをメモリに登録（録音）する処理を終了する（Ｓ５０４）。
【００３４】
すると、情報処理装置１００は、ステップＳ５０３からステップＳ５０４までの間に、マイクロフォン１０２から入力された担当者１０５の音声データを、図７に示す音声データテーブル７０２に登録する（Ｓ５０５）。
図７の７０２は、担当者の音声データテーブル７０２の一例を示す図である。
【００３５】
担当者の音声データテーブル７０２には、担当者１０５を識別するための情報と、当該担当者の音声データ／音声特徴データが登録されている。
【００３６】
Ｓ５０５では、Ｓ５０２で選択されたボタンの担当者を識別するための識別情報（担当者Ａ、Ｂ、Ｃなど）と、ステップＳ５０３からステップＳ５０４までの間に、マイクロフォン１０２から入力された担当者１０５の音声データとを関連付けて音声データテーブル７０２に登録する。
【００３７】
そして、情報処理装置１００は、ユーザにより、終了する指示を受け付けた場合には（Ｓ５０６：ＹＥＳ）、処理を終了し、終了する指示を受け付けていない場合には（Ｓ５０６：ＮＯ）、処理をステップＳ５０１に戻す。
【００３８】
次に、図６を用いて、情報処理装置１００がマイクロフォン１０２から入力された音声データを翻訳して表示又は翻訳結果をスピーカー１０３から出力する処理について説明する。
【００３９】
図６は、情報処理装置１００がマイクロフォン１０２から入力された音声データを翻訳して表示又は翻訳結果をスピーカー１０３から出力する処理の一例を示すフローチャートである。
【００４０】
図６に示す各ステップの処理は、情報処理装置１００のメモリに記憶されているプログラムによる制御に従って情報処理装置１００のＣＰＵが実行する。
まず、情報処理装置１００は、図３の３０１に示す画面を表示部に表示する。
【００４１】
情報処理装置１００は、３０２の中から、ユーザから、現在操作しているユーザ（担当者）のボタンの押下を受け付ける（Ｓ６０１）。
【００４２】
そして、情報処理装置１００は、ユーザによる音声翻訳開始ボタン３０４の押下を受け付ける（Ｓ６０２）。
すると、情報処理装置１００は、撮像装置１０１が客（ユーザ）１０４の撮像を開始する。
【００４３】
そして、情報処理装置１００は、当該撮像された撮影結果（動画、又は静止画）を解析して、その中から人物を特定（認識）する。複数人の被写体がいる場合には、複数人特定する。
【００４４】
これは、本発明の、撮像手段により撮像された被写体のユーザを特定する特定手段の適用例である。
【００４５】
そして、情報処理装置１００は、当該特定された人物ごとに、ユニークな番号を採番する（ナンバリング）して、例えば、図４の（Ａ）又は（Ｂ）の画面のように、表示部に表示する（Ｓ６０３）。
【００４６】
当該特定された人物ごとに、ユニークな番号を採番する（ナンバリング）処理は、本発明の、特定手段により特定されたユーザごとに、当該ユーザを識別するユーザ識別情報を付与する付与手段の適用例である。
図４の（Ａ）の画面４０１の例では、１番が、人物に採番されている。
【００４７】
図４の（Ｂ）の画面４０１の例では、複数人の被写体が認識され、それぞれに対して、１番〜３番の値が、各人物に採番されている。
４０２は、被写体に対して、採番された番号が付与されて表示された画面の一例である。
【００４８】
そして、情報処理装置１００は、表示部に表示された画面の中から、翻訳したい被写体（客：ユーザ）の選択をユーザから受け付け、当該選択された被写体の翻訳を開始する（Ｓ６０４）。
【００４９】
Ｓ６０４では、翻訳したい被写体（客：ユーザ）の選択をユーザから受け付けるようにしたが、
【００５０】
図４の４０３に、人物ごとにナンバリングされた番号（ユーザ識別情報）と、その人物が発した音声データを文字に変換した当該文字とを表示し、４０３に表示された番号を選択することで、翻訳したい被写体（客：ユーザ）の選択するようにすることもできる。
【００５１】
Ｓ６０４は、本発明の、表示手段により表示されたユーザの選択を受け付ける受付手段の適用例である。
【００５２】
そして、情報処理装置１００は、マイクロフォン１０２から、被写体（客（ユーザ）１０４）からの音声（音声データ）の入力を受け付ける（Ｓ６０５）。
ステップＳ６０５は、本発明の、ユーザの音声を入力する音声入力手段の適用例である。
【００５３】
すると、情報処理装置１００は、Ｓ６０５で入力を受け付けた音声データと、ステップＳ６０１で選択されたボタンの担当者の図７の７０２に登録された音声データとを比較して、同じ音声データであるか否かを判定することで、Ｓ６０５で入力を受け付けた音声データを発したユーザが担当者１０５であるか、客（ユーザ）１０４であるかを判定する（Ｓ６０６）。
【００５４】
そして、情報処理装置１００は、Ｓ６０５で入力を受け付けた音声データを発したユーザが、担当者１０５であると判定された場合には（ＹＥＳ）、処理をステップＳ６１１に移行して、一方、客（ユーザ）１０４であると判定された場合には（ＮＯ）、処理をステップＳ６０７に移行する。
【００５５】
情報処理装置１００は、ステップＳ６０５で入力された音声データを発していた客（ユーザ）１０４の撮像装置１０１による撮像結果（動画、又は静止画）を解析して、Ｓ６０４で選択された人物（客（ユーザ）１０４）の識別情報（採番された番号）と、当該客（ユーザ）１０４の口の形状を示す口の形状情報とを取得する（Ｓ６０７）。
【００５６】
Ｓ６０７は、本発明の取得手段の適用例であり、撮像手段（撮像装置１０１）による撮像結果を解析することにより、被写体のユーザ（客（ユーザ）１０４）を識別するユーザ識別情報（採番された番号）に関連付けられた、当該ユーザの口の形状情報を取得する。
【００５７】
次に、情報処理装置１００は、Ｓ６０５（音声入力手段）により入力されたユーザの音声（音声データ）が関連テーブル７０１に関連付けられ記憶されている口の形状情報に一致する、Ｓ６０７（取得手段）により取得された口の形状情報に関連付けられたユーザ識別情報（採番された番号）により識別されるユーザを、Ｓ６０５（音声入力手段）により入力された音声を出したユーザとして特定する（特定手段）（Ｓ６０８）。
【００５８】
Ｓ６０８では、Ｓ６０５（音声入力手段）により入力されたユーザの音声データと、Ｓ６０７で取得された当該ユーザの口の形状情報とが一致するレコードを関連テーブル７０１の中から特定する。
【００５９】
そして、情報処理装置１００は、当該レコードの「言語」が、Ｓ６０５で入力された音声の言語として特定する。また、情報処理装置１００は、当該レコードに「日本語文字」として登録されている文字を翻訳結果として特定することにより、Ｓ６０５で入力された音声データの翻訳を行う（Ｓ６０９）。
図７の７０１は、関連テーブルの一例を示す図である。
【００６０】
関連テーブル７０１には、「口の形状」、「音声」、「言語」、「外国語文字」、「日本語文字」の項目で構成されている。
【００６１】
「口の形状」には、口の形状情報が記憶されている。また、「音声」には、当該口の形状情報の際に発声される音声の音声データが記憶されている。また、「言語」には、当該音声の言語が記憶されている。また、「外国語文字」には、当該口の形状情報の際に発声される音声の文字が記憶されている。また、「日本語文字」には、当該口の形状情報の際に発声される音声の日本語への翻訳文字が記憶されている。
【００６２】
図７に示す関連テーブル７０１は、本発明の、ユーザの口の形状情報と、口の形状情報の口の形状における音声とが関連付けられた関連テーブルの適用例であり、このテーブルは、メモリなどの記憶手段に記憶されている。
図６の説明に戻る。
【００６３】
情報処理装置１００は、Ｓ６０４で選択されたユーザのＳ６０５で入力されたユーザの音声データの翻訳結果（翻訳文字）と、Ｓ６０８により特定されたユーザとを識別可能に表示する（Ｓ６１０）。
【００６４】
具体的には、図４の４０４に示すように、Ｓ６０４で担当者１０５により選択された客（ユーザ）１０４のユーザ識別情報（採番された番号：例えば、「２」）と、そのユーザ識別情報により識別されるユーザが発してＳ６０５で入力された音声データのＳ６０９での翻訳結果（例えば、「こんにちは」）とを表示している。
【００６５】
そして、情報処理装置１００は、Ｓ６１０の処理を実行すると、処理をステップＳ６１３に移行する。
【００６６】
情報処理装置１００は、ユーザにより、終了する指示を受け付けた場合には（Ｓ６１３：ＹＥＳ）、処理を終了し、終了する指示を受け付けていない場合には（Ｓ６１３：ＮＯ）、処理をステップＳ６０１に戻す。
【００６７】
情報処理装置１００は、Ｓ６０５で入力を受け付けた音声データを発したユーザが、担当者１０５であると判定された場合には（ＹＥＳ）、ステップＳ６１１において、当該音声データを、Ｓ６０９で特定された言語（外国語）に翻訳し（Ｓ６１１）、その翻訳結果を表示部に表示すると共に、スピーカー１０３から出力（発声）する（Ｓ６１２）。そして、情報処理装置１００は、処理をＳ６１３に移行する。
【００６８】
Ｓ６０３、Ｓ６１０は、本発明の表示手段の適用例であり、撮像手段による撮像結果を表示する。また、Ｓ６０３、Ｓ６１０は、音声入力手段により入力されたユーザの音声の翻訳結果と、特定手段により特定されたユーザとを識別可能に表示する。
【００６９】
以上、本発明によれば、口の形状を考慮して音声を出したユーザを特定し、当該ユーザと、当該ユーザの音声の翻訳結果とを識別可能に表示することができる。
【００７０】
また、本発明の目的は、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ）が記憶媒体に格納されたプログラムコードを読み出し実行することによっても、達成されることは言うまでもない。
【００７１】
この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、プログラムコード自体及びそのプログラムコードを記憶した記憶媒体は本発明を構成することになる。
【００７２】
プログラムコードを供給するための記憶媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、磁気テープ、不揮発性のカード、ＲＯＭ等を用いることができる。
【００７３】
また、コンピュータが読み出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているＯＳ（基本システム或いはオペレーティングシステム）などが実際の処理の一部又は全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。このプログラムコードを読み出し実行可能な情報処理装置（コンピュータ）が前述した実施形態の機能を実現する。
【００７４】
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部又は全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【符号の説明】
【００７５】
１００    情報処理装置
１０１    撮像装置
１０２    マイクロフォン
１０３    スピーカー
【図１】
2017117377.tif 000003
【図２】
2017117377.tif 000004
【図３】
2017117377.tif 000005
【図４】
2017117377.tif 000006
【図５】
2017117377.tif 000007
【図６】
2017117377.tif 000008
【図７】
2017117377.tif 000009