(57)【要約】ピクチャー・イン・ピクチャー（ＰＩＰ）・ディスプレイと、音声入力装置と、画像入力装置と、プロセッサとを有するビデオ表示装置である。本装置は、ユーザからの音声の指示と関連するジェスチャーの組み合わせを利用し、ディスプレイにおけるＰＩＰの位置や、ＰＩＰのサイズのような、ＰＩＰの表示特性を制御する。マイクロフォンが前記音声の指示を取得し、ＰＩＰ制御コマンドがユーザから指定されたことを判断する認識動作を、プロセッサが実行する。その後、前記カメラが、ジェスチャーを含む少なくともユーザのいくつかの部分を含むユーザの画像や連続した画像を取得する。そして、前記プロセッサがジェスチャーを識別し、音声の指示とジェスチャーの組み合わせに応じて、ＰＩＰの表示特性に影響を及ぼす。
2004531183.tif 000002
【特許請求の範囲】
【請求項１】
プライマリの画像と、前記プライマリの画像に覆い重なるピクチャー・イン・ピクチャーの画像（ＰＩＰ）とを表示するように構成されるディスプレイと、
前記ディスプレイに動作可能につなげられ、前記プライマリの画像のための第１のビデオ・データ・ストリームを受信し、前記ＰＩＰのための第２のビデオ・データ・ストリームを受信し、ユーザからの音声の指示と関連するジェスチャーに応じてＰＩＰの表示特性を変更するように構成されるプロセッサと
を有するビデオ表示装置。
【請求項２】
請求項１に記載のビデオ表示装置であって、
前記ＰＩＰの表示特性が前記ディスプレイにおける前記ＰＩＰの位置と、前記ＰＩＰのサイズのうちの少なくとも１つであるビデオ表示装置。
【請求項３】
請求項１に記載のビデオ表示装置であって、
前記ユーザから前記音声の指示を受信するマイクロフォンと、
前記関連するジェスチャーを有する前記ユーザの画像を取得するカメラと
を有するビデオ表示装置。
【請求項４】
請求項１に記載のビデオ表示装置であって、
前記プロセッサが、前記ユーザから受信した音声情報を分析し、ＰＩＰに関する音声の指示が前記ユーザから指定されたときを識別するように構成されるビデオ表示装置。
【請求項５】
請求項１に記載のビデオ表示装置であって、
前記プロセッサが、前記音声の指示が受信された後に、前記ユーザから受信した画像情報を分析し、前記受信したジェスチャーにより表現される前記ＰＩＰの表示特性についての変更を識別するように構成されるビデオ表示装置。
【請求項６】
請求項５に記載のビデオ表示装置であって、
前記画像情報は連続した画像に含まれ、前記プロセッサが、前記連続した画像を分析して、前記受信したジェスチャーを判断するように構成されるビデオ表示装置。
【請求項７】
請求項６に記載のビデオ表示装置であって、
前記プロセッサが、前記ユーザの手の軌道及び／又は位置を判断するように構成されるビデオ表示装置。
【請求項８】
請求項１に記載のビデオ表示装置であって、
前記ビデオ表示装置がテレビであるビデオ表示装置。
【請求項９】
プライマリのディスプレイに覆い重なるピクチャー・イン・ピクチャー・ディスプレイ（ＰＩＰ）の表示特性を制御する方法であって、
ユーザから音声の指示を受信し、
前記受信した音声の指示が、複数の期待される音声の指示の１つであるか否かを判断し、
前記受信した音声の指示が、複数の期待される音声の指示の１つである場合に、前記ユーザのジェスチャーを分析し、
前記ジェスチャーが前記受信した音声の指示に関連するジェスチャーである場合に、前記表示特性を制御する方法。
【請求項１０】
請求項９に記載の方法であって、
前記ジェスチャーを分析することが、
連続した画像を受信することと、
前記連続した画像を分析して、前記ジェスチャーを判断することと
を有する方法。
【請求項１１】
請求項１０に記載の方法であって、
前記連続した画像を分析することが、
前記ユーザの手の軌道及び／又は位置を判断することと、
判断された軌道及び／又は位置によって前記ジェスチャーを判断することと
を有する方法。
【請求項１２】
コンピュータプログラム製品であって、
そのコンピュータプログラム製品を実行するときに、プログラム可能な装置を、請求項１から８のうちのいずれかの１つに定義されたビデオ表示装置として機能させるコンピュータプログラム製品。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、概して、家庭用テレビの使用を向上させる方法と装置に関する。特に、本発明は、位置の変更および／またはサイズ変更が可能なピクチャー・イン・ピクチャー・ディスプレイ（ＰＩＰ）に関する。
【背景技術】
【０００２】
テレビが、テレビ・ディスプレイに同時に１つ以上のビデオ表示を表示する機能を有することは、一般的である。一般的に、ディスプレイが２つ以上の部分に分割され、前記ディスプレイの主要部分が、第１のビデオ・データ・ストリーム（例えば、所定のテレビチャンネル）に専用になる。第２のビデオ・データ・ストリームは、前記第１のデータ・ストリームの上のはめ込みとして表れるディスプレイボックスに、同時に表示される。前記はめ込みボックスは、一般的にピクチャー・イン・ピクチャー・ディスプレイ（ＰＩＰ）として示される。前記ＰＩＰは、テレビ視聴者に、２つ以上のビデオ・データ・ストリームを同時に見る機能を提供する。このことは、例えば、所定のテレビチャンネルでコマーシャルが始まり、視聴者が、コマーシャル中に他の選択されたテレビチャンネルを“あちこち切り替える”ことを望むが、コマーシャルから戻り損ねたくない場合に価値がある。またある時は、視聴者が、他のビデオコンテンツを探したいと思う場合があり、又は、選択したチャンネルのコンテンツを見逃すことなく、他のコンテンツを見たいと思う場合がある。
【０００３】
いずれにしても、一般的にＰＩＰが、プライマリのディスプレイの上に覆い重ねられたはめ込みボックスに表示されるという問題がある。前記覆い重ねられたＰＩＰは、前記プライマリのディスプレイの一部を隠すという、望ましくない結果を有する。
【０００４】
先行技術のシステムでは、前記ＰＩＰはリモコン入力を用いてサイズ変更ができ、よって、どのサイズであれば、前記ＰＩＰが下にあるビデオ画像の部分を隠すことを回避できるかをユーザが決め得る。他のシステムにおいては、ユーザは、ビデオスクリーンの事前に選択した位置や、可変の選択可能な位置に、前記ＰＩＰを移動するリモコンを利用し得る。しかし、このようなシステムは、ユーザが操作をするのに扱いにくく、紛らわしい。
【０００５】
あるシステムにおいては、テレビがボイス・コントロールに応答し、チャンネルの選択や、ボリューム制御のようなテレビ機能を制御し得る。しかし、前記システムは、ユーザがボイス・コントロールに精通していない場合に問題があり、音声認識システムは、異なる制御機能間を識別することに問題を有する。加えて、しばしば、コントロール・コマンドとして指定されていない音声信号が生じうる。
【０００６】
コンピュータの視覚の技術において、ユーザのジェスチャーに応じて、所定のシステムの機能を制御する既知のシステムがあるが、前記システムは操作が困難であり、制御のジェスチャーとして指定されていないユーザによるジェスチャーを誤って検出し得る。
【０００７】
従って、先行技術の不都合を克服することが本発明の目的である。
【発明の開示】
【課題を解決するための手段】
【０００８】
本発明は、ピクチャー・イン・ピクチャー（ＰＩＰ）・ディスプレイとプロセッサを有する、テレビのようなビデオ表示装置を有するシステムである。本システムは、本発明に従って操作する、マイクロフォンのような音声入力装置と、カメラのようなビデオ入力装置とを更に有する。
【０００９】
本システムは、ユーザからの音声の指示と、関連するジェスチャーの組み合わせを利用し、ディスプレイにおけるＰＩＰの位置や、ＰＩＰのサイズ等の、ＰＩＰの表示特性を制御する。前記マイクロフォンが音声の指示を取得し、前記プロセッサが、ＰＩＰ制御コマンドがユーザから指定されることを判断する認識動作を実行する。その後、ジェスチャーを含むユーザの少なくともいくつかの部分を含む、ユーザの画像又は連続した画像を前記カメラが取得する。そして、前記プロセッサが前記ジェスチャーを識別し、音声の指示とジェスチャーの組み合わせに応じたＰＩＰの表示特性に影響を及ぼす。
【発明を実施するための最良の形態】
【００１０】
添付の図面と共に、前述の特徴と利点と更なるものを説明する本発明の実施例の説明を以下に行う。図面は説明の目的で含まれており、特許請求の範囲に定義される本発明の範囲を表すものではないことが明白に理解されるべきである。本発明は添付の図面と共により良く理解される。
【００１１】
次の説明において、説明を容易にするために、特定の用語が特定の実施例やシステムに関して説明される。通常の技術的に熟練した人に明白であるが、前記用語は、本発明が容易に適用可能な、他の類似の既知の用語を含むことがわかる。
【００１２】
図１は本発明の実施例による、一例のシステムを示したものであり、ディスプレイ１１０と、動作可能につなげられたプロセッサ１２０と、遠隔制御装置１３０とを含む。前記プロセッサ１２０と、前記遠隔制御装置１３０とは、技術的に既知のように、前記プロセッサ１２０に動作可能につなげられた赤外線（ＩＲ）受信装置１２５と、前記遠隔制御装置１３０に動作可能につなげられたＩＲ送信装置１３１とを介して、動作可能につなげられる。
【００１３】
前記ディスプレイ１１０は、テレビ受信機でもよく、ユーザが視聴するオーディオビジュアル・コンテンツを再生することが可能な他の装置でもよい。前記プロセッサ１２０は、通常の技術的に熟練した人に既知の通り、前記ディスプレイ１１０に、ピクチャー・イン・ピクチャー・ディスプレイ（ＰＩＰ）を作るように操作可能である。更に前記プロセッサ１２０は、本発明に従って、ＰＩＰディスプレイを提供し、位置を合わせ、サイズを合わせるように操作可能である。
【００１４】
前記遠隔制御装置１３０は、技術的に既知のように操作するボタンを含む。特に、前記遠隔制御装置は、ＰＩＰボタン１３４と、交換ボタン１３２と、ＰＩＰ位置制御ボタン１３７Ａ、１３７Ｂ、１３７Ｃ、１３７Ｄとを含む。前記ＰＩＰボタン１３４は、前記ディスプレイ１１０にＰＩＰを開くＰＩＰ機能を起動するために使用され得る。前記交換ボタン１３２は、ＰＩＰの画像と、前記ディスプレイ１１０に表示されるプライマリの画像とのそれぞれを交換する。前記ＰＩＰ位置制御ボタン１３７Ａ、１３７Ｂ、１３７Ｃ、１３７Ｄは、前記ディスプレイ１１０の選択可能な位置に、ユーザが手動によりＰＩＰの位置の変更することを可能にする。前記遠隔制御装置１３０は、技術的に既知のように、チャンネル選択キー１３９Ａ、１３８Ｂと、ＰＩＰとプライマリのディスプレイ画像のそれぞれのビデオ・データ・ストリームを選択する１３８Ａ、１３８Ｂのような、他の制御ボタンをも含む。
【００１５】
通常の技術的に熟練した人に明白なように、前記ボタン１３８Ａ、１３８Ｂ、１３９Ａ、１３９Ｂがチャンネル選択ボタンとして図示されているが、前記ボタン１３８Ａ、１３８Ｂ、１３９Ａ、１３９Ｂはまた、１つ以上のビデオの出所からの複数のビデオ・データ・ストリームから選択し得る。例えば、各ビデオ・データ・ストリーム（例えば、ＰＩＰとプライマリのディスプレイ画像）の１つの出所は、放送のビデオ・データ・ストリームであり、他の出所はストレージ装置であるかもしれない。前記ストレージ装置は、テープ・ストレージ装置（例えば、ＶＨＳアナログテープ）や、ハードディスク・ドライブのようなデジタル・ストレージ装置や、光学ストレージ装置等や、又は、ビデオ・データ・ストリームを蓄積する他の形式の既知の装置であるかもしれない。実際に、ＰＩＰとプライマリのディスプレイ画像のそれぞれのビデオ・データ・ストリームの何らかの出所は、本発明の範囲外に出ることなく、本発明に従って利用され得る。
【００１６】
しかし、前述の通り、前記遠隔制御装置は紛らわしく、ＰＩＰの操作に利用することが困難である。さらに、しばしば、プライマリのディスプレイ画像の変化に応じて、ＰＩＰが、サイズ変更や移動のような操作を必要とする。例えば、プライマリのディスプレイ画像の場面の変化が生じると、プライマリのディスプレイ画像における関心を有する領域が変わり得る。
【００１７】
本発明に従って、ＰＩＰの操作、特にＰＩＰの表示特性（例えばサイズや位置等）の操作を容易にするため、前記プロセッサは、マイクロフォン１２２のような音声入力装置と、カメラ１２４のような画像入力装置とに動作可能につなげられる。前記マイクロフォン１２２と前記カメラ１２４は、それぞれ、ユーザ１４０からの音声の指示と関連するジェスチャーとを取得するために利用され、ＰＩＰの制御を容易にする。
【００１８】
特に、本発明に従って、音声の指示１４２と、それに続く関連するジェスチャー１４４との組み合わせが、ＰＩＰを制御するシステム１００で利用される。前記音声の指示１４２と、それに続く関連するジェスチャー１４４の連続はまた、ＰＩＰを起動する（例えば、スイッチを入れる）ためにも利用され得る。前記音声の指示１４２と前記ジェスチャー１４４は、音声の指示とＰＩＰ制御を指定していないユーザのジェスチャーとの間を、システム１００が識別できるように関連付けられる。特に、音声の指示１４２と、それに続くジェスチャー１４４との組み合わせは、システム１００が配置される領域内やその周りをユーザが動くことにより生じ得る、擬似のバックグラウンド音楽やジェスチャーに応じて、システム１００が誤って起動することを防ぐのに役立つ。
【００１９】
更に、前記音声の指示１４２と前記ジェスチャー１４４は、コマンドに関連するＰＩＰのサイズと位置との間をシステム１００が識別し得るように関連付けられる。特に、所定のジェスチャーは、２つ以上の異なる音声の指示に関連付けられ得る。例えば、“ＰＩＰのサイズ”という音声の指示と、その後の“親指を立てる”というジェスチャーは、ユーザがＰＩＰのサイズを拡大するために使用され得る。しかし、“ＰＩＰの位置”という音声の指示と、その後の“親指を立てる”というジェスチャーは、ＰＩＰを上方向に位置の移動をするために使用され得る。本発明の動作について、図２と図３に関して本願で説明する。図２は、本発明の実施例による、フロー図２００を示したものである。図２のフロー図に示す通り、動作２０５の間に、ユーザ１４０が、システム１００に、特にマイクロフォン入力１２２に音声の指示１４２を提供する。前記音声の指示は、ＰＩＰに関するコマンドがユーザによって指定されことを、システムに示し、特に、どのＰＩＰ操作が希望されているかを示す。システム１００は、認識された音声の指示が受信されるまで、音声入力を受信し、解釈し続ける。認識された言葉によって、システム１００で知られている音声の指示をシステム１００が受信し、ＰＩＰの表示特性の操作に関連付けられなければならないことが指定される。
【００２０】
前記音声の指示１４２は、ユーザ１４０による“ＰＩＰ”という発声のような簡単な一言の言葉であり、ＰＩＰに関するジェスチャー１４４が続くということを単に示すものでるかもしれない。前述の通り、音声の指示とジェスチャーの組み合わせは、所定の音声の指示について、１つ以上のその後のジェスチャーが、システム１００により期待されるように関連付けられる。“ＰＩＰ“のような簡単な音声の指示の場合、その後のジェスチャーは、ＰＩＰに関する操作が期待されることをシステムに示す。例えば、指（例えば親指）を上や、下や、左や、右や、斜めに示す指示は、ＰＩＰの希望の位置を示すジェスチャーであるかもしれない。
【００２１】
音声の指示と、それに続く関連するジェスチャーの組み合わせはまた、別の音声の指示とそれに関するジェスチャー、又は遠隔制御装置１３０によって、以前は作動していなかったＰＩＰを作動させ得る。ＰＩＰのサイズを縮小したいことを示すために、２本の指を近づける等のような、ＰＩＰのサイズに関するコマンドが指定されることを示す、他のジェスチャーが使用され得る。ユーザは、ＰＩＰのサイズを拡大したいことを示すために、２本の指を離すことを使用し得る。
【００２２】
音声の指示とジェスチャーの前記の例は、単に、本発明の動作の説明を容易にするために示されており、限定するものとして考えられるものではない。音声の指示と対応するジェスチャーの多くの組み合わせが、通常の技術的に熟練した人にとって、容易に明白であろう。従って、前記の例は、特許請求の範囲を限定するものではないことがわかる。
【００２３】
前記継続する関連するジェスチャーが、ＰＩＰのサイズを変更するコマンドとして指定されることをシステム１００に示す、“ＰＩＰのサイズ”のように、前記音声の指示はまた、さらに複雑な複数の言葉の発声であるかもしれない。いずれにしても、動作２１０において、前記プロセッサ１２０は、ＰＩＰに関する音声の指示として、音声の指示を認識することを試みる。ジェスチャー認識に加えて、前記認識動作について、以下に更に説明する。音声の指示がＰＩＰに関する音声の指示として認識されない場合は、図２に示す通り、前記プロセッサ１２０は、動作２０５に戻り、ＰＩＰに関する音声の指示が認識されるまで、音声の指示を監視し続ける。
【００２４】
音声の指示がシステム１００により認識されると、動作２３０の間に、前記プロセッサ１２０は、前記カメラ１２４の使用を通じて、ユーザ１４０の画像、又は連続した画像を取得し得る。ユーザのジェスチャーを獲得し、認識する既知のシステムが存在する。例えば、Ｙｉｎｇ  ＷｕとＴｈｏｍａｓ  Ｓ．Ｈｕａｎｇによる、Ｐｒｏｃｅｅｄｉｎｇｓ  ｏｆ  Ｉｎｔｅｒｎａｔｉｏｎａｌ  Ｇｅｓｔｕｒｅ  Ｗｏｒｋｓｈｏｐ  １９９９  ｏｎ  Ｇｅｓｔｕｒｅ−Ｂａｓｅｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎ  ｉｎ  Ｈｕｍａｎ  Ｃｏｍｐｕｔｅｒ  Ｉｎｔｅｒａｃｔｉｏｎからの“Ｖｉｓｉｏｎ−Ｂａｓｅｄ  Ｇｅｓｔｕｒｅ  Ｒｅｃｏｇｎｉｔｉｏｎ：Ａ  Ｒｅｖｉｅｗ”という題名の出版物は、制御機能としてのジェスチャーの使用について説明する。本文献の全内容が参照として本願に取り込まれる。
【００２５】
概して、ジェスチャーを認識する２つの一般的な形式のシステムが存在する。一方のシステムは、一般に手話認識として称され、前記カメラ１２４は、１つの画像、又は数連続した画像を取得し、ユーザによる指定のジェスチャーを判断し得る。この形式のシステムは、一般的に、ユーザによるジェスチャーの静的な評価を行う。他方の既知のシステムにおいては、前記カメラ１２４は、連続した画像を取得し、ジェスチャーを動的に判断し得る。この形式のシステムは、一般的に動的／時間的ジェスチャー認識として称される。あるシステムにおいては、動的ジェスチャー認識は、手の軌道により分析され、その後、前記分析と、特定のジェスチャーに対応する軌道の学習したモデルとを比較することによって行われる。ジェスチャーと音声の指示を学習する処理の概要について、図３を参照して、以下に更に説明する。
【００２６】
通常の技術的に熟練した人に明白であるが、言葉を認識するシステムを教育する多くの既知の方法がある。また、ジェスチャーを静的に、及び動的に認識するシステムを教育する多くの既知の方法がある。以下の説明は、単に解説の目的のために本願で示される。従って、本発明は、前記の他の既知のシステムを含むことがわかる。
【００２７】
いずれにしても、動作２４０の間に、前記カメラ１２４が、画像や連続した画像を取得した後に、前記プロセッサ１２０はジェスチャーを識別することを試みる。前記プロセッサ１２０がジェスチャーを識別しない場合、前記プロセッサは動作２３０に戻り、ユーザ１４０の追加の画像、又は連続した画像を取得する。既知のジェスチャーが認識されずに、画像、又は連続した画像から、既知のジェスチャーを判断する事前に定められた回数の試みを行った後に、前記プロセッサ１２０は、動作２５０の間に、前記ジェスチャーが認識されなかったという指示を、ユーザ１４０に提供し得る。前記指示は、スピーカ１２８からの音声信号の形式でもよく、ディスプレイ１１０からの映像信号でもよい。本実施例又は他の実施例において、数回の試みの後に、システムは動作２０５に戻り、他の音声の指示を待ち得る。
【００２８】
前記プロセッサ１２０がジェスチャーを識別すると、動作２６０の間に、前記プロセッサ１２０は、メモリ１２６を検索することにより、要求されたＰＩＰ操作を判断する。前記メモリ１２６は、ＰＩＰ操作に対応して、システム１００が認識するジェスチャーを蓄積する参照テーブルのように構成され得る。動作２７０の間、要求されたＰＩＰ操作が、前記メモリ１２６から検索された後、前記プロセッサ１２０は要求されたＰＩＰ操作を実行する。そして、前記システムは、動作２０５に戻り、ユーザ１４０からの追加の音声の指示を待つ。
【００２９】
図３は、システム１００を教育して、言葉とジェスチャーの入力を認識する場合に使用され得る動作のフロー図を示したものである。言葉や声を認識する特定のシステムやアルゴリズム等は非常に異なるが、一般的な動作はいくらか類似する。特に、動作３１０において、言葉やジェスチャーを教育するシステムは、期待される音声の指示や、認識可能なジェスチャーのそれぞれに対する１つ以上の入力例を導いて取得する。前記用語“導く”により意図するところは、システムがユーザに特定の入力例を提供するように促すことである。
【００３０】
その後、動作３２０において、システムは、期待される音声の指示や、認識可能なジェスチャーのそれぞれに対する１つ以上の取得された入力例を、１つ以上の入力例を識別するラベルに関連付ける。動作３３０において、１つ以上のラベルが付けられた入力例は、分類装置（例えばプロセッサ１２０）に供給され、ユーザの指示を認識するために使用されるモデルを導き出す。
【００３１】
ある実施例においては、前記の教育は、設定手順の間にユーザと相互作用することにより、システム１００によって直接実行され得る。その他の実施例においては、前記の教育は、一般的にシステムのグループについて一度実行され、教育の結果（例えば、そこから導き出されるモデル）がメモリ１２６に蓄積される。さらにその他の実施例においては、システムのグループが、一度教育され、その結果をメモリ１２６に有し、その後、各システムが、モデルを洗練するためにユーザからの追加の入力／教育を導き得る。
【００３２】
最後に、前述の説明は、単に本発明の説明のために意図されたものである。特許請求の範囲の意図と範囲内において、通常の技術的に熟練した人により、多くのその他の実施例が考えられ得る。例えば、前記プロセッサ１２０は、ディスプレイ１１０から離れて示されているが、双方は、テレビのような単一のディスプレイ装置に組み合わせられ得る。加えて、プロセッサは、本発明に従って実行する専用のプロセッサでもよく、又は、本発明に従って実行するように多くの機能の１つのみが動作する汎用のプロセッサでもよい。加えて、前記プロセッサはプログラム部分や、複数のプログラム・セグメントを使用して動作してもよく、又は、専用又は多目的集積回路を使用したハードウェア装置であってもよい。
【００３３】
また、本発明は、テレビ・ディスプレイにおけるＰＩＰに関して説明したが、本発明は、コンピュータモニタや、何らかの他の既知のディスプレイ装置を含む、プライマリ画像とＰＩＰを表示することのできる何らかのディスプレイ装置に適当に利用し得る。
【００３４】
特許請求の範囲の意図及び範囲の外に出ることなく、多くのその他の実施例が、通常の技術的に熟練した人に考えられ得る。特許請求の範囲を解釈する場合、
ａ）  “有する”という言葉は、所定の請求項に挙げた以外の要素や動作の存在を除外するものではなく、
ｂ）  要素の前の“１つの”という言葉は、複数の要素の存在を除外するものではなく、
ｃ）  請求項の何らかの参照記号は、特許請求の範囲を限定するものではなく、
ｄ）  構成や機能を実現する同じアイテムやハードウェアやソフトウェアによって、いくつかの“手段”が表現され得る
ことがわかる。
【図面の簡単な説明】
【００３５】
【図１】本発明の実施例による、一例のシステムを示したものである。
【図２】本発明の実施例による、動作を示すフロー図を示したものである。
【図３】本発明の実施例により、音声の指示及び／又はジェスチャーをシステムが認識することを教育するために利用される設定手順を示すフロー図を示したものである。
【図１】
2004531183.tif 000003
【図２】
2004531183.tif 000004
【図３】
2004531183.tif 000005
【国際公開パンフレット】
2004531183.tif 000006
2004531183.tif 000007
2004531183.tif 000008
2004531183.tif 000009
2004531183.tif 000010
2004531183.tif 000011
2004531183.tif 000012
2004531183.tif 000013
2004531183.tif 000014
2004531183.tif 000015
2004531183.tif 000016
2004531183.tif 000017
2004531183.tif 000018
【国際調査報告】
2004531183.tif 000019
2004531183.tif 000020
2004531183.tif 000021