(57)【要約】民生用アプリケーション装置を訓練することは、複数のユーザ呈示スピーチアイテムに基づく。進行具合が、特定の使用者のために到達される訓練状況に関して報告される。訓練状況は特に、それぞれの最小訓練レベルに関連する複数の訓練状況表示成熟状態を持つアニメーションのキャラクタ創造物によって、視覚的に表される。
2004521393.tif 000002
【特許請求の範囲】
【請求項１】
複数のユーザ呈示スピーチアイテムに基づいて、特定の使用者のために到達された訓練レベルに関する進捗状況をレポートする、民生用アプリケーション装置を訓練する方法において、それぞれ最小の訓練レベルに関連する複数の状況表示成熟状態を持つアニメーションのキャラクタ創造物によって、前記訓練レベルを視覚的に表すことを特徴とする方法。
【請求項２】
前記創造物は生物を表す請求項１に記載の方法。
【請求項３】
前記創造物は家で飼われる動物を表す、請求項１に記載の方法。
【請求項４】
前記動物は犬である、請求項３に記載の方法。
【請求項５】
前記創造物は少なくとも３つの状態を有する、請求項１に記載の方法。
【請求項６】
前記状態は、前記創造物のサイズ及び態度に関する、請求項１に記載の方法。
【請求項７】
前記状態は、前記創造物の動きに関する、請求項１に記載の方法。
【請求項８】
請求項１に記載の方法を実現するための民生用アプリケーション装置であって、複数のユーザ呈示スピーチアイテムのうちの１つを選択的に受信する受信手段と、特定の使用者のために到達された訓練レベルに関する進捗状況をレポートするレポート手段とを有する装置において、それぞれ最小の訓練レベルに関連する複数の状況表示成熟状態を持つアニメーションのキャラクタ創造物によって、前記訓練レベルを視覚的に表す視覚的表示手段を有することを特徴とする装置。
【請求項９】
複数の訓練レベルそれぞれは、当該装置の実行のため当該装置に示される動作命令のそれぞれのセットに関連する請求項８に記載の装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、請求項１のプリアンブル部に記載の方法に関する。このようなボイス制御アプリケーション装置は、オーディオセット、テレビセット、セットトップボックス等の形式で益々豊富になっている。本発明は、特定の使用者のためにある程度の訓練を必要とする、このような装置のユーザ依存スピーチ認識を持つ機能に対処する。対比において、ユーザから独立した認識は、通常充分に訓練されて来るだろう。しかし、ユーザの独立して訓練された装置をこれ以降開示される本発明のものと組み合わせることは、同様にこのようなシステムの機能を改善するだろう。
【０００２】
【従来の技術】
現在、典型的な現在の技術は、ＩＢＭ社に譲渡され１９９９年２月１０日に出願された米国特許出願シリアル番号第２４８ ２４３号に対応する欧州公開公報第ＥＰ−Ａ１−１ ０２８ ４１０号によって代表される。この参照文献は、訓練の間特定の表示されたテキスト項目を強調するのに色を用いる。しかしながら、本発明の発明者は、このような訓練動作が、到達した訓練レベルの一般の又は全体的な現状を示すためにユーザに理解されるフィードバックを示すことが利益を得ると認識した。特に、本発明者は、アニメーションのキャラクタの成熟状態が、到達した訓練レベルを広く表すものとして、直ちに認識できると認識した。
【０００３】
【課題を解決するための手段】
したがって、本発明の目的は、とりわけ、複数の成熟状態を特徴付ける理解可能なアニメーションのキャラクタ創造物の形式でユーザにフィードバックを呈示することである。よって、本発明の１つの側面は、請求項１の特徴部分によって特徴づけられる。
【０００４】
本発明は、請求項８に引用されるように、請求項１に記載の方法を実現するための民生用アプリケーション装置にも関する。他の有利な本発明の態様は、従属請求項において引用されている。
【０００５】
直観的な態様で、ボイス制御されたシステムの訓練状況をユーザに提示することが説明される。典型的にスピーカ依存システムにおいては、複数のチャネルを通じた素早い動き、斯様なチャネルの正しいプログラミング及び設定など、完全な機能性に到達する前には、達成される複数の語又は句がユーザによって訓練されなければならない。対照的に、スピーカに依存しないシステムでは、訓練は基本的に既に存在する。しかしながら、本発明によって強調されることは、エラーマージンを与え並びに／又は命令及び／若しくは句の認識セットを広げることさえするだろう。本発明者は、要求の少ないユーザ、初期の使用、及びこれら以外の種々の場合に対して部分的な機能で既に充分であることを認識した。
【０００６】
他の状況では、部分的な訓練は、既に訓練されてしまうであろう家庭のメンバーのような人々の数に関係する。訓練レベルは、このようなレベルの部分又は数に対応する。特に、ユーザは、訓練がまだ終了していないことを知らされるべきだろう。以下の実施例では、ボイス制御の機能は、ユーザの視点から与えられた命令を解釈し、システムの命令へ翻訳する、犬のようなアニメーションのキャラクタによって示されるとする。実施例は、システムの訓練状況を連絡するために成長する創造物の成熟現状のメタファを使用する。特に、幼い子犬は、まだ訓練がされていなかったシステムを表すだろう。当のユーザのために、このような状況ではシステムは充分にまだ訓練されていなかったボイス命令を聞かないということが、より受け入れられることを示した。複数の訓練レベルが規定されてもよく、それぞれの訓練レベルは訓練のための語に関連する数に関係してもよい。レベルは、創造物の「成熟状態」にリンクされる。ユーザが新語を訓練する場合、創造物は育つだろう。各レベルは、認識される語のような、特定のボイスコマンドの効果上の特定のフィードバックを与えるのに使用される複数のアニメーションシーケンスを含んでもよい。
【０００７】
本発明のこれら及び他の側面並びに利点は、添付の図を参照し本発明の好ましい実施例の開示を参照して、更に詳細に後述する。
【０００８】
【発明の実施の形態】
図１は、テレビジョン・ディスプレイ２０及び関連する処理装置２２の中心にある一般のスピーチ使用アプリケーション装置を示す。しかしながら、本発明はまた、フルのテレビジョン画像より少ないフィーチャのディスプレイにも適用できる。特に、ディスプレイは、英数字キャラクタが付くアイコンを示すものに限られてもよい。簡潔にするために、記録、同調などのユーザ信号処理は省略された。また、ユーザ・モード及び他の機能性の中での種々のユーザ制御の選択も省略された。スピーチアイテムの受信及び認識だけに制限されてもよいが、アイテム２４は、双方向性でもよいスピーチチャネルを表す。スピーチ出力は有益であるが、必要条件ではない。適切な認識プロセス各々が正しいシステム命令に関連付けられるべきである、ユーザスピーチアイテムの蓄積をアイテム２６は表す。説明を簡単にするため、このようなアイテムのうち８つだけが示された。一般に、数はより大きいし、特定の語（テレビジョン、オン、声を出して等）、句（戻れ、ピクチャインピクチャ等）及び特定のチャネルの数のようなパラメータを有することができる。
【０００９】
訓練の間、装置は一連の命令シーケンスを行い、各命令は、ユーザによって発せられるべきであり、特定の回数（例えば３回）記憶されるべきである。記録の全体的な回数が非常に高くありえるゆえに、ユーザは複数のセッションにわたり訓練を分けることを好むだろう。シーケンス内の適当な位置で種々の命令を妥当に割当てて、その中の特定のサブセットの正しい記録は、最も頻繁なユーザ要求又は装置の部分的な機能性の要求をすでにしばしば満たすだろう。実施例では、ハッチングで示されるように２つの命令が訓練されていて、矢印３２により示されるように完全な訓練は８つの命令を必要とし、矢印３０によって示されるように４つの命令は既に動作の中間状態にあることを表すだろう。別の設定では、訓練されたスピーチアイテムの数は、どのスピーチアイテムが訓練されたかを問題にすることなく、種々の訓練状況を表すだろう。
【００１０】
アイテム２８は、手動制御機能を表す。特定の場合、ボイス制御機能は、どの手動制御もまだ未成熟のときにのみ必要である程度まで開発された。システムは、音声、セットトップボックス、入力装置、記録、蓄積、通信のような種々の数のユーザ機能性装置によって拡張されてもよいが、しかしながらこれらは本発明の原理及び動作を開示するための必要条件ではない。
【００１１】
図２は、本発明による訓練に関連するフローチャートを示す。ブロック３４において、システムは、装置のスイッチを入れる等により稼動し、必要なハードウェア及びソフトウェア設備は与えられる。ブロック３６において、実際の訓練レベルが表示され、図４ａ乃至図５ｆを参照して以下に更に詳細に説明される。まず最初には、もちろん、訓練は行われていない。訓練は、コードの入力又はスピーチ認識とは区別してボイス認識により信号が送られてもよい特定の人により、遂行されてもよい。ブロック３８において、システムは訓練がすでに完了されたかどうかを検出する。もし完了したならば、システムはブロック５０を通して図３に行く。
【００１２】
訓練がまだ不完全ならば、ブロック４０でシステムはユーザが訓練を続行したいかどうかを検出する。訓練が当のユーザのために全く行われなかった場合、このブロックはもちろんダミーである。訓練が望まれていない場合、システムはブロック５０を通じて出る。ブロック４２において、ユーザはシーケンス内の次の命令へシステムを訓練させる。図１の状況において、例えばこれは、最初の２つが正しく訓練されたので、第３のスピーチアイテムとなるだろう。したがって、ユーザは、声を出して表示されたテキストを読んだり、システムからスピーチアイテムを繰り返したり、又は他の処置により当の命令を入力する。各命令に対して、これは何回か例えば３回繰り返され、このことはブロック４２を通じた単一のトラバースの範囲内に含まれると理解されたい。ブロック４４において、適合しない命令、あまりに長い遅延等の誤りを調べる。誤っていたならば、システムは再び同じ命令で始まる。それ自体によって、このような訓練処置はありふれたものになったので、この技術の一般的なステートが参照される。
【００１３】
ブロック４４で分かるように、命令が十分に訓練された場合、ブロック４６において、システムは次の訓練レベルが到達されたかどうかを調べる。もし到達されていないのであれば、次の命令は、ブロック４２において訓練のために始められる。もし到達されていれば、システムは訓練レベルの全体的な表示状況を更新するためにブロック３６へ行く。
【００１４】
図３は、本発明による装置制御に関連するフローチャートを示す。ブロック５２において、図２のブロック５０からのエントリが表される。ブロック５４において、システムはボイスユーザ命令の受信を検出する。検出されなければ、ブロック５４は効果的に待ちループを構成する。検出されると、ブロック５６において適当な認識が点検される。もしそうであればブロック５８において、命令が実行され、適当であればブロック３６からアニメーションのキャラクタ創造物によって関連した反応を表示する等によってユーザにフィードバックが与えられる。更に、システムはブロック５４に戻る。ブロック５６において否定されると、システムは最初にユーザに繰り返しを求める。しかし、これが不確定な場合、種々の状況が存在する。第１の状況は、例えば、ユーザのボイスが変化して当のユーザのための訓練が不十分であるということである。他の場合は、特定のユーザのための訓練レベルが実際に与えられる命令と互換性がなかったということである。その場合システムはブロック６０を通して出て、ブロック４８を通して図２のフローチャートに入る。
【００１５】
図４ａ−４ｄは、犬の形でキャラクタの視覚化された表現実施例を示す。図４ａにおいて、犬はまだ訓練が命令の全体的なセットのいくつかの骨組みを達成するだけだったことを強調するためにまだ子犬である。図４ｂにおいて、訓練が特定の基本機能のために働くが、装置の精巧な制御に対してはまだ不十分である高いレベルに到達したことを強調するために、２、３ヵ月ぐらいたった犬である。図４ｃにおいて、訓練が更により高いレベルに到達し、多くの共通の機能が認識できることを強調するために、ほぼ１年たった犬である。図４ｄにおいて、全て又はほとんど全ての機能が認識できることを示すために、犬はさらに年をとっている。
【００１６】
図５ａ−５ｆは、犬の頭部についての種々の視覚化された表現を示す。図５ａにおいて、頭部の表現は、一般的な注意を引く表現である。図５ｂにおいて、頭部の表現は、驚きの表現であり、目はより広く開き口も開いている。図５ｃにおいて、頭部の表現は、不満の表現であり、一つの耳は垂下し一つの目はたるんでいる。図５ｄにおいて、頭部の表現は、強い不満の表現であり、両耳は垂下している。図５ｅにおいて、頭部の表現は、無関心の表現であり、両目は閉じ両耳は垂下している。現在、図５ａ−５ｄに示される種々のムード又は反応は、大人の犬の頭部にマッピングされていて、これらは本発明と同一の譲受人に譲渡された先行する特許出願ＰＨＮＬ０００１２９（出願人整理番号）で採用されていて、この先行出願はここに組み込まれる。同様に、これらのムード又は反応は、図４ａ−４ｃの犬自体によって示されるより幼い犬の頭部でマッピングされてもよい。他方、これら及び他のムード及び反応が図４ａ−４ｄに示される種々の成熟状態の犬の全身の表現でマッピングされてもよい。頭部の表現又は動きでマッピングされるムード又は反応に加えて、犬の体の他の種々の部分が、このようなムード又は反応を表現できる。これら種々の例は、尻尾を振ったり（積極的）、後脚を持ち上げたり（不満）、前足を持ち上げたり（心配）、髪を持ち上げたり（否定的）、（子犬が）吠えたり又は（大人の犬が）吠えたり（肯定的）することを含むだろう。
【００１７】
次に、図５ｆはスクリーン・フォーマットの実施例を示し、この場合犬の頭部を訓練されなければならない段階又はその実際の認識を示す時間のバーと組み合わせている。
【００１８】
図６ａ−６ｄは、本発明のためのアニメーションの創造物の種々の他の表現実施例を示す。最初の図６ａは、てんとうむしの昆虫の形で創造物を示す。完全に成熟した状況に進むと、テントウムシはその深紅色の殻の黒い点がさらに黒く成長すると理解される。この図において、昆虫は合計６つの黒点が可能であるがその中の２つだけを持っている。これは、どちらかというと訓練レベルが低いことを表すと理解される。昆虫は、周辺を動いたり、明るい赤に輝いたり、点が点滅したり、又は特定の態様で触覚が揺れることにより、ボイスの命令の正しい認識に反応してもよい。
【００１９】
図６ｂ乃至図６ｄにおいて、アニメーションの創造物は、旗竿である。ポールの下部にかたまり置かれた旗によって表されるので、図６ｂの訓練レベルは低い。図６ｃにおいて、旗がペナントだけの寸法を持つように示されるので、訓練レベルは中間である。図６ｄにおいて、充分に大きな旗が強風ではためいているように示されるので、訓練は完了している。もちろん、種々の中間訓練レベルは、示すことができた。色を変えたり、波を強調したりするなどして、旗はボイスの命令の正しい認識に反応してもよい。アニメーションの種々の他の創造物は、上記の開示を読むことから当業者には認識されるだろう。
【図面の簡単な説明】
【図１】一般のスピーチ使用のアプリケーション装置を示す。
【図２】本発明による訓練に関するフローチャートを示す。
【図３】本発明による装置制御に関連したフローチャートを示す。
【図４ａ】犬の形のキャラクタの視覚化表現実施例を示す。
【図４ｂ】犬の形のキャラクタの視覚化表現実施例を示す。
【図４ｃ】犬の形のキャラクタの視覚化表現実施例を示す。
【図４ｄ】犬の形のキャラクタの視覚化表現実施例を示す。
【図５ａ】犬の頭での視覚表現を示す。
【図５ｂ】犬の頭での視覚表現を示す。
【図５ｃ】犬の頭での視覚表現を示す。
【図５ｄ】犬の頭での視覚表現を示す。
【図５ｅ】犬の頭での視覚表現を示す。
【図５ｆ】スクリーン・フォーマットの実施例を示す。
【図６ａ】てんとうむしによる本発明の表現実施例を示す。
【図６ｂ】旗による本発明の表現実施例を示す。
【図６ｃ】旗による本発明の表現実施例を示す。
【図６ｄ】旗による本発明の表現実施例を示す。
【図１】
2004521393.tif 000003
【図２】
2004521393.tif 000004
【図３】
2004521393.tif 000005
【国際公開パンフレット】
2004521393.tif 000006
2004521393.tif 000007
2004521393.tif 000008
2004521393.tif 000009
2004521393.tif 000010
2004521393.tif 000011
2004521393.tif 000012
2004521393.tif 000013
2004521393.tif 000014
2004521393.tif 000015
2004521393.tif 000016
2004521393.tif 000017
2004521393.tif 000018
【国際調査報告】
2004521393.tif 000019
2004521393.tif 000020