(57)【要約】発言認識部を操作するために、以下のステップが実行される。連結された発言アイテムのストリームが受けられ保存される。様々なそのような受けられた発言アイテムが認識される。認識された発言アイテムの表現が有効出力のために結合される。特に次のステップが実行される。ステップ（ａ）において、第一の未認識の発言アイテムが実際の限られた語彙に対する認識のために保存された発言アイテムから選択されて認識表現を得るかまたは（認識が）失敗する。ステップ（ａ）で認識失敗の場合、ステップ（ｂ）において、第２の未認識発言アイテムが認識のために選択される一方、上記の実際の限られた語彙が維持されステップ（ａ）に戻る。ステップ（ａ）において認識された場合、ステップ（ｃ）において第三の未認識アイテムが選択される一方、上記の実際の限られた語彙が改められる。有効出力に十分な認識量が得られるまで上記ステップ（ａ），（ｂ），（ｃ）が実行される。
2004516516.tif 000002
【特許請求の範囲】
【請求項１】
発言認識部を動作させる方法であって：
連結された発言アイテムのストリームを受けて保存するステップ；
様々なそのような発言アイテムを認識するステップ；および
有効な出力のために認識された発言アイテムの表現を結合させるステップ；
を含み、上記方法は：
実際の限られたボキャブラリーに対して認識を行うために第一未認識発言アイテムを上記保存された発言アイテムから選択して認識表現を得るかまたは認識に失敗するステップ（ａ）；
上記ステップ（ａ）で認識が失敗した場合には、上記実際の限られたボキャブラリーを維持したまま、認識を行うために第二未認識発言アイテムを選択し、上記ステップ（ａ）に戻るステップ（ｂ）；
上記ステップ（ａ）において認識された場合には、上記実際の限られたボキャブラリーを改めて、第三未認識発言アイテムを選択し、上記ステップ（ａ）に戻るステップ（ｃ）；および
上記有効な出力のための十分な認識量を達成するステップ（ｄ）；
をさらに含むことを特徴とする方法。
【請求項２】
上記ステップ（ｂ）における上記選択が時間的順序に従って実行されることを特徴とする請求項１に記載の方法。
【請求項３】
上記ステップ（ｂ）における上記選択が時間的順序に反して実行されることを特徴とする請求項１に記載の方法。
【請求項４】
上記ステップ（ｂ）の上記選択において単語の見つけ出しを実行することを特徴とする請求項１に記載の方法。
【請求項５】
発言された順序で単語を認識するように上記ステップ（ｂ）の上記選択が選択的に改められることを特徴とする請求項１に記載の方法。
【請求項６】
上記ステップ（ｃ）において、前に認識されたアイテムの相対的位置と当該前に認識されたアイテムの認識結果とに少なくとも部分的に基づいて上記第三未認識発言アイテムが選択されることを特徴とする請求項１に記載の方法。
【請求項７】
請求項１に記載された方法を実行するように構成された装置であって、連結された発言アイテムのストリームを受けて保存する受信手段と、様々なそのような受けられた発言アイテムを認識する認識手段と、有効な出力のために認識された発言アイテムの表現を結合する結合手段とを含み、
上記装置は：
実際の限られたボキャブラリーに対して認識を実行するために上記保存された発言アイテムから第一未認識発言アイテムを選択する選択手段であり、選択された当該第一未認識発言アイテムの認識が成功するかまたは失敗するところの当該選択手段；
上記認識手段から信号を受ける再結合手段であり、上記第一未認識発言アイテムの認識が失敗した場合には、上記実際の限られたボキャブラリーを維持したまま、認識を実行するために第三未認識発言アイテムを選択して上記ステップ（ａ）に戻り、上記第一未認識発言アイテムの認識が成功した場合には、上記実際の限られたボキャブラリーを改めて第三未認識発言アイテムを選択して上記ステップ（ａ）に戻るところの当該再結合手段；
を含み、上記有効な出力のための十分な認識量を達成することを特徴とする装置。
【請求項８】
音声／映像消費部をさらに含む請求項７に記載の装置。
【発明の詳細な説明】
【０００１】
（発明の属する技術分野）
本発明は発言認識配列を操作する方法に関する。特に、本発明は請求項１の前提部に記載された方法に関する。現在、様々な家庭電気製品はボイスコントロールされるようになってきている。有効な出力を実行するステップは、コマンドを実行するステップ、さらなる発言入力を求めるステップまたは当該家庭電気製品に適切な別の結果を得るステップを含んでいてよい。
（従来の技術、発明が解決しようとする課題および課題を解決するための手段）
最近、多くの最新の発言認識専用回路は、単に小さい動作（動作を引き起こす）ボキャブラリーを使用する。このボキャブラリーの小ささは速くて正確な認識という利点をもたらす。しかしながら、これに関連した不利な点は、限られた範囲のコマンドと同様なアイテムだけが従来は使用可能であるという点である。配列に異なるボキャブラリーを再びロードすることは比較的ゆっくりした時間のかかる処理である。たとえうまくいったとしても、すべての先行する発言アイテムの認識が達成されるまで次の発言アイテムの供給は停止されなければならないので、特に対話式の認識処理はかなり遅らされる。
【０００２】
本願の発明者たちは、受けられたような音の記録はしばしば障害にならず、序列的な認識手順によって比較的大きな全体のボキャブラリーを使用して中断されない連続的な発言入力が可能であることに気がついた。さらに本願の発明者たちは、ユーザーは正しい単語・ワード（ｗｏｒｄ）を言うが発言アイテムの不正確・不適切な順序で単語を供給しがちであると判断した。実際、不適切なアイテムが挿入され、単語の順序を正しい順序に関して反転することなどを実行する。結果として、単純で高価でない手段・方法によって融通性を改善するために、本願の発明者たちは、受けられたような他のアイテムの認識のほうを優先して、ある発言アイテムの認識を遅らせたり放棄したりするということを考え出した。
【０００３】
本願の発明者たちは、次の部分的ボキャブラリーがずっと多くの認識用アイテムを含んでいるならば、次の発言アイテムの呼び出しをそのような次の部分的なボキャブラリーの呼び出しよりも早く実行してもよいことにも気づいた。
結果として、本発明の目的はとりわけ効果的により大きなボキャブラリーを使用する一方、このより大きなボキャブラリーにおいて序列的選択を実行することよってボキャブラリーのより小さな部分が作動させられ、中断されない発言入力を可能にすることと、ある問題のあるアイテムの認識を遅らせたり放棄することを可能にすることである。実際、本発明に従うと、認識に成功した単語または他の単語は別の発言アイテムと関連したボキャブラリーを指示する（引き起こす）一方、認識に成功しなかった単語は別の単語を指示する（引き起こす）が、そのボキャブラリーを維持する。
【０００４】
従って本発明の態様の１つによると、本発明は請求項１の特徴部分によって特徴づけられる。
【０００５】
本発明は、連結された発言アイテムのストリームを保存し、連続的なサイクルで、関連した限られた選択可能なボキャブラリーに対する認識のために未認識の発言アイテムを保存されたストリームから選択する発言認識方法とこの方法を実施する装置に関する。
【０００６】
（発明の実施の形態）
本発明のこれらの態様と利点およびさらなる態様と利点は、好適実施形態と添付の図面を参照して以下で詳しく説明される。
【０００７】
図１は、消費音声／映像用機能を実行するような発言向上装置のブロック図である。しかしながら、ゲームや家電製品や自動車や電話機などの他の環境においても同様に実現可能である。実施形態において、ユーザー機能は、テレビセット２４とチューナー２０とアンテナ２２とＣＤプレーヤー２８とラウドスピーカーサブシステム３０を含む。これらのサブシステムは、中央制御部２６によって制御されお互いに接続されている。制御コマンドは中央制御部２６から発生させられる。例えば、制御コマンドは、ユーザーボタンの作動またはリモートコントロール（図示せず）によって発生させられる。または、本発明に従って、制御コマンドは制御部２６に対して双方向的なインターフェースの役割を果たすサブシステム３２に収容された発言認識部によって発生させられてもよい。認識されるべき発言は連続的でよいストリーム・流れ（ｓｔｒｅａｍ）としてマイクロフォン３４によって受けられる。このストリームは、選択的に発言メモリ３８にアクセスして発言メモリ３８の特定位置に入れられる（ａｄｄｒｅｓｓｉｎｇ）ことを経て認識サブシステム３６に認識されることが可能である。
【０００８】
図２は、発言認識部の実施形態のより詳しいブロック図を示している。この認識部４０はマイクロフォン４２を介して発言・話し言葉・音声（ｓｐｅｅｃｈ）を受ける。発言は、認識部４０によって受けられると、背景ノイズと他の望ましくないノイズを抑制しフィルタリング（ｆｉｌｔｅｒｉｎｇ）とこれと似た操作を実行するために、前処理される。発言を別々に認識できる別々の単語（ｗｏｒｄｓ）または他のアイテム・項目（ｉｔｅｍｓ）に分解するために、ブロック４６において発言の範囲が定められる。別の手順によって、前処理されていない発言が保存されて認識の前に処理される。ブロック４８において、一連の単語および／または他のアイテムが別々にアクセス可能なメモリ位置に保存され特定の認識可能なそのようなアイテムの選択を可能にする。ブロック５０において、アイテムは次々に呼び出されて、記憶サブシステム５４から抽出された実際のたいていは部分的なボキャブラリーに基づくような認識処理を受ける。ブロック５０において認識されると認識対象の次のアイテムが呼び出され、ブロック５０において認識されたアイテムのアイデンティティー（ｉｄｅｎｔｉｔｙ）に基づいた関連した部分的なボキャブラリーも呼び出される。しかしながら、もしアイテムが認識されないならば、システムはこの実際のボキャブラリーを保持してよいが、新たなアイテムへ移る。たいていの場合、これは認識されなかったアイテムの時間に関して後に続く次のアイテムである。認識処理の状態に基づいて適用する場合、システムの他の部分に対するコマンドが図１のブロック２６に接続されてよいライン５２によって伝達される。また、ある結果が起こると、ユーザーに対して失敗を伝える信号を装置が発生させることが可能である。その後、装置は、（例えば、１つの単語が見当たらないまたはパラメータ値が範囲外であるならば）全体的なまたは部分的な新たな発言入力を求め、（例えば、もし関連するサブシステムが取り去られたならば）コマンドを実行することができない旨を信号で伝えるなどを行う。
【０００９】
図３は、本発明の序列的な発言認識のフローチャートを示している。ブロック６０において、必要なハードウェアとソフトウェアを要求し指定して、処理が開始される。ブロック６２において、最初の部分的なボキャブラリーが呼び出される。ブロック６４において、最初の単語または同様な認識可能アイテムが図２のメモリ４８から呼び出される。ブロック６６において発言アイテムは認識処理を受ける。ブロック６８において、システムは認識が確かに成功したかどうかを探知する。ＹＥＳならば、ブロック７０において、その結果が保持される。ブロック７２において、システムは認識されたアイテムの量が有効な出力に十分がどうかを探知する。もしＮＯならば、ブロック７４において新たな部分的なボキャブラリーが選択される。ブロック７６において新たな発言アイテムが選択される。その後システムはブロック６２へ再度進む。最終的にブロック７２の答えがＹＥＳになる。その後、システムはブロック７８へ進み有効な出力を実行し、ブロック８０において操作が停止する。
【００１０】
もしブロック６８においてＮＯならば、システムはブロック８２へ進み、そのアイテムが考慮されるべき最後のものかどうかを調べる。これは時間に関して（時間的順序に関して）最後のアイテムであってよく、またはむしろ、最後のアイテムは最終的に十分な結果を得ることになるアイテムであってもよい。もし最後のアイテムでないならば、システムはブロック８４において次の適切な発言アイテムを選択してブロック６４に戻る。しばしば、これは時間的順序に関する次のアイテムとなるが、ある環境においてはこのステップ進行は時間的順序に反する。もし認識の失敗を引き起こしたアイテムが最後のアイテムであるならば、ブロック８６においてシステムはボタンの押下や特定のアイテム（必ずしも最も最近求められた認識とは限らない）の供給のようなユーザーからの追加的情報が役に立つかどうかを探知する。もしＹＥＳならばシステムはブロック８８においてそのような情報を求め、ブロック９０において入力が求められたものかどうかをチェックし、（ブロック７２におけるように）認識処理はその目的を達成する。もしＹＥＳならばシステムはブロック７８に進む。もしブロック９０またはブロック８６においてＮＯならば、追加的情報がいずれにしろ不十分と判断されシステムはブロック９２へ進む。ブロック９２においてユーザーからの完全な新たな発言・発声を求めることなどによって、失敗が信号で伝えられる。その後システムはブロック８０へ進む。
【００１１】
ブロック８６、９０からの否定出力がより完全に考慮されている点のように、このシステムは大いに精巧になされた再試み構成を特徴とする。例えば、認識された発言アイテムの１つが実際にユーザーによって意図されたものでなく、引き続いてそのユーザーが実際上は別の一連の発言アイテムへ進行済みであるとする仮定のもとで、ブロック８６の後、新たな部分的なボキャブラリーの選択が可能である。認識処理が二度失敗した場合にのみ、システムはその後、ブロック９２において失敗を信号で伝えてよい。本発明の概念のもとにおける様々な他の方法が簡潔さのために省略された。
【００１２】
図４は、特に多数の装置の音声／映像環境において使用される例示的なコマンド構成図を示している。最初のブロック（一番目の縦列のブロック）は、テレビやＣＤプレーヤーやチューナーのような適切な装置に対応した初期ボキャブラリーを表している。ブロックの二番目の縦列は、各アドレス（最初のブロックの各装置）に関して動作の適切なセットを表しており、テレビセットに関してはテレテキストや特定のチャンネルや様々な設定などを選択することが可能である。同様にＣＤプレーヤーに関してはブロックの二番目の縦列において、プレー（再生）や次のＣＤへの変更や音量調整などが示されている。また、チューナーの見出し項目は一番目の縦列に示されているが、ＣＤライター（ＣＤ  ｗｒｉｔｅｒ）やスクリーンプリンターや様々な家庭電気製品などの他の装置が示されることが可能であるであることが理解されるであろう。また、ブロックの二番目の縦列においてすべての可能な見出しが示されているわけではない。
【００１３】
当該の機能が特定されると、例えば、ブロックの三番目の縦列においてテレテキストのスポーツセクションを選択するようにその機能のために機能パラメータが選択される。チャンネルに関しては特定のチャンネルを、設定に関しては調整が望まれる設定の特定のアスペクト（ａｓｐｅｃｔ）を指定する。同様な選択がＣＤプレーヤー（二番目の縦列の二番目のブロック）とチューナーに関して実施される。もちろん、序列がこの実施形態に示された３つの連続的なレベルよりも多くてもよい。
【００１４】
今日、それぞれのボキャブラリーの間での切り替え（ｓｗｉｔｃｈｉｎｇ）を行う様々な方法が、可能である。最初の方法は、認識の順序に依存する。この方法において、その選択は記録されたアイテムとセクションを認識する速度とボキャブラリー切り替えの達成可能な速度に依存する。上述において、切り替えは単語探知（ｗｏｒｄ  ｓｐｏｔｔｉｎｇ）に基づいている。発言された文のどのセクションも動作サブボキャブラリーに対してテストされる。一旦単語が認識されたのならば、序列的レベルの次の下位における関連ボキャブラリーが（メモリに）ロードされる。別の方法では、発言された順序で単語が認識される。この方法では、最初に発言された単語がすべてのボキャブラリーに対してテストされ、その後、論理的な順序でボキャブラリーを与える一方、次の単語がテストされる。一旦単語が見つかると、システムはこの認識の結果と論理的に関係するボキャブラリーのロードを行う。例えば、システムがフレーズ「スカイラジオ」を見つけると、システムはラジオに関連した手順を使用しなければならないことを知る。例えば、システムはチューナーをスタートさせ、これと平行して認識を進め、続いて起こる発言アイテムをチェックして、実際のユーザーが音楽を記録するなどのより具体的に音楽を扱いたい内容を確認する。
【００１５】
ボキャブラリーの構成は様々な異なる方法で実行されるが可能である。一番目の構成は図１に示された厳密構成（ｒｉｇｉｄ  ｏｒｇａｎｉｚａｔｉｏｎ）である。二番目の構成はアモルフォス・あいまい（ａｍｏｒｐｈｏｕｓ）と呼ばれる。これは、様々なボキャブラリーが特定のコマンドまたは他の発言アイテムを共有する場合に使用されてよい。このため、特定の装置を操作する時に特定の段階でユーザーが与える様々な異なるコマンドと調和する発言アイテムの組み合わせを作成してよい。例えば、受けられたような発言は、それ自体余分であるまたは有効でない様々な発言アイテムを含んでよい。複数の発言アイテムの組み合わせの認識によって、そのような関係のない発言アイテムを段階的に削除することが可能である。発言認識によって特定の装置の完全に手を使用しない操作を可能にしてもよい。しかしながら、そのような操作は、機械的にテープやディスクを挿入することやコントロールボタンの作動や演奏用針の取り付け（ｓｔｙｌｕｓ  ｅｎｔｒｙ）といったユーザーの機械的操作のようなユーザーインターフェース構成の非発言要素と組み合わせてもよい。また、制御される装置自体に頼ることは、テープの末端に達した時のように発言認識の効果に影響を及ぼし、音量調整を不必要なものとする。
【図面の簡単な説明】
【図１】
発言向上装置のブロック図を示している。
【図２】
発言認識部のより詳しいブロック図を示している。
【図３】
序列的発言認識のフローチャートを示している。
【図４】
例示的なコマンド構成の図を示している。
【図２】
2004516516.tif 000003
【図３】
2004516516.tif 000004
【図４】
2004516516.tif 000005
【国際公開パンフレット】
2004516516.tif 000006
2004516516.tif 000007
2004516516.tif 000008
2004516516.tif 000009
2004516516.tif 000010
2004516516.tif 000011
2004516516.tif 000012
2004516516.tif 000013
2004516516.tif 000014
2004516516.tif 000015
2004516516.tif 000016
2004516516.tif 000017
2004516516.tif 000018
【国際調査報告】
2004516516.tif 000019
2004516516.tif 000020
2004516516.tif 000021