(57)【要約】  本発明の一定の態様では、移動体音声通信デバイスは、聴覚的な情報及びデータを送受信するための無線トランシーバ回路と、プロセッサと、プロセッサ上で実行されると移動体音声通信デバイスに、ユーザインタフェースと関連付けられている選択可能な個性を移動体音声通信デバイスのユーザに対し提供させる実行可能な命令を記憶するメモリとを備える。実行可能な命令には、選択可能な個性を有する異なるユーザプロンプトを用いるユーザインタフェースを移動体音声通信デバイス上に実装することが含まれる。異なるユーザプロンプトの選択可能な個性の各々は移動体音声通信デバイスにおける１つ以上のデータベースに記憶されているデータに対し規定及びマッピングされる。この移動体音声通信デバイスは、発声されたユーザ入力を認識し、対応する認識された語を出力するデコーダと、認識された語に対応する語を合成する発声シンセサイザとを含み得る。このデバイスはデバイスに対し無線送信されるか、コンピュータインタフェースを通じて送信されるか、又はメモリカードとしてデバイスに対し提供されるユーザ選択可能な個性を含む。
2007525897.tif 000002
【特許請求の範囲】
【請求項１】
聴覚的な情報及びデータを送受信するための無線トランシーバ回路と、
プロセッサと、
プロセッサ上で実行されると移動体音声通信デバイスに、移動体音声通信デバイスと関連付けられている選択可能な個性を移動体音声通信デバイスのユーザに対し提供させる実行可能な命令を記憶するメモリと、
実行可能な命令は、１つ以上の選択可能な個性を有する複数の異なるユーザプロンプトを用いるユーザインタフェースを移動体音声通信デバイス上に実装することを含むことと、
複数のユーザプロンプトの選択可能な個性の各々は移動体音声通信デバイスにおける１つ以上のデータベースに記憶されているデータに対し規定及びマッピングされることと、からなる移動体音声通信デバイス。
【請求項２】
発声されたユーザ入力を認識し、対応する認識された語を出力するデコーダと、
認識された語に対応する語を合成する発声シンセサイザと、を含む請求項１に記載の移動体音声通信デバイス。
【請求項３】
デコーダは発声認識エンジンを含む請求項２に記載の移動体音声通信デバイス。
【請求項４】
移動体電話機デバイスである請求項１に記載の移動体音声通信デバイス。
【請求項５】
前記１つ以上のデータベースは発音データベース、シンセサイザデータベース及びユーザインタフェースデータベースのうちの１つを含む請求項１に記載の移動体音声通信デバイス。
【請求項６】
発音データベースは文字−音素規則、複数の語の明示的発音及び音声学的変容規則のうちの１つ以上のデータ表現を含む請求項５に記載の移動体音声通信デバイス。
【請求項７】
シンセサイザデータベースは音素−音規則、速さ制御及びピッチ制御のうちの１つ以上のデータ表現を含む請求項５に記載の移動体音声通信デバイス。
【請求項８】
ユーザインタフェースデータベースは事前記録聴覚的プロンプト、聴覚的プロンプトに関連付けられている文字、スクリーン映像及びアニメーションスクリプトのうちの１つ以上のデータ表現を含む請求項５に記載の移動体音声通信デバイス。
【請求項９】
前記無線トランシーバ回路はオーディオ入力デバイス及びオーディオ出力デバイスを備える請求項１に記載の移動体音声通信デバイス。
【請求項１０】
選択可能な個性の各々は独特な声、アクセント、語の選択、文法構造及び隠れ包含のうちの１つ以上を含む請求項１に記載の移動体音声通信デバイス。
【請求項１１】
発声認識性能を備える通信デバイスを動作させるための方法であって、
複数の異なるユーザプロンプトを用いるユーザインタフェースを通信デバイス上に実装する工程と、該複数の異なるユーザプロンプトの各ユーザプロンプトは、対応する発声された入力をユーザに求めるか又はデバイスの動作若しくは状態についてユーザに通知することと、該複数の異なるユーザプロンプトの各ユーザプロンプトは複数の異なる個性から選択可能な１つ以上の個性を有することと、該複数の異なる個性の各個性は該複数の異なるユーザプロンプトの対応する異なるユーザプロンプトに対しマッピングされることと、
該複数の個性のうちの任意の１つが通信デバイスのユーザにより選択されたとき、選択
された個性に対しマッピングされるユーザプロンプトを生成する工程と、からなる方法。
【請求項１２】
複数のユーザプロンプトの各ユーザプロンプトは対応する言語表現を有することと、
選択された個性に対しユーザプロンプトを生成する工程は、ユーザインタフェースを通じて対応する言語表現を生成する工程を含むことと、を含む請求項１１に記載の方法。
【請求項１３】
ユーザインタフェースを通じて対応する言語表現を生成する工程は、ユーザに対し言語表現を視覚的に表示する工程を含む請求項１２に記載の方法。
【請求項１４】
ユーザインタフェースを通じて対応する言語表現を生成する工程は、選択された個性を有するユーザに対し言語表現を聴覚的に出力する工程を含む請求項１２に記載の方法。
【請求項１５】
複数の異なる個性の各々は独特な声、アクセント、語の選択、及び文法構造のうちの１つ以上を含む請求項１１に記載の方法。
【請求項１６】
異なる個性を各々有する異なるユーザプロンプトを有する複数のユーザ選択可能なモードを実装する工程を含む請求項１１に記載の方法。
【請求項１７】
ユーザ選択可能な異なる個性の各々は移動体通信デバイスに対し無線送信されるか、コンピュータインタフェースを通じて送信されるか、又はメモリデバイスに埋め込まれている移動体通信デバイスに対し出力される請求項１１に記載の方法。
【請求項１８】
複数の異なる個性のうちの１つ以上をランダムに生成するためにユーザ選択可能なモードを実装する工程を含む請求項１１に記載の方法。
【請求項１９】
発声可能なアプリケーションを構成し、対応する異なる個性を各々模倣する複数の個性データファイルをデータ記憶装置に記憶する工程と、
選択した個性データファイルにおいてユーザから電子要求を受信する工程と、
選択した個性データファイルにおいてユーザに支払い義務を要求する工程と、
ユーザからの支払い義務の受信に応答して、発話可能なアプリケーションを有するデバイスに実装するために、選択された個性データファイルをユーザへ電子的に転送する工程と、からなる方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、発声認識性能を有する無線通信デバイスに関する。
【背景技術】
【０００２】
セルラー電話機など多くの移動体通信デバイス（本明細書では、少なくとも電話その他の音声通信機能を実行するデータ処理及びデバイスを含む意味である）には、機能を呼び出すための表現を発声することによりユーザを機能にアクセスさせることが可能な音声支援インタフェース機能が装備されている。知られている一例は音声ダイヤルである。音声ダイヤルでは、ユーザが名前その他の事前に記憶されている表現を電話機に発声すると、電話機はその名前に関連付けられている番号にダイヤルすることにより応答する。あるいはこれに代えて、ディスプレイ及びキーパッドにより、電話機が応答する文字列をユーザがタイプするための視覚的なインタフェースが提供される。
【０００３】
ダイヤルされる番号又は呼び出される機能はユーザが実際に意図する機能であるかを確認するために、移動体電話機はユーザに確認メッセージを表示して、正しい場合にはユーザが機能を続行させ、正しくない場合にはユーザが機能を中断させることを可能とする。移動体電話機デバイスと対話するための聴覚的又は視覚的なユーザインタフェースが存在する。電話機デバイスを見るのではなく道路を注視することを望む運転者に必要とされるように、聴覚的な確認及び他のユーザインタフェースでは、視覚的な確認及び他のインタフェースと比較して、よりハンズフリーな操作が可能となる。
【０００４】
電話機のユーザにより発声される句、語、音（本明細書においては一般に発話と呼ぶ）を認識するために、発声認識が移動体電話機に装備される。したがって、電話帳アプリケーションにおいて発声認識が用いられることが時々ある。一例では、電話機は認識された発声された名前に対し、電話機のスピーカ出力を通じて与えられる聴覚的な確認により応答する。ユーザは、再生を聴いて、電話機の認識結果を承認又は拒否する。
【発明の開示】
【発明が解決しようとする課題】
【０００５】
これらのインタフェースの一態様は、聴覚的及び視覚的の両方において、故意又は偶然に、個性を有する。既存の市販デバイス（例えば、Ｓａｍｓｕｎｇ（登録商標）ｉ７００デバイス）の場合、セルラー電話機の内部音声は「女性（Ｌａｄｙ）」として記述される個性を有する。ほとんどの現在のデバイスは非常に事務的であり適切な短いプロンプトしか有さず、通常、「〜ください（ｐｌｅａｓｅ）」、「サンキュー（ｔｈａｎｋ  ｙｏｕ）」又は「ライク（ｌｉｋｅ）」などの発話さえも欠いている。
【課題を解決するための手段】
【０００６】
本発明の一定の態様では、移動体音声通信デバイスは、聴覚的な情報及びデータを送受信するための無線トランシーバ回路と、プロセッサと、プロセッサ上で実行されると移動体音声通信デバイスに、ユーザインタフェースと関連付けられている選択可能な個性を移動体音声通信デバイスのユーザに対し提供させる実行可能な命令を記憶するメモリとを備える。実行可能な命令には、選択可能な個性を有する異なるユーザプロンプトを用いるユーザインタフェースを移動体音声通信デバイス上に実装することが含まれる。複数のユーザプロンプトの選択可能な個性の各々は移動体音声通信デバイスにおける１つ以上のデータベースに記憶されているデータに対し規定及びマッピングされる。この移動体音声通信デバイスは、発声されたユーザ入力を認識し、対応する認識された語を出力するデコーダ
と、認識された語に対応する語を合成する発声シンセサイザとを含む。このデコーダは発声認識エンジンを含む。この移動体通信デバイスはセルラー電話機である。
【０００７】
この移動体音声通信デバイスは、発音データベース、シンセサイザデータベース及びユーザインタフェースデータベースのうちの１つを有する１つ以上のデータベースを含む。発音データベースは文字−音素規則及び複数の語の明示的発音のうちの１つ以上、並びに音声学的変容規則のデータ表現を含む。シンセサイザデータベースは音素−音規則、速さ制御及びピッチ制御のうちの１つ以上のデータ表現を含む。ユーザインタフェースデータベースは事前記録聴覚的プロンプト、聴覚的プロンプトに関連付けられている文字、スクリーン映像及びアニメーションスクリプトのデータ表現を含む。このトランシーバ回路はオーディオ入力デバイス及びオーディオ出力デバイスを備える。選択可能な個性は独特な声、アクセント、語の選択、文法構造及び隠れ包含（ｈｉｄｄｅｎ  ｉｎｃｌｕｓｉｏｎ）のうちの１つ以上を含む。
【０００８】
本発明の別の態様には、発声認識性能を備える通信デバイスを動作させるための方法が含まれる。この方法には、複数の異なるユーザプロンプトを用いるユーザインタフェースを通信デバイス上に実装する工程と、異なるユーザプロンプトの各ユーザプロンプトは、対応する発声された入力をユーザに求めるか又はデバイスの動作若しくは状態についてユーザに通知することと、各ユーザプロンプトは複数の異なる個性から選択可能な個性を有することとを含む。複数の異なる個性の各個性は異なるユーザプロンプトの対応する異なるユーザプロンプトに対しマッピングされて、個性のうちの任意の１つが通信デバイスのユーザにより選択されたとき、この方法には、選択された個性に対しマッピングされるユーザプロンプトを生成する工程が含まれる。複数のユーザプロンプトの各ユーザプロンプトは対応する言語表現を有し、選択された個性に対しユーザプロンプトを生成する際、対応する言語表現もユーザインタフェースを通じて生成される。さらに本発明には、このデバイスのユーザインタフェースを通じて対応する言語表現を生成する際、選択された個性を有するユーザに対し言語表現を聴覚的に出力する工程が含まれる。
【０００９】
この方法には、異なる個性を各々有する異なるユーザプロンプトを有する複数のユーザ選択可能なモードを実装する工程が含まれる。この移動体通信デバイスは、選択されるとユーザインタフェースの個性をランダムに選択するユーザ選択可能なモードを備え、ランダムに個性を切り換えるすることなどによってユーザに複数の個性を提供し、したがって統合失調症的な電話機デバイスに近づくことも可能である。ユーザ選択可能な個性は移動体通信デバイスに対し無線送信されるか、コンピュータインタフェースを通じて送信されるか、又はメモリデバイスに埋め込まれている移動体通信デバイスに対し出力される。
【００１０】
一般に、別の態様では、本発明は、発声可能なアプリケーションを構成し、対応する異なる個性を各々模倣する複数の個性データファイルをデータ記憶装置に記憶する工程と、選択した個性データファイルにおいてユーザから電子要求を受信する工程と、選択した個性データファイルにおいてユーザに支払い義務を要求する工程と、ユーザからの支払い義務の受信に応答して、発話可能なアプリケーションを有するデバイスに実装するために、選択された個性データファイルをユーザへ電子的に転送する工程とを含む方法を実施する。
【発明を実施するための最良の形態】
【００１１】
セルラー電話機などの移動体音声通信デバイス及び他のネットワーク化されているコンピュータデバイスは、特定の個性を有するように記述され得るマルチモーダルインタフェースを有する。これらのマルチモーダルインタフェースは、ほぼ独占的にソフトウェア製品であるため、内部処理に個性を与えることが可能である。これらの個性のプロファイルはデバイスのユーザインタフェースにより明示され、有名人、即ち、例えば、政治家、コ
メディアン又は漫画のキャラクターであることが可能である。デバイスのユーザインタフェースには、オーディオプロンプトを出力する聴覚的なインタフェースや、デバイスのディスプレイ上に文字列を表示させる視覚的なインタフェースが含まれる。プロンプトには、例えば、「ミッキーマウス（登録商標）」、「ジョン  Ｆ．ケネディ」、「ミスターＴ」など特定の音声が記録され、反復されることが可能である。また、プロンプトは、例えばボストン訛り、インド訛り又は南部訛りなど、特定のアクセントに振り当てられ得る。
【００１２】
移動体電話機デバイスは発声認識回路、発声合成回路、論理、埋め込みデータ構造に対する変化、並びに事前記録プロンプト、スクリプト及び映像を用い、デバイスの個性を規定して、特定の個性をマルチモーダルインタフェースに提供する。本明細書に記載の方法及び装置はマルチモーダルインタフェースに対し、したがって移動体通信デバイスにより明示される個性に対し、カスタマイズを提供するためのものである。
【００１３】
図１は、本明細書に記載のカスタマイズ方法に用いられる機能コンポーネントを示す代表的なセルラー電話機のブロック図である。システム１０は、入力、出力、処理及びデータベースコンポーネントを備える。セルラー電話機にはオーディオシステム１８が用いられる。オーディオシステム１８は、出力スピーカ及びヘッドホン２０のうちの一方又は両方、並びに入力マイクロホン２２を備える。オーディオ入力デバイス即ちマイクロホン２２は、ユーザの発声した発話を受信する。入力マイクロホン２２は受信したオーディオ入力信号を発声認識部３２へ出力する。発声認識部は、各音素に対する音響パラメータの確率表現である音響モデル３４を備える。ユーザ入力（発声された発話）を認識し、認識された語（文字）を発音モジュール１４へ出力するのは発声認識部である。続いて、発音モジュールは入力を発声シンセサイザ１２へ出力する。認識された語は、文字列として視覚的なディスプレイデバイスへも出力される。
【００１４】
発音モジュール１４は出力信号の音響表現を構築し、その表現を発声認識部へ出力する。発音モジュール１４は、文字−音素規則（ｌｅｔｔｅｒ−ｔｏ−ｐｈｏｎｅｍｅ  ｒｕｌｅ）及び特定の語の明示的発音のうちの一方又は両方、並びに場合によっては音声学的な変容規則（ｐｈｏｎｅｔｉｃ  ｍｏｄｉｆｉｃａｔｉｏｎ  ｒｕｌｅ）を記憶しているデータベースを備える。発音モジュール１４の異なるデータベースのこのデータは、ユーザインタフェースが明示する個性を反映するように変更され得る。例えば、南部訛りを有する個性に対する文字−音素規則は英国訛りの個性に対する文字−音素規則とは異なり、データベースは電話機に対し選択される個性の声／アクセントを反映するように更新され得る。
【００１５】
発声シンセサイザ１２はシンセサイザプロセッサへプログラムされている命令を用い、認識された語のオーディオ形態を合成する。シンセサイザ１２はシンセサイザデータベース３０において、音素−音規則（ｐｈｏｎｅｍｅ−ｔｏ−ｓｏｕｎｄ  ｒｕｌｅ）、速さ制御及びピッチ制御にアクセスする。シンセサイザデータベースのデータは、ユーザインタフェースが表現するように構成され得る異なる個性を表現するように変更され得る。
【００１６】
さらに、一定のユーザインタフェース出力は、セルラー電話機による再呼び出し用に、ユーザインタフェースデータベース３８に事前記録及び記憶され得る。このユーザインタフェースデータベースには、例えば、「命令を言ってください」などのオーディオプロンプト、オーディオプロンプトに関連付けられている文字列、背景などのスクリーン映像、及びアニメーションスクリプトが含まれる。ユーザインタフェースデータベース３８のデータは、ユーザにより選択される特定の個性に関連付けられる異なるプロンプト、スクリーン表示及びスクリプトを表現するように変更され得る。
【００１７】
次に、例えば、ユーザインタフェースデータベース３８、シンセサイザデータベース３
０及び発音モジュール１４のデータベースなど、異なるデータベースのデータは、マルチメディアインタフェースの個性及び集合的には移動体デバイスの個性を規定するために用いられる。
【００１８】
移動体デバイスに関連付けられる個性は、視覚的なプロンプトを変更することにより、さらにパーソナライズされる。スクリーンプロンプトに関連付けられる文字は、プロンプトの実際の言い回しと同じく、編集可能、即ち、変更可能である。
【００１９】
さらに、記録されているプロンプト及び発声シンセサイザの韻律を変更し、移動体通信デバイスの雰囲気をユーザの嗜好に従い「怒って」又は「落ち着いて」見えるものにすることも可能である。個性を有し得る他のアプリケーションには、ＭＰ３プレイヤーや、情報をダウンロードするために提供されているキャリア命令のセットが含まれる。
【００２０】
電話機における音声処理はデータ駆動であるため、移動体デバイスの音声及び視覚的なインタフェースのうちの１つ以上に対し、完全な個性がインポートされ得る。「個性プロファイル」の一部、即ち、移動体デバイスのプロンプト、シンセサイザのモデル、及び場合によっては文字メッセージの変容は、ダウンロード可能なオブジェクト内にパッケージ化され得る。このオブジェクトはコンピュータインタフェースを通じて若しくは標準的なセルラー電話機チャネルを無線的に介して、又は例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標）若しくは赤外線プロトコル若しくはワイドバンド無線（ＩＥＥＥ８０２．１１若しくはＷｉｆｉ）を用いて、利用可能となり得る。この移動体デバイスはそのメモリに、初期構成として１つ以上の個性を記憶し得る。このデバイスが１より多くの個性を記憶する場合、用いられる個性はユーザ又はキャリアにより選択され得る。これに代えて、ユーザに購入され得る交換可能なメモリカード上に個性が記憶されることも可能である。
【００２１】
図２を参照すると、一実施形態では、着信音がセルラー電話機へダウンロードされ得るのと同様に、ユーザはダウンロード可能な形態で「個性」を提供する第三者への接続を確立させることにより、「個性」を取得する（工程３００）。これは例えば、ＷＡＰプロトコル（無線アプリケーションプロトコル）を用いるセルラー電話機上で利用可能なブラウザ又は上述の任意の他の通信プロトコルを含む周知の手法を用いる種々の手法により、行われ得る。あるいは、第三者との通信リンクを確立させ、次に受信した「個性」のファイルをセルラー電話機へ転送する中間コンピュータの使用により、行われ得る。
【００２２】
接続が確立された後、第三者はセルラー電話機のディスプレイ上にインタフェースを表示し、利用可能な個性のより大きなセットのうちの１つ以上の「個性」をユーザが選択することを可能とする（工程３０２）。ユーザが個性を選択した後、この選択は第三者へ送信され（工程３０４）、続いて第三者はユーザからの支払い情報を求める（工程３０６）。これは、ユーザにより出力されるクレジットカードに請求する認可の形態であってもよい。トランザクションを完了させるため、ユーザは要求した認可又は支払い情報を出力する。支払い情報を受信すると（工程３０８）、続いて第三者は同じ通信リンクを通じてユーザのセルラー電話機への「個性」ファイルの転送を開始する（工程３１０）。転送が完了した後、接続は切断される（工程３１２）。
【００２３】
一手法では、単純に、電話機における１つの個性がダウンロードされた新たな別の個性と交換される。この場合、セルラー電話機は１つの個性、即ち、電話機へ最後にロードされた個性を有する。別の手法では、電話機内に複数の個性が記憶され、用いる個性をユーザが電話機のインタフェースを通じて選択することが可能となる。このことは、ユーザに対しより興味深い経験を提供するために有利であるが、電話機により多くのデータ記憶部を必要とする。
【００２４】
図３には、複数の個性を有するセルラー電話機の動作のフローチャートを示す。そうした電話機では、購入時に又はその後のダウンロードを通じて、ユーザが複数の個性の各々に対するデータファイルを内部メモリへインストールする（工程３２０）。ユーザが電話機の個性を変更することを望むとき、ユーザは単純に、このユーザが電話機の構成を変更することを可能とするユーザインタフェースを呼び出す。応答して、電話機はメモリにインストールされている複数の個性のうちの１つをユーザが選択することを可能とするメニューインタフェースを、そのＬＣＤ上に表示する（工程３２２）。ユーザの選択を受信すると（工程３２４）、電話機は選択された「個性」を有効化する（工程３２６）。
【００２５】
図４Ａ，４Ｂは、カスタマイズされている個性による音声ダイヤラのフローの一例を示す図である。工程９２において、標準ユーザインタフェース（ＵＩ）は、例えば、ユーザによるボタン押下を受信し、タスクを開始する。工程９４にて、ＵＩはＵＩデータベース内の開始命令を参照する。工程９６にて、ＵＩはデバイスのディスプレイスクリーン上に開始文字列「命令を言え」を出力する。次に工程９８にて、ＵＩは出力スピーカを通じてオーディオ記録「命令を言え」を再生する。工程１００にて、ＵＩは命令を聴取するよう発声認識部に伝達する。工程１０２にて、この認識部は入力マイクロホンを聴取する。工程１０４にて、発声認識部はオーディオ入力「ジョン・スミス」を受信する。次に工程１０６にて、発声認識部はオーディオ入力を電話帳データベースの全ての名前と比較し、「ジョン・スミス」に最も近い名前を選択する。工程１０８にて、発声認識部は最も良く一致したもの（ｂｅｓｔ  ｍａｔｃｈ）を標準ＵＩへ戻す。工程１１０にて、ＵＩはその名前をシンセサイザへ渡す。工程１１２にて、シンセサイザはシンセサイザデータベースを用いて名前の発音を参照する。工程１１４にて、シンセサイザは発音から出力オーディオを生成し、出力スピーカを通じて再生する。工程１１６にて、ＵＩはスクリーンに名前を描く。工程１１８にて、ＵＩは確認用のプロンプトを参照し、次に工程１２０にて、ＵＩは出力スピーカを通じてユーザへ、確認プロンプト及び名前（「ジョン・スミスと言ったか？」）を再生する。工程１２２にて、ＵＩはこの認識部をオンとする。工程１２４にてユーザは「はい」と言い、続いて工程１２６にて、この認識部は「はい」の語を聴取する。工程１２８にて、ＵＩは電話帳データベースにおいてジョン・スミスの電話番号を参照し、工程１３０にて、その電話番号を用いてジョン・スミスへダイヤルする。
【００２６】
図５Ａ，５Ｂは、気軽に話す南部人のカスタマイズした個性を有する音声ダイヤラのフローの別の一例を示す図である。工程１５２において、標準ＵＩはユーザによるボタン押下を受信し、タスクを開始する。工程１５４にて、ＵＩはＵＩデータベース内の開始命令を参照する。工程１５６にて、ＵＩはスクリーンディスプレイ上に開始文字列「何をしたいか？」を出力する。工程１５８にて、ＵＩは出力スピーカを通じて南部人の母音を延ばすゆっくりした話し方でオーディオ記録「どうしたいんだい？」を再生する。工程１６０にて、ＵＩは命令を聴取するよう発声認識部に伝達する。工程１６２にて、この認識部は入力マイクロホンをオンとし、入力マイクロホンを聴取する。工程１６４にて、発声認識部はオーディオ入力、例えば、「ジョン・スミス」を受信する。工程１６６にて、発声認識部はオーディオ入力を電話帳データベースの全ての名前と比較し、最も近い名前を選択する。工程１６８にて、発声認識部は最も良く一致したものを標準ＵＩへ戻す。次に工程１７０にて、ＵＩはその名前を発声シンセサイザへ渡す。工程１７２にて、発声シンセサイザはシンセサイザデータベースを用いて名前の発音を参照する。工程１７４にて、シンセサイザは発音から出力オーディオを生成し、出力スピーカを通じて南部人の母音を延ばすゆっくりした話し方で「ジョン・スミス」を再生する。工程１７６にて、ＵＩはスクリーンに名前を描く。工程１７８にて、ＵＩは確認用のプロンプトを参照する。次に工程１８２にて、ＵＩは出力スピーカを通じてユーザへ、確認プロンプト及び名前「ジョン・スミスって言ったのかい？」を再生する。図２Ｂに関するフローチャートと同様に、次にＵＩはこの認識部をオンとし（工程１８２）、ユーザは「はい」と言うことにより確認し（工程１８４）、発声認識部は「はい」を聴取する（工程１８６）。工程１８８にて、ＵＩ
は電話帳データベースにおいてジョン・スミスの電話番号を参照し、次に工程１９０にて、その電話帳データベースの電話番号を用いてジョン・スミスへダイヤルする。
【００２７】
そうした機能が提供され得る典型的なプラットフォームは、図６の高位ブロック図に示すようなスマートホン２００である。このプラットフォームは、セルラー電話機の個性をカスタマイズするための関連機能、したがってマルチモーダルインタフェースを備える埋め込み型アプリケーションソフトウェアを有するセルラー電話機である。この例では、アプリケーションソフトウェアには、他のプログラムに加え、ユーザがこの電話機上の情報（例えば、識別される人物の電話番号）にアクセスすること及び口頭の命令を通じてセルラー電話機を制御することを可能とする音声認識ソフトウェアが含まれる。また、この音声認識ソフトウェアには、ユーザが発声した語を通じて文字を電子メールのメッセージへ入力することを可能とする発声−文字機能の形態の高度機能も含まれる。
【００２８】
記載の実施形態では、スマートホン２００は、Ｍｉｃｒｏｓｏｆｔ（登録商標）ポケットＰＣの動作する電話機であり、そのコアに、例えば、音声バンド及びチャネル符号化機能を含むセルラー通信機能を取扱うためのベースバンドＤＳＰ（デジタル信号プロセッサ）２０２と、ポケットＰＣのオペレーティングシステムが動作するアプリケーションプロセッサ２０４（例えば、Ｉｎｔｅｌ（登録商標）ＳｔｒｏｎｇＡｒｍ  ＳＡ−１１１０）とを備える。この電話機は、より従来的なＰＤＡ機能に加え、ＧＳＭ音声呼、ＳＭＳ（Ｓｈｏｒｔ  Ｍｅｓｓａｇｉｎｇ  Ｓｅｒｖｉｃｅ）の文字メッセージング、無線ｅメール（電子メール）及びデスクトップ様ウェブブラウジングをサポートする。
【００２９】
送受信機能は、ＲＦシンセサイザ２０６及びＲＦ無線トランシーバ２０８と、それらに続く電力増幅器２１０により実装される。電力増幅器２１０はアンテナ２１２を通じて最終段階のＲＦ送信の仕事を取扱う。インタフェースＡＳＩＣ（特定用途向け集積回路）２１４及びオーディオＣＯＤＥＣ２１６（コーダ／デコーダ）は、スピーカ、マイクロホンその他、命令及び情報を入力するために電話機へ提供されている数字又は英数字キーパッド（図示せず）などの入力／出力デバイスに対するインタフェースを提供する。
【００３０】
ＤＳＰ２０２はコード記憶のためにフラッシュメモリ２１８を用いる。Ｌｉ−イオン（リチウムイオン）バッテリ２２０は電話機に電力を供給し、ＤＳＰ２０２に接続されている電力管理モジュール２２２は電話機内の電力消費を管理する。アプリケーションプロセッサ２１４用の揮発性及び不揮発性メモリは、それぞれＳＤＲＡＭ（同期動的ランダムアクセスメモリ）２２４及びフラッシュメモリ２２６の形態により提供される。このメモリ構成は、オペレーティングシステム用のコード、電話帳などカスタマイズ可能な機能用のコード、及び以下に述べる音声認識ソフトウェアを含むスマートホンに含まれ得る任意のアプリケーションソフトウェア用のコードを保持するために用いられる。スマートホン用の視覚的ディスプレイデバイスは、ＬＣＤ（液晶ディスプレイ）のディスプレイ２３０を動作させるＬＣＤドライバチップ２２８を備える。また、クロックモジュール２３２も存在する。クロックモジュール２３２は、電話機内の他のデバイスに対するクロック信号を提供し、実時間のインジケータを提供する。
【００３１】
上述の全てのコンポーネントは、適切に設計されている筐体２３４内のパッケージである。
本明細書に記載のスマートホンは複数の異なる市販のスマートホンの一般的な内部構造の代表であり、それらの電話機の内部回路設計は一般に当業者には知られているため、図６に示すコンポーネントに関するさらなる詳細及びそれらの動作は提供しない。また、本発明の理解に必要でもない。
【００３２】
この電話機の内部メモリには、図６にブロック形式で表現されている音声認識アプリケ
ーションソフトウェア用のコード２４０を含め、この電話機を動作させるため及びこの電話機の種々の機能をサポートするための全ての関連するコードが含まれる。音声認識アプリケーションには、その基本機能のためのコード２４２に加え、高度機能のためのコード２４４、この場合には発声−文字機能２４４が含まれる。本明細書に記載のマルチモーダル埋め込み型インタフェースにおける交換可能なカスタマイズ用の実行可能命令のコード又はシーケンスは、通信デバイスの内部メモリに記憶され、したがって、アプリケーションプロセッサを有する任意の電話機又はデバイス上に実装され得る。
【００３３】
本発明の原理が適用され得る広範な種々の実施形態に照らして、例示の実施形態は代表的な実施形態であるに過ぎず、本発明の範囲を限定するものとして捉えられるものではない。例えば、フローチャート（図４Ａ，４Ｂ，５Ａ，５Ｂ）の工程は記載のシーケンス以外のシーケンスにより捉えられてもよく、図においてより多い又は少ない要素が用いられてもよい。デバイスに教示モードを追加することにより、ユーザインタフェースのフローが変更され得る。ユーザ選択可能な教示モードでは、デバイスは各工程毎にユーザとインタフェースしてデバイスの実行している機能をユーザに通知し、ユーザが次にすべきことをユーザに指示する。実施形態の種々の要素がソフトウェアにより実装されるように説明したが、これに代えて、ハードウェア又はファームウェア実装による他の実施形態が用いられてよい。また反対に、ハードウェア又はファームウェア実装により実装されるように説明した実施形態に代えて、ソフトウェアによる他の実施形態が用いられてよい。
【００３４】
マルチモーダル埋め込み型インタフェースにおける交換可能なカスタマイズに伴う方法が、コンピュータ可用媒体を含むコンピュータプログラム製品により実施されてよいことは当業者には明らかであろう。例えば、そうしたコンピュータ可用媒体には、コンピュータ可読プログラムコードセグメントが記憶されているハードドライブデバイス、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ又はコンピュータディスケットなど、可読メモリデバイスが含まれ得る。また、コンピュータ可読媒体には、ディジタル又はアナログのデータ信号として搬送されるプログラムコードセグメントを有する、光学、有線若しくは無線のバス又は通信リンクなど、通信媒体又は伝送媒体も含まれ得る。
【００３５】
他の態様、変更及び実施形態は、添付の特許請求の範囲の範囲内にある。
【図面の簡単な説明】
【００３６】
【図１】本明細書に記載のカスタマイズ方法に用いられる機能コンポーネントを示す代表的なセルラー電話機のブロック図。
【図２】セルラー電話機へ「個性」がダウンロードされる処理を示すフローチャート。
【図３】選択した「個性」をセルラー電話機が有するようにユーザが構成する方法を示すフローチャート。
【図４Ａ】カスタマイズした個性による音声ダイヤラのフローの一例を示すフローチャート。
【図４Ｂ】カスタマイズした個性による音声ダイヤラのフローの一例を示すフローチャート。
【図５Ａ】気軽に話す南部人のカスタマイズした個性を有する音声ダイヤラのフローの別の一例を示すフローチャート。
【図５Ｂ】気軽に話す南部人のカスタマイズした個性を有する音声ダイヤラのフローの別の一例を示すフローチャート。
【図６】本明細書に記載の機能が実装され得る代表的なセルラー電話機のブロック図。
【図１】
2007525897.tif 000003
【図２】
2007525897.tif 000004
【図３】
2007525897.tif 000005
【図４Ａ】
2007525897.tif 000006
【図４Ｂ】
2007525897.tif 000007
【図５Ａ】
2007525897.tif 000008
【図５Ｂ】
2007525897.tif 000009
【図６】
2007525897.tif 000010
【手続補正書】
【提出日】平成19年1月17日(2007.1.17)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
聴覚的な情報及びデータを送受信するための無線トランシーバ回路と、
プロセッサと、
プロセッサ上で実行されると移動体音声通信デバイスに、移動体音声通信デバイスと関連付けられている選択可能な個性を移動体音声通信デバイスのユーザに対し提供させる実行可能な命令を記憶するメモリと、
実行可能な命令は、１つ以上の選択可能な個性を有する複数の異なるユーザプロンプトを用いるユーザインタフェースを移動体音声通信デバイス上に実装することを含むことと、
複数のユーザプロンプトの選択可能な個性の各々は移動体音声通信デバイスにおける１つ以上のデータベースに記憶されているデータに対し規定及びマッピングされることと、からなる移動体音声通信デバイス。
【請求項２】
発声されたユーザ入力を認識し、対応する認識された語を出力するデコーダと、
認識された語に対応する語を合成する発声シンセサイザと、を含む請求項１に記載の移動体音声通信デバイス。
【請求項３】
デコーダは発声認識エンジンを含む請求項２に記載の移動体音声通信デバイス。
【請求項４】
移動体電話機デバイスである請求項１に記載の移動体音声通信デバイス。
【請求項５】
前記１つ以上のデータベースは発音データベース、シンセサイザデータベース及びユーザインタフェースデータベースのうちの１つを含む請求項１に記載の移動体音声通信デバイス。
【請求項６】
発音データベースは文字−音素規則、複数の語の明示的発音及び音声学的変容規則のうちの１つ以上のデータ表現を含む請求項５に記載の移動体音声通信デバイス。
【請求項７】
シンセサイザデータベースは音素−音規則、速さ制御及びピッチ制御のうちの１つ以上のデータ表現を含む請求項５に記載の移動体音声通信デバイス。
【請求項８】
ユーザインタフェースデータベースは事前記録聴覚的プロンプト、聴覚的プロンプトに関連付けられている文字、スクリーン映像及びアニメーションスクリプトのうちの１つ以上のデータ表現を含む請求項５に記載の移動体音声通信デバイス。
【請求項９】
前記無線トランシーバ回路はオーディオ入力デバイス及びオーディオ出力デバイスを備える請求項１に記載の移動体音声通信デバイス。
【請求項１０】
選択可能な個性の各々は独特な声、アクセント、語の選択、文法構造及び隠れ包含のうちの１つ以上を含む請求項１に記載の移動体音声通信デバイス。
【請求項１１】
発声認識性能を備える通信デバイスを動作させるための方法であって、
複数の異なるユーザプロンプトを用いるユーザインタフェースを通信デバイス上に実装する工程と、該複数の異なるユーザプロンプトの各ユーザプロンプトは、対応する発声された入力をユーザに求めるか又はデバイスの動作若しくは状態についてユーザに通知することと、該複数の異なるユーザプロンプトの各ユーザプロンプトは複数の異なる個性から選択可能な１つ以上の個性を有することと、該複数の異なる個性の各個性は該複数の異なるユーザプロンプトの対応する異なるユーザプロンプトに対しマッピングされることと、
該複数の個性のうちの任意の１つが通信デバイスのユーザにより選択されたとき、選択された個性に対しマッピングされるユーザプロンプトを生成する工程と、からなる方法。
【請求項１２】
複数のユーザプロンプトの各ユーザプロンプトは対応する言語表現を有することと、
選択された個性に対しユーザプロンプトを生成する工程は、ユーザインタフェースを通じて対応する言語表現を生成する工程を含むことと、を含む請求項１１に記載の方法。
【請求項１３】
ユーザインタフェースを通じて対応する言語表現を生成する工程は、ユーザに対し言語表現を視覚的に表示する工程を含む請求項１２に記載の方法。
【請求項１４】
ユーザインタフェースを通じて対応する言語表現を生成する工程は、選択された個性を有するユーザに対し言語表現を聴覚的に出力する工程を含む請求項１２に記載の方法。
【請求項１５】
複数の異なる個性の各々は独特な声、アクセント、語の選択、及び文法構造のうちの１つ以上を含む請求項１１に記載の方法。
【請求項１６】
異なる個性を各々有する異なるユーザプロンプトを有する複数のユーザ選択可能なモードを実装する工程を含む請求項１１に記載の方法。
【請求項１７】
ユーザ選択可能な異なる個性の各々は移動体通信デバイスに対し無線送信されるか、コンピュータインタフェースを通じて送信されるか、又はメモリデバイスに埋め込まれている移動体通信デバイスに対し出力される請求項１１に記載の方法。
【請求項１８】
複数の異なる個性のうちの１つ以上をランダムに生成するためにユーザ選択可能なモードを実装する工程を含む請求項１１に記載の方法。
【請求項１９】
発声可能なアプリケーションを構成し、対応する異なる個性を各々模倣する複数の個性データファイルをデータ記憶装置に記憶する工程と、
選択した個性データファイルにおいてユーザから電子要求を受信する工程と、
選択した個性データファイルにおいてユーザに支払い義務を要求する工程と、
ユーザからの支払い義務の受信に応答して、発話可能なアプリケーションを有するデバイスに実装するために、選択された個性データファイルをユーザへ電子的に転送する工程
と、からなる方法。
【請求項２０】
移動体通信デバイスを動作させる方法であって、
移動体通信デバイス上に提供されているインタフェースを通じて、複数の選択可能な個性の型をユーザに出力する個性出力工程と、
ユーザからの入力に応答して、複数の選択可能な個性の型のうちの１つを選択する個性選択工程と、
移動体通信デバイスを動作させるための入力をユーザから受信することに応答して、選択した個性の型を使用してユーザに対するオーディオプロンプトを生成するプロンプト生成工程と、からなる方法。
【請求項２１】
ユーザの入力はユーザからの開始プロンプトを含むことと、
ユーザから開始命令を受信することに応答して、ディスプレイ上に開始文字列を表示する工程と、
プロンプト生成工程は開始文字列に対応する第１のオーディオプロンプトを、選択した個性の型を用いてスピーカを通じて生成する工程を含むことと、を含む請求項２０に記載の方法。
【請求項２２】
受信したユーザの入力は被呼者の名前に関する発声された発話を含むことと、
ユーザから発声された発話を受信することに応答して、発声された発話を認識し、被呼者の名前を識別する工程と、
プロンプト生成工程は識別した被呼者の名前に対応する第１のオーディオプロンプトを、選択した個性の型を用いてスピーカを通じて生成する工程を含むことと、を含む請求項２０に記載の方法。
【請求項２３】
プロンプト生成工程は識別した名前が正しいことの確認をユーザに求める確認プロンプトを、選択した個性の型を用いて生成する工程を含む請求項２２に記載の方法。
【請求項２４】
ユーザから確認入力を受信することに応答して、識別した被呼者の名前に対応する番号にダイヤルする工程を含む請求項２３に記載の方法。
【請求項２５】
スピーカと、
プロセッサと、
実行可能な命令を記憶するメモリと、
実行可能な命令がプロセッサ上で実行されると移動体通信デバイスは、
複数の選択可能な個性の型をディスプレイを通じてユーザに出力し、
ユーザからの選択入力に応答して、複数の選択可能な個性の型のうちの１つを選択し、かつ、
移動体通信デバイスを動作させるための入力をユーザから受信することに応答して、選択した個性の型を使用してスピーカを通じてオーディオプロンプトを生成することと、からなる移動体通信デバイス。
【請求項２６】
ディスプレイと、
受信したユーザの入力はユーザからの開始プロンプトを含むことと、
実行可能な命令は、プロセッサ上で実行されると移動体通信デバイスが、
ユーザから開始命令を受信することに応答して、ディスプレイ上に開始文字列を表示し、かつ、
開始文字列に対応する第１のオーディオプロンプトを、選択した個性の型を用いてスピーカを通じて生成する、命令を含むことと、を含む請求項２５に記載の移動体通信デバイス。
【請求項２７】
受信したユーザの入力は被呼者の名前に関する発声された発話を含むことと、
実行可能な命令は、プロセッサ上で実行されると移動体通信デバイスが、
発声された発話を認識して被呼者の名前を識別し、かつ、
識別した被呼者の名前に対応する第１のオーディオプロンプトを、選択した個性の型を用いてスピーカを通じて生成する、命令を含むことと、を含む請求項２５に記載の移動体通信デバイス。
【請求項２８】
実行可能な命令は、プロセッサ上で実行されると移動体通信デバイスが、識別した名前が正しいことの確認をユーザに求める確認プロンプトを、選択した個性の型を用いて生成する命令を含む請求項２７に記載の移動体通信デバイス。
【請求項２９】
実行可能な命令は、プロセッサ上で実行されると移動体通信デバイスが、ユーザから確認入力を受信することに応答して、識別した被呼者の名前に対応する番号にダイヤルする命令を含む請求項２８に記載の移動体通信デバイス。
【国際調査報告】
2007525897.tif 000011
2007525897.tif 000012
2007525897.tif 000013