(57)【要約】本発明は、プロセッサ（１１）と、プログラム・メモリ（１２）と、データ・メモリ（１３）とを備え、さらに、マイクロフォン（１７）を含む音声付勢される遠隔制御装置と、音声認識モジュール（１４）と、語彙アナライザ（１５）と、ワイヤレス・リンク（２０）を介してホーム・ゲートウェイ（２１）により少なくとも１つの家庭内設備（２７）を制御するよう適合された通信モジュール（１６）と、手動入力装置と、表示スクリーン（１８）と、スピーカ（１９）とを備えたモバイル・マルチメディア・ターミナルに関する。本発明は、また、マルチメディア・モバイル・ターミナルを用いたホーム・ゲートウェイの遠隔制御のための方法に関する。
2005528018.tif 000002
【特許請求の範囲】
【請求項１】
プロセッサと、プログラム・メモリと、データ・メモリとを備えたモバイル・マルチメディア・ターミナルにおいて、さらに、マイクロフォンを含む音声付勢される遠隔制御装置と、音声認識モジュールと、語彙アナライザと、ワイヤレス・リンクを介してホーム・ゲートウェイにより家庭内設備の少なくとも１つのアイテムを制御することができる通信モジュールと、手動入力装置と、スクリーンと、スピーカとを備えることを特徴とするモバイル・マルチメディア・ターミナル。
【請求項２】
前記スクリーンは、タッチ入力特性が装備されたスクリーンである請求項１に記載のターミナル。
【請求項３】
前記ワイヤレス・リンクは、ＩＥＥＥ  ８０２．１１型リンクまたは“Bluetooth”型リンクもしくはＩＰプロトコルを支援する無線送信の任意の他の型のリンクである請求項１に記載のターミナル。
【請求項４】
モバイル・マルチメディア・ターミナルによりホーム・ネットワークを介して設備の少なくとも１つのアイテムに接続されたホーム・ゲートウェイの遠隔制御方法であって、
ユーザによりターミナルの入力周辺機器を付勢するステップと、
前記ユーザにより音声指令を送るステップと、
前記音声指令を前記ターミナルにより受信するステップと、
受信された音響信号を電気情報に変換するステップと、
前記電気情報を分析して文法で記載されるワードを関連させるステップと、
前記ワードと、前記ホーム・ゲートウェイによって許可されるオーダのリストとの間の対応を検出するステップと、
オーダを解釈することができなかったという警告を前記ターミナルにより送信するステップと、
存在する場合にはオーダを表示するステップと、
前記ターミナルが前記オーダを解釈することができた場合にフィードバックするステップと、
前記ゲートウェイのプロトコルに従って前記オーダを符号化するステップ（ステップ３７）と、
前記符号化されたオーダを送信プロトコル・リクエストに統合するステップと、
該リクエストを前記ホーム・ゲートウェイに送信するステップと、
を含むことを特徴とするホーム・ゲートウェイの遠隔制御方法。
【請求項５】
前記指令の解釈が不明確である場合に該指令のための反復リクエスト・メッセージを表示するステップを含む請求項４に記載の方法。
【請求項６】
家庭内設備の少なくとも１つのアイテムに関連した機能もしくはホーム・ゲートウェイの本来備わっている機能を制御するステップを含む請求項４に記載の方法。
【請求項７】
家庭内設備の少なくとも１つのアイテム上でホストされるハードウェアまたはソフトウェア・プロセスを付勢するステップを含む請求項６に記載の方法。
【請求項８】
音声モードでまたは手動動作により行われる指令を反復するステップを含む請求項５に記載の方法。
【請求項９】
ターミナル（１０）とホーム・ゲートウェイ（２１）との間で送信される情報の暗号化アルゴリズムを用いる請求項４に記載の方法。
【請求項１０】
ターミナル（１０）とホーム・ゲートウェイとの間で送信される情報はＩＰフォーマットにある請求項４に記載の方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、モバイル・マルチメディア・ターミナル及びかかるターミナルを用いたホーム・ゲートウェイ・リモート制御方法に関する。
【背景技術】
【０００２】
ハウスホールド（家庭内）設備を制御するために音声認識モジュールを用いることは知られている。しかしながら、このモジュールは、ユーザから離れている。ユーザと前記音声認識モジュールとの間でオーダもしくは注文を送信する際、オーディオ、音響または電気フラックスが歪みを受ける場合には、ユーザは、コマンドもしくは指令を繰り返さなければならない。さらに、前記音声認識モジュールを含む制御装置と、ユーザとの間での交換は、音声モードにおいてのみ行われる。これは、ユーザに対する冗長な対話に帰結する。
【０００３】
本発明の目的は、このような問題を、オーディオ・フラックスの音響的または電気的な歪みの危険を減少することによって、そして音声認識モジュールによって不明瞭と見なされた音声コマンドをユーザが有効化するのを可能とすることによって、解決することを可能とするターミナルもしくは端末装置を提起することである。
【発明の開示】
【課題を解決するための手段】
【０００４】
本発明は、プロセッサと、プログラム・メモリと、データ・メモリとを備えたモバイル・マルチメディア・ターミナルにおいて、さらに、マイクロフォンを含む音声付勢される遠隔制御装置と、音声認識モジュールと、語彙アナライザと、ワイヤレス・リンクを介してホーム・ゲートウェイにより家庭内設備の少なくとも１つのアイテムを制御することができる通信モジュールと、を備えたモバイル・マルチメディア・ターミナルに関する。
【０００５】
本発明のモバイル・マルチメディア・ターミナルは、また、手動入力装置と、スクリーンと、スピーカとを備え得る。スクリーンは、タッチ入力特性が装備されたスクリーンであって良い。ワイヤレス・リンクは、例えば、ＩＥＥＥ  ８０２．１１型リンク、または“Bluetooth”型リンク、もしくはＩＰプロトコルを支援する任意の他の型の無線送信リンクであって良い。
【０００６】
本発明は、また、モバイル・マルチメディア・ターミナルによりホーム・ネットワークを介して家庭内設備の少なくとも１つのアイテムに接続されたホーム・ゲートウェイの遠隔制御方法であって、
ユーザによりターミナルの入力周辺機器を付勢するステップと、
前記ユーザにより音声指令を送るステップと、
前記音声指令を前記ターミナルにより受信するステップと、
受信された音響信号を電気情報に変換するステップと、
前記電気情報を分析して文法で記載されるワードを関連させるステップと、
前記ワードと、前記ホーム・ゲートウェイによって許可されるオーダのリストとの間の対応を検出するステップと、
オーダを解釈することができなかったという警告を前記ターミナルにより送信するステップと、
存在する場合にはオーダを表示するステップと、
前記ターミナルが前記オーダを解釈することができた場合にフィードバックするステップと、
前記ゲートウェイのプロトコルに従って前記オーダを符号化するステップと、
前記符号化されたオーダを送信プロトコル・リクエストに統合するステップと、
該リクエストを前記ホーム・ゲートウェイに送信するステップと、
を含むことを特徴とするホーム・ゲートウェイの遠隔制御方法にも関する。
【０００７】
この方法は、また、前記指令の解釈が不明確である場合に該指令のための反復リクエスト・メッセージを表示するステップをも含む。
【０００８】
長所的には、本発明による方法は、家庭内設備の少なくとも１つのアイテムに関連した機能もしくはホーム・ゲートウェイの本来備わっている機能を制御するステップを含む。この方法で、本発明の方法は、家庭内設備の少なくとも１つのアイテム上でホストされるハードウェアまたはソフトウェア・プロセスを付勢するステップを含んでいても良い。
【０００９】
長所的には、本発明による方法は、音声モードでまたは手動動作により行われる指令を反復するステップを含む。
【００１０】
また、ターミナルとホーム・ゲートウェイとの間で送信される情報の暗号化アルゴリズムを用いることも可能である。
【００１１】
ターミナルとホーム・ゲートウェイとの間で送信される情報はＩＰフォーマットにあって良い。
【００１２】
本発明によるモバイル・マルチメディア・ターミナルは、このように、ＩＰパケットにおけるもしくは任意の他のプロトコルにおける処理の結果を含め、音響信号を処理することができ、このデータを、該データが解釈されるところであるホーム・ゲートウェイにリアル・タイムで送信することができ、そして以下の動作のいずれかをトリガすることができる。
【００１３】
ローカル・データ送信ネットワークを介して前記ホーム・ゲートウェイに接続される設備の制御と、
前記ゲートウェイにより行われるべき予め決められた動作シナリオの実行と、
前記ゲートウェイへの内部通知と、
設備状態リクエストと、である。
【００１４】
代わりに、前記ゲートウェイは、モバイル・マルチメディア・ターミナルに、データ、音声、画像またはビデオの形態で以下に示す情報を送信しても良い。
指令処理状況、並びに
ホーム・ローカル・ネットワークもしくは該ネットワークに接続される設備に関する警告もしくは何らかの事象の通知。
【発明を実施するための最良の形態】
【００１５】
図１に示されるように、ローカル・ユーザ１によって制御可能な本発明によるモバイル・マルチメディア・ターミナル１０は、特に以下の機能要素を組込んだ携帯可能情報システム・プラットフォームである。その機能要素とは、入出力周辺機器と一緒に、ＲＡＭメモリ１２、バンク・メモリ１３、音声認識モジュール１４、アナライザ１５及び通信モジュール１６が接続されたプロセッサ１１である。
【００１６】
入力周辺機器は、マイクロフォン１７、及び１つまたはそれ以上のプッシュ・ボタンで構成され得る手動の入力装置であり得る。前記入力装置は、タッチ入力特性が装備されたスクリーン１８をも含み得る。
【００１７】
出力周辺機器は、かかるスクリーン１８及びスピーカー１９であり得る。
【００１８】
図１に示されるように、前記ターミナルは、ワイヤレス、ＩＥＥＥ  ８０２．１１、“Bluetooth”型リンクを介して、もしくはワイヤレス通信規準（ネットワーク２０）を用いた任意の他のリンクを介して、ホーム・ゲートウェイ２１に接続され、該ホーム・ゲートウェイ２１は、
外部ネットワーク２３とのインターフェース２２と、
内部ネットワーク２０、例えば、Hertzian とのインターフェース２４と、
家庭内（ハウスホールド）設備を制御するために用いられるセンサもしくはアクチュエータ２７、及びハイファイもしくはビデオ・システムのようなマルチメディア設備を備えたホーム・ローカル・ネットワーク２６とのインターフェース２５と、
インターネットへのインターフェース２８と、
を備えている。
【００１９】
前記ターミナル（もしくは端末装置）１０は、その通信モジュール１６を介してホーム・ゲートウェイ２１にリアルタイムで、例えばＩＰフォーマットにあるディジタル情報を送信することができる。
【００２０】
図２に示された処理例において、ユーザから音声指令（コマンド）を送ると、それに続いて、該音声指令は、マイクロフォン１７を用いてターミナル（端末装置）で受信される（ステップ３１）。前記マイクロフォン３１は、音響信号を電気情報に変換する（ステップ３２）。
【００２１】
音声認識モジュール１４はこの電気信号を分析し、もし適用可能ならば、それに、文法で記載されるワード（言葉）を関連させる（ステップ３３）。
【００２２】
語彙アナライザ１５は、音声認識モジュールによって解釈されたワードを受信し、該ワードと、ホーム・ゲートウェイによって許容されるオーダ（注文）のリストとの間の対応を見つける（ステップ３４）。
【００２３】
もしオーダがゲートウェイによって許容されたオーダのリストに属するならば、前記音声認識モジュール１４によって認識されたワードは、ターミナル・スクリーンに送られる（ステップ３５）。解釈が不明確ならば、表示されたワードの有効性がユーザから要求される（ステップ３６）。
【００２４】
ステップ３５に続いて、語彙アナライザ１５は、通信モジュールに前記情報を送信する前に、ゲートウェイ２１のプロトコルに従って、オーダを符号化する（ステップ３７）。
【００２５】
通信モジュール１６は、符号化されたオーダを、送信プロトコル、例えばＩＰ、のリクエスト、例えば“ＨＴＴＰ”リクエスト、に統合し（ステップ３８）、次に、該リクエストを、ワイヤレス・リンク２０を介してホーム・ゲートウェイ２１に送信する。
【００２６】
本発明によるモバイル・マルチメディア・ターミナルは、このように、ホーム・ゲートウェイ２１に接続されたホーム・ローカル・ネットワーク２６の設備２７の１つまたはそれ以上のアイテム上でホストを受けるハードウェアまたはソフトウェアを遠隔的に付勢するために用いられ得る。
【００２７】
このターミナル１０は、ホーム・ゲートウェイ２１によって提供される遠隔制御機能のすべてをユーザが音声制御するのを可能とする。該遠隔制御機能は、データ・ネットワーク２６を介してホーム・ゲートウェイ２１に接続された、もしくは該ゲートウェイ２１に本来備わっている設備２７に関係し得る。制御されるべきアイテムへのユーザからのオーダは、アクションと、アイテムの名称との少なくとも２つの有用な情報アイテムを含む。
【００２８】
ユーザは、オーダを与える前に、例えばターミナル上のプッシュ・ボタンまたはタッチ・スクリーン上のアイコンのようなモバイル・マルチメディア・ターミナル１０の入力周辺機器のいずれかを付勢し得る。この利便性は、ホーム・ゲートウェイ２１に対して意図されたユーザによって与えられるオーダのみに対してのエラーの危険性を減少する。
【００２９】
長所的には、本発明によるターミナル１０は、ターミナル１０によって受信され解釈されたオーダの反復を、スクリーン１８上で視覚的にかもしくはスピーカ１９による音声合成によるかのいずれかで認可する。このフィードバックは、ユーザがオーダを有効とするかもしくは記録するのを可能とする。この特徴は、盲目もしくは部分的に見えるユーザによる遠隔制御の使用を容易にする。
【００３０】
モバイル・マルチメディア・ターミナル１０は、受信されたオーダを解釈することができなかった場合には、ユーザに警告することができる。この警告は、オーディオまたは視覚信号であって良く、もしくはオーディオ・メッセージであって良い。さらに、かかるオーダの確認、復唱または反復が、音声モードで、もしくは手動モードで、例えばボタンを押すことによってまたはモバイル・マルチメディア・ターミナル１０のタッチ・スクリーンを押すことによって、ユーザによって行われ得る。
【００３１】
モバイル・マルチメディア・ターミナル１０は、Hertzian 送信から帰結しがちなエラーを修正することを可能とする。当業者に良く知られた方法は、送信プロトコルの上層（TCP/IP、UDP/IP、等）及び下層（“Bluetooth”,IEEE 802.11、等）上で用いられ得るサービスの品質を確実にする。下層は、ＯＳＩモデルの層１及び２：物理層及びリンク層である。上層は、ＯＳＩモデルの層３〜６、通常、Network、Transport、Session及びPresentation層と称される層である。
【００３２】
最後に、モバイル・マルチメディア・ターミナル１０は、該ターミナル及びゲートウェイ２１間で送信されるメッセージを認証し、秘密にし、そして保証するよう、各ＩＰパケットに含まれるディジタル・データの暗号化アルゴリズムを備える。
【００３３】
前記ターミナル（端末）１０は、例えば、ホームもしくはファミリー・アプリケーションにアクセスするために用いられるディジタルＰＡもしくはより大きいフォーマット・グラフィック・タブレットであって良い。
【００３４】
本発明によるターミナル（端末）の実施形態の例
ターミナル（端末）１０の実施形態において、家庭内のオーブン及び巻き上げ式ブラインドがホーム・ゲートウェイ２１に接続され、該ゲートウェイからホーム・ローカル・ネットワーク２６を介して以下のパラメータ：すなわち、スタート、ストップ、料理安定化及び変化段階を受信する。
【００３５】
従って、ユーザは、居間に座ったままで、ターミナル１０の音声付勢された制御を用いて、クッキング・サイクルの進行を見つけ、オーブンに停止命令を送るか皿がオーブンから取り除かれる時間を遅延させるよう温度を下げる命令をオーブンに送ることができる。
【００３６】
同じ場所から、ユーザは、好きなテレビ番組を何等見逃すことなく、ブラインドを閉めるよう制御することができる。
【図面の簡単な説明】
【００３７】
【図１】本発明によるモバイル・マルチメディア・ターミナルの構成を示す図である。
【図２】本発明による方法のステップを示す図である。
【符号の説明】
【００３８】
１・・・ユーザ
１０・・・モバイル・マルチメディア・ターミナル
１１・・・プロセッサ
１２・・・ＲＡＭメモリ
１３・・・バンク・メモリ
１４・・・音声認識モジュール
１５・・・語彙アナライザ
１６・・・通信モジュール
１７・・・マイクロフォン
１８・・・スクリーン
１９・・・スピーカ
２０・・・内部ネットワーク
２１・・・ホーム・ゲートウェイ
２３・・・外部ネットワーク
２６・・・ホーム・ローカル・ネットワーク
【図１】
2005528018.tif 000003
【図２】
2005528018.tif 000004
【手続補正書】
【提出日】平成16年4月13日(2004.4.13)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】０００３
【補正方法】変更
【補正の内容】
【０００３】
本発明の目的は、このような問題を、オーディオ・フラックスの音響的または電気的な歪みの危険を減少することによって、そして音声認識モジュールによって不明瞭と見なされた音声コマンドをユーザが有効化するのを可能とすることによって、解決することを可能とするターミナルもしくは端末装置を提起することである。
文献ＷＯ  ９４／０３０２０は、ユーザから音声指令を受信することができる手動もしくは音声付勢される遠隔制御装置を開示しており、該装置は、前記音声指令の認識を行い、前記指令に対応する赤外線コードもしくは一組の赤外線コードを決定し、該赤外線コードを電子設備のアイテムに送信するために用いることができる。音声指令の受信に続いて、この遠隔制御装置は、リアル・タイムで、もしくはユーザによって特定され得る時間だけ遅延されて、動作を行うことができる。
文献ＷＯ  ０１／７３７２０は、例えばモバイル・ターミナルから、Bluetooth 規準に従って指令を受信するための Bluetooth 送信器／受信器を備えた遠隔制御インターフェース装置を開示している。該装置は、また、テレビジョンを制御するために用いられる赤外線信号に前記指令を変換するために用いられるプロセッサ及び赤外線送信器をも備えている。
【手続補正書】
【提出日】平成16年7月12日(2004.7.12)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
プロセッサ（１１）と、プログラム・メモリ（１２）と、データ・メモリ（１３）とを備えたモバイル・マルチメディア・ターミナルにおいて、さらに、マイクロフォン（１７）を含む音声付勢される遠隔制御装置と、音声認識モジュール（１４）と、語彙アナライザ（１５）と、ワイヤレス・リンク（２０）を介して、ホーム・ローカル・ネットワークとのインターフェースを有するホーム・ゲートウェイ（２１）により該ホーム・ローカル・ネットワークから設備の幾つかのアイテムを制御することができる通信モジュール（１６）と、手動入力装置と、スクリーン（１８）と、スピーカ（１９）とを備えることを特徴とするモバイル・マルチメディア・ターミナル。
【請求項２】
前記スクリーンは、タッチ入力特性が装備されたスクリーン（１８）である請求項１に記載のターミナル。
【請求項３】
前記ワイヤレス・リンクは、ＩＥＥＥ  ８０２．１１型リンクまたは“Bluetooth”型リンクもしくはＩＰプロトコルを支援する無線送信の任意の他の型のリンクである請求項１または２に記載のターミナル。
【請求項４】
前記ターミナルが、前記設備のアイテムの１つまたはそれ以上からの指令オーダを解釈することができた場合にフィードバックを可能化する請求項１乃至３のいずれかに記載のターミナル。
【請求項５】
モバイル・マルチメディア・ターミナル（１０）によりホーム・ネットワーク（２６）を介して設備（２７）の少なくとも１つのアイテムに接続されたホーム・ゲートウェイ（２１）の遠隔制御方法であって、
前記音声指令を前記ターミナルにより受信するステップ（３１）と、
受信された音響信号を電気情報に変換するステップ（３２）と、
前記電気情報を分析して文法で記載されるワードを関連させるステップ（３３）と、
前記ワードと、前記ホーム・ゲートウェイによって許可されるオーダのリストとの間の対応を検出するステップ（３４）と、
存在する場合にはオーダを表示するステップ（３５）と、
前記ゲートウェイのプロトコルに従って前記オーダを符号化するステップ（３７）と、
前記符号化されたオーダを送信プロトコル・リクエストに統合するステップ（３８）と、
該リクエストを前記ホーム・ゲートウェイ（２１）に送信するステップ（３９）と、
を含むことを特徴とするホーム・ゲートウェイの遠隔制御方法。
【請求項６】
前記指令の解釈が不明確である場合に該指令のための反復リクエスト・メッセージを表示するステップ（３６）を含む請求項５に記載の方法。
【請求項７】
家庭内設備の少なくとも１つのアイテムに関連した機能もしくはホーム・ゲートウェイ（２１）の本来備わっている機能を制御するステップを含む請求項５または６に記載の方法。
【請求項８】
家庭内設備（２７）の少なくとも１つのアイテム上でホストされるハードウェアまたはソフトウェア・プロセスを付勢するステップを含む請求項５乃至７のいずれかに記載の方法。
【請求項９】
音声モードでまたは手動動作により行われる指令を反復するステップを含む請求項５乃至８のいずれかに記載の方法。
【請求項１０】
ターミナル（１０）とホーム・ゲートウェイ（２１）との間で送信される情報の暗号化アルゴリズムを用いる請求項５乃至９のいずれかに記載の方法。
【請求項１１】
ターミナル（１０）とホーム・ゲートウェイ（２１）との間で送信される情報はＩＰフォーマットにある請求項５乃至１０のいずれかに記載の方法。
【国際調査報告】
2005528018.tif 000005
2005528018.tif 000006
2005528018.tif 000007
2005528018.tif 000008
2005528018.tif 000009
2005528018.tif 000010