(57)【要約】対話型装置は、触覚改良（ＴＥ）画像がレンダリングでき、幅広いユーザ入力キーおよび／またはユーザ選択可能なメニュー／リスト項目を一時的に実現できるディスプレイを備える。一実施形態では、該ディスプレイは柔軟な画像ディスプレイ・レイヤと触覚的なディスプレイ・レイヤとを含み、該装置は、それぞれのレイヤ上でのレンダリングを制御するための対応するデバイス・ドライバを含む。一実施形態では、該装置はＴＥ画像のレンダリング要求に応答して、触覚的な改良の触覚的な属性を有する該ＴＥ画像の画像指定に従って、該ＴＥ画像のピクセル・データとピストン・データを生成するグラフィックス機能をさらに備える。
2006500685.tif 000002
【特許請求の範囲】
【請求項１】
柔軟な画像ディスプレイ・レイヤと、タッチ・センシティブな触覚的ディスプレイ・レイヤとを含むタッチ・センシティブな画像ディスプレイと、
前記柔軟な画像ディスプレイ・レイヤのピクセルの選択的な活動化／非活動化を制御して前記柔軟な画像ディスプレイ・レイヤ上の画像のレンダリングを行わせる第１のディスプレイ・ドライバと、
前記タッチ・センシティブな触覚的ディスプレイ・レイヤのピストンを制御して前記柔軟な画像ディスプレイ・レイヤの異なる部分の選択的な触覚的な突起を形成させて触覚改良選択したレンダリングされた画像を表示する第２のディスプレイ・ドライバとを含む対話型装置。
【請求項２】
前記触覚改良画像が動的に形成された非永続的な（ＤＦＮＰ）入力キーを含む請求項１に記載の装置。
【請求項３】
前記ＤＦＮＰ入力キーが、各々が１つまたは複数のＤＦＮＰ入力キーを有する複数のＤＦＮＰ入力キー・グループの１つの選択を容易にするＤＦＮＰ入力キー・グループ選択キーを含む請求項２に記載の装置。
【請求項４】
前記ＤＦＮＰ入力キー・グループが、ＤＦＮＰアルファベット入力キー・グループ、ＤＦＮＰ数字キー・グループ、ＤＦＮＰパンクチュエーション入力キー・グループ、ＤＦＮＰ特殊文字入力キー・グループ、ＤＦＮＰファンクション・キー・グループの少なくとも２つを含む請求項３に記載の装置。
【請求項５】
前記ＤＦＮＰ入力キーがＤＦＮＰアルファベット入力キーとＤＦＮＰ数字キーから選択されたキーを含む請求項２に記載の装置。
【請求項６】
前記ＤＦＮＰ入力キーがＤＦＮＰパンクチュエーション入力キーとＤＦＮＰ特殊文字入力キーから選択されたキーを含む請求項２に記載の装置。
【請求項７】
前記ＤＦＮＰ入力キーがＤＦＮＰファンクション・キーを含む請求項２に記載の装置。
【請求項８】
前記ＤＦＮＰファンクション・キーがＤＦＮＰ上キー、ＤＦＮＰ下キー、ＤＦＮＰ左キー、ＤＦＮＰ右キーから選択されたキーである請求項７に記載の装置。
【請求項９】
前記ＤＦＮＰファンクション・キーがＤＦＮＰページ・アップ・キーとＤＦＮＰページ・ダウン・キーから選択されたキーである請求項７に記載の装置。
【請求項１０】
前記ＤＦＮＰファンクション・キーがＤＦＮＰスタート・キー、ＤＦＮＰエンド・キー、ＤＦＮＰフォワード・キー、ＤＦＮＰリバース・キーから選択されたキーである請求項７に記載の装置。
【請求項１１】
前記ＤＦＮＰファンクション・キーがＤＦＮＰ選択キー、ＤＦＮＰチャネル・アップ／ダウン・キー、ＤＦＮＰボリューム・アップ／ダウン・キー、ＤＦＮＰボリューム・ミュート・キーから選択されたキーである請求項７に記載の装置。
【請求項１２】
前記ＤＦＮＰファンクション・キーが前記装置によって制御される複数のデバイスの１つの選択を容易にするＤＦＮＰデバイス選択キーである請求項７に記載の装置。
【請求項１３】
前記ＤＦＮＰファンクション・キーが前記ＤＦＮＰコール・キーとＤＦＮＰエンド・コール・キーからから選択されたキーである請求項７に記載の装置。
【請求項１４】
前記触覚改良画像がユーザ選択可能メニュー項目とユーザ選択可能なリスト項目から選択された項目を含む請求項１に記載の装置。
【請求項１５】
前記装置が、前記第１と第２のデバイス・ドライバに通信可能に結合されてアプリケーションが触覚改良画像をレンダリングさせるグラフィックス機能の集合をさらに含む請求項１に記載の装置。
【請求項１６】
レンダリングする前記触覚改良画像を指定する画像指定に少なくとも部分的に基いて、レンダリングする前記触覚改良画像の複数のピクセル・データとピストン・データを生成する少なくとも１つのグラフィックス機能が装備された請求項１５に記載の装置。
【請求項１７】
前記画像指定が、
レンダリングする前記画像の識別と、
前記レンダリングされた画像の触覚的な改良の１つまたは複数の触覚的な属性を指定する１つまたは複数の触覚的属性指定とを含む請求項１６に記載の装置。
【請求項１８】
前記触覚的な属性が、触覚的なピン高さ属性、触覚的なピン・パターン属性、触覚的なピン硬度属性から選択された少なくとも１つを含む請求項１７に記載の装置。
【請求項１９】
前記触覚的な属性が、触覚的なピン高さ属性、触覚的なピン・パターン属性、触覚的なピン硬度属性の少なくとも２つを含む請求項１７に記載の装置。
【請求項２０】
前記触覚的な属性が、触覚的なピン高さ属性、触覚的なピン・パターン属性、触覚的なピン硬度属性を含む請求項１７に記載の装置。
【請求項２１】
前記装置がユーザによる触覚改良画像の選択を検出する第３のデバイス・ドライバをさらに含む請求項１に記載の装置。
【請求項２２】
前記第２と第３のデバイス・ドライバが同じデバイス・ドライバである請求項２１に記載の装置。
【請求項２３】
前記装置がマルチデバイス・リモート制御装置、パーソナル・ディジタル・アシスタント、無線移動電話機から選択される請求項１に記載の装置。
【請求項２４】
前記装置がパームサイズのコンピュータ、タブレット・コンピュータ、ラップトップ・コンピュータ、デスクトップ・コンピュータ、セットトップ・ボックス、メディア・プレーヤから選択される請求項１に記載の装置。
【請求項２５】
触覚改良画像をレンダリングするグラフィックス動作の要求を受信するステップと、
これに応答して、レンダリングする前記触覚改良画像の複数のピクセル・データとピストン・データを生成するステップとを含むマシンで実施できるコンピューティング方法。
【請求項２６】
前記生成ステップが、レンダリングする前記触覚改良画像を指定する画像指定に少なくとも部分的に基いて、レンダリングする前記触覚改良画像の複数のピクセル・データとピストン・データを生成するステップを含む請求項２５に記載の方法。
【請求項２７】
前記画像指定が、
レンダリングする前記画像の識別と、
前記レンダリングされた画像の触覚的な改良の１つまたは複数の触覚的な属性を指定する１つまたは複数の触覚的属性指定とを含む請求項２６に記載の方法。
【請求項２８】
前記触覚的な属性が、触覚的なピン高さ属性、触覚的なピン・パターン属性、触覚的なピン硬度属性から選択された少なくとも１つを含む請求項２７に記載の方法。
【請求項２９】
前記触覚的な属性が、触覚的なピン高さ属性、触覚的なピン・パターン属性、触覚的なピン硬度属性の少なくとも２つを含む請求項２７に記載の装置。
【請求項３０】
前記触覚的な属性が、触覚的なピン高さ属性、触覚的なピン・パターン属性、触覚的なピン硬度属性を含む請求項２７に記載の方法。
【請求項３１】
前記生成されたピクセル・データを用いて前記画像をレンダリングするステップと、
前記生成されたピストン・データを用いて前記レンダリングされた画像を触覚的に改良するステップとを含む請求項２５に記載の方法。
【請求項３２】
レンダリングする画像の識別と、
前記レンダリングされた画像の触覚的な改良の１つまたは複数の触覚的な属性を指定する１つまたは複数の触覚的属性指定とを含むマシン可読画像指定。
【請求項３３】
前記触覚的な属性が、触覚的なピン高さ属性、触覚的なピン・パターン属性、触覚的なピン硬度属性から選択された少なくとも１つを含む請求項３２に記載の画像指定。
【請求項３４】
前記触覚的な属性が、触覚的なピン高さ属性、触覚的なピン・パターン属性、触覚的なピン硬度属性の少なくとも２つを含む請求項３２に記載の画像指定。
【請求項３５】
前記触覚的な属性が、触覚的なピン高さ属性、触覚的なピン・パターン属性、触覚的なピン硬度属性を含む請求項３２に記載の画像指定。
【請求項３６】
レンダリングする画像の複数のピクセル・データと、
前記レンダリングされた画像を触覚的に改良する複数のピストン・データとを含むデータ構造体。
【請求項３７】
前記ピストン・データが前記レンダリングされた画像の前記触覚的な改良の１つまたは複数の触覚的な属性に従って生成される請求項３６に記載のデータ構造体。
【請求項３８】
前記触覚的な属性が、触覚的なピン高さ属性、触覚的なピン・パターン属性、触覚的なピン硬度属性から選択された少なくとも１つを含む請求項３７に記載のデータ構造体。
【請求項３９】
前記触覚的な属性が、触覚的なピン高さ属性、触覚的なピン・パターン属性、触覚的なピン硬度属性の少なくとも２つを含む請求項３７に記載のデータ構造体。
【請求項４０】
前記触覚的な属性が、触覚的なピン高さ属性、触覚的なピン・パターン属性、触覚的なピン硬度属性を含む請求項３７に記載のデータ構造体。
【請求項４１】
触覚改良画像を表示するディスプレイ手段と、
ピクセルの選択的な活動化／非活動化を制御して画像のレンダリングを行わせる第１の制御手段と、
前記レンダリングされた画像から選択された画像の補足の選択的な触覚的な改良を制御する第２の制御手段とを含む装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は対話型装置の分野に関する。より詳細には本発明は触覚を改良した視覚的画像機能を備えた対話型装置に関する。
【０００２】
ヒューマンマシン・インタフェースは、人間が操作する機械類、特にリモート制御装置、パームサイズのコンピュータ・デバイス（パーソナル・ディジタル・アシスタント（ＰＤＡ）とも呼ばれる）、ラップトップ・コンピュータなどのさまざまなパーソナル・デバイスなどの「未熟練の」初心者ユーザ用のマシンまたはデバイスのための機械類の設計者にとって、長い間、興味の対象であった。改良された使い易さは一般にユーザの満足を向上させる。
【背景技術】
【０００３】
マイクロプロセッサやその他の関連する技術の進歩の結果、ますます多くのパーソナル・デバイスがプロセッサベースになり、かつ多機能になっている。例えば、今日、無線移動電話機、ＭＰ３プレーヤなどとしても使えるＰＤＡを入手することが可能である。
【０００４】
通常、適切なエンド・ユーザ・インタフェース、すなわち、これらのデバイスをＰＤＡ、無線移動電話機、またはＭＰ３プレーヤなどとして操作するためのインタフェースが必要に応じてタッチ・センシティブ画面上に提示される。ユーザは適当なインタフェース要素、画像、例えば、キーまたはボタンの画像、あるいはメニューまたはリスト項目の画像に触れることでインタフェースと対話する。
【０００５】
これらのグラフィカル・インタフェースの多くは直感的で使い易い。ただし、これらのグラフィカル・インタフェースと同様にフレンドリでありながら、キーまたはボタンの画像への接触には触覚的な感触がない（すなわち、ユーザは実際のキー／ボタンをクリックする感触を得られない）。同じことがメニューまたはリスト項目の選択についてもいえる。触覚的フィードバックの欠如はユーザによっては「難しい」か「不満が残る」ものである。
【発明の開示】
【発明が解決しようとする課題】
【０００６】
したがって、少なくともインタフェース要素の一部と対話している時にユーザに触覚的な感覚を与えることでユーザの体験を豊かにすることが望ましい。
【発明を実施するための最良の形態】
【０００７】
以下に、同様の参照符号が同様の要素を表す添付図面に示した例示的であって限定的ではない実施形態を用いて、本発明について説明する。
【０００８】
本発明は触覚改良画像機能を備えた対話型装置を含む。
【０００９】
以下の説明では、本発明のさまざまな態様について説明する。ただし、本発明はその一部または全ての態様を用いて実施できることは当業者には明らかであろう。説明の都合上、本発明の徹底的な理解を目指して、説明では特定の番号、材料、構成を使用する。ただし、本発明は特定の詳細内容なしに実施することもできることは当業者には明らかであろう。その他の場合、本発明を分かりにくくすることを避けるために、よく知られている機能は省略または簡単化している。
【００１０】
当業者が他の当業者にその仕事の実質を伝えるために一般に使用する方法に従って、ピクセル、アクティブ・マトリクス、ピストンなどのディスプレイ技術の用語を使って説明をする箇所がある。当業者には明らかなように、これらの数量は、プロセッサやそのサブシステムの電気および／または光構成部品によって記憶、転送、合成、その他の方法で操作が可能な電気、磁気、または光信号の形態をとっている。
【００１１】
本発明を理解する上で最も役に立つ方法で、さまざまな動作を複数の離散的なステップとして順番に説明する。ただし、説明の順序は、これらの動作が必ず順序どおりであることを意味すると解釈してはならない。特に、これらの動作を記述の順序どおりに実行する必要はない。
【００１２】
「一実施形態で」という語句が繰り返し使用される。この語句は一般に同じ実施形態を指すものではないが、指すこともできる。「からなる」、「有する」、「含む」という用語は特にことわりがない限り同義である。
【００１３】
章の見出しは単に読み易くするためのものであって、本発明を限定したり狭めたりするものと解釈してはならない。
【００１４】
概要
図１は、本発明の一実施形態による対話型装置の構造図である。図に示すように、対話型装置１００は、互いにバス１０８で接続されたプロセッサ１０２と、メモリ１０４と、触覚改良画像ディスプレイ１０６とを含む。以下に詳述するように、触覚改良画像ディスプレイ１０６を用いて、有利には、触覚を改良したさまざまな画像をレンダリングしてさまざまな入力キー／ボタンをエミュレートし、かつ／または触覚改良メニュー／リスト項目を提供することができる。これらの触覚改良画像、および／または触覚改良メニュー／リスト項目は、これらのキー／ボタン、メニュー／リスト項目のレンダリングされた画像と対話する際にユーザの触覚的な感覚を与えることで改良されたユーザの体験を提供する。
【００１５】
図に示すように、この実施形態では、装置１００は、アプリケーション１２０が触覚改良画像ディスプレイ１０６の機能を利用してユーザの体験を向上させるための、本発明の教示に組み込まれたデバイス・ドライバ１４０とグラフィックス機能１３０とを備える。
【００１６】
また、対話型装置１００の所期の使用法に応じて、装置１００はディジタル信号プロセッサ（ＤＳＰ）、エンコーダ／デコーダ、送受信機（ＴＸ／ＲＸ）、ネットワーク・インタフェース（ＮＩＣ）などの追加の構成要素をさらに含むことができる。
【００１７】
対話型装置１００の上記の、およびその他の態様について以下に詳述する。
【００１８】
プロセッサとメモリ
さらに図１を参照すると、プロセッサ１０２はメモリ１０４にロードされた２進数または命令を実行することで装置１００の動作を制御する。
【００１９】
プロセッサ１０２は、これに限定はされないが、カリフォルニア州Ｓａｎｔａ  ＣｌａｒａにあるＩｎｔｅｌ  Ｃｏｒｐｏｒａｔｉｏｎから発売されているＰｅｎｔｉｕｍ（登録商標）プロセッサまたはカリフォルニア州ＳｕｎｎｙｖａｌｅにあるＡｄｖａｎｃｅｄ  Ｍｉｃｒｏ  Ｄｅｖｉｃｅｓから発売されているＡｎｔｈｌｏｎ（登録商標）プロセッサを含む、当技術分野で知られているいくつかのプロセッサのいずれかでよい。
【００２０】
メモリ１０４は当技術分野で知られているいかなる種類の揮発性または不揮発性メモリでもよい。通常、不揮発性メモリを使用する時は、装置１００は、２進数／命令の永続的なコピーを記憶できるディスク・ドライブ、ＣＤＲＯＭ、ＤＶＤドライブなどの、またはリモート位置から２進数／命令を取り出すことができるＮＩＣなどの大容量記憶装置をさらに含む。
【００２１】
触覚改良画像ディスプレイ
図２は、一実施形態による図１の触覚改良画像ディスプレイ１０６の分解斜視図である。図に示すように、この実施形態では、触覚改良画像ディスプレイ１０６は、図のように連続して隣り合って配置された透明なタッチ・センシティブ・レイヤ２０２と、柔軟な画像ディスプレイ・レイヤ２０４と、触覚的ディスプレイ・レイヤ２０６とを含む。
【００２２】
柔軟な画像ディスプレイ２０４は、図２に示す「矢印」や「選択」アレイ画像２１０などの画像をレンダリングするために使用される。柔軟な画像ディスプレイ・レイヤ２０４はピクセルのマトリクスを含み、柔軟な画像ディスプレイ・レイヤ２０４は特に薄くて柔軟な特性を有する。
【００２３】
柔軟な画像ディスプレイ・レイヤ２０４の背面に配置された触覚的ディスプレイ・レイヤ２０６は柔軟な画像ディスプレイ・レイヤ２０４上にレンダリングされた触覚改良画像を表示するために使用される。触覚的ディスプレイ・レイヤ２０６は、触覚改良画像とのユーザの対話、すなわち、接触を容易にするためにも使用される。
【００２４】
触覚的ディスプレイ・レイヤ２０６は、いくつかのピストン２０８とセンサ回路（図示せず）とを含む。この実施形態では、ピストン２０８はディスプレイ１０６の有効コア領域内に配置されている。ピストン２０８は、柔軟な画像ディスプレイ・レイヤ２０４の異なる対応する部分を押すために選択的に活動化する／上昇させることができる。柔軟な画像ディスプレイ・レイヤ２０４は柔軟なため、押すことで押されている領域にレンダリングされた画像の上昇した、または持ち上がった状態を生成する。センサ回路は触覚改良画像のいずれかへのユーザの接触を検出し、報告する。
【００２５】
透明なタッチ・センシティブ・レイヤ２０２は、非触覚改良画像の従来のタッチ・センシングを提供するために使用される。この実施形態では、透明なタッチ・センシティブ・レイヤ２０２は、触覚的ディスプレイ・レイヤ２０６のコア領域を取り囲む中空の有効領域を有する。
【００２６】
触覚改良画像ディスプレイ１０６は同じ発明者の要件を有する本出願と同時に出願された「Ｔａｃｔｉｌｅｌｙ  Ｅｎｈａｎｃｅｄ  Ｖｉｓｕａｌ  Ｉｍａｇｅ  Ｄｉｓｐｌａｙ」と題された同時出願の目的である。その明細書は参照により全文が本明細書に組み込まれている（本出願の米国バージョンのみ）。
【００２７】
別の実施形態では、本発明は「トップ（一番上）」の透明なタッチ・センシティブ・レイヤ２０２なしに触覚改良画像ディスプレイ１０６の実施形態で実施することができる。
【００２８】
動的に形成される非永続的な入力キー
図３ａ〜３ｇは、本発明のいくつかの実施形態による、触覚を改良した視覚画像を用いて動的に形成できるさまざまな例示の非永続的な入力キーを示す図である。図３ａに示すように、いくつかの非永続的な触覚改良数字入力キーは、最初に柔軟な画像ディスプレイ・レイヤ２０４上にこれらのキーを動的にレンダリングし、次に、触覚的ディスプレイ・レイヤ２０６の対応するピストン２０８を選択的に活動化する／上昇させることでディスプレイ１０６上に動的に形成できる。
【００２９】
同様に、図３ｂ、３ｃに示すように、いくつかの非永続的な触覚改良アルファベット入力キーも同様な方法で１０６上に動的に形成できる。アプリケーション（例えば、無線移動電話機またはＥメール）に応じて、非永続的な触覚改良アルファベット入力キーは９キー構成またはＱＷＥＲＴ配列で形成することができる。
【００３０】
同様に、図３ｄ、３ｅに示すように、くつかの非永続的な触覚改良パンクチュエーションや特殊文字入力キーも同様な方法で１０６上に動的に形成できる。
【００３１】
同様に、図３ｆ、３ｇに示すように、いくつかの非永続的な触覚改良ファンクション／コントロール・キーも同様な方法で１０６上に動的に形成できる。これらのファンクション／コントロール・キーは、これに限定はされないが、ＴＶ、ＶＣＲプレーヤ、ＣＤ／ＤＶＤプレーヤ、ＭＰ３プレーヤ、セットトップ・ボックスなどを含むさまざまなメディア・デバイスの機能／コントロールである。
【００３２】
さまざまな実施形態で、上に示した動的に形成される非永続的な触覚改良キー／ボタンに加え、あるいはその代わりに、これらのキー／ボタンは「上」、「下」「左」、「右」、「ページ・アップ」、「ページ・ダウン」および／またはデバイス選択キー／ボタンも含むことができる。例えば、デバイス選択キー／ボタンを使用して、ＴＶ、ＶＣＲプレーヤ、ＣＤ／ＤＶＤプレーヤなどのメディア・デバイスの選択を容易にすることができる。
【００３３】
さまざまな実施形態で、さまざまな触覚改良入力キー・グループ選択キーも提供することができる。すなわち、さまざまな非永続的な触覚改良キーを動的に形成して、ユーザが触覚改良数字、アルファベットまたは「特殊」キー／ボタンを動的に形成して使用する操作を容易にすることができる。
【００３４】
触覚改良メニュー／リスト項目
図３ｈ〜３ｉは、本発明のいくつかの実施形態による、触覚改良画像を用いて動的に形成できるさまざまな例示のメニューとリスト項目を示す図である。図３ｈに示すように、同じ方法で、上で触覚改良入力キーについて説明したように、ユーザ選択可能なメニュー項目も同様に触覚的に改良してこれらのユーザ・インタフェース要素と対話する際のユーザの体験を向上させることができる。
【００３５】
同じ方法で、図３ｉに示すように、ユーザ選択可能なリスト項目も同様に触覚的に改良してこれらのユーザ・インタフェース要素と対話する際のユーザの体験を向上させることができる。
【００３６】
触覚改良画像の指定と機能呼び出し
図４は、本発明の一実施形態による、触覚改良画像の指定と、指定された触覚改良画像をレンダリングするための随伴するグラフィックス機能呼び出しを示す図である。図に示すように、この実施形態では、図１のアプリケーション１２０などのソース形式のアプリケーションは、アイコン／画像がソース・プログラム内で従来指定されていたのと同様の方法で、触覚改良画像を指定して非永続的な触覚改良入力キーを提供することができる。
【００３７】
例示のキー指定４０２は、レンダリングする画像への参照４０４を含む。参照４０４は、例えば、レンダリングする画像を得る先のローカルまたはリモート位置を識別するファイル・システムのパス名またはＵＲＬの形式である。
【００３８】
例示のキー指定４０２は、レンダリングする画像と、画像の幅と高さとも呼ばれるｘ、ｙ方向の範囲４０８〜４１０とを含む目に見えない「コントロール・ボックス」のｘ、ｙ座標４０６の形式の、レンダリングする画像の位置をさらに含むことができる。
【００３９】
例示のキー指定４０２は、画像の触覚的な改良を指定するさまざまな触覚的な属性指定４１２をさらに含む。これらの触覚的な属性は、例えば、高さ、活動化する／上昇させるピストンの中間高さまたは最大高さ４１４、使用するピストンのパターン４１６、シミュレーションする硬度４１８を含むことができる。
【００４０】
さまざまな実施形態で、指定された高さは活動化するピストンのグループの重心位置の最大高さになるように決められる。
【００４１】
さまざまな実施形態で、異なるパターンを用いて触覚的に画像を改良することができる。例えば、使用するピストンのグループは正方形のパターン、矩形のパターン、平行四辺形のパターン、菱形のパターン、円形のパターン、三角形のパターン、五角形／六角形のパターン、星形のパターンなどを形成することができる。
【００４２】
さまざまな実施形態では、硬度の指定は、ユーザの活動化された／上昇したピストンの押下または接触に対する、ピストンの対応するサーボ機構によって提供される抵抗の指定を提供する。
【００４３】
したがって、この実施形態では、アプリケーション１２０の開発者は、他の従来のグラフィック呼び出しと同様、４２０で、実行環境のグラフィックス機能／サービス・ライブラリ（図１の１３０）のグラフィックス機能／サービス（図１の１３２）を呼び出す（図１の１２２も参照）ことで、所望の触覚改良画像をレンダリングできる。
【００４４】
グラフィックス機能
図５は、本発明の一実施形態によるグラフィックス機能の該当する態様の動作フローである。図に示すように、供給されるパラメータと情報とに基いて、描画要求または同種のグラフィックス動作要求を受信すると、グラフィックス機能は最初にブロック５０２でピクセル・データを生成する。次いで、グラフィックス機能はブロック５０４でレンダリングする画像が触覚的に改良されているか否かを判定する（呼び出しと共に提供されるパラメータと情報とに基いて）。
【００４５】
レンダリングする画像も触覚的に改良されている場合、グラフィックス機能はブロック５０４でピストン・データも生成する。
【００４６】
ピクセル・データとピストン・データ（ある場合）を生成すると、グラフィックス機能はブロック５０６で従来技術のその他のアプリケーション依存処理を実行する。
【００４７】
その後、ブロック５１０で、グラフィックス機能はデバイス・ドライバまたは適当な複数のデバイス・ドライバの適当な機能を呼び出し、生成されたピクセル・データを用いて柔軟な画像レイヤ２０４を駆動して画像をレンダリングし、触覚的なディスプレイ・レイヤ２０６を駆動して該当するピストンを選択的に活動化し／上昇させ、生成されたピストン・データを用いてレンダリングされた対応する画像を触覚的に改良する。
【００４８】
一実施形態では、異なるデバイス・ドライバ１４０が各々提供され、ディスプレイ１０６の対応するレイヤ２０２〜２０６を制御する。別の実施形態では、単一のデバイス・ドライバ１４０のさまざまな機能が各々提供され、ディスプレイ１０６の対応するレイヤ２０２〜２０６を制御する。さらに別の実施形態では、組み合わせのハイブリッド手法が採用される。
【００４９】
データ構造体とフォーマット
図６〜７は、本発明の一実施形態による触覚改良画像のピクセル・データとピストン・データを記憶するのに適したデータ構造体とデータ・フォーマットとを示す図である。図６に示すように、触覚改良画像ディスプレイのピクセル・データとピストン・データはオブジェクト・ハイアラーキ６００として構成され、触覚改良画像の識別とグローバル属性はオブジェクト・ハイアラーキ６００のルート・オブジェクト６０２内に記憶される。
【００５０】
ピクセル・データはルート・オブジェクト６０２の子ピクセル・データ・オブジェクト６０４内に記憶され、ピストン・データはルート・オブジェクト６０２の子ピストン・データ・オブジェクト６０６内に記憶される。
【００５１】
図７に示すように、各ピストンのピストン・データは３２ビット・ワード７００内に記憶され、４つの触覚的な属性の値が４つの対応するバイト７０２を占める。
【００５２】
別の実施形態では、本発明は他のデータ構造および／または他のデータ・フォーマットを用いて実施することができる。
【００５３】
アプリケーションの例
図８ａ〜８ｆは、本発明の教示に組み込むことができるさまざまな実施形態のさまざまな例示のデバイスを示す図である。図８ａに示すように、本発明は、これに限定はされないが、ＴＶ、ＶＣＲプレーヤ、ＣＤ／ＤＶＤプレーヤなどを含むさまざまなメディア・デバイスを制御する「ユニバーサル」リモート制御装置について適用し、実施することができる。これらのデバイスのコントロール／ファンクション・キーは前述の触覚改良画像を用いて動的に形成される。
【００５４】
図８ｆに示すように、本発明は、これらのディア・デバイスそれ自体、すなわち、ＴＶ、ＶＣＲプレーヤ、ＣＤ／ＤＶＤプレーヤなどについて適用し、実施することができる。
【００５５】
同様に、図８ｂに示すように、本発明は高機能無線移動電話機についても、または図８ｃに示すように、ＰＤＡについても実施することができる。
【００５６】
同様に、本発明は、パームサイズのコンピュータ・デバイス（図示せず）、タブレット・コンピュータ・デバイス（図示せず）、図８ｄのラップトップ・コンピュータ・デバイス、図８ｅのデスクトップ・コンピュータ・デバイスについて適用し、実施することができる。
【００５７】
結論および結語
以上、上記説明から分かるように、触覚改良画像を使用する対話型装置を形成する新しい方法について説明してきた。
【００５８】
本発明を上記の実施形態に関して説明してきたが、本発明は上記実施形態に限定されないことは当業者には明らかであろう。本発明は添付の請求の範囲の精神と範囲を逸脱することなく変更および修正して実施することができる。したがって、以上の説明は本発明を限定するものではなく、例示するものであると解釈すべきである。
【図面の簡単な説明】
【００５９】
【図１】本発明の一実施形態による対話型装置の構造図である。
【図２】一実施形態による図１の触覚改良画像ディスプレイの分解斜視図である。
【図３ａ−３ｇ】本発明のいくつかの実施形態による、触覚改良画像を用いて動的に形成できるさまざまな例示の非永続的な入力キーを示す図である。
【図３ｈ−３ｉ】本発明のいくつかの実施形態による、触覚改良画像を用いて動的に形成できるさまざまな例示のメニューおよびリスト項目を示す図である。
【図４】本発明の一実施形態による、触覚改良画像の指定と、指定された触覚改良画像をレンダリングするための随伴するグラフィックス機能呼び出しを示す図である。
【図５】本発明の一実施形態によるグラフィックス機能の該当する態様の動作・フローである。
【図６】本発明の一実施形態による触覚改良画像のピクセル・データとピストン・データを記憶するのに適したデータ構造体とデータ・フォーマットとを示す図である。
【図７】本発明の一実施形態による触覚改良画像のピクセル・データとピストン・データを記憶するのに適したデータ構造体とデータ・フォーマットとを示す図である。
【図８ａ−８ｆ】本発明の教示に組み込むことができるさまざまな例示のデバイスを示す図である。
【図１】
2006500685.tif 000003
【図２】
2006500685.tif 000004
2006500685.tif 000005
2006500685.tif 000006
2006500685.tif 000007
2006500685.tif 000008
2006500685.tif 000009
【図４】
2006500685.tif 000010
【図５】
2006500685.tif 000011
【図６】
2006500685.tif 000012
【図７】
2006500685.tif 000013
2006500685.tif 000014
2006500685.tif 000015
2006500685.tif 000016
【国際調査報告】
2006500685.tif 000017