(57)【要約】      （修正有）【課題】触覚が使用可能なメッセージを生成および受信できる携帯端末装置を提供する。【解決手段】携帯端末装置は、テキストと少なくとも１つの触覚フィードバックコマンドとを含む、触覚が使用可能なメッセージを受信する（３０２）。該装置は、メッセージ内の触覚フィードバックコマンドのタイミングを決定する（３０６）。該装置がユーザによってメッセージが表示されているという指示を受信する（３０８）と、該装置は、触覚フィードバックコマンドに対応する触覚効果を同期化する（３１０）。この同期化は、タイミングおよび指示に基づく。【選択図】図３
2014017823.tif 000002
【特許請求の範囲】
【請求項１】
携帯端末装置を動作させる方法であって、
テキストと少なくとも１つの触覚フィードバックコマンドとを含む、触覚が使用可能なメッセージを受信するステップと、
該メッセージ内の前記触覚フィードバックコマンドのタイミングを決定するステップと、
前記携帯端末装置上に前記メッセージが表示されているという指示を受信するステップと、
前記タイミングと前記指示とに基づいて、前記触覚フィードバックコマンドに対応する第１の触覚効果を同期化するステップと、
を含むことを特徴とする携帯端末装置を動作させる方法。
【請求項２】
前記タイミングの決定は、前記メッセージ内の前記触覚フィードバックコマンドの位置に基づくことを特徴とする、請求項１に記載の方法。
【請求項３】
前記位置は前記テキストの語数に基づくことを特徴とする、請求項２に記載の方法。
【請求項４】
前記位置は前記テキストの文字数に基づくことを特徴とする、請求項２に記載の方法。
【請求項５】
前記位置は前記装置のユーザの読取速度に基づくことを特徴とする、請求項２に記載の方法。
【請求項６】
前記同期化するステップは、
前記タイミングに基づいて時間遅延を決定するステップと、
前記指示を受信した際に、前記時間遅延の経過後に前記第１の触覚効果を開始するステップと、
を含むことを特徴とする、請求項１に記載の方法。
【請求項７】
前記装置のユーザからジェスチャを受信し、該ジェスチャを前記触覚フィードバックコマンドに変換することによって、前記触覚が使用可能なメッセージを生成するステップをさらに含むことを特徴とする請求項１に記載の方法。
【請求項８】
前記ジェスチャは前記ユーザによる前記装置の動きであることを特徴とする、請求項７に記載の方法。
【請求項９】
前記ジェスチャは前記ユーザの動画であることを特徴とする、請求項７に記載の方法。
【請求項１０】
前記触覚フィードバックコマンドは顔文字であることを特徴とする、請求項１に記載の方法。
【請求項１１】
前記触覚フィードバックコマンドは前記メッセージにおいて不可視であることを特徴とする、請求項１に記載の方法。
【請求項１２】
前記装置における前記触覚が使用可能なメッセージの受信に連動して、第２の触覚効果を生成するステップをさらに含むことを特徴とする、請求項１に記載の方法。
【請求項１３】
前記第２の触覚効果は、メッセージコンテンツ、送信者および優先度のうちの少なくとも１つを示し得ることを特徴とする、請求項１２に記載の方法。
【請求項１４】
携帯端末装置であって、該携帯端末装置は、
プロセッサと、
該プロセッサに結合されるメモリと、
該プロセッサに結合されるアクチュエータと、を含み、
該プロセッサは、
テキストと少なくとも１つの触覚フィードバックコマンドとを含む、触覚が使用可能なメッセージを受信し、
該メッセージ内の前記触覚フィードバックコマンドのタイミングを決定し、
前記携帯端末装置上に前記メッセージが表示されているという指示を受信し、
前記タイミングと前記指示とに基づいて、前記触覚フィードバックコマンドに対応する第１の触覚効果を同期化することを特徴とする、携帯端末装置。
【請求項１５】
前記第１の触覚効果は前記アクチュエータによって生成されることを特徴とする、請求項１４に記載の携帯端末装置。
【請求項１６】
前記タイミングの決定は、前記メッセージ内の前記触覚フィードバックコマンドの位置に基づくことを特徴とする、請求項１４に記載の携帯端末装置。
【請求項１７】
前記位置は前記テキストの語数に基づくことを特徴とする、請求項１６に記載の携帯端末装置。
【請求項１８】
前記位置は前記テキストの文字数に基づくことを特徴とする、請求項１６に記載の携帯端末装置。
【請求項１９】
前記位置は前記装置のユーザの読取速度に基づくことを特徴とする、請求項１６に記載の携帯端末装置。
【請求項２０】
前記同期化することは、
前記タイミングに基づいて時間遅延を決定することと、
前記指示を受信した際に、前記時間遅延の経過後に前記第１の触覚効果を開始することと、
を含むことを特徴とする、請求項１４に記載の携帯端末装置。
【請求項２１】
前記装置のユーザからジェスチャを受信し、該ジェスチャを前記触覚フィードバックコマンドに変換することによって、前記触覚が使用可能なメッセージを生成することをさらに含むことを特徴とする、請求項１４に記載の携帯端末装置。
【請求項２２】
前記プロセッサに結合された加速度計をさらに含み、前記ジェスチャは前記ユーザによる前記装置の動きであることを特徴とする、請求項２１に記載の携帯端末装置。
【請求項２３】
前記ジェスチャは前記ユーザの動画であることを特徴とする、請求項２１に記載の携帯端末装置。
【請求項２４】
前記触覚フィードバックコマンドは顔文字であることを特徴とする、請求項１４に記載の携帯端末装置。
【請求項２５】
前記触覚フィードバックコマンドは前記メッセージにおいて不可視であることを特徴とする、請求項１４に記載の携帯端末装置。
【請求項２６】
コンピュータが読取可能な媒体であって、プロセッサで実行される際に、該プロセッサに、
テキストと少なくとも１つの触覚フィードバックコマンドとを含む、触覚が使用可能なメッセージのタイミングを決定させ、
該メッセージが前記携帯端末装置上で表示されているという指示を受信させ、
前記タイミングと前記指示とに基づき、前記触覚フィードバックコマンドに対応する第１の触覚効果を同期化させる、前記媒体上に記憶された命令を有することを特徴とする、コンピュータが読取可能な媒体。
【請求項２７】
前記タイミングの決定は、前記メッセージ内の前記触覚フィードバックコマンドの位置に基づくことを特徴とする、請求項２６に記載のコンピュータが読取可能な媒体。
【請求項２８】
前記位置は前記テキストの語数に基づくことを特徴とする、請求項２７に記載のコンピュータが読取可能な媒体。
【請求項２９】
前記位置は前記テキストの文字数に基づくことを特徴とする、請求項２７に記載のコンピュータが読取可能な媒体。
【請求項３０】
前記位置は前記装置のユーザの読取速度に基づくことを特徴とする、請求項２７に記載のコンピュータが読取可能な媒体。
【請求項３１】
前記同期化させることは、
前記タイミングに基づいて時間遅延を決定させることと、
前記指示を受信した際に、前記時間遅延の経過後に前記第１の触覚効果を開始させることと、
を含むことを特徴とする、請求項２６に記載のコンピュータが読取可能な媒体。
【請求項３２】
携帯端末装置であって、
テキストと少なくとも１つの触覚フィードバックコマンドとを含む、触覚が使用可能なメッセージを受信する手段と、
前記メッセージ内の前記触覚フィードバックコマンドのタイミングを決定する手段と、
前記メッセージが前記携帯端末装置上に表示されているという指示を受信する手段と、
前記タイミングと前記指示とに基づいて、前記触覚フィードバックコマンドに対応する第１の触覚効果を同期化する手段と、
を含むことを特徴とする携帯端末装置。
【発明の詳細な説明】
【技術分野】
【０００１】
一実施形態は、電子メッセージングを対象とする。より具体的には、一実施形態は、携帯端末装置のための、触覚が使用可能な電子メッセージングを対象とする。
【背景技術】
【０００２】
電子装置の製造業者は、ユーザのために充実したインタフェースを作製しようと努めている。従来の装置は、視覚および聴覚キュー（ｃｕｅ）を使用して、ユーザにフィードバックを提供する。いくつかのインタフェース装置においては、運動感覚フィードバック（作用力および抵抗力フィードバック等）および／またはより一般的には総じて「触覚フィードバック」または「触覚効果」として公知の、触知フィードバック（振動、感触（ｔｅｘｔｕｒｅ）、および熱等）もユーザに提供される。触覚フィードバックは、ユーザインタフェースを向上および簡略化させるキューを提供することができる。具体的には、振動効果、つまり触振動力の触覚効果が、ユーザに対して特定の事象（ｅｖｅｎｔ）を通知するために電子装置のユーザにキューを提供する上で、または模擬環境または仮想環境内でより優れた感覚的体験を生み出すために電子装置のユーザに実感のあるフィードバックを提供する上で有用であり得る。
【０００３】
触覚フィードバックはまた、携帯電話、携帯情報端末（Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ａｓｓｉｓｔａｎｔ）（「ＰＤＡ」）、スマートフォン、および携帯型ゲーム装置等の「ハンドヘルドデバイス」または「携帯端末装置」と称される携帯型電子装置に組み込まれることが多くなっている。例えば、いくつかの携帯型ゲームアプリケーションは、触覚フィードバックを提供するために構成される、より大規模のゲームシステムと共に利用される制御装置（例えば、ジョイスティック等）と同様に振動可能である。加えて、携帯電話およびＰＤＡ等の装置は、振動によって、ユーザに種々の通知を提供できる。例えば、携帯電話は振動によって、ユーザに着信を通知できる。同様に、ＰＤＡは、予定されたカレンダー項目をユーザに通知できる、または「やるべきこと（ｔｏ  ｄｏ）」のリスト項目またはカレンダー予約のリマインダーをユーザに提供できる。
【０００４】
多くの携帯端末装置は、音声通話を処理するだけでなく、装置間のメッセージングを可能にする。テキストメッセージングとしても公知のショートメッセージサービス（「ＳＭＳ」）は、携帯ネットワークのショートメッセージサービスセンター（「ＳＭＳＣ」）を介して携帯端末装置間のショートテキストメッセージの交換を可能にする、普及された通信方法である。携帯端末装置の他の公知のメッセージングの方法には、マルチメディアメッセージングサービス（「ＭＭＳ」）、モバイルインスタントメッセージング、および携帯電子メールを含む。ＭＭＳは、携帯加入者同士のマルチメディアメッセージ交換を可能にする蓄積転送型（ｓｔｏｒｅ  ａｎｄ  ｆｏｒｗａｒｄ）メッセージングサービスである。このため、ＭＭＳは、テキスト、画像、音声、動画、またはその４つ全ての組み合わせを含む、さらなるメディア形式の伝達をサポートするので、ＳＭＳの進化として見ることができる。インスタントメッセージング（「ＩＭ」）はコンピュータのユーザ間のリアルタイムの通信を提供可能なインターネットプロトコル（「ＩＰ」）ベースのアプリケーションである。モバイルインスタントメッセージングは、携帯電話機からのインスタントメッセージングサービスに関係する機能である。モバイルインスタントメッセージングは、通称名（ａｌｉａｓ）（またはユーザ名）およびアドレス帳を使って他のユーザへのメッセージをアドレス指定することをユーザに可能にし、存在の概念を組み込んでいるため、送信者は、いつ、「友人」に送信可能であるかを知ることができる。携帯電子メールは、無線装置で電子メールを送受信する機能である。
【０００５】
触覚フィードバックは、メッセージの受信者に、メッセージのテキスト内では明らかにならない可能性のある追加の情報を提供するために使用できる。例えば、携帯端末装置で別のユーザに送信されるテキストメッセージは、表現されたトピックに対してユーザが感じた度合いの強さを示す情報またはメッセージに関する他のサブテキスト（言外の意味）を含み得ない可能性がある。ユーザは、公知のアイコンまたは感情またはメッセージの文化に依存するアイコンによる表現である、「顔文字」として公知のシンボルを使用して、このサブテキストを表現するよう努め得る。例えば、ユーモラスなメッセージを示すための「笑顔」の顔文字は、コロンおよび右カッコの記号「：）」として表すことができ、それは横から見たときに笑っている顔に似ている。あるいは、カッコ、キャレット、および下線の組み合わせ「（＾＿＾）」として表現することができる。笑顔の顔文字の変形で、種々の他の感情を表現できる。しかしながら、顔文字およびシンボルは、伝達可能なメッセージが複雑な場合には制限される。
【発明の概要】
【０００６】
本発明の一実施形態は、テキストおよび少なくとも１つの触覚フィードバックコマンドを含む、触覚が使用可能なメッセージを受信する携帯端末装置である。該装置は、メッセージ内の触覚フィードバックコマンドのタイミングを決定する。該装置が、ユーザによってメッセージが表示されているという指示を受信すると、該装置は、触覚フィードバックコマンドに対応する触覚効果を同期化する。同期化は、タイミングおよび指示に基づく。
【図面の簡単な説明】
【０００７】
【図１】一実施形態による、携帯電話のブロックダイアグラムである。
【図２】触覚が使用可能なメッセージを生成するためにジェスチャを使用する場合の、一実施形態による電話機の機能のフローダイアグラムである。
【図３】一実施形態による、触覚が使用可能なメッセージのテキストコンテンツと触覚コンテンツを同期化させるための、電話機の機能のフローダイアグラムである。
【発明を実施するための形態】
【０００８】
一実施形態は、触覚が使用可能なメッセージを生成および受信できる携帯端末装置である。ユーザがメッセージを読むと、メッセージの触覚コンテンツは、テキストコンテンツと同期化され、メッセージの効果を高める。
【０００９】
メッセージに埋め込まれる触覚フィードバックは、顔文字とは対照的に、他のユーザに対してより効果的な方法で、顔文字よりもかなり複雑かつ直接的な、サブテキストを表現するための方法を提供できる。触覚フィードバックは、メッセージの受信者に対し、メッセージのテキストに含まれている情報を強調するために使用できる。例えば、携帯端末装置においてユーザに送信されるテキストメッセージは、ガソリン価格がそのエリアにおいて特定の金額だけ値上がりすることを示し得る。メッセージに埋め込まれる触覚フィードバックがユーザに金額の差分を伝達でき、ユーザはテキストを読まずにメッセージの意味を理解できる。
【００１０】
図１は、一実施形態による携帯電話１０のブロックダイアグラムである。電話機１０は、画面１１およびキー１３を含む。一実施形態において、キー１３は、機械的な形式のキーである。別の実施形態において、キー１３は、キー１３がタッチスクリーンキーとなるようにタッチスクリーンによって実現可能であり、または、任意の方法を用いて実現可能である。電話機１０の内部には、電話機１０上で振動、または他の形式の触覚フィードバックを生じさせる触覚フィードバックシステムがある。一実施形態において、振動は電話機１０全体で生じる。他の実施形態において、電話機１０の特定の部分が、触覚フィードバックシステムによって触覚を使用可能にすることができ、それには、例えばキー１３の個々のキーを含み、キーは機械的指向、タッチスクリーン、または、他の形式の実現形態であり得る。
【００１１】
触覚フィードバックシステムはプロセッサ１２を含む。プロセッサ１２にはメモリ２０およびアクチュエータ駆動回路１６が結合され、アクチュエータ駆動回路１６は振動アクチュエータ１８に結合される。図１の実施形態は携帯電話であるが、本発明の実施形態は任意の形式の携帯端末装置、または振動を生じさせるためにアクチュエータを使用する、あるいは他の形式の触覚フィードバックを生じさせる任意の装置で実現可能である。
【００１２】
プロセッサ１２は任意の形式の汎用コントローラまたはプロセッサでもよく、あるいは、特定用途向け集積回路（Ａｐｐｌｉｃａｔｉｏｎ−Ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ）（「ＡＳＩＣ」）等の、触覚効果を提供するために特別に設計されたプロセッサとすることもできる。プロセッサ１２は、電話機１０全体を動作させるのと同一のコントローラ／プロセッサとしてもよく、または別個のプロセッサとしてもよい。プロセッサ１２は、高レベルのパラメータに基づいて、実行される触覚効果および実行される効果の順序を決定できる。概して、特定の触覚効果を定義する高レベルのパラメータは、振幅、周波数および持続時間を含む。
【００１３】
プロセッサ１２は、所望の触覚効果をもたらすために必要な電流および電圧をアクチュエータ１８に供給するために用いられる電子コンポーネントおよび回路を含む駆動回路１６へ、制御信号を出力する。アクチュエータ１８は、電話機１０上で振動を発生させる触覚デバイスである。アクチュエータ１８は、（例えば、電話機１０の筐体を介して）電話機１０のユーザに触振動力を印加できる１つ以上の力印加機構を含むことができる。アクチュエータ１８は、例えば、モータによって偏心質量体が動く偏心回転質量体（Ｅｃｃｅｎｔｒｉｃ  Ｒｏｔａｔｉｎｇ  Ｍａｓｓ）（「ＥＲＭ」）等の電磁アクチュエータ、ばねに取り付けられている質量体が前後方向に駆動されるリニア共振アクチュエータ（Ｌｉｎｅａｒ  Ｒｅｓｏｎａｎｔ  Ａｃｔｕａｔｏｒ）（「ＬＲＡ」）、または圧電、電気活性ポリマーあるいは形状記憶合金等の「スマート材料」にしてもよい。メモリ２０は、ランダムアクセスメモリ（「ＲＡＭ」）または読み取り専用メモリ（Ｒｅａｄ−Ｏｎｌｙ  Ｍｅｍｏｒｙ）（「ＲＯＭ」）等の任意の形式のストレージデバイスにすることができる。メモリ２０は、プロセッサ１２によって実行される命令を記憶する。メモリ２０はさらに、プロセッサ１２の内部に配置されるか、または内部および外部メモリの任意の組み合わせにすることができる。一実施形態において、触覚フィードバックシステムはさらに、電話機１０の加速度を測定する加速度計（不図示）を含み得る。
【００１４】
メモリ２０はさらに、プロセッサ１２によって実行される際、電話機１０において、触覚コンテンツを含む触覚が使用可能なメッセージをユーザが生成できるようにし、触覚コンテンツがメッセージのテキストコンテンツと同期化されるように、受信した触覚が使用可能なメッセージを読むことができるようにする命令を記憶する。一実施形態において、触覚が使用可能なメッセージを生成および読み取るために携帯ブラウザが使用される。
【００１５】
一実施形態において、ユーザは、触覚フィードバックを指定するためにアイコン、コマンド、コード、顔文字等（総じて「触覚フィードバックコマンド」）のリストから選択することで、電話機１０において触覚が使用可能なメッセージを生成する。各触覚フィードバックは、プロセッサ１２で実行される際に、触覚フィードバックシステムが特定の触覚フィードバック効果を生じさせる特定の触覚コードにマッピングすることができる。
【００１６】
例えば、笑顔のアイコン、顔文字またはコマンド（例えば、：）、
【数１】
2014017823.tif 000003
、（＾＿＾）、または＜ｓｍｉｌｅｙ＞）をユーザが選択し、ＳＭＳメッセージのテキスト内に挿入できる。触覚フィードバックコマンドは、受信者によって受信されると、ユーザの携帯端末装置においてマッピングされた触覚フィードバック効果を生成する。触覚フィードバック効果は、触覚コマンドの種類に関連付けられる。例えば、「パット（ｐａｔ）」（軽くたたく）効果は、受信者ユーザの移動端末装置のグリップまたはユーザオブジェクトに、手で軽く叩くように、小刻みの、スムースな揺れを実現する触覚フィードバックを生じさせ得る。「ギグル（ｇｉｇｇｌｅ）」（クスクス笑い）効果は低周波数の振動を提供し得、「スラップ（ｓｌａｐ）」（平手打ち）効果は鋭い高振幅の揺れを提供することができ、「スマイル（ｓｍｉｌｅ）」（ほほえみ）効果はゆっくりとした横方向の動き等を提供し得る。
【００１７】
一実施形態において、ユーザは触覚コンテンツをメッセージに挿入できる、または特定のキーワード、語句または顔文字に触覚効果をあらかじめ割り当てることができる。顔文字のグループにタグを付け、これに単一の触覚効果を付与することもできる。例えば、「嬉しい」という感情に関連する全ての顔文字を同じカテゴリに割り当て、同一の触覚効果を有することができる。一実施形態において、触覚効果は、顔文字、キーワードまたは語句にデフォルトとして割り当てることができる。別の実施形態において、不可視のコマンドをメッセージに挿入することが可能であり、それにより受信者は、メッセージを読む際に触覚効果を目で見て予期することはできない。
【００１８】
一実施形態において、電話機１０は、ユーザに、テキスト入力の際に触覚効果を感じさせるようにすることができる。この実施形態において、ユーザがメッセージを作成している際、送信者が、送信される触覚効果がわかるように触覚フィードバックを装置上で再生できる。
【００１９】
一実施形態では、触覚が使用可能なメッセージを生成するためにジェスチャを使用する。図２は、触覚が使用可能なメッセージを生成するためにジェスチャが使用される際の、一実施形態による電話機１０の機能のフローダイアグラムである。一実施形態において、図２のフローダイアグラムおよび以下に開示されている他のフローダイアグラムの機能は、メモリに記憶されたソフトウェアにおいて実装され、プロセッサによって実行される。他の実施形態において、機能は、ハードウェア、またはハードウェアおよびソフトウェアの任意の組み合わせによって実行できる。
【００２０】
メッセージ生成目的でのテキスト入力中において、ユーザは、例えば、特定の方法で電話機１０を動かすことにより、ジェスチャによって触覚効果を入力することができ、これは次に触覚効果にマッピングされる。例えば、ユーザがメッセージによって満足感を表現しようとする場合、電話機を前後に緩やかに揺することができる。２０２において、この揺れは加速度計の出力を生成する。２０４において、プロセッサ１２は加速度計の出力を受信し、所定の触覚効果および対応する触覚フィードバックコマンドにこれをマッピングする。例えば、比較的低周波数且つ低振幅の加速度を生じさせる緩やかな揺れを、スムースな低周波数の触覚効果にマッピングすることができる。ユーザが怒っている場合、電話機を高速で上下に振ることができ、これは高強度および高周波数の触覚効果にマッピングすることができる。２０６において、プロセッサ１２は触覚効果に対応する触覚フィードバックコマンドを挿入し、これをテキストメッセージの適切な位置（例えば、ユーザがジェスチャを開始する時点に対応するテキストメッセージの位置）に挿入する。
【００２１】
別の実施形態において、触覚が使用可能なメッセージは、音声認識ソフトウェアを使って生成することができる。音声認識ソフトウェアは、音声コマンドをユーザが生成した触覚効果に結びつけることができる。音声入力の種々の態様を、触覚効果をマッピングするのに使用することができる。その態様には、言葉のコマンド（例えば、強い、短い、短い）、音声強調（例えば、音声トーン）またはジャズのスキャットまたはビートボクシング等のユーザによって生成されるノイズが含まれる。別の実施形態において、ジェスチャは、動画カメラ入力またはタッチスクリーンによるユーザのインタフェース入力によって、生成できる。
【００２２】
電話機１０においてユーザがメッセージを受信すると、典型的には、例えば、画面１１において、新しいメッセージが受信されたという通知がユーザに対し表示される。ユーザは次に、表示する所望のメッセージを選択する。一実施形態において、メッセージが、触覚が使用可能なメッセージである場合、触覚コンテンツを、同期化、またはメッセージのテキストコンテンツに対応して、再生または開始する必要がある。
【００２３】
別の実施形態において、触覚コンテンツは、新しいメッセージ通知が受信されると再生される。触覚通知は、メッセージの内容の性質、例えばメッセージに含まれる触覚フィードバックコマンドを示すことができる。または触覚通知は、メッセージ送信者あるいはメッセージの緊急性を特定できる。このような場合、触覚通知の形式はユーザが設定できるようにし得る。
【００２４】
図３は、一実施形態による、触覚が使用可能なメッセージの触覚コンテンツをテキストコンテンツと同期化するための、電話機１０の機能のフローダイアグラムである。３０２では、電話機１０において触覚が使用可能なメッセージが受信される。一実施形態において、メッセージは、最初は触覚効果なしで受信され、次いで、触覚効果がメッセージに挿入される。新しいメッセージがあるという指示が、ユーザに表示される。３０４において、テキストメッセージ内の各触覚フィードバックコマンドの位置が決定される。該位置は、例えば、単語、あるいは文字を数える方法によって決定されるテキストの長さに基づき得る。
【００２５】
３０６において、各触覚フィードバックコマンド毎に、および３０４で決定された位置に基づいて、対応する触覚効果を開始するための時間遅延が決定される。時間遅延は、メッセージがユーザによって開かれた時点からの遅延とすることができる。
【００２６】
３０８において、ユーザがメッセージを開くまたはメッセージにアクセスすると、電話機１０上で読み取りが可能になり、メッセージがユーザによって開かれたという指示が受信される。３１０において、ユーザによってメッセージが開かれた時点からの遅延である、決定された時間遅延に基づいて各触覚フィードバックが開始される。したがって、各触覚コンテンツはテキストコンテンツと同期化される。
【００２７】
例えば、触覚が使用可能なメッセージには、以下の表１に表される内容を含み得る。
【表１】
2014017823.tif 000004
ここで、笑顔のアイコンおよび悲しい顔のアイコンは触覚フィードバックコマンドと関連付けられている。図３の機能に基づき、
【数２】
2014017823.tif 000005
に対応する触覚フィードバックは、まず、
【数３】
2014017823.tif 000006
の前の文字数または語数に基づく休止の後で始まり、次に、
【数４】
2014017823.tif 000007
の前および
【数５】
2014017823.tif 000008
の後の文字数または語数に基づく休止の後で
【数６】
2014017823.tif 000009
に対応する触覚フィードバックが開始される。他の実施形態において、いくつかの文字に、より長いまたはより短い休止時間を与え、メッセージの他のある部分では、スペースの量または新しい行等に対して、休止時間の長さの判断を考慮することができる。
【００２８】
他の実施形態は、触覚コンテンツをテキストコンテンツと同期化するために、テキストの長さおよびテキスト内の触覚フィードバックコマンドの位置以外の基準を使用する。一実施形態において、ユーザまたは装置がテキストをスクロールするまたはテキストを読み進めるタイミングの判断を、触覚フィードバックを開始するためのキューとして使用できる。別の実施形態において、触覚フィードバック開始のタイミングを決定するために、ユーザの読取速度の推定値を使用することができる。ユーザの読取速度を測定して、この推定値を取得し、それを触覚フィードバックコンテンツのタイミングに使用することができる。例えばユーザは、１つまたは２つのテストメッセージを読み、完了したらボタンを押すことができる。
【００２９】
テキストにＭＭＳメッセージ内の音声および動画等のマルチメディアコンテンツを含む一実施形態において、触覚フィードバック開始は、マルチメディアイベントのタイミングと連動できる。
【００３０】
多数の触覚フィードバックコマンドを含むメッセージにおいて、一実施形態は、触覚効果の優先順位を確立する、またはトリアージ方式による効果の優先順位を確立し得る。例えば、多くの顔文字がテキスト内で連続する場合、どの顔文字に触覚効果を生じさせるか、およびどれを無視するかを決定できる。
【００３１】
一実施形態において、触覚が使用可能なメッセージが構成される場合、触覚が使用可能なメッセージ内の触覚効果を自動的に生成可能である。メッセージのテキストは解析が可能であり、適切な触覚効果および対応する触覚フィードバックコマンドを自動的に挿入することが可能である。適切な触覚効果は、例えば、単語、語句、顔文字、句読点、またはメッセージ上に暗示された文脈に基づくことができる。
【００３２】
開示されるいくつかの実施形態が本明細書において具体的に図示および／または記載されている。しかしながら、修正および変形が、上の教示によって、且つ本発明の精神および主旨から逸脱することなく、添付の特許請求の範囲内で網羅されることが理解されるであろう。
【００３３】
例えば、上で開示されているいくつかの実施形態は、携帯電話で実現されており、それは、握るまたはユーザによって物理的に接触および操作できる物体である。このため、本発明は、ユーザによって同様に操作可能な、他の触覚を使用できる入力および／または出力装置上で利用可能である。他のこのような装置としては、タッチスクリーン（自動車の全地球測位システム（Ｇｌｏｂａｌ  Ｐｏｓｉｔｉｏｎｉｎｇ  Ｓｙｓｔｅｍ）（「ＧＰＳ」）のナビゲーション画面、現金自動預け払い機（Ａｕｔｏｍａｔｅｄ  Ｔｅｌｌｅｒ  Ｍａｃｈｉｎｅ）（「ＡＴＭ」）の表示画面）、電子機器（音声／動画、ガレージドア、ホームセキュリティ等）を制御するリモコン、およびゲーム用のコントローラ（ジョイスティック、マウス、専用のコントローラ、ゲームパッド等）が挙げられる。こうした入力および／または出力装置の動作は、当業者に公知である。さらに、実施形態は、ユーザによって感知可能な触覚効果を生成することができる、携帯されない（ｎｏｎ−ｍｏｂｉｌｅ）端末装置上でも実現できる。
【図１】
2014017823.tif 000010
【図２】
2014017823.tif 000011
【図３】
2014017823.tif 000012
【手続補正書】
【提出日】平成25年8月22日(2013.8.22)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
触覚が使用可能なメッセージを生成する方法であって、
ユーザの生成した入力を受信するステップと、
前記ユーザの生成した入力を所定の触覚フィードバックにマッピングするステップと、
触覚フィードバックコマンドを前記所定の触覚フィードバックに割り当てるステップと、
前記触覚フィードバックコマンドをテキストメッセージに挿入するステップと、
前記テキストメッセージを送信するステップと、
を含むことを特徴とする方法。
【請求項２】
前記所定の触覚フィードバックを出力するステップをさらに含むことを特徴とする、請求項１に記載の方法。
【請求項３】
前記所定の触覚フィードバックを出力するステップは前記テキストメッセージを送信するステップに先立って発生することを特徴とする、請求項２に記載の方法。
【請求項４】
前記所定の触覚フィードバックを出力するステップは、ユーザの生成した入力を受信する前記ステップ、前記ユーザの生成した入力を所定の触覚フィードバックにマッピングする前記ステップ、前記ユーザの生成した入力に対応する前記所定の触覚フィードバックに触覚フィードバックコマンドを割り当てる前記ステップ、及び前記触覚フィードバックコマンドをテキストメッセージに挿入する前記ステップの少なくとも一つのステップとともに同時に発生することを特徴とする、請求項２に記載の方法。
【請求項５】
前記ユーザの生成した入力は加速度計の出力を生成することを特徴とする、請求項１に記載の方法。
【請求項６】
前記ユーザの生成した入力は、ジェスチャ、音声入力、又は動画カメラ入力のいずれかであることを特徴とする、請求項１に記載の方法。
【請求項７】
前記所定の触覚フィードバックを前記テキストメッセージの特定の部分に割り当てるステップをさらに含むことを特徴とする、請求項１に記載の方法。
【請求項８】
装置であって、該装置は、
プロセッサを含み、
該プロセッサは、
ユーザの生成した入力を受信すること、
前記ユーザの生成した入力を所定の触覚フィードバックにマッピングすること、
触覚フィードバックコマンドを前記所定の触覚フィードバックに割り当てること、
前記触覚フィードバックコマンドをテキストメッセージに挿入すること、
前記テキストメッセージを送信すること、
を特徴とする装置。
【請求項９】
前記プロセッサは、さらに、前記所定の触覚フィードバックを出力することを特徴とする、請求項８に記載の携帯端末装置。
【請求項１０】
前記プロセッサは、さらに、前記所定の触覚フィードバックを出力することを前記テキストメッセージを送信することに先立って実行することを特徴とする、請求項９に記載の装置。
【請求項１１】
前記プロセッサは、さらに、前記所定の触覚フィードバックを出力することを、ユーザの生成した入力を受信すること、前記ユーザの生成した入力を所定の触覚フィードバックにマッピングすること、前記ユーザの生成した入力に対応する前記所定の触覚フィードバックに触覚フィードバックコマンドを割り当てること、及び前記触覚フィードバックコマンドをテキストメッセージに挿入することの少なくとも一つとともに同時に実行することを特徴とする、請求項９に記載の装置。
【請求項１２】
前記ユーザの生成した入力は加速度計の出力を生成することを特徴とする、請求項８に記載の装置。
【請求項１３】
前記ユーザの生成した入力は、ジェスチャ、音声入力、又は動画カメラ入力のいずれかであることを特徴とする、請求項８に記載の装置。
【請求項１４】
前記プロセッサは、さらに、前記所定の触覚フィードバックを前記テキストメッセージの特定の部分に割り当てることを特徴とする、請求項８に記載の装置。
【請求項１５】
プロセッサにより実行可能なコンピュータプログラムコードを含むコンピュータ読取可能な媒体であって、前記コンピュータプログラムコードは該プロセッサに、
ユーザの生成した入力を受信することと、
前記ユーザの生成した入力を所定の触覚フィードバックにマッピングすることと、
触覚フィードバックコマンドを前記所定の触覚フィードバックに割り当てることと、
前記触覚フィードバックコマンドをテキストメッセージに挿入することと、
前記テキストメッセージを送信することと、
を実行させることを特徴とする、コンピュータ読取可能な媒体。
【請求項１６】
前記プロセッサに、前記所定の触覚フィードバックを出力することを実行させる、プロセッサにより実行可能なコンピュータプログラムコードをさらに含むことを特徴とする、請求項１５に記載のコンピュータ読取可能な媒体。
【請求項１７】
前記プロセッサに、前記所定の触覚フィードバックを出力することを前記テキストメッセージを送信することに先立って実行させる、プロセッサにより実行可能なコンピュータプログラムコードをさらに含むことを特徴とする、請求項１６に記載のコンピュータ読取可能な媒体。
【請求項１８】
前記プロセッサに、前記所定の触覚フィードバックを出力することを、ユーザの生成した入力を受信すること、前記ユーザの生成した入力を所定の触覚フィードバックにマッピングすること、前記ユーザの生成した入力に対応する前記所定の触覚フィードバックに触覚フィードバックコマンドを割り当てること、及び前記触覚フィードバックコマンドをテキストメッセージに挿入することの少なくとも一つとともに同時に実行させる、プロセッサにより実行可能なコンピュータプログラムコードをさらに含むことを特徴とする、請求項１６に記載のコンピュータ読取可能な媒体。
【請求項１９】
前記ユーザの生成した入力は加速度計の出力を生成することを特徴とする、請求項１５に記載のコンピュータ読取可能な媒体。
【請求項２０】
前記ユーザの生成した入力は、ジェスチャ、音声入力、又は動画カメラ入力のいずれかであることを特徴とする、請求項１５に記載のコンピュータ読取可能な媒体。
【請求項２１】
前記プロセッサに、前記所定の触覚フィードバックを前記テキストメッセージの特定の部分に割り当てることを実行させる、プロセッサにより実行可能なコンピュータプログラムコードをさらに含むことを特徴とする、請求項１５に記載のコンピュータ読取可能な媒体。