(57)【特許請求の範囲】
【請求項１】
タッチセンサ式コンピュータシステム（２０）であって、
タッチセンサ式ディスプレイ（２６）と、
前記タッチセンサ式ディスプレイ（２６）と動作可能に組み合わされているインタフェースソフトウェア（２８）と、を含み、
前記インタフェースソフトウェア（２８）は、前記タッチセンサ式ディスプレイ（２６）に表示されているアイテムに与えられるハンドタッチ入力を検出し、当該検出に応答して、タッチセンサ式ディスプレイ（２６）上の前記アイテムに実行可能な１または複数のペンタッチ操作可能命令を表示し、
前記インタフェースソフトウェアは、前記ハンドタッチ入力の検出後の所定のインターバルの経過後に前記１または複数のペンタッチ操作可能命令を表示し、
前記インタフェースソフトウェアは、前記アイテムに向けたペンタイプ器具の作用端の接近を検出し、当該接近が前記所定のインターバルの間に検出された場合、前記１または複数のペンタッチ操作可能命令は、前記所定のインターバルの完全な経過の前に表示されることを特徴とするシステム。
【請求項２】
前記１または複数のペンタッチ操作可能命令は、ペンタイプ器具の操作によって実行可能な、前記アイテムのコピーを前記タッチセンサ式ディスプレイ上の所望の場所に配置するコピー及び配置命令を含むことを特徴とする請求項１に記載のシステム。
【請求項３】
前記１または複数のペンタッチ操作可能命令は、ペンタイプ器具の操作によって実行可能な、前記タッチセンサ式ディスプレイ上の所望の場所へ前記アイテムを移動させる移動命令を含むことを特徴とする請求項１に記載のシステム。
【請求項４】
前記１または複数のペンタッチ操作可能命令は、ペンタイプ器具の操作によって実行可能な、前記アイテムを所望量だけサイズ変更させるサイズ変更命令を含むことを特徴とする請求項１に記載のシステム。
【請求項５】
前記１または複数のペンタッチ操作可能命令は、前記アイテムを所望量だけ回転させるペンタイプ器具の操作によって実行可能な回転命令を含むことを特徴とする請求項１に記載のシステム。
【請求項６】
タッチセンサ式コンピュータデバイスに対するインタフェース方法（５０）であって、
タッチセンサ式ディスプレイに与えられたタッチ入力を検出するステップ（５２）と、
前記タッチ入力の検出に応答して、前記タッチセンサ式ディスプレイに表示されているアイテムの選択をもたらして、前記アイテムに実行可能なタッチセンサ式ディスプレイ上の１または複数のタッチ操作可能命令を表示するステップと、を含み、前記１または複数のタッチ操作可能命令は、前記アイテムの場所に応じた場所内のタッチセンサ式ディスプレイ上に表示され、
前記タッチ入力が、前記アイテム上にレストさせられるハンドタッチ入力であり、
前記１または複数のタッチ操作可能命令は、ペンタッチ操作可能でありかつ所定の時間インターバルの経過後に前記アイテムに近接して表示され、
前記アイテムへのペンタイプ器具の作用端の接近を検出するステップと、前記接近が前記所定の時間インターバルの間に検出された場合、前記所定の時間インターバルの完全な経過の前に、前記１または複数のタッチ操作可能命令の表示をもたらすステップと、をさらに含むことを特徴とするインタフェース方法。
【請求項７】
前記１または複数のタッチ操作可能命令は、アイテムの性質に依存していることを特徴とする請求項６に記載のインタフェース方法。
【請求項８】
前記１または複数のタッチ操作可能命令は、コンタクト及びカレンダーアイテムを含むアイテムを個人情報管理スキーマ内に保存する命令を含んでいることを特徴とする請求項７に記載のインタフェース方法。
【請求項９】
前記１または複数のタッチ操作可能命令は、切り取り、コピー及び貼り付け命令を含んでいることを特徴とする請求項７に記載のインタフェース方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、バイモーダルタッチセンサ式デジタルノートブックに関する。
【背景技術】
【０００２】
タッチセンサ式ディスプレイは、ディスプレイの表面上への物体のタッチ、及びいくつかの場合は物体の接近すなわちほぼタッチする態様の入力に対応する。タッチ入力は、ユーザの手（例えば指）によるタッチ、スタイラスペンもしくは他のペンタイプの器具によるタッチ、または外部の物体によるタッチを含んでもよい。タッチセンサ式ディスプレイは、様々なコンピュータシステムにおいてますます使用されてきているが、タッチ入力の使用は、機能における重要なトレードオフを受け入れること及びインタフェースの使用の容易さをしばしば必要とする。
【発明の概要】
【０００３】
従って、タッチセンサ式ディスプレイ及びタッチセンサ式ディスプレイと動作可能に組み合わせられているインタフェースソフトウェアを含むタッチセンサ式コンピュータシステムが提供される。インタフェースソフトウェアは、タッチセンサ式ディスプレイになされたタッチ入力を検出して、当該検出に応じて、タッチ入力がタッチセンサ式ディスプレイになされた場所に依存しているタッチセンサ式ディスプレイ上の場所においてタッチ操作可能ユーザインタフェースを表示するように構成されている。
【０００４】
１つのさらなる態様において、タッチ入力はハンドタッチ入力であり、応答において表示されるタッチ操作可能ユーザインタフェースは、ペンタッチ操作可能な命令（１または複数）である。更に他の態様において、起動されるユーザインタフェースは、最初のタッチ入力の受信に続くインターバルの経過において表示されるが、起動されるユーザインタフェースの表示は、ペンタイプ器具の接近が検出される事象において、インターバルの完全な終了に先立って起きるように早められ得る。
【０００５】
この発明の概要は、発明を実施するための形態において以下で更に説明されるいくつかのコンセプトを単純な態様で紹介するために提供される。この発明の概要は、本発明の重要な特徴及び本質的な特徴を特定することを意図されておらず、本発明の範囲を限定するために使用されることも意図されていない。さらに、本発明は、本開示の任意の部分に記載されている任意のまたは全ての欠点を解決する実施例に限定されない。
【図面の簡単な説明】
【０００６】
【図１】対話型ディスプレイの実施形態のブロック図である。
【図２】タッチセンサ式コンピュータデバイスの実施形態とインタフェース（対話）するユーザの概略図である。
【図３】タッチセンサ式コンピュータデバイスに対する例示のインタフェース方法のフロー図である。
【図４】静止したハンドタッチの検出に応じてタッチ操作可能命令を表示するタッチセンサ式コンピュータデバイスの実施形態の概略図である。
【図５】静止したハンドタッチ及びペン先の接近の検出に応じてタッチ操作可能命令を表示するタッチセンサ式コンピュータデバイスの実施形態の概略図である。
【図６】ハンドタッチによってオブジェクトの粗いドラッグを表示するタッチセンサ式コンピュータデバイスの実施形態の概略図である。
【図７】ペンタッチによるオブジェクトの精密なドラッグを表示するタッチセンサ式コンピュータデバイスの実施形態の概略図である。
【図８】ハンドタッチによるユーザのオブジェクトの選択を表示するタッチセンサ式コンピュータデバイスの実施形態の概略図である。
【図９】図８のオブジェクトのペンタッチによるユーザのオブジェクトの複製を示す図である。
【図１０】ペンタッチによって図９の複製オブジェクトを配置するユーザを示す図である。
【図１１】ハンドタッチによってコレクションを選択するユーザを表すタッチセンサ式コンピュータデバイスの実施形態を示す概略図である。
【図１２】２つの手によるハンドタッチによって図１１のコレクションを展開するユーザを示す図である。
【図１３】ペンタッチによって図１１のコレクションからオブジェクトを選択するユーザを示す図である。
【発明を実施するための形態】
【０００７】
図１は、論理サブシステム２２、及び論理サブシステム２２に動作可能に接続されているメモリ／データ保持サブシステム２４を含むタッチセンサ式コンピュータシステム２０の実施形態のブロック図を示している。メモリ／データ保持サブシステム２４は、本明細書に開示されている方法の１または複数を実行するために、論理サブシステム２２によって実行可能な命令を含んでもよい。タッチセンサ式コンピュータシステム２０は、メモリ／データ保持サブシステム２４によって保持されているデータの視覚表示をもたらし、Ｉ／Ｏサブシステム２８の一部として含まれるディスプレイサブシステム２６をさらに含んでいてもよい。
【０００８】
ディスプレイサブシステム２６は、ディスプレイの表面への物体のタッチ、及びいくつかの場合は物体の接近またはほぼタッチする態様の入力に対応するタッチセンサ式ディスプレイを含んでもよい。いくつかの場合、タッチセンサ式ディスプレイは、「バイモーダル」タッチを検出するように構成されていてよく、ここで「バイモーダル」は、ユーザの指によるタッチ及びペンのタッチ等の２つの異なった態様のタッチを示す。いくつかの場合、タッチセンサ式ディスプレイは、「２つの手による」タッチを検出するように構成されていてもよく、ここで「２つの手による」とは、ユーザの人差し指（異なった手）によるタッチ、またはユーザの親指及び人差し指（同一の手）によるタッチ等の、同一の態様のタッチ（通常はハンドタッチ）を示す。従って、いくつかの場合、タッチセンサ式ディスプレイは、バイモーダル及び２つの手によるハンドタッチの両方を検出するように構成されていてもよい。
【０００９】
コンピュータシステム２０は、バイモーダル及び／または２つの手によるハンドタッチを検出して、当該タッチを識別して検出されたタッチのタイプに基づいた応答を生成するようにさらに構成されていてもよい。例えば、人間のタッチは、より低い精密度の大まかかつ／または粗いジェスチャに対して使用されてもよく、これらのジェスチャは、限定するわけではないが、タッピング（tapping）による即時のオブジェクト選択、グループ選択及び／またはオブジェクトの囲み選択、ドラッグ及びドロップ、絞り（squeeze）ジェスチャまたは拡大（stretch）ジェスチャによるオブジェクトのつまみ（pinching）、並びにオブジェクトを回転及び／または変形するジェスチャを含んでもよい。さらに、２つの手モードにおいて、このようなタッチの組み合わせが使用されてもよい。
【００１０】
他の例において、ペンタイプタッチ器具（すなわち、ペンタッチ）の作用端によるタッチは、限定するわけではないが、書くこと、メニューアイテムの選択、コピーまたは貼り付け等の編集操作の実行、画像を精密化する、特定の位置へのオブジェクトの移動、正確なサイズ変更等を含むさらに高い正確性を有する高精細な及び／または局所的なジェスチャに使用されてもよい。さらに、バイモーダルモードにおいて、当該人間のタッチ及びペンタッチの組み合わせは、図２を参照して以下に説明されるように使用されてもよい。
【００１１】
実際のタッチに加えて、システム２０は、ほぼタッチまたはタッチの接近を検出するように構成されていてもよい。例えば、タッチセンサ式ディスプレイは、ペンがディスプレイ表面の特定の位置に接近して、ディスプレイ表面から所定の距離の範囲内または所定の距離にある場合に、ペンタッチの接近を検出するように構成されてもよい。１つの例として、タッチセンサ式ディスプレイは、ペンがディスプレイ表面から２センチメートル内にある場合に、ペンのディスプレイ表面への接近を検出するように構成されていてもよい。
【００１２】
本明細書に記載されているタッチセンサ式コンピュータシステムは、タブレットラップトップ、スマートフォン、携帯情報端末（portable digital assistant）、デジタルノートブック等を含む様々な態様にて実装されてもよい。このようなデジタルノートブックの例は、図２に示されかつ以下でさらに詳細に説明される。
【００１３】
論理サブシステム２２は、Ｉ／Ｏサブシステム２８に関連するユーザインタフェース機能、特に、ディスプレイサブシステム２６（例えば、タッチセンサ式ディスプレイ）によるユーザインタフェース機能を提供するようにインタフェース命令を実行するように構成されていてもよい。通常は、インタフェースソフトウェアは、ディスプレイサブシステム２６のタッチセンサ式ディスプレイと動作可能に組み合わされており、タッチセンサ式ディスプレイに与えられたタッチ入力を検出するように構成されている。このような検出に応じて、インタフェースソフトウェアは、タッチセンサ式ディスプレイタッチ入力が与えられた場所に応じたタッチセンサ式ディスプレイ上の場所において、タッチ操作可能ユーザインタフェースを表示するようにさらに構成されていてもよい。例として、タッチ（またはペン）操作可能アイコンが、ユーザが指を置いている場所の周りに現れる。この場所は、選択されたオブジェクトの範囲（例えば、選択されたものの一番上）に応じて決まってもよい。タッチ操作可能アイコンは、固定された場所に現れてもよく、タッチは、出現（フェードイン）を調節し、離すことは、アイコンまたはツールバーの消滅をトリガする。アイコンの場所は、タッチ場所に部分的に依存していてもよく、例えば、タッチ場所に対応した右側の余白（margin）に出現してもよい。
【００１４】
図２は、対話型ディスプレイデバイスの実施形態とインタフェース（対話）するユーザの概略図である。例として、対話型ディスプレイデバイスのこのような実施形態は、デジタルノートブック３０のようなタッチセンサ式コンピュータシステムでもよい。デジタルノートブック３０は、１または複数のタッチセンサ式ディスプレイ３２を含んでもよい。いくつかの実施形態において、デジタルノートブック３０は、デジタルノートブックに実際のノートの態様で折り畳んで閉じることを可能とさせるヒンジ３４を含んでもよい。デジタルノートブック３０は、図１を参照して上述したように、タッチセンサ式ディスプレイと動作可能に組み合わされたインタフェースソフトウェアをさらに含んでもよい。
【００１５】
図２に示されているように、デジタルノートブック３０は、タッチセンサ式ディスプレイにおけるユーザの指３６のタッチ及びペン３８のタッチを検出してもよい。デジタルノートブック３０は、ペン３８がタッチセンサ式ディスプレイ３２から所定の距離内にある場合に、ペン３８の接近を検出するようにさらに構成されていてもよい。例として、ユーザの指３６は、ディスプレイ３２上に表示されているオブジェクト４０を選択するために使用されてもよく、それに応じて、タッチセンサ式ディスプレイ３２は、オブジェクト４０の周りに破線ボックス４２を表示すること等によって、アイテムが選択されていることの表示を示すように構成されてもよい。ユーザは、その後、ペン３８を用いたオブジェクト４０の精密なサイズ変更等の、更に精密なジェスチャを実行してもよい。これは多くの潜在的な例の１つであるが、オブジェクトの選択及びサイズ変更は、タッチ及びペンタッチの組み合わせによって実行され得る多くの操作の１つに過ぎないことが理解されるべきである。さらに、選択されたオブジェクト（１または複数）の範囲は、ディスプレイに接触している指（１または複数）及び手（１または複数）によって形成されている場所、範囲、または形状に依存していてもよいことに留意する。他の例は、以下で更に詳細に説明される。
【００１６】
図３は、タッチセンサ式コンピュータデバイスのための例示のインタフェース（interface）方法５０を示している。５２において、方法５０は、タッチセンサ式ディスプレイに与えられたタッチ入力を検出するステップを含む。本明細書で説明されているタッチ入力は、指等（すなわちハンドタッチ）等の、タッチセンサ式ディスプレイにおける物体のタッチを含んでもよい。いくつかの場合、このようなタッチ入力は、ペンタイプタッチ器具（すなわちペンタッチ）の作用端であってもよい。さらに、タッチ入力は、ハンドタッチとペンタッチとの組み合わせ、及び／またはハンドタッチとペンの接近（ペン先の接近）との組み合わせを含んでもよい。いくつかの実施形態において、ハンドタッチタイプのタッチ入力は「タップ（tap）」ハンドタッチを含んでもよく、この場合、ユーザは、タッチセンサ式ディスプレイをタップし、タッチセンサ式ディスプレイは、タッチの開始とそれに続くタッチ中断を検知する。多くの場合、タップハンドタッチがインタフェースソフトウェアによって処理されて、タッチセンサ式ディスプレイ上のアイテムの選択がもたらされることが望ましい。
【００１７】
いくつかの実施形態において、ハンドタッチタイプのタッチ入力は「レスト（静止）（rest）」ハンドタッチを含み、この場合、ユーザは、タッチセンサ式ディスプレイをタッチしかつディスプレイデバイスをタッチし続け、タッチセンサ式デバイスは、持続的なタッチの開始を検知する。いくつかの実施形態において、タッチセンサ式ディスプレイデバイスがレストハンドタッチを検知している間、ディスプレイデバイスは、ペン先の接近を追加的に検知してもよいので、上述のような方法５０におけるタッチ入力の検知は、レストハンドタッチ及びペン先接近の組み合わせの検出を含んでもよい。上述のように、ユーザの手または他の物体によるレストタッチが処理されて、ディスプレイスクリーン上のタッチ操作可能な命令の表示がもたらされてもよい。接近するペンタッチの追加された入力は、スクリーンに表示されるタッチ操作可能命令の生成の処理を変更可能である。例えば、接近するペンタッチは、以下の例において説明されるように、タッチ操作可能命令をさらに迅速に表示させてもよい。
【００１８】
５４において、方法５０は、タッチ入力の検出に応答して、タッチセンサ式ディスプレイに表示されているアイテムの選択をもたらして、当該アイテムに実行可能なタッチセンサ式ディスプレイ上のタッチ操作可能命令（１または複数）を表示するステップを含む。例えば、上述のように、タッチ入力は、タッチセンサ式ディスプレイに表示されるアイテムを選択するために使用されてもよい。さらに、アイテムの選択において、タッチセンサ式ディスプレイは、タッチセンサ式ディスプレイデバイス上に、タッチ操作可能命令（１または複数）を表示してもよい。代替的に、タッチ操作可能命令は、表示されているアイテムへなされる「レスト」ハンドタッチに応答して表示されてもよい。
【００１９】
任意の場合において、出現したタッチ操作可能命令は、コンテキストメニューの様々な数及びタイプのアイテムに対応している選択可能オプション（形式付け（formatting）オプション、編集オプション等）を含んでもよい。いくつかの実施形態において、タッチ操作可能命令の表示は、タッチ操作可能命令がディスプレイ上の表示内にゆっくりフェードインするように及び／またはディスプレイ上の場所に移動するように「フェードイン」及び／または「フロートイン（floating in）」によってタッチ操作可能命令を表示することを含んでもよく、タッチ操作可能命令の表示は、当該ディスプレイからアクティブ（activate）にされる。このような態様でのタッチ操作可能命令の表示は、ユーザの注意をそらし得る点滅及び／または急な変化を回避することによって、さらに美しいユーザ経験をもたらし得る。さらに、フェードイン／フロートイン手法の先進的な性質は、ユーザが表示の変化に気付き、ユーザの目が、フェードイン命令がアクティブにされ得る特定の場所へ引き付けられることである。
【００２０】
さらに、このようなタッチ操作可能命令（１または複数）は、選択されたかまたはアクティブにされるだろうアイテムの場所に応じた場所内のタッチセンサ式ディスプレイに表示されてもよい。例えば、タッチ操作可能命令（１または複数）は、アイテム近傍に表示されるコンテキストメニューとして表示されてもよい。
【００２１】
追加的にまたは代替的に、タッチ操作可能命令（１または複数）は、タッチ入力がタッチセンサ式ディスプレイに与えられたところに応じた場所に表示されてもよい。例えば、タッチ操作可能ユーザインタフェースは、タッチ入力をもたらした指の近傍に表示されるコンテキストメニューとして表示されてもよい。
【００２２】
多くの場合、アクティブ化入力（例えば、レストハンドタッチ）の後の所定のインターバルの経過の後のみに、インタフェースソフトウェアがタッチ操作可能命令（例えば、フェードインさせられる命令）を表示するのが好ましい。例として、図４は、対話式ディスプレイデバイス６０の実施形態の概略図を示している。画像６６におけるタッチセンサ式ディスプレイ上のユーザの指６２のレストハンドタッチを検知すると、タッチセンサ式ディスプレイ６４は、タッチ操作可能命令「１」、「２」及び「３」を、命令の点線によって示されているように、視覚的に命令を視界内にフェードインさせることによって表示する。いくつかの場合、タッチセンサ式ディスプレイ６４は、タッチ入力の検出の後の所定のインターバル（例えば、２秒）の後に命令を表示するように構成されてもよい。２秒のインターバルは例示であり、所定のインターバルは任意の適切な時間であってもよい。代替的に、タッチして離すことは（タッチしてそのままにするのと対照的に）、ペンまたは指を使用してユーザが次に起動する命令を表示させてもよい。
【００２３】
命令「１」、「２」及び「３」は例示であり、任意の数の命令がいくつもの異なった構成で出現してもよく、命令はさらに、ユーザに表示されている任意の数のオプションに関連付けられてもよい。さらに、いくつかの場合、フェードインした命令は、インタフェースソフトウェアによって検出されたアイテムの性質に基づいて選択され得る。例えば、テキストアイテムの場合、対応するタッチ操作可能命令は、切り取り、コピー及び貼り付け機能等の編集命令であってもよい。他の例において、テキストアイテムに関連する対応する命令は、フォント形式、フォントサイズ及びフォント色等のテキストを形式付ける命令であってもよい。さらに他の例において、テキストアイテムは、可能性があるコンタクト情報及び／またはアポイントメント（ａｐｐｏｉｎｔｍｅｎｔ：指示）情報を含むとして検出されてもよく、対応するタッチ操作可能命令は、コンタクト及びカレンダーアイテムを含むアイテムを個人情報管理スキーマ内に保存するための機能を含んでいるだろう。
【００２４】
図３の方法は、入力が、意図的すなわち望まれた入力であるのと対照的な偶発的な入力かを判定するために、検出された入力を処理する追加的または代替的なステップを含んでもよい。可能性がある偶発的なタッチは無視され得かつ／るかまたはタッチが意図的であるかまたはそうではないかを曖昧さ無く判定するための十分な時間の経過まで据え置かれ得る。以前に示したように、例えば、ペン器具を保持している手に関連するタッチは無視されて拒絶されることがしばしば望ましい。接触領域の形状、どの手が入力表面にタッチしているかに関する推定、検出されたペンタッチの近接度、スクリーン上にある物体等を含む様々な要因が、タッチが偶発的であるかの評価において使用されてもよい。
【００２５】
さらに、図４に示されているように、命令「１」、「２」及び「３」は、アイテムの場所に応じている場所内のタッチセンサ式ディスプレイ上に表示される。示されているように、命令は、ユーザの指６２及び重なっている画像６６の近傍に表示される。命令は、タップ起動されたコントローラ、放射状（radial）メニュー、ドラッグ可能コントローラ（例えば、スライダ）、ダイアルコントローラ（タッチダウン（touch down）して回り、値またはステップスルー（step through）オプションを調整する）、クロッシングウィジェット（crossing widget）、プルダウンメニュー、ダイアログ、または他のインタフェース要素の任意の組み合わせからなっていてもよい。
【００２６】
上述したように、このようなインタフェースソフトウェアは、さらにタッチセンサ式ディスプレイ上の場所に対するペンタイプタッチ器具の作用端の接近を検出するように構成されていてもよく、このような接近が入力タッチの所定のインターバルの間に検出されると、タッチ操作可能ユーザインタフェースが所定のインターバルの全ての経過に先立って表示される。例として、図５は、対話式ディスプレイデバイス７０の他の実施形態の概略図を示している。タッチセンサ式ディスプレイ７４上のユーザの指７２レストハンドタッチの検出において、タッチセンサ式ディスプレイ７４は、ペン７６のペン先の接近を検出する。レストハンドタッチ及びペン先の接近の組み合わせの検出に応答して、タッチセンサ式ディスプレイは、画像７８に関連する命令「１」、「２」及び「３」をすぐに表示する。従って、このような実施形態において、タッチセンサ式ディスプレイ７４は、レストハンドタッチ及びペン先の接近の組み合わせに応答して視界内に命令を、レストハンドタッチのみの場合よりも迅速にフェードインさせる。従って、このような実施形態において、レストハンドタッチ及びペン先の接近は、キーボードショートカットが従来のパーソナルコンピュータのユーザに提供するような、迅速な解決法を対話式ディスプレイデバイス７０のユーザに与える。通常は、命令の視覚的出現及び命令の物理的アクセス容易性（physical accessibility）は、別個にされ得る。例えば、ペンがスクリーンにタッチしている手のそばに来た際、いくつかまたは全ての命令がすぐに使用可能（actionable）になる。さらなる例として、手がペンに極めて接近することは、命令（１または複数）がその時点で視覚的に表示されていてもいなくても、命令「１」によって表される放射状メニューからの１つのオプションを選択すると理解されてもよい。
【００２７】
さらに、いくつかの場合、タッチセンサ式ディスプレイ及びタッチセンサ式ディスプレイと動作可能に組み合わせられているインタフェースソフトウェアを含むタッチセンサ式コンピュータデバイスは、上述のように、タッチセンサ式ディスプレイに表示されているアイテムに与えられたタッチ入力を検出し、当該検出に応答して、タッチセンサ式ディスプレイ上に、アイテムに実行可能なペンタッチ操作可能な命令（１または複数）を表示するように構成されていてもよい。
【００２８】
ペンタッチ操作可能な命令は、上述のタッチ操作可能な命令を含む任意の適切なタイプであってもよい。さらに、ペンタッチ操作可能な命令は、ペンタイプタッチ器具の作用端がタッチセンサ式ディスプレイとインタラクトする（interact）タッチディスプレイの特定かつ更に小さいインタラクション領域を使用するさらに精密な性質のタッチ操作可能な命令を含んでもよい。従って、ペンタッチ操作可能命令は、ユーザに、異なったアプリケーションモードに変更する必要及び／または拡大された表示のデジタルワークスペースを見る必要無しに、容易に精密な作業を完了する潜在的利点を提供してもよい。換言すればペンタッチ操作可能な命令は、ディスプレイの大きなインタラクション領域を覆うだろう指先では不可能な、調整されかつ精密な態様にてタッチセンサ式ディスプレイに表示されているオブジェクトの精密な操作を容易にしてもよい。
【００２９】
いくつかの場合、タッチセンサ式ディスプレイは、タッチ操作可能命令を参照して上述されているように、タッチ入力の検出の後の所定のインターバルの後で、ペンタッチ操作可能命令を表示するように構成されていてもよい。
【００３０】
いくつかの実施形態において、ペンタッチ操作可能命令は、タッチセンサ式ディスプレイ上の所望の場所へのアイテムの移動をもたらすための、ペンタイプ操作によって実行可能な移動命令を含んでもよい。１つの例として、図６は、ハンドタッチによるオブジェクトの粗いドラッグを示しており、図７は、ペンタッチによるオブジェクトの精密なドラッグを示しており、これらは以下でさらに詳細に説明される。
【００３１】
図６は、タッチセンサ式ディスプレイ８４上に画像８２を表示する対話式ディスプレイデバイス８０の実施形態の概略図を示している。図示されているように、ユーザの指８６は、仮想的に画像８２を「トス（toss）」するための粗いジェスチャを行っている。従って、タッチセンサ式ディスプレイ８４は、破線によって示されている元の場所から実線で示されている最終的な場所に合致させられている画像を表示している。
【００３２】
図７は、ペンタッチによる物体の精密なドラッグを表示している対話式ディスプレイデバイス９０の実施形態の概略図を示している。図示されているように、ペン９２が画像９４の精密なドラッグを行っている。従って、タッチセンサ式ディスプレイ９６は、破線によって示されている元の場所から実線で示されている最後の精密な場所に合致させられている画像を表示している。図示されているように、ユーザは、タッチセンサ式ディスプレイ９６に表示されている他のオブジェクト９８に隣接して画像９４を精密に位置決めしている。
【００３３】
いくつかの実施形態において、ペンタッチ操作可能な命令は、アイテムをコピーしてタッチセンサ式ディスプレイ上の所望の場所に配置するための、ペンタイプ器具の操作によって実行可能なコピー及び配置命令を含んでもよい。図８から図１０は、このような「コピー及び配置」命令の一例を示している。図８は、タッチセンサ式ディスプレイ１０２上に、ユーザの指１０６のハンドタッチによってオブジェクト１０４を選択しているユーザを表している対話式ディスプレイデバイス１００の実施形態の概略図を示している。この動作において、ユーザは、図９に示されているように、ペンタッチ１０８によってオブジェクト１０４を複製し、複製されたオブジェクトの精密なドラッグを開始する。図１０に示されているように、オブジェクトの複製において、ユーザは、複製されたオブジェクトをペンタッチによって正確にドラッグし、タッチセンサ式ディスプレイデバイス１０２に表示されているラインに隣接して、当該複製されたオブジェクトを精密に配置する。同様に、「コピー及びトス」命令は、コピーされたアイテムを第２のスクリーン上にトスすることによって同様のトランザクション（ｔｒａｎｓａｃｔｉｏｎ）を可能にするので、物理的スクリーンベゼル（ｂｅｚｅｌ）は、オブジェクトを別個のスクリーンまたはスクリーン外の場所にコピーすることを妨げない。
【００３４】
いくつかの実施形態において、ペンタッチ操作可能命令は、アイテムを所望量のサイズ変更させるための、ペンタイプ器具の操作によって実行可能なサイズ変更命令を含んでもよい。このような命令は、タッチセンサ式ディスプレイに選択された画像上に「ハンドル（handles）」を表示させることを含んでもよく、ペンが選択された画像サイズの精密な調整に使用されてもよい。
【００３５】
さらに、いくつかの実施形態において、ペンタッチ操作可能命令は、アイテムに所望量の回転をもたらすための、ペンタイプ器具の操作によって実行可能な回転命令を含んでもよい。さらに、ペンの使用によって、このような回転はハンドタッチによる回転よりさらに精密かつ調整されていてもよい。ペンの代わりに２つのタッチを使用することによって、選択されたオブジェクトの粗いサイズ変更及び回転が、ペンによって小さな選択ハンドルを狙う必要無しになされ得る。
【００３６】
いくつかの実施形態において、ハンドタッチ及びペンタッチの組み合わせは、タッチセンサ式ディスプレイに表示されているアイテムのコレクションを操作及び／または整理（organize）するために使用されてもよく、その一例が図１１−１３に示されており、以下で更に詳細に説明される。図１１は、タッチセンサ式ディスプレイ１２４上にアイテムのコレクション１２２を表示している対話式ディスプレイデバイス１２０の１つの実施形態を示している。図１２に示されているように、ユーザ１２６のハンドタッチがコレクションを選択しており、その際、タッチセンサ式ディスプレイ１２４は、コレクション１２２内のアイテム１２８の展開を表示しており、ユーザ１２６は、つまむこと等による２つの手によるタッチを用いてさらにアイテムを操作してもよい。そうする際に、図１３に示されているように、ペン１３０のペンタッチは、コレクションからアイテム１３２を選択するために使用されてもよい。選択されたアイテム１３２は、その後、本明細書に記載されている様々な方法にてペンタッチによってさらに操作されてもよい。この態様にて、コレクションは、一単位として操作され得るか、またはコレクション内の要素は、明確な「グループ化」及び「非グループ化」命令を使用すること無く個別に操作され得る。
【００３７】
上述のことから理解されるように、様々な利点及び利益が、本明細書に記載されているバイモーダル（例えば、ハンドタッチ及びペンタッチ）及び２つの手による（２つの手を使用した）インタフェース方法を使用して得られてもよい。これらの方法は、様々な設定にて使用されてもよい。さらなる例として、デュアルスクリーンの実施形態において、一方のスクリーンが１つのタイプの入力（例えば、ハンドタッチ）のために用意され、他方のスクリーンが他の入力タイプ（例えば、ペンタッチ）のために用意されてもよい。スクリーンの間のこのような役割分担は、入力の解釈を容易にし、インタフェースのエルゴノミクス（ergonomics）及びインタフェースの使用の容易さを向上させ、及び／またはスクリーンに対する偶発的なハンドレストまたはタッチ等の望まれない入力の除去率を向上させる。デュアルスクリーン環境における他の例示の利益は、ユーザの手の両方が他のスクリーンに入力を与えるために使用されていることの検出において、スクリーンの１つにおいてデジタイザ電力を減少させる（それによって、デバイスの充電が長持ちする）ことである。
【００３８】
図１を再度参照すると、論理サブシステム２２は、１または複数の命令を実行するように構成されている１または複数の物理デバイスを含んでいてもよい。例えば、論理サブシステムは、１または複数のプログラム、ルーチン、オブジェクト、コンポーネント、データ構造、または他の論理的構成の一部である１または複数の命令を実行する実行するように構成されてもよい。このような命令は、タスクを実行するため、データ型を実行するため、１または複数のデバイスの状態を変化させるため、またはそのた望ましい結果に到達するために実行されてもよい。論理サブシステムは、ソフトウェア命令を実行するために構成されている１または複数のプロセッサを含んでもよい。追加的にまたは代替的に、論理サブシステムは、ハードウェアまたはファームウェア命令を実行するように構成されている１または複数のハードウェアまたはファームウェア論理マシンを含んでもよい。論理サブシステムは、いくつかの実施形態においてリモートに（remotely）配されていてもよい２以上のデバイスに亘って分散されている個別のコンポーネントを選択的に含んでいてもよい。
【００３９】
メモリ／データ保持サブシステム２４は、本明細書に記載されている方法及び処理を実行するために論理サブシステムによって実行可能なデータ及び命令を保持するように構成された１または複数の物理デバイスを含んでもよい。これらの方法及び処理が実行されると、メモリ／データ保持サブシステム２４の状態は、変更され得る（例えば、異なったデータを保持するように変更され得る）。メモリ／データ保持サブシステム２４は、リムーバブル媒体及び／または内蔵デバイスを含んでいてもよい。メモリ／データ保持サブシステム２４は、他に様々ある中で、光学メモリデバイス半導体メモリデバイス、及び／または磁気メモリデバイスを含んでいてもよい。メモリ／データ保持サブシステム２４は、以下の特性の１または複数を有するデバイスを含んでいてもよい：揮発性、不揮発性、ダイナミック、スタティック、読出／書込、読出のみ、ランダムアクセス、シーケンシャルアクセス、位置アドレス可能（location addressable）、ファイルアドレス可能（file addressable）、及びコンテンツアドレス可能。いくつかの実施形態において、論理サブシステム２２及びメモリ／データ保持サブシステム２４は、アプリケーション特化集積回路またはシステムオンチップ（system on chip）等の１または複数の共通デバイス内に一体化されていてもよい。
【００４０】
ディスプレイサブシステム２６が含まれる場合、ディスプレイサブシステム２６は、メモリ／データ保持サブシステム２４によって保持されるデータの視覚表示をもたらすために使用されてもよい。本明細書に記載されている方法及び処理が、データ保持システムによって保持されるデータを変更する場合、従ってデータ保持サブシステムの状態を変更する場合、同様に、ディスプレイサブシステム２６の状態は、内在するデータにおける変化を視覚的に表すために変更されてもよい。ディスプレイサブシステム２６は、任意のタイプの技術を実質的に使用する１または複数のディスプレイデバイスを含んでもよい。このようなディスプレイデバイスは、共有された筐体内で論理サブシステム２２及び／またはメモリ／データ保持サブシステム２４と組み合わされていてもよいか、またはこのようなディスプレイデバイスは、周辺機器ディスプレイデバイスであってもよい。
【００４１】
本明細書に記載されている構成及び／または方法は、本質的に例示であり、これらの特定の実施形態または例示は、限定的であると考えられるべきではないことが理解されるべきである。なぜならば、多数の変形例が可能であるからである。本明細書に記載されている特定のルーチンまたは方法は、多数の処理方策の１または複数の代表例であってもよい。示されている様々な動作は、示されている順序で実行されてもよいか、他の順序で実行されてもよいか、並列に実行されてもよいか、またはいくつかの場合には省略されてもよい。同様に、上述の処理の順序は、変更されてもよい。
【００４２】
本開示の発明は、本明細書において開示されている様々な処理、システム及び構成、並びに他の特徴、機能、動作及び／または性質の新規かつ非自明的な全ての組み合わせ及び下位組み合わせ、並びにこれらのあらゆる均等例を含む。
【図１】
0005559866.tif 000002
【図２】
0005559866.tif 000003
【図３】
0005559866.tif 000004
【図４】
0005559866.tif 000005
【図５】
0005559866.tif 000006
【図６】
0005559866.tif 000007
【図７】
0005559866.tif 000008
【図８】
0005559866.tif 000009
【図９】
0005559866.tif 000010
【図１０】
0005559866.tif 000011
【図１１】
0005559866.tif 000012
【図１２】
0005559866.tif 000013
【図１３】
0005559866.tif 000014