(57)【要約】【課題】頭部装着型表示機器が接続された端末機器のタッチスクリーンへの制御精度を向上する。【解決手段】タッチスクリーンが軌跡モードで作動していることを確定するステップと、指がタッチスクリーン上でスライドしている時、指のスライド軌跡を取得するとともに、指のタッチスクリーンにおける位置を測位するための上記スライド軌跡を端末機器及び頭部装着型表示機器に同期表示するステップと、切替条件が満たされると、タッチスクリーンを軌跡モードからトリガーモードに切替えるステップと、タッチスクリーンへの操作指示が検出されると、操作指示に応じて、対応する機能を実行するようにタッチスクリーンをトリガーするステップと、を含む。【選択図】図１
2017513084.tif 000002
【特許請求の範囲】
【請求項１】
端末機器が頭部装着型表示機器に接続されると、端末機器のタッチスクリーンが見られなくなる場合に、前記タッチスクリーンを制御するために用いられるタッチスクリーンの制御方法であって、
タッチスクリーンが軌跡モードで作動していることを確定するステップと、
指がタッチスクリーン上でスライドしている時、指のスライド軌跡を取得するとともに、端末機器及び頭部装着型表示機器に、指のタッチスクリーンにおける位置を測位するための前記スライド軌跡を同期させて表示するステップと、
切替条件が満たされると、前記タッチスクリーンを軌跡モードからトリガーモードに切替えるステップと、
前記タッチスクリーンへの操作指示が検出されると、前記操作指示に応じて、対応する機能を実行するように前記タッチスクリーンをトリガーするステップと、
を含むことを特徴とするタッチスクリーンの制御方法。
【請求項２】
前記のタッチスクリーンが軌跡モードで作動していることを確定するステップは、具体的に、
前記端末機器における作動モード切替ボタンであって、前記端末機器のサイドボタンとして設けられ又は前記端末機器のタッチスクリーン領域に設けられ、前記タッチスクリーンを軌跡モードとトリガーモードとの間で切替えるように制御するための作動モード切替ボタンが、軌跡モードの状態で起動されていることを確認すること、又は、
予め定められた軌跡パターンにより、軌跡モードで作動するように前記タッチスクリーンをトリガーすること、又は、
前記タッチスクリーンが初期時に軌跡モードで作動するようにすること、
を含むことを特徴とする請求項１に記載の方法。
【請求項３】
前記切替条件が満たされると、前記タッチスクリーンを軌跡モードからトリガーモードに切替えるステップは、具体的に、
頭部装着型表示機器に表示されたスライド軌跡により、指が目標位置までスライドしたことを確定した後、前記指のスライドが停止され、前記指がタッチスクリーンから離されると、前記タッチスクリーンとの相対位置を保持させることと、
前記端末機器が作動モード切替信号を受け取ると、前記作動モード切替信号により、前記タッチスクリーンを軌跡モードからトリガーモードに切替えることと、
を含むことを特徴とする請求項２に記載の方法。
【請求項４】
前記切替条件が満たされると、前記タッチスクリーンを軌跡モードからトリガーモードに切替えるステップは、具体的に、
頭部装着型表示機器に表示されたスライド軌跡により、指が目標位置までスライドしたことを確定した後、前記指のスライドが停止され、前記指がタッチスクリーンから離されると、前記タッチスクリーンとの相対位置を保持させることと、
指のスライドが停止されてタッチスクリーンから離されたことを検出すると、前記端末機器が、前記タッチスクリーンを軌跡モードからトリガーモードに切替えることと、
を含むことを特徴とする請求項２に記載の方法。
【請求項５】
端末機器における作動モード切替ボタンが、端末機器のタッチスクリーン領域に設けられたフローティングボタンである場合、予め定められた期間内にユーザがタッチスクリーンを利用しないとき、前記タッチスクリーンに表示された前記フローティングボタンを隠すか、又は、予め定められた閉じるボタンにより前記フローティングボタンの表示を閉じることを特徴とする請求項３又は４に記載の方法。
【請求項６】
端末機器が頭部装着型表示機器に接続されると、端末機器のタッチスクリーンが見られなくなる場合に、前記タッチスクリーンを制御するために用いられるタッチスクリーンの制御装置であって、
前記タッチスクリーンが軌跡モードで作動していることを確定するモード確定手段と、
指がタッチスクリーン上でスライドしている時、指のスライド軌跡を取得するとともに、端末機器及び頭部装着型表示機器に、指のタッチスクリーンにおける位置を測位するための前記スライド軌跡を同期させて表示する表示手段と、
切替条件が満たされると、前記タッチスクリーンを軌跡モードからトリガーモードに切替えるモード切替手段と、
前記タッチスクリーンへの操作指示が検出されると、前記操作指示に応じて、対応する機能を実行するように前記タッチスクリーンをトリガーする処理手段と、
を含むことを特徴とするタッチスクリーンの制御装置。
【請求項７】
前記モード確定手段は、具体的に、
前記端末機器における作動モード切替ボタンであって、前記端末機器のサイドボタンとして設けられ又は前記端末機器のタッチスクリーン領域に設けられて、前記タッチスクリーンを軌跡モードとトリガーモードとの間で切替えるように制御する作動モード切替ボタンが、軌跡モードの状態で起動されていることを確認するために用いられるか、又は、
予め定められた軌跡パターンにより、軌跡モードで作動するように前記タッチスクリーンをトリガーするために用いられるか、又は、
前記タッチスクリーンが初期時に軌跡モードで作動するようにするために用いられる、
ことを特徴とする請求項６に記載の装置。
【請求項８】
前記モード切替手段は、具体的に、
頭部装着型表示機器に表示されたスライド軌跡により、指が目標位置までスライドされたことを確定した後、前記指のスライドが停止され、前記指がタッチスクリーンから離されると、前記タッチスクリーンとの相対位置を保持させ、作動モード切替信号を受け取ると、前記作動モード切替信号により、前記タッチスクリーンを軌跡モードからトリガーモードに切替えるために用いられることを特徴とする請求項７に記載の装置。
【請求項９】
前記モード切替手段は、具体的に、
頭部装着型表示機器に表示されたスライド軌跡により、指が目標位置までスライドされたことを確定した後、前記指のスライドが停止され、前記指がタッチスクリーンから離されると、前記タッチスクリーンとの相対位置を保持させるとともに、指のスライドが停止され、指がタッチスクリーンから離されたことを検出すると、前記タッチスクリーンを軌跡モードからトリガーモードに切替えるために用いられることを特徴とする請求項７に記載の装置。
【請求項１０】
前記表示手段は、更に、端末機器における作動モード切替ボタンが、端末機器のタッチスクリーン領域に設けられたフローティングボタンである場合、予め定められた期間内にユーザがタッチスクリーンを利用しないとき、前記タッチスクリーンに表示された当該フローティングボタンを隠すか、又は、予め定められた閉じるボタンにより前記フローティングボタンの表示を閉じるために用いられることを特徴とする請求項８又は９に記載の装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、端末機器制御技術分野に関し、特に、タッチスクリーンの制御方法及び装置に関する。
【背景技術】
【０００２】
近年、ウェアラブル機器の普及が進むにつれて、頭部装着型表示機器も急速に発展している。現在、多くの頭部装着型表示機器は、いずれも例えば携帯電話、ＰＡＤなどの端末機器を外付けすることができ、ユーザは、端末機器の表示信号を頭部装着型表示機器に転送すると、頭部装着型表示機器によって、端末機器に表示された内容を見ることができる。これにより、よりよい観賞効果が実現される。
【０００３】
しかし、ユーザが頭部装着型表示機器によって端末機器に表示された内容を見ると、端末機器の操作画面、即ち、タッチスクリーンが見られなくなる。こうなると、ユーザは、端末機器のタッチスクリーンを直接に操作することができない。
【発明の概要】
【発明が解決しようとする課題】
【０００４】
従来技術においては、上記問題を解決するために、通常、関連センサを頭部装着型表示機器に追加して、まずはユーザのジェスチャーをセンサにより採集し、ユーザのジェスチャーを認識することで端末機器の制御を行っている。しかし、現在のジェスチャー認識技術は、成熟度が低く、認識精度も高くない。この場合、より高い認識精度に達成しようとすると、システムの実現が複雑となり、投入コストも高くなる。
【０００５】
そのため、如何にして、端末機器におけるタッチスクリーンへの直接制御を実現し、タッチスクリーンへの制御精度を向上させるかが、最優先の解決課題となっている。
【０００６】
本発明は、従来技術における端末機器が頭部装着型表示機器に接続されると、端末機器のタッチスクリーンが見られなくなる場合におけるタッチスクリーンへの制御精度が低いという問題を解決するためのタッチスクリーンの制御方法及び装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明は、端末機器が頭部装着型表示機器に接続されると、端末機器のタッチスクリーンが見られなくなる場合にタッチスクリーンを制御するためのタッチスクリーンの制御方法であって、タッチスクリーンが軌跡モードで作動していることを確定するステップと、指がタッチスクリーン上でスライドしている時、指のスライド軌跡を取得するとともに、端末機器及び頭部装着型表示機器に、指のタッチスクリーンにおける位置を測位するための前記スライド軌跡を同期させて表示するステップと、切替条件が満たされると、前記タッチスクリーンを軌跡モードからトリガーモードに切替えるステップと、前記タッチスクリーンへの操作指示が検出されると、前記操作指示に応じて、対応する機能を実行するように前記タッチスクリーンをトリガーするステップと、を含む。
【０００８】
更に、本発明のタッチスクリーンの制御装置は、端末機器が頭部装着型表示機器に接続されると、端末機器のタッチスクリーンが見られなくなる場合にタッチスクリーンを制御するためのもので、タッチスクリーンが軌跡モードで作動していることを確定するモード確定手段と、指がタッチスクリーン上でスライドしている時、指のスライド軌跡を取得するとともに、端末機器及び頭部装着型表示機器に、指のタッチスクリーンにおける位置を測位するための前記スライド軌跡を同期させて表示する表示手段と、切替条件が満たされると、前記タッチスクリーンを軌跡モードからトリガーモードに切替えるモード切替手段と、前記タッチスクリーンへの操作指示が検出されると、前記操作指示に応じて、対応する機能を実行するように前記タッチスクリーンをトリガーする処理手段と、を含む。
【発明の効果】
【０００９】
本発明によるタッチスクリーンの制御方法及び装置によれば、端末機器が二つの作動モードで作動しており、先ずは、軌跡モードで、ユーザの指のスライド軌跡を取得して、端末機器に表示し、このとき、端末機器に表示された内容が、頭部装着型表示機器にも同期して表示されているため、ユーザは、頭部装着型表示機器によって指のタッチスクリーンにおける位置を見ることができ、軌跡モードでは、指を測位する役割を果たすことができる。これにより、端末機器がトリガーモードに切替えられてからは、ユーザは、タッチスクリーンに対して通常のタッチコントロール操作を行うことができる。本発明によれば、ユーザが端末機器のタッチスクリーンを直接に操作制御することになり、センサによりジェスチャーを認識する制御方法と比べて、制御精度が高い。また、いかなるハードウェアも増設する必要がなく、投入コストが削減される。
【００１０】
本発明のその他の特徴及び利点は、以下の明細書で説明され、その一部は明細書から自明になり、又は、本発明を実施することで理解に至る。本発明の目的及びその他の利点は、明細書、特許請求の範囲及び図面に特定した構造により実現及び獲得可能である。
【図面の簡単な説明】
【００１１】
図面は、本発明に対する更なる理解を提供すると同時に、明細書の一部を構成するものであり、本発明の実施形態とともに本発明を解釈するために用いられるが、本発明に対する制限にならない。
【図１】本発明の第１実施形態のタッチスクリーンの制御方法のフローチャートである。
【図２】本発明の第２実施形態のタッチスクリーンの制御方法のフローチャートである。
【図３】（ａ）は、本発明の第２実施形態の端末機器の作動モードの一切替方式を示す説明図であり、（ｂ）は、別の切替方式を示す説明図である。
【図４】本発明の第３実施形態のタッチスクリーンの制御方法のフローチャートである。
【図５】本発明の第４実施形態のタッチスクリーンの制御装置の構造を示す模式図である。
【発明を実施するための形態】
【００１２】
本発明は、端末機器が頭部装着型表示機器に接続された後、端末機器のタッチスクリーンが見られなくなる場合に、タッチスクリーンへの制御精度を向上させるためのタッチスクリーンの制御方法及び装置を提供しており、以下、図面を参照して、本発明の好ましい実施形態について説明する。ここで述べる好ましい実施形態は、単に本発明を説明及び解釈するためのものであり、本発明を限定するものではないことは理解されるべきである。そして、矛盾しない場合、本発明における実施形態及び実施形態における特徴を互いに組み合わせてもよい。
【００１３】
（第１実施形態）
本発明の第１実施形態は、端末機器が頭部装着型表示機器に接続されると、端末機器のタッチスクリーンが見られなくなる場合に、タッチスクリーンを制御するためのタッチスクリーンの制御方法を提供しており、その方法のステップとしては、図１に示すように、下記のステップ１０１〜１０４を含む。
【００１４】
ステップ１０１は、タッチスクリーンが軌跡モードで作動していることを確定する。
ステップ１０２は、指がタッチスクリーン上でスライドしている時、指のスライド軌跡を取得するとともに、端末機器及び頭部装着型表示機器に、指のタッチスクリーンにおける位置を測位するための上記スライド軌跡を同期させて表示する。
【００１５】
ステップ１０３は、切替条件が満たされると、上記タッチスクリーンを軌跡モードからトリガーモードに切替える。
【００１６】
ステップ１０４は、当該タッチスクリーンへの操作指示が検出されると、当該操作指示に応じて、対応する機能を実行するように当該タッチスクリーンをトリガー（作動）させる。
【００１７】
この場合、本発明の第１実施形態における端末機器は、例えばスマートフォン、タブレットＰＣ等のタッチコントロール可能な端末機器であってもよく、タッチコントロールリモコンにより操作制御されるスマートテレビであってもよい。本発明の第１実施形態において、タッチスクリーンの作動モードが、軌跡モードとトリガーモードとに分かれており、軌跡モードでは、端末機器に、指のタッチスクリーンにおけるスライド軌跡が表示され、いかなる機能もトリガーされないのに対して、トリガーモードでは、ユーザは、クリックや拡大や縮小などの操作を行うことが可能である。上記ステップの実行過程において、端末機器が頭部装着型表示機器に接続されているので、端末機器における表示内容が頭部装着型表示機器にも同時に表示される。そうすると、ユーザは、頭部装着型表示機器に表示されたスライド軌跡により、指のタッチスクリーンにおける位置を見ることができ、更に、タッチスクリーンへの直接的なタッチコントロール操作を実現することができる。したがって、センサによりジェスチャーを認識する制御方法と比べて、制御精度が高く、また、第１実施形態は、いかなるハードウェアも増設する必要がなく、投入コストが削減される。
【００１８】
（第２実施形態）
以下、図２を参照して、本発明の第２実施形態のタッチスクリーンの制御方法を詳細に説明する。具体的な制御方法のフローチャートは、図２に示すものであり、下記のステップ２０１〜２１０を含む。
【００１９】
ステップ２０１は、タッチスクリーンが軌跡モードで作動していることを確定する。
この場合、タッチスクリーンが軌跡モードで作動していることを確認するには、次の方式で判断することができる。
【００２０】
（ａ）第１の方式：
端末機器における作動モード切替ボタンが軌跡モードの状態で起動されていることを確認する。
【００２１】
具体的には、上記作動モード切替ボタンが、端末機器のサイドボタン、即ち、端末機器の側辺部における物理的なボタンとして設けられてもよく、ユーザが、作動モード切替ボタンによって、例えば、いずれか二つのサイドボタンを同時に押すか、又は、いずれか一つのサイドボタンを長く押すことにより、端末機器の作動モードを切替えることができ、実際の応用において、機器が見られなくなる場合に、物理的なボタンの測位がユーザにとってより容易なものである。
【００２２】
又は、上記作動モード切替ボタンが、端末機器のタッチスクリーン領域に設けられてもよく、このとき、作動モード切替ボタンが、画面に表示されるフローティングボタンとなり、ユーザの操作の便宜のため、当該フローティングボタンが画面の隅位置に設けられてもよく、ユーザが、当該作動モード切替ボタンにより端末機器の作動モードを切替えることができる。端末機器が頭部装着型表示機器に接続された後、ユーザは、頭部装着型表示機器において上記フローティングボタンを見ることができる。
【００２３】
（ｂ）第２の方式：
予め定められた軌跡パターンにより、軌跡モードで作動するようにタッチスクリーンをトリガーさせる。例えば、ユーザが画面で円形の形状を描くと、タッチスクリーンが軌跡モードで作動するようにさせる。この場合、具体的な軌跡パターンは、ユーザによって自由に設定可能である。
【００２４】
ステップ２０２は、指がタッチスクリーン上でスライドしている時、指のスライド軌跡を取得する。
ステップ２０３は、端末機器が、その表示内容を頭部装着型表示機器に送信する。
【００２５】
この場合、上記表示内容には、指のスライド軌跡が含まれ、表示内容は、高品位マルチメディアインターフェース（HDMI（登録商標）：High Definition Multimedia Interface）、又は、端末機器モバイルハイディフィニションリンク（MHL：Mobile High-Definition Link）データケーブルによって送信されることが可能であるが、上記実施方式に限定されない。
【００２６】
ステップ２０４は、端末機器に上記スライド軌跡を表示すると同時に、頭部装着型表示機器に上記スライド軌跡を表示する。
【００２７】
この場合、スライド軌跡は、指がスライドした線、又は、指に追従して移動するマーク（点、丸など）として表示される。指のスライド軌跡を表示するのは、指の位置を測位するためである。
【００２８】
ステップ２０５は、頭部装着型表示機器に表示されたスライド軌跡により、指が目標位置までスライドされたことを確定する。
【００２９】
ステップ２０６は、指が目標位置までスライドされたことを確定した後、指の端末機器におけるスライドが停止され、指がタッチスクリーンから離されると、指とタッチスクリーンとの相対位置を保持する。
【００３０】
ステップ２０７は、ユーザによる端末機器への作動モード切替信号の入力を受け取る。即ち、作動モード切替ボタンにより端末機器をトリガーモードに切替えるか、又は、予め定められた軌跡パターンにより端末機器をトリガーモードに切替える。作動モードの切替は、図３（ａ）、（ｂ）に示すようになるが、図に示す二つの方式に限定されない。
【００３１】
ステップ２０８は、端末機器がユーザから入力された作動モード切替信号を受け取って、この作動モード切替信号により、タッチスクリーンをトリガーモードに切替える。
【００３２】
ステップ２０９は、ユーザによる端末機器のタッチスクリーンへのクリック、スライド等の操作を受け取る。
【００３３】
この場合、ユーザは、上記ステップ２０５、２０６における目標位置、及び、指とタッチスクリーンとの相対位置により、指が目標位置又は目標位置の周辺領域に対してどのように操作されたかを確定することができる。
【００３４】
操作の便宜のため、ユーザは、片方の手で端末機器の作動モードを切替え、他方の手でタッチスクリーン上をスライドし、機能のトリガー操作をしてもよい。
【００３５】
ステップ２１０は、端末機器がユーザによるタッチスクリーンへの操作指示を検出すると、この操作指示に応じて、対応する機能を実行するように上記タッチスクリーンをトリガーさせる。
【００３６】
具体的には、端末機器は、ユーザによるクリック、スライド等の操作に応じて、対応する機能を実行させる。
【００３７】
このようにして、端末機器におけるタッチスクリーンへの制御が完了する。ユーザがタッチスクリーンに対して新しい操作制御を行いたい時は、依然として上記第２実施形態における方法によって実現することができる。即ち、ユーザが指とタッチスクリーンとの相対位置を確定できない場合に、いずれも、先ず端末機器の軌跡モードを利用して指の位置を測位し、そして、端末機器のトリガーモードによりタッチスクリーンへの操作制御を実現することが必要となる。
【００３８】
更に、端末機器における作動モード切替ボタンが、端末機器のタッチスクリーン領域に設けられたフローティングボタンであると、ユーザが予め定められた期間内にタッチスクリーンを利用しない場合、タッチスクリーンに表示された当該フローティングボタンを隠すか、又は、予め定められた閉じるボタンにより当該フローティングボタンの表示を閉じてもよい。これにより、ユーザが画面を見ている間に、フローティングボタンが画面を遮断することを回避することができる。
【００３９】
（第３実施形態）
本発明の第３実施形態は、作動モードを自動に切替えることにより端末機器のタッチスクリーンを制御する方法であり、具体的なステップとしては、図４に示すようにステップ４０１〜４１０を含む。
【００４０】
ステップ４０１は、タッチスクリーン制御プログラムが起動されると、デフォルトとして、タッチスクリーンが軌跡モードになる。
【００４１】
ステップ４０２は、ユーザの指がタッチスクリーン上でスライドしている時、指のスライド軌跡を取得する。
【００４２】
ステップ４０３は、端末機器が、その表示内容を頭部装着型表示機器に送信する。
この場合、上記表示内容には、指のスライド軌跡が含まれ、表示内容は、HDMI（登録商標）又はMHLデータケーブルによって送信することが可能であるが、この実現方式に限定されない。
【００４３】
ステップ４０４は、端末機器に上記スライド軌跡を表示すると同時に、頭部装着型表示機器に上記スライド軌跡を表示する。
【００４４】
この場合、上記スライド軌跡は、指がスライドした線、又は、指に追従して移動するマーク（点、丸など）として表示される。この指のスライド軌跡を表示するのは、指の位置を測位するためである。
【００４５】
ステップ４０５は、頭部装着型表示機器に表示されたスライド軌跡により、指が目標位置までスライドされたことを確定する。
【００４６】
ステップ４０６は、指が目標位置までスライドされたことを確定した後、指の端末機器におけるスライドが停止され、指がタッチスクリーンから離されると、タッチスクリーンとの相対位置を保持させる。
【００４７】
ステップ４０７は、ユーザの指のスライドが停止され、指がタッチスクリーンから離されたことを端末機器が検出した時点で、タッチスクリーンを軌跡モードからトリガーモードに切替えると同時に、タイマーを起動する。
【００４８】
ステップ４０８は、ユーザによるタッチスクリーンにおける目標位置へのクリック、スライド等の操作を受け取る。
【００４９】
この場合、端末機器に、作動モードを示す標識が設けられてもよい。これにより、ユーザは、表示された標識により現在の作動モードを知ることができる。
【００５０】
ステップ４０９は、端末機器がユーザによるタッチスクリーンへの操作指示を検出すると、この操作指示に応じて、対応する機能を実行するように上記タッチスクリーンをトリガーさせる。
【００５１】
具体的には、端末機器は、ユーザによるクリック、スライド等の操作に応じて、対応する機能を作動する。
【００５２】
ステップ４１０は、タイマーが予め定められた時間に達すると、端末機器が、タッチスクリーンをトリガーモードから軌跡モードに切替える。この場合、予め定められた時間は、ユーザが必要に応じて自ら設定してもよく、また、ユーザの参考のために、当該タイマーの時間を画面に同期させて表示してもよい。
【００５３】
更に、ユーザが再びタッチスクリーンを操作する必要がある場合には、改めて上記方法を実行する。即ち、ユーザが指とタッチスクリーンとの相対位置を確定できない場合に、先ず端末機器の軌跡モードを利用して指の位置を測位し、そして、端末機器のトリガーモードによりタッチスクリーンへの操作制御を実行することが必要となる。
【００５４】
更に、ユーザが一定の時間内にタッチスクリーンを利用しない場合、端末機器における作動モード標識を隠すか、又は、予め定められた閉じるボタンにより当該フローティングボタンの表示を閉じてもよい。これにより、ユーザが画面を見る間、上記標識が画面を遮断することが回避される。
【００５５】
（第４実施形態）
本発明の上記実施形態のタッチスクリーンの制御方法に応じて、本発明の第４実施形態は、端末機器が頭部装着型表示機器に接続されると、端末機器のタッチスクリーンが見られなくなる場合に、タッチスクリーンを制御するためのタッチスクリーンの制御装置を更に提供している。図５はタッチスクリーンの制御装置の構造を示す模式図である。
【００５６】
具体的には、タッチスクリーンが軌跡モードで作動していることを確定するモード確定手段５０１と、指がタッチスクリーン上でスライドしている時、指のスライド軌跡を取得するとともに、端末機器及び頭部装着型表示機器に上記スライド軌跡を同期させて表示する表示手段５０２と、切替条件が満たされると、上記タッチスクリーンを軌跡モードからトリガーモードに切替えるモード切替手段５０３と、上記タッチスクリーンへの操作指示が検出されると、この操作指示に応じて、対応する機能を実行するように上記タッチスクリーンをトリガーさせる処理手段５０４と、を含む。
【００５７】
更に、モード確定手段５０１は、具体的に、上記端末機器における作動モード切替ボタンであって、上記端末機器のサイドボタンとして設けられ又は上記端末機器のタッチスクリーン領域に設けられて、このタッチスクリーンを軌跡モードとトリガーモードとの間で切替えるように制御する作動モード切替ボタンが、軌跡モードの状態で起動されていることを確認するために用いられるか、又は、予め定められた軌跡パターンにより、軌跡モードで作動するように上記タッチスクリーンをトリガーするために用いられるか、又は、上記タッチスクリーンが初期時にドラッグモードで作動するようにするために用いられる。
【００５８】
更に、表示手段５０２は、具体的には、上記端末機器が、上記スライド軌跡が含まれた表示内容を、頭部装着型表示機器に送信するために用いられ、そのうち、モバイル機器で上記スライド軌跡を表示すると同時に、当該頭部装着型表示機器で上記スライド軌跡を表示する。
【００５９】
一つの実施例においては、タッチスクリーンを軌跡モードからトリガーモードに切替える前に、ユーザが頭部装着型表示機器に表示されたスライド軌跡により、指が目標位置までスライドされたことを確定することと、指のスライドが停止されると、指と上記タッチスクリーンとの相対位置を保持させることと、上記端末機器に作動モード切替信号を入力することとを更に含む。モード切替手段５０３は、具体的には、頭部装着型表示機器に表示されたスライド軌跡により、指が目標位置までスライドされたことを確定した後、指のスライドを停止され、指がタッチスクリーンから離されると、指と上記タッチスクリーンとの相対位置を保持させるとともに、作動モード切替信号を受け取ると、この作動モード切替信号により、上記タッチスクリーンを軌跡モードからトリガーモードに切替えるために用いられる。
【００６０】
他の実施例においては、上記タッチスクリーンを軌跡モードからトリガーモードに切替える前に、ユーザが頭部装着型表示機器に表示されたスライド軌跡により、指が目標位置までスライドされたことを確定することと、指のスライドが停止され、指がタッチスクリーンから離されると、上記タッチスクリーンとの相対位置を保持させることと、を更に含む。モード切替手段５０３は、具体的には、頭部装着型表示機器に表示されたスライド軌跡により、指が目標位置までスライドされたことを確定した後、指のスライドが停止され、指がタッチスクリーンから離されると、上記タッチスクリーンとの相対位置を保持させるとともに、指のスライドが停止され、指がタッチスクリーンから離されたことを検出すると、上記タッチスクリーンを軌跡モードからトリガーモードに切替えるために用いられる。
【００６１】
更に、上記操作指示は、ユーザが上記目標位置、及び、指とタッチスクリーンとの相対位置により入力されたものである。
【００６２】
更に、表示手段５０２は、具体的には、端末機器における作動モード切替ボタンが、端末機器のタッチスクリーン領域に設けられたフローティングボタンであると、予め定められた期間内にユーザがタッチスクリーンを利用しない場合、上記タッチスクリーンに表示されたフローティングボタンを隠すか、又は、予め定められた閉じるボタンにより上記フローティングボタンの表示を閉じるために用いられる。
【００６３】
上記各手段の機能が、図１〜図４に示すフローチャートにおける対応処理ステップに対応可能であり、ここでは、その説明を繰り返さない。
【００６４】
以上をまとめて、本発明の実施形態に提供された方法において、タッチスクリーンが軌跡モードで作動していることを確定して、指がタッチスクリーン上でスライドされている時、指のスライド軌跡を取得するとともに、端末機器及び頭部装着型表示機器に、指のタッチスクリーンにおける位置を測位するための上記スライド軌跡を同期させて表示し、ユーザから入力した作動モード切替信号を受け取るとともに、この作動モード切替信号により上記タッチスクリーンをトリガーモードに切替えて、タッチスクリーンへの操作指示が検出されると、この操作指示に応じて、対応する機能を実行するように上記タッチスクリーンをトリガーさせる。本発明の実施形態に提供された方法を用いると、従来技術と比べて、タッチスクリーンへの制御精度が高くなる。そして、本発明の方法によれば、いかなるハードウェアも増設する必要がなく、投入コストが削減される。
【００６５】
本発明の実施形態に提供されたタッチスクリーンの制御装置は、コンピュータプログラムによって実現されてもよい。当業者が理解できるように、上記のモジュール分け方式は、あくまでも複数のモジュール分け方式の一つであり、その他のモジュールに分けるか又はモジュールを分けない場合でも、上記機能を備えるタッチスクリーンの制御装置であれば、いずれも本発明の保護範囲内に含まれるべきである。
【００６６】
明らかなことに、当業者は、本発明の精神及び範囲を逸脱しない範囲内に本発明に対して各種の変更及び変形を行うことが可能である。このように、もし本発明のこれらの変更及び変形が、本発明の特許請求の範囲及びそれと均等した技術の範囲内に属するものであれば、これらの変更及び変形も、本発明に含まれるものとする。
【図１】
2017513084.tif 000003
【図２】
2017513084.tif 000004
【図３】
2017513084.tif 000005
【図４】
2017513084.tif 000006
【図５】
2017513084.tif 000007
【国際調査報告】
2017513084.tif 000008
2017513084.tif 000009
2017513084.tif 000010
2017513084.tif 000011
2017513084.tif 000012
2017513084.tif 000013