(57)【要約】【課題】本発明はディスプレイシステム及びこの操作方法に関するものである。【解決手段】本発明のディスプレイシステムのヘッドマウントディスプレイ装置は、ビデオ、ディスプレイ、通信回路及び処理装置を含む。処理装置は、通信回路で第一動作センサーからの第一検出情報を受信することにより、使用者の運動軌跡を生成する。ビデオは、使用者の可視範囲内の被撮影者を撮影する。処理装置は、ビデオからの映像情報を受信するとともに映像情報に対して映像分析を行うことにより被撮影者の運動軌跡を生成する。処理装置は、使用者の運動軌跡又は被撮影者の運動軌跡をディスプレイの画面中に表示する。【選択図】図３
2016071330.tif 000002
【特許請求の範囲】
【請求項１】
使用者の手又は使用者の手で持つ道具に装着される第一動作センサーと、
使用者の頭部に装着されるヘッドマウントディスプレイ装置とを含むディスプレイシステムであって、
前記ヘッドマウントディスプレイ装置は、
使用者の可視範囲内の被撮影者を撮影することにより映像情報を生成するビデオと、
使用者が見るように画面を表示するディスプレイと、
前記映像情報を第一動作センサーに送信する通信回路と、
前記ビデオ、前記ディスプレイ及び前記通信回路に電気的に接続される処理装置とを含み、
前記処理装置は、前記通信回路で前記第一動作センサーからの第一検出情報を受信することにより前記使用者の運動軌跡を獲得し、かつ前記ビデオからの前記映像情報を受信するとともに該映像情報に対して映像分析を行うことにより、前記被撮影者の運動軌跡を獲得し、かつ使用者の運動軌跡又は被撮影者の運動軌跡を前記ディスプレイの画面中に表示する、
ディスプレイシステム。
【請求項２】
前記使用者の運動軌跡は、該使用者の手の運動軌跡又は該使用者の手で持つ道具の運動軌跡を含み、前記被撮影者の運動軌跡は、該被撮影者の手の運動軌跡又は該被撮影者の手で持つ他の道具の運動軌跡を含む請求項１に記載のディスプレイシステム。
【請求項３】
前記第一動作センサーは、重力センサー、ジャイロスコープ、加速度計、電子コンパス又は高度測定器である請求項１に記載のディスプレイシステム。
【請求項４】
前記使用者の運動軌跡と前記被撮影者の運動軌跡とは、前記ディスプレイの画面に同時表示される、請求項１に記載のディスプレイシステム。
【請求項５】
前記ヘッドマウントディスプレイ装置は、前記処理装置に電気的に接続され、かつ前記使用者が発声する音声を検出するとともにこれによって生成された音声情報を前記処理装置に送信する音声検出センサーを更に含み、
前記処理装置は、前記音声情報に対して音声分析を行うことにより音声制御指令を生成する、請求項１に記載のディスプレイシステム。
【請求項６】
前記ヘッドマウントディスプレイ装置は、前記処理装置に電気的に接続され、かつ前記使用者のタッチ行為を検出するとともにこれによって生成されたタッチ情報を前記処理装置に送信するタッチ検出センサーを更に含み、
前記処理装置は前記タッチ情報でタッチ制御指令を生成する、請求項１に記載のディスプレイシステム。
【請求項７】
前記ヘッドマウントディスプレイ装置は前記処理装置に電気的に接続される第二動作センサーを更に含み、該第二動作センサーは、前記使用者の頭部の運動を検出するとともにこれによって生成された第二検出情報を前記処理装置に送信する、請求項１に記載のディスプレイシステム。
【請求項８】
前記第二動作センサーは、電子コンパス、ジャイロスコープ、地磁気センサー、加速度計又は重力センサーである、請求項７に記載のディスプレイシステム。
【請求項９】
前記処理装置は前記第二検出情報でメニューを選択して操作する指令を生成する、請求項７に記載のディスプレイシステム。
【請求項１０】
前記処理装置は、前記映像情報中の前記被撮影者の向き方向により、該被撮影者の運動軌跡を修正する、請求項１に記載のディスプレイシステム。
【請求項１１】
ディスプレイシステムの操作方法であって、
第一動作センサーで使用者の動作を検出することにより第一検出情報を生成するステップと、
ヘッドマウントディスプレイ装置の処理装置で、前記第一動作センサーが生成した前記第一検出情報を分析することにより、使用者の運動軌跡を検出するステップと、
前記ヘッドマウントディスプレイ装置のビデオで前記使用者の可視範囲内の被撮影者を撮影することにより映像情報を生成し、かつこの映像情報を前記処理装置に送信するステップと、
前記処理装置で前記映像情報に対して映像分析を行うことにより、前記被撮影者の運動軌跡を獲得するステップと、
前記ヘッドマウントディスプレイ装置のディスプレイで前記使用者の運動軌跡又は被撮影者の運動軌跡を該ディスプレイの画面中に表示するステップと、
を含むディスプレイシステムの操作方法。
【請求項１２】
前記ヘッドマウントディスプレイ装置は前記使用者の頭部に装着され、前記第一動作センサーは前記使用者の手又は前記使用者の手で持つ道具に装着され、前記使用者の運動軌跡は該使用者の手の運動軌跡又は該使用者の手で持つ道具の運動軌跡を含む、請求項１１に記載のディスプレイシステムの操作方法。
【請求項１３】
前記被撮影者の運動軌跡は、該被撮影者の手の運動軌跡又は該被撮影者の手で持つ他の道具の運動軌跡を含む、請求項１１に記載のディスプレイシステムの操作方法。
【請求項１４】
前記第一動作センサーは、重力センサー、ジャイロスコープ、加速度計、電子コンパス又は高度測定器である、請求項１１に記載のディスプレイシステムの操作方法。
【請求項１５】
前記使用者の運動軌跡と前記被撮影者の運動軌跡とは前記ディスプレイの画面に同時表示される、請求項１１に記載のディスプレイシステムの操作方法。
【請求項１６】
前記ディスプレイシステムの操作方法は、
前記ヘッドマウントディスプレイ装置の音声検出センサーで、前記使用者が発声する音声を検出するとともにこれによって生成された音声情報を前記処理装置に送信するステップと、
前記処理装置が前記音声情報に対して音声分析を行うことにより、音声制御指令を生成するステップとを更に含む、請求項１１に記載のディスプレイシステムの操作方法。
【請求項１７】
前記ディスプレイシステムの操作方法は、
前記ヘッドマウントディスプレイ装置のタッチ検出センサーで、前記使用者のタッチ行為を検出するとともにこれによって生成されたタッチ情報を前記処理装置に送信するステップと、
前記処理装置が前記タッチ情報でタッチ制御指令を生成するステップとを更に含む、請求項１１に記載のディスプレイシステムの操作方法。
【請求項１８】
前記ディスプレイシステムの操作方法は、
前記ヘッドマウントディスプレイ装置の第二動作センサーで、前記使用者の頭部の運動を検出するとともにこれによって生成された第二検出情報を前記処理装置に送信するステップとを更に含む、請求項１１に記載のディスプレイシステムの操作方法。
【請求項１９】
前記第二動作センサーは、電子コンパス、ジャイロスコープ、地磁気センサー、加速度計又は重力センサーである、請求項１８に記載のディスプレイシステムの操作方法。
【請求項２０】
前記ディスプレイシステムの操作方法は、前記処理装置が前記第二検出情報でメニューを選択して操作する指令を生成するステップとを更に含む、請求項１８に記載のディスプレイシステムの操作方法。
【請求項２１】
前記ディスプレイシステムの操作方法は、前記処理装置が前記映像情報中の前記被撮影者の向き方向により該被撮影者の運動軌跡を修正するステップとを更に含む、請求項１１に記載のディスプレイシステムの操作方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ディスプレイシステムに関し、特にヘッドマウントディスプレイシステム及びこの操作方法に関するものである。
【背景技術】
【０００２】
現在、販売されている運動補助装置（例えば、ゴルフシミュレーター）は通常、小型液晶表示装置（ＬＣＤ）又はスマートフォンで運動関連情報（例えば、使用者の運動姿勢又は他の情報）を表示する。（運動補助装置を使用するとき）使用者が自己の運動（例えば、ゴルフクラブを振ること）をストップさせた後、ポケット又は帯から小型液晶表示装置又はスマートフォンを取り出さなければ、自己の運動姿勢（例えば、ゴルフクラブを振ること）が正しいかどうかを確認するか或いは間違っている自己の運動姿勢を確認することができない。すなわち、運動をするとき、ポケットから小型液晶表示装置（又はスマートフォン）を取り出さなければならないので、利便性がよくない。
【０００３】
この「背景技術」段落の内容は本発明の内容の理解を助けるためのものであり、「背景技術」段落に記載される内容は、当技術分野の常用知識を持っている者が把握していること以外の従来技術も含むことができる。「背景技術」段落に記載される内容について、「背景技術」の内容又は本発明の一個又は複数個の実施例が解決しようとする問題を代表するものは、本発明の出願前に当技術分野の常用知識を持っている者が既に把握又は承知しているものではない。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】中国特許公開第１０３０６４１８８号公報
【特許文献２】中国特許公開第１０３５４３８４３号公報
【特許文献３】中国特許公開第１０３７１３７３７号公報
【特許文献４】米国特許公開第２０１３／０２１４９９８号公報
【特許文献５】米国特許公開第２０１３／０１７４２０５号公報
【特許文献６】台湾実用新型第Ｍ４８０４０７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明は、ディスプレイシステム及びこの操作方法を提供する。本発明により、使用者はヘッドマウントディスプレイ装置で可視範囲内の被撮影者を撮影し、かつヘッドマウントディスプレイ装置に使用者の運動軌跡と被撮影者の運動軌跡を表示することができる。
【０００６】
本発明の他の目的及びその利点は、本発明に掲載される技術的特徴により一層詳細に理解することができる。
【課題を解決するための手段】
【０００７】
上述した一部分又はすべての目的又は他の目的を実現するため、本発明の実施例においてはディスプレイシステムを提供する。このディスプレイシステムは、第一動作センサー（motion  sensor）とヘッドマウントディスプレイ装置を含む。第一動作センサーは使用者の手又は使用者の手で持つ道具に装着され、ヘッドマウントディスプレイ装置は使用者の頭部に装着される。ヘッドマウントディスプレイ装置は、ビデオ、ディスプレイ、通信回路及び処理装置を含む。ビデオは、使用者の可視範囲内の被撮影者を撮影することにより映像情報を生成する。ディスプレイは使用者が見るように画面を表示する。通信回路は映像情報を第一動作センサーに送信する。処理装置は、ビデオ、ディスプレイ及び通信回路に電気的に接続される。処理装置は、通信回路で第一動作センサーからの第一検出情報を受信することにより、使用者の運動軌跡を生成する。処理装置は、ビデオからの映像情報を受信するとともに映像情報に対して映像分析を行うことにより被撮影者の運動軌跡を生成する。処理装置は、使用者の運動軌跡又は被撮影者の運動軌跡をディスプレイの画面中に表示する。
【０００８】
本発明の実施例において、前記使用者の運動軌跡は使用者の手の運動軌跡又は使用者の手で持つ道具の運動軌跡を含み、被撮影者の運動軌跡は被撮影者の手の運動軌跡又は被撮影者の手で持つ他の道具の運動軌跡を含む。
【０００９】
本発明の実施例において、前記第一動作センサーは、重力センサー（g−sensor）、ジャイロスコープ（gyroscope）、加速度計（accelerometer）、電子コンパス（Electronic  Compass）又は高度測定器（altitude  meter）である。
【００１０】
本発明の実施例において、前記使用者の運動軌跡と被撮影者の運動軌跡とはディスプレイの画面に同時表示される。
【００１１】
本発明の実施例において、前記ヘッドマウントディスプレイ装置は音声検出センサーを更に含む。この音声検出センサーは、処理装置に電気的に接続され、かつ使用者が発声する音声を検出するとともにこれによって生成された音声情報を処理装置に送信する。処理装置は音声情報に対して音声分析を行うことにより音声制御指令を生成する。
【００１２】
本発明の実施例において、前記ヘッドマウントディスプレイ装置はタッチ検出センサーを更に含む。このタッチ検出センサーは、処理装置に電気的に接続され、かつ使用者のタッチ行為を検出するとともにこれによって生成されたタッチ情報を処理装置に送信する。処理装置はタッチ情報でタッチ制御指令を生成する。
【００１３】
本発明の実施例において、前記ヘッドマウントディスプレイ装置は第二動作センサーを更に含む。第二動作センサーは処理装置に電気的に接続され、かつ使用者の頭部の運動を検出するとともにこれによって生成された第二検出情報を処理装置に送信する。
【００１４】
本発明の実施例において、前記第二動作センサーは、電子コンパス、ジャイロスコープ、地磁気センサー、加速度計又は重力センサーである。
【００１５】
本発明の実施例において、前記処理装置は第二検出情報でメニューを選択して操作する指令を生成する。
【００１６】
本発明の実施例において、前記処理装置は、映像情報中の被撮影者の向き方向により、被撮影者の運動軌跡を修正する。
【００１７】
上述した一部分又はすべての目的又は他の目的を実現するため、本発明の実施例においてはディスプレイシステムの操作方法を提供する。この方法は、第一動作センサーで使用者の動作を検出するとともに第一検出情報を生成するステップと、ヘッドマウントディスプレイ装置の処理装置で第一動作センサーが生成した第一検出情報を分析することにより、使用者の運動軌跡を検出するステップと、ヘッドマウントディスプレイ装置のビデオで使用者の可視範囲内の被撮影者を撮影することにより映像情報を生成し、かつこの映像情報を処理装置に送信するステップと、処理装置で映像情報に対して映像分析を行うことにより被撮影者の運動軌跡を獲得するステップと、ヘッドマウントディスプレイ装置のディスプレイで使用者の運動軌跡又は被撮影者の運動軌跡をディスプレイの画面中に表示するステップと、を含む。
【００１８】
本発明の実施例において、前記ヘッドマウントディスプレイ装置は使用者の頭部に装着され、第一動作センサーは使用者の手又は使用者の手で持つ道具に装着され、使用者の運動軌跡は使用者の手の運動軌跡又は使用者の手で持つ道具の運動軌跡を含む。
【００１９】
本発明の実施例において、前記被撮影者の運動軌跡は、被撮影者の手の運動軌跡又は被撮影者の手で持つ他の道具の運動軌跡を含む。
【００２０】
本発明の実施例において、前記操作方法は、ヘッドマウントディスプレイ装置の音声検出センサーで使用者が発声する音声を検出するとともにこれによって生成された音声情報を処理装置に送信するステップと、処理装置が音声情報に対して音声分析を行うことにより音声制御指令を生成するステップとを更に含む。
【００２１】
本発明の実施例において、前記操作方法は、ヘッドマウントディスプレイ装置のタッチ検出センサーで使用者のタッチ行為を検出するとともにこれによって生成されたタッチ情報を処理装置に送信するステップと、処理装置がタッチ情報でタッチ制御指令を生成するステップとを更に含む。
【００２２】
本発明の実施例において、前記操作方法は、ヘッドマウントディスプレイ装置の第二動作センサーで使用者の頭部の運動を検出するとともにこれによって生成された第二検出情報を前記処理装置に送信するステップとを更に含む。
【００２３】
本発明の実施例において、前記操作方法は、処理装置が第二検出情報でメニューを選択して操作する指令を生成するステップとを更に含む。
【００２４】
本発明の実施例において、前記操作方法は、処理装置が映像情報中の被撮影者の向き方向により被撮影者の運動軌跡を修正するステップとを更に含む。
【発明の効果】
【００２５】
上述した本発明の実施例により、使用者は、ヘッドマウントディスプレイ装置のビデオで可視範囲内の被撮影者を撮影し、かつヘッドマウントディスプレイ装置のディスプレイで使用者の運動軌跡又は被撮影者の運動軌跡を見ることができる。すなわち、使用者がディスプレイを持つ必要がないので、使用者の運動に影響を与えない。
【００２６】
本発明の上記特徴及び発明の効果をより詳細に説明するため、以下、本発明の好適な実施例とその図面により本発明を詳細に説明する。
【図面の簡単な説明】
【００２７】
【図１】本発明の実施例に係るディスプレイシステムを示す斜視図である。
【図２】本発明の実施例に係る図１のヘッドマウントディスプレイ装置を示す平面図である。
【図３】本発明の実施例に係る図１及び図２のヘッドマウントディスプレイ装置の電気回路を示す図である。
【図４】本発明の実施例に係るヘッドマウントディスプレイ装置の操作方法を示す流れ図である。
【図５】本発明の実施例の処理装置で検出情報を分析して獲得した使用者の運動軌跡を示す図である。
【図６】発明の実施例の処理装置で映像分析を行うことにより被撮影者の運動軌跡を獲得することを示す図である。
【図７】本発明の実施例における被撮影者がビデオに向かっていないとき、ビデオが撮影した画面を示す図である。
【図８】本発明の他の実施例に係る図１及び図２のヘッドマウントディスプレイ装置の電気回路を示す図である。
【図９】本発明の他の実施例に係る図１及び図２のヘッドマウントディスプレイ装置の電気回路を示す図である。
【図１０】本発明の他の実施例に係る図１及び図２のヘッドマウントディスプレイ装置の電気回路を示す図である。
【発明を実施するための形態】
【００２８】
本発明の前述及び後述する技術的内容、特徴及び効果などは、以下の図面を参照しながら詳細に説明する本発明の好適な実施例により、詳しく理解することができる。以下の実施例に記載される方向用語、例えば、上、下、左、右、前及び後などは、添付図面上の方向のみを示す用語である。すなわち、これらの方向用語は、本発明を説明するものであるが、本発明を限定するものではない。
【００２９】
図１は、本発明の実施例に係るディスプレイシステム１００を示す斜視図である。ディスプレイシステム１００は、一個又は複数個の第一動作センサー（motion  sensor）１１０及び一個のヘッドマウントディスプレイ装置１２０を含む。第一動作センサー１１０は、使用者の手（又は腕、肩、腰、脚、体の他の部位）に装着されるか、或いは使用者の手で持つ道具（例えば、ゴルフクラブ、野球バット、テニスラケットなどの運動具又は他の物体）に装着される。第一動作センサー１１０は、例えば（進行方向及び加速度を検出することができる）６軸センサーであり、応用可能なセンサーのタイプは、重力センサー（g−sensor）、ジャイロスコープ（gyroscope）、加速度計（accelerometer）、電子コンパス（Electronic  Compass）、高度測定器（altitude  meter）、応用可能な他のセンサー又は上記センサーの組合せなどがある。図１に示される第一動作センサー１１０及びヘッドマウントディスプレイ装置１２０の外観は本発明の複数の実施例のうちの一種である。すなわち、他の実施例において、第一動作センサー１１０及びヘッドマウントディスプレイ装置１２０の外観を図１の外観と相違にすることができる。
【００３０】
図２は、本発明の実施例に係る図１のヘッドマウントディスプレイ装置１２０を示す平面図である。図１と図２に示されるヘッドマウントディスプレイ装置１２０は、使用者の頭部に装着される。ヘッドマウントディスプレイ装置１２０は、テンプル１２１、リム１２２及びディスプレイ３３０を含む。リム１２２は、レンズ１２３を固定する。ヘッドマウントディスプレイ装置１２０の前方の光線は、レンズ１２３によって使用者の目２１０に入射する。したがって、使用者は、ヘッドマウントディスプレイ装置１２０でその前方の物を見ることができる。他の実施例において、ディスプレイ３３０をヘッドマウントディスプレイ装置１２０のリム１２２又は他の部位に装着することにより、ディスプレイ３３０を使用者の目２１０の可視範囲内に位置させることができる。図２に示される実施例において、ディスプレイ３３０を使用者の右目の可視範囲内に位置させることができるが、本発明はこれに限定されるものではない。すなわち、他の実施例において、ディスプレイ３３０を使用者の左目の可視範囲内に位置させるか、或いは使用者の二眼の可視範囲内に位置させることもできる。ディスプレイ３３０は、液晶ディスプレイ（liquid  crystal  display、ＬＣＤ）、発光ダイオードディスプレイ（light  emitting  diode  display）、有機発光ダイオードディスプレイ（organic  light  emitting  display、ＯＬＥＤ）、電気泳動ディスプレイ（Electrophoretic  Display）、ＬＥＤ光源又はレーザー光源を採用する小型プロジェクター型ディスプレイ、ＭＥＭＳ（Micro  Electro−Mechanical  System）ディスプレイ又は他の種類のディスプレイであることができるが、本発明はそれらに限定されるものではない。
【００３１】
リム１２２の鼻パッド付近にビデオ３１０を設置することにより、使用者の可視範囲内の被撮影者を撮影することができる。他の実施例において、製品の構造に応じて、ビデオ３１０をヘッドマウントディスプレイ装置１２０のテンプル１２１に配置するか或いは他の部位に設置することができる。ヘッドマウントディスプレイ装置１２０には処理装置３２０及び通信回路３４０が更に設けられている。この処理装置３２０は、例えばシングルコア又はマルチコア中央処理装置（Central  Processing  Unit、ＣＰＵ）であるか、或いはソフトで制御可能な一般用途向け又は特殊用途向けマイクロプロセッサ（Microprocessor）、デジタルシグナルプロセッサ（digital  signal  pocessor、ＤＳＰ）、ソフトで制御可能な制御装置、特定用途向け集積回路（application  specific  integrated  circuit、ＡＳＩＣ）、他の種類の部品又はこれらの組合せであることができるが、本発明はそれらに限定されるものではない。通信回路３４０は、有線媒体（例えば、ケーブル、光ファイバケーブル又は他の有線媒体）或いは無線媒体（例えば、ブルートゥース、Ｗｉ−Ｆｉ、ＩｒＤＡ、電波通信又は他の無線媒体）により、第一動作センサー１１０と通信することができる。例えば、通信回路３４０は、ワイヤレスセンサーネットワーク（Wireless  Sensor  Networks、ＷＳＮ）インターフェース、ZigBeeネットワークインターフェース、ブルートゥース（Bluetooth（登録商標））インターフェース、ＡＮＴ＋ネットワーク通信インターフェース、無線区域ネットワーク（例えば、Ｗｉ−Ｆｉネットワーク）インターフェース又は他の無線通信方法により、第一動作センサー１１０と情報送発信を行うことができる。すなわち、処理装置３２０は、通信回路３４０により情報を第一動作センサー１１０に送信することができる。
【００３２】
図３は、本発明の実施例に係る図１及び図２のヘッドマウントディスプレイ装置１２０の電気回路を示す図である。図４は、本発明の実施例に係るヘッドマウントディスプレイ装置１２０の操作方法を示す流れ図である。図１、図３及び図４を参照すると、ヘッドマウントディスプレイ装置１２０は、ビデオ３１０、処理装置３２０、ディスプレイ３３０及び通信回路３４０を含む。ビデオ３１０は、使用者の可視範囲内の被撮影者３０を撮影することにより映像情報を生成する。ディスプレイ３３０は、使用者が見るように映像画面を表示する。通信回路３４０は情報を一個又は複数個の第一動作センサー１１０に送信することができる。
【００３３】
処理装置３２０は、ビデオ３１０、ディスプレイ３３０及び通信回路３４０に電気的に接続される。ステップＳ４１０において、第一動作センサー１１０は、使用者の動作を検出するとともにこれに対応する第一検出情報を生成する。処理装置３２０は、通信回路３４０により第一動作センサー１１０に情報通信可能に連結される。したがって、第一動作センサー１１０によって生成される第一検出情報は、処理装置３２０に送信される。ステップＳ４２０において、ヘッドマウントディスプレイ装置１２０の処理装置３２０は、第一動作センサー１１０が生成した第一検出情報を分析することにより、使用者の運動軌跡を検出する。他の実施例において、上述した使用者の運動軌跡は、使用者の手で持つ道具の運動軌跡、使用者の手の運動軌跡又は使用者の体の他の部位の運動軌跡を含むことができる。
【００３４】
ステップＳ４５０において、処理装置３２０は、ヘッドマウントディスプレイ装置１２０のディスプレイ３３０を制御するとともに使用者の運動軌跡をディスプレイ３３０の画面中に表示する。使用者は、画面中の運動軌跡を見ることにより、自己の動作又は姿勢を確認／修正することができる。使用者がヘッドマウントディスプレイ装置１２０のディスプレイ３３０に表示された運動軌跡を見ることができるので、（すなわち、使用者がディスプレイ３３０を持つ必要がないので）使用者の運動に影響を与えない。
【００３５】
図５は、本発明の実施例に係るヘッドマウントディスプレイ装置１２０の処理装置３２０で検出情報を分析して獲得した使用者の運動軌跡を示す図である。第一動作センサー１１０を使用者の手（或いは使用者５１０のゴルフクラブ５２０）に装着することができる。この場合、使用者５１０がゴルフクラブ５２０を振る過程において、通信回路３４０は、第一動作センサー１１０によって生成された第一検出情報を処理装置３２０に送信する。処理装置３２０は、第一動作センサー１１０が生成した第一検出情報を分析することにより、使用者５１０の運動軌跡５３０を獲得する。本実施例において、運動軌跡５３０は、使用者５１０がゴルフクラブ５２０を振るときの軌跡であることができる。したがって、ステップＳ４５０において、ディスプレイ３３０の画面で使用者５１０の運動軌跡５３０を表示することができる。
【００３６】
本実施例において、第一動作センサー１１０で使用者（例えば、ゴルフ初心者）の動作を検出し、ヘッドマウントディスプレイ装置１２０のディスプレイ３３０で使用者のゴルフクラブの振り動作に関する曲線を表示することができる。したがって、使用者が自己の振り動作が正しいかどうかを確認するとき、運動をストップさせた後、ポケットからディスプレイ又は携帯電話を出す必要がなく、ヘッドマウントディスプレイ装置１２０のディスプレイ３３０で自己の運動軌跡５３０を直接見ることができる。
【００３７】
図１、図３及び図４を参照すると、ステップＳ４３０において、ヘッドマウントディスプレイ装置１２０のビデオ３１０で使用者の可視範囲内の被撮影者３０を撮影することにより映像情報を生成し、かつこの映像情報を処理装置３２０に送信する。したがって、ステップＳ４３０において、処理装置３２０はビデオ３１０からの前記映像情報を受信することができる。ステップＳ４４０において、処理装置３２０は、ビデオ３１０によって生成された映像情報に対して映像分析を行うことにより、被撮影者３０の運動軌跡を獲得する。他の実施例において、上述した被撮影者３０の運動軌跡は、被撮影者３０の手で持つ道具の運動軌跡、被撮影者３０の手の運動軌跡又は被撮影者３０の体の他の部位の運動軌跡を含むことができるが、本発明はこれらに限定されるものではない。
【００３８】
ステップＳ４５０において、処理装置３２０がディスプレイ３３０を制御することにより、被撮影者３０の運動軌跡をディスプレイ３３０の画面中に表示する。使用者は、ディスプレイ３３０の画面中に表示される運動軌跡を見ることにより、自己の動作又は姿勢を修正することができる。
【００３９】
図６は、本発明の実施例の処理装置３２０で映像分析を行うことにより、被撮影者３０の運動軌跡を獲得することを示す図である。本実施例において、被撮影者３０がゴルフクラブ５２０を振る過程において、ビデオ３１０は被撮影者３０を撮影することにより映像情報を処理装置３２０に生成する。処理装置３２０は、ビデオ３１０によって生成された映像情報に対して映像分析を行うことにより、被撮影者３０の運動軌跡６３０を獲得する。本実施例において、運動軌跡６３０は被撮影者３０がゴルフクラブ６２０を振るときの軌跡であることができる。したがって、ステップＳ４５０において、ディスプレイ３３０の画面で被撮影者３０の運動軌跡６３０を表示することができる。
【００４０】
ヘッドマウントディスプレイ装置１２０の内部に設けられるビデオ３１０で、被撮影者３０の動作（例えば、他のゴルフ初心者又はコーチがゴルフクラブを振るときの動作）を録画することができる。処理装置３２０は、ビデオ３１０が生成した映像情報に対して映像分析を行う（例えば、ゴルフクラブを振る動作を分析する）。例えば、処理装置３２０は、ビデオ３１０によって生成された映像情報に対して映像分析を行うことにより、被撮影者３０の体の回転動作、膝の湾曲動作、手の湾曲動作などを獲得することができる。
【００４１】
注意されたいことは、ディスプレイ３３０の画面で、図５に示される使用者５１０の運動軌跡５３０又は図６に示される被撮影者３０の運動軌跡６３０を表示することができることである。例えば、本発明の実施例において、ディスプレイ３３０の画面で、図５に示される使用者５１０の運動軌跡５３０及び図６に示される被撮影者３０の運動軌跡６３０のうちいずれか１つを選択して表示することができる。他の実施例において、図５に示される使用者５１０の運動軌跡５３０と図６に示される被撮影者３０の運動軌跡６３０とをディスプレイ３３０の画面に同時表示することにより、使用者が自己の運動軌跡５３０と被撮影者３０の運動軌跡６３０とを比較することができる。すなわち、使用者は、ディスプレイ３３０の画面を見ることにより、自己の動作又は姿勢を確認／修正することができる。
【００４２】
図７は、本発明の実施例における被撮影者３０がビデオ３１０に向かっていないとき、ビデオ３１０が撮影した画面を示す図である。被撮影者３０がビデオ３１０に向かっていないとき、処理装置３２０は、ビデオ３１０によって生成された映像情報（例えば、図７に示される画面）に対して映像分析を行うことにより、被撮影者３０の運動軌跡６３０’を獲得する。周知のとおり、運動軌跡６３０’は、ビデオ３１０の撮影角度が変化することによって変形する。変形される運動軌跡６３０’をそのまま使用者に見せる場合、これを確認できない問題が発生するおそれがある。本実施例において、処理装置３２０は、映像情報中の被撮影者３０の向き方向により被撮影者３０の運動軌跡６３０’を修正する。例えば、処理装置３２０が映像分析を行うことにより、被撮影者３０の２つの足先の間の連結線Ｌ１と水平標準線Ｌ２との間の挟角θを獲得するとともにこの挟角θを被撮影者３０の方向にする。したがって、処理装置３２０は、挟角θと三角関数により、被撮影者３０の運動軌跡６３０’を図６の運動軌跡６３０に修正することができる。
【００４３】
本発明のヘッドマウントディスプレイ装置１２０の実施形態は、図３に示される実施形態に限定されるものではない。図８は、本発明の他の実施例に係る図１及び図２のヘッドマウントディスプレイ装置１２０の電気回路を示す図である。本実施例に係るヘッドマウントディスプレイ装置１２０は、ビデオ３１０、処理装置３２０、ディスプレイ３３０、通信回路３４０及び音声検出センサー８５０を含む。図８のビデオ３１０、処理装置３２０、ディスプレイ３３０及び通信回路３４０に対する説明は、図３〜図７による説明を参照することができるので、ここでは再び説明しない。
【００４４】
音声検出センサー８５０は、例えばマイクロフォン（microphone）であるか或いは音声検出可能な他の電子部品であることができる。音声検出センサー８５０は、処理装置３２０に電気的に接続され、かつ使用者が発声する音声を検出するとともにこれによって生成された音声情報を処理装置３２０に送信する。処理装置３２０は、該音声情報に対して音声分析を行うことにより、音声制御指令を生成することができる。音声検出センサー８５０を、ヘッドマウントディスプレイ装置１２０のメニューを選択して操作する入力装置にすることができる。例えば、使用者が指令（例えば「上」、「下」、「左」、「右」）を発声することにより、ディスプレイ３３０に表示されたメニューを選択して操作することができる。
【００４５】
図９は、本発明の他の実施例に係る図１及び図２のヘッドマウントディスプレイ装置１２０の電気回路を示す図である。本実施例に係るヘッドマウントディスプレイ装置１２０は、ビデオ３１０、処理装置３２０、ディスプレイ３３０、通信回路３４０及びタッチ検出センサー９６０を含む。図９のビデオ３１０、処理装置３２０、ディスプレイ３３０及び通信回路３４０に対する説明は、図３〜図７による説明を参照することができるので、ここでは再び説明しない。
【００４６】
図９に示されるタッチ検出センサー９６０は、例えばタッチパネル（touch  panel）であるか或いはタッチを検出可能な他の電子部品であることができる。タッチ検出センサー９６０は、処理装置３２０に電気的に接続され、かつ使用者がタッチ行為をするとき、このタッチ行為を検出するとともにこれによって生成されたタッチ情報を処理装置３２０に送信する。処理装置３２０は、該タッチ情報でタッチ制御指令を生成することができる。他の実施例において、タッチ検出センサー９６０を、ヘッドマウントディスプレイ装置１２０のメニューを選択して操作する入力装置にすることができる。例えば、使用者がタッチ検出センサー９６０上で指を上、下、左、右に移動させることにより、ディスプレイ３３０に表示されたメニューを選択して操作することができる。
【００４７】
図１０は、本発明の他の実施例に係る図１及び図２のヘッドマウントディスプレイ装置１２０の電気回路を示す図である。本実施例に係るヘッドマウントディスプレイ装置１２０は、ビデオ３１０、処理装置３２０、ディスプレイ３３０、通信回路３４０及び第二動作センサー１０７０を含む。図１０のビデオ３１０、処理装置３２０、ディスプレイ３３０及び通信回路３４０に対する説明は、図３〜図７による説明を参照することができるので、ここでは再び説明しない。
【００４８】
第二動作センサー１０７０は、処理装置３２０に電気的に接続される。第二動作センサー１０７０は、使用者の頭部の運動を検出するとともにこれによって生成された第二検出情報を処理装置３２０に送信する。他の実施例において、第二動作センサー１０７０は、電子コンパス、ジャイロスコープ、地磁気センサー（geomagnetic  sensor）、加速度計、重力センサー、動作検出可能な他のセンサー又は上記センサーの組合せを含むことができる。処理装置３２０は、第二動作センサー１０７０によって生成された第二検出情報により、メニューを選択して操作する指令を生成する。したがって、第二動作センサー１０７０を、ヘッドマウントディスプレイ装置１２０のメニューを選択して操作する入力装置にすることができる。ヘッドマウントディスプレイ装置１２０を装着した使用者は、頭部を移動させることにより、ディスプレイ３３０に表示されたメニューを選択して操作することができる。
【００４９】
例えば、使用者がヘッドマウントディスプレイ装置１２０を装着した後、起動指令（例えば、発生するか或いはタッチすることなど）を実施する。すなわち、使用者が「リセット指令」を入力する。このとき、ヘッドマウントディスプレイ装置１２０は、音声検出センサー（例えば、図８に示される音声検出センサー８５０）及び／或いはタッチ検出センサー（例えば、図８に示されるタッチ検出センサー９６０）で前記起動指令を検出することができる。リセットが終わると、ヘッドマウントディスプレイ装置１２０は使用者の選択操作指令を受信することができる。使用者が頭部を所定の方向（例えば、上、下、左又は右方向）に所定の臨界角度（例えば、３０度左右）まで移動させた後、所定の時間（例えば、２秒）止まっている時、処理装置３２０は使用者が「方向指令」を入力したと判断することができる。例えば、使用者が頭部を左に回転させた後２秒ほど止まっているとき、処理装置３２０は使用者が「左へ向け」という指令を入力したと判断することができる。上述したとおり、使用者は頭部を上、下、左又は右方向へ移動させることにより、ディスプレイ３３０に表示されたメニューを選択して操作することができる。「決定」又は「取消」などのような指令を実施する必要がある場合、使用者はヘッドマウントディスプレイ装置１２０に連続的動作を更に設定することができる。例えば、頭を連続的に縦に振ることと頭を連続的に横に振ることなどを設定することができる。例えば、処理装置３２０はディスプレイ３３０で選択可能な色々なメニューを標示／表示することができ、ヘッドマウントディスプレイ装置１２０は第二動作センサー１０７０を選択して操作する入力装置にすることができる。使用者（例えば、ゴルフ初心者）が頭部を回転させるとき、ヘッドマウントディスプレイ装置１２０が向かう方向が異なることにより、ディスプレイ３３０に異なるメニューが表示され、使用者はこれを選択して操作することができる。
【００５０】
上述したとおり、第一動作センサーを使用者の体、手或いは使用者の手で持つ道具に装着することにより、ヘッドマウントディスプレイ装置は使用者の運動軌跡を検出することができる。使用者が所定の動作をするとき、第一動作センサーは使用者の動作を検出するとともにこれによって生成された情報を処理装置に送信する。処理装置はこの情報を分析した後、使用者の運動軌跡をディスプレイの画面中に表示するので、使用者は自己の運動軌跡を見ることができる。ビデオは使用者の可視範囲内の被撮影者を撮影することができる。使用者がヘッドマウントディスプレイ装置で他人（被撮影者）の動作を見るとき、ビデオは他人の動作を撮影して処理装置に送信する。処理装置がこれを分析した後、ヘッドマウントディスプレイ装置が被撮影者の運動軌跡をディスプレイに表示することができるので、使用者がこれを見ることができる。使用者がディスプレイを持つ必要がないので、使用者の運動に影響を与えない。
【００５１】
以上、本発明の好適な実施例を詳述してきたが、本発明の構成は上記の実施例に限定されるものではない。本技術分野の当業者は本発明の要旨を逸脱しない範囲内で設計の変換等を行うことができる。すなわち、本発明の保護範囲は後述する特許請求の範囲が定めたことを基準にする。本発明のいずれかの実施例又は特許請求の範囲は本発明に記載されているすべての目的、利点又は特徴などを実現しなくてもよい。要約と発明の名称は、特許文献の検索に使われるものではあるが、本発明の特許請求の範囲を定めるものではない。
【符号の説明】
【００５２】
３０  被撮影者
１００  ディスプレイシステム
１１０  第一動作センサー
１２０  ヘッドマウントディスプレイ装置
１２１  テンプル
１２２  リム
１２３  レンズ
２１０  目
３１０  ビデオ
３２０  処理装置
３３０  ディスプレイ
３４０  通信回路
５１０  使用者
５２０  ゴルフブラッシー
５３０  運動軌跡
６２０  ゴルフブラッシー
６３０、６３０’  運動軌跡
８５０  音声検出センサー
９６０  タッチ検出センサー
１０７０  第二動作センサー
θ  挟角
Ｌ１  連結線
Ｌ２  水平標準線
【図１】
2016071330.tif 000003
【図２】
2016071330.tif 000004
【図３】
2016071330.tif 000005
【図４】
2016071330.tif 000006
【図５】
2016071330.tif 000007
【図６】
2016071330.tif 000008
【図７】
2016071330.tif 000009
【図８】
2016071330.tif 000010
【図９】
2016071330.tif 000011
【図１０】
2016071330.tif 000012