(57)【要約】【課題】  本発明は、簡単な構成により、制限時間の設定や、リセットを行うことが可能な情報処理装置及び情報処理方法を提供する。【解決手段】  ＨＭＤ２０１、コントローラ２０２、及び、画像処理装置２０３から構成されたＭＲシステムにおいて、タイマーＡ１１４１、タイマーＢ１１４２、タイマーＣ１１４３に夫々異なるタイマー値を設定する。それぞれのタイマーに設定された値に基づき、使用経過メッセージの表示、ＨＭＤ２０１の表示部の電源管理、ＨＭＤ２０１とコントローラ２０２全体の電源管理を行ことにより、制限時間の設定や、リセットを管理する。【選択図】  図２
2008257671.tif 000002
【特許請求の範囲】
【請求項１】
画像を表示するための画像表示手段と、
前記画像表示手段で表示される画像を出力する出力手段と、
第一の設定時間と、第一の設定時間より長い第二の設定時間を記憶する記憶手段と、
前記画像表示手段に電源を供給する第一の電源供給手段と、
本装置の各部に電源を供給する第二の電源供給手段と、
前記第一の設定時間が経過した後に、前記第一の電源供給手段による電源の供給を停止する第一の停止手段と、
前記第二の設定時間が経過した後に、前記第二の電源供給手段による電源の供給を停止する第二の停止手段と、
時間の延長を指示する時間延長手段と、
前記時間延長手段により時間延長が指示されたとき、前記第一の電源供給手段による電源の供給が停止されている場合は、前記第一の電源供給手段による電源の供給を再開し、電源の供給が停止されていない場合は、前記第一の電源供給手段による電源の供給の時間を延長するように制御する制御手段とを有することを特徴とする情報処理装置。
【請求項２】
前記時間延長手段により時間延長が指示されたとき、第二の電源供給手段による電源を供給する時間を延長する延長手段を、更に有することを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記第一の電源供給手段による電源の供給を停止する前に、メッセージを使用者に通知する通知手段を、更に有することを特徴とする請求項１又は２に記載の情報処理装置。
【請求項４】
前記第二の電源供給手段による電源の供給を停止する前に、電源の停止のメッセージをユーザに通知する通知手段を更に有することを特徴とする請求項１に記載の情報処理装置。
【請求項５】
前記通知手段は、前記画像表示手段に文字情報を重畳して表示することを特徴とする請求項３又は４に記載の情報処理装置。
【請求項６】
前記画像表示手段は、頭部搭載型の表示装置であることを特徴とする請求項１乃至５の何れか１項に記載の情報処理装置。
【請求項７】
画像を表示するための画像表示装置に接続される情報処理装置であって、
前記画像表示装置で表示される画像を出力する出力手段と、
第一の設定時間と、第一の設定時間より長い第二の設定時間を記憶する記憶手段と、
前記情報処理装置の各部に電源を供給する電源供給手段と、
前記第一の設定時間が経過した後に、前記画像表示装置への電源の供給の停止を指示する指示手段と、
前記第二の設定時間が経過した後に、前記電源供給手段による電源の供給を停止する停止手段と、
時間の延長を指示する時間延長手段と、
前記時間延長手段により時間延長が指示されたとき、前記画像表示装置の電源の供給が停止されている場合は、前記画像処理装置の電源の供給の再開を指示し、電源の供給が停止されていない場合は、前記画像表示装置の電源の供給の時間を延長するように制御する制御手段とを有することを特徴とする情報処理装置。
【請求項８】
画像を表示するための画像表示工程と、
前記画像表示工程で表示される画像を送信する送信工程と、
第一の設定時間と、第一の設定時間より長い第二の設定時間を記憶する記憶工程と、
前記画像表示工程に電源を供給する第一の電源供給工程と、
本装置の各部に電源を供給する第二の電源供給工程と、
前記第一の設定時間が経過した後に、前記第一の電源供給工程による電源の供給を停止する第一の停止工程と、
前記第二の設定時間が経過した後に、前記第二の電源供給工程による電源の供給を停止する第二の停止工程と、
時間の延長を指示する時間延長工程と、
前記時間延長工程により時間延長が指示されたとき、第一の電源供給工程による電源の供給が停止されている場合は、前記第一の電源供給工程による電源の供給を再開し、電源の供給が停止されていない場合は、第一の電源供給工程による電源を供給する時間を延長するように制御する制御工程とを有することを特徴とする情報処理方法。
【請求項９】
画像を表示するための画像表示装置に接続される情報処理装置の情報処理方法であって、
前記画像表示装置で表示される画像を出力する出力工程と、
第一の設定時間と、第一の設定時間より長い第二の設定時間を記憶する記憶工程と、
前記情報処理装置の各部に電源を供給する電源供給工程と、
前記第一の設定時間が経過した後に、前記画像表示装置への電源の供給の停止を指示する指示工程と、
前記第二の設定時間が経過した後に、前記電源供給手段による電源の供給を停止する停止工程と、
時間の延長を指示する時間延長工程と、
前記時間延長工程で時間延長が指示されたとき、前記画像表示装置の電源の供給が停止されている場合は、前記画像処理装置の電源の供給の再開を指示し、電源の供給が停止されていない場合は、前記画像表示装置の電源の供給の時間を延長するように制御する制御工程とを有することを特徴とする情報処理方法。
【請求項１０】
前記時間延長工程により時間延長が指示されたとき、第二の電源供給工程による電源を供給する時間を延長する延長工程を更に有することを特徴とする請求項８に記載の情報処理方法。
【請求項１１】
画像を表示するための画像表示手段と、
前記画像表示手段で表示される画像を出力する出力手段と、
第一の設定時間と、第一の設定時間より長い第二の設定時間を記憶する記憶手段と、
前記画像表示手段に電源を供給する第一の電源供給手段と、
本装置の各部に電源を供給する第二の電源供給手段と、
前記第一の設定時間が経過した後に、前記第一の電源供給手段による電源の供給を停止する第一の停止手段と、
前記第二の設定時間が経過した後に、前記第二の電源供給手段による電源の供給を停止する第二の停止手段と、
前記画像表示手段の使用状態を検出する使用状態検出手段と、
前記使用状態検出により未使用状態から使用状態への変化を検出したとき、前記第一の電源供給手段による電源の供給が停止されている場合は、前記第一の電源供給手段による電源の供給を再開し、電源の供給が停止されていない場合は、前記第一の電源供給手段による電源の供給の時間を延長するように制御する制御手段とを有することを特徴とする情報処理装置。
【請求項１２】
前記使用状態検出手段により未使用状態から使用状態への変化を検出したとき、第二の電源供給手段による電源を供給する時間を延長する延長手段を、更に有することを特徴とする請求項１１に記載の情報処理装置。
【請求項１３】
画像を表示するための画像表示手段と、
前記画像表示手段で表示される画像を出力する出力手段と、
第一の設定時間と、第一の設定時間より長い第二の設定時間を記憶する記憶手段と、
前記画像表示手段に電源を供給する第一の電源供給手段と、
本装置の各部に電源を供給する第二の電源供給手段と、
前記第一の設定時間が経過した後に、前記第一の電源供給手段による電源の供給を停止する第一の停止手段と、
前記第二の設定時間が経過した後に、前記第二の電源供給手段による電源の供給を停止する第二の停止手段と、
前記画像表示手段の使用状態を検出する使用状態検出手段と、
前記使用状態検出手段からの信号に基づいて前記画像表示手段にオブジェクトの表示を行う制御手段と、
前記制御手段で表示された情報を消去するための消去手段を備え、
前記制御手段でオブジェクトが前記画像表示手段に表示されている時に、前記消去手段でオブジェクトを消去したとき、前記第一の電源供給手段による電源の供給が停止されている場合は、前記第一の電源供給手段による電源の供給を再開し、電源の供給が停止されていない場合は、前記第一の電源供給手段による電源の供給の時間を延長するように制御し、更に第二の電源供給手段による電源を供給する時間を延長する延長手段を有することを特徴とする情報処理装置。
【請求項１４】
画像を表示するための画像表示手段と、
前記画像表示手段で表示される画像を出力する出力手段と、
第一の設定時間と、第一の設定時間より長い第二の設定時間を記憶する記憶手段と、
前記画像表示手段に電源を供給する第一の電源供給手段と、
本装置の各部に電源を供給する第二の電源供給手段と、
前記第一の設定時間が経過した後に、前記第一の電源供給手段による電源の供給を停止する第一の停止手段と、
前記第二の設定時間が経過した後に、前記第二の電源供給手段による電源の供給を停止する第二の停止手段と、
前記画像表示手段の使用状態を検出する使用状態検出手段と、
前記使用状態検出手段からの信号に基づいて前記画像表示手段の使用者を認証する認証手段を備え、
前記認証手段により特定された使用者の前回使用時刻より一定時間経過しているとき、前記第一の電源供給手段による電源の供給が停止されている場合は、前記第一の電源供給手段による電源の供給を再開し、電源の供給が停止されていない場合は、前記第一の電源供給手段による電源の供給の時間を延長するように制御する制御手段とを有し、更に第二の電源供給手段による電源を供給する時間を延長する延長手段を有することを特徴とする情報処理装置。
【請求項１５】
前記画像表示手段は、頭部搭載型の表示装置、又は、手持ち型表示装置であることを特徴とする請求項１乃至７、１１乃至１４の何れか１項に記載の情報処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置及び情報処理方法に関し、特に、頭部装着型の表示装置の電源を制御する情報処理装置及び情報処理方法に関する。
【背景技術】
【０００２】
近年、現実世界と仮想世界を、リアルタイムに、シームレスに融合させる技術として複合現実感、いわゆるＭＲ（Ｍｉｘｅｄ  Ｒｅａｌｉｔｙ）技術が知られている。ＭＲ技術の１つとして、ビデオシースルーＨＭＤ（Ｈｅａｄ  Ｍｏｕｎｔｅｄ  ｄｉｓｐｌａｙ）が知られている。これは、ＨＭＤ使用者の瞳位置から観察される現実空間と略一致する現実空間をビデオカメラ等で撮像し、その撮像画像にＣＧ（Ｃｏｍｐｕｔｅｒ  Ｇｒａｐｈｉｃｓ）画像を重畳した合成画像をＨＭＤ使用者の眼前に表示するものである。
【０００３】
図１１はＨＭＤ使用者が、ＨＭＤ１２００を装着している様子を示す図である。ＨＭＤ使用者はＨＭＤ１２００を用いることでＭＲ空間を体験することが可能となる。ＨＭＤ１２００を使用する使用者は、ＭＲ体験に没頭し使用時間の経過に気づかず、長時間に亘ってＨＭＤ１２００を使用する可能性がある。
【０００４】
この長時間の使用を防止するために、装置の電源を起動してから一定時間経過するとＨＭＤ１２００に表示される画像を停止してＨＭＤ１２００の使用を制限する技術が、特許文献１に開示されている。
【０００５】
この特許文献１には、表示画像を停止する直前、または、停止後に延長操作を行うことで、連続してＨＭＤ１２００を使用できることが開示されている。
【０００６】
しかしながら、特許文献１では、表示画像を停止する直前、または表示画像を停止した後にしか延長操作を行うことができない。そのため、例えば、表示が停止する前の任意の時間でＨＭＤの使用者が交替した場合、交替した後のＨＭＤ使用者に対して、前の使用者と同じような使用制限を設定するためには、装置の再起動が必要であった。
【特許文献１】特登録３６７９５０６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
従って、特許文献１に開示の技術は、制限時間が経過する前に、ＨＭＤの使用者が交替する場合、交替した後のＨＭＤ使用者は、電源を再起動させて使用制限時間を設定する。若しくは、前のＨＭＤ使用者用に設定された制限時間で使用を続け、制限時間が経過して表示画像が停止した直後に延長操作を行う必要があり、操作が煩わしかった。
【０００８】
本発明は、途中でＨＭＤの使用者が変更になった場合などに、電源を再起動したり、前の使用制限の時間に達するのを待ったりすることなく、簡単な構成で新たな制限時間を設定することができる情報処理装置及び情報処理方法を提供することを目的とする。
【０００９】
また、本発明は、簡単な構成により、制限時間の設定や、リセットを行うことが可能な情報処理装置及び情報処理方法を提供することを目的とする。
【課題を解決するための手段】
【００１０】
上記目的を達成するために、本発明の情報処理装置は、画像を表示するための画像表示手段と、前記画像表示手段で表示される画像を出力する出力手段と、第一の設定時間と、第一の設定時間より長い第二の設定時間を記憶する記憶手段と、前記画像表示手段に電源を供給する第一の電源供給手段と、本装置の各部に電源を供給する第二の電源供給手段と、前記第一の設定時間が経過した後に、前記第一の電源供給手段による電源の供給を停止する第一の停止手段と、前記第二の設定時間が経過した後に、前記第二の電源供給手段による電源の供給を停止する第二の停止手段と、時間の延長を指示する時間延長手段と、前記時間延長手段により時間延長が指示されたとき、前記第一の電源供給手段による電源の供給が停止されている場合は、前記第一の電源供給手段による電源の供給を再開し、電源の供給が停止されていない場合は、前記第一の電源供給手段による電源の供給の時間を延長するように制御する制御手段とを有することを特徴とする。
【００１１】
また、本発明の情報処理装置は、画像を表示するための画像表示装置に接続される情報処理装置であって、前記画像表示装置で表示される画像を出力する出力手段と、第一の設定時間と、第一の設定時間より長い第二の設定時間を記憶する記憶手段と、前記情報処理装置の各部に電源を供給する電源供給手段と、前記第一の設定時間が経過した後に、前記画像表示装置への電源の供給の停止を指示する指示手段と、前記第二の設定時間が経過した後に、前記電源供給手段による電源の供給を停止する停止手段と、時間の延長を指示する時間延長手段と、前記時間延長手段により時間延長が指示されたとき、前記画像表示装置の電源の供給が停止されている場合は、前記画像処理装置の電源の供給の再開を指示し、電源の供給が停止されていない場合は、前記画像表示装置の電源の供給の時間を延長するように制御する制御手段とを有することを特徴とする。
【００１２】
更に、本願発明の情報処理方法は、画像を表示するための画像表示工程と、前記画像表示工程で表示される画像を送信する送信工程と、第一の設定時間と、第一の設定時間より長い第二の設定時間を記憶する記憶工程と、前記画像表示工程に電源を供給する第一の電源供給工程と、本装置の各部に電源を供給する第二の電源供給工程と、前記第一の設定時間が経過した後に、前記第一の電源供給工程による電源の供給を停止する第一の停止工程と、前記第二の設定時間が経過した後に、前記第二の電源供給工程による電源の供給を停止する第二の停止工程と、時間の延長を指示する時間延長工程と、前記時間延長工程により時間延長が指示されたとき、第一の電源供給工程による電源の供給が停止されている場合は、前記第一の電源供給工程による電源の供給を再開し、電源の供給が停止されていない場合は、第一の電源供給工程による電源を供給する時間を延長するように制御する制御工程とを有することを特徴とする。
【００１３】
また、本発明の情報処理方法は、画像を表示するための画像表示装置に接続される情報処理装置の情報処理方法であって、前記画像表示装置で表示される画像を出力する出力工程と、第一の設定時間と、第一の設定時間より長い第二の設定時間を記憶する記憶工程と、前記情報処理装置の各部に電源を供給する電源供給工程と、前記第一の設定時間が経過した後に、前記画像表示装置への電源の供給の停止を指示する指示工程と、前記第二の設定時間が経過した後に、前記電源供給手段による電源の供給を停止する停止工程と、時間の延長を指示する時間延長工程と、前記時間延長工程で時間延長が指示されたとき、前記画像表示装置の電源の供給が停止されている場合は、前記画像処理装置の電源の供給の再開を指示し、電源の供給が停止されていない場合は、前記画像表示装置の電源の供給の時間を延長するように制御する制御工程とを有することを特徴とする。
【００１４】
更に、本発明の情報処理装置は、画像を表示するための画像表示手段と、前記画像表示手段で表示される画像を出力する出力手段と、第一の設定時間と、第一の設定時間より長い第二の設定時間を記憶する記憶手段と、前記画像表示手段に電源を供給する第一の電源供給手段と、本装置の各部に電源を供給する第二の電源供給手段と、前記第一の設定時間が経過した後に、前記第一の電源供給手段による電源の供給を停止する第一の停止手段と、前記第二の設定時間が経過した後に、前記第二の電源供給手段による電源の供給を停止する第二の停止手段と、前記画像表示手段の使用状態を検出する使用状態検出手段と、前記使用状態検出により未使用状態から使用状態への変化を検出したとき、前記第一の電源供給手段による電源の供給が停止されている場合は、前記第一の電源供給手段による電源の供給を再開し、電源の供給が停止されていない場合は、前記第一の電源供給手段による電源の供給の時間を延長するように制御する制御手段とを有することを特徴とする。
【００１５】
また、本発明の情報処理装置は、画像を表示するための画像表示手段と、前記画像表示手段で表示される画像を出力する出力手段と、第一の設定時間と、第一の設定時間より長い第二の設定時間を記憶する記憶手段と、前記画像表示手段に電源を供給する第一の電源供給手段と、本装置の各部に電源を供給する第二の電源供給手段と、前記第一の設定時間が経過した後に、前記第一の電源供給手段による電源の供給を停止する第一の停止手段と、前記第二の設定時間が経過した後に、前記第二の電源供給手段による電源の供給を停止する第二の停止手段と、前記画像表示手段の使用状態を検出する使用状態検出手段と、前記使用状態検出手段からの信号に基づいて前記画像表示手段にオブジェクトの表示を行う制御手段と、前記制御手段で表示された情報を消去するための消去手段を備え、前記制御手段でオブジェクトが前記画像表示手段に表示されている時に、前記消去手段でオブジェクトを消去したとき、前記第一の電源供給手段による電源の供給が停止されている場合は、前記第一の電源供給手段による電源の供給を再開し、電源の供給が停止されていない場合は、前記第一の電源供給手段による電源の供給の時間を延長するように制御し、更に第二の電源供給手段による電源を供給する時間を延長する延長手段を有することを特徴とする。
【００１６】
また、本発明の情報処理装置は、画像を表示するための画像表示手段と、前記画像表示手段で表示される画像を出力する出力手段と、第一の設定時間と、第一の設定時間より長い第二の設定時間を記憶する記憶手段と、前記画像表示手段に電源を供給する第一の電源供給手段と、本装置の各部に電源を供給する第二の電源供給手段と、前記第一の設定時間が経過した後に、前記第一の電源供給手段による電源の供給を停止する第一の停止手段と、前記第二の設定時間が経過した後に、前記第二の電源供給手段による電源の供給を停止する第二の停止手段と、前記画像表示手段の使用状態を検出する使用状態検出手段と、前記使用状態検出手段からの信号に基づいて前記画像表示手段の使用者を認証する認証手段を備え、前記認証手段により特定された使用者の前回使用時刻より一定時間経過しているとき、前記第一の電源供給手段による電源の供給が停止されている場合は、前記第一の電源供給手段による電源の供給を再開し、電源の供給が停止されていない場合は、前記第一の電源供給手段による電源の供給の時間を延長するように制御する制御手段とを有し、更に第二の電源供給手段による電源を供給する時間を延長する延長手段を有することを特徴とする。
【発明の効果】
【００１７】
本発明によれば、表示用電源タイマーと装置用電源タイマーを制御することで、任意の時間でＨＭＤ使用者が変わった場合でも、装置を再起動することなく同じ時間で、ＨＭＤの使用制限を行うことができる。
【発明を実施するための最良の形態】
【００１８】
本発明の好適な実施形態を、図面を参照して詳細に説明する。
【００１９】
（実施の形態１）
図１は、本発明の一実施の形態に係るＭＲシステムの構成を示す図である。
【００２０】
図１において、ビデオシースルー型の頭部搭載型の表示装置（以下、ＨＭＤ）２０１、ユーザＩ／Ｆ（インターフェース）部２０２ａを含むコントローラ２０２、表示部２０３ａを有する画像処理装置２０３とから構成されている。尚、ビデオシースルー型の表示装置に限らず、所謂光学シースルー型の表示装置であってもよい。
【００２１】
ＨＭＤ２０１は、使用者の頭部に装着され、撮像部と、画像表示部、及び、それらを制御する制御部とを含んでいる。
【００２２】
撮像部はビデオカメラ等で構成され、使用者の視点の位置姿勢とほぼ同じ現実空間の画像を撮像できるような位置姿勢で取付けられており、使用者の観察している現実空間の画像を取得する。画像表示部は、撮像した現実空間画像に画像処理装置２０３で生成したＣＧ画像を重畳したＭＲ画像、撮像した現実空間画像、コントローラ２０２を介して供給される画像処理装置２０３からの出力画像などを、使用者に提供するために表示する。画像表示部は、使用者のそれぞれの眼の前に位置するように光学系を含む構成で取付けられている。
【００２３】
ＨＭＤ２０１は、有線接続されたコントローラ２０２と通信を行う。ＨＭＤ２０１とコントローラ２０２間は有線による通信に限らず、例えば、ＷＬＡＮ（Ｗｉｒｅｌｅｓｓ  Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）やＷＰＡＮ（Ｗｉｒｅｌｅｓｓ  Ｐｅｒｓｏｎａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）のような、小規模ネットワークを構成する無線通信方式を利用してもよい。
【００２４】
ＨＭＤ２０１は、コントローラ２０２からの電源供給を受けて駆動することも、バッテリーで駆動することも可能である。また、ユーザＩ／Ｆ部２０２ａを有しているが、この詳細については、後述する。
【００２５】
コントローラ２０２と有線接続された画像処理装置２０３は、ＣＧ画像の描画を行う画像処理部を有する。画像処理装置２０３はコントローラ２０２を介し、ＨＭＤ２０１と通信を行う。また、表示部２０３ａは、本システムを立ち上げた時に種々の設定を行うために必要な情報を表示したり、ＭＲシステム全体、または、ＨＭＤ２０１の状態等を確認したりするときに用いられる。また、画像処理装置２０３は、キーボードやマウスなどの入力部を備え、使用者がデータや命令等を入力し、入力されたデータの表示や、命令の結果等は、表示部２０３ａに表示される。
【００２６】
ＨＭＤ２０１は、撮像部で撮像した現実空間画像をコントローラ２０２を介して画像処理装置２０３へ出力し、コントローラ２０２から受信したＣＧ画像と現実空間画像との合成合成を画像表示部によりＨＭＤ使用者に提示する。
【００２７】
図１では、画像処理装置２０３とコントローラ２０２を別々のハードウェア構成としているが、コントローラ２０２の持つ機能をすべて画像処理装置２０３内に実装して、一体化することや、画像処理装置２０３とコントローラ２０２がそれぞれ有する機能を集め、専用の画像処理装置を構成することも可能である。また、画像合成機能は、必ずしも画像処理装置コントローラ２０３側で有している必要はなく、ＨＭＤ２０１、またはコントローラ２０２側に実装する構成でも良い。
【００２８】
図２は、図１に示したＭＲシステムにおける本実施の形態を実現するために必要な機能を示す機能ブロック図である。
【００２９】
ＨＭＤ２０１は、画像表示部に表示する画像を撮像する撮像部を構成する撮像素子１０１Ｌ、１０１Ｒ、撮像画像とＣＧ画像の合成画像を表示する表示部を構成する表示素子１０２Ｌ、１０２Ｒ、画像や信号を送受信する送受信Ｉ／Ｆ部１０３、その他不図示の機能部から構成される。なお、ＬやＲは、それぞれ左眼用、右眼用であることを示している。
【００３０】
コントローラ２０２は、画像処理装置２０３から受信した画像に、文字情報や記号情報等の２次元オブジェクトを合成するオブジェクト合成部１１１Ｌ、１１１Ｒ、表示素子１０２Ｌ、１０２Ｒへの個別の電源供給を含むＨＭＤ２０１への電源供給を制御する表示電源制御部１１２（第一の電源供給手段に対応する）、コントローラ２０２自身への電源供給を制御する装置電源制御部１１３（第二の電源供給手段に対応する）、後述する各時間を管理するタイマー部１１４、装置の延長操作等の使用者からの操作を受け付けるユーザＩ／Ｆ部１１５（２０２ａ）、各部を制御する制御部１１６、画像や信号等を送受信する送受信Ｉ／Ｆ部１１７、１１８、その他不図示の機能部から構成される。
【００３１】
ここで、ユーザＩ／Ｆ部１１５の外観を図５に示す。図５において、５０１、５０２は、タイマー値等を設定するためのボタンであり、５０３は延長操作を行うためのボタンであり、５０４は電源のオン又はオフを指示するためのボタンである。
【００３２】
タイマー部１１４は、ＨＭＤ２０１の電源を管理するためのタイマーＡ１１４１、コントローラ２０２の電源を管理するためのタイマーＢ１１４２、ＨＭＤの使用開始から一定時間経過したことをＨＭＤ使用者に伝えるための、メッセージ表示を管理するためのタイマーＣ１１４３から構成される。
【００３３】
画像処理装置２０３は、ＰＣやＷＳなどで構成され、画像や信号等を送受信する送受信Ｉ／Ｆ部１２２、受信した撮像画像の位置姿勢に対応するＣＧ画像を生成するＣＧ画像生成部１２３Ｌ、１２３Ｒと、受信した撮像画像と生成したＣＧ画像とを合成するＣＧ画像合成部１２１Ｌ、１２１Ｒ、その他不図示の機能部から構成される。尚、ＣＧ画像の生成、合成に関しては、公知の技術を用いれば良いので詳細な説明は省略する。
【００３４】
上述の構成において、ＨＭＤ２０１の撮像素子１０１Ｌ、１０１Ｒがそれぞれ撮像した画像を、送受信Ｉ／Ｆ部１０３、１１７、１１８を介して画像処理装置２０３に送信する。
【００３５】
画像処理装置２０３は、受信した撮像画像に対するＣＧ画像の生成、合成を行い、この合成画像を送受信Ｉ／Ｆ部１２２を介してコントローラ２０２へ送信する。
【００３６】
コントローラ２０２は、表示する画像に文字や記号情報等の情報を追加する場合は、オブジェクト合成部１１１Ｌ、１１１Ｒで、画像処理装置２０３から受信した画像に、追加する情報の重畳を行う。そして、コントローラ２０２は、画像を表示画像として、送受信Ｉ／Ｆ部１１７を介してＨＭＤ２０１へ送信する。ＨＭＤ２０１は、受信した表示画像を表示素子１０２Ｌ、１０２Ｒで表示することで、使用者はリアルタイムに撮像した画像にＣＧ画像を重畳した合成画像を見ることが可能となる。
【００３７】
これによってＨＭＤ使用者は、撮像画像とＣＧ画像が合成された合成画像に、文字等の情報が重畳された表示画像を見ることが可能となる。文字等の情報としては、使用者に何かの情報を知らせるためのメッセージや、ＨＭＤ２０１の設定を変更するために必要な情報等がある。
【００３８】
以上の構成により、ビデオシースルーＨＭＤを装着することで、現実世界と仮想世界とがリアルタイムにシームレスに融合した複合現実世界を体験できる。
【００３９】
続いて、本実施の形態における時間管理について、図３に示すフローチャートを用いて説明する。時間管理は、例えば、任意の時間でＨＭＤ使用者が変わった場合でも、装置を再起動することなく、各使用者毎に、同じ制限時間でＨＭＤの使用を制限することができる。
【００４０】
図３において、まずＳ１００において、ＭＲシステム全体の起動を行う。これは、ＭＲシステム全体の電源がオフ状態のときに、画像処理装置２０３の不図示のスイッチにより、ＭＲシステム全体の電源がオン状態になる。尚、画像処理装置が休止状態のときに、コントローラ２０２のボタン５０４を使用者が押すことによりオン状態になる構成であってもよい。
【００４１】
Ｓ１０１において、制御部１１６は、ＭＲシステム全体の初期化を行うとともに、コントローラ２０２の電源を管理するためのタイマーＢ１１４２にタイマー値（第二の設定時間に対応する）を設定する。タイマーＢ１１４２は、ＨＭＤ２０１とコントローラ２０２の電源がオンされてから、自動的に電源をオフするまでの時間（設定時間）を管理するためのタイマーである。
【００４２】
Ｓ１０２において、制御部１１６は、ＨＭＤ２０１の電源を管理するためのタイマーＡ１１４１にタイマー値（第一の設定時間に対応する）を設定する。タイマーＡ１１４１は、ＨＭＤ２０１の電源がオンされてから、ＨＭＤ２０１の表示素子１０２Ｌ、１０２Ｒの電源をオフするまでの時間を管理するためのタイマーである。
【００４３】
Ｓ１０３において、制御部１１６は、メッセージ表示を管理するためのタイマーＣ１１４３にタイマー値を設定する。使用経過メッセージとは、ＨＭＤ２０１を使用してから（実際にはＨＭＤ２０１の電源がオンになってから）一定の時間が経過した旨のメッセージのことである。タイマーＣ１１４３は、ＨＭＤ２０１の電源オンから使用経過メッセージを表示するまでの時間を管理するためのタイマーである。
【００４４】
タイマーＡ１１４１とタイマーＣ１１４３は、ＨＭＤ２０１の使用制限を行うためのタイマーであり、タイマーＢ１１４２は、装置の省エネのためのタイマーとなる。尚、各タイマー値の関係は以下のようになっている。
（タイマーＣ１１４３のタイマー値）＜（タイマーＡ１１４１のタイマー値）＜（タイマーＢ１１４２のタイマー値）
尚、本実施の形態では、それぞれ、１５分、２０分、６０分を計測するタイマー値が設定されるものとする。
【００４５】
これらのタイマーには、図３に示すフローのように装置電源オン時、または後述する延長操作の実施時に、それぞれの値が設定される。
【００４６】
各タイマー値については、予め決められメモリ等に記憶された値、またはコントローラ２０２と画像処理装置２０３の通信初期化のネゴシエーション時に決定してよく、更には、ユーザＩ／Ｆ部１１５のボタン５０１、５０２を用いて使用者が設定できるようにしてもよい。
【００４７】
Ｓ１０４において、各タイマーは、設定している値を１デクリメントを行う。本実施例ではタイマー値は１づつデクリメントを行って判定するダウンカウンタを使用しているがアップカウンタでもよい。
【００４８】
Ｓ１０５において、制御部１１６は、ユーザＩ／Ｆ部１０９で使用者からの延長操作が行われたかの判定を行う。延長操作とはＨＭＤ２０１の使用時間の延長を指示するための操作のことである。例えば、ＨＭＤ使用者が変わった時に、使用者が延長操作を行う。
【００４９】
Ｓ１０５の判定で延長操作されていた場合は、Ｓ１０６において、制御部１１６は、使用経過メッセージ表示中かの判定を行う。使用経過メッセージ表示中であれば、延長操作によって使用経過メッセージを消去する必要があるため、Ｓ１０７において、制御部１１６の制御の下に、オブジェクト合成部１１１Ｌ、１１１Ｒは使用経過メッセージの消去を行う。これによってＨＭＤ使用者には、使用経過メッセージが消えた画面が見える。
【００５０】
Ｓ１０８において、制御部１１６は、ＨＭＤ２０１の表示電源がオフされているか判定を行う。表示電源がオフされている場合、ＨＭＤ２０１を使用するため、Ｓ１０９において、制御部１１６の制御の下に、表示電源制御部１１２は、表示素子１０２Ｌ、１０２Ｒに対して表示電源のオンを行う。
【００５１】
また、Ｓ１０５において延長操作が実施されていると判断された場合は、表示電源オン、オフの制御に関わらず各タイマーを再設定することになる。そのためにＳ１０１の処理に戻る。
【００５２】
Ｓ１０５において、ユーザＩ／Ｆ部１１５で延長操作が行われていない場合、Ｓ１１０において、制御部１１６は、タイマーＣ１１４３がカウント値が０になったかの判定を行う。タイマーＣ１１４３のカウント値が０になった場合、制御部１１１６は、使用経過メッセージを表示すると判定し、Ｓ１１１において、制御部１１６は、オブジェクト合成部１１１Ｌ、１１１Ｒに、使用経過メッセージの重畳を指示する。オブジェクト合成部１１１Ｌ、１１１Ｒは、使用経過メッセージを作成し画像処理装置２０３から受信した画像に対して使用経過メッセージを重畳する。その後、使用経過メッセージが重畳された画像が表示素子１０２Ｌ、１０２Ｒに、例えば図４に示すように表示されることで、ＨＭＤ使用者はＨＭＤを使用してから一定時間経過した旨のメッセージを見ることができ、一定時間連続使用していることを認識できる。
【００５３】
Ｓ１１２において、制御部１１６は、タイマーＡ１１４１のカウント値が０になったかの判定を行う。タイマーＡ１１４１のカウント値が０になった場合、ＨＭＤの使用制限のため、Ｓ１１３において、制御部１１６の制御の下、装置電源制御部１１２は、表示素子１０２Ｌ、１０２Ｒに対して電源供給を停止することで表示電源をオフする。その際、Ｓ１１４において、制御部１１６は、オブジェクト合成部１１１Ｌ、１１１Ｒに対して、使用経過メッセージの重畳の取りやめを指示し、使用経過メッセージが消去される。これにより、再び、表示電源がオンされた場合は、使用経過メッセージが重畳されていない画面が表示されることになる。尚、Ｓ１０９、Ｓ１１３における処理動作が、第一の停止手段に対応する。
【００５４】
Ｓ１１３において、表示電源のオフを行うことで、ＨＭＤ使用者はＨＭＤ２０１を装着しても画像を見ることはできなくなる。Ｓ１１３の表示電源をオフする時に、現在ＨＭＤ２０１に設定されている設定値の保存を行って、ＨＭＤ２０１全体の電源をオフしてもよい。この場合、Ｓ１０９の表示電源のオン時に、この保存している内容を読み出して設定を行うことで、省電力効果を高めつつ迅速な復帰が行われる。
【００５５】
Ｓ１１５において、制御部１１６は、タイマーＢ１１４２のカウント値が０になったかの判定を行う。タイマーＢ１１４２のカウント値が０になった場合、Ｓ１１６において、制御部１１６の制御の下、装置電源制御部１１３は、ＨＭＤ２０１、コントローラ２０２の電源供給を停止し、装置の電源をオフする。装置電源のオフをする時、現在ＨＭＤ２０１、コントローラ２０２に設定されている設定値の保存を行ってもよい。この場合、Ｓ１００の起動時の処理で、この保存している内容を読み出して設定を行う。タイマーＢ１１４２のカウント値が０でない場合は、Ｓ１０４のタイマーデクリメント処理に戻る。尚、Ｓ１１６における処理動作が、第二の停止手段に対応する。
【００５６】
図６は、図３のフローに従った時のＭＲシステムの時間経過を模式的に示した図である。
【００５７】
図６において、（ａ）は、延長操作なしの時の例である。装置電源オン後、１５分経過すると使用経過メッセージが表示（通知）され、その後５分経過すると表示電源オフとなり、その後４０分経過すると電源オフとなる。
（ｂ）は、使用経過メッセージ表示中に延長操作をした時の例である。延長操作を行うと、使用経過メッセージが消去され、その後１５分すると再度使用経過メッセージが表示される。その後５分経過すると表示電源オフとなり、その後４０分経過すると電源オフとなる。
（ｃ）は、使用経過メッセージ表示前に延長操作を実施した場合、（ｄ）は、表示電源オフ中に延長操作を実施し、電源の供給が再開した場合の例である。
【００５８】
図３のフローに従うと、延長操作を実施するとＨＭＤ使用制限のための表示用電源のタイマーだけでなく、装置用電源のタイマーも延長されることになる。
【００５９】
本実施の形態では、時間延長の操作を行うことでＨＭＤ使用制限を管理するタイマーと装置電源を管理するタイマーを再設定する。これによって、任意の時間でＨＭＤ使用者が変わった場合でも、装置を再起動することなく同じ時間でＨＭＤの使用制限を行うことができる。また、表示電源オフとなっても装置の電源は入っているため、ＨＭＤに対して、コントローラ２０２から、又は、コントローラ２０２を介して画像処理装置２０３から設定を行うこともできる。
【００６０】
（実施の形態２）
実施の形態１では、延長操作を行うことでＨＭＤ使用制限を管理するタイマーと装置電源を管理するタイマーを再設定する方法について説明を行った。本実施の形態では、延長操作を行った時、装置電源を管理するタイマーは再設定せず、ＨＭＤ使用制限を管理するタイマーのみ再設定する方法について説明する。
【００６１】
本実施の形態では、装置電源のタイマーを再設定しないためＨＭＤ使用中に装置電源がオフする場合がある。したがってＨＭＤ使用中に装置電源がオフする場合、装置電源がオフする前に、装置電源がオフする旨のメッセージを表示する。
【００６２】
以降、このメッセージについては、電源オフメッセージとして説明する。例えば、この電源オフメッセージは、ＨＭＤ使用者には図９のように見える。電源オフメッセージを表示する時間は、予め決まった時間であるが、コントローラ２０２と画像処理装置２０３との通信初期化のネゴシエーション時に決定しても、ユーザＩ／Ｆ部１１５からの入力でもよい。
【００６３】
尚、本実施の形態の構成は、図２と同じ構成である。
【００６４】
図７は、本実施の形態の処理動作を示すフローチャートであるが、図３と同じに処理についてはその説明を省略する。
【００６５】
Ｓ１０２において、タイマーＢ１１４２にタイマー値を設定した後、Ｓ１１７において、制御部１１６は、タイマーＣ１１４３に、タイマー値の設定を行う。この設定方法は、図８に従って行う。
【００６６】
図８は、タイマーＣ１１４３に、タイマー値の設定を行う処理を示すフローチャートである。
【００６７】
図８のＳ２００において、制御部１１６は、タイマーＢ１１４２のカウント値と、電源オフメッセージ表示時間の比較を行う。これは、装置電源オフ迄の残り時間が、電源オフメッセージを表示する時間であるか否かを判断するためのである。
【００６８】
カウント値より電源オフメッセージ表示時間が大きい場合、延長操作を行っても、既に電源オフメッセージ表示しなければならないことを意味する。従って延長操作実施後、直に電源オフメッセージを表示する必要があるため、Ｓ２０１において、制御部１１６は、タイマーＣ１１４３にはタイマー値０を設定する。
【００６９】
装置用電源のタイマー値の方が大きい場合、Ｓ２０２において、制御部１１６は、タイマーＣ１１４３には通常にタイマー値を設定する。
【００７０】
再び、図７に戻って、Ｓ１０５で延長操作の判定後、Ｓ１１８において、制御部１１６は、タイマーＢ１１４２のカウントが終了したかの判定を行う。終了している場合、Ｓ１１６において、制御部１１６の制御の下、装置電源制御部１１３は装置全体を電源ＯＦＦする。
【００７１】
Ｓ１１９において、制御部１１６は、電源オフメッセージ表示を行うか判定を行う。タイマーＢ１１４２のカウント値が示す時間より、電源オフメッセージ表示時間の方が大きい場合、電源オフメッセージ表示を行うと判定する。電源オフメッセージの表示を行うと判定した場合、Ｓ１２０において、制御部１１６の制御の下、オブジェクト合成部１１１Ｌ、１１１Ｒで受信した表示画像に対して電源オフメッセージの重畳を行う。この時、ＨＭＤ使用者は例えば図９のような画像を見ることで、しばらく経過すると装置の電源がオフされることを認識できる。
【００７２】
Ｓ１０５において延長操作が実施されていない場合、Ｓ１２１において、制御部１１６は、電源オフメッセージを表示するかの判定を行う。Ｓ１１９と同様、タイマーＢ１１４２のカウント値が示す時間より、電源オフメッセージ表示時間の方が大きい場合、電源オフメッセージの表示を行うと判定する。
【００７３】
電源オフメッセージの表示が必要と判定した場合、Ｓ１２２において、制御部１１６の制御の下、オブジェクト合成部１１１Ｌ、１１１Ｒで受信した表示画像に対して電源オフメッセージの重畳を行う。この時、もし使用経過メッセージが表示されていた場合は、使用経過メッセージの消去を行う。
【００７４】
図１０は、図７、８のフローに従った時のＭＲシステムの時間経過を模式的に示した図である。図１０では使用経過メッセージ用タイマーを１５分、表示電源オフ時のタイマーを２０分、電源オフのメッセージ表示を５分間、装置電源オフまでのタイマーを１２０分としている。
【００７５】
図１０の（ａ）は，電源オン後６０分経過して、延長操作を行った時の例である。この場合、装置電源オフ前にはＨＭＤを使用していないため、電源オフメッセージは表示されない。本実施の形態では装置電源オフ前に、ＨＭＤを使用していない時、電源オフメッセージを表示しないと説明しているが、ＨＭＤを使用していない時でも装置電源オフ前に電源オフメッセージを表示するようにしてもよい。
（ｂ）は、装置電源オフの１５分前に、延長操作を実施した時の例である。この場合、装置電源オフの５分前に、電源オフメッセージが表示される。
（ｃ）は、装置電源オフの２２分前に、延長操作を実施した時の例である。この場合、使用経過メッセージが表示された後、２分経過すると装置電源オフの５分前になる。このため使用経過メッセージが表示されてから２分経過後、装置電源オフメッセージが表示される。
（ｄ）は、使用経過メッセージ表示中に延長操作を行い、延長操作実施後３分経過した時に、電源オフメッセージが表示された場合の例である。
（ｅ）は、装置電源オフの２分前に延長操作を行った時の例である。この場合、延長操作実施直後に電源オフメッセージが表示される。
【００７６】
本実施の形態では、延長操作を行っても装置用電源タイマー値は再設定しないようにした。延長操作を行っても装置用電源タイマー値は再設定しないことで、実施例の形態１と比較するとＨＭＤ使用制限を保ちつつ、さらに装置自体の連続使用を保つことが可能となる。
【００７７】
（実施の形態３）
実施の形態１、２では使用者による延長操作によってＨＭＤ使用制限を管理するタイマーと装置電源を管理するタイマーを再設定する方法について説明を行った。
【００７８】
本実施の形態では、ＨＭＤの使用状態を検出して、２つのタイマーを再設定する方法について説明する。
【００７９】
図１２は、本実施形態に係るＭＲシステムの機能ブロック図である。図２と比べると使用状態検出部１３０が追加されている。使用状態検出部１３０は、ＨＭＤが使用者により使用されているか、使用されていないかを検出する。
【００８０】
図１３は、使用状態検出部１３０の具体的な例を示す図である。図１３（ａ）において、ＨＭＤ２０１に、使用状態検出部１３０に対応しているセンサ２０４が取り付けられている。使用者がＨＭＤ２０１を装着すると、センサ２０４はＯＦＦ状態となり、装着を外すとＯＮ状態となる。このセンサ２０４は光学式センサであってもスイッチ式のセンサであっても良い。
【００８１】
図１３（ｂ）において、手持ち型表示装置（Ｈａｎｄ  Ｈｅｌｄ  Ｄｉｓｐｌａｙｓ、以下ＨＨＤ）の場合であり、ＨＨＤ２１０に使用状態検出部１３０に対応しているスイッチ２１１が取り付けられている。ＨＨＤ２１０を未使用時、ＨＨＤ２１０はクレードルに置かれるためスイッチ２１１はＯＮ状態となり、ＨＨＤ２１０を使用時、ＨＨＤ２１０はクレードルから離れるため、スイッチ２１１はＯＦＦ状態となる。
【００８２】
このようなセンサを用いることより、ＨＭＤ２０１、ＨＨＤ２１０の使用、未使用状態を検出する。本実施形態では図１３（ａ）のＨＭＤの場合に対して説明を行う。また、本実施例では使用状態の検出にＯＮ、ＯＦＦによるセンサを用いているが、撮像部の位置姿勢を検知するためのジャイロセンサ等のセンサを用いて動きを検知し、所定時間以上動きが無いことを検知することで、未使用状態を検出してもよい。
【００８３】
図１４は、本実施の形態の処理動作を示すフローチャートであるが、図３と同じ処理についてはその説明を省略する。
【００８４】
Ｓ３００において、ＨＭＤの使用再開の判定を行う。この判定の詳細を、図１５を用いて説明する。
【００８５】
図１５のＳ４００において、制御部１１６の制御の下、使用状態検出部１３０は、使用者がＨＭＤ２０１を装着中か装着中でないかの判定を行う。装着中でない場合は、使用をしていないため、Ｓ４０４において使用再開でないと判定する。
【００８６】
装着中の場合は、Ｓ４０１において制御部１１６はタイマーカウンタが１つ前の時の装着状態を参照する。Ｓ４０２において、タイマーカウンタの１つ前の時の装着状態が装着中の場合は、ＨＭＤの使用を継続しているためＳ４０４において使用再開でないと判定する。装置起動直後のために、Ｓ４０１においてタイマーカウンタが１つ前の時の装着状態を参照できない場合は、１つ前の状態を未装着の状態として判定を行う。
【００８７】
Ｓ４０２において装着中でないと判定した場合、未装着から装着状態に変わったことになるため、Ｓ４０３において使用再開であると判定する。
【００８８】
図１４に戻って、Ｓ３００において使用再開と判定した場合はＳ１０６以降の処理を行い、使用再開でないと判定した場合はＳ１１０以降の処理を行う。
【００８９】
図１６は、図１４、１５のフローに従った時のＭＲシステムの時間経過を模式的に示した図である。図１６では使用経過メッセージ用タイマーを１５分、表示電源オフ時のタイマーを２０分、装置電源オフまでのタイマーを６０分としている。
【００９０】
図１６の（ａ）は、１回目の使用開始から１０分後に使用者が交替した場合の例である。交替した際、１回目の使用中の時間であるが、２回目の使用時（装着時）に、タイマーと装置電源を管理するタイマーを再設定する。これにより、２回目の使用後１５分経過すると使用経過のメッセージが表示される。図１６の（ｂ）は、１回目の使用終了後１０分経過して、使用者が変わった場合の例である。図１６の（ｃ）は、装着後、電源ＯＮを行った場合の例である。電源ＯＮ後から１５分経過すると使用経過メッセージが表示される。本実施例では装着を外した後も表示電源についての制御は行わないとして説明を行っているが、装着を外した後に表示電源をＯＦＦにしてもよい。
【００９１】
本実施の形態では、使用者による延長操作ではなく装置の使用状態によりＨＭＤ使用制限を管理するタイマーと装置電源を管理するタイマーを再設定するようにした。これにより、例えば図１６の（ａ）のような場合において、実施の形態１では２回目に使用する使用者が延長操作を忘れて使用した場合、交替後５分経過すると使用経過メッセージが表示される。本実施の形態では、使用者が交替する際の延長操作のように使用者が操作を行う必要がないため、実施の形態１と比較すると使用者交替時のＨＭＤ使用制限をより確実に行うことが可能となる。
【００９２】
（実施の形態４）
実施の形態３ではＨＭＤの使用状態を検出して、ＨＭＤ使用制限を管理するタイマーと装置電源を管理するタイマーを再設定する場合について説明を行った。本実施の形態では、装置電源を管理するタイマーは再設定せず、ＨＭＤ使用制限を管理するタイマーのみ再設定する方法について説明する。
【００９３】
本実施形態の構成は図１２と同様であるので、実施の形態２と同じ個所については説明を省略する。
【００９４】
図１７は、本実施の形態の処理動作を示すフローチャートである。図７と同じ処理についてはその説明を省略する。
【００９５】
図１７のＳ３００において、ＨＭＤ１００の使用再開の判定を行う。この判定の詳細は図１５と同様である。
【００９６】
Ｓ３００において使用再開と判定した場合はＳ１１８以降の処理を行い、使用再開でないと判定した場合はＳ１２１以降の処理を行う。
【００９７】
図１８は、図１７のフローに従った時の装置の時間経過を模式的に示した図である。図１８では使用経過メッセージ用タイマーを１５分、表示電源オフ時のタイマーを２０分、電源オフのメッセージ表示を５分間、装置電源オフまでのタイマーを１２０分としている。
【００９８】
図１８の（ａ）は，電源オン後６０分経過して、二人目の使用者がＨＭＤを使用した時の例である。
（ｂ）は、装置電源オフの１５分前に、二人目の使用者がＨＭＤを使用した時の例である。この場合、装置電源オフの５分前に、電源オフメッセージが表示される。
（ｃ）は、装置電源オフの２２分前に、二人目の使用者がＨＭＤを使用した時の例である。この場合、使用経過メッセージが表示された後、２分経過すると装置電源オフの５分前になる。このため使用経過メッセージが表示されてから２分経過後、装置電源オフメッセージが表示される。
（ｄ）は、使用経過メッセージ表示中に使用者交替を行い、交替後３分経過した時に、電源オフメッセージが表示された場合の例である。
（ｅ）は、装置電源オフの２分前に二人目の使用者がＨＭＤを使用した時の例である。この場合、使用者交替直後に電源オフメッセージが表示される。
【００９９】
本実施の形態では、使用状態を検出して未使用から使用状態に変わっても装置用電源タイマー値は再設定しないようにした。実施の形態３と比較するとＨＭＤ使用制限を保ちつつ、さらに装置自体の連続使用を保つことが可能となる。
【０１００】
（実施の形態５）
実施の形態３、４ではＨＭＤの使用状態を検出して、ＨＭＤ使用制限を管理するタイマーと装置電源を管理するタイマーを再設定する方法について説明を行った。本実施の形態では、ＨＭＤ装着後に使用者が操作を行うことで、２つのタイマーを再設定する方法について説明する。
【０１０１】
尚、本実施の形態の構成は、図１２と同じ構成である。
【０１０２】
図１９は本実施の形態において、ＨＭＤ２０１を使用者が装着した時に、ＨＭＤ使用者に表示する内容を示す図である。
【０１０３】
図１９の（ａ）はＨＭＤを装着直後に表示されるメッセージであり、ＨＭＤ使用者に対して長時間の使用を控えるように通知するためのメッセージである。図１９の（ｂ）は図１９（ａ）の表示が消えた後に表示されるイメージであり、ＨＭＤ使用者がＨＭＤを正しく装着できているか確認するためのイメージである。図１９の（ｃ）はＨＭＤを使用開始した時のイメージである。図１９の（ｂ）によってＨＭＤ使用者が正しくＨＭＤを装着できた後、使用者は、例えば図５の５０２のボタンを押すことで図１９の（ｃ）のよう現実空間を観察することになり、ＨＭＤを使用できるようになる。
【０１０４】
図２０は、本実施の形態の処理動作を示すフローチャートであるが、図１４と同じ処理についてはその説明を省略する。
【０１０５】
Ｓ１０１〜Ｓ１０３において各タイマーにタイマー値を設定した後、Ｓ５００において制御部１１６は装置用電源のタイマーを１つデクリメントする。
【０１０６】
Ｓ５０１において、制御部１１６は、現在ＨＭＤを使用者が使用しているかの判定を行う。Ｓ５０１のＨＭＤ使用の判定は、後述するＳ５０９やＳ５１１で判定した結果を参照して判定を行う。なお、装置起動直後は使用していないと判断する。
【０１０７】
Ｓ５０１で使用中でないと判定した場合、Ｓ５０２において制御部１１６は装置用電源のタイマーのカウント値が０になったかの判定を行う。装置用電源タイマーのカウント値が０になった場合、Ｓ１１６において、制御部１１６の制御の下、装置電源制御部１１３は、ＨＭＤ２０１、コントローラ２０２の電源供給を停止し、装置の電源をオフする。
【０１０８】
Ｓ５０３において、制御部１１６の制御の下、使用状態検出部１３０を用いて、ＨＭＤが未装着状態から装着状態に変化したかの判定を行う。装着状態が未装着から装着状態に変化したと判定した場合は、使用再開と認識し、Ｓ１０６以降の処理を行う。Ｓ５０３において未装着状態のままと判定した場合、使用再開していないと認識し、Ｓ５００の処理に戻る。
【０１０９】
使用再開と判定した後、Ｓ５０４において制御部１１６の制御の下、オブジェクト合成部１１１Ｌ、Ｒは使用開始前のメッセージを合成する。これによりＨＭＤ使用者はＨＭＤを装着した後、図１９の（ａ）のメッセージを確認することができる。Ｓ５０４の後、数秒経過してからＳ５０５の処理を行う。Ｓ５０５において制御部１１６の制御の下、オブジェクト合成部１１１Ｌ、Ｒはメッセージを消去する。
【０１１０】
Ｓ５０６において、制御部１１６の制御の下、オブジェクト合成部１１１Ｌ、Ｒは装着確認用のイメージを合成する。これによりＨＭＤ使用者は図１９の（ｂ）のイメージを見ながらＨＭＤの装着状態を確認し、直すことができる。
【０１１１】
ＨＭＤ使用者が装着状態を確認後、ボタンを押下することで、Ｓ５０７において制御部１１６は、ユーザＩ／Ｆ部１１５を介してボタンが押下されたと判定し、Ｓ５０８の処理を行う。Ｓ５０８において、制御部１１６の制御の下、オブジェクト合成部１１１Ｌ、Ｒは装着確認用のイメージを消去する。装着確認用のイメージを消去後、Ｓ５０９において制御部１１６はＨＭＤ使用中の状態に移行する。
【０１１２】
Ｓ５０１においてＨＭＤを使用中であると判定した場合、Ｓ５１０において、制御部１１６の制御の下、使用状態検出部１３０はＨＭＤが装着状態であるかの判定を行う。Ｓ５１０において装着状態でないと判定した場合、ＨＭＤが使用中の状態から未使用の状態に遷移したと判定し、Ｓ５１１において制御部１１６はＨＭＤ未使用の状態に移行する。Ｓ５１０においてＨＭＤは装着中であると判定した場合は、ＨＭＤは引き続き使用中のため、Ｓ５１２、Ｓ５１３において制御部１１６は、表示用電源のタイマー、使用経過メッセージのタイマーをそれぞれ１つデクリメントする。
【０１１３】
図２１は、図２０のフローに従った時の装置の時間経過を模式的に示した図である。図２１では使用経過メッセージ用タイマーを１５分、表示電源オフ時のタイマーを２０分、装置電源オフまでのタイマーを１２０分としている。
【０１１４】
実施の形態３では装着後、ＨＭＤ使用制限を管理するタイマーと装置電源を管理するタイマーを再設定するようにした。本実施例では装着後にＨＭＤを正しく装着したと使用者が確認後、２つのタイマーを再設定している。このため、使用制限内を最大限に、ＨＭＤを使用することが可能となる。
【０１１５】
（実施の形態６）
実施の形態３、４、５ではＨＭＤの使用状態を検出して、ＨＭＤ使用制限を管理するタイマーと装置電源を管理するタイマーを再設定する方法について説明を行った。本実施の形態では、ＨＭＤの装着時にユーザ認証を行うことで、２つのタイマーを再設定する方法について説明する。
【０１１６】
図２２は、本実施形態の機能ブロック図である。図１２と比べるとユーザ識別素子１３１、ユーザ情報部１３２が追加されている。ユーザ識別素子１３１は、ＨＭＤ使用者の網膜を撮影して使用者を識別する素子である。本実施の形態ではユーザ識別素子１３１を用いてＨＭＤを使用している使用者の識別を行うと説明するが、ユーザＩ／Ｆ部１１５を用いてユーザＩＤ、パスワード等の入力を行うことでユーザ認証を行っても良い。
【０１１７】
また、指紋認証や静脈認証のようなバイオ認証を用いてもよい。ユーザ情報部１３２は、網膜の情報と対応するユーザＩＤ、前回の使用終了時刻（前回使用時刻）が対応付けられて保存されている書き換え可能なメモリであり、例えば図２３のように構成される。
【０１１８】
図２４は、本実施の形態の処理動作を示すフローチャートである。図１４と同じ処理についてはその説明を省略する。
【０１１９】
Ｓ３００の処理で、使用再開と判定した場合、Ｓ６００において制御部１１６の制御の下、ユーザ識別素子１３１はＨＭＤ使用者の網膜を撮影し、この情報を制御部１１６に送る。制御部１１６はこの情報を元に、各ユーザの網膜情報が入っているユーザ情報部１３２にアクセスを行い使用者の特定を行う。本実施の形態では、ユーザ情報部１３２はＨＭＤ２０２にあるが、画像処理ユニット２０３にあってもよいし、画像処理ユニット２０３が接続しているネットワーク上のサーバにあってもよい。
【０１２０】
Ｓ６０１において、制御部１１６は特定した使用者が前回使用を終了してからの時間を計算する。前回使用を終了してからの時間が予め設定された時間経過しているか判定を行い、一定時間経過していれば、Ｓ１０６以降の処理を行いＨＭＤの使用を再開する。一定時間経過していなければ、Ｓ１０４の処理に遷移し、ＨＭＤの使用を再開しない。
【０１２１】
Ｓ３００において使用再開でないと判定した場合、Ｓ６０２において制御部１１６の制御の下、使用状態検出部１３０を用いて装着状態を判定する。Ｓ６０２において装着状態でないと判定した場合、使用を中断したと判断し、Ｓ６０３において制御部１１６は使用者と終了時刻をユーザ情報１１９に保存する。
【０１２２】
図２５は、図２４のフローに従った時の装置の時間経過を模式的に示した図である。図２５では使用経過メッセージ用タイマーを１５分、表示電源オフ時のタイマーを２０分、装置電源オフまでのタイマーを６０分、使用再開可能な時間を１０分以上としている。また、図２５では同じ使用者が使用した場合についての図である。
【０１２３】
図２５の（ａ）は使用再開まで１０分間空いているため装着後、使用可能になる。図２５の（ｂ）は使用再開まで５分間しか経過していないため使用可能にならない。
【０１２４】
本実施の形態では、装着後にユーザ認証を行うことで、一定時間経過している時のみ、ＨＭＤ使用制限を管理するタイマーと装置電源を管理するタイマーを再設定するようにした。実施の形態１〜５と比べると、同じ使用者が使用を再開する場合の制限を設けることが可能となる。
【０１２５】
（その他の実施の形態）
また、本発明の目的は、以下のようにすることによって達成されることはいうまでもない。即ち、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記録媒体（または記憶媒体）を、システムあるいは装置に供給する。そして、そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵ）が記録媒体に格納されたプログラムコードを読み出し実行する。この場合、記録媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記録した記録媒体は本発明を構成することになる。
【０１２６】
また、コンピュータが読み出したプログラムコードを実行することにより、そのプログラムコードの指示に基づき、コンピュータ上で稼働しているオペレーティングシステム（ＯＳ）などが実際の処理の一部または全部を行う。その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【０１２７】
さらに、記録媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張カードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込まれたとする。その後、そのプログラムコードの指示に基づき、その機能拡張カードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【０１２８】
本発明を上記記録媒体に適用する場合、その記録媒体には、先に説明したフローチャートに対応するプログラムコードが格納されることになる。
【図面の簡単な説明】
【０１２９】
【図１】本発明の実施の形態に係るＭＲシステムの構成を示す図である。
【図２】図１に示したＭＲシステムにおける本実施の形態を実現するために必要な機能を示す機能ブロック図である。
【図３】実施の形態１の処理動作を示すフローチャートである。
【図４】使用経過メッセージの表示例を示す図である。
【図５】ユーザＩ／Ｆ部の外観図である。
【図６】実施の形態１の時間経過を模式的に示した図である。
【図７】実施の形態２の処理動作を示すフローチャートである。
【図８】実施の形態２の処理動作を示すフローチャートである。
【図９】電源オフメッセージの表示例を示す図である。
【図１０】実施の形態２の時間経過を模式的に示した図である。
【図１１】ＨＭＤを使用者が装着した様子を示す図である。
【図１２】実施の形態３に係るＭＲシステムの機能ブロック図である。
【図１３】使用状態検出部の具体的な例を示す図である。
【図１４】実施の形態３の処理動作を示すフローチャートである。
【図１５】実施の形態３の処理動作を示すフローチャートである。
【図１６】実施の形態３の時間経過を模式的に示した図である。
【図１７】実施の形態４の処理動作を示すフローチャートである。
【図１８】実施の形態４の時間経過を模式的に示した図である。
【図１９】実施の形態５のメッセージ表示例を示す図である。
【図２０】実施の形態５の処理動作を示すフローチャートである。
【図２１】実施の形態５の時間経過を模式的に示した図である。
【図２２】実施の形態６を実現するために必要な機能を示す機能ブロック図である。
【図２３】実施の形態６で使用するＨＭＤを使用するユーザＩＤを特定するためのテーブル例を示す図である。
【図２４】実施の形態６の処理動作を示すフローチャートである。
【図２５】実施の形態６の時間経過を模式的に示した図である。
【図１】
2008257671.tif 000003
【図２】
2008257671.tif 000004
【図３】
2008257671.tif 000005
【図４】
2008257671.tif 000006
【図５】
2008257671.tif 000007
【図６】
2008257671.tif 000008
【図７】
2008257671.tif 000009
【図８】
2008257671.tif 000010
【図９】
2008257671.tif 000011
【図１０】
2008257671.tif 000012
【図１１】
2008257671.tif 000013
【図１２】
2008257671.tif 000014
【図１３】
2008257671.tif 000015
【図１４】
2008257671.tif 000016
【図１５】
2008257671.tif 000017
【図１６】
2008257671.tif 000018
【図１７】
2008257671.tif 000019
【図１８】
2008257671.tif 000020
【図１９】
2008257671.tif 000021
【図２０】
2008257671.tif 000022
【図２１】
2008257671.tif 000023
【図２２】
2008257671.tif 000024
【図２３】
2008257671.tif 000025
【図２４】
2008257671.tif 000026
【図２５】
2008257671.tif 000027