(57)【要約】【課題】眼球を追跡することで眼球の運動に合わせて表示インターフェースに現われた三次元ホログラフィック仮想オブジェクトを制御して回転させることができ、便利で実行しやすい。【解決手段】本発明は、ユーザの眼に対する追跡を起動するステップと、ユーザの眼球運動を追跡するステップと、ユーザの眼球運動に合わせて表示インターフェースに現われた三次元ホログラフィック仮想オブジェクトを制御して回転させるステップと、ユーザの眼に対する追跡を終了するステップと、を含む眼追跡に基づく三次元ホログラフィック仮想オブジェクトの表示制御方法及び装置を開示する。【選択図】図１
2016071835.tif 000002
【特許請求の範囲】
【請求項１】
ユーザの眼に対する追跡を起動するステップと、
ユーザの眼球運動を追跡するステップと、
ユーザの眼球運動に合わせて表示インターフェースに現われた三次元ホログラフィック仮想オブジェクトを制御して回転させるステップと、
ユーザの眼に対する追跡を終了するステップと、を含む、
ことを特徴とする眼追跡に基づく三次元ホログラフィック仮想オブジェクトの表示制御方法。
【請求項２】
前記のユーザの眼に対する追跡を起動するステップは、
ユーザの瞼の開／閉状態を検出するステップと、
ユーザの瞼の開／閉状態が第１プリセット状態を満たした場合に、ユーザの眼に対する追跡を起動するステップと、を含み、
前記のユーザの眼に対する追跡を終了するステップは、
ユーザの瞼の開／閉状態を検出するステップと、
ユーザの瞼の開／閉状態が第２プリセット状態を満たした場合に、ユーザの眼に対する追跡を終了するステップと、を含む、
ことを特徴とする請求項１に記載の眼追跡に基づく三次元ホログラフィック仮想オブジェクトの表示制御方法。
【請求項３】
前記第１プリセット状態と前記第２プリセット状態はユーザの瞼の閉合頻度がプリセット頻度閾値より大きいようになっている、
ことを特徴とする請求項２に記載の眼追跡に基づく三次元ホログラフィック仮想オブジェクトの表示制御方法。
【請求項４】
前記第１プリセット状態と前記第２プリセット状態はそれぞれ、ユーザの左目の瞼が開状態にあり且つユーザの右目の瞼が閉状態にあり、又はユーザの左目の瞼が閉状態にあり且つユーザの右目の瞼が開状態にある状態の少なくとも一方である、
ことを特徴とする請求項２に記載の眼追跡に基づく三次元ホログラフィック仮想オブジェクトの表示制御方法。
【請求項５】
前記のユーザの眼球運動を追跡するステップは、
ユーザの顔画像を取得するステップと、
前記顔画像から眼領域を識別するステップと、
前記眼領域において色差に基づいて強膜領域と虹彩領域を識別するステップと、
前記虹彩領域と前記眼領域との相対的な位置変化に応じてユーザの眼球運動を追跡するステップと、を含む、
ことを特徴とする請求項１に記載の眼追跡に基づく三次元ホログラフィック仮想オブジェクトの表示制御方法。
【請求項６】
前記の前記眼領域において色差に基づいて強膜領域と虹彩領域を識別出するステップは、
ユーザの左目の虹彩領域と右目の虹彩領域との中心連結線を確定するステップを更に含み、
前記のユーザの眼球運動に合わせて表示インターフェースに現われた三次元ホログラフィック仮想オブジェクトを制御して回転させるステップは、
前記三次元ホログラフィック仮想オブジェクトの質量中心に位置し且つ前記中心連結線に垂直である回転軸を巡って前記三次元ホログラフィック仮想オブジェクトを回転させるステップを含む、
ことを特徴とする請求項５に記載の眼追跡に基づく三次元ホログラフィック仮想オブジェクトの表示制御方法。
【請求項７】
前記のユーザの眼球運動を追跡するステップは、
ユーザの瞼にカバーされていない前記眼球の面積を検出するステップを更に含み、
前記のユーザの眼球運動に合わせて表示インターフェースに現われた三次元ホログラフィック仮想オブジェクトを制御して回転させるステップは、
ユーザの瞼にカバーされていない前記眼球の面積の変化に応じて前記三次元ホログラフィック仮想オブジェクトをズーミングするステップを含む、
ことを特徴とする請求項１に記載の眼追跡に基づく三次元ホログラフィック仮想オブジェクトの表示制御方法。
【請求項８】
前記の前記面積の変化に応じて前記三次元ホログラフィック仮想オブジェクトをズーミングするステップは、
ユーザの瞼にカバーされていない前記眼球の面積が小さくなった時に前記三次元ホログラフィック仮想オブジェクトとユーザとの距離を小さくするステップと、
ユーザの瞼にカバーされていない前記眼球の面積が大きくなった時に前記三次元ホログラフィック仮想オブジェクトとユーザとの距離を大きくするステップと、を含む、
ことを特徴とする請求項７に記載の眼追跡に基づく三次元ホログラフィック仮想オブジェクトの表示制御方法。
【請求項９】
前記のユーザの眼球運動を追跡するステップは、
ユーザの眼球運動を追跡している過程で、ユーザの瞼の閉合動作を計数するステップと、
ユーザの瞼の閉合動作が第１回目の閉合動作である場合に、前記のユーザの眼球運動に合わせて表示インターフェースに現われた三次元ホログラフィック仮想オブジェクトを制御して回転させるステップを一時停止し、ユーザの眼球の復帰を待つステップと、
ユーザの瞼の閉合動作が第２回目の閉合動作である場合に、前記のユーザの眼球運動に合わせて表示インターフェースに現われた三次元ホログラフィック仮想オブジェクトを制御して回転させるステップを再起動し、前記ユーザの瞼の閉合動作の計数値をリセットするステップと、を含む、
ことを特徴とする請求項１に記載の眼追跡に基づく三次元ホログラフィック仮想オブジェクトの表示制御方法。
【請求項１０】
ユーザの眼に対する追跡を起動するための起動ユニットと、
ユーザの眼球運動を追跡するための追跡ユニットと、
ユーザの眼球運動に合わせて表示インターフェースに現われた三次元ホログラフィック仮想オブジェクトを制御して回転させるための制御ユニットと、
ユーザの眼に対する追跡を終了するための終了ユニットと、を含む、
ことを特徴とする眼追跡に基づく表示制御装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は表示制御に関し、特に眼追跡に基づく三次元ホログラフィック仮想オブジェクトの表示制御方法に関する。
【背景技術】
【０００２】
三次元技術及びホログラフィー技術が発展するに従って、表示インターフェースにおける仮想三次元ホログラム、例えば三次元工学製図、ホログラム、３Ｄ映画及び３Ｄゲーム等が多くなってきて、三次元図形の回転又はズーミングに対する制御が必要になる場合が多くなっている。
【０００３】
従来の技術において、表示インターフェースにおける仮想三次元ホログラムに対する制御について、一般にマウス又はその他のキーによってこの仮想三次元ホログラムをロックしてから、マウス又はその他のキーを移動することによってその回転を制御するようになっており、この仮想三次元ホログラムに対するズーミングについても、一般にマウスにおけるホイール又はその他のキーによって制御するようになっている。
【０００４】
しかしながら、仮想三次元ホログラムを回転させると同時にこの仮想三次元ホログラムに対して他の操作を行うことが必要とされる場合に、例えば立方体の四周を着色しようとすれば、立方体を数回に回転させてそれぞれの面を着色しなければならないような困った状況が発生してしまった。
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明は、どのように眼球の運動に合わせて表示インターフェースに現われた三次元ホログラフィック仮想オブジェクトを制御して回転させるかを主たる解決しようとする技術的課題としている。
【課題を解決するための手段】
【０００６】
上述した技術的課題を解決するために、本発明の採用する技術的手段は、ユーザの眼に対する追跡を起動するステップと、ユーザの眼球運動を追跡するステップと、ユーザの眼球運動に合わせて表示インターフェースに現われた三次元ホログラフィック仮想オブジェクトを制御して回転させるステップと、ユーザの眼に対する追跡を終了するステップとを含む眼追跡に基づく表示制御方法を提供することである。
【０００７】
ユーザの眼に対する追跡を起動するステップは、ユーザの瞼の開／閉状態を検出するステップと、ユーザの瞼の開／閉状態が第１プリセット状態を満たした場合に、ユーザの眼に対する追跡を起動するステップとを含み、ユーザの眼に対する追跡を終了するステップは、ユーザの瞼の開／閉状態を検出するステップと、ユーザの瞼の開／閉状態が第２プリセット状態を満たした場合に、ユーザの眼に対する追跡を終了するステップとを含む。
【０００８】
第１プリセット状態と第２プリセット状態はユーザの瞼の閉合頻度がプリセット頻度閾値より大きいようになっている。
【０００９】
第１プリセット状態と第２プリセット状態はそれぞれ、ユーザの左目の瞼が開状態にあり且つユーザの右目の瞼が閉状態にあり、又はユーザの左目の瞼が閉状態にあり且つユーザの右目の瞼が開状態にある状態の少なくとも一方である。
【００１０】
第１プリセット状態は、ユーザの左目の瞼が開状態にあり且つユーザの右目の瞼が閉状態にあり、又はユーザの左目の瞼が閉状態にあり且つユーザの右目の瞼が開状態にある状態の一方であり、第２プリセット状態は、ユーザの左目の瞼が開状態にあり且つユーザの右目の瞼が閉状態にあり、又はユーザの左目の瞼が閉状態にあり且つユーザの右目の瞼が開状態にある状態の他方である。
【００１１】
ユーザの眼球運動を追跡するステップは、ユーザの顔画像を取得するステップと、顔画像から眼領域を識別するステップと、眼領域において色差に基づいて強膜領域と虹彩領域を識別するステップと、虹彩領域と眼領域との相対的な位置変化に応じてユーザの眼球運動を追跡するステップとを含む。
【００１２】
眼領域において色差に基づいて強膜領域と虹彩領域を識別するステップは、ユーザの左目の虹彩領域と右目の虹彩領域との中心連結線を確定するステップを更に含み、ユーザの眼球運動に合わせて表示インターフェースに現われた三次元ホログラフィック仮想オブジェクトを制御して回転させるステップは、三次元ホログラフィック仮想オブジェクトの質量中心に位置し且つ中心連結線に垂直である回転軸を巡って三次元ホログラフィック仮想オブジェクトを回転させるステップを含む。
【００１３】
ユーザの眼球運動を追跡するステップは、ユーザの瞼にカバーされていない眼球の面積を検出するステップを更に含み、ユーザの眼球運動に合わせて表示インターフェースに現われた三次元ホログラフィック仮想オブジェクトを制御して回転させるステップは、ユーザの瞼にカバーされていない眼球の面積の変化に応じて三次元ホログラフィック仮想オブジェクトをズーミングするステップを含む。
【００１４】
面積の変化に応じて三次元ホログラフィック仮想オブジェクトをズーミングするステップは、ユーザの瞼にカバーされていない眼球の面積が小さくなった時に三次元ホログラフィック仮想オブジェクトとユーザとの距離を小さくするステップと、ユーザの瞼にカバーされていない眼球の面積が大きくなった時に三次元ホログラフィック仮想オブジェクトとユーザとの距離を大きくするステップとを含む。
【００１５】
ユーザの眼球運動を追跡するステップは、ユーザの眼球運動を追跡している過程中、ユーザの瞼の閉合動作を計数するステップと、ユーザの瞼の閉合動作が第１回目の閉合動作である場合に、ユーザの眼球運動に合わせて表示インターフェースに現われた三次元ホログラフィック仮想オブジェクトを制御して回転させるステップを一時停止し、ユーザの眼球の復帰を待つステップと、ユーザの瞼の閉合動作が第２回目の閉合動作である場合に、ユーザの眼球運動に合わせて表示インターフェースに現われた三次元ホログラフィック仮想オブジェクトを制御して回転させるステップを再起動し、ユーザの瞼の閉合動作の計数値をリセットするステップと、を含む。
【００１６】
上述した技術的課題を解決するために、本発明の採用する技術的手段は、ユーザの眼に対する追跡を起動するための起動ユニットと、ユーザの眼球運動を追跡するための追跡ユニットと、ユーザの眼球運動に合わせて表示インターフェースに現われた三次元ホログラフィック仮想オブジェクトを制御して回転させるための制御ユニットと、ユーザの眼に対する追跡を終了するための終了ユニットとを含む眼追跡に基づく表示制御装置を提供することである。
【発明の効果】
【００１７】
本発明は、従来の技術と異なって、ユーザの眼に対する追跡を起動するステップと、ユーザの眼球運動を追跡するステップと、ユーザの眼球運動に合わせて表示インターフェースに現われた三次元ホログラフィック仮想オブジェクトを制御して回転させるステップとによって、ユーザによる表示インターフェースの三次元ホログラフィックオブジェクトの回転制御をより便利且つ素早くすることを有益な効果としている。
【図面の簡単な説明】
【００１８】
【図１】図１は本発明の第１実施例に係る眼追跡に基づく表示制御方法のフローチャートである。
【図２】図２は本発明の第２実施例に係る眼追跡に基づく表示制御方法のフローチャートである。
【図３】図３は図２における眼球と三次元ホログラフィック仮想オブジェクトの模式図である。
【図４】図４は図２に係る眼球によって三次元ホログラフィック仮想オブジェクトの回転を制御する模式図である。
【図５】図５は本発明の第３実施例に係る眼追跡に基づく表示制御方法のフローチャートである。
【図６】図６は図５に係る眼球によって三次元ホログラフィック仮想オブジェクトのズーミングを制御する模式図である。
【図７】図７は本発明の第４実施例に係る眼追跡に基づく表示制御装置の模式図である。
【発明を実施するための形態】
【００１９】
本発明の第１実施例に係る眼追跡に基づく表示制御方法のフローチャートである図１を参照し、この方法は以下のようなステップを含む。
【００２０】
ステップ１０１：ユーザの眼に対する追跡を起動する。
【００２１】
ユーザの眼に対する追跡を起動する方式としては、例えば、キーボードによってあるコマンドを入力したりマウスによってあるボタンをクリックしたりして眼追跡を起動するようなユーザの入力指令、又はユーザの体のある特定動作、例えば眼球のある特定動作の検出であってよい。
【００２２】
ステップ１０２：ユーザの眼球運動を追跡する。
【００２３】
ユーザの眼球の追跡について、カメラによって眼球の運動を検出し、瞳孔を中心点とし、この中心点の移動を検出するようにしてもよく、又は眼球における虹彩と強膜との割合を検出して眼球の運動状態を追跡するようにしてもよいが、眼球の追跡はカメラに限らず、専用の３Ｄメガネ又はその他の設備であってもよい。
【００２４】
ステップ１０３：ユーザの眼球運動に合わせて表示インターフェースに現われた三次元ホログラフィック仮想オブジェクトを制御して回転させる。
【００２５】
三次元ホログラフィックオブジェクトは、一般に工学的な３Ｄ製図でのオブジェクトであるが、３Ｄ写真、３Ｄゲームにおけるキャラクター又はその他の３Ｄ仮想物であってもよい。回転の方式について、眼球の移動方向に基づいて３Ｄオブジェクトの移動方向を判断するようになっており、例えば、眼球が左へ運動すれば、ユーザがオブジェクトのより左方の内容を見たいと判断し、この３Ｄ仮想物を右へ回転させる。
【００２６】
ステップ１０４：ユーザの眼に対する追跡を終了する。
【００２７】
ユーザの眼に対する追跡を終了するステップにユーザの眼に対する追跡を起動するステップに対応する方式を採用してよい。
【００２８】
従来の技術と異なって、本実施形態において、ユーザの瞼の開／閉状態を検出してユーザの眼に対する追跡を起動し、ユーザ眼球の運動に合わせて表示インターフェースに現われた三次元仮想物を制御して回転させることによって、ユーザによる表示インターフェースの三次元ホログラフィックオブジェクトの回転制御をより便利且つ素早くした。
【００２９】
本発明の第２実施例に係る眼追跡に基づく表示制御方法のフローチャートである図２を参照し、本実施に開示された眼追跡に基づく表示制御方法について、第１実施例に開示された眼追跡に基づく表示制御方法に基づいて詳しく説明する。本実施例に開示された方法は以下のステップを含む。
【００３０】
ステップ２０１：ユーザの瞼の開／閉状態を検出し、ユーザの瞼の開／閉状態が第１プリセット状態を満たした場合に、ユーザの眼に対する追跡を起動する。
【００３１】
ユーザの瞼の検出方式は本発明の第１実施形態と類似しており、人の瞼の開／閉状態ではそれぞれ異なる色を有し、ここで顔の眼部位の色に基づいて瞼の開／閉を判断できる。
【００３２】
第１プリセット状態は瞼の頻度がプリセット頻度閾値より大きいようになってよく、眼の瞼は一般に閉合頻度が非常に低いので、第１プリセット状態の瞼閉合頻度を比較的高い頻度に設定してもよく、例えば、瞼が一秒当たりに１回閉合すれば、第１プリセット状態を満たしていると考えられる。
【００３３】
第１プリセット状態は、ユーザの左目の瞼が開状態にあり且つユーザの右目の瞼が閉状態にあり、又はユーザの左目の瞼が閉状態にあり且つユーザの右目の瞼が開状態にある状態の少なくとも一方であってもよく、例えば、第１プリセット状態はユーザの左目の瞼が開状態にあり且つユーザの右目の瞼が閉状態にあるようになっており、ユーザの左目の瞼が開状態にあり且つユーザの右目の瞼が閉状態にある場合に、ユーザの眼に対する追跡を起動する。
【００３４】
ステップ２０２：ユーザの顔画像を取得する。
【００３５】
このステップはカメラ等の顔識別が可能な装置によって顔画像を取得することに適用されるが、例えば３Ｄメガネ等についてはメガネにおける特別な装置によって眼領域を取得すればよい。
【００３６】
ステップ２０３：顔画像から眼領域を識別する。
【００３７】
眼の色と皮膚には比較的大きい差異が存在するので、簡単な画像処理のみによって顔画像から眼領域を識別することが可能である。
【００３８】
ステップ２０４：眼領域において色差に基づいて強膜領域と虹彩領域を識別する。
【００３９】
図３に示すように、眼領域は表面から見れば大体白色である強膜領域３０１と黒色である虹彩領域３０２とに分けられており、色の違いに基づいて強膜領域３０１と虹彩領域３０２が判断しやすい。
【００４０】
ステップ２０５：ユーザの左目の虹彩領域と右目の虹彩領域との中心連結線を確定する。
【００４１】
ユーザの左目の虹彩領域の中心点３０３と右目の虹彩領域の中心点３０４（本実施形態に記載の左右はいずれもユーザに感知される左右を指す）とをそれぞれ確定し、中心点３０３と中心点３０４とを連結して中心連結線３０５を形成する。
【００４２】
ステップ２０６：三次元ホログラフィック仮想オブジェクトの回転軸を確定し、回転軸を巡って三次元ホログラフィック仮想オブジェクトを回転させる。
【００４３】
回転軸３０８は三次元ホログラフィック仮想オブジェクト３０６の質量中心３０７を通過し且つステップ２０５における中心連結線３０５に垂直であり、即ち、回転軸３０８が中心連結線３０５に垂直であり、三次元ホログラフィック仮想オブジェクト３０６が回転軸３０８を巡って回転する。
【００４４】
ステップ２０７：虹彩領域と眼領域との相対的な位置変化に応じてユーザの眼球運動を追跡する。
【００４５】
図４に示すように、虹彩領域４０１ａが眼領域４０２ａの中央に位置している時、三次元ホログラフィック仮想オブジェクト４０３ａが動かないように元の状態を保持する。虹彩領域４０１ｂが眼領域４０２ｂの左方に位置している時、ユーザが仮想物４０３ｂの左方をより見たいことが示され、三次元ホログラフィック仮想オブジェクト４０３ｂが右へ回転する。虹彩領域４０１ｃが眼領域４０２ｃの右方に位置している時、ユーザが仮想物４０３ｃの右方をより見たいことが示され、三次元ホログラフィック仮想オブジェクト４０３ｃが左へ回転する。
【００４６】
なお、ユーザの眼球運動に合わせて追跡している過程中、ユーザの瞼の閉合動作を計数する。ユーザの瞼の閉合動作が第１回目の閉合動作である場合に、ユーザの眼球運動に合わせて表示インターフェースに現われた三次元ホログラフィック仮想オブジェクトを制御して回転させるステップを一時停止し、ユーザの眼球の復帰を待つ。ユーザの瞼の閉合動作が第２回目の閉合動作である場合に、ユーザの眼球運動に合わせて表示インターフェースに現われた三次元三次元ホログラフィック仮想オブジェクトを制御して回転させるステップを再起動し、ユーザの瞼の閉合動作の計数値をリセットする。
【００４７】
ステップ２０８：ユーザの瞼の開／閉状態を検出し、ユーザの瞼の開／閉状態が第２プリセット状態を満たした場合に、ユーザの眼に対する追跡を終了する。
【００４８】
このステップの方式はステップ２０１と類似している。
【００４９】
第２プリセット状態は瞼の頻度がプリセット頻度閾値より大きいようになってよく、眼の瞼は一般に閉合頻度が非常に低いので、第２プリセット状態の瞼閉合頻度を第１プリセット状態の瞼閉合頻度と異なる比較的高い頻度に設定してもよく、例えば、瞼が一秒当たりに２回以上閉合すれば、第２プリセット状態を満たしていると考えられる。
【００５０】
第２プリセット状態は、ユーザの左目の瞼が開状態にあり且つユーザの右目の瞼が閉状態にあり、又はユーザの左目の瞼が閉状態にあり且つユーザの右目の瞼が開状態にある状態の少なくとも一方であってもよく、例えば、第２プリセット状態はユーザの左目の瞼が閉状態にあり且つユーザの右目の瞼が開状態にあるようになっており、ユーザの左目の瞼が閉状態にあり且つユーザの右目の瞼が開状態にある場合に、ユーザの眼に対する追跡を終了する。
【００５１】
従来の技術と異なって、本実施形態において、人の眼球における虹彩と強膜の位置を検出して、人の眼球の移動方向を判断して、表示インターフェースにおける三次元ホログラフィック仮想オブジェクトの回転を制御することによって、ユーザが同時にその他の操作を行うことができ、便利で素早く、ユーザエクスペリエンスが向上した。
【００５２】
本発明の第３実施例に係る眼追跡に基づく表示制御方法のフローチャートである図５を参照し、本実施に開示された眼追跡に基づく表示制御方法について、第１実施例に開示された眼追跡に基づく表示制御方法に基づいて詳しく説明する。本実施例に開示された方法は以下のステップを含む。
【００５３】
ステップ５０１：ユーザの瞼の開／閉状態を検出し、ユーザの瞼の開／閉状態が第１プリセット状態を満たした場合に、ユーザの眼に対する追跡を起動する。
【００５４】
ステップ５０２：ユーザの顔画像を取得する。
【００５５】
ステップ５０３：顔画像から眼領域を識別する。
【００５６】
ステップ５０１〜５０３は本発明の第２実施形態と同様であるので、ここで繰り返して説明しない。
【００５７】
ステップ５０４：ユーザの瞼にカバーされていない眼球の面積を検出する。
【００５８】
ユーザは、例えば一般に言われるように目を見張ったり細めたりするように瞼を移動することによって瞼にカバーされる眼球の面積を制御することができる。
【００５９】
ユーザの瞼にカバーされていない眼球の面積の変化に応じて三次元ホログラフィック仮想オブジェクトをズーミングするステップ５０５。
【００６０】
図６に示すように、ユーザの瞼にカバーされていない眼球の面積６０１ｂが大きくなった時に、三次元ホログラフィック仮想オブジェクト６０２ｂとユーザとの距離を大きくするが、ユーザの瞼にカバーされていない眼球の面積６０１ｃが小さくなった時に、三次元ホログラフィック仮想オブジェクト６０２ｃとユーザとの距離を小さくする。
【００６１】
ステップ５０６：ユーザの瞼の開／閉状態を検出し、ユーザの瞼の開／閉状態が第２プリセット状態を満たした場合に、ユーザの眼に対する追跡を終了する。
【００６２】
従来の技術と異なって、本実施形態において、人の眼球における瞼にカバーされていない部分の面積に合わせて表示インターフェースにおける三次元ホログラフィック仮想オブジェクトのズーミングを制御することによって、ユーザが同時にその他の操作を行うことができ、便利で素早く、更にユーザエクスペリエンスを配慮した。
【００６３】
なお、本発明の第２実施形態と第３実施形態における三次元ホログラフィック仮想オブジェクトに対する回転とズーミングの技術的手段は同一の実施形態での二つのステップであってよく、ここで繰り返して説明しない。
【００６４】
本発明の第４実施例に係る眼追跡に基づく表示制御装置の模式図である図７を参照し、この装置７００は、ユーザの眼に対する追跡を起動するための起動ユニット７０１と、ユーザの眼球運動を追跡するための追跡ユニット７０２と、ユーザの眼球運動に合わせて表示インターフェースに現われた三次元ホログラフィック仮想オブジェクト７０５を制御して回転させるための制御ユニット７０３と、ユーザの眼に対する追跡を終了するための終了ユニット７０４とを含む。
【００６５】
起動ユニット７０１と終了ユニット７０４はこの表示装置７００に集積されたものであってよいが、ユーザによって遠隔制御される移動端末であってもよく、更に表示装置７００におけるモジュールであってもよく、追跡ユニット７０２の検出した人の眼の情報に基づいて起動と終了操作を行う。
【００６６】
追跡ユニット７０２は表示装置７００に集積されたカメラ又は外部接続カメラであってよいが、専用の３Ｄメガネ又はその他の設備であってもよい。
【００６７】
制御ユニット７０３は追跡ユニット７０２の検出した眼球運動情報に基づいて表示インターフェースにおける仮想三次元ホログラフィックオブジェクト７０５の回転を制御する。
【００６８】
本実施形態は上述した各実施形態を実施する装置となっており、その具体的な実施ステップは第１実施形態〜第３実施形態と同様であり、ここで繰り返して説明しない。
【００６９】
従来の技術と異なって、本実施形態は、ユーザの瞼の開／閉状態を検出してユーザの眼に対する追跡を起動して、ユーザの眼球運動に合わせて表示インターフェースに現われた三次元ホログラフィック仮想オブジェクトを制御して回転させることによって、ユーザによる表示インターフェースの三次元ホログラフィックオブジェクトの回転制御をより便利且つ素早くする装置を提供する。
【００７０】
本発明の実施形態のみとして説明したが、それによって本発明の特許請求の範囲を限定する意図がなく、本発明の明細書及び添付図面の内容に基づいて行われた等効果の構造変更又は等効果のフロー変更、或いは直接又は間接的なその他の関連技術分野への適用は、すべて同じ理由から本発明の特許請求の範囲に含まれるものである。
【図１】
2016071835.tif 000003
【図２】
2016071835.tif 000004
【図３】
2016071835.tif 000005
【図４】
2016071835.tif 000006
【図５】
2016071835.tif 000007
【図６】
2016071835.tif 000008
【図７】
2016071835.tif 000009