(57)【要約】  新たな映像投影技術を提供すること。  本技術は、瞳孔の面積又は寸法を取得する瞳孔情報取得部と、瞳孔付近に集光されそして網膜に照射される映像表示光の出力を、前記瞳孔情報取得部により取得された瞳孔の面積又は寸法に基づき制御する出力制御部と、を備えている映像投影装置を提供する。また、本技術は、瞳孔の面積又は寸法を取得する瞳孔情報取得工程と、瞳孔付近に集光されそして網膜に照射される映像表示光の出力を、前記瞳孔情報取得工程において取得された瞳孔の面積又は寸法に基づき制御する出力制御工程と、前記出力制御工程において制御された出力で、網膜に映像表示光を照射する映像表示光出力工程とを含む映像投影方法も提供する。
2019146367.tif 000002
【特許請求の範囲】
【請求項１】
瞳孔の面積又は寸法を取得する瞳孔情報取得部と、
瞳孔付近に集光されそして網膜に照射される映像表示光の出力を、前記瞳孔情報取得部により取得された瞳孔の面積又は寸法に基づき制御する出力制御部と、
を備えている映像投影装置。
【請求項２】
前記出力制御部が、目的とする映像表示光輝度と前記瞳孔の面積又は寸法とに基づき、前記映像表示光の出力を決定する、請求項１に記載の映像投影装置。
【請求項３】
前記目的とする映像表示光輝度と、前記映像表示光の出力を前記瞳孔の面積又は寸法で除した値とが、所定の関係を満たすように、前記映像表示光の出力が決定される、請求項２に記載の映像投影装置。
【請求項４】
前記所定の関係が、
以下の式、
【数１】
2019146367.tif 000012
又は、
以下の式
【数２】
2019146367.tif 000013
で表される関係である、
（ここで、Ｌは目的とする映像表示光輝度であり、Ｃは調整係数であり、λは波長であり、Ｐは各波長での映像表示光出力であり、Ｋは各波長での視感度であり、ωは表示の見込み角であり、且つ、Ａは瞳孔寸法又は瞳孔面積である）
請求項３に記載の映像投影装置。
【請求項５】
前記出力制御部が、前記瞳孔の面積又は寸法の変化、外光照度の変化、及び外光コントラストの変化のうちの少なくとも一つの変化に応じて、前記映像表示光の出力を変化させる、請求項１に記載の映像投影装置。
【請求項６】
前記出力制御部が、前記瞳孔の面積又は寸法の変化に応じて前記映像表示光の出力を変化させるものであり、当該変化の前後の前記瞳孔の面積又は寸法に基づき前記映像表示光の出力を決定する、請求項５に記載の映像投影装置。
【請求項７】
前記出力制御部が、以下の式に基づき決定された映像表示光輝度を与えるように前記映像表示光の出力を制御する、
【数３】
2019146367.tif 000014
（ここで、L1、E1、A1、及びC1はそれぞれ、前記変化後の映像表示光輝度、外光照度、瞳孔の面積又は寸法、及び外光コントラストであり、L0、E0、A0、及びC0はそれぞれ、前記変化前の映像表示光輝度、外光照度、瞳孔の面積又は寸法、及び外光コントラストである）
請求項５に記載の映像投影装置。
【請求項８】
前記出力制御部が、前記目的とする映像表示光輝度を、注視点の明るさと当該明るさに対するコントラストとに基づき決定する、請求項２に記載の映像投影装置。
【請求項９】
前記瞳孔情報取得部が、前記瞳孔の位置情報を取得するものであり、且つ、前記瞳孔情報取得部が、当該位置情報に基づき、前記注視点を特定する、請求項８に記載の映像投影装置。
【請求項１０】
前記瞳孔情報取得部が、赤外光カメラを含む、請求項９に記載の映像投影装置。
【請求項１１】
注視点情報取得部をさらに備えており、当該注視点情報取得部が、前記注視点の明るさを取得する、請求項８に記載の映像投影装置。
【請求項１２】
前記出力制御部により制御された出力で網膜に映像表示光を照射する映像表示光照射部をさらに備えている、請求項１に記載の映像投影装置。
【請求項１３】
前記映像表示光照射部が、網膜投影方式又は網膜走査方式で映像表示光を照射する、請求項１２に記載の映像投影装置。
【請求項１４】
前記映像表示光照射部が、レーザ光を照明光源とする、請求項１２に記載の映像投影装置。
【請求項１５】
ヘッドマウントディスプレイである、請求項１に記載の映像投影装置。
【請求項１６】
アイウェアディスプレイである、請求項１に記載の映像投影装置。
【請求項１７】
投影される映像が、外界の光景に重畳されているように表示される、請求項１に記載の映像投影装置。
【請求項１８】
瞳孔の面積又は寸法を取得する瞳孔情報取得工程と、
瞳孔付近に集光されそして網膜に照射される映像表示光の出力を、前記瞳孔情報取得工程において取得された瞳孔の面積又は寸法に基づき制御する出力制御工程と、
前記出力制御工程において制御された出力で、網膜に映像表示光を照射する映像表示光出力工程と
を含む映像投影方法。
【請求項１９】
瞳孔の面積又は寸法を取得する瞳孔情報取得工程と、
瞳孔付近に集光されそして網膜に照射される映像表示光の出力を、前記瞳孔情報取得工程において取得された瞳孔の面積又は寸法に基づき制御する出力制御工程と、
を含む映像表示光出力制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本技術は、映像投影装置、映像投影方法、及び映像表示光出力制御方法に関する。より詳細には、映像表示光が瞳孔付近に集光されそして網膜に照射される映像投影装置及び映像投影方法、並びに、瞳孔付近に集光されそして網膜に照射される映像表示光の出力を制御する映像表示光出力制御方法に関する。
【背景技術】
【０００２】
近年、例えば現実の風景などの外界の光景に映像を重ねて表示する技術に注目が集まっている。当該技術は、拡張現実（ＡＲ）技術とも呼ばれる。この技術を利用した製品の一つとして、ヘッドマウントディスプレイが挙げられる。ヘッドマウントディスプレイは、ユーザの頭部に装着して使用される。ヘッドマウントディスプレイを用いた映像表示方法では、例えば外界からの光に加えてヘッドマウントディスプレイからの光がユーザの眼に照射されることで、外界の像に映像が重畳的に表示される。【０００３】
例えば、下記特許文献１には、透過型映像表示装置に関する発明が記載されている。当該透過型映像表示装置は、映像を表示する映像表示部と、前記映像を使用者の眼に導く光学手段と、外光の透過率を可変し、前記使用者の眼に達する外光の光強度を調整する調光フィルタと、前記使用者の眼の瞳孔を撮像する瞳孔撮像手段と、前記瞳孔撮像手段からの撮像信号に基づいて前記瞳孔の瞳孔径を算出し、算出した瞳孔径の値に基づいて、前記調光フィルタの透過率と前記映像表示部の映像の光強度をそれぞれ調整する制御部と、を有する。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１７−９７０９８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ＡＲ技術への関心が高まるなかで、より良い映像投影技法が求められている。例えば、より鮮明な映像をユーザに提示すること、及び、より見やすい映像をユーザに提示することが求められている。【０００６】
本技術は、新たな映像投影技術を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明者らは、特定の構成を有する映像投影技術によって、ユーザにとって適切な明るさを有し且つ鮮明な映像を外界の風景に重畳して表示することができることを見出した。【０００８】
すなわち、本技術は、瞳孔の面積又は寸法を取得する瞳孔情報取得部と、
瞳孔付近に集光されそして網膜に照射される映像表示光の出力を、前記瞳孔情報取得部により取得された瞳孔の面積又は寸法に基づき制御する出力制御部と、
を備えている映像投影装置を提供する。
本技術の一つの実施態様に従い、前記出力制御部が、目的とする映像表示光輝度と前記瞳孔の面積又は寸法とに基づき、前記映像表示光の出力を決定するものであってよい。
本技術の一つの実施態様に従い、前記目的とする映像表示光輝度と、前記映像表示光の出力を前記瞳孔の面積又は寸法で除した値とが、所定の関係を満たすように、前記映像表示光の出力が決定されうる。
本技術の一つの実施態様に従い、前記所定の関係が、
以下の式、
2019146367.tif 000003
又は、
以下の式
2019146367.tif 000004
（ここで、Ｌは目的とする映像表示光輝度であり、Ｃは調整係数であり、λは波長であり、Ｐは各波長での映像表示光出力であり、Ｋは各波長での視感度であり、ωは表示の見込み角であり、且つ、Ａは瞳孔寸法又は瞳孔面積である）
で表される関係であってよい。
本技術の他の実施態様に従い、前記出力制御部が、前記瞳孔の面積又は寸法の変化、外光照度の変化、及び外光コントラストの変化のうちの少なくとも一つの変化に応じて、前記映像表示光の出力を変化させるものでありうる。
本技術の他の実施態様に従い、前記出力制御部が、前記瞳孔の面積又は寸法の変化に応じて前記映像表示光の出力を変化させるものであり、当該変化の前後の前記瞳孔の面積又は寸法に基づき前記映像表示光の出力を決定しうる。
本技術の他の実施態様に従い、前記出力制御部が、前記映像表示光の出力を以下の式に基づき決定するものでありうる。
2019146367.tif 000005
（ここで、L1、E1、A1、及びC1はそれぞれ、前記変化後の映像表示光輝度、外光照度、瞳孔の面積又は寸法、及び外光コントラストであり、L0、E0、A0、及びC0はそれぞれ、前記変化前の映像表示光輝度、外光照度、瞳孔の面積又は寸法、及び外光コントラストである）
本技術の一つの実施態様に従い、前記出力制御部が、前記目的とする映像表示光輝度を、注視点の明るさと当該明るさに対するコントラストとに基づき決定しうる。
本技術の一つの実施態様に従い、前記瞳孔情報取得部が、前記瞳孔の位置情報を取得するものであり、且つ、前記瞳孔情報取得部が、当該位置情報に基づき、前記注視点を特定しうる。
本技術の一つの実施態様に従い、前記瞳孔情報取得部が、赤外光カメラを含みうる。
本技術の一つの実施態様に従い、本技術の映像投影装置は、注視点情報取得部をさらに備えており、当該注視点情報取得部が、前記注視点の明るさを取得しうる。
本技術の一つの実施態様に従い、本技術の映像投影装置は、前記出力制御部により制御された出力で網膜に映像表示光を照射する映像表示光照射部をさらに備えていてよい。
本技術の一つの実施態様に従い、前記映像表示光照射部が、網膜投影方式又は網膜走査方式で映像表示光を照射するものでありうる。
本技術の一つの実施態様に従い、前記映像表示光照射部が、レーザ光を照明光源としうる。
本技術の一つの実施態様に従い、本技術の映像投影装置は、ヘッドマウントディスプレイでありうる。
本技術の一つの実施態様に従い、本技術の映像投影装置は、アイウェアディスプレイでありうる。
本技術の一つの実施態様に従い、投影される映像が、外界の光景に重畳されているように表示されてよい。【０００９】
また、本技術は、瞳孔の面積又は寸法を取得する瞳孔情報取得工程と、
瞳孔付近に集光されそして網膜に照射される映像表示光の出力を、前記瞳孔情報取得工程において取得された瞳孔の面積又は寸法に基づき制御する出力制御工程と、
前記出力制御工程において制御された出力で、網膜に映像表示光を照射する映像表示光出力工程と
を含む映像投影方法を提供する。【００１０】
また、本技術は、瞳孔の面積又は寸法を取得する瞳孔情報取得工程と、
瞳孔付近に集光されそして網膜に照射される映像表示光の出力を、前記瞳孔情報取得工程において取得された瞳孔の面積又は寸法に基づき制御する出力制御工程と、
を含む映像表示光出力制御方法を提供する。
【発明の効果】
【００１１】
本技術により、適切な明るさを有し且つ鮮明である映像を外界の風景に重ねて表示することができる。なお、本技術により奏される効果は、ここに記載された効果に必ずしも限定されるものではなく、本明細書中に記載されたいずれかの効果であってもよい。
【図面の簡単な説明】
【００１２】
【図１】映像表示光を水晶体で屈折させて網膜上で結像させる映像投影技法を説明するための模式図である。
【図２】映像表示光を水晶体で屈折させて網膜上で結像させる映像投影技法を説明するための模式図である。
【図３】本技術において採用される映像投影方式を説明するための模式図である。
【図４】本技術において採用される映像投影方式を説明するための模式図である。
【図５】本技術に従う映像投影装置の一例のブロック図である。
【図６】本技術に従う映像投影方法のフローの一例を示す図である。
【図７】本技術に従う映像投影方法のフローの一例を示す図である。
【図８】本技術に従う映像表示光出力制御方法のフローの一例を示す図である。
【図９】本技術に従う映像表示光出力制御方法のフローの一例を示す図である。
【図１０】本技術に従う映像投影装置の概略的な構成の一例を示す図である。
【図１１】本技術に従う映像投影装置の具体的な構成例を示す図である。
【図１２】本技術に従う映像投影装置の具体的な構成例を示す図である。
【図１３】網膜走査方式の映像表示光照射部の一例を示す図である。
【図１４】網膜投影方式の映像表示光照射部の一例を示す図である。
【発明を実施するための形態】
【００１３】
以下、本技術を実施するための好適な形態について説明する。なお、以下に説明する実施形態は、本技術の代表的な実施形態を示したものであり、本技術の範囲がこれらの実施形態に限定されることはない。なお、本技術の説明は以下の順序で行う。
１．第１の実施形態（映像投影装置）
（１）第１の実施形態の説明
（２）第１の実施形態の第１の例（映像投影装置）
（３）第１の実施形態の第２の例（出力制御部による映像表示光の出力制御）
（４）第１の実施形態の第３の例（出力制御部による映像表示光の出力変化）
２．第２の実施形態（映像投影方法）
（１）第２の実施形態の説明
（２）第２の実施形態の第１の例（映像投影方法）
（３）第２の実施形態の第２の例（映像投影方法）
３．第３の実施形態（映像表示光出力制御方法）
（１）第３の実施形態の説明
（２）第３の実施形態の第１の例（映像表示光出力制御方法）
（３）第３の実施形態の第２の例（映像表示光出力制御方法）
４．第４の実施形態（プログラム）
５．装置の構成例
【００１４】
１．第１の実施形態（映像投影装置）
【００１５】
（１）第１の実施形態の説明
【００１６】
本技術に従う映像投影装置は、瞳孔の面積又は寸法を取得する瞳孔情報取得部と、瞳孔付近に集光されそして網膜に照射される映像表示光の出力を、前記瞳孔情報取得部により取得された瞳孔の面積又は寸法に基づき制御する出力制御部と、を備えている。
本技術において、映像表示光は、瞳孔付近に集光されそして網膜に照射される。すなわち、本技術に従う映像投影装置は、いわゆるマクスウェル視で映像をユーザに提示する。本技術に従い、瞳孔付近に集光されそして網膜に照射される映像表示光の出力を瞳孔の面積又は寸法に基づき制御することで、適切な明るさを有し且つ鮮明である映像を外界の風景に重畳することができる。
本技術において、映像表示光は瞳孔付近で集光されてよく、例えば瞳孔上で集光されてもよく又は光軸方向に瞳孔から数ｍｍ〜十数ｍｍ程度（例えば１ｍｍ〜２０ｍｍ、特には２ｍｍ〜１５ｍｍ）ずれてもよい。後者のとおり焦点が瞳孔上になくても、マックスウェル視を実現することができる。焦点を光軸方向にずらすことで、映像がずれても、ユーザが映像を失いにくくすることができる。前記映像表示光は、より具体的には、瞳孔上、水晶体レンズ内、又は、角膜表面と瞳孔との間において集光されうる。
【００１７】
一般的な映像投影技法では、映像表示光を水晶体で屈折させて網膜上で結像させるという方式を採用している。当該方式を説明する模式図の一例を図１に示す。図１に示されるとおり、ろうそくの像を形成する映像表示光は、ディスプレイ１１によって照射され、光学系（レンズ）１２によって屈折され、そして眼球１４の水晶体レンズ１３に到達する。当該映像表示光は、水晶体レンズ１３によって屈折され、そして、網膜１５上で結像する。例えば上記特許文献１に記載の装置も、当該方式を前提としている。
【００１８】
上記方式による映像投影装置の場合、例えば図２に示されるとおり、マイクロパネル２１から照射された映像表示光は、レンズ２２により屈折され、そして、径の大きな光、特には平行光として水晶体レンズ２３に到達する。この方式による映像投影において、映像焦点は一点に固定されており、映像から水晶体レンズ２３までの距離ｄ１は固定されている。そこで、映像を鮮明に認識するためには、水晶体レンズ２３の焦点距離を調整する必要がある。そのため、ユーザの水晶体レンズ２３の状態によっては、映像を鮮明に見ることができない場合がある。
また、上記映像投影技法では、ユーザの瞳孔径によっても、ユーザが見る映像に変化が生じる。ユーザの瞳孔径は、水晶体レンズの焦点距離及び／又は注視の度合いによって変化する。上記映像投影技法では、ユーザの瞳孔径が変化すると、同じ映像表示光であっても、網膜に到達する光量が変化し、ユーザに提示される映像光強度も変化する。そのため、ユーザが認識する映像が安定しない。
【００１９】
一方、本技術では、映像表示光が水晶体レンズの中心を通過し、そして、網膜に照射されるという映像投影方式を採用している。当該方式を説明する模式図を図３に示す。図３に示されるとおり、ろうそくの像を形成する映像表示光３３は、例えば光源３１から出力されたバックライトによってディスプレイ３２を照射することによって生成される。当該映像表示光３３が、光学系（例えばレンズ）３４によって、瞳孔付近に集光するように（例えば水晶体レンズの中心３６を通るように）屈折される。レンズの中心を通る光は、レンズによって屈折されない。そのため、当該映像表示光は、水晶体レンズ３５によって屈折されることなく、網膜３８上に到達する。
【００２０】
本技術では、例えば図４に示されるとおり、映像表示光照射部４１から照射された映像表示光は、光学系（例えばハーフミラー）４２により反射され、そして、水晶体レンズ４４に到達する。当該映像表示光は、瞳孔付近で集光し、すなわち水晶体レンズ４４の中心４３を通過する。そのため、当該映像表示光は、水晶体レンズ４４によって屈折されずに、網膜４５に到達する。その結果、水晶体レンズ４４が焦点距離を調整することができなくても、ユーザが認識する映像の鮮明さは大きな影響を受けない。
また、本技術では、映像表示光は瞳孔付近の１点を通るので、瞳孔径が変化しても、網膜に到達する光量が変化しない。そのため、ユーザが認識する映像が安定する。
加えて、本技術において採用する方式では、どの焦点距離においても映像表示光が焦点を結ぶ。例えば、図４における、距離ｄ２及びｄ３のいずれにおいても、映像表示光は焦点を結ぶ。
【００２１】
また、本技術において採用される映像投影方式では、上記のとおり、瞳孔径が変化しても、網膜に到達する光量が変化しない。例えば外界が明るくなった場合、瞳孔径が小さくなっても、網膜に到達する光量が変化しない。その結果、適切な映像表示光輝度が得られない場合がある。そこで、本技術では、映像表示光の出力を、前記瞳孔情報取得部により取得された瞳孔の面積又は寸法に基づき制御する。その結果、瞳孔の面積又は寸法に基づき映像表示光輝度が制御されるので、適切な輝度を有する映像をユーザに提示することが可能である。
【００２２】
（２）第１の実施形態の第１の例（映像投影装置）
【００２３】
以下で、本技術に従う映像投影装置の例及び当該映像投影装置における映像表示光の出力制御の例を、図５を参照しながら説明する。図５は、本技術に従う映像投影装置の一例のブロック図である。
【００２４】
図５に示されるとおり、映像投影装置１００は、瞳孔情報取得部１０１、注視点情報取得部１０２、制御部１１０、及び映像表示光照射部１０４を備えている。制御部１１０は、出力制御部１０３及び映像制御部１１１を含む。映像投影装置１００はさらに、通信インタフェース１１３及び記憶部１１４を備えている。
【００２５】
映像投影装置１００は、映像表示光を瞳孔付近で集光しそして網膜に照射することで、ユーザに映像を提示する装置である。例えば、本技術の映像投影装置として、例えばアイウェアディスプレイ及びヘッドマウントディスプレイを挙げることができるが、これらに限定されない。又は、本技術の映像投影装置は、メガネに装着して用いられるものであってもよい。本技術の映像投影装置により投影される映像は、例えば外界の光景に重畳されているように表示されてよい。又は、本技術の映像投影装置により投影される映像は、他の映像投影装置により投影される映像に重畳されているように表示されてもよい。
【００２６】
瞳孔情報取得部１０１は、瞳孔情報、例えば瞳孔の面積、寸法、位置、及び形状など、を取得しうる。瞳孔情報取得部は、このような情報を取得できるものであればよく、当業者により適宜選択されてよい。例えば、瞳孔情報取得部１０１は、眼球表面を撮像できるように構成された撮像素子を含みうる。
瞳孔情報取得部１０１は、例えばＩＲ（赤外線）光源とＩＲカメラとの組合せを含みうる。ＩＲ光源は、赤外線をユーザの眼球表面に照射するように配置されうる。ＩＲカメラは、赤外線が照射された眼球表面を撮像することができるように配置されうる。ＩＲ光源とＩＲカメラとの組合せを用いることで、外界の風景からの光に対する影響を抑制しつつ、瞳孔情報を取得することができる。また、明るい場所だけでなく、暗い場所においても、瞳孔情報を正確に取得することができる。
瞳孔情報取得部は、例えばＣＣＤ又はＣＭＯＳなどの撮像素子を含んでもよい。これらの撮像素子によっても、瞳孔情報を取得することができる。
【００２７】
瞳孔情報取得部１０１は、撮像された瞳孔の画像に基づき、瞳孔情報、例えば瞳孔の面積、寸法、位置、及び形状などを取得しうる。瞳孔情報は、撮像された画像に対して画像処理を行うことにより取得されてよい。
例えば瞳孔面積は、瞳孔部分に対応する画素数をカウントすることにより取得されてよい。
例えば瞳孔寸法（例えば直径又は外周長など）は、例えば撮像された画像に基づき決定されうる。また、決定された瞳孔寸法に基づき、瞳孔面積が算出されてもよい。
【００２８】
注視点情報取得部１０２は、本技術に従う映像投影装置のユーザの注視点に関する情報を取得しうる。注視点情報として、例えば、ユーザの注視点の位置及び当該位置における明るさを挙げることができる。
注視点情報取得部１０２は、ユーザの注視点に関する情報を取得することができる構成要素を含みうる。当該構成要素として、例えば撮像素子を挙げることができる。撮像素子は、例えばＣＣＤ又はＣＭＯＳでありうる。当該撮像素子によって、注視点を含む外界風景を撮像し、得られた画像データから、目的とする注視点情報が抽出されうる。
【００２９】
注視点の位置は、当業者に既知の手法により取得されてよい。例えば、前記瞳孔情報取得部１０１により取得された瞳孔の位置情報から、各眼球の視線方向を決定することができる。例えば右目の瞳孔が正面を向いているときよりも内寄りに１ｍｍズレた位置にいる場合、眼球の半径を１２ｍｍとすると、視線方向は、正面方向に対してａｔａｎ（１／１２）≒４．８ｄｅｇ内向きの角度を形成する。左目の瞳孔についても同様に、視線方向の正面方向に対して形成する角度を計算する。計算された両目の視線方向に基づき、三角測量的に注視点の位置を決定することができる。
また、前記瞳孔情報取得部１０１が片方の眼の瞳孔情報のみを取得することができる構成の場合、例えば眼球の動きに基づき注視点の位置を推定することによって、注視点の位置が取得されてもよい。当該推定の方法として、当業者に既知の技法が用いられてよい。
なお、注視点の位置は、瞳孔情報取得部により取得されてもよい。
注視点の位置における明るさは、注視点情報取得部１０２により撮像された画像中の注視点の位置における画像情報から取得することができる。例えば、注視点情報取得部１０２に含まれる撮像素子が、外界風景を撮像し、当該撮像素子によって撮像された画像中の当該注視点の位置における画像データから、当該注視点の位置における明るさに関するデータが取得されうる。
注視点の明るさは、例えば外界に向けられた照度センサによって取得されてもよく、又は、注視点の明るさは、観察者の瞳孔径に基づき推定又は算出されてもよい。注視点の明るさは、例えば映画に字幕の映像を重畳する場合など、別の映像光へ本技術に従い映像を重畳する場合には、当該別の映像光の明るさに基づき注視点の明るさが取得されてもよい。
【００３０】
制御部１１０は、例えば映像表示光の出力を制御する出力制御部１０３及び表示されるべき映像を制御する映像制御部１１１を含みうる。
【００３１】
出力制御部１０３は、例えば瞳孔情報取得部１０１により取得された瞳孔情報に基づき、映像表示光の出力を制御する。映像表示光は、瞳孔付近で集光されそして網膜に照射されるものである。
当該出力の制御において、注視点情報取得部１０２により取得された注視点情報が参照されてもよい。例えば、注視点情報として注視点の明るさと当該明るさに対するコントラストとが用いられうる。すなわち、一つの実施態様において、出力制御部１０３は、目的とする映像表示光輝度を、注視点の明るさと当該明るさに対するコントラストとに基づき決定しうる。
出力制御部１０３による映像表示光の出力制御の例は、以下「（３）第１の実施形態の第２の例（出力制御部による映像表示光の出力制御）」及び「（４）第１の実施形態の第３の例（出力制御部による映像表示光の出力変化）」にて詳述する。
【００３２】
映像制御部１１１は、記憶部１１４に格納されている映像データ又は通信インタフェース１１３を介して映像データを取得しうる。映像制御部１１１は、当該映像データに基づき、映像表示光照射部１０４に映像表示光を出力させうる。当該映像表示光の出力が、本技術の映像投影装置１００において、出力制御部１０３により制御される。
【００３３】
映像表示光照射部１０４は、制御部１１０、特には出力制御部１０３により制御された出力で映像表示光を網膜に照射する。映像表示光は、マクスウェル視によりユーザに映像を提示することができるものであればよい。例えば、映像表示光として、レーザ光を挙げることができる。また、映像表示光は、ＬＥＤ又はＣＲＴにより照射される光であってもよい。
映像表示光照射部１０４により照射される映像表示光のビーム直径は、瞳孔径を考慮して決定又は調節されてよい。当該ビーム直径は、例えば５ｍｍ以下、好ましくは３ｍｍ以下、より好ましくは２ｍｍ以下、さらにより好ましくは０．７ｍｍ以下でありうる。
【００３４】
映像表示光照射部１０４は、映像表示光照射部１０４により照射された映像表示光を、瞳孔を通じて網膜に到達させるための光学系を含みうる。光学系は、例えば映像投影装置１００の構造及び／又は映像表示光の照射方式によって当業者により適宜設定されてよい。
映像表示光照射部１０４は、マクスウェル視での映像表示光の照射を、例えば網膜走査方式又は網膜投影方式で行いうる。これらの方式により映像表示光を照射するための映像表示光照射装置は、当業者に知られている。本技術において、当業者に既知の映像表示光照射装置が用いられてよい。
【００３５】
網膜走査方式の映像表示光照射部の一例を、図１３を参照して以下で説明する。図１３は、網膜走査方式の映像表示光照射部１３００の構成を表す模式図である。
図１３に示されるとおり、光源部１３０１からレーザ光１３０２が出力される。レーザ光１３０２は、例えば赤、緑、及び青のレーザ光からなる１本の光束として出力されうる。出力されたレーザ光１３０２は、光走査部１３０３によって、二次元的に走査されうる。当該走査されたレーザ光１３０２は、接眼光学系（例えばハーフミラー）１３０４に向かって拡がりうる。拡がったレーザ光１３０２の方向が、接眼光学系１３０４によって、ユーザの瞳孔１３０５上で集光するように変更する。入射する際の入射角を高速に変化させることで、網膜１３０６上に映像が表示される。網膜走査方式の映像表示光照射部の構成としては、当業者に既知の構成が採用されてよい。例えば、光走査部１３０３の構成要素の一つとしてＭＥＭＳミラーを採用することで、レーザ光の方向を、網膜上に映像が形成されるように、高速に移動させることができる。
【００３６】
網膜投影方式の映像表示光照射部の一例を、図１４を参照して以下で説明する。図１４は、網膜投影方式の映像表示光照射部１４００の構成を表す模式図である。
図１４に示されるとおり、ディスプレイ（例えば液晶表示素子）１４０１から出力された平行光が、レンズ１４０２によって屈折される。屈折された光のうち、光学フィルタ１４０３によって所望の光のみを、レンズ１４０４へと進行させる。レンズ１４０４を通過した光が、接眼光学系１４０５によって、ユーザの瞳孔１４０６上で集光するように進行する。その結果、網膜１４０７上に映像が表示される。
【００３７】
通信インタフェース１１３は、映像投影装置１００の外部から映像データを取得するために用いられうる。例えば、映像投影装置１００は、通信インタフェース１１３を介して、映像投影装置１００以外の装置又は通信ネットワークから、有線又は無線で映像データを取得しうる。通信インタフェース１１３として、当業者に既知の手段が用いられてよい。
【００３８】
記憶部１１４は、本技術の装置がユーザに提示する映像を形成するための映像データを格納しうる。記憶部１１４は、例えば通信インタフェース１１３により取得された映像データを一時的に格納してもよく、又は、恒常的に映像投影装置１００に保持されるべき映像データを格納してもよい。記憶部１１４として、当業者に既知の手段が用いられてよい。
【００３９】
（３）第１の実施形態の第２の例（出力制御部による映像表示光の出力制御）
本技術の一つの実施態様に従い、出力制御部１０３は、例えば目的とする映像表示光輝度と前記瞳孔の面積又は寸法とに基づき、前記映像表示光の出力を決定しうる。これにより、適切な明るさの映像をユーザに提示することができる。当該目的とする映像表示光輝度は、例えば提示されるべき映像をユーザが視認可能な程度の輝度であってよく、好ましくは提示されるべき映像を外界の風景からユーザが区別することができる程度の輝度であってよく、より好ましくは外界の風景の明るさに対して適切なコントラストを有する映像が提示される可能とする輝度でありうる。
例えば、出力制御部１０３は、前記目的とする映像表示光輝度と、前記映像表示光の出力を前記瞳孔の面積又は寸法で除した値とが、所定の関係を満たすように、前記映像表示光の出力を決定する。当該所定の関係を満たすように映像表示光の出力を制御することで、より適切な明るさで映像がユーザに提示される。
前記映像表示光の出力は、例えば各波長における映像表示光の出力と各波長における視感度との積の総和又は積分でありうる。当該総和又は積分を前記瞳孔の面積又は寸法で除した値が映像表示光輝度との間で所定の関係を満たすように、映像表示光の出力は調整されてよい。例えば当該総和又は積分を前記瞳孔の面積又は寸法で除した値が映像表示光輝度と等しくなるように、若しくは、当該総和又は積分を前記瞳孔の面積又は寸法で除した値に所定の調整係数を乗じた値が映像表示光輝度と等しくなるように、映像表示光の出力は調整されうる。このように、映像表示光の出力を調整することで、好ましい明るさの映像をユーザに提示することができる。
前記所定の関係を満たすように映像表示光の出力を調整することは、当業者に既知の手段を用いて行われてよい。
【００４０】
前記所定の関係は、
例えば以下の式、
【数１】
2019146367.tif 000006
又は、
以下の式
【数２】
2019146367.tif 000007
（ここで、Ｌ［ｃｄ／ｍ２］は目的とする映像表示光輝度であり、Ｃは調整係数であり、λ［ｎｍ］は波長であり、Ｐ［Ｗ］は各波長での映像表示光出力であり、Ｋは各波長での視感度であり、ω［ｓｔｒ］は表示の見込み角であり、Ａ［ｍ又はｍ２］は瞳孔寸法又は瞳孔面積である）
で表される関係である。
【００４１】
上記式において、Ｌ［ｃｄ／ｍ２］は、目的とする映像表示光輝度である。当該目的とする映像表示光輝度は、例えば外界の風景及び／又はユーザに提示されるべき映像によって、適宜設定されてよい。前記目的とする映像表示光輝度は、例えば注視点情報取得部１０２により取得された注視点情報に基づき設定されうる。具体的には、前記目的とする映像表示光輝度は、例えばユーザの注視点の位置における明るさに基づき設定されてよく、より好ましくは当該明るさに対して必要なコントラストを与えるのに必要な輝度が、映像表示光輝度として採用されうる。当該コントラストは、例えば外界の風景及び／又はユーザに提示されるべき映像によって、適宜設定されてよい。注視点の明るさ：映像表示光輝度のコントラストは例えば、１：１〜１：５０、１：１〜１：３０、１：１〜１：２０、又は１：１〜１：１０でありうる。例えば注視点の明るさが１００ｃｄ／ｍ２であり且つ１：１０のコントラストが必要な場合は、映像表示光輝度は、１０００ｃｄ／ｍ２である。
【００４２】
上記式において、Ｃは例えば１であってよい。すなわち、調整係数による調整が行われなくてもよい。又は、本技術の装置の構成要素に応じて、Ｃとして１以外の値が用いられてもよい。具体的には、本技術の装置の構成要素の有する光学的な特性に基づく調整係数がＣとして用いられてよい。より具体的には、本技術の装置において、外界の風景からの光がガラスを通じてユーザに到達する場合（具体的には、外界の風景からの光が、メガネのガラスを透過してユーザに到達する場合）、当該ガラスの透過率（すなわち、重畳される外界風景の明るさの減衰率）に基づく値がＣとして採用されてよい。当該透過率自体がＣとして採用されてもよい。代替的には、本技術の装置において、映像表示光が光学系を介してユーザの眼に到達する場合、当該光学系の効率に基づく値がＣとして採用されてよい。当該光学系の効率自体がＣとして採用されてもよい。本技術において、前記ガラスの透過率及び光学系の効率の両方に基づく値がＣとして採用されてもよい。
【００４３】
上記式において、λは映像表示光に含まれる光の波長でありうる。すなわち、映像表示光の出力と視感度との積を当該光の波長の範囲にわたって足し合わせた値（総和）又は当該積を当該光の波長の範囲について積分して得られた値が、上記式において利用される。
上記式において、Ｐは各波長での映像表示光出力であり、且つ、Ｋは各波長での視感度である。映像表示光は通常は種々の波長の光を含むので、各波長の映像表示光出力及び視感度の積についての積分又は総和を利用することが好ましい。
【００４４】
上記式において、ωは表示の見込み角である。すなわち、ωは、瞳孔付近で集光されそして網膜に照射される映像表示光の、瞳孔付近の集光点に対する立体角である。
上記式において、Ａは瞳孔寸法又は瞳孔面積である。
【００４５】
上記特許文献１に記載の透過型映像表示装置は、ユーザの瞳孔径の値に基づき、調光フィルタの透過率及び映像の光強度を調整する。より具体的には、当該瞳孔径の値から、外界の照度を推定し、映像が当該照度に対して適切なコントラストを有するように、調光フィルタの透過率及び映像の光強度が調整される。例えば、外光照度が１０倍になった場合は、ユーザに提示される映像の明るさを１０倍にするか、外光を減じる調光フィルタの透過率を１／１０にするか、又は映像の明るさ及び調光フィルタの透過率を同時に調整することにより、目に入る外光と映像光の照度比が一定に保たれる。
しかしながら、上記特許文献１に記載の透過型映像表示装置は、映像表示光を水晶体で屈折させて網膜上で結像させるという方式を前提としたものである。すなわち、上記特許文献１に記載の上記調整は、外光の網膜への到達量及び映像光の網膜への到達量いずれもが瞳孔面積の変化に応じて変化することを前提としたものである。上記特許文献１に記載の調整は、マクスウェル視に基づく映像投影装置には適用できない。例えば、外界の照度が１０倍になり、それに応じて瞳孔面積が０．４倍になったときには、外界から網膜に照射される光の強度は１０ｘ０．４＝４倍となるのに対し、映像表示光の強度は瞳孔面積に影響されない。したがって、外光照度の変化に応じて、映像表示光の強度を１０倍にした場合、強度比は１０／４＝２．５倍となり、外光に対して明るすぎる映像をユーザに提示することになってしまう。
本技術に従い映像表示光の出力を調整することによって、外光に対して明るすぎる映像をユーザに提示することを防ぐことができる。
【００４６】
（４）第１の実施形態の第３の例（出力制御部による映像表示光の出力変化）
本技術の他の実施態様に従い、出力制御部１０３は、例えば前記瞳孔の面積又は寸法の変化、外光照度の変化、及び外光コントラストの変化のうちの少なくとも一つの変化に応じて、前記映像表示光の出力を変化させる。これにより、外界の風景の変化に応じて、映像表示光の出力を適切な明るさに変更することができる。前記変化後の映像表示光の出力は、例えば提示されるべき映像をユーザが視認可能な程度の輝度をもたらす出力であってよく、好ましくは提示されるべき映像を外界の風景からユーザが区別することができる程度の輝度をもたらす出力であってよく、より好ましくは外界の風景の明るさに対して適切なコントラストを有する映像が提示される可能とする輝度をもたらす出力でありうる。
例えば、出力制御部１０３は、前記瞳孔の面積又は寸法の変化に応じて前記映像表示光の出力を変化させるものであり、且つ、当該変化の前後の前記瞳孔の面積又は寸法に基づき前記映像表示光の出力を決定する。このように映像表示光の出力が決定されることで、外界の風景の変化に応じて、映像の明るさをユーザにとって適切な明るさに変化させることができる。
例えば外界風景が変化した場合、変化前後の外光照度の比、変化前後の外光コントラストの比、及び変化前後の瞳孔の面積又は寸法の比のうちから選ばれる少なくとも一つの比（又は二つ若しくは三つ）に基づき設定された映像表示光輝度を達成するように、前記映像表示光の出力は制御される。このように、映像表示光の出力を調整することで、外界風景が変化しても、好ましい明るさの映像をユーザに提示することができる。
【００４７】
前記映像表示光輝度は、例えば以下の式に基づき設定されうる。
【数３】
2019146367.tif 000008
（ここで、L1、E1、A1、及びC1はそれぞれ、前記変化後の映像表示光輝度、外光照度、瞳孔の面積又は寸法、及び外光コントラストであり、L0、E0、A0、及びC0はそれぞれ、前記変化前の映像表示光輝度、外光照度、瞳孔の面積又は寸法、及び外光コントラストである）
【００４８】
外光照度E1及びE0は、例えば注視点情報取得部１０２により取得されうる。より特には、注視点情報取得部１０２において取得された注視点の位置での外光照度が、上記式において用いられうる。外光照度は、外界風景からの光の照度のみに限られず、例えばメガネなどを介してユーザの目に入る映像光の照度などであってもよい。
【００４９】
外光コントラストC1及びC0は、例えば当業者により又はユーザにより適宜設定されてよい。例えば、外光コントラストは、注視点の明るさ：映像表示光輝度が１：１〜１：５０、１：１〜１：３０、１：１〜１：２０、又は１：１〜１：１０を満たすようなコントラストでありうる。例えば注視点の位置での外光照度（明るさ）に対して１０倍の明るさの映像表示光輝度が求められる場合、外光コントラストの値は１０でありうる。
【００５０】
瞳孔の面積又は寸法A1及びA0は、本明細書内上記で述べたとおりの手法により取得されうる。
【００５１】
出力制御部１０３は、上記式に従い決定された映像表示光輝度L1を達成するように、映像表示光出力を変更しうる。映像表示光輝度は、例えば上記「（３）第１の実施形態の第２の例（出力制御部による映像表示光の出力制御）」において述べたとおりの所定の関係を満たすように映像表示光出力を制御することで、達成されてよい。
【００５２】
本技術に従う映像投影装置により照射される映像表示光は瞳孔によってその光量が減少されないので、外光が例えば１０倍明るくなった場合に、映像表示光を１０倍明るくする必要がなく、より低い倍率で明るくすればよい。そのため、外光照度が高い環境下において、低消費電力で高いコントラストを有する映像をユーザに提示することができる。
また、本技術に従う映像投影装置を用いた場合、例えば外光照度が変化した場合、外光照度の変化率及び当該変化に伴う瞳孔面積の変化率を、変化前の輝度に乗ずることで、変化後の外光照度に適した輝度が設定され、当該輝度を達成するように映像表示光の出力が制御される。一方で、例えば非マクスウェル視の映像投影装置では、外光照度が変化した場合、変化前と同じコントラストを保とうとしたとき、外光照度の変化率と同じ変化率で映像表示光の輝度を変えなければならない。そのため、本技術に従う映像投影装置では、外光照度が高くなった場合に、輝度を上げる率がより低くなる。
より具体的には、非マクスウェル視の映像投影装置では、外光照度Ｂは瞳孔径ｄに対して、Ｂ∝ｅｘｐ（−ｄ）又はＢ∝ｄ−１/２などであり、すなわちＢはｅｘｐ（−ｄ）又はｄ−１/２に比例する。非マクスウェル視の映像投影装置では、異なる外光照度の環境下で同一のコントラストを保つには、映像表示光もこれらの変化率に従う必要がある。例えばＢがｅｘｐ（−ｄ）に比例するとした場合、映像表示光も同様にｅｘｐ（−ｄ）に比例する。一方で、本技術に従う映像投影装置では、映像表示光の輝度は、外光照度に瞳孔面積を乗じたｅｘｐ（−ｄ）＊ｄ２に比例する。すなわち、瞳孔径が４ｍｍから２ｍｍに変化した場合、消費電力の増加は、非マクスウェル視の映像投影装置と比べて１／４である。
【００５３】
２．第２の実施形態（映像投影方法）
【００５４】
（１）第２の実施形態の説明
【００５５】
本技術は、瞳孔の面積又は寸法を取得する瞳孔情報取得工程と、瞳孔付近に集光されそして網膜に照射される映像表示光の出力を、前記瞳孔情報取得工程において取得された瞳孔の面積又は寸法に基づき制御する出力制御工程と、前記出力制御工程において制御された出力で、網膜に映像表示光を照射する映像表示光出力工程とを含む映像投影方法を提供する。
【００５６】
本技術に従う映像投影方法によって、適切な明るさを有し且つ鮮明である映像を外界の風景に重畳することができる。
【００５７】
（２）第２の実施形態の第１の例（映像投影方法）
【００５８】
以下では、本技術に従う映像投影方法の例を、図５及び６を参照しながら説明する。図５は、上記「１．第１の実施形態（映像投影装置）」において説明したとおりである。図６は、本技術に従う映像投影方法のフローの一例を示す図である。本例における映像投影方法では、例えば外界の風景に重畳するのに適した明るさで映像表示光がマクスウェル視でユーザに提示される。
【００５９】
ステップＳ１０１において、映像投影装置１００は、本技術に従う映像投影処理を開始する。
【００６０】
ステップＳ１０２において、映像投影装置１００は瞳孔情報を取得する。当該瞳孔情報は、映像投影装置１００のうち、特には瞳孔情報取得部１０１により取得されうる。取得される瞳孔情報は、例えば瞳孔の面積、寸法、位置、及び形状などでありうる。
例えば瞳孔情報取得部１０１がＩＲ（赤外線）光源とＩＲカメラとの組合せを含む場合、ステップＳ１０２において、瞳孔情報取得部１０１が赤外線を眼球表面に照射し、当該赤外線が照射された眼球表面を撮像する。撮像された画像から、瞳孔情報取得部１０１が瞳孔情報を取得する。
【００６１】
ステップＳ１０３において、映像投影装置１００は、注視点情報を取得する。当該注視点情報は、映像投影装置１００のうち、特には注視点情報取得部１０２により取得されうる。取得される注視点情報として、例えばユーザの注視点の位置及び当該位置における明るさを挙げることができる。
例えば注視点情報取得部１０２は、瞳孔情報取得部１０１により取得された瞳孔の位置に基づき注視点の位置を取得する。注視点の位置は、例えば両目の瞳孔の位置に基づき三角測量的に決定されてよく、又は、単眼の瞳孔の動きに基づき推定されてもよい。注視点の位置を決定又は推定するための方法として、当業者に既知の技法が用いられてよい。
注視点情報取得部１０２は、前記取得された注視点の位置における明るさを取得する。例えば、注視点情報取得部１０２は、注視点情報取得部１０２に含まれる撮像素子によって撮像された画像中における、前記取得された注視点の位置に対応する画素又は画素ブロックを特定する。注視点情報取得部１０２は、当該特定された画素又は画素ブロックにおける画像データから、注視点における明るさに関するデータを取得する。
【００６２】
ステップＳ１０４において、映像投影装置１００は、映像表示光の出力を制御する。当該映像表示光の出力の制御は、映像投影装置１００のうち、特には出力制御部１０３により行われうる。出力制御部１０３は、瞳孔情報取得部１０１により取得された瞳孔情報に基づき、映像表示光の出力を制御する。当該制御は、例えば上記「（３）第１の実施形態の第２の例（出力制御部による映像表示光の出力制御）」において述べたとおりに行われうる。
【００６３】
ステップＳ１０５において、映像投影装置１００は、ステップＳ１０４において制御された出力で映像表示光を出力する。当該出力は、映像投影装置１００のうち、特には映像表示光照射部１０４により行われうる。映像表示光照射部１０４は、マクスウェル視によりユーザに映像を提示する。映像表示光として、レーザ光を挙げることができる。また、映像表示光は、ＬＥＤ又はＣＲＴにより照射される光であってもよい。
【００６４】
ステップＳ１０６において、映像投影装置１００は、本技術に従う映像投影処理を終了する。
【００６５】
（３）第２の実施形態の第２の例（映像投影方法）
【００６６】
以下では、本技術に従う映像投影方法の例を、図５及び７を参照しながら説明する。図５は、上記「１．第１の実施形態（映像投影装置）」において説明したとおりである。図７は、本技術に従う映像投影方法のフローの一例を示す図である。本例における映像投影方法では、例えば既に映像表示光がマクスウェル視によりユーザに対して照射されている状態において、当該映像表示光の出力の変更が行われる。
【００６７】
ステップＳ２０１において、映像投影装置１００は、本技術に従う映像投影処理を開始する。
【００６８】
ステップＳ２０２において、映像投影装置１００は瞳孔情報及び／又は注視点情報の監視を行う。例えば、映像投影装置１００から映像表示光がマクスウェル視でユーザに照射されている場合に、当該監視が行われうる。瞳孔情報の監視は、映像投影装置１００のうち、特には瞳孔情報取得部１０１及び／又は制御部１１０により行われうる。注視点情報の監視は、映像投影装置１００のうち、特には注視点情報取得部１０２及び／又は制御部１１０により行われうる。
【００６９】
ステップＳ２０３において、映像投影装置１００は、瞳孔情報又は注視点情報に変化があるかどうかを判定する。当該変化の有無の判定は、映像投影装置１００のうち、特には出力制御部１０３により行われうる。瞳孔情報の変化の例として、例えば瞳孔の面積又は寸法の増加又は減少を挙げることができる。注視点情報の変化の例として、例えば注視点の位置の移動、注視点での外光照度（特には明るさ）の増加又は減少、及び注視点での外光照度に適した外光コントラストの変化を挙げることができる。
映像投影装置１００は、瞳孔情報及び／又は注視点情報に変化が生じた場合に、処理をステップＳ２０４に進める。
映像投影装置１００は、瞳孔情報及び／又は注視点情報に変化が生じない場合は、処理をＳ２０２に戻し、監視工程Ｓ２０２を継続する。
【００７０】
ステップＳ２０３において、所定の条件を満たした場合、例えば瞳孔情報及び／又は注視点情報の変化が所定の閾値を超えた場合に、瞳孔情報又は注視点情報に変化が有ったと判断されてもよい。
より具体的には、ステップＳ２０３において、出力制御部１０３は、瞳孔の面積又は寸法が、或る時点での面積又は寸法に対して例えば１．１倍以上、１．２倍以上、１．３倍以上、１．４倍以上、１．５倍以上、１．６倍以上、１．７倍以上、１．８倍以上、１．９倍以上、又は２．０倍以上になった場合に、瞳孔の面積又は寸法が増加したと判定し、処理をステップＳ２０４に進めうる。また、ステップＳ２０３において、出力制御部１０３は、瞳孔の面積又は寸法が、或る時点での面積又は寸法に対して例えば０．９倍以下、０．８倍以下、０．７倍以下、０．６倍以下、又は０．５倍以下になった場合に、瞳孔の面積又は寸法が減少したと判定し、処理をステップＳ２０４に進めうる。
代替的には、ステップＳ２０３において、出力制御部１０３は、注視点の位置が、或る時点において注視されている物体から、他の物体へと移動した場合に、注視点の位置の変化が有ったとして、処理をステップＳ２０４に進めうる。注視点の位置の変化は、例えば注視点又は注視点付近での、画像情報の変化（例えば明るさの変化など）に基づき検出されうる。
代替的には、ステップＳ２０３において、出力制御部１０３は、注視点における明るさ（例えば外光照度）が或る時点での明るさに対して例えば１．１倍以上、１．２倍以上、１．３倍以上、１．４倍以上、１．５倍以上、１．６倍以上、１．７倍以上、１．８倍以上、１．９倍以上、又は２．０倍以上になった場合に、注視点における明るさの増加が有ったと判定し、処理をステップＳ２０４に進めうる。また、ステップＳ２０３において、出力制御部１０３は、注視点における明るさ（例えば外光照度）が或る時点での明るさに対して例えば０．９倍以下、０．８倍以下倍以上、０．７倍以下、０．６倍以下、又は０．５倍以下になった場合に、注視点における明るさの減少が有ったと判定し、処理をステップＳ２０４に進めうる。
代替的には、ステップＳ２０３において、出力制御部１０３は、ユーザに提示される映像と当該映像が重畳される光景との適切なコントラスト、特には外光コントラストが変化された場合に、注視点におけるコントラストの変化が有ったと判定し、処理をステップＳ２０４に進めうる。  
【００７１】
ステップＳ２０４において、映像投影装置１００は、映像表示光の出力を制御する。当該映像表示光の出力の制御は、映像投影装置１００のうち、特には出力制御部１０３により行われうる。出力制御部１０３は、瞳孔情報取得部１０１により取得された瞳孔情報及び／又は注視点情報取得部１０２により取得された注視点情報に基づき、映像表示光の出力を変更する。当該制御は、例えば上記「（４）第１の実施形態の第３の例（出力制御部による映像表示光の出力変化）」において述べたとおりに行われうる。
【００７２】
ステップＳ２０５において、映像投影装置１００は、ステップＳ２０４において制御された出力で映像表示光を出力する。当該出力は、映像投影装置１００のうち、特には映像表示光照射部１０４により行われうる。映像表示光照射部１０４は、マクスウェル視によりユーザに映像を提示する。映像表示光として、レーザ光を挙げることができる。また、映像表示光は、ＬＥＤ又はＣＲＴにより照射される光であってもよい。
【００７３】
ステップＳ２０６において、映像投影装置１００は、本技術に従う映像投影処理を終了する。
【００７４】
３．第３の実施形態（映像表示光出力制御方法）
【００７５】
（１）第３の実施形態の説明
【００７６】
本技術は、瞳孔の面積又は寸法を取得する瞳孔情報取得工程と、瞳孔付近に集光されそして網膜に照射される映像表示光の出力を、前記瞳孔情報取得工程において取得された瞳孔の面積又は寸法に基づき制御する出力制御工程と、を含む映像表示光出力制御方法を提供する。
【００７７】
本技術に従う映像表示光出力制御方法によって、マクスウェル視でユーザに提示される映像表示光を、適切な明るさに制御することができる。
【００７８】
（２）第３の実施形態の第１の例（映像表示光出力制御方法）
【００７９】
以下では、本技術に従う映像表示光出力制御方法の例を、図５及び８を参照しながら説明する。図５は、上記「１．第１の実施形態（映像投影装置）」において説明したとおりである。図８は、本技術に従う映像表示光出力制御方法のフローの一例を示す図である。本例における映像表示光出力制御方法では、例えばマクスウェル視でユーザに提示される映像表示光の明るさが、外界の風景に重畳するのに適したものとされる。
【００８０】
ステップＳ３０１〜Ｓ３０５は、上記２．の「（２）第２の実施形態の第１の例（映像投影方法）」において説明したステップＳ１０１〜Ｓ１０４及びＳ１０６と同じである。すなわち、本例における映像表示光出力制御方法は、上記２．の「（２）第２の実施形態の第１の例（映像投影方法）」において説明した映像投影方法のうちから、出力工程を除いた方法である。そのため、ステップＳ３０１〜Ｓ３０５についての説明は省略する。
【００８１】
（３）第３の実施形態の第２の例（映像表示光出力制御方法）
【００８２】
以下では、本技術に従う映像表示光出力制御方法の例を、図５及び９を参照しながら説明する。図５は、上記「１．第１の実施形態（映像投影装置）」において説明したとおりである。図９は、本技術に従う映像表示光出力制御方法のフローの一例を示す図である。本例における映像表示光出力制御方法では、例えば既に映像表示光がマクスウェル視によりユーザに対して照射されている状態において、当該映像表示光の出力の変更が行われる。
【００８３】
ステップＳ４０１〜Ｓ４０５は、上記２．の「（３）第２の実施形態の第２の例（映像投影方法）」において説明したステップＳ２０１〜Ｓ２０４及びＳ２０６と同じである。すなわち、本例における映像表示光出力制御方法は、上記２．の「（３）第２の実施形態の第２の例（映像投影方法）」において説明した映像表示光出力制御方法のうちから、出力工程を除いた方法である。そのため、ステップＳ４０１〜Ｓ４０５についての説明は省略する。
【００８４】
４．第４の実施形態（プログラム）
【００８５】
本技術は、映像投影用プログラムも提供する。当該映像投影用プログラムは、本技術に従う映像投影方法をコンピュータに実行させるためのものである。例えば、本技術に従う映像投影用プログラムは、瞳孔の面積又は寸法を取得する瞳孔情報取得工程と、瞳孔付近に集光されそして網膜に照射される映像表示光の出力を、前記瞳孔情報取得工程において取得された瞳孔の面積又は寸法に基づき制御する出力制御工程と、前記出力制御工程において制御された出力で、網膜に映像表示光を照射する映像表示光出力工程とをコンピュータに実行させるためのものであってよい。これらの工程は、上記「２．第２の実施形態（映像投影方法）」において説明されたとおりであるので、これらの工程についての説明は省略する。
【００８６】
また、本技術は、映像表示光出力制御用プログラムも提供する。当該映像表示光出力制御用プログラムは、本技術に従う映像表示光出力制御方法をコンピュータに実行させるためのものである。例えば、本技術に従う映像表示光出力制御用プログラムは、瞳孔の面積又は寸法を取得する瞳孔情報取得工程と、瞳孔付近に集光されそして網膜に照射される映像表示光の出力を、前記瞳孔情報取得工程において取得された瞳孔の面積又は寸法に基づき制御する出力制御工程とをコンピュータに実行させるためのものであってよい。これらの工程は、上記「２．第２の実施形態（映像投影方法）」において説明されたとおりであるので、これらの工程についての説明は省略する。
【００８７】
５．装置の構成例
【００８８】
以下で、図１０を参照しながら、本技術に従う映像投影装置の構成の一例を説明する。図１０は、本技術に従う映像投影装置の概略的な構成の一例を示す図である。
【００８９】
図１０に示される映像投影装置１０００は、ＣＰＵ（中央演算処理装置）１００２及びＲＡＭ１００３を備えている。ＣＰＵ１００２及びＲＡＭ１００３は、バス１００５を介して相互に接続されており、また、映像投影装置１０００の他の構成要素ともバス１００５を介して接続されている。
ＣＰＵ１００２は、映像投影装置１０００の制御及び演算を行う。ＣＰＵ１００２として、任意のプロセッサを用いることができ、その例としてＸｅｏｎ（登録商標）シリーズ、Ｃｏｒｅ（商標）シリーズ、又はＡｔｏｍ（商標）シリーズのプロセッサを挙げることができる。図５を参照して説明した映像投影装置１００の制御部１１０は例えばＣＰＵ１００２により実現されうる。
ＲＡＭ１００３は、例えばキャッシュ・メモリ及びメイン・メモリを含み、ＣＰＵ１００２により使用されるプログラムなどを一時記憶しうる。
【００９０】
映像投影装置１０００は、ディスク１００４、通信装置１００６、映像表示光出力装置１００７、及びドライブ１００８を備えていてもよい。これらの構成要素はいずれもバス１００５に接続されうる。
ディスク１００４には、オペレーティング・システム（例えば、ＷＩＮＤＯＷＳ（登録商標）、ＵＮＩＸ（登録商標）、又はＬＩＮＵＸ（登録商標）など）、本技術に従う映像投影処理用プログラム、映像表示光出力制御用プログラム、及び他の種々のプログラム、並びに各種データ（例えば映像データ）が格納されうる。
通信装置１００６は、映像投影装置１０００をネットワーク１０１０に有線又は無線で接続する。通信装置１００６は、映像投影装置１０００を、ネットワーク１０１０を介して各種データ（例えば映像データなど）を取得することができる。取得したデータは、例えばディスク１００４に格納されうる。通信装置１００６の種類は当業者により適宜選択されてよい。
映像表示光出力装置１００７は、本技術に従い制御された映像表示光を出力しうる。
ドライブ１００８は、記録媒体に記録されている情報を読み出して、ＲＡＭ１００３に出力することができる。記録媒体は、例えば、ＳＤメモリカード又はフラッシュメモリであるが、これらに限定されない。
【００９１】
本技術に従う映像投影装置のより具体的な例を図１１及び１２を参照しながら以下で説明する。図１１及び１２は、当該例を示す図である。
図１１に示される本技術の映像投影装置は、アイウェアディスプレイ２０００である。アイウェアディスプレイ２０００において、瞳孔情報取得部は、ＩＲ光源２００２及びＩＲカメラ２００３の組み合わせを含む。ＩＲ光源２００２は例えば、図１２に示されるように、赤外光を眼球に向けて照射する。当該赤外光が照射された状態で、ＩＲカメラ２００３により眼球を撮像することによって、瞳孔情報が取得される。注視点情報取得部は、撮像素子２００４を含む。撮像素子２００４は、眼球が向いている方向を撮像できるように構成されている。出力制御部及び映像表示光照射部は、筐体２００１中の情報処理装置の一部として構成されていてよい。当該情報処理装置にはさらに、インタフェース、記憶部、制御部、及び映像制御部が含まれていてよい。
映像表示光照射部によって、出力制御部による制御下で、映像表示光がハーフミラー２００５に照射される。ハーフミラーに照射された映像表示光が、瞳孔２００６上で集光し、そして、網膜２００７に到達する。このようにして、本技術に従う映像投影装置によって、映像がユーザに提示される。
【００９２】
なお、本技術は、以下のような構成をとることもできる。
〔１〕瞳孔の面積又は寸法を取得する瞳孔情報取得部と、
瞳孔付近に集光されそして網膜に照射される映像表示光の出力を、前記瞳孔情報取得部により取得された瞳孔の面積又は寸法に基づき制御する出力制御部と、
を備えている映像投影装置。
〔２〕前記出力制御部が、目的とする映像表示光輝度と前記瞳孔の面積又は寸法とに基づき、前記映像表示光の出力を決定する、〔１〕に記載の映像投影装置。
〔３〕前記目的とする映像表示光輝度と、前記映像表示光の出力を前記瞳孔の面積又は寸法で除した値とが、所定の関係を満たすように、前記映像表示光の出力が決定される、〔２〕に記載の映像投影装置。
〔４〕前記所定の関係が、
以下の式、
【数４】
2019146367.tif 000009
又は、
以下の式
【数５】
2019146367.tif 000010
で表される関係である、
（ここで、Ｌは目的とする映像表示光輝度であり、Ｃは調整係数であり、λは波長であり、Ｐは各波長での映像表示光出力であり、Ｋは各波長での視感度であり、ωは表示の見込み角であり、且つ、Ａは瞳孔寸法又は瞳孔面積である）
〔３〕に記載の映像投影装置。
〔５〕前記出力制御部が、前記瞳孔の面積又は寸法の変化、外光照度の変化、及び外光コントラストの変化のうちの少なくとも一つの変化に応じて、前記映像表示光の出力を変化させる、〔１〕に記載の映像投影装置。
〔６〕前記出力制御部が、前記瞳孔の面積又は寸法の変化に応じて前記映像表示光の出力を変化させるものであり、当該変化の前後の前記瞳孔の面積又は寸法に基づき前記映像表示光の出力を決定する、〔５〕に記載の映像投影装置。
〔７〕前記出力制御部が、以下の式に基づき決定された映像表示光輝度を与えるように前記映像表示光の出力を制御する、
【数６】
2019146367.tif 000011
（ここで、L1、E1、A1、及びC1はそれぞれ、前記変化後の映像表示光輝度、外光照度、瞳孔の面積又は寸法、及び外光コントラストであり、L0、E0、A0、及びC0はそれぞれ、前記変化前の映像表示光輝度、外光照度、瞳孔の面積又は寸法、及び外光コントラストである）
〔５〕又は〔６〕に記載の映像投影装置。
〔８〕前記出力制御部が、前記目的とする映像表示光輝度を、注視点の明るさと当該明るさに対するコントラストとに基づき決定する、〔２〕〜〔７〕のいずれか一つに記載の映像投影装置。
〔９〕前記瞳孔情報取得部が、前記瞳孔の位置情報を取得するものであり、且つ、前記瞳孔情報取得部が、当該位置情報に基づき、前記注視点を特定する、〔８〕に記載の映像投影装置。
〔１０〕前記瞳孔情報取得部が、赤外光カメラを含む、〔９〕に記載の映像投影装置。
〔１１〕注視点情報取得部をさらに備えており、当該注視点情報取得部が、前記注視点の明るさを取得する、〔８〕に記載の映像投影装置。
〔１２〕前記出力制御部により制御された出力で網膜に映像表示光を照射する映像表示光照射部をさらに備えている、〔１〕〜〔１１〕のいずれか一つに記載の映像投影装置。
〔１３〕前記映像表示光照射部が、網膜投影方式又は網膜走査方式で映像表示光を照射する、〔１２〕に記載の映像投影装置。
〔１４〕前記映像表示光照射部が、レーザ光を照明光源とする、〔１２〕に記載の映像投影装置。
〔１５〕ヘッドマウントディスプレイである、〔１〕〜〔１４〕のいずれか一つに記載の映像投影装置。
〔１６〕アイウェアディスプレイである、〔１〕〜〔１４〕のいずれか一つに記載の映像投影装置。
〔１７〕投影される映像が、外界の光景に重畳されているように表示される、〔１〕〜〔１６〕のいずれか一つに記載の映像投影装置。
〔１８〕瞳孔の面積又は寸法を取得する瞳孔情報取得工程と、
瞳孔付近に集光されそして網膜に照射される映像表示光の出力を、前記瞳孔情報取得工程において取得された瞳孔の面積又は寸法に基づき制御する出力制御工程と、
前記出力制御工程において制御された出力で、網膜に映像表示光を照射する映像表示光出力工程と
を含む映像投影方法。
〔１９〕瞳孔の面積又は寸法を取得する瞳孔情報取得工程と、
瞳孔付近に集光されそして網膜に照射される映像表示光の出力を、前記瞳孔情報取得工程において取得された瞳孔の面積又は寸法に基づき制御する出力制御工程と、
を含む映像表示光出力制御方法。
【符号の説明】
【００９３】
１００  映像投影装置
１０１  瞳孔情報取得部
１０２  注視点情報取得部
１０３  出力制御部
１０４  映像表示光照射部
１１０  制御部
１１１  映像制御部
１１３  通信インタフェース
１１４  記憶部
【図１】
2019146367.tif 000015
【図２】
2019146367.tif 000016
【図３】
2019146367.tif 000017
【図４】
2019146367.tif 000018
【図５】
2019146367.tif 000019
【図６】
2019146367.tif 000020
【図７】
2019146367.tif 000021
【図８】
2019146367.tif 000022
【図９】
2019146367.tif 000023
【図１０】
2019146367.tif 000024
【図１１】
2019146367.tif 000025
【図１２】
2019146367.tif 000026
【図１３】
2019146367.tif 000027
【図１４】
2019146367.tif 000028
【国際調査報告】
2019146367.tif 000029
2019146367.tif 000030
2019146367.tif 000031
2019146367.tif 000032