(57)【特許請求の範囲】
【請求項１】
利用者に虚像と外景とを視認させる透過型の頭部装着型表示装置であって、
前記虚像を前記利用者に視認させる画像表示部と、
前記外景に含まれるオブジェクトであって、前記画像表示部を透過して前記利用者が視認するオブジェクトの視認性を低下させると共に、少なくとも前記オブジェクトを三次元的に表す前記虚像を前記画像表示部に表示させる像調整部と、
を備え、
前記像調整部は、
前記画像表示部を透過して前記利用者が視認する前記オブジェクトと同系の色を全体に配置した調整画像を生成し、
前記調整画像を表す前記虚像を前記画像表示部に表示させることで、前記オブジェクトの視認性を低下させる、頭部装着型表示装置。
【請求項２】
利用者に虚像と外景とを視認させる透過型の頭部装着型表示装置であって、
前記虚像を前記利用者に視認させる画像表示部と、
前記外景に含まれるオブジェクトであって、前記画像表示部を透過して前記利用者が視認するオブジェクトの視認性を低下させると共に、少なくとも前記オブジェクトを三次元的に表す前記虚像を前記画像表示部に表示させる像調整部と、
を備え、
前記像調整部は、
前記画像表示部を透過して前記利用者が視認する前記外景を表す画像であって、前記外景に含まれる前記オブジェクトが除外された画像の一部を、前記画像表示部を透過して前記利用者が視認する前記オブジェクトと重なる位置に配置した調整画像を生成し、
前記調整画像を表す前記虚像を前記画像表示部に表示させることで、前記オブジェクトの視認性を低下させる、頭部装着型表示装置。
【請求項３】
請求項１に記載の頭部装着型表示装置であって、さらに、
前記オブジェクトを三次元的に表すための三次元画像を取得する三次元画像取得部を備え、
前記像調整部は、前記三次元画像に基づいて前記色を決定する、頭部装着型表示装置。
【請求項４】
請求項２に記載の頭部装着型表示装置であって、さらに、
前記オブジェクトを三次元的に表すための三次元画像を取得する三次元画像取得部と、
前記外景を二次元的に表す二次元画像を取得する二次元画像取得部と、
を備え、
前記像調整部は、前記二次元画像と前記三次元画像とを比較することで、前記調整画像における前記重なる位置を特定する、頭部装着型表示装置。
【請求項５】
請求項２に記載の頭部装着型表示装置であって、さらに、
前記オブジェクトを三次元的に表すための三次元画像を取得する三次元画像取得部と、
前記頭部装着型表示装置を装着した状態における前記利用者の視界方向を撮像した二次元画像を取得する二次元画像取得部と、
を備え、
前記像調整部は、前記二次元画像と前記三次元画像とを比較することで、前記調整画像における前記重なる位置を特定する、頭部装着型表示装置。
【請求項６】
請求項１から請求項５のいずれか一項に記載の頭部装着型表示装置を備える画像表示システムであって、さらに、
情報処理装置と、
画像表示装置と、
を備え、
前記情報処理装置は、
前記画像表示装置に対して前記オブジェクトを含む二次元画像を送信すると共に、前記頭部装着型表示装置に対して少なくとも前記オブジェクトを三次元的に表すための三次元画像を送信する送信部を備え、
前記画像表示装置は、
前記情報処理装置より送信された前記二次元画像を表示させる表示部を備える、画像表示システム。
【請求項７】
利用者に虚像と外景とを視認させる透過型の頭部装着型表示装置を制御する方法であって、
前記虚像を前記利用者に視認させる第１の工程と、
前記外景に含まれるオブジェクトであって、前記頭部装着型表示装置を透過して前記利用者が視認するオブジェクトの視認性を低下させると共に、少なくとも前記オブジェクトを三次元的に表す前記虚像を表示させる第２の工程と、
を備え、
前記第２の工程は、
前記頭部装着型表示装置を透過して前記利用者が視認する前記オブジェクトと同系の色を全体に配置した調整画像を生成する工程と、
前記調整画像を表す前記虚像を前記頭部装着型表示装置に表示させることで、前記オブジェクトの視認性を低下させる工程と、を備える、方法。
【請求項８】
利用者に虚像と外景とを視認させる透過型の頭部装着型表示装置を制御する方法であって、
前記虚像を前記利用者に視認させる第１の工程と、
前記外景に含まれるオブジェクトであって、前記頭部装着型表示装置を透過して前記利用者が視認するオブジェクトの視認性を低下させると共に、少なくとも前記オブジェクトを三次元的に表す前記虚像を表示させる第２の工程と、
を備え、
前記第２の工程は、
前記頭部装着型表示装置を透過して前記利用者が視認する前記外景を表す画像であって、前記外景に含まれる前記オブジェクトが除外された画像の一部を、前記頭部装着型表示装置を透過して前記利用者が視認する前記オブジェクトと重なる位置に配置した調整画像を生成する工程と、
前記調整画像を表す前記虚像を前記頭部装着型表示装置に表示させることで、前記オブジェクトの視認性を低下させる工程と、を備える、方法。
【請求項９】
利用者に虚像と外景とを視認させる透過型の頭部装着型表示装置において使用されるコンピュータープログラムであって、
前記虚像を前記利用者に視認させる第１の機能と、
前記外景に含まれるオブジェクトであって、前記頭部装着型表示装置を透過して前記利用者が視認するオブジェクトの視認性を低下させると共に、少なくとも前記オブジェクトを三次元的に表す前記虚像を表示させる第２の機能と、
をコンピューターに実現させ、
前記第２の機能は、
前記頭部装着型表示装置を透過して前記利用者が視認する前記オブジェクトと同系の色を全体に配置した調整画像を生成し、
前記調整画像を表す前記虚像を前記頭部装着型表示装置に表示させることで、前記オブジェクトの視認性を低下させる、コンピュータープログラム。
【請求項１０】
利用者に虚像と外景とを視認させる透過型の頭部装着型表示装置において使用されるコンピュータープログラムであって、
前記虚像を前記利用者に視認させる第１の機能と、
前記外景に含まれるオブジェクトであって、前記頭部装着型表示装置を透過して前記利用者が視認するオブジェクトの視認性を低下させると共に、少なくとも前記オブジェクトを三次元的に表す前記虚像を表示させる第２の機能と、
をコンピューターに実現させ、
前記第２の機能は、
前記頭部装着型表示装置を透過して前記利用者が視認する前記外景を表す画像であって、前記外景に含まれる前記オブジェクトが除外された画像の一部を、前記頭部装着型表示装置を透過して前記利用者が視認する前記オブジェクトと重なる位置に配置した調整画像を生成し、
前記調整画像を表す前記虚像を前記頭部装着型表示装置に表示させることで、前記オブジェクトの視認性を低下させる、コンピュータープログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像表示システムに関する。
【背景技術】
【０００２】
現実環境に対して、コンピューターを用いて付加提示用の情報（例えば、仮想オブジェクト）を付加提示する拡張現実感（ＡＲ、Augmented Reality）と呼ばれる技術が知られている。特許文献１には、画像処理装置において、現実環境の実物体と関連付けられている仮想オブジェクトを、実物体へ投影させることが記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１３−２３５３７４号公報
【特許文献２】特開２０１３−１４１０４９号公報
【特許文献３】特表２０１２−０３５７６８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上述した拡張現実感は、例えば、透過型の頭部装着型表示装置（以降、「ＨＭＤ」と呼ぶ。）において実現される。透過型のＨＭＤとは、ＨＭＤを装着した状態において利用者の視界が遮断されないタイプのＨＭＤである。この場合、例えば、ＨＭＤは、カメラで外景を撮像し、撮像により得られた画像を画像認識して仮想オブジェクトを生成する。ＨＭＤは、生成した仮想オブジェクトのみを虚像として利用者の眼前に表示させる。利用者は、虚像として表示された仮想オブジェクトと、目前の画像表示部を透過して見える実際の外景との両方を視認することで、拡張現実感を体感することができる。
【０００５】
このような拡張現実感の技術を利用して、透過型のＨＭＤにおいて、利用者が目前の画像表示部を透過して見る実際の外景であって、二次元的に表現されている外景（例えば、スクリーンやディスプレイに写された二次元像や、絵画やポスターのような二次元表現物）に含まれるオブジェクトを、三次元的に表示させたいという要望があった。特許文献１〜３に記載の技術では、二次元的に表現されている外景に含まれるオブジェクトを三次元的に表示させることについては何ら考慮されていない。
【０００６】
このため、透過型のＨＭＤ（頭部装着型表示装置）において、利用者が目前の画像表示部を透過して見る外景であって、二次元的に表現されている外景に含まれるオブジェクトを三次元的に表示させることが可能な技術が望まれている。このほか、ＨＭＤには、小型化、低コスト化、省電力化、製造の容易化、使い勝手の向上等が望まれている。
【課題を解決するための手段】
【０００７】
本発明は、上述の課題の少なくとも一部を解決するためになされたものであり、以下の形態として実現することが可能である。
【０００８】
（１）本発明の一形態によれば、利用者に虚像と外景とを視認させる透過型の頭部装着型表示装置が提供される。この頭部装着型表示装置は；前記虚像を前記利用者に視認させる画像表示部と；前記外景に含まれるオブジェクトであって、前記画像表示部を透過して前記利用者が視認するオブジェクトの視認性を低下させると共に、少なくとも前記オブジェクトを三次元的に表す前記虚像を前記画像表示部に表示させる像調整部と、を備える。この形態の頭部装着型表示装置によれば、像調整部は、外景に含まれるオブジェクトであって、画像表示部を透過して利用者が視認するオブジェクトの視認性を低下させると共に、オブジェクトを三次元的に表す虚像を画像表示部に表示させる。このようにすれば、透過型の頭部装着型表示装置において、利用者が目前の画像表示部を透過して見る外景に含まれるオブジェクトを、仮想的に、三次元的に表示させることができる。
【０００９】
（２）上記形態の頭部装着型表示装置において；前記像調整部は；前記画像表示部を透過して前記利用者が視認する前記オブジェクトと重なる位置に、前記オブジェクトの彩度を下げることが可能な色、または、前記オブジェクトの明度を上げることが可能な色を配置した調整画像を生成し；前記調整画像を表す前記虚像を前記画像表示部に表示させることで、前記オブジェクトの視認性を低下させてもよい。この形態の頭部装着型表示装置によれば、像調整部は、画像表示部を透過して利用者が視認するオブジェクトと重なる位置に、オブジェクトの彩度を下げることが可能な色、または、オブジェクトの明度を上げることが可能な色を配置した調整画像を生成し、調整画像を表す虚像を表示させる。このため、利用者は、画像表示部を透過したオブジェクトと、オブジェクトの彩度を下げることが可能な色またはオブジェクトの明度を上げることが可能な色が配置された調整画像と、を重畳して同時に視認することとなる。この結果、像調整部は、外景に含まれるオブジェクトであって、画像表示部を透過して利用者が視認するオブジェクトの視認性を低下させることができる。
【００１０】
（３）上記形態の頭部装着型表示装置において；前記像調整部は；前記画像表示部を透過して前記利用者が視認する前記オブジェクトと同系の色を全体に配置した調整画像を生成し；前記調整画像を表す前記虚像を前記画像表示部に表示させることで、前記オブジェクトの視認性を低下させてもよい。この形態の頭部装着型表示装置によれば、像調整部は、画像表示部を透過して利用者が視認するオブジェクトと同系の色を全体に配置した調整画像を生成し、調整画像を表す虚像を表示させる。このため、利用者は、画像表示部を透過したオブジェクトと、視界全体に広がるオブジェクトと同系の色と、を重畳して同時に視認することとなる。この結果、像調整部は、外景に含まれるオブジェクトであって、画像表示部を透過して利用者が視認するオブジェクトの視認性を低下させることができる。
【００１１】
（４）上記形態の頭部装着型表示装置において；前記像調整部は；前記画像表示部を透過して前記利用者が視認する前記外景を表す画像であって、前記外景に含まれる前記オブジェクトが除外された画像の一部を、前記画像表示部を透過して前記利用者が視認する前記オブジェクトと重なる位置に配置した調整画像を生成し；前記調整画像を表す前記虚像を前記画像表示部に表示させることで、前記オブジェクトの視認性を低下させてもよい。この形態の頭部装着型表示装置によれば、像調整部は、外景を表す画像であって外景に含まれるオブジェクトが除外された画像の一部を、画像表示部を透過して利用者が視認するオブジェクトと重なる位置に配置した調整画像を生成し、調整画像を表す虚像を表示させる。このため、利用者は、画像表示部を透過したオブジェクトと、外景に含まれるオブジェクトが除外された画像が配置された調整画像と、を重畳して同時に視認することとなる。この結果、像調整部は、外景に含まれるオブジェクトであって、画像表示部を透過して利用者が視認するオブジェクトの視認性を低下させることができる。
【００１２】
（５）上記形態の頭部装着型表示装置では、さらに；前記オブジェクトを三次元的に表すための三次元画像を取得する三次元画像取得部を備え；前記像調整部は、前記三次元画像に基づいて前記色を決定してもよい。この形態の頭部装着型表示装置によれば、像調整部は、取得した三次元画像に基づいて、調整画像のための色を簡単に決定することができる。
【００１３】
（６）上記形態の頭部装着型表示装置では、さらに；前記オブジェクトを三次元的に表すための三次元画像を取得する三次元画像取得部と；前記外景を二次元的に表す二次元画像を取得する二次元画像取得部と、を備え；前記像調整部は、前記二次元画像と前記三次元画像とを比較することで、前記調整画像における前記重なる位置を特定してもよい。この形態の頭部装着型表示装置によれば、像調整部は、外部から取得した三次元画像と、外部から取得した二次元画像とを比較することで、調整画像における「重なる位置」を簡単に特定することができる。
【００１４】
（７）上記形態の頭部装着型表示装置では、さらに；前記オブジェクトを三次元的に表すための三次元画像を取得する三次元画像取得部と；前記頭部装着型表示装置を装着した状態における前記利用者の視界方向を撮像した二次元画像を取得する二次元画像取得部と、を備え；前記像調整部は、前記二次元画像と前記三次元画像とを比較することで、前記調整画像における前記重なる位置を特定してもよい。この形態の頭部装着型表示装置によれば、像調整部は、外部から取得した三次元画像と、利用者の視界方向を撮像した二次元画像とを比較することで、実際の利用者の視界方向の情報に基づいて、調整画像における「重なる位置」を正確に特定することができる。
【００１５】
（８）上記形態の頭部装着型表示装置を備える画像表示システムでは、さらに；情報処理装置と；画像表示装置と、を備え；前記情報処理装置は；前記画像表示装置に対して前記オブジェクトを含む二次元画像を送信すると共に、前記頭部装着型表示装置に対して少なくとも前記オブジェクトを三次元的に表すための三次元画像を送信する送信部を備え；前記画像表示装置は；前記情報処理装置より送信された前記二次元画像を表示させる表示部を備えてもよい。この形態の画像表示システムによれば、画像表示装置に表示されている二次元像に含まれていることで、利用者が目前の画像表示部を透過して見る外景に含まれるオブジェクトを、仮想的に、三次元的に表示させることができる。
【００１６】
上述した本発明の各形態の有する複数の構成要素は全てが必須のものではなく、上述の課題の一部または全部を解決するため、あるいは、本明細書に記載された効果の一部または全部を達成するために、適宜、前記複数の構成要素の一部の構成要素について、その変更、削除、新たな構成要素との差し替え、限定内容の一部削除を行うことが可能である。また、上述の課題の一部または全部を解決するため、あるいは、本明細書に記載された効果の一部または全部を達成するために、上述した本発明の一形態に含まれる技術的特徴の一部または全部を上述した本発明の他の形態に含まれる技術的特徴の一部または全部と組み合わせて、本発明の独立した一形態とすることも可能である。
【００１７】
例えば、本発明の一形態は、画像表示部と、像調整部と、の２つの要素のうちの一部または全部の要素を備えた装置として実現可能である。すなわち、この装置は、画像表示部を有していてもよく、有していなくてもよい。また、この装置は、像調整部を有していてもよく、有していなくてもよい。こうした装置は、例えば頭部装着型表示装置として実現できるが、頭部装着型表示装置以外の他の装置としても実現可能である。前述した頭部装着型表示装置の各形態の技術的特徴の一部または全部は、いずれもこの装置に適用することが可能である。
【００１８】
なお、本発明は、種々の態様で実現することが可能であり、例えば、頭部装着型表示装置、頭部装着型表示装置を制御する方法、頭部装着型表示装置を備える画像表示システム、画像表示システムを制御する方法、これらの装置、方法、システムの機能を実現するためのコンピュータープログラム、そのコンピュータープログラムを記憶した記憶媒体等の形態で実現することができる。
【図面の簡単な説明】
【００１９】
【図１】本発明の一実施形態における画像表示システムの概略構成を示す説明図である。
【図２】ＨＭＤ１００の構成を機能的に示すブロック図である。
【図３】利用者に視認される虚像の一例を示す説明図である。
【図４】サーバー３００の構成を機能的に示すブロック図である。
【図５】表示処理の手順を示すシーケンス図である。
【図６】キャンセル領域について説明するための説明図である。
【図７】調整画像の第１の生成方法についての説明図である。
【図８】調整画像の第２の生成方法についての説明図である。
【図９】調整画像の第３の生成方法についての説明図である。
【図１０】表示処理の結果を示す説明図である。
【図１１】表示処理の結果を示す他の説明図である。
【図１２】表示処理（変形）の結果を示す説明図である。
【図１３】第２実施形態におけるＨＭＤ１００ａの構成を機能的に示すブロック図である。
【図１４】第２実施形態における表示処理の手順を示すフローチャートである。
【図１５】第２実施形態における表示処理の結果を示す説明図である。
【図１６】変形例におけるＨＭＤの外観の構成を示す説明図である。
【発明を実施するための形態】
【００２０】
Ａ．第１実施形態：
Ａ−１．画像表示システムの構成：
図１は、本発明の一実施形態における画像表示システムの概略構成を示す説明図である。画像表示システム１は、頭部装着型表示装置１００と、プロジェクター２００およびスクリーン２５０と、サーバー３００と、を備えている。
【００２１】
頭部装着型表示装置１００は、頭部に装着する表示装置であり、ヘッドマウントディスプレイ（Head Mounted Display、ＨＭＤ）とも呼ばれる。本実施形態のＨＭＤ１００は、利用者が、虚像を視認すると同時に外景も直接視認することができる光学透過型のヘッドマウントディスプレイである。
【００２２】
プロジェクター２００は、供給された画像をスクリーン２５０に投写する。スクリーン２５０は「表示部」として機能し、スクリーン２５０と、プロジェクター２００とは、協働することで「画像表示装置」として機能する。
【００２３】
サーバー３００は、ＨＭＤ１００とプロジェクター２００とに対して、画像を供給する。具体的には、サーバー３００は、プロジェクター２００に対して、二次元画像の画像データーを供給する。さらに、サーバー３００は、ＨＭＤ１００に対して、二次元画像に含まれる任意のオブジェクトを三次元的に表すための三次元画像の画像データーを供給する。
【００２４】
ここで、「オブジェクト」とは、二次元画像として表示されている画像に含まれている各物体、または、利用者がＨＭＤ１００を透過して視認する外景（実世界）に存在する各物体、のうちのいずれかを意味する。「二次元画像」とは、ＨＭＤ１００の利用者の両眼に同一の画像（虚像）、換言すれば、視差のない画像を表示させることにより、利用者に立体感を感じさせない画像を意味する。「三次元画像」とは、ＨＭＤ１００の利用者の両眼に視差を付けた画像を表示させることにより、利用者に立体感を感じさせることのできる画像を意味する。なお、三次元画像は、視差を付与する以外の方法で実現されてもよい。例えば、画像を傾けることで利用者に立体感を感じさせる画像であってもよく、遠近法を用いることで利用者に立体感を感じさせる画像であってもよい。また、利用者の視点の移動に伴う運動立体視によって利用者に立体感を感じさせる画像であってもよい。また、画像内のオブジェクトに光や影を付与することにより利用者に立体感を感じさせる画像であってもよく、画像のコントラストを調整することにより利用者に立体感を感じさせる画像であってもよい。
【００２５】
ＨＭＤ１００は、通信キャリアＢＳを介して無線通信でインターネットＩＮＴに接続されている。プロジェクター２００は、通信キャリアＢＳを介して無線通信でインターネットＩＮＴに接続されている。サーバー３００は、有線通信でインターネットＩＮＴに接続されている。この結果、サーバー３００とヘッドマウントディスプレイ１００、サーバー３００とプロジェクター２００、とは互いにインターネットＩＮＴによって接続される。通信キャリアＢＳは、送受信アンテナや、無線基地局、交換局を含む。
【００２６】
本実施形態のＨＭＤ１００は、後述の表示処理を実行することにより、外景に含まれる任意のオブジェクトであって、利用者がＨＭＤ１００を透過して視認する任意のオブジェクトの視認性を低下させると共に、当該オブジェクトを三次元的に表す虚像を、利用者に視認させることができる。
【００２７】
Ａ−２．頭部装着型表示装置（ＨＭＤ）の構成：
図１に示すように、ＨＭＤ１００は、利用者の頭部に装着された状態において利用者に虚像を視認させる画像表示部２０と、画像表示部２０を制御する制御部（コントローラー）１０とを備えている。なお、以降の説明において、ＨＭＤ１００によって利用者が視認する虚像を便宜的に「表示画像」とも呼ぶ。また、ＨＭＤ１００が画像データーに基づいて生成された画像光を射出することを「画像を表示する」ともいう。
【００２８】
Ａ−２−１．画像表示部の構成：
図２は、ＨＭＤ１００の構成を機能的に示すブロック図である。図１に示すように、画像表示部２０は、利用者の頭部に装着される装着体であり、本実施形態では眼鏡形状である。画像表示部２０は、右保持部２１と、右表示駆動部２２と、左保持部２３と、左表示駆動部２４と、右光学像表示部２６と、左光学像表示部２８と、カメラ６１と、９軸センサー６６と、を備えている。以降、利用者が画像表示部２０を装着した状態における、画像表示部２０の各部の位置関係と機能について説明する。
【００２９】
図１に示すように、右光学像表示部２６および左光学像表示部２８は、利用者の右の眼前と、左の眼前とにそれぞれ位置するように配置されている。右光学像表示部２６の一端と左光学像表示部２８の一端とは、利用者の眉間に対応する位置で接続されている。図２に示すように、右光学像表示部２６は、右導光板２６１と調光板（図示省略）とを備えている。右導光板２６１は、光透過性の樹脂材料等によって形成され、右表示駆動部２２から出力された画像光を、所定の光路に沿って反射させつつ利用者の右眼ＲＥに導く。調光板は、薄板状の光学素子であり、画像表示部２０の表側（利用者の眼の側とは反対の側）を覆うように配置されている。調光板は、導光板２６１を保護し、導光板２６１の損傷や汚れの付着等を抑制する。また、調光板の光透過率を調整することによって、利用者の眼に入る外光量を調整して虚像の視認のしやすさを調整することができる。なお、調光板は省略可能である。
【００３０】
左光学像表示部２８は、左導光板２６２と調光板（図示省略）とを備えている。これらの詳細は、右光学像表示部２６と同様である。なお、右光学像表示部２６および左光学像表示部２８を総称して単に「光学像表示部」とも呼ぶ。光学像表示部は、画像光を用いて利用者の眼前に虚像を形成する限りにおいて任意の方式を用いることができ、例えば、回折格子を用いて実現されても良いし、半透過反射膜を用いて実現されても良い。
【００３１】
図１に示すように、右保持部２１は、右光学像表示部２６の他端ＥＲから利用者の側頭部に対応する位置にかけて延伸して設けられている。左保持部２３は、左光学像表示部２８の他端ＥＬから利用者の側頭部に対応する位置にかけて、延伸して設けられている。右保持部２１および左保持部２３は、眼鏡のテンプル（つる）のようにして、利用者の頭部に画像表示部２０を保持する。なお、右保持部２１および左保持部２３を総称して単に「保持部」とも呼ぶ。
【００３２】
図１に示すように、右表示駆動部２２は、右保持部２１の内側（利用者の頭部に対向する側）に配置されている。左表示駆動部２４は、左保持部２３の内側に配置されている。図２に示すように、右表示駆動部２２は、受信部（Ｒｘ）５３と、光源として機能する右バックライト（ＢＬ）制御部２０１および右バックライト（ＢＬ）２２１と、表示素子として機能する右ＬＣＤ（液晶ディスプレイ、Liquid Crystal Display）制御部２１１および右ＬＣＤ２４１と、右投写光学系２５１とを備えている。なお、右バックライト制御部２０１と、右ＬＣＤ制御部２１１と、右バックライト２２１と、右ＬＣＤ２４１とを総称して「画像光生成部」とも呼ぶ。受信部５３は、制御部１０と画像表示部２０との間におけるシリアル伝送のためのレシーバーとして機能する。右バックライト制御部２０１は、入力された制御信号に基づいて右バックライト２２１を駆動する。右バックライト２２１は、例えばＬＥＤ（Light Emitting Diode）やエレクトロルミネセンス（ＥＬ）等の発光体である。右ＬＣＤ制御部２１１は、受信部５３を介して入力されたクロック信号ＰＣＬＫと、垂直同期信号ＶＳｙｎｃと、水平同期信号ＨＳｙｎｃと、右眼用画像データーＤａｔａ１とに基づいて、右ＬＣＤ２４１を駆動する。右ＬＣＤ２４１は、複数の画素をマトリクス状に配置した透過型液晶パネルである。右投写光学系２５１は、右ＬＣＤ２４１から射出された画像光を並行状態の光束にするコリメートレンズである。
【００３３】
左表示駆動部２４は、受信部（Ｒｘ）５４と、光源として機能する左バックライト（ＢＬ）制御部２０２および左バックライト（ＢＬ）２２２と、表示素子として機能する左ＬＣＤ制御部２１２および左ＬＣＤ２４２と、左投写光学系２５２とを備えている。これらの詳細は、右表示駆動部２２と同様である。なお、右表示駆動部２２および左表示駆動部２４を総称して単に「表示駆動部」とも呼ぶ。
【００３４】
カメラ６１は、利用者の右側の目尻に対応する位置に配置されている。カメラ６１は、画像表示部２０の表側方向、換言すれば、ヘッドマウントディスプレイ１００を装着した状態における利用者の視界方向の外景（外部の景色）を撮像し、外景画像を取得する。カメラ６１はいわゆる可視光カメラであり、カメラ６１により取得される外景画像は、物体から放射される可視光から物体の形状を表す画像である。本実施形態におけるカメラ６１は単眼カメラであるが、ステレオカメラとしてもよい。カメラ６１は「撮像部」として機能する。
【００３５】
９軸センサー６６は、利用者の右側のこめかみに対応する位置に配置されている。９軸センサー６６は、加速度（３軸）、角速度（３軸）、地磁気（３軸）を検出するモーションセンサーである。９軸センサー６６は、画像表示部２０に設けられているため、画像表示部２０が頭部に装着されているときには、頭部の動きを検出する「動き検出部」として機能する。ここで、頭部の動きとは、頭部の速度・加速度・角速度・向き・向きの変化を含む。
【００３６】
図１に示すように、画像表示部２０は、画像表示部２０と制御部１０とを接続するための接続部４０を備えている。接続部４０は、制御部１０に接続される本体コード４８と、本体コード４８が分岐した右コード４２および左コード４４と、分岐点に設けられた連結部材４６と、を含んでいる。右コード４２は、右表示駆動部２２に接続され、左コード４４は、左表示駆動部２４に接続されている。連結部材４６には、イヤホンプラグ３０を接続するためのジャックが設けられている。イヤホンプラグ３０からは、右イヤホン３２および左イヤホン３４が延伸している。本体コード４８における連結部材４６とは反対側の端部には、コネクター（図示省略）が設けられている。このコネクターは、制御部１０に設けられたコネクター（図示省略）との嵌合／嵌合解除により、制御部１０と画像表示部２０との接続／接続解除を実現する。画像表示部２０と制御部１０とは、接続部４０を介して各種信号の伝送を行う。右コード４２と、左コード４４と、本体コード４８には、例えば、金属ケーブルや光ファイバーを採用することができる。
【００３７】
Ａ−２−２．制御部の構成：
図１に示すように、制御部１０はＨＭＤ１００を制御するための装置である。制御部１０は、決定キー１１と、点灯部１２と、表示切替キー１３と、トラックパッド１４と、輝度切替キー１５と、方向キー１６と、メニューキー１７と、電源スイッチ１８と、を備えている。決定キー１１は、押下操作を検出して、制御部１０において操作された内容を決定するための信号を出力する。点灯部１２は、例えばＬＥＤによって実現され、ＨＭＤ１００の動作状態（例えば電源のＯＮ／ＯＦＦ等）を発光状態によって通知する。表示切替キー１３は、押下操作を検出して、例えばコンテンツ動画の表示モードを３Ｄと２Ｄとに切り替える信号を出力する。トラックパッド１４は、トラックパッド１４の操作面上における利用者の指の操作を検出して、検出内容に応じた信号を出力する。トラックパッド１４としては、静電式や圧力検出式、光学式といった種々の方式を採用できる。輝度切替キー１５は、押下操作を検出して、画像表示部２０の輝度を増減する信号を出力する。方向キー１６は、上下左右方向に対応するキーへの押下操作を検出して、検出内容に応じた信号を出力する。電源スイッチ１８は、スイッチのスライド操作を検出することで、ＨＭＤ１００の電源投入状態を切り替える。
【００３８】
図２に示すように、制御部１０は、入力情報取得部１１０と、記憶部１２０と、電源１３０と、無線通信部１３２と、ＧＰＳモジュール１３４と、ＣＰＵ１４０と、インターフェイス１８０と、送信部（Ｔｘ）５１および５２とを備え、各部は図示しないバスにより相互に接続されている。
【００３９】
入力情報取得部１１０は、決定キー１１、表示切替キー１３、トラックパッド１４、輝度切替キー１５、方向キー１６、メニューキー１７、および、電源スイッチ１８に対する操作入力に応じた信号を取得する。入力情報取得部１１０は、上記以外の種々の方法を用いた操作入力を取得することができる。例えば、フットスイッチ（利用者の足により操作するスイッチ）による操作入力を取得してもよい。例えば、図示しない視線検出部によって検出された利用者の視線や、目の動きに対応付けられたコマンドによる操作入力を取得してもよい。このコマンドは利用者によって追加可能に設定されていてもよい。例えば、利用者の視界方向の画像を撮影するカメラを用いて利用者のジェスチャーを検知し、ジェスチャーに対応付けられたコマンドによる操作入力を取得してもよい。ジェスチャー検知の際は、利用者の指先や、利用者の手に付けられた指輪や、利用者の手にする医療器具等を動き検出のための目印にすることができる。フットスイッチや視線による操作入力を取得可能とすれば、利用者が手を離すことが困難である作業においても、入力情報取得部１１０は、利用者からの操作入力を取得することができる。
【００４０】
記憶部１２０は、ＲＯＭ、ＲＡＭ、ＤＲＡＭ、ハードディスク等によって構成されている。記憶部１２０には、オペレーティングシステム（ОＳ）をはじめとする種々のコンピュータープログラムが格納されている。
【００４１】
電源１３０は、ＨＭＤ１００の各部に電力を供給する。電源１３０としては、例えば二次電池を用いることができる。
【００４２】
無線通信部１３２は、所定の無線通信規格に則って、外部装置との間で無線通信を行う。所定の無線通信規格とは、例えば、赤外線、Ｂｌｕｅｔｏｏｔｈ（登録商標）に例示される近距離無線通信、ＩＥＥＥ８０２．１１に例示される無線ＬＡＮ等である。
【００４３】
ＧＰＳモジュール１３４は、ＧＰＳ衛星からの信号を受信することにより、ＨＭＤ１００の利用者の現在位置を検出し、利用者の現在位置情報を表す現在位置情報を生成する。現在位置情報は、例えば緯度経度を表す座標によって実現することができる。
【００４４】
ＣＰＵ１４０は、記憶部１２０に格納されているコンピュータープログラムを読み出して実行することにより、二次元画像取得部１４２、三次元画像取得部１４４、像調整部１４６、ＯＳ１５０、画像処理部１６０、音声処理部１７０、表示制御部１９０として機能する。
【００４５】
二次元画像取得部１４２は、後述の表示処理において、ＨＭＤ１００がサーバー３００から受信した二次元画像を取得する。三次元画像取得部１４４は、後述の表示処理において、ＨＭＤ１００がサーバー３００から受信した三次元画像を取得する。
【００４６】
像調整部１４６は、後述の表示処理を実行する。表示処理とは、外景に含まれる任意のオブジェクトであって、利用者がＨＭＤ１００の画像表示部２０を透過して視認する任意のオブジェクトの視認性を低下させると共に、当該オブジェクトを三次元的に表す虚像を形成するための処理である。詳細は後述する。
【００４７】
画像処理部１６０は、インターフェイス１８０や無線通信部１３２を介して入力されるコンテンツ（映像）に基づいて信号を生成する。例えば、コンテンツがディジタル形式の場合、画像処理部１６０は、クロック信号ＰＣＬＫと、画像データーＤａｔａとを生成する。なお、ディジタル形式の場合、クロック信号ＰＣＬＫが画像信号に同期して出力されるため、垂直同期信号ＶＳｙｎｃおよび水平同期信号ＨＳｙｎｃの生成と、アナログ画像信号のＡ／Ｄ変換とは不要である。画像処理部１６０は、生成されたクロック信号ＰＣＬＫ、垂直同期信号ＶＳｙｎｃ、水平同期信号ＨＳｙｎｃと、記憶部１２０内のＤＲＡＭに格納された画像データーＤａｔａとを、送信部５１、５２を介して、画像表示部２０へ送信する。送信部５１を介して送信される画像データーＤａｔａを「右眼用画像データーＤａｔａ１」とも呼び、送信部５２を介して送信される画像データーＤａｔａを「左眼用画像データーＤａｔａ２」とも呼ぶ。なお、画像処理部１６０は、記憶部１２０に格納された画像データーＤａｔａに対して、解像度変換処理、輝度や彩度の調整といった種々の色調補正処理、キーストーン補正処理等の画像処理を実行してもよい。
【００４８】
表示制御部１９０は、右表示駆動部２２および左表示駆動部２４を制御する制御信号を生成する。具体的には、表示制御部１９０は、制御信号により、左右のＬＣＤ制御部２１１、２１２による左右のＬＣＤ２４１、２４２の駆動ＯＮ／ＯＦＦや、左右のバックライト制御部２０１、２０２による左右のバックライト２２１、２２２の駆動ＯＮ／ＯＦＦを個別に制御することにより、右表示駆動部２２および左表示駆動部２４のそれぞれによる画像光の生成および射出を制御する。表示制御部１９０は、これらの制御信号を、送信部５１、５２を介して画像表示部２０へ送信する。
【００４９】
音声処理部１７０は、コンテンツに含まれる音声信号を取得し、取得した音声信号を増幅して、右イヤホン３２の図示しないスピーカーと、左イヤホン３４の図示しないスピーカーとに対して供給する。
【００５０】
インターフェイス１８０は、所定の有線通信規格に則って、外部装置ＯＡとの間で通信を行う。所定の有線通信規格としては、例えば、ＭｉｃｒｏＵＳＢ（Universal Serial Bus）、ＵＳＢ、ＨＤＭＩ（High Definition Multimedia Interface、ＨＤＭＩは登録商標）、ＤＶＩ（Digital Visual Interface）、ＶＧＡ（Video Graphics Array）、コンポジット、ＲＳ−２３２Ｃ（Recommended Standard 232）、ＩＥＥＥ８０２．３に例示される有線ＬＡＮ等である。外部機器ОＡとしては、例えば、パーソナルコンピューターＰＣや携帯電話端末、ゲーム端末等を利用することができる。
【００５１】
図３は、利用者に視認される虚像の一例を示す説明図である。上述のようにして、ＨＭＤ１００の利用者の両眼に導かれた画像光が利用者の網膜に結像することにより、利用者は虚像ＶＩを視認する。図の例では、虚像ＶＩは、ＨＭＤ１００のＯＳ１５０の待ち受け画面である。また、利用者は、右光学像表示部２６および左光学像表示部２８を透過して外景ＳＣを視認する。このように、本実施形態のＨＭＤ１００の利用者は、視野ＶＲのうち虚像ＶＩが表示された部分については、虚像ＶＩと、虚像ＶＩの背後の外景ＳＣとを見ることができる。また、視野ＶＲのうち虚像ＶＩが表示されていない部分については、光学像表示部を透過して、外景ＳＣを直接見ることができる。
【００５２】
Ａ−３．サーバーの構成：
図４は、サーバー３００の構成を機能的に示すブロック図である。サーバー３００は、ＣＰＵ３１０と、ＲＯＭ３２０と、ＲＡＭ３３０と、通信インターフェィス（Ｉ／Ｆ）３４０と、記憶部３５０と、を備え、各部は図示しないバスにより相互に接続されている。なお、サーバー３００は「情報処理装置」として機能する。
【００５３】
ＣＰＵ３１０は、ＲＯＭ３２０や記憶部３５０に格納されているコンピュータープログラムをＲＡＭ３３０に展開して実行することにより、サーバー３００の各部を制御する。そのほか、ＣＰＵ３１０は、送信部３１２としても機能する。
【００５４】
通信インターフェイス３４０は、無線通信インターフェイスと、有線通信インターフェイスとを含んでいる。無線通信インターフェイスは、図示しない送受信回路を含み、アンテナを介して受信した電波の復調とデーターの生成、および、アンテナを介して送信する電波の生成と変調を行う。有線通信インターフェイスは、有線ケーブルを介して他の装置と接続される。
【００５５】
記憶部３５０は、ＲＯＭ、ＲＡＭ、ＤＲＡＭ、ハードディスク等によって構成されている。記憶部３５０は、画像記憶部３５２を含んでいる。画像記憶部３５２には、二次元画像のための「２Ｄ画像データー」と、三次元画像のための「部分３Ｄ画像データー」と、が対応付けて記憶されている。同じ行（エントリ）に記憶されている二次元画像と、三次元画像とは対応関係にある。具体的には、三次元画像は、二次元画像に含まれる任意のオブジェクトを三次元的に表すための画像である。例えば、二次元画像である２Ｄｄａｔａ１が「林の中にリンゴが落ちている風景を表した画像」である場合、三次元画像である３Ｄｄａｔａ１は「リンゴを三次元的に表すための画像」である。この例の場合では、「リンゴ」が任意のオブジェクトに相当する。
【００５６】
サーバー３００の送信部３１２は、後述の表示処理において、２Ｄ画像データーと、２Ｄ画像データーと対応関係にある部分３Ｄ画像データーと、をＨＭＤ１００へ送信する。また、送信部３１２は、ＨＭＤ１００へ送信したのと同一の２Ｄ画像データーをプロジェクター２００へ送信する。
【００５７】
Ａ−４．表示処理：
図５は、表示処理の手順を示すシーケンス図である。本実施形態の表示処理は、ＨＭＤ１００と、プロジェクター２００と、サーバー３００とが協働することによって実行される。表示処理の開始トリガーは任意に定めることができる。例えば、ＨＭＤ１００が起動されたこと、換言すれば、電源のＯＮを検出したことを開始トリガーとしてもよい。また、例えば、ＨＭＤ１００のＯＳ１５０や特定のアプリケーションからの処理開始要求を開始トリガーとしてもよい。
【００５８】
ステップＳ１０２において、サーバー３００の送信部３１２は、プロジェクター２００へ２Ｄ画像データーを送信する。ステップＳ１０４において、プロジェクター２００は、受信した画像データーに基づく画像をスクリーン２５０へ投写させる。
【００５９】
ステップＳ１０６において、サーバー３００の送信部３１２は、ＨＭＤ１００へ２Ｄ画像データーと、２Ｄ画像データーと対応関係にある部分３Ｄ画像データーとを送信する。なお、図４の送信部３１２の説明の通り、ステップＳ１０６においてサーバー３００がＨＭＤ１００へ送信する２Ｄ画像データーは、ステップＳ１０２においてサーバー３００がプロジェクター２００へ送信した２Ｄ画像データーと同一の画像データーである。ステップＳ１０６において、ＨＭＤ１００の二次元画像取得部１４２は、２Ｄ画像データーを取得し、三次元画像取得部１４４は、部分３Ｄ画像データーを取得する。
【００６０】
図６は、キャンセル領域について説明するための説明図である。図５のステップＳ１０８においてＨＭＤ１００の像調整部１４６は、キャンセル領域Ａ２（図６）を特定する。ここで、キャンセル領域Ａ２とは、画像表示部２０において虚像ＶＩ（図３）が形成される全領域の中で、利用者が画像表示部２０を透過して外景ＳＣ（図３）中の任意のオブジェクトを視認する位置である。キャンセル領域Ａ２は「重なる位置」として機能する。
【００６１】
画像表示部２０において虚像ＶＩが形成される全領域は、表示駆動部（図２）が画像光を射出することができる最大の領域（以降「最大射出領域Ａ１」とも呼ぶ。）である。本実施形態のように表示駆動部をバックライトとＬＣＤとで構成している場合、最大射出領域Ａ１は、右ＬＣＤ２４１および左ＬＣＤ２４２において液晶が配置された全ての領域、かつ、右バックライト２２１および左バックライト２２２が照明光を照射可能な領域として定義される。図６の例の場合、最大射出領域Ａ１は、座標（０，０）から始まり座標（ｎ,ｍ）で終わる領域である。
【００６２】
キャンセル領域Ａ２（図６）を特定するための具体的な手順は、例えば以下の手順ａ１〜ａ３を採用することができる。
（ａ１）像調整部１４６は、最大射出領域Ａ１に対して、二次元画像取得部１４２により取得された２Ｄ画像データーを仮に配置する。配置の際、像調整部１４６は、２Ｄ画像データーの大きさを最大射出領域Ａ１の大きさに合わせて伸縮する。なお、スクリーン２５０の大きさによっては、ＨＭＤ１００の利用者は、画像表示部２０を透過して、スクリーン２５０に表示されている画像のうちの一部の領域の画像のみを視認する場合もあり得る。このような場合、像調整部１４６は、配置の際、例えばカメラ６１によって得られる外景画像に基づいて、ＨＭＤ１００の利用者が視認している領域を求め、取得された２Ｄ画像データーから求めた領域の画像データーを切り出してもよい。
【００６３】
（ａ２）像調整部１４６は、三次元画像取得部１４４により取得された部分３Ｄ画像データーを加工して、比較用３Ｄ画像データーを生成する。例えば、ＨＭＤ１００において採用されている３Ｄ実現方式がサイドバイサイド方式である場合、オブジェクトの位置が左右（水平方向）にずれた、右眼用と左眼用の２枚の部分３Ｄ画像データーが存在する。このため、像調整部１４６は、２枚の部分３Ｄ画像データーから、利用者が視認するであろう位置にオブジェクトが配置された１枚の比較用３Ｄ画像データーを生成する。さらに、手順ａ１で２Ｄ画像データーの伸縮をしている場合、像調整部１４６は、比較用３Ｄ画像データーを同じ割合で伸縮する。なお、像調整部１４６は、必要がなければ三次元画像取得部１４４により取得された部分３Ｄ画像データーをそのまま（加工せずに）比較用３Ｄ画像データーとしてもよい。
【００６４】
（ａ３）像調整部１４６は、最大射出領域Ａ１に配置されている二次元画像（２Ｄ画像データーに基づく画像）と、比較用３Ｄ画像データーに基づく三次元画像と、を用いた画像認識（比較）を行い、二次元画像と三次元画像とが一致する領域を「キャンセル領域Ａ２」とする。
【００６５】
図６の例の場合、キャンセル領域Ａ２は、座標（ｘ１,ｙ１）から始まり座標（ｘ２,ｙ２）で終わる領域である。図６では、キャンセル領域Ａ２を破線で示す。このようにすれば、像調整部１４６は、サーバー３００（外部）から取得した三次元画像（部分３Ｄ画像データー、比較用３Ｄ画像データー）と、サーバー３００（外部）から取得した二次元画像（２Ｄ画像データー）と、を比較することで、調整画像ＡＤにおけるキャンセル領域Ａ２（重なる位置）を簡単に特定することができる。
【００６６】
なお、図６では、キャンセル領域Ａ２を、三次元画像取得部１４４により取得された部分３Ｄ画像データーと同じ矩形形状としているが、キャンセル領域Ａ２は、部分３Ｄ画像データーに含まれるオブジェクト（図の例ではリンゴ）の形状としてもよい。
【００６７】
図５のステップＳ１１０において、ＨＭＤ１００の像調整部１４６は、特定したキャンセル領域Ａ２における、二次元透過像の視認性を低下させるための「調整画像」を生成する。ここで、二次元透過像とは、ＨＭＤ１００の利用者が光学像表示部を透過して視認する外景ＳＣ（図３）を意味する。すなわち、調整画像は、キャンセル領域Ａ２の領域内において、利用者が外景ＳＣを見にくくするために用いられる画像である。像調整部１４６は、以下の第１〜第３の生成方法のいずれかを用いて、調整画像を生成することができる。
【００６８】
図７は、調整画像の第１の生成方法についての説明図である。像調整部１４６は、座標（ｘ１,ｙ１）から始まり座標（ｘ２,ｙ２）で終わるキャンセル領域Ａ２に対して、二次元透過像（外景ＳＣ）に含まれるオブジェクトの彩度を下げることが可能な色、または、オブジェクトの明度を上げることが可能な色を配置し、他の領域に対して黒色のデーターを配置することで、調整画像ＡＤを生成する。像調整部１４６は、「オブジェクトの彩度を下げることが可能な色」、または、「オブジェクトの明度を上げることが可能な色」を、オブジェクトを三次元的に表すための三次元画像（部分３Ｄ画像データー）に基づいて決定することができる。なお、像調整部１４６は、黒色のデーターを配置することに代えて、ＨＭＤ１００の表示駆動部における画像光生成の有効／無効を切り替えるためのＥｎａｂｌｅ信号をＬｏ値（無効を示す値）としてもよい。
【００６９】
調整画像の第２の生成方法によれば、像調整部１４６は、キャンセル領域Ａ２（画像表示部２０を透過して利用者が視認するオブジェクトと重なる位置）に、オブジェクトの彩度を下げることが可能な色、または、オブジェクトの明度を上げることが可能な色を配置した調整画像ＡＤを生成する。そして、像調整部１４６は、後述するステップＳ１１２において、調整画像ＡＤを表す虚像を表示させる。このため、利用者は、画像表示部２０を透過したオブジェクトと、オブジェクトの彩度を下げることが可能な色またはオブジェクトの明度を上げることが可能な色が配置された調整画像ＡＤと、を重畳して同時に視認することとなる。この結果、像調整部１４６は、外景に含まれる任意のオブジェクトであって、画像表示部２０を透過して利用者が視認するオブジェクトの視認性を低下させることができる。
【００７０】
図８は、調整画像の第２の生成方法についての説明図である。像調整部１４６は、座標（０，０）から始まり座標（ｎ，ｍ）で終わる最大射出領域Ａ１に対して、二次元透過像（外景ＳＣ）に含まれるオブジェクトと同系の色を配置することで、調整画像ＡＤを生成する。オブジェクトが複数の色で構成されている場合、「オブジェクトと同系の色」とは、例えば、オブジェクトを構成する色のＲＧＢ値の平均値である色としてもよく、オブジェクトを構成する色のＲＧＢ値の代表値である色としてもよい。像調整部１４６は、「オブジェクトと同系の色」を、オブジェクトを三次元的に表すための三次元画像（部分３Ｄ画像データー）に基づいて決定することができる。なお、像調整部１４６は、「オブジェクトと同系の色」を、カメラ６１によって得られた外景画像に基づいて決定してもよい。そうすれば、環境光を加味して色を決定することができる。
【００７１】
調整画像の第１の生成方法によれば、像調整部１４６は、画像表示部２０を透過して利用者が視認するオブジェクトと同系の色を最大射出領域Ａ１（全体）に配置した調整画像ＡＤを生成する。そして、像調整部１４６は、後述するステップＳ１１２において、調整画像ＡＤを表す虚像を表示させる。このため、利用者は、画像表示部２０を透過したオブジェクトと、視界全体に広がるオブジェクトと同系の色と、を重畳して同時に視認することとなる。この結果、像調整部１４６は、外景に含まれる任意のオブジェクトであって、画像表示部２０を透過して利用者が視認するオブジェクトの視認性を低下させることができる。
【００７２】
図９は、調整画像の第３の生成方法についての説明図である。二次元画像取得部１４２は、さらに、サーバー３００から、背景用の二次元画像ＢＤを取得する。背景用の二次元画像ＢＤは、図５のステップＳ１０６でサーバー３００が送信した２Ｄ画像データーが表す画像から、対応する部分３Ｄ画像データーに含まれるオブジェクト（図の例ではリンゴ）が除外された画像である。像調整部１４６は、背景用の二次元画像ＢＤから、キャンセル領域Ａ２に相当する一部の画像、すなわち、図５のステップＳ１０８で特定した座標（ｘ１,ｙ１）から始まり座標（ｘ２,ｙ２）で終わる領域の画像を抜き出す。像調整部１４６は、抜き出した画像を、座標（ｘ１,ｙ１）から始まり座標（ｘ２,ｙ２）で終わるキャンセル領域Ａ２に対して配置し、他の領域に対して黒色のデーターを配置することで、調整画像ＡＤを生成する。なお、像調整部１４６は、黒色のデーターを配置することに代えて、ＨＭＤ１００の表示駆動部における画像光生成の有効／無効を切り替えるためのＥｎａｂｌｅ信号をＬｏ値（無効を示す値）としてもよい。
【００７３】
なお、二次元画像取得部１４２は、背景用の二次元画像ＢＤをサーバー３００から取得することに代えて、自ら生成してもよい。例えば、二次元画像取得部１４２は、サーバー３００から取得した２Ｄ画像データーに対して、対応する部分３Ｄ画像データーに含まれるオブジェクトをマスクするための画像処理を実施することで、背景用の二次元画像ＢＤを生成することができる。マスクするための画像処理は、例えば、画像内のオブジェクトを黒塗りしてもよく、白塗りしてもよく、オブジェクトの周辺の画像を利用してオブジェクトを消してもよい。
【００７４】
調整画像の第３の生成方法によれば、像調整部１４６は、背景用の二次元画像ＢＤ（外景を表す画像であって外景に含まれるオブジェクトが除外された画像）の一部を、キャンセル領域Ａ２（画像表示部２０を透過して利用者が視認するオブジェクトと重なる位置）に配置した調整画像ＡＤを生成する。そして、像調整部１４６は、後述するステップＳ１１２において、調整画像ＡＤを表す虚像を表示させる。このため、利用者は、画像表示部２０を透過したオブジェクトと、外景に含まれるオブジェクトが除外された画像が配置された調整画像ＡＤと、を重畳して同時に視認することとなる。この結果、像調整部１４６は、外景に含まれる任意のオブジェクトであって、画像表示部２０を透過して利用者が視認するオブジェクトの視認性を低下させることができる。
【００７５】
図５のステップＳ１１２において、ＨＭＤ１００の像調整部１４６は、ステップＳ１１０で生成した調整画像ＡＤと、三次元画像取得部１４４によって取得された部分３Ｄ画像との両方を表示させる。具体的には、像調整部１４６は、画像処理部１６０に対して、調整画像ＡＤの画像データーと、部分３Ｄ画像データーとを送信する。これら画像データーを受信した画像処理部１６０では、調整画像ＡＤの画像データーと、部分３Ｄ画像データーとを合成した画像データーに対して図２の表示処理を実行する。
【００７６】
なお、動画に対応する場合、ＨＭＤ１００と、プロジェクター２００と、サーバー３００とは、上述したステップＳ１０２〜Ｓ１１２の処理を繰り返し実行してもよい。
【００７７】
図１０は、表示処理の結果を示す説明図である。表示処理のステップＳ１１２の結果、ＨＭＤ１００の利用者Ｕ１は、視野ＶＲ１において、ＨＭＤ１００の光学像表示部を透過して、スクリーン２５０に映し出された２Ｄ画像データーが表す二次元画像Ｄ２を、外景ＳＣとして視認する。さらに、ＨＭＤ１００の利用者Ｕ１は、第１〜３の生成方法のいずれかに基づいて生成・表示されている調整画像ＡＤを表す虚像ＶＩを視認する。このように、ＨＭＤ１００の利用者Ｕ１が調整画像ＡＤを視認することによって、スクリーン２５０に映し出された二次元のオブジェクト（図の例ではリンゴ）の視認性が低下される。このため、ＨＭＤ１００の利用者Ｕ１は、部分３Ｄ画像データーによって三次元的に表示されたオブジェクト（リンゴ）の虚像ＶＩを、よりはっきりと視認することができる。一方、ＨＭＤ１００の利用者ではない利用者Ｕ２は、視野ＶＲ２において、スクリーン２５０に映し出された２Ｄ画像データーが表す二次元画像Ｄ２を視認する。
【００７８】
図１１は、表示処理の結果を示す他の説明図である。上述した表示処理では、破線で囲んだキャンセル領域Ａ２と、部分３Ｄ画像データーによって三次元的に表示されるオブジェクトＯＢＪと、は同じ位置となる。これは、表示処理のステップＳ１０８において、像調整部１４６が、サーバー３００から取得した２Ｄ画像データーに基づいてキャンセル領域Ａ２を決定しているためである。
【００７９】
Ａ−５．表示処理の変形：
以降では、キャンセル領域Ａ２と、部分３Ｄ画像データーによって三次元的に表示されるオブジェクトＯＢＪとの位置を変えるための構成について説明する。以降では、図５の表示処理と相違する部分についてのみ説明する。
【００８０】
ステップＳ１０６において、ＨＭＤ１００の二次元画像取得部１４２は、カメラ６１に撮像を指示し、ＨＭＤ１００の利用者の視界方向の外景画像を取得する。本変形では、カメラ６１によって撮像された外景画像が「二次元画像」として機能する。本変形では、サーバー３００からＨＭＤ１００への２Ｄ画像データーの送信は省略可能である。
【００８１】
ステップＳ１０８〜Ｓ１１２は、図５における各ステップと同様である。ただし、説明中の「２Ｄ画像データー」との記載を「ステップＳ１０６で取得された外景画像」と読み替える。
【００８２】
表示処理（変形）のステップＳ１０８によれば、像調整部１４６は、サーバー３００（外部）から取得した三次元画像（部分３Ｄ画像データー、比較用３Ｄ画像データー）と、利用者の視界方向を撮像した二次元画像、すなわち外景画像と、を比較することで、実際の利用者の視界方向の情報に基づいて、調整画像ＡＤにおけるキャンセル領域Ａ２（重なる位置）を正確に特定することができる。
【００８３】
図１２は、表示処理（変形）の結果を示す説明図である。上述した表示処理の変形では、破線で囲んだキャンセル領域Ａ２と、部分３Ｄ画像データーによって三次元的に表示されるオブジェクトＯＢＪと、は異なる位置となる。これは、表示処理（変形）のステップＳ１０８において、像調整部１４６が、利用者Ｕ１の視界方向の外景画像（すなわち、利用者Ｕ１が実際に目にしている外景の画像）に基づいて、キャンセル領域Ａ２を決定しているためである。
【００８４】
以上のように、第１実施形態の表示処理によれば、ＨＭＤ１００（頭部装着型表示装置）の像調整部１４６は、外景ＳＣに含まれる任意のオブジェクトであって、画像表示部２０を透過して利用者Ｕ１が視認するオブジェクトの視認性を低下させると共に、オブジェクトを三次元的に表す虚像ＶＩを画像表示部２０に表示させる。このようにすれば、透過型のＨＭＤ１００において、利用者Ｕ１が目前の画像表示部（光学像表示部）を透過して見る外景ＳＣに含まれる任意のオブジェクトを、仮想的に、三次元的に表示させることができる。
【００８５】
Ｂ．第２実施形態：
本発明の第２実施形態では、第１実施形態と同様の処理を頭部装着型表示装置（ＨＭＤ）単独で実施する構成について説明する。以下では、第１実施形態と異なる構成および動作を有する部分についてのみ説明する。なお、図中において第１実施形態と同様の構成部分については先に説明した第１実施形態と同様の符号を付し、その詳細な説明を省略する。
【００８６】
Ｂ−１．画像表示システムの構成：
第２実施形態では、図１に示したＨＭＤ１００に代えてＨＭＤ１００ａを備えている。さらに、第２実施形態では、プロジェクター２００と、スクリーン２５０と、サーバー３００と、を備えない。
【００８７】
Ｂ−２．頭部装着型表示装置（ＨＭＤ）の構成：
図１３は、第２実施形態におけるＨＭＤ１００ａの構成を機能的に示すブロック図である。図２に示した第１実施形態との違いは、制御部１０に代えて制御部１０ａを備える点である。
【００８８】
Ｂ−２−１．画像表示部の構成：
画像表示部２０の構成は、図１、２に示した第１実施形態と同様である。
【００８９】
Ｂ−２−２．制御部の構成：
制御部１０ａは、二次元画像取得部１４２に代えて二次元画像取得部１４２ａを備え、三次元画像取得部１４４に代えて三次元画像取得部１４４ａを備え、像調整部１４６に代えて像調整部１４６ａを備えている。二次元画像取得部１４２ａと、三次元画像取得部１４４ａと、像調整部１４６ａとは、表示処理における処理内容が第１実施形態とは異なる。詳細は後述する。
【００９０】
制御部１０ａは、さらに、記憶部１２０内に部分３Ｄ画像データー記憶部１２２を備えている。部分３Ｄ画像データー記憶部１２２は、二次元的に表現されている外景（例えば、絵画やポスターのような二次元表現物）に含まれるオブジェクトを三次元的に現すための三次元画像データーの集合である。なお、部分３Ｄ画像データー記憶部１２２内の各データーは、３Ｄモデル空間と、９軸センサー６６により得られる利用者の頭の動きと、ＧＰＳモジュール１３４により得られる現在位置情報と、を利用して動的に生成されてもよい。
【００９１】
Ｂ−３．表示処理：
図１４は、第２実施形態における表示処理の手順を示すフローチャートである。第２実施形態の表示処理は、ＨＭＤ１００ａによって実行される。図５で説明した第１実施形態と同様に、表示処理の開始トリガーは任意に定めることができる。
【００９２】
ステップＳ２０２において二次元画像取得部１４２ａは、カメラ６１に撮像を指示し、ＨＭＤ１００ａの利用者の視界方向の外景画像を取得する。第２実施形態では、カメラ６１によって撮像された外景画像が「二次元画像」として機能する。
【００９３】
ステップＳ２０４において三次元画像取得部１４４ａは、ステップＳ２０２で取得された外景画像に合った部分３Ｄ画像データーを、部分３Ｄ画像データー記憶部１２２から検索し、取得する。具体的には、三次元画像取得部１４４ａは、外景画像を画像解析し、外景画像に含まれるオブジェクトを三次元的に表すための部分３Ｄ画像データーを、部分３Ｄ画像データー記憶部１２２から検索、取得する。
【００９４】
ステップＳ２０６において像調整部１４６ａは、キャンセル領域Ａ２（図６）を特定する。詳細は図５のステップＳ１０８と同様である。ただし、説明中の「２Ｄ画像データー」との記載を「ステップＳ２０２で取得された外景画像」と読み替える。
【００９５】
ステップＳ２０８において像調整部１４６ａは、調整画像ＡＤ（図７〜図９）を生成する。詳細は図５のステップＳ１１０と同様である。ただし、説明中の「２Ｄ画像データー」との記載を「ステップＳ２０２で取得された外景画像」と読み替える。
【００９６】
ステップＳ２１０において像調整部１４６ａは、ステップＳ２０８で生成した調整画像ＡＤと、三次元画像取得部１４４ａによって取得された部分３Ｄ画像データーとの両方を表示させる。詳細は図５のステップＳ１１２と同様である。ただし、説明中の「２Ｄ画像データー」との記載を「ステップＳ２０２で取得された外景画像」と読み替える。
【００９７】
なお、９軸センサー６６によって利用者の動きを検出する度に、ＨＭＤ１００ａは、上述したステップＳ２０２〜Ｓ２１０を繰り返し実行してもよい。
【００９８】
図１５は、第２実施形態における表示処理の結果を示す説明図である。表示処理のステップS２１０の結果、ＨＭＤ１００ａの利用者Ｕ１は、視野ＶＲ１において、ＨＭＤ１００ａの光学像表示部を透過して、現実環境の外景ＳＣを視認する。さらに、ＨＭＤ１００ａの利用者Ｕ１は、第１〜３の生成方法のいずれかに基づいて生成・表示されている調整画像ＡＤを表す虚像ＶＩを視認する。このように、ＨＭＤ１００ａの利用者Ｕ１が調整画像ＡＤを視認することによって、現実環境に存在するオブジェクト（図の例ではリンゴ）の視認性が低下される。このため、ＨＭＤ１００ａの利用者Ｕ１は、部分３Ｄ画像データーによって三次元的に表示されたオブジェクト（リンゴ）の虚像ＶＩを、よりはっきりと視認することができる。
【００９９】
以上のように、第２実施形態の表示処理によれば、他の装置（画像表示装置、サーバー）を備えない構成において、第１実施形態と同様の効果を得ることができる。
【０１００】
Ｃ．変形例：
上記実施形態において、ハードウェアによって実現されるとした構成の一部をソフトウェアに置き換えるようにしてもよく、逆に、ソフトウェアによって実現されるとした構成の一部をハードウェアに置き換えるようにしてもよい。その他、以下のような変形も可能である。
【０１０１】
・変形例１:
上記実施形態では、画像表示システムの構成について例示した。しかし、画像表示システムの構成は、本発明の要旨を逸脱しない範囲において任意に定めることが可能であり、例えば、構成要素の追加・削除・変換等を行うことができる。
【０１０２】
例えば、画像表示システム内における機能部の配置は、任意に変更可能である。例えば、サーバーが備えると説明した機能部のうちの少なくとも一部または全部は、ＨＭＤに備えられていてもよく、プロジェクターに備えられていてもよい。同様に、ＨＭＤが備えると説明した機能部の内の少なくとも一部または全部は、サーバーに備えられていてもよく、プロジェクターに備えられていてもよい。
【０１０３】
例えば、画像表示システムは、ＨＭＤと、プロジェクターおよびスクリーンと、サーバーとを備える構成とした。しかし、画像表示システムの構成要素はあくまで例示であり、任意に変更することができる。例えば、画像表示システムは、プロジェクターおよびスクリーンに代えて、または、プロジェクターおよびスクリーンと共に、ディスプレイを備えていてもよい。この場合、ディスプレイが「画像表示装置」として機能する。また、例えば、画像表示システムは、例示しない他の構成要素（例えば、ルーターやアクセスポイント等のネットワーク装置等）を備えていてもよい。また、画像表示システムにおいて、サーバーは、インターネットを介して接続された態様に限られない。例えば、サーバーは、ＨＭＤやプロジェクターと同一ＬＡＮ内に配置されていてもよい。
【０１０４】
例えば、サーバーが備える送信部は、ＣＰＵがＲＯＭやハードディスクに格納されているコンピュータープログラムをＲＡＭに展開して実行することにより実現されるものとして記載した。しかし、この機能部は、当該機能を実現するために設計されたＡＳＩＣ（Application Specific Integrated Circuit：特定用途向け集積回路）を用いて構成されてもよい。例えば、サーバーの画像記憶部についても種々の変更が可能である。例えば、例示したようなテーブル形式を採用しなくてもよい。また、例示したテーブルに対して、フィールドの追加、削除、変更を行ってもよい。
【０１０５】
・変形例２：
上記実施形態では、ＨＭＤの構成について例示した。しかし、ＨＭＤの構成は、本発明の要旨を逸脱しない範囲において任意に定めることが可能であり、例えば、各構成部の追加・削除・変換等を行うことができる。
【０１０６】
上記実施形態における、制御部と、画像表示部とに対する構成要素の割り振りは、あくまで一例であり、種々の態様を採用可能である。例えば、以下のような態様としてもよい。（i）制御部にＣＰＵやメモリー等の処理機能を搭載、画像表示部には表示機能のみを搭載する態様、（ｉｉ）制御部と画像表示部との両方にＣＰＵやメモリー等の処理機能を搭載する態様、（ｉｉｉ）制御部と画像表示部とを一体化した態様（例えば、画像表示部に制御部が含まれ眼鏡型のウェアラブルコンピューターとして機能する態様）、（ｉｖ）制御部の代わりにスマートフォンや携帯型ゲーム機を使用する態様、（ｖ）制御部と画像表示部とを無線ＬＡＮや赤外線通信やＢｌｕｅｔｏｏｔｈ等の無線の信号伝送路を介した接続により接続し、接続部（コード）を廃した態様。なお、この場合において、制御部または画像表示部に対する給電をワイヤレスにより実施してもよい。
【０１０７】
例えば、上記実施形態で例示した制御部、画像表示部の構成は任意に変更することができる。具体的には、例えば、上記実施形態では、制御部が送信部を備え、画像表示部が受信部を備えるものとしたが、送信部および受信部はいずれも、双方向通信が可能な機能を備えており、送受信部として機能してもよい。また、例えば、制御部が備えるとした操作用インターフェイス（各種キーやトラックパッド等）の一部を省略してもよい。また、制御部に操作用スティック等の他の操作用インターフェイスを備えてもよい。また、制御部にはキーボードやマウス等のデバイスを接続可能な構成として、キーボードやマウスから入力を受け付けるものとしてもよい。例えば、電源として二次電池を用いることしたが、電源としては二次電池に限らず、種々の電池を使用することができる。例えば、一次電池や、燃料電池、太陽電池、熱電池等を使用してもよい。
【０１０８】
図１６は、変形例におけるＨＭＤの外観の構成を示す説明図である。図１６（Ａ）の例の場合、画像表示部２０ｘは、右光学像表示部２６に代えて右光学像表示部２６ｘを備え、左光学像表示部２８に代えて左光学像表示部２８ｘを備えている。右光学像表示部２６ｘと左光学像表示部２８ｘとは、上記実施形態の光学部材よりも小さく形成され、ＨＭＤの装着時における利用者の右眼および左眼の斜め上にそれぞれ配置されている。図１６（Ｂ）の例の場合、画像表示部２０ｙは、右光学像表示部２６に代えて右光学像表示部２６ｙを備え、左光学像表示部２８に代えて左光学像表示部２８ｙを備えている。右光学像表示部２６ｙと左光学像表示部２８ｙとは、上記実施形態の光学部材よりも小さく形成され、ＨＭＤの装着時における利用者の右眼および左眼の斜め下にそれぞれ配置されている。このように、光学像表示部は利用者の眼の近傍に配置されていれば足りる。また、光学像表示部を形成する光学部材の大きさも任意であり、光学像表示部が利用者の眼の一部分のみを覆う態様、換言すれば、光学像表示部が利用者の眼を完全に覆わない態様のＨＭＤとして実現することもできる。
【０１０９】
例えば、制御部が備えるとした各処理部（例えば画像処理部、表示制御部等）は、ＣＰＵがＲＯＭやハードディスクに格納されているコンピュータープログラムをＲＡＭに展開して実行することにより実現されるものとして記載した。しかし、これら機能部は、当該機能を実現するために設計されたＡＳＩＣを用いて構成されてもよい。
【０１１０】
例えば、ＨＭＤは、両眼タイプの透過型ＨＭＤであるものとしたが、単眼タイプのＨＭＤとしてもよい。また、利用者がＨＭＤを装着した状態において外景の透過が遮断される非透過型ＨＭＤとして構成してもよいし、非透過型ＨＭＤにカメラを搭載したビデオシースルーとして構成してもよい。また、例えば、画像表示部として、眼鏡のように装着する画像表示部に代えて、通常の平面型ディスプレイ装置（液晶ディスプレイ装置、プラズマディスプレイ装置、有機ＥＬディスプレイ装置等）を採用してもよい。この場合にも、制御部と画像表示部との間の接続は、有線の信号伝送路を介した接続であってもよいし、無線の信号伝送路を介した接続であってもよい。このようにすれば、制御部を、通常の平面型ディスプレイ装置のリモコンとして利用することもできる。また、例えば、画像表示部として、眼鏡のように装着する画像表示部に代えて、例えば帽子のように装着する画像表示部といった他の形状の画像表示部を採用してもよい。また、イヤホンは耳掛け型やヘッドバンド型を採用してもよく、省略しても良い。また、例えば、自動車や飛行機等の車両、またはその他の交通手段に搭載されるヘッドアップディスプレイ（ＨＵＤ、Head-Up Display）として構成されてもよい。また、例えば、ヘルメット等の身体防護具に内蔵されたＨＭＤとして構成されてもよい。また、例えば、手持ち型のハンドヘルドディスプレイ（Hand held display）として構成されてもよい。
【０１１１】
例えば、上記実施形態では、画像光生成部は、バックライトと、バックライト制御部と、ＬＣＤと、ＬＣＤ制御部とを用いて構成されるものとした。しかし、上記の態様はあくまで例示である。画像光生成部は、これらの構成部と共に、またはこれらの構成部に代えて、他の方式を実現するための構成部を備えていても良い。例えば、画像光生成部は、有機ＥＬ（有機エレクトロルミネッセンス、Organic Electro-Luminescence）のディスプレイと、有機ＥＬ制御部とを備える構成としても良い。また、例えば、画像生成部は、ＬＣＤに代えてデジタル・マイクロミラー・デバイス等を用いることもできる。また、例えば、レーザー網膜投影型のＨＭＤに対して本発明を適用することも可能である。
【０１１２】
・変形例３：
上記実施形態では、表示処理の一例を示した。しかし、上記実施形態においてに示した処理の手順はあくまで一例であり、種々の変形が可能である。例えば、一部のステップを省略してもよいし、更なる他のステップを追加してもよい。また、実行されるステップの順序を変更してもよい。
【０１１３】
例えば、表示処理のステップＳ１０８では、二次元画像（２Ｄ画像データーにより表される二次元画像、または、カメラにより撮像された外景画像）と、三次元画像（比較用３Ｄ画像データーにより表される三次元画像）と、を比較し、両者が一致する領域を「キャンセル領域」とした。このため、上記実施形態では、キャンセル領域の大きさと、三次元画像が表示される領域の大きさとは略同一となる。しかし、キャンセル領域の大きさと、三次元画像が表示される領域の大きさとは相違していてもよい。例えば、キャンセル領域の大きさ＞三次元画像が表示される領域の大きさ、としてもよい。
【０１１４】
例えば、表示処理のステップＳ１０８では、利用者の視差を考慮してキャンセル領域を設定してもよい。この場合、像調整部は、右眼用画像データーＤａｔａ１として供給するための右眼用の調整画像と、左眼用画像データーＤａｔａ２として供給するための左眼用の調整画像と、を、利用者の視差に応じて別個に用意すればよい。利用者の視差は、記憶部に予め記憶されていてもよく、利用者による指定や変更が可能であってもよい。
【０１１５】
例えば、表示処理のステップＳ１０８は、サーバーが実施してもよい。サーバーにおけるキャンセル領域の特定方法は、図５のステップＳ１０８と同様である。サーバーは、キャンセル領域の特定後、特定したキャンセル領域の座標をＨＭＤへ送信すればよい。
【０１１６】
例えば、表示処理のステップＳ１０８、Ｓ１１０は、サーバーが実施してもよい。サーバーにおけるキャンセル領域の特定方法は、図５のステップＳ１０８と同様である。また、サーバーにおける調整画像の生成方法は、図５のステップＳ１１０と同様である。サーバーは、調整画像の生成後、生成した調整画像をＨＭＤへ送信すればよい。
【０１１７】
例えば、表示処理のステップＳ１１２において、像調整部は、９軸センサーによって取得された利用者の頭の動きや姿勢に応じて、調整画像の画像データーと、部分３Ｄ画像データーとを加工し、加工後のデーターを画像処理部へ送信してもよい。このようにすれば、利用者の頭の動きや姿勢に追従した表示処理を実現することができる。
【０１１８】
例えば、表示処理のステップＳ１１２では、画像処理部は、受信した調整画像の画像データーと、部分３Ｄ画像データーとを合成することで、両画像を表示することとした。しかし、画像処理部は、受信した調整画像の画像データーと、部分３Ｄ画像データーとを、時分割で画像表示部へ供給することで、両画像が同時に表示されていると利用者に認識させてもよい。
【０１１９】
例えば、サーバーの画像記憶部には、２Ｄ画像データーと、部分３Ｄ画像データーとに加えて、部分３Ｄデーターに関連する「関連データー」をさらに備える構成としてもよい。なお、関連データーは、部分３Ｄデーターに関連する情報であり、画像データー、文字列データー、音声データー等種々の形態を採用しうる。その場合、表示処理のステップＳ１１２において、画像処理部は、調整画像の画像データーと、部分３Ｄ画像データーと、に加えてさらに、関連データーを表示（または再生等）させてもよい。
【０１２０】
例えば、表示処理のステップＳ２０４では、三次元画像取得部は、利用者によって指定されたオブジェクトに対応する部分３Ｄ画像データーを、サーバーから取得してもよい。利用者によるオブジェクトの指定は、例えば、ジェスチャー検知（指定したいオブジェクトを指さす）、視線検出（指定したいオブジェクトを注視する）、音声認識（指定したいオブジェクトの名前を呼ぶ）等が利用できる。
【０１２１】
例えば、上記実施形態の表示処理では、像調整部は、画像表示部を透過して利用者が視認するオブジェクトの視認性を低下させ、かつ、そのオブジェクトを三次元的に表す虚像を画像表示部に表示させることとした。しかし、像調整部は、あるオブジェクトを三次元的に表す虚像を画像表示部に形成させ、その際に、虚像として表示されるオブジェクトの一部（例えば背景に相当する部分）について、画像表示部を透過して利用者が視認する外景の少なくとも一部の視認性を低下させてもよい。すなわち、画像表示部を透過して利用者が視認する二次元画像や実世界において「三次元的に表されるオブジェクト」と同じオブジェクトが存在しない場合でも、像調整部は、上記実施形態の表示処理と同様の処理を実施してもよい。このようにすれば、透過型のＨＭＤを用いて拡張現実感の処理をする際に、利用者が画像表示部を透過して視認する外景に対して、虚像として表示されるオブジェクトの視認性を向上させることができる。
【０１２２】
・変形例４：
本発明は、上述の実施形態や実施例、変形例に限られるものではなく、その趣旨を逸脱しない範囲において種々の構成で実現することができる。例えば、発明の概要の欄に記載した各形態中の技術的特徴に対応する実施形態、実施例、変形例中の技術的特徴は、上述の課題の一部または全部を解決するために、あるいは、上述の効果の一部または全部を達成するために、適宜、差し替えや組み合わせを行うことが可能である。また、その技術的特徴が本明細書中に必須なものとして説明されていなければ、適宜、削除することが可能である。
【符号の説明】
【０１２３】
１…画像表示システム
１０…制御部
１１…決定キー
１２…点灯部
１３…表示切替キー
１４…トラックパッド
１５…輝度切替キー
１６…方向キー
１７…メニューキー
１８…電源スイッチ
２０…画像表示部
２１…右保持部
２２…右表示駆動部
２３…左保持部
２４…左表示駆動部
２６…右光学像表示部
２８…左光学像表示部
３０…イヤホンプラグ
３２…右イヤホン
３４…左イヤホン
４０…接続部
４２…右コード
４４…左コード
４６…連結部材
４８…本体コード
５１…送信部
５２…送信部
５３…受信部
５４…受信部
６１…カメラ（撮像部）
６６…９軸センサー
１１０…入力情報取得部
１００…ＨＭＤ（頭部装着型表示装置）
１２０…記憶部
１２２…部分３Ｄ画像データー記憶部
１３０…電源
１３２…無線通信部
１４０…ＣＰＵ
１４２…二次元画像取得部
１４４…三次元画像取得部
１４６…像調整部
１６０…画像処理部
１７０…音声処理部
１８０…インターフェイス
１９０…表示制御部
２０１…右バックライト制御部
２０２…左バックライト制御部
２１１…右ＬＣＤ制御部
２１２…左ＬＣＤ制御部
２２１…右バックライト
２２２…左バックライト
２４１…右ＬＣＤ
２４２…左ＬＣＤ
２５１…右投写光学系
２５２…左投写光学系
２６１…右導光板
２６２…左導光板
２００…プロジェクター
２５０…スクリーン
３００…サーバー
３１０…ＣＰＵ
３１２…送信部
３４０…通信インターフェイス
３５０…記憶部
３５２…画像記憶部
ＰＣＬＫ…クロック信号
ＶＳｙｎｃ…垂直同期信号
ＨＳｙｎｃ…水平同期信号
Ｄａｔａ…画像データー
Ｄａｔａ１…右眼用画像データー
Ｄａｔａ２…左眼用画像データー
ＯＡ…外部機器
ＰＣ…パーソナルコンピューター
ＳＣ…外景
ＶＩ…虚像
ＶＲ…視野
ＶＲ１…視野
ＶＲ２…視野
ＲＥ…右眼
ＬＥ…左眼
ＥＲ…端部
ＥＬ…端部
ＢＳ…通信キャリア
Ａ１…最大射出領域
Ａ２…キャンセル領域
ＡＤ…調整画像
ＢＤ…背景用の二次元画像
ＯＢＪ…オブジェクト
ＩＮＴ…インターネット
【図１】
0006394174.tif 000002
【図２】
0006394174.tif 000003
【図３】
0006394174.tif 000004
【図４】
0006394174.tif 000005
【図５】
0006394174.tif 000006
【図６】
0006394174.tif 000007
【図７】
0006394174.tif 000008
【図８】
0006394174.tif 000009
【図９】
0006394174.tif 000010
【図１０】
0006394174.tif 000011
【図１１】
0006394174.tif 000012
【図１２】
0006394174.tif 000013
【図１３】
0006394174.tif 000014
【図１４】
0006394174.tif 000015
【図１５】
0006394174.tif 000016
【図１６】
0006394174.tif 000017