(57)【要約】【課題】面倒な調整の必要なく、観察者がシースルーで立体感のある像を視認することができる画像形成システムを提供する。【解決手段】画像形成システムは、投映面上に所定の投映像を投映する投映機と、透過型ディスプレイおよび、前記透過型ディスプレイに表示する表示画像を生成する画像生成装置を備え観察者が装着可能なウエアラブル端末と、前記透過型ディスプレイに対して、前記観察者の位置を示す位置情報を出力する位置情報出力装置と、を有し、前記画像生成装置は、入力された前記位置情報に基づき前記透過型ディスプレイに表示する画像の姿勢および／または画角を調整するようになっており、前記観察者は、前記透過型ディスプレイを介して表示される表示画像と、前記投映面上の投映像とを同時に観察可能となっている。【選択図】図１
2018142162.tif 000002
【特許請求の範囲】
【請求項１】
透過型ディスプレイおよび、前記透過型ディスプレイに表示する表示画像を生成する画像生成装置を備え観察者が装着可能なウエアラブル端末と、
前記ウエアラブル端末に対して、前記観察者の位置を示す位置情報を出力する位置情報出力装置と、を有し、
前記画像生成装置は、入力された前記位置情報に基づき前記透過型ディスプレイに表示する画像の姿勢および／または画角を調整するようになっており、
前記観察者は、前記透過型ディスプレイを介して表示される表示画像と、前記透過型ディスプレイを通して見える外界像とを同時に観察可能となっている画像形成システム。
【請求項２】
投映面上に所定の投映像を投映する投映機と、
透過型ディスプレイおよび、前記透過型ディスプレイに表示する表示画像を生成する画像生成装置を備え観察者が装着可能なウエアラブル端末と、
前記ウエアラブル端末に対して、前記観察者の位置を示す位置情報を出力する位置情報出力装置と、を有し、
前記画像生成装置は、入力された前記位置情報に基づき前記透過型ディスプレイに表示する画像の姿勢および／または画角を調整するようになっており、
前記観察者は、前記透過型ディスプレイを介して表示される表示画像と、前記投映面上の投映像とを同時に観察可能となっている画像形成システム。
【請求項３】
前記投映面はドームスクリーンであり、前記投映機は前記ドームスクリーンに星像を投映する請求項２に記載の画像形成システム。
【請求項４】
前記位置情報出力装置は前記観察者が座る座席に配置されており、前記ウエアラブル端末に対して無線により前記位置情報を出力する請求項１〜３のいずれかに記載の画像形成システム。
【請求項５】
前記ウエアラブル端末は、これを装着した前記観察者の姿勢を検出して姿勢に関する姿勢情報を出力するモーションセンサを有しており、前記画像生成装置は、入力された前記姿勢情報に基づき前記透過型ディスプレイに表示する画像の姿勢および／または画角を調整する請求項１〜４のいずれかに記載の画像形成システム。
【請求項６】
前記観察者が着座する座席の背もたれの角度を検出して出力する角度センサを有しており、前記画像生成装置は、入力された前記角度に基づき前記透過型ディスプレイに表示する画像の姿勢および／または画角を調整する請求項１〜５のいずれかに記載の画像形成システム。
【請求項７】
前記ウエアラブル端末は撮像部と画像処理装置とを有し、前記撮像部が所定マーカーを撮像して撮像信号を前記画像処理装置に出力したときは、前記画像処理装置は前記撮像信号に基づいて位置情報を取得し、前記画像生成装置は、前記位置情報に基づいて前記透過型ディスプレイに表示する画像の姿勢および／または画角を調整する請求項１〜６のいずれかに記載の画像形成システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、透過型ディスプレイを用いた画像形成システムに関する。
【背景技術】
【０００２】
例えば恒星や惑星、太陽、月、惑星の衛星、彗星などの天体を投映することにより、星空を再現するプラネタリウムが知られている。一般的なプラネタリウムは、ドーム内に配したプラネタリウム投映装置により、ドームの内面に形成されたドームスクリーンに天体を投映し、ドーム内に設けた座席に座った複数の観察者が見上げて観察できるようにしている。
【０００３】
ところで、近年のプラネタリウムでは、天体にまつわるストーリーの視聴プログラムを、天体の投映と同時に観察者に視聴させることも行われている。これに伴い、たとえば視聴プログラム内容に従って、天体以外に宇宙船などを表示させたい場合がある。かかる場合、プラネタリウム投映装置を用いてドームスクリーンに宇宙船などの映像を同時に表示させることもできるが、映像が２次元的であることから観察者がリアリティを感じにくいという課題がある。
【０００４】
これに対し特許文献１に示すように、例えば視聴者が装着した特殊なメガネを用いて、左目用のディジタル映像と右目用のディジタル映像を同時に投映することによって立体映像を視聴することが可能なシステムが既に開発されている。このようなシステムを用いることで、宇宙船等の立体映像を観察者に視認させることは可能である。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００５−３５４６４４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１に記載の技術では、映像制作時に想定された視聴位置において最も効果的に立体感が得られるものであって、着席する座席の位置によっては十分な立体感を得ることができず、不快な色ズレなどを生じてしまうという問題がある。また装置全体が大規模なものであるため、多数の観察者が利用するにはコストがかかるという問題もある。
【０００７】
これに対し、立体映像を表示できるディスプレイを持つウエアラブル端末も既に市販されている。よって、ウエアラブル端末を各観察者に装着させた状態で、ドームスクリーンに投映された天体像に重ねて宇宙船等の立体画像を観察者に視認させることもできる。しかしながら、ウエアラブル端末個々に同一の映像を表示したとすると、全ての観察者が同じ方向を向いて同じ映像を視認することとなり、それによりドームスクリーンに投映された投映像との間にずれが生じ、視聴プログラム内容を適切に表現できない恐れが生じる。特に、巨大な宇宙船等を立体映像として空間表示する場合、その立体感を得ることが困難である。これに対し観察者が見る角度に応じてウエアラブル端末をマニュアルで調整することで、立体感を確保することも考えられるが、手間がかかるという問題があり現実的ではない。同様な問題は、会議室で出席者がウエアラブル端末を利用してプレゼンテーション等を行う場合にも起こりえる。
【０００８】
本発明は、上述の課題を解決することを目的としたものであり、面倒な調整の必要なく、観察者がシースルーで立体感のある像を視認することができる画像形成システムを提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明の画像形成システムは、
透過型ディスプレイおよび、前記透過型ディスプレイに表示する表示画像を生成する画像生成装置を備え観察者が装着可能なウエアラブル端末と、
前記ウエアラブル端末に対して、前記観察者の位置を示す位置情報を出力する位置情報出力装置と、を有し、
前記画像生成装置は、入力された前記位置情報に基づき前記透過型ディスプレイに表示する画像の姿勢および／または画角を調整するようになっており、
前記観察者は、前記透過型ディスプレイを介して表示される表示画像と、前記透過型ディスプレイを通して見える外界像とを同時に観察可能となっているものである。
【００１０】
本発明の画像形成システムは、
投映面上に所定の投映像を投映する投映機と、
透過型ディスプレイおよび、前記透過型ディスプレイに表示する表示画像を生成する画像生成装置を備え観察者が装着可能なウエアラブル端末と、
前記ウエアラブル端末に対して、前記観察者の位置を示す位置情報を出力する位置情報出力装置と、を有し、
前記画像生成装置は、入力された前記位置情報に基づき前記透過型ディスプレイに表示する画像の姿勢および／または画角を調整するようになっており、
前記観察者は、前記透過型ディスプレイを介して表示される表示画像と、前記投映面上の投映像とを同時に観察可能となっているものである。
【発明の効果】
【００１１】
本発明によれば、面倒な調整の必要なく、観察者がシースルーで立体感のある像を視認することができる画像形成システムを提供することができる。
【図面の簡単な説明】
【００１２】
【図１】第１の実施の形態に係る画像形成システムを示す概略図である。
【図２】ウエアラブル端末であるヘッドマウントディスプレイを装着した観察者を示す図である。
【図３】ヘッドマウントディスプレイの構成を示すブロック図である。
【図４】本実施の形態にかかる画像形成システムの動作を示すフローチャートである。
【図５】変形例にかかる画像形成システムの一部を示す図である。
【図６】第２の実施の形態に係る画像形成システムを示す概略図である。
【発明を実施するための形態】
【００１３】
（第１の実施の形態）
以下、本発明の実施の形態を、図面を参照して説明する。図１は、第１の実施の形態に係る画像形成システムを示す概略図である。図２は、ウエアラブル端末であるヘッドマウントディスプレイを装着した観客を示す図である。図３は、ヘッドマウントディスプレイの構成を示すブロック図である。
【００１４】
図１において、プラネタリウム設備ＰＮは，半球状のドームスクリーン（投映面）ＤＳと，ドームスクリーンＤＳの中央に配置された投映機ＰＲと，投映機ＰＲの周囲に配置された複数（ここでは代表して２つのみ図示）の座席ＳＴ１，ＳＴ２とを有している。座席ＳＴ１，ＳＴ２には、それぞれ観客（観察者）ＯＢ１，ＯＢ２が座っている。ここでは、投映機ＰＲの中心を原点Ｏとした３次元仮想座標系が定められているものとする。
【００１５】
図２に示すように、観客ＯＢ１（又はＯＢ２）は、それぞれヘッドマウントディスプレイＨＭＤを頭部に装着しており、装着した状態で透過型ディスプレイＤＰＬが両眼を覆っている。眼鏡型の透過型ディスプレイＤＰＬを装着した観客ＯＢ１（又はＯＢ２）は、透過型ディスプレイＤＰＬに表示された画像と、透過型ディスプレイＤＰＬを通した外界とを同時に視認可能となっている。
【００１６】
観客ＯＢ１（又はＯＢ２）は、例えばプラネタリウム設備ＰＮの入口でヘッドマウントディスプレイＨＭＤを受け取り、それを装着した状態で任意の座席ＳＴ１（又はＳＴ２）に着座して、プラネタリウムの視聴プログラムを視聴するものとする。本実施の形態にかかる画像形成システムは、プラネタリウム設備ＰＮと、ヘッドマウントディスプレイＨＭＤと、座席情報出力装置ＩＯＤとを有する。
【００１７】
観客ＯＢ１（又はＯＢ２）が装着するヘッドマウントディスプレイＨＭＤは、それぞれ共通の構成であり、図３に示すように、座席情報を入力する入力装置ＩＩＤと、加速度センサやジャイロなどからなるモーションセンサＭＳと、表示画像のデータを記憶するメモリＭＲと、３次元表示画像を生成する画像生成装置ＰＲＯＣと、透過型ディスプレイＤＰＬとを有している。
【００１８】
一方、観客ＯＢ１（又はＯＢ２）が座る座席ＳＴ１（又はＳＴ２）の背もたれ内部には、図２に示すように、座席情報を出力する座席情報出力装置（位置情報出力装置）ＩＯＤが埋設されている。座席情報出力装置ＩＯＤは、その内蔵メモリ内に、規定の３次元仮想座標系における、埋設された座席ＳＴ１（又はＳＴ２）の座標（位置情報）を座席情報として記憶しているものとする。
【００１９】
座席情報は、その座席に標準的な体型の人物（観察者）が正面に向かって着座した際の校正データを含めることができる。校正データとは、例えばヘッドマウントディスプレイＨＭＤにおける透過型ディスプレイＤＰＬそれ自体の座標系を、そのプラネタリウム設備ＰＮにおける３次元仮想座標系に変換するための変換行列であり、位置・姿勢の６次元の情報を備えていると好ましい。ヘッドマウントディスプレイＨＭＤにはモーションセンサＭＳが備わっており、観客の頭部の傾きに合わせた姿勢を取得することが可能である。この情報をもとに３次元仮想座標における３次元表示画像の位置・姿勢を変化させることができる。なお、位置に関してはヘッドマウントディスプレイＨＭＤ単体では取得ができないため、座席情報に含まれた位置情報を用いることになる。ただし、観客がリクライニングシートに着座して背もたれを倒す場合は、位置変化を伴うため、図５を参照して後述するように位置補正を行うのが好ましい。
【００２０】
各座席の座席情報出力装置ＩＯＤに書き込まれる座席情報は、例えば以下の方法によって予め生成することができる。
（ａ）設計情報をもとに、ドームスクリーンＤＳと座席ＳＴ１（又はＳＴ２）の相対的な位置・姿勢（３次元仮想座標系における座標等）を計算して座席情報出力装置ＩＯＤの内蔵メモリへ書き込む。
（ｂ）カメラを座席に設置するか、あるいはカメラを備えた校正用のヘッドマウントディスプレイＨＭＤを装着した人体または人形を座席ＳＴ１（又はＳＴ２）に着席させ、投映機ＰＲによって投映されたパターン映像、あるいは校正用のＬＥＤ等の複数（通常は６点以上）の光源をカメラによって撮影し、得られたパターンをもとにドームスクリーンＤＳと、校正用のヘッドマウントディスプレイＨＭＤの透過型ディスプレイＤＰＬとの相対的な位置・姿勢を計算して、座席情報出力装置ＩＯＤの内蔵メモリへ書き込む。
【００２１】
座席情報出力装置ＩＯＤと入力装置ＩＩＤとは，近距離無線通信システムを用いて通信可能となっていることが好ましい。これにより、複数の座席が存在するなかで機器同士が混信することで、誤った座席情報を取得してしまうことを防ぐことができる。この場合は、Ｂｌｕｅｔｏｏｔｈ（登録商標）やＮＦＣ（Near field radio communication）などの既存の近距離無線通信技術を用いることが好ましい。ヘッドマウントディスプレイＨＭＤのツルの先端やヘッドバンドの後頭部などに、無線通信機を組み込んでおくことによって、座席ＳＴ１（又はＳＴ２）に埋め込まれた座席情報出力装置ＩＯＤとの間で非接触に通信を行うことが可能になる。これによってヘッドマウントディスプレイＨＭＤを装着した観客ＯＢ１（又はＯＢ２）は、座席ＳＴ１（又はＳＴ２）に腰掛けるだけで必要な座席情報を読み出すことができる。
【００２２】
図４は、本実施の形態にかかる画像形成システムの動作を示すフローチャートである。まず、視聴プログラム開始前において、観客ＯＢ１（又はＯＢ２）がヘッドマウントディスプレイＨＭＤを装着し（ステップＳ１０１）、更に座席ＳＴ１（又はＳＴ２）に着座することで、座席情報出力装置ＩＯＤと入力装置ＩＩＤとが相互に通信を開始し、これによりヘッドマウントディスプレイＨＭＤは観客ＯＢ１（又はＯＢ２）が座席ＳＴ１（又はＳＴ２）に着座したことが分かる（ステップＳ１０２で判断ＹＥＳ）。
【００２３】
次いで、ステップＳ１０３で、ヘッドマウントディスプレイＨＭＤの入力装置ＩＩＤが、座席情報出力装置ＩＯＤより固有の座席情報を取得する。またステップＳ１０４で、モーションセンサＭＳが観客ＯＢ１（又はＯＢ２）の姿勢を検出し、それに応じて姿勢情報を画像生成装置ＰＲＯＣに送信する。この時点で画像生成装置ＰＲＯＣには、座席情報出力装置ＩＯＤからの座席情報と、モーションセンサＭＳからの姿勢情報とが入力されていることとなる。この状態で、観客ＯＢ１（又はＯＢ２）は視聴プログラムの開始を待つ。
【００２４】
視聴プログラム開始時には，不図示の制御装置に従い、投映機ＰＲからドームスクリーンＤＳに対して天体などの画像（星像）が投映される。又、これと同時に、座席情報出力装置ＩＯＤを介して入力装置ＩＩＤに視聴プログラム開始情報（トリガー）が入力される。これに応じて、画像生成装置ＰＲＯＣはメモリＭＲから画像データを読み出して、例えば宇宙船などの３次元画像３Ｄを生成するが、この３次元画像３Ｄは座席情報及び姿勢情報に基づいて加工される（ステップＳ１０５）。具体的には、観客ＯＢ１が、座席ＳＴ１の背もたれを倒した状態で比較的近い位置の宇宙船の底面を仰ぎ見るように３次元画像３Ｄが調整され、一方、観客ＯＢ２は、座席ＳＴ２の背もたれを立てた状態で比較的遠い位置の宇宙船を側方から見るように３次元画像３Ｄが調整される。つまり、３次元画像３Ｄは座席情報及び姿勢情報に基づいて、観察する観察者毎に適した姿勢及び／又は画角になるように加工されるのである。
【００２５】
加工された画像は、ステップＳ１０６で、ヘッドマウントディスプレイＨＭＤの透過型ディスプレイＤＰＬにより表示される（出力される）ので、観察者ＯＢ１（又はＯＢ２）は、ドームスクリーンＤＳに投映された天体像（投映像）をバックに、透過型ディスプレイＤＰＬに表示された３次元画像３Ｄ（表示像）を観察することができる。
【００２６】
その後、ステップＳ１０７で、ヘッドマウントディスプレイＨＭＤにおいて視聴プログラムを終了しないと判断された場合（判断ＮＯ）、続くステップＳ１０８で、観察者ＯＢ１（又はＯＢ２）の姿勢が変化したか否かを検出される。この姿勢変化の有無はモーションセンサＭＳの出力に応じて検出され、例えば座席ＳＴ１（又はＳＴ２）の背もたれの角度を観察者ＯＢ１（又はＯＢ２）が変更した場合、或いは観察者ＯＢ１（又はＯＢ２）が頭部の向きを変えた場合など，それに応じた信号がモーションセンサＭＳから画像生成装置ＰＲＯＣに出力されることで検出できる。
【００２７】
モーションセンサＭＳから画像生成装置ＰＲＯＣに出力される信号が変化した場合（ステップＳ１０８の判断ＹＥＳ）、画像生成装置ＰＲＯＣはステップＳ１０４にて新たな姿勢情報を取得し、ステップＳ１０５で画像を加工して、ステップＳ１０６で加工した画像を出力する。これに対し、モーションセンサＭＳから画像生成装置ＰＲＯＣに出力される信号が変化しない場合（ステップＳ１０８の判断ＮＯ）、ステップＳ１０６で同じ姿勢の画像の出力を続行する。
【００２８】
尚、ステップＳ１０７で、ヘッドマウントディスプレイＨＭＤにおいて視聴プログラムを終了すると判断された場合（判断ＹＥＳ），ステップＳ１０９で画像の出力を停止することとなる。
【００２９】
以上述べた本実施の形態によれば、ヘッドマウントディスプレイＨＭＤは予め座席情報を備えておらず、観客ＯＢ１（又はＯＢ２）が着席することによって初めて座席情報を取得するので、観客にヘッドマウントディスプレイＨＭＤを配布する際に個別の設定、管理が不要になり施設オペレーションが簡便になる。又、本実施の形態によれば、投映機ＰＲの投映する天体像に対して、ヘッドマウントディスプレイＨＭＤの透過型ディスプレイＤＰＬにより表示される表示画像が空間上に相対的に固定されることとなる。これにより、プラネタリウムなどの平面映像をより深く楽しむための３次元画像（立体映像）が天体像に重ねられ、視聴プログラムに従って製作者の意図通りに観察者により観察される。例えば、宇宙船や惑星などが手に届く近さに表示されることで迫力のある映像体験が可能になるほか、アバターやキャラクターを表示することで親しみや安心感の得られるコンテンツが提供可能になる。
【００３０】
さらに、透過型ディスプレイＤＰＬに表示される画像は、ドームスクリーンＤＳに対して固定された位置に常に表示されるため、同じコンテンツを再度別の角度から楽しむといったことも可能になるので、リピーター獲得に貢献する。また、入力装置ＩＩＤを介して透過型ディスプレイＤＰＬを装着した観客に関する情報を入力することで、各観客の年齢や性別、国籍等に合わせた個別のコンテンツを付加的に表示することも可能である。例えば、ヘッドマウントディスプレイＨＭＤを子供が装着したことを示す情報を入力したときは、キャラクターが走り回る映像を、透過型ディスプレイＤＰＬを介して表示することができ、ヘッドマウントディスプレイＨＭＤを外国人が装着したことを示す情報を入力したときは、字幕や解説を見せるといったことが同時に可能になる。
【００３１】
図５は、変形例にかかる画像形成システムの一部を示す図である。一般的なリクライニングシートは、背もたれが一軸の回転運動に従って傾くため、その傾きから位置を推定することは容易である。したがってヘッドマウントディスプレイＨＭＤに備えられたモーションセンサＭＳをもとに位置補正を行うことも可能である。ただし、推定精度を向上させるために、図５に示すように背もたれの回転軸にロータリエンコーダなどの回転量を測定する角度センサＡＳを座席ＳＴ１へ別途設け、角度センサＡＳの出力信号を、座席情報出力装置ＩＯＤに入力することも出来、これにより背もたれの角度、すなわちリクライニング状態をヘッドマウントディスプレイＨＭＤへ送信し、補助的な姿勢情報として利用して表示画像の加工を行うことも可能である。
【００３２】
より具体的には、座席情報出力装置ＩＯＤから、座席ＳＴ１の位置及び角度センサＡＳの検出した背もたれの正確な角度を、座席情報としてヘッドマウントディスプレイＨＭＤの入力装置ＩＩＤに入力する。透過型ディスプレイＤＰＬに表示される３次元画像３Ｄは、この座席情報に基づいて加工される。本変形例の場合、ヘッドマウントディスプレイＨＭＤからモーションセンサＭＳを省略しても良く、それによりヘッドマウントディスプレイＨＭＤの小型化や省電力化に貢献する。
【００３３】
なお、座席に着座した場合であっても、人間はある程度の上体運動によって頭部の位置を変化させることができる。このため、校正データと角度センサによる補正だけでは覗き込むなどの動作に対して３次元画像の表示を追従させることが困難である。そこで、例えばプラネタリウム設備ＰＮに設置された固定カメラ等を用いて、観客各々が装着したヘッドマウントディスプレイＨＭＤに装着されたマーカーを撮影し、その情報を用いることで位置姿勢補正を行うこともできるが、プラネタリウム設備や映画館、会議室など、座席が過密に配置されるような空間では個別の動きを取得するためのカメラの設置は困難であり、コストがかかる。またチェス・パターンなどのマーカーを配置して、ヘッドマウントディスプレイに内蔵されたカメラでこれを読み取り、位置・姿勢を推定することもできるが、プラネタリウム設備や映画館等ではマーカーの配置が困難な場合が多く現実的ではない。本実施の形態では、この点に鑑み、座席に深く腰掛けることで観客の上体の動きが少なくなり、姿勢変化のみを用いることで簡便に３次元画像を施設内の決まった空間に表示させることができる。
【００３４】
（第２の実施の形態）
図６は、第２の実施の形態に係る画像形成システムを示す概略図である。本画像形成システムは、例えば会議室などで行われるプレゼンテーション等の際に用いることができる。図６において、不図示のプロジェクタを用いて、プレゼンテーションの目的や、議題となる製造物の性能や仕様などを会議室のスクリーン（投映面）ＳＣに投映できる。尚、必ずしもスクリーンＳＣを設ける必要はない。
【００３５】
ここで、会議室の座席ＳＴ１〜ＳＴ３には、それぞれヘッドマウントディスプレイＨＭＤを装着した出席者（観察者）ＯＢ１〜ＯＢ３が座っている。ここでも、会議室の中心を原点とした３次元仮想座標系が定められているものとする。
【００３６】
一方、出席者ＯＢ１〜ＯＢ３が座る座席ＳＴ１〜ＳＴ３の背もたれ内部には、図２に示すように、座席情報を出力する座席情報出力装置ＩＯＤが埋設されている。座席情報出力装置ＩＯＤは、その内蔵メモリ内に、規定の３次元仮想座標系における、埋設された座席ＳＴ１〜ＳＴ３の座標（座席情報）を記憶しているものとする。それ以外の構成は上述した実施の形態と同様であるため、説明を省略する。
【００３７】
本実施の形態では、画像生成装置ＰＲＯＣはメモリＭＲから画像データを読み出して、例えばエンジンなどの３次元画像３Ｄを生成し、ヘッドマウントディスプレイＨＭＤの透過型ディスプレイに表示されるが、この３次元画像３Ｄは，予め座席情報及び姿勢情報に基づいて加工される。具体的には、出席者ＯＢ１の透過型ディスプレイＤＰＬには、左方から見たエンジンの３次元画像３Ｄが表示され、出席者ＯＢ２の透過型ディスプレイＤＰＬには、前方から見たエンジンの３次元画像３Ｄが表示され、出席者ＯＢ３の透過型ディスプレイＤＰＬには、右方から見たエンジンの３次元画像３Ｄが表示されるように、画像が加工される。
【００３８】
会議室に固定された各座席ＳＴ１〜ＳＴ３に対して、出席者ＯＢ１〜ＯＢ３の装着したヘッドマウントディスプレイＨＭＤの透過型ディスプレイに表示された画像が、スクリーンＳＣを基準とした空間上に相対的に固定される。これは固定された座席ＳＴ１〜ＳＴ３が複数相対するような会議室における使い方を想定している。出席者ＯＢ１〜ＯＢ３がヘッドマウントディスプレイＨＭＤを装着して各座席ＳＴ１〜ＳＴ３に着席することによって、それぞれ座席情報が座席情報出力装置ＩＯＤから自動的にヘッドマウントディスプレイＨＭＤへと出力され、それにより透過型ディスプレイには会議室内空間に浮かぶ３次元画像３Ｄが表示される。このとき各座席ＳＴ１〜ＳＴ３からは、あたかも同じ製造物が各座席ＳＴ１〜ＳＴ３の位置・姿勢に応じて観察されるように見えることになる。例えば図６に示すようにエンジンの３次元画像３Ｄを表示することで、説明者は実際に自分の手を用いて各部品の特性や機能を説明することが可能になる。また透過型ディスプレイを用いて３次元画像３Ｄを表示するため、透過型ディスプレイを通して見えるお互いの顔や表情（外界像）も明瞭に識別可能であるので、円滑に会議を進めることができる。
【００３９】
尚、会議室では、出席者が座席に腰掛けている間は、ヘッドマウントディスプレイＨＭＤによる姿勢補正を行い、出席者が説明のために立ち上がった場合は、従来の位置補正に切り替える（すなわち画像加工を行わない）などの使い方が考えられる。この場合、ヘッドマウントディスプレイＨＭＤの入力装置ＩＩＤが、座席に内蔵された座席情報出力装置ＩＯＤと近接通信を行っており、出席者が立ち上がった場合には入力装置ＩＩＤと座席情報出力装置ＩＯＤとの通信が不可能となることを検出して、離席を判断することが可能になる。このとき、ヘッドマウントディスプレイＨＭＤがＷｉ−Ｆｉなどの通信手段に自律的に切り替え、会議室に備えられた固定カメラ（不図示）による位置補正サービスを受けるようにしても良い。又、固定カメラが、立ち上がった出席者を判別して、その位置を取得することで、立ち上がった出席者のヘッドマウントディスプレイＨＭＤにおいてのみ、別に画像加工を行うような信号を施設側から送出しても良い。
【００４０】
尚、変形例として、以上の実施の形態におけるヘッドマウントディスプレイＨＭＤにおいて、例えば図３に一点鎖線で示すように、撮像部としてのカメラＣＡを設けることもできる。例えば観客又は出席者が着座する前の座席の背もたれの背後、又はテーブルに貼り付けられた固有の２次元コードＣＤをカメラＣＡで撮像し、その画像信号を画像処理装置としての画像生成装置ＰＲＯＣが画像処理することで、２次元コードＣＤの画像に含まれた位置情報（ここでは座席情報）を読み出して、それに基づき表示画像を加工するようにしても良い。
【００４１】
本発明は、明細書に記載の実施例に限定されるものではなく、他の実施例・変形例を含むことは、本明細書に記載された実施例や思想から本分野の当業者にとって明らかである。明細書の記載及び実施例は、あくまでも例証を目的としており、本発明の範囲は請求項によって示されている。例えば、投映面は曲面でも平面でも良い。又、透過型ディスプレイは観察者の片眼の前方にのみ配置されていても良い資、表示画像は２次元画像でも良い。
【符号の説明】
【００４２】
ＡＳ            角度センサ
ＣＡ            カメラ
ＣＤ            ２次元コード
ＤＰＬ            透過型ディスプレイ
ＤＳ            ドームスクリーン
ＨＭＤ            ヘッドマウントディスプレイ
ＩＩＤ            入力装置
ＭＲ            メモリ
ＭＳ            モーションセンサ
ＯＢ１，ＯＢ２        観客
ＯＢ１〜ＯＢ３        出席者
ＰＮ            プラネタリウム設備
ＰＲ            投映機
ＰＲＯＣ          画像生成装置
ＳＣ            スクリーン
ＳＴ１〜ＳＴ３        座席
【図１】
2018142162.tif 000003
【図２】
2018142162.tif 000004
【図３】
2018142162.tif 000005
【図４】
2018142162.tif 000006
【図５】
2018142162.tif 000007
【図６】
2018142162.tif 000008