(57)【特許請求の範囲】
【請求項１】
対象物を記録した映像データに示される映像の空間像を形成することで前記映像データを再生する空間像演出装置であって、
前記映像データを再生する再生環境に映像を表示する表示装置を少なくとも含む、前記再生環境の演出を行う環境演出手段と、
前記対象物の記録環境に関する記録環境情報として、前記記録環境における光源に関する情報を取得する記録環境情報取得手段と、
前記記録環境情報取得手段により取得された前記記録環境情報に応じて前記環境演出手段を制御する再生制御手段と、を備え、
前記再生制御手段は、前記記録環境情報に応じた前記環境演出手段の制御として、前記記録環境における光源の位置に対応する前記再生環境における位置での光源装置の点灯を行うとともに、前記記録環境における光源により生じる前記対象物の影に相当する映像の前記空間像の形成される位置に応じた前記表示装置による表示、および、前記記録環境における光源からの光に相当する映像の前記表示装置による表示の少なくとも一方を行い、
前記光源装置は、前記空間像を観察する観察者から視認可能に設けられているとともに、前記光源装置からの光が前記再生環境内に入射しないように設けられていることを特徴とする空間像演出装置。
【請求項２】
請求項１に記載の空間像演出装置において、
前記記録環境情報取得手段は、前記映像データに示される映像、または、前記記録環境に設けられたセンサにより前記記録環境情報を取得することを特徴とする空間像演出装置。
【請求項３】
対象物を記録した映像データに示される映像の空間像を形成することで前記映像データを再生する空間像演出装置の制御方法であって、
前記対象物の記録環境に関する記録環境情報として、前記記録環境における光源に関する情報を取得する取得ステップと、
前記取得した前記記録環境情報に応じて、前記映像データを再生する再生環境に映像を表示する表示装置を少なくとも含む、前記再生環境の演出を行う環境演出手段を制御する制御ステップと、を含み、
前記制御ステップでは、前記記録環境情報に応じた前記環境演出手段の制御として、前記記録環境における光源の位置に対応する前記再生環境における位置での光源装置の点灯を行うとともに、前記記録環境における光源により生じる前記対象物の影に相当する映像の前記空間像の形成される位置に応じた前記表示装置による表示、および、前記記録環境における光源からの光に相当する映像の前記表示装置による表示の少なくとも一方を行い、
前記光源装置は、前記空間像を観察する観察者から視認可能に設けられているとともに、前記光源装置からの光が前記再生環境内に入射しないように設けられていることを特徴とする制御方法。
【請求項４】
対象物を記録する記録側と、前記記録側とネットワークを介して接続され、前記対象物が記録された映像データを前記記録側から前記ネットワークを介して取得し、該取得した映像データを再生する再生側とを備え、
前記再生側には、前記映像データに示される映像の空間像を形成することで前記映像データを再生する空間像演出装置が設けられ、
前記空間像演出装置は、
前記映像データを再生する再生環境に映像を表示する表示装置を少なくとも含む、前記再生環境の演出を行う環境演出手段と、
前記対象物の記録環境に関する記録環境情報として、前記記録環境における光源に関する情報を取得する記録環境情報取得手段と、
前記記録環境情報取得手段により取得された前記記録環境情報に応じて前記環境演出手段を制御する再生制御手段と、を備え、
前記再生制御手段は、前記記録環境情報に応じた前記環境演出手段の制御として、前記記録環境における光源の位置に対応する前記再生環境における位置での光源装置の点灯を行うとともに、前記記録環境における光源により生じる前記対象物の影に相当する映像の前記空間像の形成される位置に応じた前記表示装置による表示、および、前記記録環境における光源からの光に相当する映像の前記表示装置による表示の少なくとも一方を行い、
前記光源装置は、前記空間像を観察する観察者から視認可能に設けられているとともに、前記光源装置からの光が前記再生環境内に入射しないように設けられていることを特徴とする映像システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、空間像を表示する空間像演出装置、空間像演出装置の制御方法および映像システムに関する。
【背景技術】
【０００２】
スポーツ中継などにおいて、遠隔地にいるスポーツ選手を記録した映像を、その選手がまるでその場にいるかのように演出して、より臨場感のある態様で再生する技術が検討されている。このような技術の１つとして、表示部（ディスプレイ）に表示された表示像を空間上に空間像として表示する技術が非特許文献１に開示されている。
【０００３】
非特許文献１においては、ディスプレイに映像を表示し、その表示像の空間像を光学素子によりステージ上に形成するととともに、ステージ上の実物体の動きに応じて空間像を移動させたり、ステージの上部に設けられた投影装置により、空間像の影に相当する映像を投影したりする技術が開示されている。この技術によれば、実物体の動きに応じて空間像を移動させたり、空間像の影に相当する映像を投影したりすることで、空間像により示された対象物が実際にステージ上に存在するかのように観察者に視認させることができ、より効果的な演出が可能となる。
【先行技術文献】
【非特許文献】
【０００４】
【非特許文献１】Hanyuool Kim, Issei Takahashi, Hiroki Yamamoto, Satoshi Maekawa, Takeshi Naemura, "MARIO: Mid-air Augmented Reality Interaction with Objects", Entertainment Computing, Volume 5, Issue 4, December 2014, pages 233-241
【発明の概要】
【発明が解決しようとする課題】
【０００５】
一般に、対象物を記録した映像データを再生し（映像データに示される映像の空間像を形成し）、観察者に視認させる場合、対象物を記録した記録環境における光源の位置、光源からの光の強さ、色などを、映像データを再生する再生環境においても再現することで、より臨場感のある演出が可能となる。
【０００６】
しかしながら、非特許文献１に開示されている技術においては、記録環境における光源の位置、光源からの光の強さ、色などの情報については十分な考慮がなされておらず、より臨場感のある態様で空間像を観察者に視認させることが難しいという問題がある。
【０００７】
例えば、記録環境では光源が対象物を斜め方向から照明しているような場合、臨場感のある演出のためには、再生環境でも斜め方向に伸びる影に相当する映像を投影する必要がある。非特許文献１に開示されている技術においても、斜め方向から照明したような、斜め方向に伸びる影に相当する映像を投影することは可能である。
【０００８】
しかしながら、非特許文献１に開示されている技術においては、ステージの上部に設けられた投影装置により、空間像の影に相当する映像を投影するだけである。そのため、記録環境に合わせて空間像から斜め方向に伸びる影に相当する映像を投影装置により投影したとしても、観察者から見ると、ステージの上部に設けられた投影装置が光源として認識されてしまうおそれがある。その結果、ステージの上部に設けられた光源により照明しているにも関わらず、影が斜め方向に伸びるという視覚的な矛盾により、観察者に違和感を抱かせてしまうことがある。このような違和感は映像の再生における臨場感を損なうため、非特許文献１に開示されている技術においては、より臨場感のある態様で空間像を観察者に視認させることは難しいという問題がある。
【０００９】
本発明の目的は、上述した課題を解決し、より臨場感のある態様で空間像を観察者に視認させることができる空間像演出装置、空間像演出装置の制御方法および映像システムを提供することにある。
【課題を解決するための手段】
【００１０】
上記課題を解決するため、本発明に係る空間像演出装置は、対象物を記録した映像データに示される映像の空間像を形成することで前記映像データを再生する空間像演出装置であって、前記映像データを再生する再生環境に映像を表示する表示装置を少なくとも含む、前記再生環境の演出を行う環境演出手段と、前記対象物の記録環境に関する記録環境情報として、前記記録環境における光源に関する情報を取得する記録環境情報取得手段と、前記記録環境情報取得手段により取得された前記記録環境情報に応じて前記環境演出手段を制御する再生制御手段と、を備え、前記再生制御手段は、前記記録環境情報に応じた前記環境演出手段の制御として、前記記録環境における光源の位置に対応する前記再生環境における位置での光源装置の点灯、前記記録環境における光源により生じる前記対象物の影に相当する映像の前記空間像の形成される位置に応じた前記表示装置による表示、および、前記記録環境における光源からの光に相当する映像の前記表示装置による表示の少なくとも２つを行う。
【００１１】
また、上記課題を解決するため、本発明に係る空間像演出装置の制御方法は、対象物を記録した映像データに示される映像の空間像を形成することで前記映像データを再生する空間像演出装置の制御方法であって、前記対象物の記録環境に関する記録環境情報として、前記記録環境における光源に関する情報を取得する取得ステップと、前記記録環境情報取得手段により取得された前記記録環境情報に応じて、前記映像データを再生する再生環境に映像を表示する表示装置を少なくとも含む、前記再生環境の演出を行う環境演出手段を制御する制御ステップと、を含み、前記制御ステップでは、前記記録環境情報に応じた前記環境演出手段の制御として、前記記録環境における光源の位置に対応する前記再生環境における位置での光源装置の点灯、前記記録環境における光源により生じる前記対象物の影に相当する映像の前記空間像の形成される位置に応じた前記表示装置による表示、および、前記記録環境における光源からの光に相当する映像の前記表示装置による表示の少なくとも２つを行う。
【００１２】
また、上記課題を解決するため、本発明に係る映像システムは、対象物を記録する記録側と、前記記録側とネットワークを介して接続され、前記対象物が記録された映像データを前記記録側から前記ネットワークを介して取得し、該取得した映像データを再生する再生側とを備え、前記再生側には、前記映像データに示される映像の空間像を形成することで前記映像データを再生する空間像演出装置が設けられ、前記空間像演出装置は、前記映像データを再生する再生環境に映像を表示する表示装置を少なくとも含む、前記再生環境の演出を行う環境演出手段と、前記対象物の記録環境に関する記録環境情報として、前記記録環境における光源に関する情報を取得する記録環境情報取得手段と、前記記録環境情報取得手段により取得された前記記録環境情報に応じて前記環境演出手段を制御する再生制御手段と、を備え、前記再生制御手段は、前記記録環境情報に応じた前記環境演出手段の制御として、前記記録環境における光源の位置に対応する前記再生環境における位置での光源装置の点灯、前記記録環境における光源により生じる前記対象物の影に相当する映像の前記空間像の形成される位置に応じた前記表示装置による表示、および、前記記録環境における光源からの光に相当する映像の前記表示装置による表示の少なくとも２つを行う。
【発明の効果】
【００１３】
本発明に係る空間像演出装置、空間像演出装置の制御方法および映像システムによれば、より臨場感のある態様で空間像を観察者に視認させることができる。
【図面の簡単な説明】
【００１４】
【図１】本発明の一実施形態に係る空間像演出装置の概要を示す図である。
【図２】図１に示す空間像演出装置の全体構成例を示す図である。
【図３】空間像を形成するための構成の一例を示す図である。
【図４】空間像を形成するための構成の別の一例を示す図である。
【図５】空間像を形成するための構成のさらに別の一例を示す図である。
【図６】図２に示す制御装置の構成を示す図である。
【図７】図６に示す再生制御部による環境演出手段の制御例を示す図である。
【図８】図６に示す再生制御部による環境演出手段の制御例を示す図である。
【図９】図６に示す再生制御部による環境演出手段の制御例を示す図である。
【００１５】
以下、本発明の実施の形態について説明する。
【００１６】
図１は、本発明の一実施形態に係る空間像演出装置１０の概要を示す図である。本実施形態に係る空間像演出装置１０は、対象物１を記録する記録側と、記録側において対象物１が記録された映像データを再生する再生側とを備える映像システムにおいて、再生側に設けられ、映像データに示される映像の空間像を形成することで映像データを再生するものである。なお、例えば、記録側と再生側とはネットワークを介して接続され、再生側は、ネットワークを介して記録側から映像データを取得することができる。
【００１７】
図１に示す空間像演出装置１０は、対象物１（例えば、競技中のスポーツ選手）を撮影装置２により撮影（記録）して得られたメディア情報（映像データ）が入力され、入力されたメディア情報に示される映像の空間像３をステージ４に形成することで映像データを再生し、観察者５に視認させるものである。なお、対象物１の撮影時には音声も合わせて記録されてもよく、メディア情報には記録された音声データが含まれてもよい。また、メディア情報として、映像データと共に、映像データの記録環境における照明情報、風向き情報などの、記録側の環境情報（記録環境情報）が記録されてもよい。メディア情報は、記録メディアに蓄積されてもよいし、ネットワークを通じて遠隔地に配信されてもよい。
【００１８】
図２は、図１に示す空間像演出装置１０の全体構成例を示す図である。
【００１９】
図２に示す空間像演出装置１０は、空間像投影装置１１と、プロジェクタ１２と、照明装置１３と、光源装置１４と、送風・空調装置１５と、スモーク発生装置１６と、スピーカ１７と、再生環境情報取得部１８と、制御部１００とを備える。プロジェクタ１２、照明装置１３、光源装置１４、送風・空調装置１５、スモーク発生装置１６およびスピーカ１７は、映像データを再生する再生環境（ステージ４およびその周囲）における演出を行う環境演出手段の一例である。なお、環境演出手段としては、図２に示した各種装置の他にも、ステージ４の傾斜や起伏を制御する地形制御装置などもある。
【００２０】
空間像投影装置１１は、ステージ４の床面４ａに対向して設けられており、例えば、プロジェクタなどである。床面４ａはスクリーン（表示部）として作用し、空間像投影装置１１は、制御部１００の制御に従い、メディア情報（映像データ）に示される映像を床面４ａ（スクリーン）に投影（表示）する。この表示により表示像（映像データに示される映像）の空間像が形成される。なお、空間像の形成方法の詳細については後述する。
【００２１】
プロジェクタ１２は、制御部１００の制御に従い、再生環境に映像（例えば、形成された空間像３の影に相当する映像３ａ）を表示（投影）する表示装置である。
【００２２】
照明装置１３は、制御部１００の制御に従い、再生環境を照明する。
【００２３】
光源装置１４は、例えば、ＬＥＤ（Ｌｉｇｈｔ  Ｅｍｉｔｔｉｎｇ  Ｄｉｏｄｅ）などの光源装置であり、制御部１００の制御に従い、点灯する。ここで、光源装置１４は、空間像３を観察する観察者５から見て再生環境における光源として認識されるように設けられるものであり、ステージ４の照明を主目的とするものではない。したがって、光源装置１４は、観察者５から視認可能な位置に設けられており、あたかも、光源装置１４が空間像を照明しているかのように観察者５に視認される。上述したように、光源装置１４は、ステージ４の照明を主目的とするものではないため、光源装置１４からの光がステージ４に入射しないように、光源装置１４のステージ４に向かう部分には目張りなどが行われてもよい。ただし、光源装置１４からの光がステージ４における表示に大きな影響を与えない場合には、そのような目張りは設けなくてもよい。
【００２４】
送風・空調装置１５は、制御部１００の制御に従い、再生環境における空調（風向き、風速）、温度、湿度などを制御する。
【００２５】
スモーク発生装置１６は、制御部１００の制御に従い、再生環境にスモーク（霧）を発生させる。
【００２６】
スピーカ１７は、制御部１００の制御に従い、再生環境における音響を制御する。
【００２７】
このように、環境演出手段であるプロジェクタ１２、照明装置１３、光源装置１４、送風・空調装置１５、スモーク発生装置１６およびスピーカ１７は、情報メディア（映像データ）を再生する再生環境の演出（再生環境における照明制御、空調制御、音響制御、スモークの発生、映像の表示など）を行うことができる。なお、光源装置１４は、ステージ４の周囲に複数配置されているか、あるいは、ステージ４の周囲を移動可能に設けられている。
【００２８】
再生環境情報取得部１８は、例えば、撮影装置であり、情報メディア（映像データ）の再生環境を撮影し、撮影した映像から種々の情報を取得する。
【００２９】
制御部１００は、例えば、パーソナルコンピュータなどであり、メディア情報が入力され、入力されたメディア情報（映像データ）に示される映像を空間像投影装置１１に表示させる。空間像投影装置１１による映像の表示により、表示像の空間像がステージ４上に形成される。
【００３０】
また、制御部１００は、メディア情報の入力に応じて、映像データの記録環境に関する情報である記録環境情報を取得し、取得した記録環境情報に応じて、環境演出手段である各装置を制御する。具体的には、制御部１００は、記録環境情報として、記録環境における光源に関する情報（光源の位置、光源からの光の色、強さなど）を取得し、取得した情報に応じて、点灯させる光源装置１４の位置やプロジェクタ１２による映像の投影（表示）などを制御する。
【００３１】
次に、空間像の形成について、図３から図５を参照して説明する。なお、図３から図５において、図２と同様の構成については同じ符号を付し、説明を省略する。
【００３２】
図３は、空間像を形成するための構成の一例を示す図である。
【００３３】
図３においては、表示部であるスクリーン２０が、観察者５の観察方向（Ｘ方向）に対して略水平に設けられている。スクリーン２０は、図２においては、ステージ４の床面４ａに相当する。空間像投影装置１１は、例えば、プロジェクタであり、スクリーン２０の一方の面（下面）側に設けられ、制御部１００の制御に従い、スクリーン２０に映像を投影（表示）する。
【００３４】
スクリーン２０の他方の面（上面）側には、光学素子である透明板２１が設けられている。透明板２１は、スクリーン２０から見て観察者５側に向かって（−Ｘ方向に）ほぼ４５°傾斜している。スクリーン２０への映像の表示に応じて、スクリーン２０からの出射光は、透明板２１に入射し、透明板２１において観察者５に向かう方向に向けられる。こうすることで、スクリーン２０に表示された表示像Ａの空間像Ｂ（虚像）が、スクリーン２０に対して略垂直に形成され、観察者５に視認される。
【００３５】
図４は、空間像を形成するための構成の別の一例を示す図である。
【００３６】
スクリーン２０の上面側には、光学素子である実像鏡２２が設けられている。実像鏡２２は、スクリーン２０から見て観察者５とは反対側に向かって（Ｘ方向に）ほぼ４５°傾斜している。スクリーン２０への映像の表示に応じて、スクリーン２０からの出射光は、実像鏡２２に入射し、実像鏡２２において観察者５に向かう方向に向けられる。こうすることで、スクリーン２０に表示された表示像Ａの空間像Ｂ（実像）が、スクリーン２０に対して略垂直に形成され、観察者５に視認される。なお、図３と図４とを比較すると、表示される表示像Ａの上下が反転している。
【００３７】
図３，４においては、空間像投影装置１１がスクリーン２０の下面から映像を投影する例を用いて説明したが、図２のように、空間像投影装置１１はスクリーン２０の上面から映像を投影してもよい。この場合、空間像投影装置１１による投影光は透過し、スクリーン２０からの出射光を観察者５の方向に向けるような光学素子を用いることで、スクリーン２０の表示像の空間像を形成することができる。
【００３８】
また、図３，４においては、スクリーン２０に空間像投影装置１１により映像を表示（投影）し、その表示に応じたスクリーン２０からの出射光を光学素子（透明板２１、実像鏡２２）により観察者５に向かう方向に向けることで空間像を形成する例を用いて説明したが、これに限られるものではない。例えば、空間像投影装置１１を液晶デバイスなどで構成し、スクリーン２０の位置に液晶デバイスの表示面を設け、表示面への映像の表示により空間像を形成するようにしてもよい。
【００３９】
図５は、空間像を形成するための構成のさらに別の一例を示す図である。図５においては、スクリーン２０の代わりに、シースルースクリーン２３を用いて空間像を形成する例について説明する。
【００４０】
シースルースクリーン２３は、観察者５と対向するように（Ｘ方向に対して略垂直に）設けられている。シースルースクリーン２３は、略透明状のスクリーンであり、一方の面側（観察者５と対向する面とは反対の面側）から空間像投影装置１１により投影された映像を空間像として観察者５に視認させるとともに、投影されている部分以外の部分では、シースルースクリーン２３の後方の背景も観察者５に視認させることができる。したがって、シースルースクリーン２３の表示像とシースルースクリーン２３の後方の背景とを前後に重畳して、観察者５に視認させることができる。なお、人工的に発生させた霧に映像を投影するフォグスクリーンもシースルースクリーンと同様の効果をもたらすため、フォグスクリーンを用いてもよい。
【００４１】
次に、制御部１００の構成について、図６を参照して説明する。
【００４２】
図６に示す制御部１００は、記録環境情報取得部１０１（記録環境情報取得手段）と、再生制御部１０２（再生制御手段）とを備える。
【００４３】
記録環境情報取得部１０１は、メディア情報の入力に応じて、メディア情報（映像データ）の記録環境に関する記録環境情報を取得し、取得した記録環境情報およびメディア情報を再生制御部１０２に出力する。ここで、記録環境情報取得部１０１は、記録環境情報として、記録環境における光源に関する情報（光源の位置、光源からの光の色や強度など）を取得する。なお、記録環境情報取得部１０１は、記録環境情報を、映像データに示される映像の解析により取得したり、記録環境に設けられたセンサ（光センサなど）から取得したりする。また、記録環境情報取得部１０１は、記録時の記録側の照明、風量などの制御情報を参照して、記録環境情報を取得することもできる。
【００４４】
再生制御部１０２は、記録環境情報取得部１０１から出力されたメディア情報（映像データ）に示される映像を空間像投影装置１１に表示させるとともに、メディア情報に音声データが含まれる場合には、その音声データをスピーカ１７に再生させる。また、再生制御部１０２は、記録環境情報取得部１０１から出力された記録環境情報に基づき、環境演出手段である各装置を制御する。
【００４５】
図７は、再生制御部１０２による環境演出手段の制御例を示す図である。
【００４６】
再生制御部１０２は、空間像投影装置１１に、映像データに示される映像（対象物を記録した映像）をステージ４の床面４ａ（スクリーン）に表示させる。この表示により、映像データに示される映像の空間像３が形成される。
【００４７】
また、再生制御部１０２は、記録環境情報取得部１０１から出力された記録環境情報に応じて、プロジェクタ１２および光源装置１４を制御する。
【００４８】
例えば、再生制御部１０２は、記録環境情報に示される記録環境における光源の位置および傾きに応じて、点灯させる光源装置１４の位置および傾きを制御する。具体的には、再生制御部１０２は、空間像３との位置関係が、記録環境における対象物１と光源（仮想光源６）との相対的な位置関係と一致する、１または複数の光源装置１４を点灯させる。上述したように、光源装置１４は、ステージ４の周囲に複数配置されているか、あるいは、ステージ４の周囲を移動可能に設けられている。したがって、再生制御部１０２は、空間像３との相対的な位置関係が、記録環境における対象物１と仮想光源６との相対的な位置関係と一致する位置に設けられた光源装置１４を点灯させるか、あるいは、そのような位置に光源装置１４を移動させて点灯させる。
【００４９】
また、再生制御部１０２は、プロジェクタ１２に、記録環境における光源（仮想光源６）の位置から対象物を照明した場合に生じる影に相当する映像３ａ（黒色の映像）を表示させる。ただし、プロジェクタ１２は、影に相当する黒色の映像を直接投影することはできない。そのため、プロジェクタ１２は、影に相当する部分が黒色な映像を投影する。こうすることで、影に相当する映像３ａを表示させることができる。また、プロジェクタ１２により影に相当する映像３ａを表示する代わりに、ステージ４の床面４ａにディスプレイを配置し、このディスプレイにより影に相当する映像３ａを表示してもよい。なお、再生制御部１０２は、例えば、空間像を２値化し、その縦横比率を変更することで、空間像の影に相当する映像３ａを生成する。
【００５０】
また、再生制御部１０２は、記録環境における光源（仮想光源６）からの光に相当する映像３ｂ（例えば、仮想光源６の光の軌跡）を、プロジェクタ１２に投影させる。
【００５１】
このように、再生制御部１０２は、記録環境における仮想光源６に対応する位置で光源装置１４を点灯させ、さらに、仮想光源６により生じる影に相当する映像３ａおよび仮想光源６からの光に相当する映像３ｂをプロジェクタ１２に表示させる。
【００５２】
上述したように、光源装置１４は、観察者５から視認可能な位置に設けられており、あたかも、再生環境においては、光源装置１４が空間像を照明しているかのように観察者５に視認される。そして、記録環境における仮想光源６に対応する位置で光源装置１４を点灯させることで、記録環境おける対象物１と光源との位置関係と、再生環境における空間像３と空間像３をあたかも照明しているかのように視認される光源装置１４との位置関係と、に視覚的な矛盾が生じることがなくなる。
【００５３】
さらに本実施形態においては、再生制御部１０２は、記録環境における光源（仮想光源６）の位置から対象物１を照明した場合に生じる影に相当する映像３ａ、および、仮想光源６からの光に相当する映像３ｂを、プロジェクタ１２に表示させる。そのため、観察者５からは、光源装置１４による照明により影や光の軌跡などが生じているように視認されるので、視覚的な矛盾が生じることなく、より臨場感のある演出が可能となる。
【００５４】
なお、記録環境情報に応じた環境演出装置（光源装置１４およびプロジェクタ１２）の制御としては、上述した、点灯する光源装置１４の位置の制御、記録環境における光源（仮想光源６）により生じる対象物の影に相当する映像３ａの表示、および、仮想光源６からの光に相当する映像３ｂの表示の３つを、必ずしも全て行う必要はない。これらの３つのうち少なくとも２つを組み合わせて行うことで、再生環境における光源の位置や方向を観察者５に把握させることができる。
【００５５】
例えば、光源装置１４は点灯させなくても（設けなくても）、仮想光源６により生じる対象物の影に相当する映像３ａおよび仮想光源６からの光に相当する映像３ｂを表示するだけでも、再生環境における光源の位置や方向を観察者５に把握させることができる。
【００５６】
なお、記録環境情報取得部１０１は、記録環境情報として、記録環境における光源に関する情報だけなく、風向き、風速、温度、湿度、霧の発生状況、記録環境の地形（傾斜や起伏）などの情報を取得してもよい。記録環境情報取得部１０１は、例えば、記録環境に設けられたセンサ（風速計、温度計、湿度計）などから、記録環境における風向き、風速、温度、湿度などの情報を取得する。また、記録環境情報取得部１０１は、記録環境に設けられたデプスセンサやレーザレンジファインダなどから、記録環境の地形（傾斜や起伏）などの情報を取得する。
【００５７】
そして、再生制御部１０２は、記録環境情報取得部１０１が記録環境情報として取得した各種の情報に応じて、環境演出手段の各種装置を制御してもよい。再生制御部１０２による環境演出手段の他の制御例について、図８および図９を参照して説明する。
【００５８】
図８は、再生制御部１０２による風（風向き、風速）の制御例について示す図である。
【００５９】
記録環境情報が記録環境における風に関する情報（風向き、風速）を示している場合、再生制御部１０２は、その風向き、風速を再現するように、送風・空調装置１５を制御する。具体的には、再生制御部１０２は、記録環境における風向きと一致する方向から、記録環境における風速で送風・空調装置１５に送風を行わせる。再生環境における風向きや風速が制御される場合、送風・空調装置１５は、ステージ４を周囲に複数配置されているか、あるいは、ステージ４の周囲を移動可能に設けられ、再生制御部１０２は、記録環境における風向きと一致する方向から送風可能な送風・空調装置１５により、あるいは、そのような位置に送風・空調装置１５を移動させて、送風を行わせる。
【００６０】
なお、ステージ４上に、送風・空調装置１５による送風により影響を受ける実体物７（例えば、旗）を設けることで、より臨場感のある態様で空間像を観察者に視認させることができる。
【００６１】
図９は、再生制御部１０２による地形（起伏）の制御例について示す図である。
【００６２】
記録環境情報が記録環境の地形（起伏）の情報を示している場合、再生制御部１０２は、その起伏を再現するように、図２においては不図示の地形制御装置を制御する。なお、地形制御装置は、例えば、図９に示すように、ソレノイドや油圧ポンプなどのアクチュエータによりステージ４のエリア毎に上下動を可能とする装置である。再生制御部１０２は、記録環境情報に示される起伏に応じてエリアが上下するように、地形制御装置を制御する。
【００６３】
なお、例えば、空間像３の奥にさらに空間像（例えば、背景像など）を表示してもよい。また、ステージ４の奥面や側面に映像を表示してもよい。この場合、空間像３の表示と、他の空間像の表示あるいは奥面や側面への映像の表示とはタイムスタンプを用いて同期させるのが好ましい。こうすることで、それぞれの像の表示タイミングにずれが生じるのを防ぐことができる。
【００６４】
また、照明装置１３によるステージ４の照明効果（色や光の強弱、光の方向）と、光源装置１４の点灯状態とは、タイムスタンプや絶対時間同期を用いて同期させるのが好ましい。こうすることで、光源装置１４により照明が行われると観察者５に視認させ、より臨場感のある演出が可能となる。
【００６５】
また、再生環境情報取得部１８により、ステージ４における映像の表示状態を撮影し、再生制御部１０２は、その撮影画像から、所望の演出が行われているか否かを判定し、所望の演出が行われていないと判定した場合には、環境演出手段である各装置を再度、制御するようにしてもよい。
【００６６】
このように、本実施形態に係る空間像演出装置１０は、再生環境に映像を表示する表示装置であるプロジェクタ１２を少なくとも含む、再生環境の演出を行う環境演出手段と、対象物の記録環境に関する記録環境情報として、記録環境における光源に関する情報を取得する記録環境情報取得部１０１（記録環境情報取得手段）と、取得された記録環境情報に応じて環境演出手段を制御する再生制御部１０２（再生制御部手段）とを備える。再生制御部１０２は、記録環境情報に応じた環境演出手段の制御として、記録環境における光源の位置に対応する再生環境における位置での光源装置１４の点灯、記録環境における光源により生じる対象物の影に相当する映像３ａの空間像の形成される位置に応じたプロジェクタ１２による表示、および、記録環境における光源からの光に相当する映像３ｂのプロジェクタ１２による表示の少なくとも２つを行う。
【００６７】
点灯する光源装置１４の位置の制御、記録環境における光源により生じる対象物の影に相当する映像３ａの表示、および、記録環境における光源からの光に相当する映像３ｂの表示うち、少なくとも２つを組み合わせて行うことで、記録環境における光源の位置や照明方向を再生環境でより正確に観察者に認識させることができるので、視覚的な矛盾が生じるのを防ぎ、より臨場感のある態様で空間像を観察者に視認させることができる。
【００６８】
本発明を図面および実施形態に基づき説明してきたが、当業者であれば本開示に基づき種々の変形または修正を行うことが容易であることに注意されたい。したがって、これらの変形または修正は本発明の範囲に含まれることに留意されたい。
【符号の説明】
【００６９】
１０    空間像演出装置
１１    空間像投影装置
１２    プロジェクタ
１３    照明装置
１４    光源装置
１５    空調・送風装置
１６    スモーク発生装置
１７    スピーカ
１８    再生環境情報取得部
１００    制御部
１０１    記録環境情報取得部
１０２    再生制御部
【図１】
0006403648.tif 000002
【図２】
0006403648.tif 000003
【図３】
0006403648.tif 000004
【図４】
0006403648.tif 000005
【図５】
0006403648.tif 000006
【図６】
0006403648.tif 000007
【図７】
0006403648.tif 000008
【図８】
0006403648.tif 000009
【図９】
0006403648.tif 000010