(57)【特許請求の範囲】
【請求項１】
自己の投射領域内に少なくとも一つの画像投影領域ウインドーが形成されており、立体的な空間領域内に固定されているか、当該立体的な空間領域内を移動可能な状態に配置されているに少なくとも一つのプロジェクター手段であって、少なくともその一部に、当該プロジェクター手段の当該立体的な空間領域内での存在位置を検出する為の、少なくとも一つのマーカーが付与されているプロジェクター手段と、平面的及び／又は立体的面で構成された画像投影領域を有する、当該立体的な空間領域内で、当該空間領域内を任意に自在に移動、静止、変位或いは自転可能に構成されている、少なくとも一つの画像投影領域保持体であって、且つ当該画像投影領域の周縁部に、当該画像投影領域の当該立体的な空間領域内での存在位置を検出する為の、複数個のマーカーが付与されている画像投影領域を含む画像投影領域保持体と、当該プロジェクター手段と当該画像投影領域保持体の少なくとも一方が個別に移動可能な当該立体的な空間領域の周囲に、当該立体的な空間領域内全域を監視出来るように配置されている、当該個々のマーカーに関する３次元立体的位置情報をリアルタイムで個別に読み取る事が出来る、複数個のモーションキャプチャーカメラを含んでいるモーションキャプチャー手段とから構成された画像投影方法であって、当該画像投影方法は、当該モーションキャプチャー手段により、リアルタイムで検出された当該プロジェクター手段と当該画像投影領域保持体における当該画像投影領域とに於ける個々のマーカーに関する当該３次元立体的位置情報に基づいて、適宜の投影画像描画制御手段に於いて、特定の当該プロジェクター手段から投影されるべき特定の画像情報を、特定の当該画像投影領域保持体に設けられている当該画像投影領域の配置状態に適した投影画像情報に修正する画像修正処理操作をリアルタイムで実行し、当該修正された当該修正投影画像情報を当該特定のプロジェクター手段から、特定の当該画像投影領域保持体に設けられている当該画像投影領域に向けてリアルタイムに投影する様に構成されている画像投影方法において、少なくとも選択された一つのプロジェクター手段が、当該選択されたプロジェクター手段の投射領域内に配置されている少なくとも１つの独立した選択された一つの当該画像投影領域保持体に於ける第１の画像表示領域に、当該選択されたプロジェクター手段に於いて選択された一つの第１の画像が投影されるように操作されている状態に於いて、当該第１の画像表示領域に投影されている当該第１の画像上に、予め選択されている所定の動作状態の発生が検出された場合には、当該動作状態の発生を検出する特定の検出信号に応答して、瞬時に（リアルタイムに）当該第１の画像表示領域に投影されている当該第１の画像を、当該第１の画像表示領域とは異なる別の画像投影領域保持体に於ける第２の画像表示領域に移動させて、第２の画像表示領域内で当該第１の画像の投影を継続する様に構成されている事を特徴とする画像投影方法。
【請求項２】
当該立体的な空間領域内を移動可能な状態に配置されているにプロジェクター手段は、少なくとも一つのマーカーが付与されている携帯式プロジェクター手段である事を特徴とする請求項１に記載の画像投影方法。
【請求項３】
当該モーションキャプチャー手段は、モーションキャプチャーデータ処理手段を含んでおり、当該モーションキャプチャーデータ処理手段は、リアルタイムで検出された当該プロジェクター手段と当該画像投影領域保持体における当該画像表示領域との個々のマーカーに関する当該３次元立体的位置情報に基づいて、少なくとも、当該個々の画像表示領域毎の当該空間領域内於ける存在位置及び当該個々の画像表示領域の画像表示領域面の形状及び／又は投射方向に対する角度等を含む画像表示領域面情報をリアルタイムの演算処理により作成する事を特徴とする請求項１又は２に記載の画像投影方法。
【請求項４】
当該画像投影方法に於いては、選択された少なくともひとつの当該プロジェクター手段から、選択された少なくとも一つの特定の画像情報を、新たに選択された特定の当該画像投影領域保持体における当該画像表示領域面に投影するに際し、当該選択されたプロジェクター手段から、当該選択された特定の画像情報を、当該モーションキャプチャーデータ処理手段によって生成された、当該新たに選択された特定の当該画像投影領域保持体における当該画像表示領域面に関する画像表示領域面情報に基づいて、適宜の描画処理を介して、当該移動先となる新たに選択された特定の当該画像投影領域保持体における当該画像表示領域面での当該画像表示領域に適した画像情報に修正する描画処理操作を行って再投影処理する事を特徴とする請求項３に記載の画像投影方法。
【請求項５】
自己の投射領域内に少なくとも一つの画像投影領域ウインドーが形成されており、立体的な空間領域に静止状態に置かれているか、当該立体的な空間領域内を任意に自在に移動可能に構成されている少なくとも一つのプロジェクター手段であって、少なくともその一部に、当該プロジェクター手段の当該立体的な空間領域内での存在位置を検出する為の、少なくとも一つのマーカーが付与されているプロジェクター手段と、
立体的な空間領域内で、当該空間領域内を任意に自在に移動、静止、変位或いは自転可能に構成されている、平面的及び／又は立体的面で構成された画像投影領域を有する、少なくとも一つの画像投影領域保持体であって、且つ当該画像投影領域の周縁部に、当該画像投影領域の当該立体的な空間領域内での存在位置を検出する為の、複数個のマーカーが付与されている画像投影領域を含む画像投影領域保持体と、
当該プロジェクター手段と当該画像投影領域保持体とのそれぞれが個別に移動可能に若しくは静止状態に配置されている当該立体的な空間領域の周囲に、当該立体的な空間領域内全域を監視出来るように配置されている、当該個々のマーカーに関する３次元立体的位置情報をリアルタイムで個別に読み取る事が出来る、複数個のモーションキャプチャーカメラを含んでいるモーションキャプチャー手段と
当該モーションキャプチャー手段と接続されているモーションキャプチャーデータ処理手段と
当該モーションキャプチャーデータ処理手段及び当該プロジェクター手段と接続されている投影画像描画制御手段及び
当該投影画像描画制御手段に接続されている画像情報格納手段と
から構成されている画像投影装置であって、
当該モーションキャプチャー手段は、少なくとも一つ、好ましくは複数個の、当該プロジェクター手段と当該画像投影領域保持体とのそれぞれが個別に移動可能な当該立体的な空間領域の周囲に、当該立体的な空間領域内全域を監視出来るように配置されている複数個のモーションキャプチャーカメラを含んでおり、当該モーションキャプチャーデータ処理手段は、当該モーションキャプチャーカメラにより捕捉された当該個々のプロジェクター手段と、当該個々の画像投影領域保持体に設けられている当該個々の画像表示領域とに配置された個々のマーカーに於ける３次元位置情報に基づいて、当該個々の画像表示領域毎の当該立体的空間領域内於ける存在位置及び当該個々の画像表示領域の画像表示領域面の形状及び／又は投射方向に対する角度等を含む画像表示領域面情報をリアルタイムで演算処理して決定する画像表示領域面情報発生手段とが設けられており、一方、当該投影画像描画制御手段には、当該プロジェクター手段選択手段と、当該個々の画像投影領域保持体に設けられている当該個々の画像表示領域より選択された少なくとも一つの画像表示領域を選択する画像表示領域選択手段と、適宜の画像情報格納手段から当該選択されたプロジェクター手段から投射すべき少なくとも一つの画像情報を選択する画像情報選択手段と、当該選択された一つの画像表示領域に関する当該画像表示領域面情報を当該モーションキャプチャーデータ処理手段より取り込む画像表示領域面情報取得手段と、当該選択された投射すべき少なくとも一つの画像情報を、当該画像表示領域面情報を基にして、当該選択された一つの画像表示領域内に投影するに適した画像情報に修正する描画処理手段と、当該描画処理手段により修正された当該選択された画像情報を当該選択されたプロジェクター手段を介して、当該選択された画像表示領域に投射する様に指示を行う投射指示手段と、当該プロジェクター手段及び当該画像表示領域の移動を検出し、当該プロジェクター手段及び当該画像表示領域の移動先での当該画像表示領域に関する画像表示領域面情報を基に、当該選択された画像情報を当該移動先での当該画像表示領域に適した画像情報に修正する描画処理を行って再投影処理する手段とを有する画像投影装置に於いて、当該画像投影装置は、少なくとも一つのプロジェクター手段、当該プロジェクター手段の投射領域空間内に配置されている少なくとも２つの独立した画像表示領域、当該個々の画像表示領域の少なくとも一つの動きを検出するモーションキャプチャー手段、モーションキャプチャー手段と接続されているモーションキャプチャーデータ処理手段、当該モーションキャプチャーデータ処理手段及び当該プロジェクター手段と接続されている投影画像描画制御手段及び当該投影画像描画制御手段に接続されている画像情報格納手段とから構成されている画像投影システムに於いて、当該モーションキャプチャー手段は、少なくとも一つ、好ましくは複数個の、当該此処の画像表示領域の周辺部に配置されているモーションキャプチャーカメラを含んでおり、当該モーションキャプチャーデータ処理手段は、当該モーションキャプチャーカメラにより捕捉された当該それぞれの画像表示領域に配置された個々のマーカーに於ける３次元位置情報に基づいて、当該個々の画像表示領域毎の当該空間領域内於ける存在位置及び当該個々の画像表示領域の画像表示領域面の形状及び／又は投射方向に対する角度等を含む画像表示領域情報を演算処理してリアルタイムで決定する画像表示領域面情報発生手段と、当該個々の画像表示領域面に関する当該画像表示領域面情報に基づいて、当該投射されている画像上に、予め選択されている所定の動作状態が発生しているか否かをリアルタイムで演算処理して決定する動作状態発生検出手段と、当該投射されている画像表示領域に投影されている当該画像上に、予め選択されている所定の動作状態の発生が検出された場合には、当該動作状態の発生を報知する特定の検出信号を出力する動作状態発生報知手段とが設けられており、一方、当該投影画像描画制御手段には、当該プロジェクター手段選択手段と、当該複数個の画像表示領域より選択された少なくとも一つの画像表示領域を選択する画像表示領域選択手段と、当該画像情報格納手段から投射すべき少なくとも一つの画像情報を選択する画像情報選択手段と、当該選択された一つの画像表示領域に関する当該画像表示領域面情報を当該モーションキャプチャーデータ処理手段より取り込む画像表示領域面情報取得手段と、当該選択された投射すべき少なくとも一つの画像情報を、当該画像表示領域面情報を基にして、当該選択された一つの画像表示領域内に投影するに適した画像情報に修正する描画処理手段と、当該描画処理手段により修正された当該選択された画像情報を当該選択されたプロジェクター手段を介して、当該選択された画像表示領域に投射する様に指示を行う投射指示手段と、当該モーションキャプチャーデータ処理手段から出力される、当該選択された一つの画像表示領域に於ける所定の動作状態の発生を報知する当該特定の検出信号を検知した場合には、当該特定の検出信号に応答して、瞬時に（リアルタイムに）、当該画像が選択投影されている画像表示領域とは異なる別の画像表示領域を別途選択する別の画像表示領域選択手段と、当該別途選択された当該画像表示領域に関する画像表示領域面情報を当該モーションキャプチャーデータ処理手段から取り込む異なる画像表示領域面情報取り込み手段と、当該取り込まれた、別途選択された当該画像表示領域に関する画像表示領域情報に基づいて、当該選択投影されている画像を、当該別途選択された画像表示領域内に投影するに適した画像情報に修正する別の描画処理手段と、当該別の描画処理手段により修正された当該選択された画像情報を、当該選択されたプロジェクター手段を介して、瞬時に（リアルタイムに）、当該別途選択された画像表示領域に投射する指示を行う別の投射指示手段とを有する事を特徴とする画像投影装置。


【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像投影方法及び画像投影システムに関するものであり、特に詳しくは、所定のプロジェクター手段により、一つの被投影物に対して所定の画像が投影されている場合に於いて、当該所定の画像が示す所定の動きに応答して、リアルタイムに、別の被投影物に対して当該所定の画像若しくはそれと異なる画像が投影される様に構成された画像投影方法及び画像投影システムに関するものである。
【背景技術】
【０００２】
従来より、所望の画像データを所望のスクリーン（画像表示領域）上に表示して情報を第３者に伝達する方法は、一般的に知られており、それに関連する種々のシステムや装置が開発されて来ている。
然しながら、従来公知の当該画像表示システムは、固定された平面的なスクリーン(画像表示領域)上に、公知のプロジェクター手段を使用して、予め選択された所望の画像（静止画像及び動画像）を単に、連続的に或は間歇的に投影するに過ぎず、ズーム機能を活用して、同一の画像を拡大・縮小させる処理行って、当該表示画像に変化を与えることが出来る程度であり、又、複数種類の画像を連続的に或は間歇的に、当該固定された平面的なスクリーン(画像表示領域)上で投影しながら変化させる場合には、予め所望の画像を、表示する時間軸に沿って順番に所定のメモリー手段に記憶させておき、それに従って、順次に表示する事は可能であるが、何れにしても、予め設定されたシナリオに沿って、準備された画像が、単にそのシナリオに沿って、順番に表示されるに過ぎないので、当該画像表示効果は、極めて単純で、面白みに欠けているという欠点があった。
【０００３】
そのため、従来より、任意の時点で、任意の画像を、任意の形式で、任意の画像表示領域に投影することによって、当該画像表示操作をアトラクティブに演出する事が可能な画像投影方法が関連業界で強く要望されて来ている。
係る従来の問題点を改良する方法として、例えば、特開２０１３−２２２２８０号公報（特許文献１）が知られている。
当該特許文献１に於いては、プロジェクターを使用して、所望の画像を所望のスクリーンＳＣに投影するシステムにおいて、操作デバイスの一つである、指示体７０による、スクリーンＳＣに対する位置指示操作を検出し、検出した操作の位置に基づき画像の生成または更新を行い、当該スクリーンＳＣに投射する画像を更新させる様に構成するとともに、当該指示体７０の当該スクリーンＳＣに対する配置姿勢を検出し、指示体７０の配置姿勢が、描画の生成或は更新操作を実行できない状態にあると判定された場合に、当該描画手段による画像の生成或は更新処理を実行しないように構成した画像表示処理方法が開示されている。
【０００４】
然しながら、当該特許文献１に於いては、固定された平面上のスクリーンＳＣを使用するものであると同時に、当該指示体７０が、当該スクリーンＳＣに当接した際に、当該指示体７０の操作スイッチが稼働して、当該指示体７０の動きを当該スクリーンＳＣ上に線状に二次元的に描画したり、当該スクリーンＳＣ上に表示されている複数種の機能ボタンを選択させて、当該機能に対応する画像操作が実行されるか、当該プロジェクター手段に描画操作を行わせずに、当該プロジェクター手段とは別に設けられているパソコンより、当該プロジェクター手段を動作させて、予め作成されている、二次元的な画像情報を所定の順序に従って、当該スクリーンＳＣ上に投射する様に構成された画像表示処理方法が開示されてはいるが、３次元空間内に配置された複数個の画像表示領域を任意に選択し、当該選択された特定の画像表示領域に対して、任意の画像情報を、特定のタイミングに従って、別の画像表示領域に移動して表示させると言う、動的でアトラクティブで、且つインターアクティブな画像表示動作を実現させる技術に関しては、何らの開示も示唆も見当たらないのである。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０１３−２２２２８０号
【発明の概要】
【発明が解決しようとする課題】
【０００６】
従って、本発明の目的は、上記した従来技術の問題点を解決し、３次元空間内に配置された複数個の画像表示領域の中から任意の当該画像表示領域を選択し、当該選択された特定の画像表示領域に対して、選択された任意の画像情報を、投影操作している間に、特定のタイミングに従って、当該選択された特定の画像表示領域に投影されている当該選択された画像情報を、瞬時に且つリアルタイムに、別の画像表示領域に移動させて表示を継続させると言う、動的で、アトラクティブで、且つインターアクティブな画像表示動作を実現させる画像投影方法及びそのシステムを提供しようとするものである。
【０００７】
換言するならば、本発明は、様々な演出効果の可能性を広げることが出来る動体としての当該画像表示領域への所望の画像をマッピングする事を可能ならしめる新規な画像投影技術を提供するものであり、それによって、従来、実現が不可能であった、様々なアトラクティブな演出効果の可能性を広げることが出来る画像投影技術を提供するものである。
【０００８】
更に付言するならば、本発明は、従来の画像投射技術が、特定の固定された画像を固定され、静止されている画像表示領域、つまり、スクリーン手段に投影する、例えばプロジェクションマッピング等の方法で有ったのに対し、当該画像表示領域を動体として当該画像表示領域を動かしながら当該画像表示領域上に、二次元的では無く、３次元的な画像情報を投射してプロジェクションマッピングが実行される事により、動的、立体的でアトラクティブで意外性に富んだプロジェクションマッピングが行える画像投影技術を提供するものである。
【課題を解決するための手段】
【０００９】
本発明は、上記した目的を達成するため、以下に記載されたような、基本的な技術構成を採用するものである。
即ち、本発明の基本的な技術思想の第１の態様としては、少なくとも一つのプロジェクター手段、当該プロジェクター手段の投射領域内に配置されている少なくとも２つの独立した画像表示領域、当該個々の画像表示領域の少なくとも一つの動きを検出するモーションキャプチャー手段及び投影画像描画制御手段とから構成されている画像投影システムに於いて、一つの当該プロジェクター手段が、少なくとも選択された一つの第１の画像を、少なくとも選択された一つの第１の画像表示領域に投影するように操作されている状態に於いて、当該第１の画像表示領域に投影されている当該第１の画像上に、予め選択されている所定の動作状態の発生が検出された場合には、当該動作状態の発生を検出する特定の検出信号に応答して、瞬時に（リアルタイムに）当該第１の画像表示領域に投影されている当該第１の画像を、当該第１の画像表示領域とは異なる第２の画像表示領域に移動させて、第２の画像表示領域内で当該第１の画像の投影を継続する様に構成されている事を特徴とする画像投影方法であり、又、本発明に係る  第２の態様としては、少なくとも一つのプロジェクター手段、当該プロジェクター手段の投射領域空間内に配置されている少なくとも２つの独立した画像表示領域、当該個々の画像表示領域の少なくとも一つの動きを検出するモーションキャプチャー手段、モーションキャプチャーデータ処理手段及び投影画像描画制御手段とから構成されている画像投影システムに於いて、
使用される当該プロジェクター手段を選択する第１の工程、
当該プロジェクター手段の投射領域空間内に配置されている当該全ての画像表示領域の当該投射領域空間内に於ける３次元位置情報を、当該全ての画像表示領域に設けられているマーカーと当該モーションキャプチャーデータ処理手段に接続されているモーションキャプチャーカメラを介して検出する第２の工程、
当該プロジェクター手段の投射領域空間内に配置されている当該画像表示領域の少なくとも一つを選択する第３の工程、
当該選択された画像表示領域に関する、当該投射領域空間内に配置されている存在位置及び当該画像表示領域面の形状及び／又は投射方向に対する角度等の画像表示領域面情報をリアルタイムで表示する第４の工程、
当該選択された少なくとも一つの画像表示領域に対して投影すべき少なくとも一つの画像を選択する第５の工程、
当該選択された投射すべき画像を、当該投影画像描画制御手段により、当該選択された画像表示領域の当該画像表示領域面情報に基づいて、当該選択された画像表示領域に投影するに適した画像情報に修正する為の描画処理を行う第６の工程（尚、選択されていない他の、画像表示領域に対しては、画像投影は行わない。）
当該選択されて、当該投影画像描画制御手段により修正描画処理された修正投射画像を、当該プロジェクター手段を介して、当該選択された画像表示領域に投射する第７の工程、
当該描画処理された当該画像が投射されている当該選択された画像表示領域の当該投射領域空間内に於ける３次元位置情報を、当該モーションキャプチャー手段を介してリアルタイムでモニターする第８の工程、
当該画像表示領域の当該投射領域空間内に於ける３次元位置情報に所定の動作状態が発生しているか否かを検出する第９の工程、
当該画像表示領域に関する当該所定の動作状態が発生した場合、当該所定の動作状態が予め設定されているしきい値を超えているか否かを判断する第１０の工程、
当該画像表示領域（第１の画像表示領域）に関する動作状態が予め設定されているしきい値を超えている場合には、当該選択されている画像が投射されている当該画像表示領域（第１の画像表示領域）とは異なる、当該プロジェクター手段の当該投射領域空間内に配置されている他の画像表示領域（第２の画像表示領域）を選択する第１１の工程、
当該選択された他の画像表示領域（第２の画像表示領域）に関する当該画像表示領域面情報を当該モーションキャプチャーデータ処理手段から選択する第１２の工程、
当該選択された他の画像表示領域（第２の画像表示領域）に関する当該画像表示領域面情報に基づいて、当該画像表示領域（第１の画像表示領域）に投影されている当該修正投射画像を、当該投影画像描画制御手段により、当該選択された他の画像表示領域（第２の画像表示領域）に投影するに適した画像情報に修正する為の描画処理を行う第１３の工程、
当該画像表示領域（第１の画像表示領域）に対する当該先の修正投射画像の投射操作を中止し、当該選択された他の画像表示領域（第２の画像表示領域）に対して、新たに描画処理された修正画像を投射する第１４の工程、
上記各工程を繰り返す第１５の工程、
と、で構成されている特徴とする画像投影システムである。
【００１０】
更に、本発明に係る基本的技術思想の第３の態様としては、少なくとも一つのプロジェクター手段、当該プロジェクター手段の投射領域空間内に配置されている少なくとも２つの独立した画像表示領域、当該個々の画像表示領域の少なくとも一つの動きを検出するモーションキャプチャー手段、モーションキャプチャー手段と接続されているモーションキャプチャーデータ処理手段、当該モーションキャプチャーデータ処理手段及び当該プロジェクター手段と接続されている投影画像描画制御手段及び当該投影画像描画制御手段に接続されている画像情報格納手段とから構成されている画像投影システムに於いて、当該モーションキャプチャー手段は、少なくとも一つ、好ましくは複数個の、当該此処の画像表示領域の周辺部に配置されているモーションキャプチャーカメラを含んでおり、当該モーションキャプチャーデータ処理手段は、当該モーションキャプチャーカメラにより捕捉された当該それぞれの画像表示領域に配置された個々のマーカーに於ける３次元位置情報に基づいて、当該個々の画像表示領域毎の当該空間領域内於ける存在位置及び当該個々の画像表示領域の画像表示領域面の形状及び／又は投射方向に対する角度等を含む画像表示領域情報を演算処理してリアルタイムで決定する画像表示領域情報発生手段と、当該個々の画像表示領域に関する当該画像表示領域情報に基づいて、当該投射されている画像上に、予め選択されている所定の動作状態が発生しているか否かをリアルタイムで演算処理して決定する動作状態発生検出手段と、当該投射されている画像表示領域に投影されている当該画像上に、予め選択されている所定の動作状態の発生が検出された場合には、当該動作状態の発生を報知する特定の検出信号を出力する動作状態発生報知手段とが設けられており、一方、当該投影画像描画制御手段には、当該プロジェクター手段選択手段と、当該複数個の画像表示領域より選択された少なくとも一つの画像表示領域を選択する画像表示領域選択手段と、当該画像情報格納手段から投射すべき少なくとも一つの画像情報を選択する画像情報選択手段と、当該選択された一つの画像表示領域に関する当該画像表示領域情報を当該モーションキャプチャーデータ処理手段より取り込む画像表示領域情報取得手段５４と、当該選択された投射すべき少なくとも一つの画像情報を、当該画像表示領域情報を基にして、当該選択された一つの画像表示領域内に投影するに適した画像情報に修正する描画処理手段と、当該描画処理手段により修正された当該選択された画像情報を当該選択されたプロジェクター手段を介して、当該選択された画像表示領域に投射する様に指示を行う投射指示手段と、当該モーションキャプチャーデータ処理手段から出力される、当該選択された一つの画像表示領域に於ける所定の動作状態の発生を報知する当該特定の検出信号を検知した場合には、当該特定の検出信号に応答して、瞬時に（リアルタイムに）、当該画像が選択投影されている画像表示領域とは異なる別の画像表示領域を別途選択する別の画像表示領域選択手段と、当該別途選択された当該画像表示領域に関する画像表示領域情報を当該モーションキャプチャーデータ処理手段から取り込む異なる画像表示領域情報取り込み手段と、当該取り込まれた、別途選択された当該画像表示領域に関する画像表示領域情報に基づいて、当該選択投影されている画像を、当該別途選択された画像表示領域内に投影するに適した画像情報に修正する別の描画処理手段と、当該別の描画処理手段により修正された当該選択された画像情報を、当該選択されたプロジェクター手段を介して、瞬時に（リアルタイムに）、当該別途選択された画像表示領域に投射する指示を行う別の投射指示手段、とを有する事を特徴とする画像投影装置である。
【発明の効果】
【００１１】
本発明に係る当該画像投影方法、当該画像投影システム及び当該画像投影装置によれば、上記した様な基本的技術構成を採用した結果、簡易な構成でありながら、少なくとも一つのプロジェクター手段に対して、複数個の画像表示領域を配置し、当該３次元空間内に配置された当該複数個の画像表示領域の中から任意の当該画像表示領域を選択し、当該選択された特定の画像表示領域に対して、任意の画像情報を、継続的に投影操作を実行している間に、特定のタイミングに従って、当該選択された特定の画像表示領域で投影されている当該選択された画像情報を、瞬時に且つリアルタイムに、別の画像表示領域に移動させて表示させると言う、動的で、アトラクティブで、且つインターアクティブな画像表示動作を実現させる画像投影方法及びそのシステムを提供する事が可能となる。
【００１２】
つまり、本発明によれば動的な投影物に対してプロジェクションマッピングが可能になり、従来では、当該プロジェクションマッピングでは、今迄まで表現が難しかったインタラクティブな映像演出を可能する事が出来る。
換言するならば、本発明は、様々な演出効果の可能性を広げることが出来る、動体としての当該画像表示領域への、所望の画像情報をマッピング処理する事を可能ならしめるものであり、それによって、従来、実現が不可能であった、様々なアトラクティブな演出効果の可能性を広げることが出来る画像投影技術が提供される事になる。
【００１３】
更に付言するならば、本発明は、従来の画像投射技術が、特定の固定された画像を固定され、静止されている画像表示領域、つまり、スクリーン手段に投影する、例えばプロジェクションマッピング等の方法で有ったのに対し、当該画像表示領域を動体として当該画像表示領域を動かしながら当該画像表示領域上に、二次元的では無く、３次元的な画像情報を投射してプロジェクションマッピングが実行される事により、動的、立体的でアトラクティブで意外性に富んだプロジェクションマッピングが行える画像投影技術を提供するものである。
【００１４】
一方、従来に於いては、動いている物への投影を表現しょうとすると被投影体の動きを制御するモーションコントロール機能を備えた制御機で動きをプログラミングし且その動きに同期した投影映像を被投影体の動きに合わせたタイミングで投影する必要があり非常に複雑で実現が困難な表現方法であったが、発明に於いては、タイミングなどを合わせる必要がなく容易に制御出来るのみならず、被投影体の動きを制御する制御手段を使用しなくても実現できるので装置自体が簡易出且つ小型化されると言う効果が発揮される。
【００１５】
換言するならば、本発明は、様々な演出効果の可能性を広げることが出来る動体としての当該画像表示領域への所望の画像をマッピングする事を可能ならしめる新規な画像投影技術を提供するものであり、それによって、従来、実現が不可能であった、様々なアトラクティブな演出効果の可能性を広げることが出来る画像投影技術を提供される。
【００１６】
更に付言するならば、本発明は、従来の画像投射技術が、特定の固定された画像を固定され、静止されている画像表示領域、つまり、スクリーン手段に投影する、例えばプロジェクションマッピング等の方法で有ったのに対し、当該画像表示領域を動体として当該画像表示領域を動かしながら当該画像表示領域上に、二次元的では無く、３次元的な画像情報を投射してプロジェクションマッピングが実行される事により、動的、立体的でアトラクティブで意外性に富んだプロジェクションマッピングが行える画像投影技術を提供されるのである。
【図面の簡単な説明】
【００１７】
【図１】図１（Ａ）及び図１（Ｂ）は本発明に係る当該画像投影方法１００の一具体例の構成を示すブロック図である。
【図２】図２は、本発明に係る当該画像投影方法１００の一具体例に於けるセグメントの形成方法の例を説明する斜視図である。
【図３】図３（Ａ）及び図３（Ｂ）は、本発明に係る当該画像投影方法１００の一具体例に於ける画像のマッピング方法の例を説明する図である。
【図４】図４は、本発明に係る当該画像投影システム１００に於けるモーションキャプチャーデータ処理手段８の構成の一例を説明するブロック図である。
【図５】図５は、本発明に係る当該画像投影システム１００に於ける投影画像描画制御手段５の構成の一例を説明するブロック図である。
【図６】図６（Ａ）及び図６（Ｂ）は、本発明に於ける当該画像投影システム１００に於ける画像投影表示方法と従来技術の当該画像投影表示方法と相違を説明するブロック図である。
【図７】図７は、本発明に於ける当該画像投影システム１００と従来技術に於けるプロジェクションマッピング方法の別の相違点を説明するブロック図である。
【図８】図８は、本発明に於ける於ける当該画像投影システム１００に於ける画角の設定方法の一例を説明する図である。
【図９】図９は、本発明に係る当該画像投影システム１００の工程手順を説明するフローチャートである。
【図１０】図１０は、本発明に於ける係る当該画像投影システム１００に於いて使用される画像表示方法の別の具体例を説明する図である。
【図１１】図１１は、本発明に於ける当該画像投影システム１００で使用される携帯式手のひらサイズのプロジェクター手段１の構造を説明するである。
【図１２】図１２は、本発明に於ける当該携帯式手のひらサイズのプロジェクター手段１を使用した当該画像投影方法の一例を説明する図である。
【図１３】図１３は、本発明に於ける当該携帯式手のひらサイズのプロジェクター手段１を使用した当該画像投影方法の別の例を説明する図である。
【図１４】図１４は、本発明に於ける当該携帯式手のひらサイズのプロジェクター手段１を使用した当該画像投影方法の更に別の例を説明する図である。
【図１５】図１５は、本発明に係る当該画像投影システム１００に於ける投影画像描画制御手段５の構成の一例を説明するブロック図である。
【図１６】図１６（Ａ）及び図１６（Ｂ）は、本発明に於ける当該画像投影システム１００に於ける１具体例の画像投影表示方法を説明するブロック図である。
【図１７】図１７は、本発明に於ける当該画像投影システム１００に於けるプロジェクションマッピング方法の別の具体例を説明するブロック図である。
【図１８】図１８は、本発明に於ける於ける当該画像投影システム１００に於ける更に別の一具体例を説明する図である。
【図１９】図１９は、本発明に係る当該画像投影システム１００の更に他の具体例を説明する図である。
【図２０】図２０は、本発明に於ける係る当該画像投影システム１００に於いて使用される画像表示方法の別の具体例を説明する図である。
【図２１】図２１は、本発明に於ける当該画像投影システム１００で使用される異なる具体例を説明する図である。
【図２２】図２２は、本発明に於ける当該携帯式手のひらサイズのプロジェクター手段１を使用した当該画像投影方法の一例を説明する図である。
【図２３】図２３は、本発明に於ける更に別の具体例の構成を説明するための斜視図である。
【図２４】図２４は、本発明に於ける更に別の具体例の動作の手順を説明するフローチャートである。
【図２５】図２５は、本発明に於ける異なる具体例を説明する図である。
【図２６】図２６は、本発明に於ける更に異なる具体例を説明する図である。
【図２７】図２７は、本発明に於ける別の具体例を説明する図である。
【図２８】図２８は、本発明に於ける更に別の具体例を説明する図である。
【図２９】図２９は、本発明に於ける他の具体例を説明する図である。
【図３０】図３０は、本発明に於ける更に他の具体例を説明する図である。
【図３１】図３１は、本発明に於ける更に他の具体例を説明する図である。
【図３２】図３２は、本発明に於ける更に他の具体例を説明する図である。
【図３３】図３３は、本発明に於ける異なる具体例を説明する図である。
【図３４】図３４は、本発明に於ける更に異なる具体例を説明する図である。
【発明を実施するための形態】
【００１８】
以下に本発明に係る当該画像投影方法の一具体例の構成を、図面を参照しながら詳細に説明する。
即ち、図１（Ａ）は、本発明に於ける当該画像投影方法１００を実現する為の画像投影システム１００の基本的な構成の具体例を示すブロック図であって、図中、少なくとも一つのプロジェクター手段１、当該プロジェクター手段１の投射領域内２に配置されている少なくとも２つの独立した画像表示領域３、当該個々の画像表示領域３の少なくとも一つの動きを検出するモーションキャプチャー手段４及び投影画像描画制御手段５とから構成されている画像投影システム１００に於いて、一つの当該プロジェクター手段１が、少なくとも選択された一つの第１の画像６を、少なくとも選択された一つの第１の画像表示領域３１に投影するように操作されている状態に於いて、当該第１の画像表示領域３１に投影されている当該第１の画像６上に、予め選択されている所定の動作状態６１の発生が検出された場合には、当該動作状態６１の発生を検出する特定の検出信号７に応答して、瞬時に（リアルタイムに）当該第１の画像表示領域３１に投影されている当該第１の画像６を、当該第１の画像表示領域３１とは異なる第２の画像表示領域３２に移動させて、第２の画像表示領域３２内で当該第１の画像６の投影を継続する様に構成されている事を特徴とする画像投影方法１００を実施する為の構成を含むブロック図が示されている。
【００１９】
尚、図１（Ａ）に於いては、当該プロジェクター手段１の投射領域２の３次元立体空間２２内には、３個の当該画像表示領域３１乃至３３が配置されている例を示したものであり、又、当該３個の画像表示領域３１乃至３３の内で、当該第１の画像表示領域３１には、画像情報として画像Ｃが投影されており、当該第２の画像表示領域３２には、画像情報は投影されておらず、又、当該第３の画像表示領域３３には、画像情報として画像Ａが投影されている状態で、当該第１の画像表示領域３１が点線で示す位置に変位すると言う、特定の動作状態６１が発生した場合に、当該第１の画像表示領域３１に投影されている当該画像Ｃの画像情報を当該第２の画像表示領域３２に移動させて投影操作が継続される様に構成されている具体例を示している。
【００２０】
一方、図１（Ｂ）には、上記した、当該画像投影システムに於いて、当該モーションキャプチャー手段４として、複数個、本具体例では、４個のモーションキャプチャーカメラ４１乃至４４が当該複数個の画像表示領域のそれぞれを実質的にカバーして監視出来る様に、当該各画像表示領域の周辺部位に、個別独立的に配置されており、当該各モーションキャプチャーカメラ４１乃至４４が個別に検出した、当該各画像表示領域毎の当該プロジェクター手段１の投射領域２の３次元立体空間２２内に於ける３次元位置情報及び各画像表示領域毎の特定の動作状態６１が発生した事を検知した特定動作状態発生検知信号７とは、適宜のハブ手段４５を介して、モーションキャプチャーデータ処理手段８に伝達される様に構成されており、更には、当該投影画像描画制御手段５は、当該モーションキャプチャーデータ処理手段８から出力される当該所定の画像表示領域３１に特定動作状態発生した事を検知する検知信号７に応答して、当該第１の画像表示領域３１に投影されている当該第１の画像Ｂを当該第２の画像表示領域３２に移動させて、当該第２の画像表示領域内に当該第１の画像Ｂを投影し、その状態を継続させると言う具体例の構成が示されている。
係る具体例に於いて、元の画像表示領域に表示されていた画像は、消滅させても良く、或いは当該画像表示を継続させるものであっても良い。
本具体例では、当該特定動作状態発生した事を検知する検知信号７を図１及び図４と図５に示す様に、当該モーションキャプチャーデータ処理手段８で発生させ、その信号を当該投影画像描画制御手段５に入力する例を示しているが、本発明に於いては、係る具体例に特定されるものではなく、当該モーションキャプチャーデータ処理手段８では、単に、特定の画像表示領域の動き状態を継続的にモニターする機能のみを付与しておき、当該特定の画像表示領域が、特定の動作状態を発生させたか否かの検知・判断手段と当該特定の動作状態発生報知手段とを当該投影画像描画制御手段５に設けて、当該投影画像描画制御手段５で、当該特定動作状態発生検知信号７を発生させるように構成したものであっても良い事は言うまでもない。
更に、本発明に於いける具体的が事例としては、例えば、一つの当該画像表示領域３１を人が手に持って移動させている場合に於いて、当該人物が、当該画像表示領域３１を、所定の方向に放り投げる様な動作をする事によって、それまで、当該画像表示領域３１に投影されていた特定の画像情報を別の画像表示領域３２に移動させるというアクション動作を実現出来る。
本発明では、更に、当該所定の画像表示領域３１に投影されていた特定の画像を別の画像表示領域３２に移動させる動作に同期させて、音声、音楽、チャイム等の音情報を発生させるように構成されたものであっても良い。
【００２１】
尚、当該図１（Ｂ）に示される本発明に係る具体例に於いては、当該プロジェクター手段１の投射領域２の３次元立体空間２２内には、２個の当該画像表示領域３１及び３２が配置されている例を示したものであり、且つ、当該第１の画像表示領域３１には、第１の画像表示領域として、矩形立方体を形成した画像表示領域を有しており、外観出来る３つの画像表示面には、それぞれＡ，Ｂ及びＣの画像情報が、個別に投影されており、当該第２の画像表示領域３２には、何らの画像情報は投影されていない状況に於いて、当該第１の画像表示領域３１が、矢印６１に示す方向に移動して、新たな画像表示領域３’に移動した場合に、当該第１の画像表示領域３１の主要投射面に投射されていた画像情報Ｂを当該第２の画像表示領域３２に移動させ、当該第２の画像表示領域３２内に於いて、当該画像情報Ｂの投影処理操作を継続する様に構成された例を示している。
尚、上記具体例に於いては、当該第１の画像表示領域３１の主要投射面に投射されていた画像情報Ｂを当該第２の画像表示領域３２に移動させた場合、当該第１の画像表示領域３１の主要投射面に投射されていた画像情報Ｂは、消滅させても良く、或いは、そのまま残留させるものであっても良く、更には、他の画像と取り換える事も可能である。
【００２２】
処で、本発明に於いて使用される当該複数個の画像表示領域３（３１、３２、３３・・・・・）のそれぞれは、何れも、投影面部分が略平面であって、その平面形状は、矩形、円形、多角形、楕円形、台形等を含む任意の形状を有するものであるか、或いは、当該投影面部分が３次元的立体形状を呈し、球面、球体、多角面構成体を含む任意の立体構成物で構成されている事が望ましい。
つまり、本発明に於いては、当該画像表示領域３としては、人物像、動物像、その他一般的な立体形状を有する物体の全てを対象として選択出来るのである。
更に、本発明に於いては、当該複数個の画像表示領域３（表示領域３（３１、３２、３３・・・・・）のそれぞれは、当該プロジェクター手段１が形成する個別の投射領域２２内の３次元空間２３内に、任意に且つ独立して存在しており、且つ個々の当該画像表示領域３（３１、３２、３３・・・・・）のそれぞれは、独立的に任意の方向に移動可能に構成されている事も、好ましい具体例である。
【００２３】
一方、本発明に於ける当該複数個の画像表示領域３（３１、３２、３３・・・・・）のそれぞれには、個別的に、当該個々の画像表示領域３（３１、３２、３３・・・・・）の範囲並びに当該投影領域２２内の３次元空間２３内に於ける存在位置を表示する為に、複数個のマーカー２５が付与されている事が必要である。
そして、本発明に於ける当該個々のマーカー２５は、それぞれ個別に３次元位置情報を有している事が望ましい。
【００２４】
更に、本発明に於いては、当該モーションキャプチャー手段４を構成する一つ若しくは複数個のモーションキャプチャーカメラ４１乃至４４が常時、当該個々の画像表示領域３（３１乃至３３）毎に、当該個々の画像表示領域３（３１乃至３３）に配置されている当該マーカー２５の存在位置を、３次元位置情報として検出し、当該個々の画像表示領域３の当該３次元位置情報をリアルタイムで当該画像投影システム１００に設けられているモーションキャプチャーデータ処理手段８に報知する様に構成されている事が好ましい具体例の一つである。
【００２５】
又、本発明に於ける当該画像投影システム１００には、更に、当該モーションキャプチャーデータ処理手段８が設けられており、当該モーションキャプチャーデータ処理手段８は、当該モーションキャプチャーカメラ４１乃至４４が検出した、当該個々の画像表示領域３（３１乃至３３）毎の個々のマーカーの３次元位置情報から、当該個々の画像表示領域の当該空間領域内於ける存在位置及び当該個々の画像表示領域３（３１乃至３３）の画像表示領域面の形状及び／又は投射方向に対する角度等を含む画像表示領域情報２６を演算処理してリアルタイムで決定する様に構成されている事が望ましい具体例の一つである。
【００２６】
一方、本発明に於いては、当該個々の独立した画像表示領域３（３１乃至３３）は、任意の時点で、任意の方向に、移動、回転、旋回、振動等の変位動作を個別に実行できる様に構成されている事が望ましい。
本発明に於ける当該画像表示領域３の個々の変位動作として、当該移動とは、当該画像表示領域３の個々を、所定の方向に所定の長さだけ並行的に移動するものであり、又、当該回転とは、当該画像表示領域３の個々を、所定の適宜の点を中心として所定の方向に、所定の角度だけ、平面的に回転移動する事を示唆するものであり、更に、当該旋回とは、当該画像表示領域３（３１乃至３３）の何れかにいて、当該画像表示領域３を貫通する回転軸線に沿って、所定の角度だけ、旋回させる操作をそれぞれ示している。
又、本発明に於ける当該振動とは、当該個々の独立した画像表示領域３を任意の方向に急速に上下動や左右動、揺動させる動作を示す。
【００２７】
又、本発明に於ける当該個々の独立した画像表示領域３（３１乃至３３）に於ける当該変位動作６は、任意のタイミングに於いて、適宜のプログラム等を利用して自動的若しくは手動的にそれぞれ独立的に実行されるものである。
例えば、当該画像表示領域３は、適宜の移動・変位可能な機械的装置（図示せず）に取り付けられていて、当該機械的装置を適宜のプログラムに従って、或いは、人為的入力操作によって、移動・変位させる事が可能である。
本発明に於いては、当該全ての画像表示領域３（３１乃至３３）に設けられている全てのマーカー２５の当該３次元位置情報は、常時、リアルタイムで検出され、後述する様に、モーションキャプチャーデータ処理手段８に於いて、所定の演算処理が行われ、当該個々の画像表示領域３（３１乃至３３）の当該投影空間領域内於ける存在位置及び当該個々の画像表示領域３（３１乃至３３）の画像表示領域面の形状及び／又は投射方向に対する角度等を含む画像表示領域情報が、瞬時に且つリアルタイムで決定され、その結果が後述する投影画像描画制御手段５に送信される様に構成されている。
【００２８】
同様に、当該モーションキャプチャーデータ処理手段８に於いては、当該全てのマーカー２５からリアルタイムに送信されて来た当該個々の画像表示領域３に関する３次元位置情報を基に、当該個々の画像表示領域３に付いて、適宜の時間差を以て適宜の差分情報を演算処理することにより、当該個々の画像表示領域３に付いての、移動或いは変位等に関する変位動作情報６を得る事が出来る。
【００２９】
本発明に於いては、後述する様に、係る変位動作情報６をリアルタイムで取得しながら、当該変位動作情報６の値を、予め定められた特定の閾値（しきい値）と比較して、当該変位動作情報６の値が、当該特定の閾値を超えたと判断された場合には、上記した様に、特定の動作状態発生検出信号７を当該モーションキャプチャーデータ処理手段８から出力させ、それが当該投影画像描画制御手段５に入力される事になる。
【００３０】
一方、本発明に於いては、当該投射領域２内に複数個の当該画像表示領域３（３１乃至３３）が配置されている場合、全ての当該各画像表示領域３（３１乃至３３）に対して、同一の画像情報を投影する事も可能であり、又、相互に異なる画像情報を投影する事も可能である。
更には、その一部の当該画像表示領域３に対しては、画像情報の投影を行わず、ブラインド状態にしておく事も可能である。
【００３１】
そして、本発明に於いて、例えば、図１（Ｂ）に示す様に、特定の画像表示領域３の一つである当該第１の画像表示領域３１が、矢印６１に示す方向に移動し変位した事に起因して、当該第１の画像表示領域３１に対して当該特定の動作状態発生検出信号７が発生した場合には、当該第１の画像表示領域３１にこれまで投影されていた画像情報である第１の画像情報Ｂを、これまでブラインド状態にあった当該第２の画像表示領域３２の表示領域内に当該第１の画像情報Ｂを移動させ、そこに当該第１の画像情報Ｂを投影させ、その状態を継続させる事になる。
この場合、当該第１の画像表示領域３１はブラインド状態としても良く、又、別途用意した第３の画像情報Ｘを投影するものであっても良い。
【００３２】
同様に、本発明に於いては、上記した画像移転操作に於いて、当該第１の画像表示領域３１とは異なる第２の画像表示領域３２に表示される画像は、当該第１の画像情報Ｂとは異なる画像情報Ｙであっても良い。
つまり、本発明に於いては、当該プロジェクター手段１の投射領域２内に配置されている少なくとも２つの独立した画像表示領域３１乃至３３のそれぞれの画像表示領域に対しては、同一若しくは相互に異なる画像が個別に投影される事も可能である。
【００３３】
本発明に於いては、当該モーションキャプチャー手段４は、複数個のモーションキャプチャーカメラ４１乃至４４を含んでいる事が望ましく、特に好ましくは３個或いは３個以上のモーションキャプチャーカメラ４１乃至４４を含んでいるものであって、当該それぞれのモーションキャプチャーカメラ４１乃至４４は、それぞれが当該個々の画像表示領域３１乃至３３の何れかの外周面の略全域が見渡せる様な部位に分散して配置されている事が望ましい。
そして、当該それぞれのモーションキャプチャーカメラ４１乃至４４は、当該プロジェクター手段１と共通の原点（Ｘ＝０，Ｙ＝０，Ｚ＝０）を持っている事が必要である。
一方、本発明に於ける当該マーカー２５は、当該複数個の画像表示領域３１乃至３３のそれぞれに付いて、個別的に、当該個々の画像表示領域３１乃至３３に対応する個別の識別子を有しており、当該マーカー２５が、当該個々の画像表示領域３１乃至３３に対応してそれぞれグループ分けされている事が望ましい。
【００３４】
一方、本発明に於いては、当該プロジェクター手段１により当該所定の画像表示領域３１乃至３３のそれぞれに対して投射される画像は動画像、アニメーション或いは静止画像であり、当該複数種類の動画像及び静止画像は、当該投影画像描画制御手段５に接続された適宜の記憶手段９内に予め記憶されている事が望ましい。
尚、本発明に於いては、３次元位置情報を取り扱うので、表示すべき当該画像は何れも２次元画像で有っても良く或いは３次元画像で有っても良いので、極めてアトラクティブな画像投影効果が得られる。
【００３５】
更に、本発明においては、当該投影画像描画制御手段５は、常時、リアルタイムで、当該選択された画像表示領域３１乃至３３のそれぞれに対して、当該モーションキャプチャーデータ処理手段８から出力される当該選択された画像表示領域に関する位置情報及び当該画像表示領域の画像表示領域面の形状及び／又は投射方向に対する角度等の画像表示領域情報に基づいて、当該記憶手段９より選択された画像を、現時点に於ける当該選択された画像表示領域３１乃至３３の画像表示領域の状況に合わせた最適な画像となる様に描画処理し、当該描画処理した当該画像を当該選択された画像表示領域３１乃至３３に投射する様に構成されているものである。
【００３６】
一方、本発明に於いては、当該一つのプロジェクター手段を使用する代わりに、図１（Ａ）に示されている様に、複数個のプロジェクター手段１、１’が設けられている事も可能であり、当該個々のプロジェクター手段１、１’は、個別に、当該個々の独立した画像表示領域３１乃至３３の一部若しくは全部に、選択された個々の画像を投射する様に構成されている事も可能である。
【００３７】
更に、本発明に於いて、当該特定の画像情報を当該所定の画像表示領域３１から別の画像表示領域３２に対して投影操作を移動変更する際に検出される当該変位動作は、当該個々の独立した画像表示領域３１乃至３３に於ける当該移動、回転、旋回、振動等に於ける移動長さ、回転角度、旋回角度で有っても良く、或いは当該移動速度、回転角速度、旋回角速度で有っても良く、或いは振動の振幅や振動回数等であっても良い。
又は、画像表示領域３１乃至３３の当該移動、回転、旋回等に於ける移動加速度、回転角加速度、旋回角加速度である事が望ましい。
何れにしても、上記した本発明に係る当該各処理操作、検出操作は、何れも当該画像表示領域３のそれぞれが、当該モーションキャプチャーカメラ４１乃至４４のキャプチャーエリア内のみにおいて有効である事は言うまでも無い。
【００３８】
此処で、本発明に於いて使用される当該モーションキャプチャー手段４とそれぞれの当該画像表示領域３に取り付けられる当該マーカー２５について説明する。
本発明に於いて使用される当該マーカー２５の特性或いは製造材料等は特に限定されるものではなく、赤外線を反射出来る特性を有するもので有れば、一般的に市販されている材質のマーカーを使用する事が可能である。
当該マーカー５の大きさも特に限定されるものではないが、例えば、高解像度のカメラや、赤外線カメラにより検出可能な範囲として、縦横が５ｍｍ程度の大きさを有するもので有れば使用可能であり、この程度の大きさのもので有れば、第３者からの目視による認識が出来ないので、好都合である。
【００３９】
そして、本発明に於いては、当該マーカー５を選択された当該画像表示領域３１乃至３３のそれぞれに取り付けるものであるが、取り付け方法は、それぞれの当該画像表示領域３１乃至３３に対して、少なくとも３か所、好ましくは４か所張り付けるものであり、当該マーカー５の貼り付け場所は、当該それぞれの当該画像表示領域３１乃至３３の角部とする事が望ましい。
例えば、当該画像表示領域３２の様に、画像表示領域が平面形状を有する場合には、図１（Ｂ）に示す様に、矩形形状の４つの角部に当該マーカー２５を配置する事が可能であるが、例えば、当該画像表示領域３１の様に、画像表示領域が立体矩形の６面体形状を有している場合には、その主たる外観面で画像情報Ｂが投影されている面の４隅にマーカー２５を取り付けるものである。
【００４０】
一方、当該３１に於けるその他の角部、及び外観上見えない角部に対しては、当該立体矩形６面体形状に付いての、縦、横、幅に関する長さ情報が知られていることを利用して、当該公知の補完手法を用いて、バーチャルマーカー２５’を作成して添付する事が可能である。
つまり、例えばＢＯＸ状の当該画像表示領域３１の底辺マーカーなどはモーションキャプチャー手段４のモーションキャプチャーカメラ４１乃至４４からでは撮影出来ない場所にあるので、そのような条件を補う為の手法である。
この手法で当該画像表示領域３１に４点のマーカー２５をつけるだけで隣接する面の頂点を疑似的に作り出す事が可能となる。
係る操作を実行する為に、例えば、モーションキャプチャーシステムに於いて一般的に使用されている“ＣＯＲＴＥＸ”と称されているソフトを使用する事が出来る。
【００４１】
当該それぞれのマーカー２５間の相互関係に関しては、基本的には、マーカー２５のつける場所が異なれば、マーカー間の距離が違うのでマーカー4点でも誤認識の可能性は低いので、同じマーカー数ででも違うグループと判断する事が可能であり、従って、マーカー２５のつけ方とマーカー２５の数により当該キャプチャーエリアに多数のグループを個別に認識させることが可能であるが、好ましくは、取り付けた当該画像表示領域３１乃至３３ごとにマーカー２５をグループ分けする為に、グループ化されたマーカーグループに名前をつけ他のマーカーグループとの区別をつける事が望ましい。
【００４２】
尚、本発明に於いては、当該それぞれの画像表示領域３１乃至３３に取り付けられたマーカー２５から、当該各画像表示領域３１乃至３３の配置方向性と回転情報がわかるように、図２に示す様に、当該マーカーグループ２５の３次元位置座標情報（ＸＹＺの座標値）をもとにセグメント３０を疑似的に作成する事が望ましい具体例である。
具体的には、それぞれのマーカー２５の中心点を直線で結びその交差点３５上にセグメント３０を作成するものである。
当該セグメント３０はそれぞれのマーカー２５の座標値を参照し、当該それぞれの画像表示領域３１乃至３３の方向情報と回転情報を検出する事が可能である。
【００４３】
次に、本発明に於いて使用されるモーションキャプチャー手段４の構成の一具体例について説明する。
即ち、本発明に於ける当該モーションキャプチャー手段４としては、光学式を採用する事が望ましいが、必ずしもこれに限定されるものではなく、例えば、一般的に公知となっている「磁気式」、「機械式」、「慣性センサ式」、「画像認識式」などのさまざまな方式を使用する事が可能である。
然しながら、データの精度、汎用性、システムの使い勝手、拡張性、被験者への負担（拘束性）、システム設置場所の自由度などの点を考慮すると当該「光学式」システムが優れており、結果として現在では、この方式がモーションキャプチャ−システムの主流になっている。
当該システムでは、３次元位置座標値は、当該画像表示領域３の表面にマーカ２５を貼るだけで計測できる為、キャプチャする動作に制限が少なく、複数のキャプチャも可能という利点もある。
【００４４】
一方、当該「光学式」システムの欠点としては、反射マーカが複数台のカメラから見えていなければならないという原理的な問題であり、従って、当該マーカ２５が隠れてしまう状況では当該所定の座標位置データが取れないことになる。 
然しながら、上記した公知のシステムの制御ソフトである“ＣＯＲＴＥＸ”では、隠れたマーカの位置を他のマーカから計算し補間することも可能で、隠れ状況によっては十分に対応できるようになっている。
具体的には、一般的に使用されているモーションキャプチャーカメラ４１乃至４４を、投影エリアをカバーでき、且つそれぞれの当該画像表示領域３１乃至３３の周りをカバー出来るように設置し、Ｘ軸、Ｙ軸、およびＺ軸の原点（Ｘ＝０，Ｙ＝０，Ｚ＝０）をリアルな空間でどの位置に設定するのかのキャリブレーション処理を従来公知の方法を使用して実行する。
【００４５】
次に、本発明に於ける当該画像投影装置１００の構成に関する具体例を説明する。
即ち、本発明に係る当該画像投影装置１００は、図１（Ａ）に示す通り、少なくとも一つのプロジェクター手段１、当該プロジェクター手段１の投射領域空間２内に配置されている少なくとも２つの独立した画像表示領域３（３１乃至３３）、当該個々の画像表示領域３（３１乃至３３）の少なくとも一つの動きを検出するモーションキャプチャー手段４、当該モーションキャプチャー手段４と接続されているモーションキャプチャーデータ処理手段８、当該モーションキャプチャーデータ処理手段８及び当該プロジェクター手段１と接続されている投影画像描画制御手段５及び当該投影画像描画制御手段５に接続されている画像情報格納手段９とから構成されている画像投影システム１００が示されている。
【００４６】
そして、本発明に於ける当該画像投影システム１００に於いて、当該モーションキャプチャー手段４は、少なくとも一つ、好ましくは複数個の当該此処の画像表示領域３（３１乃至３３）の周辺部に配置されているモーションキャプチャーカメラ４１乃至４４を含んでいる。
【００４７】
一方、本発明に於ける当該モーションキャプチャーデータ処理手段８は、図４に示す様に、当該モーションキャプチャーカメラ４１乃至４４により捕捉された当該それぞれの画像表示領域３（３１乃至３３）に配置された個々のマーカー２５に於ける３次元位置情報に基づいて、当該個々の画像表示領域３（３１乃至３３）毎の当該空間領域２３内於ける存在位置及び当該個々の画像表示領域３（３１乃至３３）の画像表示領域面の形状及び／又は投射方向に対する角度等を含む画像表示領域情報を演算処理してリアルタイムで決定する画像表示領域情報発生手段８１と、当該個々の画像表示領域３（３１乃至３３）に関する当該画像表示領域情報に基づいて、当該投射されている画像上に、予め選択されている所定の動作状態が発生しているか否かをリアルタイムで演算処理して決定する動作状態発生検出手段８２と、当該投射されている画像表示領域３（３１乃至３３）に投影されている当該画像上に、予め選択されている所定の動作状態の発生が検出された場合には、当該動作状態の発生を報知する特定の検出信号７を出力する動作状態発生報知手段８３とが設けられている。
【００４８】
又、本発明に於ける当該投影画像描画制御手段５には、図５に示す様に、当該プロジェクター手段選択手段５１と、当該複数個の画像表示領域３（３１乃至３３）より選択された少なくとも一つの画像表示領域を選択する画像表示領域選択手段５２と、当該画像情報格納手段９から投射すべき少なくとも一つの画像情報を選択する画像情報選択手段５３と、当該選択された一つの画像表示領域に関する当該画像表示領域情報を当該モーションキャプチャーデータ処理手段８より取り込む画像表示領域情報取得手段５４と、当該選択された投射すべき少なくとも一つの画像情報を、当該画像表示領域情報を基にして、当該選択された一つの画像表示領域内に投影するに適した画像情報に修正する描画処理手段５５と、当該描画処理手段５５により修正された当該選択された画像情報を当該選択されたプロジェクター手段１を介して、当該選択された画像表示領域３（３１乃至３３）に投射する様に指示を行う投射指示手段５６と、当該モーションキャプチャーデータ処理手段８から出力される、当該選択された一つの画像表示領域に於ける所定の動作状態の発生を報知する当該特定の検出信号７を検知した場合には、当該特定の検出信号７に応答して、瞬時に（リアルタイムに）、当該画像が選択投影されている画像表示領域（第１の画像表示領域３１）とは異なる別の画像表示領域（第２の画像表示領域３２）を別途選択する別の画像表示領域選択手段５７と、当該別途選択された当該画像表示領域（第２の画像表示領域３２）に関する画像表示領域情報を当該モーションキャプチャーデータ処理手段８から取り込む異なる画像表示領域情報取り込み手段５８と、当該取り込まれた、別途選択された当該画像表示領域（第２の画像表示領域３２）に関する画像表示領域情報に基づいて、当該選択投影されている画像を、当該別途選択された画像表示領域（第２の画像表示領域３２）内に投影するに適した画像情報に修正する別の描画処理手段５９と、当該別の描画処理手段５９により修正された当該選択された画像情報を、当該選択されたプロジェクター手段１を介して、瞬時に（リアルタイムに）、当該別途選択された画像表示領域（第２の画像表示領域３２）に投射する様に指示を行う別の投射指示手段６０、とを有するものである。
【００４９】
本発明に於いては、当該元の画像表示領域（第１の画像表示領域３１）に対しては、元の画像（第１の画像Ｂ）の投射を停止しても良く、或は継続させても良く、或は別の画像Ｘを投射するものであっても良い。
更に、本発明に於いては、当該画像を特定の画像表示領域（第１の画像表示領域３１）に対して投射する様に指示を行う投射指示手段５６と、当該画像を別の特定の画像表示領域（第２の画像表示領域３２）に対して投射する様に指示を行う当該別の投射指示手段６０は、別々に独立して設けられていなくともよく、同一の手段であっても良い。
又、当該画像表示領域情報取得手段５４と当該異なる画像表示領域情報取り込み手段５８も別々に独立して設けられたものであっても良く或いは同一の手段であっても良い。
【００５０】
一方、本発明に於いては、当該投射領域２内に３個以上の当該画像表示領域３が配置されている場合において、当該画像情報の移動が考慮されている少なくとも２つの当該画像表示領域３に対する同一或いは異なる画像情報の投射操作は、何らの影響を与えるものではなく、予め定められた手順に従って、別途独立的に投射操作が継続されるものである。
又、本発明に於いては、当該第１の画像表示領域３１に、所定の動作状態が発生し、当該第１の画像表示領域３１に投射されている第１の画像情報を当該第２の画像表示領域３２に移動させて、投射を継続する場合、当該第２の画像表示領域３２は、一つに限られるものではなく、複数個の別の画像表示領域３３にも移動同時に或いは所定のタイミングを介してシリアルに移動させる事も出来る。
【００５１】
一方、本発明に於いては、本システムにおいて投影できる画像の種類は、上記した通り、静止画、アニメーション、動画及び外部からのビデオ映像等が投影可能である。
そして、本発明に於いては、当該静止画、アニメーション或いは当該動画等は３Ｄバーチャルソフト内でファイル化して投影するものであり、又、当該外部からの映像はシステムの搭載されているビデオボードで圧縮され、例えば、ＭＰＥＧ２の形式に変換され３Ｄバーチャルソフトに転送され、リアルタイムに投影することが可能となる。（尚、ＭＰＥＧ２圧縮時に１Ｆ程度のディレイが発生する。）
【００５２】
一方、本発明に於ける当該画像の描画方法は、特に限定されるものではないが、例えば、図３（Ａ）に例示する様に、３Ｄバーチャルソフトで画像の描画開始位置と終了位置をモーションキャプチャー手段４からリアルタイムに流れてきたマーカー２５の座標値を参照し、３Ｄバーチャルソフト上の座標値に変換し、変換された座標値をもとに描画する。
例えば、投影する画像が四角形の画像の場合、図３（Ｂ）に示す様に、
被投影体のマーカー（１）と３Ｄバーチャルソフト上の座標値（１）
被投影体のマーカー（２）と３Ｄバーチャルソフト上の座標値（２）
被投影体のマーカー（３）と３Ｄバーチャルソフト上の座標値（３）
被投影体のマーカー（４）と３Ｄバーチャルソフト上の座標値（４）
上記のように座標値の変換が行われその座標値を起点、終点としてソフトが画像を描画する。
【００５３】
本発明に於ける当該動体状態の被投影体である画像表示領域３への投影技術に関して付言するならば、従来公知の殆どのプロジェクションマッピングでは被投影体つまり画像表示領域３は動いているものではなく静体物である事が前提となっており、従って、当該投影される画像は動かない被投影体つまり画像表示領域３に合わせこむようにし、描画機側で再生させると決められたアニメーションを投影する技術でしかなかったのが実情である。
従って、従来の技術に於いては、当該投影される画像を当該被投影体につまり画像表示領域３に対して再生するタイミングが、プロジェクションマッピングが開始されるタイミングに固定されるという欠点が存在した。
【００５４】
然しながら、本発明のシステムはそのような制約を受けることはなく、３Ｄバーチャルソフトで被投影体つまり当該画像表示領域３ごとに投影する画像を持つことが出来、尚且つ、その画像を再生するタイミングをその投影される画像ごとに再生するタイミングのタイマーをもち、任意にタイミングで再生を開始できると言う作用効果を発揮する事が可能となる。
従来に於ける投影画像の種類も、通常のプロジェクションマッピングでは投影される画像は２次元の映像であるが、本発明に於いては、３Ｄバーチャルソフトで作成された３次元画像を使用する事が可能となる他、当該被投影体つまり当該画像表示領域３が静体状態、固定されている必要性がなく、動いていても、所望の画像情報を所定の選択された被投影体つまり当該画像表示領域３に投影することができる。
【００５５】
そして、本発明に於ける当該画像表示システム１００に於いては、当該モーションキャプチャー手段４との連携によって、多面的な画像表示が可能になっている。
即ち、当該モーションキャプチャー手段４からおくられてくるデータは、当該マーカー２５のＸ軸、Ｙ軸、Ｚ軸の３次元座標値を３Ｄバーチャルソフトが処理して３次元のＣＧを描画し、当該座標値の変化に追随して被投影体で有る当該画像表示領域３に投影する画像の形状をリアルタイムに当該画像表示領域３の形状に合わせて変化させることが出来るのである。
つまり、本発明に於いては、投影する為に必要とする画像コンテンツの数を複数種、多数持つ事が可能となる。
【００５６】
この点が既存のプロジェクションマッピングとの大きな相違点である。
例えば、図６（Ａ）に示す様に、従来の投影システムに於いて、投影する画像がアニメーションである場合、本発明の一具体例では、図６（Ｂ）に示す様に、被投影体である第１の画像表示領域３１と別の被投影体ある第２の画像表示領域３２とが相互に近づいた場合、（例えば、当該マーカー２５の距離間が設定したしきい値より短くなった時）当該第１の画像表示領域３１がアニメーションの前編を再生し、当該第２の画像表示領域３２がアニメーションの後編を再生するという当該画像表示領域３を変えて、時間差で投影することがプログラミングで可能になる。
再生投射対象の当該画像表示領域３の数には、特に理論的には制限がないがＣＰＵの演算処理に委ねられるところが大きい。
【００５７】
此処で、既存のプロジェクションマッピングと本発明に係るリアルタイム変化プロジェクションマッピングの違いを、図面を参照しながら説明するならば、当該既存のプロジェクションマッピングに於いては、図７（Ａ）に示す様に、当該画像表示領域は固定されており、又、当該プロジェクター手段１も固定されており、更には、使用される投影画像は２次元画像情報に限られている。
一方、本発明に於ける当該画像表示システム１００に於いては、図７（Ｂ）に示す様に、当該画像表示領域３は任意の方向に移動、回転、旋回が可能であり、又、当該プロジェクター手段１も固定されている場合と後述する様に、任意の方向に移動・変位可能となっており、更には、使用される投影画像は３次元画像情報を使用してリアルタイムで描画処理、投影操作処理が実行可能である。
【００５８】
その為、本発明に於いては、リアルタイム変化に対応するプロジェクションマッピングを成立させる上で重要な要素となるのが現実の空間と３Ｄバーチャルソフトのスケール間を合わせるキャリブレーション操作が非常に重要な調整方法になります。
つまり、リアルな空間と３Ｄの仮想の空間の距離や方向などの値を一致させるキャリブレーション操作が必要となる。
本発明に於ける当該キャリブレーションに必要な要素としては、例えば、
（１）投影体と被投影体との距離と角度
（２）投影する投影体の画角サイズ
等であり、まずは、当該投影体と当該被投影体つまり画像表示領域３との距離間と角度を３Ｄバーチャルソフト内の投影体（ＶＲカメラ）と被投影体（ＶＲ空間上のマーカー２５）の距離間と角度合わせこむ必要がある。
【００５９】
３Ｄバーチャルソフト上のＶＲカメラは３Ｄバーチャルソフト上の見え方アングルと画角サイズを操作する機能であり、当該プロジェクター１の投影する画像は、当該ＶＲカメラが見えている画像となる。
そして、当該距離間に関しては、当該モーションキャプチャー手段４のスケールの変換が必要となり、当該モーションキャプチャー手段４の距離間と３Ｄバーチャルソフトのスケール値が異なるため、当該モーションキャプチャー手段４のスケールを１／１０倍にする。
この際、角度情報は変換する必要はない。
一方、投影する投影体の画角サイズに関しては、距離や回転情報はモーションキャプチャー手段４から送られてくる座標値を基に、現実の空間に合わせて３Ｄバーチャルソフトに同期させることができるが、投影するプロジェクター１の画角サイズ情報はマーカー２５の座標値とは関係ないので送られて来ない。
【００６０】
一方、当該プロジェクター１の投影する画角のサイズを求めて３Ｄバーチャルソフトに投影する画像の画角のサイズを設定する必要がある。
３Ｄバーチャルソフト上でプロジェクターをカメラとして置き換えているので３Ｄバーチャルソフト上のカメラから見える範囲がプロジェクターの投影範囲となる。
又、画角サイズの出し方に付いて説明するならば、当該被投影面（原点になる面）とプロジェクター１までの距離を測り、図８に示す様に、投影している映像の幅Ｗを測定する。
当該測定した数値を三角関数により求め画角サイズをＦＯＶを出す。
【００６１】
次に、本発明に於いて、加速度計算を利用して当該第１の画像表示領域３１に投影されている画像が当該第２の画像表示領域３２に移動するときの仕組みに付いて説明するならば、基本的には、当該第１の画像表示領域３１のマーカー２５の移動距離をもとに加速度を計算することになる。
つまり、当該マーカー２５の移動幅を単位時間の早さにおきかえる。
誤動作を防ぐため上限と下限のしきい値を設定する事が望ましい。
そして、当該上限よりも早ければ誤動作だと判断し、又、当該下限よりも遅ければ誤動作だと判断する。
【００６２】
例えば、当該しきい値を、人が特定の被投影体である当該第１の画像表示領域３１を立体矩形状の箱体物である場合に、当該箱体物有る方向に放り投げる際の感覚のスピード近傍の値に設定する。
更に、当該設定スピードは調整可能である。
つまり、本発明に係る当該画像表示方法或いはそのシステム１００に於ける一つのアトラクティブなデモンストレーションとして、例えば、ステージ上で、演技者が、矩形状立方体（６面体）状の箱体物を手に持って、左右、上下に揺らせたり、回転させたり、或いは円を描く様に、動かしたりしている場合に、当該箱体物の一つの面、或いは複数の面（つまり、当該第１の画像表示領域３１）に、適宜の画像情報を、当該プロジェクター手段１から同時に投射させておき、ある時点で、当該演技者が当該箱体物を空中に放り投げる様な動作をして、瞬間的に、当該箱体物に急激な移動動作を与えると、当該体物の当該面に投影されていた当該画像情報が、瞬時に且つリアルタイムで、別の画像表示領域３（例えば当該第２の画像表示領域３２）の表面の適宜の部位に移動して、そこで、継続的に当該画像情報の投射が継続される様に設定する事が出来る。
本発明では、この様なパフォーマンスを随時、繰り返して実演する事が可能である。
【００６３】
本発明に於ける当該画像表示システム１００に於いては、当該第１の画像表示領域３１と当該第２の画像表示領域３２のアスペクト比率が同じでない場合には、当該第１の画像表示領域３１から当該第２の画像表示領域３２への移動時間中にアスペクトの補正プログラミングを実施する事が望ましい。
更には、本発明に於いては、当該第１の画像表示領域３１の頂点と当該第２の画像表示領域３２の頂点の整合性を取り、移動先の画像の方向性が変わらないようにプログラミングする事も好ましい具体例である。
例えば、当該第１の画像表示領域３が四角形の場合、当該第１の画像表示領域３１の頂点１、２、３、４が当該第２の画像表示領域３２の頂点１、２、３、４へ移動するようにプログラミングする事になる。
【００６４】
又、本発明に於いては、当該画像の移動に関しては、動体状態の当該第１の画像表示領域３１から動体状態の当該第２の画像表示領域３２への移動が可能であると同時に、動体状態の当該第１の画像表示領域３１から静体状態の当該第３の画像表示領域３３への移動も可能である。
尚、当該移動先の画像表示領域は動体であっても静止状態であってもプログラミング次第でどちらでも実施可能である。
本発明に係る当該画像表示システムに於いては、例えば、モーションキャプチャー手段４からリアルタイムに受信したマーカー２５の座標値をもとにプログラミングした数値をもとに、当該各マーカー２５の座標値を利用した加速度計算をおこない、動いている画像表示領域３１から動いている画像表示領域３３へ移動する画像をマッピングすると言う、プロジェクター手段１に接続されたコンピューターが実行可能なプログラムを提供する事も出来る。
【００６５】
通常は、当該プロジェクター手段１から投影される画像は２次元の平面の映像であるが、本発明に於いては３次元の画像情報の投影が可能となる。
つまり、当該モーションキャプチャー手段４からの座標値はマーカー２５ごとにＸＹＺの座標を持っているので３次元オブジェクトの投影が可能となる。
既にある技術としての画像認識では奥行きを正確に検出することは困難である。
本発明においては、ミリ単位での検出が可能であるため当該画像表示領域３に正確に所望の画像情報をマッピングできる。
即ち、従来公知のプロジェクションマッピングに於いては、キャリブレーションを実行するに際しては、被投影体に対してミリ単位のマッピングの調整が必要であったが、本発明に於ける当該投影システムに於いては、当該マーカー２５を当該スクリーン手段つまり、画像表示領域３に取り付けるだけで、正確な座標情報が取得できるので、当該キャリブレーションに関する操作や作業が簡便化され非常に少ない手間で済むので、作業効率が改善されるとい優れた作用効果も発揮される。
【００６６】
更に、本発明に於いては、当該プロジェクター手段１を動かしながら当該画像表示領域３に画像をマッピングするプロジェクターに接続されたコンピューターが実行可能なプログラムを提供出来る。
更に、本発明に於いては、当該モーションキャプチャー４１乃至４４からのマーカー２５の座標値情報から当該プロジェクター手段１と当該画像表示領域３の距離と投影体の方向、角度情報をリアルタイムに検出することにより当該プロジェクター手段１及び当該画像表示領域３が双方とも動いていても当該画像表示領域３に投影されるテクスチャーを当該画像表示領域３の形状に合わせた画像をリアルタイムに変形させてマッピングさせることが可能である。
つまり、従来のプロジェクションマッピングは、当該プロジェクター手段１を固定して当該画像表示領域３まで投影するものであるが、当該プロジェクター手段１を固定しなければ正確な場所へのマッピングが出来ないからであった。
本発明に於ける当該画像表示システム１００は．当該プロジェクター手段１’にもマーカー１２５をつけることにより当該プロジェクター手段１’を動かしながらでもマッピングが可能になる。
【００６７】
本発明に於ける当該画像表示装置１００に於いては、更に、図４に示す様に、当該所定の画像表示領域３（３１乃至３３）に現在投射されている画像上に、予め選択されている所定の動作状態が発生しているか否かをリアルタイムで検出する動作状態発生検出手段８２は、当該画像表示領域３が、平面的に若しくは立体的に移動、回転或は旋回の少なくとも何れかの変位動作の程度を当該画像表示領域情報に基づいてリアルタイムに演算して求める演算手段８２−１と、当該求められた当該画像表示領域の変位動作が、予め設定されている所定の閾値（しきい値）を超えているか否かを判断する比較判定手段８２−２とから構成されている。
一方、本発明に於ける当該画像表示領域３の変位動作は、当該画像表示領域３に於ける変位動作の加速度である事が好まし具体例の一つである。
【００６８】
次に、本発明に於いて使用される当該画像表示システム１００の好ましい具体例の構成例を、図面を参照しながら詳細に説明する。
即ち、図９は、本発明に係る当該画像表示システム１００の一具体例の構成を示すフローチャートであって、同図中には、少なくとも一つのプロジェクター手段１、当該プロジェクター手段１の投射領域空間２３内に配置されている少なくとも２つの独立した画像表示領域３（３１乃至３３）、当該個々の画像表示領域３（３１乃至３３）の少なくとも一つの動きを検出するモーションキャプチャー手段４、モーションキャプチャーデータ処理手段８及び投影画像描画制御手段５とから構成されている画像投影システム１００に於いて、
使用される当該プロジェクター手段１を選択する第２１の工程（Ｓ−２１）、
当該プロジェクター手段１の投射領域空間２３内に配置されている当該全ての画像表示領域３（３１乃至３３）の当該投射領域空間２３内に於ける３次元位置情報を、当該全ての画像表示領域３（３１乃至３３）に設けられているマーカー２５と当該モーションキャプチャーデータ処理手段８に接続されているモーションキャプチャーカメラ４１乃至４４を介して検出する第２２の工程（Ｓ−２２）、
当該プロジェクター手段４の投射領域空間２３内に配置されている当該画像表示領域３（３１乃至３３）の少なくとも一つを選択する第２３の工程（Ｓ−２３）、
当該選択された画像表示領域３（第１の画像表示領域３１）に関する、当該次元位置データを使用して、当該選択された画像表示領域３（第１の画像表示領域３１）の当該投射領域空間２３内に配置されている存在位置及び当該画像表示領域面の形状及び／又は投射方向に対する角度等の画像表示領域面情報をリアルタイムで表示する第２４の工程（Ｓ−２４）、
当該選択された少なくとも一つの画像表示領域（第１の画像表示領域３１）に対して投影すべき少なくとも一つの画像を選択する第２５の工程（Ｓ−２５）、
当該選択された投射すべき画像を、当該投影画像描画制御手段５により、当該選択された画像表示領域（第１の画像表示領域３１）の当該画像表示領域面情報に基づいて、当該選択された画像表示領域３１に投影するに適した画像情報に修正する為の描画処理を行う第２６の工程（Ｓ−２６）（尚、選択されていない他の、画像表示領域に対しては、画像投影は行わないか、既に別の画像が投影されている場合には、それに干渉はしない。）
当該選択されて、当該投影画像描画制御手段５により修正描画処理された修正投射画像を、当該プロジェクター手段１を介して、当該選択された画像表示領域（第１の画像表示領域３１）に投射する第２７の工程（Ｓ−２７）、
当該描画処理された当該画像が投射されている当該選択された画像表示領域３１の当該投射領域空間２３内に於ける３次元位置情報を、当該モーションキャプチャー手段４を介してリアルタイムでモニターする第２８の工程（Ｓ−２８）、
画像表示領域３１於ける当該投影画像の３次元位置情報から、当該投影画像に所定の動作状態６１が発生しているか否かを検出する第２９の工程（Ｓ−２９）、
当該画像表示領域３１に関して当該所定の動作状態６１が発生した場合、当該所定の動作状態６１が予め設定されているしきい値を超えているか否かを判断する第３０の工程（Ｓ−３０）、
当該画像表示領域（第１の画像表示領域３１）に関する動作状態６１が予め設定されているしきい値を超えている場合には、当該選択されている画像が投射されている当該画像表示領域（第１の画像表示領域３１）とは異なる、当該プロジェクター手段１の当該投射領域空間２３内に配置されている他の画像表示領域３（第２の画像表示領域３２）を選択する第３１の工程（Ｓ−３１）、
当該選択された他の画像表示領域３（第２の画像表示領域３２）に関する当該画像表示領域面情報を当該モーションキャプチャーデータ処理手段８から選択する第３２の工程（Ｓ−３２）、
当該選択された他の画像表示領域３（第２の画像表示領域３２）に関する当該画像表示領域面情報に基づいて、当該画像表示領域（第１の画像表示領域３１）に投影されている当該修正投射画像を、当該投影画像描画制御手段５により、当該選択された他の画像表示領域（第２の画像表示領域３２）に投影するに適した画像情報に修正する為の再描画処理を行う第３３の工程（Ｓ−３３）、
当該画像表示領域（第１の画像表示領域３１）に対する当該先の修正投射画像の投射操作を中止し、当該選択された他の画像表示領域（第２の画像表示領域３２）に対して、新たに描画処理された再修正画像を投射する第３４の工程（Ｓ−３４）、
上記各工程を繰り返す第３５の工程（Ｓ−３５）、
と、で構成されている画像投影システム１００が示されている。
【００６９】
更に、本発明に於いては、上記の画像投影システム１００をコンピューターによる制御操作で全てが自動的にプログラミング処理されて実行されるものであり、従って、本発明に於ける更なる態様としては、上記した当該第１の工程乃至第１８の工程の各機能をコンピューターで実現させる様に構成した事を特徴とする画像投影システム用プログラム１００である。
本発明に於いては、上記した通り、当該プロジェクター手段１は一つでなくとも良く、２個或いはそれ以上の当該プロジェクター手段１、１‘、１“を組み合わせて使用する事が可能である。
例えば、当該プロジェクター手段１の数が増える事によって、投影する画像の数やその種類が増加し、それにより、複数個の当該画像表示領域３の数も増加させる事が可能となると同時に、一つの当該画像表示領域３に同時に組み合わせて投影される相互に異なる画像の数も増加させる事が可能となる。
又、例えば、複数個の当該プロジェクター手段１，１’を使用することにより、従来表現出来なかった、移動行為を組み合わせて、会場の雰囲気を盛り上げる演出が可能となる。
【００７０】
次に、本発明に係る当該画像投影方法に関する別の具体例を、図面を参照しながら詳細に説明する。
即ち、本発明に係る別の具体例は、基本的には、上記した具体例の中で、任意な方向に任意の速度で移動する画像表示領域の特定の画像表示面に、当該所定のプロジェクター手段から、所定の画像を当該画像表示領域の動きに完全に同期して追随しながら、確実に表示する様に構成した画像表示方法及びそのシステムである。
より具体的には、図１に示されている通り、少なくとも一つのプロジェクター手段１、当該プロジェクター手段１の投射領域２内に配置されている少なくとも１つの独立した移動可能に構成された画像表示領域３、当該画像表示領域３の動きを検出するモーションキャプチャー手段４及び投影画像描画制御手段５とから構成されている画像投影システム１００に於いて、当該プロジェクター手段１は、少なくとも選択された一つの画像６を、当該画像表示領域３内に投影すると共に、当該画像表示領域３の移動動作に追随して、当該画像６が当該画像表示領域３に投影される様に移動する様に構成されている事を特徴とする画像投影方法或いはそのシステム１００である。
【００７１】
つまり、図１（Ｂ）で示されている通り、本具体例に於いては、第１の段階で当該プロジェクター１が第１の位置３１に配置されている当該第１の画像表示領域３（３１）の画像表示領域面に例えばＢ或いはＣの画像を投影して表示している場合に於いて。当該第１の画像表示領域３が第２の位置３３に移動した場合でも、当該第１の画像表示領域３（３３）の当該画像表示面には、同じ画像が投影される様に構成されているのである。
【００７２】
ここで、本具体例での特徴的な技術構成を説明するならば、上記した具体例でも同じことが実行されているものであるが、当該独立した移動可能に構成された画像表示領域３は、当該プロジェクター手段１の投射領域２よりも小さい投射領域を有するものである事が必要であり、且つ当該画像表示領域３は、当該プロジェクター手段１の投射領域２内を自由に移動、回転、旋回、振動等の動作を自動的或いは手動で行う事が可能である様に構成されているものである。
【００７３】
又、本具体例に於いては、当該プロジェクター手段１の投射領域２内に移動可能に配置される当該画像表示領域３は１つに限定されるものではなく、複数個配置されるものであってもよく、その形状は、前記した具体例と同様に投影面部分が平面であってもよく、立体的であってもよいのであり、当該投影面部分が平面である場合には、その平面形状は、矩形、円形、多角形、楕円形、台形等を含む任意の形状を有するものであっても良く、或いは、当該投影面部分が３次元的立体形状を呈し、球面、球体、多角面構成体を含む任意の立体構成物で構成されているものであっても良い。
【００７４】
更に、本具体例に於いては、当該それぞれの画像表示領域３には、同一の画像を投影する様に構成されているものであっても良く或いは、当該それぞれの画像表示領域３に個別に相互に異なる画像を投影する様にしたものであっても良い。
又、本発明に於ける上記具体例を含む具体例に於いては、それぞれの画像表示領域３に投影される画像は、動画であっても良く、静止画像であっても良く、更にその画像ソースとしては、適宜の記憶媒体から抽出した当該画像であっても良く、或いは、適宜のカメラ画像、ムービー画像、或いはテレビ画像や、携帯電話、スマートフォンを介してダウンロードされる適宜の画像であっても良い。
【００７５】
つまり、本具体例を、感覚的に把握する為に、図２３を参照して更に詳細に説明するならば、従来のプロジェクター手段１による特定画像の投影方法は、当該プロジェクター手段１の投影領域２の範囲と合致する大きさのスクリーンである画像表示領域３−０に対して、一つの画像を投影するシステムとなっているのに対し、本発明に於いては、図２３に示す様に、当該プロジェクター手段１は、自己の投射領域２内に一つ或いは相互に独立した複数個の画像投影領域ウインドーＷ１〜Ｗ３を形成すると共に、当該各画像投影領域ウインドーＷ１〜Ｗ３を、当該それぞれの移動可能な画像表示領域３−１、３−２、３−３と対応させており、且つ当該それぞれの画像投影領域ウインドーＷ１〜Ｗ３は、個々に対応する当該画像表示領域３−１、３−２、３−３に適合する様に描画処理された特定の画像が、個別に投影される様に構成されており、更に、当該各ウインドーＷ１〜Ｗ３は、それぞれ対応する個別の画像表示領域３−１、３−２、３−３の移動動作に追随して当該自己の投射領域２内で移動する様に構成されているものである。
【００７６】
そして、本具体例では、当該一つの当該プロジェクター手段１は、自己の投射領域２内に於いて、一つ乃至複数個の当該画像投影領域ウインドーＷ１〜Ｗ３を介して、当該自己の投射領域２内に配置された一つ或いは複数個の当該画像表示領域３−１、３−２、３−３のそれぞれに対して、個別に、同一或いは相互に異なる画像を、適宜のタイミングで、連続的或いは不連続的に投影出来る様に構成されているものである。
更に、本具体例に於いては、当該一つの画像表示領域３−１に投影されている第１の画像と当該別の画像表示領域３−２に投影されている第２の画像とは、任意に交換する事或いは、当該一つの画像表示領域に投影されている第１の画像を当該別の画像表示領域に投影させる様に切り替え操作が可能に構成されている事も好ましい具体例である。
【００７７】
又、本具体例に於いて、当該複数個の画像表示領域３は、当該プロジェクター手段１が形成する個別の投射領域２内の３次元空間内に、任意に且つ独立して存在しており、且つ個々の当該画像表示領域３は、独立的に任意の方向に移動可能に構成されている事が好ましい。
また、上記した本発明の先の具体例でも説明した通り、本具体例に於いても、当該複数個の画像表示領域３−１、３−２、３−３は、個別的に、当該個々の画像表示領域３の範囲並びに当該投影領域２内の３次元空間内に於ける存在位置を表示する為に、３次元位置情報を検出する為の複数個のマーカー５２が付与されている事も好ましい具体例である。
【００７８】
更に、本具体例に於いては、当該モーションキャプチャー手段４を構成するモーションキャプチャーカメラ４１乃至４４が常時、当該個々の画像表示領域３毎に、当該個々の画像表示領域３に配置されている当該マーカー２６の存在位置を３次元位置情報として検出し、当該個々の画像表示領域３の当該３次元位置情報をリアルタイムで当該画像投影システム１００設けられているモーションキャプチャーデータ処理手段８若しくは投影画像描画制御手段５に報知する様に構成されている事が望ましい。
【００７９】
一方、当該画像投影システム１００には、更に、当該モーションキャプチャーデータ処理手段８が設けられており、当該モーションキャプチャーデータ処理手段８は、当該モーションキャプチャーカメラ４１乃至４４が検出した、当該個々の画像表示領域３毎のマーカー位置情報から、当該個々の画像表示領域３の当該投影空間領域２内於ける存在位置及び当該個々の画像表示領域３の画像表示領域面の形状及び／又は投射方向に対する角度等を含む画像表示領域面情報を演算処理してリアルタイムで決定する様に構成されている事が望ましい具体例である。
又、本具体例に於いては、当該個々の独立した画像表示領域３は、任意の時点で、任意の方向に、移動、回転、旋回、振動等の変位動作を個別に自動的或いは、マニュアル的に実行できる様に構成されているものである。
更に、本具体例に於いては、当該モーションキャプチャー手段４は、複数個、好ましくは３個の当該モーションキャプチャーカメラ４１乃至４３を含んでいる事が望ましい。
【００８０】
一方、当該マーカー２５は、当該複数個の画像表示領域３のそれぞれに付いて、個別的に、当該個々の画像表示領域３に対応する識別子を有しており、当該マーカー２５が、当該個々の画像表示領域３に対応してグループ分けされている事も望ましい具体例である。
本具体例に於いては、当該プロジェクター手段１は一つに限る事は無く、複数個同時に使用する事も可能であり、又、当該プロジェクター手段１により当該所定の画像表示領域３に投射される画像は動画像及び／又は静止画像であり、当該複数種類の動画像及び静止画像は、当該投影画像描画制御手段５に接続された適宜の記憶手段９内に予め記憶されている事が望ましい。
【００８１】
本具体例に於いて、複数個のプロジェクター手段１が設けられている場合には、当該個々のプロジェクター手段１は、個別に、当該個々の独立した画像表示領域３の一部若しくは全部に、選択された個々の画像を投射する様に構成されている事が望ましい具体例である。
本具体例に於いては、当該投影画像描画制御手段５は、常時、リアルタイムで、当該選択された画像表示領域３に対して、当該モーションキャプチャーデータ処理手段８から出力される当該選択された画像表示領域３に関する位置情報及び当該画像表示領域の画像表示領域面の形状及び／又は投射方向に対する角度等の画像表示領域面情報に基づいて、当該選択された画像を、現時点に於ける当該選択された画像表示領域３の状況に合わせた最適な画像となる様に、適宜、公知のプログラムを利用して、描画処理し、当該描画処理した当該画像を当該選択された画像表示領域３に投射する様に構成されているものである。
【００８２】
更に、本具体例では、当該プロジェクター手段１の投射領域２内に配置されている少なくとも１つの独立した画像表示領域３のそれぞれの画像表示領域に対して、同一若しくは相互に異なる画像が個別に投影される事も望ましい具体例である。
【００８３】
本発明に於ける更に別の具体例としては、少なくとも一つのプロジェクター手段１、当該プロジェクター手段１の投射領域空間２内に配置されている少なくとも１つの独立した画像表示領域３、当該個々の画像表示領域３の少なくとも一つの動きを検出するモーションキャプチャー手段４、モーションキャプチャー手段４と接続されているモーションキャプチャーデータ処理手段８、当該モーションキャプチャーデータ処理手段８及び当該プロジェクター手段１と接続されている投影画像描画制御手段５及び当該投影画像描画制御手段５に接続されている画像情報格納手段９とから構成されている画像投影システム１００に於いて、当該モーションキャプチャー手段４は、少なくとも一つ、好ましくは複数個の、当該個々の画像表示領域３の周辺部に配置されているモーションキャプチャーカメラ４１乃至４４を含んでおり、当該モーションキャプチャーデータ処理手段８は、当該モーションキャプチャーカメラ４１乃至４４により捕捉された当該それぞれの画像表示領域３に配置された個々のマーカー２５に於ける３次元位置情報に基づいて、当該個々の画像表示領域３毎の当該投影空間領域２内於ける存在位置及び当該個々の画像表示領域３の画像表示領域面の形状及び／又は投射方向に対する角度等を含む画像表示領域面情報を演算処理してリアルタイムで決定する画像表示領域面情報発生手段８１が設けられており、一方、当該投影画像描画制御手段６には、当該プロジェクター手段選択手段５１と、当該複数個の画像表示領域３より選択された少なくとも一つの画像表示領域３を選択する画像表示領域選択手段５２と、当該画像情報格納手段９から投射すべき少なくとも一つの画像情報を選択する画像情報選択手段５３と、当該選択された一つの画像表示領域３に関する当該画像表示領域面情報を当該モーションキャプチャーデータ処理手段８より取り込む画像表示領域情報取得手段５４と、当該選択された投射すべき少なくとも一つの画像情報を、当該画像表示領域面情報を基にして、当該選択された一つの画像表示領域３内に投影するに適した画像情報に修正する描画処理手段５５と、当該描画処理手段５５により修正された当該選択された画像情報を当該選択されたプロジェクター手段１を介して、当該選択された画像表示領域３に投射する様に指示を行う投射指示手段５６と、当該画像表示領域３の移動を検出し、当該画像表示領域３の移動先での当該画像表示領域３に関する画像表示領域面情報を基に、当該選択された画像情報を当該移動先での当該画像表示領域３に適した画像情報に修正する描画処理を行って再投影処理する手段５６と、を有する事を特徴とする画像投影装置１００である。
更に、本具体例では、前述した先の具体例で説明した通り、当該動作状態発生検出手段８２と、当該動作状態発生報知手段８３とが、当該投影画像描画制御手段５内に設けられている場合も有り得るものである。
【００８４】
次に、図２４を参照しながら、本発明に於ける更に異なる具体例の操作手順の一例を説明するならば、当該異なる具体例としては、少なくとも一つのプロジェクター手段１、当該プロジェクター手段１の投射領域空間２内に配置されている少なくとも１つの独立した画像表示領域３、当該個々の画像表示領域３の少なくとも一つの動きを検出するモーションキャプチャー手段４、モーションキャプチャーデータ処理手段８及び投影画像描画制御手段５とから構成されている画像投影システム１００に於いて、
使用される当該プロジェクター手段１を選択する第１の工程（ステップＳ−１）後、当該プロジェクター手段１の投射領域空間２内に配置されている当該少なくとも１つの画像表示領域３の当該投射領域空間２内に於ける３次元位置情報を、当該全ての画像表示領域３に設けられているマーカー手段２５と当該モーションキャプチャーデータ処理手段８に接続されているモーションキャプチャーカメラ４１を介して検出する第２の工程（ステップＳ−２）が実行され、引き続き、当該プロジェクター手段１の投射領域空間２内に配置されている当該画像表示領域３の少なくとも一つを選択する第３の工程（ステップＳ−３）実行される。
【００８５】
続いて、当該選択された画像表示領域３に関する、当該投射領域空間２内に配置されている存在位置及び当該画像表示領域面の形状、面積及び／又は投射方向に対する角度等の画像表示領域面情報をリアルタイムで検出する第４の工程（ステップＳ−４）が実行された後、当該選択された少なくとも一つの画像表示領域３に対して投影すべき少なくとも一つの画像を選択する第５の工程（ステップＳ−５）が実行される。
その後、当該選択された投射すべき画像を、当該投影画像描画制御手段５により、当該選択された画像表示領域３の当該画像表示領域面情報に基づいて、当該選択された画像表示領域３に投影するに適した画像情報に修正する為の描画処理を行う第６の工程（ステップＳ−６）（尚、選択されていない他の、画像表示領域に対しては、画像投影は行わない。）を経て、
当該選択されて、当該投影画像描画制御手段５により修正描画処理された修正投射画像を、当該プロジェクター手段１を介して、当該選択された画像表示領域３に投影する第７の工程（ステップＳ−７）が実施される。
此処で、要すれば、当該画像の投影操作が終了したか否かが判断され(第７１の工程（ステップＳ−７１）、ＹＥＳであれば、当該プロセスはエンドとなるが、ＮＯの場合には、極めて僅かな所定時間（瞬時時間）経過後、当該描画処理された当該画像が投射されている当該選択された画像表示領域３の当該投射領域空間３内に於ける３次元位置情報を、当該モーションキャプチャー手段４を介してリアルタイムで再モニターする第８の工程（ステップＳ−８）が実行される。
【００８６】
再モニター後、要すれば先に得られた当該画像表示領域の３次元位置情報と今回得られた当該画像表示領域の３次元位置情報とを比較する第８１の工程（ステップＳ−８１）が実行され、その結果に基づいて、当該画像表示領域３が動いたか否かを判断する第９の工程（ステップＳ−９）が実行され、ＮＯで有れば第８の工程に戻り、ＹＥＳであれば、つまり当該画像表示領域が動いた場合には、当該画像表示領域３が移動した先の位置に於いて、当該画像表示領域３の新たな当該投射領域空間２内に於ける３次元位置情報に基づき、当該画像表示領域３が移動した先の位置に於ける当該画像表示領域３に関する、当該画像表示領域面情報をリアルタイムで検出する第１０の工程（ステップＳ−１０）が実行される。
その後、選択された投射すべき画像を、当該投影画像描画制御手段５により、当該選択された画像表示領域の新たに移動した移動先での当該画像表示領域３に関する画像表示領域面情報に基づいて、当該選択された画像表示領域３に投影するに適した画像情報に修正する為の描画処理を行う第１１の工程（ステップＳ−１１）を経て、当該描画処理された当該選択された投射すべき画像を、移動先の当該画像表示領域３に当該プロジェクター手段１を介して投影する第１２の工程（ステップＳ−１２）が実行される。
【００８７】
その後、此処で、要すれば、当該画像の投影操作が終了したか否かが判断され(第１２１の工程（ステップＳ−１２１）、ＹＥＳであれば、当該プロセスはエンドとなるが、ＮＯの場合には、極めて僅かな所定時間（瞬時時間）経過後、当該描画処理された当該画像が投射されている当該選択された画像表示領域３の当該投射領域空間３内に於ける３次元位置情報を、当該モーションキャプチャー手段４を介してリアルタイムで再モニターする第１３の工程（ステップＳ−１３）が実行され、第１４の工程（ステップＳ−１４として、第８の工程に戻り、上記第１０の工程乃至第１３の各工程を繰り返すことになる。
一方、本発明に於ける更に異なる具体例としては、上記したぐらい例に記載されている第１の工程乃至第１５の工程の各機能をコンピューターで実現させる様に構成した画像投影システム用プログラムである。
【００８８】
以下に、本発明に於ける当該画像投影システムを活用したイベント用投影マッピング方法の具体例を説明する。
即ち、図１０に示す様に、例えばコンサート会場などの場を盛り上げる演出としてカメラで観客２０１、２０２の顔を撮影し、その映像を演者２００の持っている被投影体つまり画像表示領域３に投影することにより観客２０１若しくは２０２の顔が演者２００のすぐ近くに映しだされることになる。
その結果、当該映し出された映像（観客の顔）に演者が顔を近づけることにより観客２０１、２０２と演者２００のバーチャルキスのような演出が可能となる。
カメラ２台まで映像入力可能のビデオボードなので２人の観客の撮影が可能である。
【００８９】
一方、本発明に於ける更に別の具体例としては、当該少なくとも一つのプロジェクター手段１が移動可能に構成されている事を特徴とする画像投影システム或いは画像投影方法又はその装置１００が実現できるのである。
つまり、従来に於いては、当該プロジェクター手段１そのものは、移動することは無く静止した状態で使用されるのが常識で有ったのに対し、本発明に於いては、当該プロジェクター手段１そのものを移動可能に構成する事が可能であり、それによって、適宜のロボット装置や演技者が当該プロジェクター手段１を自由に移動させながら、所望の当該画像表示領域３の所望の画像表示面に対して、リアルタイムで、或いは適宜のタイミングで、所望の画像情報を投影させる事が可能となり、従来予想もされなかった、極めてアトラクティブな投影操作が実現でき、視聴者も参加して、投影される画像に新鮮味が加味されて、会場の雰囲気を一層盛り上げる効果も期待できる。
その為に、本発明に於いては、当該移動可能に構成されているプロジェクター手段１には、別途マーカー１２５が設けられている事が必要である。
【００９０】
更に、本発明の上記具体例に於いては、当該マーカー１２５は、当該個々の画像表示領域３（３１乃至３３）の３次元空間位置情報を規定している原点（０点）と共通の原点を持つ事が必要であり、当該移動可能に構成されているプロジェクター手段１の３次元空間２３に於ける存在位置は、当該共通の原点に基づいて規定されるものである。
【００９１】
更に、上記した本発明に於ける当該具体例に於いては、当該マーカーの中心点と当該プロジェクター手段１に於ける投射原点との間には、通常所定の距離を持ったオフセット値が存在する為、当該オフセット値を０にする演算処理が実行される事が必要である。
【００９２】
更に、本発明に於ける更に別の態様としては、上記した通り、従来全く世の中に存在していない、マーカーを付与された移動可能な携帯式プロジェクター手段１が提供されるのである。
此処で、移動可能な携帯式プロジェクター手段１について、更に説明するならば、図１１に示す様に、当該携帯式プロジェクター手段１に付いても、当該画像表示領域３と同様にマーカー１２５をつけることにより当該携帯式プロジェクター手段１の投射面の位置と角度情報を検出することが出来る様になる。
【００９３】
又、本発明に於いては、当該携帯式プロジェクター手段１が動いても当該画像表示領域３が共に動いていても互いのマーカー２５と１２５の座標値の距離をリアルタイムに３Ｄバーチャルソフトが計算し当該画像表示領域３に投影している画像の大きさをリアルタイムに変形させていくことになる。
当該携帯式プロジェクター手段１の数は特に限定されるものではないが、その数はモーションキャプチャー手段４の処理演算能力に委ねられる。
【００９４】
一方、本発明に於いては、上記した通り、当該携帯式プロジェクター手段１に於いては、当該携帯式プロジェクター手段１の投射面の中心と当該携帯式プロジェクター手段１に設けられた複数個の当該マーカー１２５の中心点１２６との間に所定のオフセット値が存在する為、例えば、当該モーションキャプチャー手段４で当該マーカー１２５のグループの中心点１２６から当該投射面迄のオフセット値を検出し、その検出値を３Ｄバーチャルソフトに設定して、所定のキャリブレーションを実行する。  
例えば、モーションキャプチャー手段４に於ける独自のカムトラックというキャリブ方法によりオフセット値が割り出される。
【００９５】
一方、当該携帯式移動可能プロジェクター手段１’を使用して適宜の投影操作を行う方法の一つの例として、図１２に示す様に、一つの静止状態にある当該画像表示領域３（３１）に対して、当該携帯式移動可能プロジェクター手段１’を当該３次元空間領域２３内の適宜の部位Ｐ１から別の部位Ｐ２迄移動しながら所定の画像情報を投影する様に操作する事が可能である。
但し、この具体例に於いては、当該移動可能プロジェクター手段１’と当該画像表示領域３（３１）は、何れも当該モーションキャプチャー手段４のキャプチャーエリア内に入っていることが条件となる。
【００９６】
又、図１３に示されている具体例に於いては、当該携帯式移動可能プロジェクター手段１’と当該画像表示領域３（３１）とが何れも移動可能な状態に於かれている場合であって、所定の部位Ｄ１から別の部位Ｄ２迄移動している当該画像表示領域３（３１）に対して、当該携帯式移動可能プロジェクター手段１’を適宜の部位Ｐ１から別の部位Ｐ２迄移動しながら、所定の画像情報を投影する様に操作する事が可能である。
但し、この具体例に於いても、当該移動可能プロジェクター手段１’と当該画像表示領域３（３１）は、何れも当該モーションキャプチャー手段４のキャプチャーエリア内に入っていることが条件となる。
【００９７】
その他、図１４に示されている通り、複数個の当該携帯式移動可能プロジェクター手段１’−１、１’−２、１’−３がそれぞれ個別に独立した部位Ｙ１,Ｙ２、及びＹ３に配置されている場合であって、当該当該携帯式移動可能プロジェクター手段１’−１からは、第１の画像情報Ｚ１が当該画像表示領域３の所定の画像表示部分３００内に投射される様に構成されており、又、当該携帯式移動可能プロジェクター手段１’−２からは、第２の画像情報Ｚ２が同じ当該画像表示領域３の所定の画像表示部分３００内に投射される様に構成されており、更に、当該携帯式移動可能プロジェクター手段１’−３からは、第３の画像情報Ｚ３が、同じ当該画像表示領域３の所定の画像表示部分３００内に投射される様に構成されており、それによって、当該画像表示領域３の所定の画像表示部分３００内には、それら複数個の個別画像情報が組み合わされて一つの画像情報を形成出来る様に設定することも可能である。
上記具体例に於いても、当該それぞれの画像表示領域３には、マーカー２５が付与されている事が必要であり、且つ当該それぞれの画像表示領域３は、当該それぞれのモーションキャプチャー手段４のキャプチャーエリア内に入っていることが必要条件となる。
【００９８】
勿論、上記具体例では、当該プロジェクター手段１は、移動可能な機能を有するものでなくとも良い。
つまり、本発明の於ける当該具体例に於いては、多数のプロジェクターを合わせこむことによって浮き出す文字や画像を発生させる事が可能であり、更には、正解の文字或いは画像を含む当該プロジェクター手段１をもった人が協力して答えを導き出すゲームのようなものも投影演出する事も可能である。
【００９９】
更に、本発明に於いては、上記の画像投影システム１００をコンピューターによる制御操作で全てが自動的にプログラミング処理されて実行されるものであり、従って、本発明に於ける更なる態様としては、上記した当該第１の工程乃至第１８の工程の各機能をコンピューターで実現させる様に構成した事を特徴とする画像投影システム用プログラム１００である。
本発明に於いては、上記した通り、当該プロジェクター手段１は一つでなくとも良く、２個或いはそれ以上の当該プロジェクター手段１、１‘、１“を組み合わせて使用する事が可能である。
【０１００】
例えば、当該プロジェクター手段１の数が増える事によって、投影する画像の数やその種類が増加し、それにより、複数個の当該画像表示領域３の数も増加させる事が可能となると同時に、一つの当該画像表示領域３に同時に組み合わせて投影される相互に異なる画像の数も増加させる事が可能となる。
又、例えば、複数個の当該プロジェクター手段１，１’を使用することにより、従来表現出来なかった、移動行為を組み合わせて、会場の雰囲気を盛り上げる演出が可能となる。
【０１０１】
次に、本発明に係る当該画像投影方法に関する別の具体例を、図面を参照しながら詳細に説明する。
即ち、本発明に係る別の具体例は、基本的には、上記した具体例の中で、任意な方向に任意の速度で移動する画像表示領域の特定の画像表示面に、当該所定のプロジェクター手段から、所定の画像を当該画像表示領域の動きに完全に同期して追随しながら、確実に表示する様に構成した画像表示方法及びそのシステムである。
より具体的には、図１に示されている通り、少なくとも一つのプロジェクター手段１、当該プロジェクター手段１の投射領域２内に配置されている少なくとも１つの独立した移動可能に構成された画像表示領域３、当該画像表示領域３の動きを検出するモーションキャプチャー手段４及び投影画像描画制御手段５とから構成されている画像投影システム１００に於いて、当該プロジェクター手段１は、少なくとも選択された一つの画像６を、当該画像表示領域３内に投影すると共に、当該画像表示領域３の移動動作に追随して、当該画像６が当該画像表示領域３に投影される様に移動する様に構成されている事を特徴とする画像投影方法或いはそのシステム１００である。
【０１０２】
つまり、図１（Ｂ）で示されている通り、本具体例に於いては、第１の段階で当該プロジェクター１が第１の位置３１に配置されている当該第１の画像表示領域３（３１）の画像表示領域面に例えばＢ或いはＣの画像を投影して表示している場合に於いて。当該第１の画像表示領域３が第２の位置３３に移動した場合でも、当該第１の画像表示領域３（３３）の当該画像表示面には、同じ画像が投影される様に構成されているのである。
【０１０３】
ここで、本具体例での特徴的な技術構成を説明するならば、上記した具体例でも同じことが実行されているものであるが、当該独立した移動可能に構成された画像表示領域３は、当該プロジェクター手段１の投射領域２よりも小さい投射領域を有するものである事が必要であり、且つ当該画像表示領域３は、当該プロジェクター手段１の投射領域２内を自由に移動、回転、旋回、振動等の動作を自動的或いは手動で行う事が可能である様に構成されているものである。
【０１０４】
又、本具体例に於いては、当該プロジェクター手段１の投射領域２内に移動可能に配置される当該画像表示領域３は１つに限定されるものではなく、複数個配置されるものであってもよく、その形状は、前記した具体例と同様に投影面部分が平面であってもよく、立体的であってもよいのであり、当該投影面部分が平面である場合には、その平面形状は、矩形、円形、多角形、楕円形、台形等を含む任意の形状を有するものであっても良く、或いは、当該投影面部分が３次元的立体形状を呈し、球面、球体、多角面構成体を含む任意の立体構成物で構成されているものであっても良い。
更に、本具体例に於いては、当該それぞれの画像表示領域３には、同一の画像を投影する様に構成されているものであっても良く或いは、当該それぞれの画像表示領域３に個別に相互に異なる画像を投影する様にしたものであっても良い。
【０１０５】
又、本発明に於ける上記具体例を含む具体例に於いては、それぞれの画像表示領域３に投影される画像は、動画であっても良く、静止画像であっても良く、更にその画像ソースとしては、適宜の記憶媒体から抽出した当該画像であっても良く、或いは、適宜のカメラ画像、ムービー画像、或いはテレビ画像や、携帯電話、スマートフォンを介してダウンロードされる適宜の画像であっても良い。
【０１０６】
つまり、本具体例を、感覚的に把握する為に、図２３を参照して更に詳細に説明するならば、従来のプロジェクター手段１による特定画像の投影方法は、当該プロジェクター手段１の投影領域２の範囲と合致する大きさのスクリーンである画像表示領域３−０に対して、一つの画像を投影するシステムとなっているのに対し、本発明に於いては、図２３に示す様に、当該プロジェクター手段１は、自己の投射領域２内に一つ或いは相互に独立した複数個の画像投影領域ウインドーＷ１〜Ｗ３を形成すると共に、当該各画像投影領域ウインドーＷ１〜Ｗ３を、当該それぞれの移動可能な画像表示領域３−１、３−２、３−３と対応させており、且つ当該それぞれの画像投影領域ウインドーＷ１〜Ｗ３は、個々に対応する当該画像表示領域３−１、３−２、３−３に適合する様に描画処理された特定の画像が、個別に投影される様に構成されており、更に、当該各ウインドーＷ１〜Ｗ３は、それぞれ対応する個別の画像表示領域３−１、３−２、３−３の移動動作に追随して当該自己の投射領域２内で移動する様に構成されているものである。
【０１０７】
そして、本具体例では、当該一つの当該プロジェクター手段１は、自己の投射領域２内に於いて、一つ乃至複数個の当該画像投影領域ウインドーＷ１〜Ｗ３を介して、当該自己の投射領域２内に配置された一つ或いは複数個の当該画像表示領域３−１、３−２、３−３のそれぞれに対して、個別に、同一或いは相互に異なる画像を、適宜のタイミングで、連続的或いは不連続的に投影出来る様に構成されているものである。
【０１０８】
更に、本具体例に於いては、当該一つの画像表示領域３−１に投影されている第１の画像と当該別の画像表示領域３−２に投影されている第２の画像とは、任意に交換する事或いは、当該一つの画像表示領域に投影されている第１の画像を当該別の画像表示領域に投影させる様に切り替え操作が可能に構成されている事も好ましい具体例である。
又、本具体例に於いて、当該複数個の画像表示領域３は、当該プロジェクター手段１が形成する個別の投射領域２内の３次元空間内に、任意に且つ独立して存在しており、且つ個々の当該画像表示領域３は、独立的に任意の方向に移動可能に構成されている事が好ましい。
【０１０９】
また、上記した本発明の先の具体例でも説明した通り、本具体例に於いても、当該複数個の画像表示領域３−１、３−２、３−３は、個別的に、当該個々の画像表示領域３の範囲並びに当該投影領域２内の３次元空間内に於ける存在位置を表示する為に、３次元位置情報を検出する為の複数個のマーカー５２が付与されている事も好ましい具体例である。
更に、本具体例に於いては、当該モーションキャプチャー手段４を構成するモーションキャプチャーカメラ４１乃至４４が常時、当該個々の画像表示領域３毎に、当該個々の画像表示領域３に配置されている当該マーカー２６の存在位置を３次元位置情報として検出し、当該個々の画像表示領域３の当該３次元位置情報をリアルタイムで当該画像投影システム１００設けられているモーションキャプチャーデータ処理手段８若しくは投影画像描画制御手段５に報知する様に構成されている事が望ましい。
【０１１０】
一方、当該画像投影システム１００には、更に、当該モーションキャプチャーデータ処理手段８が設けられており、当該モーションキャプチャーデータ処理手段８は、当該モーションキャプチャーカメラ４１乃至４４が検出した、当該個々の画像表示領域３毎のマーカー位置情報から、当該個々の画像表示領域３の当該投影空間領域２内於ける存在位置及び当該個々の画像表示領域３の画像表示領域面の形状及び／又は投射方向に対する角度等を含む画像表示領域面情報を演算処理してリアルタイムで決定する様に構成されている事が望ましい具体例である。
【０１１１】
又、本具体例に於いては、当該個々の独立した画像表示領域３は、任意の時点で、任意の方向に、移動、回転、旋回、振動等の変位動作を個別に自動的或いは、マニュアル的に実行できる様に構成されているものである。
更に、本具体例に於いては、当該モーションキャプチャー手段４は、複数個、好ましくは３個の当該モーションキャプチャーカメラ４１乃至４３を含んでいる事が望ましい。
【０１１２】
一方、当該マーカー２５は、当該複数個の画像表示領域３のそれぞれに付いて、個別的に、当該個々の画像表示領域３に対応する識別子を有しており、当該マーカー２５が、当該個々の画像表示領域３に対応してグループ分けされている事も望ましい具体例である。
本具体例に於いては、当該プロジェクター手段１は一つに限る事は無く、複数個同時に使用する事も可能であり、又、当該プロジェクター手段１により当該所定の画像表示領域３に投射される画像は動画像及び／又は静止画像であり、当該複数種類の動画像及び静止画像は、当該投影画像描画制御手段５に接続された適宜の記憶手段９内に予め記憶されている事が望ましい。
【０１１３】
本具体例に於いて、複数個のプロジェクター手段１が設けられている場合には、当該個々のプロジェクター手段１は、個別に、当該個々の独立した画像表示領域３の一部若しくは全部に、選択された個々の画像を投射する様に構成されている事が望ましい具体例である。
本具体例に於いては、当該投影画像描画制御手段５は、常時、リアルタイムで、当該選択された画像表示領域３に対して、当該モーションキャプチャーデータ処理手段８から出力される当該選択された画像表示領域３に関する位置情報及び当該画像表示領域の画像表示領域面の形状及び／又は投射方向に対する角度等の画像表示領域面情報に基づいて、当該選択された画像を、現時点に於ける当該選択された画像表示領域３の状況に合わせた最適な画像となる様に、適宜、公知のプログラムを利用して、描画処理し、当該描画処理した当該画像を当該選択された画像表示領域３に投射する様に構成されているものである。
更に、本具体例では、当該プロジェクター手段１の投射領域２内に配置されている少なくとも１つの独立した画像表示領域３のそれぞれの画像表示領域に対して、同一若しくは相互に異なる画像が個別に投影される事も望ましい具体例である。
【０１１４】
本発明に於ける更に別の具体例としては、少なくとも一つのプロジェクター手段１、当該プロジェクター手段１の投射領域空間２内に配置されている少なくとも１つの独立した画像表示領域３、当該個々の画像表示領域３の少なくとも一つの動きを検出するモーションキャプチャー手段４、モーションキャプチャー手段４と接続されているモーションキャプチャーデータ処理手段８、当該モーションキャプチャーデータ処理手段８及び当該プロジェクター手段１と接続されている投影画像描画制御手段５及び当該投影画像描画制御手段５に接続されている画像情報格納手段９とから構成されている画像投影システム１００に於いて、当該モーションキャプチャー手段４は、少なくとも一つ、好ましくは複数個の、当該個々の画像表示領域３の周辺部に配置されているモーションキャプチャーカメラ４１乃至４４を含んでおり、当該モーションキャプチャーデータ処理手段８は、当該モーションキャプチャーカメラ４１乃至４４により捕捉された当該それぞれの画像表示領域３に配置された個々のマーカー２５に於ける３次元位置情報に基づいて、当該個々の画像表示領域３毎の当該投影空間領域２内於ける存在位置及び当該個々の画像表示領域３の画像表示領域面の形状及び／又は投射方向に対する角度等を含む画像表示領域面情報を演算処理してリアルタイムで決定する画像表示領域面情報発生手段８１が設けられており、一方、当該投影画像描画制御手段６には、当該プロジェクター手段選択手段５１と、当該複数個の画像表示領域３より選択された少なくとも一つの画像表示領域３を選択する画像表示領域選択手段５２と、当該画像情報格納手段９から投射すべき少なくとも一つの画像情報を選択する画像情報選択手段５３と、当該選択された一つの画像表示領域３に関する当該画像表示領域面情報を当該モーションキャプチャーデータ処理手段８より取り込む画像表示領域情報取得手段５４と、当該選択された投射すべき少なくとも一つの画像情報を、当該画像表示領域面情報を基にして、当該選択された一つの画像表示領域３内に投影するに適した画像情報に修正する描画処理手段５５と、当該描画処理手段５５により修正された当該選択された画像情報を当該選択されたプロジェクター手段１を介して、当該選択された画像表示領域３に投射する様に指示を行う投射指示手段５６と、当該画像表示領域３の移動を検出し、当該画像表示領域３の移動先での当該画像表示領域３に関する画像表示領域面情報を基に、当該選択された画像情報を当該移動先での当該画像表示領域３に適した画像情報に修正する描画処理を行って再投影処理する手段５６と、を有する事を特徴とする画像投影装置１００である。
【０１１５】
更に、本具体例では、前述した先の具体例で説明した通り、当該動作状態発生検出手段８２と、当該動作状態発生報知手段８３とが、当該投影画像描画制御手段５内に設けられている場合も有り得るものである。
【０１１６】
次に、図２４を参照しながら、本発明に於ける更に異なる具体例の操作手順の一例を説明するならば、当該異なる具体例としては、少なくとも一つのプロジェクター手段１、当該プロジェクター手段１の投射領域空間２内に配置されている少なくとも１つの独立した画像表示領域３、当該個々の画像表示領域３の少なくとも一つの動きを検出するモーションキャプチャー手段４、モーションキャプチャーデータ処理手段８及び投影画像描画制御手段５とから構成されている画像投影システム１００に於いて、
使用される当該プロジェクター手段１を選択する第１の工程（ステップＳ−１）後、当該プロジェクター手段１の投射領域空間２内に配置されている当該少なくとも１つの画像表示領域３の当該投射領域空間２内に於ける３次元位置情報を、当該全ての画像表示領域３に設けられているマーカー手段２５と当該モーションキャプチャーデータ処理手段８に接続されているモーションキャプチャーカメラ４１を介して検出する第２の工程（ステップＳ−２）が実行され、引き続き、当該プロジェクター手段１の投射領域空間２内に配置されている当該画像表示領域３の少なくとも一つを選択する第３の工程（ステップＳ−３）実行される。
【０１１７】
続いて、当該選択された画像表示領域３に関する、当該投射領域空間２内に配置されている存在位置及び当該画像表示領域面の形状、面積及び／又は投射方向に対する角度等の画像表示領域面情報をリアルタイムで検出する第４の工程（ステップＳ−４）が実行された後、当該選択された少なくとも一つの画像表示領域３に対して投影すべき少なくとも一つの画像を選択する第５の工程（ステップＳ−５）が実行される。
その後、当該選択された投射すべき画像を、当該投影画像描画制御手段５により、当該選択された画像表示領域３の当該画像表示領域面情報に基づいて、当該選択された画像表示領域３に投影するに適した画像情報に修正する為の描画処理を行う第６の工程（ステップＳ−６）（尚、選択されていない他の、画像表示領域に対しては、画像投影は行わない。）を経て、当該選択されて、当該投影画像描画制御手段５により修正描画処理された修正投射画像を、当該プロジェクター手段１を介して、当該選択された画像表示領域３に投影する第７の工程（ステップＳ−７）が実施される。
【０１１８】
此処で、要すれば、当該画像の投影操作が終了したか否かが判断され(第７１の工程（ステップＳ−７１）、ＹＥＳであれば、当該プロセスはエンドとなるが、ＮＯの場合には、極めて僅かな所定時間（瞬時時間）経過後、当該描画処理された当該画像が投射されている当該選択された画像表示領域３の当該投射領域空間３内に於ける３次元位置情報を、当該モーションキャプチャー手段４を介してリアルタイムで再モニターする第８の工程（ステップＳ−８）が実行される。
【０１１９】
再モニター後、要すれば先に得られた当該画像表示領域の３次元位置情報と今回得られた当該画像表示領域の３次元位置情報とを比較する第８１の工程（ステップＳ−８１）が実行され、その結果に基づいて、当該画像表示領域３が動いたか否かを判断する第９の工程（ステップＳ−９）が実行され、ＮＯで有れば第８の工程に戻り、ＹＥＳであれば、つまり当該画像表示領域が動いた場合には、当該画像表示領域３が移動した先の位置に於いて、当該画像表示領域３の新たな当該投射領域空間２内に於ける３次元位置情報に基づき、当該画像表示領域３が移動した先の位置に於ける当該画像表示領域３に関する、当該画像表示領域面情報をリアルタイムで検出する第１０の工程（ステップＳ−１０）が実行される。
【０１２０】
その後、選択された投射すべき画像を、当該投影画像描画制御手段５により、当該選択された画像表示領域の新たに移動した移動先での当該画像表示領域３に関する画像表示領域面情報に基づいて、当該選択された画像表示領域３に投影するに適した画像情報に修正する為の描画処理を行う第１１の工程（ステップＳ−１１）を経て、当該描画処理された当該選択された投射すべき画像を、移動先の当該画像表示領域３に当該プロジェクター手段１を介して投影する第１２の工程（ステップＳ−１２）が実行される。
その後、此処で、要すれば、当該画像の投影操作が終了したか否かが判断され(第１２１の工程（ステップＳ−１２１）、ＹＥＳであれば、当該プロセスはエンドとなるが、ＮＯの場合には、極めて僅かな所定時間（瞬時時間）経過後、当該描画処理された当該画像が投射されている当該選択された画像表示領域３の当該投射領域空間３内に於ける３次元位置情報を、当該モーションキャプチャー手段４を介してリアルタイムで再モニターする第１３の工程（ステップＳ−１３）が実行され、第１４の工程（ステップＳ−１４として、第８の工程に戻り、上記第１０の工程乃至第１３の各工程を繰り返すことになる。
【０１２１】
つまり、本発明に於ける上記具体例にあっては、上記したフローチャートに記載された一連の操作が、各ウインドーにおいて、瞬時間に膨大な数の演算処理が繰り返し実施されることになるのである。
一方、本発明に於ける更に異なる具体例としては、上記した具体例に記載されている第１の工程乃至第１５の工程の各機能をコンピューターで実現させる様に構成した画像投影システム用プログラムである。
【０１２２】
以下に、上記した本発明の技術構成を利用した更に別の幾つかのプレゼンテーションの例を説明する。
次に、図１５に示す具体例では、通常のプロジェクションマッピングと異なり被投影体がひとつに限定されるものではなくではなく、キャプチャーエリア内なら当該表示画像表示領域３を多数設置することが可能であり、投射形状もいろんな形に対応し投影することが可能である事を示している。
つまり、図１５の具体例は、上記に於いて、図２３で説明した本発明に係る応用技術を利用するものであり、投影映像の種類もファイル化された動画に係わらずＬＩＶＥカメラの映像、インターネットからダウンロードした映像等、を投影することが可能であり、更には、当該被投影体の投影に合わせて、適宜のチャイム、音楽、音声等を同時に同期して提供する事も可能である。
【０１２３】
又、図１６に示す具体例は、本発明を利用したプロジェクションマッピングでパズルを行う観客参加型のゲームである。
つまり、本具体例では、参加者全員で協力して投影されている文字や図形を完成させていくゲームであり、具体的には、ボードにある特定の文字の一部が投射される。
その投射された文字のかけらが、当該特定の文字のどの場所なのかを、参加者が当該ボードの文字をみながら、他のボードを持つ参加者の間を移動して、他の人のボードに投影された映像と組み合わせしながら正解の文字を探るゲームである。
係る場合には、文字以外の映像でも勿論使用する事は可能である。
又、本具体例では、当該ゲームに制限時間が設けることもでき、残り時間をボードに表示する事により、参加者に対して緊迫感をあおるのも面白い具体例である。
そして、本ゲームに於いて、正解の文字が完成出来たら次の画像が投射される様に構成することにより、アトラクション向きなゲームとなる。  
つまり、本具体例では、単にプロジェクションマッピングは見るだけではなく体験し皆で楽しむという新しいジャンルを確立できる
更に、本具体例に於いては、使用する道具にもマーカーをつけた何枚かのボードを用意すれば実現可能なので大掛かりな装置が必要ではない。
【０１２４】
次に、図１７に示す具体例では、プロジェクションマッピングお手玉と称されるゲームの例であり、具体的には、図示の様に、時限爆弾の形状をした画像が投影された映像を、参加者がお手玉のように受けては直ぐに他の人に渡していくという演出の例である。
当該時限爆弾持っている人が、当該時限爆弾が爆発した場合には、罰ゲームをやらされるという仕組みにしても良い。
或いは、ステージ上に並んだ人物が投影されている映像の内容を順番に説明していくという場面に効果的な演出方法となる。
その他にも、本具体例に於いては、動画の再生を継続的に実行する様な場合に、例えば、Ａさんの場所では、当該画像の１／４が再生され、次に映像が転移してＢさんに移動した場所では、当該画像の続きの１／４が再生されるという様に一連の動画再生の演出方法も可能である。
【０１２５】
次に、図１８（Ａ）に示される他の具体例では、屋外で、移動物体を利用して本発明のプロジェクションマッピングを行うと言う例である。
即ち、ある川に一つ或いは複数の屋形船が移動しており、その対岸の堤防が壁となっている場所に於いて、当該対岸の堤防の壁面に従来と同様のマッピング操作を行っており、一方、手前の移動する船の側面に、本発明に係る動く被投影体への投影操作を実行するものである。
本具体例では、屋外での想定イベントでの使用を想定したものであり、例えば岐阜の鵜飼が行われる長良川でのイベントを想定すると、鵜飼舟にマーカーをつけてマッピングしながら、川の流れで動く船の舷側に、適宜の画像を投射  することによって、鵜飼舟のかがり火の光と鵜飼舟の側面に投射される映像の融合が演出効果を高める事が出来る。
同様に図１８（Ｂ）に示される他の具体例では、大型プロジェクションマッピングの別の例としてメリーゴーランドの上下動しながら回転する椅子部分に
夢のある静止画あるいは動画を表示する様に構成したものであり、待っている人も十分楽しめる。
【０１２６】
一方、図１９（Ａ）に示される他の具体例では、屋外で、移動物体を利用して本発明のプロジェクションマッピングを行うと言う別の例である。
即ち、図１９（Ａ）に示される様に、例えば、ローカル線のイベントとして列車の車体に、本発明の技術を利用したプロジェクションマッピングをしてイベントを盛り上げる方法が示されている。
例えば、大井川鉄道機関車に機関車トーマスを走らせるというローカル線のイベントを行う際に、機関車トーマスがホームに入ってくると（つまり、キャプチャーエリアに入ると）、昔の町並みの映像などその街の歴史的な映像が流れたあとは、現在の映像、例えば、ホームに集まっている人、（列車をみている人）のＬＩＶＥの映像に切り替えて投影することが可能である。
本具体例では、列車の車体にＬＩＶＥカメラの映像を写し、車体がホームに入ってきた光景を見ている観客の顔が車体に映る様にすると、当該現場の雰囲気を盛り上げる事が可能となる。
【０１２７】
同様に図１９（Ｂ）に示される他の具体例では、大型プロジェクションマッピングの更に別の例として、遊園地に於ける観覧車の回転するゴンドラのそれぞれに夢のある静止画あるいは動画を表示する様に構成したものである。
【０１２８】
次に、図２０に示す本発明の更に異なる具体例の一つでは、プロジェクションマッピングレストランの例が示されている。
即ち、本具体例では、メニューをみて、希望のメニューを発注し、それがテーブルに運ばれて来るまでの間、顧客に飽きさせない様に工夫された新規レストランシステムが提供されるのである。
より具体的には、図２０（Ａ）に示されている様に、適宜のレストラン内に、複数台のモーションキャプチャーカメラ４と固定或いは移動可能なプロジェクター２５が配置されており、お客が所定のテーブルに着席すると、本日のお勧めメニューを含む通常のメニューが記載された例えば、スマートフォンを主とする携帯端末機器が提供され、お客は、当該携帯端末機器に表示された各種のメニューから好みのメニューを選択すると、当該メニューに対応する料理の写真と食材の種類や調理方法等を示す画像が、当該テーブル上に置かれた、マーカーが設けられているランチョンマット或いはお皿に、天井等に配置されている当該プロジェクター２５から投影され、当該お客はその内容を簡単に確認出来る。
【０１２９】
或いは、直接、メニューの一部或いは全てを、当該テーブル上に置かれた、マーカーが設けられているランチョンマット或いはお皿の上に、天井等に配置されている当該プロジェクタ１から投影して表示する様にしても良い。
そして、当該お客が、所望のメニューを注文する場合には、図２０（Ｂ）に示されている様に、当該お客が、当該ランチョンマット或いはお皿をキッチン方向に放り投げる振りをすると、当該選ばれたメニューがキッチンまで飛んで行き、調理人がいるキッチンの前のスクリーンに当該発注されたメニューが投影される。
当該発注画像を見て、当該調理人が、注文されたメニューを調理する事になる。
【０１３０】
次に、本具体例に於いて、当該メニューを注文したお客が、当該メニューに対応する料理が出てくるまでの間の退屈さや、飽き飽き感を解消する為に、例えば、図２１に示す様な、システムが用意されている。
即ち、図２１（Ａ）に示す様に、当該メニューを注文したお客のテーブルに、適宜のマーカーが付与された食器、例えば、ナイフ、フォーク、スプーン等が配膳される。
当該食器は、只の食器データは無く、適宜のマーカーが付与されたものであって、例えば、図示の様に、当該テーブル上に置かれた当該適宜の付きフォークは、それを持って振ると、適宜の音楽が発生したり、適宜のスクリーン上に適宜の画像が投影されたりするようになっている。
【０１３１】
より具体的には、当該マーカー付きフォークを振る事によって、例えば、指揮棒の様に振る或いはその配置形状を変化させる事によって、当該マーカーの振れ幅に応じて音が変化する様に構成しておくことが可能である。
つまり、当該マーカーの振れ幅、振動数等によって、音を変化される様にしたものであり、例えば、当該マーカーの縦方向の動きでは、音階を変化させる様に構成し、当該マーカーの横方向の動きでは、音階のスピードを変化させる様に構成する事も可能である。
或いは、当該食器を楽器に対応させ、それらを振ると、ギター音楽やピアノ音楽等の楽器に応じた音楽が演奏される様に構成したものであっても良い。
本発明に於ける当該各具体例は、当該マーカーをミリ単位の移動を検知できる精度をもっているからこそ実行可能な表現方法である。
【０１３２】
一方、図２１（Ｂ）に示す様に、当該注文した料理が出来上がる間、当該キッチンに設けられているカメラによって、料理人が当該キッチン内で、当該注文された料理を調理している様子を実況中継して、当該お客のテーブル上のお皿或いはランチョンマット上に当該キッチンで作られる料理のライブ映像を投影する様に構成する事も可能であり、お客は、料理を味わうだけでなく調理されるのを見る楽しさが追加されることになり、当該注文した料理が出てくるまでの間を退屈せず又飽きがこない状態で待つ事が出来る。
【０１３３】
図２２には、本発明に於ける新規に構成された手持ち型携帯式プロジェクターを使用した具体例の一例を示したものであり、当該手持ち型携帯式プロジェクター１’は、マーカー１２５を有すると同時に画像情報を任意の画像情報発信手段から受信出来る様に構成されているものであり、より具体的には、図示の様に、複数個のモーションキャプチャーカメラ４のャプチャー領域内に於いて、特定の人物を囲むように幾つかの風船が配置されていて、当該人物が、小型のプロジェクターを手にしながら当該風船にぶら下がっているマーカーつきの被投影体に、順次の特定も文字を投影して、そこに何が書かれているのかを判断し、そこから特定の単語を当てるというゲームである。
当該風船は不規則に上がるのでどこにどんな文字が書かれていたかを記憶しておかなければ答えの文字を導き出せないゲームである。
更に、本具体例では、当該風船が所定の位置まで上がるまで何度でも風船の下の被投影体にプロジェクターで所定の文字を投影でき、当該文字を確認することができる。
【０１３４】
更に、図２５には、本発明の更に異なる具体例が示されている。
即ち、図２５に於いては、任意のタイミングでコンテンツを切り替えて行くプロジェクト方法が開示されており、具体的には、ある投影領域で、例えば、映画のフィルムの画像が投影されている場合に於いて、オペレーターがスティックを任意の方向に動かすと、当該投影領域にペンギンの画像が現れる様に構成されたものである。
係る投影方法は、従来のシステムでは、実現が困難なものであったが、本発明に於いては、任意のタイミングで画像を切り替える事が可能となる。
係る画像の切り替え方法は当該コンテンツ投影エリアにマーカーの付いたスティックやマーカーを付けた人物の手を近付けることにより実現される。
更には、別の切り替え演出方法として、紙芝居の様に、コンテンツを引っ張る様にすることにより次のコンテンツを切り替え表示する事も可能である。
【０１３５】
又、図２６には、本発明の更に別のアトラクション的な演出方法の具体例が示されている。
即ち、図２６に於いては、例えば、綱引きゲームとでも称される様な、視聴者参加型イベントであって、適宜の大きな壁（大型スクリーン）の前に少なくとも２人の視聴者が配置され、当該各視聴者は、それぞれ任意の大きさを持った、複数個のマーカーが配備されている移動式投射領域（つまり、スクリーン）を持って、当該各視聴者間に所定の距離が設定される様に、相互に離れて立っている。
係る状態に於いて、所定のプロジェクターより、当該双方の移動式投射領域とその間の空間部に、図示のような、綱をイメージした画像を投射するものである。
【０１３６】
具体的には、左側の当該移動式投射領域（スクリーン）に設けられたマーカーから任意に選択された少なくとも２個のマーカーと、右側の当該移動式投射領域（スクリーン）に設けられたマーカーから任意に選択された少なくとも２個のマーカーとで形成される投射領域内に当該綱をイメージした画像を投射するものであり、その結果、と共に、少なくとも当該綱の画像の右端部の画像の一部は、当該右側の当該移動式投射領域（スクリーン）内に投影され、少なくとも当該綱の画像の左端部の画像の一部は、当該左側の当該移動式投射領域（スクリーン）内に投影され、且つその間の綱の画像部分は、後側に設けられている当該綱の画像が投影されるための反射率を有する適宜の壁部を構成する当該適宜の大きな壁（大型スクリーン）に投射され、結局、遠くから見た場合には、当該２つの移動式投射領域（つまり、スクリーン）の間に、当該綱の画像が投射されている様に見える。
本具体例では、より具体的に説明すると、当該綱の画像は、当該マーカーとマーカーとをつないでいる映像であって、当該映像が飛んでいくのは非連続的が投影で実行されるものであり、当該マーカー間を常に映像で投影続ける事は可能である。
又、本具体例に於いて、当該マーカー付きの投影領域の移動や変位或いは振動の状態を検知する為に、適宜の個数のモーションキャプチャーカメラを配置しておく事が望ましい。
【０１３７】
つまり、従来に於ける通常のプロジェクションマッピングでは、この様な投影方法は、実質的に不可能であったが、本発明においては、マーカーとマーカーの空間を映像で結ぶ事が出来るので実現が可能な演出となる。
此処で、双方の視聴者が手に持っている当該移動式投射領域を適宜に、上下左右の任意の方向に移動、振動、変位等の動作を行わせると、当該綱の画像もそれらの動きに応答して、伸縮したり、上下動したり、或いはその太さが変化したりして、当該綱の画像の躍動的な変化を楽しむ事が出来る。
【０１３８】
つまり、本具体例に於いては、投影されている被投影体と被投影体を画像で結ぶことが出来るのでその効果を利用して、マーカー間を綱引きの綱の映像で結び、更に、双方がマーカーのついたボードを振りあっても、ボードとボードを結んでいる綱の映像は、そのボードの動きにリアルタイムで追随するので、あたかも綱引きをおこなっているような映像となる。
更に、システム的には、例えば、当該双方の投影領域に於ける当該マーカーの振動を数値化して、背後の大型スクリーンの上部に、図示する様な、棒グラフとして双方の投影領域に対応する上部に表示する事も可能であり、その場合には、当該振り幅或いは振動数が相手より大きければ棒グラフのエリアが増加して相手の陣地まで届くとゲームが終了となるという様なイベントを実現させる事が出来る。
【０１３９】
次に、図２２に例示された当該手持ち型携帯式プロジェクター１’を使用した更に別のアトラクション的な演出方法の幾つかの具体例を以下に図面を参照しながら説明する。
その第１の具体例としては、図２７にその概略が示されている様に、プロジェクションマッピング遊園地と言うアトラクションである。い  即ち、このアトラクションでは、参加者が上記したバッテリ駆動の手持ちプロジェクター１’を持って、遊園地の中を探索しながら、所定の画像が、当該遊園地内に配置されたどの施設のどの場所で、観察出来るかを探し出し、そこで当該画像の映像を楽しむ様に設計されている。
【０１４０】
つまり、図２７に於ける当該参加者の周囲に配置されている複数の画像（静止画像や動画像）は、当該遊園地内に配置された何れかの施設の特定の場所に投影される様に予め設定されているものであり、当該参加者は、どの画像が何処で見られるかは、全く知らされていないので、そこに、探検すると言う楽しみが存在する事になる。
係るアトラクションは、バッテリ駆動の手持ちプロジェクター１’に無線で特定の映像が受信できる様に設定されたプロジェクターを利用する事により可能となり、それによって、特に、夕方或いは夜の遊園地をより面白く演出することが可能である。
【０１４１】
つまり、従来のプロジェクションマッピングでは決められた場所の被投影体に投影される映像をみるという観客が自己の動きを止めて鑑賞するという静止常態での鑑賞であったが、本具体例では、被投影体がどこにあるのかを自分で探しあてて、自己が持っている手持ちプロジェクター１’から、自分で投影したコンテンツを楽しむという観客が自分で動き回り始めて鑑賞出来るという動的で能動的な鑑賞方法が可能になる。
換言するならば、さながら当該携帯式の小型プロジェクターは、懐中電灯のような役割で夜の遊園地の中を宝探しをしているような楽しみ方が出来ることになる。
【０１４２】
より詳細に本具体例を説明するならば、上記した様な具体例を実現するためには、当該プロジェクションマッピングする対象となる、当該遊園地内に配置された固定された施設或いは動く施設、即ち、遊園地にあるすべての乗り物の側壁や固定壁の一部或いは全部を選択して被投影体（スクリーン）として設定し、当該被投影体（スクリーン）に当該マーカーをつける事が必要である。
これによって、動くのりものにも投影が可能なので乗り物にあった効果的なおうお化けが出てくるというホラー体験も可能である。
もちろん季節ごとのお化けがハロウインやサンタなどに変わっていくのも映像コンテンツを差し替えるだけで可能なので大掛かりな機材を投入しなくてもよいというのも利点である。
【０１４３】
更に、本具体例を実現する為には、当該被投影体（スクリーン）の近傍に、適宜の個数のモーションキャプチャーカメラ４２を配置しておく事が必要であり、これによって、当該参加者が携帯している当該携帯式プロジェクター１’が、当該モーションキャプチャーカメラ４２の監視エリア内に入って来た時点で、当該所定の被投影体（スクリーン）対して予め設定されている画像が、当該参加者が携帯している当該携帯式プロジェクター１’から、投影されて、その画像を鑑賞し、楽しむ事が出来る。
【０１４４】
更に、本具体例に於いては、当該所定の画像を選択しあるいは生成する為のパソコンを含む画像記憶手段付きの画像選択・生成手段を併用すると共に、当該選択され或いは生成された画像を無線により、当該携帯式プロジェクター１’に向けて送信する事が可能な回路手段を含むシステムが用意されている事が必要である。
【０１４５】
一方、当該携帯式プロジェクター１’は、上記した送信手段から送信された映像信号を無線で受信する為のシステムを有すると同時に、所定のマーカーが付与されている事が必要である。
更に、本具体例では、当該個々の被投影体（スクリーン）に個別に付与された当該マーカーは、３次元位置情報の他、適宜の識別記号（例えばＩＤ番号）が付与されており、当該識別記号（例えばＩＤ番号）は、図２７に示されているそれぞれの画像と１対１の対応がとれている。
従って、当該所定の被投影体（スクリーン）には、予め選択されている画像が必ず投影されることになる。
【０１４６】
図２８は、上記した本具体例の一つの例として、迷路の一部の壁に予め設定された投影領域に適宜個数のマーカーが付与されていて、参加者が、当該壁に設けられたモーションキャプチャーカメラ４２の監視エリア内に入って来た時に、当該参加者が持っている当該携帯式プロジェクター１’から、お化けの動画が投影される様にする事が可能となる。
【０１４７】
一方、図２９乃至図３２は、何れも、本発明に於ける上記具体例に於いて、スタンプラリーを行うと言うアトラクションであり、当該スタンプのありかは、例えば、当該遊園地すべての乗り物を対象としても良い。
つまり、観覧車や列車、コーヒーカップ、メリーゴーランド等の外壁面の一部に、特定のスタンプの画像が表示される様に予め設定されており、参加者、特に子供は、手持ちプロジェクター１’をもって宝探しゲームのようにスタンプがどこに隠れているかを探し出すアトラクションである。
【０１４８】
更に、図３３は、ナイト美術館と称されるアトラクションであって、暗闇の空中に複数個のマーカー付のキャンパスが吊り下げられており、当該キャンパスには、所定個数のマーカーが付されており、参加者が、好みのキャンパスの前に立って、当該携帯式プロジェクターを操作すると、当該携帯式プロジェクターが懐中電灯のようにして、暗闇の空中につるしてあるマーカー付のキャンパスに投影操作を行うと、初めて当該キャンパス上に所定の画像が現れて来るという鑑賞方法が出来る。
【０１４９】
一方、図３４は、みんなで投影と称されるアトラクションであって、複数の参加者等が、それぞれに持っている手持ちプロジェクター１’を所定の投影領域に向けて投影する事によって、それぞれの映像を重ね合わせる様にクリスマスツリーの画像に投影して、飾りつけを完成させるゲームであり、他の人との共同作業で初めてツリーが完成する。
【符号の説明】
【０１５０】
１、１’…プロジェクター手段
１’−１、１’−２、１’−３…携帯式移動可能プロジェクター手段
２…投射領域内
３…画像表示領域
３’ …新たな画像表示領域
４…モーションキャプチャー手段
５…投影画像描画制御手段
６…第１の画像
７…特定動作状態検出信号
８…モーションキャプチャーデータ処理手段
９…記憶手段
２２…３次元立体空間
２５…マーカー
２５’ …バーチャルマーカー
３０…セグメント
３１…第１の画像表示領域
３２…第２の画像表示領域
３３…第３の画像表示領域
３５…交差点
４１，４２，４３，４４…モーションキャプチャーカメラ
４５…ハブ手段
５１…プロジェクター手段選択手段
５２…画像表示領域選択手段
５３…画像情報選択手段
５４…画像表示領域情報取得手段
５５…修正描画処理手段
５６…投射指示手段
５７…別の画像表示領域選択手段
５８…異なる画像表示領域情報取り込み手段
５９…別の描画処理手段
６０…別の投射指示手段
６１…所定の動作状態、動作方向矢印
８１…画像表示領域情報発生手段
８２…動作状態発生検出手段
８２−１…演算手段
８２−２…比較判定手段
８３…動作状態発生報知手段
１２５…マーカー
１００…画像投影方法、画像投影システム、画像投影装置
３００…所定の画像表示部分３００
【図１】
0006307426.tif 000002
【図２】
0006307426.tif 000003
【図３】
0006307426.tif 000004
【図４】
0006307426.tif 000005
【図５】
0006307426.tif 000006
【図６】
0006307426.tif 000007
【図７】
0006307426.tif 000008
【図８】
0006307426.tif 000009
【図９】
0006307426.tif 000010
【図１０】
0006307426.tif 000011
【図１１】
0006307426.tif 000012
【図１２】
0006307426.tif 000013
【図１３】
0006307426.tif 000014
【図１４】
0006307426.tif 000015
【図１５】
0006307426.tif 000016
【図１６】
0006307426.tif 000017
【図１７】
0006307426.tif 000018
【図１８】
0006307426.tif 000019
【図１９】
0006307426.tif 000020
【図２０】
0006307426.tif 000021
【図２１】
0006307426.tif 000022
【図２２】
0006307426.tif 000023
【図２３】
0006307426.tif 000024
【図２４】
0006307426.tif 000025
【図２５】
0006307426.tif 000026
【図２６】
0006307426.tif 000027
【図２７】
0006307426.tif 000028
【図２８】
0006307426.tif 000029
【図２９】
0006307426.tif 000030
【図３０】
0006307426.tif 000031
【図３１】
0006307426.tif 000032
【図３２】
0006307426.tif 000033
【図３３】
0006307426.tif 000034
【図３４】
0006307426.tif 000035