(57)【要約】【課題】  手間をかけることなく、リアルタイムで放送する映像に合成するＣＧ画像を生成することができるＣＧ画像生成装置およびＣＧ画像生成プログラムを提供する。【解決手段】  ＣＧ画像生成装置１は、照明が照射される撮影場所における少なくとも照度の変化に伴って、合成させるＣＧ画像を変化させて生成するものであって、ＣＧ画像を生成する際に利用するＣＧデータを蓄積するＣＧデータ蓄積手段９と、照明制御信号を取得する照明制御信号取得手段３と、照明制御信号をＣＧ制御信号に変換する制御信号変換手段５と、ＣＧ画像を生成するＣＧ画像生成手段７と、を備えた。【選択図】      図１
2007072859.tif 000002
【特許請求の範囲】
【請求項１】
照明が照射される撮影場所における少なくとも照度の変化に伴って、合成させるＣＧ画像を変化させて生成するＣＧ画像生成装置であって、
前記ＣＧ画像を生成するためのＣＧデータを蓄積するＣＧデータ蓄積手段と、
前記撮影場所に設置された１つまたは複数の照明機器による照明状態を示す制御信号を出力する照明制御手段から当該制御信号を取得する照明制御信号取得手段と、
この照明制御信号取得手段で取得された制御信号を、複数の前記照明状態と前記ＣＧ画像の表示とを任意に変更可能な変換テーブルに基づいて、前記ＣＧ画像を生成する際に参照するＣＧ制御信号に変換する制御信号変換手段と、
この制御信号変換手段で変換されたＣＧ制御信号と、前記ＣＧデータ蓄積手段に蓄積されているＣＧデータとに基づいて、前記ＣＧ画像を生成するＣＧ画像生成手段と、
を備えることを特徴とするＣＧ画像生成装置。
【請求項２】
照明が照射される撮影場所における少なくとも照度の変化に伴って、合成させるＣＧ画像を変化させて生成するために、前記ＣＧ画像を生成するためのＣＧデータを蓄積するＣＧデータ蓄積手段を備えたコンピュータを、
前記撮影場所に設置された１つまたは複数の照明機器による照明状態を示す制御信号を出力する照明制御手段から当該制御信号を取得する照明制御信号取得手段、
この照明制御信号取得手段で取得された制御信号を、複数の前記照明状態と前記ＣＧ画像の表示とを任意に変更可能な変換テーブルに基づいて、前記ＣＧ画像を生成する際に参照するＣＧ制御信号に変換する制御信号変換手段、
この制御信号変換手段で変換されたＣＧ制御信号と、前記ＣＧデータ蓄積手段に蓄積されているＣＧデータとに基づいて、前記ＣＧ画像を生成するＣＧ画像生成手段、
として機能させることを特徴とするＣＧ画像生成プログラム。
【請求項３】
センサで得られたセンサデータから撮影している現実空間の状態を、仮想空間内のＣＧ画像に反映させて生成するＣＧ画像生成装置であって、
前記ＣＧ画像を生成するためのＣＧデータを蓄積するＣＧデータ蓄積手段と、
前記センサデータを取得するセンサデータ取得手段と、
このセンサデータ取得手段で取得したセンサデータを、任意に変更可能な変換テーブルに基づいて、前記ＣＧ画像を生成する際に参照するＣＧ制御信号に変換するデータ変換手段と、
このデータ変換手段で変換されたＣＧ制御信号と、前記ＣＧデータ蓄積手段に蓄積されているＣＧデータとに基づいて、前記ＣＧ画像を生成するＣＧ画像生成手段と、
を備えることを特徴とするＣＧ画像生成装置。
【請求項４】
センサで得られたセンサデータから撮影している現実空間の状態を、仮想空間内のＣＧ画像に反映させて生成するために、前記ＣＧ画像を生成するためのＣＧデータを蓄積するＣＧデータ蓄積手段を備えたコンピュータを、
前記センサデータを取得するセンサデータ取得手段、
このセンサデータ取得手段で取得したセンサデータを、任意に変更可能な変換テーブルに基づいて、前記ＣＧ画像を生成する際に参照するＣＧ制御信号に変換するデータ変換手段、
このデータ変換手段で変換されたＣＧ制御信号と、前記ＣＧデータ蓄積手段に蓄積されているＣＧデータとに基づいて、前記ＣＧ画像を生成するＣＧ画像生成手段、
として機能させることを特徴とするＣＧ画像生成プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影した映像に合成するＣＧ画像を生成するＣＧ画像生成装置およびＣＧ画像生成プログラムに関する。
【背景技術】
【０００２】
従来、撮影した映像、すなわち、実写のみを収録した映像に、照明データや各種変化情報（温度変化や風向きの変化等）をもとに作成したＣＧ画像を付加して（ＣＧ効果を反映させて）、合成映像を制作するためには、ポスプロ（後処理）で行われていた（例えば、特許文献１参照）。
【０００３】
つまり、従来の合成映像の制作は、実写収録、ＣＧ画像作成、合成処理（ポスプロ）の順で行われていた。そして、ＣＧ画像作成におけるＣＧ画像（ＣＧオブジェクト）は、実写の映像（光源）の位置に合わせて、手作業で作成しており、合成処理（ポスプロ）において、合成映像化している。
【特許文献１】特許第３４８６５７５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来の合成映像の制作では、合成処理において、実写の映像とＣＧ画像との合成で生じる違和感が少なくなるように、合成映像を調整する必要があり、手間がかかると共に、リアルタイムで放送する合成映像に対応することができないという問題がある。なお、実写の映像とＣＧ画像との合成で生じる違和感には、実写の映像（実写部）における影の様子（方向、角度、濃度）とＣＧ画像（ＣＧ部）の影の様子（方向、角度、濃度）の違いから発生する違和感や、照明されている物体からの反射光による質感の違い（光の透明具合やテカリ具合）により発生する違和感や、実写の映像で投射される光（照明）の方向性およびＣＧ画像で投射される光（照明）の方向性とは異なっている方向性を有す光によって生じる不一致による違和感や、実写の映像とＣＧ画像との光（照明）の色の不一致による違和感が挙げられる。
【０００５】
また、従来の合成映像の制作では、照明データを記録しておいて、後に反映させる手段がなかったため、実写の映像を収録する際に、撮影カメラによるドリー若しくはクレーン等を用いた移動ショットが含まれる場合、実写の映像（光源）の方向性や色等の単位時間当たりの変化が激しくなるので、照明データの収集は非常に困難となり、時間を要してしまうという問題がある。この結果、合成処理での作業は、フレーム単位で照明データを収集しながら行うことになり、膨大な時間と労力とを要す作業量が必要になってしまうという問題がある。
【０００６】
そこで、本発明では、前記した問題を解決し、手間をかけることなく、リアルタイムで放送する映像に合成するＣＧ画像を生成することができるＣＧ画像生成装置およびＣＧ画像生成プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
前記課題を解決するため、請求項１に記載のＣＧ画像生成装置は、照明が照射される撮影場所における少なくとも照度の変化に伴って、合成させるＣＧ画像を変化させて生成するＣＧ画像生成装置であって、ＣＧデータ蓄積手段と、照明制御信号取得手段と、制御信号変換手段と、ＣＧ画像生成手段と、を備える構成とした。
【０００８】
かかる構成によれば、ＣＧ画像生成装置は、照明制御信号取得手段によって、撮影場所に設置された照明機器の照明状態を示す制御信号を出力する照明制御手段から当該制御信号を取得する。制御信号には、照明機器から照射される照明（光）の色と、照明機器から被照射体への照明方向（方向）と、照明の強さ（明るさ、照度）と、照明機器（灯体）のレンズ機構（アイリス、フォーカス、ズーム）、シャッター、カッターおよびゴボ（種板）の変化速度を制御するもの（速度制御信号）とが挙げられる。つまり、制御信号には、照明（光）による質感と様子（状態）とを制御することが可能な全ての信号の中の少なくとも一つの信号が含まれている。
【０００９】
続いて、ＣＧ画像生成装置は、制御信号変換手段によって、照明制御信号取得手段で取得された制御信号を、任意に変更可能な変換テーブルに基づいて、ＣＧ画像を生成する際に参照するＣＧ制御信号に変換する。任意に変更可能な変換テーブルは、制御信号を受け取って、パラメータに基づいた変換出力をＣＧ制御信号として出力する際に用いるものであり、ハードウェアでもソフトウェアでも構成可能である。また、変換テーブルのパラメータは、当該装置の使用者により任意のタイミングで変更可能である。また、ＣＧ制御信号のパラメータとしては、位置（Ｔｒａｎｓｉｔｉｏｎ：変位）、回転（Ｒｏｔａｔｉｏｎ）、大きさ（Ｓｉｚｅ）、質感（Ｍａｔｅｒｉａｌ）等が挙げられる。
【００１０】
そして、ＣＧ画像生成装置は、ＣＧ画像生成手段によって、制御信号変換手段で変換されたＣＧ制御信号と、ＣＧデータ蓄積手段に蓄積されているＣＧデータとに基づいて、ＣＧ画像を生成する。
【００１１】
請求項２に記載のＣＧ画像生成プログラムは、照明が照射される撮影場所における少なくとも照度の変化に伴って、合成させるＣＧ画像を変化させて生成するために、前記ＣＧ画像を生成するためのＣＧデータを蓄積するＣＧデータ蓄積手段を備えたコンピュータを、照明制御信号取得手段、制御信号変換手段、ＣＧ画像生成手段、として機能させる構成とした。
【００１２】
かかる構成によれば、ＣＧ画像生成プログラムは、照明制御信号取得手段によって、撮影場所に設置された照明機器の照明状態を示す制御信号を出力する照明制御手段から当該制御信号を取得する。続いて、ＣＧ画像生成プログラムは、制御信号変換手段によって、照明制御信号取得手段で取得された制御信号を、予め設定した変換テーブルに基づいて、ＣＧ画像を生成する際に参照するＣＧ制御信号に変換する。そして、ＣＧ画像生成プログラムは、ＣＧ画像生成手段によって、制御信号変換手段で変換されたＣＧ制御信号と、ＣＧデータ蓄積手段に蓄積されているＣＧデータとに基づいて、ＣＧ画像を生成する。
【００１３】
請求項３に記載のＣＧ画像生成装置は、センサで得られたセンサデータから撮影している現実空間の状態を、仮想空間内のＣＧ画像に反映させて生成するＣＧ画像生成装置であって、ＣＧデータ蓄積手段と、センサデータ取得手段と、データ変換手段と、ＣＧ画像生成手段と、を備える構成とした。
【００１４】
かかる構成によれば、ＣＧ画像生成装置は、センサデータ取得手段によって、センサデータを取得し、データ変換手段によって、取得したセンサデータを、予め設定した変換テーブルに基づいて、ＣＧ画像を生成する際に参照するＣＧ制御信号に変換する。センサとしては、圧力、温度、臭いセンサ等が挙げられる。そして、ＣＧ画像生成装置は、ＣＧ画像生成手段によって、データ変換手段で変換されたＣＧ制御信号と、ＣＧデータ蓄積手段に蓄積されているＣＧデータとに基づいて、ＣＧ画像を生成する。
【００１５】
請求項４に記載のＣＧ画像生成プログラムは、センサで得られたセンサデータから撮影している現実空間の状態を、仮想空間内のＣＧ画像に反映させて生成するために、前記ＣＧ画像を描画するためのＣＧデータを蓄積するＣＧデータ蓄積手段を備えたコンピュータを、センサデータ取得手段、データ変換手段、ＣＧ画像生成手段、として機能させる構成とした。
【００１６】
かかる構成によれば、ＣＧ画像生成プログラムは、センサデータ取得手段によって、センサデータを取得し、データ変換手段によって、取得したセンサデータを、予め設定した変換テーブルに基づいて、ＣＧ画像を生成する際に参照するＣＧ制御信号に変換する。そして、ＣＧ画像生成プログラムは、ＣＧ画像生成手段によって、データ変換手段で変換されたＣＧ制御信号と、ＣＧデータ蓄積手段に蓄積されているＣＧデータとに基づいて、ＣＧ画像を生成する。
【発明の効果】
【００１７】
請求項１または請求項２に記載の発明によれば、照明機器の照明状態を制御する照明制御信号を取得し、取得された照明制御信号を、任意に変更可能な変換テーブルに基づいて、ＣＧ画像を生成する際に参照するＣＧ制御信号に変換する。そして、このＣＧ制御信号をＣＧ画像を生成する際に用いることで、手間をかけることなく、撮影している映像の照明状態に対応したＣＧ画像を得ることができる。
【００１８】
請求項３または請求項４に記載の発明によれば、センサデータを取得し、取得したセンサデータを、任意に変更可能な変換テーブルに基づいて、ＣＧ画像を生成する際に参照するＣＧ制御信号に変換する。そして、このＣＧ制御信号をＣＧ画像を生成する際に用いることで、手間をかけることなく、撮影している現実空間の映像に対応したＣＧ画像を得ることができる。
【発明を実施するための最良の形態】
【００１９】
次に、本発明の実施形態について、適宜、図面を参照しながら詳細に説明する。
〈ＣＧ画像生成装置（第一実施形態）の構成〉
図１はＣＧ画像生成装置（第一実施形態）のブロック図である。この図１に示すように、ＣＧ画像生成装置１は、撮影している映像とリアルタイムに合成するＣＧ画像を生成するもので、照明制御信号取得手段３と、制御信号変換手段５と、ＣＧ画像生成手段７と、ＣＧデータ蓄積手段９とを備えている。また、この映像合成装置１には、撮影場所に設置されている照明機器２を制御する照明制御装置（照明制御手段）４と、撮影カメラ（撮影手段）６と、当該装置１で生成したＣＧ画像と撮影カメラ６で撮影した映像とを合成する映像合成装置８とが接続されている。
【００２０】
このＣＧ画像生成装置１の構成の説明に先立ち、これら照明機器２、照明制御装置４、撮影カメラ６および映像合成装置８の説明をする。
【００２１】
照明機器２は、撮影場所（例えば、スタジオ）の様々な箇所（通常、室内であれば天井、または、出演者の間近）に、複数台設置されおり、照明制御装置４から出力された様々な制御信号（照明制御信号）に基づいて、制御されるものである。この照明機器２には、いろいろな型式、形状、機能が備えられている。
【００２２】
また、この照明機器２は、照明の照度や色の調整が可能に構成されており、型式（動きを遠隔制御できる照明）によっては、照明を照射する方向である照射方向を自在に変更できる可動手段（駆動モータと可動自在の筐体等）を一体的に備えている。なお、ここでいう型式では、大まかな分類として、完全に固定された「動かない照明」（一般照明）と、一定位置に固定されているものの照射方向を所定角度内で変更することができる「動きを遠隔制御できる照明」（または特殊効果機器）いわゆるムービングライトとに分けている。
【００２３】
このムービングライトについてふれておくと、ムービングライトは、パン・チルト（方向、動き、速さ）を制御可能なだけではなく、照明、すなわち、光芒の状態（明るさ、色、模様）や、レンズの状態（フォーカス、アイリス、カッター）までも制御（変化）可能なものである。
【００２４】
また、照明機器２の「動きを遠隔制御できる照明」として、例えば、ミラーボールであれば、「回転速度」を、スモークマシン（照明機器の特殊な例（スモークで光を遮ることも照明の一態様））であれば、「発生する煙の量」を、ストロボマシンであれば、「発光するタイミング（発光間隔）」を、ムービングプロジェクタであれば、その動作（明るさ、パン、チルト、ズーム、フォーカシング等）を、照明制御信号で変化させることができる。
【００２５】
このように、純粋に「照明機器」ではないもの（照明する単機能以上の機能を有するもの）も、「照明制御信号によって制御される機器」であり、ここでは、照明機器の一態様としている。
【００２６】
照明制御装置４は、複数台の照明機器２に様々な制御信号（照明制御信号）を出力することで、当該照明機器２を統括して制御するものである。なお、照明制御装置４には、図示を省略した照明コントローラが接続されており、この照明コントローラによって、照明機器２から照射出力される照明の照度および色が制御されると共に、照射方向が制御される。
【００２７】
撮影カメラ６は、撮影場所に存在している被写体（出演者、セット等）を撮影するものである。この撮影カメラ６は、放送局等で番組制作に用いられる一般的なもので、パン、チルト、フォーカシング、ズームといった基本的な動作を行うことができる。そして、この撮影カメラ６で撮影された映像と、当該撮影カメラ６による動作を示す動作制御信号とが映像合成装置１に入力される。なお、この撮影カメラ６は、番組制作に携わるスタッフが直接操作するタイプのものであってもいいし、遠隔操作するタイプのもの（ロボットカメラ）であってもよい。また、この撮影カメラ６はハイビジョン用のものであってもいいし、従来のデジタル放送用若しくはアナログ放送用のものであってもよい。
【００２８】
映像合成装置８は、撮影カメラ６で撮影された映像と、ＣＧ画像生成装置１のＣＧ画像生成手段７（後記する）で生成されたＣＧ画像とを合成して、合成映像として出力するものである。この映像合成装置８から出力された合成映像は、図示を省略した放送設備に伝送され、リアルタイムに放送される。つまり、映像合成装置８は、従来の映像合成装置では実現できなかった撮影場所の照明に対応したＣＧ画像を実時間で合成すること、すなわち、ＣＧ画像を、リアルタイム連動の映像効果として活用することが可能になる。
【００２９】
これより、ＣＧ画像生成装置１の各構成について説明する。
照明制御信号取得手段３は、照明制御装置４から出力される照明制御信号を取得するものである。この照明制御信号取得手段３が取得する照明制御信号には、照明の照度を上昇下降させるもの、照明の色を変化させるもの、照明方向を変更するもの等が含まれている。ＣＧ画像生成装置１は、この照明制御信号により、撮影場所における照明条件（照明状況）を掌握することとなり、ＣＧ画像生成手段７で生成するＣＧ画像に反映させる。
【００３０】
また、この照明制御信号取得手段３は、照明機器２から出力されたフィードバック信号を取得するものである。このフィードバック信号は、照明機器２が「動きを遠隔制御できる照明」である場合に、照明制御装置４から出力された照明制御信号により当該照明機器２が制御され、実際に当該照明機器２が動作した結果、何らかのずれ（位置や方向のずれ）が生じた場合に、このずれをリアルタイムに検出可能にするためのものである。つまり、フィードバック信号は、照明機器２が移動した場合の実際の移動量、位置座標、照射方向等を示すものである。
【００３１】
制御信号変換手段５は、照明制御信号取得手段３で取得された照明制御信号およびフィードバック信号を、任意に変更可能な変換テーブル５ａに基づいて、ＣＧ画像を生成する際に参照するＣＧ制御信号に変換するものである。
【００３２】
この任意に変更可能な変換テーブル５ａは、照明制御信号およびフィードバック信号とＣＧ制御信号とを対応付けたもので、接続される照明機器２の機能によって、当該装置１の使用者が設定するものであり、撮影カメラ６で撮影場所を撮影している間、固定したパラメータとして設定することも可能であるし、時間経過に伴ってまたは任意のタイミングで当該パラメータが変化するように設定することも可能なものである。
【００３３】
例えば、照明機器２がムービングライトである場合、変換テーブル５ａには、ムービングライトの動きによって、ＣＧの位置が変化するパラメータが設定されている。また、変換テーブル５ａには、ムービングライトが動く速度に応じて、ＣＧの色が変化するパラメータが設定されている。これについて例示すると、照明機器２の速度が所定速度よりも速い場合には、ＣＧ画像を赤っぽく（赤みがけて）生成し、照明機器２の速度が所定速度よりも遅い場合には、ＣＧ画像を青っぽく（青みがけて）生成する。
【００３４】
また、例えば、変換テーブル５ａには、照度の下降とアニメーション（連続するＣＧ画像）の合成開始とが対応付けられているアニメーションキューや、照明の色の変化とＣＧ画像の色の変化とが対応付けられているもの、照明方向の位置の変更とＣＧ画像の表示位置の変更とが対応付けられているもの、照明方向の角度の変更とＣＧ画像の表示角度の変更とが対応付けられているもの等が含まれている。
【００３５】
ＣＧ制御信号は、ＣＧ画像の位置（Ｔｒａｎｓｉｔｉｏｎ）、回転（Ｒｏｔａｔｉｏｎ）、大きさ（Ｓｉｚｅ）、質感（Ｍａｔｅｒｉａｌ）等を制御するものである。ちなみに、ＣＧ画像の質感に関しては、当該装置１に実装するＣＧ描画システムに依存している。
例えば、Ｖｉｚ（商品名）の場合、“アンビエント”、“スペキュラ”、“エミッション”、“ディフージョン”、“アルファ”の５つの質感を設定することができる。
【００３６】
ＣＧ画像生成手段７は、制御信号変換手段５から出力されたＣＧ制御信号と、撮影カメラ６から出力された動作制御信号（カメラパラメータ）と、ＣＧデータ蓄積手段９に蓄積されているＣＧデータとに基づいて、ＣＧ画像を生成するものである。つまり、このＣＧ画像生成手段７は、ＣＧ制御信号により、刻々と変化する撮影場所の照明状況を、生成するＣＧ画像に反映させ、動作制御信号により、撮影カメラ６の動作（パン、チルト、フォーカシング、ズーム）を、生成するＣＧ画像に反映させる。
【００３７】
また、このＣＧ画像生成手段７は、ＣＧ制御信号に基づいて、生成するＣＧ画像、つまり、ＣＧオブジェクトについて、その形状・方向・色・質感等を変化させたり、アニメーションとして再生することも可能である。すなわち、このＣＧ画像生成手段７で生成されるＣＧ画像は、視聴者に様々な映像効果を与えるものである。そして、このＣＧ画像生成手段７で生成されたＣＧ画像は、映像合成装置８に出力される。
【００３８】
ＣＧデータ蓄積手段９は、ＣＧ画像を生成するためのＣＧデータを蓄積しているもので、一般的なハードディスク等によって構成されている。ＣＧデータとしては、例えば、出演者と共演するキャラクター等が挙げられる。
【００３９】
このＣＧ画像生成装置１によれば、照明制御信号取得手段３によって、照明機器２の照明状態を制御する照明制御信号を取得し、取得された照明制御信号を、制御信号変換手段５の変換テーブル５ａに基づいて、ＣＧ画像を生成する際に参照するＣＧ制御信号に変換する。そして、このＣＧ制御信号をＣＧ画像生成手段７によりＣＧ画像を生成する際に用いることで、手間をかけることなく、撮影している映像の照明状態に対応したＣＧ画像を得ることができる。
【００４０】
〈ＣＧ画像生成装置（第一実施形態）の動作〉
次に、図３に示すフローチャートを参照して、ＣＧ画像生成装置１の動作について説明する（適宜、図１参照）。
まず、ＣＧ画像生成装置１は、照明制御信号取得手段３によって、照明制御装置４から照明制御信号を取得する（ステップＳ１）。続いて、ＣＧ画像生成装置１は、制御信号換手段５によって、照明制御信号をＣＧ制御信号に変換する（ステップＳ２）。
【００４１】
そして、ＣＧ画像生成装置１は、ＣＧ画像生成手段７によって、制御信号変換手段５から入力されたＣＧ制御信号と、撮影カメラ６から入力された動作制御信号と、ＣＧデータ蓄積手段９から入力されたＣＧデータとに基づいて、ＣＧ画像を生成する（ステップＳ３）。その後、ＣＧ画像生成装置１は、生成したＣＧ画像を映像合成装置８に出力し、この映像合成装置８は、撮影カメラ６から入力された映像と、ＣＧ画像生成装置１のＣＧ画像生成手段７で生成されたＣＧ画像とを合成し、この合成した合成映像を出力する。
【００４２】
〈ＣＧ画像生成装置（第二実施形態）の構成〉
図２はＣＧ画像生成装置（第二実施形態）のブロック図である。この図２に示すように、ＣＧ画像生成装置１Ａは、撮影している映像とリアルタイムに合成するＣＧ画像を生成するもので、センサデータ取得手段１３と、データ変換手段１５と、ＣＧ画像描画手段（ＣＧ画像生成手段）７Ａと、ＣＧデータ蓄積手段９とを備えている。なお、この映像合成装置１Ａには、撮影カメラ６と、センサ１０と、映像合成装置８とが接続されている。また、図１に示したＣＧ画像生成装置１の構成と同様の構成は、同一の符号を付してその説明を省略する。
【００４３】
センサ１０は、撮影カメラ６が撮影している撮影場所（現実空間）の状態を計測（信号化、データ化）するものである。このセンサ１０は、圧力センサ（気圧や人間の吸気・呼気を検知してＣＧ画像の変化に利用する）、温度センサ、風力センサ、臭気センサ、加速度センサ（移動する被写体の加速度を測定する。例えば、人間の腕や脚に取り付けて動かした際の最高加速度をＣＧ画像に反映させる）の少なくとも１つから構成されている。
【００４４】
センサデータ取得手段１３は、センサ１０でデータ化されたセンサデータを取得するものである。なお、この図２では、センサ１０からセンサデータ取得手段１３への信号線を１本しか図示していないが、このセンサデータ取得手段１３は、センサ１０の種類の数に対応した数だけのセンサデータを取得している。
【００４５】
データ変換手段１５は、センサデータ取得手段１３で取得されたセンサデータを、データ変換テーブル１５ａに基づいて、ＣＧ画像を描画する際に参照するＣＧ制御信号に変換するものである。
【００４６】
データ変換テーブル１５ａは、各種のセンサ１０に対応したセンサデータとＣＧ制御信号とが対応付けられているものである。例えば、データ変換テーブル１５ａには、温度センサ（センサ１０）が検出した温度（センサデータ）と、ＣＧキャラクタ（ＣＧ画像）の表情の変化とが対応付けられているもの等が含まれている。この場合、データ変換手段１５は、温度センサで検出した温度が所定温度よりも高い場合に、ＣＧキャラクタの表情が暑がっているように、ＣＧ画像描画手段７Ａへ描画指示するＣＧ制御信号に変換することとなる。
【００４７】
ＣＧ画像描画手段７Ａは、データ変換手段１５で変換されたＣＧ制御信号と、撮影カメラ６から出力された動作制御信号（カメラパラメータ）と、ＣＧデータ蓄積手段９に蓄積されているＣＧデータとに基づいて、ＣＧ画像を描画するものである。つまり、このＣＧ画像描画手段７Ａは、ＣＧ制御信号により、刻々と変化する現実空間（撮影場所）の様々な変化を、描画するＣＧ画像に反映させ、さらに、動作制御信号により、撮影カメラ６の動作（パン、チルト、フォーカシング、ズーム）を、描画するＣＧ画像に反映させる。
【００４８】
なお、このＣＧ画像描画手段７Ａは、図１に示したＣＧ画像生成手段７と若干異なり、同時に入力されるＣＧ制御信号が複数の場合（各種のセンサ１０から複数のセンサデータ）が想定され、これらＣＧ制御信号の組み合わせによって、出力されるＣＧ画像が多種多様に変化することが可能になる。例えば、センサデータとして、温度と風力とが入力された場合、描画されるＣＧキャラクタ（人型のＣＧオブジェクト）の表情（暑がっていたりまたは寒がっていたりする）と、衣服（風力の大きさによってなびく）とに反映させることができる。
【００４９】
このＣＧ画像生成装置１Ａによれば、センサデータ取得手段１３によって、センサ１０で検出したセンサデータを取得し、取得したセンサデータを、データ変換手段１５のデータ変換テーブル１５ａに基づいて、ＣＧ画像を描画する際に参照するＣＧ制御信号に変換する。そして、このＣＧ制御信号をＣＧ画像を描画する際に用いることで、手間をかけることなく、撮影している現実空間の映像に対応したＣＧ画像を得ることができる。
【００５０】
〈ＣＧ画像生成装置（第二実施形態）の動作〉
次に、図４に示すフローチャートを参照して、ＣＧ画像生成装置１Ａの動作について説明する（適宜、図２参照）。
まず、ＣＧ画像生成装置１Ａは、センサデータ取得手段１３によって、センサ１０で検出されたセンサデータを取得する（ステップＳ１１）。続いて、ＣＧ画像生成装置１Ａは、データ変換手段１５によって、センサデータをＣＧ制御信号に変換する（ステップＳ１２）。
【００５１】
そして、ＣＧ画像生成装置１Ａは、ＣＧ画像描画手段７Ａによって、データ変換手段１５から入力されたＣＧ制御信号と、撮影カメラ６から入力された動作制御信号と、ＣＧデータ蓄積手段９から入力されたＣＧデータとに基づいて、ＣＧ画像を描画する（ステップＳ１３）。そしてまた、ＣＧ画像生成装置１Ａは、ＣＧ画像描画手段７Ａで描画したＣＧ画像を映像合成装置８に出力し、この映像合成装置８は、撮影カメラ６から入力された映像と、ＣＧ画像生成装置１ＡのＣＧ画像描画手段７Ａで生成されたＣＧ画像とを合成し、この合成した合成映像を出力する。
【００５２】
〈ＣＧ画像生成装置の具体例〉
次に、図５を参照して、ＣＧ画像生成装置１を組み込んだ具体的例、すなわち、映像合成システムＳについて説明する。
この映像合成システムＳは、制御信号とエンコーダ情報とによって、照明とＣＧとを連動させたシステムであり、照明機器２と、照明制御装置４と、２台のムービングライト（照明機器２と照明制御装置４とが一体に構成されたものの一種）と、このムービングライトからのデータを中継するデータ中継器と、データを収集するデータ収集機（照明制御信号取得手段３に該当）と、照明制御装置４に接続されている照明コントローラ（入力手段）と、インターフェイスと、データ変換用ＰＣ（制御信号変換手段５に該当）と、ハブと、既存バーチャルスタジオ用ＰＣ（ＣＧ画像生成手段７、映像合成装置８に該当）と、センサ付カメラ（撮影手段６とセンサ１０とに該当）とを備えている。
【００５３】
このように、映像合成システムＳを構成することで、照明コントローラから出力された制御信号（照明制御信号およびＣＧ制御信号）を反映させたＣＧ画像を、既存バーチャルスタジオ用ＰＣで制作し、センサ付カメラで撮影した映像と合成して出力することができる。
【００５４】
なお、照明コントローラと共に、映像操作卓、音声卓、マウス・キーボード、その他のヒューマンインターフェイスを用いることも可能である。また、照明機器２として、空間演出用照明器具、一般家庭用照明器具を用いることも可能である。
【００５５】
以上、本発明の実施形態について説明したが、本発明は前記実施形態には限定されない。例えば、本実施形態では、ＣＧ画像生成装置１、１Ａとして説明したが、これらの装置１、１Ａの各構成の処理を実現可能に汎用的または特殊なコンピュータ言語で記述したＣＧ画像生成プログラムとすることも可能である。これらの場合、ＣＧ画像生成装置１、１Ａと同様の効果を得ることができる。
【図面の簡単な説明】
【００５６】
【図１】本発明の実施形態に係るＣＧ画像生成装置（第一実施形態）のブロック図である。
【図２】本発明の実施形態に係るＣＧ画像生成装置（第二実施形態）のブロック図である。
【図３】図１に示したＣＧ画像生成装置（第一実施形態）の動作を説明するためのフローチャートである。
【図４】図２に示したＣＧ画像生成装置（第２実施形態）の動作を説明するためのフローチャートである。
【図５】ＣＧ画像生成装置を組み込んだ具体例の１つである映像合成システムを示した図である。
【符号の説明】
【００５７】
１、１Ａ      ＣＧ画像生成装置
２            照明機器
３            照明制御信号取得手段
４            照明制御装置
５            制御信号変換手段
５ａ          変換テーブル
６            撮影カメラ
７            ＣＧ画像生成手段
７Ａ          ＣＧ画像描画手段（ＣＧ画像生成手段）
８            映像合成装置
９            ＣＧデータ蓄積手段
１０          センサ
１３          センサデータ取得手段
１５          データ変換手段
１５ａ        データ変換テーブル
【図１】
2007072859.tif 000003
【図２】
2007072859.tif 000004
【図３】
2007072859.tif 000005
【図４】
2007072859.tif 000006
【図５】
2007072859.tif 000007