(57)【特許請求の範囲】
【請求項１】
単一のカメラで単一の位置から撮影された複数の所定のビデオシーケンスから合成ビデオシーケンスを生成する方法において：
（ａ）前記複数の所定のビデオシーケンスを同期させて、対応する複数の同期ビデオシーケンスとするステップと；
（ｂ）各同期ビデオシーケンスの各フレームについてカメラ基準座標システムを選択し、前記カメラ基準座標システムと前記複数の同期ビデオシーケンスの各々の対応するフレームとの間でカメラ座標変換を得るステップと；
（ｃ）前記カメラ座標変換に基づいて各シーケンスを選択された焦点面に変換し、単一のディスプレイ上で合体させた同期可視化を行うために前記変換したシーケンスを重畳することによって、前記複数の同期シーケンスから前記合成シーケンスを形成するステップと；
を具えることを特徴とする方法。
【請求項２】
請求項１に記載の方法において、前記複数のビデオシーケンスが同じ位置から撮影されたものであることを特徴とする方法。
【請求項３】
請求項１に記載の方法において、前記カメラ座標変換が、前記複数の同期したビデオシーケンスから推定されることを特徴とする方法。
【請求項４】
請求項１に記載の方法において、前記カメラ座標変換が、記録されているカメラの位置データと、焦点および焦点距離を含むパラメータとから得られることを特徴とする方法。
【請求項５】
請求項１に記載の方法において、各ビデオシーケンス用に、前景物体と背景がそれぞれ区別され、前記変換された前景物体が前記変換された背景の前に重畳されることを特徴とする方法。
【請求項６】
請求項５に記載の方法が、前記同期したビデオシーケンスの各々について前記それぞれの前景物体と前記背景を抽出するステップを具えることを特徴とする方法。
【請求項７】
請求項１に記載の方法において、前記同期が所定のシーケンスにおける時間的イベントに関連することを特徴とする方法。
【請求項８】
請求項１に記載の方法において、前記同期が所定のシーケンスにおける共通する空間的イベントに関連することを特徴とする方法。
【請求項９】
請求項１に記載の方法において、前記同期が前記所定のシーケンスの各々における二つのイベントに関するものであり、二つのイベント間で時間を等化するタイムスケーリングを伴うことを特徴とする方法。
【請求項１０】
請求項１に記載の方法において、前記所定のビデオシーケンスがカメラ位置及び焦点距離を含むカメラパラメータを有し、前記選択された焦点面が前記所定のシーケンスのうちの一つの焦点面に対応し、前記合成シーケンスが前記所定のシーケンスの一つのカメラ位置から見たものであることを特徴とする方法。
【請求項１１】
請求項１に記載の方法において、前記合成シーケンスはフレームバイフレームベースであることを特徴とする方法。
【請求項１２】
請求項１に記載の方法において、前記合成シーケンスの合成が、前記合成シーケンスの一つに比較して拡大された視野用の、前記シーケンスのうち少なくとも一つの複数のフレームに基づくものであることを特徴とする方法。
【請求項１３】
請求項１に記載の方法において、前記所定のビデオシーケンスがスポーツイベントからのものであることを特徴とする方法。
【請求項１４】
請求項１３に記載の方法において、前記スポーツイベントがスキーレースであることとを特徴とする方法。
【請求項１５】
請求項１３に記載の方法において、前記スポーツイベントがカーレースであることを特徴とする方法。
【請求項１６】
単一のカメラで単一の位置から撮影された複数の所定のビデオシーケンスから合成ビデオシーケンスを生成するシステムにおいて：
（ａ）前記複数の所定のビデオシーケンスを同期させて、対応する複数の同期ビデオシーケンスとする手段と；
（ｂ）各同期ビデオシーケンスの各フレームについてカメラ基準座標システムを選択し、前記カメラ基準座標システムと前記複数の同期ビデオシーケンスの各々の対応するフレームとの間でカメラ座標変換を得る手段と；
（ｃ）前記カメラ座標変換に基づいて各シーケンスを選択された焦点面に変換し、単一のディスプレイ上で合体させた同期可視化を行うために前記変換したシーケンスを重畳することによって、前記複数の同期シーケンスから前記合成シーケンスを形成する手段と；
を具えることを特徴とするシステム。
【請求項１７】
請求項１６に記載のシステムにおいて、前記複数のビデオシーケンスが同じ位置から撮影されたものであることを特徴とするシステム。
【請求項１８】
請求項１６に記載のシステムにおいて、前記カメラ座標変換システムを選択する手段が、前記複数の同期したビデオシーケンスから前記カメラ座標変換を推定するように構成されていることを特徴とするシステム。
【請求項１９】
請求項１６に記載のシステムにおいて、前記カメラ座標変換システムを選択する手段が、記録されているカメラの位置データと、焦点および焦点距離を含むパラメータとから前記カメラ座標変換を得るように構成されていることを特徴とするシステム。
【請求項２０】
請求項１６に記載のシステムにおいて、各ビデオシーケンス用に、前景物体と背景をそれぞれ区別する手段を具え、前記合成ビデオシーケンスを形成する手段が、前記変換された前景物体を前記変換された背景の前に重畳するように構成されていることを特徴とするシステム。
【請求項２１】
請求項１６に記載のシステムにおいて、前記区別する手段が前記同期したビデオシーケンスの各々について前記前景物体と前記背景をそれぞれ抽出するように構成されていることを特徴とするシステム。
【請求項２２】
請求項１６に記載のシステムにおいて、前記区別する手段が、重みマスクシーケンスを生成する手段を具え、各重みマスクが前記それぞれの前景物体と前記背景を区別するために各画素位置についてエントリィを有するアレイであることを特徴とするシステム。
【請求項２３】
請求項１６に記載のシステムにおいて、前記同期させる手段が前記所定のシーケンスにおける時間的なイベントについての所定のシーケンスをアラインメントする手段を具えることを特徴とするシステム。
【請求項２４】
請求項１６に記載のシステムにおいて、前記同期させる手段が、前記所定のシーケンスの空間的に共通するイベントについて所定のシーケンスをアラインメントする手段を具えることを特徴とするシステム。
【請求項２５】
請求項１６に記載のシステムにおいて、前記同期させる手段が前記所定のシーケンスの各々における二つのイベントについて前記所定のシーケンスをアラインメントする手段と、前記イベント間で時間を一致させるタイムスケーリング手段を具えることを特徴とするシステム。
【請求項２６】
請求項１６に記載のシステムにおいて、前記所定のビデオシーケンスが、カメラ位置と焦点距離を含むカメラパラメータを有し、前記合成シーケンスを形成する手段が、前記所定のシーケンスのうちの一つの焦点面に対応する焦点面を選択する手段と、前記所定のシーケンスのうちの一つのカメラ位置からみた合成シーケンスを形成する手段とを具えることを特徴とするシステム。
【請求項２７】
請求項１６に記載のシステムにおいて、前記合成シーケンスを形成する手段が前記所定のシーケンスをフレーム−バイ−フレームベースで処理する手段を具えることを特徴とするシステム。
【請求項２８】
請求項１６に記載のシステムにおいて、前記合成シーケンスを形成する手段が、前記合成シーケンスにおけるシーケンスの一つに比較して拡大された視野用に、前記シーケンスの少なくとも一つの複数のフレームを用いる手段を具えることを特徴とするシステム。
【請求項２９】
請求項１６に記載のシステムにおいて、前記所定のビデオシーケンスがスポーツイベントからのものであることを特徴とするシステム。
【請求項３０】
請求項２９に記載のシステムにおいて、前記スポーツイベントがスキーレースであることを特徴とするシステム。
【請求項３１】
請求項２９に記載のシステムにおいて、前記スポーツイベントがカーレースであることを特徴とするシステム。
【請求項３２】
請求項１に記載の方法において、前記所定のビデオシーケンスが生物医学的な意義を有することを特徴とする方法。
【請求項３３】
請求項３２に記載の方法において、前記生物医学的な意義が、患者の部分の動きに関するものであることを特徴とする方法。
【請求項３４】
請求項１に記載の方法において、前記所定のビデオシーケンスが自動車事故テストのシーケンスであることを特徴とする方法。
【請求項３５】
請求項３４に記載の方法において、前記自動車事故テストのシーケンスが試験する自動車の画像を含むことを特徴とする方法。
【請求項３６】
請求項３４に記載の方法において、前記自動車事故テストのシーケンスが、試験する自動車における事故ダミー画像を含むことを特徴とする方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、視覚的ディスプレイに関するものであり、特に、時間依存型視覚的ディスプレイに関する。
【０００２】
【従来の技術】
例えばスポーツ関連のテレビ番組におけるビデオディスプレイでは、特別な視覚効果を使用して、視聴者の好みの動作を強調することができる。例えば、フットボール等のチームで行うスポーツでは、ビデオリプレイは視聴者に試合の決定的な瞬間をとらえる第２の機会を与える。このような瞬間はスローモーションで再生することが可能であり、手書きの円や、矢印、文字などを重ね合わせてその部分を強調し、注釈を付けることができる。このような技術は、たとえば、レース競技などの他のスポーツでも用いられている。
【０００３】
ビデオリプレイや同種の技術は、通常、場面が忙しく、混み合っているチームスポーツに最も適している。同様に、例えば１００メートル競走では、競技者が並ぶ場面があり、ゴールでの場面をスローモーションで視覚化することでレースの本質が明確になる。一方で、ダウンヒルレースやスキージャンプなどで、実用上および安全上の必要からスタート時間がずれている場合は、実際の場面には、通常、一人の競技者を含む。
【０００４】
【発明が解決しようとする課題】
スポーツの楽しみを増やしたり、競技者およびコーチの視覚を強化するためには、競技者間で競技の要素を明確に表わすディスプレイが要求される。このことは、例えばダウンヒルスキーで競技者が一人で競技する場合に特に当てはまるし、また、準々決勝から準決勝へ、さらに決勝へ誰が進むかを決めるのに、資格スキームが用いられる集団競技にも当てはまる。
【０００５】
【課題を解決するための手段】
本願発明者は、所定の二以上のビデオシーケンスと、前記所定のシーケンスの各々から選択された焦点平面に好適に同期させて表示した視覚要素を含む合成ビデオシーケンスを生成できることを認識した。例えば、所定の二つのビデオシーケンスとは、同じダウンヒルコースを別々に滑走している異なる競技者を示すシーケンスであり、合成シーケンスは、この所定のシーケンスの各々からの要素を含んでおり、あたかも両競技者が同時にレースをしているように見せることができる。
【０００６】
合成ビデオシーケンスは、例えばオーディオシーケンスなどの一又はそれ以上の異なるシーケンスと一又はそれ以上のビデオシーケンスを同様に組み合わせて作ることもできる。
【０００７】
【発明の実施の形態】
観念的には、本発明は二次元（２Ｄ）“モーフィング”(morphing)、すなわち、コンピュータグラフィックスにおける円滑な画像変換、変形、または一つのイメージＩ１の他のイメージＩ２へのマッピングとの類似性において理解されうる。このようなモーフィングは、イメージＩ１のＩ２への画像変換、すなわち、リンゴの画像をオレンジの画像へ、またはある人間の顔を他の人間の顔へ、といった画像変換を示すビデオシーケンスに導く。このビデオシーケンスは、二つの空間的次元および時間的次元を有する三次元シーケンスである。このシーケンスの部分は、例えば二つの顔の平均、あるいは、イメージＩ１から取った目とイメージＩ２から取ったほほえみの合成といった、中間画像など、特別な関心に関するものであっても良い。従って、ここにいうイメージ間のモーフィングは、イメージから得る特徴を融合させた形態として理解されうる。
【０００８】
本発明は、より複雑な課題、すなわち二つのビデオシーケンスの融合に関するものである。一のシーケンスから他のシーケンスへのモーフィングあるいはマッピングは、４次元データとなり、これを表示するのは容易ではない。しかしながら、中間の組み合わせ、あるいは合成シーケンスであれば、どのようなものでも新しいビデオシーケンスを導くことができる。
【０００９】
特に重要なことは、二つ以上の所定のシーケンスからの要素を、好適な時空アラインメントまたは同期をとって組み合わせることであり、選択された焦点面にこれを投影することである。例えば、ダウンヒルスキーなどのスポーツレース競技の場合、コースを別々に滑走している二人の競技者から得たビデオシーケンスを、レースの開始に対応するフレームを選択することによって時間的に同期させることができる。代替として、このシーケンスは、例えばスラロームゲートなどの重要なポイントで、競技者の通過路を一致させるように同期させても良い。
【００１０】
所定の焦点面は、一のシーケンスの焦点面あるいは他の所定のシーケンスの焦点面と同じであっても良く、または、これらの面と異なる焦点面を好適に構築するようにしても良い。
【００１１】
重要なことは、例えばトラックとフィールド、地面から離れた状態にあるハイジャンプ競技者、または地面に降りようとしているハイジャンプ競技者というように、区別されるイベントに基づいた同期であることである。この点に関して、更に重要なことは、時間的スケールを必要としつつ、地面から離れるところと、地面に降りるところが一致するように二つのシーケンスを同期させることである。結果としてできた合成シーケンスは軌道を比較することができる。
【００１２】
同期したビデオシーケンスを、更に空間的に整合させることができる。すなわち、競技者がコースを同時に滑走しているような印象を与える合成シーケンスを生成することができる。単純な方法として、空間的なアラインメントはフレームバイフレームベースで行うことができる。代替として、カメラからの複数のフレームを考慮して、出力イメージの画面を延長させて、幾つかのシーケンシャルイメージからの背景要素を含めることができる。
【００１３】
合成イメージの形成は、選択した焦点面に構成場面の表示を伴う。通常、例えば図１に示すように、二つのビデオ入力シーケンスという特別なケースでは、相当量のコンピュータ処理を必要とする。
【００１４】
図１は、二つのイメージシーケンスＩＳ１とＩＳ２を示し、これらを同期させてシーケンスＩＳ１’とＩＳ２’にするためのモジュール１１に送られる。例えば、シーケンスＩＳ１とＩＳ２は、ダウンヒルレース競技に出ている二人の競技者に関するものであり、これらはモジュール１１によって同期しており、各シーケンスの第１フレームがスタートゲートを出る競技者に対応する。
【００１５】
この同期したシーケンスはモジュール１２に送られて、背景−前景を抽出する。同様にモジュール１３に送られて、カメラ座標変換推定が行われる。各イメージシーケンスについて、モジュール１２は、重み−マスクシーケンス（ＷＭＳ）を生成する。各重みマスクは、各画素位置についてエントリを有するアレイであり、関心のある場面と背景／前景を区別する。重みマスクシーケンスの生成には、背景に関連してフレームからフレームへ動く要素のイメージのコンピュータ化した検索が伴う。モジュール１３は、方位についてのカメラアングルと海抜、カメラの焦点距離と開口を含むシーケンスパラメータＳＰ１とＳＰ２を生成する。これらのパラメータは、イメージの補間およびマッチングを含むコンピュータ処理によって各ビデオシーケンスから決定することができる。代替として、好適に備え付けられたカメラが、直接シーケンスパラメータを具えていても良い。この場合は、コンピュータ処理による推測の必要がなくなる。
【００１６】
重み−マスクシーケンスＷＭＳ１とＷＳＭ２は、アルファ層シーケンスコンピュータ処理を行うためにモジュール１３に送られる。アルファ層は、各イメージにおける各画素が合成イメージ内でどのくらいの重みを受けるべきかを特定するアレイである。
【００１７】
アルファ層とシーケンスパラメータＳＰ１とＳＰ２はモジュール１５に送られ、整合したイメージシーケンスを選択焦点面に投影して、結果として所望の合成イメージシーケンスを得る。これは更に、図２Ａ、２Ｂ、３Ａ、３Ｂ、４および５に具体化されている。
【００１８】
図２Ａは、画像アングルφ（Ａ）のカメラ方向２２から記録された場面における、ポジションマーカ２１を通過しようとしているスキーヤＡを示す。スキーヤＡが届かんとしている位置は、レースイベントのスタートゲートを離れようとしているスキーヤＡ’からｔ（Ａ）秒経過後の位置である。
【００１９】
図２Ｂは、他のスキーヤＢをマーカ２１に関して同じ位置で、ただし、異なるカメラ方向２３から、より狭い画像アングルφ（Ｂ）で記録した場面を示す図である。スキーヤＡとの比較のために、スキーヤＢの位置をスキーヤＢがスタートゲートを離れてからｔ（Ａ）秒経過後に対応させる。図に示すとおり、ｔ（Ａ）秒内でスキーヤＢは、スキーヤＡに比較して、レースコースにおいてより遠くまで進んでいる。
【００２０】
図３ＡおよびＢは、結果としてできた各イメージを示す図である。
【００２１】
図４は、図２Ａと２Ｂを共通のカメラ位置で重ね合わせた組み合わせを示す図である。
【００２２】
図５は、選択焦点画面に投影された結果としてできた所望のイメージを示す図であり、同じスタート地点からｔ（Ａ）秒間、いっしょにレースをしていたかのようにスキーヤＡとＢを即時に視覚化している。
【００２３】
図６は、プロトタイプ処理技術で生成した合成イメージシーケンスから得たフレームを示す図であり、このフレームは中間タイミング地点に対応する。５７．８４という数字は秒で表した時間であり、遅い方のスキーヤがその中間タイミング地点に着いたところを取ったものであり、＋０．０４（秒）という値は、彼がどのくらいで早い方のスキーヤを追跡しているかを表示するものである。
【００２４】
プロトタイプ処理技術は、例えばＳＵＮワークステーションや、パーソナルコンピュータで実行するために、Ｃプログラミング言語で書かれている。専用ファームウエアやハードウエアは、エンハンスド処理効果用および、特にマッチングと挿入を含む信号処理に使用することができる。
【００２５】
この技術の個別の特徴および変形を下記に詳細に述べる。
【００２６】
Ａ．背景／前景の抽出
各シーケンスにおいて、好適な動き推定法  (motion estimation method)  を用いて背景及び前景を抽出することができる。画像シーケンスが移動するカメラによってとららえられ、この取得した場面が移動する者または物を含む背景／前景の抽出するには、この方法はローバストでなくてはならない。また、時間を超えて安定であるべき背景／前景の抽出には、時間的な一致が要求される。例えば、一定の速度で、あるいは一定の加速度で、カメラとエージェントの両方が予測可能に移動する場合、時間フィルタリングを用いて時間的な一致を強調することができる。
【００２７】
カメラの動きによる背景の移動速度の決定、およびカメラと相対的に移動するスキーヤの速度の決定に基づいて、背景／前景の抽出が重み層を生成する。カメラを追跡する画素および追跡しない画素間に差をつけるこの重み層は最終的な合成シーケンス用のアルファ層を生成するのに使用される。
【００２８】
Ｂ．シーケンスの時空アラインメント
時間的なアラインメントは、シーケンスにおける対応するフレームの選択を伴う。一般的に、スポーツ競技においては、これは、例えばレース開始時点に対応するフレームを選択するなど、タイミングシステムによって配分される各シーケンスのタイムコードである。この他に考えられる時間基準は、例えばゲート、あるいはジャンプエントリなどの指定された空間位置に対応する時間である。
【００２９】
空間的なアラインメントは各フレームに対する基準座標軸システムを選択すること、および基準システムと各シーケンスの対応するフレーム間におけるカメラ座標の変換を予測することによって行われる。この予測は、カメラポジション、視野方向、および焦点距離などのカメラデータがビデオシーケンスと共に記録される場合には不要である。通常、基準座標軸システムは所定のシーケンス、すなわち合成シーケンスに用いられるシーケンスの一つとして選択される。後述するとおり、空間アラインメントは単一フレームまたはマルチプルフレームをベースに行われる。
【００３０】
Ｂ１．単一フレームベースの空間アラインメント
この技術の各ステップにおいて、それぞれのシーケンスからの一つのフレームを用いてアラインメントを行う。各シーケンスは移動する者／物を含んでいるので、カメラ座標軸の変換を予測する方法はローバストでなくてはならない。この結果、背景／前景の抽出において生じるマスクを使用することができる。また、背景／前景の抽出用のものであるので、時間的フィルタリングを用いて、予測プロセスの時間的な一致を強調することができる。
【００３１】
Ｂ２．マルチプルフレームベースの空間アラインメント
この技術では、各シーケンスで視覚化された場面の再構築画像に空間アラインメントが適用される。各ビデオシーケンスはこの場面を再構築するために、たとえば背景／前景抽出用の一つに用いた技術と同じ技術を用いて、まずマルチプルフレームを分析する。一旦、各場面が個別に再構築されて、例えば、できるだけ多くの背景を取り入れるためには、上述したようにしてこれらの場面を空間的に整合させることができる。
【００３２】
この技術は、視野が基準フレームの一つとして選択されたものでなくてはならない単一フレーム技術とは対照的に、場面中のどのフレームの視野でも自由に選択することができる。従って、マルチプルフレーム技術では、すべての競技者が全てのフレーム内に見られない場合に、合成イメージの視野および／または画角を全競技者が見られるように選択することができる。
【００３３】
Ｃ．ビデオシーケンスの重ね合わせ
各シーケンスにおける背景／前景を抽出し、各シーケンスと基準システム間でのカメラ座標軸の変換を予測した後、シーケンスを単一のディスプレイ上の即時視覚化用の選択された焦点面内に投影することができる。各シーケンスの各フレームのアルファ層が、多重背景／前景重みマスクから生成される。従って、合成シーケンスは、各シーケンスを選択された焦点面に変換し、別の変換された画像を対応するアルファ重みに重ね合わせることによって形成される。
【００３４】
Ｄ．アプリケーション
上記に説明したスキー競技の他に、本発明の技術は、例えばカーレース競技、トラック競技、フィールド競技などのスピード／距離スポーツに適応することができる。
【００３５】
視覚化に加えて、本発明によってなされた合成ビデオシーケンスのアプリケーションの一つを図６に示す。すなわち、レースのいずれかの所望の地点における二人のランナーの時間差を決定するアプリケーションである。これは、当該地点を通過している二人のランナ間のシーケンスのフレーム番号を単純にカウントすること、およびフレーム間の時間インターバルを掛け合わせることを含む。
【００３６】
合成シーケンスは、例えばネットワークＴＶ、ケーブルＴＶ、サテライトＴＶ、インターネット上のビデオなどの既存の装置に放送することができる。このようなシーケンスは、例えば、リアルタイムのメインチャンネルから分離したチャネル上など、オンディマンド型サービスとして提供できる。または、別チャンネルで放送する代わりに、合成ビデオシーケンスを、例えば画面のコーナに表示するなどして、通常のチャンネルの一部に含めるようにしても良い。
【００３７】
更に、放送における使用に加えて、生成した合成ビデオシーケンスをスポーツトレーニング、およびスポーツ指導に使用しても良い。また、スポーツにおけるアプリケーションとは別に、例えば自動車事故の分析などの潜在的な分野へのアプリケーションも考えられる。
【００３８】
合成シーケンスは合成ステレオビデオシーケンスなど、より高次なものとして理解される。
【００３９】
更なるアプリケーションは、所定のシーケンスの一つをビデオシーケンスに同期したオーディオシーケンスである。特に、あるセンテンスを話している、あるいはある歌を歌っている俳優または歌手Ａと、同じことをしている他の俳優又は歌手Ｂのビデオシーケンスがあるとすると、本発明の技術は、Ｂの声で話しているあるいは歌っている俳優Ａの、“ボイスオーバ”または“唇同期”シーケンスを生成することができる。この場合、単なる時間スケール以上のものが要求されるので、同期をとるのにダイナミックプログラミング技術を用いることができる。
【００４０】
生物医学的な分野でも同様に時空再アラインメント法を適用することができる。例えば、整形手術後は、患者の回復の度合いをモニタすることが重要である。これは患者の特定の動きを所定時間比較することによってなされる。本発明の特徴によれば、このような比較を、動きの開始時点と終了時点を同期させ、モニタすべき部分を二つまたはそれ以上のビデオシーケンスにアラインメントすることによって、正確に行うことができる。
【００４１】
他の応用例は、自動車事故の分析である。本発明の技術は、同じような状態で事故を起こした別々の車の変形を詳細に比較して差異の広がりを確かめることができる。更に、自動車事故の分析においては、ダミー事故の結果を比較することが重要である。また、同じ型の車に起きた二つの事故においては、そのダミーが、たとえばシートベルトなど、形態によってどのように影響されたかを詳細に比較することができる。
【図面の簡単な説明】
【図１】  図１は、本発明の好適な実施形態の構成を示すブロック図である。
【図２】  図２Ａおよび図２Ｂは、ビデオカメラの前を通過するダウンヒルスキーヤの様子を示す図である。
【図３】  図３Ａおよび図３Ｂは、ビデオカメラで記録した図２Ａおよび図２Ｂに対応する画像を示す図である。
【図４】  図４は、図２Ａおよび図２Ｂを合成した状態を示す図である。
【図５】  図５は、選択された焦点面に投影した図３Ａおよび図３Ｂの場面を伴う、所望のビデオ画像を示す図である。
【図６】  図６は、本発明のプロトタイプ処理を用いて製造した合成ビデオシーケンスからのフレームを示す図である。
【符号の説明】
１１、１２、１３、１４、１５    モジュール
Ａ、Ｂ    スキーヤ
２１      ポジションマーカ
【図１】
0004739520.tif 000002
【図２】
0004739520.tif 000003
【図３】
0004739520.tif 000004
【図４】
0004739520.tif 000005
【図５】
0004739520.tif 000006
【図６】
0004739520.tif 000007