"知覚される奥行きを有するビデオを提供するための方法であって、単一視点の画像捕捉装置を用いてシーンの一連のビデオ画像を捕捉するステップと、前記画像捕捉装置の相対位置を、前記一連のビデオ画像におけるビデオ画像の各々に関して求めるステップと、前記画像捕捉装置の前記求められた相対位置に応答して、前記一連のビデオ画像からビデオ画像のステレオペアを選択するステップと、前記選択されたビデオ画像のステレオペアに基づいて、知覚される奥行きを有するビデオを形成するステップとを含む方法。ビデオ画像の前記ステレオペアが、前記画像捕捉装置の前記求められた相対位置が特定の距離だけ変化したところのビデオ画像のペアを識別することにより選択される請求項1に記載の方法。前記特定の距離が水平方向における距離である請求項2に記載の方法。前記画像捕捉装置の前記求められた相対位置の変化が前記画像捕捉装置の垂直方向又は回転方向の運動を示す場合に前記特定の距離が低減される請求項2に記載の方法。前記画像捕捉装置の前記求められた相対位置の変化が、前記画像捕捉装置の運動が定められた範囲外にあることを示す場合に、前記特定の距離がゼロに低減される請求項2に記載の方法。前記シーンにおける物体の移動を求めるために前記捕捉された一連のビデオ画像を分析することをさらに含み、ビデオ画像の前記ステレオペアの選択が、さらに、前記求められた物体の移動に応答している請求項1に記載の方法。前記シーンにおける物体の移動が、前記捕捉された一連のビデオ画像における対応する物体の相対位置を相関させることにより求められる請求項6に記載の方法。ビデオ画像の前記ステレオペアの選択が、ビデオ画像の前記ステレオペアのためのフレームオフセットを、前記画像捕捉装置の前記求められた相対位置に応答して求めるステップと、前記物体移動が定められた範囲外にあると判定された場合に前記フレームオフセットを低減するステップと、前記低減されたフレームオフセットを用いるビデオ画像のステレオペアを選択するステップとを含む請求項6に記載の方法。前記物体移動の量が定められた範囲外にある場合に前記フレームオフセットがゼロに低減される請求項8に記載の方法。前記画像捕捉装置の前記相対位置が位置検出装置を用いて求められる、請求項1に記載の方法。前記位置検出装置が加速度計又はジャイロスコープを含む請求項10に記載の方法。前記位置検出装置がグローバルポジショニングシステムGPS装置である請求項10に記載の方法。前記画像捕捉装置の前記相対位置が、前記捕捉された一連のビデオ画像を分析することにより求められる請求項1に記載の方法。知覚される奥行きを有する前記ビデオが、左眼及び右眼のための補色フィルタを有する眼鏡を用いて見ることに適したアナグリフ画像を形成することにより提供される請求項1に記載の方法。知覚される奥行きを有する前記ビデオが、各ビデオフレームのための画像のステレオペアを記憶することにより提供される請求項1に記載の方法。さらに、知覚される奥行きを有する前記ビデオを立体ディスプレイに表示することを含む請求項1に記載の方法。ビデオ画像の前記ステレオペアの選択が、さらに、所望の知覚される奥行きの程度を示すユーザ入力に応答して行われる請求項1に記載の方法。知覚される奥行きを有するビデオを提供するための方法であって、単一視点の画像捕捉装置を用いてシーンの一連のビデオ画像を捕捉するステップと、前記画像捕捉装置の相対位置を前記一連のビデオ画像に関して求めるステップと、前記画像捕捉装置の前記求められた相対位置に応答して、前記一連のビデオ画像における各ビデオ画像のためのフレームオフセットを求めるステップと、前記捕捉された一連のビデオ画像をデジタルメモリに記憶するステップと、各ビデオ画像に関する前記フレームオフセットの指示をデジタルメモリ内に記憶し、それにより、前記フレームオフセットに基づいてビデオ画像のステレオペアが、知覚される奥行きを有するビデオを提供するために後で形成されることができるようにするステップと、前記フレームオフセットの前記記憶された指示を、前記記憶された一連のビデオ画像に関連付けるステップとを含む方法。前記記憶された前記フレームオフセットの指示が、前記記憶された一連のビデオ画像に、前記一連のビデオ画像を記憶するために用いられるデジタルビデオファイルにメタデータを追加することにより関連付けられる請求項18に記載の方法。前記各ビデオ画像のための前記記憶されたフレームオフセットの指示がデジタルメタデータファイルに記憶され、前記デジタルメタデータファイルが、前記捕捉された一連のビデオ画像を記憶するために用いられるデジタルビデオファイルに関連付けられる請求項18に記載の方法。さらに、ビデオ画像のステレオペアを、各ビデオ画像のための前記記憶されたフレームオフセットの指示に基づいて連続して形成するステップと、知覚される奥行きを有するビデオを、ビデオ画像の前記ステレオペアを用いて提供するステップとを含む請求項18に記載の方法。前記捕捉された一連のビデオ画像にメタデータが関連付けられ、前記ビデオ捕捉装置が定められた範囲外にあると判定された場合には、前記捕捉されたシーケンスの、知覚される奥行きを有するビデオを形成するのに不適切な部分を示す請求項18に記載の方法。知覚される奥行きを有するビデオを提供するための方法であって、単一視点の画像捕捉装置を用いてビデオを捕捉するステップと、前記ビデオの捕捉中の前記画像捕捉装置の移動を求めるステップと、前記ビデオの捕捉中のシーン内の物体の移動を求めるステップと、前記捕捉されたビデオから選択されたビデオ画像のステレオペアから成る知覚される奥行きを有するビデオを提供するステップと、を含み、前記画像が、前記画像捕捉装置の前記求められた移動及び前記求められた物体移動に従って選択される方法。前記ステレオペアにおける前記ビデオ画像間のフレームオフセットが、前記画像捕捉装置の前記求められた移動の速度及び方向、並びに、前記求められた物体移動の速度及び方向に従って選択される請求項23に記載の方法。前記ステレオペアにおける前記ビデオ画像間のフレームオフセットが、前記画像捕捉装置の前記求められた移動の方向が、水平方向、垂直方向、回転方向又はこれらの方向の組合せのいずれであるかに従って選択される請求項23に記載の方法。前記画像捕捉装置の前記移動が加速度計又はジャイロスコープを用いて求められる、請求項23に記載の方法。シーン内の物体の移動が、前記捕捉されたビデオの圧縮版に関連付けられたMPEGベクトルに従って求められる、請求項23に記載の方法。ビデオ画像の前記ステレオペアの前記選択が、さらに、所望の程度の知覚される奥行きを指示するユーザ入力に従う請求項23に記載の方法。単一視点の画像捕捉装置により捕捉されたビデオから、知覚される奥行きを有するビデオ画像捕捉装置又はシーン内の物体の一貫性のない運動が存在する場合にも、向上された画質及び向上された知覚される奥行きを有する、知覚される奥行きを有するビデオを提供する必要がまだ残っている。本発明は、知覚される奥行きを有するビデオを提供するための方法を提供し、この方法は、単一視点の画像捕捉装置を用いてシーンの一連のビデオ画像を捕捉するステップと、前記画像捕捉装置の相対位置を、前記一連のビデオ画像におけるビデオ画像の各々に関して求めるステップと、前記画像捕捉装置の前記求められた相対位置に応答して、前記一連のビデオ画像からビデオ画像のステレオペアを選択するステップと、前記選択されたビデオ画像のステレオペアに基づいて、知覚される奥行きを有するビデオを形成するステップとを含む。本発明は、知覚される奥行きを有するビデオ画像を、単一視点の画像捕捉装置を用いて捕捉されたシーンのビデオ画像を用いて提供することができるという利点を有する。知覚される奥行きを有するビデオは、知覚される奥行きの、より一貫性の高い感覚をもたらすために、画像捕捉装置の相対位置に応答して形成される。本発明は、知覚される奥行きを有するビデオ画像の生成に反するような画像捕捉装置の運動が検知された場合には、知覚される奥行きを有さない画像が提供されることができるというさらなる利点を有する。本発明の実施形態は、以下の図面を参照することにより、より良好に理解されよう。知覚される奥行きを有する画像の生成は、異なる視点を有する2つ以上の画像が、見る人の左眼と右眼とが異なる視点の画像を見るように提示されることを必要とする。立体画像の最も簡単な場合、異なる視点を有する2つの画像がステレオペア双眼写真の形態で見る人に提示される。ステレオペアは、見る人の左眼のための画像と見る人の右眼のための画像から成る。知覚される奥行きを有するビデオは、見る人に連続的に提示される一連のステレオペアから成る。本発明は、単一の視点のみを有するビデオ画像捕捉装置を用いて捕捉されたビデオから、知覚される奥行きを有するビデオを生成するための方法を提供する。典型的に、単一の視点は、1つのレンズ及び1つのイメージセンサから構成された1つの電子画像捕捉ユニットを有するビデオ画像捕捉装置により提供される。しかし、本発明は、1つの電子画像捕捉ユニットのみ又は1つのレンズ及び1つのイメージセンサのみがビデオを1回捕捉するために用いられるという条件を満たすならば、2つ以上の電子画像捕捉ユニット、2つ以上のレンズ又は2つ以上のイメージセンサを有するビデオ画像捕捉装置にも同等に適用可能である。図1を参照すると、特定の実施形態において、ビデオ画像捕捉装置10の部品コンポーネントが示されており、これらの部品は、構造的な支持及び保護をもたらす本体内に配置されている。この本体は、特定の用途及びスタイルを考慮した要求条件を満たすように変更されることができる。ビデオ画像捕捉装置10の本体内に取り付けられている電子画像捕捉ユニット14が、少なくとも、撮影テイキングレンズ16、及び、撮影レンズ16に位置合わせされたイメージセンサ18を有する。シーンからの光が撮影レンズ16を通って光路20に沿って伝搬し、イメージセンサ18に当たってアナログ電子画像を生成する。使用するイメージセンサの種類を変更することもできるが、好ましい実施形態において、イメージセンサは固体撮像素子である。例えば、イメージセンサは、電荷結合素子CCD、CMOSセンサCMOS、又は、電荷注入デバイスCIDであり得る。一般に、電子画像捕捉ユニット14は、イメージセンサ18に関連するその他の部品も含むであろう。典型的なイメージセンサ18には、クロックドライバ本明細書にて、タイミング発生器とも称す、アナログ信号プロセッサASP、及び、アナログ-デジタル変換器/増幅器A/Dコンバータとして機能する別個の部品が付属している。これらの部品は、しばしば、イメージセンサ18と共に単一のユニットに組み込まれる。例えば、CMOSイメージセンサは、その他の部品を同一の半導体ダイ上に集積させるプロセスにより製造される。典型的に、電子画像捕捉ユニット14は、3つ以上のカラーチャネルを有する画像を捕捉する。単一のイメージセンサ18を1つのカラーフィルタアレイと共に用いることが現在は好ましいが、複数のイメージセンサ及び様々なタイプのフィルタを用いることもできる。好適なフィルタが当業者に広く知られており、イメージセンサ18に組み込まれて一体部品として提供される場合もある。イメージセンサ18の各画素からの信号は、画素に到達する光の強度、及び、画素が入射光からの信号を蓄積又は積分することが可能にされる時間長の両方に関連している。この時間を積分時間又は露光露出時間と称する。積分時間は、開放状態と閉鎖状態とが切り替え可能なシャッタ22により制御される。シャッタ22は、機械的であっても電気機械的であってもよく、又は、電子画像捕捉ユニット14のハードウェア及びソフトウェアの論理機能として提供されることができる。例えば、幾つかのタイプのイメージセンサ18は、イメージセンサ18をリセットし、次いで、その後しばらくしてイメージセンサ18を読み出すことにより、積分時間が電子的に制御されることを可能にする。CCDイメージセンサを用いる場合、積分時間の電子制御は、蓄積された電荷を、非感光性の領域に設けられた遮光レジスタ下に移動させることにより行うことができる。この遮光レジスタは、フレーム転送装置CCDでのように全ての画素に対するものであっても、或いは、インターライン転送装置CCDでのように、画素の行又は列間の行又は列の形態であってもよい。好適な装置及び手順が当業者に公知である。そして、タイミング発生器24が、イメージセンサ18上の画素が画像を捕捉する積分時間がいつ生じるかを制御する方法をもたらすことができる。図1に示されているビデオ画像捕捉装置10において、シャッタ22とタイミング発生器24とが協働して積分時間を決定する。全光強度と積分時間との組合せが、露光と称される。イメージセンサ18の感度及びノイズ特性と組み合わされた露光が、捕捉された画像にて生じる信号対ノイズ比を決定する。等価な露光が、光強度と積分時間との様々な組合せにより達成されることができる。露光が等価であっても、光強度と積分時間とによる特定の露光の組合せが、シーンの画像を捕捉するためのその他の等価な露光よりも好ましい場合があり、これは、シーンの特性又は関連する信号対ノイズ比に基づく。図1は、多数の露光制御要素を示しているが、幾つかの実施形態は、これらの要素の1以上を含まない場合があり、或いは、露光を制御するための別の機構があってもよい。ビデオ画像捕捉装置10は、図示されているものとは異なる特徴物を有することもできる。例えば、ダイヤフラムとしても機能するシャッタが、当業者に広く知られている。図示されているビデオ画像捕捉装置10において、フィルタアセンブリ26及びアパーチャ28は、イメージセンサ18における光強度を調整する。各々が調節可能であり得る。アパーチャ28は、イメージセンサ18に到達する光の強度を、光路20における光を遮断するための機械的ダイヤフラム又は調節可能なアパーチャ図示せずを用いて制御する。アパーチャの寸法は、連続的に調節可能であっても、段階的に変更されても、或いは、他の方法で変更されてもよい。或いは、アパーチャ28は、光路20の内外に移動されることができる。フィルタアセンブリ26も同様に変更されることができる。例えば、フィルタアセンブリ26は、回転されるか又はその他の方法で光路内に移動されることができる様々な中性密度フィルタのセットを含むことができる。その他の好適なフィルタアセンブリ及びアパーチャが当業者に公知である。ビデオ画像捕捉装置10は、撮影レンズ16を含む光学システム44を有し、光学システム44は、捕捉されるべき画像を操作者が構成することを補助するためのビューファインダの部品図示せずも含むことができる。光学システム44は、多くの異なる形態であり得る。例えば、撮影レンズ16が光学ビューファインダから完全に分離されていてもよく、或いは、画像捕捉の前後にプレビュー画像が連続的に示される内部ディスプレイ上に設けられたアイピースを有するデジタルビューファインダを含むこともできる。プレビュー画像は、典型的には、連続的に捕捉される、より低解像度の画像である。また、ビューファインダレンズユニットと撮影レンズ16とが、1以上の部品を共有することもできる。これら及びその他の光学システムの詳細は当業者に公知である。便宜上、以下に光学システム44を、オンカメラデジタルビューファインダディスプレイ76又は画像ディスプレイ48を有する一実施形態に関して概説する。画像ディスプレイ48は、シーンのプレビュー画像を、画像捕捉装置例えばデジタルビデオカメラによる捕捉の前に画像を構成するために一般的に行われているように見るために用いることができる。撮影レンズ16は、例えば単一の焦点距離及び手動焦点合わせ、又は固定焦点を有するような単純なものであってもよいが、これは好ましくはない。図1に示されているビデオ画像捕捉装置10において、撮影レンズ16は、レンズ要素又は複数のレンズ要素がズームコントロール50により他のレンズ要素に対して駆動される電動ズームレンズである。これは、レンズの有効焦点距離が変更されることを可能にする。デジタルズーム機能デジタル画像のデジタル拡大も、光学ズーム機能の代わりに、又は光学ズーム機能と組み合わせて用いられることができる。撮影レンズ16は、マクロクロースフォーカス性能をもたらすようにマクロコントロール52により光学路に差し込まれ又は光学路から取り外されることができるレンズ要素又はレンズ群図示せずも含むことができる。ビデオ画像捕捉装置10の撮影レンズ16は、オートフォーカス自動焦点式であってもよい。例えば、オートフォーカスシステムが、パッシブオートフォーカス又はアクティブオートフォーカス、或いはこれらの2つの組合せを用いて焦点合わせを行うことができる。図1を参照すると、撮影レンズ16の1以上のフォーカス要素別個には図示せずが、フォーカスコントロール54により、シーンにおける特定の距離からの光の焦点をイメージセンサ18上に合わせるために駆動される。オートフォーカスシステムは、様々なレンズフォーカス設定でプレビュー画像を捕捉することにより動作することができ、或いは、オートフォーカスシステムは、ビデオ画像捕捉装置10からシーンまでの距離に関する信号をシステムコントローラ66に送信する1以上の検出要素を有するレンジファインダ56を有することができる。システムコントローラ66は、プレビュー画像又はレンジファインダからの信号の焦点分析をし、次いで、フォーカスコントロール54を動作させて、撮影レンズ16の焦点合わせ可能な1又は複数のレンズ要素別個には図示せずを移動させる。オートフォーカス方式は当分野で公知である。ビデオ画像捕捉装置10は、シーンの明るさ輝度を測定するための手段を含む。輝度測定は、プレビュー画像の画素コード値を分析することにより、或いは、輝度センサ58の使用により行われことができる。図1にて、輝度センサ58は1以上の別個の部品として示されている。また、輝度センサ58は、電子画像捕捉ユニット14のハードウェア及びソフトウェアの論理機能として設けられることもできる。輝度センサ58は、シーンの光強度を示す1以上の信号を提供するために用いられることができ、これらの信号は、1以上のイメージセンサ18のための露光設定の選択に用いられる。オプションとして、輝度センサ58からの信号は、カラーバランス情報を提供することもできる。シーン照明及び色値の一方又は両方を提供するために用いられることができ、且つ、電子画像捕捉ユニット14から分離されている適切な輝度センサ58の例が、米国特許第4,887,121号に開示されている。露光は自動露光制御により決定されることができる。自動露光制御は、システムコントローラ66内で実行されることができ、また、当分野で公知の自動露光制御から選択されることができ、この一例が、米国特許第5,335,041号に開示されている。画像化されるべきシーンの明るさ測定値輝度センサ58により提供され、又は、プレビュー画像内の画素値から得られる測定値により提供されるに基づいて、電子画像形成システムは、典型的に、自動露光制御処理を用いて、有効な輝度及び良好な信号対ノイズ比を有する画像を生じる有効な露光時間teを決定する。本発明において、自動露光制御により決定される露光時間teは、プレビュー画像の捕捉のために用いられ、次いで、アーカイバル保存用画像の捕捉のために、シーンの明るさ、及び、予測される運動ぼやけに基づいて変更され得る。アーカイバル画像は、捕捉状態露光時間を含むが本発明の方法に基づいて画定された後に捕捉された最終画像である。当業者には、露光時間が短いほど、アーカイバル画像において運動ぼやけが少なくなり、ノイズがより多く生じることが理解されよう。図1に示したビデオ画像捕捉装置10は、電子制御フラッシュ61例えばキセノン閃光管又はLEDを有するフラッシュユニット60を任意に含む。一般に、フラッシュユニット60は、ビデオ画像捕捉装置10が静止画像を捕捉するために用いられるときにのみ用いられるであろう。フラッシュセンサ62は任意に設けられることができ、アーカイバル画像の捕捉中にシーンから検知された光に応答して、或いは、アーカイバル画像捕捉より前のプレフラッシュにより信号を出力する。フラッシュセンサ信号は、専用のフラッシュコントロール63により、又は、コントロールユニット65の一機能として、フラッシュユニットの出力の制御に用いられる。或いは、フラッシュ出力は、一定であっても、又は、その他の情報例えば焦点距離に基づいて変更されてもよい。フラッシュセンサ62と輝度センサ58の機能を組み合わせて、捕捉ユニット及びコントロールユニットの単一の部品又は論理機能にすることもできる。イメージセンサ18は、撮影レンズ16により提供されるシーンの画像を受けて、この画像をアナログ電子画像に変換する。電子イメージセンサ18はイメージセンサドライバにより動作される。イメージセンサ18は、様々なビニング配列を含む様々な捕捉モードで動作されることができる。ビニング配列は、光電的に発生された電荷を画素が個々に集め、それにより捕捉中に最大解像度で動作するか、或いは、隣接する画素が電気的に接続され、それにより、捕捉中により低い解像度で動作するかを決定する。ビニング比は、捕捉中に互いに電気接続される画素の個数を示す。ビニング比がより高いことは、より多くの画素が捕捉中に互いに電気接続され、それに対応して、ビニングされた画素の感度が増大し、且つ、イメージセンサの解像度が低減することを示す。典型的なビニング比は、例えば、2×2、3×3、6×6、及び9×9である。所定のビニングパターンで互いにビニングされた隣り合う画素の分布を変更することもできる。典型的には、類似の色の隣り合う画素が互いにビニングされて、イメージセンサにより提供される色情報の一貫性を維持する。本発明は、その他のタイプのビニングパターンを有する画像捕捉装置にも同様に適用されることができる。コントロールユニット65は、露光調整要素及びその他のカメラ部品を制御又は調節し、画像及びその他の信号の転送を容易にし、且つ、画像に関する処理を実行する。図1に示されているコントロールユニット65は、システムコントローラ66、タイミング発生器24、アナログ信号プロセッサ68、アナログ-デジタルA/D変換器80、デジタル信号プロセッサ70、並びに、様々なメモリDSPメモリ72a、システムメモリ72b、メモリカード72cメモリカードインタフェース83とソケット82を含む、及びプログラムメモリ72dを含む。コントロールユニット65の要素のための好適な部品は当業者に公知である。これらの部品は、以上に列挙したように、又は、単一の物理的デバイスにより、若しくは、より多数の別々の部品により設けられることができる。システムコントローラ66は、適切に構成されたマイクロコンピュータの形態、例えば、データ処理及び一般的なプログラム実行のためのRAMを有する内蔵マイクロプロセッサであり得る。コントロールユニット65の変更例が実際にあり、例えば、本明細書にて他の箇所に記載するようなユニットである。タイミング発生器24は、タイミング関係にある全ての電子部品に制御信号を供給する。個々のビデオ画像捕捉装置10のための較正値が較正メモリ別個に図示せず、例えばEEPROMに記憶され、システムコントローラ66に供給される。ユーザインタフェースの部品後述するがコントロールユニット65に接続されており、システムコントローラ66にて実行されるソフトウェアプログラムの組合せを用いることにより機能する。また、コントロールユニット65は、様々な制御部ズームコントロール50、フォーカスコントロール54、マクロコントロール52、ディスプレイコントローラ64を含むとこれらに関連するドライバ及びメモリを動作させ、また、シャッタ22、アパーチャ28、フィルタアセンブリ26、ビューファインダディスプレイ76及びステータスディスプレイ74のためのその他の制御部図示せずを動作させる。ビデオ画像捕捉装置10は、捕捉された画像情報又は捕捉前情報に対する補足的情報を提供するためのその他の部品を含むことができる。このような補足的情報を提供する部品の例は、図1に示されている方位センサ78及び位置センサ79である。方位センサ78は、ビデオ画像捕捉装置10がランドスケープモード又はポートレートモードのいずれに向けられているかを検知するために用いられることができる。位置センサ79は、ビデオ画像捕捉装置10の位置を検知するために用いられることができる。例えば、位置センサ79は、カメラの位置の移動を検知するための1以上の加速度計を含むことができる。或いは、位置センサ79は、地理的絶対位置を求めるために全地球測位システムグローバルポジショニングシステム衛星からの信号を受信するGPSレシーバであり得る。補足的情報を提供するための部品のその他の例は、リアルタイムクロック、慣性位置測定センサ、及び、ユーザキャプション又はその他の情報の入力のためのデータエントリデバイス例えば、キーパッド又はタッチスクリーンである。本件にて図示され且つ説明される回路が、当業者に公知の様々な方法で変更され得ることが理解されよう。また、物理的回路に関して本文中に記載される様々な特徴物が、これらとは異なるように、ファームウェア機能又はソフトウェア機能として、或いはこれらの2つの機能の組合せとして提供されることができることも理解されよう。同様に、本明細書にて別々のユニットとして示されている部品が、好都合に組み合わされ又は共有されることもできる。複数の部品を、分散された場所に設けることもできる。イメージセンサ18からの最初の電子画像は、増幅され、アナログ信号プロセッサ68及びA/D変換器80によりアナログからデジタルに変換されて、デジタル電子画像にされる。次いで、このデジタル電子画像は、デジタル信号プロセッサ70にてDSPメモリ72aを用いて処理され、システムメモリ72b又はリムーバブル着脱可能なメモリカード72cに保存される。データバス81として示されている信号線が、イメージセンサ18、システムコントローラ66、デジタル信号プロセッサ70、画像ディスプレイ48、及びその他の電子部品を電子的に接続し、また、アドレス及びデータ信号のための経路を提供する。メモリは、半導体メモリ又は磁気メモリなどとして提供される物理的メモリから成る、適切なサイズの1以上の論理ユニットのことである。DSPメモリ72a、システムメモリ72b、メモリカード72c及びプログラムメモリ72は、各々、任意のタイプのランダムアクセスメモリであってよい。例えば、メモリは、内蔵メモリ例えばフラッシュEPROMメモリであっても、若しくは、着脱可能なリムーバブルメモリ例えばコンパクトフラッシュ登録商標カードであっても、又は、これらの両方の組合せであってもよい。着脱可能なメモリカード72cを、アーカイバル画像の保存のために設けてもよい。着脱可能なメモリカード72cは、ソケット82に差し込まれ、メモリカードインタフェース83を介してシステムコントローラ66に接続される任意のタイプのカードであってよく、例えばコンパクトフラッシュCF登録商標又はセキュアデジタルSDタイプのカードである。使用されるその他のタイプの記憶手段は、限定はしないが、PCカード又はマルチメディアカードMMCを含む。コントロールユニット65、システムコントローラ66及びデジタル信号プロセッサ70は、画像保存のために用いられるメモリと同一の物理的メモリに格納されているソフトウェアにより制御されることもできるが、コントロールユニット65、デジタル信号プロセッサ70及びシステムコントローラ66が、専用のプログラムメモリ72d例えばROM又はEPROMファームウェアメモリに格納されているファームウェアにより制御されることが好ましい。その他の機能を補助するために別個の専用のメモリユニットも設けることができる。捕捉された画像が保存されるメモリは、ビデオ画像捕捉装置10内に取り付けられても、又は、着脱可能であっても、或いは、これらの両方の組合せであってもよい。用いられるメモリのタイプ及び情報記憶の方法例えば、光学式、磁気式、又は電子式は、本発明の機能にとって重要ではない。例えば、着脱可能なメモリは、フロッピーディスク登録商標、CD、DVD、テープカセット、又は、フラッシュメモリカード若しくはメモリスティックであってよい。着脱可能なメモリは、画像記録を、ビデオ画像捕捉装置10に又はビデオ画像捕捉装置10からデジタル形式で送信するために用いられることができ、或いは、これらの画像記録は、電子信号として、例えば、インタフェースケーブル又はワイヤレス接続を介して送信されることもできる。システムコントローラ66に加え、この実施形態における2つのプロセッサ又はコントローラの一方が、デジタル信号プロセッサ70である。このようにカメラ機能制御を複数のコントローラ及びプロセッサ間で分担することは一般的であるが、これらのコントローラ又はプロセッサを、カメラの機能動作及び本発明の適用に影響を与えずに様々な方法で組み合わせることもできる。これらのコントローラ又はプロセッサは、1以上のデジタル信号プロセッサ装置、マイクロコントローラ、プログラム可能な論理デバイス、又はその他のデジタル論理回路を含むことができる。このようなコントローラ又はプロセッサの組合せを記載してきたが、1つのコントローラ又はプロセッサが、要求される機能の全てを実行可能であることが理解されよう。これらの変型例の全てが同一の機能を実行することができる。例示された実施形態において、コントロールユニット65及びデジタル信号プロセッサ70は、DSPメモリ72a中のデジタル画像データを、プログラムメモリ72dに永久的に記憶され且つ画像捕捉中の実行のためにシステムメモリ72bにコピーされたソフトウェアプログラムに従って処理する。コントロールユニット65及びデジタル信号プロセッサ70は、画像処理を実行するために必要なソフトウェアを実行する。また、デジタル画像は、デジタル画像の画質を向上させるために、他の画像捕捉装置例えばデジタルカメラでの方法と同じ方法で修正されることもできる。例えば、デジタル画像は、補間及びエッジ強調エンハンスメントを行うために信号プロセッサ70により処理されることができる。電子アーカイバル画像のデジタル処理は、ファイル転送に関する変更、例えばJPEG圧縮、及びファイルフォーマットを含むことができる。また、メタデータもデジタル画像データに、当業者に公知の方法で与えられることができる。システムコントローラ66は、フラッシュEEPROM又はその他の不揮発性メモリを含むことができるプログラムメモリ72dに記憶されたソフトウェアプログラムに基づいて画像捕捉装置の全体動作を制御する。このメモリは、また、画像捕捉装置の電源が切られたときに保存されなければならない較正データ、ユーザ設定の選択、及びその他のデータを記憶させるためにも用いられることができる。システムコントローラ66は、画像捕捉のシーケンスを制御する。これは、マクロコントロール52、フラッシュコントロール63、フォーカスコントロール54、ズームコントロール50、及び、先に記載した捕捉ユニット部品のその他のドライバに命令を送ること、タイミング発生器24に、イメージセンサ18及び関連する要素を動作させるように命令を送ること、及び、コントロールユニット65及びデジタル信号プロセッサ70に、捕捉された画像データを処理するように命令を送ることにより行われる。画像が捕捉されて処理された後、システムメモリ72b又はDSPメモリ72aの中に記憶された最終画像ファイルは、ホストインタフェース84を介してホストコンピュータに転送され、着脱可能なメモリカード72c又はその他の記憶デバイスに記憶され、画像ディスプレイ48上でユーザに対して表示される。ホストインタフェース84は、画像データを表示、保存、操作又は印刷のために転送するため、パーソナルコンピュータ又はその他のホストコンピュータに高速接続する。このインタフェースは、IEEE1394又はUSB2.0シリアルインタフェースであっても、或いはその他の任意の適切なデジタルインタフェースであってもよい。この方法において、デジタル形式での画像の転送は、物理的媒体上でも、又は、送信された電子信号としても可能である。図示されているビデオ画像捕捉装置10において、処理された画像は、システムメモリ72b中のディスプレイバッファにコピーされ、そして、ビデオエンコーダ86を介して連続的に読み出されて、プレビュー画像のためのビデオ信号を生成する。この信号は、ディスプレイコントローラ64又はデジタル信号プロセッサ70により処理され、プレビュー画像としてオンカメラ画像ディスプレイ48上に表示されるか、又は、外部モニタで表示するためにビデオ画像捕捉装置10から直接出力されることができる。ビデオ画像は、ビデオ画像捕捉装置10がビデオ捕捉のために用いられる場合にはアーカイバルであり、保存用静止画像捕捉前のビューファインディング又は画像構成のためのプレビュー画像として用いられる場合には非アーカイバルである。ビデオ画像捕捉装置10は、操作者に出力を提供し且つ操作者の入力を受け入れるユーザインタフェースを有する。ユーザインタフェースは、1以上のユーザ入力コントロール93及び画像ディスプレイ48を含む。ユーザ入力コントロール93は、ボタン、ロッカースイッチ、ジョイスティック、回転ダイヤル、タッチスクリーンなどの組合せの形態で設けられることができる。ユーザ入力コントロール93は、画像捕捉撮影ボタン、レンズユニットのズーミングを制御するズームイン/アウトコントロール、及びその他のユーザコントロールを含む。ユーザインタフェースは、カメラ情報例えば露光レベル、露光残り、電池の状態、フラッシュの状態などを操作者に提示するための1以上のディスプレイ又はインジケータを含む。その代わりに、又はこれに加えて、画像ディスプレイ48が、画像に関係のない情報例えばカメラ設定を表示するために用いられることもできる。例えば、グラフィカルユーザインタフェースGUIを設けることができ、このGUIが、オプション選択、及び、捕捉された画像を確認するためのレビューモードを提示するメニューを含む。画像ディスプレイ48とデジタルビューファインダディスプレイ76とが共に同一の機能を果たすこともでき、これらのうちの一方又は他方を設けないことも可能である。ビデオ画像捕捉装置10は、ビデオ捕捉に関する音声情報を提供するスピーカを含むことができ、スピーカは、視覚的警告ステータスディスプレイ74、画像ディスプレイ48又はこれらの両方に表示されるの代わりに、又は、これに加えて、音声警告を提供することができる。ユーザインタフェースの部品はコントロールユニットに接続されており、システムコントローラ66にて実行されるソフトウェアプログラムの組合せを用いることにより機能する。電子画像は、最終的に、ディスプレイコントローラ64により動作される画像ディスプレイ48に送信される。様々なタイプの画像ディスプレイ48を用いることができる。例えば、画像ディスプレイ48は、液晶ディスプレイLCD、ブラウン管ディスプレイ、又は、有機ELディスプレイOLEDであり得る。画像ディスプレイ48は、好ましくは、撮影者が容易に見ることができるようにカメラ本体上に取り付けられる。画像を画像ディスプレイ48に表示することの一部として、ビデオ画像捕捉装置10は、画像を特定のディスプレイに合わせて較正するように修正することができる。例えば、各画像を、画像ディスプレイ48のグレースケール、色域、及びホワイトポイント、並びに、イメージセンサ18、及び、電子画像捕捉ユニット14のその他の部品に関する様々な性能に適合するように修正する変換を行うことができる。画像ディスプレイ48が、画像全体が示されるように選択されることが好ましい。しかし、より制限されたディスプレイを用いることもできる。後者の場合、画像の表示は、画像の一部、又は、コントラストレベル、若しくは画像の情報の他の何らかの部分を取り除く較正ステップを含む。また、本明細書に記載されるビデオ画像捕捉装置10が、特許請求の範囲により画定される以外には、特定の特徴群に限定されないことも理解されよう。例えば、ビデオ画像捕捉装置10は、専用のビデオカメラであっても、また、ビデオシーケンスを捕捉することができる、本明細書にて詳述しない様々な特徴物例えば、着脱可能で交換可能なレンズのいずれをも含み得るデジタルカメラであってもよい。また、ビデオ画像捕捉装置10は、持ち運び可能であっても、或いは、所定位置に固定されてもよく、また、画像形成に関連する、又は関連しない1以上のその他の機能を有することもできる。例えば、ビデオ画像捕捉装置10は携帯電話のカメラであってよく、或いは、その他の何らかの方法で通信機能を提供することができる。同様に、ビデオ画像捕捉装置10は、コンピュータハードウェア及びコンピュータ制御機器を含むことができる。また、ビデオ画像捕捉装置10は、複数の電子画像捕捉ユニット14を含むことができる。図2Aは、ビデオ画像捕捉装置210及びこの装置に関連する視野215を示す。視野215内に、3つの物体ピラミッド状の物体220、ボール状の物体230、及び、矩形ブロック状の物体240が配置されている。これらの物体は、画像捕捉装置から異なる距離に配置されている。図2Bは、図2Aに示したビデオ画像捕捉装置210により捕捉された視野215の捕捉された画像フレーム250を示す図である。ピラミッド状物体の位置260、ボール状物体の位置270、及び、矩形ブロック状物体の位置280は、それぞれ、図2Aに見られた視野215内のピラミッド状物体220、ボール状物体230、及び矩形ブロック状物体240の位置を示す。図3A及び図4Aは、ビデオ画像捕捉装置210が個々の捕捉撮像の間に移動するときに視野215がどのように変化するかを示す。図3Aは、ビデオ画像捕捉装置210の捕捉間の水平方向移動dに関する視野の変化に対応している捕捉された画像フレーム350を示す図である。この場合、視野215は視野315に変化し、それにより、新しい物体位置ピラミッド状物体の位置360、ボール状物体の位置370、及び、矩形ブロック状物体の位置380を、捕捉された画像フレーム350内にもたらす。視野がシーン内に角度境界を有するため、物体ピラミッド状物体220、ボール状物体230、及び矩形ブロック状物体240の相対位置は視野内で全て水平方向に同一距離移動されるが、捕捉された画像における物体の位置の変化は、ビデオ画像捕捉装置210からの物体の距離により影響を受ける。その結果、図2Bを図3Bと比較することにより、捕捉された画像における物体の位置が画像捕捉装置の水平方向移動に関してどのように変化するかが示される。物体位置の変化視差として知られているをより明確に視覚化するために、図5Aは、図2Bに示した捕捉された画像フレーム250と、図3Bに示した捕捉された画像フレーム350との画像重ね合わせ550を示す。ピラミッド状物体220はビデオ画像捕捉装置210に最も近いため、ピラミッド状物体の視差555は大きい。矩形ブロック状物体240はビデオ画像捕捉装置210から最も遠いため、矩形ブロック状物体の視差565は小さい。ボール状物体230はビデオ画像捕捉装置210から中程度の距離にあるため、ボール状物体230の視差560は中程度の大きさである。図4Aは、ビデオ画像捕捉装置210の捕捉間の回転運動rに関する視野の変化に対応している捕捉された画像フレーム450の図である。ビデオ画像捕捉装置210のこの回転運動に対して視野215は視野415に変化する。この場合、物体は全て同一角度量だけ移動し、これは、捕捉された画像フレーム内に、全ての物体の画像を横切る水平方向移動として現れる。図2Bを図4Bと比較すると、物体がピラミッド状物体の位置460、ボール状物体の位置470、及び、矩形ブロック状物体の位置480に移動していることが分かる。物体位置の変化をより明確に視覚化するために、図5Bは、図2Bに示した捕捉された画像フレーム250と、図4Bに示した捕捉された画像フレーム450との画像重ね合わせ580を示す。この場合、ピラミッド状物体220はピラミッド状物体の視差585を有し、矩形ブロック状物体240は矩形ブロック状物体の視差595を有し、ボール状物体230はボール状物体の視差590を有し、これらの視差の大きさは全てほぼ等しい。見る人の左眼と右眼とに、異なる視点を有する画像を提示することにより奥行きの知覚をつくり出すことは、当業者によく知られている。見る人にステレオペア画像を同時に又は別の方法で提示する様々な方法が利用可能であり、当分野にてよく知られており、これらは、偏光ベースのディスプレイ、レンチキュラーディスプレイ、バリアディスプレイ、シャッターガラスベースのディスプレイ、アナグリフディスプレイ、及びその他のディスプレイを含む。本発明により形成される、知覚される奥行きを有するビデオは、これらのタイプの立体ディスプレイのいずれにおいても表示することができる。幾つかの実施形態において、ビデオ画像捕捉装置は、知覚される奥行きを有するビデオをビデオ画像捕捉装置にて直接見るための手段を含むことができる。例えば、知覚される奥行きを有するビデオを直接見ることを可能にするために、レンチキュラーアレイを画像ディスプレイ48図1の上に配置することができる。次いで、当分野で周知のように、ステレオ画像ペアにおける左右画像列をレンチキュラーアレイの後ろに挟んで表示することができ、これにより、左右のステレオ画像が、見る人の左眼及び右眼にそれぞれレンチキュラーアレイにより向けられ、それにより立体画像を見ることができる。別の実施形態において、ステレオ画像ペアは、画像ディスプレイ48での直接表示のためにアナグリフ画像として符号化することができる。この場合、ユーザは、知覚される奥行きを有するビデオを、左右の眼のための補色フィルタを有するアナグリフ眼鏡を用いて直接見ることができる。本発明は、ステレオペアから成る知覚される奥行きを有するビデオを、単一視覚のビデオ画像捕捉装置210により捕捉されたビデオシーケンスからステレオペアを選択することにより生成するための方法を提供する。この方法の特徴は、ステレオペアごとに、そのステレオペア内のビデオ画像が、捕捉されたビデオシーケンス内のいくつかのビデオ画像により互いに離隔されるように、選択され、これにより、知覚される奥行きを与えるための所望の視点差をもたらすようにしていることである。ステレオペア内のビデオ画像同士の間にあるビデオ画像の個数をフレームオフセットと称する。本発明によりステレオペアのためのビデオ画像を選択する場合、画像捕捉装置の移動が考慮される。これは、所望の知覚される奥行きをステレオペアにてもたらすようなビデオ画像間の視点の変化をもたらすために適切なフレームオフセットを判定するためである。図3Aに示されているような、ビデオ捕捉中のビデオ画像捕捉装置210の水平方向移動が奥行きの知覚をもたらすことになり、この奥行き知覚は、水平方向移動d又はステレオペア内のビデオ画像同士の間のベースラインが増大されるフレームオフセットを増大することによるときに増大する。このシナリオにおいて、視野内の異なる物体に関する知覚される奥行きは、物体のビデオ画像捕捉装置210からの実際の距離に相応するであろう。なぜなら、画像捕捉装置により近い物体が、ビデオ画像捕捉装置210からより遠い物体よりも大きい視差を示すからである。視差は、ステレオ不一致又はパララックスと称される場合もある。ビデオ画像間の水平方向移動に関する距離によるこのような視差のばらつきが図5Aに示されている。これとは対照的に、図4Aに示したように画像捕捉装置をビデオ捕捉中に回転移動させる場合、もたらされる知覚される奥行きは、画像捕捉装置からの物体の実際の距離に相応しないものとなろう。なぜなら、画像捕捉装置の純粋な回転移動は、シーン上の新しい視点をもたらさないからである。むしろ、この回転移動は、異なる視野をもたらすだけである。その結果、ビデオ画像捕捉装置210により近い物体が、ビデオ画像捕捉装置210からより遠い位置の物体と同じ視差をステレオペアにてもたらすことになる。この効果は、図2Bに示した捕捉された画像フレーム250と、図4Bに示した捕捉された画像フレーム450との画像重ね合わせ580を示す図5Bに見られる。上述のように、異なる物体の視差は、画像捕捉装置のこの回転移動に対して同一である。シーンにおける全ての物体が同一の視差を有するため、画像捕捉装置の回転移動によるフレームオフセットを有するビデオ画像から成るステレオペアは、知覚される奥行きを示さない。ビデオ画像の捕捉間での画像捕捉装置の垂直方向移動は、奥行き知覚を与えるであろうステレオペアの視差を生じない。この効果は、見る人の眼が水平方向に離れているという事実による。垂直方向の視差を含むステレオ画像ペアは、見るのが快適でなく、従って、避けられるであろう。幾つかの実施形態において、知覚される奥行きを有するビデオを、単一の視点を有するビデオ画像捕捉装置により捕捉されたビデオから生成する場合、シーン内の物体の局所運動も考慮される。なぜなら、ステレオペアにおける異なるビデオ画像は、異なる時点で捕捉されていたであろうからである。幾つかの場合において、局所運動は、シーン内の物体に、画像捕捉装置の移動に類似した異なる視点をもたらし、これにより、局所運動が生じているビデオ画像から成るステレオペアが、奥行きの知覚をもたらすことができる。これは、水平方向に生じる局所運動に関して特にあてはまることである。本発明は、知覚される奥行きを有するビデオのためのビデオ画像のステレオペアを形成するために、捕捉された単一視点のビデオ内でビデオ画像を選択するための方法を提供する。この方法は、単一視点のビデオの捕捉中の画像捕捉装置に関する動作追跡情報を収集し、それにより、画像捕捉装置の相対位置を各ビデオ画像に関して求めること、そしてまた、捕捉後のビデオ画像の分析によりビデオ画像間の運動を識別することを含む。画像捕捉装置に関する動作追跡情報、及び、捕捉後のビデオ画像の分析を用いることにより、水平方向運動、垂直方向運動、回転運動、局所運動、及びこれらの運動の組合せを含む様々な運動タイプを識別することができる。また、運動の速度も求めることができる。本発明は、識別された運動タイプ及び運動の速度を利用し、それにより、知覚される奥行きを有するビデオを生成する、ステレオペアにおけるビデオ画像間のフレームオフセットを選択する。ビデオ捕捉中のビデオ画像捕捉装置210の一定の水平方向移動速度の最も簡単な場合、ステレオペアのためのビデオ画像の選択において一定のフレームオフセットを用いることができる。例えば、ステレオペアのために選択されるビデオフレームの間に20mmのベースラインを設けるために、ビデオ画像捕捉装置210が20mmの距離移動したところのビデオフレームが識別されるベースラインは、ステレオペアのためのカメラ位置間の水平方向のオフセットである。100mm/秒の水平方向速度で移動している画像捕捉装置により30フレーム/秒で捕捉されたビデオにおいて、約20mmのベースラインを設けるためには、フレームオフセットは6フレームとなろう。ビデオ画像捕捉装置210の水平方向移動速度がビデオ捕捉中に変化している場合、フレームオフセットは、ステレオペアに一定のベースラインを設けるために、移動速度の変化に対応して変更される。例えば、移動速度が50mm/秒に低減する場合、フレームオフセットは12フレームに増やされ、反対に、移動速度が200mm/秒に増大する場合、フレームオフセットは3フレームに減らされる。或る実施形態において、ベースラインは、自然な見え方のステレオ画像を提供するために、人間の観察者の両眼間の通常の距離に対応するように設定されることができる。その他の実施形態において、ベースライン値は、所望の程度の知覚される奥行きをもたらすようにユーザにより選択されることができる。より大きいベースラインの値は、より大きい知覚される奥行をもたらし、より小さいベースラインの値は、より小さい知覚される奥行をもたらす。ビデオ画像捕捉装置210を純粋に垂直方向移動させる場合、ステレオペアのためのビデオ画像の選択において、一般に、小さいフレームオフセットが用いられるべきである又はフレームオフセットは全く行われない。なぜなら、垂直方向の視差は奥行きとして知覚されないであろうし、垂直方向の視差により生成されるステレオペアは見るのが快適でないからである。この場合、フレームオフセットは、例えば、ゼロフレーム~2フレームである。フレームオフセットがゼロとは、ステレオペアにおけるビデオ画像の両方に同一のビデオ画像が用いられ、ステレオペアは、知覚される奥行きを見る人に全くもたらさずに、より快適に見られることを意味する。ビデオ画像捕捉装置210を純粋に回転移動させる場合、回転方向の視差は奥行きとして知覚されないであろうから、垂直方向の移動の場合と同様の理由により、一般に、小さいフレームオフセットが用いられるべきである。この場合、フレームオフセットは、例えば、ゼロフレーム~2フレームである。局所運動が存在する場合、フレームオフセットは、画像捕捉装置の運動追跡により求められる全体運動グローバル運動、局所運動のみ、又は、全体運動と局所運動との組合せに基づいて選択されることができる。いずれの場合においても、局所運動の水平方向速度が増大すると、フレームオフセットは、一定の水平方向移動速度の場合に関して先に述べたように低減される。同様に、局所運動が主に垂直方向運動又は回転運動から構成される場合にも、フレームオフセットは低減される。本発明は、ビデオ画像間の水平方向移動及び垂直方向移動を識別するために、ビデオ画像捕捉装置210の運動追跡情報を用いる。幾つかの実施形態において、運動追跡情報は、位置センサを用いてビデオと共に捕捉される。例えば、この運動追跡情報は、加速度計により収集されることができ、このデータは加速に関して提供され、時間積分により速度及び位置に変換される。別の実施形態において、運動追跡情報は、ビデオ画像捕捉装置210の運動を推定するために、捕捉されたビデオフレームを分析することにより求めてもよい。ビデオ捕捉中の画像捕捉装置の回転移動は、ジャイロスコープを用いて収集された運動追跡情報から、或いは、ビデオ画像の分析により求めてもよい。ジャイロスコープは、画像捕捉装置の回転速度情報を角速度に関して直接提供することができる。画像捕捉装置の回転移動を求めるためにビデオ画像を分析する場合には、ビデオ画像中の物体の相対位置を求めるために連続的なビデオ画像が互いに比較される。物体位置の変化を、フレームレートから求められるビデオ画像の捕捉動作同士の間の時間により因数分解することにより、ビデオ画像中の物体の相対位置は画像移動速度単位は画素/秒に変換される。ビデオ画像中の異なる物体に対して画像移動速度が均一であることが、回転移動を示す証拠である。連続ビデオ画像における物体位置の比較によるビデオ画像の分析を、ビデオ画像捕捉装置210の局所運動、水平方向移動又は垂直方向移動を求めるためにも用いることができる。これらの場合、ビデオ画像間の物体の移動は非均一である。物体の局所運動の場合、例えば、人々がシーンを通って移動すると、物体は様々な方向に移動することになり、画像移動速度は様々に異なる。ビデオ画像捕捉装置210の水平方向移動又は垂直方向移動の場合、物体は、同一方向に、且つ、物体がビデオ画像捕捉装置210からどれだけ遠いかに依る様々な画像移動速度で移動するであろう。表1は、運動追跡情報とビデオ画像の分析との組合せから識別される運動タイプ、及び、その結果の、本発明の実施形態により提供されるステレオペアのためのフレームオフセットを求めるために用いられる技術の概要である。表1の情報から理解されるように、運動追跡情報とビデオ画像の分析は両方共、ビデオ捕捉中に生じ得る、又はシーン内に存在し得る様々なタイプの移動及び運動を区別することを可能にするのに有用である。幾つかの実施形態において、ビデオ画像捕捉装置210が、位置センサ、例えば加速度計を含まない場合がある。この場合、画像分析は、フレームオフセットを選択するための有用な情報を提供することはまだ可能であるが、様々なタイプのカメラ運動を区別できない場合もある。一般に、カメラの運動のタイプが非常に曖昧である場合には、小さいフレームオフセットを用いることが、ユーザにとって快適でない見え方を回避するために好ましいであろう。図6Aは、知覚される奥行きを有するビデオを本発明の一実施形態に従って形成する方法のフローチャートである。ベースラインを選択するステップ610において、所望の程度の奥行き知覚をステレオペアにてもたらすベースライン615がユーザにより選択される。ベースライン615は、ステレオペアにおけるビデオ画像間の水平方向のオフセット距離の形態であり、又は、ステレオペアにおけるビデオ画像中の物体間の画素オフセットずれの形態である。ビデオを捕捉するステップ620において、一連のビデオ画像640が単一視点のビデオ画像捕捉装置により捕捉される。好ましい実施形態において、運動追跡情報625も、位置センサを用いて、ビデオ画像640と共に同期された形態で捕捉される。運動追跡情報を分析するステップ630において、運動追跡情報625は、ビデオ捕捉プロセス中のカメラ運動635を特徴付けるために分析される。幾つかの実施形態において、カメラ運動635は、ビデオ画像捕捉装置の移動のタイプ及び速度を示すものである。ビデオ画像を分析するステップ645において、ビデオ画像640は、シーン中の画像運動650を特徴付けるために分析され、且つ互いに比較される。画像運動650は、画像移動のタイプ及び画像移動速度を示すものであり、画像のグローバル全体的運動及び画像の局所運動を含み得る。ビデオ画像の比較は、ビデオ画像中の対応する物体の相対位置をピクセルバイピクセルベース画素同士の比較で、又はブロックバイブロックベースブロック同士の比較で相関させることにより行うことができる。ピクセルバイピクセル相関は、より正確な画像移動速度を提供するが、処理が遅く、且つ高度の計算能力を要求する。ブロックバイブロック相関は、移動速度の測定の正確性がより低いが、要求される計算能力がより低く、且つ処理がより速い。また、画像移動の移動タイプ及び速度を求めるためにビデオ画像を比較する非常に効率的な方法は、MPEGビデオ符号化スキームに関する計算を利用することによっても行うことができる。MPEGは、圧縮ビデオデータを符号化するための一般的な規格であり、Iフレーム、Pフレーム、Bフレームの使用に依存する。Iフレームは、イントラ符号化フレーム内符号化されており、すなわち、その他のフレームを全く参照せずに再構築されることができる。Pフレームは、直前のIフレーム又はPフレームから順方向予測され、すなわち、Pフレームを、別のフレームIフレーム又はPフレームのデータなしで再構築することは不可能である。Bフレームには、直前の/次のIフレーム又はPフレームから順方向予測及び逆方向予測の両方が行われ、すなわち、Bフレームを再構築するためにはその他の2つのフレームが必要である。Pフレーム及びBフレームはインターフレーム間符号化フレームと称される。図9は、MPEG符号化されたフレームシーケンスの一例を示す。Pフレーム及びBフレームは、これらのフレームに関連するブロック運動ベクトルを有し、これが、MPEGデコーダがフレームを、Iフレームを開始点として用いて再構築することを可能にする。MPEG-1及びMPEG-2において、これらのブロック運動ベクトルは、16×16画素ブロックマクロブロックと称するごとに算出され、水平方向及び垂直方向の運動成分として示される。マクロブロック内の運動が相反する場合には、Pフレーム及びBフレームが、ブロック運動ベクトルの代わりに実際のシーン内容をイントラ符号化することもできる。MPEG-4において、マクロブロックは様々なサイズであってよく、16×16画素に限定されない。好ましい実施形態において、MPEGのPフレーム及びBフレームに関連するブロック運動ベクトルは、ビデオシーケンス中の画像のグローバル運動及び画像の局所運動の両方を求めるために用いられることができる。画像グローバル運動は、典型的に、ビデオ画像捕捉装置210の運動に関連している。ビデオ画像捕捉装置210に関連する画像グローバル運動Pフレーム及びBフレームのいずれかにより求められ、或いは、運動追跡情報625により求められるをMPEG運動ベクトルから減算し、それにより、画像の局所運動を概算することができる。次いで、ステレオ画像ペアを、求められたカメラ運動635及び画像運動650に応答してベースライン614と共に形成するために、フレームオフセット決定ステップ655を用いてフレームオフセット660を求める。好ましい実施形態において、カメラ運動635及び画像運動650の運動タイプ及び運動速度が、表1と共に用いられ、これにより、捕捉されたビデオにおける各ビデオ画像のために用いられるべきフレームオフセットが求められる。例えば、位置センサから知られる運動カメラ運動635が水平方向運動に対応していると判定され、且つ、画像分析から知られる運動画像運動650が均一な水平方向運動であると判定される場合、カメラ運動タイプは水平方向であると結論付けられることができ、フレームオフセットは、位置センサにより検出された位置に基づいて求めることができる。或る実施形態において、フレームオフセットΔNfは、カメラの水平方向位置がベースライン615だけ移動されたところのフレームを識別することにより求められる。その他の実施形態において、水平方向速度Vxが、特定のフレームに関して求められ、それに従ってフレームオフセットが求められる。この場合、選択されるべきフレーム間の時間差Δtは、ベースラインΔxbから、以下の式、Δt=Δxb/Vx1により求めることができる。そして、フレームオフセットΔNfは、フレームレートRfから、以下の式、ΔNf=RfΔt=RfΔxb/Vx2を用いて求めることができることができる。次いで、知覚される奥行きを有するビデオ670が、知覚される奥行きを有するビデオを形成するステップ665を用いて形成される。知覚される奥行きを有するビデオ670は、一連のステレオビデオフレームを含み、これらのビデオフレームの各々がステレオ画像ペアから構成されている。次いで、ithi番目のステレオビデオフレームSiのためのステレオ画像ペアを形成することができ、これは、ithビデオフレームFiを、フレームオフセットFiΔNfだけ分離されたビデオフレームとペアにすることにより行われる。好ましくは、カメラが右側に移動している場合、ithフレームはステレオペアの左側の画像として用いられるべきであり、カメラが左側に移動している場合、ithフレームはステレオペアの右側の画像として用いられるべきである。次いで、知覚される奥行きを有するビデオ670は、ステレオデジタルビデオファイルに、当業者に公知の任意の方法で記憶することができる。そして、記憶された、知覚される奥行きを有するビデオ670は、ユーザにより、当分野で公知の任意のステレオ画像表示技術、例えば、先に概説したような技術例えば、左眼及び右眼のための直交偏光フィルタを有する眼鏡と組み合わせられる偏光ベースのディスプレイ、レンチキュラーディスプレイ、バリアディスプレイ、シャッターガラスベースのディスプレイ、及び、左眼及び右眼のための補色フィルタを有するメガネと組み合わせられるアナグリフディスプレイを用いて見ることができる。本発明の別の実施形態が、図6Bに示されている。この場合、フレームオフセット660は、図6Aに関して記載したステップと同一のステップを用いて求められる。しかし、この実施形態においては、知覚される奥行きを有するビデオ670を形成及び記憶するのではなく、ステレオペアのメタデータを有するビデオを記憶するステップ675が用いられて、知覚される奥行きを有するビデオを後で形成するための情報を記憶する。このステップは、捕捉されたビデオ画像640を、どのビデオフレームがステレオペアに用いられるべきかを示すメタデータと共に記憶し、ステレオペアメタデータを有するビデオ680を形成する。幾つかの実施形態において、ビデオと共に記憶されるステレオペアメタデータは、単に、各ビデオフレームのための求められたフレームオフセットである。特定のビデオフレームのためのフレームオフセットは、ビデオフレームに関連するメタデータタグとして記憶されることができる。或いは、フレームオフセットメタデータは、ビデオファイルに関連する別箇のメタデータファイルに記憶されることができる。知覚される奥行きを有するビデオを表示することが要求されると、フレームオフセットメタデータが用いられて、ステレオ画像ペアを形成するために用いられるべきもう一方のビデオフレームを識別することができる。別の実施形態において、ステレオペアメタデータは、フレームオフセットでなく、フレーム番号又はその他の適切なフレーム識別子であり得る。図6Bに示した方法は、図6Aの実施形態と比較して、知覚される奥行きを有する3D3次元ビデオを提供する性能を有しつつ、ビデオファイルのサイズを低減するという利点を有する。また、このビデオファイルを、従来の2次元ビデオディスプレイ上でも何らのフォーマット変換を行う必要もなく見ることができる。なぜなら、フレームオフセットの寸法が比較的小さく、フレームオフセットデータがメタデータと共に、捕捉されたビデオのために記憶されることができるからである。典型的には、運動追跡情報625図6Aを提供するために位置センサ79図1が用いられる。本発明の幾つかの実施形態において、位置センサ79は、着脱可能なメモリカードにより設けられることができ、このメモリカードは、1以上の加速度計又はジャイロスコープを立体化ステレオ変換ソフトウェアと共に含んで、位置情報又は運動追跡情報をビデオ画像捕捉装置210に提供する。この方法は、位置センサをオプショナルアクセサリとして設けることを可能にし、これにより、ビデオ画像捕捉装置210の基本コストを可能な限り低く維持し、尚且つ、ビデオ画像捕捉装置210が、知覚される奥行きを有するビデオを本発明の上述の実施形態に記載したように生成することを可能にする。着脱可能なメモリカードは、図1のメモリカード72cの代替として用いられることができる。幾つかの実施形態において、着脱可能なメモリカードは、位置センサとして機能するだけであり、位置データ又は他の何らかの形態の運動追跡情報をビデオ画像捕捉装置210内のプロセッサに提供する。その他の構成において、着脱可能なメモリカードは、また、プロセッサを、知覚される奥行きを有するビデオを形成するための適切なソフトウェアと共に含むことができる。図7は、運動追跡デバイスが内蔵された着脱可能なメモリカード710の図である。この用途に適した運動追跡デバイスは、STマイクロエレクトロニクス社から、3.0mm×5.0mm×0.9mmの寸法の3軸加速度計加速度センサ、及び、4.4mm×7.5mm×1.1mmの3軸ジャイロスコープの形態で入手可能である。図7は、着脱可能なSDメモリカード710、並びに、上記の3軸ジャイロスコープ720及び3軸加速度計730の相対寸法を示す。図8は、運動追跡デバイスが内蔵された着脱可能なメモリカード710のブロック図であり、メモリカード710は、知覚される奥行きを有するビデオ画像を形成するのに必要な部品をその内部に含む。図7に関して説明したように、着脱可能なメモリカード710は、運動追跡情報625を捕捉するジャイロスコープ720及び加速度計730を含む。1以上のアナログ-デジタルA/D変換器850が、ジャイロスコープ720及び加速度計730からの信号をデジタル化するために用いられる。運動追跡情報625は、知覚される奥行きを有するビデオ画像の形成に用いられるために、又はその他の用途のために、ビデオ画像捕捉装置210のプロセッサに任意に直接送信されることができる。ビデオ画像捕捉装置210により捕捉されたビデオ画像640は、運動追跡情報625と同期するようにメモリ860に記憶される。捕捉されたビデオ画像640の、知覚される奥行きを有するビデオ670を形成するための変換を、図6A又は図6Bに示したフローチャートのステップにより実行するための立体化変換ソフトウェア830も、メモリ860内に、或いは他の何らかの形態の記憶装置例えばASICに記憶されることができる。幾つかの実施形態において、メモリ860の一部は、着脱可能なメモリカード710とビデオ画像捕捉装置上のその他のメモリとの間で共有されることができる。幾つかの実施形態において、立体化変換ソフトウェア830は、知覚される奥行きを有するビデオを生成するための、及び、様々なオプション例えばベースライン615を特定するための様々なモード間での選択を行うためにユーザ入力870を受け入れる。一般に、ユーザ入力870は、図1に示したようなビデオ画像捕捉装置10のためのユーザ入力コントロール93を通して供給されることができる。立体化変換ソフトウェア830はプロセッサ840を用いて、記憶されたビデオ画像640及び運動追跡情報625を、知覚される奥行きを有するビデオ670を生成するために処理する。プロセッサ840は、着脱可能なメモリカード710の内部にあっても、或いは、ビデオ画像捕捉装置内にあるプロセッサであってもよい。知覚される奥行きを有するビデオ670はメモリ860に記憶されることができ、或いは、ビデオ画像捕捉装置又はホストコンピュータの他の何らかのメモリに記憶されることができる。幾つかの実施形態において、位置センサ79は、有線又は無線接続を用いてビデオ画像捕捉装置210と通信する外付けの位置検出アクセサリとして設けてもよい。例えば、この外付けの位置検出アクセサリは、USB又はブルートゥース接続を用いてビデオ画像捕捉装置210に接続されることができるGPSレシーバを含むドングルであり得る。外付けの位置検出アクセサリは、受信された信号を処理し、且つ、ビデオ画像捕捉装置210と通信するためのソフトウェアを含むことができる。また、この外付けの位置検出アクセサリは、立体化変換ソフトウェア830捕捉されたビデオ画像640の、知覚される奥行きを有するビデオ670を形成するための変換を、図6A又は図6Bのフローチャートのステップにより実行するも含むことができる。幾つかの実施形態において、視聴経験の改良をもたらすために、知覚される奥行きを有するビデオを形成するステップ665において、ステレオ画像ペアのビデオフレームの一方又は両方を調整するための画像処理を用いることができる。例えば、2つのビデオフレームが捕捉される間の時間にビデオ画像捕捉装置210が垂直方向に移動され又は傾けられたことが検出された場合、ビデオフレームの一方又は両方が垂直方向に移動され又は回転され、それにより、ビデオフレームがより良好に位置合わせされることができる。運動追跡情報625は、移動又は回転の適切な量を求めるために用いられることができる。移動及び回転がビデオフレーム加えられる場合、一般に、移動/回転された画像がフレームを満たすようにビデオフレームをトリミングすることが望ましいであろう。"