"被写体からの光を集光する撮影レンズと、前記集光された光を伝送して平行光とするリレーレンズと、前記平行光を透過および反射する半透過膜と、前記半透過膜によって透過または反射されることにより導かれた光を左右2つに分光するミラーと、前記分光された光をそれぞれ結像させる第1および第2の結像レンズと、前記第1および第2の結像レンズによって結像された光をそれぞれ電子信号による視差検出画像に変換する第1および第2の撮像素子と、前記半透過膜によって反射または透過された光のうち前記ミラーに導かれなかった光を結像させる第3の結像レンズと、前記第3の結像レンズによって結像された光を電子信号による基本画像に変換する第3の撮像素子とを具備する撮像装置。前記基本画像と前記視差検出画像のそれぞれとを比較することにより前記視差検出画像のそれぞれと同じ視点の視差画像を前記基本画像に基づいて生成する視差画像生成部をさらに具備する請求項1記載の撮像装置。前記視差画像生成部は、前記基本画像と前記視差検出画像のそれぞれとを比較して互いに対応する画素を探索する対応画素探索部と、前記探索結果に基づいて前記基本画像の画素を前記視差検出画像において対応する画素の位置へ移動することにより前記視差画像を生成する画素移動部とを備える請求項2記載の撮像装置。前記基本画像または前記視差検出画像を時系列のフレームとして含む映像データについて異なる時刻における2つの前記フレームを比較して互いに対応する画素を探索して、当該探索結果に基づいて前記対応する画素の中点座標およびその画素値を求めることにより任意の時刻の画像を補間する時刻方向補間部をさらに具備する請求項2記載の撮像装置。前記基本画像または前記視差検出画像のうちのいずれか2つを比較して互いに対応する画素を探索して、当該探索結果に基づいて前記対応する画素の中点座標およびその画素値を求めることにより任意の視点の画像を補間する空間方向補間部をさらに具備する請求項2記載の撮像装置。前記第1乃至第3の撮像素子の各々は、毎秒60フレーム以上のレートで前記基本画像または前記視差検出画像を生成する請求項1記載の撮像装置。前記第1および第2の撮像素子の各々は、毎秒230乃至250フレームのレートで前記視差検出画像を生成する請求項6記載の撮像装置。前記第1および第2の撮像素子の各々は、毎秒290乃至310フレームのレートで前記視差検出画像を生成する請求項6記載の撮像装置。前記第1および第2の撮像素子の各々は、毎秒590乃至610フレームのレートで前記視差検出画像を生成する請求項6記載の撮像装置。被写体からの光を集光する撮影レンズと、前記集光された光を伝送して平行光とするリレーレンズと、前記平行光を透過および反射する半透過膜と、前記半透過膜によって透過または反射されることにより導かれた光を左右2つに分光するミラーと、前記分光された光をそれぞれ結像させる第1および第2の結像レンズと、前記第1および第2の結像レンズによって結像された光をそれぞれ電子信号による視差検出画像に変換する第1および第2の撮像素子と、前記半透過膜によって反射または透過された光のうち前記ミラーに導かれなかった光を結像させる第3の結像レンズと、前記第3の結像レンズによって結像された光を電子信号による基本画像に変換する第3の撮像素子と、前記基本画像と前記視差検出画像のそれぞれとを比較することにより前記視差検出画像のそれぞれと同じ視点の視差画像を前記基本画像に基づいて生成する視差画像生成部と、前記視差画像をそれぞれ左右の映像データのフレームとして生成して記憶部に記録させる映像生成部と、前記記憶部に記録された前記左右の映像データを同時に再生表示させる映像再生部とを具備する映像記録再生システム。上述の従来技術では、被写体からの光をミラーによって左右に分離することにより、立体視のための左右の映像データを得ることができる。しかしながら、この場合、被写体からミラーに対する入射角度等によって、分離される光の太さが変化してしまい、左右の画像の明るさが不均衡になって、画質が劣化してしまうおそれがある。本技術はこのような状況に鑑みて生み出されたものであり、左右の画像の画質が均等で高品質な立体画像を生成するための撮像を行うことを目的とする。本技術は、上述の問題点を解消するためになされたものであり、その第1の側面は、被写体からの光を集光する撮影レンズと、上記集光された光を伝送して平行光とするリレーレンズと、上記平行光を透過および反射する半透過膜と、上記半透過膜によって透過または反射されることにより導かれた光を左右2つに分光するミラーと、上記分光された光をそれぞれ結像させる第1および第2の結像レンズと、上記第1および第2の結像レンズによって結像された光をそれぞれ電子信号による視差検出画像に変換する第1および第2の撮像素子と、上記半透過膜によって反射または透過された光のうち上記ミラーに導かれなかった光を結像させる第3の結像レンズと、上記第3の結像レンズによって結像された光を電子信号による基本画像に変換する第3の撮像素子とを具備する撮像装置である。これにより、基本画像と視差検出画像とを同時に生成させるという作用をもたらす。また、この第1の側面において、上記基本画像と上記視差検出画像のそれぞれとを比較することにより上記視差検出画像のそれぞれと同じ視点の視差画像を上記基本画像に基づいて生成する視差画像生成部をさらに具備するようにしてもよい。これにより、視差画像を生成させるという作用をもたらす。また、この第1の側面において、上記視差画像生成部は、上記基本画像と上記視差検出画像のそれぞれとを比較して互いに対応する画素を探索する対応画素探索部と、上記探索結果に基づいて上記基本画像の画素を上記視差検出画像において対応する画素の位置へ移動することにより上記視差画像を生成する画素移動部とを備えてもよい。これにより、探索結果に基づいて基本画像の画素を視差検出画像における対応画素の位置へ移動することにより視差画像を生成させるという作用をもたらす。また、この第1の側面において、上記基本画像または上記視差検出画像を時系列のフレームとして含む映像データについて異なる時刻における2つの上記フレームを比較して互いに対応する画素を探索して、当該探索結果に基づいて上記対応する画素の中点座標およびその画素値を求めることにより任意の時刻の画像を補間する時刻方向補間部をさらに具備してもよい。これにより、フレームレートを向上させるという作用をもたらす。また、この第1の側面において、上記基本画像または上記視差検出画像のうちのいずれか2つを比較して互いに対応する画素を探索して、当該探索結果に基づいて上記対応する画素の中点座標およびその画素値を求めることにより任意の視点の画像を補間する空間方向補間部をさらに具備するようにしてもよい。これにより、任意の位置の視点における視差画像を生成させるという作用をもたらす。また、この第1の側面において、上記第1乃至第3の撮像素子の各々は、毎秒60フレーム以上のレートで上記基本画像または上記視差検出画像を生成してもよい。また、上記第1および第2の撮像素子の各々は、毎秒230乃至250フレームのレートで上記視差検出画像を生成してもよい。また、上記第1および第2の撮像素子の各々は、毎秒290乃至310フレームのレートで上記視差検出画像を生成してもよい。さらに、上記第1および第2の撮像素子の各々は、毎秒590乃至610フレームのレートで上記視差検出画像を生成してもよい。また、本技術の第2の側面は、被写体からの光を集光する撮影レンズと、上記集光された光を伝送して平行光とするリレーレンズと、上記平行光を透過および反射する半透過膜と、上記半透過膜によって透過または反射されることにより導かれた光を左右2つに分光するミラーと、上記分光された光をそれぞれ結像させる第1および第2の結像レンズと、上記第1および第2の結像レンズによって結像された光をそれぞれ電子信号による視差検出画像に変換する第1および第2の撮像素子と、上記半透過膜によって反射または透過された光のうち上記ミラーに導かれなかった光を結像させる第3の結像レンズと、上記第3の結像レンズによって結像された光を電子信号による基本画像に変換する第3の撮像素子と、上記基本画像と上記視差検出画像のそれぞれとを比較することにより上記視差検出画像のそれぞれと同じ視点の視差画像を上記基本画像に基づいて生成する視差画像生成部と、上記視差画像をそれぞれ左右の映像データのフレームとして生成して記憶部に記録させる映像生成部と、上記記憶部に記録された上記左右の映像データを同時に再生表示させる映像再生部とを具備する映像記録再生システムである。これにより、高画質な視差画像を撮像および再生させるという作用をもたらす。本技術によれば、左右の画像の画質が均等で高品質な立体画像を生成するための撮像を行うことができるという優れた効果を奏し得る。以下、本技術を実施するための形態以下、実施の形態と称するについて説明する。説明は以下の順序により行う。1.第1の実施の形態基本画像および視差検出画像を生成する撮像部の例2.第2の実施の形態基本画像および視差検出画像に基づいて視差画像を生成する撮像装置の例3.第3の実施の形態基本画像および視差検出画像のRAW画像に基づいて視差画像を生成する撮像装置の例4.第4の実施の形態時間方向補間を行う撮像装置の例5.第5の実施の形態空間方向補間を行う撮像装置の例6.第6の実施の形態映像記録再生システムの例<1.第1の実施の形態>[撮像部の構造]図1は、本技術の実施の形態における撮像部の構造例を示す図である。同図aは被写体に向かって左から見た側面断面図であり、同図bは上面断面図である。同図bにおける上部が被写体に向かって右方向であり、下部が被写体に向かって左方向である。なお、同図bでは、上方のミラー142、集光レンズ153、および、撮像素子173は表示を省略している。この撮像部は、被写体からの入射光101を受けて左右の撮像素子171および172と、中央の撮像素子173とに結像させ、左右および中央の映像データを生成するものである。撮像部本体には、レンズマウント120を介して交換レンズ110が取り付けられるようになっている。この交換レンズ110は、被写体からの入射光101を集光するレンズ群であり、焦点を合わせるためのフォーカスレンズや、被写体を拡大するためのズームレンズ等のレンズ群の他、交換レンズ110としての絞り113を備えている。瞳115は、レンズを被写体側あるいは結像側から見たときの開口絞りの像である。なお、交換レンズ110は、特許請求の範囲に記載の撮影レンズの一例である。レンズマウント120は、交換レンズ110を撮像部本体に取り付けるものである。このレンズマウント120の内部においては、集光された光は一旦結像されており、左右が反転した倒立像になる。レンズマウント120の次段にはリレーレンズ部130が配置される。リレーレンズ部130は、レンズマウント120までに集光された光を平行光領域140まで伝送するレンズを備える。レンズマウント120までに集光された光は空中像131を形成する。このリレーレンズ部130におけるレンズにより、交換レンズ110の対物焦点位置すなわち、被写体の位置における点光源からの拡散光は、領域140において平行光となる。この平行光領域140には、絞り113とは別の絞りをさらに設けてもよい。なお、リレーレンズ部130は、特許請求の範囲に記載のリレーレンズの一例である。リレーレンズ部130の次段には透過型ミラー141およびミラー143乃至146が配置される。これら透過型ミラー141およびミラー143乃至146は、平行光領域140の位置に配置され、集光された光を分光する分光鏡である。まず、同一撮影対象の光量全体は、任意に設定した反射率を有する透過型ミラー141により透過および反射され、2つに分光される。この場合、透過および反射された光に含まれる像は同じものである。透過型ミラー141は、受けた光を反射および透過するミラーである。この透過型ミラー141は、例えば、薄膜をガラス表面に蒸着させたARコートAntiReflectionCoatにより実現することができる。このARコートでは、薄膜の反射率を制御することにより透過率を制御することができる。例えば、50透過、50反射のハーフミラーを用いた場合、ミラー142側に入射光の50が反射され、ミラー143乃至146側に入射光の50が透過される。透過型ミラー141によって反射された光は、上方向に設置されたミラー142によって反射されて集光レンズ153に入光される。透過型ミラー141を透過した光のうち被写体に向かって左側から見た光の成分は、左右反転のためミラー143および145に反射される。同様に、透過型ミラー141を透過した光のうち被写体に向かって右側から見た光の成分は、ミラー144および146に反射される。このように、透過型ミラー141を透過した光は、ミラー142乃至146によって左右に分光される。このミラー143および144が配置される位置は平行光領域140に含まれるため、左側および右側から見た光の成分のそれぞれに分光される。上述の例のように、ミラー143乃至146側に入射光の50が透過された場合、その透過された光はミラー143および144によって分光されて、その光量は入射光の25ずつになる。透過型ミラー141、ミラー143および145によって分光された光、すなわち被写体を左側から見た成分の光は、結像用の集光レンズ151に入光される。また、透過型ミラー141、ミラー144および146によって分光された光、すなわち被写体を右側から見た成分の光は、結像用の集光レンズ152に入光される。透過型ミラー141およびミラー142によって反射された光、すなわち被写体を中央から見た成分の光は、結像用の集光レンズ153に入光される。集光レンズ151および152は、入光された光をそれぞれ撮像素子171および172の受光面に対して結像させる。集光レンズ153は、入光された光を撮像素子173の受光面に対して結像させる。これら撮像素子171乃至173に入光された光は、それぞれ正立像となる。ここでは、例として、透過型ミラー141を透過した光を左右に分光し、反射した光を単一の結像としたが、これらは入れ替えてもよい。すなわち、透過型ミラー141によって反射された光を左右に分割し、透過した光を直接結像させるようにしてもよい。なお、集光レンズ151および152は、特許請求の範囲に記載の結像レンズの一例である。撮像素子171乃至173は、それぞれ集光レンズ151乃至153から入光された光を電子信号に変換する光電変換素子である。この撮像素子171乃至173は、例えば、CCDChargeCoupledDevicesやCMOSComplementaryMetalOxideSemiconductorイメージセンサー等により実現される。撮像素子171および172は、立体視の視差情報を検出するための視差検出画像を生成するために用いられる。撮像素子173は、立体視に用いられる視差画像の基となる基本画像を生成するために用いられる。基本画像は、視差検出画像よりも高画質であることが要求される。視差検出画像は視差情報を検出するためのものである一方、基本画像の画質は視差画像の画質に反映されるからである。図2は、本技術の実施の形態における撮像素子171乃至173の構成例を示す図である。同図aは撮像素子173の構成例であり、同図bは撮像素子171および172の構成例である。この例では、視差検出画像を生成するための撮像素子171および172は、それぞれ横1920画素、縦1080画素の画素数を有する。これに対し、基本画像を生成するための撮像素子173は、横3840画素、縦2160画素の画素数を有する。これらはともに、横16:縦9の比率となっている。ただし、両者の比率が等しくない場合であっても、本技術を適用することは可能である。また、撮像素子171および172のサイズは、例えば対角1/2インチである。これに対し、撮像素子173のサイズは、例えば対角2/3インチである。このように撮像素子171乃至173の解像度を設定することにより、視差検出画像よりも高画質な基本画像を生成することができる。また、撮像素子171および172における画像生成レートと撮像素子173における画像生成レートは同じであってもよいが、異なっていてもよい。撮像素子173の画素数を撮像素子171および172よりも高くした場合には、撮像素子173の画像生成レートを低く設定することも考えられる。上述の画素数の場合、例えば、撮像素子171および172の画像生成レートを240フレーム/秒として、撮像素子173の画像生成レートを120フレーム/秒とすることが考えられる。これにより、撮像素子173の空間分解能と、撮像素子171および172の時間分解能とを使い分けることができるようになる。映画では毎秒24フレーム24Hz、テレビでは毎秒60フィールド60Hzのフレームレートが標準的に用いられている。本技術の実施の形態では、動きによるボケやジャーキネスを考慮して、毎秒60フレーム60Hz以上のレート、好ましくは毎秒230乃至250フレーム240Hz±10Hzのレートで電子信号から撮像画像を生成する。これにより、時間方向の分解能の不足を解消している。さらに、放送方式を考慮すると、ヨーロッパで多く用いられている毎秒50フレーム50Hzと日本アメリカで用いられている毎秒60フレーム60Hzの公倍数として、毎秒290乃至310フレーム300Hz±10Hzのレートが好ましい。また、さらに映画の毎秒24フレーム24Hzを加えた公倍数として、毎秒590乃至610フレーム600Hz±10Hzのレートも、画像合成や、レート変換の処理などの、画像処理を容易にする点で重用である。したがって、撮像素子171乃至173の画像生成レートを設定するにあたっては、これらを考慮することが望ましい。[瞳の分割]図3は、本技術の実施の形態による撮像部における瞳115のイメージ図である。瞳pupilとは、レンズを被写体側あるいは結像側から見たときの開口絞りの像である。本技術の実施の形態による撮像部で、瞳115に相当する円の半径をrとすると、次式が成り立つ。2r=f/F式1ただし、fは焦点距離であり、FはF値である。したがって、焦点距離を固定した場合、瞳115の直径2rとF値は反比例の関係にあることがわかる。本発明の実施の形態では、集光された光を、平行光領域の位置で左右に分光するため、瞳115の円を左右に分割した左半円および右半円について考察する。上述のとおり、立体感は、両眼間の視差相対視差に基づいて得られる。このとき、視差を決定する光軸は左半円および右半円のそれぞれの重心を通るものと考えられる。半径rの半円の重心は、幾何学的に求めることができ、円の中心から4r/3πの距離に位置する。したがって、左半円の重心501と右半円の重心502との距離重心間距離Dは、次式のようになることがわかる。D=8r/3π式2すなわち、重心間距離Dは絞り113を絞ると、それに比例して小さくなることがわかる。換言すれば、絞り113の口径を変化させることにより、得られる立体感を調整することができることになる。このような前提を確認するために行った実験の結果を以下に示す。[重心間距離と基線長ベースラインとの関係]図4は、重心間距離Dと基線長ベースラインとの関係を示す図である。ここでは、交換レンズ110としてAおよびBの2種類のレンズについて、重心間距離の理論値と基線長の実験値とを示している。レンズAは、開放F値が1.8で、焦点距離が10乃至100[mmミリメートル]のズームレンズである。このレンズAのズーム比は10倍であり、ワイド端における焦点距離は10[mm]である。レンズBは、開放F値が2.8で、焦点距離が13.5乃至570[mm]のズームレンズである。このレンズBのズーム比は42倍であり、ワイド端における焦点距離は13.5[mm]である。両者ともに、撮影距離は6.5[mメートル]を想定している。上述の式1および式2より、レンズAおよびBの重心間距離Dはそれぞれ23.1[mm]および14.9[mm]であると計算される。一方、実装置において実験により求められた基線長は、レンズAおよびBについてそれぞれ20.0[mm]および12.0[mm]となった。この実験結果から、回折効果によると推測される理論値からの減少が見られるものの、絞り113の像である瞳の半円の重心間距離Dがほぼ基線長に匹敵するものであることがわかる。また、上述の式2より、重心間距離Dは絞り113の口径によって変化させることが可能であり、したがって、基線長も絞り113の口径によって制御可能であることが示された。本技術の実施の形態における構成例によれば、重心間距離Dの最小値としておよそ7[mm]程度を想定することができる。基線長としてもこの程度の値であれば立体感を感じさせることができると考えられる。特に、撮影距離が長い場合、基線長がある程度ないと立体感が出せなくなると考えられる。基線長を増していくと、およそ32[mm]程度になると立体感はより明確になり、その反面、背景のぼやけ具合は大きくなっていく。そして、基線長が65[mm]を超える領域になると、箱庭効果が生じて不自然な画作りになってしまうと考えられる。したがって、立体映像として自然に見える範囲としては、基線長が7乃至65[mm]程度であると考えられる。[ズームによる拡大と視差との関係]図5は、ズームによる拡大と視差との関係を示す図である。図5aでは、左眼位置をL、右眼位置をRとし、被写体上の点をAおよびBとしている。A点を見込んだ角LAR絶対視差をA点の輻輳角θAとし、B点を見込んだ角LBR絶対視差をB点の輻輳角θBとすると、A点とB点の視差相対視差dは、次式により与えられる。なお、以下では相対視差を単に視差と呼称する。d=θB-θAここで、角ALBをh、角ARBをgとすると、輻輳角θAはほぼhと等しく、輻輳角θBはほぼgと等しい。したがって、次式が成り立つ。d=g-hまた、両眼間距離をD、両眼からA点までの距離をDA、両眼からB点までの距離をDBとし、両眼から見たA点とB点との距離をδとすると、d≒Dδ/DA2-δDAここで、DA,DB>>Dより、d≒Dδ/DA2が成り立つ。図5bは、図5aに比べてn倍の拡大を行った場合の位置関係を示す図である。ここでは、ズーム後に変化した角度や位置および距離にはそれぞれの記号の最後にダッシュを付加している。n倍の拡大であるから、g=ngh=nhとなる。このとき、視差dは、次式のように表される。d=DB-DA=g-h=ng-h=ndすなわち、n倍の拡大によりn倍の視差が生じることになる。これは、テレ端側へズームしていくと立体感が増すことを意味する。換言すれば、ズーム撮影においては、短い基線長でも適正な視差を得ることができることになる。このように、本技術の第1の実施の形態によれば、一つの交換レンズ110によって集光された光をミラー143乃至146によって左右に分光することにより、両眼に提示される画像の視差を適正に小さくすることができる。本技術の実施の形態において得られる視差は、絞り113の口径およびズーム撮影におけるズーム比拡大率によって制御可能である。一般に、視差に対する眼の感度は高く、通常視力が視角で分オーダであるのに対し、視差については1オーダ高い分解能があるとされているCWTylerSpatialOrganizationofBinocularDisparitySensitivityVisionResearchVol15pp583590PergamonPress。したがって、視差を適正に小さくすることは、上の例よりも小さな視差の条件下であっても、自然に立体感を知覚させ、視覚疲労を軽減するためにも重要である。また、この第1の実施の形態によれば、視差検出画像に加えて高画質な基本画像を撮像することができる。これら基本画像および視差検出画像を用いることにより、以下のように高画質な視差画像を生成することができる。<2.第2の実施の形態>[撮像装置の構成]図6は、本技術の第2の実施の形態における撮像装置の一構成例を示す図である。この映像記録再生システムは、撮像部100と、映像生成部200と、映像記憶部300とを備えている。撮像部100は、第1の実施の形態として説明した撮像部であり、被写体からの入射光を受けて撮像素子171および172によって視差検出画像を生成し、撮像素子173によって基本画像を生成する。映像生成部200は、撮像部100から出力された基本画像および視差検出画像に基づいて高画質な視差画像を生成し、その視差画像の映像データを映像記憶部300に記録するものである。この映像生成部200の構成については後述する。映像記憶部300は、映像生成部200から出力された視差画像の映像データを記憶するものである。[映像生成部の構成]図7は、本技術の第2の実施の形態における映像生成部200の構成例を示す図である。この映像生成部200は、信号処理部211乃至213と、画像メモリ221および222と、視差画像生成部241および242と、符号化部231および232とを備えている。信号処理部211乃至213は、撮像部100から出力された基本画像および視差検出画像の映像データをそれぞれ受け取り、所定の信号処理を施すものである。この信号処理部211乃至213は、撮像データをA/DAnalogtoDigital変換し、デモザイク処理やホワイトバランス調整処理等の各種信号処理を施す。視差画像生成部241および242は、基本画像および視差検出画像に基づいて視差画像を生成するものである。この視差画像生成部241および242の詳細については後述する。画像メモリ221および222は、信号処理部211乃至213によって処理された映像データおよび視差画像生成部241および242によって生成された視差画像の映像データを一時的に保持するメモリである。符号化部231および232は、画像メモリ221および222に保持された視差画像の映像データを符号化して映像記憶部300に出力するものである。[視差画像生成部の構成]図8は、本技術の第2の実施の形態における視差画像生成部241および242の一構成例を示す図である。この視差画像生成部241および242は、それぞれ対応画素探索部245と、画素移動部246とを備えている。対応画素探索部245は、視差検出画像の各画素について、基本画像における対応画素を探索するものである。この対応画素探索部245は、視差検出画像の左右それぞれの画像において探索領域を設け、基本画像の一部の領域をテンプレートとして探索を行う。この探索においては、相関係数法、SSDASequentialSimilarityDetectionAlgorithm法、最小二乗マッチング等が用いられる。すなわち、画素の一定の単位ごとに相関計算や差分絶対和計算等による評価を行い、相関が最大となる画素、または、差分絶対和が最小となる画素を対応画素として探索する。ここで、例えば、差分二乗和や差分絶対値和を用いて対応画素を探索する際には、以下のように評価が行われる。まず、横X画素×縦Y画素の視差検出画像において横p画素×縦q画素の探索領域を想定する。また、基本画像において横m画素×縦n画素の探索領域を想定する。ただし、mはpより小さく、nはqよりも小さい整数である。視差検出画像の探索領域において、基本画像の探索領域を順次移動させながら差分二乗和または差分絶対値和を求める。視差検出画像の画素値をIi,j、基本画像の画素値をTi,jとすると、差分二乗和SSD:SumofSquaredDifferenceは次式により求められる。また、差分絶対値和SAD:SumofAbsoluteDifferenceは次式により求められる。この差分二乗和または差分絶対値和が最小となる位置のテンプレートの中心に位置する画素が対応画素になる。差分絶対値和が最小となるのは、基本画像と視差検出画像とが最も類似している領域であるから、対応画素には同じ被写体が表示されているものと推定することができる。一方、例えば、正規化相互相関を用いて対応画素を探索する際には、以下のように評価が行われる。視差検出画像の探索領域と、基本画像の探索領域との関係は上述のものと同様である。視差検出画像の探索領域において、基本画像の探索領域を順次移動させながら正規化相互相関を求める。正規化相互相関NCC:NormalizedCorrelationCoefficientは次式により求められる。この正規化相互相関が最大となる位置のテンプレートの中心に位置する画素が対応画素になる。この正規化相互相関を利用することにより、視差検出画像と基本画像とに輝度差がある場合においても、高い精度で対応画素を検出することができる。画素移動部246は、対応画素探索部245によって探索された対応画素の情報に基づいて、基本画像の画素を視差検出画像の対応する画素の位置に移動することによって視差画像を生成するものである。基本画像と視差検出画像の画素数が一致しない場合には、基本画像の複数の画素から補間して視差画像の画素値を求めてもよい。この実施の形態では、視差検出画像は視差情報のみが利用され、明るさや解像度などの画質は基本画像のものが反映される。これにより、左右で画質が均等な視差画像を得ることができる。[撮像装置の動作]図9は、本技術の実施の形態における撮像装置の動作例を示す流れ図である。まず、被写体からの入射光は、交換レンズ110およびリレーレンズ部130を介して平行光領域140に導かれ、透過型ミラー141およびミラー143乃至146によって分離されるステップS901。透過型ミラー141およびミラー142によって集光レンズ153に導かれた光は撮像素子173において光電変換されて、基本画像が生成されるステップS902。また、ミラー143乃至146によって集光レンズ151および152に導かれた光は撮像素子171および172において光電変換されて、視差検出画像が生成されるステップS902。これら基本画像および視差検出画像の生成は独立して行われ、各画像の生成レートは異なっていても構わない。また、視差画像生成部241および242の対応画素探索部245において、基本画像と視差検出画像の対応画素が探索されるステップS903。この対応画素の探索は、左右の視差検出画像のそれぞれについて行われる。そして、視差画像生成部241および242の画素移動部246において、対応画素の情報に基づいて、基本画像の画素を視差検出画像の対応する画素の位置に移動することによって視差画像が生成されるステップS904。このように、第2の実施の形態によれば、1つの高画質な基本画像の画素を用いて視差画像を生成することにより、明るさや解像度等の画質として基本画像のものを視差画像に反映することができ、左右の間で画質が均等な視差画像を得ることができる。<3.第3の実施の形態>第2の実施の形態では、画像メモリ221および222に保持された基本画像および視差検出画像に基づいて視差画像を生成していたが、この第3の実施の形態では画像メモリ221および222へ保持される前に視差画像を生成する。すなわち、この第3の実施の形態では、基本画像および視差検出画像がRAW画像である状態で、信号処理部213を用いることなく、視差画像を生成する。なお、撮像装置の全体構成は図6により説明したものと同様であるため、説明を省略する。[映像生成部の構成]図10は、本技術の第3の実施の形態における映像生成部200の構成例を示す図である。この第3の実施の形態における映像生成部200は、図7における信号処理部213を不要とし、視差画像生成部241および242をそれぞれ信号処理部211および212に接続することにより構成される。信号処理部211および212は、撮像部100から出力された基本画像および視差検出画像の映像データをそれぞれ受け取り、A/D変換を施して、視差画像生成部241および242にそれぞれ供給する。視差画像生成部241および242は、それぞれ信号処理部211および212から供給された基本画像および視差検出画像の映像データに基づいて視差画像を生成し、それぞれ信号処理部211および212に供給する。なお、視差画像生成部241および242の構成については、図8により説明したものと同様であるため、説明を省略する。そして、信号処理部211および212は、視差画像生成部241および242から供給された視差画像に対してデモザイク処理やホワイトバランス調整処理等の各種信号処理を施して、それぞれ画像メモリ221および222に保持させる。符号化部231および232は、画像メモリ221および222に保持された視差画像の映像データを符号化して映像記憶部300に出力する。このように、第3の実施の形態によれば、基本画像および視差検出画像がRAW画像である状態において視差画像を生成することにより、より高品質な視差画像を得ることができる。<4.第4の実施の形態>この第4の実施の形態では、視差画像を時間方向に補間して任意の時刻の画像を生成する。なお、撮像装置の全体構成は図6により説明したものと同様であるため、説明を省略する。[映像生成部の構成]図11は、本技術の第4の実施の形態における映像生成部200の構成例を示す図である。この第4の実施の形態における映像生成部200は、第2の実施の形態と比べて、時間方向補間部251および252が、それぞれ画像メモリ221または222に接続されている点で異なる。時間方向補間部251および252は、それぞれ画像メモリ221および222に保持されている視差画像の映像データについて、時間方向の補間を行うものである。[時間方向補間部の構成]図12は、本技術の第4の実施の形態における時間方向補間部251および252の構成例を示す図である。この時間方向補間部251および252は、それぞれフレームバッファ254と、対応画素探索部255と、補間処理部256とを備えている。フレームバッファ254は、視差画像の映像データをフレーム毎に保持するバッファである。視差画像の映像データは時系列のフレームにより構成されており、そのフレームをフレームバッファ254に一旦保持することにより、対応画素探索部255において異なるフレーム同士の比較を行うことができる。例えば、視差画像の映像データの直前のフレームをフレームバッファ254に保持しておくことにより、画像メモリ221または222から供給されている現在のフレームとその直前のフレームの両者を対応画素探索部255に供給することができる。なお、視差画像には左右の画像が存在するため、フレームバッファ254は少なくとも2枚のフレームを保持する必要がある。対応画素探索部255は、視差画像の映像データの現在のフレームとフレームバッファ254に保持されたフレームとを比較することにより、両フレームにおける対応画素を探索するものである。この対応画素探索部255は、フレームバッファ254に保持された視差画像の左右それぞれの画像において探索領域を設け、現在の視差画像の一部の領域をテンプレートとして探索を行う。この探索においては、上述の対応画素探索部245と同様の手法を採ることができるため、詳細な説明は省略する。補間処理部256は、対応画素探索部255によって探索された対応画素の情報に基づいて、任意の時刻における画素値を補間により生成するものである。ここで、フレームバッファ254に保持された視差画像を過去データとし、画像メモリ221または222から供給されている現在の視差画像を現在データとする。まず、過去データから現在データへ対応画素間を結ぶ移動ベクトルの中点座標u,vにおいて、2つの対応画素の画素値の平均値から画素値su,vが算出される。この場合のu-v空間は、視差画像のX-Y空間に必ずしも一致しない。そこで、全域の画素値su,vからX-Y空間の画素値FX,Yを、補間処理により生成する。この場合の補間処理としては、例えば、以下のような線形補間法を採用することができる。ただし、F0は求める画素値FX,Y、siは既知の画素値su,v、tは計算に用いられる近接点数である。また、wiは重みであり、座標X,Yへの距離の逆数を用いることができる。ここでは、過去データと現在データの対応画素の画素値の平均値を算出することにより移動ベクトルの中点における画素値を求めたが、任意の比率の点を線形比で計算することにより、任意の時刻における画素値を生成してもよい。[時間方向補間部の動作]図13は、本技術の第4の実施の形態における時間方向補間部251および252の動作例を示す流れ図である。時間方向補間部251および252は、以下の処理を視差画像のフレームレート毎に繰り返すL910。まず、画像メモリ221または222から新たな視差画像のフレームf_newX,Yが取得されるステップS911。また、フレームバッファ254に保持されていたフレームをf_oldX,YとするステップS912。そして、対応画素探索部255は、視差画像のフレームf_newX,Yとフレームf_oldX,Yとを比較することにより、両フレームにおける対応画素を探索するステップS913。補間処理部256は、探索された対応画素間を結ぶ移動ベクトルの中点座標u,vを生成しステップS914、2つの対応画素の画素値の平均値から画素値su,vを算出するステップS915。そして、補間処理部256は、線形補間法等により画素値FX,Yを求めるステップS916。この画素値FX,Yは、中間時刻の映像として出力されるステップS917。そして、視差画像の次のフレームの処理の前に、視差画像のフレームf_newX,Yがフレームバッファ254に保持されるステップS918。このように、第4の実施の形態によれば、視差画像のフレームレートを向上させることができる。なお、ここでは、視差画像を時間方向に補間する実施態様について説明したが、視差検出画像または基本画像を補間するようにしてもよい。<5.第5の実施の形態>この第5の実施の形態では、視差画像を空間方向に補間して任意の位置の視点の画像を生成する。なお、撮像装置の全体構成は図6により説明したものと同様であるため、説明を省略する。[映像生成部の構成]図14は、本技術の第5の実施の形態における映像生成部200の構成例を示す図である。この第5の実施の形態における映像生成部200は、第2の実施の形態と比べて、空間方向補間部260が、画像メモリ221および222に接続されている点で異なる。空間方向補間部260は、画像メモリ221および222に保持されている視差画像の映像データについて、空間方向の補間を行うものである。[空間方向補間部の構成]図15は、本技術の第5の実施の形態における空間方向補間部260の構成例を示す図である。この空間方向補間部260は、対応画素探索部265と、補間処理部266とを備えている。対応画素探索部265は、視差画像の左画像のフレームと右画像のフレームとを比較することにより、両フレームにおける対応画素を探索するものである。この対応画素探索部265は、左右画像の一方の画像において探索領域を設け、他方の画像の一部の領域をテンプレートとして探索を行う。この探索においては、上述の対応画素探索部245と同様の手法を採ることができるため、詳細な説明は省略する。補間処理部266は、対応画素探索部265によって探索された対応画素の情報に基づいて、任意の位置の視点における画素値を補間により生成するものである。ここで、一方の画像を第1視点データとし、他方の画像を第2視点データとする。まず、第1視点データから第2視点データへ対応画素間を結ぶベクトルの中点座標u,vにおいて、2つの対応画素の画素値の平均値から画素値su,vが算出される。この場合のu-v空間も、第4の実施の形態の場合と同様に、視差画像のX-Y空間に必ずしも一致しない。そこで、全域の画素値su,vからX-Y空間の画素値FX,Yを、補間処理により生成する。補間処理の内容についても第4の実施の形態の場合と同様であるため、詳細な説明は省略する。ここでは、第1視点データと第2視点データの対応画素の画素値の平均値を算出することによりベクトルの中点における画素値を求めたが、任意の比率の点を線形比で計算することにより、任意の位置の視点における画素値を生成してもよい。[空間方向補間部の動作]図16は、本技術の第5の実施の形態における空間方向補間部260の動作例を示す流れ図である。空間方向補間部260は、以下の処理を視差画像のフレームレート毎に繰り返すL920。まず、画像メモリ221から新たな視差画像の左画像のフレームf_leftX,Yが取得されるステップS921。また、画像メモリ222から新たな視差画像の右画像のフレームf_rightX,Yが取得されるステップS922。そして、対応画素探索部265は、視差画像のフレームf_leftX,Yとフレームf_rightX,Yとを比較することにより、両フレームにおける対応画素を探索するステップS923。補間処理部266は、探索された対応画素間を結ぶベクトルの中点座標u,vを生成しステップS924、2つの対応画素の画素値の平均値から画素値su,vを算出するステップS925。そして、補間処理部266は、線形補間法等により画素値FX,Yを求めるステップS926。この画素値FX,Yは、中間時刻の映像として出力されるステップS927。このように、第5の実施の形態によれば、任意の位置の視点における視差画像を生成することができる。なお、ここでは視差画像の左画像と右画像に基づいて対応画素を探索することを想定したが、基本画像と視差画像の左右画像の一方とを比較することにより、両画像における対応画素を探索するようにしてもよい。<6.第6の実施の形態>[映像記録再生システムの構成]図17は、本技術の第6の実施の形態における映像記録再生システムの一構成例を示す図である。この映像記録再生システムは、撮像部100と、映像生成部200と、映像記憶部300と、映像再生部400と、表示部500とを備えている。撮像部100、映像生成部200および映像記憶部300については、図6において説明したものと同様であるため、説明を省略する。映像再生部400は、映像記憶部300に記憶された映像データを読み出して、再生するものである。この映像再生部400は、左右の視差画像の映像データに対応して、復号部411および412と、表示制御部421および422とを備えている。復号部411および412は、映像記憶部300から読み出された視差画像の映像データを復号するものである。表示制御部421および422は、復号部411および412によって復号された視差画像の映像データを表示部500に表示させるように制御するものである。表示部500は、映像再生部400から出力された視差画像の映像データを表示するものである。この表示部500としては、例えば、2台のプロジェクタに円偏光または直線偏光フィルターを取り付けて左右眼用の視差画像をそれぞれ提示し、表示に対応した円偏光または直線偏光眼鏡で観視するような態様が考えられる。また、フィルター付きフラットパネルディスプレイにおいて、同様に左右眼用の視差画像を同時に提示し、レンチキュラーレンズ、パララックスバリア方式等の眼鏡なし立体表示装置等を利用してもよい。このように、本技術の実施の形態では、左右眼用の画像を交互に提示するのではなく、同時に提示することにより、視覚疲労を軽減している。また、本技術の実施の形態では、撮像部100における映像データの生成から、表示部500における映像データの表示までを、高フレームレート化することにより、動きによるボケBlurやジャーキネスJerkinessの解消を図る。動きによるボケは、撮影時のMTFModulationTransferFunctionの低下に加えて、特に、ホールド型表示において移動する被写体を追従して見る際追従視、映像の網膜上のスリップにより多く発生する。ここで、ホールド型表示は、フレーム期間中、フィルムや液晶プロジェクタ等に映像が継続して表示されることを意味する。また、ジャーキネスは、映像の滑らかさを失われて、動きがギクシャクすることをいう。このジャーキネスは、高速シャッターを用いて撮影された映像を、視線を固定して見る際固定視に多く発生する。こうした動画質劣化には、撮影と表示のフレームレートやカメラの撮影の開口率開口時間/フレーム時間、視覚特性等が関与する。このように、本技術の第6の実施の形態によれば、高画質な視差画像を撮像および再生することができる。なお、上述の実施の形態は本技術を具現化するための一例を示したものであり、実施の形態における事項と、特許請求の範囲における発明特定事項とはそれぞれ対応関係を有する。同様に、特許請求の範囲における発明特定事項と、これと同一名称を付した本技術の実施の形態における事項とはそれぞれ対応関係を有する。ただし、本技術は実施の形態に限定されるものではなく、その要旨を逸脱しない範囲において実施の形態に種々の変形を施すことにより具現化することができる。なお、本技術は以下のような構成もとることができる。1被写体からの光を集光する撮影レンズと、前記集光された光を伝送して平行光とするリレーレンズと、前記平行光を透過および反射する半透過膜と、前記半透過膜によって透過または反射されることにより導かれた光を左右2つに分光するミラーと、前記分光された光をそれぞれ結像させる第1および第2の結像レンズと、前記第1および第2の結像レンズによって結像された光をそれぞれ電子信号による視差検出画像に変換する第1および第2の撮像素子と、前記半透過膜によって反射または透過された光のうち前記ミラーに導かれなかった光を結像させる第3の結像レンズと、前記第3の結像レンズによって結像された光を電子信号による基本画像に変換する第3の撮像素子とを具備する撮像装置。2前記基本画像と前記視差検出画像のそれぞれとを比較することにより前記視差検出画像のそれぞれと同じ視点の視差画像を前記基本画像に基づいて生成する視差画像生成部をさらに具備する前記1に記載の撮像装置。3前記視差画像生成部は、前記基本画像と前記視差検出画像のそれぞれとを比較して互いに対応する画素を探索する対応画素探索部と、前記探索結果に基づいて前記基本画像の画素を前記視差検出画像において対応する画素の位置へ移動することにより前記視差画像を生成する画素移動部とを備える前記2に記載の撮像装置。4前記基本画像または前記視差検出画像を時系列のフレームとして含む映像データについて異なる時刻における2つの前記フレームを比較して互いに対応する画素を探索して、当該探索結果に基づいて前記対応する画素の中点座標およびその画素値を求めることにより任意の時刻の画像を補間する時刻方向補間部をさらに具備する前記2または3に記載の撮像装置。5前記基本画像または前記視差検出画像のうちのいずれか2つを比較して互いに対応する画素を探索して、当該探索結果に基づいて前記対応する画素の中点座標およびその画素値を求めることにより任意の視点の画像を補間する空間方向補間部をさらに具備する前記2または3に記載の撮像装置。6前記第1乃至第3の撮像素子の各々は、毎秒60フレーム以上のレートで前記基本画像または前記視差検出画像を生成する前記1から5のいずれかに記載の撮像装置。7前記第1および第2の撮像素子の各々は、毎秒230乃至250フレームのレートで前記視差検出画像を生成する前記1から6のいずれかに記載の撮像装置。8前記第1および第2の撮像素子の各々は、毎秒290乃至310フレームのレートで前記視差検出画像を生成する前記1から6のいずれかに記載の撮像装置。9前記第1および第2の撮像素子の各々は、毎秒590乃至610フレームのレートで前記視差検出画像を生成する前記1から6のいずれかに記載の撮像装置。10被写体からの光を集光する撮影レンズと、前記集光された光を伝送して平行光とするリレーレンズと、前記平行光を透過および反射する半透過膜と、前記半透過膜によって透過または反射されることにより導かれた光を左右2つに分光するミラーと、前記分光された光をそれぞれ結像させる第1および第2の結像レンズと、前記第1および第2の結像レンズによって結像された光をそれぞれ電子信号による視差検出画像に変換する第1および第2の撮像素子と、前記半透過膜によって反射または透過された光のうち前記ミラーに導かれなかった光を結像させる第3の結像レンズと、前記第3の結像レンズによって結像された光を電子信号による基本画像に変換する第3の撮像素子と、前記基本画像と前記視差検出画像のそれぞれとを比較することにより前記視差検出画像のそれぞれと同じ視点の視差画像を前記基本画像に基づいて生成する視差画像生成部と、前記視差画像をそれぞれ左右の映像データのフレームとして生成して記憶部に記録させる映像生成部と、前記記憶部に記録された前記左右の映像データを同時に再生表示させる映像再生部とを具備する映像記録再生システム。"