(57)【要約】【課題】  撮像装置本体を大型化することなく、高品質な立体画像を取得することを目的とする。【解決手段】  視差を有する画像をそれぞれ取得する２つの撮像装置を有し、２つの撮像装置のうち、一方の撮像装置の操作部により一方の撮像装置による画像の取得が指示された場合に、他方の撮像装置に対して画像の取得を指示する指示部と、２つの撮像装置のそれぞれで得られた画像を合成する処理を、２つの撮像装置のいずれかで行うかを判定する判定部と、判定部による判定結果に基づいて、２つの撮像装置の一方の撮像装置で得られた画像を、２つの撮像装置間で送受信する通信部と、２つの撮像装置のそれぞれで得られた画像を合成する合成部とを備えることを特徴とする。【選択図】      図１
2012165225.tif 000002
【特許請求の範囲】
【請求項１】
視差を有する画像をそれぞれ取得する２つの撮像装置を有し、
２つの前記撮像装置のうち、一方の撮像装置の操作部により前記一方の撮像装置による画像の取得が指示された場合に、他方の撮像装置に対して画像の取得を指示する指示部と、
前記２つの撮像装置のそれぞれで得られた前記画像を合成する処理を、該２つの撮像装置のいずれかで行うかを判定する判定部と、
前記判定部による判定結果に基づいて、前記２つの撮像装置の一方の撮像装置で得られた前記画像を、該２つの撮像装置間で送受信する通信部と、
前記２つの撮像装置のそれぞれで得られた前記画像を合成する合成部と
を備えることを特徴とする撮像システム。
【請求項２】
請求項１に記載の撮像システムにおいて、
前記指示部による指示に応じて取得された前記視差を有する画像のうちの一方の画像を基準画像としたときに、前記基準画像に対する他方の画像の差分を示す差分情報を生成する生成部と、
前記基準画像と、前記差分情報とに対して圧縮処理を施す圧縮処理部と、
前記圧縮処理部により圧縮処理が施された前記基準画像と前記差分情報とを記録媒体に記録させる記録制御部とをさらに備えることを特徴とする撮像システム。
【請求項３】
請求項２に記載の撮像システムにおいて、
前記通信部は、前記２つの撮像装置間で前記圧縮処理部により圧縮処理が施された前記画像を送受信することを特徴とする撮像システム。
【請求項４】
請求項２に記載の撮像システムにおいて、
前記合成部により合成された画像を、前記２つの撮像装置のそれぞれに備えられた記録媒体のいずれの記録媒体に記録するかを選択する選択部をさらに備えることを特徴とする撮像システム。
【請求項５】
請求項４に記載の撮像システムにおいて、
前記選択部は、前記合成された画像を記録すると選択した記録媒体の記録残量がなくなった場合、他方の記録媒体に、前記合成された画像を記録することを特徴とする撮像システム。
【請求項６】
請求項２に記載の撮像システムにおいて、
前記判定部は、前記２つの撮像装置のそれぞれに備えられた記録媒体の記録残量を比較し、記録残量の多い記録媒体を有する撮像装置で前記視差を有する画像を合成する判定をすることを特徴とする撮像システム。
【請求項７】
請求項１から請求項６のいずれか１項に記載の撮像システムにおいて、
前記視差を有する画像は、前記２つの撮像装置のうち、一方の撮像装置を基準としたときに、前記基準となる撮像装置の姿勢と他方の撮像装置の姿勢とを同一に維持して取得されることを特徴とする撮像システム。
【請求項８】
請求項１から請求項６のいずれか１項に記載の撮像システムにおいて、
前記画像を回転させる回転部をさらに備え、
前記視差を有する画像は、前記２つの撮像装置のうち、一方の撮像装置を基準としたときに、他方の撮像装置の姿勢を、前記基準となる撮像装置の姿勢から撮影光軸を中心に１８０度回転させた姿勢を維持して取得され、
前記回転部は、前記他方の撮像装置で得られた前記画像を１８０度回転させ、
前記生成部は、前記基準画像に対する前記回転部により１８０度回転された画像の差分を示す差分情報を生成することを特徴とする撮像システム。
【請求項９】
視差を有する画像をそれぞれ取得する２つの撮像部を有し、
前記２つの撮像部による画像の取得を指示する指示部と、
前記指示部による指示に応じて取得された前記視差を有する画像のうちの一方の画像を基準画像としたときに、前記基準画像に対する他方の画像の差分を示す差分情報を生成する生成部と、
前記基準画像と、前記差分情報とに対して圧縮処理を施す圧縮処理部と、
前記圧縮処理部により圧縮処理が施された前記基準画像と前記差分情報とを記録媒体に記録させる記録制御部と
を備えることを特徴とする撮像システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像を取得する撮像システムに関する。
【背景技術】
【０００２】
従来から、略眼幅離して配置された主撮像部及び従撮像部を用いて、主画像信号及び従画像信号を取得し、主画像信号から生成した主画像、主画像信号及び従画像信号に生じる視差に基づいて生成した従画像を左右それぞれの眼で観察することができるように合成することにより、立体画像を生成する撮像装置が提案されている（例えば、特許文献１など）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−２０６０６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところが、特許文献１の技術では、主撮像部及び従撮像部からなる２つの撮像部を有することで、撮像装置本体が大型化するという問題がある。また、主画像信号及び従画像信号に生じる視差に基づいて従画像を生成するため、主画像及び従画像を合成した画像の画角が人間の視差と異なり、立体感が低下することが想定される。
【０００５】
そこで、本発明の撮像システムは、撮像装置本体を大型化することなく、高品質な立体画像を取得することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の撮像システムは、視差を有する画像をそれぞれ取得する２つの撮像装置を有し、２つの前記撮像装置のうち、一方の撮像装置の操作部により前記一方の撮像装置による画像の取得が指示された場合に、他方の撮像装置に対して画像の取得を指示する指示部と、前記２つの撮像装置のそれぞれで得られた前記画像を合成する処理を、該２つの撮像装置のいずれかで行うかを判定する判定部と、前記判定部による判定結果に基づいて、前記２つの撮像装置の一方の撮像装置で得られた前記画像を、該２つの撮像装置間で送受信する通信部と、前記２つの撮像装置のそれぞれで得られた前記画像を合成する合成部とを備える。
【０００７】
また、前記指示部による指示に応じて取得された前記視差を有する画像のうちの一方の画像を基準画像としたときに、前記基準画像に対する他方の画像の差分を示す差分情報を生成する生成部と、前記基準画像と、前記差分情報とに対して圧縮処理を施す圧縮処理部と、前記圧縮処理部により圧縮処理が施された前記基準画像と前記差分情報とを記録媒体に記録させる記録制御部とをさらに備えてもよい。
【０００８】
また、前記通信部は、前記２つの撮像装置間で前記圧縮処理部により圧縮処理が施された前記画像を送受信してもよい。
【０００９】
また、前記合成部により合成された画像を、前記２つの撮像装置のそれぞれに備えられた記録媒体のいずれの記録媒体に記録するかを選択する選択部をさらに備えてもよい。
【００１０】
また、前記選択部は、前記合成された画像を記録すると選択した記録媒体の記録残量がなくなった場合、他方の記録媒体に、前記合成された画像を記録してもよい。
【００１１】
また、前記判定部は、前記２つの撮像装置のそれぞれに備えられた記録媒体の記録残量を比較し、記録残量の多い記録媒体を有する撮像装置で前記視差を有する画像を合成する判定してもよい。
【００１２】
また、前記視差を有する画像は、前記２つの撮像装置のうち、一方の撮像装置を基準としたときに、前記基準となる撮像装置の姿勢と他方の撮像装置の姿勢とを同一に維持して取得してもよい。
【００１３】
また、前記画像を回転させる回転部をさらに備え、前記視差を有する画像は、前記２つの撮像装置のうち、一方の撮像装置を基準としたときに、他方の撮像装置の姿勢を、前記基準となる撮像装置の姿勢から撮影光軸を中心に１８０度回転させた姿勢を維持して取得され、前記回転部は、前記他方の撮像装置で得られた前記画像を１８０度回転させ、前記生成部は、前記基準画像に対する前記回転部により１８０度回転された画像の差分を示す差分情報を生成してもよい。
【００１４】
また、本発明の撮像システムは、視差を有する画像をそれぞれ取得する２つの撮像部を有し、前記２つの撮像部による画像の取得を指示する指示部と、前記指示部による指示に応じて取得された前記視差を有する画像のうちの一方の画像を基準画像としたときに、前記基準画像に対する他方の画像の差分を示す差分情報を生成する生成部と、前記基準画像と、前記差分情報とに対して圧縮処理を施す圧縮処理部と、前記圧縮処理部により圧縮処理が施された前記基準画像と前記差分情報とを記録媒体に記録させる記録制御部とを備える。
【発明の効果】
【００１５】
本発明の撮像システムによれば、撮像装置本体を大型化することなく、高品質な立体画像を取得することができる。
【図面の簡単な説明】
【００１６】
【図１】本実施形態における撮像システム１０の外観を示す図である。
【図２】本実施形態における撮像システム１０の構成を示すブロック図である。
【図３】（Ａ）は、右眼用画像の例を示す図、（Ｂ）は、左眼用画像の例を示す図、（Ｃ）は、画像中の被写体が一致するように、右眼用画像と左眼用画像とを重ね合わせた例を示す図である。
【図４】撮像装置２０における撮影時の流れを示すフローチャートである。
【図５】撮像装置４０における撮影時の流れを示すフローチャートである。
【図６】撮像装置２０の姿勢を基準として、撮像装置４０の姿勢を、撮影光軸を中心に１８０度回転させた例を示す図である。
【発明を実施するための形態】
【００１７】
以下、図面を用いて本発明の実施形態について説明する。図１は、本実施形態の撮像システム１０の外観を示す図である。図１に示すように、撮像システム１０は、同じ撮像装置である撮像装置２０と撮像装置４０とが同一の姿勢を維持するように連結されている。また、撮像装置２０の撮像レンズ２１と、撮像装置４０の撮像レンズ４１との距離Ｄは人間の両目の間隔と等しくなるように構成されている。この撮像装置２０と撮像装置４０とは連結されたときに、水平方向の視差を有し、立体画像の元になる一対の画像を取得する。
【００１８】
図２は、本実施形態における撮像システム１０の構成を示すブロック図である。図１に示すように、撮像システム１０は、撮像装置２０、撮像装置４０により構成される。撮像装置２０は、撮像レンズ２１、撮像素子２２、Ａ／Ｄ変換部２３、バッファメモリ２４、画像処理部２５、表示部２６、操作部２７、通信部２８、メモリ２９、記録Ｉ／Ｆ部３０、記録媒体３１、制御部３２、バス３３を備える。
【００１９】
撮像レンズ２１は、撮像素子２２の結像面に被写体像を結像する。撮像素子２２は、撮像レンズ２１を通過した被写体光を光電変換し、Ｒ、Ｇ、Ｂの各色に対応するアナログ画像信号を出力する。撮像素子２２は、後述するレリーズ釦３４が全押しされると、画像を取得する。撮像素子２２から出力される画像信号は、Ａ／Ｄ変換部２３に入力される。Ａ／Ｄ変換部２３は、撮像素子２２から出力されるアナログの画像信号をデジタルの画像信号に変換する。なお、このデジタルの画像信号は、１コマにまとめられ、画像データとしてバッファメモリ２４に記録される。バッファメモリ２４は、後述する画像処理部２５による画像処理の前工程や後工程で画像データを一時的に記録する。
【００２０】
画像処理部２５は、バッファメモリ２４に記録された画像データに対して画像処理を施す。なお、この画像処理としては、周知の解像度変換処理、ホワイトバランス調整、明るさ調整、色補間、階調変換処理、輪郭強調処理等が挙げられる。また、画像処理部２５は、ＪＰＥＧ（Joint Photographic Experts Group）形式等で圧縮する処理や、圧縮された上記のデータを伸長復元する処理をも実行する。また、画像処理部２５は、撮像装置２０により取得された画像と、撮像装置４０により取得された画像とを合成する。以下、図１に示すように、撮像システム１０において、撮像装置２０は右側、撮像装置４０は左側に配置されているため、撮像装置２０により取得された画像を右眼用画像、撮像装置４０により取得された画像を左眼用画像と称する。
【００２１】
右眼用画像と左眼用画像とを合成する処理について、図３を用いて説明する。本実施形態における右眼用画像と左眼用画像とを合成する処理は、右眼用画像と左眼用画像とのいずれか一方を基準画像としたときに、基準画像と、基準画像に対する他方の画像の差分を示す差分情報とを合成する処理である。図３（Ａ）は右眼用画像の例を示し、（Ｂ）は左眼用画像の例を示す。図３（Ｃ）は、画像中の被写体が一致するように、右眼用画像と左眼用画像とを重ね合わせた例を示す。図３（Ｃ）の斜線の領域は、右眼用画像を基準画像としたときに、基準画像に対する左眼用画像の差分となる領域である。画像処理部２５は、差分となる領域を示す情報を差分情報として生成する。
【００２２】
具体的には、画像処理部２５は、以下の処理により差分情報を生成する。例えば、図３（Ａ）に示すように、右眼用画像の左端の位置を基準としたときに、基準の位置から右眼用画像中の被写体に含まれる画素Ｐまでの距離をＲとする。また、図３（Ｂ）に示すように、右眼用画像の左端の位置を基準としたときに、基準の位置から画素Ｐに対応する左眼用画像中の画素Ｐ’までの距離をＬとする。この場合、画像における視差は、Ｒ−Ｌとなり、画像中の被写体が一致するように、右眼用画像と左眼用画像とを重ね合わせた場合、Ｒ−Ｌの範囲の領域が差分情報となる（図３（Ｃ）参照）。
【００２３】
図２に戻り、表示部２６は、各種の画像を表示する。表示部２６に表示される各種の画像は、右眼用画像、左眼用画像、メニュー画像、後述する記録媒体３１に記録された画像等である。操作部２７は、レリーズ釦３４、十字キー３５等を有する。レリーズ釦３４は、その半押し操作時にＡＥ演算やＡＦ演算が実行される。また、レリーズ釦３４は、その全押し操作時に撮像に係る処理が行われる。十字キー３５は、メニュー画像の表示時等に操作される。なお、レリーズ釦３４、十字キー３５の状態は制御部３２により検知され、検知された釦やキーの状態に基づいたシーケンスが実行される。
【００２４】
通信部２８は、通信デバイス用のインターフェースから構成される。制御部３２は、レリーズ釦３４が全押しされると、通信部２８を介して、撮像装置４０に左眼用画像を取得するよう指示するとともに、圧縮処理後の右眼用画像又は左眼用画像を撮像装置４０との間で送受信する。メモリ２９は、撮像装置２０の各種動作制御のためのプログラムなどを記憶している。記録Ｉ／Ｆ部３０は、記録媒体３１を接続するためのコネクタを備えている。この記録Ｉ／Ｆ部３０と記録媒体３１とが接続されることにより、記録媒体３１に対してデータの書き込み／読み出しが実行される。
【００２５】
制御部３２は、所定のシーケンスプログラムにしたがって、撮像装置２０の統括的な制御を行うとともに、撮像時に必要となる各種演算（ＡＦ演算、ＡＥ演算等）を実行する。また、制御部３２は、判定部３６、タイマ３７の機能を備える。判定部３６は、右眼用画像と左眼用画像とを合成する処理を、撮像装置２０と撮像装置４０のいずれで行うかを判定する。例えば、判定部３６は、撮像装置２０の記録媒体３１の記録残量と、撮像装置４０の記録媒体５１の記録残量とを比較し、記録残量の多い記録媒体を有する撮像装置により左眼用画像と右眼用画像とを合成する処理を行うと判定する。タイマ３７は、右眼用画像を取得するタイミングを制御するために用いられる。
【００２６】
バス３３は、バッファメモリ２４、画像処理部２５、表示部２６、通信部２８、メモリ２９、記録Ｉ／Ｆ部３０、制御部３２を相互に接続することにより、データや信号の出入力を実行する。
【００２７】
同様にして、撮像装置４０は、撮像レンズ４１、撮像素子４２、Ａ／Ｄ変換部４３、バッファメモリ４４、画像処理部４５、表示部４６、操作部４７、通信部４８、メモリ４９、記録Ｉ／Ｆ部５０、記録媒体５１、制御部５２、バス５３を備える。なお、撮像装置４０の各部の構成は、撮像装置２０の各部の構成と同じであるため、説明を省略する。以下、撮像システム１０を構成する２つの撮像装置のうち、レリーズ釦が押された撮像装置の判定部において、いずれの撮像装置で右眼用画像と左眼用画像とを合成する処理を行うかを判定する例を示す。また、合成する処理を行うと判定された撮像装置で取得した画像を基準画像とする。
【００２８】
図４は、撮像装置２０における撮影時の流れを示すフローチャートである。図４のフローチャートはレリーズ釦３４が半押しされたことを前提に説明する。なお、レリーズ釦３４が半押しされると、制御部３２は、ＡＦ演算及びＡＥ演算を実行し、その結果を、通信部２８を介して制御部５２に送信する。
【００２９】
ステップＳ１０１は、レリーズ釦３４が全押しされたか否かを判定する処理である。制御部３２は、レリーズ釦３４が全押しされた場合（ステップＳ１０１の判定がＹＥＳとなる場合）には、ステップＳ１０２に進む。一方、制御部３２は、レリーズ釦３４が全押しされていない場合（ステップＳ１０１の判定がＮＯとなる場合）には、レリーズ釦３４が全押しされるまで待機する。
【００３０】
ステップＳ１０２は、撮像装置４０に対して左眼用画像の取得を指示する処理である。制御部３２は、通信部２８を介して、制御部５２に左眼用画像の取得を指示する。
【００３１】
ステップＳ１０３は、右眼用画像を取得する処理である。撮像素子２２は、レリーズ釦３４の半押し時のＡＦ演算及びＡＥ演算の結果を用いて、右眼用画像を取得する。
【００３２】
ステップＳ１０４は、画像処理である。画像処理部２５は、ステップＳ１０２で取得された右眼用画像に画像処理を施し、画像処理を施した右眼用画像をバッファメモリ２４に記録する。
【００３３】
ステップＳ１０５は、撮像装置４０に対して記録残量の送信を指示する処理である。制御部３２は、通信部２８を介して、制御部５２に記録媒体５１の記録残量の送信を指示する。
【００３４】
ステップＳ１０６は、撮像装置４０から記録残量を受信する処理である。制御部３２は、通信部２８を介して、制御部５２から記録媒体５１の記録残量を受信する。
【００３５】
ステップＳ１０７は、判定処理である。まず、制御部３２は、記録媒体３１の記録残量を検出する。次に、判定部３６は、制御部３２により検出された記録媒体３１の記録残量と、ステップＳ１０６で受信した記録媒体５１との記録残量とを比較し、記録媒体３１の記録残量が記録媒体５１の記録残量よりも多い場合には、右眼用画像と左眼用画像とを合成する処理を撮像装置２０で行うと判定する。一方、判定部３６は、記録媒体５１の記録残量が記録媒体３１の記録残量よりも多い場合には、右眼用画像と左眼用画像とを合成する処理を撮像装置４０で行うと判定する。
【００３６】
ステップＳ１０８は、撮像装置２０で合成する処理を行うか否かを判定する処理である。制御部３２は、ステップＳ１０７において撮像装置２０で合成する処理を行うと判定された場合（ステップＳ１０８の判定がＹＥＳとなる場合）には、ステップＳ１０９に進む。一方、制御部３２は、撮像装置４０で合成する処理を行うと判定された場合（ステップＳ１０８の判定がＮＯとなる場合）には、ステップＳ１１５に進む。
【００３７】
ステップＳ１０９は、撮像装置４０に対して左眼用画像の送信を指示する処理である。制御部３２は、通信部２８を介して、制御部５２に左眼用画像の送信を指示する。
【００３８】
ステップＳ１１０は、撮像装置４０から圧縮処理後の左眼用画像を受信する処理である。制御部３２は、通信部２８を介して、画像処理部４５から圧縮処理後の左眼用画像を受信する。
【００３９】
ステップＳ１１１は、圧縮処理後の左眼用画像を伸長復元する処理である。画像処理部２５は、ステップＳ１１０で受信した圧縮処理後の左眼用画像に伸長復元処理を施す。
【００４０】
ステップＳ１１２は、合成する処理である。まず、画像処理部２５は、ステップＳ１０４で画像処理を施した右眼用画像をバッファメモリ２４から読み出し、読み出した右眼用画像を基準画像とする。次に、画像処理部２５は、右眼用画像に対する、ステップＳ１１１で伸長復元した左眼用画像の差分を示す差分情報を生成し、右眼用画像と差分情報とを合成する。
【００４１】
ステップＳ１１３は、合成した画像に圧縮処理を施す処理である。画像処理部２５は、ステップＳ１１２で合成した画像に圧縮処理を施す。
【００４２】
ステップＳ１１４は、記録する処理である。制御部３２は、圧縮処理後の合成した画像を記録媒体３１に記録し、一連の処理を終了する。
【００４３】
ステップＳ１０８において撮像装置４０で合成する処理を行うと判定した場合、ステップＳ１１５に進む。ステップＳ１１５は、撮像装置４０に対して合成を指示する処理である。制御部３２は、通信部２８を介して、制御部５２に、右眼用画像と左眼用画像とを合成する処理を指示する。
【００４４】
ステップＳ１１６は、右眼用画像を圧縮する処理である。画像処理部２５は、ステップＳ１０４で画像処理を施した右眼用画像をバッファメモリ２４から読み出し、読み出した右眼用画像に圧縮処理を施す。
【００４５】
ステップＳ１１７は、圧縮処理後の右眼用画像を送信する処理である。制御部３２は、通信部２８を介して、画像処理部４５に、ステップＳ１１６で圧縮処理を施した右眼用画像を送信し、一連の処理を終了する。
【００４６】
次に、撮像装置４０における撮影時の流れを図５のフローチャートに基づいて説明する。図５のフローチャートはレリーズ釦３４が半押しされたことを前提に説明する。なお、レリーズ釦３４が半押しされると、制御部５２は、通信部４８を介して、制御部３２からＡＦ演算及びＡＥ演算の結果を受信し、受信した演算結果を用いて、右眼用画像の撮影条件と左眼用画像の撮影条件とが一致するように各部を制御する。
【００４７】
ステップＳ２０１は、撮像装置２０から左眼用画像を取得する指示を受信したか否かを判定する処理である。制御部５２は、通信部４８を介して、制御部３２から左眼用画像を取得する指示を受信したか否かを判定する（図４のフローチャートのステップＳ１０１参照）。制御部５２は、左眼用画像を取得する指示を受信したと判定した場合（ステップＳ２０１の判定がＹＥＳとなる場合）には、ステップＳ２０２に進む。一方、制御部５２は、左眼用画像を取得する指示を受信していないと判定した場合（ステップＳ２０１の判定がＮＯとなる場合）には、左眼用画像を取得する指示を受信するまで待機する。
【００４８】
ステップＳ２０２は、左眼用画像を取得する処理である。制御部５２は、タイマ５７を用いて、撮像素子２２による右眼用画像の取得と同期して、撮像素子４２により左眼用画像を取得する。なお、上述したように、制御部５２は、右眼用画像の撮影条件と左眼用画像の撮影条件とが一致するように各部を制御するが、左眼用画像を取得する指示を受信したときに、最終的なＡＦ演算及びＡＥ演算を行い、左眼用画像の撮影条件を微調整してもよい。
【００４９】
ステップＳ２０３は、画像処理である。画像処理部４５は、ステップＳ２０２で取得された左眼用画像に画像処理を施し、バッファメモリ４４に記録する。
【００５０】
ステップＳ２０４は、撮像装置２０から記録残量を送信する指示を受信したか否かを判定する処理である。制御部５２は、通信部４８を介して、制御部３２から記録媒体５１の記録残量を送信する指示を受信したか否かを判定する（図４のフローチャートのステップＳ１０５参照）。制御部５２は、記録媒体５１の記録残量を送信する指示を受信したと判定した場合（ステップＳ２０４の判定がＹＥＳとなる場合）には、ステップＳ２０５に進む。一方、制御部５２は、記録媒体５１の記録残量を送信する指示を受信していないと判定した場合（ステップＳ２０４の判定がＮＯとなる場合）には、記録残量を送信する指示を受信するまで待機する。
【００５１】
ステップＳ２０５は、撮像装置２０に記録残量を送信する処理である。制御部５２は、記録媒体５１の記録残量を検出し、通信部４８を介して、制御部３２に検出した記録残量を送信する（図４のフローチャートのステップＳ１０６参照）。
【００５２】
ステップＳ２０６は、撮像装置２０から合成する指示を受信したか否かを判定する処理である。制御部５２は、通信部４８を介して、制御部３２から右眼用画像と左眼用画像とを合成する処理の指示を受信したか否かを判定する（図４のフローチャートのステップＳ１１５参照）。制御部５２は、合成する指示を受信したと判定した場合（ステップＳ２０６の判定がＹＥＳとなる場合）には、ステップＳ２０７に進む。一方、制御部５２は、合成する指示を受信していないと判定した場合（ステップＳ２０６の判定がＮＯとなる場合）には、ステップＳ２１２に進む。
【００５３】
ステップＳ２０７は、撮像装置２０から圧縮処理後の右眼用画像を受信する処理である。制御部５２は、通信部４８を介して、画像処理部２５から圧縮処理後の右眼用画像を受信する（図４のフローチャートのステップＳ１１７参照）。
【００５４】
ステップＳ２０８は、圧縮処理後の右眼用画像を伸長復元する処理である。画像処理部４５は、ステップＳ２０７で受信した圧縮処理後の右眼用画像に伸長復元処理を施す。
【００５５】
ステップＳ２０９は、合成する処理である。まず、画像処理部４５は、ステップＳ２０３で画像処理を施した左眼用画像をバッファメモリ４４から読み出し、読み出した左眼用画像を基準画像とする。次に、画像処理部４５は、左眼用画像に対する、ステップＳ２０８で伸長復元した右眼用画像の差分を示す差分情報を生成し、左眼用画像と差分情報とを合成する。
【００５６】
ステップＳ２１０は、合成した画像に圧縮処理を施す処理である。画像処理部４５は、ステップＳ２０９で合成した画像に圧縮処理を施す。
【００５７】
ステップＳ２１１は、記録する処理である。制御部５２は、圧縮処理後の合成した画像を記録媒体５１に記録し、一連の処理を終了する。
【００５８】
ステップＳ２０６で画像を合成する指示を受信していないと判定した場合には、ステップＳ２１２に進む。ステップＳ２１２は、撮像装置２０から左眼用画像を送信する指示を受信したか否かを判定する処理である。制御部５２は、通信部４８を介して、制御部３２から左眼用画像を送信する指示を受信したか否かを判定する（図４のフローチャートのステップＳ１０９参照）。制御部５２は、左眼用画像を送信する指示を受信したと判定した場合（ステップＳ２１２の判定がＹＥＳとなる場合）には、ステップＳ２１３に進む。一方、制御部５２は、左眼用画像を送信する指示を受信していないと判定した場合（ステップＳ２１２の判定がＮＯとなる場合）には、左眼用画像を送信する指示を受信するまで待機する。
【００５９】
ステップＳ２１３は、左眼用画像を圧縮する処理である。画像処理部４５は、ステップＳ２０３で画像処理を施した左眼用画像をバッファメモリ４４から読み出し、読み出した左眼用画像に圧縮処理を施す。
【００６０】
ステップＳ２１４は、撮像装置２０に対して圧縮処理後の左眼用画像を送信する処理である。制御部５２は、通信部４８を介して、画像処理部２５に、ステップＳ２１３で圧縮処理を施した左眼用画像を送信し、一連の処理を終了する（図４のフローチャートのステップＳ１１０参照）。
【００６１】
以上説明したように、本実施形態の撮像システム１０は、撮像装置２０及び撮像装置４０により視差を有する右眼用画像と左眼用画像とをそれぞれ取得し、撮像装置２０又は撮像装置４０において右眼用画像と右眼用画像とを合成する。したがって、本実施形態の撮像システム１０によれば、撮像装置本体を大型化することなく、高品質な立体画像を取得することができる。
【００６２】
また、本実施形態の撮像システム１０は、記録媒体３１の記録残量と記録媒体５１の記録残量とを比較し、記録残量の多い記録媒体を有する撮像装置に右眼用画像と左眼用画像とを合成した画像を記録する。したがって、本実施形態の撮像システム１０によれば、合成した画像をより多く記録媒体３１に記録することができる。
【００６３】
また、本実施形態の撮像システム１０は、右眼用画像と左眼用画像とを合成した画像を記録する際に、基準画像と差分情報とを合成した画像を記録する。そのため、右眼用画像と左眼用画像とにおいて共通する領域を、それぞれ右眼用画像又は左眼用画像の一部の領域として個別に記録する必要がなくなる。したがって、差分情報を生成しない場合と比較して、記録媒体３１に記録する画像の容量が少なくなるため、立体画像の元になる画像をより多く記録媒体３１に記録することができる。なお、差分情報と基準画像とから立体画像を生成する場合、まず、画像処理部２５は、差分情報に伸長復元処理を施す。次に、画像処理部２５は、伸長復元した差分情報と、右眼用画像と左眼用画像とにおいて共通する領域と、基準画像とを合成する。なお、画像処理部２５は、右眼用画像と左眼用画像とを左右それぞれの眼で観察することができるように、例えば、右眼用画像を右側に、左眼用画像を左側に隣り合わせに配置することにより合成する。なお、画像処理部４５についても同様とする。
【００６４】
さらに、画像処理部２５は、以下の処理を行ってもよい。例えば、画像処理部２５は、左眼用画像を基準画像とするときの右眼用画像の差分情報と、右眼用画像を基準画像とするときの左眼用画像の差分情報とを比較し、いずれの差分情報が単一であるか、例えば、一様な色であり且つエッジが少ないかを判定する。そして、画像処理部２５は、単一でないと判定された差分情報を有する画像を基準画像とし、基準画像のみを圧縮し、記録する。差分情報が単一であれば記録しなくても、画像処理部２５は、差分情報に隣接する領域に基づいて、差分情報を推定できるためである。なお、画像処理部４５についても同様とする。
【００６５】
また、上記の実施形態では、図１に示すように、撮像装置２０と撮像装置４０とが同一の姿勢を維持するように連結されている例を示したが、これに限らない。例えば、図６に示すように、撮像装置２０の姿勢を基準として、撮像装置４０の姿勢を、撮影光軸を中心に１８０度回転させる。この場合、撮像レンズ２１と撮像レンズ４１との距離Ｄ’が上記の実施形態より短くなるため、上記の実施形態とは異なる視差を有する立体画像を生成することができる。また、図６に示すように、撮像装置２０がグリップ３８、撮像装置４０がグリップ５８を備える場合、ユーザは撮像システム１０を両手で把持しやすくなる。また、この場合、ステップＳ１０７で、判定部３６は基準の姿勢となる撮像装置２０において、右眼用画像と左眼用画像とを合成する処理を行うと判定する。また、ステップＳ１１２で、画像処理部２５は左眼用画像を１８０度回転させてから、差分情報を生成する。なお、上記の例では、撮像装置２０の姿勢を基準として、撮像装置４０の姿勢を回転させる例を示したが、撮像装置４０の姿勢を基準として、撮像装置２０の姿勢を回転させてもよい。
【００６６】
また、上記の実施形態では、判定部３６は、撮像装置２０の記録媒体３１の記録残量と、撮像装置４０の記録媒体５１の記録残量とを比較し、いずれの撮像装置で右眼用画像と左眼用画像とを合成する処理を行うかを判定する例を示したが、これに限らない。例えば、判定部３６は、撮像装置２０に備えられた電池（不図示）の残量と、撮像装置４０に備えられた電池（不図示）の残量とを比較し、電池の残量の多い電池を有する撮像装置で右眼用画像と左眼用画像とを合成すると判定する。これにより、右眼用画像と左眼用画像とをより多く取得することができる。
【００６７】
また、上記の実施形態では、撮像システム１０を構成する２つの撮像装置のうち、レリーズ釦が押された撮像装置の判定部において、いずれの撮像装置で右眼用画像と左眼用画像とを合成する処理を行うかを判定する例を示したが、これに限らない。例えば、ユーザが予め、いずれの撮像装置の判定部において判定するかを選択できるようにしてもよい。また、この場合、表示部２６又は表示部４６に、記憶媒体３１及び記録媒体５１の記録残量を表示してもよい。
【００６８】
また、上記の実施形態では、撮影時に、いずれの撮像装置で右眼用画像と左眼用画像を合成処理する処理を行うかを判定する例を示したが、これに限らない。例えば、撮像装置２０と撮像装置４０とを連結した際に、判定してもよい。
【００６９】
また、上記の実施形態では、判定部３６により右眼用画像と左眼用画像とを合成する処理を行うと判定された撮像装置の記録媒体に、合成した画像を記録する例を示したが、これに限らない。例えば、ユーザが予め、合成した画像を記録する撮像装置を選択できるようにする。また、ユーザが予め選択した撮像装置の記録媒体の記録残量がなくなった場合、他方の撮像装置に合成した画像を記録してもよい。さらに、判定部３６により、右眼用画像と左眼用画像とを合成する処理を行うと判定された撮像装置の記録媒体に、合成した画像、及び該撮像装置で取得した右眼用画像又は左眼用画像を記録し、一方の撮像装置の記録媒体に、該撮像装置で取得した右眼用画像又は左眼用画像を記録してもよい。
【００７０】
また、左眼用画像及び右眼用画像を用いて、被写体を立体視する方法は限定されない。例えば、ユーザは、左眼用画像と右眼用画像とを用いて、平行法又は交差法により、被写体を立体視してもよい。また、表示部２６又は表示部４６に液晶シャッタを備え、この液晶シャッタに対応して、左眼用画像と右眼用画像とを交互に表示してもよい。さらに、画像処理部２５又は画像処理部４５は、左眼用画像と右眼用画像とが縦方向の縞状に交互に配置された立体テレビ用の画像を生成してもよい。
【００７１】
また、上記の実施形態では、撮像システム１０は、２つの撮像装置から構成される例を示したが、３つ以上の撮像装置から構成されてもよい。
【符号の説明】
【００７２】
１０…撮像システム、２０…撮像装置、２２…撮像素子、２８…通信部、３１…記録媒体、３４…レリーズ釦、３６…判定部、４０…撮像装置、４２…撮像素子、４８…通信部、５１…記録媒体、５４…レリーズ釦、５６…判定部
【図１】
2012165225.tif 000003
【図２】
2012165225.tif 000004
【図３】
2012165225.tif 000005
【図４】
2012165225.tif 000006
【図５】
2012165225.tif 000007
【図６】
2012165225.tif 000008