(57)【要約】【課題】３次元表示のための複数の画像を撮影するに際し、ズーム動作中における立体視できないことによる不快感を軽減する。【解決手段】撮影部２１Ａ，２１Ｂが取得した第１および第２の画像Ｇ１，Ｇ２に、３次元処理部３０が３次元処理を行って、表示制御部２８が３次元処理により得られた３次元表示用画像をモニタ２０に３次元表示する。撮影部２１Ａ，２１Ｂのズーム動作が開始されると、表示制御部２８は、第１の画像Ｇ１のみをモニタ２０に表示する。撮影部２１Ａ，２１Ｂのズーム動作が終了すると、再度３次元表示用画像をモニタ２０に３次元表示する。【選択図】図１
2010081010.tif 000002
【特許請求の範囲】
【請求項１】
互いに異なる位置において被写体を撮影することにより、視差を有する複数の画像を取得する、光学ズーム機能を有する複数の撮影手段と、
前記複数の画像に対して３次元表示のための３次元処理を行う３次元処理手段と、
前記複数の画像の３次元表示を含む各種表示を行う表示手段と、
前記撮影手段がズーム動作を行っている間、前記複数の画像における視差を小さくした３次元表示または２次元表示を行う表示制御手段とを備えたことを特徴とする３次元撮影装置。
【請求項２】
前記３次元処理手段は、前記撮影手段がズーム動作を行っている間、視差を小さくして前記３次元処理を行う手段であることを特徴とする請求項１記載の３次元撮影装置。
【請求項３】
前記表示制御手段は、前記３次元表示された画像に重ねてオブジェクトを３次元表示するに際し、前記撮影手段がズーム動作を行っている間、前記オブジェクトについても視差を小さくした３次元表示または２次元表示を行う手段であることを特徴とする請求項１または２記載の３次元撮影装置。
【請求項４】
前記視差を小さくした３次元表示または前記２次元表示中であることを通知する通知手段をさらに備えたことを特徴とする請求項１から３のいずれか１項記載の３次元撮影装置。
【請求項５】
前記表示制御手段は、前記ズーム動作の開始後、視差が０となるまで徐々に視差を小さくして前記２次元表示を行う手段であることを特徴とする請求項１から４のいずれか１項記載の３次元撮影装置。
【請求項６】
前記表示制御手段は、前記ズーム動作の開始後、所定の視差となるまで徐々に視差を小さくして前記視差を小さくした３次元表示を行う手段であることを特徴とする請求項１から４のいずれか１項記載の３次元撮影装置。
【請求項７】
互いに異なる位置において被写体を撮影することにより、視差を有する複数の画像を取得する、光学ズーム機能を有する複数の撮影手段と、
前記複数の画像に対して３次元表示のための３次元処理を行う３次元処理手段と、
前記複数の画像の３次元表示を含む各種表示を行う表示手段とを備えた３次元撮影装置における３次元撮影方法において、
前記撮影手段がズーム動作を行っている間、前記複数の画像における視差を小さくした３次元表示または２次元表示を行うことを特徴とする３次元撮影方法。
【請求項８】
互いに異なる位置において被写体を撮影することにより、視差を有する複数の画像を取得する、光学ズーム機能を有する複数の撮影手段と、
前記複数の画像に対して３次元表示のための３次元処理を行う３次元処理手段と、
前記複数の画像の３次元表示を含む各種表示を行う表示手段とを備えた３次元撮影装置における３次元撮影方法をコンピュータに実行させるためのプログラムにおいて、
前記撮影手段がズーム動作を行っている間、前記複数の画像における視差を小さくした３次元表示または２次元表示を行う手順をコンピュータに実行させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、被写体を異なる位置から撮影することにより、３次元表示するための複数の画像を取得する３次元撮影装置および方法並びに３次元撮影方法をコンピュータに実行させるためのプログラムに関するものである。
【背景技術】
【０００２】
複数の画像を組み合わせて３次元表示することにより、視差を利用して立体視できることが知られている。このような立体視は、同一の被写体を異なる位置から複数のカメラを用いて撮影することにより複数の画像を取得し、複数の画像に含まれる被写体の視差を利用して複数の画像を３次元表示することにより生成することができる。
【０００３】
具体的には、裸眼平衡法により立体視を実現する方式の場合、複数の画像を並べて配置して３次元表示を行うことができる。また、複数の画像の色を例えば赤と青のように異ならせて重ね合わせたり、複数の画像の偏光方向を異ならせて重ね合わせることにより、複数の画像を合成して３次元表示を行うことができる。この場合赤青メガネや偏光メガネ等の画像分離メガネを用いて、３次元表示された画像を目の自動焦点機能により融合視することにより、立体視を行うことができる（アナグリフ方式、偏光フィルタ方式）。
【０００４】
また、偏光メガネ等を使用しなくても、パララックスバリア方式およびレンチキュラー方式のように、複数の画像を立体視可能な３次元表示モニタに表示して立体視することも可能である。この場合、複数の画像を垂直方向に短冊状に切り取って交互に配置することにより、３次元表示が行われる。また、画像分離メガネを使用したり、光学素子を液晶に貼ることで左右の画像の光線方向を変えながら、左右の画像を交互に表示することにより、３次元表示を行う方式も提案されている（スキャンバックライト方式）。
【０００５】
また、このような３次元表示を行うための撮影を行う、複数の撮影部を有する複眼カメラが提案されている。このような複眼カメラは、所定の間隔にて配置された複数の撮影部を備え、複数の撮影部が取得した画像から３次元表示用画像を生成し、生成した３次元表示用画像をモニタに３次元表示することができる。また、このような複眼カメラにおいて、複数の画像における対応する領域の視差量に応じて、複数の画像を並べる位置を変更することにより、立体視を良好に行う手法が提案されている（特許文献１参照）。
【０００６】
ところで、複眼カメラを用いて撮影を行う場合、レリーズボタンを押下する前にはスルー画像がモニタに３次元表示されるが、各撮像部が備えたズーム機能を用いることにより、撮影する画角を変更することが可能である。この場合、撮影者は３次元表示されたスルー画像を見ながら複眼カメラに対してズーム操作を行うことにより、被写体が所望とするサイズとなるように撮影を行うことが可能である。
【特許文献１】特開平８−９４２１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
上述したように、複眼カメラがズーム動作を行うと画角が変更されるが、ズーム動作中は被写体にピントが合わなくなる場合が多い。また、複眼カメラは複数の撮影部を備えているため、ズーム動作は複数の撮影部において同期して行われるが、各撮影部におけるズーム機能を行うためのモータおよび機構に個体差が存在することから、各撮影部におけるズーム動作を完全に一致させて行うことは非常に困難である。ここで、３次元表示は目の錯覚を利用して画像を立体的に表示するものであるため、スルー画像が３次元表示されている最中にズーム動作が行われると、ピントが合わなくなったり、撮影部毎に画角が異なったりする。このため、ズーム動作中においては３次元表示された画像の立体感が変わったり、立体感が現れたり現れなかったりすることから、非常に立体視しにくいものとなる。
【０００８】
本発明は上記事情に鑑みなされたものであり、３次元表示のための複数の画像を撮影するに際し、ズーム動作中における立体視できないことによる不快感を軽減することを目的とする。
【課題を解決するための手段】
【０００９】
本発明による３次元撮影装置は、互いに異なる位置において被写体を撮影することにより、視差を有する複数の画像を取得する、光学ズーム機能を有する複数の撮影手段と、
前記複数の画像に対して３次元表示のための３次元処理を行う３次元処理手段と、
前記複数の画像の３次元表示を含む各種表示を行う表示手段と、
前記撮影手段がズーム動作を行っている間、前記複数の画像における視差を小さくした３次元表示または２次元表示を行う表示制御手段とを備えたことを特徴とするものである。
【００１０】
「視差を小さくした３次元表示」とは、ズーム動作前の３次元表示された画像を見た場合の立体感を小さくする３次元表示であり、「２次元表示」とは、視差を０として立体感をなくした表示である。
【００１１】
なお、本発明による３次元撮影装置においては、前記３次元処理手段を、前記撮影手段がズーム動作を行っている間、視差を小さくして前記３次元処理を行う手段としてもよい。
【００１２】
また、複数の撮影手段の間の間隔を小さくすることによっても、視差を小さくした３次元表示または２次元表示を行うことができる。
【００１３】
また、本発明による３次元撮影装置においては、前記表示制御手段を、前記３次元表示された画像に重ねてオブジェクトを３次元表示するに際し、前記撮影手段がズーム動作を行っている間、前記オブジェクトについても視差を小さくした３次元表示または２次元表示を行う手段としてもよい。
【００１４】
オブジェクトとは、表示手段に表示される撮影により取得され画像以外の画像を意味し、具体的には、Ｆ値およびシャッタ速度等の撮影条件、撮影枚数および撮影日時等、手ぶれ防止、フラッシュのオン／オフおよび人物モード等を表すためのアイコン、絵文字並びに各種操作を行うためのメニュー等が挙げられる。
【００１５】
また、本発明による３次元撮影装置においては、前記視差を小さくした３次元表示または前記２次元表示中であることを通知する通知手段をさらに備えるものとしてもよい。
【００１６】
また、本発明による３次元撮影装置においては、前記表示制御手段を、前記ズーム動作の開始後、視差が０となるまで徐々に視差を小さくして前記２次元表示を行う手段としてもよい。
【００１７】
また、本発明による３次元撮影装置においては、前記表示制御手段を、前記ズーム動作の開始後、所定の視差となるまで徐々に視差を小さくして前記視差を小さくした３次元表示を行う手段としてもよい。
【００１８】
本発明による３次元撮影方法は、互いに異なる位置において被写体を撮影することにより、視差を有する複数の画像を取得する、光学ズーム機能を有する複数の撮影手段と、
前記複数の画像に対して３次元表示のための３次元処理を行う３次元処理手段と、
前記複数の画像の３次元表示を含む各種表示を行う表示手段とを備えた３次元撮影装置における３次元撮影方法において、
前記撮影手段がズーム動作を行っている間、前記複数の画像における視差を小さくした３次元表示または２次元表示を行うことを特徴とするものである。
【００１９】
なお、本発明による３次元撮影方法をコンピュータに実行させるためのプログラムとして提供してもよい。
【発明の効果】
【００２０】
本発明によれば、撮影手段がズーム動作を行っている間、複数の画像における視差を小さくした３次元表示または２次元表示を行うようにしたため、撮影者がズーム操作を行うと、３次元表示における立体感を小さくすることができる。これにより、ズーム動作中において立体視ができなくなっても、立体感の変動の程度が小さくなるため、ズーム動作中における不快感を軽減することができる。とくに、視差を０として立体感をなくした３次元表示、すなわち２次元表示を行うことにより、ズーム動作中において立体感が変動することがなくなるため、ズーム動作中における不快感を確実に軽減することができる。
【００２１】
また、撮影手段がズーム動作を行っている間、視差を小さくして３次元処理を行うことにより、装置の構成部品を増やすことなく立体感を小さくできるため、装置の構成を複雑なものとなることを防止できる。
【００２２】
また、３次元表示された画像に重ねてオブジェクトを３次元表示するに際し、撮影手段がズーム動作を行っている間、オブジェクトについても視差を小さくした３次元表示または２次元表示を行うことにより、撮影者がズーム操作を行うと、３次元表示におけるオブジェクトの立体感も小さくすることができる。これにより、ズーム動作中において立体視ができなくなっても、オブジェクトの立体感の変動の程度が小さくなることから、ズーム動作中における不快感を軽減することができる。
【００２３】
また、視差を小さくした３次元表示または２次元表示中であることを通知することにより、撮影者は通知に基づいて、視差を小さくした３次元表示または２次元表示中であることを認識することができる。
【００２４】
また、ズーム動作の開始後、視差が０となるまで徐々に視差を小さくして２次元表示を行う、または所定の視差となるまで徐々に視差を小さくして３次元表示を行うことにより、ズーム動作の開始により急激に立体感が変動することがなくなるため、不快感をより軽減できる。
【発明を実施するための最良の形態】
【００２５】
以下、図面を参照して本発明の実施形態について説明する。図１は本発明の実施形態による３次元撮影装置を適用した複眼カメラの内部構成を示す概略ブロック図である。図１に示すように本実施形態による複眼カメラ１は、２つの撮影部２１Ａ，２１Ｂ、撮影制御部２２、画像処理部２３、圧縮／伸長処理部２４、フレームメモリ２５、メディア制御部２６、内部メモリ２７、および表示制御部２８を備える。なお、撮影部２１Ａ，２１Ｂは、所定の基線長および輻輳角を持って被写体を撮影可能なように配置されている。
【００２６】
図２は撮影部２１Ａ，２１Ｂの構成を示す図である。図２に示すように、撮影部２１Ａ，２１Ｂは、フォーカスレンズ１０Ａ，１０Ｂ、ズームレンズ１１Ａ，１１Ｂ、絞り１２Ａ，１２Ｂ、シャッタ１３Ａ，１３Ｂ、ＣＣＤ１４Ａ，１４Ｂ、アナログフロントエンド（ＡＦＥ）１５Ａ，１５ＢおよびＡ／Ｄ変換部１６Ａ，１６Ｂをそれぞれ備える。また、撮影部２１Ａ，２１Ｂは、フォーカスレンズ１０Ａ，１０Ｂを駆動するフォーカスレンズ駆動部１７Ａ，１７Ｂおよびズームレンズ１１Ａ，１１Ｂを駆動するズームレンズ駆動部１８Ａ，１８Ｂを備える。
【００２７】
フォーカスレンズ１０Ａ，１０Ｂは被写体に焦点を合わせるためものであり、モータとモータドライバとからなるフォーカスレンズ駆動部１７Ａ，１７Ｂによって光軸方向に移動可能である。フォーカスレンズ駆動部１７Ａ，１７Ｂは、後述する撮影制御部２２が行うＡＦ処理により得られる合焦データに基づいてフォーカスレンズ１０Ａ，１０Ｂの移動を制御する。
【００２８】
ズームレンズ１１Ａ，１１Ｂは、ズーム機能を実現するためのものであり、モータとモータドライバとからなるズームレンズ駆動部１８Ａ，１８Ｂによって光軸方向に移動可能である。ズームレンズ駆動部１８Ａ，１８Ｂはズームレバー３４Ａを操作することによりＣＰＵ３３において得られるズームデータに基づいて、ズームレンズ１１Ａ，１１Ｂの移動を制御する。
【００２９】
絞り１２Ａ，１２Ｂは、撮影制御部２２が行うＡＥ処理により得られる絞り値データに基づいて、不図示の絞り駆動部により絞り径の調整が行われる。
【００３０】
シャッタ１３Ａ，１３Ｂはメカニカルシャッタであり、不図示のシャッタ駆動部により、ＡＥ処理により得られるシャッタスピードに応じて駆動される。
【００３１】
ＣＣＤ１４Ａ，１４Ｂは、多数の受光素子を２次元的に配列した光電面を有しており、被写体光がこの光電面に結像して光電変換されてアナログ撮影信号が取得される。また、ＣＣＤ１４Ａ，１４Ｂの前面にはＲ，Ｇ，Ｂ各色のフィルタが規則的に配列されたカラーフィルタが配設されている。
【００３２】
ＡＦＥ１５Ａ，１５Ｂは、ＣＣＤ１４Ａ，１４Ｂから出力されるアナログ撮影信号に対して、アナログ撮影信号のノイズを除去する処理、およびアナログ撮影信号のゲインを調節する処理（以下アナログ処理とする）を施す。
【００３３】
Ａ／Ｄ変換部１６Ａ，１６Ｂは、ＡＦＥ１５Ａ，１５Ｂによりアナログ処理が施されたアナログ撮影信号をデジタル信号に変換する。なお、撮影部２１Ａにより取得されるデジタルの画像データにより表される画像を第１の画像Ｇ１、撮影部２１Ｂにより取得される画像データにより表される画像を第２の画像Ｇ２とする。
【００３４】
撮影制御部２２は、不図示のＡＦ処理部およびＡＥ処理部からなる。ＡＦ処理部は入力部３４に含まれるレリーズボタンの半押し操作により撮影部２１Ａ，２１Ｂが取得したプレ画像に基づいて合焦領域を決定するとともにレンズ１０Ａ，１０Ｂの焦点位置を決定し、撮影部２１Ａ，２１Ｂに出力する。ＡＥ処理部は、プレ画像に基づいて絞り値とシャッタ速度とを決定し、撮影部２１Ａ，２１Ｂに出力する。
【００３５】
ここで、ＡＦ処理による焦点位置の検出方式としては、例えば、所望とする被写体にピントが合った状態では画像のコントラストが高くなるという特徴を利用して合焦位置を検出するパッシブ方式が考えられる。より具体的には、プレ画像を複数のＡＦ領域に分割し、各ＡＦ領域内の画像に対してハイパスフィルタによるフィルタリング処理を施して、ＡＦ領域毎にＡＦ評価値を算出し、最も評価が高い、すなわちフィルタによる出力値が最も高いＡＦ領域を合焦領域として検出する。
【００３６】
また、撮影制御部２２は、レリーズボタンの全押し操作により、撮影部２１Ａ，２１Ｂに対して第１および第２の画像Ｇ１，Ｇ２の本画像を取得させる本撮影の指示を行う。なお、レリーズボタンが操作される前は、撮影制御部２２は、撮影部２１Ａに対して撮影範囲を確認させるための、第１および第２の画像Ｇ１，Ｇ２よりも画素数が少ないスルー画像を、所定時間間隔（例えば１／３０秒間隔）にて順次取得させる指示を行う。
【００３７】
なお、撮影制御部２２は、スルー画像の撮影中においてもＡＦ処理を行う。この場合のＡＦ処理は、プレ画像に基づくＡＦ処理と比較して、簡易な演算により行われるものである。
【００３８】
画像処理部２３は、撮影部２１Ａ，２１Ｂが取得した第１および第２の画像Ｇ１，Ｇ２のデジタルの画像データに対して、ホワイトバランスを調整する処理、階調補正、シャープネス補正、および色補正等の画像処理を施す。なお、画像処理部２３における処理後の第１および第２の画像についても、処理前の参照符号Ｇ１，Ｇ２を用いるものとする。
【００３９】
圧縮／伸長処理部２４は、画像処理部２３によって処理が施され、後述するように３次元表示のために第１および第２の画像Ｇ１，Ｇ２の本画像から生成された３次元表示用画像を表す画像データに対して、例えば、ＪＰＥＧ等の圧縮形式で圧縮処理を行い、３次元表示を行うための３次元画像ファイルを生成する。この３次元画像ファイルは、第１および第２の画像Ｇ１，Ｇ２の画像データおよび３次元表示用画像の画像データを含むものとなる。また、この画像ファイルには、Ｅｘｉｆフォーマット等に基づいて、撮影日時等の付帯情報が格納されたタグが付与される。
【００４０】
フレームメモリ２５は、撮影部２１Ａ，２１Ｂが取得した第１および第２の画像Ｇ１，Ｇ２を表す画像データに対して、前述の画像処理部２３が行う処理を含む各種処理を行う際に使用する作業用メモリである。
【００４１】
メディア制御部２６は、記録メディア２９にアクセスして３次元画像ファイル等の書き込みと読み込みの制御を行う。
【００４２】
内部メモリ２７は、複眼カメラ１において設定される各種定数、およびＣＰＵ３３が実行するプログラム等を記憶する。
【００４３】
表示制御部２８は、撮影時においてフレームメモリ２５に格納された第１および第２の画像Ｇ１，Ｇ２をモニタ２０に２次元表示させたり、記録メディア２９に記録されている第１および第２の画像Ｇ１，Ｇ２をモニタ２０に２次元表示させたりする。また、表示制御部２８は、後述するように３次元処理が行われた第１および第２の画像Ｇ１，Ｇ２をモニタ２０に３次元表示したり、記録メディア２９に記録されている３次元画像ファイルをモニタ２０に３次元表示することも可能である。なお、２次元表示と３次元表示との切り替えは自動で行ってもよく、後述する入力部３４を用いての撮影者からの指示により行ってもよい。ここで、３次元表示が行われている場合、レリーズボタンが押下されるまでは、第１および第２の画像Ｇ１，Ｇ２のスルー画像がモニタ２０に３次元表示される。
【００４４】
なお、表示モードが３次元表示に切り替えられた場合には、後述するように第１および第２の画像Ｇ１，Ｇ２の双方が表示に用いられ、２次元表示に切り替えられた場合は第１および第２の画像Ｇ１，Ｇ２のいずれか一方が表示に用いられる。本実施形態においては、第１の画像Ｇ１を２次元表示に用いるものとする。
【００４５】
また、表示制御部２８は、後述するようにスルー画像の３次元表示中に、撮影部２１Ａ，２１Ｂがズーム動作を行う場合に、表示を２次元表示に切り替える処理も行う。
【００４６】
また、本実施形態による複眼カメラ１は３次元処理部３０を備える。３次元処理部３０は、第１および第２の画像Ｇ１，Ｇ２をモニタ２０に３次元表示させるために、第１および第２の画像Ｇ１，Ｇ２に３次元処理を行う。ここで、本実施形態における３次元表示としては、公知の任意の方式を用いることができる。例えば、第１および第２の画像Ｇ１，Ｇ２を並べて表示して裸眼平衡法により立体視を行う方式、またはモニタ２０にレンチキュラーレンズを貼り付け、モニタ２０の表示面の所定位置に画像Ｇ１，Ｇ２を表示することにより、左右の目に第１および第２の画像Ｇ１，Ｇ２を入射させて３次元表示を実現するレンチキュラー方式を用いることができる。さらに、モニタ２０のバックライトの光路を光学的に左右の目に対応するように交互に分離し、モニタ２０の表示面に第１および第２の画像Ｇ１，Ｇ２をバックライトの左右への分離にあわせて交互に表示することにより、３次元表示を実現するスキャンバックライト方式等を用いることができる。
【００４７】
３次元処理部３０は、３次元表示の方式に応じた３次元処理を第１および第２の画像Ｇ１，Ｇ２に対して行う。例えば、３次元表示の方式が裸眼平衡法によるものである場合、第１および第２の画像Ｇ１，Ｇ２を左右に並べた立体画像を生成することにより３次元処理を行う。また、３次元表示の方式がレンチキュラー方式の場合には、第１および第２の画像Ｇ１，Ｇ２を垂直方向に短冊状に切り取って交互に配置した立体画像を生成することにより３次元処理を行う。また、３次元表示の方式がスキャンバックライト方式の場合には、第１および第２の画像Ｇ１，Ｇ２を、モニタ２０のバックライトの左右への分離にあわせて交互にモニタ２０に出力する３次元処理を行う。
【００４８】
なお、モニタ２０は３次元処理部３０が行う３次元処理の方式に応じた加工がなされている。例えば、３次元表示の方式がレンチキュラー方式の場合には、モニタ２０の表示面にレンチキュラーレンズが取り付けられており、スキャンバックライト方式の場合には、左右の画像の光線方向を変えるための光学素子がモニタ２０の表示面に取り付けられている。
【００４９】
ここで、本実施形態においては、第１および第２の画像Ｇ１，Ｇ２のスルー画像の表示中に、撮影者がズームレバー３４Ａを用いてズーム操作を行うと、撮影部２１Ａ，２１Ｂがズーム動作を行い、表示制御部２８が３次元表示を２次元表示に切り替える。具体的には、３次元処理部３０が生成した３次元表示用画像に代えて、第１の画像Ｇ１をモニタ２０に表示する。この場合、撮影部２１Ｂの駆動を停止し、撮影部２１Ａのみにより被写体を撮影して第１の画像Ｇ１のみを取得するようにしてもよい。なお、３次元処理部３０において、第１および第２の画像Ｇ１，Ｇ２に含まれる被写体の視差が０となるように第１および第２の画像Ｇ１，Ｇ２をモーフィングにより加工することによって２次元表示用画像を生成し、生成した２次元表示用画像をモニタ２０に２次元表示するようにしてもよい。また、撮影部２１Ａ，２１Ｂのズーム動作が終了すると、表示制御部２８は、２次元表示を３次元表示に切り替える。図３は表示切り替え時における立体感を示す図である。図３に示すように撮影者によるズーム操作が開始されると３次元表示が２次元表示に切り替わることから立体感が０となる。また、撮影者によるズーム操作が終了すると、２次元表示が３次元表示に切り替わることから、立体感が表れることとなる。
【００５０】
なお、３次元表示から２次元表示への切り替え、および２次元表示から３次元表示への切り替えを立体感が徐々に変更されるように行うようにしてもよい。この場合、図４に示すように、撮影者によるズーム操作が開始されると３次元表示が２次元表示に徐々に切り替わることから、立体感が徐々に０となる。また、撮影者によるズーム操作が終了すると、２次元表示が３次元表示に徐々に切り替わることから、徐々に立体感が表れることとなる。
【００５１】
なお、３次元表示から２次元表示に切り替える際の立体感は、第１および第２の画像Ｇ１，Ｇ２の視差すなわちずれ量を徐々に小さくするように３次元処理を行うことにより変更すればよい。逆に２次元表示から３次元表示に切り替える際の立体感は、第１および第２の画像Ｇ１，Ｇ２の視差すなわちずれ量を徐々に元のずれ量に戻すように３次元処理を行うことにより変更すればよい。
【００５２】
また、第１および第２の画像Ｇ１，Ｇ２のずれ量を変更することに代えて、第１の画像Ｇ１を基準として、第１の画像Ｇ１に含まれる被写体との視差が徐々に小さくなる補間画像を、第１および第２の画像Ｇ１，Ｇ２から順次生成し、第１の画像Ｇ１および補間画像を用いた３次元処理、並びに３次元処理により生成された３次元表示用画像の表示を補間画像が生成される毎に行うようにしても、立体感を徐々に変更することができる。
【００５３】
ＣＰＵ３３は、レリーズボタン等を含む入力部３４からの信号に応じて複眼カメラ１の各部を制御する。
【００５４】
データバス３５は、複眼カメラ１を構成する各部およびＣＰＵ３３に接続されており、複眼カメラ１における各種データおよび各種情報のやり取りを行う。
【００５５】
次いで、本実施形態において行われる処理について説明する。図５は本実施形態において行われる処理を示すフローチャートである。なお、複眼カメラ１のモニタ２０には、撮影部２１Ａ，２１Ｂが取得した第１および第２の画像Ｇ１，Ｇ２に３次元処理部３０が３次元処理を行うことにより、第１および第２の画像Ｇ１，Ｇ２のスルー画像が３次元表示されているものとする。また、本発明は撮影部２１Ａ，２１Ｂのズーム動作中における処理に特徴を有するため、スルー画像表示中におけるズームレバー３４Ａを用いてのズーム操作が行われた場合の処理についてのみ説明する。
【００５６】
ＣＰＵ３３は撮影者によりズームレバー３４Ａが操作されたか否かを監視しており（ステップＳＴ１）、ステップＳＴ１が肯定されると、撮影部２１Ａ，２１Ｂがズーム動作を開始することから、表示制御部２８が第１の画像Ｇ１のみをモニタ２０に表示する２次元表示に切り替える（ステップＳＴ２）。そして、ＣＰＵ３３は撮影者によるズーム操作が終了したか否かの監視を開始し（ステップＳＴ３）、ステップＳＴ３が肯定されると、撮影部２１Ａ，２１Ｂがズーム動作を停止することから、撮影制御部２２が撮影部２１Ａ，２１ＢのＡＦ処理を行う（ステップＳＴ４）。
【００５７】
この後、表示制御部２８が、モニタ２０への表示をスルー画像の３次元表示に切り替え（ステップＳＴ５）、リターンする。
【００５８】
この後、レリーズボタンを押下することにより撮影が行われると、撮影部２１Ａ，２１Ｂが第１および第２の画像Ｇ１，Ｇ２の本画像を取得する。そして、３次元処理部３０が第１および第２の画像Ｇ１，Ｇ２から３次元表示用画像を生成し、圧縮／伸張処理部２４が、第１および第２の画像Ｇ１，Ｇ２並びに３次元表示用画像の画像データからなる３次元画像ファイルを生成し、メディア制御部２６が３次元画像ファイルを記録メディア２９に記録する。
【００５９】
このように本実施形態においては、撮影部２１Ａ，２１Ｂがズーム動作を行っている間、２次元表示を行うようにしたため、ズーム動作中にモニタ２０に表示される画像の立体感が変動することがなくなり、その結果、ズーム動作中における立体感が変動することによる不快感を確実に軽減することができる。
【００６０】
また、ズーム動作終了後は、撮影部２１Ａ，２１ＢのＡＦ処理を行ってから３次元表示に切り替えているため、第１および第２の画像Ｇ１，Ｇ２のピントがあった状態で３次元表示がなされることとなる。このため、ズーム動作終了後の立体視を良好に行うことができる。
【００６１】
なお、上記本実施形態においては、スルー画像の表示中に、オブジェクトを画像に重ねて表示する場合がある。図６はオブジェクトを重ねて表示した画像を示す図である。なお、ここでは説明のため、２次元画像にオブジェクトが重ねて表示された状態を示している。図６に示すようにモニタ２０に表示された画像には、左上隅にフラッシュの発光を示すアイコンが、右上隅に今までの撮影枚数が、左下隅にＦ値およびシャッタ速度が、右下隅に撮影日を表す文字が、オブジェクトとして画像に重ねて表示されている。
【００６２】
この場合、第１および第２の画像Ｇ１，Ｇ２のそれぞれに対して視差を有するようにオブジェクトを配置することにより、オブジェクトも３次元表示されて立体視することができる。このようにオブジェクトを３次元表示する場合においても、撮影部２１Ａ，２１Ｂのズーム動作中には第１および第２の画像Ｇ１，Ｇ２と同様にオブジェクトの３次元表示を２次元表示に切り替えるようにしてもよい。これにより、オブジェクトの立体感の変動の程度が小さくなることから、ズーム動作中における不快感を軽減することができる。
【００６３】
また、上記実施形態において、３次元表示から２次元表示に切り替わると立体視ができなくなるため、撮影者が装置１が故障したと勘違いする場合がある。このため、図７に示すように、表示制御部２８が、撮影者に２次元表示中であることを通知するための「２Ｄ」のマークＭ０をモニタ２０に表示するようにしてもよい。なお、この場合、表示制御部２８が通知手段に相当する。これにより、撮影者はマークＭ０に基づいて、２次元表示中であることを認識することができる。なお、マークＭ０の表示に代えて、装置１に音声出力部を設け、音声により２次元表示中であることを撮影者に知らせるようにしてもよい。また、音声およびマークＭ０の表示の双方を用いて、２次元表示中であることを撮影者に知らせるようにしてもよい。
【００６４】
また、上記実施形態においては、撮影者によるズーム操作が開始されると３次元表示を２次元表示に切り替えているが、２次元表示に代えて第１および第２の画像Ｇ１，Ｇ２における視差を小さくした３次元処理を行うことにより、視差が小さい３次元表示を行うようにしてもよい。
【００６５】
なお、第１および第２の画像Ｇ１，Ｇ２に含まれる被写体の視差、すなわちずれ量を小さくすることにより、視差を小さくした３次元処理を行うことができる。また、第１の画像Ｇ１を基準として、第１の画像Ｇ１に含まれる被写体の視差を小さくした補間画像を、第１および第２の画像Ｇ１，Ｇ２をモーフィングによって加工することにより生成し、第１の画像Ｇ１および補間画像を用いることによっても、視差を小さくした３次元処理を行うことができる。
【００６６】
図８は視差を小さくした３次元処理を行った場合における、表示切り替え時における立体感を示す図である。図８に示すように撮影者によるズーム操作が開始されると３次元表示の立体感が小さくなる。また、撮影者によるズーム操作が終了すると、立体感が大きくなる。なお、この場合においても、図９に示すように立体感の切り替えを徐々に行うようにしてもよい。
【００６７】
なお、撮影部２１Ａ，２１Ｂの間隔を小さくすることによっても、第１および第２の画像Ｇ１，Ｇ２の視差を小さくすることができる。すなわち、図１０に示すように撮影者によるズーム操作前における撮影部２１Ａ，２１Ｂの基線長Ｋ１および輻輳角α１を、ズーム操作開始時にそれぞれＫ２，α２となるように変更することによっても、第１および第２の画像Ｇ１，Ｇ２の視差を小さくすることができる。ここで、撮影部２１Ａ，２１Ｂの間隔の変更は、公知の機構を用いて行うことができる。
【００６８】
また、上記実施形態においては、複眼カメラ１に２つの撮影部２１Ａ，２１Ｂを設け、２つの画像Ｇ１，Ｇ２を用いて３次元表示を行っているが、３以上の撮影部を設け、３以上の画像を用いて３次元表示を行う場合にも本発明を適用することができる。
【００６９】
以上、本発明の実施形態について説明したが、コンピュータを、上記の表示制御部２８および３次元処理部３０に対応する手段として機能させ、図５に示すような処理を行わせるプログラムも、本発明の実施形態の１つである。また、そのようなプログラムを記録したコンピュータ読取り可能な記録媒体も、本発明の実施形態の１つである。
【図面の簡単な説明】
【００７０】
【図１】本発明の実施形態による３次元撮影装置を適用した複眼カメラの内部構成を示す概略ブロック図
【図２】撮影部の構成を示す図
【図３】表示切り替え時における立体感を示す図（その１）
【図４】表示切り替え時における立体感を示す図（その２）
【図５】本実施形態において行われる処理を示すフローチャート
【図６】オブジェクトを重ねて表示した画像を示す図
【図７】２Ｄのマークを表示した状態を示す図
【図８】視差を小さくする場合の表示切り替え時における立体感を示す図（その１）
【図９】視差を小さくする場合の表示切り替え時における立体感を示す図（その２）
【図１０】撮影部の基線長および輻輳角の変更を説明するための図
【符号の説明】
【００７１】
１    複眼カメラ
２１Ａ，２１Ｂ    撮影部
２２    撮影制御部
２８    表示制御部
３０    ３次元処理部
【図１】
2010081010.tif 000003
【図２】
2010081010.tif 000004
【図３】
2010081010.tif 000005
【図４】
2010081010.tif 000006
【図５】
2010081010.tif 000007
【図６】
2010081010.tif 000008
【図７】
2010081010.tif 000009
【図８】
2010081010.tif 000010
【図９】
2010081010.tif 000011
【図１０】
2010081010.tif 000012