(57)【要約】【課題】焦点距離の異なる撮像部が混在する多眼方式の撮像装置では、焦点距離の違いによりカメラ間の被写界深度が異なり、撮影される画像の背景のボケ方が異なる画像が撮影されてしまう。その結果、リフォーカスなどの合成処理を行う際に不具合が発生してしまう。【解決手段】焦点距離がそれぞれ異なる複数の撮像部を有する多眼方式の撮像装置であって、前記複数の撮像部において被写界深度を一致させるような各撮像部の絞り値を導出する絞り値導出手段と、当該導出された絞り値に従って各撮像部における露出を補正する露出補正手段と、を備えることを特徴とする。【選択図】図５
2014222854.tif 000002
【特許請求の範囲】
【請求項１】
焦点距離がそれぞれ異なる複数の撮像部を有する多眼方式の撮像装置であって、
前記複数の撮像部において被写界深度を一致させるような各撮像部の絞り値を導出する絞り値導出手段と、
当該導出された絞り値に従って各撮像部における露出を補正する露出補正手段と、
を備えることを特徴とする撮像装置。
【請求項２】
前記絞り値導出手段は、前記複数の撮像部のうち基準となる撮像部における被写界深度に、当該基準となる撮像部以外の撮像部における被写界深度を合わせることで前記絞り値を導出する
ことを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記絞り値導出手段で導出された絞り値が前記基準となる撮像部以外の撮像部に設定可能かどうかを判定する第１の判定手段と、
前記第１の判定手段において、前記導出された絞り値が前記基準となる撮像部以外の撮像部に設定できないと判定された場合に、前記基準となる撮像部の絞り値を変更する手段と、
をさらに備えることを特徴とする請求項２に記載の撮像装置。
【請求項４】
前記変更する手段は、前記基準となる撮像部の絞り値を１段小さい絞り値に変更することを特徴とする請求項３に記載の撮像装置。
【請求項５】
前記基準となる撮像部の絞り値が変更可能かどうかを判定する第２の判定手段と、
前記第２の判定手段において、前記基準となる撮像部の絞り値が変更できないと判定された場合には、前記基準となる撮像部以外の撮像部に、当該撮像部に設定可能な絞り値の範囲内であって前記絞り値導出手段で導出された絞り値に最も近い絞り値が設定される
ことを特徴とする請求項３又は４に記載の撮像装置。
【請求項６】
前記複数の撮像部におけるシャッタースピードを一致させる手段をさらに備えることを特徴とする請求項１乃至５のいずれか１項に記載の撮像装置。
【請求項７】
前記シャッタースピードを一致させる手段は、前記基準となる撮像部以外の撮像部におけるシャッタースピードを取得し、それを前記基準となる撮像部のシャッタースピードとして設定することにより、前記複数の撮像部におけるシャッタースピードを一致させることを特徴とする請求項６に記載の撮像装置。
【請求項８】
前記シャッタースピードを一致させる手段によって、前記基準となる撮像部以外の撮像部におけるシャッタースピードが前記基準となる撮像部のシャッタースピードとして設定されると、前記露出補正手段は、ＮＤフィルタを挿入することにより前記基準となる撮像部に対する露出補正を行うことを特徴とする請求項７に記載の撮像装置。
【請求項９】
焦点距離がそれぞれ異なる複数の撮像部を有する多眼方式の撮像装置の制御方法であって、
前記複数の撮像部において被写界深度を一致させるような各撮像部の絞り値を導出する絞り値導出ステップと、
当該導出された絞り値に従って各撮像部における露出を補正する露出補正ステップと、
を含むことを特徴とする制御方法。
【請求項１０】
コンピュータを、請求項１乃至８の何れか１項に記載の撮像装置として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、焦点距離の異なるカメラが混在した多眼方式の撮像装置の露出補正方法に関する。
【背景技術】
【０００２】
近年の撮像装置の小型化、低価格化に伴い、光学ズームを使用することなくズーム機能を実現するため、焦点距離がそれぞれ異なる複数の撮像レンズによって被写体を撮像する多眼方式の撮像装置が提案されている（例えば、特許文献１）。特許文献１で提案される多眼方式の撮像装置では、ズーム比に応じて好適な焦点距離の撮像レンズで得られた画像を選択することで、ズームのための駆動機構を持つ事なく、１台の撮像装置で画角の広い画像から画角の狭い画像まで撮像可能である。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−１０９６２３号公報
【特許文献２】特開平７−１１０５０５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上述のような多眼方式の撮像装置で撮影した画像を使って、違和感のない滑らかなズーム動作を実現するためには、焦点距離の異なる撮像レンズで得られた画像同士の明るさ、色、背景のボケ具合、動体ブレなどを極力揃える必要がある。
【０００５】
しかし、従来の多眼方式の撮像装置の自動露出補正方法（例えば特許文献２）では、明るさを揃えることに重点が置かれている。すなわち、撮影時に被写界深度を揃えて背景のボケ具合まで揃えたり、シャッタースピードを揃えて動体ブレまで揃えたりすることまでは考慮されていない。そのため、例えば、背景のボケ具合が揃っていない画像を使ってズームを動作させると、ズーム比に応じて好適な焦点距離の撮像レンズで得られた画像に切り替える際、背景のボケ具合が極端に変化し、滑らかさを損なうという問題が発生する。そして、撮影時に被写界深度を揃えて背景のボケ具合まで揃えたり、シャッタースピードを揃えて動体ブレまで揃えようとすれば、全て手動で設定しなければならなかった。
【課題を解決するための手段】
【０００６】
本発明に係る撮像装置は、焦点距離がそれぞれ異なる複数の撮像部を有する多眼方式の撮像装置であって、前記複数の撮像部において被写界深度を一致させるような各撮像部の絞り値を導出する絞り値導出手段と、当該導出された絞り値に従って各撮像部における露出を補正する露出補正手段と、を備えることを特徴とする。
【発明の効果】
【０００７】
本発明によれば、焦点距離の異なる撮像部が混在した多眼方式の撮像装置によって、光学ズームを使用することなくズーム機能を実現する際に、違和感のない滑らかな動作を実現することができる。
【図面の簡単な説明】
【０００８】
【図１】焦点距離が異なる複数の撮像部を備えた多眼方式による撮像装置の外観の一例を示す図である。
【図２】多眼方式の撮像装置の内部構成を示すブロック図である。
【図３】各撮像部の内部構成を示す図である。
【図４】本実施例に係る画像処理部の内部構成を示す図である。
【図５】実施例１に係る多眼方式の撮像装置において、被写界深度が揃うように各撮像部の絞り値を調整する処理の流れを示すフローチャートである。
【図６】被写界深度を説明する図である。
【図７】同一の被写界深度を実現するための焦点距離比に対する絞り段数を示す図である。
【図８】実施例１の適用例を示す図であり、（ａ）は暗めの被写体を撮影する場合における絞り値の変化を示す図、同（ｂ）は明るめの被写体を撮影する場合における絞り値の変化を示す図である。
【図９】実施例２に係る画像処理部の内部構成を示す図である。
【図１０】実施例２に係る本実施例に係る多眼方式の撮像装置において、被写界深度に加えて各撮像部のシャッタースピードも揃うように調整する処理の流れを示すフローチャートである。
【発明を実施するための形態】
【０００９】
［実施例１］
図１は、焦点距離が異なる複数の撮像部を備えた多眼方式による撮像装置の外観の一例を示す図である。図１に示す撮像装置１００は、撮像ボタン１０１及び焦点距離の異なる５つの撮像部１０２〜１０６を備えている。ユーザによって撮像ボタン１０１が押下されると、撮像部１０２〜１０６において同時に撮影が開始され、同一の被写体を複数の視点位置から同時に撮影した多視点画像のデータ（デジタルデータ）が得られる。なお、ここでは撮像部の数を５個としたが、撮像部の数は５個に限定されず、撮像装置が複数の撮像部を有する限りにおいてその数によらず本発明は適用可能である。
【００１０】
図２は、多眼方式の撮像装置１００の内部構成を示すブロック図である。
【００１１】
中央処理装置（ＣＰＵ）２０２は、以下に述べる各部を統括的に制御する。
【００１２】
ＲＡＭ２０３は、ＣＰＵ２０２の主メモリ、ワークエリア等として機能する。
【００１３】
ＲＯＭ２０４は、ＣＰＵ２０２で実行される制御プログラム等を格納している。
【００１４】
バス２０１は、各種データの転送経路となる。例えば、撮像部１０２〜１０６によって取得されたデジタルデータは、このバス２０１を介して所定の処理部に送られる。
【００１５】
操作部２０５は、ボタンやモードダイヤルなどで構成され、撮像指示やズーム指示といったユーザの各種指示を受け取る。
【００１６】
表示部２０７は、撮像画像や文字の表示を行い、例えば、液晶ディスプレイが用いられる。また、表示部２０７はタッチスクリーン機能を有していても良い。その場合はタッチスクリーンを用いた撮像指示やズーム指示などのユーザ指示を操作部２０５の入力として扱うことも可能である。
【００１７】
表示制御部２０６は、表示部２０７に表示される画像や文字の表示制御を行う。
【００１８】
撮像部１０２〜１０６は、それぞれ異なるレンズ焦点距離を有し、撮像部１０２が最も広角寄りで、順にレンズ焦点距離が長くなり、撮像部１０６が最も望遠寄りであるとする。
【００１９】
撮像制御部２０８は、フォーカスを合わせる、シャッターを開く・閉じる、絞りを調節するなど、ＣＰＵ２０２からの指示に基づいた撮像部の制御を行う。具体的には、撮像部１０２〜１０６の絞り３０４、シャッター３０５、ＮＤフィルタ３０３などを、露出が最適になるように調整する。例えば、明るい被写体であれば、絞り３０４を絞る、シャッター３０５のシャッタースピードを上げる、ＮＤフィルタ３０３を挿入するなどして、センサ３０９に入射する光量を減らす制御がなされる。一方、暗い被写体であれば、絞り３０４を開ける、シャッター３０５のシャッタースピードを下げる、ＮＤフィルタ３０３を取り除くなどして、センサ３０９に入射する光量を増やす制御がなされる。なお、撮像制御部２０８は撮像部１０２〜１０６のそれぞれに対して独立して制御を行い、例えば撮像部の数だけ設けてもよい。
【００２０】
デジタル信号処理部２０９は、バス２０１を介して受け取ったデジタルデータに対し、ホワイトバランス処理、ガンマ処理、ノイズ低減処理などの各種処理を行う。また、ＩＳＯ感度を増減させて、Ａ／Ｄ変換後のデジタルデータの明るさを増幅或いは減衰させる処理も行う。
【００２１】
エンコード部２１０は、デジタルデータをＪＰＥＧやＭＰＥＧなどのファイルフォーマットに変換する処理を行う。
【００２２】
外部メモリ制御部２１１は、撮像装置１００を、外部メモリ２１２（例えば、ＰC、ハードディスク、メモリーカード、ＣＦカード、ＳＤカード、ＵＳＢメモリ）に結合するためのインターフェースである。
【００２３】
画像処理部２１３は、撮像部１０２〜１０６で取得された画像データ或いは、デジタル信号処理部２０９から出力される画像データを用いて、画像合成などの画像処理を行う。例えば、焦点距離の異なる撮像部で撮影された各画像の被写界深度を揃えるための画像処理を行う。
【００２４】
なお、撮像装置の構成要素は上記以外にも存在するが、本件発明の主眼ではないので、説明を省略する。
【００２５】
図３は、撮像部１０２〜１０６の内部構成を示す図である。
【００２６】
撮像部１０２〜１０６は、レンズ３０１〜３０２、ＮＤフィルタ３０３、絞り３０４、シャッター３０５、光学ローパスフィルタ３０６、ｉＲカットフィルタ３０７、カラーフィルタ３０８、センサ３０９及びＡ／Ｄ変換部３１０で構成される。
【００２７】
レンズ３０１〜３０２は、夫々、フォーカスレンズ３０１、ぶれ補正レンズ３０２である。
【００２８】
ＮＤフィルタ３０３は、任意に出し入れできる構成になっており、光量を調整する事ができる。
【００２９】
センサ３０９は、例えばＣＭＯＳやＣＣＤなどのセンサであり、上記の各レンズでフォーカスされた被写体の光量を検知する。検知された光量はアナログ値としてセンサ３０９から出力され、Ａ／Ｄ変換部３１０によってデジタル値に変換されて、デジタルデータとなってバス２０１に出力される。
【００３０】
図４は、本実施例に係る画像処理部２１３の内部構成を示す図である。
【００３１】
撮像パラメータ取得部４０１は、バス２０１を通じて、撮像部１０２〜１０６の撮像パラメータを取得する。この場合において、各撮像部１０２〜１０６について固有のパラメータ、例えば、レンズ焦点距離や許容錯乱円直径の他、設定可能な絞り値・シャッタースピード・ＩＳＯ感度の各範囲といった情報については、予めＲＯＭ２０４等に記憶されているものとする。さらに、各撮像部について露出補正を行った後の各種パラメータの値、具体的には、被写界深度の導出に必要となる絞り値、被写体距離、シャッタースピード、ＩＳＯ感度、ＮＤフィルタの使用の有無などの情報も取得する。
【００３２】
被写界深度導出部４０２は、撮像パラメータ取得部４０１で取得した撮像パラメータに基づいて、複数の撮像部のうち基準となる撮像部（以下、「基準撮像部」と呼ぶ。）で撮像された画像の被写界深度を導出する。ここで、基準撮像部としては、レンズ焦点距離が最も広角寄りで被写界深度が最も深い撮像部（本実施例では撮像部１０２であるとする。）が通常は選択される。被写界深度の導出の詳細については後述する。
【００３３】
絞り値導出部４０３は、被写界深度導出部４０２で導出される基準撮像部の被写界深度と、基準撮像部以外の撮像部（以下、「非基準撮像部」と呼ぶ。）の被写界深度とが同じになるような非基準撮像部における絞り値を導出する。例えば、レンズ焦点距離が最も広角寄りの撮像部１０２と、レンズ焦点距離がそれよりも少し望遠寄りの撮像部１０３とで絞り値が等しければ、被写界深度は望遠寄りの撮像部１０３の方が浅い。また、絞り３０４の機能として、絞り３０４を絞ると被写界深度は深くなり、絞り３０４を開くと被写界深度は浅くなる。従って、レンズ焦点距離が異なる撮像部間の被写界深度を揃える（同じにする）ためには、撮像部１０３の絞り３０４を絞って被写界深度を深くするか、撮像部１０２の絞り３０４を開いて被写界深度を浅くする必要がある。絞り値導出部４０３では、そのために必要な絞り３０４の段数を例えば計算により求める。なお、絞りの段数を計算によって求める場合の詳細に関しては後述する。
【００３４】
絞り値判定部４０４は、絞り値導出部４０３で導出された絞り値が非基準撮像部の絞り値として設定可能かどうか（導出された絞り値が、非基準撮像部において設定可能な絞り値の範囲に収まっているか否か）を判定する処理を行う。また、絞り値判定部４０４は、絞り値導出部４０３で導出された絞り値が非基準撮像部の絞り値として設定可能ではないと判定された場合に、基準撮像部の絞り値を変更可能かどうか（絞り値を小さくすることが可能か否か）を判定する処理も行う。
【００３５】
絞り値設定部４０５は、基準撮像部及び非基準撮像部に対し、絞り値を設定する処理を行う。設定された絞り値は、ＣＰＵ２０２によって対応する撮像部の撮像制御部２０８に送られる。
【００３６】
図５は、本実施例に係る多眼方式の撮像装置において、被写界深度が揃うように各撮像部の絞り値を調整する処理の流れを示すフローチャートである。以下では、説明を簡単にするため、基準撮像部を撮像部１０２、非基準撮像部を撮像部１０３とした場合の二つの撮像部間で絞り値を調整するケースを取り扱う。なお、本フローチャートで示す一連の処理は、以下の手順を記述したコンピュータ実行可能なプログラムを、ＲＯＭ２０４等からＲＡＭ２０３上に読み込んだ後に、ＣＰＵ２０２によって該プログラムを実行することによって実施される。
【００３７】
ステップ５０１において、撮像制御部２０８は、任意の被写体を対象に基準撮像部（１０２）で露出補正を行う。なお、処理開始直後の段階での露出補正は、被写体の明るさに合わせて自動で露出を決定するいわゆる自動露出機能によってもよいし、ユーザのマニュアル操作によってもよい。
【００３８】
ステップ５０２において、被写界深度導出部４０２は、基準撮像部（１０２）の被写界深度を導出する。一般的に被写界深度（DOF：Depth of Field）は、前方被写界深度Dnと後方被写界深度Dfの和で表され、例えば以下の式（１）〜式（３）によって近似的に求めることができる。
【００３９】
【数１】
2014222854.tif 000003
【００４０】
【数２】
2014222854.tif 000004
【００４１】
【数３】
2014222854.tif 000005
【００４２】
上記式（１）及び式（２）において、ｆはレンズの焦点距離（ｍｍ）、Ｆは絞り値、δは許容錯乱円直径（mm）、Ｌは被写体距離（ｍｍ）である。これらの値は、撮像パラメータ取得部４０１で取得され、被写界深度導出部４０２に提供される。図６は、被写界深度を説明する図である。上記式（１）〜式（３）から求められた基準撮像部（１０２）の被写界深度は、絞り値導出部４０３に送られる。
【００４３】
ステップ５０３において、絞り値導出部４０３は、非基準撮像部（１０３）における絞り値を導出する。その際、当該非基準撮像部（１０３）における被写界深度と、ステップ５０２で導出された基準撮像部（１０２）における被写界深度とが同じになるようにする。具体的には、以下のとおりである。
【００４４】
まず、基準撮像部（１０２）の焦点距離をf（ｍｍ）、非基準撮像部（１０３）の焦点距離をf'（ｍｍ）とすると、非基準撮像部（１０３）の焦点距離f'は、以下の式（４）で表わされる。
【００４５】
【数４】
2014222854.tif 000006
【００４６】
上記式（４）においてnは、f'とfの比率であり、例えば基準撮像部（１０２）の焦点距離が４４ｍｍ、非基準撮像部（１０３）の焦点距離が８８ｍｍであったとすれば、比率ｎは２である。
【００４７】
また、後方被写界深度Dfが無限遠になる距離＝過焦点距離h（ｍｍ）は、以下の式（５）によって求められることが一般に知られている。
【００４８】
【数５】
2014222854.tif 000007
【００４９】
そして、撮影距離が同じである時、被写界深度DOFが同じであれば、基準撮像部（１０２）の過焦点距離h、非基準撮像部（１０３）の過焦点距離h'の間には、以下の式（６）の関係が成り立つ。
【００５０】
【数６】
2014222854.tif 000008
【００５１】
上記式（５）と式（６）から、さらに以下の式（７）及び式（８）が導かれる。
【００５２】
【数７】
2014222854.tif 000009
【００５３】
【数８】
2014222854.tif 000010
【００５４】
上記式（７）及び式（８）において、Ｆは基準撮像部（１０２）の絞り値であり、Ｆ’は非基準撮像部（１０３）の絞り値である。そして、上記式（７）及び式（８）から、以下の式（９）が求められる。
【００５５】
【数９】
2014222854.tif 000011
【００５６】
したがって、非基準撮像部（１０３）において基準撮像部（１０２）と同じ被写界深度を得るには、上記式（９）を満たすように絞りを変えればよいことになる。ここで、変更すべき絞りの段数をiとすると、式（９）は以下の式（１０）のように変形できる。
【００５７】
【数１０】
2014222854.tif 000012
【００５８】
これを整理すると、以下の式（１１）が得られる。
【００５９】
【数１１】
2014222854.tif 000013
【００６０】
図７は、式（１１）をグラフ化したものである。例えば、基準撮像部（１０２）の焦点距離が４４ｍｍ、非基準撮像部（１０３）の焦点距離が８８ｍｍで、比率ｎが２であったとする。この場合、変更すべき絞りの段数iは４となり、非基準撮像部（１０３）において絞りを４段階絞ればよいことが分かる。
【００６１】
このようにして、基準撮像部（１０２）の被写界深度と非基準撮像部（１０３）の被写界深度とが等しくなるような、非基準撮像部（１０３）における絞り値が導出される。
【００６２】
図５のフローチャートの説明に戻る。
【００６３】
ステップ５０４において、絞り値判定部４０４は、ステップ５０３で求めた絞り値が、非基準撮像部（１０３）の絞り値として設定可能かどうかを判定する。例えば、非基準撮像部（１０３）が、以下の絞り値に対応していたとする。
Ｆ２．０，Ｆ２．８，Ｆ４，Ｆ５，Ｆ７，Ｆ８，Ｆ１１，Ｆ１６
この場合、ステップ５０３で求めた絞り値がＦ２．０〜Ｆ１６の範囲内であれば、非基準撮像部（１０３）の絞り値として設定可能と判定されることになる。判定の結果、非基準撮像部（１０３）の絞り値として設定可能であった場合は、ステップ５０７に進む。一方、判定の結果、非基準撮像部（１０３）の絞り値として設定不可能であった場合（例えば、ステップ５０３で求めた絞り値がＦ２２の場合）は、ステップ５０５へ進む。
【００６４】
ステップ５０５において、絞り値判定部４０４は、基準撮像部（１０２）の絞り値が変更可能かどうかを判定する。具体的には、基準撮像部（１０２）の絞り３０４を開いて（絞り値を小さくして）、被写界深度を浅くすることができるかどうかを判定する。例えば、基準撮像部（１０２）が非基準撮像部（１０３）と同様、以下の絞り値に対応していたとする。
Ｆ２．０，Ｆ２．８，Ｆ４，Ｆ５，Ｆ７，Ｆ８，Ｆ１１，Ｆ１６
この場合において、基準撮像部（１０２）の現在の絞り値がＦ２．８〜Ｆ１６の範囲内であれば、絞り３０４をさらに開くことが可能なので、基準撮像部（１０２）の絞り値が変更可能と判定されることになる。判定の結果、基準撮像部（１０２）の絞り値が変更可能であった場合は、ステップ５０６に進む。一方、判定の結果、基準撮像部（１０２）の絞り値が変更不可能であった場合（例えば、絞り値がＦ２．０であった場合）は、ステップ５０８に進む。
【００６５】
ステップ５０６において、絞り値設定部４０５は、基準撮像部（１０２）の絞り値により小さい絞り値（例えば、１段小さい絞り値）を設定する。これにより、設定された絞り値に応じて絞り３０４が撮像制御部２０８によって開かれ、被写界深度が浅くなる。
【００６６】
ステップ５０７において、絞り値設定部４０５は、ステップ５０３で求めた絞り値を非基準撮像部（１０３）の絞り値として設定する。
【００６７】
ステップ５０８において、絞り値設定部４０５は、設定可能な絞り値のうち、ステップ５０３で求めた絞り値に最も近い値を、非基準撮像部（１０３）の絞り値として設定する。すなわち、非基準撮像部（１０３）における被写界深度がステップ５０２で導出された基準撮像部（１０２）の被写界深度と最も近くなるような絞り値を、非基準撮像部（１０３）の絞り値として設定する。
【００６８】
ステップ５０９において、撮像制御部２０８は、ステップ５０１で露出補正を行った際の被写体と同じ被写体を対象に非基準撮像部（１０３）で露出補正を行う。なお、本ステップにおける露出補正は、ステップ５０７又はステップ５０８で設定された絞り値に固定した状態でなされる。
【００６９】
以上のようにして、被写界深度が揃うように各撮像部の絞り値の調整がなされる。
【００７０】
図８は本実施例を適用した場合の一例を示す図であり、（ａ）は暗めの被写体を撮影する場合における撮像部の絞り値の変化、同（ｂ）は明るめの被写体を撮影する場合における撮像部の絞り値の変化を示している。なお、前提として、基準撮像部（１０２）の焦点距離は４４ｍｍ、非基準撮像部（１０３）の焦点距離は８８ｍｍ、各撮像部の設定可能な絞り値の範囲はＦ２．０〜Ｆ１６とする。
【００７１】
被写体が暗めの場合の図８の（ａ）では、まず、基準撮像部（１０２）の露出補正の結果、絞り値がＦ２．０となっている（ステップ５０１）。そして、絞り値Ｆ２．０の場合における基準撮像部（１０２）の被写界深度が導出され（ステップ５０２）、導出された被写界深度と一致させるためには非基準撮像部（１０３）の絞り値を４段絞ればよいことが分かる（ステップ５０３）。絞り値をＦ２．０の状態から４段絞るとＦ８であり、これは上述の設定可能な絞り値の範囲内であるので（ステップステップ５０４でＹｅｓ）、非基準撮像部（１０３）の絞り値がＦ８に設定されることになる（ステップ５０７）。
【００７２】
一方、被写体が明るめの場合の図８の（ｂ）では、まず、基準撮像部（１０２）の露出補正の結果、絞り値がＦ５．７となっている（ステップ５０１）。そして、絞り値Ｆ５．７の場合における基準撮像部（１０２）の被写界深度が導出され（ステップ５０２）、導出された被写界深度と一致させるためには非基準撮像部（１０３）の絞り３０４を４段絞ればよいことが分かる（ステップ５０３）。絞り値をＦ５．７の状態から４段絞るとＦ２２となるが、これは上述の設定可能な絞り値の範囲外である（ステップステップ５０４でＮｏ）。そして、基準撮像部（１０２）の絞り３０４にはまだ開く余地があるので（ステップ５０５でＹｅｓ）、基準撮像部１０２の絞りが１段絞られて絞り値がＦ４となる（ステップ５０６）。その後、ステップ５０１〜ステップ５０４の処理が繰り返され、最終的に非基準撮像部（１０３）の絞り値がＦ１６に設定される（ステップ５０７）。
【００７３】
このようにして、各撮像部において被写界深度を一致させるような絞り値が導出され、当該導出された絞り値に従って各撮像部における露出が補正されることになる。
【００７４】
なお、本実施例では説明を簡単にするため非基準撮像部が１個の場合について説明したが非基準撮像部の数が２以上である場合には、以下のように処理すればよい。
【００７５】
まず、基準撮像部の焦点距離に最も近い焦点距離の非基準撮像部について絞り値の設定を行う。そして、当該絞り値の設定が完了した段階で、焦点距離がその次に近い非基準撮像部について絞り値の設定を行い、以下同様の処理を非基準撮像部の数の分だけ繰り返す。その際、２回目以降の処理で基準撮像部の絞り値の変更がなされた場合には、最初に絞り値の設定を行った非基準撮像部についての絞り値の設定から再度やり直すことになる。
【００７６】
以上のとおり、本実施例によれば、焦点距離の異なる撮像部が混在した多眼方式の撮像装置において、被写界深度が揃うように各撮像部の絞り値が調整される。その結果、光学ズームを使用することなくズーム機能を実現する際に、違和感のない滑らかな動作を実現することができる。
【００７７】
［実施例２］
実施例１では、それぞれ焦点距離の異なるレンズを持つ撮像部の露出を補正する際、被写界深度が揃うように補正する態様について説明した。次に、被写界深度に加え、シャッタースピードも揃える態様について、実施例２として説明する。なお、実施例１と共通する部分については省略ないしは簡略化し、ここでは差異点を中心に説明するものとする。
【００７８】
はじめに、被写界深度に加えてシャッタースピードも揃えることの意義について説明する。シャッタースピードが複数の撮像部間で異なると、スポーツなど動きが激しい被写体を撮影する場合において、撮像部毎に被写体のブレの度合いが異なってしまう。その結果、背景ボケと同様、ズーム比に応じて好適な焦点距離の撮像レンズで得られた画像に切り替える際に、滑らかさが損なわれるという問題が発生する。そのため、被写体のブレの度合いを同じ程度に合わせるべく、被写界深度に加えて、シャッタースピードも揃える露出補正を行うことが有用となる。
【００７９】
図９は、本実施例に係る画像処理部２１３の内部構成を示す図である。
【００８０】
撮像パラメータ取得部４０１、被写界深度導出部４０２、絞り値導出部４０３、絞り値判定部４０４、絞り値設定部４０５については実施例１と共通であり、さらにシャッタースピード設定部９０１が追加されている。このシャッタースピード設定部９０１は、非基準撮像部におけるシャッタースピードを取得し、それと同じ値を基準撮像部のシャッタースピードとして設定することで各撮像部のシャッタースピードを一致させる処理を行う。
【００８１】
図１０は、本実施例に係る本実施例に係る多眼方式の撮像装置において、被写界深度に加えて各撮像部のシャッタースピードも揃うように調整する処理の流れを示すフローチャートである。実施例１の場合と同様、基準撮像部を撮像部１０２、非基準撮像部を撮像部１０３とした場合の二つの撮像部間で絞り値を調整するケースを取り扱うものとする。
【００８２】
ステップ５０１〜ステップ５０９については、実施例１で説明したとおりであり、ここまでの処理で、基準撮像部（１０２）と非基準撮像部（１０３）との間で被写界深度が揃うように、各撮像部に絞り値がそれぞれ設定される。
【００８３】
ステップ１００１において、露出補正パラメータ取得部４０１は、非基準撮像部（１０３）のシャッタースピードを取得する。ここで、非基準撮像部（１０３）には、ステップ５０７（又はステップ５０８）で被写界深度を基準撮像部（１０２）に揃えるための絞り値が設定される。ゆえに、足りない分の光量を稼ぐ必要があり、ステップ５０９における非基準撮像部（１０３）の露出補正では遅いシャッタースピードが設定されるので、ここでは当該遅いシャッタースピードの値が取得されることになる。
【００８４】
ステップ１００２において、シャッタースピード設定部９０１は、基準撮像部（１０２）に対し、非基準撮像部（１０３）に設定されている遅いシャッタースピードと同じ値を設定する。
【００８５】
ステップ１００３において、撮像制御部２０８は、ステップ５０１で露出補正を行った際の被写体と同じ被写体を対象に基準撮像部（１０２）で露出補正を行う。具体的には、非基準撮像部（１０３）に合わせてシャッタースピードを遅くしたことによる光量の増加を抑えるため、例えばＩＳＯ感度の変更やＮＤフィルタ３０３の挿入を行う。この場合において、ＩＳＯ感度を変更するとノイズ量が変化し、これもズーム動作の滑らかさを損なう原因となる恐れがある。そこで、本ステップにおける露出補正としては、ＮＤフィルタ３０３の挿入が望ましい。
【００８６】
以上のとおり、本実施例によれば、焦点距離の異なる撮像部が混在した多眼方式の撮像装置において、被写界深度だけでなくシャッタースピードも揃うような調整がなされる。その結果、動きのある被写体にも対応することができる。
【００８７】
（その他の実施例）
本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施例の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
【図１】
2014222854.tif 000014
【図２】
2014222854.tif 000015
【図３】
2014222854.tif 000016
【図４】
2014222854.tif 000017
【図５】
2014222854.tif 000018
【図６】
2014222854.tif 000019
【図７】
2014222854.tif 000020
【図８】
2014222854.tif 000021
【図９】
2014222854.tif 000022
【図１０】
2014222854.tif 000023