【手続補正書】
【提出日】平成27年7月31日(2015.7.31)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
所定の被写体距離に合焦するようフォーカスレンズを設定して取得された画像信号であって、決定された焦点面に合焦する再構成画像を生成可能な画像信号を取得する取得手段と、
合焦評価を行う対象被写体距離を決定する決定手段と、
前記決定手段により決定された前記対象被写体距離に対応する焦点面に合焦する再構成画像を、前記取得手段により取得された画像信号から生成する生成手段と、
前記生成手段により生成された再構成画像について合焦評価を行う評価手段と、を有し、
前記評価手段は、
少なくとも第１の距離間隔を空けて前記決定手段に前記対象被写体距離を決定させ、該対象被写体距離に合焦するよう前記フォーカスレンズを設定して取得された画像信号から前記対象被写体距離に対応する焦点面に合焦する再構成画像を前記生成手段に生成させて合焦評価を行う第１のモードと、
前記第１の距離間隔よりも短い第２の距離間隔を空けて前記決定手段に前記対象被写体距離を決定させ、所定の被写体距離に合焦するようフォーカスレンズを設定して取得された評価用の画像信号から前記対象被写体距離に対応する仮想的な焦点面に合焦する再構成画像を前記生成手段に生成させて合焦評価を行う第２のモードと、を有する
ことを特徴とする画像処理装置。
【請求項２】
前記評価手段は、前記第１のモードにおける合焦評価の結果に基づき、前記第２のモードにおいて再構成画像の生成に用いる前記評価用の画像信号を選択することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記評価手段は、前記第１のモードにおける合焦評価の結果に基づき合焦位置を推定し、前記第２のモードにおいて該合焦位置に最も近い被写体距離に合焦するよう前記フォーカスレンズが設定された際に取得された画像信号を、前記評価用の画像信号に選択することを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記評価手段は、前記第１のモードにおける合焦評価の結果に基づき合焦位置を推定し、前記第２のモードにおいて該合焦位置に合焦するよう前記フォーカスレンズを設定して取得された画像信号を、前記評価用の画像信号に選択することを特徴とする請求項２に記載の画像処理装置。
【請求項５】
前記評価手段は、前記第１のモードにおいて前記決定手段に前記対象被写体距離を順次決定させ、前記対象被写体距離に応じた合焦評価の挙動に基づき合焦位置を推定することを特徴とする請求項３または４に記載の画像処理装置。
【請求項６】
前記評価手段は、前記第２のモードにおいて前記推定した合焦位置に基づき前記決定手段に前記対象被写体距離を決定させることを特徴とする請求項３乃至５のいずれか１項に記載の画像処理装置。
【請求項７】
前記評価手段による前記第２のモードにおける合焦評価の結果に基づき、合焦位置の情報を出力する出力手段をさらに有することを特徴とする請求項１乃至６のいずれか１項に記載の画像処理装置。
【請求項８】
前記取得手段により取得される画像信号は、該画像信号の画素の各々が、通過した撮像光学系の瞳領域及び入射方向の組み合わせが異なる光束に対応している画像信号であることを特徴とする請求項１乃至７のいずれか１項に記載の画像処理装置。
【請求項９】
フォーカスレンズを含む撮像光学系と、
前記撮像光学系を介して撮像を行い、画像信号を出力手段と、
前記出力手段により出力された画像信号を取得する取得手段を含む請求項１乃至８のいずれか１項に記載の画像処理装置と、を有する
ことを特徴とする撮像装置。
【請求項１０】
画像処理装置の取得手段が、所定の被写体距離に合焦するようフォーカスレンズを設定して取得される画像信号であって、決定された焦点面に合焦する再構成画像を生成可能な画像信号を取得する取得工程と、
前記画像処理装置の決定手段が、合焦評価を行う対象被写体距離を決定する決定工程と、
前記画像処理装置の生成手段が、前記決定工程において決定された前記対象被写体距離に対応する焦点面に合焦する再構成画像を、前記取得工程において取得された画像信号から生成する生成工程と、
前記画像処理装置の評価手段が、前記生成工程において生成された再構成画像について合焦評価を行う評価工程と、を有し、
前記評価手段は前記評価工程において、
少なくとも第１の距離間隔を空けて前記決定工程において前記対象被写体距離を決定させ、該対象被写体距離に合焦するよう前記フォーカスレンズを設定して取得された画像信号から前記対象被写体距離に対応する焦点面に合焦する再構成画像を前記生成工程において生成させて合焦評価を行う第１のモードと、
前記第１の距離間隔よりも短い第２の距離間隔を空けて前記決定工程において前記対象被写体距離を決定させ、所定の被写体距離に合焦するようフォーカスレンズを設定して取得された評価用の画像信号から前記対象被写体距離に対応する仮想的な焦点面に合焦する再構成画像を前記生成工程において生成させて合焦評価を行う第２のモードと、を有する
ことを特徴とする画像処理装置の制御方法。
【請求項１１】
コンピュータを、請求項１乃至８のいずれか１項に記載の画像処理装置の各手段として機能させるためのプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】発明の名称
【補正方法】変更
【補正の内容】
【発明の名称】画像処理装置、撮像装置、制御方法、及びプログラム
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００１
【補正方法】変更
【補正の内容】
【０００１】
本発明は、画像処理装置、撮像装置、制御方法、及びプログラムに関し、特に撮影後に任意の被写体距離に合焦した画像を生成する技術に関する。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００３
【補正方法】変更
【補正の内容】
【０００３】
コントラスト検出方式は、得られる撮像信号の信号強度等により合焦状態を検出するため、異なる光軸について得られた画像間の像のずれを検出する位相差検出方式に比べ、合焦する焦点位置（合焦位置）を厳密に検出することができる。一方で、コントラスト検出方式を用いた合焦位置の検出では、合焦する被写体距離を異ならせながら撮像した複数の画像について合焦評価を行う必要がある。このため、コントラスト検出方式を用いた合焦位置の検出には複数の画像についての評価時間及びフォーカスレンズの駆動時間が必要であり、位相差検出方式に比べて検出に時間を要する。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】０００５
【補正方法】変更
【補正の内容】
【０００５】
一方、近年では撮影後に任意の被写体距離に合焦した画像を生成可能な撮像装置がある。このような撮像装置では、撮像素子内の複数の光電変換素子に対してマイクロレンズが割り当てられ、１つのマイクロレンズに対応付けられた光電変換素子の各々に対して、撮影光学系の異なる瞳領域を通過した光束が結像される。該撮像装置により得られた撮像素子の各画素の出力信号を並べ替えて瞳分割数分の画素値を加算することで、任意の被写体距離に合焦した画像の各画素は生成される。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】０００６
【補正方法】変更
【補正の内容】
【０００６】
特許文献２には、撮影後に任意の被写体距離に合焦した画像を生成可能な撮像装置において、１回の撮像で得られた出力信号から複数の被写体に合焦した焦点検出用の画像を生成することで、撮影対象の被写体に合焦する被写体距離を検出する方法が開示されている。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
また特許文献２のような撮像装置における合焦位置を検出する方法は、被写体距離に応じて１回の撮像で得られた出力信号の画素の並べ替えを行い、並べ替え後の出力信号から焦点検出用の画像を生成する。このとき１回の撮像で得られた出力信号を用いて任意の被写体距離に合焦する焦点検出用の画像を生成するため、実際にその被写体距離に合焦するようにフォーカスレンズを駆動して撮影して得られた画像を用いる場合と合焦評価の評価値が異なり得られる合焦位置の精度が低かった。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
本発明は、上述の問題点に鑑みてなされたものであり、オートフォーカス動作を高速にかつ良好な精度で行う画像処理装置、撮像装置、制御方法、及びプログラムを提供することを目的とする。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正の内容】
【００１２】
前述の目的を達成するために、本発明の画像処理装置は、以下の構成を備える。
所定の被写体距離に合焦するようフォーカスレンズを設定して取得される画像信号であって、決定された焦点面に合焦する再構成画像を生成可能な画像信号を取得する取得手段と、合焦評価を行う対象被写体距離を決定する決定手段と、決定手段により決定された対象被写体距離に対応する焦点面に合焦する再構成画像を、取得手段により取得された画像信号から生成する生成手段と、生成手段により生成された再構成画像について合焦評価を行う評価手段と、を有し、評価手段は、少なくとも第１の距離間隔を空けて決定手段に対象被写体距離を決定させ、該対象被写体距離に合焦するようフォーカスレンズを設定して取得された画像信号から対象被写体距離に対応する焦点面に合焦する再構成画像を生成手段に生成させて合焦評価を行う第１のモードと、第１の距離間隔よりも短い第２の距離間隔を空けて決定手段に対象被写体距離を決定させ、所定の被写体距離に合焦するようフォーカスレンズを設定して取得された評価用の画像信号から対象被写体距離に対応する仮想的な焦点面に合焦する再構成画像を生成手段に生成させて合焦評価を行う第２のモードと、を有することを特徴とする。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００１５
【補正方法】変更
【補正の内容】
【００１５】
［実施形態］
以下、本発明の例示的な実施形態について、図面を参照して詳細に説明する。なお、以下に説明する一実施形態は、撮像装置の一例としての、撮影後に任意の被写体距離に合焦した画像を生成可能なカメラシステムに、本発明を適用した例を説明する。しかし、本発明は、任意の被写体距離に合焦した画像を生成して焦点検出動作を行うことが可能な任意の機器に適用可能である。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】変更
【補正の内容】
【００１８】
・「再構成画像」
ＬＦデータから生成される、任意の被写体距離に合焦した画像。具体的には生成する被写体距離に対応する焦点面（再構成面）での画素配置に従ってＬＦデータの画素を並び替え、再構成画像の１画素に対応する画素の画素値を合算することで該画素の画素値を得る。通常画素値を合算する画素数は、瞳分割数になる。ＬＦデータの撮影時の合焦面、即ち撮像素子上（撮像面）の画素配置が図４のようである場合、再構成画像を生成する再構成面が決定されると、該再構成面における各画素は、撮像面における各画素に入射する光束の入射方向を考慮して決定される。具体的には、再構成面における画素配置は再構成面に撮像素子が存在した場合に入射する光束を入射方向に基づいて決定し、該画素配置において１つのマイクロレンズに対応する画素の画素値を足し合わせることで、再構成画像の１画素を生成することができる。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００３１
【補正方法】変更
【補正の内容】
【００３１】
Ｓ３０１で、カメラ制御部１０１は、第１段階の合焦位置の探索動作について、合焦評価の評価対象である対象被写体距離を決定する。
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】００３３
【補正方法】変更
【補正の内容】
【００３３】
・第１段階の探索動作
対象被写体距離に合焦するようにフォーカスレンズを駆動して得られたＬＦデータから、該対象被写体距離の被写体に合焦する再構成画像（図４の撮像面の画素配置で生成される再構成画像）を生成して合焦評価を行う。対象被写体距離の決定間隔は、例えば図５（ａ）に示されるように、焦点範囲に対して離散的に決定される。即ち、第１段階の探索動作は、対象被写体距離を設定する間隔を粗くして行う粗調探索であり、離散的なコントラスト評価値の分布の挙動から、合焦位置を模索する。本実施形態では第１段階の探索動作における対象被写体距離の決定間隔は、例えば１０〜２５ＦΔ（Ｆ：Ｆナンバー、Δ：２０μｍ程度）であるものとする。
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】００３４
【補正方法】変更
【補正の内容】
【００３４】
・第２段階の探索動作
フォーカスレンズは駆動せず、対象被写体距離に対応する再構成面について再構成画像を生成して合焦評価を行う。第２段階の探索動作における対象被写体距離の決定間隔は、第１段階の探索動作に比べて細かい微調探索である。本実施形態では第２段階の探索動作における対象被写体距離の決定間隔は、粗調動作時よりも小さい１〜５ＦΔであるものとする。なお、本発明の実施はこれに限られるものではなく、第２段階の探索動作における対象被写体距離の決定間隔は、第１段階の探索動作に比べて小さければよい。また第１段階及び第２段階の探索動作における決定間隔は固定間隔である必要はなく、例えば第１段階では所定の閾値より大きい間隔、また第２段階では該閾値より小さい間隔で決定されればよい。
【手続補正１５】
【補正対象書類名】明細書
【補正対象項目名】００３５
【補正方法】変更
【補正の内容】
【００３５】
Ｓ３０２で、カメラ制御部１０１は、Ｓ３０１において決定した対象被写体距離に対応する位置にフォーカスレンズを駆動させる。具体的にはカメラ制御部１０１は、電気接点１０７を介してレンズ制御部２０１に対象被写体距離の情報を伝送する制御信号を伝送する。そしてレンズ制御部２０１は、対象被写体距離の情報に基づいてフォーカスレンズの駆動位置を決定し、レンズ駆動部２０３にフォーカスレンズを駆動させる。
【手続補正１６】
【補正対象書類名】明細書
【補正対象項目名】００３６
【補正方法】変更
【補正の内容】
【００３６】
Ｓ３０３で、カメラ制御部１０１は、撮像部１０２に被写体を撮像させ、対象被写体距離に係るＬＦデータを取得する。具体的にはカメラ制御部１０１は、所定の露出設定で撮像部１０２が出力したＬＦデータに係るアナログ画像信号に対して、画像処理部１０３にＡ／Ｄ変換処理を適用させ、ＬＦデータを取得する。
【手続補正１７】
【補正対象書類名】明細書
【補正対象項目名】００３７
【補正方法】変更
【補正の内容】
【００３７】
Ｓ３０４で、カメラ制御部１０１は、再構成画像生成処理を実行し、Ｓ３０３において取得したＬＦデータから、対象被写体距離に対応する撮像面についての再構成画像を画像処理部１０３に生成させる。なお、本ステップで生成される再構成画像は、対象被写体距離が撮像面に対応しているため、撮像素子から出力されたＬＦデータの画素配置を変更することなく再構成画像を生成することができる。
【手続補正１８】
【補正対象書類名】明細書
【補正対象項目名】００４４
【補正方法】変更
【補正の内容】
【００４４】
Ｓ６０４で、画像処理部１０３は、処理対象のＬＦデータの画素の画素値を、対応する再構成画像の画素についてのメモリ１０４の格納領域の値に加算する。また、例えば設定された対象被写体距離により、ＬＦデータの画素位置のシフト量が整数値ではない場合は、本ステップにおいて複数の画素値が内分されて、対応する再構成画像の画素についての格納領域の値に加算すればよい。
【手続補正１９】
【補正対象書類名】明細書
【補正対象項目名】００４５
【補正方法】変更
【補正の内容】
【００４５】
このように本再構成画像生成処理を実行することにより、画像処理部１０３は対象被写体距離に対応した再構成画像を生成することができる。カメラ制御部１０１は、再構成画像生成処理が完了した後、ＡＦ処理をＳ３０５に移す。
【手続補正２０】
【補正対象書類名】明細書
【補正対象項目名】００４９
【補正方法】変更
【補正の内容】
【００４９】
Ｓ６１２で、画像処理部１０３は、再構成画像の画素値についてフィルタ処理を適用する。該フィルタ処理では、粗調探索時にはより低周波成分に着目したフィルタリングを行い、微調探索時には粗調探索時に比べて高周波に着目したフィルタリングを行うとよい。このようにすることで、ローカルミニマムを避けつつ、最終的にコントラスト評価値から判断される被写体に合焦する被写体距離の合焦精度を向上することができる。
【手続補正２１】
【補正対象書類名】明細書
【補正対象項目名】００５５
【補正方法】変更
【補正の内容】
【００５５】
本実施形態では、このように評価枠内の全ての水平ラインについての最大画素値の合計値をコントラスト評価値として出力するものとして説明するが、対象被写体距離の変動に伴うコントラスト評価値の算出については他の計算方法を用いてもよい。例えば、隣接画素出力差の二乗和である二次コントラスト評価値を、隣接画素出力差の絶対和である一次コントラストの二乗で除すことで得られる、輝度値を無次元化した評価値を用いる方法が使用可能である。
【手続補正２２】
【補正対象書類名】明細書
【補正対象項目名】００５６
【補正方法】変更
【補正の内容】
【００５６】
このようにして合焦評価を行う再構成画像についてのコントラスト評価値を画像処理部１０３に出力させた後、カメラ制御部１０１は該評価値を対象被写体距離の情報に関連付けてＲＡＭに蓄積し、ＡＦ処理をＳ３０６に移す。
【手続補正２３】
【補正対象書類名】明細書
【補正対象項目名】００５７
【補正方法】変更
【補正の内容】
【００５７】
Ｓ３０６で、カメラ制御部１０１は、第１段階の探索動作が完了したか否かを判断する。具体的にはカメラ制御部１０１は、対象被写体距離の決定間隔で焦点範囲の全体についてフォーカスレンズを離散的に駆動し、各対象被写体距離について合焦評価を行ったか否かを判断する。カメラ制御部１０１は、第１段階の探索動作が完了したと判断した場合は処理をＳ３０７に移す。またカメラ制御部１０１は、第１段階の探索動作が完了していないと判断した場合は処理をＳ３０１に戻し、第１段階の探索動作に係る新たな対象被写体距離を決定させる。なお、本実施形態では第１段階の探索動作を行う探索範囲を焦点範囲の全体としたが、例えば設定されている撮影モード等、好適な合焦位置が特定の範囲に限定されている場合等は、第１段階の探索範囲が焦点範囲の全体である必要はない。
【手続補正２４】
【補正対象書類名】明細書
【補正対象項目名】００６０
【補正方法】変更
【補正の内容】
【００６０】
Ｓ６２１で、カメラ制御部１０１は、第１段階の探索動作で設定した対象被写体距離のそれぞれについて得られたコントラスト評価値の情報を参照し、評価値の大きさが上位３位までの被写体距離を特定する。例えばコントラスト評価値の挙動が図５（ａ）のような挙動になった場合、カメラ制御部１０１は上位３位までの評価値ＥＶＭａｘ、ＥＶＭａｘ２、ＥＶＭａｘ３と、そのときの被写体距離の情報を特定する。
【手続補正２５】
【補正対象書類名】明細書
【補正対象項目名】００６３
【補正方法】変更
【補正の内容】
【００６３】
Ｓ６２４で、カメラ制御部１０１は、直線Ｌ１と直線Ｌ２の式から、その交点の被写体距離を推定合焦位置として取得する。なお、被写体距離に対するコントラスト評価値の分布に応じた合焦位置の推定については、本ステップの方式に限られるものではない。例えば、取得した４点の被写体距離におけるコントラスト評価値をもとに二次関数近似を行い、そのピーク位置を推定合焦位置としてもよい。
【手続補正２６】
【補正対象書類名】明細書
【補正対象項目名】００６５
【補正方法】変更
【補正の内容】
【００６５】
Ｓ３０８で、カメラ制御部１０１は、第１段階の探索動作で得られたＬＦデータのうち、第２段階の探索動作に用いるＬＦデータを特定する。即ち、カメラ制御部１０１は、フォーカスレンズを駆動せずに、対象被写体距離に対応した再構成画像を生成する際に用いるＬＦデータをいずれの被写体距離で得られたＬＦデータにするかを判断する。
【手続補正２７】
【補正対象書類名】明細書
【補正対象項目名】００６６
【補正方法】変更
【補正の内容】
【００６６】
上述したように、ＬＦデータを撮影した際の被写体距離とは異なる対象被写体距離について生成された再構成画像のコントラスト評価値は、フォーカスレンズが対象被写体距離にある場合に得られたＬＦデータから撮像面について生成された再構成画像と異なりうる。即ち、フォーカスレンズを駆動せずに生成された再構成画像についてのコントラスト評価は、駆動した場合に得られる評価に比べて精度が悪化する可能性がある。これは、ＬＦデータを撮影した際の被写体距離と、再構成画像に対応する対象被写体距離との差が大きくなるほど顕著に現れうる。
【手続補正２８】
【補正対象書類名】明細書
【補正対象項目名】００６７
【補正方法】変更
【補正の内容】
【００６７】
このため本実施形態では、第２段階の探索動作におけるコントラスト評価値の精度劣化を低減するために、カメラ制御部１０１は推定合焦位置に最も近い被写体距離で得られたＬＦデータ（第２段階用ＬＦデータ）を、第２段階の探索動作に用いる。例えば図５（ｂ）のように推定合焦位置が得られた場合、本実施形態によれば第２段階用ＬＦデータとして撮像面でのコントラスト評価値がＥＶＭａｘを示したＬＦデータが用いられる。しかしながら、本発明の実施はこれに限らず、推定合焦位置と対応する位置にフォーカスレンズを駆動させ、撮影により得られたＬＦデータを第２段階用ＬＦデータとして用いてもよい。このようにすることで、第２段階の探索動作におけるコントラスト評価値の精度劣化をより低減することができる。
【手続補正２９】
【補正対象書類名】明細書
【補正対象項目名】００６８
【補正方法】変更
【補正の内容】
【００６８】
Ｓ３０９で、カメラ制御部１０１は、第２段階の合焦位置の探索動作について、合焦評価の評価対象である対象被写体距離を決定する。本ステップで決定される対象被写体距離は、推定合焦位置付近を集中的に探索するように、例えば推定合焦位置を中心として定められた所定の範囲（第２段階の探索範囲）内で順次決定されればよい。なお、対象被写体距離は、推定合焦位置を開始位置として、コントラスト評価値の挙動を確認しながら、被写体距離をマクロ側あるいは望遠側に順次決定されてもよい。また対象被写体距離は、第２段階の探索動作に用いるＬＦデータと対応する被写体距離から、推定合焦位置の方向に順次決定されてもよいことは容易に理解されよう。
【手続補正３０】
【補正対象書類名】明細書
【補正対象項目名】００６９
【補正方法】変更
【補正の内容】
【００６９】
Ｓ３１０で、カメラ制御部１０１は、再構成画像生成処理を実行し、第２段階用ＬＦデータから、対象被写体距離に対応する再構成面についての再構成画像を画像処理部１０３に生成させる。
【手続補正３１】
【補正対象書類名】明細書
【補正対象項目名】００７０
【補正方法】変更
【補正の内容】
【００７０】
Ｓ３１１で、カメラ制御部１０１は、コントラスト評価処理を画像処理部１０３に実行させ、再構成画像についてのコントラスト評価値を取得する（第２の評価）。カメラ制御部１０１は該評価値を対象被写体距離の情報に関連付けてＲＡＭに蓄積する。
【手続補正３２】
【補正対象書類名】明細書
【補正対象項目名】００７２
【補正方法】変更
【補正の内容】
【００７２】
Ｓ３１３で、カメラ制御部１０１は、第２段階の探索範囲について得られた各コントラスト評価値から、被写体に合焦する合焦位置を決定する。合焦位置の決定方法は、例えば図５（ｃ）に示されるような５点の評価値について合焦位置推定処理と同様に直線Ｌ１’及び直線Ｌ２’を決定し、直線Ｌ１’と直線Ｌ２’の式から、その交点の被写体距離を合焦位置として決定する。
【手続補正３３】
【補正対象書類名】明細書
【補正対象項目名】００８３
【補正方法】変更
【補正の内容】
【００８３】
以上説明したように、本実施形態の撮像装置は、オートフォーカス動作を高速にかつ良好な精度で行うことができる。具体的には撮像装置は、まず、焦点範囲において閾値よりも大きい第１の間隔をあけて第１の被写体距離を順次決定する。そして第１の被写体距離の各々について、対応する位置にフォーカスレンズを駆動させて撮像された画像信号から生成された、該第１の被写体距離の被写体に合焦する再構成画像の合焦評価を行う。さらに撮像装置は、この合焦評価の結果に基づき１つの画像信号を選択する。次に、焦点範囲において、閾値よりも小さい第２の間隔をあけて第２の被写体距離を順次決定する。そして第２の被写体距離の各々について、選択した１つの画像信号から生成された、該第２の被写体距離の被写体に合焦する再構成画像の合焦評価を行う。
【手続補正３４】
【補正対象書類名】明細書
【補正対象項目名】００８５
【補正方法】変更
【補正の内容】
【００８５】
つまり本発明は、第１段階の探索動作について第２段階と同様にフォーカスレンズを駆動させず、１つのＬＦデータから粗調探索として決定された対象被写体距離について生成された再構成画像を生成し、合焦評価を行ってもよい。そして、その評価の結果得られた推定合焦位置に対応した位置に改めてフォーカスレンズを駆動して撮像を行い、第２段階用ＬＦデータを取得する構成であってもよい。このようにすることで、第１段階の探索動作におけるフォーカスレンズの駆動動作に要する時間を短縮し、さらに推定合焦位置について得られたＬＦデータを用いて第２段階の探索動作を行うことができる。つまり、本変形例により、良好な精度のオートフォーカス動作をより高速に実現することができる。
【手続補正３５】
【補正対象書類名】図面
【補正対象項目名】図３
【補正方法】変更
【補正の内容】
【図３】
2014029429.tif 000001
【手続補正３６】
【補正対象書類名】図面
【補正対象項目名】図６
【補正方法】変更
【補正の内容】
【図６】
2014029429.tif 000002