(57)【要約】【課題】一対の焦点検出用光学像の位相差量の算出の際の演算量を抑える。【解決手段】本発明による撮像装置は、イメージセンサーと、周期的な所定タイミングまでにイメージセンサーによって出力された部分画像データに、焦点検出用データが含まれる場合は、部分画像データから焦点検出用データを抜き出し、抜き出した焦点検出用データが所定条件を満たすか否かを判定する判定手段と、判定手段によって抜き出された焦点検出用データが所定条件を満たすと判定されると、焦点検出用データを記憶部に記録し、判定手段によって抜き出された焦点検出用データが所定条件を満たさないと判定されると、焦点検出用データを記憶部に記録しない記録手段と、一対の焦点検出用光学像の位相差量を算出する算出手段とを備える。【選択図】図１
2015087450.tif 000002
【特許請求の範囲】
【請求項１】
被写体から光学系の一対の瞳領域を透過して到来する一対の焦点検出用光束により結像される前記被写体の一対の位相差ＡＦ用光学像に応じた一対の焦点検出用データを出力する複数の焦点検出用画素と、前記被写体から前記光学系を透過して到来する撮影用光束により結像される撮像用光学像に応じた撮像用データを出力する複数の撮像用画素とからなる複数の画素が２次元平面状に配置され、前記焦点検出用データと前記撮像用データとを含む画像データを出力するイメージセンサーと、
前記画像データのうちの、周期的な所定タイミングまでに前記イメージセンサーによって出力された前記画像データ中の部分画像データに、前記焦点検出用データが含まれる場合は、前記部分画像データから前記焦点検出用データを抜き出し、抜き出した前記焦点検出用データが所定条件を満たすか否かを判定する判定手段と、
前記判定手段によって抜き出された前記焦点検出用データが前記所定条件を満たすと判定されると、前記判定手段によって抜き出された前記焦点検出用データを記憶部に記録し、前記判定手段によって抜き出された前記焦点検出用データが前記所定条件を満たさないと判定されると、前記判定手段によって抜き出された前記焦点検出用データを前記記憶部に記録しない記録手段と、
前記記録手段によって前記記憶部に記録された前記焦点検出用データに基づいて前記一対の焦点検出用光学像の位相差量を算出する算出手段と、
前記算出手段によって算出された前記位相差量に基づいて前記光学系を制御することによって前記光学系の焦点位置を調節する光学系制御手段と、
前記撮像用データに基づいて画像を生成する画像生成部とを備えることを特徴とする撮像装置。
【請求項２】
請求項１に記載の撮像装置において、
前記所定条件は、前記判定手段によって抜き出された前記焦点検出用データの最大値が第１閾値よりも大きく、かつ前記判定手段によって抜き出された前記焦点検出用データの最小値が前記第１閾値より小さい第２閾値よりも小さいことを特徴とする撮像装置。
【請求項３】
請求項１に記載の撮像装置において、
前記所定条件は、前記判定手段によって抜き出された前記焦点検出用データの最大値および最小値の差が所定閾値よりも大きいことであることを特徴とする撮像装置。
【請求項４】
請求項１〜３のいずれか１項に記載の撮像装置において、
前記イメージセンサーは、前記２次元平面の各行毎に前記画像データを出力し、
前記所定タイミングは、前記２次元平面の前記各行に対応する前記部分画像データが前記イメージセンサーによって出力されたタイミングであることを特徴とする撮像装置。
【請求項５】
請求項１〜３のいずれか１項に記載の撮像装置において、
前記イメージセンサーは、前記２次元平面の複数行毎に前記画像データを出力し、
前記所定タイミングは、前記２次元平面の前記複数行に対応する前記部分画像データが前記イメージセンサーによって出力されたタイミングであることを特徴とする撮像装置。
【請求項６】
請求項１〜３のいずれか１項に記載の撮像装置において、
前記イメージセンサーは、前記２次元平面の各行毎に前記画像データを出力し、
前記所定タイミングは、前記イメージセンサーが前記画像データを前記各行毎に出力することによって、前記２次元平面の複数行に対応する前記部分画像データが前記イメージセンサーによって出力されたタイミングであることを特徴とする撮像装置。
【請求項７】
請求項１〜６のいずれか１項に記載の撮像装置において、
前記部分画像データは、複数セットの前記焦点検出用データを含み、
各セットの前記焦点検出用データは前記２次元平面の複数列に対応し、
前記判定手段は、前記各セットの前記焦点検出用データを抜き出し、抜き出した前記各セットの前記焦点検出用データが前記所定条件を満たすか否かを判定することを特徴とする撮像装置。
【請求項８】
請求項１〜７のいずれか１項に記載の撮像装置において、
前記イメージセンサーは、前記画像データを定期的に出力し、
前記記録手段は、前記判定手段によって抜き出された前記焦点検出用データを前記記憶部に記録する際、該焦点検出用データを、前記イメージセンサーが過去に出力した前記部分画像データにおいて前記判定手段によって抜き出された前記焦点検出用データに加算することによって得られる加算データを、新たに前記焦点検出データとして前記記憶部に記録することを特徴とする撮像装置。
【請求項９】
請求項１〜８のいずれか１項に記載の撮像装置において、
前記イメージセンサーは、前記画像データを定期的に出力し、
前記判定手段は、抜き出した前記焦点検出用データが前記所定条件を満たさないと判定した後、前記イメージセンサーが前記画像データを出力した際に前記所定条件を変更することを特徴とする撮像装置。
【請求項１０】
被写体から光学系の一対の瞳領域を透過して到来する一対の焦点検出用光束により結像される前記被写体の一対の焦点検出用光学像に応じた一対の焦点検出用データを出力する複数の焦点検出用画素と、前記被写体から前記光学系を透過して到来する撮影用光束により結像される撮像用光学像に応じた撮像用データを出力する複数の撮像用画素とからなる複数の画素が２次元平面状に配置され、前記焦点検出用データと前記撮像用データとを含む画像データを出力するイメージセンサーから前記画像データが出力されると、前記画像データのうちの、周期的な所定タイミングまでに前記イメージセンサーによって出力された部分画像データに、前記焦点検出用データが含まれる場合は、前記焦点検出用データから前記焦点検出用データを抜き出し、抜き出した前記焦点検出用データが所定条件を満たすか否かを判定する判定処理と、
前記判定処理によって抜き出された前記焦点検出用データが前記所定条件を満たすと判定されると、前記判定処理によって抜き出された前記焦点検出用データを記憶部に記録し、前記判定処理によって抜き出された前記焦点検出用データが前記所定条件を満たさないと判定されると、前記判定処理によって抜き出された前記焦点検出用データを前記記憶部に記録しない記録処理と、
前記記録処理によって前記記憶部に記録された前記焦点検出用データに基づいて前記一対の焦点検出用光学像の位相差量を算出する算出処理と、
光学系制御部が前記光学系を制御することによって前記光学系の焦点位置を調節するように、前記算出処理によって算出された前記位相差量を前記光学系制御部に出力する光学系制御処理と、
前記撮像用データに基づいて画像を生成する画像生成処理とをコンピュータに実行させることを特徴とする撮像処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置および撮像処理プログラムに関する。
【背景技術】
【０００２】
分光感度特性の異なる複数種類の撮像用画素を二次元状に規則的に配列し、光学系により結像される像を撮像する撮像素子が知られている（例えば特許文献１参照）。その撮像素子においては、撮像用画素のうちの所定方向に沿った一部を焦点検出用画素として構成し、規則的な配列において焦点検出用画素の位置に位置する撮像用画素と同じ分光感度特性を有する撮像用画素が複数の焦点検出用画素の間に配置されるように、所定方向の画素配列上に撮像用画素と焦点検出用画素とを混在させて配置する。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００８−４００８７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
撮像素子の焦点検出用画素列に含まれる焦点検出用画素数が増加するほど、そこから読み出されたデータの処理に必要な物理量（例えば、扱うデータ量、メモリ帯域、メモリ占有量、および演算量の少なくとも１つ）が増大する。このため、これら読み出されたデータの処理に不具合が生じる虞がある。例えば、ユーザーが焦点検出エリアを指定しない場合において、多くのデータを限られた処理能力で処理しなければならなくなり、信頼性の低いデフォーカス量が算出される場合がある。
【課題を解決するための手段】
【０００５】
（１）請求項１に記載の撮像装置は、被写体から光学系の一対の瞳領域を透過して到来する一対の焦点検出用光束により結像される被写体の一対の焦点検出用光学像に応じた一対の焦点検出用データを出力する複数の焦点検出用画素と、被写体から光学系を透過して到来する撮影用光束により結像される撮像用光学像に応じた撮像用データを出力する複数の撮像用画素とからなる複数の画素が２次元平面状に配置され、焦点検出用データと撮像用データとを含む画像データを出力するイメージセンサーと、画像データのうちの、周期的な所定タイミングまでにイメージセンサーによって出力された部分画像データに、焦点検出用データが含まれる場合は、部分画像データから焦点検出用データを抜き出し、抜き出した焦点検出用データが所定条件を満たすか否かを判定する判定手段と、判定手段によって抜き出された焦点検出用データが所定条件を満たすと判定されると、判定手段によって抜き出された焦点検出用データを記憶部に記録し、判定手段によって抜き出された焦点検出用データが所定条件を満たさないと判定されると、判定手段によって抜き出された焦点検出用データを記憶部に記録しない記録手段と、記録手段によって記憶部に記録された焦点検出用データに基づいて一対の焦点検出用光学像の位相差量を算出する算出手段と、算出手段によって算出された位相差量に基づいて光学系を制御することによって光学系の焦点位置を調節する光学系制御手段と、撮像用データに基づいて画像を生成する画像生成部とを備えることを特徴とする。
（２）請求項１０に記載の撮像処理プログラムは、被写体から光学系の一対の瞳領域を透過して到来する一対の焦点検出用光束により結像される被写体の一対の焦点検出用光学像に応じた一対の焦点検出用データを出力する複数の焦点検出用画素と、被写体から光学系を透過して到来する撮影用光束により結像される撮像用光学像に応じた撮像用データを出力する複数の撮像用画素とからなる複数の画素が２次元平面状に配置され、焦点検出用データと撮像用データとを含む画像データを出力するイメージセンサーから画像データが出力されると、画像データのうちの、周期的な所定タイミングまでにイメージセンサーによって出力された部分画像データに、焦点検出用データが含まれる場合は、焦点検出用データから焦点検出用データを抜き出し、抜き出した焦点検出用データが所定条件を満たすか否かを判定する判定処理と、判定処理によって抜き出された焦点検出用データが所定条件を満たすと判定されると、判定処理によって抜き出された焦点検出用データを記憶部に記録し、判定処理によって抜き出された焦点検出用データが所定条件を満たさないと判定されると、判定処理によって抜き出された焦点検出用データを記憶部に記録しない記録処理と、記録処理によって記憶部に記録された焦点検出用データに基づいて一対の焦点検出用光学像の位相差量を算出する算出処理と、光学系制御部が光学系を制御することによって光学系の焦点位置を調節するように、算出処理によって算出された位相差量を光学系制御部に出力する光学系制御処理と、撮像用データに基づいて画像を生成する画像生成処理とをコンピュータに実行させることを特徴とする。
【発明の効果】
【０００６】
本発明によると、撮像素子の焦点検出用画素列に含まれる焦点検出用画素数が増加したとしても、焦点検出用画素から出力されたデータのうち取り扱うべきデータの取捨選択を適切に行うことによって、読み出されたデータの処理の際に不具合を生じる虞を抑制できる。例えば、一対の焦点検出用光学像の位相差量の算出の際の演算量を抑えることができる。
【図面の簡単な説明】
【０００７】
【図１】第１の実施の形態に係る撮像装置の構成を示す図である。
【図２】撮像用画素が受光する撮影用光束の様子を説明するための図である。
【図３】位相差ＡＦ用画素が受光する位相差ＡＦ用光束の様子を説明するための図である。
【図４】イメージセンサー上の位相差ＡＦ用画素配置領域と撮像用画素配置領域との配置例を示す図である。
【図５】高周波数成分をカットした１ライン分の位相差ＡＦ用データと、大閾値と、小閾値との一例を示す図である。
【図６】高周波数成分をカットした１ライン分の位相差ＡＦ用データと、大閾値と、小閾値との他の一例を示す図である。
【図７】第１の実施の形態に係る撮像装置の制御装置によるＡＦ制御フローチャートであり、図７（ａ）は位相差ＡＦ用データ記録フロー、図７（ｂ）は位相差量の算出フローをそれぞれ表す図である。
【図８】第２の実施の形態に係る撮像装置のイメージセンサー上の位相差ＡＦ用画素配置領域と撮像用画素配置領域との配置例を示す図である。
【図９】第３の実施の形態に係る撮像装置の構成を示す図である。
【図１０】第３の実施の形態に係る撮像装置の制御装置によるＡＦ制御フローチャートであり、図１０（ａ）は位相差ＡＦ用データ記録フロー、図１０（ｂ）は加算処理フローをそれぞれ表す図である。
【図１１】本発明による撮像装置の制御装置が撮像処理を実行するためのコンピュータプログラム製品の提供形態を示す図である。
【発明を実施するための形態】
【０００８】
−−−第１の実施の形態−−−
本発明の第１の実施の形態に係る撮像装置１００においては、イメージセンサー２から出力される画像データから位相差ＡＦ用データを、位相差ＡＦ用データ抜出部３が抜き出す。位相差ＡＦ用データ抜出部３が抜き出した位相差ＡＦ用データを、位相差ＡＦ用データ抜出部３の判定部４がライン単位で位相差ＡＦ用データ一時記憶部７に記録する。位相差ＡＦ用データ抜出部３の判定部４によるライン単位の判定結果に応じて、位相差ＡＦ用データ抜出部３の記録部５が、一部ラインの位相差ＡＦ用データのみを位相差ＡＦ用データ記憶部６に記録する。位相差ＡＦ用データ記憶部６に記録された位相差ＡＦ用データを用いて、位相差量算出部８が位相差量算出を行う。位相差量算出部８による位相差量算出結果に基づいて、光学系制御部９が光学系１を制御し、ピントのズレを自動で調節する。
【０００９】
第１の実施の形態に係る撮像装置１００は、図１に示す構成を有する。撮像装置１００は光学系１、イメージセンサー２、制御装置１１０、位相差ＡＦ用データ一時記憶部７、位相差ＡＦ用データ記憶部６、光学系制御部９、表示部１３を含む。制御装置１１０は、位相差ＡＦ用データ抜出部３、位相差量算出部８、補間データ生成部１０、画像生成記録部１１、表示画像生成部１２を含むコンピュータである。位相差ＡＦ用データ抜出部３は、判定部４と記録部５とを含む。判定部４は、位相差ＡＦ用データを位相差ＡＦ用データ一時記憶部７に記録し、記録した位相差ＡＦ用データが、所定条件を満たすか否か、すなわち位相差量算出に必要なデータを有するか否かをライン単位で判定する。記録部５は、判定部４によって判定された結果に基づいて、位相差ＡＦ用データ一時記憶部７に記録された位相差ＡＦ用データを読み出して位相差ＡＦ用データ記憶部６に記録するか否かを、ライン単位で制御する。
【００１０】
光学系１は、ズームレンズなどの複数枚のレンズを含み、被写体からの光束を透過し、光学像をイメージセンサー２上に結像する。イメージセンサー２は、結像された光学像が有する光情報を電気情報に変換する。電気情報は画像データを構成するＲＧＢの各色成分を有し、各色８ｂｉｔや１２ｂｉｔなどの深度で表すことができる。イメージセンサー２には、図２に示す複数の撮像用画素２１０と、図３に示す複数対の焦点検出用画素、すなわち複数対の位相差ＡＦ用画素２１３および２１４とからなる複数の画素が、例えば図４に示すように２次元平面状に配置されている。位相差ＡＦ用画素２１３および２１４上で変換された電気情報は焦点検出用データ、すなわち位相差ＡＦ用データとして、撮像用画素２１０で変換された電気情報のＲＧＢの各色成分から構成される撮像用データに混在してイメージセンサー２より出力される。こうしてイメージセンサー２は、位相差ＡＦ用データと撮像用データとを含む画像データを出力する。なお、図４に示すように、イメージセンサー２のラインＮやラインＭの各ラインにおいて、位相差ＡＦ用画素配置領域は撮像用画素配置領域によって４個に分断されている。これは、補間データ生成部１０が位相差ＡＦ用画素位置の画像データを補間生成する際の補間性能を低下させないためであり、本実施の形態の位相差ＡＦ制御は、４個に分断された１ライン分の位相差ＡＦ用データ全体を１セットの位相差ＡＦ用データとして行われる。
【００１１】
図２は、撮像用画素２１０が受光する撮影用光束７１の様子を説明するための図である。撮影用光束７１は、不図示の被写体から光学系１を透過して撮像用画素２１０へ到来する。
【００１２】
イメージセンサー２上に配列された全ての撮像用画素２１０の光電変換部４１１は、光学系１を透過した撮影用光束７１を受光する。光電変換部４１１の形状は、各撮像用画素２１０のマイクロレンズ４１０によりマイクロレンズ４１０から距離ｄだけ離間した光学系１上の瞳領域９５に投影される。
【００１３】
従って各撮像用画素２１０の光電変換部４１１は、瞳領域９５と各撮像用画素２１０のマイクロレンズ４１０とを通過する撮影用光束７１を受光し、撮影用光束７１によって各マイクロレンズ４１０上に結像される撮像用光学像の強度に対応した撮像用信号を出力する。複数の撮像用画素２１０から出力された撮像用信号の集合が撮像用データを形成する。
【００１４】
図３は、位相差ＡＦ用画素２１３および２１４が受光する位相差ＡＦ用光束（焦点検出用光束）７３および７４の様子を図２と比較して説明するための図である。位相差ＡＦ用光束７３および７４は、それぞれ、不図示の被写体から光学系１の一対の瞳領域９３および９４を透過して位相差ＡＦ用画素２１３および２１４へ到来する。
【００１５】
イメージセンサー２上に配列された全ての位相差ＡＦ用画素２１３および２１４のうち、位相差ＡＦ用画素２１３の光電変換部４１３は、光学系１の一対の瞳領域９３および９４のうちの一方の瞳領域９３を透過した位相差ＡＦ用光束７３を受光する。位相差ＡＦ用画素２１４の光電変換部４１４は、光学系１の一対の瞳領域９３および９４のうちの他方の瞳領域９４を透過した位相差ＡＦ用光束７４を受光する。光電変換部４１３の形状は、各位相差ＡＦ用画素２１３のマイクロレンズ４１０によりマイクロレンズ４１０から距離ｄだけ離間した光学系１上の位相差ＡＦ用画素２１３全てに共通した一方の瞳領域９３に投影される。光電変換部４１４の形状は、各位相差ＡＦ用画素２１４のマイクロレンズ４１０により、マイクロレンズ４１０から距離ｄだけ離間した光学系１上の位相差ＡＦ用画素２１４全てに共通した他方の瞳領域９４に投影される。
【００１６】
従って各位相差ＡＦ用画素２１３の光電変換部４１３は、一方の瞳領域９３と各位相差ＡＦ用画素２１３のマイクロレンズ４１０とを通過する位相差ＡＦ用光束７３を受光し、位相差ＡＦ用光束７３によって各マイクロレンズ４１０上に結像される位相差ＡＦ用光学像（焦点検出用光学像）の強度に対応した位相差ＡＦ用信号（焦点検出用信号）を出力する。各位相差ＡＦ用画素２１４の光電変換部４１４は、他方の瞳領域９４と各位相差ＡＦ用画素２１４のマイクロレンズ４１０とを通過する位相差ＡＦ用光束７４を受光し、位相差ＡＦ用光束７４によって各マイクロレンズ４１０上に結像される位相差ＡＦ用光学像の強度に対応した位相差ＡＦ用信号を出力する。複数の位相差ＡＦ用画素２１３から出力された位相差ＡＦ用信号の集合と、複数の位相差ＡＦ用画素２１４から出力された位相差ＡＦ用信号の集合とが、後述する一対の位相差ＡＦ用データを形成する。
【００１７】
一対の位相差ＡＦ用画素２１３および２１４がそれぞれ受光する位相差ＡＦ用光束７３および７４が通過する光学系１上の一対の瞳領域９３および９４を統合した瞳領域は、撮像用画素２１０が受光する撮影用光束７１が通過する光学系１上の瞳領域９５と一致する。光学系１上において、位相差ＡＦ用光束７３および７４は撮影用光束７１に対して相補的な関係になっている。
【００１８】
イメージセンサー２には、上述した一対の位相差ＡＦ用画素２１３および２１４を直線状に多数配置することによって、一対の位相差ＡＦ用画素列が配置される。好ましくは、このような一対の位相差ＡＦ用画素列が、イメージセンサー２の複数ラインに配置される。一対の位相差ＡＦ用画素列において、各位相差ＡＦ用画素２１３および２１４の光電変換部４１３および４１４が出力する複数の位相差ＡＦ用信号は、一対の瞳領域９３および９４に対応した一対の位相差ＡＦ用信号列を形成する。こうして、一対の測距瞳９３および９４をそれぞれ通過する一対の位相差ＡＦ用光束７３および７４が位相差ＡＦ用画素列上に形成する一対の位相差ＡＦ用光学像の強度分布に関する一対の位相差ＡＦ用信号列である一対の位相差ＡＦ用データが得られる。この一対の位相差ＡＦ用データに対して、相関演算による位相差量算出処理を施すことによって、いわゆる瞳分割型位相差検出方式による一対の位相差ＡＦ用光学像の位相差量が検出される。さらに、位相差量に一対の瞳領域９３および９４の重心間隔と上述した距離ｄとの比例関係に応じた変換演算を行うことによって、光学系制御部９によって制御される光学系１の駆動量が算出される。
【００１９】
図１を用いた説明に戻る。位相差ＡＦ用データ抜出部３はイメージセンサー２より出力される画像データのうちの１ライン分の部分画像データ（後述する入力ラインデータに対応する）から像面位相差ＡＦ用画素２１３および２１４の配置情報を基に位相差ＡＦ用データを抜き出し、抜き出した位相差ＡＦ用データを位相差ＡＦ用データ一時記憶部７に記録する。
【００２０】
また、位相差ＡＦ用データ抜出部３は位相差ＡＦ用データを抜き出した画像データを補間データ生成部１０に出力する。補間データ生成部１０は位相差ＡＦ用データ抜出部３より出力された位相差ＡＦ用データの抜き出された画像データから、位相差ＡＦ用画素位置の周辺画素位置の画像データを利用して位相差ＡＦ用画素位置の画像データを補間生成し、画像生成記録部１１、及び、表示画像生成部１２に出力する。画像生成記録部１１は補間データ生成部１０より出力された位相差ＡＦ用画素位置の画像データが補間生成された画像データをＤＲＡＭやフラッシュメモリなどの記録媒体１４に記録する。表示画像生成部１２は補間データ生成部１０より出力された位相差ＡＦ用画素位置の画像データが補間生成された画像データを表示部１３で表示するサイズに縮小（センサーからの出力サイズが表示サイズと同じ場合には等倍）処理を行い表示部１３に出力する。表示部１３はＬＣＤパネルや有機ＥＬパネルであり、表示画像生成部１２により出力された画像データの表示を行う。表示部１３に表示された画像データを利用して撮像装置１００の使用者は撮影を行う。
【００２１】
位相差ＡＦ用データ一時記憶部７は、例えば２ライン分の位相差ＡＦ用データを記録保持できるＳＲＡＭで構成される。位相差ＡＦ用データ一時記憶部７においては、１ライン分の位相差ＡＦ用データの書き込み（記録）と、その書き込みが行われる書き込みラインとは異なる１ライン分の位相差ＡＦ用データの読み出しとを同時に行うことができる。
【００２２】
位相差ＡＦ用データ抜出部３が１ライン分の位相差ＡＦ用データを抜き出し、位相差ＡＦ用データ一時記憶部７に書き込み（記録）処理を行う。判定部４は、書き込み処理を行っている１ライン分の位相差ＡＦ用データが位相差量算出に必要なデータを有するか否かを、その位相差ＡＦ用データの極値（最大値及び最小値）と閾値との関係で表される所定条件に基づいて判定する。すなわち、判定部４は、１ラインにおける位相差ＡＦ用データ最大値があらかじめ設定した２種類の任意の閾値の大きい方の閾値（以下、大閾値と表記する）よりも大きく、かつ１ラインにおける位相差ＡＦ用データ最小値があらかじめ設定した２種類の任意の閾値の小さい方の閾値（以下、小閾値と表記する）よりも小さい場合に１ライン分の位相差ＡＦ用データが位相差量算出に必要なデータを有すると判定する。なお、こうした所定条件に基づく判定は、１ラインにおける複数の位相差ＡＦ用データに対して高周波成分をカットするフィルタ処理を実行した後に行われることが好ましい。
【００２３】
位相差ＡＦ用データ抜出部３によって、図４におけるラインＮに該当する１ライン分の位相差ＡＦデータが抜き出され、位相差ＡＦ用データ一時記憶部７に記録されたものとする。その１ライン分の位相差ＡＦデータから高周波数成分をカットした１ライン分の位相差ＡＦ用データと、大閾値と、小閾値とを図５に示す。図５から明らかなように、高周波数成分をカットした１ライン分の位相差ＡＦ用データ５０の最大値Ａ＞大閾値、最小値Ｂ＜小閾値である。このとき、判定部４はラインＮにおける位相差ＡＦ用データ５０が位相差量算出に必要なデータを有すると判定する。記録部５は判定部４における判定結果に基づいて、位相差ＡＦ用データ一時記憶部７よりラインＮの位相差ＡＦ用データ５０を読み出し、位相差ＡＦ用データ記憶部６に書き込みを行うことによって、ラインＮの位相差ＡＦ用データ５０を位相差ＡＦ用データ記憶部６に記録する。
【００２４】
位相差ＡＦ用データ抜出部３によって、図４におけるラインＭに該当する１ライン分の位相差ＡＦ用データが抜き出され、位相差ＡＦ用データ一時記憶部７に記録されたものとする。その１ライン分の位相差ＡＦデータから高周波数成分をカットした１ライン分の位相差ＡＦ用データ６０と、大閾値と、小閾値とを図６に示す。図６から明らかなように、高周波数成分をカットした１ライン分の位相差ＡＦ用データ６０の最大値Ａ≦大閾値である。このとき、判定部４はラインＭにおける位相差ＡＦ用データ６０が位相差量算出に必要なデータを有さないと判定する。記録部５は判定部４における判定結果に基づいて、位相差ＡＦ用データ一時記憶部７に記録したラインＭの位相差ＡＦ用データ６０を読み出さない。
【００２５】
このようにして判定部４は、位相差ＡＦ用データ一時記憶部７に記録した位相差ＡＦ用データが位相差量算出に必要なデータを有するか否かを入力ライン順に入力ライン単位で判定を行う。記録部５は、判定部４における判定結果に基づいて位相差ＡＦ用データ一時記憶部７からの位相差ＡＦ用データの読み出し制御、及び、位相差ＡＦ用データ記録６への位相差ＡＦ用データの書き込み（記録）制御を行う。判定部４の判定結果に基づいて記録部５が読み出し制御、及び、書き込み（記録）制御を行うことで、位相差ＡＦ用データが位相差量算出に必要なデータを有さない入力ラインを位相差ＡＦ用データ記憶部６に書き込まない（記録しない）制御を行うため、位相差ＡＦ用データ記憶部６に書き込むデータ量を削減できる。
【００２６】
位相差量算出部８は、位相差ＡＦ用データ記憶部６に書き込まれた（記録された）位相差ＡＦ用データを読み出し、読み出した位相差ＡＦ用データに基づいて、上述した一対の位相差ＡＦ用光学像の位相差量の算出を行う。光学系制御部９は、位相差量算出部８によって算出された位相差量に基づいて光学系１のＡＦ制御を行うことによって、光学系１の焦点位置を調節する。
【００２７】
図７に第１の実施の形態に係る撮像装置１００の制御装置１１０によるＡＦ制御フローチャートを示す。図７（ａ）は、位相差ＡＦ用データの位相差ＡＦ用データ記憶部６への記録を行う位相差ＡＦ用データ抜出部３の位相差ＡＦ用データ記録フローを示す。
【００２８】
処理ステップＳ１０で示す処理として、イメージセンサー２にて撮像された画像データのうちの１ライン分の入力ラインデータ（部分画像データ）が、ライン順に位相差ＡＦ用データ抜出部３に入力される。
【００２９】
処理ステップＳ２０で示す処理として、位相差ＡＦ用データ抜出部３は、入力ラインデータが位相差ＡＦ用データを含むか、または含まないかを判定する。入力ラインデータが位相差ＡＦ用データを含まない場合、処理ステップＳ６０で示す処理に移る。入力ラインデータが位相差ＡＦ用データを含む場合、位相差ＡＦ用データ抜出部３は処理ステップＳ３０で示す処理に移る。
【００３０】
処理ステップＳ３０で示す処理として、位相差ＡＦ用データ抜出部３は入力ラインデータから位相差ＡＦ用データを抜き出し、位相差ＡＦ用データ一時記憶部７に書き込む記録処理を行う。
【００３１】
処理ステップＳ４０で示す処理として、位相差ＡＦ用データ抜出部３内の判定部５は、入力ラインデータに含まれる位相差ＡＦ用データが位相差量算出に必要なデータを有するか否か、すなわち上述した所定条件を満たすか否かを、前述した高周波成分をカットした１ライン分の位相差ＡＦ用データと、大閾値及び小閾値との関係から判定する。判定の結果、位相差量算出に必要なデータ量を有さない場合、処理ステップＳ６０で示す処理に移る。判定の結果、位相差量算出に必要なデータを有する場合、処理ステップＳ５０の処理に移る。
【００３２】
処理ステップＳ５０で示す処理として、位相差ＡＦ用データ抜出部３内の記録部５は、位相差ＡＦ用データ一時記憶部７に書き込まれた（記録された）１ライン分の位相差ＡＦ用データを読み出し、読み出した１ライン分の位相差ＡＦ用データを位相差ＡＦ用データ記憶部６に書き込む（記録する）。
【００３３】
処理ステップＳ６０に示す処理として、位相差ＡＦ用データ抜出部３は、入力ラインデータが１枚の画像を意味する１フレームの最終ラインであるか否かを判定し、入力ラインが１フレームの最終ラインではない場合、処理ステップＳ１０で示す処理に移り、次のライン入力を行う。入力ラインが１フレームの最終ラインである場合、次のフレームの先頭ライン入力に移り、以降順々に複数のフレームにおける処理ステップＳ１０からＳ６０の処理を繰り返し行う。
【００３４】
光学系制御部９が光学系１を制御するために必要な位相差量の位相差量算出部８による算出フローについて述べる。処理ステップＳ１１０で示す処理として、１画面内における位相差ＡＦ用画素２１３および２１４を含むラインＮやラインＭ（図４参照）等のライン複数本における処理優先順位を、任意の決定手順にしたがって決定する。例えば、ラインＮを最優先のラインとして決定する。
【００３５】
処理ステップＳ１２０で示す処理として、処理ステップＳ１３０で示す処理が肯定判定されるまで、処理ステップＳ１１０で決定した優先順位順に処理ステップＳ１３０で示す処理が周期的な所定タイミングで繰り返されるように、処理対象ラインを順次変更する。図２に示す複数の撮像用画素２１０と、図３に示す複数対の焦点検出用画素、すなわち複数対の位相差ＡＦ用画素２１３および２１４とからなる複数の画素が２次元平面状に配置されているイメージセンサー２は、画像データをその２次元平面の各行毎に制御装置１１０の位相差ＡＦ用データ抜出部３への入力ラインデータとして出力する。周期的な所定タイミングとは、その入力ラインデータがイメージセンサー２によって出力されたタイミングである。
【００３６】
処理ステップＳ１３０で示す処理として、位相差量算出部８は、位相差ＡＦ用データ記憶部６に読み出し可能な位相差ＡＦ用データが記録されているか否かを判定する。判定の結果、位相差ＡＦ用データが記録されていない場合、位相差ＡＦ用データ記憶部６に位相差用ＡＦデータが記録され読み出しが可能になるまで繰り返し周期的な所定タイミングでチェックをし続ける。処理ステップＳ１３０で示す処理による判定の結果、位相差ＡＦ用データが記録されている場合、処理ステップＳ１４０の処理に移る。
【００３７】
処理ステップＳ１４０で示す処理として、位相差量算出部８、は位相差ＡＦ用データ記憶部６から１ライン分の位相差ＡＦ用データを読み出す。
【００３８】
処理ステップＳ１５０の処理として、位相差量算出部８は、処理ステップＳ１４０において読み出した１ライン分の位相差ＡＦ用データを用いて、上述した一対の位相差ＡＦ用光学像の位相差量を算出し、その位相差量を光学系制御部９に出力する。位相差ＡＦ用データを用いた位相差量の算出は公知の技術であるため省略する。光学系制御部９は、位相差量算出部８が算出した位相差量に基づいて光学系１の焦点位置を自動調節する。その後、次のフレームの処理に移り、以降順々に複数のフレームにおける処理ステップＳ１１０からＳ１５０の処理を繰り返し行う。
【００３９】
以上述べたように、入力ライン順に１ライン単位で位相差ＡＦ用データが位相差量の算出に必要なデータを有するか否かを判定する。判定の結果、入力ラインの位相差ＡＦ用データが位相差量の算出に必要なデータを有する場合にのみ位相差ＡＦ用データ記憶部６に書き込み（記録）処理を行う。
【００４０】
本実施の形態に係る撮像装置１００は、イメージセンサー２と、制御装置１１０と、光学系制御部９とを有する。制御装置１１０は、判定部４と記録部５とを含む位相差ＡＦ用データ抜出部３と、位相差量算出部８と、画像生成記録部１１及び表示画像生成部１２の少なくとも一方とを有する。
【００４１】
イメージセンサー２には、被写体から光学系１の一対の瞳領域９３及び９４を透過して到来する一対の位相差ＡＦ用光束７３及び７４により各マイクロレンズ４１０上に結像される被写体の一対の位相差ＡＦ用光学像に応じた一対の位相差ＡＦ用データを出力する複数の位相差ＡＦ用画素２１３および２１４と、被写体から光学系１を透過して到来する撮影用光束７１により各マイクロレンズ４１０上に結像される撮像用光学像に応じた撮像用データを出力する複数の撮像用画素２１０とからなる複数の画素が２次元平面状に配置され、イメージセンサー２は、位相差ＡＦ用データと撮像用データとを含む画像データを出力する。
【００４２】
制御装置１１０の位相差ＡＦ用データ抜出部３に含まれる判定部４は、画像データのうちの、周期的な所定タイミングまでにイメージセンサー２によって出力された１ライン分の入力ラインデータに、位相差ＡＦ用データが含まれる場合は、入力ラインデータから位相差ＡＦ用データを抜き出し、抜き出した位相差ＡＦ用データが所定条件を満たすか否かを判定する。
【００４３】
制御装置１１０の位相差ＡＦ用データ抜出部３に含まれる記録部５は、判定部４によって抜き出された位相差ＡＦ用データが所定条件を満たすと判定されると、判定部４によって抜き出された位相差ＡＦ用データを位相差ＡＦ用データ記憶部６に記録し、判定部４によって抜き出された位相差ＡＦ用データが所定条件を満たさないと判定されると、判定部４によって抜き出された位相差ＡＦ用データを位相差ＡＦ用データ記憶部６に記録しない。
【００４４】
位相差量算出部８は、記録部５によって位相差ＡＦ用データ記憶部６に記録された位相差ＡＦ用データに基づいて一対の位相差ＡＦ用光学像の位相差量を算出する。光学系制御部９は、位相差量算出部８によって算出された位相差量に基づいて光学系１を制御することによって光学系１の焦点位置を調節する。画像生成記録部１１及び表示画像生成部１２は、上述した撮像用データに基づいて画像を生成する。
【００４５】
ユーザーが焦点検出エリアを指定しない場合において、従来の撮像装置では、全ての位相差ＡＦ用データを用いた位相差量算出が行われた後でデフォーカス量の信頼性が判定されていたが、本実施の形態に係る撮像装置１００によれば、信頼性の低いデフォーカス量算出をもたらす位相差ＡＦ用データを、デフォーカス量算出前に除去することができる。閾値を用いた簡易的な演算により、入力ライン順にライン単位で位相差ＡＦに必要なデータを有するか否かを判定し、判定結果に基づいて、入力ライン順にライン単位で位相差ＡＦ用データの抜き出しを制御する。このようにすることで、１フレーム内の全ての位相差ＡＦ用データを保持していた従来のイメージセンサーを有する撮像装置に比べ、より少ない位相差ＡＦ用データ量で位相差ＡＦの演算を行うことができる。すなわち、位相差量の算出の際の演算量の削減、メモリ空間の占有率削減、読み込むデータ量・書きこむデータ量の削減、それらに伴う消費電力の削減効果がある。
【００４６】
−−−第２の実施の形態−−−
本発明の第２の実施の形態に係る撮像装置１００は第１の実施の形態に係る撮像装置１００と構成を同じくする。第１の実施の形態に係る撮像装置１００において判定部４は、イメージセンサー２にて撮像された画像データの入力ライン１ライン単位の閾値判定を行った。本実施の形態に係る撮像装置１００においては、図８に示すように、ラインＮまたはラインＭ等の１ラインの部分画像データのうちの撮像用画素配置領域を除く位相差ＡＦ用画素配置領域を、例えばエリアＷ、Ｘ、ＹおよびＺからなる複数の領域に区分し、区分した領域ごとに判定部４が閾値判定を行う。
【００４７】
上述した１ラインの部分画像データは、複数セットの位相差ＡＦ用データを含み、各セットの位相差ＡＦ用データは上述したエリアＷ、Ｘ、ＹおよびＺからなる複数の領域の各領域の位相差ＡＦ用データに対応する。したがって、各セットの位相差ＡＦ用データに対応する位相差ＡＦ用画素は、イメージセンサー２において複数の画素が配置された２次元平面の複数列に跨って配置される。判定部４は、その各セットの位相差ＡＦ用データを抜き出し、抜き出した各セットの位相差ＡＦ用データが所定条件を満たすか否かを、閾値判定によって判定する。このようにすることで、本実施の形態に係る撮像装置１００においては、第１の実施の形態に係る撮像装置１００より細かい単位で保持する位相差ＡＦ用データ量を調整し、位相差ＡＦの演算を行うことができる。
【００４８】
−−−第３の実施の形態−−−
本発明の第３の実施の形態に係る撮像装置１００は、図９に示す構成を有する。第１の実施の形態に係る撮像装置１００と構成を同じくするブロックに関しては説明を省略する。制御装置１１０内の位相差ＡＦ用データフレーム加算部１５は、位相差ＡＦ用データ記憶部６に記録された位相差ＡＦ用データについては、同一画素位置に配置された位相差ＡＦ用データをフレーム毎に加算処理する。加算処理した位相差ＡＦ用データを位相差量算出部８にて位相差量算出演算に使用する。
【００４９】
すなわち、記録部５は、判定部４によって抜き出された位相差ＡＦ用データを位相差ＡＦ用データ記憶部６に記録する際、位相差ＡＦ用データフレーム加算部１５が、その位相差ＡＦ用データを、判定部４によって前回までに抜き出された位相差ＡＦ用データに加算することによって得られる加算データを、新たに位相差ＡＦ用データとして位相差ＡＦ用データ記憶部６に記録する。このようにすることで、１フレームでは位相差量算出に不十分な位相差ＡＦ用データしか得られない場合でも、複数フレームのデータを加算することで位相差量算出に十分な位相差ＡＦ用データを得ることができる。
【００５０】
位相差ＡＦ用データは、位相差ＡＦ用データ抜出部３の判定部４及び記録部５によって、大閾値及び小閾値との関係性による位相差ＡＦ用データ記憶部６への書き込み（記録）制御を受ける。第１フレームの書き込み制御に関する判定部４による判定の結果、所定条件を満たすと判定されたラインまたはエリアの位相差ＡＦ用データは、第１フレームのみならず後続フレームにおいても位相差ＡＦ用データ記憶部６に記録される。第１フレームの書き込み制御に関する判定部４による判定の結果、所定条件を満たさないと判定されたラインまたはエリアの位相差ＡＦ用データは、第１フレームのみならず後続フレームにおいても位相差ＡＦ用データ記憶部６に記録されない。このようにして、第１フレームの書き込み制御のための判定結果を複数フレームで共有することで、位相差ＡＦ用データ記憶部６へのデータ書き込み量、データ読み出し量、データ演算量を削減できる。
【００５１】
判定結果を複数フレームで共有する制御の初期化処理、すなわち位相差ＡＦ用データ記憶部６に記録された位相差ＡＦ用データの初期化処理は、制御装置１１０内の不図示の初期化処理部によって行われる。こうした初期化処理部による初期化処理は、ユーザー任意のタイミングをトリガーに行われてもよいし、画像データのシーン検出によるシーンが変更したタイミングをトリガーに行われてもよい。電気式動き検出の動き量が一定値を超えた場合をトリガーにして行われてもよいし、ジャイロセンサーからの評価値を判定した結果をトリガーにして行われてもよい。入力データのコントラストの最大値及び最小値と閾値との結果からトリガーを生成してもよい。
【００５２】
図１０は、本実施の形態に係る撮像装置１００の制御装置１１０によるＡＦ制御フローチャートである。図１０（ａ）は、位相差ＡＦ用データの位相差ＡＦ用データ記憶部６への記録を行う位相差ＡＦ用データ抜出部３の位相差ＡＦ用データ記録フローを示すが、第１の実施の形態と同様の処理については省略して示している。図１０（ｂ）は制御装置１１０内の位相差ＡＦ用データフレーム加算部１５によって行われる同一画素位置に配置された位相差ＡＦ用データをフレーム毎に加算処理する加算処理フローを表す図である。この加算処理は、処理ステップＳ８５が完了する度に行われる。
【００５３】
図１０（ａ）の処理ステップＳ１０〜Ｓ５０は、第１の実施の形態と同様のため、処理ステップＳ６０で肯定判定された後の処理について説明する。処理ステップＳ６０で肯定判定された後、第２フレーム以降において、処理ステップＳ７０では、第１フレームで位相差ＡＦ用データ一時記憶部７に記録されたラインの入力ラインデータが位相差ＡＦ用データ抜出部３に入力され、処理ステップＳ７５において、その入力ラインデータが位相差ＡＦ用データ一時記憶部７に記録される。
【００５４】
処理ステップＳ８０では、処理対象ラインが処理ステップＳ４０にてＹであったラインであるか否かが判定される。肯定判定の場合は処理ステップＳ８５において位相差ＡＦ用データ記憶部６に書き込まれ（記録され）た後、処理ステップＳ９０における処理が行われ、否定判定の場合は直ちに処理ステップＳ９０における処理が行われる。
【００５５】
処理ステップＳ９０では、位相差ＡＦ用データ抜出部３は、入力ラインデータが１枚の画像を意味する１フレームの最終ラインであるか否かを判定し、入力ラインが１フレームの最終ラインではない場合、処理ステップＳ７０で示す処理に移り、次のライン入力を行う。入力ラインが１フレームの最終ラインである場合、処理ステップＳ９５における処理が行われる。処理ステップＳ９５では、シーチェンジの検出があった場合に肯定判定がなされて処理ステップＳ１０以降の処理が行われ、シーチェンジの検出がなかった場合に否定判定がなされて処理ステップＳ１０における処理が行われ、処理ステップＳ７０以降の処理が行われる。
【００５６】
上述したように、図１０（ｂ）に示す加算処理は、処理ステップＳ８５が完了する度に位相差ＡＦ用データフレーム加算部１５によって行われる。第２フレーム以降についての処理ステップＳ２１０においては、前フレームまでの位相差ＡＦ用データ記憶部６に記録された位相差ＡＦ用データと、現在フレームの位相差ＡＦ用データとが加算される。処理ステップＳ２２０では、その加算結果が位相差ＡＦ用データ記憶部６に書き戻され（記録され）、処理が次のフレームに移る。
【００５７】
−−−変形例−−−
（１）上述した実施の形態においては、制御装置１１０の位相差ＡＦ用データ抜出部３に含まれる判定部４は、１ライン分の入力ラインデータから抜き出した位相差ＡＦ用データの最大値が大閾値よりも大きく、かつ最小値が小閾値よりも小さいとき、１ライン分の位相差ＡＦ用データが位相差量算出に必要なデータを有すると判定する。しかし、判定部４は、１ライン分の入力ラインデータから抜き出した位相差ＡＦ用データの最大値と最小値との差が所定閾値よりも大きいとき、１ライン分の位相差ＡＦ用データが位相差量算出に必要なデータを有すると判定することとしてもよい。
【００５８】
（２）上述した実施の形態においては、図２に示す複数の撮像用画素２１０と、図３に示す複数対の焦点検出用画素、すなわち複数対の位相差ＡＦ用画素２１３および２１４とからなる複数の画素が２次元平面状に配置されているイメージセンサー２は、画像データをその２次元平面の各行毎に制御装置１１０の位相差ＡＦ用データ抜出部３への入力ラインデータとして出力する。この場合、判定部４が、入力ラインデータから抜き出した位相差ＡＦ用データが所定条件を満たすか否かを判定する周期的な所定タイミングとは、その１ライン分の入力ラインデータがイメージセンサー２によって出力されたタイミングである。
【００５９】
しかし、判定部４が、入力ラインデータから抜き出した位相差ＡＦ用データが所定条件を満たすか否かを判定する周期的な所定タイミングは、合計で複数ライン分の入力ラインデータがイメージセンサー２によって出力されたタイミングであってもよい。このようにすることによって、図４や図８のように位相差ＡＦ用画素配置領域がイメージセンサー２の水平方向に延びる場合に限られず、位相差ＡＦ用画素配置領域がイメージセンサー２の複数ラインを横断して垂直方向に延びる場合にも本発明を適用することができる。
【００６０】
あるいは、イメージセンサー２は、画像データをその２次元平面の複数行毎に制御装置１１０の位相差ＡＦ用データ抜出部３への複数ライン分の入力ラインデータとして出力することとしてもよい。この場合、判定部４が、入力ラインデータから抜き出した位相差ＡＦ用データが所定条件を満たすか否かを判定する周期的な所定タイミングとは、その複数ライン分の入力ラインデータがイメージセンサー２によって出力されたタイミングである。
【００６１】
（３）上述した実施の形態においては、制御装置１１０の位相差ＡＦ用データ抜出部３に含まれる判定部４は、１ライン分の入力ラインデータから抜き出した位相差ＡＦ用データの最大値が大閾値より以下のとき、１ライン分の位相差ＡＦ用データが位相差量算出に必要なデータを有さないと判定する。判定部４は、１ライン分の入力ラインデータから抜き出した位相差ＡＦ用データの最小値が小閾値以上のとき、１ライン分の位相差ＡＦ用データが位相差量算出に必要なデータを有さないと判定することとしてもよい。
【００６２】
上述した大閾値及び小閾値は、撮像用画素２１０が出力する撮像用データに応じて定まることとしてもよい。例えば、過去に得られた複数枚のフレーム画像全体のコントラストに応じて定めることができる。
【００６３】
また、フレーム画像データが出力された際に、判定部４が全てのラインにおいて位相差ＡＦ用データが位相差量算出に必要なデータを有さないと判定したとする。このとき、次のフレーム画像データが出力された際の位相差ＡＦ用データに対する判定部４による判定処理時の大閾値を引き下げるとともに小閾値を引き上げることによって、閾値制御を緩和することとしてもよい。
【００６４】
（４）撮像装置１００の制御装置１１０が上述の実施形態および変形例の各々における撮像処理を実行するためのコンピュータプログラム製品は、図１１に示されるように、プログラム記憶媒体２０００（例えばＣＤ−ＲＯＭ）や通信ネットワーク４０００（例えばインターネット）によって伝達されるデータ信号を通じてデータ処理装置１０００（例えばＰＣ）に提供される。撮像装置１００は、そのデータ処理装置１０００から通信を介して撮像処理プログラムを読み込む。
【００６５】
データ処理装置１０００は、プログラム記憶媒体２０００を介して撮像処理プログラムの提供を受ける。あるいは、以下の供給形態で撮像処理プログラムが提供されても良い。データ処理装置１０００は通信ネットワーク４０００との接続機能を有する。サーバー３０００は撮像処理プログラムを提供するコンピュータであり、ハードディスクなどの記憶媒体に撮像処理プログラムを格納する。サーバー３０００はハードディスクから読み出した撮像処理プログラムを、データ信号として搬送波に載せ、通信ネットワーク４０００を介してデータ処理装置１０００へ転送する。以上のように、撮像処理プログラムは、プログラム記憶媒体２０００や通信ネットワーク４０００を介するデータ信号としての提供を含む種々の形態のコンピュータプログラム製品によって供給されることが好ましい。
【符号の説明】
【００６６】
１  光学系、２  イメージセンサー、３  位相差ＡＦ用データ抜出部、４  判定部、
５  記録部、６  位相差ＡＦ用データ記憶部、７  位相差ＡＦ用データ一時記憶部、
８  位相差量算出部、９  光学系制御部、１０  補間データ生成部、
１１  画像生成記録部、１２  表示画像生成部、  １３  表示部、１４  記録媒体、
１５  位相差ＡＦ用データフレーム加算部、５０、６０  位相差ＡＦ用データ、
７１  撮影用光束、７３、７４  位相差ＡＦ用光束、９３、９４、９５  瞳領域、
１００  撮像装置、１１０  制御装置、
２１０  撮像用画素、２３１、２１４  位相差ＡＦ用画素、
４１０  マイクロレンズ、４１１、４１３、４１４  光電変換部、
１０００  データ処理装置、２０００  プログラム記憶媒体、
３０００  サーバー、４０００  通信ネットワーク
【図１】
2015087450.tif 000003
【図２】
2015087450.tif 000004
【図３】
2015087450.tif 000005
【図４】
2015087450.tif 000006
【図５】
2015087450.tif 000007
【図６】
2015087450.tif 000008
【図７】
2015087450.tif 000009
【図８】
2015087450.tif 000010
【図９】
2015087450.tif 000011
【図１０】
2015087450.tif 000012
【図１１】
2015087450.tif 000013