【手続補正書】
【提出日】平成28年5月20日(2016.5.20)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】００２１
【補正方法】変更
【補正の内容】
【００２１】
ここで、撮像素子１０２の構成と、各画素における被写体距離の算出例について、図２と図３を参照して説明する。
図２は、撮像素子１０２に複数配置される画素の構成例を模式的に示す図であり（ａ）は平面図、（ｂ）は垂直断面図である。１つの画素７０３は１つのマイクロレンズ７００に対応し、左右２つの光電変換部７０１および７０２を有する。このような構成により、光電変換部７０１と７０２は撮像レンズの射出瞳の異なる領域から出射する光束を受光する。以下では、説明の便宜上、左右の光電変換部７０１，７０２の一方をＡ画素、他方をＢ画素と称して区別する。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００４１
【補正方法】変更
【補正の内容】
【００４１】
本実施形態のデジタルカメラ１００では、手前から奥に優先順位を割り付け、Ｄ１、Ｄ２、Ｄ３の順で合焦距離を変化させて撮影を行う。合焦距離の短い方から撮影するのは、先に撮影される被写体のシャッタータイムラグを小さく抑えられるからである。距離が短い被写体のほうが、被写界深度が浅く、被写体の動きの影響が大きく、また、撮影者にとって重要な被写体である可能性が高いため、まず近い被写体に合焦させた撮影を行う方がよいと考えられる。このようにして、撮影後に被写界深度を調整する際に、撮影タイミングの差が画像合成に与える影響を抑えている。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００５２
【補正方法】変更
【補正の内容】
【００５２】
次に、本実施形態のデジタルカメラ１００が合成画像を生成するために撮影した複数枚の撮影画像と、対応する距離画像とを記録媒体１１５に記録する形式について、図１１を参照して説明する。
図１１は撮影画像６１１、６１２、６１３と距離画像６２１、６２２、６２３の符号化データをグループ化して１つのファイルとした画像ファイルの構造例を示す図である。
ＳＯＩ（Ｓｔａｒｔ  Ｏｆ  Ｉｍａｇｅ）マーカ１００１と、次に現れるＥＯＩ（Ｅｎｄ  Ｏｆ  Ｉｍａｇｅ）マーカ１００６との間の領域に、１つの合焦距離に対応した画像データが格納されている。なお、ここでは撮影画像と対応する距離画像とを合わせて１フレームの画像データとして取り扱う。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００７１
【補正方法】変更
【補正の内容】
【００７１】
そして、Ｓ９０２で静止画撮影指示が検出されると、システム制御部１０４は、第１の実施形態と同様にして、撮影すべき合焦距離を決定する。ただし、第１の実施形態では、頻度分布でのピークに対応した被写体距離から合焦距離を決定したが、本実施形態では、注目被写体に対する合焦距離を含み、かつ注目被写体に対する合焦距離に最大の優先度を割り当てるようにする。従って、注目被写体の領域に対する合焦距離は、距離画像における頻度分布とは関係なしに、撮影すべき合焦距離として決定してもよい。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００８０
【補正方法】変更
【補正の内容】
【００８０】
図１５は撮影画像１２１１に対する距離画像からヒストグラム生成部１１０により得られた距離ヒストグラムである。図１５（ａ）は第１の実施形態のデジタルカメラで生成した距離ヒストグラム、図１５（ｂ）が本実施形態のデジタルカメラで生成した距離ヒストグラムである。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００９０
【補正方法】変更
【補正の内容】
【００９０】
図１７は、被写体ごとに分割された領域それぞれに対して、ヒストグラム生成部１１０が距離画像をもとに生成した距離ヒストグラムの例を示している。図１７（ａ）は図１６（ｂ）の人物被写体（注目被写体）の領域に関する距離ヒストグラムであり、奥行き方向の広がりは小さく、距離Ｄ１をピークとした狭い距離範囲に出現頻度が集中している。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００９２
【補正方法】変更
【補正の内容】
【００９２】
また、図１７（ｂ）は図１６（ｃ）の近景領域に関する距離ヒストグラムである。この距離ヒストグラムにおけるＤ２±Ａの範囲の出現頻度の分散は比較的大きいため、被写体の奥行きが比較的大きいと判定できる。この場合、被写界深度が浅いと被写体の奥行き方向における合焦範囲が狭くなるため、システム制御部１０４は、合焦距離Ｄ２で撮影を行う場合には、例えば絞りの開口を小さくし、シャッター速度を低くして、被写界深度を深くする。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００９３
【補正方法】変更
【補正の内容】
【００９３】
図１７（ｃ）に示す、図１６（ｄ）の背景領域についても、距離ヒストグラムのピーク前後の範囲における分散を求める。なお、図１７（ｃ）の例では、（Ｄ３＋Ａ）が最大距離ＭＡＸを超えるため、（Ｄ３−Ａ）からＭＡＸまでの範囲で分散を求める。背景領域に関する分散は比較的小さいため、人物領域と同様に、被写界深度を浅くした撮影を行う。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００９４
【補正方法】変更
【補正の内容】
【００９４】
奥行きに広がりを持つ被写体について、奥行き方向に十分な合焦範囲がある撮像画像を得ることを実現する効果は、ピーク前後の頻度分布の分散の大きな被写体の撮影時における被写界深度を調整することで実現できる。従って、図１７（ａ），（ｃ）に示すような、被写界深度を深くしなくてもよい被写体については、被写界深度を浅くするような制御を行わなくてもよい。ただし、被写界深度を浅くすることにより、より速いシャッター速度を用いることが可能であるため、被写体ぶれや手ブレの発生を抑制できる効果がある。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００９５
【補正方法】変更
【補正の内容】
【００９５】
また、撮像光学系１０１の焦点距離や撮像素子の大きさ等のカメラパラメータと、プログラムＡＥモードなどによって定まる絞り値と被写体距離との関係から求まる被写界深度が、被写体の奥行き方向における合焦範囲の確保に十分である場合がある。このような場合も、被写界深度が深くなるように撮影条件を変更しなくてもよい。奥行きが大きな被写体の撮影を行う合焦距離において、現在の撮影パラメータによる被写界深度が被写体の奥行き方向における合焦範囲の確保に十分かどうか判定し、不十分と判定される場合だけ被写界深度をさらに深くするように撮影条件を変更してもよい。また、どの程度撮影条件を変更すべきかの判定を、現在の撮影パラメータによる被写界深度に応じて決定してもよい。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】０１１７
【補正方法】変更
【補正の内容】
【０１１７】
図２１は本実施形態の合成比率演算部１１６が算出する合成比率の例を示す図である。
合成比率曲線１４１０は、被写界深度を４ｍ近傍から８ｍ近傍までの範囲に拡大する際の、撮影画像６１１（合焦距離８ｍ）に対する撮影画像６１２（合焦距離４ｍ）の合成比率の例を示す。合成比率曲線１４１０は、第１の実施形態とは異なり、基準となる撮影画像６１１に対応する距離画像６２１の画素値に対して変化する。
【手続補正１２】
【補正対象書類名】図面
【補正対象項目名】図１２
【補正方法】変更
【補正の内容】
【図１２】
2014232181.tif 000001