【手続補正書】
【提出日】平成22年4月8日(2010.4.8)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
予め定められた移動量で離散的に焦点位置を移動して順次画像を撮影することにより複数の画像を得るフォーカスブラケット撮影手段と、
前記フォーカスブラケット撮影手段により撮影された複数の画像間の被写体の対応点を検出する対応点検出手段と、
前記複数の画像の中から所定の基準により選択された１枚の基準画像に対して、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形手段と、
前記変形された画像を含む複数の画像間の対応する座標の画素の鮮鋭度を算出する鮮鋭度算出手段と、
前記変形された画像を含む複数の画像を合成する画像合成手段であって、画面全体に焦点の合った全焦点画像を得る画像合成手段と、
前記画像合成手段により得られた全焦点画像を記録媒体に記録する記録手段と、
を備え、
前記画像合成手段は、前記変形された画像を含む複数の画像の対応する座標の画素において、前記算出された鮮鋭度の高い画素の重みを大きくするように加重平均して画像を合成することを特徴とする撮像装置。
【請求項２】
画像データに基づいて主要被写体の合焦位置を判断する自動合焦位置判断手段と、
予め定められた移動量で離散的に焦点位置を移動して順次画像を撮影することにより複数の画像を得るフォーカスブラケット撮影手段と、
前記移動する焦点位置が前記自動合焦位置判断手段により判断された前記主要被写体の合焦位置とその前後の焦点位置を含むように制御する焦点位置制御手段と、
前記主要被写体の合焦位置で撮影された画像及び前記主要被写体の合焦位置の前後の焦点位置で撮影された画像を含む前記フォーカスブラケット撮影手段により撮影された複数の画像間の被写体の対応点を検出する対応点検出手段と、
前記主要被写体の合焦位置で撮影された画像を基準画像として、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形手段と、
前記変形された画像を含む複数の画像間の対応する座標の画素の鮮鋭度を算出する鮮鋭度算出手段と、
前記変形された画像を含む複数の画像を合成する画像合成手段であって、主要被写体以外のぼけをコントロールしたぼけ強調画像を得る画像合成手段と、
前記画像合成手段により得られたぼけ強調画像を記録媒体に記録する記録手段と、
を備え、
前記画像合成手段は、前記変形された画像を含む複数の画像の対応する座標の画素において、前記主要被写体の合焦位置で撮影された画素の鮮鋭度が最大の場合はその画素を選択し、前記主要被写体の合焦位置よりも前の焦点位置で撮影された画素の鮮鋭度が最大の場合は前記主要被写体の合焦位置よりも後の焦点位置で撮影された画素を選択し、前記主要被写体の合焦位置よりも後の焦点位置で撮影された画素の鮮鋭度が最大の場合は前記主要被写体の合焦位置よりも前の焦点位置で撮影された画素を選択して画像合成することを特徴とする撮像装置。
【請求項３】
画像データに基づいて主要被写体の合焦位置を判断する自動合焦位置判断手段と、
予め定められた移動量で離散的に焦点位置を移動して順次画像を撮影することにより複数の画像を得るフォーカスブラケット撮影手段と、
前記移動する焦点位置が前記自動合焦位置判断手段により判断された前記主要被写体の合焦位置と前記主要被写体の合焦位置の前後の焦点位置を含むように制御する焦点位置制御手段と、
前記主要被写体の合焦位置で撮影された画像及び前記主要被写体の合焦位置の前後の焦点位置で撮影された画像を含む前記フォーカスブラケット撮影手段により撮影された複数の画像間の被写体の対応点を検出する対応点検出手段と、
前記主要被写体の合焦位置で撮影された基準画像に対して、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形手段と、
前記変形された画像を含む複数の画像から、画素の座標に応じたぼかし量を算出するぼかし量算出手段と、
前記ぼかし量算出手段の算出結果に基づきフィルタ特性を決定した上で、前記主要被写体の合焦位置で撮影された基準画像に対してデジタルフィルタ処理を行うフィルタ処理手段と、
前記フィルタ処理手段により得られた画像を記録媒体に記録する記録手段と、
を備えたことを特徴とする撮像装置。
【請求項４】
前記変形された画像を含む複数の画像間の対応する座標の画素の鮮鋭度を算出する鮮鋭度算出手段を備え、
前記ぼかし量算出手段は、最も鮮鋭度が大きい画像の焦点位置と前記基準画像の焦点位置の差が大きいほどぼかし量を大きくするように、前記ぼかし量を算出することを特徴とする請求項３に記載の撮像装置。
【請求項５】
前記フォーカスブラケット撮影手段は、前記予め定められた移動量を、撮影条件で決まる被写界深度が浅いときは小さく、被写界深度が深いときは大きくなるように変更することを特徴とする請求項１から請求項４のいずれかに記載の撮像装置。
【請求項６】
前記対応点検出手段は、前記焦点位置の移動に伴い前記対応点の位置が画面中心から放射方向に変化又は画面中心へ放射方向に変化することに応じて、前記対応点を検出することを特徴とする請求項１から５のいずれかに記載の撮像装置。
【請求項７】
それぞれ異なる焦点位置で撮影された同一シーンの複数の画像を入力させる入力手段と、
前記複数の画像間の被写体の対応点を検出する対応点検出手段と、
前記複数の画像の中から所定の基準により選択された１枚の基準画像に対して、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形手段と、
前記変形された画像を含む複数の画像間の対応する座標の画素の鮮鋭度を算出する鮮鋭度算出手段と、
前記変形された画像を含む複数の画像を合成する画像合成手段であって、画面全体に焦点の合った全焦点画像を得る画像合成手段と、
前記画像合成手段により得られた全焦点画像を出力する出力手段と、
を備え、
前記画像合成手段は、前記変形された画像を含む複数の画像の対応する座標の画素において、前記算出された鮮鋭度の高い画素の重みを大きくするように加重平均して画像を合成することを特徴とする画像処理装置。
【請求項８】
主要被写体の合焦位置で撮影された画像とその前後の焦点位置で撮影された画像を含むそれぞれ異なる焦点位置で撮影された同一シーンの複数の画像を入力させる入力手段と、
前記複数の画像間の被写体の対応点を検出する対応点検出手段と、
前記主要被写体の合焦位置で撮影された画像を基準画像として、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形手段と、
前記変形された画像を含む複数の画像間の対応する座標の画素の鮮鋭度を算出する鮮鋭度算出手段と、
前記変形された画像を含む複数の画像を合成する画像合成手段であって、主要被写体以外のぼけをコントロールしたぼけ強調画像を得る画像合成手段と、
前記画像合成手段により得られたぼけ強調画像を出力する出力手段と、
を備え、
前記画像合成手段は、前記変形された画像を含む複数の画像の対応する座標の画素において、前記主要被写体の合焦位置で撮影された画素の鮮鋭度が最大の場合はその画素を選択し、前記主要被写体の合焦位置よりも前の焦点位置で撮影された画素の鮮鋭度が最大の場合は前記主要被写体の合焦位置よりも後の焦点位置で撮影された画素を選択し、前記主要被写体の合焦位置よりも後の焦点位置で撮影された画素の鮮鋭度が最大の場合は前記主要被写体の合焦位置よりも前の焦点位置で撮影された画素を選択して画像合成することを特徴とする画像処理装置。
【請求項９】
主要被写体の合焦位置で撮影された画像とその前後の焦点位置で撮影された画像を含むそれぞれ異なる焦点位置で撮影された同一シーンの複数の画像を入力させる入力手段と、
前記複数の画像間の被写体の対応点を検出する対応点検出手段と、
前記主要被写体の合焦位置で撮影された基準画像に対して、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形手段と、
前記変形された画像を含む複数の画像から、画素の座標に応じたぼかし量を算出するぼかし量算出手段と、
前記ぼかし量算出手段の算出結果に基づきフィルタ特性を決定した上で、前記主要被写体の合焦位置で撮影された基準画像に対してデジタルフィルタ処理を行うフィルタ処理手段と、
前記フィルタ処理手段により得られた画像を出力する出力手段と、
を備えたことを特徴とする画像処理装置。
【請求項１０】
予め定められた移動量で離散的に焦点位置を移動して順次画像を撮影することにより複数の画像を得るフォーカスブラケット撮影工程と、
前記複数の画像間の被写体の対応点を検出する対応点検出工程と、
前記複数の画像の中から所定の基準により選択された１枚の基準画像に対して、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形工程と、
前記変形された画像を含む複数の画像間の対応する座標の画素の鮮鋭度を算出する鮮鋭度算出工程と、
前記変形された画像を含む複数の画像を合成する画像合成工程であって、画面全体に焦点の合った全焦点画像を得る画像合成工程と、
前記画像合成工程により得られた全焦点画像を記録媒体に記録する記録工程と、
を備え、
前記画像合成工程は、前記変形された画像を含む複数の画像の対応する座標の画素において、前記算出された鮮鋭度の高い画素の重みを大きくするように加重平均して画像を合成することを特徴とする撮像方法。
【請求項１１】
主要被写体の合焦位置を自動的に判断する自動合焦位置判断工程と、
予め定められた移動量で離散的に焦点位置を移動して順次画像を撮影することにより複数の画像を得るフォーカスブラケット撮影工程と、
前記移動する焦点位置が前記自動合焦位置判断工程により判断された前記主要被写体の合焦位置と前記主要被写体の合焦位置の前後の焦点位置を含むように制御する焦点位置制御工程と、
前記主要被写体の合焦位置で撮影された画像及び前記主要被写体の合焦位置の前後の焦点位置で撮影された画像を含む前記フォーカスブラケット撮影工程により撮影された複数の画像間の被写体の対応点を検出する対応点検出工程と、
前記主要被写体の合焦位置で撮影された画像を基準画像として、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形工程と、
前記変形された画像を含む複数の画像間の対応する座標の画素の鮮鋭度を算出する鮮鋭度算出工程と、
前記変形された画像を含む複数の画像を合成する画像合成工程であって、主要被写体以外のぼけをコントロールしたぼけ強調画像を得る画像合成工程と、
前記画像合成工程により得られたぼけ強調画像を記録媒体に記録する記録工程と、
を備え、
前記画像合成工程は、前記変形された画像を含む複数の画像の対応する座標の画素において、前記主要被写体の合焦位置で撮影された画素の鮮鋭度が最大の場合はその画素を選択し、前記主要被写体の合焦位置よりも前の焦点位置で撮影された画素の鮮鋭度が最大の場合は前記主要被写体の合焦位置よりも後の焦点位置で撮影された画素を選択し、前記主要被写体の合焦位置よりも後の焦点位置で撮影された画素の鮮鋭度が最大の場合は前記主要被写体の合焦位置よりも前の焦点位置で撮影された画素を選択して画像合成することを特徴とする撮像方法。
【請求項１２】
主要被写体の合焦位置を自動的に判断する自動合焦位置判断工程と、
予め定められた移動量で離散的に焦点位置を移動して順次画像を撮影することにより複数の画像を得るフォーカスブラケット撮影工程と、
前記移動する焦点位置が前記自動合焦位置判断工程により判断された前記主要被写体の合焦位置とその前後を含むように制御する焦点位置制御工程と、
前記主要被写体の合焦位置で撮影された画像及び前記主要被写体の合焦位置の前後の焦点位置で撮影された画像を含む前記フォーカスブラケット撮影工程により撮影された複数の画像間の被写体の対応点を検出する対応点検出工程と、
前記主要被写体の合焦位置で撮影された基準画像に対して、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形工程と、
前記変形された画像を含む複数の画像から、画素の座標に応じたぼかし量を算出するぼかし量算出工程と、
前記ぼかし量算出工程の算出結果に基づきフィルタ特性を決定した上で、前記主要被写体の合焦位置で撮影された基準画像に対してデジタルフィルタ処理を行うフィルタ処理工程と、
前記フィルタ処理工程により得られた画像を記録媒体に記録する記録工程と、
を備えたことを特徴とする撮像方法。
【請求項１３】
それぞれ異なる焦点位置で撮影された同一シーンの複数の画像を入力させる入力工程と、
前記複数の画像間の被写体の対応点を検出する対応点検出工程と、
前記複数の画像の中から所定の基準により選択された１枚の基準画像に対して、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形工程と、
前記変形された画像を含む複数の画像間の対応する座標の画素の鮮鋭度を算出する鮮鋭度算出工程と、
前記変形された画像を含む複数の画像を合成する画像合成工程であって、画面全体に焦点の合った全焦点画像を得る画像合成工程と、
前記画像合成工程により得られた全焦点画像を出力する出力工程と、
を備え、
前記画像合成工程は、前記変形された画像を含む複数の画像の対応する座標の画素において、前記算出された鮮鋭度の高い画素の重みを大きくするように加重平均して画像を合成することを特徴とする画像処理方法。
【請求項１４】
主要被写体の合焦位置で撮影された画像とその前後の焦点位置で撮影された画像を含むそれぞれ異なる焦点位置で撮影された同一シーンの複数の画像を入力させる入力工程と、
前記複数の画像間の被写体の対応点を検出する対応点検出工程と、
前記主要被写体の合焦位置で撮影された画像を基準画像として、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形工程と、
前記変形された画像を含む複数の画像間の対応する座標の画素の鮮鋭度を算出する鮮鋭度算出工程と、
前記変形された画像を含む複数の画像を合成する画像合成工程であって、主要被写体以外のぼけをコントロールしたぼけ強調画像を得る画像合成工程と、
前記画像合成工程により得られたぼけ強調画像を出力する出力工程と、
を備え、
前記画像合成工程は、前記変形された画像を含む複数の画像の対応する座標の画素において、前記主要被写体の合焦位置で撮影された画素の鮮鋭度が最大の場合はその画素を選択し、前記主要被写体の合焦位置よりも前の焦点位置で撮影された画素の鮮鋭度が最大の場合は前記主要被写体の合焦位置よりも後の焦点位置で撮影された画素を選択し、前記主要被写体の合焦位置よりも後の焦点位置で撮影された画素の鮮鋭度が最大の場合は前記主要被写体の合焦位置よりも前の焦点位置で撮影された画素を選択して画像合成することを特徴とする画像処理方法。
【請求項１５】
主要被写体の合焦位置で撮影された画像とその前後の焦点位置で撮影された画像を含むそれぞれ異なる焦点位置で撮影された同一シーンの複数の画像を入力させる入力工程と、
前記複数の画像間の被写体の対応点を検出する対応点検出工程と、
前記主要被写体の合焦位置で撮影された基準画像に対して、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形工程と、
前記変形された画像を含む複数の画像から、画素の座標に応じたぼかし量を算出するぼかし量算出工程と、
前記ぼかし量算出工程の算出結果に基づきフィルタ特性を決定した上で、前記主要被写体の合焦位置で撮影された基準画像に対してデジタルフィルタ処理を行うフィルタ処理工程と、
前記フィルタ処理工程により得られた画像を出力する出力工程と、
を備えたことを特徴とする画像処理方法。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００５
【補正方法】変更
【補正の内容】
【０００５】
前記目的を達成するために本発明に係る撮像装置は、予め定められた移動量で離散的に焦点位置を移動して順次画像を撮影することにより複数の画像を得るフォーカスブラケット撮影手段と、前記フォーカスブラケット撮影手段により撮影された複数の画像間の被写体の対応点を検出する対応点検出手段と、前記複数の画像の中から所定の基準により選択された１枚の基準画像に対して、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形手段と、前記変形された画像を含む複数の画像間の対応する座標の画素の鮮鋭度を算出する鮮鋭度算出手段と、前記変形された画像を含む複数の画像を合成する画像合成手段であって、画面全体に焦点の合った全焦点画像を得る画像合成手段と、前記画像合成手段により得られた全焦点画像を記録媒体に記録する記録手段とを備え、前記画像合成手段は、前記変形された画像を含む複数の画像の対応する座標の画素において、前記算出された鮮鋭度の高い画素の重みを大きくするように加重平均して画像を合成することを特徴とする。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】削除
【補正の内容】
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
前記目的を達成するために本発明に係る撮像装置は、画像データに基づいて主要被写体の合焦位置を判断する自動合焦位置判断手段と、予め定められた移動量で離散的に焦点位置を移動して順次画像を撮影することにより複数の画像を得るフォーカスブラケット撮影手段と、前記移動する焦点位置が前記自動合焦位置判断手段により判断された前記主要被写体の合焦位置とその前後の焦点位置を含むように制御する焦点位置制御手段と、前記主要被写体の合焦位置で撮影された画像及び前記主要被写体の合焦位置の前後の焦点位置で撮影された画像を含む前記フォーカスブラケット撮影手段により撮影された複数の画像間の被写体の対応点を検出する対応点検出手段と、前記主要被写体の合焦位置で撮影された画像を基準画像として、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形手段と、前記変形された画像を含む複数の画像間の対応する座標の画素の鮮鋭度を算出する鮮鋭度算出手段と、前記変形された画像を含む複数の画像を合成する画像合成手段であって、主要被写体以外のぼけをコントロールしたぼけ強調画像を得る画像合成手段と、前記画像合成手段により得られたぼけ強調画像を記録媒体に記録する記録手段と、を備え、前記画像合成手段は、前記変形された画像を含む複数の画像の対応する座標の画素において、前記主要被写体の合焦位置で撮影された画素の鮮鋭度が最大の場合はその画素を選択し、前記主要被写体の合焦位置よりも前の焦点位置で撮影された画素の鮮鋭度が最大の場合は前記主要被写体の合焦位置よりも後の焦点位置で撮影された画素を選択し、前記主要被写体の合焦位置よりも後の焦点位置で撮影された画素の鮮鋭度が最大の場合は前記主要被写体の合焦位置よりも前の焦点位置で撮影された画素を選択して画像合成することを特徴とする。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】削除
【補正の内容】
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１３
【補正方法】変更
【補正の内容】
【００１３】
前記目的を達成するために本発明にかかる撮像装置は、画像データに基づいて主要被写体の合焦位置を判断する自動合焦位置判断手段と、予め定められた移動量で離散的に焦点位置を移動して順次画像を撮影することにより複数の画像を得るフォーカスブラケット撮影手段と、前記移動する焦点位置が前記自動合焦位置判断手段により判断された前記主要被写体の合焦位置と前記主要被写体の合焦位置の前後の焦点位置を含むように制御する焦点位置制御手段と、前記主要被写体の合焦位置で撮影された画像及び前記主要被写体の合焦位置の前後の焦点位置で撮影された画像を含む前記フォーカスブラケット撮影手段により撮影された複数の画像間の被写体の対応点を検出する対応点検出手段と、前記主要被写体の合焦位置で撮影された基準画像に対して、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形手段と、前記変形された画像を含む複数の画像から、画素の座標に応じたぼかし量を算出するぼかし量算出手段と、前記ぼかし量算出手段の算出結果に基づきフィルタ特性を決定した上で、前記主要被写体の合焦位置で撮影された基準画像に対してデジタルフィルタ処理を行うフィルタ処理手段と、前記フィルタ処理手段により得られた画像を記録媒体に記録する記録手段とを備えたことを特徴とする。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００１７
【補正方法】削除
【補正の内容】
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】削除
【補正の内容】
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００２３
【補正方法】変更
【補正の内容】
【００２３】
前記目的を達成するために本発明に係る画像処理装置は、それぞれ異なる焦点位置で撮影された同一シーンの複数の画像を入力させる入力手段と、前記複数の画像間の被写体の対応点を検出する対応点検出手段と、前記複数の画像の中から所定の基準により選択された１枚の基準画像に対して、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形手段と、前記変形された画像を含む複数の画像間の対応する座標の画素の鮮鋭度を算出する鮮鋭度算出手段と、前記変形された画像を含む複数の画像を合成する画像合成手段であって、画面全体に焦点の合った全焦点画像を得る画像合成手段と、前記画像合成手段により得られた全焦点画像を出力する出力手段とを備え、前記画像合成手段は、前記変形された画像を含む複数の画像の対応する座標の画素において、前記算出された鮮鋭度の高い画素の重みを大きくするように加重平均して画像を合成することを特徴とする。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００２５
【補正方法】変更
【補正の内容】
【００２５】
前記目的を達成するために本発明に係る画像処理装置は、主要被写体の合焦位置で撮影された画像とその前後の焦点位置で撮影された画像を含むそれぞれ異なる焦点位置で撮影された同一シーンの複数の画像を入力させる入力手段と、前記複数の画像間の被写体の対応点を検出する対応点検出手段と、前記主要被写体の合焦位置で撮影された画像を基準画像として、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形手段と、前記変形された画像を含む複数の画像間の対応する座標の画素の鮮鋭度を算出する鮮鋭度算出手段と、前記変形された画像を含む複数の画像を合成する画像合成手段であって、主要被写体以外のぼけをコントロールしたぼけ強調画像を得る画像合成手段と、前記画像合成手段により得られたぼけ強調画像を出力する出力手段とを備え、前記画像合成手段は、前記変形された画像を含む複数の画像の対応する座標の画素において、前記主要被写体の合焦位置で撮影された画素の鮮鋭度が最大の場合はその画素を選択し、前記主要被写体の合焦位置よりも前の焦点位置で撮影された画素の鮮鋭度が最大の場合は前記主要被写体の合焦位置よりも後の焦点位置で撮影された画素を選択し、前記主要被写体の合焦位置よりも後の焦点位置で撮影された画素の鮮鋭度が最大の場合は前記主要被写体の合焦位置よりも前の焦点位置で撮影された画素を選択して画像合成することを特徴とする。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００２７
【補正方法】変更
【補正の内容】
【００２７】
前記目的を達成するために本発明に係る画像処理装置は、主要被写体の合焦位置で撮影された画像とその前後の焦点位置で撮影された画像を含むそれぞれ異なる焦点位置で撮影された同一シーンの複数の画像を入力させる入力手段と、前記複数の画像間の被写体の対応点を検出する対応点検出手段と、前記主要被写体の合焦位置で撮影された基準画像に対して、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形手段と、前記変形された画像を含む複数の画像から、画素の座標に応じたぼかし量を算出するぼかし量算出手段と、前記ぼかし算出手段の算出結果に基づきフィルタ特性を決定した上で、前記主要被写体の合焦位置で撮影された基準画像に対してデジタルフィルタ処理を行うフィルタ処理手段と、前記フィルタ処理手段により得られた画像を出力する出力手段とを備えたことを特徴とする。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００２９
【補正方法】変更
【補正の内容】
【００２９】
前記目的を達成するために本発明に係る撮像方法は、予め定められた移動量で離散的に焦点位置を移動して順次画像を撮影することにより複数の画像を得るフォーカスブラケット撮影工程と、前記複数の画像間の被写体の対応点を検出する対応点検出工程と、前記複数の画像の中から所定の基準により選択された１枚の基準画像に対して、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形工程と、前記変形された画像を含む複数の画像間の対応する座標の画素の鮮鋭度を算出する鮮鋭度算出工程と、前記変形された画像を含む複数の画像を合成する画像合成工程であって、画面全体に焦点の合った全焦点画像を得る画像合成工程と、前記画像合成工程により得られた全焦点画像を記録媒体に記録する記録工程とを備え、
前記画像合成工程は、前記変形された画像を含む複数の画像の対応する座標の画素において、前記算出された鮮鋭度の高い画素の重みを大きくするように加重平均して画像を合成することを特徴とする。
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】００３１
【補正方法】変更
【補正の内容】
【００３１】
前記目的を達成するために本発明に係る撮像方法は、主要被写体の合焦位置を自動的に判断する自動合焦位置判断工程と、予め定められた移動量で離散的に焦点位置を移動して順次画像を撮影することにより複数の画像を得るフォーカスブラケット撮影工程と、前記移動する焦点位置が前記自動合焦位置判断工程により判断された前記主要被写体の合焦位置と前記主要被写体の合焦位置の前後の焦点位置を含むように制御する焦点位置制御工程と、前記主要被写体の合焦位置で撮影された画像及び前記主要被写体の合焦位置の前後の焦点位置で撮影された画像を含む前記フォーカスブラケット撮影工程により撮影された複数の画像間の被写体の対応点を検出する対応点検出工程と、前記主要被写体の合焦位置で撮影された画像を基準画像として、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形工程と、前記変形された画像を含む複数の画像間の対応する座標の画素の鮮鋭度を算出する鮮鋭度算出工程と、前記変形された画像を含む複数の画像を合成する画像合成工程であって、主要被写体以外のぼけをコントロールしたぼけ強調画像を得る画像合成工程と、前記画像合成工程により得られたぼけ強調画像を記録媒体に記録する記録工程とを備え、前記画像合成工程は、前記変形された画像を含む複数の画像の対応する座標の画素において、前記主要被写体の合焦位置で撮影された画素の鮮鋭度が最大の場合はその画素を選択し、前記主要被写体の合焦位置よりも前の焦点位置で撮影された画素の鮮鋭度が最大の場合は前記主要被写体の合焦位置よりも後の焦点位置で撮影された画素を選択し、前記主要被写体の合焦位置よりも後の焦点位置で撮影された画素の鮮鋭度が最大の場合は前記主要被写体の合焦位置よりも前の焦点位置で撮影された画素を選択して画像合成することを特徴とする。
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】００３３
【補正方法】変更
【補正の内容】
【００３３】
前記目的を達成するために本発明に係る撮像方法は、主要被写体の合焦位置を自動的に判断する自動合焦位置判断工程と、予め定められた移動量で離散的に焦点位置を移動して順次画像を撮影することにより複数の画像を得るフォーカスブラケット撮影工程と、前記移動する焦点位置が前記自動合焦位置判断工程により判断された前記主要被写体の合焦位置とその前後を含むように制御する焦点位置制御工程と、前記主要被写体の合焦位置で撮影された画像及び前記主要被写体の合焦位置の前後の焦点位置で撮影された画像を含む前記フォーカスブラケット撮影工程により撮影された複数の画像間の被写体の対応点を検出する対応点検出工程と、前記主要被写体の合焦位置で撮影された基準画像に対して、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形工程と、前記変形された画像を含む複数の画像から、画素の座標に応じたぼかし量を算出するぼかし量算出工程と、前記ぼかし量算出工程の算出結果に基づきフィルタ特性を決定した上で、前記主要被写体の合焦位置で撮影された基準画像に対してデジタルフィルタ処理を行うフィルタ処理工程と、前記フィルタ処理工程により得られた画像を記録媒体に記録する記録工程とを備えたことを特徴とする。
【手続補正１５】
【補正対象書類名】明細書
【補正対象項目名】００３５
【補正方法】変更
【補正の内容】
【００３５】
前記目的を達成するために本発明に係る画像処理方法は、それぞれ異なる焦点位置で撮影された同一シーンの複数の画像を入力させる入力工程と、前記複数の画像間の被写体の対応点を検出する対応点検出工程と、前記複数の画像の中から所定の基準により選択された１枚の基準画像に対して、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形工程と、前記変形された画像を含む複数の画像間の対応する座標の画素の鮮鋭度を算出する鮮鋭度算出工程と、前記変形された画像を含む複数の画像を合成する画像合成工程であって、画面全体に焦点の合った全焦点画像を得る画像合成工程と、前記画像合成工程により得られた全焦点画像を出力する出力工程とを備え、前記画像合成工程は、前記変形された画像を含む複数の画像の対応する座標の画素において、前記算出された鮮鋭度の高い画素の重みを大きくするように加重平均して画像を合成することを特徴とする。
【手続補正１６】
【補正対象書類名】明細書
【補正対象項目名】００３７
【補正方法】変更
【補正の内容】
【００３７】
前記目的を達成するために本発明に係る画像処理方法は、主要被写体の合焦位置で撮影された画像とその前後の焦点位置で撮影された画像を含むそれぞれ異なる焦点位置で撮影された同一シーンの複数の画像を入力させる入力工程と、前記複数の画像間の被写体の対応点を検出する対応点検出工程と、前記主要被写体の合焦位置で撮影された画像を基準画像として、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形工程と、前記変形された画像を含む複数の画像間の対応する座標の画素の鮮鋭度を算出する鮮鋭度算出工程と、前記変形された画像を含む複数の画像を合成する画像合成工程であって、主要被写体以外のぼけをコントロールしたぼけ強調画像を得る画像合成工程と、前記画像合成工程により得られたぼけ強調画像を出力する出力工程とを備え、前記画像合成工程は、前記変形された画像を含む複数の画像の対応する座標の画素において、前記主要被写体の合焦位置で撮影された画素の鮮鋭度が最大の場合はその画素を選択し、前記主要被写体の合焦位置よりも前の焦点位置で撮影された画素の鮮鋭度が最大の場合は前記主要被写体の合焦位置よりも後の焦点位置で撮影された画素を選択し、前記主要被写体の合焦位置よりも後の焦点位置で撮影された画素の鮮鋭度が最大の場合は前記主要被写体の合焦位置よりも前の焦点位置で撮影された画素を選択して画像合成することを特徴とする。
【手続補正１７】
【補正対象書類名】明細書
【補正対象項目名】００３９
【補正方法】変更
【補正の内容】
【００３９】
前記目的を達成するために本発明に係る画像処理方法は、主要被写体の合焦位置で撮影された画像とその前後の焦点位置で撮影された画像を含むそれぞれ異なる焦点位置で撮影された同一シーンの複数の画像を入力させる入力工程と、前記複数の画像間の被写体の対応点を検出する対応点検出工程と、前記主要被写体の合焦位置で撮影された基準画像に対して、前記対応点の位置が一致するように前記基準画像以外の前記複数の画像を変形する画像変形工程と、前記変形された画像を含む複数の画像から、画素の座標に応じたぼかし量を算出するぼかし量算出工程と、前記ぼかし量算出工程の算出結果に基づきフィルタ特性を決定した上で、前記主要被写体の合焦位置で撮影された基準画像に対してデジタルフィルタ処理を行うフィルタ処理工程と、前記フィルタ処理工程により得られた画像を出力する出力工程とを備えたことを特徴とする。
【手続補正１８】
【補正対象書類名】明細書
【補正対象項目名】００４８
【補正方法】変更
【補正の内容】
【００４８】
上記撮影スタンバイ状態時に操作部２３の図示しないシャッタースイッチが押されると、ＣＰＵ２４は、積算部３１で算出したＡＦ評価値に基づいて合焦位置を判断し、レンズ駆動部１６を介してレンズ１１を駆動しフォーカス制御を行い、絞り駆動部１７を介して絞り１２を駆動し露出制御を行い、レンズ１１、絞り１２、Ｉｒカットフィルタ１３、及び光学ローパスフィルタ１４を介して固体撮像素子１５の受光面上に被写体像を結像させる。ここで、必要であれば発光部１９を撮影補助光として発光させる。またこのとき、受光部２０により発光部１９の発光量を制御する。固体撮像素子１５の受光面に結像された被写体像をその光量に応じた量の信号電荷に変換し、この信号電荷はＣＰＵ２４の指令に従い撮像素子駆動部１８から与えられる駆動パルスに基づいてアナログ信号処理部２１に送られ、ここで相関二重サンプリング処理された後に増幅され、Ａ／Ｄ変換器２２に加えられる。
【手続補正１９】
【補正対象書類名】明細書
【補正対象項目名】００５６
【補正方法】変更
【補正の内容】
【００５６】
また、この焦点位置の移動については、焦点位置が近い位置から遠い位置へ移動しても、遠い位置から近い位置へ移動しても、又はランダムに移動してもよい。
【手続補正２０】
【補正対象書類名】明細書
【補正対象項目名】００５９
【補正方法】変更
【補正の内容】
【００５９】
まず、ＣＰＵ２４は、対応点検出部３６へフォーカスブラケット撮影を行った複数画像を入力する（ステップＳ４１）。次に、対応点検出部３６は、この複数画像の中から基準画像を選択し（ステップＳ４２）、この基準画像から特徴点の抽出を行う（ステップＳ４３）。基準画像の選択については、デジタルカメラ１内において予め定められた方法に基づいて選択してもよいし、ユーザが選択してもよい。ここでは、最初に撮影した画像を基準画像とする。特徴点抽出の手法は種々のものが提案されているが、ここでは、ある点を中心とする所定領域内の輝度の標準偏差が所定値以上の場合に、その点を特徴点として抽出する。図３（ａ）における丸印が、図３（ａ）の画像における特徴点を示す。特徴点は多いほうが以後の処理を精度よく行うことができるが、特徴点が多くなると処理負荷が増大するため、特徴点の数はハード性能から適宜決めればよい。
【手続補正２１】
【補正対象書類名】明細書
【補正対象項目名】００６３
【補正方法】変更
【補正の内容】
【００６３】
全ての特徴点に対して処理を行うと、次に全ての追跡画像に対してこの処理を行ったか否かの判定を行う（ステップＳ４８）。前述したように、この処理は基準画像以外の画像について行う。処理を行っていない追跡画像がある場合は、その追跡画像において同様の処理を行う。全ての追跡画像に対して処理が終了すると、対応点検出処理が終了する。
【手続補正２２】
【補正対象書類名】明細書
【補正対象項目名】０１１０
【補正方法】変更
【補正の内容】
【０１１０】
【数２】
2008271240.tif 000001
【手続補正２３】
【補正対象書類名】明細書
【補正対象項目名】０１１４
【補正方法】変更
【補正の内容】
【０１１４】
ぼかし処理が終了すると、ＣＰＵ２４はフィルタ処理部４０の出力画像をメモリ制御部３２を介して記録媒体３３に記録して（ステップＳ２７）、ぼけ強調撮影が終了する。
【手続補正２４】
【補正対象書類名】明細書
【補正対象項目名】０１１６
【補正方法】変更
【補正の内容】
【０１１６】
なお、本実施の形態の図１６及び図１７に示すぼかし処理は、対応点検出及び画像変形を行わない画像に対して行ってもよい。即ち、フォーカスブラケット撮影した複数画像において、直接このぼかし処理を行ってもよい。
【手続補正２５】
【補正対象書類名】明細書
【補正対象項目名】０１１７
【補正方法】変更
【補正の内容】
【０１１７】
【図１】図１は、本発明に係る第１の実施の形態のデジタルカメラ１の内部構成の一例を示すブロック図である。
【図２】図２は全焦点画像を撮影するための全焦点画像撮影モードの動作を示すフローチャートである。
【図３】図３は、フォーカスブラケット撮影から得られた画像を示す図である。
【図４】図４は、デジタルカメラ１の対応点検出の動作について示すフローチャートである。
【図５】図５は、画像変形について示す図である。
【図６】図６は、画像合成処理の動作を示すフローチャートである。
【図７】図７は、ラプラシアンフィルタのフィルタ行列を示す図である。
【図８】図８は、ぼけ強調撮影モードの動作を示すフローチャートである。
【図９】図９は、各焦点位置と各焦点位置におけるＡＦ評価値を示したグラフである。
【図１０】図１０は第２の実施の形態における画像合成処理の動作のフローチャートである。
【図１１】図１１は、主要被写体の合焦位置Ｂで撮影された画像と、その合焦位置の前後の焦点位置であるＡ及びＣで撮影された画像の、鮮鋭度を示すグラフである。
【図１２】図１２は、本発明に係る第３の実施の形態のデジタルカメラ１の内部構成の一例を示すブロック図である。
【図１３】図１３は、第３の実施の形態のぼけ強調撮影モードの動作を示すフローチャートである。
【図１４】図１４は、各焦点位置と各焦点位置におけるＡＦ評価値を示したグラフである。
【図１５】図１５は、絞りと焦点距離と焦点位置の間隔ｄの関係を示すグラフである。
【図１６】図１６は、ぼかし量算出処理の動作を示すフローチャートである。
【図１７】図１７は、ぼかし処理の動作を示すフローチャートである。
【図１８】図１８は、ぼかし量の絶対値｜ｋ｜とガウシアンフィルタのσパラメータの関係、及びを示したグラフである。