(57)【要約】【課題】主要被写体以外の領域をぼかした画像の生成を適正に行う。【解決手段】撮像装置１００であって、略等しい画角で撮像された被写界深度の異なる少なくとも二つの画像を取得する画像取得部５ａと、少なくとも二つの画像の間で対応する各画素の差分を生成する差分生成部６ａと、生成された各画素の差分に基づいて、少なくとも二つの画像のうち、何れか一の画像に対してぼかし処理を施してぼかし画像を生成するぼかし画像生成部６ｂとを備えている。【選択図】図１
2011066827.tif 000002
【特許請求の範囲】
【請求項１】
略等しい画角で撮像された被写界深度の異なる少なくとも二つの画像を取得する取得手段と、
この取得手段により取得された前記少なくとも二つの画像の間で対応する各画素の差分を生成する差分生成手段と、
この差分生成手段により生成された前記各画素の差分に基づいて、前記少なくとも二つの画像のうち、何れか一の画像に対してぼかし処理を施してぼかし画像を生成する画像生成手段と、
を備えることを特徴とする画像処理装置。
【請求項２】
前記画像生成手段は、
前記少なくとも二つの画像のうち、被写界深度のより浅い方の画像の非合焦領域に対して前記ぼかし処理を施すことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記差分生成手段により生成された前記各画素の差分に基づいて、前記ぼかし処理のぼかし度合いを調整する調整手段を更に備え、
前記画像生成手段は、
前記調整手段により調整された前記ぼかし度合いに基づいて、前記ぼかし処理を施すことを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記取得手段により取得された前記少なくとも二つの画像の各画素の周波数成分情報を取得する情報取得手段を更に備え、
前記差分生成手段は、
前記情報取得手段により取得された前記少なくとも二つの画像の間で対応する各画素の周波数成分情報の差分を生成することを特徴とする請求項３に記載の画像処理装置。
【請求項５】
前記調整手段は、
前記差分生成手段により生成された前記各画素の周波数成分情報の差分に基づいて、当該差分が大きくなるほど遮断周波数がより小さくなるようにローパスフィルタを設定する設定手段を備え、
前記画像生成手段は、
前記設定手段により設定された前記ローパスフィルタを用いて、前記ぼかし処理を施すことを特徴とする請求項４に記載の画像処理装置。
【請求項６】
前記取得手段は、前記被写界深度が所定の一方向に変化する三つ以上の画像を取得し、
前記差分生成手段は、前記取得手段により取得された前記三つ以上の画像のうち、取得順が連続する画像どうしの間で対応する各画素の差分をそれぞれ生成し、
前記調整手段は、
前記取得手段により取得された前記三つ以上の画像における、前記差分生成手段により生成された前記各画素の差分の変化に基づいて、前記ぼかし処理のぼかし度合いを調整することを特徴とする請求項３に記載の画像処理装置。
【請求項７】
前記被写界深度の異なる少なくとも二つの画像は、明るさを略等しくするとともに、絞り値を互いに異ならせて撮像された画像であることを特徴とする請求項１〜６の何れか一項に記載の画像処理装置。
【請求項８】
前記少なくとも二つの画像どうしの位置合わせを行う位置合わせ手段を更に備え、
前記差分生成手段は、
前記位置合わせ手段により位置合わせされた少なくとも二つの画像の間で対応する各画素の差分を生成することを特徴とする請求項１〜７の何れか一項に記載の画像処理装置。
【請求項９】
画像処理装置を用いた画像処理方法であって、
略等しい画角で撮像された被写界深度の異なる少なくとも二つの画像を取得するステップと、
取得された前記少なくとも二つの画像の間で対応する各画素の差分を生成するステップと、
生成された前記各画素の差分に基づいて、前記少なくとも二つの画像のうち、何れか一の画像に対してぼかし処理を施してぼかし画像を生成するステップと、
を実行させることを特徴とする画像処理方法。
【請求項１０】
画像処理装置のコンピュータを、
略等しい画角で撮像された被写界深度の異なる少なくとも二つの画像を取得する取得手段、
この取得手段により取得された前記少なくとも二つの画像の間で対応する各画素の差分を生成する差分生成手段、
この差分生成手段により生成された前記各画素の差分に基づいて、前記少なくとも二つの画像のうち、何れか一の画像に対してぼかし処理を施してぼかし画像を生成する画像生成手段、
として機能させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、画像処理方法及びプログラムに関する。
【背景技術】
【０００２】
従来、主要被写体の合焦位置と、その前後の焦点位置でフォーカスブラケット撮影を行って、撮影された複数の画像から基準画像の各画素のぼかし量を算出し、当該基準画像にぼかし処理を施すことでボケ強調画像を生成する撮像装置が知られている（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００８−２７１２４１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、上記特許文献１の場合、フォーカスブラケット撮影におけるフォーカスレンズの位置変化により、主要被写体とその背景のバランスにずれが生じてしまい、複数の撮像画像間で対応する画素が存在しない座標が発生してしまうといった問題がある。
ここで、フォーカスレンズの位置変化が被写体の合焦状態に影響を及ぼさない撮影条件として被写界深度を深くする設定が考えられるが、被写界深度の深い画像に対しフォーカスブラケット撮影を行ったとしても背景のボケ量の差がわずかとなってしまい、複数の撮像画像間での差分の抽出が困難となる。
【０００５】
そこで、本発明の課題は、主要被写体以外の領域をぼかした画像の生成を適正に行うことができる画像処理装置、画像処理方法及びプログラムを提供することである。
【課題を解決するための手段】
【０００６】
上記課題を解決するため、請求項１に記載の発明の画像処理装置は、
略等しい画角で撮像された被写界深度の異なる少なくとも二つの画像を取得する取得手段と、この取得手段により取得された前記少なくとも二つの画像の間で対応する各画素の差分を生成する差分生成手段と、この差分生成手段により生成された前記各画素の差分に基づいて、前記少なくとも二つの画像のうち、何れか一の画像に対してぼかし処理を施してぼかし画像を生成する画像生成手段と、を備えることを特徴としている。
【０００７】
請求項２に記載の発明は、請求項１に記載の画像処理装置において、
前記画像生成手段は、前記少なくとも二つの画像のうち、被写界深度のより浅い方の画像の非合焦領域に対して前記ぼかし処理を施すことを特徴としている。
【０００８】
請求項３に記載の発明は、請求項２に記載の画像処理装置において、
前記差分生成手段により生成された前記各画素の差分に基づいて、前記ぼかし処理のぼかし度合いを調整する調整手段を更に備え、前記画像生成手段は、前記調整手段により調整された前記ぼかし度合いに基づいて、前記ぼかし処理を施すことを特徴としている。
【０００９】
請求項４に記載の発明は、請求項３に記載の画像処理装置において、
前記取得手段により取得された前記少なくとも二つの画像の各画素の周波数成分情報を取得する情報取得手段を更に備え、前記差分生成手段は、前記情報取得手段により取得された前記少なくとも二つの画像の間で対応する各画素の周波数成分情報の差分を生成することを特徴としている。
【００１０】
請求項５に記載の発明は、請求項４に記載の画像処理装置において、
前記調整手段は、前記差分生成手段により生成された前記各画素の周波数成分情報の差分に基づいて、当該差分が大きくなるほど遮断周波数がより小さくなるようにローパスフィルタを設定する設定手段を備え、前記画像生成手段は、前記設定手段により設定された前記ローパスフィルタを用いて、前記ぼかし処理を施すことを特徴としている。
【００１１】
請求項６に記載の発明は、請求項３に記載の画像処理装置において、
前記取得手段は、前記被写界深度が所定の一方向に変化する三つ以上の画像を取得し、前記差分生成手段は、前記取得手段により取得された前記三つ以上の画像のうち、取得順が連続する画像どうしの間で対応する各画素の差分をそれぞれ生成し、前記調整手段は、前記取得手段により取得された前記三つ以上の画像における、前記差分生成手段により生成された前記各画素の差分の変化に基づいて、前記ぼかし処理のぼかし度合いを調整することを特徴としている。
【００１２】
請求項７に記載の発明は、請求項１〜６の何れか一項に記載の画像処理装置において、
前記被写界深度の異なる少なくとも二つの画像は、明るさを略等しくするとともに、絞り値を互いに異ならせて撮像された画像であることを特徴としている。
【００１３】
請求項８に記載の発明は、請求項１〜７の何れか一項に記載の画像処理装置において、
前記少なくとも二つの画像どうしの位置合わせを行う位置合わせ手段を更に備え、前記調整手段は、前記位置合わせ手段により位置合わせされた少なくとも二つの画像の間で対応する各画素の差分を生成することを特徴としている。
【００１４】
請求項９に記載の発明の画像処理方法は、
画像処理装置を用いた画像処理方法であって、略等しい画角で撮像された被写界深度の異なる少なくとも二つの画像を取得するステップと、取得された前記少なくとも二つの画像の間で対応する各画素の差分を生成するステップと、生成された前記各画素の差分に基づいて、前記少なくとも二つの画像のうち、何れか一の画像に対してぼかし処理を施してぼかし画像を生成するステップと、を実行させることを特徴としている。
【００１５】
請求項１０に記載の発明のプログラムは、
画像処理装置のコンピュータを、略等しい画角で撮像された被写界深度の異なる少なくとも二つの画像を取得する取得手段、この取得手段により取得された前記少なくとも二つの画像の間で対応する各画素の差分を生成する差分生成手段、この差分生成手段により生成された前記各画素の差分に基づいて、前記少なくとも二つの画像のうち、何れか一の画像に対してぼかし処理を施してぼかし画像を生成する画像生成手段、として機能させることを特徴としている。
【発明の効果】
【００１６】
本発明によれば、主要被写体以外の領域をぼかしてぼかし画像の生成を適正に行うことができる。
【図面の簡単な説明】
【００１７】
【図１】本発明を適用した一実施形態の撮像装置の概略構成を示すブロック図である。
【図２】図１の撮像装置によるぼかし画像生成処理に係る動作の一例を示すフローチャートである。
【図３】図２のぼかし画像生成処理を説明するための画像の一例を模式的に示す図である。
【図４】図２のぼかし画像生成処理を説明するための画像の一例を模式的に示す図である。
【図５】変形例１の撮像装置の概略構成を示すブロック図である。
【図６】図５の撮像装置によるぼかし画像生成処理に係る動作の一例を示すフローチャートである。
【発明を実施するための形態】
【００１８】
以下に、本発明について、図面を用いて具体的な態様を説明する。ただし、発明の範囲は、図示例に限定されない。
図１は、本発明を適用した一実施形態の撮像装置１００の概略構成を示すブロック図である。
【００１９】
本実施形態の撮像装置１００は、略等しい画角で撮像された被写界深度の異なる少なくとも二枚の画像Ｐ１、Ｐ２の間で対応する各画素の差分を生成し、当該各画素の差分に基づいて、少なくとも二枚の画像Ｐ１、Ｐ２のうち、何れか一の画像（例えば、一枚目の画像Ｐ１）に対してぼかし処理を施してぼかし画像Ｂを生成する。
具体的には、図１に示すように、撮像装置１００は、撮像部１と、撮像制御部２と、画像データ生成部３と、メモリ４と、位置合わせ部５と、画像処理部６と、表示制御部７と、表示部８と、記録媒体９と、操作入力部１０と、中央制御部１１とを備えている。
【００２０】
撮像部１は、撮像手段として、被写体を連続して撮像する。具体的には、撮像部１は、レンズ部１ａと、絞り１ｂと、電子撮像部１ｃを備えている。
【００２１】
レンズ部１ａは、複数のレンズから構成され、ズームレンズやフォーカスレンズ等を備えている。
また、レンズ部１ａは、図示は省略するが、被写体の撮像の際に、ズームレンズを光軸方向に移動させるズーム駆動部、フォーカスレンズを光軸方向に移動させる合焦駆動部等を備えていても良い。
【００２２】
絞り１ｂは、レンズ部１ａを通過する光の量を調整するものである。
また、絞り１ｂは、図示は省略するが、露出制御部２ａからの所定の制御信号に従って、当該絞り１ｂの拡径や縮径を行う絞り駆動部を備えていても良い。
【００２３】
電子撮像部１ｃは、例えば、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal-oxide Semiconductor）等のイメージセンサから構成され、レンズ部１ａの各種レンズを通過した光学像を二次元の画像信号に変換する。
【００２４】
撮像制御部２は、図示は省略するが、タイミング発生器、ドライバなどを備えている。そして、撮像制御部２は、タイミング発生器、ドライバにより電子撮像部１ｃを走査駆動して、所定周期毎に光学像を電子撮像部１ｃにより二次元の画像信号に変換させ、当該電子撮像部１ｃの撮像領域から１画面分ずつ画像フレームを読み出して画像データ生成部３に出力させる。
【００２５】
また、撮像制御部２は、ＡＥ（自動露出処理）の実行を制御する露出制御部２ａを具備している。
露出制御部２ａは、撮像部１及び撮像制御部２による被写体の撮像の際の露出条件を逐次設定する。即ち、露出制御部２ａは、所定のプログラム線図に基づいて、電子撮像部１ｃのシャッター速度（露光時間）や信号増幅率（ＩＳＯ感度）、絞り１ｂの絞り値等を調整して、所定の制御信号を電子撮像部１ｃや絞り１ｂに出力する。具体的には、露出制御部２ａは、撮像部１及び撮像制御部２により撮像された画像の明るさ（BV値）が、所定の値となるように、絞り値（AV値）、露光時間（TV値）、ＩＳＯ感度（SV値）を下記のAPEX値の一般式に従って決定する。
画像の明るさ（BV値）＝絞り値（AV値）＋露光時間（TV値）−ＩＳＯ感度（SV値）
【００２６】
また、絞りブラケット撮像モードにて、電子撮像部１ｃにより主要被写体Ｓを所定の撮像フレームレートで連続して撮像する際に、露出制御部２ａは、撮像順が連続する二枚の連写画像Ｐ１、Ｐ２の被写界深度を互いに異ならせるように、明るさ（BV値）を略等しくするとともに絞り値（AV値）を互いに異ならせるように制御する。具体的には、露出制御部２ａは、一枚目の画像Ｐ１（図３（ａ）参照）の被写界深度が最も浅くなるように絞り値（AV値）を最も開放側に設定し、二枚目以降の画像（図３（ｂ）参照）の連写が進むにつれて被写界深度が次第に深くなるように絞り値（AV値）を次第に絞っていく。このとき、露出制御部２ａは、連写される画像の明るさ（BV値）が所定の値に固定されるように、絞り値（AV値）の変化に応じて、TV値（露光時間）を小さく（長く）したり、SV値（ＩＳＯ感度）を大きくする（上げる）ように変化させる。
このように、撮像制御部２は、露出制御部２ａにより電子撮像部１ｃや絞り１ｂを駆動制御して、撮像部１に略等しい画角で被写界深度の異なる画像を少なくとも二枚連続して撮像させる。
【００２７】
画像データ生成部３は、電子撮像部１ｃから転送された画像データのアナログ値の信号に対してＲＧＢの各色成分毎に適宜ゲイン調整した後に、サンプルホールド回路（図示略）でサンプルホールドしてＡ／Ｄ変換器（図示略）でデジタルデータに変換し、カラープロセス回路（図示略）で画素補間処理及びγ補正処理を含むカラープロセス処理を行った後、デジタル値の輝度信号Ｙ及び色差信号Ｃｂ，Ｃｒ（ＹＵＶデータ）を生成する。
カラープロセス回路から出力される輝度信号Ｙ及び色差信号Ｃｂ，Ｃｒは、図示しないＤＭＡコントローラを介して、バッファメモリとして使用されるメモリ４にＤＭＡ転送される。
【００２８】
メモリ４は、例えば、ＤＲＡＭ等により構成され、画像処理部６や中央制御部１１等によって処理されるデータ等を一時記憶する。
【００２９】
位置合わせ部５は、撮像部１により連続して撮像された画像を取得する画像取得部５ａを具備している。
画像取得部５ａは、絞りブラケット撮像モードにて、撮像部１により撮像され画像データ生成部３により生成された連写画像、即ち、被写界深度の異なる二枚の連写画像（例えば、一枚目の画像Ｐ１、二枚目の画像Ｐ２等）の輝度信号Ｙをメモリ４から取得する。
なお、画像取得部５ａは、被写界深度の異なる連写画像を二枚取得するようにしたが、これに限られるものではなく、例えば、三枚以上であっても良い。
ここで、画像取得部５ａは、連続して撮像された被写界深度の異なる少なくとも二枚の画像を取得する取得手段を構成している。
【００３０】
また、位置合わせ部５は、連写画像から特徴点を抽出する特徴抽出処理を行う特徴量演算部５ｂを具備している。
特徴量演算部５ｂは、例えば、一枚目の画像Ｐ１の輝度信号Ｙを所定の複数（例えば、横×縦：４×３等）のエリアに分割した後、各エリアを所定の複数（例えば、横×縦：３×３等）のブロック（例えば、１６×１６画素の正方形等）に分割する。そして、特徴量演算部５ｂは、各エリア毎に複数のブロックの中から高周波成分の多い特徴の高いブロック（特徴点）をテンプレートとして抽出する。ここで、特徴抽出処理とは、多数の候補ブロックから追跡に都合の良い特徴性の高いものを選択する処理である。
なお、エリアやブロックの分割数、並びに各ブロックの画素数は、一例であって、これらに限られるものではない。
【００３１】
また、位置合わせ部５は、連写画像どうしの位置合わせのためのブロックマッチング処理を行うブロックマッチング部５ｃを具備している。
ブロックマッチング部５ｃは、例えば、連写画像Ｐ１、Ｐ２のうち、一枚目の画像Ｐ１を基準画像とするとともに、二枚目の画像Ｐ２を対象画像として位置合わせを行う。具体的には、ブロックマッチング部５ｃは、特徴抽出処理にて抽出された一枚目の画像Ｐ１のテンプレート（例えば、１６×１６画素の正方形）が二枚目の画像Ｐ２内のどこに対応するか、つまり、二枚目の画像Ｐ２内にてテンプレートの画素値が最適にマッチする位置（対応領域）を探索する。そして、画素値の相違度の評価値（例えば、差分二乗和（ＳＳＤ）や差分絶対値和（ＳＡＤ）等）が最も良かった一枚目の画像Ｐ１と二枚目の画像Ｐ２間の最適なオフセットを当該テンプレートの動きベクトルとして算出する。
【００３２】
そして、位置合わせ部５は、一枚目の画像Ｐ１から抽出した特徴点に基づいて、一枚目の画像Ｐ１と二枚目の画像Ｐ２との位置合わせを行う。即ち、位置合わせ部５は、一枚目の画像Ｐ１から抽出した特徴点に基づいて、一枚目の画像Ｐ１（基準画像）に対する二枚目の画像Ｐ２（対象画像）の各画素の座標変換式（射影変換行列）を算出し、当該座標変換式に従って二枚目の画像Ｐ２を座標変換して一枚目の画像Ｐ１と位置合わせを行う。
具体的には、位置合わせ部５は、ブロックマッチング部５ｃにより算出された複数のテンプレートの動きベクトルを多数決により演算して、統計的に所定％（例えば、５０％）以上となると判断された動きベクトルを全体の動きベクトルとして、当該動きベクトルに係る特徴点対応を用いて二枚目の画像Ｐ２の射影変換行列を算出する。そして、位置合わせ部５は、射影変換行列に従って二枚目の画像Ｐ２のＹＵＶデータを座標変換して一枚目の画像Ｐ１のＹＵＶデータと位置合わせを行う。
ここで、位置合わせ部５は、被写界深度の異なる少なくとも二枚の画像Ｐ１、Ｐ２どうしの位置合わせを行う位置合わせ手段を構成している。
【００３３】
なお、上記した位置合わせの手法は、一例であってこれに限られるものではない。即ち、例えば、全体の動きベクトルの算出の際に、各テンプレートの追跡結果（特徴点対応）の有効性を判定する処理を行うことで全体の動きベクトルの信頼度を向上させるようにしても良い。
【００３４】
画像処理部６は、連写画像どうしの間で対応する各画素の画素値の差分を生成する差分生成部６ａを具備している。
差分生成部６ａは、具体的には、位置合わせ部５により射影変換行列に従って各画素が座標変換された二枚目の画像Ｐ２のＹＵＶデータと一枚目の画像Ｐ１のＹＵＶデータの間で対応する各画素の画素値の差分を算出してボケデータマップＭを生成する。即ち、これら二枚の画像Ｐ１、Ｐ２のＹＵＶデータは、明るさ（BV値）をそろえ、且つ、絞り値（AV値）を変化させた状態で連写撮像された画像であるので、絞り１ｂの径の変化（被写界深度の差）に由来するボケ量以外の差は、非常に小さい値となる。即ち、一枚目の画像Ｐ１を主要被写体Ｓに合焦させて撮像し、二枚目以降の画像を被写界深度がより深くなるように設定して連写すると、連写画像Ｐ１、Ｐ２における主要被写体Ｓ部分の差は、非常に小さい値となる。そこで、これら二枚の連写画像Ｐ１、Ｐ２のＹＵＶデータどうしで対応する各画素の画素値の差分が所定の閾値よりも小さい画素からなる領域を主要被写体Ｓ部分として除き、所定の閾値以上となる画素からなる領域を一枚目の画像Ｐ１におけるボケ領域（非合焦領域Ｎ１）として、当該非合焦領域Ｎ１の各画素の画素値の差分を記録したボケデータマップＭ（図４（ａ）参照）を生成する。
ここで、差分生成部６ａは、被写界深度の異なる少なくとも二枚の画像Ｐ１、Ｐ２の間で対応する各画素の画素値の差分情報を生成する差分生成手段を構成している。
【００３５】
また、画像処理部６は、差分生成部６ａにより生成された各画素の画素値の差分に基づいて、一枚目の画像Ｐ１の非合焦領域Ｎ１に対してぼかし処理を施してぼかし画像Ｂを生成するぼかし画像生成部６ｂを具備している。
ぼかし画像生成部６ｂは、具体的には、一枚目の画像Ｐ１の非合焦領域Ｎ１に対するぼかし処理のぼかし度合いを調整するぼかし度調整部６ｃを有している。ぼかし度調整部６ｃは、例えば、ユーザによる操作入力部１０の所定操作に基づいて入力されるか、或いは、デフォルトで設定されている所定の係数を、差分生成部６ａにより生成されたボケデータマップＭの各画素の画素値の差分に乗算することで、ぼかし処理の各画素毎のぼかし度合い（ボケ量）を調整して付加ボケデータマップを生成する。
そして、ぼかし画像生成部６ｂは、ぼかし度調整部６ｃにより生成された付加ボケデータマップの各画素毎のぼかし度合いに基づいて、一枚目の画像Ｐ１、即ち、二枚の連写画像Ｐ１、Ｐ２のうちの被写界深度のより浅い方の画像Ｐ１の非合焦領域Ｎ１に対してぼかし処理を施すことでぼかし画像Ｂを生成する。具体的には、ぼかし画像生成部６ｂは、一枚目の画像Ｐ１のＹＵＶデータに基づいて、当該画像Ｐ１の非合焦領域Ｎ１の各画素の画素値を付加ボケデータマップの対応する画素のぼかし度合いに応じて補正して、主要被写体Ｓ以外の領域Ｎ２（非合焦領域Ｎ１）に新たなボケが加算されたぼかし画像ＢのＹＵＶデータを生成する。
なお、一枚目の画像Ｐ１の主要被写体Ｓ以外の領域Ｎ２のぼかし処理の方法としては、例えば、処理対象画素の周辺画素の画素値に所定の重み付けをした量を足し合わせて平均化したものを当該処理対象画素の画素値とする処理が挙げられる。このとき、処理対象画素のぼかし度合いに応じて平均化する範囲（平均を算出する近傍点の数）を変更することで、ぼかし画像Ｂのボケ（ぼかし）の大きさを調整する。
【００３６】
このように、ぼかし画像生成部６ｂは、差分生成部６ａにより生成された各画素の画素値の差分に基づいて、少なくとも二枚の連写画像Ｐ１、Ｐ２のうち、何れか一の画像に対してぼかし処理を施してぼかし画像Ｂを生成する画像生成手段を構成している。また、ぼかし度調整部６ｃは、差分生成部６ａにより生成された各画素の画素値の差分に基づいて、ぼかし処理のぼかし度合いを調整する調整手段を構成している。
【００３７】
表示制御部７は、メモリ４に一時的に記憶されている表示用の画像データを読み出して表示部８に表示させる制御を行う。
具体的には、表示制御部７は、ＶＲＡＭ、ＶＲＡＭコントローラ、デジタルビデオエンコーダなどを備えている。そして、デジタルビデオエンコーダは、中央制御部１１の制御下にてメモリ４から読み出されてＶＲＡＭ（図示略）に記憶されている輝度信号Ｙ及び色差信号Ｃｂ，Ｃｒを、ＶＲＡＭコントローラを介してＶＲＡＭから定期的に読み出して、これらのデータを元にビデオ信号を発生して表示部８に出力する。
【００３８】
表示部８は、例えば、液晶表示装置であり、表示制御部７からのビデオ信号に基づいて電子撮像部１ｃにより撮像された画像などを表示画面に表示する。具体的には、表示部８は、静止画撮像モードや動画撮像モードにて、撮像部１及び撮像制御部２による被写体の撮像により生成された複数の画像フレームを所定の表示フレームレートで逐次更新しながらライブビュー画像を表示する。また、表示部８は、静止画として記録される画像（レックビュー画像）を表示したり、動画として記録中の画像を表示する。
【００３９】
記録媒体９は、例えば、不揮発性メモリ（フラッシュメモリ）等により構成され、画像処理部６の符号化部（図示略）により所定の圧縮形式で符号化された記録用の静止画像データや複数の画像フレームからなる動画像データを記憶する。
【００４０】
操作入力部１０は、当該撮像装置１００の所定操作を行うためのものである。具体的には、操作入力部１０は、被写体の撮像指示に係るシャッタボタン、撮像モードや機能等の選択指示に係る選択決定ボタン、ズーム量の調整指示に係るズームボタン等を備え（いずれも図示略）、これらのボタンの操作に応じて所定の操作信号を中央制御部１１に出力する。
【００４１】
中央制御部１１は、撮像装置１００の各部を制御するものである。具体的には、中央制御部１１は、ＣＰＵ（図示略）を備え、撮像装置１００用の各種処理プログラム（図示略）に従って各種の制御動作を行う。
【００４２】
次に、撮像装置１００によるぼかし画像生成処理について、図２〜図４を参照して説明する。
図２は、ぼかし画像生成処理に係る動作の一例を示すフローチャートである。また、図３（ａ）〜図４（ｂ）は、ぼかし画像生成処理に係る画像の一例を模式的に示す図である。
【００４３】
ぼかし画像生成処理は、ユーザによる操作入力部１０の選択決定ボタンの所定操作に基づいて、メニュー画面に表示された複数の撮像モードの中から絞りブラケット撮像モードが選択指示された場合に実行される処理である。
図２に示すように、先ず、表示制御部７は、撮像部１による被写体の撮像により生成された複数の画像フレームに基づいてライブビュー画像を表示部８の表示画面に表示させる（ステップＳ１）。
【００４４】
次に、撮像制御部２の露出制御部２ａは、被写界深度が最も浅くなるように絞り値（AV値）を最も開放側に設定するとともに、露光時間（TV値）及びＩＳＯ感度（SV値）をAPEX値の一般式に従って決定した後、所定の制御信号を電子撮像部１ｃ及び絞り１ｂに出力する（ステップＳ２）。これにより、絞り１ｂは、最も開放した状態となる。
続けて、中央制御部１１は、ユーザによる操作入力部１０のシャッタボタンの所定操作に基づいて連写撮像指示が入力されたか否かを判定する（ステップＳ３）。ここで、連写撮像指示が入力されたと判定されると（ステップＳ３；ＹＥＳ）、撮像制御部２は、レンズ部１ａを主要被写体Ｓに合焦させ、一枚目の画像Ｐ１（図３（ａ）参照）の光学像を電子撮像部１ｃにより撮像させて、画像データ生成部３は、電子撮像部１ｃから転送された一枚目の画像Ｐ１のＹＵＶデータを生成する（ステップＳ４）。なお、当該一枚目の画像Ｐ１のＹＵＶデータは、メモリ４に一時記憶される。
【００４５】
次に、撮像制御部２の露出制御部２ａは、一枚目の画像Ｐ１の明るさから変化させず、且つ、当該一枚目の画像Ｐ１よりも被写界深度が深くなるように絞り値（AV値）を所定量（例えば、一段階）絞るとともに、露光時間（TV値）及びＩＳＯ感度（SV値）をAPEX値の一般式に従って決定した後、所定の制御信号を電子撮像部１ｃ及び絞り１ｂに出力する（ステップＳ５）。これにより、絞り１ｂは、所定量絞られた状態となる。
続けて、撮像制御部２は、一枚目の画像Ｐ１よりも被写界深度の深い二枚目の画像Ｐ２（図３（ｂ）参照）の光学像を所定の撮像条件で電子撮像部１ｃにより撮像させて、画像データ生成部３は、電子撮像部１ｃから転送された二枚目の画像Ｐ２のＹＵＶデータを生成する（ステップＳ６）。これにより、一枚目の画像Ｐ１と二枚目の画像Ｐ２が、略等しい画角で連続して撮像される。なお、当該二枚目の画像Ｐ２のＹＵＶデータは、メモリ４に一時記憶される。
【００４６】
次に、位置合わせ部５は、メモリ４に一時記憶されている一枚目の画像Ｐ１のＹＵＶデータを基準として、二枚目の画像Ｐ２のＹＵＶデータを射影変換させるための射影変換行列を所定の画像変換モデル（例えば、相似変換モデル、或いは合同変換モデル）で算出する（ステップＳ７）。
具体的には、位置合わせ部５の画像取得部５ａは、二枚の連写画像Ｐ１、Ｐ２のうち、一枚目の画像Ｐ１の輝度信号Ｙをメモリ４から取得する。次に、位置合わせ部５の特徴量演算部５ｂは、一枚目の画像Ｐ１の輝度信号に基づいて、所定数（或いは、所定数以上)の特徴の高いブロック（特徴点）を選択して、当該ブロックの内容をテンプレートとして抽出する。そして、位置合わせ部５のブロックマッチング部５ｃは、特徴抽出処理にて抽出されたテンプレートの画素値が最適にマッチする位置を二枚目の画像Ｐ２内にて探索して、画素値の相違度の評価値が最も良かった一枚目の画像Ｐ１と二枚目の画像Ｐ２間の最適なオフセットを当該テンプレートの動きベクトルとして算出する。そして、位置合わせ部５は、ブロックマッチング部５ｃにより算出された複数のテンプレートの動きベクトルに基づいて全体の動きベクトルを統計的に算出し、当該動きベクトルに係る特徴点対応を用いて二枚目の画像Ｐ２の射影変換行列を算出する。
【００４７】
次に、位置合わせ部５は、算出された射影変換行例に基づいて二枚目の画像Ｐ２を射影変換させることで、一枚目の画像Ｐ１のＹＵＶデータと二枚目の画像Ｐ２のＹＵＶデータとを位置合わせする処理を行う（ステップＳ８）。
【００４８】
そして、画像処理部６の差分生成部６ａは、位置合わせ部５により座標変換された二枚目の画像Ｐ２のＹＵＶデータと一枚目の画像Ｐ１のＹＵＶデータの間で対応する各画素の画素値の差分を算出する（ステップＳ９）。続けて、差分生成部６ａは、各画素の画素値の差分が所定の閾値以上となる画素を特定して、当該差分が所定の閾値以上となる画素からなる領域を一枚目の画像Ｐ１におけるボケ領域（非合焦領域Ｎ１）として、当該非合焦領域Ｎ１の各画素の画素値の差分を記録したボケデータマップＭ（図４（ａ）参照）を生成する（ステップＳ１０）。
【００４９】
次に、画像処理部６のぼかし画像生成部６ｂは、ボケデータマップＭの各画素の差分に所定の係数を乗算することで、一枚目の画像Ｐ１における主要被写体Ｓ以外の領域Ｎ２の各画素毎のぼかし度合い（ボケ量）を調整して付加ボケデータマップを生成する（ステップＳ１１）。
続けて、ぼかし画像生成部６ｂは、付加ボケデータマップの各画素毎のぼかし度合いに応じて、一枚目の画像Ｐ１の主要被写体Ｓ以外の領域Ｎ２に対してぼかし処理を施すことでぼかし画像ＢのＹＵＶデータを生成する（ステップＳ１２）。
【００５０】
その後、中央制御部１１は、記録媒体９の所定の記憶領域に、ぼかし画像生成部６ｂにより生成されたぼかし画像ＢのＹＵＶデータを記憶させる（ステップＳ１３）。
これにより、ぼかし画像生成処理を終了する。
【００５１】
以上のように、本実施形態の撮像装置１００によれば、略等しい画角で連続して撮像された被写界深度の異なる二枚の連写画像Ｐ１、Ｐ２の間で対応する各画素の画素値の差分を生成し、当該各画素の画素値の差分に基づいて、被写界深度のより浅い方の一枚目の画像Ｐ１に対してぼかし処理を施すことにより、例えば、電子撮像部１ｃに搭載されたイメージセンサが小さかったり、画像の周辺部が光量落ちするために絞り１ｂを大きく開放できなかったり、ズームレンズを搭載していない構成の撮像装置であっても、主要被写体Ｓ以外の領域Ｎ２を一枚目の画像Ｐ１の非合焦領域Ｎ１のボケよりも大きくぼかした画像Ｂを適正に生成することができる。
即ち、絞りブラケット撮像にて、画像の明るさを略等しくするとともに絞り値を互いに異ならせて撮像することで被写界深度の異なる二枚の連写画像Ｐ１、Ｐ２を取得し、これら二枚の連写画像Ｐ１、Ｐ２の間で対応する各画素の画素値の差分に基づいて、被写界深度のより浅い方の一枚目の画像Ｐ１における主要被写体Ｓ以外を主として含む非合焦領域Ｎ１を特定し、当該非合焦領域Ｎ１に対してぼかし処理を施すことで、主要被写体Ｓ以外の領域Ｎ２をぼかした画像Ｂの生成を適正に行うことができる。
また、二枚の連写画像Ｐ１、Ｐ２は、絞り値が互いに異なるだけなので、従来のフォーカスブラケット撮影を利用したボケ画像の生成のように、主要被写体Ｓとその背景のバランスにずれが生じることがなくなり、複数の撮像画像間で対応する画素が存在しない座標が発生してしまうといった問題も生じることがない。
【００５２】
また、二枚の連写画像Ｐ１、Ｐ２の間で対応する各画素の画素値の差分に基づいて、一枚目の画像Ｐ１に対するぼかし処理のぼかし度合いを調整することで、主要被写体Ｓの種類やユーザの好み等に応じて主要被写体Ｓ以外の領域Ｎ２に所定量のボケを付与することができ、より興趣性の高いぼかし画像Ｂを生成することができる。
【００５３】
さらに、二枚の連写画像Ｐ１、Ｐ２どうしの位置合わせを行って、これら連写画像Ｐ１、Ｐ２の間で対応する各画素の画素値の差分を生成するので、従来のように複数の撮像画像間で対応する画素が存在しない座標を生じさせることなく、二枚の連写画像Ｐ１、Ｐ２の間で対応する各画素の画素値の差分の生成を適正に行うことができる。
【００５４】
なお、本発明は、上記実施形態に限定されることなく、本発明の趣旨を逸脱しない範囲において、種々の改良並びに設計の変更を行っても良い。
以下に、撮像装置１００の変形例について説明する。
【００５５】
＜変形例１＞
変形例１の撮像装置１００は、二枚の連写画像Ｐ１、Ｐ２の間で対応する各画素の周波数特性の差分に基づいて、当該差分が大きくなるほど遮断周波数がより小さくなるようにローパスフィルタを設定し、当該ローパスフィルタを用いてぼかし処理を施す。
なお、変形例１の撮像装置１００にあっては、ローパスフィルタを用いたぼかし処理以外は略同様であり、その詳細な説明は省略する。
【００５６】
図５は、変形例１の撮像装置１００の概略構成を示すブロック図である。
図５に示すように、画像処理部６は、二枚の連写画像Ｐ１、Ｐ２の各画素の周波数特性を取得する周波数特性取得部６ｄを具備している。
周波数特性取得部６ｄは、情報取得手段として、少なくとも二枚の連写画像Ｐ１、Ｐ２の各々について、各画素の周波数特性（周波数成分情報）を算出して取得する。
そして、画像処理部６の差分生成部６ａは、周波数特性取得部６ｄにより取得された二枚の連写画像Ｐ１、Ｐ２の間で対応する各画素の周波数特性どうしの差分を算出する。そして、差分生成部６ａは、これら二枚の連写画像Ｐ１、Ｐ２のＹＵＶデータどうしで対応する各画素の周波数特性の差分が所定の閾値よりも小さい画素からなる領域を主要被写体Ｓ部分として除き、所定の閾値以上となる画素からなる領域を一枚目の画像Ｐ１におけるボケ領域（非合焦領域Ｎ１）として、当該非合焦領域Ｎ１の各画素の周波数特性の差分を記録したボケデータマップＭを生成する。
【００５７】
ぼかし画像生成部６ｂのぼかし度調整部６ｃは、差分生成部６ａにより生成されたボケデータマップＭの各画素の周波数特性の差分に基づいて、所定の遮断周波数のローパスフィルタを各画素毎に設定することでぼかし処理のぼかし度合いを調整する。具体的には、ぼかし度調整部６ｃは、処理対象画素の周波数特性の差分が大きくなるほど遮断周波数がより小さくなるように各画素毎にローパスフィルタを設定する。
そして、ぼかし画像生成部６ｂは、ぼかし度調整部６ｃにより設定された所定のローパスフィルタを用いて、一枚目の画像Ｐ１の非合焦領域Ｎ１（主要被写体Ｓ以外の領域Ｎ２）の各画素に対してフィルタリング処理を行うことで、遮断周波数よりも高い高周波成分を除去するぼかし処理を施す。
ここで、ぼかし度調整部６ｃは、差分生成部６ａにより生成された二枚の連写画像Ｐ１、Ｐ２の各画素の周波数特性の差分に基づいて、当該差分が大きくなるほど遮断周波数がより小さくなるようにローパスフィルタを設定する設定手段を構成している。
【００５８】
次に、変形例１の撮像装置１００によるぼかし画像生成処理について、図６を参照して説明する。
図６は、ぼかし画像生成処理に係る動作の一例を示すフローチャートである。
以下に説明するぼかし画像生成処理にあっては、ローパスフィルタを用いたぼかし処理以外は、上記実施形態のぼかし画像生成処理と略同様であり、その詳細な説明は省略する。
【００５９】
図６に示すように、先ず、上記実施形態と略同様に、表示制御部７は、ライブビュー画像を表示部８の表示画面に表示させる（ステップＳ１）。
次に、上記実施形態と略同様に、露出制御部２ａは、被写界深度が最も浅くなるように絞り値（AV値）を最も開放側に設定するとともに、露光時間（TV値）及びＩＳＯ感度（SV値）をAPEX値の一般式に従って決定する（ステップＳ２）。
【００６０】
続けて、上記実施形態と略同様に、中央制御部１１は、連写撮像指示が入力されたか否かを判定する（ステップＳ３）。ここで、連写撮像指示が入力されたと判定されると（ステップＳ３；ＹＥＳ）、撮像制御部２は、一枚目の画像Ｐ１（図３（ａ）参照）の光学像を所定の撮像条件で電子撮像部１ｃにより撮像させる（ステップＳ４）。
【００６１】
次に、上記実施形態と略同様に、撮像制御部２の露出制御部２ａは、一枚目の画像Ｐ１の明るさから変化させず、且つ、当該一枚目の画像Ｐ１よりも被写界深度が深くなるように絞り値（AV値）を所定量（例えば、一段階）絞るとともに、露光時間（TV値）及びＩＳＯ感度（SV値）をAPEX値の一般式に従って決定する（ステップＳ５）。
続けて、上記実施形態と略同様に、撮像制御部２は、一枚目の画像Ｐ１よりも被写界深度の深い二枚目の画像Ｐ２（図３（ｂ）参照）の光学像を所定の撮像条件で電子撮像部１ｃにより撮像させる（ステップＳ６）。
【００６２】
次に、上記実施形態と略同様に、位置合わせ部５は、メモリ４に一時記憶されている一枚目の画像Ｐ１のＹＵＶデータを基準として、二枚目の画像Ｐ２のＹＵＶデータを射影変換させるための射影変換行列を所定の画像変換モデルで算出する（ステップＳ７）。その後、上記実施形態と略同様に、位置合わせ部５は、算出された射影変換行例に基づいて二枚目の画像Ｐ２を射影変換させることで、一枚目の画像Ｐ１のＹＵＶデータと二枚目の画像Ｐ２のＹＵＶデータとを位置合わせする処理を行う（ステップＳ８）。
【００６３】
次に、画像処理部６の周波数特性取得部６ｄは、二枚の連写画像Ｐ１、Ｐ２の各々について、各画素の周波数特性を算出して取得する（ステップＳ２１）。
その後、画像処理部６の差分生成部６ａは、位置合わせ部５により座標変換された二枚目の画像Ｐ２のＹＵＶデータと一枚目の画像Ｐ１のＹＵＶデータの間で対応する各画素の周波数特性どうしの差分を算出する（ステップＳ２２）。続けて、差分生成部６ａは、各画素の周波数特性の差分が所定の閾値以上となる画素を特定して、当該差分が所定の閾値以上となる画素からなる領域を一枚目の画像Ｐ１におけるボケ領域（非合焦領域Ｎ１）として、当該非合焦領域Ｎ１の各画素の周波数特性の差分を記録したボケデータマップＭ（図４（ａ）参照）を生成する（ステップＳ２３）。
【００６４】
次に、ぼかし画像生成部６ｂのぼかし度調整部６ｃは、ボケデータマップＭの各画素の周波数特性の差分に応じて所定の遮断周波数のローパスフィルタを各画素毎に設定することでぼかし処理のぼかし度合いを調整する（ステップＳ２４）。
そして、ぼかし画像生成部６ｂは、ぼかし度調整部６ｃにより設定された所定のローパスフィルタを用いて、一枚目の画像Ｐ１の非合焦領域Ｎ１（主要被写体Ｓ以外の領域Ｎ２）の各画素に対してフィルタリング処理を行うことで、遮断周波数よりも高い高周波成分を除去するぼかし処理を施して、ぼかし画像ＢのＹＵＶデータを生成する（ステップＳ２５）。
【００６５】
その後、上記実施形態と略同様に、中央制御部１１は、記録媒体９の所定の記憶領域に、ぼかし画像生成部６ｂにより生成されたぼかし画像ＢのＹＵＶデータを記憶させる（ステップＳ１３）。
これにより、ぼかし画像生成処理を終了する。
【００６６】
従って、変形例１の撮像装置１００によれば、二枚の連写画像Ｐ１、Ｐ２どうしの間で対応する各画素の周波数特性の差分に基づいて、当該差分が大きくなるほど遮断周波数がより小さくなるようにローパスフィルタを設定して、一枚目の画像Ｐ１の非合焦領域Ｎ１に対してぼかし処理を施すことで、連写画像Ｐ１、Ｐ２の各画素の周波数特性を考慮したぼかし処理を施すことができ、主要被写体Ｓ以外の領域Ｎ２をぼかした画像Ｂの生成を適正に行うことができる。
【００６７】
また、上記実施形態にあっては、ぼかし処理の対象画像として、一枚目の画像Ｐ１を例示したが、これに限られるものではなく、二枚目の画像Ｐ２、即ち、二枚の画像Ｐ１、Ｐ２のうちの被写界深度のより深い方の画像であっても良い。つまり、連写画像Ｐ１、Ｐ２の各画素の画素値の差分に基づいて、二枚目の画像Ｐ２における主要被写体Ｓ以外を主として含む非合焦領域Ｎ１を特定してぼかし処理を施しても良い。
例えば、二枚目の画像Ｐ２とボケデータマップＭを保存しておき、二枚目の画像Ｐ２における主要被写体Ｓ以外を主として含む非合焦領域Ｎ１を特定してぼかし処理を施すことで、二枚目の画像Ｐ２と同程度の被写界深度の深い状態から、一枚目の画像Ｐ１と同程度の被写界深度の浅い状態、更にはそれを越えたボケ状態まで、任意の程度の背景ボケを撮像終了後に生成することができる。
【００６８】
また、絞りブラケット撮像における画像の連続撮像枚数を二枚としたが、これに限られるものではなく、例えば、三枚以上であっても良い。
このとき、差分生成部６ａが、被写界深度が互いに異なる三枚以上の連写画像のうち、連写順が連続する画像どうしの間で対応する各画素の画素値の差分をそれぞれ生成して、ぼかし度調整部６ｃが、三枚以上の連写画像についての対応する各画素どうしの画素値の差分の変化に基づいて、ぼかし処理のぼかし度合いを調整するようにしても良い。
即ち、連写画像は、連写枚数が増加するに従って被写界深度が次第に深くなっていくことから、被写界深度の最も浅い一枚目の画像Ｐ１にてボケの小さい領域は被写界深度を少し深くするだけで二枚目や三枚目の画像でピントが合うことになる。一方、一枚目の画像Ｐ１にてボケの大きい領域は、連写枚数をより多くして被写界深度をより深くしないとピントが合わない。
そして、一枚目の画像Ｐ１にてぼけている領域（非合焦領域Ｎ１）であっても、一旦ピントが合った後は、連写枚数が増加するに従って被写界深度がより深くなり、今後ピントが外れることはないため、連写順が連続する画像どうしの間で対応する画素の画素値の差分の変化は小さくなる。つまり、画素値の差分の変化が小さくなるまでに必要な連写枚数は、一枚目の画像Ｐ１にてボケのより小さい領域ほど少なく、一枚目の画像Ｐ１にてボケのより大きい領域ほど多くなる。
【００６９】
従って、連写枚数の増加に応じた各画素どうしの画素値の差分の変化に基づいて、一枚目の画像Ｐ１の非合焦領域Ｎ１におけるボケの大きさを特定することができ、当該ボケの大きさに応じてぼかし処理のぼかし度合いを調整することで、一枚目の画像Ｐ１における非合焦領域Ｎ１のボケを考慮して当該非合焦領域Ｎ１（主要被写体Ｓ以外の領域Ｎ２）をより自然にぼかしたぼかし画像Ｂを適正に生成することができる。
なお、ぼかし処理のぼかし度合いの調整は、三枚以上の連写画像間で対応する各画素の画素値の差分の変化に基づいて行うのではなく、当該連写画像間で対応する各画素の画素値の変化に基づいて行っても良い。
【００７０】
なお、上記実施形態にあっては、露出制御部２ａは、一枚目の画像Ｐ１（図３（ａ）参照）の被写界深度が最も浅くなるように絞り値（AV値）を最も開放側に設定し、二枚目以降の画像（図３（ｂ）参照）の連写が進むにつれて被写界深度が次第に深くなるように絞り値（AV値）を次第に絞っていくようにしたが、これに限られるものではない。例えば、露出制御部２ａは、一枚目の画像Ｐ１の被写界深度が最も深くなるように絞り値（AV値）を設定し、二枚目以降の画像の連写が進むにつれて被写界深度が次第に浅くなるように絞り値（AV値）を次第に開放していくようにしても良い。
【００７１】
また、二枚の連写画像Ｐ１、Ｐ２の撮像にて、画像の明るさを略等しくするとともに絞り値を互いに異ならせるようにしたが、これらの画像Ｐ１、Ｐ２の被写界深度を異ならせるために少なくとも絞り値を異ならせるようにすれば良く、必ずしも明るさを略等しくする必要はない。
即ち、絞り値を絞る方向に変化させ、且つ、連写画像Ｐ１、Ｐ２の明るさを所定の値に固定しようとすると、露光時間を長くするか、或いはＩＳＯ感度を上げる必要があるが、露光時間を長くすると、手ぶれが生じ易くなってしまい、また、ＩＳＯ感度を上げると、ノイズ量が増加してしまう虞がある。そこで、例えば、晴天の下で撮像する場合のように十分に明るい環境下では、絞り値を絞る方向に変化させても露光時間やＩＳＯ感度を変化させないようにしても良い。
【００７２】
さらに、上記実施形態にあっては、撮像装置１００から主要被写体Ｓまでの距離を測距して、当該距離に応じてぼかし度合いを調整しても良い。即ち、主要被写体Ｓに合焦した状態で、フォーカスレンズの光軸方向の位置から主要被写体Ｓまでの距離を所定の換算手段（例えば、換算プログラムや換算テーブル等）を用いて算出して被写体距離情報を取得する。そして、当該被写体距離が近い程、主要被写体Ｓ以外の領域Ｎ２（非合焦領域Ｎ１）のぼかし度合いをより大きくするように調整することで、主要被写体Ｓ以外の領域Ｎ２をより自然にぼかしたぼかし画像Ｂを適正に生成することができる。
【００７３】
また、上記実施形態にあっては、二枚の連写画像Ｐ１、Ｐ２どうしの位置合わせを行うようにしたが、これら画像どうしＰ１、Ｐ２の位置合わせを行うか否かは適宜任意に変更することができる。即ち、例えば、三脚等を用いて撮像装置１００を所定位置に固定した状態で撮像した場合のように二枚の連写画像Ｐ１、Ｐ２にぶれがほぼ生じない場合には、必ずしもこれら連写画像Ｐ１、Ｐ２の位置合わせを行う必要はない。
【００７４】
さらに、上記実施形態にあっては、二枚の連写画像Ｐ１、Ｐ２を処理対象としたが、これに限られるものではなく、少なくとも略等しい画角で撮像された被写界深度の異なる画像であれば、一枚目の画像Ｐ１と三枚目以降の画像とを処理対象としても良い。
【００７５】
また、撮像装置１００の構成は、上記実施形態に例示したものは一例であり、これに限られるものではない。
さらに、連写画像Ｐ１、Ｐ２の撮像は、当該撮像装置１００とは異なる撮像装置にて行い、この撮像装置から転送された処理対象画像の画像データを取得して、ぼかし画像Ｂの生成を行う構成の画像処理装置（撮像装置１００）であっても良い。
【００７６】
加えて、上記実施形態にあっては、取得手段、差分生成手段、画像生成手段としての機能を、位置合わせ部５の画像取得部５ａ、画像処理部６の差分生成部６ａ、ぼかし画像生成部６ｂが駆動することにより実現される構成としたが、これに限られるものではなく、中央制御部１１のＣＰＵによって所定のプログラム等が実行されることにより実現される構成としても良い。
即ち、プログラムを記憶するプログラムメモリ（図示略）に、取得処理ルーチン、差分生成処理ルーチン、画像生成処理ルーチンを含むプログラムを記憶しておく。そして、取得処理ルーチンにより中央制御部１１のＣＰＵを、略等しい画角で撮像された被写界深度の異なる少なくとも二つの画像Ｐ１、Ｐ２を取得する取得手段として機能させるようにしても良い。また、差分生成処理ルーチンにより中央制御部１１のＣＰＵを、取得手段により取得された少なくとも二つの画像Ｐ１、Ｐ２の間で対応する各画素の差分を生成する差分生成手段として機能させるようにしても良い。また、画像生成処理ルーチンにより中央制御部１１のＣＰＵを、差分生成手段により生成された各画素の差分に基づいて、少なくとも二つの画像Ｐ１、Ｐ２のうち、何れか一の画像に対してぼかし処理を施してぼかし画像Ｂを生成する画像生成手段として機能させるようにしても良い。
【符号の説明】
【００７７】
１００  撮像装置
１      撮像部
２      撮像制御部
５      位置合わせ部
５ａ    画像取得部
６      画像処理部
６ａ    差分生成部
６ｂ    ぼかし画像生成部
６ｃ    ぼかし度調整部
６ｄ    周波数特性取得部
１１    中央制御部
【図１】
2011066827.tif 000003
【図２】
2011066827.tif 000004
【図５】
2011066827.tif 000005
【図６】
2011066827.tif 000006
【図３】
2011066827.tif 000007
【図４】
2011066827.tif 000008