(57)【特許請求の範囲】
【請求項１】
被写体像を撮影し、画像信号を出力する撮像素子と、
前記撮影された画像から主要被写体領域を抽出する主要被写体領域抽出手段と、
設定されている撮影シーンモードに応じて、照明装置を発光させて撮影された画像と前記照明装置を発光させないで撮影された画像とを用いて前記主要被写体領域を抽出する二画像参照方法を含む複数の異なる抽出方法の中から選択した方法で撮影シーンに適した領域抽出を行うように前記主要被写体領域抽出手段を制御する制御手段とを備え、
前記制御手段は、被写体を照明する照明装置に非発光を指示する撮影シーンモードが設定されている場合、前記二画像参照方法を除く他の抽出方法を選択するように前記主要被写体領域抽出手段を制御することを特徴とする撮像装置。
【請求項２】
請求項１に記載の撮像装置において、
前記複数の異なる抽出方法には、異なる撮影条件で撮影されたに画像を用いて前記主要被写体領域を抽出する二画像参照方法、撮影画像の空間周波数を分析することによって前記主要被写体領域を抽出する方法、及び撮影画像から検出される稜線情報を用いて前記主要被写体領域を抽出する稜線情報参照方法を含むことを特徴とする撮像装置。
【請求項３】
被写体像を撮影し、画像信号を出力する撮像素子と、
前記撮影された画像から主要被写体領域を抽出する主要被写体領域抽出手段と、
撮影環境に応じて、照明装置を発光させて撮影された画像と前記照明装置を発光させないで撮影された画像とを用いて前記主要被写体領域を抽出する二画像参照方法を含む複数の異なる抽出方法の中から選択した方法で撮影シーンに適した領域抽出を行うように前記主要被写体領域抽出手段を制御する制御手段とを備え、
前記制御手段は、測光値が所定値以上の場合、前記二画像参照方法を除く他の抽出方法を選択するように前記主要被写体領域抽出手段を制御することを特徴とする撮像装置。
【請求項４】
請求項３に記載の撮像装置において、
前記複数の異なる抽出方法には、異なる撮影条件で撮影されたに画像を用いて前記主要被写体領域を抽出する二画像参照方法、撮影画像の空間周波数を分析することによって前記主要被写体領域を抽出する方法、及び撮影画像から検出される稜線情報を用いて前記主要被写体領域を抽出する稜線情報参照方法を含むことを特徴とする撮像装置。
【請求項５】
被写体像を撮影し、画像信号を出力する撮像素子と、
前記撮影された画像から主要被写体領域を抽出する主要被写体領域抽出手段と、
設定されている撮影シーンモードに応じて、異なる撮影条件で撮影された二画像を用いて前記主要被写体領域を抽出する二画像参照方法を含む複数の異なる抽出方法の中から選択した方法で撮影シーンに適した領域抽出を行うように前記主要被写体領域抽出手段を制御する制御手段とを備え、
前記制御手段は、動きのある被写体を撮影する撮影シーンモードが設定されているとき、前記二画像参照方法を除く他の抽出方法を選択するように前記主要被写体領域抽出手段を制御することを特徴とする撮像装置。
【請求項６】
請求項５に記載の撮像装置において、
前記複数の異なる抽出方法には、異なる撮影条件で撮影されたに画像を用いて前記主要被写体領域を抽出する二画像参照方法、撮影画像の空間周波数を分析することによって前記主要被写体領域を抽出する方法、及び撮影画像から検出される稜線情報を用いて前記主要被写体領域を抽出する稜線情報参照方法を含むことを特徴とする撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影した電子画像から主要被写体を抽出する撮像装置に関する。
【背景技術】
【０００２】
３５mm版カメラに比べて撮像面積が小さい電子カメラが普及している。このタイプのカメラは実焦点距離が短いため、３５mm版カメラの場合と同じＦ値（光学絞り値）の撮影レンズを用いても、３５mm版カメラのように背景をぼかした撮影画像が得られにくい。特許文献１には、画像処理によって画像にぼかしを付加する技術が開示されている。
【０００３】
【特許文献１】特開２００３−１２５２８１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
特許文献１によれば、画像ぼけを付加する領域（すなわち、主要被写体と異なる背景領域）を使用者が指定する必要があるので、撮影時に手間がかかる。このため、撮像装置が主要被写体領域（もしくは背景領域）を自動的に抽出する技術が望まれる。
【課題を解決するための手段】
【０００５】
請求項１に記載の発明による撮像装置は、被写体像を撮影し、画像信号を出力する撮像素子と、前記撮影された画像から主要被写体領域を抽出する主要被写体領域抽出手段と、設定されている撮影シーンモードに応じて、照明装置を発光させて撮影された画像と前記照明装置を発光させないで撮影された画像とを用いて前記主要被写体領域を抽出する二画像参照方法を含む複数の異なる抽出方法の中から選択した方法で撮影シーンに適した領域抽出を行うように前記主要被写体領域抽出手段を制御する制御手段とを備え、前記制御手段は、被写体を照明する照明装置に非発光を指示する撮影シーンモードが設定されている場合、前記二画像参照方法を除く他の抽出方法を選択するように前記主要被写体領域抽出手段を制御することを特徴とする。
請求項２に記載の発明による撮像装置は、請求項１に記載の撮像装置において、前記複数の異なる抽出方法には、異なる撮影条件で撮影されたに画像を用いて前記主要被写体領域を抽出する二画像参照方法、撮影画像の空間周波数を分析することによって前記主要被写体領域を抽出する方法、及び撮影画像から検出される稜線情報を用いて前記主要被写体領域を抽出する稜線情報参照方法を含むことを特徴とする。
請求項３に記載の発明による撮像装置は、被写体像を撮影し、画像信号を出力する撮像素子と、前記撮影された画像から主要被写体領域を抽出する主要被写体領域抽出手段と、撮影環境に応じて、照明装置を発光させて撮影された画像と前記照明装置を発光させないで撮影された画像とを用いて前記主要被写体領域を抽出する二画像参照方法を含む複数の異なる抽出方法の中から選択した方法で撮影シーンに適した領域抽出を行うように前記主要被写体領域抽出手段を制御する制御手段とを備え、前記制御手段は、測光値が所定値以上の場合、前記二画像参照方法を除く他の抽出方法を選択するように前記主要被写体領域抽出手段を制御することを特徴とする。
請求項４に記載の発明による撮像装置は、請求項３に記載の撮像装置において、前記複数の異なる抽出方法には、異なる撮影条件で撮影されたに画像を用いて前記主要被写体領域を抽出する二画像参照方法、撮影画像の空間周波数を分析することによって前記主要被写体領域を抽出する方法、及び撮影画像から検出される稜線情報を用いて前記主要被写体領域を抽出する稜線情報参照方法を含むことを特徴とする。
請求項５に記載の発明による撮像装置は、被写体像を撮影し、画像信号を出力する撮像素子と、前記撮影された画像から主要被写体領域を抽出する主要被写体領域抽出手段と、設定されている撮影シーンモードに応じて、異なる撮影条件で撮影された二画像を用いて前記主要被写体領域を抽出する二画像参照方法を含む複数の異なる抽出方法の中から選択した方法で撮影シーンに適した領域抽出を行うように前記主要被写体領域抽出手段を制御する制御手段とを備え、前記制御手段は、動きのある被写体を撮影する撮影シーンモードが設定されているとき、前記二画像参照方法を除く他の抽出方法を選択するように前記主要被写体領域抽出手段を制御することを特徴とする。
請求項６に記載の発明による撮像装置は、請求項５に記載の撮像装置において、前記複数の異なる抽出方法には、異なる撮影条件で撮影されたに画像を用いて前記主要被写体領域を抽出する二画像参照方法、撮影画像の空間周波数を分析することによって前記主要被写体領域を抽出する方法、及び撮影画像から検出される稜線情報を用いて前記主要被写体領域を抽出する稜線情報参照方法を含むことを特徴とする。
【発明の効果】
【０００６】
本発明によれば、主要被写体領域を適切に抽出する撮像装置を提供できる。
【発明を実施するための最良の形態】
【０００７】
以下、図面を参照して本発明を実施するための最良の形態について説明する。
図１は、本発明の一実施形態による撮像装置の一例を示すブロックダイアグラムである。図１において、撮像装置は、撮像素子１と、撮影レンズ２と、レンズ駆動回路３と、制御回路５と、操作部材７と、撮像素子駆動回路８と、信号処理回路９と、データ処理回路１０と、圧縮／伸張回路１１と、モニタ１３と、表示制御回路１４と、測光回路１５と、照明装置２０とを有し、着脱可能な記録媒体１２が装着されている。記録媒体１２は、メモリカードなどで構成される。
【０００８】
撮影レンズ２は撮影光学系を構成する複数枚数のレンズ群で構成され、撮像素子１の撮像面上に被写体像を結像させる。撮影レンズ２は不図示のフォーカスレンズを含み、レンズ駆動回路３がフォーカスレンズを光軸方向に進退駆動することにより、撮影レンズ２のフォーカス調節が行われる。また、撮影レンズ２は不図示のズームレンズを含み、レンズ駆動回路３がズームレンズを光軸方向に進退駆動することにより、撮影レンズ２のズーム調節が行われる。レンズ駆動回路３は、制御回路５から出力されるレンズ駆動指令に応じてレンズ駆動信号を発生し、発生したレンズ駆動信号で不図示のレンズ駆動機構を駆動することにより、各レンズを移動させる。
【０００９】
撮像素子１は、静止画像の単写撮像とともに、静止画像の連続撮像、および動画像の撮像が可能である。撮像素子１は、例えばCCD撮像素子あるいはCMOS型撮像素子などによって構成される。
【００１０】
撮像素子駆動回路８は、制御回路５から出力される指令に応じて所定タイミングの駆動信号を発生し、発生した駆動信号を撮像素子１へ供給する。撮像素子１は、供給された駆動信号によって電荷蓄積（撮像）や蓄積電荷の読み出しが制御される。制御回路５は、測光回路１５による被写体の測光データを用いて明るさ情報を求め、明るさ情報に基づいて撮像素子１の電荷蓄積時間などを決定する。
【００１１】
撮像素子１から読み出された画像信号は、信号処理回路９へ入力される。信号処理回路９は、制御回路５からの指令に応じて入力信号に対する増幅、直流再生、A/D変換、ホワイトバランス、およびガンマ変換等の信号処理を施し、信号処理後のデータを画像データとしてデータ処理回路１０へ出力する。
【００１２】
データ処理回路１０は、制御回路５からの指令に応じて、モニタ１３に再生画像を表示させるために必要な解像度変換（画素数変換）処理を画像データに施し、解像度変換処理後の画像データを圧縮/伸張回路１１および表示制御回路１４へそれぞれ出力する。
【００１３】
表示制御回路１４は、制御回路５からの指令に応じて、データ処理回路１０から入力される画像データに所定の信号処理を施してモニタ１３へ出力する。表示制御回路１４はさらに、上記画像データに撮影メニュー、カーソルなどのオーバーレイ画像データを重畳する処理を行う。これにより、オーバーレイ画像が重畳された被写体画像がモニタ１３に表示される。
【００１４】
圧縮/伸張回路１１は、制御回路５からの指令に応じて、データ処理回路１０から入力される画像データに所定の形式で圧縮処理を施し、圧縮後のデータを記録媒体１２へ記録する。撮影時に記録媒体１２へ画像データを記録する場合、記録する画像データに対応する再生画像がモニタ１３に表示される。
【００１５】
なお、記録媒体１２に記録されている画像データによる再生画像をモニタ１３に表示することも可能に構成される。この場合の圧縮/伸張回路１１は、制御回路５からの指令に応じて記録媒体１２に記録されている画像データを読み出し、読み出しデータに対して復号化（伸張）処理を施した上で復号化後のデータをデータ処理回路１０へ送る。再生時にデータ処理回路１０が復号化データに解像度変換処理を施して表示制御回路１４へ出力することにより、再生画像がモニタ１３に表示される。
【００１６】
照明装置２０は、撮影時に制御回路５からの発光指示に応じて指示された光量で発光し、主要被写体を照明する。撮像装置は、照明装置２０の発光を禁止する設定が行われている場合、撮影シーンモードがミュージアムモードに設定されている場合、および照明装置２０の発光が禁止されていない状態で測光値（測光回路１５による測光データから得られる明るさ情報）が所定値以上の場合のいずれかに該当する場合は、撮影時に照明装置２０を発光させない。撮像装置は、上記いずれにも該当しない場合は、撮影時に照明装置２０を発光させる。ここで、ミュージアムモードは照明発光が禁じられた室内での撮影に適した撮影シーンモードである。照明装置２０に対して発光を指示する／しないの判定は制御回路５が行う。
【００１７】
操作部材７はレリーズ釦や撮影シーンモード設定ダイアルなどを含み、操作内容に応じた操作信号を制御回路５へ出力する。制御回路５は、レリーズ釦の押下操作に基づくレリーズ操作信号が操作部材７から入力されると、撮像素子１から読み出される画像信号の中で、撮像画面内にあらかじめ設定されているフォーカス検出領域に対応する信号を用いて周知のコントラスト方式のＡＦ（オートフォーカス）動作を行う。
【００１８】
具体的には、信号処理回路９によって信号処理された画像データのうち、フォーカス検出領域に対応するデータについての高域空間周波数成分の積算値（いわゆる焦点評価値）を最大にするように、レンズ駆動指令（フォーカス調節信号）をレンズ駆動回路３へ送る。焦点評価値を最大にするフォーカスレンズの位置は、撮像素子１によって撮像される被写体像のエッジのぼけをなくし、画像のコントラストを最大にする（尖鋭度を高める）合焦位置である。
【００１９】
本実施の形態では、撮像レンズ２内のフォーカスレンズを移動しながら順次得られる画像データ（映像信号）を撮影画面内の複数のフォーカス検出領域ごとに解析し、各領域に対応する画像のコントラスト値を最大にするフォーカスレンズ位置をもとに、各領域に位置する被写体の(相対的な)撮影距離を取得可能に構成されている。
【００２０】
なお、上記コントラスト方式のＡＦ動作に加えて、公知の瞳分割方式による位相差ＡＦ動作を行うように構成してもよい。この場合にも、各領域に位置する被写体の撮影距離を得ることができる。
【００２１】
操作部材７はズーム操作部材も含む。制御回路５は、ズーム操作に基づくズーム操作信号が操作部材７から入力されると上述したレンズ駆動指令を発生し、レンズ駆動回路３にズームレンズを進退駆動させる。これにより、撮像素子１の撮像面上に結像される被写体像が拡大もしくは縮小し、光学的にズーム調節される。
【００２２】
制御回路５はさらに、ズーム操作に基づくズーム操作信号が操作部材７から入力されるとデータ処理回路１０へ指令を出力し、画像信号に対する解像度変換（画素数変換）処理の変換比率を操作信号に応じて変化させる。これにより、モニタ１３に再生表示される画像が拡大もしくは縮小し、電気的にズーム調節される（電子ズーム）。解像度変換比率は電子ズーム倍率に対応する。データ処理回路１０が電子ズーム倍率を高める方向に変換比率を変える場合、再生画像の一部が拡大されてモニタ１３に表示される（拡大率が上がる反面、再生画像の表示範囲は狭くなる）。反対に、データ処理回路１０が電子ズーム倍率を低くする方向に変換比率を変える場合、モニタ１３に表示される再生画像の拡大率が下がる反面、再生画像の表示範囲は広くなる。
【００２３】
撮像装置が行うスルー画撮影動作と静止画本撮影動作について説明する。スルー画撮影は、本撮影の前段階として行われる予備撮影であり、本撮影は、レリーズ全押し操作信号（撮影指示）に応じて行われる撮影である。
【００２４】
＜スルー画撮影動作＞
本実施形態の撮像装置は、操作部材７からレリーズ釦の半押し操作に基づく半押し操作信号が制御回路５へ入力されると、上述したＡＦ動作とスルー画撮影動作を開始する。スルー画撮影動作は、半押し操作信号の入力が継続されている間に所定のフレームレートで繰り返し行われる。
【００２５】
制御回路５は、操作部材７からの半押し操作信号を検出すると撮像素子駆動回路８へ指示を送り、スルー画撮影動作を実行するための駆動信号を出力させる。撮像素子１は、スルー画撮影動作のための駆動信号を受けて、例えば、３０フレーム/秒の高フレームレートで蓄積電荷を連続的に出力する。スルー画撮影用の露出条件は測光回路１５による測光データに基づいて決定される。信号処理回路９は、入力された信号に上述した信号処理を施すとともに、撮像素子１上において近傍に位置する同色画素(単板カラーの撮像素子の場合)の信号を加算し、本撮影時に比べて低解像度の映像信号としてデータ処理回路１０へ出力する。
【００２６】
データ処理回路１０が解像度変換処理を施した画像信号を表示制御回路１４へ出力することにより、スルー画像がモニタ１３に表示される。これにより、撮影者は、これから本撮影しようとする被写界の状態をモニタ１３の画面で観察することができる。
【００２７】
＜静止画本撮影動作＞
スルー画撮影動作に続いてレリーズ釦が全押し操作されると、全押し操作信号が制御回路５へ入力される。撮像装置は、全押し操作信号に応じて静止画本撮影動作を開始する。
【００２８】
制御回路５は、操作部材７からの全押し操作信号を検出すると撮像素子駆動回路８へ指示を送り、本撮影動作を実行するための駆動信号を出力させる。撮像素子１は、本撮影動作のための駆動信号を受けて、露出演算結果に基づく本撮影用の電荷蓄積を行って蓄積電荷を出力する。本撮影用の露出条件は、直近のスルー画データの信号値から得られる明るさの情報に基づいて決定される。信号処理回路９は入力された信号に上述した信号処理を施し、スルー画撮影時に比べて高解像度の画像信号としてデータ処理回路１０へ出力する。
【００２９】
データ処理回路１０が解像度変換（画素数変換）処理を施した画像信号を表示制御回路１４へ出力することにより、本撮影画像がモニタ１３に表示される。また、圧縮/伸張回路１１によって圧縮処理された画像データが記録媒体１２へ記録される。
【００３０】
＜ぼけ付加処理＞
電気的なぼかしを画像に付加する（すなわち、画像にぼかしを加える）動作について説明する。画像に対して電気的にぼかしを加える（以後、画像ぼけの付加と呼ぶ）とは、画像処理によって画像を加工し、擬似的にピントを外した画像を生成するものである。本実施形態による撮像装置では、画像データにローパスフィルタ（LPF）処理を施して画像の高域空間周波数成分を劣化させることにより、画像のエッジを不鮮明にし、画像のコントラストを低下させる。
【００３１】
撮像装置は、撮影シーンモードがポートレートモードおよびマクロモードのいずれかに設定されている場合に画像ぼけの付加（および付加内容の変更）が許可され、撮影シーンモードが遠景モードに設定されている場合には画像ぼけの付加（および付加内容の変更）が禁止される。ここで、ポートレートモードは人物を主要被写体とする撮影モード、マクロモードは近接撮影を行う撮影モード、遠景モードは風景を被写体とする撮影モードである。許可および禁止の判定は制御回路５が行う。ポートレートモードおよびマクロモードに設定されている場合には、後述する主要被写体領域の抽出処理が行われ、背景領域に画像ぼけの付加が行われる。一方、遠景モードに設定されている場合には、主要被写体領域の抽出処理は行われない。
【００３２】
また、撮影シーンモードが夜景ポートレートモードに設定されている場合であって、画像の背景領域に所定レベル以上の明るさを有する領域が存在する場合にも、撮像装置は画像ぼけの付加（および付加内容の変更）が許可される。一方、画像の背景領域に所定レベル以上の明るさを有する領域が存在しない場合には、画像ぼけの付加（および付加内容の変更）が禁止され、後述する主要被写体領域の抽出処理は行われない。画像の背景領域に所定レベル以上の明るさ領域が存在するか否かは、データ処理回路１０へ入力されたスルー画用の映像信号を用いて判定される。
【００３３】
制御回路５は、上述した画像ぼけの付加（および付加内容の変更）を禁止する場合、少なくとも撮影時において禁止すれば、再生時には許可するように構成してよい。
【００３４】
本発明は、以上説明した撮像装置が画像ぼけを付加する領域を決定する処理に特徴を有する。制御回路５が画像ぼけを付加する撮影処理の流れについて、図２のフローチャートを参照して説明する。図２による撮影処理は、画像ぼけの付加（および付加内容の変更）が許可された場合に起動する。
【００３５】
図２のステップＳ１０１において、制御回路５はレリーズ釦が半押し操作されたか否かを判定する。制御回路５は、操作部材７（レリーズ釦）から半押し操作信号が入力されるとステップＳ１０１を肯定判定してステップＳ１０２へ進み、半押し操作信号が入力されない場合にはステップＳ１０１を否定判定し、当該判定処理を繰り返す。
【００３６】
ステップＳ１０２において、制御回路５は、露出モードを絞り優先オートモードに設定するとともに、上述したスルー画撮影動作を開始させてステップＳ１０３へ進む。絞り優先オートモードにすることで、現時点で設定されている絞り値で撮影が行われる。
【００３７】
ステップＳ１０３において、制御回路５は、スルー画用の映像信号から主要被写体の抽出処理を行ってステップＳ１０４へ進む。主要被写体を抽出する処理の詳細については後述する。
【００３８】
ステップＳ１０４において、制御回路５は、スルー画用の映像信号のうち、ステップＳ１０３で抽出した主要被写体以外の領域（すなわち背景領域）に対する画像ぼけの付加をデータ処理回路１０へ指示し、ステップＳ１０５へ進む。データ処理回路１０が画像ぼけの付加および解像度変換処理を施した信号を表示制御回路１４へ出力することにより、画像ぼけが付加された画像がモニタ１３に表示される。
【００３９】
データ処理回路１０は、入力されるスルー画像のデータのうち背景領域に対応するデータに対してLPF処理を施すことによって画像ぼけを付加する。LPF処理の特性（フィルタの段数、遮断周波数など）は、フォーカス検出領域で取得されている距離情報に応じて変化させる。具体的には、主要被写体領域内のフォーカス検出領域で取得されている撮影距離と、背景領域内のフォーカス検出領域で取得されている撮影距離とを比較し、両者間の撮影距離の乖離が大きいほど遮断周波数を低くする。この結果、主要被写体の撮影距離との差が大きい背景領域ほど、強いぼけ効果が付加される。
【００４０】
なお、データ処理回路１０にLPF処理を行わせる代わりに、点拡がり関数を用いた畳み込み演算処理を行わせてもよい。
【００４１】
ステップＳ１０５において、制御回路５は、撮影画面全体に動きがあるか否かを判定する。制御回路５は、スルー画撮影によって１／３０秒ごとに取得される複数フレームのスルー画像データから算出されるフレーム間の動きベクトルの大きさ、向きの偏差（ばらつき）が、撮影画面の全体で（撮影画面を所定数に分割したブロックの全てにおいて）各々所定の範囲内にあり、かつ撮影画面内の動きベクトルの大きさの平均値が所定の値より大きい場合にステップＳ１０５を肯定判定し、ステップＳ１０６へ進む。
【００４２】
一方、制御回路５は、複数フレームのスルー画像データから算出されるフレーム間の動きベクトルの大きさの撮影画面内の平均値が所定の値以下の場合、あるいは撮影画面内の動きベクトルの大きさ、向きの偏差が撮影画面の全ブロックにわたり所定の範囲内にあると判定されなかった場合にはステップＳ１０５を否定判定し、ステップＳ１０７へ進む。ステップＳ１０７において、制御回路５は、一部の被写体に動きがあるか否かを判定する。制御回路５は、スルー画撮影によって１／３０秒ごとに取得される複数フレームのスルー画像データから算出されるフレーム間の動きベクトルの向き、大きさの偏差が撮影画面内の全ブロックにわたり所定の範囲内にないと判定された場合にはステップＳ１０７を肯定判定し、ステップＳ１０８へ進む。
【００４３】
ステップＳ１０６へ進む場合は、撮像装置の動きに起因する撮影範囲の移動があったと判定する。制御回路５は、ステップＳ１０６において、画像ぼけを付加する対象領域（背景領域）を動きベクトルの向き、大きさに応じて移動させてステップＳ１０９へ進む。ここで、撮影範囲の移動にともなって新たに撮影範囲に加わった領域に対しては、撮影範囲が移動する前のフレームの画面端において付加されていたぼけ量と同等のぼけを付加する（同様のLPF処理を施す）。画像ぼけを付加する対象領域の移動は、リアルタイムでモニタ１３の表示画像に反映される。
【００４４】
なお、撮影範囲の移動にともなって新たに撮影範囲に加わった領域に対するぼけ付加量を、撮影範囲が移動する前に付加していた撮影画面内のぼけ量の分布から外挿演算によって算出し、算出したぼけ量を付加する構成としても構わない。この場合にも、画像ぼけを付加する対象領域の移動はリアルタイムでモニタ１３の表示画像に反映される。
【００４５】
一方、制御回路５は、スルー画撮影によって１／３０秒ごとに取得される複数フレームのスルー画像データから算出されるフレーム間の動きベクトルの変化が、上記所定数の分割ブロックのいずれでも検出されない場合にはステップＳ１０７を否定判定し、ステップＳ１０９へ進む。この場合は、画像ぼけを付加する対象領域を変更しないでステップＳ１０９へ進む。
【００４６】
ステップＳ１０８へ進む場合は、撮影画面内の一部被写体について動きがあったと判定する。制御回路５は、ステップＳ１０８において、動きを検出した分割ブロックにおける動きベクトルの向き、大きさに応じて、画像ぼけを付加する対象領域（一部被写体に対応する領域）を移動させてステップＳ１０９へ進む。
【００４７】
図３は、時刻Ｔ０、Ｔ１およびＴ２のそれぞれにおいて取得されたスルー画像を例示する図である。時刻Ｔ１の現フレーム画面の中で、動きを検出した一部被写体の領域Ｏ１に付加するぼけ量は、一部被写体が移動する前のフレーム画面（時刻Ｔ０）において当該一部被写体の領域Ｏ０に付加されていたぼけ量と同等とし、領域Ｏ０の位置に対応する現フレーム画面（時刻Ｔ１）内の領域Ｐに付加するぼけ量は、領域Ｐの周囲に対して付加するぼけ量の分布から補間処理によって算出する。画像ぼけを付加する対象領域の移動は、リアルタイムでモニタ１３の表示画像に反映される。
【００４８】
一部被写体が移動する前に存在していた領域に対するぼけ付加量について、以下のように決定してもよい。すなわち、現フレームを時刻Ｔ２とすると、現フレーム画面の中で動きを検出した一部被写体の領域Ｏ２に付加するぼけ量は、一部被写体が移動する前のフレーム画面（時刻Ｔ１）において当該一部被写体の領域Ｏ１に付加されていたぼけ量と同等とし、領域Ｏ１の位置に対応する現フレーム画面（時刻Ｔ２）内の領域Ｑに付加するぼけ量は、さらに前（一部被写体が移動してくる前）のフレーム画面（時刻Ｔ０）において対応する領域Ｒに付加されていたぼけ量と同等とする。
【００４９】
ステップＳ１０９において、制御回路５は、画像ぼけの付加量の変更操作が行われたか否かを判定する。制御回路５は、ぼけ量変更操作信号が操作部材７から入力された場合にステップＳ１０９を肯定判定してステップＳ１１０へ進み、ぼけ量変更操作信号が入力されない場合にはステップＳ１０９を否定判定してステップＳ１１１へ進む。ぼけ量変更操作は、モニタ１３の画面上で特定領域について指定して行われる変更操作と、画面全体について共通に行われる変更操作とのいずれも可能に構成されている。もちろん、各被写体の撮影距離や時間などに応じてぼけ量を自動的に変更するものであってもよい。
【００５０】
ステップＳ１１０において、制御回路５は、変更操作信号に応じてLPF処理の特性を変更するようにデータ処理回路１０へ指示してステップＳ１１１へ進む。これにより、付加されるぼけ量が変更される。なお、LPF処理の代わりに畳み込み演算処理を行う場合には、変更操作信号に応じて点拡がり関数を変更する。ぼけ量変更後の画像は、リアルタイムでモニタ１３に表示される。
【００５１】
ステップＳ１１１において、制御回路５はレリーズ釦が半押し操作されているか否かを判定する。制御回路５は、操作部材７から半押し操作信号が継続して入力されている場合、ステップＳ１１１を肯定判定してステップＳ１１２へ進む。一方、半押し操作信号が入力されていない場合の制御回路５は、ステップＳ１１１を否定判定して画像ぼけの付加を解除し、ステップＳ１０１へ戻る。
【００５２】
レリーズ釦の半押し操作の有無に関係なく、メインスイッチのオン時にスルー画撮影動作を繰り返すように設定されている撮像装置の場合は、上記ステップＳ１１１を否定判定してステップＳ１０１へ戻ってから次に半押し操作信号が入力されるまでの間、画像ぼけを付加しないスルー画像をモニタ１３に表示する。
【００５３】
ステップＳ１１２において、制御回路５はレリーズ釦が全押し操作されたか否かを判定する。制御回路５は、操作部材７から全押し操作信号が入力された場合、ステップＳ１１２を肯定判定してステップＳ１１３へ進み、全押し操作信号が入力されない場合にはステップＳ１１２を否定判定し、ステップＳ１０５へ戻る。
【００５４】
ステップＳ１１３において、制御回路５は、本撮影動作を開始させてステップＳ１１４へ進む。制御回路５は、全押し操作信号が入力される直前にモニタ１３に表示されていたスルー画像データを用いて本撮影用の自動露出（ＡＥ）動作を行う。これにより、直近のスルー画像データに画像ぼけが付加されている場合は、付加された画像ぼけを含む信号値に基づいて本撮影用の露出が決定され、直近のスルー画像データに画像ぼけが付加されない場合には、画像ぼけを付加していない信号値に基づいて本撮影用の露出が決定される。
【００５５】
ステップＳ１１４において、制御回路５は、本撮影で得た画像信号に対し、全押し操作信号が入力される直前のスルー画像に対して付加していた画像ぼけと同様の画像ぼけを付加する処理（対象領域および画像ぼけの付加比率を同様にする）を行う。制御回路５はさらに、画像ぼけを付加後に圧縮処理した本撮影画像のデータを記録媒体１２に記録し、絞り優先オートモードを直近の設定モードに戻した上で図２による処理を終了する。
【００５６】
制御回路５が記録媒体１２へ本撮影画像のデータを記録する場合、本撮影画像とともに、サムネイル画像およびクイックビュー画像の記録も行う。サムネイル画像は、モニタ１３に撮影画像を縮小表示するための画像であり、サムネイル用に本撮影画像から画素数を低減させたものである。また、クイックビュー画像は、モニタ１３に撮影画像を再生表示する際に用いられる画像であり、モニタ１３の表示ピクセルに応じて本撮影画像から画素数を低減させた画像である。サムネイル画像およびクイックビュー画像は、それぞれ本撮影画像に関連付けられて記録媒体１２に記録される。
【００５７】
＜モニタの表示例＞
画像ぼけを付加した画像をモニタ１３へ表示する場合の表示態様について、図４を参照して説明する。図４(a)は、画像ぼけを付加しないでスルー画像を表示するモニタ１３を例示する図である。図４(a)において、主要被写体３００の背後に被写体３０１が、被写体３０１のさらに後方に被写体３０２が、それぞれ存在する。撮像装置は、ＡＦ動作によってフォーカス調節され、撮像装置に最至近の主要被写体３００に合焦している。
【００５８】
図４(a)に例示したスルー画像に画像ぼけを付加する場合、合焦している主要被写体３００より遠方に位置する被写体の領域に画像ぼけが付加される。付加されるぼけ量は、主要被写体３００の撮影距離との差がより大きい（より遠方に位置する）被写体３０２の方が被写体３０１よりも大きい。本実施形態の撮像装置は、このような画像ぼけを付加したスルー画像を図４(b)のようにモニタ１３に表示する。
【００５９】
図４(b)によれば、画像ぼけが付加された領域／付加されない領域を撮影者が容易に視認できるように、画像ぼけを付加しない領域(この場合は主要被写体３００の領域)の境界部を強調表示する。本実施形態では、主要被写体３００の輪郭を太線で表示して強調を表す。また、画像ぼけの付加量は遠方に位置する被写体ほど大きくしてよく、主要な各被写体の輪郭の線の太さを変えることによって強調の違いを表すことができる。なお、図４(b)では、画像ぼけを付加しない領域＝主要被写体３００の領域の例を示したが、合焦状態にない被写体であっても画像ぼけを付加しない場合があってもよい。すなわち、画像ぼけを付加しない領域は、必ずしも合焦状態にある主要被写体とは限らない。
【００６０】
なお、以上のモニタ表示は、撮像範囲全体の移動があった場合（ステップＳ１０５を肯定判定）、および一部被写体の移動があった場合（ステップＳ１０７を肯定判定）には、画像ぼけを付加する対象領域の移動がリアルタイムで反映される。
【００６１】
モニタ１３に画像ぼけを付加したスルー画像を表示する例を説明したが、本撮影画像やサムネイル画像、クイックビュー画像に画像ぼけを付加し、それぞれをモニタ１３に表示する場合も同様である。
【００６２】
このように画像ぼけが付加された画像は、画像ぼけを付加しない領域(この場合は主要被写体３００の領域)と、画像ぼけを付加した領域(この場合は主要被写体３０１および３０２を含む領域)とを含む全領域画像としてモニタ１３に表示される。
【００６３】
本実施形態の撮像装置は、画像ぼけを撮影画像の背景領域に付加するため、背景領域と異なる主要被写体領域を以下のように抽出する。
【００６４】
撮像装置は、以下の５つの抽出方法から選択する１つの抽出方法を用いて撮影画像を解析することにより、撮影画像の中から主要被写体領域を抽出する。
１．第１の抽出方法
第１の抽出方法は、撮影時に照明装置２０を発光させて取得した撮影画像と、撮影時に照明装置２０を発光させないで取得した撮影画像とを用いて主要被写体領域を抽出する（特開平１０−２１０３４０号公報参照）。撮像装置は、二つの画像間で画素ごとに画像データの比が所定値以上となる領域を抽出し、この領域を主要被写体領域と判定する。画像データの比が所定値以上となる領域の判定は、制御回路５による制御下でデータ処理回路１０が行う。このような二画像を参照する抽出方法は、二つの画像間で被写体を構成する画素データを対応させるための位置合わせが必要である。
【００６５】
２．第２の抽出方法
第２の抽出方法は、主要被写体に合焦させて取得した撮影画像と、主要被写体からピントを外して取得した撮影画像とを用いて主要被写体領域を抽出する（特開平０９−３２７０３７号公報参照）。撮像装置は、二つの画像間で画素ごとに差分（すなわち、共通の被写体を構成する両画像の画素データ（画像信号）の信号差）を演算し、演算結果を所定の判定閾値と比較することによって主要被写体と背景との境界部を抽出し、この境界部で示される領域を主要被写体と判定する。差分演算、境界部の抽出および領域判定は、制御回路５による制御下でデータ処理回路１０が行う。このように二画像を参照する抽出方法は、二つの画像間で被写体を構成する画素データを対応させるための位置合わせが必要である。
【００６６】
３．第３の抽出方法
第３の抽出方法は、異なる被写界深度で取得した二つの撮影画像を用いて主要被写体領域を抽出する（特開２００４−３１０５０４号公報参照）。撮像装置は、二つの画像から相対的なぼけ情報を求め、ぼけ情報に応じて主要被写体領域を判定する。ぼけ情報は、共通の被写体を構成する両画像の画素データ（画像信号）を比較して求める。ぼけ情報の取得および領域判定は、制御回路５による制御下でデータ処理回路１０が行う。このように二画像を参照する抽出方法は、二つの画像間で被写体を構成する画素データを対応させるための位置合わせが必要である。
【００６７】
４．第４の抽出方法
第４の抽出方法は、撮影画像の空間周波数成分を解析することによって主要被写体領域を抽出する。撮像装置は、スルー画像の全画面について所定ブロックごとに空間周波数成分を分析し、高周波数成分が所定の判定閾値より多く抽出される領域、あるいは高周波数成分が最も多く抽出される領域を主要被写体と判定する。空間周波数成分の分析は圧縮／伸張回路１１内のDCT（離散コサイン変換）演算部によって行い、領域判定は、制御回路５による制御下でデータ処理回路１０が行う。
【００６８】
５．第５の抽出方法
第５の抽出方法は、撮影画像の稜線を取得することによって主要被写体領域を抽出する（特開２０００−１３２７０６号公報参照）。撮像装置は、各被写体像の最下端の画面上の位置と稜線をもとに撮影画面内の各被写体距離を判断し、最至近の被写体を主要被写体と判定する。稜線の検出は制御回路５が行い、領域判定は制御回路５による制御下でデータ処理回路１０が行う。
【００６９】
制御回路５が主要被写体を抽出する処理の流れについて、図５および図６のフローチャートを参照して説明する。本実施形態では、図５、図６による処理をステップＳ１０３のサブルーチンとして構成する。
【００７０】
図５のステップＳ１１において、制御回路５は、発光禁止設定か否かを判定する。制御回路５は、照明装置２０の発光を禁止する設定がなされている場合にステップＳ１１を肯定判定してステップＳ１５へ進み、発光禁止設定がなされていない場合にはステップＳ１１を否定判定してステップＳ１２へ進む。発光禁止の設定および解除は、操作部材７を構成するスイッチ（不図示）からの操作信号に応じて制御回路５が行う。
【００７１】
ステップＳ１２において、制御回路５は、ミュージアムモードか否かを判定する。ミュージアムモードは展示物を撮影するための撮影モードであり、このモードに設定されると、展示物を保護するために照明装置２０を発光させずに撮影を行う。制御回路５は、撮影シーンモードがミュージアムモードに設定されている場合にステップＳ１２を肯定判定してステップＳ１５へ進み、ミュージアムモードに設定されていない場合にはステップＳ１２を否定判定してステップＳ１４へ進む。
【００７２】
ステップＳ１４において、制御回路５は、ＡＦ処理を開始してステップＳ１６へ進む。ＡＦ動作は、フォーカスレンズを無限遠に対応する位置から至近端に対応する位置へ向けて所定の速度で移動させながら、この移動過程において複数のフォーカス検出領域ごとに焦点評価値を最大にするフォーカスレンズ位置（合焦位置）を検出し、各フォーカスレンズ位置に対応する撮影距離情報を取得する。これにより、複数のフォーカス検出領域ごとに、当該領域に存在している被写体までの距離情報が得られる。
【００７３】
制御回路５は、ＡＦ動作中においてスルー画像を上記フレームレートでモニタ１３に逐次表示させるとともに、複数のフォーカス検出領域を示すＡＦマークをスルー画像に重ねて重畳表示させる。
【００７４】
ステップＳ１５へ進む場合は、照明装置２０を発光させない場合である。ステップＳ１５において、制御回路５は、第１の抽出方法を除外してステップＳ１４へ進む。これにより、制御回路５は、後述するステップＳ２７で第１の抽出方法を除く他の抽出方法から抽出方法を選択する。
【００７５】
ステップＳ１６において、制御回路５は、ピントが合う稜線が検出されているか否かを判定する。制御回路５は、スルー画像から稜線を検出した場合にステップＳ１６を肯定判定してステップＳ１８へ進み、稜線を検出していない場合はステップＳ１６を否定判定してステップＳ１７へ進む。
【００７６】
ステップＳ１７において、制御回路５は、ＡＦ動作が終了か否かを判定する。制御回路５は、ＡＦ動作を終了した場合にステップＳ１７を肯定判定してステップＳ１８へ進み、終了していない場合にはステップＳ１７を否定判定してステップＳ１６へ戻る。ステップＳ１６へ戻る場合は、ＡＦ動作を継続する。
【００７７】
ステップＳ１８において、制御回路５は、稜線情報を不図示の内部メモリに保存してステップＳ１７へ進む。稜線情報には、撮影画面における稜線の位置（領域）およびこの領域に存在する被写体までの距離情報を含む。
【００７８】
ステップＳ１９において、制御回路５は、測光値が所定値以上か否かを判定する。制御回路５は、測光回路１５による測光データから得られる明るさ情報が所定値以上の場合にステップＳ１９を肯定判定してステップステップＳ２１へ進み、明るさ情報が所定値以上でない場合にはステップＳ１９を否定判定し、ステップＳ２０へ進む。
【００７９】
ステップＳ２１へ進む場合は、照明装置２０を発光させない場合である。ステップＳ２１において、制御回路５は、第１の抽出方法を除外してステップＳ２０へ進む。これにより、制御回路５は、第１の抽出方法を除く他の抽出方法から１つの抽出方法を選択する。
【００８０】
ステップＳ２０において、制御回路５は、スポーツ撮影モードか否かを判定する。制御回路５は、撮影シーンモードがスポーツ撮影モードに設定されている場合にステップＳ２０を肯定判定してステップＳ２３へ進み、スポーツ撮影モードに設定されていない場合にはステップＳ２０を否定判定してステップＳ２２へ進む。ここで、スポーツ撮影モードは、スポーツシーンなどの動きがある被写体を撮影するモードである。
【００８１】
ステップＳ２２において、制御回路５は、スルー画像の動きのばらつきが所定値以上か否かを判定する。制御回路５は、スルー画撮影によって１／３０秒ごとに取得される複数フレームのスルー画像データから算出されるフレーム間の動きベクトルの変化が小さい（動きベクトルの向きおよび大きさの撮影画面の全ブロックにおけるフレーム間の変化量が所定値未満である）、もしくは、動きベクトルの向きおよび大きさの偏差が撮影画面の全ブロックにわたり所定の範囲内にあると判定された場合にステップＳ２２を否定判定し、図６のステップＳ２４へ進む。この場合は、フレーム間でスルー画像の位置合わせが容易とみなせる。
【００８２】
一方、制御回路５は、複数フレームのスルー画像データから算出されるフレーム間の動きベクトルの向きおよび大きさの偏差が、上記の全分割ブロックにわたり所定の範囲内にあると判定されない場合にはステップＳ２２を肯定判定し、ステップＳ２３へ進む。
【００８３】
ステップＳ２３へ進む場合は、フレーム間でスルー画像の位置合わせが困難となるおそれがある。制御回路５は、ステップＳ２３において、第１〜第３の抽出方法を除外して図６のステップＳ２４へ進む。これにより、制御回路５は１つの撮影画像から主要被写体領域を抽出する第４および第５の抽出方法から抽出方法を選択する。
【００８４】
図６のステップＳ２４において、制御回路５は、稜線情報を保存しているか否かを判定する。制御回路５は、ステップＳ１８で保存した稜線情報が存在する場合にステップＳ２４を肯定判定してステップＳ２５へ進み、稜線情報が存在しない場合にはステップＳ２４を否定判定してステップＳ２６へ進む。
【００８５】
ステップＳ２６へ進む場合は、稜線情報がないため第５の抽出方法の使用が適さない場合である。ステップＳ２６において、制御回路５は、第５の抽出方法を除外してステップＳ２５へ進む。これにより、制御回路５は、第５の抽出方法を除く他の抽出方法から１つの抽出方法を選択する。
【００８６】
ステップＳ２５において、制御回路５は、スルー画像の全画面領域に対する周波数解析で、領域によって有意な高域空間周波数成分の差が検出されているか否かを判定する。制御回路５は、圧縮処理に用いられる所定ブロック間において、空間周波数成分に差が認められる場合にステップＳ２５を肯定判定してステップＳ２７へ進み、空間周波数成分に差が認められない場合にはステップＳ２５を否定判定し、ステップＳ２８へ進む。
【００８７】
ステップＳ２８へ進む場合は、高域空間周波数成分が抽出されないため第４の抽出方法の使用が適さない場合である。ステップＳ２８において、制御回路５は、第４の抽出方法を除外してステップＳ２７へ進む。これにより、制御回路５は、第４の抽出方法を除く他の抽出方法から１つの抽出方法を選択する。
【００８８】
ステップＳ２７において、制御回路５は、公知の特定色（肌色等）領域を抽出する技術、あるいは登録されている特定の輪郭情報と類似する輪郭を有する領域を抽出する技術と、第１〜第５の抽出方法のうち除外されていない抽出方法の１つを用いて、スルー画像から主要被写体領域を抽出する。たとえば、スルー画像から肌色領域を抽出し、抽出した肌色領域に対し、除外されていない抽出方法から選択した抽出方法（複数の抽出方法から選択する優先順位は、１、２、３、４、５の順とする）を適用して主要被写体領域を判定する。ここで、第１〜第５の抽出方法のうちから除外されていない複数の方法を選択するものであってもよい。
【００８９】
第１の抽出方法を選択した場合の制御回路５は、主要被写体領域を抽出するためのスルー画撮影において、たとえば、照明装置２０を発光させないで１フレーム目のスルー画撮影を行い、２フレーム目に照明装置２０を発光させてスルー画撮影を行うように各部を制御する。なお、フォーカスレンズの位置は、ＡＦ動作によって検出された最至近の被写体に合焦する位置に移動されている。
【００９０】
第２の抽出方法を選択した場合の制御回路５は、主要被写体領域を抽出するためのスルー画撮影において、たとえば、撮像装置に最至近の主要被写体に合焦させて１フレーム目のスルー画撮影を行い、２フレーム目にフォーカスレンズを所定量移動させて（主要被写体からピントを外して）スルー画撮影を行うように各部を制御する。なお、移動させたフォーカスレンズは、ＡＦ動作によって検出された最至近の被写体に合焦する位置へ戻される。上記の１フレーム目の撮影と２フレーム目の撮影との撮影順序は逆にしても構わない。
【００９１】
第３の抽出方法を選択した場合の制御回路５は、主要被写体領域を抽出するためのスルー画撮影において、たとえば、絞り優先オートによる制御値で１フレーム目のスルー画撮影を行い、２フレーム目に絞り値を所定段数変更させて（被写界深度を変えて）スルー画撮影を行うように各部を制御する。なお、変更された絞り値は変更前の絞り値に戻される。また、フォーカスレンズの位置は、ＡＦ動作によって検出された最至近の被写体に合焦する位置に移動されている。
【００９２】
第４の抽出方法を選択した場合、および第５の抽出方法を選択した場合の制御回路５は、ＡＦ動作によって検出された最至近の被写体に合焦する位置にフォーカスレンズが移動されている状態で、主要被写体領域を抽出するためのスルー画撮影を少なくとも１フレーム行えばよい。
【００９３】
制御回路５は、上記抽出した主要被写体に合焦する位置へフォーカスレンズを駆動させる。抽出された被写体が複数存在する場合は、上記ＡＦ動作で取得された複数の被写体までの距離情報を用いて、撮像装置に最も近い被写体を抽出する。
【００９４】
制御回路５は、主要被写体の領域を抽出すると図６による処理を終了し、図２のステップＳ１０４へ戻る。
【００９５】
以上説明した実施形態によれば、以下の作用効果が得られる。
（１）主要被写体領域を判定する際に、公知の特定色（肌色等）領域を抽出する方法と、第１〜第５の被写体領域抽出方法のうち、除外されていない被写体領域抽出方法の１つもしくは複数とを組み合わせることにより、スルー画像の中から主要被写体領域を判定するようにした。特定色（肌色等）領域を抽出する方法のみを用いて主要被写体領域を判定する場合に比べて、主要被写体領域の判定精度を高めることができる。これにより、画像ぼけを付加する背景領域を正確に求めることができる。
【００９６】
（２）第１の抽出方法について、照明装置２０が非発光にされる状態で選択しないように選択範囲から除外した（ステップＳ１５）ので、照明装置２０を発光させて行う第１の抽出方法と、照明装置２０を非発光にする撮像装置の設定状態との間の矛盾を排除できる。たとえば、本撮像装置がバッテリにより駆動され、バッテリの残容量が所定値より少ないことが制御回路５によって判断され、照明装置２０の発光が禁止されているような場合に対しても上記の構成を適用することができる。
【００９７】
（３）第１の抽出方法について、測光値が所定値以上の状態で選択しないように選択範囲から除外した（ステップＳ２１）ので、照明装置２０の発光時と非発光時とで画像間の明るさの差が必要な第１の抽出方法を、非常に明るい撮影環境下で適用することを排除できる。
【００９８】
（４）第１〜第３の抽出方法について、被写体の動きが予想されるスポーツ撮影モード（ステップＳ２０を肯定判定）や、スルー画像の中でフレーム間の動きベクトルの向きや大きさのばらつきが所定値以上検出された場合（ステップＳ２２を肯定判定）には選択しないように選択範囲から除外した（ステップＳ２３）ので、被写体を構成する画素データのフレーム間における位置合わせが困難な状態で当該位置合わせを行うための動き補償演算処理を行わなくてよいため、制御回路５の負担を軽減できる。
【００９９】
（５）第５の抽出方法について、スルー画像の中からピントが合う稜線が検出されない状態で選択しないように選択範囲から除外した（ステップＳ２６）ので、稜線情報が必要な第５の抽出方法を、稜線を含まないスルー画像に適用することを排除できる。
【０１００】
（６）第４の抽出方法について、圧縮処理に用いられる所定ブロック間で空間周波数成分に差が認められない状態で選択しないように選択範囲から除外した（ステップＳ２８）ので、所定ブロック間において空間周波数成分の差が必要な第４の抽出方法を、ブロック間の空間周波数成分に差が生じないスルー画像に適用することを排除できる。ブロック間の空間周波数成分に差がない画像とは、たとえば、単色の平板を撮影した場合の画像である。
【０１０１】
（７）上記（２）〜（６）のように抽出方法の選択範囲をフレキシブルに変化させるようにしたので、撮像装置に設定されている撮影シーンモード、取得されている撮影画像（この場合はスルー画像）によって示される画像の特徴（動き、稜線の状態、空間周波数）、撮影環境（明るさ）、バッテリの残容量に応じて、適切な主要被写体領域の抽出方法を選択することができる。
【０１０２】
（変形例１）
上述した説明では、画像中の主要被写体領域を抽出する複数の方法のうち、除外されていない抽出方法から１つの方法を選択する場合の選択優先順位を、１、２、３、４、５の順としたが、選択順位は、撮影者の意図に応じて適宜変更してよい。
【０１０３】
（変形例２）
照明装置２０が撮像装置に内蔵される例を説明したが、外付けの照明装置を撮像装置に接続して使用する場合にも本発明を適用できる。
【０１０４】
（変形例３）
上述したステップＳ２２において、動きのばらつき判定を段階的に行うようにしてもよい。たとえば、焦点面を移動させながら判定したり、絞り値を調節しながら判定したりする。焦点面を移動しながら動きのばらつき判定を行う場合の制御回路５は、連続するフレームのスルー画撮影において、フォーカスレンズの位置を異ならせて（異なるフォーカス調節状態にするように焦点面を移動させて）スルー画撮影を行うように撮像装置内の各部を制御する。制御回路５は、フレーム間の動きベクトルの変化が、上記所定数の分割ブロックのいずれかで焦点面移動時の判定閾値以上検出される場合には、ステップＳ２２を肯定判定して第２の抽出方法を除外する。
【０１０５】
また、絞り値を変更しながら動きのばらつき判定を行う場合の制御回路５は、連続するフレームのスルー画撮影において、絞り値を異ならせて（異なる光学ぼけ状態にするように被写界深度を変更させて）スルー画撮影を行うように撮像装置内の各部を制御する。制御回路５は、フレーム間の動きベクトルの変化が、上記所定数の分割ブロックのいずれかで被写界深度変更時の判定閾値以上検出される場合には、ステップＳ２２を肯定判定して第３の抽出方法を除外する。なお、変形例３の場合も、被写体の動きが予想されるスポーツ撮影モード（ステップＳ２０を肯定判定）の場合は、ステップＳ２０と同様に、第１の抽出方法を除外する。
【０１０６】
（変形例４）
また、上述したステップＳ２２において、動きセンサによる検出信号を用いて動きのばらつき判定を行うように構成してもよい。この場合の撮像装置は、角速度センサもしくは加速度センサを備える。制御回路５は、動きセンサからの検出信号によって示される動きベクトルの大きさおよび向きと、スルー画像内の所定ブロックから得られる動きベクトルの大きさおよび向きとをそれぞれ比較し、両者の差が所定値以下の場合は手ぶれに起因する撮影画像の平行移動とみなし、ステップＳ２２を否定判定する。平行移動とみなす場合には、第１〜第３の抽出方法を除外しない。
【０１０７】
測光値は、測光回路１５による検出値から得る他に、撮像素子１による画像信号の信号レベルから得る構成としてもよい。
【０１０８】
上述したように決定した抽出方法で取得した主要被写体領域は、画像ぼけを付加する領域の決定に用いたり、フォーカス調節時のフォーカスエリアとして用いたり、測光時の測光エリアとして用いたり、ズームアップ（ズームダウン）時の中心エリアとして用いてもよい。
【０１０９】
以上の説明はあくまで一例であり、発明を解釈する上で、上記の実施形態の構成要素と本発明の構成要素との対応関係に何ら限定されるものではない。
【図面の簡単な説明】
【０１１０】
【図１】本発明による撮像装置の一例を示すブロックダイアグラムである。
【図２】制御回路が画像ぼけを付加する撮影処理の流れについて説明するフローチャートである。
【図３】異なる時刻に取得されたスルー画像を例示する図である。
【図４】(a)画像ぼけを付加しないでスルー画像を例示する図である。(b)画像ぼけを付加したスルー画像を例示する図である。
【図５】制御回路が主要被写体を抽出する処理の流れについて説明するフローチャートである。
【図６】制御回路が主要被写体を抽出する処理の流れについて説明するフローチャートである。
【符号の説明】
【０１１１】
１…撮像素子
２…撮影レンズ
３…レンズ駆動回路
５…制御回路
７…操作部材
９…信号処理回路
１０…データ処理回路
１１…圧縮／伸張回路
１２…記録媒体
１３…モニタ
１４…表示制御回路
１５…測光回路
２０…照明装置
【図１】
0004645413.tif 000002
【図２】
0004645413.tif 000003
【図３】
0004645413.tif 000004
【図４】
0004645413.tif 000005
【図５】
0004645413.tif 000006
【図６】
0004645413.tif 000007