(57)【特許請求の範囲】
【請求項１】
結像光学系による像を撮像する撮像部と、
前記結像光学系の焦点調節状態を検出する焦点検出部と、
前記焦点検出部により合焦と見なせるか否かを判定する合焦判定部と、
前記撮像部により撮像された画像の画像処理を行う画像処理部と、を含み、
前記画像処理部は、前記合焦判定部により合焦と見なせないと判定されたとき、撮影シーンの判別処理を行い、前記合焦判定部により合焦と見なせると判定されたとき、顔の検出処理を行うことを特徴とする撮像装置。
【請求項２】
結像光学系による像を撮像する撮像部と、
前記結像光学系の焦点調節状態を検出する焦点検出部と、
前記焦点検出部により合焦と見なせるか否かを判定する合焦判定部と、
前記撮像部により撮像された画像の画像処理を行う画像処理部と、
焦点調節状態の制御を行う制御部と、を含み、
前記画像処理部は、前記合焦判定部により合焦と見なせないと判定されたとき背景の検出処理を行い、前記合焦判定部により合焦と見なせると判定されたとき顔の検出処理を行い、
前記制御部は、前記合焦判定部により合焦と見なせないと判定されたとき、前記背景以外の領域に対応する焦点検出エリアを用いて焦点調節状態の制御を行い、
前記合焦判定部により合焦と見なせると判定されたとき、前記顔の領域に対応する焦点検出エリアを用いて焦点調節状態の制御を行うことを特徴とする撮像装置。
【請求項３】
結像光学系による像を撮像する撮像部と、
前記結像光学系の焦点調節状態を検出する焦点検出部と、
前記焦点検出部により合焦と見なせるか否かを判定する合焦判定部と、
前記撮像部により撮像された画像の画像処理を行う画像処理部と、
露出の制御を行う制御部と、を含み、
前記画像処理部は、前記合焦判定部により合焦と見なせないと判定されたとき背景の検出処理を行い、前記合焦判定部により合焦と見なせると判定されたとき顔の検出処理を行い、
前記制御部は、前記合焦判定部により合焦と見なせないと判定されたとき、前記背景以外の領域に対応する焦点検出エリアを用いて露出の制御を行い、前記合焦判定部により合焦と見なせると判定されたとき、前記顔の領域に対応する焦点検出エリアを用いて露出の制御を行うことを特徴とする撮像装置。
【請求項４】
請求項１に記載された撮像装置であって、
前記合焦判定部により合焦と見なせると判定されたとき、前記顔の領域に対応する焦点検出エリアを用いて焦点調節状態の制御を行う制御部を有することを特徴とする撮像装置。
【請求項５】
請求項１に記載された撮像装置であって、
前記合焦判定部により合焦と見なせると判定されたとき、前記顔の領域に対応する焦点検出エリアを用いて露出の制御を行う制御部を有することを特徴とする撮像装置。
【請求項６】
請求項５に記載された撮像装置であって、
前記合焦判定部により合焦と見なせると判定されたとき、前記顔の領域に対応する焦点検出エリアを用いて焦点調節状態の制御を行う制御部を有することを特徴とする撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は撮像装置に関する。
【背景技術】
【０００２】
撮像画像データを解析して肌色の色相を有する領域を検出するとともに、撮影光学系の焦点距離を取得して実際に撮影される顔の最大サイズを予測し、肌色領域の内の最大サイズよりも大きな領域を排除して顔領域を検出するようにした顔領域検出方法が知られている。例えば、先行技術文献としては次のものがある。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−１８５５５５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述した従来の顔領域検出方法では、撮影光学系のピントが人物の顔に合っていないと顔の大きさを正しく予測することができず、顔領域を正確に検出することができないという問題がある。
【課題を解決するための手段】
【０００５】
（１）請求項１の発明による撮像装置は、結像光学系による像を撮像する撮像部と、前記結像光学系の焦点調節状態を検出する焦点検出部と、前記焦点検出部により合焦と見なせるか否かを判定する合焦判定部と、前記撮像部により撮像された画像の画像処理を行う画像処理部と、を含み、前記画像処理部は、前記合焦判定部により合焦と見なせないと判定されたとき、撮影シーンの判別処理を行い、前記合焦判定部により合焦と見なせると判定されたとき、顔の検出処理を行うことを特徴とする。
（２）請求項２の発明による撮像装置は、結像光学系による像を撮像する撮像部と、前記結像光学系の焦点調節状態を検出する焦点検出部と、前記焦点検出部により合焦と見なせるか否かを判定する合焦判定部と、前記撮像部により撮像された画像の画像処理を行う画像処理部と、焦点調節状態の制御を行う制御部と、を含み、前記画像処理部は、前記合焦判定部により合焦と見なせないと判定されたとき背景の検出処理を行い、前記合焦判定部により合焦と見なせると判定されたとき顔の検出処理を行い、前記制御部は、前記合焦判定部により合焦と見なせないと判定されたとき、前記背景以外の領域に対応する焦点検出エリアを用いて焦点調節状態の制御を行い、前記合焦判定部により合焦と見なせると判定されたとき、前記顔の領域に対応する焦点検出エリアを用いて焦点調節状態の制御を行うことを特徴とする。
（３）請求項３の発明による撮像装置は、結像光学系による像を撮像する撮像部と、前記結像光学系の焦点調節状態を検出する焦点検出部と、前記焦点検出部により合焦と見なせるか否かを判定する合焦判定部と、前記撮像部により撮像された画像の画像処理を行う画像処理部と、露出の制御を行う制御部と、を含み、前記画像処理部は、前記合焦判定部により合焦と見なせないと判定されたとき背景の検出処理を行い、前記合焦判定部により合焦と見なせると判定されたとき顔の検出処理を行い、前記制御部は、前記合焦判定部により合焦と見なせないと判定されたとき、前記背景以外の領域に対応する焦点検出エリアを用いて露出の制御を行い、前記合焦判定部により合焦と見なせると判定されたとき、前記顔の領域に対応する焦点検出エリアを用いて露出の制御を行うことを特徴とする。
（４）請求項４の発明による撮像装置は、請求項１に記載された撮像装置であって、前記合焦判定部により合焦と見なせると判定されたとき、前記顔の領域に対応する焦点検出エリアを用いて焦点調節状態の制御を行う制御部を有することを特徴とする。
（５）請求項５の発明による撮像装置は、請求項１に記載された撮像装置であって、前記合焦判定部により合焦と見なせると判定されたとき、前記顔の領域に対応する焦点検出エリアを用いて露出の制御を行う制御部を有することを特徴とする。
（６）請求項６の発明による撮像装置は、請求項５に記載された撮像装置であって、前記合焦判定部により合焦と見なせると判定されたとき、前記顔の領域に対応する焦点検出エリアを用いて焦点調節状態の制御を行う制御部を有することを特徴とする。
【発明の効果】
【０００６】
本発明によれば、撮像した画像の中から人物の顔の領域を正確に検出することができる
。
【図面の簡単な説明】
【０００７】
【図１】一実施の形態の撮像装置の構成を示す図
【図２】一実施の形態のボディ駆動制御装置の詳細な構成を示す図
【図３】第２撮像素子による被写体の撮像例を示す図
【図４】第２撮像素子の詳細な構成を示す図
【図５】一実施の形態の背景領域の抽出結果を示す図
【図６】一実施の形態の顔領域の抽出結果を示す図
【図７】一実施の形態の撮影動作を示すフローチャート
【図８】変形例の撮影動作を示すフローチャート
【発明を実施するための形態】
【０００８】
撮影画面内に設定された複数の焦点検出エリアにおいて撮影レンズの焦点調節状態（この一実施の形態ではデフォーカス量）を検出し、いずれかのエリアのデフォーカス量に基づいて撮影レンズを合焦駆動する自動焦点調節（ＡＦ）機能と、撮影画像の中の追尾対象の被写体の画像をテンプレート画像（基準画像）として記憶し、繰り返し撮像される画像の中でテンプレート画像と同一または類似した画像の位置を検索しながら（テンプレートマッチング）追尾対象の被写体を追尾する画像追尾機能とを備え、ＡＦ機能と画像追尾機能により撮影レンズを駆動しながら対象を追尾する撮像装置（一眼レフデジタルスチルカメラ）の一実施の形態を説明する。
【０００９】
図１は、一実施の形態の撮像装置（一眼レフデジタルスチルカメラ）１の構成を示す。なお、図１では本願発明と直接関係のないカメラの機器および回路についての図示と説明を省略する。一実施の形態のカメラ１は、カメラ本体２に交換レンズ３が交換可能に装着される。カメラ本体２には被写体像を撮像して画像を記録するための第１撮像素子４が設けられる。この第１撮像素子４はＣＣＤやＣＭＯＳなどにより構成することができる。撮影時にはクイックリターンミラー５およびサブミラー６が実線で示す撮影光路外の位置に退避してシャッター７が開放され、撮影レンズ８により第１撮像素子４の受光面に被写体像が結像される。
【００１０】
カメラ本体２の底部には、撮影レンズ８の焦点調節状態を検出するための焦点検出光学系９と測距素子１０が設けられている。この一実施の形態では、瞳分割位相差検出方式による焦点検出方法を採用した例を示す。焦点検出光学系９は、撮影レンズ８を通過した対の焦点検出用光束を測距素子１０の受光面へ導き、対の光像を結像させる。測距素子１０は例えば対のＣＣＤラインセンサーを備え、対の光像に応じた焦点検出信号を出力する。撮影前にはクイックリターンミラー５およびサブミラー６が破線で示すような撮影光路内の位置に設定されており、撮影レンズ８からの対の焦点検出用光束はクイックリターンミラー５のハーフミラー部を透過し、サブミラー６により反射されて焦点検出光学系９および測距素子１０へ導かれる。
【００１１】
カメラ本体２の上部にはファインダー光学系が設けられている。撮影前にはクイックリターンミラー５およびサブミラー６が破線で示す位置にあり、撮影レンズ８からの被写体光はクイックリターンミラー５に反射されてファインダースクリーン１１へ導かれ、ファインダースクリーン１１上に被写体像が結像する。有機ＥＬ表示素子１２は、ファインダースクリーン１１上に結像された被写体像に焦点検出エリアマークなどの情報を重畳表示するとともに、被写体像外の位置に露出値などの種々の撮影情報を表示する。ファインダースクリーン１１上の被写体像はペンタダハプリズム１３および接眼レンズ１４を介してファインダー接眼窓１５へ導かれ、撮影者が被写体像を視認することができる。
【００１２】
また、カメラ本体２上部のファインダー光学系には、被写体追尾や測光のために被写体像を撮像する第２撮像素子１６が設けられる。この第２撮像素子１６については詳細を後述する。ファインダースクリーン１１に結像した被写体像は、ペンタダハプリズム１３、プリズム１７および結像レンズ１８を介して第２撮像素子１６の受光面に再結像される。第２撮像素子１６は被写体像に応じた画像信号を出力する。撮影前にファインダースクリーン１１上に結像された被写体像は、ペンタダハプリズム１３、プリズム１７および結像レンズ１８を介して第２撮像素子１６へ導かれ、第２撮像素子１６の受光面に被写体像が再結像される。詳細を後述するが、この第２撮像素子１６により撮像された被写体像に基づいて追尾制御と露出演算が行われる。
【００１３】
カメラ本体２にはまた、ボディ駆動制御装置１９、操作部材２０などが設けられる。ボディ駆動制御装置１９は、詳細を後述するマイクロコンピューターとメモリ、Ａ／Ｄ変換器などの周辺部品から構成され、カメラ１の種々の制御と演算を行う。操作部材２０には、シャッターボタン、焦点検出エリア選択スイッチ、撮影モード選択スイッチなどのカメラ１を操作するためのスイッチやセレクターが含まれる。
【００１４】
交換レンズ３には、ズーミングレンズ８ａ、フォーカシングレンズ８ｂ、絞り２１、レンズ駆動制御装置２２などが設けられる。なお、この一実施の形態では撮影レンズ８をズーミングレンズ８ａ、フォーカシングレンズ８ｂおよび絞り２１で体表的に表すが、撮影レンズ８の構成は図１に示す構成に限定されない。レンズ駆動制御装置２２は図示しないマイクロコンピューターとメモリ、駆動回路、アクチュエーターなどの周辺部品から構成され、レンズ８ａ、８ｂおよび絞り２１の駆動制御とそれらの位置検出を行う。レンズ駆動制御装置２２に内蔵されるメモリには、交換レンズ３の焦点距離や開放絞り値などの情報が記憶されている。
【００１５】
ボディ駆動制御装置１９とレンズ駆動制御装置２２はレンズマウント部の接点２３を介して通信を行い、ボディ駆動制御装置１９からレンズ駆動制御装置２２へレンズ駆動量や絞り値などの情報を送信し、レンズ駆動制御装置２２からボディ駆動制御装置１９へレンズ情報や絞り情報を送信する。
【００１６】
図２はボディ駆動制御装置１９の詳細な構成を示す。なお、本願発明と直接関係のない制御機能については図示と説明を省略する。ボディ駆動制御装置１９は素子制御回路１９ａ、Ａ／Ｄ変換器１９ｂ、マイクロコンピューター１９ｃ、メモリ１９ｄなどを備えている。素子制御回路１９ａは第２撮像素子１６の電荷の蓄積と読み出しを制御する。Ａ／Ｄ変換器１９ｂは、第２撮像素子１６から出力されるアナログ画像信号をデジタル画像信号に変換する。マイクロコンピューター１９ｃは、ソフトウエア形態により背景領域／顔領域抽出部１９ｅ、露出制御部１９ｆ、焦点検出演算部１９ｇおよびレンズ駆動量演算部１９ｈを構成する。メモリ１９ｄは、画像追尾用のテンプレート画像やデフォーカス量などの情報、あるいは撮影レンズ８の焦点距離、開放Ｆ値、絞り値、像ズレ量からデフォーカス量への変換係数などのレンズ情報を記憶する。
【００１７】
背景領域／顔領域抽出部１９ｅは、第２撮像素子１６により撮像した被写体像から背景領域または顔領域を抽出する。この背景領域と顔領域の抽出処理については詳細を後述する。露出演算部１９ｆは、第２撮像素子１６により撮像した画像信号に基づいて露出値（シャッター速度および絞り値）を演算する。
【００１８】
焦点検出演算部１９ｇは、測距素子１０から出力される対の光像に応じた焦点検出信号に基づいて撮影レンズ８の焦点調節状態、ここではデフォーカス量を検出する。なお、詳細を後述するが、撮影レンズ８の撮影画面内には複数の焦点検出エリアが設定されており、測距素子１０は焦点検出エリアごとに対の光像に応じた焦点検出信号を出力し、焦点検出演算部１９ｇは焦点検出エリアごとに対の光像に応じた焦点検出信号に基づいてデフォーカス量を検出する。レンズ駆動量演算部１９ｈは検出されたデフォーカス量をレンズ駆動量に変換する。
【００１９】
図３は第２撮像素子１６による被写体の撮像例を示す。第２撮像素子１６は、マトリクス状に配列された複数の画素２６（光電変換素子；この例では横２２個×縦１５個＝３３０個）を備えている。この一実施の形態では、第２撮像素子１６の横方向の画素２６の座標をｉ(＝１〜２２)で表すとともに、縦方向の画素２６の座標をｊ(＝１〜１５)で表し、左上隅の画素２６の座標を原点(１,１)とする。
【００２０】
各画素２６は図４に示すように３個の部分２６ａ、２６ｂ、２６ｃに分割され、これらの部分２６ａ、２６ｂ、２６ｃにはそれぞれ赤Ｒ、緑Ｇ、青Ｂの原色フィルターが設けられている。これにより、各画素２６ごとに被写体像のＲＧＢ信号を出力することができる。第２撮像素子１６により図３(ａ)に示すような被写体を撮像した場合には、第２撮像素子１６の各画素２６から図３(ｂ)に示すような画像信号が出力される。
【００２１】
この一実施の形態では、基本的には撮影画像から顔領域を抽出し、人物の顔の部分に正しくピントを合わせるとともに、人物の顔の部分が適切な明るさになるように露出制御を行う。しかしながら、上述したように撮影レンズ８のピントが人物の顔に合っていないと顔のサイズを正しく予測することができず、顔領域を正確に抽出することができない。
【００２２】
そこで、この一実施の形態では、撮影レンズ８のピントがぼけている状態では顔領域の抽出処理を行わず、代わりに背景領域の抽出処理を行う。そして、抽出した背景領域以外の部分が主要被写体の領域であると判断し、主要被写体部分に正しくピントを合わせるとともに、主要被写体部分が適切な明るさになるように露出制御を行う。
【００２３】
ここで、ボディ駆動制御装置１９で実行される背景領域の抽出方法と顔領域の抽出方法について説明する。まず、背景領域の抽出において、第２撮像素子１６のすべての画素２６の画像信号に対して色相Ｈue[ｉ,ｊ]を算出し、次の条件式（１）と条件式（２）を用
いて被写体領域の判別を行う。
ＡＢＳ（Ｈue[ｉ,ｊ]−Ｈue[ｉ,１]）＜ＴhＨue  ・・・（１）、
Ｍ１[ｉ,ｊ−１]≠０  ・・・（２）
条件式（１）において、ＡＢＳ（  ）は入力された色相の差の絶対値を返す関数であり、ＴhＨueは実験等により決定される判定しきい値である。なお、ｊ≠１を満たすＭ１[ｉ,
ｊ]の初期値は０であり、Ｍ１[ｉ,１]の初期値は１である。
【００２４】
画像の最上部の行の座標[ｉ,１]の領域は背景である可能性が高いから、この領域の色
相を背景の基準色相とし、この背景領域の基準色相と背景領域に隣接する他の領域の色相とを順次比較する。背景領域の基準色相と背景領域に隣接する他の領域の色相との差が判定しきい値ＴhＨueより小さければ、背景領域に隣接する他の領域を背景領域ととして当
該座標のＭ１[ｉ,ｊ]を１とする。なお、条件式（１）、（２）による背景領域の抽出演
算は、各列ともｊの小さい方から大きい方へ順に実行する。この背景領域の抽出演算によって、Ｍ１[ｉ,ｊ]が１となっている画素２６が背景として抽出された領域である。
【００２５】
第２撮像素子１６により図３(ａ)に示すような被写体を撮像した場合には、第２撮像素子１６の各画素２６から図３(ｂ)に示すような画像信号が出力され、これらの画像信号に基づいて上述した背景領域の抽出演算を行うと、図５に示すような背景領域の抽出結果が得られる。図５において、ハッチングで示す画素２６の領域が抽出された背景領域である。
【００２６】
次に、顔領域の抽出方法を説明する。第２撮像素子１６のすべての画素２６の画像信号に対して色相Ｈue[ｉ,ｊ]を算出し、次の条件式（３）を満たす画素２６を顔候補領域と
して抽出する。
ＨueＬoＣonst＜Ｈue[ｉ,ｊ]＜ＨueＨiＣonst  ・・・（３）
条件式（３）において、ＨueＬoＣonst、ＨueＨiＣonstは人肌の色相の下限と上限であり、例えば０°、３０°とする。
【００２７】
第２撮像素子１６により図３(ａ)に示すような被写体を撮像した場合には、第２撮像素子１６の各画素２６から図３(ｂ)に示すような画像信号が出力され、これらの画像信号に基づいて上述した顔候補領域の抽出演算を行うと、図６(ａ)に示すような顔候補領域の抽
出結果が得られる。図６(ａ)において、ハッチングで示す画素２６の領域が抽出された顔候補領域である。
【００２８】
また、人物の顔幅に相当する第２撮像素子１６の画素数ＦaceＷidth（推定顔画素数）
を次式（４）により算出する。
ＦaceＷidth＝ＦwＴyp・ｆ／（Ｄistance・ＳensorＰitch）  ・・・（４）
（４）式において、ＦwＴypは人物の顔幅と推定される長さを設定するための定数（例え
ば１６０ｍｍ）であり、Ｄistanceはレンズ駆動制御装置２２から取得した撮影レンズ８
の撮影距離、ＳensorＰitchは第２撮像素子１６の画素２６のピッチである。なお、この
一実施の形態では、クイックリターンミラー５から結像レンズ１８までの光路において像倍率が変化しないように構成している。
【００２９】
（４）式で算出した推定顔画素数ＦaceＷidth（画素単位）と、条件式（３）により算
出した顔候補領域（画素単位）とを比較し、両者が一致する場合にはそれらの領域を顔領域と判定する。今、（４）式で算出した推定顔画素数ＦaceＷidthが５画素であったとす
ると、図６(ａ)に示す二つの顔候補領域の内、推定顔画素数ＦaceＷidthが５画素でない
図中の右側の２×３画素の領域は、色相が人肌と類似していても顔ではないと判断する。一方、図中の左側の５×５画素の領域は、色相が人肌と類似しており、かつ推定顔画素数ＦaceＷidthの画素数と顔候補領域の画素数が等しい、つまり顔候補領域の横幅と推定顔
幅とが等しいから、顔領域と判定する。図６(ｂ)に抽出結果の顔領域を示す。
【００３０】
図７は一実施の形態の撮影動作を示すフローチャートである。図７により一実施の形態の動作を説明する。操作部材２０のレリーズ半押しスイッチによりシャッターボタンの半押し操作が検出されると、ボディ駆動制御装置１９はこの撮影動作を開始する。ステップ１において、第２撮像素子１６により撮像を行い、各画素２６の画像信号をメモリ１９ｄに記憶する。続くステップ２では、測距素子１０から出力される焦点検出信号に基づいて撮影レンズ８のデフォーカス量を検出する。
【００３１】
ステップ３において、焦点検出結果のデフォーカス量が合焦判定しきい値以内にあって撮影レンズ８が合焦しているか否かを判定する。合焦していないときはステップ４へ進んで上述した背景領域の抽出処理を行い、合焦しているときはステップ５へ進んで上述した顔領域の抽出処理を行う。ここで、背景領域の抽出を行った場合は、背景以外の領域に主要被写体が存在するとし、背景以外の領域を主要被写体領域とする。一方、顔領域の抽出を行った場合は、顔領域を主要被写体領域とする。
【００３２】
ステップ６において、主要被写体領域に対応する焦点検出エリアで焦点調節を行うとともに、主要被写体領域で露出制御を行う。背景領域の抽出を行った場合は、背景領域以外の主要被写体領域に対応する焦点検出エリアの焦点検出結果に基づいて撮影レンズ８の焦点調節を行う。顔領域の抽出を行った場合は、主要被写体領域すなわち顔領域に対応する焦点検出エリアの焦点検出結果に基づいて撮影レンズ８の焦点調節を行う。なお、主要被写体領域に対応する焦点検出エリアが複数個存在する場合は、例えば複数の焦点検出結果の内の最至近の焦点検出結果に基づいて焦点調節を行う。
【００３３】
また、背景領域の抽出を行った場合は、第２撮像素子１６の各画素２６の画像信号の内の、背景領域以外の主要被写体領域に対応する画素２６の画像信号に基づいて露出演算を行い、シャッター速度と絞り値を算出する。一方、顔領域の抽出を行った場合は、第２撮像素子１６の各画素２６の画像信号の内の、主要被写体領域すなわち顔領域に対応する画素２６の画像信号に基づいて露出演算を行い、シャッター速度と絞り値を算出する。
【００３４】
ステップ７で、主要被写体領域に対応する焦点検出エリアで検出されたデフォーカス量
が合焦判定しきい値以内にあって撮影レンズ８が合焦しているか否かを判定し、合焦していないときはステップ９へ進み、シャッターボタンが半押しのままか否かを判別する。シャッターボタンが半押しのままであればステップ１へ戻り、上述した処理を繰り返す。一方、シャッターボタンが開放されているときは撮影動作を終了する。
【００３５】
ステップ７で主要被写体領域の被写体に合焦しているときはステップ８へ進み、操作部材２０のレリーズスイッチによりシャッターレリーズ操作が行われたか否かを判別する。シャッターレリーズ操作がない場合はステップ９へ進み、シャッターボタンの半押し操作の有無に応じて上述した処理を行う。一方、シャッターレリーズ操作が行われたときはステップ１０へ進み、撮影動作を行う。すなわち、絞り２１を露出演算結果の絞り値に設定するとともに、シャッター７を露出演算結果の秒時だけ開放して第１撮像素子４を露光し、第１撮像素子４により撮像を行う。
【００３６】
撮像後のステップ１１で、第１撮像素子４から出力される画像信号に対して周知の画像処理を施し、メモリカードなどの記録媒体（不図示）に記録するとともに、モニター（不図示）に表示する。
【００３７】
このように、一実施の形態によれば、撮影レンズ８の焦点検出結果が合焦と判定されてから、撮像した画像の中から人物の顔領域、すなわち人物の顔に対応する画像の検出を行うようにしたので、撮像画像の中から人物の顔領域を正確に検出することができる。
【００３８】
なお、撮像された画像の中から人物の肌色領域を顔候補領域として検出する顔候補領域検出処理と、撮影距離に基づいて人物の顔幅を推定する顔幅推定処理とを行い、顔候補領域の内の横幅が顔幅と一致する顔候補領域を顔領域とする顔領域検出処理において、焦点検出結果が合焦と判定されるまでは顔候補領域の検出処理を行い、焦点検出結果が合焦と判定されてから顔幅推定処理を行うようにしてもよい。通常、撮影レンズ８が合焦した後は、直ちに第２撮像素子４を露光して撮影を行うのが望ましく、顔候補領域検出処理を合焦と判定されるまでに実行することによって合焦後、速やかに撮影を行うことができ、ピントの合った写真を撮ることができる。
【００３９】
また、上述した一実施の形態では、焦点検出結果が合焦と判定されるまでは背景領域の検出処理、すなわち背景に対応する画像の検出を行い、焦点検出結果が合焦と判定されてから顔領域の検出処理を行う例を示したが、合焦と判定されるまでに実行する処理は背景領域の検出処理に限定されず、顔領域の検出処理と異なる画像判別処理、例えば撮像画像に基づく撮影シーンの判別処理などを行うようにしてもよい。
【００４０】
《発明の一実施の形態の変形例》
上述した一実施の形態では、撮影レンズ８が合焦状態にあれば直ちに顔領域の抽出処理を行う例を示したが、一般に顔領域の抽出処理は背景領域の抽出処理に比べて演算時間が長く、かつまた、撮影画像の全範囲から顔領域の抽出処理を行うと、背景にある人肌の色相と類似した領域を顔領域と誤認するおそれがある。
【００４１】
そこで、この変形例では、図８に示すように、ステップ３で撮影レンズ８が合焦していると判定された場合でも、ステップ５Ａでいったん背景領域の抽出処理を行い、その後にステップ５Ｂで顔領域の抽出処理を行う。ここで、ステップ５Ｂにおける顔領域の抽出処理では、第２撮像素子１６により撮像した画像の内、背景領域の抽出処理で抽出された背景領域を除外し、主要被写体領域に対してのみ顔領域の抽出処理を行う。
【００４２】
これにより、最終的に顔領域を抽出するまでの演算時間を短縮できる上に、主要被写体領域のみを対象にして顔領域の抽出処理を行うので、背景にある人肌の色相と類似した領
域を顔領域と誤認することがなく、顔領域をより正確に抽出できる。
【００４３】
なお、上述した一実施の形態では、焦点検出光学系９と測距素子１０により位相差検出方式の焦点検出を行う例を示したが、撮影レンズ８の焦点調節状態を検出する方法は上述した一実施の形態の方法に限定されず、例えば第１撮像素子４または第２撮像素子１６により撮像された画像に基づいてコントラスト検出方式の焦点検出を行ってもよい。
【００４４】
また、上述した一実施の形態では第２撮像素子１６により撮像された画像に基づいて顔領域と背景領域の検出処理を行う例を示したが、第１撮像素子４により撮像された画像に基づいてそれらの検出処理を実行してもよい。
【００４５】
さらに、画像の中から顔領域と背景領域を検出する方法は上述した一実施の形態の方法に限定されるものではない。
【００４６】
上述した一実施の形態では、本願発明を一眼レフデジタルスチルカメラに適用した一実施の形態とその変形例を説明したが、本願発明は一眼レフデジタルスチルカメラ以外の例えばコンパクトカメラやビデオカメラにも適用することができる。また、上述した一実施の形態では画像追尾機能を備えたカメラに適用した例を説明したが、画像追尾機能のないカメラにも適用できる。
【符号の説明】
【００４７】
８  撮影レンズ
９  焦点検出光学系
１０  測距素子
１６  第２撮像素子
１９  ボディ駆動制御装置
【図１】
0005360191.tif 000002
【図２】
0005360191.tif 000003
【図３】
0005360191.tif 000004
【図４】
0005360191.tif 000005
【図５】
0005360191.tif 000006
【図６】
0005360191.tif 000007
【図７】
0005360191.tif 000008
【図８】
0005360191.tif 000009