(57)【要約】【課題】  人物撮影時に眼に合焦した撮影画像を容易に得られるようにすること。【解決手段】  入射光を光量に応じた電気信号に変換して、画像データを出力する撮像部（１００）と、撮像部からの前記画像データに基づいて、被写体像から顔と眼を検出する顔検出処理部（１０３）と、焦点を合わせるために用いる画像データを抽出する位置及び大きさを示すフォーカス枠を設定し、設定したフォーカス枠内の画像データに基づいて、１以上のフォーカスレンズの合焦点位置を検出するＡＦ制御部（１０４）とを有し、ＡＦ制御部は、前記第１の検出手段により検出された眼にフォーカス枠を設定し、前記顔検出手段により第１、第２の顔が検出された場合に、前記第２の検出手段の検出結果に基づいて、前記第１の顔の右眼と左眼のいずれかと前記第２の顔の右眼と左眼のいずれかの互いに近い合焦位置の眼を選択し、当該選択した眼に前記フォーカス枠を設定し直す。【選択図】  図１
2010217915.tif 000002
【特許請求の範囲】
【請求項１】
入射光を光量に応じた電気信号に変換して、画像データを出力する撮像手段と、
前記撮像手段からの前記画像データに基づいて、被写体像から顔を検出する顔検出手段と、
前記被写体像から眼を検出する第１の検出手段と、
焦点を合わせるために用いる画像データを抽出する位置及び大きさを示すフォーカス枠を設定するフォーカス枠設定手段と、
前記フォーカス枠内の画像データに基づいて、１以上のフォーカスレンズの合焦点位置を検出する第２の検出手段とを有し、
前記フォーカス枠設定手段は、前記第１の検出手段により検出された眼にフォーカス枠を設定し、前記顔検出手段により第１、第２の顔が検出された場合に、前記第２の検出手段の検出結果に基づいて、前記第１の顔の右眼と左眼のいずれかと前記第２の顔の右眼と左眼のいずれかの互いに近い合焦位置の眼を選択し、当該選択した眼に前記フォーカス枠を設定し直すことを特徴とする焦点検出装置。
【請求項２】
撮影に用いる絞り値を決定する絞り決定手段を更に有し、前記絞り決定手段は、前記フォーカス枠設定手段により選択された眼が被写界深度に含まれるように絞り値を決定することを特徴とする請求項１に記載の焦点検出装置。
【請求項３】
前記フォーカス枠設定手段はユーザーインターフェースを含み、前記ユーザーインターフェースを介して入力される情報に応じて前記フォーカス枠を設定することを特徴とする請求項１または２に記載の焦点検出装置。
【請求項４】
前記フォーカス枠設定手段により設定された前記フォーカス枠を表示する表示手段を更に有することを特徴とする請求項１乃至３のいずれか１項に記載の焦点検出装置。
【請求項５】
前記ユーザーインターフェースを介して入力される情報に応じてフォーカス枠を表示する表示手段を更に有することを特徴とする請求項３に記載の焦点検出装置。
【請求項６】
前記フォーカス枠設定手段により複数のフォーカス枠が設定された場合に、前記第２の検出手段は、前記フォーカス枠毎に１以上の合焦点位置を検出することを特徴とする請求項１乃至５のいずれか１項に記載の焦点検出装置。
【請求項７】
入射光を光量に応じた電気信号に変換して、画像データを出力する撮像工程と、
前記撮像工程で得られた前記画像データに基づいて、被写体像から顔を検出する顔検出工程と、
前記被写体像から眼を検出する第１の検出工程と、
焦点を合わせるために用いる画像データを抽出する位置及び大きさを示すフォーカス枠を設定するフォーカス枠設定工程と、
前記フォーカス枠内の画像データに基づいて、１以上のフォーカスレンズの合焦点位置を検出する第２の検出工程とを有し、
前記フォーカス枠設定工程では、前記第１の検出手段により検出された眼にフォーカス枠を設定し、前記顔検出工程で第１、第２の顔が検出された場合に、前記第２の検出工程における検出結果に基づいて、前記第１の顔の右眼と左眼のいずれかと前記第２の顔の右眼と左眼のいずれかの互いに近い合焦点位置の眼を選択し、当該選択した眼に前記フォーカス枠を設定し直すことを特徴とする焦点検出方法。
【請求項８】
コンピュータに、請求項７に記載の焦点検出方法の各工程を実行させるためのプログラム。
【請求項９】
請求項８に記載のプログラムを格納したコンピュータが読み取り可能な記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は焦点調節装置及び焦点調節方法に関し、特に、撮像装置に好適に用いられる焦点調節装置及び焦点調節方法に関する。
【背景技術】
【０００２】
人物撮影を行う場合において、ピントは眼に合わせるのが基本とされている。鼻や頬等の輪郭にピントが合っていても、眼にピントが合っていなければ、撮影した写真はピンぼけの印象を与えてしまう。
【０００３】
従来のフォーカス枠が固定されている撮像装置では、図１２（ａ）に示すような構図の写真を取りたい場合、眼に合焦した撮影を行うためには、図１２（ｂ）のようにあらかじめ決定された枠（フォーカス枠７０）内に眼が来るように画角を変化させ、シャッターを半押し状態にして眼に合焦させ、シャッターの半押し状態を保つことによりその合焦点位置を保持したまま（ＡＦロック）、図１２（ｃ）に示すように撮影したい画角にして撮影を行う。
【０００４】
また、焦点調節をより的確に行うために、図１３（ａ）のように複数のフォーカス枠８０を有する多点測距による焦点調節を行う撮像装置が提案されている。
【０００５】
また、被写体の顔全体にピントが合うように、まず眼に焦点を合わせ、その焦点距離を中心にその前後１０ｃｍが略合焦するように被写界深度を設定する手法が提案されている（特許文献１参照）。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特許第３１６４６９２号
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかし、上述したようにシャッターボタンの半押し状態を保ちながら画角を変更する場合、画角を変更する時にシャッターボタンを誤って離してしまったり、逆に、全押しまで押し込んで所望の画角になる前に撮影されてしまうなどの不都合が生じていた。このような場合、再び合焦調節から始めなければならず、撮影に時間がかかり、シャッターチャンスを逃してしまうこともあった。
【０００８】
また、多点測距に対応した撮像装置においては、主被写体となる人物には合焦するが、人物の眼の位置が測距点（フォーカス枠内）から外れていた場合には、眼に合焦しない場合があった。さらにフォーカス枠の大きさが設定できないため、図１３（ｂ）示すように、複数のフォーカス枠から選択されたフォーカス枠内に眼以外の顔の部位、例えば鼻等が含まれている場合、鼻にピントがあってしまうといった問題があった。
【０００９】
また、特許文献１に記載の手法では、複数の人物が撮影されている場合に、１人にしか焦点が合わず、他の人物がボケてしまうという問題がある。
【００１０】
本発明は上記問題点を鑑みてなされたものであり、人物撮影時に眼に合焦した撮影画像を容易に得られるようにすることを目的とする。
【課題を解決するための手段】
【００１１】
上記問題を解決するために、本発明の焦点検出装置は、入射光を光量に応じた電気信号に変換して、画像データを出力する撮像手段と、前記撮像手段からの前記画像データに基づいて、被写体像から顔を検出する顔検出手段と、前記被写体像から眼を検出する第１の検出手段と、焦点を合わせるために用いる画像データを抽出する位置及び大きさを示すフォーカス枠を設定するフォーカス枠設定手段と、前記フォーカス枠内の画像データに基づいて、１以上のフォーカスレンズの合焦点位置を検出する第２の検出手段とを有し、前記フォーカス枠設定手段は、前記第１の検出手段により検出された眼にフォーカス枠を設定し、前記顔検出手段により第１、第２の顔が検出された場合に、前記第２の検出手段の検出結果に基づいて、前記第１の顔の右眼と左眼のいずれかと前記第２の顔の右眼と左眼のいずれかの互いに近い合焦位置の眼を選択し、当該選択した眼に前記フォーカス枠を設定し直す。
【００１２】
また、本発明の焦点検出方法は、入射光を光量に応じた電気信号に変換して、画像データを出力する撮像工程と、前記撮像工程で得られた前記画像データに基づいて、被写体像から顔を検出する顔検出工程と、前記被写体像から眼を検出する第１の検出工程と、焦点を合わせるために用いる画像データを抽出する位置及び大きさを示すフォーカス枠を設定するフォーカス枠設定工程と、前記フォーカス枠内の画像データに基づいて、１以上のフォーカスレンズの合焦点位置を検出する第２の検出工程とを有し、前記フォーカス枠設定工程では、前記第１の検出手段により検出された眼にフォーカス枠を設定し、前記顔検出工程で第１、第２の顔が検出された場合に、前記第２の検出工程における検出結果に基づいて、前記第１の顔の右眼と左眼のいずれかと前記第２の顔の右眼と左眼のいずれかの互いに近い合焦点位置の眼を選択し、当該選択した眼に前記フォーカス枠を設定し直す。
【発明の効果】
【００１３】
上記構成によれば、人物撮影時に眼に合焦した撮影画像を容易に得ることが可能となる。
【図面の簡単な説明】
【００１４】
【図１】本発明の実施形態１のデジタルカメラの概略構成を示すブロック図である。
【図２】、
【図３】本発明の実施形態１における撮影処理を示すフローチャートである。
【図４】本発明の実施形態１におけるフォーカス枠を説明する図である。
【図５】本発明の実施形態２のデジタルカメラの概略構成を示すブロック図である。
【図６】本発明の実施形態２における撮影処理を示すフローチャートである。
【図７】本発明の実施形態３のデジタルカメラの概略構成を示すブロック図である。
【図８】本発明の実施形態３における撮影処理を示すフローチャートである。
【図９】本発明の実施形態４のデジタルカメラの概略構成を示すブロック図である。
【図１０】本発明の実施形態４における撮影処理を示すフローチャートである。
【図１１】本発明の実施形態４のフォーカス枠の動きを説明する図である。
【図１２】従来のカメラにおけるＡＦロック撮影手順を説明する図である。
【図１３】多点ＡＦでの撮影を説明する図である。
【発明を実施するための形態】
【００１５】
以下、添付図面を参照して本発明を実施するための最良の形態を詳細に説明する。ただし、本形態において例示される構成部品の寸法、形状、それらの相対配置などは、本発明が適用される装置の構成や各種条件により適宜変更されるべきものであり、本発明がそれらの例示に限定されるものではない。
【００１６】
＜実施形態１＞
本発明の実施形態１を以下に説明する。
【００１７】
図１は実施形態１におけるデジタルカメラの簡単な構成を示すブロック図である。
【００１８】
１０１は撮像部であり、レンズ系、絞り、シャッター、CCD、A/D変換器等が含まれ、レンズ系によりCCDに投影された光学像がデジタル信号に変換されて出力される。１０２は露出制御部であり、画面の輝度値の測光、絞り値、シャッタースピード値の決定および、絞りおよびシャッタースピードの設定等の露出にかかわる制御を行う。１０３は顔検出処理部、１０４はＡＦ制御部、１０５はフォーカス枠表示部、１０６は本露光制御部、１０７は本露光撮影されて得られた画像データに対して、例えばホワイトバランス補正、γ補正などの周知の画像処理を行う画像処理部、１０８は画像処理された画像データを所定フォーマットに変換し、不図示の記録媒体に記録するデータ書き込み部である。
【００１９】
次に、本実施形態１における上記構成を有するデジタルカメラの撮影処理について、図２及び図３のフローチャートを参照しながら説明する。
【００２０】
不図示のシャッターボタンの半押しなどにより、撮影の準備が指示されると処理がスタートし、撮像部１０１は、露出制御のための撮影を行う。露出制御部１０２は撮影して得られた画像データを用いて露出制御を行う（ステップＳ１０１）。次にステップＳ１０２において、顔検出処理部１０３はこの露出制御用の画像データを用いて、画面内に人物の顔が存在するかを検出する。
【００２１】
顔検出処理部１０３は、例えば特開２００２−２５１３８０号公報に記載されたような顔検出機能を有している。
【００２２】
まず、露出制御用の画像データの中から輝度情報を用いてエッジを抽出して両目や口といった顔を構成する器官と思われる形状を検出し、それらを包含する周囲の輪郭線を抽出し、顔領域を決定する。決定された顔領域から、輝度情報を用いて更に特徴となる点（以下、「特徴点」と呼ぶ。）を細かく検出する。特徴点からは、両目や鼻などの顔を構成する器官や顔の輪郭などの更に詳細な形状や、座標が求められる。これにより、例えば両目の間隔や、鼻、口、輪郭の形状や、その配置状態情報を得ることができる。
【００２３】
顔が存在する場合（ステップＳ１０３でＹＥＳ）、ステップＳ１０４において顔検出処理部１０３は人物の眼の位置情報、大きさ情報を求める。ステップＳ１０５において、ＡＦ制御部１０４は、顔検出処理部１０３により求められた人物の眼の位置情報および大きさ情報からフォーカス枠を設定し、ステップＳ１０７に進む。なお、この時のフォーカス枠１２０の大きさは、図４に示すように眼の大きさに依存して変化する。また、顔が一つしかなければ右眼または左眼（横向きの場合）または両眼の、１つまたは２つの座標と大きさ情報を、顔が複数Ｎ存在していれば、Ｎ〜Ｎ×２個の座標と大きさ情報を得ることになる。
【００２４】
一方、ステップＳ１０３で顔が検出されなかった場合、ステップＳ１０６で予め決められたフォーカス枠を設定して、ステップＳ１０７に進む。
【００２５】
ステップＳ１０７では、ＡＦ制御部１０４は、撮像部１０１の光学系のフォーカスレンズを再至近に移動する。ステップＳ１０８において、ＡＦ制御部１０４は、そのフォーカスレンズ位置で撮像部１０１により撮影して得られた画像データについて、顔検出処理部１０３により設定された各フォーカス枠内の画像データに対して高周波検出処理を行い、高周波信号を求める。更に、各フォーカス枠それぞれについて求めた高周波信号の加算値（以下、「フォーカス信号」と呼ぶ。）を求める。このステップＳ１０８におけるフォーカス枠毎にフォーカス信号を求める処理を、フォーカスレンズを最至近から無限遠まで（ステップＳ１０９でＹＥＳとなるまで）予め決定されているステップ幅で移動しながら（ステップＳ１１０）行う。
【００２６】
各フォーカス枠それぞれの最至近から無限遠までのフォーカス信号の取得が終了すると、各フォーカス枠それぞれについてフォーカス信号の値が一番大きいものを求め、それを与えるフォーカスレンズのステップ位置を各フォーカス枠の合焦点位置とする（ステップＳ１１１）。すなわち、画面内にフォーカス枠がＭ個存在する場合、Ｍ個の合焦点位置が求められることになる。フォーカス枠の数が１つであれば（図３のステップＳ１１２でＮＯ）、求めたステップ位置をそのまま合焦点位置とすれば良いが、フォーカス枠が複数設定されている場合においては（ステップＳ１１２でＹＥＳ）、各合焦点位置の内、最至近の合焦点位置を最終的な合焦点位置とする（ステップＳ１１３）。
【００２７】
ＡＦ制御部１０４にて決定された最終合焦点位置に対応したフォーカス枠情報はステップＳ１１４でフォーカス枠表示部１０５へと送られ、不図示のディスプレイ上にフォーカス枠が表示される。
【００２８】
ユーザーは、表示されたフォーカス枠から、所望の点に焦点を合わせるように設定されたかどうか、即ち、人物撮影の場合には人物の眼に焦点が合うように設定されたかどうかを確認し、所望の場所であれば（ステップＳ１１５でＹＥＳ）、不図示のシャッターボタンを全押しするなどして撮影を指示し、所望の場所でなければ（ステップＳ１１５でＮＯ）、シャッターボタンを離して撮影を行わずにこの処理を終了する。
【００２９】
フォーカス枠が所望の位置にあれば、ステップＳ１１６に進み、本露光制御部１０６にＡＦ制御部１０４にて求めた最終合焦点位置情報を送り、その合焦点位置までフォーカスレンズを動かし、さらに、絞りおよびメカシャッターを制御して、本露光撮影を行う。
【００３０】
上記の通り本実施形態１によれば、顔検出を行って眼の座標及び大きさを求め、これらに従ってフォーカス枠の大きさ及び位置を設定するため、眼に焦点の合った人物撮影を容易に行うことが可能となる。
【００３１】
＜実施形態２＞
次に、本発明の実施形態２を以下に説明する。
【００３２】
図５は本実施形態２におけるデジタルカメラの簡単な構成を示すブロック図である。図５は、図１に示す構成にブラケット撮影パラメータ決定部２０１を追加した構成であり、その他の構成は図１の構成と同様であるため同じ参照番号を付し、詳細説明は省略する。
【００３３】
以下、本実施形態２における上記構成を有するデジタルカメラの撮影処理について、図６のフローチャートを参照しながら説明する。なお、ステップＳ１０１〜ステップＳ１１１までの処理は、図２を参照して実施形態１で説明した処理と同様であるため、説明を省略する。
【００３４】
ステップＳ１１１までの処理により各フォーカス枠の合焦点位置の検出が済むと、ステップＳ２０１において、ステップＳ１０２で検出された顔の数が１つであるかどうかを判断する。１つの場合、右目の合焦点位置と、左目の合焦点位置が検出されているので、ステップＳ２０２において、これら２つの合焦点位置の中間にあたる合焦点中間位置を求める。ここで左眼の合焦点位置をＦleft、右眼の合焦点位置をＦrightとすると、合焦点中間位置Ｆmiddleは次式（１）により求める。
Ｆmiddle = (Ｆleft + Ｆright)／２      …（１）
【００３５】
ステップＳ２０３では、フォーカス枠表示部１０５には左眼及び右目に対応したフォーカス枠情報（位置と大きさの情報）が送られ、左眼の位置と右眼の位置にフォーカス枠が表示される。
【００３６】
一方、ＡＦ制御部１０４にて求められた左眼の合焦点位置Ｆleftと右眼の合焦点位置Ｆright、両方の合焦点位置の中間にあたる合焦点中間位置Ｆmiddleの３つの合焦点位置情報はブラケット撮影パラメータ決定部２０１へと送られる。ブラケット撮影パラメータ決定部２０１においては３つの合焦点位置が３つとも異なれば３回のフォーカスブラケット撮影が必要と判断して撮影枚数を３枚とし、その３枚の撮影時のフォーカス位置をＦleft、Ｆright、Ｆmiddleに設定する。右眼と左眼の合焦点位置が等しければ１回の撮影だけでよいと判断して撮影枚数を１枚と設定しフォーカス位置をＦleftに設定する（ステップＳ２０４）。
【００３７】
次に、複数の顔が検出されている場合（ステップＳ２０５でＹＥＳ）について説明する。ここでは、説明を分かりやすくするために、２つの顔が検出された場合を具体例として説明するが、３つ以上の場合にも同様の処理が行われる。
【００３８】
ステップＳ１１１までの処理で、ＡＦ制御部１０４によりそれぞれの顔の右眼及び左眼に対応する各フォーカス枠の合焦点位置はすでに検出されている。ここで、一人目の左眼と右眼の合焦点位置をＦ１left及びＦ１right、二人目の左眼と右眼の合焦点位置をＦ２left、Ｆ２rightとする。次に、それぞれの人の左眼と右眼の合焦点位置から互いに近い合焦点位置を選択する（ステップＳ２０６）。ここでは一人目は左眼の合焦点位置Ｆ１left、二人目は右眼の合焦点位置Ｆ２rightが選択されたものとする。合焦点位置Ｆ１left、Ｆ２rightはブラケット撮影パラメータ決定部２０１へと送られる。
【００３９】
一方、ステップＳ２０７において、フォーカス枠表示部１０５にステップＳ２０６で選択された合焦点位置（上述の例では合焦点位置Ｆ１leftとＦ２right）に対応したフォーカス枠情報（位置と大きさの情報）を送り、それぞれの位置にフォーカス枠を表示する。
【００４０】
ステップＳ２０８において、ブラケット撮影パラメータ決定部２０１では、Ｆ１leftとＦ２rightの合焦点位置が異なれば撮影枚数を２枚とし、その２枚の撮影時のフォーカス位置をＦ１left、Ｆ２rightに設定する。
【００４１】
ステップＳ２０９において、ユーザーは、表示されたフォーカス枠から、焦点を合わせる点が所望の点であるかどうか等を確認し、所望の点である場合には（ステップＳ２０９でＹＥＳ）、不図示のシャッターボタンを全押しするなどして撮影を指示し、眼からずれていれば（ステップＳ２０９でＮＯ）、シャッターボタンを離して撮影を行わずにこの処理を終了する。
【００４２】
フォーカス枠が人物の眼にあればステップＳ２１０に進み、ステップＳ２０４またはステップＳ２０８でブラケット撮影パラメータ決定部２０１により決定されたブラケット撮影枚数及びフォーカス位置に従って本露光制御を行い、順次焦点位置を移動しながら撮影を行う。
【００４３】
また、ステップＳ２０５でＮＯ、即ち、顔が検出されなかった場合には、実施形態１で上述した図３のステップＳ１１２以降の処理を行う。
【００４４】
上記のように本実施形態２によれば、顔検出を行って眼の座標及び大きさを求め、それぞれの合焦点位置に基づいてブランケット撮影の撮影枚数及びフォーカス位置を決定するため、眼に焦点の合った人物撮影を容易に行うことが可能となる。
【００４５】
なお、本実施形態２においては、顔が一つしか検出されなかった場合に、左眼と右眼との合焦点位置、及びその中間の合焦点位置の３つの合焦点位置を求め、ブラケット撮影条件（撮影枚数及びフォーカス位置）を決定する場合について説明したが、左眼と右眼の２つの合焦点位置によりブラケット撮影条件を求めるようにしても良い。
【００４６】
また本実施形態２においては、ブラケット撮影パラメータ決定部２０１により同じ合焦点位置があった場合には撮影枚数を減らす処理を行っているが、撮影枚数を減らさずに、ＡＦ制御部１０４により求められた合焦点位置すべてに対応するように撮影を行うようにしても良い。
【００４７】
また、ステップＳ２０３及びステップＳ２０７におけるフォーカス枠表示のタイミングは上述したものに限るものではなく、適宜変更することが可能である。更に、ステップＳ２０７では、ステップＳ２０６で選択された合焦点位置だけではなく、選択前の合焦点位置のフォーカス枠を表示するようにしても良い。
【００４８】
＜実施形態３＞
次に、本発明の実施形態３を以下に説明する。
【００４９】
図７は本実施形態３におけるデジタルカメラの簡単な構成を示すブロック図である。図７は、図１に示す構成にＡｖＴｖ決定部３０１を追加した構成であり、その他の構成は図１の構成と同様であるため同じ参照番号を付し、詳細説明は省略する。
【００５０】
以下、本実施形態３における上記構成を有するデジタルカメラの撮影処理について、図８のフローチャートを参照しながら説明する。なお、ステップＳ１０１〜ステップＳ１１１までの処理は、図２を参照して実施形態１で説明した処理と同様であるため、説明を省略する。
【００５１】
ステップＳ１１１までの処理により各フォーカス枠の合焦点位置の検出が済むと、ステップＳ３０１において、ステップＳ１０２で検出された顔の数が１つであるかどうかを判断する。１つの場合、左眼の合焦点位置をＦleft、右眼の合焦点位置をＦrightとすると、これらの合焦点位置Ｆleft及びＦrightをＡｖＴｖ決定部３０１に送ると共に、ステップＳ３０４に進んでフォーカス枠表示部１０５には左眼及び右目に対応したフォーカス枠情報（位置と大きさの情報）を送り、左眼の位置と右眼の位置にフォーカス枠が表示される。
【００５２】
ステップＳ３０５において、ＡｖＴｖ決定部３０１は、これらの合焦点位置Ｆleft及びＦrightが被写界深度となる絞り値（Ａｖ値）を求め、次にステップＳ３０６で、その絞り値と露出制御部１０２にて求められた測光値とに基づいてシャッタースピード（Ｔｖ値）を決定する。決定されたＡｖ値およびＴｖ値は本露光制御部１０６へと送られる。
【００５３】
次に複数の顔が検出されている場合（ステップＳ３０２でＹＥＳ）について説明する。ここでは、説明を分かりやすくするために、２つの顔が検出された場合を具体例として説明するが、３つ以上の場合にも同様の処理が行われる。
【００５４】
ステップＳ１１１までの処理で、ＡＦ制御部１０４によりそれぞれの顔の右眼及び左眼に対応する各フォーカス枠の合焦点位置はすでに検出されている。ここで、一人目の左眼と右眼の合焦点位置をＦ１left及びＦ１right、二人目の左眼と右眼の合焦点位置をＦ２left、Ｆ２rightとする。次に、それぞれの人の左眼と右眼の合焦点位置から互いに近い合焦点位置を選択する（ステップＳ３０３）。ここでは一人目は左眼の合焦点位置Ｆ１left、二人目は右眼の合焦点位置Ｆ２rightが選択されたものとする。合焦点位置Ｆ１left、Ｆ２rightはＡｖＴｖ決定部３０１へと送られる。
【００５５】
一方、ステップＳ３０４において、フォーカス枠表示部１０５にステップＳ３０３で選択された合焦点位置（上述の例では合焦点位置Ｆ１leftとＦ２right）に対応したフォーカス枠情報（位置と大きさの情報）を送り、それぞれの位置にフォーカス枠を表示する。
【００５６】
ステップＳ３０５において、ＡｖＴｖ決定部３０１は、合焦点位置ｆ１leftとｆ２rightから、すべての合焦点位置が被写界深度内に含まれるような絞り値（Ａｖ値）（例えば、合焦点位置ｆ１leftとｆ２rightで略合焦になると共に、合焦点位置ｆ１leftとｆ２rightを中心に前後方向に所定距離が略合焦になるような絞り値）を求め、次にステップＳ３０６で、その絞り値と露出制御部１０２にて求められた測光値とに基づいてシャッタースピード（Ｔｖ値）を決定する。決定されたＡｖ値およびＴｖ値は本露光制御部１０６へと送られる。
【００５７】
ユーザーは、ステップＳ３０４で表示されたフォーカス枠から、所望の点が焦点が合うように設定されているかどうか、即ち、人物撮影の場合には人物の眼が焦点が合うように設定されているかどうかを確認し、そのように設定されていれば（ステップＳ３０７でＹＥＳ）、不図示のシャッターボタンを全押しするなどして撮影を指示し、そのように設定されていなければ（ステップＳ３０７でＮＯ）、シャッターボタンを離して撮影を行わずにこの処理を終了する。
【００５８】
所望の点が焦点が合うように設定されていれば、ステップＳ３０７に進み、本露光制御部１０６にステップＳ３０５及びＳ３０６で求めた絞りおよびシャッタースピードを設定し、撮影が行われる。
【００５９】
また、ステップＳ３０２でＮＯ、即ち、顔が検出されなかった場合には、実施形態１で上述した図３のステップＳ１１２以降の処理を行う。
【００６０】
上記の通り本実施形態３によれば、被写界深度を考慮することにより、全ての眼に焦点の合った人物撮影を容易に行うことが可能となる。
【００６１】
＜実施形態４＞
次に、本発明の実施形態４を以下に説明する。
【００６２】
図９は本実施形態３におけるデジタルカメラの簡単な構成を示すブロック図である。図９は、図１に示す構成にフォーカス枠選択ＵＩ部４０１を追加した構成であり、その他の構成は図１の構成と同様であるため同じ参照番号を付し、詳細説明は省略する。
【００６３】
以下、本実施形態４における上記構成を有するデジタルカメラの撮影処理について、図１０のフローチャートを参照しながら説明する。なお、ステップＳ１０１〜ステップＳ１１１までの処理は、図２及び図３を参照して実施形態１で説明した処理と同様であるため、説明を省略する。ただし、実施形態１ではステップＳ１０４において、左眼と右眼に対応するフォーカス枠をそれぞれ設定していたが、本実施形態４では、左眼及び右眼を共に含むフォーカス枠を設定する。
【００６４】
本実施形態４の特徴は、複数の顔が検出された場合に（ステップＳ４０１でＹＥＳ）フォーカス枠選択ＵＩ部４０１を用いて行われる処理であり、ここでは説明を簡単にするため、図１１に示すように三人の顔が検出された場合について説明する。便宜上、一人目１１０１の左眼と右眼を含むフォーカス枠１１１１の合焦点位置をｆ1、二人目１１０２の左眼と右眼を含むフォーカス枠１１１２の合焦点位置をｆ２、三人目１１０３の左眼と右眼を含むフォーカス枠１１１３の合焦点位置をｆ３とする。
【００６５】
ステップＳ４０２では、ＡＦ制御部１０４はｆ１、ｆ２、ｆ３を比較し、最至近の合焦点位置を求める。求めた最至近の合焦点位置のフォーカス枠の大きさと座標情報をフォーカス枠表示部１０５に送り、フォーカス枠が表示される。合焦点位置ｆ１が最至近である場合、図１１（ａ）に示すように、フォーカス枠１１０１が表示される。ユーザーはフォーカス枠が合焦させたい人物の眼の部分にあるかどうかを確認し（ステップＳ４０４）、合焦させたい人物の眼の部分にあればそのままシャッターを押して撮影を行うが（ステップＳ４０５）、異なる人に合焦させたい場合には、フォーカス枠選択ＵＩ部４０１により、不図示の左右ボタン等を用いたユーザーインターフェースにより合焦させたい人物にフォーカス枠を移動させる。このときのフォーカス枠は合焦点位置がｆ１、ｆ２、ｆ３の順に近ければ、フォーカス枠選択ＵＩ部４０１の操作に応じて、図１１（ａ）から、（ｂ）、（ｃ）のように順に移動する。
【００６６】
このようにしてフォーカス枠選択ＵＩ部４０１にてユーザーが合焦させたい人物にフォーカス枠が設定し、シャッターを押して撮影が行われる。
【００６７】
また、ステップＳ４０７では検出された顔の数が１であるかどうかを判断し、ＹＥＳならばステップＳ４０３に進み、ＮＯであれば顔が検出されていないので、図３のステップＳ１１２に進んで実施形態１で説明した処理を行う。
【００６８】
上記の通り本実施形態４によれば、複数の顔が検出された場合に、所望の顔の眼に焦点の合った人物撮影を容易に行うことが可能となる。
【００６９】
なお、本実施形態４では画面内に顔が３つ検出された場合を例にとって説明したが、これに限られるものではなく、２人及び５人以上の顔が検出された場合にも同様の動作が可能であることは言うまでもない。
【００７０】
また、上記第４の実施形態では、フォーカス枠選択ＵＩ部４０１の操作に応じて、合焦点位置が近い順にフォーカス枠を移動したが、本発明はこれに限るものでは無く、例えば、合焦点位置が遠い順にフォーカス枠を移動したり、顔検出処理部１０３により検出された顔の大きさの大きい順にフォーカス枠を移動したり、また、画面中心から顔までの距離が短い順にフォーカス枠を移動するなど、様々な応用が考えられる。
【００７１】
＜他の実施形態＞
上記実施形態１〜４では、本発明をデジタルカメラに適用した場合を例にとって説明したが、デジタルカメラに限るものでは無く、フォーカス枠表示部をファインダ内に設けることにより、従来の銀塩カメラにも適用可能である。その場合、撮像部１０１は本撮影に用いるものではなく、露出制御及び／または焦点調節用の画像撮影に用いられる、固体撮像素子からなる２次元イメージセンサを示す。
【００７２】
なお、本発明は、複数の機器（例えばホストコンピュータ、インターフェイス機器、カメラヘッドなど）から構成されるシステムに適用しても、一つの機器からなる装置（例えば、銀塩カメラ、デジタルスチルカメラ、デジタルビデオカメラなど）に適用してもよい。
【００７３】
また、本発明の目的は、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体（または記録媒体）を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵ）が記憶媒体に格納されたプログラムコードを読み出し実行することによっても、達成されることは言うまでもない。この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。また、コンピュータが読み出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼働しているオペレーティングシステム（ＯＳ）などが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。ここでプログラムコードを記憶する記憶媒体としては、例えば、フレキシブルディスク、ハードディスク、ＲＯＭ、ＲＡＭ、磁気テープ、不揮発性のメモリカード、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＤＶＤ、光ディスク、光磁気ディスク、ＭＯなどが考えられる。また、ＬＡＮ（ローカル・エリア・ネットワーク）やＷＡＮ（ワイド・エリア・ネットワーク）などのコンピュータネットワークを、プログラムコードを供給するために用いることができる。
【００７４】
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張カードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込まれた後、そのプログラムコードの指示に基づき、その機能拡張カードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【００７５】
本発明を上記記憶媒体に適用する場合、その記憶媒体には、先に説明した図２および図３、更に、図６、図８、または図１０に示すフローチャートに対応するプログラムコードが格納されることになる。
【符号の説明】
【００７６】
１０１  撮像部
１０２  露出制御部
１０３  顔検出処理部
１０４  ＡＦ制御部
１０５  フォーカス枠表示部
１０６  本露光制御部
１０７  画像処理部
１０８  データ書き込み部
２０１  ブラケット撮影パラメータ設定部
３０１  ＡｖＴｖ決定部
４０１  フォーカス枠選択ＵＩ部
【図１】
2010217915.tif 000003
【図２】
2010217915.tif 000004
【図３】
2010217915.tif 000005
【図４】
2010217915.tif 000006
【図５】
2010217915.tif 000007
【図６】
2010217915.tif 000008
【図７】
2010217915.tif 000009
【図８】
2010217915.tif 000010
【図９】
2010217915.tif 000011
【図１０】
2010217915.tif 000012
【図１１】
2010217915.tif 000013
【図１２】
2010217915.tif 000014
【図１３】
2010217915.tif 000015
【手続補正書】
【提出日】平成22年6月15日(2010.6.15)
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
上記問題を解決するために、本発明の技術的特徴としては、画像データに基づいて被写体像から顔を検出する顔検出手段と、ユーザーからの指示を受け付ける受付手段と、前記顔が複数検出された場合に、前記受付手段が受け付けた指示に応じて、前記複数の顔のいずれかを所定の順番で順に選択する選択手段と、前記選択手段により選択された顔に対して、焦点を合わせるために用いる画像データを抽出する位置及び大きさを示すフォーカス枠と、前記被写体像とを表示部に表示するよう制御する表示制御手段とを備え、前記選択手段は、画面中心からの距離が近い順に顔を選択することを特徴とする。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正の内容】
【００１２】
また、本発明の技術的特徴としては、顔検出手段が、画像データに基づいて被写体像から顔を検出する顔検出工程と、受付手段が、ユーザーからの指示を受け付ける受付工程と、選択手段が、前記顔が複数検出された場合に前記受付工程により受け付けた指示に応じて、前記複数の顔のいずれかを所定の順番で順に選択する選択工程と、表示制御手段が、前記選択工程により選択された顔に対して、焦点を合わせるために用いる画像データを抽出する位置及び大きさを示すフォーカス枠と、前記被写体像とを表示部に表示するよう制御する表示制御工程とを備え、前記選択工程では、画面中心からの距離が近い順に顔を選択することを特徴とする。
【手続補正４】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
画像データに基づいて被写体像から顔を検出する顔検出手段と、
ユーザーからの指示を受け付ける受付手段と、
前記顔が複数検出された場合に、前記受付手段が受け付けた指示に応じて、前記複数の顔のいずれかを所定の順番で順に選択する選択手段と、
前記選択手段により選択された顔に対して、焦点を合わせるために用いる画像データを抽出する位置及び大きさを示すフォーカス枠と、前記被写体像とを表示部に表示するよう制御する表示制御手段とを備え、
前記選択手段は、画面中心からの距離が近い順に顔を選択することを特徴とする撮像装置。
【請求項２】
画像データに基づいて被写体像から顔を検出する顔検出手段と、
ユーザーからの指示を受け付ける受付手段と、
前記顔が複数抽出された場合に、前記受付手段が受け付けた指示に応じて、前記複数の顔のいずれかを所定の順番で順に選択する選択手段と、
前記選択手段により選択された顔に対して、焦点を合わせるために用いる画像データを抽出する位置及び大きさを示すフォーカス枠と、前記被写体像とを表示部に表示するよう制御する表示制御手段とを備え、
前記選択手段は、前記複数の顔のうち合焦点位置が遠い順に顔を選択することを特徴とする撮像装置。
【請求項３】
前記フォーカス枠を設定するフォーカス枠設定手段と、
前記フォーカス枠内の画像データに基づいて、フォーカスレンズの合焦点位置を検出する検出手段とを有することを特徴とする請求項１又は請求項２に記載の撮像装置。
【請求項４】
顔検出手段が、画像データに基づいて被写体像から顔を検出する顔検出工程と、
受付手段が、ユーザーからの指示を受け付ける受付工程と、
選択手段が、前記顔が複数検出された場合に前記受付工程により受け付けた指示に応じて、前記複数の顔のいずれかを所定の順番で順に選択する選択工程と、
表示制御手段が、前記選択工程により選択された顔に対して、焦点を合わせるために用いる画像データを抽出する位置及び大きさを示すフォーカス枠と、前記被写体像とを表示部に表示するよう制御する表示制御工程とを備え、
前記選択工程では、画面中心からの距離が近い順に顔を選択することを特徴とする制御方法。
【請求項５】
顔検出手段が、画像データに基づいて被写体像から顔を検出する顔検出工程と、
受付手段が、ユーザーからの指示を受け付ける受付工程と、
選択手段が、前記顔が複数検出された場合に前記受付工程において受け付けた指示に応じて、前記複数の顔のいずれかを所定の順番で順に選択する選択工程と、
表示制御手段が、前記選択工程により選択された顔に対して、焦点を合わせるために用いる画像データを抽出する位置及び大きさを示すフォーカス枠と、前記被写体像とを表示部に表示するよう制御する表示制御工程とを備え、
前記選択工程は、前記複数の顔のうち合焦点位置が遠い順に顔を選択することを特徴とする制御方法。
【請求項６】
コンピュータに、請求項４又は請求項５に記載の制御方法の各工程を実行させるためのプログラム。
【請求項７】
請求項６に記載のプログラムを格納したコンピュータが読み取り可能な記憶媒体。