(57)【要約】【課題】デジタルカメラ等の撮像装置において、所望の被写体を確実に追跡する。【解決手段】撮像手段５８により取得した被写体の画像データを表示手段１８で表示し、画像データ中の被写体を被写体特定手段６６で特定したのち、特定された被写体を追跡枠表示手段７８により追跡枠で囲む。追跡枠表示手段７８により囲まれた被写体を被写体追跡手段７７で追跡し、撮像条件制御手段８２により追跡枠内の撮像条件を制御する。被写体認証手段８０により、追跡枠内の被写体が被写体特定手段６６により特定された被写体であるか否かを認証する。被写体認証手段８０は被写体追跡手段７７による追跡中に前記認証を繰り返す。【選択図】図１
2008187591.tif 000002
【特許請求の範囲】
【請求項１】
被写体を撮像して画像データを取得する撮像手段と、
該取得された画像データを表示する表示手段と、
前記画像データ中の被写体を特定する被写体特定手段と、
該被写体特定手段により特定された被写体を囲む追跡枠を前記表示手段に表示する追跡枠表示手段と、
該追跡枠表示手段により囲まれた被写体を追跡する被写体追跡手段と、
前記追跡枠内の撮像条件を制御する撮像条件制御手段と、
前記追跡枠内の被写体が前記被写体特定手段により特定された被写体であるか否かを認証する被写体認証手段とを備えてなり、
前記被写体認証手段が、前記被写体追跡手段による追跡中に前記認証を繰り返すものであることを特徴とする撮像装置。
【請求項２】
前記撮像条件が、前記被写体認証手段により認証された被写体の画像データに基づいて制御される、自動露出、自動焦点、自動ホワイトバランス、電子手ブレ補正のいずれか１つ以上の設定値であることを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記撮像手段が、前記撮像条件に基づいて前記被写体認証手段により認証された被写体を本撮像するものであり、
該本撮像によって取得された本画像データに対して画像処理を施す画像処理手段と、
該画像処理手段により前記画像処理が施された本画像データを、前記表示手段に表示させる表示制御手段及び／又は外部記録メディア又は内部メモリに記録する記録手段をさらに備えていることを特徴とする請求項１又は２に記載の撮像装置。
【請求項４】
前記画像処理が、ガンマ補正、シャープネス補正、コントラスト補正、色補正のいずれか１つ以上であることを特徴とする請求項３に記載の撮像装置。
【請求項５】
半押し及び全押しの二段階操作が可能な撮像指示手段と、
撮影視野内に予め設定された固定枠を前記表示手段に表示する固定枠表示手段とをさらに備え、
前記被写体特定手段が、該撮像指示手段の半押し操作により前記固定枠表示手段により表示された固定枠内の被写体を特定するものであることを特徴とする請求項１〜４のいずれか１項に記載の撮像装置。
【請求項６】
前記被写体追跡手段が、前記撮像指示手段の半押し解除操作により前記追跡を中止するものであることを特徴とする請求項５に記載の撮像装置
【請求項７】
前記被写体認証手段が、前記追跡枠表示手段により囲まれた被写体の周囲の特徴点も認証するものであることを特徴とする請求項１〜６のいずれか１項に記載の撮像装置。
【請求項８】
前記被写体特定手段により予め被写体を特定して登録する被写体特定モードを備え、
前記特定が、被写体を２つ以上の角度から撮像することにより取得された２つ以上の画像データに対して行われ、
前記被写体認証手段による認証が、前記２つ以上の画像データに基づいて行われることを特徴とする請求項１〜７のいずれか１項に記載の撮像装置。
【請求項９】
被写体を撮像して画像データを取得する撮像手段と、
該取得された画像データを表示する表示手段と、
前記画像データ中の被写体を特定する被写体特定手段と、
該被写体特定手段により特定された被写体を囲む追跡枠を前記表示手段に表示する追跡枠表示手段と、
該追跡枠表示手段により囲まれた被写体を追跡する被写体追跡手段と、
前記追跡枠内の撮像条件を制御する撮像条件制御手段と、
半押し及び全押しの二段階操作が可能な撮像指示手段と、
撮影視野内に予め設定された固定枠を前記表示手段に表示する固定枠表示手段とを備えてなり、
前記被写体特定手段が、該撮像指示手段の半押し操作により前記固定枠表示手段により表示された固定枠内の被写体を特定するものであることを特徴とする撮像装置。
【請求項１０】
前記被写体追跡手段が、前記撮像指示手段の半押し解除操作により前記追跡を中止するものであることを特徴とする請求項９に記載の撮像装置
【請求項１１】
被写体を撮像して画像データを取得し、
該取得された画像データを表示手段に表示し、
前記画像データ中の被写体を特定し、
該特定された被写体を囲む追跡枠を前記表示手段に表示し、
該追跡枠により囲まれた被写体を追跡し、
該追跡枠内の撮像条件を制御し、
該制御された撮像条件に基づいて撮像する撮像方法であって、
前記追跡中に、前記追跡枠内の被写体が前記特定された被写体であるか否かを繰り返し認証することを特徴とする撮像方法。
【請求項１２】
被写体を撮像して画像データを取得し、
該取得された画像データを表示手段に表示し、
前記画像データ中の被写体を特定し、
該特定された被写体を囲む追跡枠を前記表示手段に表示し、
該追跡枠により囲まれた被写体を追跡し、
該追跡中に、前記追跡枠内の被写体が前記特定された被写体であるか否かを繰り返し認証し、
該認証後に、前記追跡枠内の撮像条件を制御し、
該制御された撮像条件に基づいて撮像することを特徴とする撮像方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、デジタルスチルカメラ等の撮像装置に関し、特に被写体の追跡を行う撮像装置及び撮像方法に関するものである。
【背景技術】
【０００２】
近年、特定の被写体の移動に追従して焦点を合わせることができる被写体追跡機能を備えたデジタルカメラやデジタルビデオカメラ等の撮像装置が提案されている。このような撮像装置としては、画面に表示させた枠内の被写体のうち、もっとも面積が大きい被写体の面積値及びその色を検出することにより、その被写体を前記面積値及びその色を有する被写体として特定し、特定された被写体の動きを検出して、検出された動きに応じて枠を移動させると共に枠内の特定された被写体に焦点が合うようにＡＦ処理を行うものがある（特許文献１）。
【特許文献１】特開平６−２２１９５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、上記のような撮像装置では、被写体の特定に被写体の面積値や色を使用するため、周囲に似たような面積値や色を有する被写体が存在する場合、例えば運動会等で遠くから自分の子供を撮像する場合等に、大勢の子供の中から自分の子供を検出して追跡するのは、自分の子供を誤検出してしまう可能性があるため困難である。
【０００４】
本発明は、かかる事情に鑑みてなされたものであり、所望の被写体を確実に追跡することができる撮像装置及び撮像方法を提供することを目的とするものである。
【課題を解決するための手段】
【０００５】
本発明の撮像装置は、被写体を撮像して画像データを取得する撮像手段と、
該取得された画像データを表示する表示手段と、
前記画像データ中の被写体を特定する被写体特定手段と、
該被写体特定手段により特定された被写体を囲む追跡枠を前記表示手段に表示する追跡枠表示手段と、
該追跡枠表示手段により囲まれた被写体を追跡する被写体追跡手段と、
前記追跡枠内の撮像条件を制御する撮像条件制御手段と、
前記追跡枠内の被写体が前記被写体特定手段により特定された被写体であるか否かを認証する被写体認証手段とを備えてなり、
前記被写体認証手段が、前記被写体追跡手段による追跡中に前記認証を繰り返すものであることを特徴とするものである。
【０００６】
ここで「特定」とは、ユーザが意図した被写体を特定することを意味する。
【０００７】
なお「被写体特定手段」による被写体の特定は、ユーザが意図する被写体を特定できるものなら自動でも手動でもよく、例えば自動の場合には、予め例えば子供の顔を登録しておき、それに基づいて顔認証をする顔認証手段を用いることができるし、一旦完全自動で顔検出させた後、ユーザが確認して例えば実行ボタンを押すなどの操作により特定する半自動としてもよい。手動で行うものとしては、液晶画面等の表示手段に枠を表示し、その枠を画面中の所望の被写体に合わせて実行ボタンを押すなどの操作により被写体を特定することができる。その際、被写体が人物である場合、特定は必ず顔だけとは限らず、例えば洋服の一部や帽子など、顔の近くにある他の特定可能なものを含めて特定することも可能であり、特定するものが多ければそれだけ誤検出を防ぎ、追跡の精度を上げることができる。なお本発明において「認証」とは、個体（個人、個物）を判別することである。
【０００８】
特定の方法としては、特定時に画面中に特定した被写体が認識できるように、例えばレリーズボタンの半押しあるいは特定用のボタンを押すことによりその被写体を枠で示して、特定を間違えたときにはすぐに特定しなおすことができるような方法が好ましい。
【０００９】
本発明の撮像装置において、前記撮像条件は、前記被写体認証手段により認証された被写体の画像データに基づいて制御される、自動露出、自動焦点、自動ホワイトバランス、電子手ブレ補正のいずれか１つ以上の設定値であることであることが好ましい。
【００１０】
また、前記撮像手段が、前記撮像条件に基づいて前記被写体認証手段により認証された被写体を本撮像するものであり、
該本撮像によって取得された本画像データに対して画像処理を施す画像処理手段と、
該画像処理手段により前記画像処理が施された本画像データを、前記表示手段に表示させる表示制御手段及び／又は外部記録メディア又は内部メモリに記録する記録手段をさらに備えていることが好ましい。
【００１１】
また、前記画像処理は、ガンマ補正、シャープネス補正、コントラスト補正、色補正のいずれか１つ以上であることが好ましい。
【００１２】
また、本発明の撮像装置は、半押し及び全押しの二段階操作が可能な撮像指示手段と、
撮影視野内に予め設定された固定枠を前記表示手段に表示する固定枠表示手段とをさらに備え、
前記被写体特定手段が、該撮像指示手段の半押し操作により前記固定枠表示手段により表示された固定枠内の被写体を特定するものであることが好ましい。
【００１３】
また、前記被写体追跡手段は、前記撮像指示手段の半押し解除操作により前記被写体の追跡を中止するものであることが好ましい。
【００１４】
また、前記被写体認証手段は、前記追跡枠表示手段により囲まれた被写体の周囲の特徴点も認証するものであることが好ましい。
【００１５】
また本発明の撮像装置は、前記被写体特定手段により予め被写体を特定して登録する被写体特定モードを備え、前記特定が、被写体を２つ以上の角度から撮像することにより取得された２つ以上の画像データに対して行われ、前記被写体認証手段による前記認証が、前記２つ以上の画像データに基づいて行われるものとすることができる。
【００１６】
また本発明の別の撮像装置は、被写体を撮像して画像データを取得する撮像手段と、
該取得された画像データを表示する表示手段と、
前記画像データ中の被写体を特定する被写体特定手段と、
該被写体特定手段により特定された被写体を囲む追跡枠を前記表示手段に表示する追跡枠表示手段と、
該追跡枠表示手段により囲まれた被写体を追跡する被写体追跡手段と、
前記追跡枠内の撮像条件を制御する撮像条件制御手段と、
半押し及び全押しの二段階操作が可能な撮像指示手段と、
撮影視野内に予め設定された固定枠を前記表示手段に表示する固定枠表示手段とを備えてなり、
前記被写体特定手段が、該撮像指示手段の半押し操作により前記固定枠表示手段により表示された固定枠内の被写体を特定するものであることを特徴とするものである。
【００１７】
また前記被写体追跡手段は、前記撮像指示手段の半押し解除操作により前記被写体の追跡を中止するものであることが好ましい。
【００１８】
また本発明の撮像方法は、被写体を撮像して画像データを取得し、
該取得された画像データを表示手段に表示し、
前記画像データ中の被写体を特定し、
該特定された被写体を囲む追跡枠を前記表示手段に表示し、
該追跡枠により囲まれた被写体を追跡し、
該追跡枠内の撮像条件を制御し、
該制御された撮像条件に基づいて撮像する撮像方法であって、
前記追跡中に、前記追跡枠内の被写体が前記特定された被写体であるか否かを繰り返し認証することを特徴とするものである。
【００１９】
また本発明の撮像方法は、被写体を撮像して画像データを取得し、
該取得された画像データを表示手段に表示し、
前記画像データ中の被写体を特定し、
該特定された被写体を囲む追跡枠を前記表示手段に表示し、
該追跡枠により囲まれた被写体を追跡し、
該追跡中に、前記追跡枠内の被写体が前記特定された被写体であるか否かを繰り返し認証し、
該認証後に、前記追跡枠内の撮像条件を制御し、
該制御された撮像条件に基づいて撮像することを特徴とするものである。
【発明の効果】
【００２０】
本発明の撮像装置及び撮像方法によれば、追跡したい被写体を特定してからその被写体を追跡するので、従来のような誤検出を防ぐことができる。また、被写体の追跡中に、追跡枠内の被写体が特定された被写体であるか否かを繰り返し認証するので、この認証により、特定された被写体の類似被写体が誤追跡されるのを防止することができ、特定された被写体を確実に追跡することができる。これにより予め所望する被写体を特定しておけば、所望する被写体が動いたり移動したりしても、この被写体を確実に追跡することできるので、所望する被写体に対して最適な撮像条件での撮像が可能となる。
【発明を実施するための最良の形態】
【００２１】
以下、本発明の撮像装置の実施の形態を、図面を参照して詳細に説明する。尚、以下の実施の形態では、本発明における撮像装置としてデジタルカメラを例に説明するが、本発明の適用範囲はこれに限定されず、例えば、カメラ付き携帯電話、カメラ付きＰＤＡ等、電子撮像機能を備えた他の電子機器に対しても適用可能である。
【００２２】
図１及び図２は、デジタルカメラの一例を示すものであり、それぞれ背面側及び前面側から見た外観図である。デジタルカメラ１の本体１０の背面には、図１に示す如く、撮像者による操作のためのインターフェースとして、動作モードスイッチ１１、メニュー／ＯＫボタン１２、ズーム／上下レバー１３、左右ボタン１４、Ｂａｃｋ（戻る）ボタン１５、表示切替ボタン１６が設けられ、更に撮影のためのファインダ１７、撮影並びに再生のためのモニタ１８及びレリーズボタン（撮像指示手段）１９が設けられている。
【００２３】
動作モードスイッチ１１は、静止画撮影モード、動画撮影モード、再生モード、の各動作モードを切り替えるためのスライドスイッチである。メニュー／ＯＫボタン１２は、押下される毎に撮影モード、フラッシュ発光モード、被写体追跡モード及び被写体特定モード、セルフタイマーＯＮ／ＯＦＦ、記録画素数や感度等の設定を行うための各種メニューをモニタ１８に表示させたり、モニタ１８に表示されたメニューに基づく選択・設定を決定したりするためのボタンである。
【００２４】
なお被写体追跡モードは、動く被写体を撮像するときに被写体を追跡し、追跡した被写体に対して最適な撮像条件で撮像を行うものであり、このモードが選択されると、後述の枠表示部７８が起動し、モニタ１８に固定枠Ｆ１が表示される。なお固定枠Ｆ１については後で詳細に説明する。
【００２５】
ズーム／上下レバー１３は、上下方向に倒すことによって、撮影時には望遠／広角の調整が行われ、各種設定時にはモニタ１８に表示されるメニュー画面中のカーソルが上下に移動して表示される。左右ボタン１４は、各種設定時にモニタ１８に表示されるメニュー画面中のカーソルを左右に移動して表示させるためのボタンである。
【００２６】
Ｂａｃｋ（戻る）ボタン１５は、押下されることによって各種設定操作を中止し、モニタ１８に１つ前の画面を表示するためのボタンである。表示切替ボタン１６は、押下することによってモニタ１８の表示のＯＮ／ＯＦＦ、各種ガイド表示、文字表示のＯＮ／ＯＦＦ等を切り替えるためのボタンである。ファインダ１７は、ユーザが被写体を撮像する際に構図やピントを合わせるために覗くためのものである。ファインダ１７から見える被写体像は、本体１０の前面にあるファインダ窓２３を介して映し出される。
【００２７】
レリーズボタン１９は、半押し及び全押しの二段階操作が可能な操作ボタンであり、レリーズボタン１９を押下すると、後述の操作系制御部７４を介して半押し信号又は全押し信号をＣＰＵ７５へ出力する。
【００２８】
以上説明した各ボタンやレバー等の操作によって設定された内容は、モニタ１８中の表示や、ファインダ１７内のランプ、スライドレバーの位置等によって確認可能となっている。また、モニタ１８には、撮影の際に被写体確認用のスルー画像が表示される。これにより、モニタ１８は電子ビューファインダとして機能する他、撮影後の静止画や動画の再生表示、各種設定メニューの表示を行う。ユーザによってレリーズボタン１９が半押し操作されると、後述するＡＥ処理及びＡＥ処理が行われ、レリーズボタン１９が全押し操作されると、ＡＥ処理及びＡＥ処理によって出力されたデータに基づいて撮像が行われ、モニタ１８に表示された画像が撮影画像として記録される。
【００２９】
更に、本体１０の前面には、図２に示す如く、撮影レンズ２０、レンズカバー２１、電源スイッチ２２、ファインダ窓２３、フラッシュライト２４及びセルフタイマーランプ２５が設けられ、側面にはメディアスロット２６が設けられている。
【００３０】
撮影レンズ２０は、被写体像を所定の結像面上（本体１０内部にあるＣＣＤ等）に結像させるためのものであり、フォーカスレンズやズームレンズ等によって構成される。レンズカバー２１は、デジタルカメラ１の電源がオフ状態のとき、再生モードであるとき等に撮影レンズ２０の表面を覆い、汚れやゴミ等から撮影レンズ２０を保護するものである。
【００３１】
電源スイッチ２２は、デジタルカメラ１の電源のオン／オフを切り替えるためのスイッチである。フラッシュライト２４は、レリーズボタン１９が押下され、本体１０の内部にあるシャッタが開いている間に、撮像に必要な光を被写体に対して瞬間的に照射するためのものである。セルフタイマーランプ２５は、セルフタイマーによって撮像する際に、シャッタの開閉タイミングすなわち露光の開始及び終了を被写体に知らせるためものである。メディアスロット２６は、メモリカード等の外部記録メディア７０が充填されるための充填口であり、外部記録メディア７０が充填されると、データの読み取り／書き込みが行われる。
【００３２】
図３にデジタルカメラ１の機能構成を示すブロック図を示す。図３に示す如く、デジタルカメラ１の操作系として、前述の動作モードスイッチ１１、メニュー／ＯＫボタン１２、ズーム／上下レバー１３、左右ボタン１４、Ｂａｃｋ（戻り）ボタン１５、表示切替ボタン１６、レリーズボタン１９、電源スイッチ２２と、これらのスイッチ、ボタン、レバー類の操作内容をＣＰＵ７５に伝えるためのインターフェースである操作系制御部７４が設けられている。
【００３３】
また、撮影レンズ２０を構成するものとして、フォーカスレンズ２０ａ及びズームレンズ２０ｂが設けられている。これらの各レンズは、モータとモータドライバからなるフォーカスレンズ駆動部５１、ズームレンズ駆動部５２によってステップ駆動され、光軸方向に移動可能な構成となっている。フォーカスレンズ駆動部５１は、ＡＦ処理部６２から出力されるフォーカス駆動量データに基づいてフォーカスレンズ２０ａをステップ駆動する。ズームレンズ駆動部５２は、ズーム／上下レバー１３の操作量データに基づいてズームレンズ２０ｂのステップ駆動を制御する。
【００３４】
絞り５４は、モータとモータドライバとからなる絞り駆動部５５によって駆動される。この絞り駆動部５５は、ＡＥ／ＡＷＢ（オートホワイトバランス）処理部６３から出力される絞り値データに基づいて絞り５４の絞り径の調整を行う。
【００３５】
シャッタ５６は、メカニカルシャッタであり、モータとモータドライバとからなるシャッタ駆動部５７によって駆動される。シャッタ駆動部５７は、レリーズボタン１９の押下信号と、ＡＥ／ＡＷＢ処理部６３から出力されるシャッタ速度データとに応じてシャッタ５６の開閉の制御を行う。
【００３６】
上記光学系の後方には、撮像素子であるＣＣＤ（撮像手段）５８を有している。ＣＣＤ５８は、多数の受光素子がマトリクス状に配置されてなる光電面を有しており、光学系を通過した被写体像が光電面に結像され、光電変換される。光電面の前方には、各画素に光を集光させるためのマイクロレンズアレイ（不図示）と、ＲＧＢ各色のフィルタが規則的に配列されてなるカラーフィルタアレイ（不図示）とが配置されている。ＣＣＤ５８は、ＣＣＤ制御部５９から供給される垂直転送クロック信号及び水平転送クロック信号に同期して、画素毎に蓄積された電荷を１ラインずつ読み出して画像信号として出力する。各画素における電荷の蓄積時間（即ち露出時間）は、ＣＣＤ制御部５９から与えられる電子シャッタ駆動信号によって決定される。
【００３７】
ＣＣＤ５８が出力する画像像信号は、アナログ信号処理部６０に入力される。このアナログ信号処理部６０は、画像信号のノイズ除去を行う相関２重サンプリング回路（ＣＤＳ）と、画像信号のゲイン調整を行うオートゲインコントローラ（ＡＧＣ）と、画像信号をデジタル画像データに変換するＡ／Ｄコンバータ（ＡＤＣ）とからなる。そしてデジタル画像データは、画素毎にＲＧＢの濃度値を持つＣＣＤ−ＲＡＷデータである。
【００３８】
タイミングジェネレータ７２は、タイミング信号を発生させるものであり、このタイミング信号がシャッタ駆動部５７、ＣＣＤ制御部５９、アナログ信号処理部６０に入力されて、レリーズボタン１９の操作と、シャッタ５６の開閉、ＣＣＤ５８の電荷取り込み、アナログ信号処理６０の処理の同期が取られる。フラッシュ制御部７３は、フラッシュライト２４の発光動作を制御する。
【００３９】
画像入力コントローラ６１は、上記アナログ信号処理部６０から入力されたＣＣＤ−ＲＡＷデータをフレームメモリ６８に書き込む。このフレームメモリ６８は、画像データに対して後述の各種デジタル画像処理（信号処理）を行う際に使用する作業用メモリであり、例えば、一定周期のバスクロック信号に同期してデータ転送を行うＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）から構成されている。
【００４０】
表示制御部（表示制御手段）７１は、フレームメモリ６８に格納された画像データをスルー画像としてモニタ１８に表示させるためのものであり、例えば、輝度（Ｙ）信号と色（Ｃ）信号を一緒にして１つの信号としたコンポジット信号に変換して、モニタ１８に出力する。スルー画像は、撮像モードが選択されている間、所定時間間隔で取得されてモニタ１８に表示される。また、表示制御部７１は、外部記録メディア７０に記憶され、メディア制御部６９によって読み出された画像ファイルに含まれる画像データに基づいた画像をモニタ１８に表示させる。
【００４１】
枠表示部（固定枠表示手段、追跡枠表示手段）７８は、表示制御部７１を介してモニタ１８に所定の大きさの枠を表示させるものである。ここで図４にモニタ１８の表示の一実施例を示す。枠表示部７８は、図４（ａ）に示す如く、モニタ１８の略中央に固定される固定枠Ｆ１、及び、図４（ｂ）に示す如く、後述の被写体特定部６６によって特定された被写体を囲む追跡枠Ｆ２を表示させる。追跡枠Ｆ２は、この特定された被写体の動きに追従して動いて表示され、例えば人物が遠方へ移動したときには、顔の大きさに合わせて枠は小さく表示され、近方へ移動したときには枠は大きく表示されるようにしてもよい。なお人物の顔までの距離は、例えば図示しない測距センサを使用して検出してもよいし、後述の特徴点検出部７９により検出される目の位置から左右の目の間の距離を算出することにより計算してもよい。
【００４２】
特徴点検出部７９は、上述の固定枠Ｆ１又は追跡枠Ｆ２内の被写体画像から特徴点を検出するものであり、固定枠Ｆ１又は追跡枠Ｆ２内の被写体が人物である場合には、例えば目の位置等を顔の特徴点として検出する。なお「特徴点」は個体（個人、個物）によってそれぞれ異なる特徴を持つ。特徴点記憶部６７は、この特徴点検出部７９によって検出された特徴点を記憶する。
【００４３】
被写体特定部（被写体特定手段）６６は、モニタ１８に表示される画像中又はファインダ１７から見える被写体像中、すなわち撮影視野内の被写体からユーザが意図した被写体を特定するものであり、図４（ａ）に示す如く、モニタ１８に表示した固定枠Ｆ１に所望の被写体（本実施形態では人物の顔とする）が入るようにユーザによって画角が調整されてレリーズボタン１９が半押しされることで、すなわちユーザの手動によって被写体の特定が行われる。
【００４４】
なお特徴点検出部７９により固定枠Ｆ１内の被写体から検出された特徴点が、後述の顔認証部８０により照合可能な精度である場合に、上述の被写体特定部６６による被写体の特定が成功したとみなす。
【００４５】
被写体追跡部（被写体追跡手段）７７は、枠表示部７８によって表示された追跡枠Ｆ２に囲まれた被写体、すなわち本実施形態では追跡枠Ｆ２内の人物の顔を追跡するものである。顔の追跡は、動きベクトル、特徴点検出等の公知の手法、例えばTomasi, Kanade, “Shape and Motion from Image Streams: a Factorization Method Part 3, Detection and Tracking of Point Features”, Technical Report CMU-CS-91-132 (1991)に記載の特徴点検出の手法等を用いて行い、追跡枠Ｆ２内の顔の移動位置を常時追跡する。
【００４６】
顔認証部（被写体認証手段）８０は、特徴点検出部７９により検出された特徴点と、特徴点記憶部６７に記憶された特徴点とを照合することにより顔を認証するものである。なお顔認証部８０による顔認証は、例えば特開２００５−８４９７９号公報に記載の手法を使用することができる。
【００４７】
ＡＦ処理部６２およびＡＥ／ＡＷＢ処理部６３は、プレ画像に基づいて撮像条件を決定する。このプレ画像とは、レリーズボタン１９が半押しされることによって発生する半押し信号を検出したＣＰＵ７５がＣＣＤ５８にプレ撮像を実行させた結果、フレームメモリ６８に格納された画像データに基づいた画像である。
【００４８】
ＡＦ処理部６２は、枠表示部７８によって表示された固定枠Ｆ１内又は追跡枠Ｆ２内に対して焦点位置を検出し、フォーカスレンズ駆動量データを出力する（ＡＦ処理）。本実施の形態においては、焦点位置の検出方法としては、例えば、ピントが合った状態では画像の合焦評価値（コントラスト値）が高くなるという特徴を利用して、合焦位置を検出するパッシブ方式が適用される。なお図示しない測距センサによる測距結果を使用するアクティブ方式を適用してもよい。
【００４９】
ＡＥ／ＡＷＢ処理部６３は、枠表示部７８によって表示された固定枠Ｆ１内又は追跡枠Ｆ２内に対して被写体輝度を測定し、測定した被写体輝度に基づいて絞り値やシャッタ速度等を決定し、絞り値データやシャッタ速度データを出力すると共に（ＡＥ処理）、撮像時のホワイトバランスを自動調整する（ＡＷＢ処理）。
【００５０】
画像処理部（画像処理手段）６４は、本画像の画像データに対してガンマ補正、シャープネス補正、コントラスト補正、色補正等の画質補正処理を施すと共に、ＣＣＤ−ＲＡＷデータを輝度信号であるＹデータと、青色色差信号であるＣｂデータ及び赤色色差信号であるＣｒデータとからなるＹＣデータに変換するＹＣ処理を行う。この本画像とは、レリーズボタン１９が全押しされることによってＣＣＤ５８から画像信号が出力され、アナログ信号処理部６０、画像入力コントローラ６１経由でフレームメモリ６８に格納された画像データに基づいた画像である。
【００５１】
本画像の画素数の上限はＣＣＤ５８の画素数によって決定されるが、例えば、ユーザが設定可能な画質設定（ファイン、ノーマル等の設定）により、記録画素数を変更することができる。一方、スルー画像やプレ画像の画素数は本画像より少なくてもよく、例えば、本画像の１／１６程度の画素数で取り込まれてもよい。
【００５２】
手ブレ補正処理部８３は、撮像時に手ブレを起こすことで生じる撮像画像のブレを自動的に補正するものであり、上述した固定枠Ｆ１又は追跡枠Ｆ２の変動が小さくなる方向へ撮影レンズ２０やＣＣＤ５８すなわち撮影視野を光軸と直交する面内で平行移動することにより行う。
【００５３】
撮像条件制御部（撮像条件制御手段）８２は、固定枠Ｆ１内又は追跡枠Ｆ２内の撮像条件が常に最適となるように上述のＡＦ処理部６２による自動露出、ＡＥ／ＡＷＢ処理部６３による自動焦点及び／又はホワイトバランス、手ブレ補正処理部８３による電子手ブレ補正のいずれか１つ以上の設定値を制御するものである。なお撮像条件制御部８２はＣＰＵ７５の機能の一部とすることができる。
【００５４】
圧縮／伸長処理部６７は、画像処理部６４によって画質補正等の処理が行われた画像データに対して、例えばＪＰＥＧ等の圧縮形式で圧縮処理を行って、画像ファイルを生成する。この画像ファイルには、各種データ形式に基づいて付帯情報が付加される。またこの圧縮／伸長処理部６７は、再生モードにおいては外部記録メディア７０から圧縮された画像ファイルを読み出し、伸長処理を行う。伸長後の画像データは表示制御部７１に出力され、表示制御部７１は画像データに基づいた画像をモニタ１８に表示する。
【００５５】
メディア制御部（記録手段）６９は、図２におけるメディアスロット２６に相当し、外部記録メディア７０に記憶された画像ファイル等の読み出し、又は画像ファイルの書き込みを行う。ＣＰＵ７５は、各種ボタン、レバー、スイッチの操作や各機能ブロックからの信号に応じて、デジタルカメラ１の本体各部を制御する。またＣＰＵ７５は図示しない内部メモリに画像ファイルを記録する記録手段としても機能する。
【００５６】
またデータバス７６は、画像入力コントローラ６１、各種処理部６２〜６５、８３、被写体特定部６６、特徴点記憶部６７、フレームメモリ６８、各種制御部６９、７１、８２、被写体追跡部７７、枠表示部７８、特徴点検出部７９、顔認証部８０、及びＣＰＵ７５に接続されており、このデータバス７６を介して各種信号、データの送受信が行われる。
【００５７】
次に、以上の構成のデジタルカメラ１において撮影時に行われる処理について説明する。図５はデジタルカメラ１の一連の処理のフローチャートである。まず図５Ａに示す如く、ＣＰＵ７５は、動作モードスイッチ１１の設定に従って、動作モードが被写体追跡モードであるか再生モードであるか判別する（ステップＳ１）。再生モードの場合（ステップＳ１；再生）、再生処理が行われる（ステップＳ２）。この再生処理は、メディア制御部６９が外部記録メディア７０に記憶された画像ファイルを読み出し、画像ファイルに含まれる画像データに基づいた画像をモニタ１８に表示させるための処理である。再生処理が終了したら、図５Ｂに示す如く、ＣＰＵ７５はデジタルカメラ１の電源スイッチ２２によってオフ操作がなされたか否かを判別し（ステップＳ２６）、オフ操作がなされていたら（ステップＳ２６；ＹＥＳ）、デジタルカメラ１の電源をオフし、処理を終了する。オフ操作がなされていなかったら（ステップＳ２６；ＮＯ）、図５Ａに示す如く、ステップＳ１へ処理を移行する。
【００５８】
一方、ステップＳ１において動作モードが被写体追跡モードであると判別された場合（ステップＳ１；被写体追跡）、表示制御部７１はスルー画像の表示制御を行う（ステップＳ３）。スルー画像の表示とは、フレームメモリ６８に格納された画像データモニタ１８に表示する処理である。次に、枠表示部７８が、図４（ａ）に示す如く、モニタ１８に固定枠Ｆ１を表示する（ステップＳ４）。
【００５９】
モニタ１８に固定枠Ｆ１が表示される（ステップＳ４）と、ユーザが、図４（ａ）に示す如く、固定枠Ｆ１の中に所望する人物の顔が入るように画角を調整し、レリーズボタン１９を半押しすることによって意図する被写体を特定する（ステップＳ５）。このようにレリーズボタン１９の半押し操作と連動して被写体の特定を行うことにより、撮影を指示する（レリーズボタン１９の全押し操作）操作ボタンと同じ操作部を使用して被写体の特定を行うことができ、時間的余裕がない撮影時においても、被写体の特定と撮像指示とを円滑に素早く操作できるので、撮影のタイミングを逃し難くすることができる。
【００６０】
そしてＣＰＵ７５はレリーズボタン１９が半押しされたか否かを判別し（ステップＳ６）、レリーズボタン１９が半押しされていない場合（ステップＳ６；ＮＯ）には、ユーザは意図する被写体を特定していないので、ＣＰＵ７５は処理をステップＳ５へ移行し、ユーザによりレリーズボタン１９が半押しされて意図する被写体が特定されるまでステップＳ５以降の処理を繰り返す。
【００６１】
一方、ステップＳ６にてレリーズボタン１９が半押しされている場合（ステップＳ６；ＹＥＳ）には、ＣＰＵ７５は意図する被写体すなわち所望する人物の顔が特定されたと判断して、特徴点検出部７９が固定枠Ｆ１内の特定された顔から目の位置等の特徴点を検出する（ステップＳ７）。
【００６２】
そしてＣＰＵ７５は、検出された特徴点が上述の説明のように照合可能な精度か否かを判別し（ステップＳ８）、照合不可能な精度であるときに、被写体の特定が失敗したと判断して（ステップＳ９；ＮＯ）、例えば警告音を鳴らしたりモニタ１８に警告表示したりすることにより、被写体の特定が失敗したことをユーザに警告し（ステップＳ１０）、ＣＰＵ７５は処理をステップＳ５へ移行して、ユーザにより再度被写体が特定されるのを待つ。
【００６３】
一方、ステップＳ９にて被写体の特定が成功すると（ステップＳ９；ＹＥＳ）、ＣＰＵ７５が検出された特徴点を特徴点記憶部６７へ記憶させるとともに（ステップＳ１１）、枠表示部７８が、特定された人物の顔を囲む追跡枠Ｆ２を表示する（ステップＳ１２）。この追従枠Ｆ２がモニタ１８に表示されると、モニタ１８に表示された固定枠Ｆ１は枠表示部７８により非表示にされる。なおこの固定枠Ｆ１を引き続き追従枠Ｆ２として機能させてもよい。
【００６４】
次にＣＰＵ７５は、レリーズボタン１９が半押し解除されたか否かを判別し（ステップＳ１３）、レリーズボタン１９が半押し解除されたと判別すると（ステップＳ１３；ＹＥＳ）、ユーザが被写体の特定を間違えたと判断して処理をステップＳ４へ処理を移行し、モニタ１８に固定枠Ｆ１を表示し、ユーザにより被写体の特定がやり直されるのを待つ。このように被写体特定の成功後に、モニタ１８に特定した被写体を囲む追跡枠Ｆ２を表示させることにより、ユーザは自分が特定した被写体を認識できるので、被写体の特定を間違えたときには、例えば上記のようにレリーズボタン１９の半押しを解除することによってすぐに被写体を特定し直すことができる。
【００６５】
一方、ステップＳ１３にてＣＰＵ７５が、レリーズボタン１９が半押し解除されていないと判別すると（ステップＳ１３；ＮＯ）、図５Ｂ、図４（ｂ）に示す如く、被写体追跡部７７が追跡枠Ｆ２により囲まれた人物の顔の追跡を開始する（ステップＳ１４）。そして被写体追跡部７７による顔の追跡中、特定の周期で、特徴点検出部７９が追跡枠Ｆ２内の追跡されている人物の顔の目の位置等の特徴点を検出し（ステップＳ１５）、顔認証部８０がこの検出された特徴点と、特徴点記憶部６７に記憶された特徴点とを照合することにより、追跡枠Ｆ２内の人物がステップＳ５にて特定された人物であるか否かを顔認証する（ステップＳ１６）。
【００６６】
そして顔認証が成功し、追跡枠Ｆ２内の人物が特定された人物であると認証されると（ステップＳ１７；ＹＥＳ）、撮像撮像条件制御部８２が、追跡枠Ｆ内の撮像条件が常に最適となるように撮像条件を制御する（ステップＳ１８）。次にＣＰＵ７５はレリーズボタン１９が半押し解除されたか否かを判別し（ステップＳ１９）、レリーズボタン１９が半押し解除されたと判別すると（ステップＳ１９；ＹＥＳ）、ユーザが現在の追跡状態に不満があると判断し、被写体追跡部７７が人物の追跡を中止して（ステップＳ２０）、図５Ａに示す如く、ＣＰＵ７５は処理をステップＳ４へ処理を移行し、被写体が再度特定されるのを待機する。このようにレリーズボタン１９の半押し解除操作と連動して人物の追跡を中止することにより、追跡を中止する操作ボタンと被写体を特定する（レリーズボタン１９の半押し操作）操作ボタンとが、同じ操作ボタンを使用するので、次回の被写体特定を円滑に素早く行うことができる。
【００６７】
一方、図５Ｂに示す如く、ステップＳ１９にてＣＰＵ７５が、レリーズボタン１９が半押し解除されていないと判別すると（ステップＳ１９；ＮＯ）、レリーズボタン１９の半押しが解除されるまで、被写体追跡部７７は人物の追跡を継続し、撮像条件制御部８２は追跡枠Ｆ２内の撮像条件を上記と同様に制御する。なお人物の追跡中に、特徴点検出部７９は、特定の周期で追跡枠Ｆ２内の人物の顔から特徴点を検出し、検出された特徴点に基づいて顔認証部８０が顔認証を行う。すなわちステップＳ１５からステップＳ１７までの処理を繰り返し行う。
【００６８】
そしてＣＰＵ７５は、レリーズボタン１９の半押しが解除されていないと判別した後（ステップＳ１９；ＮＯ）、続いてレリーズボタン１９が全押しされたか否かを判別する（ステップＳ２１）。ＣＰＵ７５は、レリーズボタン１９が全押しされたと判別すると（ステップＳ２１；ＹＥＳ）、ユーザが現在の追跡状態での撮像を許可したと判断して、撮像条件制御部８２が、追跡枠Ｆ２内の撮像条件を上記と同様に制御し（ステップＳ２２）、ＣＣＤ５８が本撮像を行う（ステップＳ２３）。
【００６９】
一方、ステップＳ１７にて顔認証が失敗し、追跡枠Ｆ２内の人物が特定された人物ではないと認証されると（ステップＳ１７；ＮＯ）、被写体追跡部７７は、人物の追跡を中止し（ステップＳ２７）、モニタ１８に表示された追跡枠Ｆ２は枠表示部７８により非表示にされる。
【００７０】
そして枠表示部７８は、モニタ１８の略中央に固定枠Ｆ１を表示して（ステップＳ２８）、撮像条件制御部８２がこの固定枠Ｆ１内の撮像条件が常に最適となるように撮像条件を制御する（ステップＳ２９）。次にＣＰＵ７５が、レリーズボタン１９が半押し解除されたか否かを判別し（ステップＳ３０）、半押し解除されたと判別すると（ステップＳ３０；ＹＥＳ）、ユーザが固定枠Ｆ１内に対して決定された撮像条件での撮像に不満があると判断して、図５Ａに示す如く、ＣＰＵ７５は処理をステップＳ５へ処理を移行して、被写体の特定を再度行う。
【００７１】
またステップＳ３０にて、ＣＰＵ７５が、レリーズボタン１９が半押し解除されていないと判別すると（ステップＳ３０；ＮＯ）、続いてレリーズボタン１９が全押しされたか否かを判別する（ステップＳ３１）。そしてレリーズボタン１９が全押しされていないと判別すると（ステップＳ３１；ＮＯ）、ＣＰＵ７５は処理をステップＳ２９へ移行し、以降の処理を繰り返す。またステップＳ３１にてＣＰＵ７５が、レリーズボタン１９が全押しされたと判別すると（ステップＳ３１；ＹＥＳ）、ユーザが固定枠Ｆ１内に対して決定された撮像条件での撮像を許可したと判断して、撮像条件制御部８２が、固定枠Ｆ１内の撮像条件を上記と同様に制御し（ステップＳ２２）、ＣＣＤ５８が本撮像を行う（ステップＳ２３）。
【００７２】
そしてステップＳ２３にて、本撮像が行われると（ステップＳ２３）、本撮像により取得された本画像に対して画像処理部６４が画像処理を施す（ステップＳ２４）。なおこのとき画像処理が施された本画像データに対してさらに圧縮／伸長処理部６７によって圧縮処理が施されて画像ファイルが生成されてもよい。
【００７３】
次にＣＰＵ７５は、画像処理が施された本画像をモニタ１８に表示する処理を行うともに外部記録メディア７０に記録する（ステップ２５）。そしてＣＰＵ７５は電源スイッチ２２がオフ操作されたか否かを判別し（ステップＳ２６）、オフ操作がなされていたら（ステップＳ２６；ＹＥＳ）、デジタルカメラ１の電源をオフし、処理を終了する。オフ操作がなされていなかったら（ステップＳ２６；ＮＯ）、図５Ａに示す如く、ＣＰＵ７５は、ステップＳ１へ処理を移行し、ステップＳ１以降の処理を繰り返す。このようにしてデジタルカメラ１による撮像は行われる。
【００７４】
上記のようなデジタルカメラ１及びデジタルカメラ１を使用した撮像方法によれば、追跡したい被写体を特定してからその被写体を追跡するので、従来のような誤検出を防ぐことができる。また、被写体の追跡中に、追跡枠Ｆ２内の被写体が特定された被写体であるか否かを繰り返し認証するので、この認証により、特定された被写体の類似被写体が誤追跡されるのを防止することができ、特定された被写体を確実に追跡することができる。これにより予め所望する被写体を特定しておけば、所望する被写体が動いたり移動したりしても、この被写体を確実に追跡することできるので、所望する被写体に対して最適な撮像条件での撮像が可能となる。
【００７５】
次に本発明にかかる第二の実施形態の撮像装置としてのデジタルカメラ１−２について図面を参照して詳細に説明する。本実施形態のデジタルカメラ１−２は、上記実施形態のデジタルカメラ１と略同様の構成であるため説明は省略し、異なる箇所についてのみ説明する。本実施形態のデジタルカメラ１−２が、上記実施形態のデジタルカメラ１と異なるのは、顔認証部８０が追跡枠Ｆ２により囲まれた人物の顔の周囲の特徴点も認証する点である。
【００７６】
すなわち本実施形態のデジタルカメラ１−２では、被写体特定部６６が、固定枠Ｆ１内の人物の顔を特定するときに、固定枠Ｆ２の周囲の被写体も合わせて特定する。そして特徴点検出部７９が固定枠Ｆ１内の顔の特徴点に加えて、固定枠Ｆ１の周囲の特徴点（形状、顔や固定枠Ｆ１との位置関係等）も検出し、特徴点記憶部６７に合わせて記憶させる。そして追跡枠Ｆ２内の被写体画像から特徴点を検出するときにも同様に追跡枠Ｆ２の周囲の特徴点も検出し、顔認証部８０が顔認証するときに、この追跡枠Ｆ２の周囲の特徴点と、特徴点記憶部６７に記憶された固定枠Ｆ１の周囲の特徴点も顔と合わせて認証する。
【００７７】
ここで図６に本実施形態のデジタルカメラ１−２のモニタ１８の表示の一実施例を示す。図６に示す如く、例えば、子供の運動会等で、子供達がゼッケン番号を付けている場合には、子供の顔の下方に、ゼッケン等を含む服装が含まれる可能性が高いので、固定枠Ｆ１及び追跡枠Ｆ２の下方領域を大きく形成した、図中破線で示す固定周辺枠Ｆ１’、追跡周辺枠Ｆ２’を設定し、特徴点検出部７９はこの固定周辺枠Ｆ１’、追跡周辺枠Ｆ２’内から周囲の特徴点として例えばゼッケン番号等を検出し、顔認証部８０が子供の追跡中に顔認証する際に、ゼッケン番号も顔と合わせて認証する。なお番号の認証方法は、一般的なＯＣＲ技術を使用することができる。
【００７８】
なお固定周辺枠Ｆ１’及び追跡周辺枠Ｆ２’の形状は、例えば帽子等にゼッケン番号をつけている場合や、帽子の色等に特徴がある場合等には、固定枠Ｆ１及び追跡枠Ｆ２の上方領域を大きく形成してもよい。このとき固定周辺枠Ｆ１’及び追跡周辺枠Ｆ２’の形状は、ユーザが例えばズーム／上下レバー１３を操作することにより任意に変更可能な構成としてもよい。なお固定周辺枠Ｆ１’及び／又は追跡周辺枠Ｆ２’は、モニタ１８に表示させなくてもよい。
【００７９】
次に、以上の構成のデジタルカメラ１−２において撮影時に行われる処理について説明する。図７はデジタルカメラ１の一連の処理のフローチャートである。なお図７のフローチャートでは、図５のフローチャートと同じ処理は同じステップ番号で示して説明を省略する。
【００８０】
本実施形態のデジタルカメラ１−２では、図７Ａに示す如く、ステップＳ７にて特徴点検出部７９が固定枠Ｆ１内の人物の顔から特徴点を検出した後（ステップＳ７）で、特徴点検出部７９はさらに、図６（ａ）に示す如く、固定周辺枠Ｆ１’内から固定枠Ｆ１の周囲の特徴点、すなわちゼッケン番号を検出する（ステップＳ４０）。そしてステップＳ９にて被写体の特定が成功した後（ステップＳ９；ＹＥＳ）、ＣＰＵ７５はステップＳ７にて検出された特徴点を特徴点記憶部６７へ記憶させる（ステップＳ１１）と共に、ステップＳ４０にて検出された固定枠Ｆ１周囲の特徴点も特徴点記憶部６７へ記憶する（ステップＳ４１）。
【００８１】
そして図７Ｂに示す如く、ステップＳ１２にて被写体追跡部７７による人物の追跡中、特定の周期で、特徴点検出部７９が追跡枠Ｆ２内の追跡されている人物の顔の特徴点を検出し（ステップＳ１５）、さらに図６（ｂ）に示す如く追跡周辺枠Ｆ２’から追跡枠Ｆ２の周囲の特徴点、すなわちゼッケン番号を検出する（ステップＳ４２）。
【００８２】
そして顔認証部８０がステップＳ１５にて検出された顔の特徴点と特徴点記憶部６７に記憶された顔の特徴点とを照合すると共に、ステップＳ４１にて検出されたゼッケン番号と、特徴点記憶部６７に記憶されたゼッケン番号を照合することにより、追跡枠Ｆ２内の人物がステップＳ５にて特定された人物であるか否かを認証する（ステップＳ４４）。
【００８３】
そしてステップＳ４４にて認証が成功すると（ステップＳ４４；ＹＥＳ）、ＣＰＵ７５は処理をＳ１９へ移行し、認証が失敗すると（ステップＳ４４；ＮＯ）、被写体追跡部７７は人物の追跡を中止して（ステップＳ２７）、ＣＰＵ７５は処理をＳ２８へ移行する。このようにして本実施形態のデジタルカメラ１−２による撮影は行われる。
【００８４】
以上により、本実施形態のデジタルカメラ１−２及びデジタルカメラ１−２を使用した撮像方法によれば、例えば自分の子供を特定被写体として撮像したい場合に、自分の子供がつけているゼッケン番号が他の子供と違う番号であれば、自分の子供の追跡中に顔認証に加えてゼッケン番号の認証も行うので、大勢の子供の中から自分の子供を確実に追跡して撮像することができる。このように顔に加えて顔の周囲にある他の特定可能なものを含めて特定することにより、被写体の認証をより確実に行うことができ、より誤検出を防いで追跡の精度を上げることができる。
【００８５】
次に本発明にかかる第三の実施形態の撮像装置としてのデジタルカメラ１−３について図面を参照して詳細に説明する。なお本実施形態のデジタルカメラ１−３は、上述の実施形態のデジタルカメラ１、デジタルカメラ１−２と略同様の構成のものを使用するものとし、説明は省略する。
【００８６】
本実施形態のデジタルカメラ１−３は、顔認証部８０が三次元情報に基づいて顔認証を行うために、上記実施形態のデジタルカメラ１又はデジタルカメラ１−２に、予め人物を特定して、登録するための被写体特定モードを備えたものである。ここで図８にデジタルカメラ１−３のモニタ表示の一実施例を示す。被写体特定モードが選択されると、図８に示す如く、枠表示部７８によりモニタ１８に固定枠Ｆ１が表示される。
【００８７】
本実施形態のデジタルカメラ１−３は、例えば子供の運動会の徒競走中に自分の子供を撮像したい場合に、スタートラインに並んでいる時に複数の角度から自分の子供を撮像するのは時間的、空間的な制約のために困難である可能性が高いため、デジタルカメラ１−３の被写体特定モードにおいて、例えば運動会に出かける直前の家の前等で、図８（ａ）に示す如く、固定枠Ｆ１内に子供の顔が入るように、向かって左側から子供を撮像し、さらに図８（ｂ）に示す如く、正面から、図８（ｃ）に示す如く、向かって右側からからそれぞれ同様に子供を撮像することにより、予め被写体を特定する。
【００８８】
そして、それぞれの撮像画像から特徴点検出部７９が目の位置等の顔の特徴点を検出し、検出された特徴点が照合可能な精度であって人物の特定が成功すると、特定された人物の特徴点を三次元的特徴点として特徴点記憶部６７に記憶しておく。
【００８９】
そして顔認証の際にはこの三次元的特徴点を使用して顔認証を行う。なお三次元データを利用する顔認証については、例えば特許第３５７５６７９号に開示されている手法を使用することができる。このように三次元情報に基づいた顔認証を行うことにより、より高精度な顔認証を行うことができる。
【００９０】
なお本実施形態のデジタルカメラ１−３においても、上述の第二の実施形態のデジタルカメラ１−２と同様に周囲の特徴点を認証してもよい。この場合、周囲の特徴点も、予め被写体特定モードにて特徴点記憶部６７に記憶させる。
【００９１】
なお上記実施形態のデジタルカメラ１は、追跡する人物に対して顔認証を行うものであるが、本発明の撮像装置はこれに限られず、顔認証を行わなくてもよい。この場合、特徴点の検出及び記憶は行わずに、すなわち図５ＡのステップＳ７〜ステップＳ１１及びステップＳ１５〜ステップＳ１７の処理を行わずに、レリーズボタン１９の半押し操作されたときに固定枠Ｆ１内の被写体を所望する被写体として特定し、この特定された被写体を追跡する（図５Ｂ中ステップＳ１４）。そして例えば、被写体追跡が動きベクトルを検出することにより行われるときには、図５Ｂ中ステップＳ１６、Ｓ１７の顔認証の替わりに、動きベクトルがフレームアウトしたか否かを判別し、フレームアウトした場合には被写体の追跡が不可能であると判断してＣＰＵ７５は処理をステップＳ２７へ移行し、フレームアウトしていない場合には、ＣＰＵ７５は処理をステップＳ１９へ移行するようにしてもよい。
【００９２】
なお上述したそれぞれの実施形態では、被写体として人物の顔を追跡しているが、本発明はこれに限定されるものではなく、例えば動物や車等であってもよい。この場合、被写体は個体（個人、個物）を特定することができる特徴点を備えるものとする。
【００９３】
また本発明では、ＡＥ／ＡＷＢ処理部６３による自動ホワイトバランス等の画像処理は、スルー画像（動画像）に対して行っても良いし、レリーズボタン１９の全押し動作により得られた本画像（静止画像）に対して行っても良いし、適宜変更可能である。
【００９４】
また上述の実施形態では、被写体の特定をユーザにより手動で行うが、本発明の撮像装置はこれに限られるものではなく、撮像装置により自動又は半自動で行っても良い。具体的には、自動の場合は、例えば、予め所望の被写体を登録しておき、登録された被写体に基づいて被写体認証を行うことにより被写体を特定してもよく、半自動の場合には、例えば、公知の顔検出技術により画像データ中の被写体から顔を検出し、検出された顔をユーザが確認して例えば実行ボタンを押すなどの操作により被写体として特定してもよい。
【００９５】
また本発明の撮像装置は、上述した実施形態のデジタルカメラ１に限られるものではなく、本発明の趣旨を逸脱しない範囲において適宜設計変更可能である。
【図面の簡単な説明】
【００９６】
【図１】デジタルカメラの背面図
【図２】デジタルカメラの前面図
【図３】デジタルカメラの機能ブロック図
【図４】デジタルカメラのモニタ表示の一実施例を示す図
【図５Ａ】デジタルカメラの一連の処理のフローチャート（その１）
【図５Ｂ】デジタルカメラの一連の処理のフローチャート（その２）
【図６】第二のデジタルカメラのモニタ表示の一実施例を示す図
【図７Ａ】第二のデジタルカメラの一連の処理のフローチャート（その１）
【図７Ｂ】第二のデジタルカメラの一連の処理のフローチャート（その２）
【図８】第三のデジタルカメラのモニタ表示の一実施例を示す図
【符号の説明】
【００９７】
１    デジタルカメラ（撮像装置）
１８  モニタ（表示手段）
１９  レリーズボタン（撮像指示手段）
６４  画像処理部（画像処理手段）
６６  被写体特定部（被写体特定手段）
６７  特徴点記憶部
６９  メディア制御部（記録手段）
７０  外部記録メディア
７１  表示制御部（表示制御手段）
７７  被写体追跡部（被写体追跡手段）
７８  枠表示部（追跡枠表示手段、固定枠表示手段）
７９  特徴点検出部
８０  顔認証部（被写体認証手段）
８２  撮像条件制御部（撮像条件制御手段）
【図１】
2008187591.tif 000003
【図２】
2008187591.tif 000004
【図３】
2008187591.tif 000005
【図４】
2008187591.tif 000006
【図５Ａ】
2008187591.tif 000007
【図５Ｂ】
2008187591.tif 000008
【図６】
2008187591.tif 000009
【図７Ａ】
2008187591.tif 000010
【図７Ｂ】
2008187591.tif 000011
【図８】
2008187591.tif 000012