(57)【要約】【課題】本発明においては新たな動作シーケンスを取り入れることによりこれまでの被写体識別機能を持ったカメラにおいては達成されていなかった、従来からのカメラの動作に近い使い勝手の良い被写体識別機能を備えたデジタルカメラを提供することを目的とする。【解決手段】被写体を撮影する撮像手段と、前記撮像手段から出力された画像データ内所定の特徴部位を抽出する抽出手段と、前記被写体の明るさを判別する判別手段と、前記判別手段が判別した前記被写体の明るさに応じて前記抽出手段を制御する制御手段とを備えた。これにより、被写体の明るさに応じた最善の抽出動作をさせることができる。【選択図】    図１                                                   
2005223659.tif 000002
【特許請求の範囲】
【請求項１】
被写体を撮影する撮像手段と、
前記撮像手段から出力された画像データ内所定の特徴部位を抽出する抽出手段と、
前記被写体の明るさを判別する判別手段と、
前記判別手段が判別した前記被写体の明るさに応じて前記抽出手段を制御する制御手段
とを備えたことを特徴とするデジタルカメラ。
【請求項２】
前記制御手段は、前記判別手段が前記被写体の明るさが所定の明るさ以下であると判別したならば前記抽出手段に対して前記特徴部位の抽出を停止するよう制御することを特徴とする請求項１に記載のデジタルカメラ。
【請求項３】
前記制御手段は、前記判別手段が判別した前記被写体の明るさに応じて前記画像データ内から前記抽出手段が前記特徴部位を抽出するエリアを選択するよう制御することを特徴とする請求項１に記載のデジタルカメラ。
【請求項４】
前記制御手段は前記判別手段が前記被写体の明るさが所定の明るさ以下であると判別した場合には前記判別手段が前記被写体の明るさが所定の明るさ以上の時に選択した前記特徴部位を抽出するエリアより狭いエリアを選択するよう制御することを特徴とする請求項３に記載のデジタルカメラ。
【請求項５】
更に、前記抽出手段が抽出した特徴部位に対応した被写体を識別する識別手段を備え、
前記制御手段は前記識別手段が識別した被写体を含む所定範囲のエリアを選択するよう制御することを特徴とする請求項３に記載のデジタルカメラ。
【請求項６】
被写体画像を撮影する撮像手段と、
前記撮像手段から出力された画像データから所定の特徴部位を抽出する抽出手段と、
被写体に補助光を照射する照射手段と、
前記照射手段が補助光を照射したときに前記抽出手段による抽出を停止するよう制御す
る制御手段とを備えたことを特徴とするデジタルカメラ。
【請求項７】
更に、被写体輝度を検出する検出手段を備え、
前記照射手段は前記検出手段が前記被写体輝度が所定値以下であることを検出したとき
に補助光を照射することを特徴とする請求項６に記載のデジタルカメラ。
【請求項８】
被写体画像を撮影する撮像手段と、
前記撮像手段から出力された画像データから所定の特徴部位を抽出する抽出手段と、
前記抽出手段を動作させる抽出モードとそれ以外のモードとのいずれかのモードを選択
する選択手段と、
被写体に補助光を照射する照射手段と、
前記選択手段が前記抽出モードを選択したならば前記照射手段による補助光の照射を停
止するよう制御する制御手段とを備えたことを特徴とするデジタルカメラ。
【請求項９】
被写体画像を撮影する撮像手段と、
前記撮像手段から出力された画像データを使用して所定の特徴部位を抽出する抽出手段
と、
前記撮像手段から出力された画像データを使用して被写体に対して合焦動作する合焦手
段と、
所定の一時点において前記撮像手段から出力された画像データを使用して前記抽出手段
が抽出動作するように制御すると共に前記合焦手段に対しても合焦動作するよう制御する
制御手段とを備えたことを特徴とするデジタルカメラ。
【請求項１０】
更に、前記抽出手段を動作させる抽出モードとそれ以外のモードとのいずれかのモードを選択する選択手段と、
前記被写体に補助光を照射する照射手段と、
前記選択手段が前記抽出モードを選択した場合には前記照射手段による照射を停止する
よう指示する指示手段とを備えたことを特徴とする請求項９に記載のデジタルカメラ。
【請求項１１】
更に、被写体に補助光を照射する照射手段と、
前記照射手段により被写体が照射された画像データが前記撮像手段から出力された場合
には前記抽出手段による抽出を停止するよう指示する指示手段とを備えたことを特徴とする請求項９に記載のデジタルカメラ。
【請求項１２】
被写体画像を撮影する撮像手段と、
前記撮像手段から出力された画像データを使用して所定の特徴部位を抽出する抽出手段
と、
前記撮像手段から出力された画像データを使用して被写体に被写体の輝度を測定する測
光手段と、
所定の一時点において前記撮像手段から出力された画像データを使用して前記抽出手段
が抽出動作するように制御すると共に前記測光手段に対しても測光動作するよう制御する制御手段とを備えたことを特徴とするデジタルカメラ。
【請求項１３】
被写体画像を撮影する撮像手段と、
前記撮像手段から出力された画像データから所定の特徴部位を抽出する抽出手段と、
被写体に補助光を照射する照射手段と、
前記照射手段により補助光が照射された前記画像データから前記抽出手段に対して所定の特徴部位を抽出するよう制御する制御手段とを備えたことを特徴とするデジタルカメラ。
【請求項１４】
前記補助光の照射手段は前記デジタルカメラと一体に構成されていることを特徴とする請求項１３に記載のデジタルカメラ。
【請求項１５】
被写体画像を撮影する撮像手段と、
前記撮像手段から出力された画像データから所定の特徴部位を抽出する抽出手段と、
被写体に補助光を照射する照射手段と、
被写体の明るさを判別する判別手段と、
前記判別手段が前記被写体の明るさが所定の明るさ以下であると判別した場合に前記照
射手段に対して前記補助光を照射するよう指示する指示手段とを備えたことを特徴とするデジタルカメラ。
【請求項１６】
更に、前記補助光を照射するよう設定する設定手段を備え、
前記指示手段は前記設定手段が補助光を照射するように設定した場合に前記補助光照射手段に補助光を照射するように指示することを特徴とする請求項１５に記載のデジタルカメラ。
【請求項１７】
更に、被写体までの距離を測定する測距手段を備え、
前記測距手段は前記照射手段が照射した補助光に基づいて前記被写体までの距離を測定することを特徴とする請求項６、請求項８、請求項１０、請求項１１、請求項１３または請求項１５のいずれかに記載のデジタルカメラ。
【請求項１８】
更に、前記撮像手段から出力された画像データを使用して前記被写体までの距離を測定す
る測距手段と、
前記撮像手段から前記測距手段が使用するために前記撮像手段から出力される画像デー
タの出力周期を第１の出力周期と前記第１の出力周期より長い第２の出力周期とのいずれかに設定する周期設定手段とを備え、
前記判別手段は前記周期設定手段が設定した前記出力周期の長さに基づいて前記被写体の明るさを判別することを特徴とする請求項１または請求項１５のいずれかに記載のデジタルカメラ。
【請求項１９】
前記周期設定手段が設定した出力周期が前記第２の出力周期であると判別した場合に前記判別手段は前記被写体の明るさが所定の明るさ以下であると判別することを特徴とする請求項１８に記載のデジタルカメラ。
【請求項２０】
更に、前記撮像手段から出力される画像データ内の所定エリアの輝度を演算する演算手段を備え、
前記判別手段は前記演算手段の演算結果に基づいて前記被写体の明るさを判別することを特徴とする請求項１または請求項１５のいずれかに記載のデジタルカメラ。
【請求項２１】
更に、前記撮像手段によって前記被写体を撮影する際に前記被写体に光を照射する照射手段と、
前記照射手段が前記被写体に対して光を照射するかどうかを決定する決定手段とを備え
、
前記判別手段は前記決定手段が前記被写体に光を照射するように決定した場合に前記被
写体の明るさが所定の明るさ以下であると判別することを特徴とする請求項１または請求項１５のいずれかに記載のデジタルカメラ。
【請求項２２】
被写体画像を撮影する撮像手段と、
前記撮像手段から出力された撮影データから所定の特徴部位を抽出する抽出手段と、
前記抽出手段による前記所定の特徴部位の抽出結果を判別する判別手段と、
前記判別手段の判別結果に応じて前記撮像手段が撮影する撮影画面内から所定エリアを
選択する選択手段と、
前記選択手段が選択した所定エリアのデータに基づいて所定の処理をする処理手段とを
備えたことを特徴とするデジタルカメラ。
【請求項２３】
前記選択手段は、前記抽出手段によって前記所定の特徴部位が抽出されたと前記判別手段が判別した場合には、前記抽出手段が抽出した所定の特徴部位に対応した被写体の近傍を前記所定エリアとして選択することを特徴とする請求項２２に記載のデジタルカメラ。
【請求項２４】
前記選択手段は、前記抽出手段によって前記所定の特徴部位が抽出されなかったと前記判別手段が判別した場合には、前記撮像手段が撮影する撮影画面内の予め設定されている特定のエリアを前記所定エリアとして選択することを特徴とする請求項２２に記載のデジタルカメラ。
【請求項２５】
前記処理手段とは被写体までの距離を測定するための測距手段であることを特徴とする請求項２２に記載のデジタルカメラ。
【請求項２６】
前記処理手段とは被写体の輝度を測定するための測光手段であることを特徴とする請求項２２に記載のデジタルカメラ。
【請求項２７】
前記所定の特徴部位を抽出するとは前記抽出手段が撮影画像データから特徴部位と見なされる候補を抽出することであることを特徴とする請求項１、請求項６、請求項８、請求項
９、請求項１２、請求項１３、請求項１５または請求項２２のいずれかに記載のデジタルカメラ。
【請求項２８】
前記所定の特徴部位を抽出するとは、前記抽出手段が撮影画像データから特徴部位と見なされる候補を抽出し、更に特定の被写体に対応した特徴部位を判別することであることを特徴とする請求項１、請求項６、請求項８、請求項９、請求項１２、請求項１３、請求項１５または請求項２２のいずれかに記載のデジタルカメラ。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、人物の特徴点を識別し、その識別結果に応じて合焦や露出動作をするデジタルカメラに関する。
【背景技術】
【０００２】
従来から、指紋あるいは虹彩の特徴点を予め登録しておいてこれと照合することで本人を認証するシステムを初めとして画像データから人物を識別する技術はこれまで多く知られている。特開平９−２５１５３４号公報には目、鼻、口等を抽出して特徴点として登録しこれと入力した画像から抽出した特徴点とを比較して当人として識別する方法が詳細に記述されており、特開平１０−２３２９３４号公報にはこの様にして抽出した特徴点を登録する場合の辞書画像の精度を上げる方法が開示されている。これらの技術をカメラに応用した例を以下に挙げる。
【０００３】
特開２００１−２０１７７９号公報には予めカメラの使用者を参照情報として登録しておき、カメラ使用者がカメラを自分の顔に向けて撮影することで入力した識別情報と一致した場合にのみカメラ動作を可能とするカメラが開示されている。特開２００１−３０９２２５号公報には顔認識アルゴリズムにより認識された顔の座標、寸法、目の位置、頭のポーズ等のデータが画像メモリに画像データとともに記録されるカメラが開示されている。特開２００１−３２６８４１号公報には予め正規の使用者を識別するための識別情報（顔、指紋、掌紋）を記憶しておく画像撮像装置（デジタルカメラ）が開示されている。特開２００２−２３２７６１号公報には撮影した画像に予め読み込んでおいた被写体の識別情報を関連付けて記録する画像記録装置が開示されている。特開２００２−３３３６５２号公報には予め記憶された容貌情報と撮影顔情報を比較し記録信号を発生する撮影装置が開示されている。この容貌情報は優先度とともに記録される。
【発明の開示】
【発明が解決しようとする課題】
【０００４】
上述した被写体を識別する技術をデジタルカメラに応用するという種々の発明は、従来から被写体取り込み用の撮像装置を含む大規模なコンピュータシステムで実施されていた技術をデジタルカメラ単独で実施するようにしたものである。しかしながら、実際にデジタルカメラ単独で被写体の識別技術を利用して撮影を行おうとすると従来にないデジタルカメラとしての動作シーケンスが必要となってくる。
【０００５】
本発明においてはデジタルカメラに新たな動作シーケンスを取り入れることにより、こ
れまで開示されていた被写体識別機能を持ったカメラシステムにおいては達成されていなかった、従来からのカメラの動作により近い、使い勝手の良い被写体識別機能を備えたデジタルカメラを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記問題点の解決のために、請求項１の発明は、被写体を撮影する撮像手段と、前記撮像手段から出力された画像データ内所定の特徴部位を抽出する抽出手段と、前記被写体の明るさを判別する判別手段と、前記判別手段が判別した前記被写体の明るさに応じて前記抽出手段を制御する制御手段とを備えたことを特徴としている。すなわち、被写体の明るさに応じて抽出手段の抽出方法を変更しているので常に最善の抽出動作をさせることができる。請求項２の発明は、前記制御手段は、前記判別手段が前記被写体の明るさが所定の明るさ以下であると判別したならば前記抽出手段に対して前記特徴部位の抽出を停止するよう制御することを特徴としている。すなわち、被写体が低輝度の場合には抽出を停止す
ることでＳ／Ｎ比の低下に基づく誤抽出を防止することができる。
【０００７】
請求項３の発明は、前記制御手段は、前記判別手段が判別した前記被写体の明るさに応
じて前記画像データ内から前記抽出手段が前記特徴部位を抽出するエリアを選択するよう制御することを特徴としている。すなわち、低輝度時には通常の輝度時とは異なったエリアを選択することで確実に抽出を行うことができる。請求項４の発明は、前記制御手段は前記判別手段が前記被写体の明るさが所定の明るさ以下であると判別した場合には前記判別手段が前記被写体の明るさが所定の明るさ以上の時に選択した前記特徴部位を抽出するエリアより狭いエリアを選択するよう制御することを特徴としている。これにより、より狭いエリアから被写体を抽出することができるので抽出に要する時間が短縮すると共に抽出精度も向上する。
【０００８】
請求項５の発明は、更に、前記抽出手段が抽出した特徴部位に対応した被写体を識別す
る識別手段を備え、前記制御手段は前記識別手段が識別した被写体を含む所定範囲のエリアを選択するよう制御することを特徴としている。すなわち一旦被写体が検出されたならばその周辺を抽出エリアとすることで確実に勝つ高速に被写体を継続して抽出することができる。
【０００９】
請求項６の発明は、被写体画像を撮影する撮像手段と、前記撮像手段から出力された画
像データから所定の特徴部位を抽出する抽出手段と、被写体に補助光を照射する照射手段と、前記照射手段が補助光を照射したときに前記抽出手段による抽出を停止するよう制御する制御手段とを備えたことを特徴としている。通常、被写体輝度が低く、ストロボ照射して撮影する必要がある場合には撮影前に予め補助光を照射して被写体までの距離を演算する。一方、その補助光が照射されたままの画像データに基づいて抽出動作を行うと誤抽出する場合があるのでそれを防止することができる。さらに、もともとストロボを照射する場合には主要被写体に照射する場合が多いのでわざわざ被写体を抽出する必要がない。請求項７の発明は、更に、被写体輝度を検出する検出手段を備え、前記照射手段は前記検出手段が前記被写体輝度が所定値以下であることを検出したときに補助光を照射することを特徴としている。
【００１０】
請求項８の発明は、被写体画像を撮影する撮像手段と、前記撮像手段から出力された画
像データから所定の特徴部位を抽出する抽出手段と、前記抽出手段を動作させる抽出モードとそれ以外のモードとのいずれかのモードを選択する選択手段と、被写体に補助光を照射する照射手段と、前記選択手段が前記抽出モードを選択したならば前記照射手段による補助光の照射を停止するよう制御する制御手段とを備えたことを特徴としている。すなわち、抽出モードを選択した場合には補助光を照射しないようにすることで誤抽出を防止している。
【００１１】
請求項９の発明は、被写体画像を撮影する撮像手段と、前記撮像手段から出力された画
像データを使用して所定の特徴部位を抽出する抽出手段と、前記撮像手段から出力された画像データを使用して被写体に対して合焦動作する合焦手段と、所定の一時点において前記撮像手段から出力された画像データを使用して前記抽出手段が抽出動作するように制御すると共に前記合焦手段に対しても合焦動作するよう制御する制御手段とを備えたことを特徴としている。すなわち、抽出用に使用される撮像素子からの出力画像データは合焦用にも使用される。これにより、撮像素子からの出力を効率よく使用することができる。
【００１２】
請求項１０の発明は、更に、前記抽出手段を動作させる抽出モードとそれ以外のモード
とのいずれかのモードを選択する選択手段と、前記被写体に補助光を照射する照射手段と、前記選択手段が前記抽出モードを選択した場合には前記照射手段による照射を停止するよう指示する指示手段とを備えたことを特徴としている。すなわち、抽出モード時には補
助光を照射しないように設定することで被写体によって誤抽出することを防ぐことができる。請求項１１の発明は、更に、被写体に補助光を照射する照射手段と、前記照射手段により被写体が照射された画像データが前記撮像手段から出力された場合には前記抽出手段による抽出を停止するよう指示する指示手段とを備えたことを特徴としている。すなわち補助光を照射すると誤抽出の恐れのある場合に抽出動作を停止することができる。
【００１３】
請求項１２の発明は、被写体画像を撮影する撮像手段と、前記撮像手段から出力された
画像データを使用して所定の特徴部位を抽出する抽出手段と、前記撮像手段から出力された画像データを使用して被写体に被写体の輝度を測定する測光手段と、所定の一時点において前記撮像手段から出力された画像データを使用して前記抽出手段が抽出動作するように制御すると共に前記測光手段に対しても測光動作するよう制御する制御手段とを備えたことを特徴としている。すなわち、抽出用に使用される撮像素子からの出力画像データは測光用にも使用される。これにより、撮像素子からの出力を効率よく使用することができる。
【００１４】
請求項１３の発明は、被写体画像を撮影する撮像手段と、前記撮像手段から出力された
画像データから所定の特徴部位を抽出する抽出手段と、被写体に補助光を照射する照射手段と、前記照射手段により補助光が照射された前記画像データから前記抽出手段に対して所定の特徴部位を抽出するよう制御する制御手段とを備えたことを特徴としている。すなわち、補助光を照射することで特徴点の抽出をより確実にすることができる。請求項１４の発明は、前記補助光の照射手段は前記デジタルカメラと一体に構成されていることを特徴としている。
【００１５】
請求項１５の発明は、被写体画像を撮影する撮像手段と、前記撮像手段から出力された画像データから所定の特徴部位を抽出する抽出手段と、被写体に補助光を照射する照射手段と、被写体の明るさを判別する判別手段と、前記判別手段が前記被写体の明るさが所定の明るさ以下であると判別した場合に前記照射手段に対して前記補助光を照射するよう指示する指示手段とを備えたことを特徴としている。すなわち、被写体輝度が低いときに被写体に対して補助光を照射することで特徴点の抽出をより確実にすることができる。請求項１６の発明は、更に、前記補助光を照射するよう設定する設定手段を備え、前記指示手段は前記設定手段が補助光を照射するように設定した場合に前記補助光照射手段に補助光を照射するように指示することを特徴としている。すなわち、補助光を照射するように設定した場合にのみ補助光を照射することができる。
請求項１７の発明は、更に、被写体までの距離を測定する測距手段を備え、前記測距手段は前記照射手段が照射した補助光に基づいて前記被写体までの距離を測定することを特徴とする。請求項１８の発明は、更に、前記撮像手段から出力された画像データを使用して前記被写体までの距離を測定する測距手段と、前記撮像手段から前記測距手段が使用するために前記撮像手段から出力される画像データの出力周期を第１の出力周期と前記第１の出力周期より長い第２の出力周期とのいずれかに設定する周期設定手段とを備え、前記判別手段は前記周期設定手段が設定した前記出力周期の長さに基づいて前記被写体の明るさを判別する。請求項１９の発明は、前記周期設定手段が設定した出力周期が前記第２の出力周期であると判別した場合に前記判別手段は前記被写体の明るさが所定の明るさ以下であると判別する。請求項２０の発明は、更に、前記撮像手段から出力される画像データ内の所定エリアの輝度を演算する演算手段を備え、前記判別手段は前記演算手段の演算結果に基づいて前記被写体の明るさを判別する。請求項２１の発明は、更に、前記撮像手段によって前記被写体を撮影する際に前記被写体に光を照射する照射手段と、前記照射手段が前記被写体に対して光を照射するかどうかを決定する決定手段とを備え、前記判別手段は前記決定手段が前記被写体に光を照射するように決定した場合に前記被写体の明るさが所定の明るさ以下であると判別する。
【００１６】
請求項２２の発明は、被写体画像を撮影する撮像手段と、前記撮像手段から出力された
撮影データから所定の特徴部位を抽出する抽出手段と、前記抽出手段による前記所定の特徴部位の抽出結果を判別する判別手段と、前記判別手段の判別結果に応じて前記撮像手段が撮影する撮影画面内から所定エリアを選択する選択手段と、前記選択手段が選択した所定エリアのデータに基づいて所定の処理をする処理手段とを備えたことを特徴としている。すなわち、抽出の可否に応じて最適のエリアを選択して所定の処理をすることができる。請求項２３の発明は、前記選択手段は、前記抽出手段によって前記所定の特徴部位が抽出されたと前記判別手段が判別した場合には、前記抽出手段が抽出した所定の特徴部位に対応した被写体の近傍を前記所定エリアとして選択することを特徴としている。請求項２４の発明は、前記選択手段は、前記抽出手段によって前記所定の特徴部位が抽出されなかったと前記判別手段が判別した場合には、前記撮像手段が撮影する撮影画面内の予め設定されている特定のエリアを前記所定エリアとして選択することを特徴としている。請求項２５の発明は、前記処理手段とは被写体までの距離を測定するための測距手段であることを特徴としている。請求項２６の発明は、前記処理手段とは被写体の輝度を測定するための測光手段であることを特徴としている。
【００１７】
請求項２７の発明は、前記所定の特徴部位を抽出するとは前記抽出手段が撮影画像デー
タから特徴部位と見なされる候補を抽出することであることを特徴としている。これにより撮影者は抽出された全ての特徴部位を確認することができる。請求項２８の発明は、前記所定の特徴部位を抽出するとは、前記抽出手段が撮影画像データから特徴部位と見なされる候補を抽出し、更に特定の被写体に対応した特徴部位を判別することであることを特徴としている。これにより撮影者は抽出された特徴部位の中から特定の被写体を確認することができる。
【発明を実施するための最良の形態】
【００１８】
以下、図面を参照して本発明の実施の形態を説明する。図１は、本発明のデジタルカメラについてその主要な機能を説明したブロック図である。撮影レンズ１０１はその焦点距離を連続的に変えるためのズームレンズ、ピントを調整するフォーカスレンズから構成されている。これらのレンズはドライバ１１３により駆動される。ここでドライバ１１３はズームレンズのズーム駆動機構及びその駆動回路と、フォーカスレンズのフォーカス駆動機構及びその駆動回路とを備えていて、それぞれＣＰＵ１１２により制御される。撮影レンズ１０１は撮像素子１０３の撮像面上に被写体像を結像する。撮像素子１０３は撮像面上に結像された被写体像の光強度に応じた電気信号を出力する光電変換撮像素子であり、ＣＣＤ型やＭＯＳ型の固体撮像素子が用いられる。撮像素子１０３は信号取り出しのタイミングをコントロールするドライバ１１５により駆動される。撮影レンズ１０１と撮像素子１０３との間には絞り１０２が設けられている。絞り１０２は、絞り機構とその駆動回路を備えたドライバ１１４により駆動される。固体撮像素子１０３からの撮像信号はアナログ信号処理回路１０４に入力され、アナログ信号処理回路１０４において相関二重サンプリング処理（ＣＤＳ）等の処理が行われる。アナログ信号処理回路１０４で処理された撮像信号は、Ａ／Ｄ変換器１３５によりアナログ信号からデジタル信号に変換される。
【００１９】
Ａ／Ｄ変換された信号はデジタル信号処理回路１０６において輪郭強調、ガンマ補正、ホワイトバランス補正などの種々の画像処理が施される。バッファメモリ１０５は撮像素子１０３で撮像された複数フレーム分のデータを記憶することが出来るフレームメモリであり、Ａ／Ｄ変換された信号は一旦このバッファメモリ１０５に記憶される。デジタル信号処理回路１０６ではバッファメモリ１０５に記憶されたデータを読み込んで上述した各処理を行い、処理後のデータは再びバッファメモリ１０５に記憶される。ＣＰＵ１１２はデジタル信号処理回路１０６およびドライバ１１３〜１１５等と接続され、カメラが動作する際のシーケンス制御を行う。ＣＰＵ１１２のＡＥ演算部１１２１では撮像素子からの画像信号に基づいて露出演算を行い、ＡＷＢ演算部１１２２ではホワイトバランス用パラ
メータを設定するための演算が行われる。特徴点抽出演算部１１２３では所定のアルゴリズムに則って画像データの中から被写体の形状、位置、サイズ等の特徴点を抽出し、抽出結果を記憶部１１２５に記憶する。それら記憶された特徴点の中からユーザは残しておきたい特徴点を選択して登録することができる。
【００２０】
本実施例におけるデジタルカメラのＡＦ方式は周知のコントラスト法を採用している。このコントラスト方式ＡＦについてここで簡単に説明する。この方式においては、撮像素子１０３上の像のボケの程度とコントラストの間には相関があり、焦点があったときに像のコントラストが最大になることを利用して焦点あわせを行う。コントラストの大小は撮像信号の高周波成分の大小により評価することが出来る。すなわち、ＡＦ演算部１１２４は不図示のＢＰＦ（バンドパスフィルタ）により撮像信号の高周波成分を抽出し、この絶対値を積分した値を焦点評価値としてこの焦点評価値に基づいてＡＦ演算を行う。ＣＰＵ１１２はＡＦ演算部１１２４の演算結果を用いて撮影レンズ１０１のフォーカスレンズ位置を調整し、合焦動作を行わせる。
【００２１】
ＣＰＵ１１２に接続された操作部材１１６には、カメラの電源をオンオフする電源スイッチ１１６１、レリーズ釦に連動してオンオフする半押しスイッチ１１６２及び全押しスイッチ１１６３、デジタルカメラで撮影する際、モニタ１０９上に表示される各種メニュー内容を選択したり設定したりするための設定釦１１６４、再生画像等を更新するアップダウン（以降Ｕ／Ｄと表示する）釦１１６５等が設けられている。設定釦１１６４では抽出した特徴点に対して名称を付けるためにＵ／Ｄ釦１１６５を併用してアルファベットやひらがな、カタカナ、簡単な漢字等を選択して設定することもできる。Ｕ／Ｄ釦１１６５はこのほか複数抽出された人物から所望の人物を選択したり、撮影時には手動でズームレンズをテレあるいはワイド側に駆動したりするためにも使用される。
【００２２】
被写体輝度が低い場合にはストロボ１１７を発光させる。このストロボにはストロボ使用時に撮影した人物の瞳が赤く撮影されるのを防止あるいは軽減するために撮影前に予め補助光を発光するプリ発光機能が備わっている。このプリ発光は低輝度時発光して被写体輝度を測定するためにも使用される。記憶部１１２５には前述した特徴点情報以外にＡＦ演算部１１２４で演算された評価値のピーク値やピーク値に対応するレンズ位置等も記憶される。デジタル信号処理回路１０６で各種処理が施された画像データは、一旦バッファメモリ１０５に記憶された後に、記録・再生信号処理回路１１０を介してメモリカード等の外部記憶媒体１１１に記録される。画像データを外部記憶媒体１１１に記録する際には、一般的に所定の圧縮形式、例えば、ＪＰＥＧ方式でデータ圧縮が行われる。記録・再生信号処理回路１１０では、画像データを外部記憶媒体１１１に記録する際のデータ圧縮及び外部記憶媒体１１１から再生した圧縮された画像データの伸長処理を行う。
【００２３】
モニタ１０９は撮像された被写体画像を表示したり撮影や再生させる際の各種の設定メニューを表示したりするための液晶（ＬＣＤ）表示装置である。ここでは外部記憶媒体１１１に記録されている画像データを再生表示する際にも用いられる。モニタ１０９に画像を表示する場合には、バッファメモリ１０５の一部であるＶＲＡＭ１０７に記憶された画像データを読み出し、Ｄ／Ａ変換器１０８によりデジタル画像データをアナログ映像信号に変換する。そして、そのアナログ映像信号を用いてモニタ１０９に画像を表示する。
【００２４】
ここで、特徴点を抽出する際のバッファメモリ１０５とＶＲＡＭ１０７との関係について説明する。モニタ１０９で動画表示用の画像データを表示する場合は、静止画用の画像データから動画表示用の画像データに間引かれたデータが撮像素子１０３から一定の周期（例えば３０フレーム/秒）で連続して出力される。この画像データに所定の処理を施し
、モニタ１０９の縦横画素数に対応した画素数となるように更にデータを間引いてＶＲＡＭ１０７に連続して記録する。このＶＲＡＭ１０７のデータはＤ／Ａ変換器１０８を通し
てモニタ１０９に動画像として表示される。このＶＲＡＭ１０７の画像データは特徴点を抽出するためのデータとしても使用する。特徴点を抽出する場合には、まずＶＲＡＭ１０７の画像データをバッファメモリ１０５に所定のタイミングで再度記録する。ここでバッファメモリ１０５にはＶＲＡＭ１０７に記録されているデータのうち中心部の所定の範囲（たとえばＬＣＤモニタ１０９の表示画面の縦、横ともに８０％に相当する範囲）のみ記録する。
【００２５】
また、このようにＶＲＡＭ１０７から再度バッファメモリ１０５に画像データを記録す
るのは次の理由による。ＣＰＵ１１２の演算処理能力が十分高かったならば前述した３０フレーム/秒のレートで特徴点を抽出することができる。通常、デジタルカメラに採用さ
れているＣＰＵ１１２の演算能力はそこまで高くないことが多い。それ故、ＣＰＵ１１２の演算能力に応じて特徴点抽出演算にあったレート（例えば１０フレーム/秒）でＶＲＡ
Ｍ１０７からバッファメモリ１０５に画像データを再度記録することで特徴点を抽出する事が可能となる。なお、その場合であってももちろんＶＲＡＭ１０５からは通常のレートでモニタ１０９表示用画像データが出力されているのでモニタ画面の表示更新のレートが遅くなることはない。なお、ＡＥ演算、ＡＦ演算にあたっては、上述したＶＲＡＭ１０７に記録されている特徴点抽出用に使用する、１０フレーム／秒のレートに間引かれた画像データを使用するのでなく、撮像素子１０３から３０フレーム／秒のレートで出力される動画表示用に間引いた画像データを使用する。
【００２６】
ここまで述べてきたデジタルカメラにおいて、特徴点抽出演算部１１２３はデジタルカ
メラの動作に応じて最適な動作をするようになっている。まず第１、第２の実施例でデジタルカメラの撮影モードに応じてＣＰＵ１１２は特徴点抽出演算部１１２３に対して抽出動作を停止する場合を、第３、第４の実施例においては抽出方法を変更する場合について説明する。いずれの実施例においても抽出動作以外の処理（ＡＦ、ＡＥ等の処理やカメラシーケンス）は共通である。また、ここでいう撮影モードとはデジタルカメラが連続撮影するためのモードに設定された場合のことをいう。この連続して撮影するモードとは被写体の静止画像を高速に連続して撮影する連写撮影モードあるいは被写体の動画を撮影する動画撮影モードの２つの連続撮影モードがこれに相当する。連写撮影モードの場合には５〜１０駒／秒のスピードで出力された撮像素子１０３のほぼ全画素分（現在の撮像素子の画素数は１００万〜５００万画素程度が主流である）の静止画像データを外部記憶媒体１１１に記録する。動画撮影モードの場合には撮像素子１０３から通常、ＶＧＡ相当（３０万画素程度）の解像度に間引いた画像データを６０フレーム／秒あるいは３０フレーム／秒のスピードで出力して外部記憶媒体１１１に記憶する。この様に連続して記録動作をしている途中であっても、もしデジタルカメラが高速のプロセサを複数備えている場合にはそれと並行して特徴点抽出動作を行うことは可能である。しかしながら大部分のデジタルカメラにおいては、電力消費あるいは実装スペースの点で処理能力もそれほど高くない最小数のプロセサしか実装されていない。このようなプロセサを使用した場合には記録処理と特徴点抽出処理とをシリーズに行わざるを得ず、前述した記録コマ数を確保することは不可能となる。それ故、本実施例においては連続撮影するモードに設定された場合には通常の一駒毎の静止画撮影する場合と異なり、抽出処理を変更あるいは停止させてやる。これにより従来の連続撮影時と同様、あるいはそれに近い記録スピードを確保することが可能となる。
【００２７】
まず、連続撮影するモードに設定された時抽出処理を停止する第１、第２の実施例につ
いて図２、図３を使用して説明する。第１の実施例を説明する図２は全押しＳＷ１１６３を押して実際に連続撮影を行っている場合に抽出処理を停止するフローである。ステップＳ１０１でデジタルカメラの電源がオンされたことを検出したならばステップＳ１０２で特徴点を抽出するための抽出モードに設定されているかどうか判別する。この抽出モードの設定方法の１例としては、設定釦１１６４を操作してＬＣＤモニタ１０９に表示させた
撮影モードから抽出モードを選択して設定する。ステップＳ１０２でもし抽出モードに設定されていると判別されたならばステップＳ１０３に進んで所定のタイミングで撮像素子出力から被写体の特徴点を抽出し、ＬＣＤモニタ１０９に撮像素子からのスルー画に抽出した特徴点を重畳して表示しステップＳ１０４での撮影開始指示を待つ。ステップＳ１０２で抽出モードに設定されていないと判別された場合にはそのままステップＳ１０４に進む。ステップＳ１０４では全押しＳＷ１１６３が押され、被写体撮影開始の指示がされたかどうか判別する。もし撮影開始指示がされていなかったならばステップＳ１１２に進み、撮影開始指示がされていたならばステップＳ１０５に進む。ステップＳ１０５では連続撮影モードに設定されているかどうか判別する。ここで連続撮影モードの設定も設定釦１１６４を使って行う。ステップＳ１０５で連続撮影モードに設定されていなかった場合にはステップＳ１０７に進んで通常の一駒撮影を行ってステップＳ１１２に進む。もし連続撮影モードに設定されていた場合にはステップＳ１０６に進んでここで再度抽出モードに設定されているかどうか判別する。もし抽出モードに設定されていなかったならばステップＳ１０９に進み、抽出モードに設定されていたならばステップＳ１０８に進む。ステップＳ１０８では抽出処理を停止するよう指示する。ステップＳ１０９では連続撮影に対応した画素数の撮影を行いステップＳ１０９で連続撮影が終了したかどうか判別する。連続撮影の終了は全押しＳＷ１１６３が離されたかどうかで判別する。もし引き続いて全押しされていた場合にはステップＳ１０９に戻って静止画あるいは動画の連続撮影を行う。
【００２８】
ステップＳ１１０で連続撮影が終了したと判別されたならばステップＳ１１１に進んで
抽出停止指示を解除する。ステップＳ１１２では撮影モード以外の動作モード（再生モード等）に設定されたかあるいは電源ＳＷ１１６１をオフして撮影が終了したかどうか判別する。もし撮影動作が終了していなかったならばステップＳ１０２に戻り、終了したならば本フローを終了する。
【００２９】
図２の場合は全押しＳＷ１１６３を押し、実際に連続撮影動作をしている場合にのみ抽
出処理を停止するようにしている。一方、連続撮影時においては撮影者は予め主要被写体が撮影画面の中央等にいることを確認した上で撮影しようとしている場合が多く、わざわざ主要被写体を抽出する必要がない場合も多い。そのような場合にはデジタルカメラの動作モードが連続撮影モードに設定されている全期間中の抽出動作を停止するようにしても良い。第２の実施例を説明する図３にこの場合のフローを示す。なお、図２あるいは図３のいずれにするかは設定釦１１６４で設定する。
【００３０】
図３においてステップＳ１５１でデジタルカメラの電源がオンされたことを確認したあ
と、ステップＳ１５２で抽出モードに設定されているかどうか判別する。もし抽出モードの設定されていなかったならばステップＳ１５９に進み、設定されていたならばステップＳ１５３に進む。ステップＳ１５３では連続撮影モードに設定されているかどうか判別する。もし連続撮影モードに設定されていなかったならばステップＳ１５４に進み、設定されていたならステップＳ１５７に進む。ステップＳ１５４では抽出停止指示がされているかどうか判別し、もし停止指示がされていなかったならばステップＳ１５８に進んで撮影画像データから特徴点を抽出してＬＣＤモニタ１０９に表示する。抽出後はステップＳ１５９に進んで撮影動作の終了を待つ。ステップＳ１５４で抽出停止指示があったならばステップＳ１５６に進んで抽出停止指示を解除しステップＳ１５８に進む。
【００３１】
ステップＳ１５３で連続撮影モードであると判別された場合にはステップＳ１５５に進
んで抽出停止指示がされているかどうか判別する。もし停止指示されている場合にはステップＳ１５９に進み撮影終了を待ち、停止指示されていなかったならばステップＳ１５７に進んで抽出の停止指示を行いステップＳ１５９に進む。ステップＳ１５９では撮影動作が終了したかどうか判別し、もし終了していなかったならばステップＳ１５２に戻り終了していたならばこのフローを終了する。この様に、連続撮影時は特徴点の抽出を行わない
ことで通常の連続撮影時と同一の時間間隔で連続撮影をすることができる。
【００３２】
次に第３、第４の実施例について説明する。この実施例においては、特徴点の抽出を全
く停止するのでなく、特徴点を抽出する抽出エリアを狭くすることにより抽出に要する時間を短縮することで、連続撮影時の撮影間隔が長くなることを最小限にとどめている。まず、図４〜図６を使用して第３の実施例について説明する。図４は連続撮影モードに設定された場合、実際の撮影時に抽出エリアを変更するフローである。ステップＳ２０１でデジタルカメラの電源がオンしたことを確認したらステップＳ２０２で抽出モードに設定されているかどうか確認する。もし抽出モードに設定されていなかったならばステップＳ２０６に進み、設定されていたならばステップＳ２０３に進む。ステップＳ２０３では特徴点抽出用のエリアが前述した撮影画面中心の縦横それぞれ８０％の初期エリアに設定されているかどうか確認する。初期エリアに設定されていたならばステップＳ２０５に進む。もし後述するステップＳ２１０で他の抽出用のエリアに設定されていたならばステップＳ２０４に進む。ステップＳ２０４では設定されている抽出エリアを初期エリアに設定し直してステップＳ２０５に進む。
【００３３】
ステップＳ２０５では抽出エリアから特徴点を抽出し、その結果をＬＣＤモニタ１０
９上に撮影画像と重畳して表示する。ステップＳ２０６では撮影開始指示がされたかどうか判別する。撮影開始は全押しＳＷ１１６３が押されることで指示される。もし撮影開始指示がされていなかったならばステップＳ２１２に進み、撮影開始指示がされたならばステップＳ２０７に進む。ステップＳ２０７では連続撮影モードに設定されているかどうか判別する。もし連続撮影モードに設定されていなかった場合にはステップＳ２０８に進んで通常の単写撮影を行い撮影終了後はステップＳ２１２に進む。ステップＳ２０７で連続撮影モードに設定されていた場合にはステップＳ２０９に進んでここで抽出モードに設定されているかどうか判別する。もし抽出モードに設定されていなかった場合にはステップＳ２１１に進んで全押しＳＷ１１６３が押されている間連続撮影を行う。抽出モードに設定されていた場合にはステップＳ２１０に進んでここで抽出用の初期エリアから連続撮影用のエリアを選択する。この連続撮影用のエリアについて図１３、図１４を基に説明する。図１３において一点鎖線で示したエリアが通常初期設定されるエリアで撮影画面の中心部の縦横それぞれ８０％のエリアを示している。これに対して連続撮影時には初期エリアの内側の破線で示したエリアを抽出エリアとする。このエリアは例えば、中心部の縦横それぞれ４０％程度に設定される。このように狭い中心付近を抽出範囲として設定する理由は、前述したように連続撮影時は主要被写体が中心付近にいることが多いという仮定に基づいている。また、連続撮影時用のエリアとしては画面中心付近以外にも、図１４の破線に示すようにステップＳ２０５で抽出した主要被写体を中心に含んで撮影画面の縦横それぞれ４０％の範囲としても良い。図１４においては被写体が３人いて、そのうち真ん中の人物が主要被写体でその主要被写体を中心として画面の縦横それぞれ４０％の破線で示されるエリアが抽出エリアであることを示している。この様に主要被写体がいる付近を抽出することにより主要被写体をロックして確実に追従することができる。また、前述した４０％等、抽出エリアを固定した大きさに設定する以外に、抽出主要被写体の縦横の大きさに対してそれぞれ例えば５０％大きい縦横の長さの範囲を抽出エリアとするようにしても良い。
【００３４】
ステップＳ２１１では全押しＳＷ１１６３が押されている間連続撮影を行う。この連続
撮影については図５で詳しく説明する。ステップＳ２１２ではデジタルカメラの撮影モードが終了したかどうか判別する。撮影の終了とは電源ＳＷ１１６１がオフされるかあるいは撮影モードから記録データを再生するための再生モードに変更された場合等である。撮影のモードが終了されていなかったならばステップＳ２０２に戻り終了したならば本フローを終了する。
【００３５】
図５を使用して図４ステップＳ２１１の連続撮影について説明する。図５ステップＳ２
２１では全押しＳＷ１１６３が押されたことにより撮像素子１０３から記憶媒体１１１に記憶するための画像データを読み出す。ステップＳ２２２では読み出した画像データに前述したアナログ処理、Ａ／Ｄ変換、デジタル処理を施して記録媒体１１１へ記録を開始する。ステップＳ２２３では画像データの記録媒体１１１への記録開始とともに抽出モードを判別する。もし抽出モードに設定されていなかったならばステップＳ２２６に進み、設定されていたならばステップＳ２２４で選択されている連続撮影時用抽出エリアから抽出用のデータを読み出す。このとき撮像素子からは前述したように間引いた画素が読み出されている。ステップＳ２２５で抽出用画像データから所定の特徴点を抽出し抽出結果をＬＣＤモニタ１０９に表示するステップＳ２２６では全押しＳＷ１１６３が押されているかどうか判別し、引き続いて押されているならばステップＳ２２１に戻り、押されていなかったならば連続撮影を終了する。
【００３６】
この第３の実施例においては連続撮影のモードに設定され且つ撮影開始ＳＷが押されて
初めて特徴点抽出エリアを変更している。それに対して主要被写体が確実に認識されるような場合や、抽出結果が表示されると煩わしい場合などでは連続撮影モードに設定されたならば直ちに特徴点抽出方法を変更或いは停止しても良い。第４の実施例として、図６に基づいて連続撮影時に抽出モードに設定されたならば直ちに特徴点抽出用のエリアを変更する方法を説明する。図１３にこれらの抽出用エリアの一例を示す。図１３において一点鎖線で示されたエリアが抽出モードに設定された場合の初期エリアで、その内側の破線で示されるエリアが連続撮影時に抽出用のエリアとして設定される。図６ステップＳ２５１で電源がオンされていることを確認したならばステップＳ２５２で抽出モードに設定されているかどうか判別する。もし抽出モードに設定されていなかったならばステップＳ２５９に進み、設定されていた場合にはステップＳ２５３に進む。ステップＳ２５３では連続撮影モードに設定されているかどうか判別する。もし連続撮影モードに設定されていなかった場合はステップＳ２５５に進み、設定されていたならばステップＳ２５４に進む。ステップＳ２５５では抽出エリアが初期エリアに設定されているかどうか判別する。もし初期エリアに設定されていたならばステップＳ２５８に進み、設定されていなかったならばステップＳ２５６で初期エリアを選択しその後ステップＳ２５６に進む。ステップＳ２５３で連続撮影モードに設定されていた場合にはステップＳ２５４で初期エリアに設定されているかどうか判別する。もし初期エリアでなく連続撮影用エリアに設定されていた場合にはステップＳ２５８に進み、初期エリアに設定されていた場合にはステップＳ２５７で連続撮影時用のエリアを選択してステップＳ２５８に進む。ステップＳ２５８では所定のエリア内から特徴点を抽出し、ＬＣＤモニタ１０９に撮影画像とともに特徴点を表示する。ステップＳ２５９では撮影モードが終了したかどうか判別し、終了していなかった場合にはステップＳ２５２に戻り、終了したならば本シーケンスを終了する。
【００３７】
ここまで説明してきた第１〜第４の実施例は、連続撮影モードに関連して抽出方法を変
更する実施例である。次には被写体の輝度に応じて抽出動作を変更する実施例について説明する。ここでも抽出動作以外のカメラ機能は第１〜第４の実施例と共通である。通常、被写体が低輝度の場合には特徴点の抽出精度が低下したり後述するＡＦ演算の際の演算サイクルが低下する。更に前述したように、抽出処理をすることでカメラの全体としての処理スピードが一層低下する。図７は被写体が低輝度の場合に抽出を停止する第５の実施例について、図８は被写体が低輝度の場合に抽出エリアを変更する第６の実施例についてそれぞれ説明するフローである。始めに第５の実施例について説明する。図７において、ステップＳ３０１でデジタルカメラの電源がオンされていたならばステップＳ３０２に進んで被写体輝度を判別する。もし被写体輝度が低輝度でなかったならばステップＳ３０３に進み、低輝度であったならばステップＳ３０４に進む。この被写体が低輝度かどうかを判別する方法としては次の４つ場合のいずれかの場合において被写体輝度が低輝度であると判別する。１．ＡＥ演算の結果被写体輝度が所定値より低いと判別された場合。２．撮影
時にストロボ１１７により光を照射するよう設定された場合。３．ＡＦ演算に使用する撮像素子１０３からの画像データの出力レートが通常の出力レートより低くなった場合。４．ＡＦ演算時に前述したＡＦ補助光を使用する場合。ここで３．の撮像素子１０３からの出力レートが低くなる理由を説明する。前述したように通常、撮影前にＬＣＤモニタ１０９に動画を表示するには撮像素子１０３の全画素のデータは使用せずに、予め一部を間引いた画像データを３０フレーム／秒で撮像素子１０３から出力する。ＡＦ演算にはこの間引いた画像データを使用している。すなわち、通常のＡＦ演算は３０フレーム／秒で行われる。本デジタルカメラでは被写体輝度が低くて撮像素子１０３から十分なレベルの画像データの出力が得られない場合にはこの撮像素子１０３からの出力レートを通常の半分の１５フレーム／秒に落としている。これにより撮像素子１０３の露光時間を長くして相対的に撮影感度を上げている。それ故、撮像素子１０３からの出力レートが１５フレーム／秒となったとき被写体が低輝度であると判断する。これらの４つの場合の内、いずれかの場合が生じたならば被写体が低輝度であると判断する。
【００３８】
ステップＳ３０４では抽出モードに設定されているかどうか判別する。もし抽出モード
に設定されていなかったならばステップＳ３０７に進み、抽出モードに設定されていたならばステップＳ３０５に進む。ステップＳ３０５では特徴点抽出演算部１１２３による特徴点の抽出を行わないよう指示し、ステップＳ３０７に進む。これによりステップＳ３０７で直ちに被写体までの測距を行うことができる。被写体輝度が低輝度でなかった場合にはステップＳ３０３で抽出モードに設定されているかどうか判別する。もし抽出モードに設定されていなかったならばステップＳ３０７に進み、抽出モードに設定されていたならばステップＳ３０６に進む。ステップＳ３０６では被写体の特徴点を抽出しその抽出結果をＬＣＤモニタ１０９に撮影した被写体に重畳して表示する。ステップＳ３０７ではＡＦ演算部１１２４により測距を行いその結果に基づいて撮影レンズ１０１を駆動する。この時、もし抽出モードに設定されていた場合にはＡＦ演算用に使用する画像データはステップＳ３０６で被写体特徴点抽出用に使用した撮像素子からの出力画像データをそのまま使用する。ステップＳ３０８では全押しＳＷ１１６３が押され撮影開始が指示されたかどうか判別する。撮影指示がされたならばステップＳ３０９に進んで撮影を行いステップＳ３１０に進む。撮影指示がなかったならばそのままステップＳ３１０に進む。ステップＳ３１０では撮影が終了されたかどうか判別する。もし撮影が終了されていなかったならばステップＳ３０２に戻り、新たな撮像素子からの出力画像データを使用してこれまでと同様のサイクルを繰り返す。このようにして被写体輝度に応じて抽出或いは抽出停止が指示される。ステップＳ３１０で撮影が終了されたならば本シーケンスを終了する。
【００３９】
次に、低輝度時に特徴点抽出用のエリアを変更する第６の実施例を図８に基づいて説明
する。前述したように低輝度時には画像データのＳ／Ｎ比が低下しているので誤抽出する可能性が高くなる。また、低輝度時は被写体が画面から外れないよう、撮影者は被写体を予め撮影画面中央付近にとらえようとする傾向がある。それ故、低輝度時には抽出用エリアを通常時の抽出エリアより狭く且つ画面中央付近に設定することで周辺部に対する誤抽出を防止することができる。図８ステップＳ３２１でデジタルカメラの電源がオンされたことを判別してステップＳ３２２で被写体輝度を判別する。もし被写体輝度が低輝度でなかったならばステップＳ３２３に進み、低輝度であったならばステップＳ３２５に進む。この被写体輝度が低輝度かどうかを判別する方法は図７ステップＳ３０２と同様である。もし低輝度でないと判別されたならばステップＳ３２３に進んでここで抽出モードに設定されているかどうか判別する。もし抽出モードに設定されていなかったならばステップＳ３２８に進み、抽出モードに設定されていたならばステップＳ３２４に進む。ステップＳ３２４ではで特徴点抽出用に初期設定されている撮影画面内の縦横それぞれ８０％のエリア内から被写体の特徴点を抽出する。ここではこれを第１エリアとしている。ステップＳ３２２で被写体輝度が低輝度であると判別されたならばステップＳ３２５に進んでここで抽出モードに設定されているかどうか判別する。もし抽出モードに設定されていなかった
ならばステップＳ３２８に進み、設定されていたならばステップＳ３２６に進む。ステップＳ３２６では図４ステップＳ２１０で説明した連続撮影用エリアと同様の撮影画面内の中心近傍の縦横それぞれ４０％の範囲を抽出エリアとして選択する。或いはすでに主要被写体が抽出されている場合にはそれを中心とした所定範囲の抽出エリアを選択する。ここではこれらのエリアのうち、いずれかのエリアを第２エリアとしている。ステップＳ３２７では選択された第１或いは第２エリアのいずれかから被写体の特徴点を抽出して抽出結果をＬＣＤモニタ１０９に表示する。ステップＳ３２８では図７ステップＳ３０７と同様に、ＡＦ演算部１１２４により測距を行いその結果に基づいて撮影レンズ１０１を駆動する。この時、もし抽出モードに設定されていた場合にはＡＦ演算用に使用する画像データはステップＳ３２７で被写体特徴点抽出用に使用した撮像素子からの出力画像データをそのまま使用する。
【００４０】
ステップＳ３２９では全押しＳＷ１１６３が押され撮影開始指示がされたかどうか判別
する。もし指示されていなかったならばステップＳ３３１に進み、指示されたならばステップＳ３３０に進む。ステップＳ３３０では被写体撮影を行ってステップＳ３３１に進む。ステップＳ３３１では撮影が終了したかどうか判別する。もし撮影が終了していなかったならばステップＳ３２２に戻り新たな画像データに基づいて同様のシーケンスを繰り返す。撮影が終了したならば本シーケンスを終了する。
【００４１】
図７、図８に述べた第５、第６実施例においては低輝度時における抽出動作単独でのフ
ローである。一方、低輝度時にはＡＦ演算に際して輝度の低い被写体を照明するために通常補助光が使用される。次には、低輝度時にＡＦ用に使用されるこの補助光と抽出動作とを関連づけた実施例について説明する。ＡＦ演算において、被写体輝度が低い場合は予め補助光を被写体に照射しその反射光に基づいて被写体までの距離を演算している。このＡＦ補助光用の光源としては、実際の撮影時に被写体を照射するキセノン等の放電管を補助光として使用する場合と、放電管とは別個に補助光用として設けた白色ＬＥＤを光源として補助光を照射する場合とがある。もちろん被写体を照明して実際に撮影する時にもＬＥＤを使用しているような場合には、そのＬＥＤを補助光としても使用することも可能である。これらの補助光を備えたデジタルカメラにおける抽出動作の実施例を図９、図１０を使用して説明する。
【００４２】
図９は低輝度時に抽出用に補助光を照射するかどうかを選択することのできるデジタル
カメラを実現した第７の実施例である。補助光として前述したＬＥＤを使用する場合には照射範囲はＬＥＤの指向性に影響を受け、それによって抽出精度も影響を受けることとなる。例えば、撮影被写体の顔の面積が大きいときにはＬＥＤ補助光を使用した場合には、照射範囲が狭いため顔の一部のみ照明されてしまってその結果誤抽出してしまう場合がある。そのような場合には照射しない設定にする。逆に、画面内に複数の顔があったときなどにはＬＥＤの指向性が狭いので主要被写体のみを効率的に照射することができ被写体抽出精度が向上する。この考えに基づいた動作フローが図９である。
【００４３】
図９ステップＳ４０１でデジタルカメラの電源がオンされていることを確認したならば
、ステップＳ４０２で被写体輝度を判別する。もし被写体輝度が低輝度でなかったならばステップＳ４０３に進み、低輝度であったならばステップＳ４０４に進む。この被写体輝度が低輝度かどうかを判別する方法は図７ステップＳ３０２と同様である。もし低輝度でないと判別されたならばステップＳ４０３に進んでここで抽出モードに設定されているかどうか判別する。もし抽出モードに設定されていなかったならばステップＳ４０９に進み、抽出モードに設定されていたならばステップＳ４０７に進む。ステップＳ４０２で被写体輝度が低輝度だった場合にはステップＳ４０４で抽出モードに設定されているかどうか判別する。もし抽出モードに設定されていなかった場合にはステップＳ４０８に進んで被写体に補助光を照射しステップＳ４０９に進む。ステップＳ４０９では被写体からの反射
光に基づいて測距演算し、その結果に基づいて撮影レンズを駆動する。ステップＳ４０４で抽出モードに設定されていた場合にはステップＳ４０５に進んでここで補助光を照射する設定になっているかどうか判別する。この補助光を照射するかどうかの設定はＬＣＤモニタ１０９に表示される選択メニューを撮影者が設定釦１１６４で設定する（不図示）。撮影者がなにも設定していない場合はデフォルトで補助光を照射するように設定されている。
【００４４】
ステップＳ４０５で前述した理由により撮影者が補助光を照射しない設定にしていると
判別した場合にはステップＳ４０７に進んで補助光を照射しないで抽出を行う。ステップＳ４０５で補助光を照射する設定になっていた場合にはステップＳ４０６に進んで被写体に補助光を照射し、その結果得られた画像データを使用してステップＳ４０７で特徴点を抽出しその抽出結果をＬＣＤモニタ１０９に表示する。もし抽出モードであったならばステップＳ４０９においては抽出用に使用した撮像素子１０３からの出力画像データをそのまま使用してＡＦ演算し、その演算結果に基づいて撮影レンズ１０１を駆動する。抽出モードでなかったならば通常のＡＦ動作、すなわち被写体輝度が低い場合には補助光を照射した上でのＡＦ演算が行われる。この様に単にＡＦ用補助光として使用する場合にはＬＥＤの指向性により撮影画面の一部のみ照明されたとしてもＡＦ演算には問題はない。ここで、ステップＳ４０５で補助光を照射しない設定になっている場合にはステップＳ４０７では被写体が暗いので抽出不能となる場合もあるがその場合にはＬＣＤモニタ１０９上に抽出不可表示を行う。
【００４５】
ステップＳ４１０では全押しＳＷ１１６３が押され撮影開始の指示がされたかどうか判
別する。もし指示がされたならばステップＳ４１１に進み撮影を行いステップＳ４１２に進む。ステップＳ４１０で撮影開始指示がされなかった場合にはステップＳ４１２に進む。ステップＳ４１２では撮影が終了したかどうか判別し、終了していなかったならばステップＳ４０２に戻り新たな画像データに基づいて同様のシーケンスを繰り返す。撮影が終了したならば本シーケンスを終了する。この図９で説明したフローは低輝度時に被写体に対して抽出用の補助光を照射するかどうかを選択する場合を説明したものであって、測距動作とは基本的に独立した動作である。図９においては測距方法がＡＦ測距の場合について説明したが、測距方法はＡＦに限らずマニュアル測距であっても良い。その場合にはもちろん測距用の補助光の照射は行われない。
【００４６】
被写体抽出用の画像データはＡＦ用に使用する画像データと同一の時刻に撮像素子から
出力された画像データが使用されるので被写体によっては誤抽出する場合がある。図９では被写体に応じて抽出用補助光を照射するかどうかを設定する実施例を説明した。これに対して、図１０は低輝度時に補助光が照射された画像データを抽出用画像データとして使用するかどうかを選択することのできるデジタルカメラを実現した第８の実施例である。
【００４７】
図１０ステップＳ４２１で電源がオンされていることを確認したならば、ステップＳ４
２２で被写体輝度を判別する。もし被写体輝度が低輝度でなかったならばステップＳ４２３に進み、低輝度であったならばステップＳ４２５に進む。この被写体輝度が低輝度かどうかを判別する方法は図７ステップＳ３０２と同様である。もし低輝度でないと判別されたならばステップＳ４２３に進んでここで抽出モードに設定されているかどうか判別する。もし抽出モードに設定されていなかったならばステップＳ４２８に進み、抽出モードに設定されていたならばステップＳ４２４に進む。ステップＳ４２４では被写体の特徴点を抽出しＬＣＤモニタ１０９に表示し、ステップＳ４２８に進む。ステップＳ４２２で被写体輝度が低輝度だった場合にはステップＳ４２５で補助光を照射した後ステップＳ４２６に進む。ステップＳ４２６では抽出モードに設定されているかどうか判別する。もし抽出モードに設定されていなかった場合にはステップＳ４２８に進んで抽出モードに設定されていたならばステップＳ４２７に進む。ステップＳ４２７では補助光が照射された画像デ
ータを使って抽出するよう設定されているかどうか判別する。もし抽出するよう設定されていたならばステップＳ４２４に進んで被写体の特徴点を抽出する。この時、撮影者がなにも設定していない場合はデフォルトで抽出するように設定されている。照射画像データを抽出用に使用しないように設定されていた場合にはステップＳ４２８に進んで直ちにＡＦ演算し、その演算結果に基づいて撮影レンズ１０１を駆動する。ステップＳ４２９では全押しＳＷ１１６３が押され撮影開始の指示がされたかどうか判別する。もし指示がされたならばステップＳ４３０に進み撮影を行いステップＳ４３１に進む。ステップＳ４２９で撮影開始指示がされなかった場合にはステップＳ４３１に進む。ステップＳ４３１では撮影が終了したかどうか判別し、終了していなかったならばステップＳ４２２に戻り新たな画像データに基づいて同様のシーケンスを繰り返す。撮影が終了したならば本シーケンスを終了する。
【００４８】
ここまで述べてきた実施例に応じて抽出された特徴点に対してその特徴点近傍をＡＦエリアあるいはＡＥエリアに設定することで撮影者の撮影意図に適合したピント或いは露出でもって撮影をすることが可能となる。一方、特徴点の抽出に際しては被写体輝度だけでなく、ほかにも被写体の大きさ、向き、傾き等によっても抽出が不可能となる場合がある。そのような場合には直ちに予め設定してある通常のＡＦエリアあるいはＡＥエリアを選択して所定の処理をする必要がある。図１１はＡＦあるいはＡＥ処理の際に抽出の可否に応じて最適のエリアを選択するためのフローである。このフローはこれまで説明した第１〜第８の実施例に共通に適用される。図１１ステップＳ４５１ではまず特徴点抽出のための初期エリアを選択する。この初期エリアとは例えば図１５に一点鎖線で示される撮影画面の縦横それぞれ８０％のエリアである。ステップＳ４５２ではこの一点鎖線で示された初期エリア内の特徴点を抽出する。ステップＳ４５３では特徴点が抽出されたかどうか判別する。もし抽出されなかったならばステップＳ４５６に進み、抽出されたならばステップＳ４５４に進む。ステップＳ４５４５では抽出した特徴点近傍がＡＦエリアあるいはＡＥエリアとして選択されているかどうか判別する。もし選択されていたならばステップＳ４５８に進み、選択されていなかったならばステップＳ４５５に進んで抽出した特徴点近傍の所定エリアをＡＦエリアあるいはＡＥエリアとして選択し、ステップＳ４５８に進む。図１５に抽出した特徴点近傍をＡＦエリアあるいはＡＥエリアとして選択した場合の表示例を示す。図１５では３人いる人物のうち主要被写体である真ん中の人物の顔を含む所定エリアがＡＦエリアあるいはＡＥエリアとして破線で表示されている。
【００４９】
ステップＳ４５３で特徴点の抽出が不可能であったならばステップＳ４５６に進みここ
で所定のエリアがＡＦエリアあるいはＡＥエリアとして選択されているかどうか判別する。もし選択されていた場合にはステップＳ４５８に進み、選択されていなかった場合にはステップＳ４５７に進んで所定エリアを選択しその後ステップＳ４５７に進む。ここで所定エリアとは予めデフォルトで設定されているエリアであって図１５の実線で示す中央部の所定エリアをＡＦエリア及びＡＥエリアに設定する。ステップＳ４５８では抽出された特徴点近傍或いはデフォルトで設定されている所定エリアからの出力に基づいてＡＦ演算あるいはＡＥ演算を行いフォーカスレンズを駆動し撮影時のシャッタ値と絞り値を決定する。ステップＳ４５９では撮影が終了したかどうか判別し終了していなかったならばステップＳ４５２に戻り、撮影が終了したならば本シーケンスを終了する。なお、前述したように、撮像素子１０３から同一時刻に出力されたデータをＡＦ演算と抽出処理用に使用するだけでなく、ＡＥ演算の際にも抽出処理のために出力されたのと同一の画像データを使用することで撮像素子１０３からの出力を効率よく利用することができる。
【００５０】
ここで、これまで述べてきた抽出動作の概略ステップを図１２に基づいて説明する。図
１２ステップＳ５０１では前述したように撮像素子１０３から特徴点抽出用に間引いた画像データをＶＲＡＭ１０７に読み出し、更に中心の縦横８０％の範囲をバッファメモリ１０５に書き込む。この画像データからステップＳ５０２において特徴点抽出演算部１１２
３で画面内の特徴点となりうる候補を抽出する。これにより顔の数や位置、大きさ等が検出される。その後ステップＳ５０３ではステップＳ５０２で検出した顔と記憶部１１２５にデータベースとして記憶されている複数の顔の特徴点の中から予め撮影前に撮影者が指定した特定の顔の特徴点とを照合して合致している特徴点を検出する。この特徴点抽出演算に際しては周知のガボールウェーブレット（Ｇａｂｏｒ  ｗａｖｅｌｅｔ）変換等が用いられる。
【００５１】
これまで述べてきた抽出動作の停止という内容とは、ステップＳ５０１からステップＳ
５０３までの全てのステップを停止する場合だけでなく後半の一部のステップのみ停止する場合も含む。例えば、ステップＳ５０３のみ行わない場合、ステップＳ５０２とステップＳ５０３を行わない場合、ステップＳ５０１〜ステップＳ５０３を行わない場合のいずれかの場合を抽出停止と表現している。
【図面の簡単な説明】
【００５２】
【図１】本発明によるデジタルカメラの構成を示すブロック図である。
【図２】本発明によるデジタルカメラの動作シーケンスを説明するフローチャートである。
【図３】本発明によるデジタルカメラの他の動作シーケンスを説明するフローチャートである。
【図４】本発明によるデジタルカメラの他の動作シーケンスを説明するフローチャートである。
【図５】連続撮影時に抽出動作を行う場合の動作シーケンスを説明するフローチャートである。
【図６】本発明によるデジタルカメラの他の動作シーケンスを説明するフローチャートである。
【図７】本発明によるデジタルカメラの他の動作シーケンスを説明するフローチャートである。
【図８】本発明によるデジタルカメラの他の動作シーケンスを説明するフローチャートである。
【図９】本発明によるデジタルカメラの他の動作シーケンスを説明するフローチャートである。
【図１０】本発明によるデジタルカメラの他の動作シーケンスを説明するフローチャートである。
【図１１】抽出結果に応じてＡＦあるいはＡＥエリアを選択することを説明するフローチャートである。
【図１２】抽出動作のステップを説明するフローチャートである。
【図１３】抽出エリアを説明する図である。
【図１４】抽出エリアを説明する他の図である。
【図１５】抽出エリアおよびＡＦ、ＡＥエリアを説明する図である。
【符号の説明】
【００５３】
１０１  撮影レンズ
１０２  絞り
１０３  撮像素子
１０４  アナログ信号処理部
１０５  バッファメモリ
１０６  デジタル信号処理部
１０７  ＶＲＡＭ
１０８  Ｄ／Ａコンバータ
１０９  ＬＣＤモニタ
１１０  記録・再生信号処理部
１１１  外部記憶媒体
１１２  ＣＰＵ
１１３  レンズ駆動部
１１４  絞り駆動部
１１５  撮像素子駆動部
１１６  操作部材
１１７  ストロボ
１２１  レンズ位置検出部
１３５  Ａ／Ｄコンバータ
１１２１  ＡＥ演算部
１１２２  ＡＷＢ演算部
１１２３  特徴点抽出演算部
１１２４  ＡＦ演算部
１１２５  記憶部
１１６１  電源スイッチ
１１６２  半押しスイッチ
１１６３  全押しスイッチ
１１６４  設定釦
１１６５  アップ／ダウン釦                                              
【図１】
2005223659.tif 000003
【図２】
2005223659.tif 000004
【図３】
2005223659.tif 000005
【図４】
2005223659.tif 000006
【図５】
2005223659.tif 000007
【図６】
2005223659.tif 000008
【図７】
2005223659.tif 000009
【図８】
2005223659.tif 000010
【図９】
2005223659.tif 000011
【図１０】
2005223659.tif 000012
【図１１】
2005223659.tif 000013
【図１２】
2005223659.tif 000014
【図１３】
2005223659.tif 000015
【図１４】
2005223659.tif 000016
【図１５】
2005223659.tif 000017