(57)【特許請求の範囲】
【請求項１】
撮像装置であり、
撮影画像から撮影目的被写体を検出する目的被写体検出部と、
前記目的被写体検出部の検出情報を入力し、目的被写体に適応する制御パラメータを算出し、該制御パラメータに基づくカメラ制御を実行するカメラ制御部と、
前記カメラ制御部の制御情報に基づく制御が実行されるカメラ光学系またはカメラ信号処理部を有し、
前記カメラ制御部は、
前記目的被写体検出部の検出情報に基づいて撮影画像中に目的被写体が検出されない場合、予め定めた規定時間内においては、前記目的被写体に対応して設定済みの制御パラメータによる制御を継続して実行する構成であり、
前記制御パラメータは、前記カメラ光学系の制御パラメータと、カメラ信号処理に適用する信号処理パラメータの双方を含み、
前記カメラ制御部は、
前記カメラ光学系の制御パラメータと、カメラ信号処理に適用する信号処理パラメータの双方について、設定済みの制御パラメータによる制御を継続して実行することを特徴とする撮像装置。
【請求項２】
前記カメラ制御部は、
前記目的被写体に適応する制御パラメータとして、露出制御、焦点制御、または焦点距離制御の少なくともいずれかの制御パラメータを算出し、該算出パラメータに基づいて、前記カメラ光学系の制御を実行する構成であることを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記カメラ制御部は、
前記目的被写体に適応する制御パラメータとして、カメラ信号処理に適用する信号処理パラメータを算出する構成であり、
前記カメラ信号処理部は、
前記信号処理パラメータに基づくカメラ信号処理を実行する構成であることを特徴とする請求項１に記載の撮像装置。
【請求項４】
前記カメラ制御部は、
前記目的被写体検出部の検出情報に基づいて撮影画像中に目的被写体が検出されない状態が予め定めた規定時間に達した場合、前記目的被写体に適応する制御パラメータによる制御を停止し、特定の目的被写体を設定しない通常撮影モードに切り替える処理を実行する構成であることを特徴とする請求項１に記載の撮像装置。
【請求項５】
前記カメラ制御部は、
前記目的被写体に対応して設定された制御パラメータによる制御中は、撮影画像を表示するモニタ画面に、特定目的被写体に対応する制御が実行中であることを示す制御状態表示処理を実行する構成であることを特徴とする請求項１に記載の撮像装置。
【請求項６】
前記目的被写体検出部は、
撮影画像から人物の顔画像を撮影目的被写体として検出する処理を実行する構成であり、
前記カメラ制御部は、
目的被写体としての人物の顔に適応する制御パラメータを算出し、該制御パラメータに基づくカメラ制御を実行する構成であることを特徴とする請求項１乃至５いずれかに記載の撮像装置。
【請求項７】
撮像装置制御方法であり、
撮影画像から撮影目的被写体を検出する目的被写体検出ステップと、
前記目的被写体検出ステップにおける検出情報を入力し、目的被写体に適応する制御パラメータを算出する制御パラメータ算出ステップと、
前記制御パラメータに基づいて、カメラ光学系またはカメラ信号処理部の少なくともいずれかを制御するカメラ制御ステップを有し、
前記カメラ制御ステップは、
前記目的被写体検出ステップにおける検出情報に基づいて撮影画像中に目的被写体が検出されない場合、予め定めた規定時間内においては、前記目的被写体に対応して設定済みの制御パラメータによる制御を継続して実行するステップであり、
前記制御パラメータは、前記カメラ光学系の制御パラメータと、カメラ信号処理に適用する信号処理パラメータの双方を含み、
前記カメラ制御ステップは、
前記カメラ光学系の制御パラメータと、カメラ信号処理に適用する信号処理パラメータの双方について、設定済みの制御パラメータによる制御を継続して実行するステップであることを特徴とする撮像装置制御方法。
【請求項８】
前記制御パラメータ算出ステップは、
前記目的被写体に適応する制御パラメータとして、露出制御、焦点制御、または焦点距離制御の少なくともいずれかの制御パラメータを算出するステップであり、
前記カメラ制御ステップは、
前記算出パラメータに基づいて、前記カメラ光学系の制御を実行するステップであることを特徴とする請求項７に記載の撮像装置制御方法。
【請求項９】
前記制御パラメータ算出ステップは、
前記目的被写体に適応する制御パラメータとして、カメラ信号処理に適用する信号処理パラメータを算出するステップであり、
前記カメラ制御ステップは、
前記信号処理パラメータに基づくカメラ信号処理を実行するステップであることを特徴とする請求項７に記載の撮像装置制御方法。
【請求項１０】
前記撮像装置制御方法は、さらに、
前記目的被写体検出部の検出情報に基づいて撮影画像中に目的被写体が検出されない状態が予め定めた規定時間に達した場合、前記目的被写体に適応する制御パラメータによる制御を停止し、特定の目的被写体を設定しない通常撮影モードに切り替える処理を実行するステップを有することを特徴とする請求項７に記載の撮像装置制御方法。
【請求項１１】
前記撮像装置制御方法は、さらに、
前記目的被写体に対応して設定された制御パラメータによる制御中は、撮影画像を表示するモニタ画面に、特定目的被写体に対応する制御が実行中であることを示す制御状態表示処理を実行するステップを有することを特徴とする請求項７に記載の撮像装置制御方法。
【請求項１２】
前記目的被写体検出ステップは、
撮影画像から人物の顔画像を撮影目的被写体として検出する処理を実行するステップであり、
前記制御パラメータ算出ステップは、
目的被写体としての人物の顔に適応する制御パラメータを算出するステップであることを特徴とする請求項７乃至１１いずれかに記載の撮像装置制御方法。
【請求項１３】
撮像装置において撮像装置制御処理を実行させるコンピュータ・プログラムであり、
撮影画像から撮影目的被写体を検出する目的被写体検出ステップと、
前記目的被写体検出ステップにおける検出情報を入力し、目的被写体に適応する制御パラメータを算出する制御パラメータ算出ステップと、
前記制御パラメータに基づいて、カメラ光学系またはカメラ信号処理部の少なくともいずれかを制御するカメラ制御ステップを有し、
前記カメラ制御ステップは、
前記目的被写体検出ステップにおける検出情報に基づいて撮影画像中に目的被写体が検出されない場合、予め定めた規定時間内においては、前記目的被写体に対応して設定済みの制御パラメータによる制御を継続して実行するステップであり、
前記制御パラメータは、前記カメラ光学系の制御パラメータと、カメラ信号処理に適用する信号処理パラメータの双方を含み、
前記カメラ制御ステップは、
前記カメラ光学系の制御パラメータと、カメラ信号処理に適用する信号処理パラメータの双方について、設定済みの制御パラメータによる制御を継続して実行するステップであることを特徴とするコンピュータ・プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラムに関する。さらに詳細には、ビデオカメラなどの撮像装置を利用して被写体画像を撮影する際、人物の顔など撮影対象とする目的被写体に合わせた制御を実行し、ふらつきのない撮影画像を得る撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラムに関する。
【背景技術】
【０００２】
近年のデータ処理技術の進歩や、ハードウェアにおける計算処理能力の向上によって、ビデオカメラなどの撮像装置においても、より高度な制御が可能となってきている。例えば、ビデオカメラなどの撮像装置において人物を目的とした撮影を行なう場合、被写体となる人物の顔を撮影画像から検出し、検出した顔画像に合わせて、各種の撮影パラメータ、画像処理パラメータの制御を行って、高品質な撮影データを取得する構成が提案されている。
【０００３】
例えば、特許文献１には、撮影画像から特定色の被写体を検出することによる顔検出方法が開示されている。また、特許文献２には、例えば人物の顔など特定色の被写体が画面の一定領域を占めるようズーム制御を行う方法が提案されている。
【０００４】
画像処理技術やハードウェアの進歩によって検出速度が向上した結果、撮像装置によって撮影された被写体の顔部分を正確に検出し、検出画像を持つ被写体を自動的に追尾する制御も可能となっている。しかし、被写体を追尾する場合、例えば追尾被写体として特定した顔画像が一時的に例えば壁や、前を横切る車などの移動物体によって隠蔽されると被写体検出が途切れてしまうことになり、再度、被写体検出処理を実行しなければならない。なお、遮蔽物によって目的被写体が隠蔽された場合の被写体検出方法については、例えば特許文献３に記載がある。
【０００５】
目的被写体が一時的に例えば壁や、前を横切る車などの移動物体によって隠蔽された場合の問題点として次の問題点がある。遮蔽物による遮蔽が発生する前には、例えば目的被写体である人物顔画像の撮影に最適な撮影パラメータ、画像処理パラメータが設定され、その設定パラメータによって制御が行なわれて撮影処理が実行される。しかし、遮蔽物によって、被写体の顔画像が隠蔽された瞬間から、設定パラメータは、目的被写体の顔画像に対応するパラメータから遮蔽物に適応するように変更される。その後、目的被写体の顔画像が遮蔽されなくなると、再度、顔検出が行われて、検出された以後は、目的被写体としての人物顔画像の撮影に最適なパラメータに再設定されて制御が行なわれ撮影されることになる。
【０００６】
このように、パラメータ変更が短時間に実行され制御状態が急激に変更されると、撮影画像データの品質に悪影響を及ぼす。例えば撮影画像としてのビデオ画像データを構成する数フレーム毎にフォーカス、露出、画質が異なるなど、撮影画像が不均一なふらつきのある低品質な画像データとなってしまうことがある。
【特許文献１】特開平０６−１２１３３２号公報
【特許文献２】特開平０６−２１７１８７号公報
【特許文献３】特開２００４−２５８９２５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
本発明は、上述の問題点に鑑みてなされたものであり、人物の顔などの目的被写体を特定し、目的被写体に合わせた制御を行う撮像装置において、目的被写体が一次的に遮蔽物によって隠蔽された場合においても、予め定めた規定時間以内は、カメラ制御パラメータの変更を行なうことなく隠蔽前の制御状態での撮影を継続させて、フレーム間での画像、画質ばらつきを発生させない高品質な画像を撮影することを可能とした撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
本発明の第１の側面は、
撮像装置であり、
撮影画像から撮影目的被写体を検出する目的被写体検出部と、
前記目的被写体検出部の検出情報を入力し、目的被写体に適応する制御パラメータを算出し、該制御パラメータに基づくカメラ制御を実行するカメラ制御部と、
前記カメラ制御部の制御情報に基づく制御が実行されるカメラ光学系またはカメラ信号処理部を有し、
前記カメラ制御部は、
前記目的被写体検出部の検出情報に基づいて撮影画像中に目的被写体が検出されない場合、予め定めた規定時間内においては、前記目的被写体に対応して設定済みの制御パラメータによる制御を継続して実行する構成であることを特徴とする撮像装置にある。
【０００９】
さらに、本発明の撮像装置の一実施態様において、前記カメラ制御部は、前記目的被写体に適応する制御パラメータとして、露出制御、焦点制御、または焦点距離制御の少なくともいずれかの制御パラメータを算出し、該算出パラメータに基づいて、前記カメラ光学系の制御を実行する構成であることを特徴とする。
【００１０】
さらに、本発明の撮像装置の一実施態様において、前記カメラ制御部は、前記目的被写体に適応する制御パラメータとして、カメラ信号処理に適用する信号処理パラメータを算出する構成であり、前記カメラ信号処理部は、前記信号処理パラメータに基づくカメラ信号処理を実行する構成であることを特徴とする。
【００１１】
さらに、本発明の撮像装置の一実施態様において、前記カメラ制御部は、前記目的被写体検出部の検出情報に基づいて撮影画像中に目的被写体が検出されない状態が予め定めた規定時間に達した場合、前記目的被写体に適応する制御パラメータによる制御を停止し、特定の目的被写体を設定しない通常撮影モードに切り替える処理を実行する構成であることを特徴とする。
【００１２】
さらに、本発明の撮像装置の一実施態様において、前記カメラ制御部は、前記目的被写体に対応して設定された制御パラメータによる制御中は、撮影画像を表示するモニタ画面に、特定目的被写体に対応する制御が実行中であることを示す制御状態表示処理を実行する構成であることを特徴とする。
【００１３】
さらに、本発明の撮像装置の一実施態様において、前記目的被写体検出部は、撮影画像から人物の顔画像を撮影目的被写体として検出する処理を実行する構成であり、前記カメラ制御部は、目的被写体としての人物の顔に適応する制御パラメータを算出し、該制御パラメータに基づくカメラ制御を実行する構成であることを特徴とする。
【００１４】
さらに、本発明の第２の側面は、
撮像装置制御方法であり、
撮影画像から撮影目的被写体を検出する目的被写体検出ステップと、
前記目的被写体検出ステップにおける検出情報を入力し、目的被写体に適応する制御パラメータを算出する制御パラメータ算出ステップと、
前記制御パラメータに基づいて、カメラ光学系またはカメラ信号処理部の少なくともいずれかを制御するカメラ制御ステップを有し、
前記カメラ制御ステップは、
前記目的被写体検出ステップにおける検出情報に基づいて撮影画像中に目的被写体が検出されない場合、予め定めた規定時間内においては、前記目的被写体に対応して設定済みの制御パラメータによる制御を継続して実行することを特徴とする撮像装置制御方法にある。
【００１５】
さらに、本発明の撮像装置制御方法の一実施態様において、前記制御パラメータ算出ステップは、前記目的被写体に適応する制御パラメータとして、露出制御、焦点制御、または焦点距離制御の少なくともいずれかの制御パラメータを算出するステップであり、前記カメラ制御ステップは、前記算出パラメータに基づいて、前記カメラ光学系の制御を実行するステップであることを特徴とする。
【００１６】
さらに、本発明の撮像装置制御方法の一実施態様において、前記制御パラメータ算出ステップは、前記目的被写体に適応する制御パラメータとして、カメラ信号処理に適用する信号処理パラメータを算出するステップであり、前記カメラ制御ステップは、前記信号処理パラメータに基づくカメラ信号処理を実行するステップであることを特徴とする。
【００１７】
さらに、本発明の撮像装置制御方法の一実施態様において、前記撮像装置制御方法は、さらに、前記目的被写体検出部の検出情報に基づいて撮影画像中に目的被写体が検出されない状態が予め定めた規定時間に達した場合、前記目的被写体に適応する制御パラメータによる制御を停止し、特定の目的被写体を設定しない通常撮影モードに切り替える処理を実行するステップを有することを特徴とする。
【００１８】
さらに、本発明の撮像装置制御方法の一実施態様において、前記撮像装置制御方法は、さらに、前記目的被写体に対応して設定された制御パラメータによる制御中は、撮影画像を表示するモニタ画面に、特定目的被写体に対応する制御が実行中であることを示す制御状態表示処理を実行するステップを有することを特徴とする。
【００１９】
さらに、本発明の撮像装置制御方法の一実施態様において、前記目的被写体検出ステップは、撮影画像から人物の顔画像を撮影目的被写体として検出する処理を実行するステップであり、前記制御パラメータ算出ステップは、目的被写体としての人物の顔に適応する制御パラメータを算出するステップであることを特徴とする。
【００２０】
さらに、本発明の第３の側面は、
撮像装置において撮像装置制御処理を実行させるコンピュータ・プログラムであり、
撮影画像から撮影目的被写体を検出する目的被写体検出ステップと、
前記目的被写体検出ステップにおける検出情報を入力し、目的被写体に適応する制御パラメータを算出する制御パラメータ算出ステップと、
前記制御パラメータに基づいて、カメラ光学系またはカメラ信号処理部の少なくともいずれかを制御するカメラ制御ステップを有し、
前記カメラ制御ステップは、
前記目的被写体検出ステップにおける検出情報に基づいて撮影画像中に目的被写体が検出されない場合、予め定めた規定時間内においては、前記目的被写体に対応して設定済みの制御パラメータによる制御を継続して実行することを特徴とするコンピュータ・プログラムにある。
【００２１】
なお、本発明のコンピュータ・プログラムは、例えば、様々なプログラム・コードを実行可能な汎用コンピュータ・システムに対して、コンピュータ可読な形式で提供する記憶媒体、通信媒体、例えば、ＣＤやＦＤ、ＭＯなどの記憶媒体、あるいは、ネットワークなどの通信媒体によって提供可能なコンピュータ・プログラムである。このようなプログラムをコンピュータ可読な形式で提供することにより、コンピュータ・システム上でプログラムに応じた処理が実現される。
【００２２】
本発明のさらに他の目的、特徴や利点は、後述する本発明の実施例や添付する図面に基づく、より詳細な説明によって明らかになるであろう。なお、本明細書においてシステムとは、複数の装置の論理的集合構成であり、各構成の装置が同一筐体内にあるものには限らない。
【発明の効果】
【００２３】
本発明の一実施例構成によれば、例えば人物の顔などの特定の撮影目的被写体に適応させた撮影制御を実行する撮像装置において、撮影目的被写体が壁などの遮蔽物によって、一時的に撮影画像から消えた場合においても、人物の顔などの特定の撮影目的被写体に適応させた撮影制御を、そのまま一定時間継続させて行なう構成としたので、人物が再び撮影可能となった場合に、そのままの制御パラメータによって撮影を継続することが可能となり、短時間での制御状態の切り替えによって不均一なふらついた画像が生成されることなく、安定した高品質な画像の撮影が実現される。
【発明を実施するための最良の形態】
【００２４】
以下、図面を参照しながら、本発明の撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラムの詳細について説明する。
【００２５】
まず、本発明の撮像装置の構成例について図１を参照して説明する。レンズ等によって構成される光学系２０を介して入射する被写体像は、露出駆動部２１によって適切な露出制御のなされた入射光としてＣＣＤ等の撮像素子２２に入力される。
【００２６】
撮像素子２２は、被写体像に基づく光信号を電気信号に変換する光電変換処理を実行し、電気信号を出力する。撮像素子２２における光電変換によって生成された電気信号はカメラ信号処理部２３に入力される。カメラ信号処理部２３は、様々な処理パラメータに基づく信号処理を実行して画像信号を生成する処理を実行する。
【００２７】
カメラ信号処理部２３は、撮像素子２２における光電変換によって生成された電気信号に対して、例えば、リニアマトリクス処理、ホワイトバランス処理、γ補正処理などの処理を実行して画像信号を生成する。信号処理部の具体的構成については、図２を参照して後段で説明する。カメラ信号処理部２３において生成された画像信号は、バッファメモリ２４を介して画像処理部２５に入力される。画像処理部２５では、色調補正、輝度補正などの画像処理、ビデオ信号の生成、あるいはエンコード処理など、目的に応じた画像処理を実行し、その後、モニタ(ＥＶＦ：Electric View Finder)への出力、あるいは記憶部への格納処理がなされる。
【００２８】
カメラ信号処理部２３は、さらにカメラ制御に必要な情報をカメラ制御部２６に出力する。カメラ制御部２６は、カメラ信号処理部２３から入力する情報に基づいて、レンズドライバ２７を介してモータ２８，２９を駆動して、レンズの位置制御による焦点制御や焦点距離制御を実行する。さらに、カメラ制御部２６は、カメラ信号処理部２３から入力する情報に基づいて、露出駆動部２１を制御し露出制御を実行する。
【００２９】
カメラ信号処理部２３の詳細構成例を、図２に示す。図１に示す撮像素子２２における光電変換によって生成された電気信号はカメラ信号処理部２３のＩ／Ｆ回路２３１に入力され、入力信号は、バス結合されたカメラ画像信号処理回路２３３において、信号処理が実行される。このカメラ画像信号処理回路２３３においては、撮像素子２２における光電変換によって生成された電気信号に対して、例えば、リニアマトリクス処理、ホワイトバランス処理、γ補正処理等のカメラ信号処理を実行する。
【００３０】
撮像素子２２における光電変換によって生成され、カメラ信号処理部２３のＩ／Ｆ回路２３１を介して入力した電気信号は、検波回路２３２にも入力される。検波回路２３２は、入力信号の検波処理を行い、図１に示すカメラ制御部２６に対して、Ｉ／Ｆ回路２３６を介して検波結果を出力する。
【００３１】
カメラ制御部２６は、検波回路２３２から入力する検波結果に基づいて、フォーカス制御パラメータ、および焦点制御パラメータ等のカメラ制御パラメータを算出する演算処理を行い、演算処理の結果、決定した制御パラメータに基づく制御を実行する。
【００３２】
顔検出回路２３４は、カメラ画像信号処理回路２３３におけるカメラ画像信号処理の結果データとして出力される画像信号に基づいて、顔検出処理を実行する。検出結果は、Ｉ／Ｆ回路２３６を介してカメラ制御部２６へ出力される。なお、顔検出回路２３４における画像データに基づく顔検出は、例えば撮影画像の色彩判定処理などの既存の技術によって実行される。顔検出回路２３４は、撮影画像フレーム毎に顔が検出されたか否かを判定し、顔が検出されたか否かを示すフレーム対応の顔検出状態情報は、Ｉ／Ｆ回路２３６を介してカメラ制御部２６へ出力され、カメラ制御部２６内のメモリ２６２（図３参照）に記録される。
【００３３】
カメラ制御部２６の構成および処理について、図３を参照して説明する。カメラ制御部２６は、カメラ信号処理部２３とのデータ入出力を行なうＩ／Ｆ回路２６１、顔検出状態情報や処理プログラムを格納するメモリ２６２、カメラ制御部２６におけるデータ処理制御を実行する制御部２６３、カメラ光学系に対する制御信号出力用のＩ／Ｆ回路２６４、光学系パラメータの算出を行なう光学系パラメータ算出部２６５、信号処理パラメータを算出する信号処理パラメータ算出部２６６、顔検出フレームからの経過時間を計測するタイマ２６７を有する。
【００３４】
カメラ制御部２６は、Ｉ／Ｆ回路２６１を介してカメラ信号処理部２３の顔検出回路２３４からの顔検出情報を入力する。顔が検出されたか否かを示すフレーム対応の顔検出状態情報は、メモリ２６２に記録される。
【００３５】
さらに、光学系制御パラメータ算出部２６５は、検出された顔を撮影目的被写体として設定し、顔画像を被写体とした場合の焦点制御、露出制御、焦点距離制御パラメータを算出する。制御部２６３は、算出パラメータに基づく焦点制御、露出制御、焦点距離制御情報をＩ／Ｆ回路２６４を介してカメラ光学系へ出力し、制御処理を実行する。
【００３６】
さらに、カメラ制御部２６の信号処理パラメータ算出部２６６は、は、顔検出回路２３４からの顔検出情報に基づいて、カメラ画像信号処理回路２３３における信号処理に適用するパラメータ、例えば、カラーバランス処理、リニアマトリクス処理、ホワイトバランス処理、γ補正処理等のカメラ信号処理に適用するパラメータを、撮影画像に含まれる顔画像に適した処理パラメータとして算出し、制御部２６３は、算出した信号処理パラメータをＩ／Ｆ回路２６１を介して、カメラ信号処理部２３のカメラ画像信号処理回路２３３に入力する。
【００３７】
カメラ信号処理部２３のカメラ画像信号処理回路２３３は、カメラ制御部２６において算出されたパラメータに基づいて、例えば、カラーバランス処理、リニアマトリクス処理、ホワイトバランス処理、γ補正処理等のカメラ信号処理を行う。カメラ画像信号処理回路２３３における信号処理結果は、メモリＩ／Ｆ回路２３５を介して図１に示すバッファメモリ２５に格納され、画像処理部２５において画像処理が実行される。
【００３８】
本発明における撮像装置の撮像処理シーケンスについて、図４に示すフローチャートを参照して説明する。図４に示すフローチャートは、目的被写体を人物とし、人物の顔画像の撮影に最適な制御パラメータを設定して撮影を実行する顔検出モードにおける撮影シーケンスを説明するフローチャートであり、図３に示すカメラ制御部２６の制御部２６３において、メモリ２６２に記録されたプログラムによって実行される処理である。
【００３９】
なお、制御パラメータとは、例えば露出制御、焦点制御、焦点距離制御等のカメラ光学系の制御に適用する制御パラメータと、図２に示すカメラ画像信号処理回路２３３におけるカメラ信号処理、例えば、カラーバランス処理、リニアマトリクス処理、ホワイトバランス処理、γ補正処理等のカメラ信号処理に適用するパラメータの双方のパラメータを含む。
【００４０】
なお、図４に示すフローは撮影画像フレーム毎に繰り返し実行される処理を示している。撮像装置を顔検出モードに設定すると、顔検出モード処理が開始される。例えば、図５（ａ）における撮像画像フレーム３００の例のように、撮影画像フレーム３００に人物の顔３０１が含まれる場合、この顔画像の検出を実行する。この顔検出処理は、図２に示すカメラ信号処理回路２３の顔検出回路２３４において、例えば画像の色彩判定処理などを適用して実行される。
【００４１】
図４に示すフローにおけるステップＳ１０１において、顔検出回路２３４において撮影画像からの顔領域の検出が成功した場合、ステップＳ１０２において、目的撮影対象を顔に設定し、顔に合わせたカメラ制御処理を実行する。
【００４２】
すなわち、図２を参照して説明した顔検出回路２３４は、カメラ画像信号処理回路２３３におけるカメラ画像信号処理の結果データとして出力される画像信号に基づいて、顔検出処理を実行し、顔検出に成功した場合は、検出情報を、Ｉ／Ｆ回路２３６を介してカメラ制御部２６へ出力し、カメラ制御部２６の光学系制御パラメータ算出部２６５は、撮影画像に含まれる顔を目的被写体として設定した露出制御、焦点制御、焦点距離制御等のパラメータ算出を行い制御部２６３は、これらのパラメータに基づく制御信号をＩ／Ｆ回路２６４を介してかめら光学系へ出力して制御を実行する。すなわち、顔画像に対して最適な制御パラメータを算出し、算出したパラメータに基づいて、露出制御、焦点制御、焦点距離制御等の制御を実行する。
【００４３】
さらに、カメラ制御部２６の信号処理パラメータ算出部２６６は、顔検出回路２３４からの顔検出情報に基づいて、カメラ画像信号処理回路２３３における信号処理に適用するパラメータを、撮影画像に含まれる顔画像に適した処理パラメータとして算出し、制御部２６３は、算出した信号処理パラメータをＩ／Ｆ回路２６１を介して、カメラ信号亜処理部２３のカメラ画像信号処理回路２３３に入力する。カメラ画像信号処理回路２３３は、カメラ制御部２６の信号処理パラメータ算出部２６６において算出されたパラメータに基づいて、例えば、カラーバランス処理、リニアマトリクス処理、ホワイトバランス処理、γ補正処理等のカメラ信号処理を行う。
【００４４】
次にステップＳ１０３において、今回の撮影画像フレームにおいて顔が検出されたか否かを示す顔検出状態を、カメラ制御部２６のメモリ２６２に記憶し、次のフレームの処理に移行する。
【００４５】
一方、ステップＳ１０１において、顔検出回路２３４において撮影画像からの顔領域の検出が成功しなかった場合、例えば、図５（ｂ）に示す画像フレーム３１０に示すように、遮蔽物３１２の陰に人物３１１が隠蔽され、撮影画像からの顔領域の検出が成功しなかった場合は、ステップＳ１０４に進む。
【００４６】
ステップＳ１０４では、過去のフレームにおいて、顔検出がなされていたか否かを判定する。過去フレームに対応する顔検出状態情報をメモリ２６２から取得し、過去のフレームにおいて、顔検出がなされていたか否かを判定する。なお、メモリ２６２には、少なくとも直前のフレームについて、顔が検出されたか否かの顔検出状態がフレーム対応データとして記録され、ステップＳ１０４では、メモリ２６２に記録された顔検出状態を参照してステップＳ１０４の判定、すなわち、過去のフレームにおいて、顔検出がなされていたか否かを判定する。
【００４７】
ステップＳ１０４において、過去フレームにおいて、顔検出がなされていなかったと判断された場合は、ステップＳ１０７に進み、顔検出モードでない所定の通常状態のカメラ制御処理を行う。すなわち目的被写体を人物の顔として設定していない通常の撮影処理に移行する。その後、ステップＳ１０３において、フレーム対応の顔検出状態情報をメモリ２６２に記録する処理を行い、次のフレームの処理を行なう。
【００４８】
一方、ステップＳ１０４において、過去フレームにおいて、顔検出がなされていたと判断された場合は、ステップＳ１０５に進み、予め定めた閾値時間（例えば数秒）が経過しているか否かをタイマ２６７の計測により判定し、閾値時間が経過していない場合は、ステップＳ１０６に進み。制御パラメータを人物の顔の撮影に対応して設定済みのパラメータをそのまま適用するホールド処理を実行する。さらに、ステップＳ１０３において、フレーム対応の顔検出状態情報をメモリ２６２に記録する処理を行い、次のフレームの処理を行なう。
【００４９】
ステップＳ１０４において、過去フレームにおいて、顔検出がなされていたと判断され、ステップＳ１０５において、予め定めた閾値時間（例えば数秒）が経過していると判定された場合は、ステップＳ１０７に進み。制御パラメータを人物の顔の撮影に対応して設定したモードを終了し、顔検出モードでない所定の通常状態のカメラ制御処理を行う。すなわち目的被写体を人物の顔として設定していない通常の撮影処理に移行し、さらに、ステップＳ１０３において、フレーム対応の顔検出状態情報をメモリ２６２に記録し、次のフレームの処理を行なう。
【００５０】
なお、カメラ制御部２６は、目的被写体としての人物の顔に対応して設定された制御パラメータによる制御中は、撮影画像を表示するモニタ画面に、特定目的被写体（人物の顔）に対応する制御が実行中であることを示す表示処理を実行する構成としてもよい。
【００５１】
例えば、図６に示すように、人物の顔を示すアイコン３２１をモニタ画面に表示される撮影画像に重畳して表示させる。この制御は、カメラ制御部２６の制御部２６３によって実行される。制御部２６３は、アイコン表示コマンドをカメラ信号処理回路２３を介して画像処理部２５へ出力するか、あるいは、直接、画像処理部２５へアイコンの表示処理命令を出力する。このアイコン表示処理によって、撮影処理を実行中のユーザは、設定モードの状態を知ることが可能となる。
【００５２】
このように、本発明の撮像装置においては、目的被写体として例えば人物の顔を特定し、目的被写体に合わせた制御を行う撮像装置において、目的被写体が一次的に遮蔽物によって隠蔽された場合においても、予め定めた規定時間以内は、カメラ制御パラメータの変更を行なうことなく隠蔽前の状態での撮影を継続させる構成とした。本構成により、フレーム間での画像、画質ばらつきを発生させない高品質な画像を撮影することが可能となる。
【００５３】
以上、特定の実施例を参照しながら、本発明について詳解してきた。しかしながら、本発明の要旨を逸脱しない範囲で当業者が該実施例の修正や代用を成し得ることは自明である。すなわち、例示という形態で本発明を開示してきたのであり、限定的に解釈されるべきではない。本発明の要旨を判断するためには、特許請求の範囲の欄を参酌すべきである。
【００５４】
また、明細書中において説明した一連の処理はハードウェア、またはソフトウェア、あるいは両者の複合構成によって実行することが可能である。ソフトウェアによる処理を実行する場合は、処理シーケンスを記録したプログラムを、専用のハードウェアに組み込まれたコンピュータ内のメモリにインストールして実行させるか、あるいは、各種処理が実行可能な汎用コンピュータにプログラムをインストールして実行させることが可能である。
【００５５】
例えば、プログラムは記録媒体としてのハードディスクやＲＯＭ（Read Only Memory)に予め記録しておくことができる。あるいは、プログラムはフレキシブルディスク、ＣＤ−ＲＯＭ(Compact Disc Read Only Memory)，ＭＯ(Magneto optical)ディスク，ＤＶＤ(Digital Versatile Disc)、磁気ディスク、半導体メモリなどのリムーバブル記録媒体に、一時的あるいは永続的に格納（記録）しておくことができる。このようなリムーバブル記録媒体は、いわゆるパッケージソフトウエアとして提供することができる。
【００５６】
なお、プログラムは、上述したようなリムーバブル記録媒体からコンピュータにインストールする他、ダウンロードサイトから、コンピュータに無線転送したり、ＬＡＮ(Local Area Network)、インターネットといったネットワークを介して、コンピュータに有線で転送し、コンピュータでは、そのようにして転送されてくるプログラムを受信し、内蔵するハードディスク等の記録媒体にインストールすることができる。
【００５７】
なお、明細書に記載された各種の処理は、記載に従って時系列に実行されるのみならず、処理を実行する装置の処理能力あるいは必要に応じて並列的にあるいは個別に実行されてもよい。また、本明細書においてシステムとは、複数の装置の論理的集合構成であり、各構成の装置が同一筐体内にあるものには限らない。
【産業上の利用可能性】
【００５８】
以上、説明したように、本発明の一実施例構成によれば、例えば人物の顔などの特定の撮影目的被写体に適応させた撮影制御を実行する撮像装置において、撮影目的被写体が壁などの遮蔽物によって、一時的に撮影画像から消えた場合においても、人物の顔などの特定の撮影目的被写体に適応させた撮影制御を、そのまま一定時間継続させて行なう構成としたので、人物が再び撮影可能となった場合に、そのままの制御パラメータによって撮影を継続することが可能となり、短時間での制御状態の切り替えによって不均一なふらついた画像が生成されることなく、安定した高品質な画像の撮影が実現される。
【図面の簡単な説明】
【００５９】
【図１】本発明の一実施例に係る撮像装置の構成例について説明する図である。
【図２】本発明の一実施例に係る撮像装置のカメラ信号処理部の構成例について説明する図である。
【図３】本発明の一実施例に係る撮像装置のカメラ制御部の構成例について説明する図である。
【図４】本発明の一実施例に係る撮像装置における撮影処理シーケンスについて説明するフローチャートを示す図である。
【図５】本発明の一実施例に係る撮像装置の撮影する画像データの例について説明する図である。
【図６】本発明の一実施例に係る撮像装置において、人物の顔を示すアイコンをモニタ画面に表示させた例を示す図である。
【符号の説明】
【００６０】
２０  光学系
２１  露出駆動部
２２  撮像素子
２３  カメラ信号処理部
２４  バッファメモリ
２５  画像処理部
２６  カメラ制御部
２７  レンズドライバ
２８，２９  モータ
２３１  Ｉ／Ｆ回路
２３２  検波回路
２３３  カメラ画像信号処理回路
２３４  顔検出回路
２３５  メモリＩ／Ｆ回路
２３６  Ｉ／Ｆ回路
２６１  Ｉ／Ｆ回路
２６２  メモリ
２６３  制御部
２６４  Ｉ／Ｆ回路
２６５  光学系パラメータ算出部
２６６  信号処理パラメータ算出部
２６７  タイマ
【図１】
0004730044.tif 000002
【図２】
0004730044.tif 000003
【図３】
0004730044.tif 000004
【図４】
0004730044.tif 000005
【図５】
0004730044.tif 000006
【図６】
0004730044.tif 000007