(57)【特許請求の範囲】
【請求項１】
撮像面に結像した被写体の画像データを取得する撮像画像取得部と、
前記画像データの中から前記被写体の顔の表情を検出し、前記検出された顔の表情度合いを算出する表情度合算出部と、
前記表情度合算出部で算出された前記表情度合いが所定閾値以上となったとき、外部からの振動又は前記被写体の動きにより前記画像データに生じるブレの補正を開始するブレ補正部と、
を備えることを特徴とする、撮像装置。
【請求項２】
撮像面に結像した被写体の画像データを取得する撮像画像取得部と、
前記画像データの中から前記被写体の顔の表情を検出し、前記検出された顔の表情度合いを算出する表情度合算出部と、
外部からの振動又は前記被写体の動きにより前記画像データに生じるブレに対して、
前記表情度合算出部で算出された前記表情度合いが高いとき前記ブレ補正の制御量の単位時間当たりの取得回数を増加させ、前記表情度合いが低いとき前記ブレ補正の制御量の単位時間当たりの取得回数を減少させる補正を行うブレ補正部と、
を備えることを特徴とする、撮像装置。
【請求項３】
撮像面に結像した被写体の画像データを取得する撮像画像取得部と、
前記画像データの中から前記被写体の顔の表情を検出し、前記検出された顔の表情度合いを算出する表情度合算出部と、
外部からの振動又は前記被写体の動きによって生じる前記画像データのブレに対して、前記表情度合算出部で算出された前記表情度合いが高いときは大きな補正量で補正し、前記表情度合いが低いときは小さな補正量で補正をするブレ補正部と、
を備えることを特徴とする、撮像装置。
【請求項４】
前記ブレ補正部は、前記表情度合いが所定閾値以上となったとき、前記ブレ補正の制御
量の取得を開始することを特徴とする、請求項１に記載の撮像装置。
【請求項５】
前記表情は、人物の笑顔であることを特徴とする、請求項１乃至３のいずれか１項に記載の撮像装置。
【請求項６】
前記検出された表情に対して相関演算するための基準表情に関するデータが記録された表情データ記録部と、
前記検出された表情と前記基準表情との相関を演算する相関演算部と、
を備え、
前記表情相関算出部は、前記相関演算部で算出された相関度から前記表情度合いを算出することを特徴とする、請求項１乃至３のいずれか１項に記載の撮像装置。
【請求項７】
前記被写体の顔の位置または大きさを抽出する顔位置サイズ処理部を備え、
前記表情データ記録部は、顔の位置または大きさに基づいた基準表情に関するデータが記録され、
前記相関演算部は、前記抽出された顔の位置または大きさに応じて、前記検出された表
情と、前記顔の位置または大きさに基づいた基準表情との相関を演算することを特徴とする、請求項６に記載の撮像装置。
【請求項８】
前記表情データ記録部は、複数の表情について前記基準表情に関するデータが記録され、
利用者の入力に応じて、前記複数の表情のうち少なくとも１つが選択され、前記表情相
関算出部が前記表情度合いを算出する前記表情が切り替えられる表情データ切替部を備えることを特徴とする請求項６に記載の撮像装置。
【請求項９】
前記撮像画像取得部は、前記表情相関算出部で算出された表情度合いが所定の閾値を満
たすとき、前記撮像面に結像された被写体像を取り込むことを特徴とする、請求項１乃至３のいずれか１項に記載の撮像装置。
【請求項１０】
撮像面に結像した被写体の画像データを取得することと、
前記画像データの中から前記被写体の顔の表情を検出し、前記検出された顔の表情度合いを算出することと、
前記表情度合算出部で算出された前記表情度合いが所定閾値以上となったとき、外部からの振動又は前記被写体の動きにより前記画像データに生じるブレの補正を開始することと、
を備えることを特徴とする、撮像方法。
【請求項１１】
撮像面に結像した被写体の画像データを取得することと、
前記画像データの中から前記被写体の顔の表情を検出し、前記検出された顔の表情度合いを算出することと、
外部からの振動又は前記被写体の動きにより前記画像データに生じるブレに対して、
前記表情度合算出部で算出された前記表情度合いが高いとき前記ブレ補正の制御量の単位時間当たりの取得回数を増加させ、前記表情度合いが低いとき前記ブレ補正の制御量の単位時間当たりの取得回数を減少させる補正を行うことと、
を備えることを特徴とする、撮像方法。
【請求項１２】
撮像面に結像した被写体の画像データを取得することと、
前記画像データの中から前記被写体の顔の表情を検出し、前記検出された顔の表情度合いを算出することと、
外部からの振動又は前記被写体の動きによって生じる前記画像データのブレに対して、前記表情度合算出部で算出された前記表情度合いが高いときは大きな補正量で補正し、前記表情度合いが低いときは小さな補正量で補正をすることと、
を備えることを特徴とする、撮像方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置及び撮像方法に関する。
【背景技術】
【０００２】
カメラによって被写体を撮影する際、レンズの光量が減少すると、より長時間の露出が必要となる。そのため、光量が少ないレンズを有するカメラによって撮影を行うとき、手でカメラを支持していると手振れが生じやすくなる。また、レンズの設計と光量は密接な関係があり、レンズの光量は、レンズの大きさやズーム倍率などによって影響を受ける。
【０００３】
一方、近年、デジタルカメラの小型化、軽量化、レンズの高倍率化が求められてきている。そのため、レンズの光量減少によるシャッタースピードの低下によって手振れの発生が顕著になってきた。三脚を常時携帯しないユーザーにとっては、カメラを手持ち状態で撮影することが前提である。そのため、手振れによるボケを軽減させるため、カメラに手振れ補正機能を持たせることが求められてきた。
【発明の開示】
【発明が解決しようとする課題】
【０００４】
ところで、デジタルカメラの一般的なユーザーへの普及に伴って、ポートレート撮影で笑顔等、人物の一瞬の表情を捉えたいというニーズがある。しかし、一般ユーザーにはシャッターチャンスを的確に捉えることは難しいことが多く、撮影したい表情を撮ることは困難である。
【０００５】
また、シャッターボタンを半押ししながら撮影したい表情を待つ間に、手振れ防止機構の補正限界を超えてしまうことがある。その結果、シャッターボタンを深押ししてシャッターを切ったときには手振れによるボケた画像が取り込まれる場合が多い。
【０００６】
具体的に、図１及び図２を参照して手振れ防止機構の補正限界について説明する。図１及び図２は、カメラを構えてシャッターボタンを半押しした状態から、画像を取り込むまでの期間の補正量を示すグラフである。図１（ａ）、図１（ｂ）によれば、手振れ補正機構の補正動作が開始して補正量が補正限界に達する前に、シャッターボタンが深押しされて画像の取り込みが行われている。そのため、取り込まれた画像は手振れ防止機構によって手振れによるボケのない画像を取り込むことができる。
【０００７】
一方、撮影したい表情を撮影する場合、図２（ｂ）に示すようにカメラを構えてシャッターボタンを半押しした状態から、被写体の人物が撮影したい表情に変化するまで長時間を要する場合がある。従って、撮影したい表情となった時に、実際にシャッターボタンを深押ししたとしても、図２（ａ）に示すように、手振れ補正機構の補正動作が開始した後、手振れ補正の補正量が補正限界を超えていることがある。そのため、取り込まれた画像は手振れによるボケた画像となることが多かった。
【０００８】
上記のように、シャッターボタンの半押し状態から深押し状態まで、短時間である場合は手振れ補正処理が実行されるが、長時間である場合は補正量が補正限界を超えるため手振れ補正が効かなくなる問題があった。
【０００９】
次に、光学式、電子式それぞれの手振れ補正機構について説明する。図３は、光学シフト防振方式のレンズを示す概略図である。手振れの補正限界量を増加させることによって、長時間にわたって手振れ補正の効きを維持させることができる。光学シフト防振方式のレンズにおいて、シフトレンズの可動範囲を増加させることで、手振れ補正の補正限界量を増やすことができる。一方、シフトレンズの可動範囲を増加させるには、レンズ全体を大型化させる必要があるため、カメラの小型化が困難になるという問題がある。
【００１０】
図４は、電子式手振れ補正の有効領域と実際に画像として抽出される実行領域を示す説明図である。電子式手振れ補正の場合、手振れのための余剰領域を増やすことで、補正の効きを向上させることができる。一方、余剰領域を増やすと画角が狭くなったり、ソース画素が減少することによる解像度劣化が生じたりするという問題がある。
【００１１】
また、レンズの径を大型化させることで光量を増やすことができるため、シャッタースピードの低下を軽減させ、手振れを軽減することが可能である。しかし、上記と同様に、カメラの小型が困難になるという問題がある。
【００１２】
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、撮影したい被写体の表情を取得しつつ、ブレ補正を確実に行うことが可能な、新規かつ改良された撮像装置及び撮像方法を提供することにある。
【課題を解決するための手段】
【００１３】
上記課題を解決するために、本発明のある観点によれば、撮像面に結像した被写体の画像データを取得する撮像画像取得部と、画像データの中から被写体の顔の表情を検出し、検出された顔の表情度合いを算出する表情相関算出部と、外部からの振動又は被写体の動きによって生じる画像データのブレ補正を行い、表情相関算出部で算出された表情度合いに基づいてブレ補正を行うブレ補正部とを備えることを特徴とする撮像装置が提供される。
【００１４】
かかる構成により、撮像画像取得部は、撮像面に結像した被写体の画像データを取得し、表情相関算出部は、画像データの中から被写体の顔の表情を検出し、検出された顔の表情度合いを算出し、ブレ補正部は、外部からの振動又は被写体の動きによって生じる画像データのブレ補正を行い、表情相関算出部で算出された表情度合いに基づいてブレ補正を行う。その結果、撮影したい被写体の表情を取得しつつ、ブレ補正を確実に行うことができる。
【００１５】
上記表情は、人物の笑顔であってもよい。かかる構成により、人物の笑顔度合いに応じてブレ補正を行うことができる。
【００１６】
上記ブレ補正部は、表情度合いに基づいてブレ補正の制御量を取得するタイミングを変化させるものであってもよい。また、上記ブレ補正部は、表情度合いが所定閾値以上となったとき、ブレ補正の制御量の取得を開始するものであってもよい。かかる構成により、表情度合いに応じて、ブレ補正が開始される。
【００１７】
上記ブレ補正部は、表情度合いに基づいてブレ補正の制御量を変化させるものであってもよい。また、上記ブレ補正部は、表情度合いが高いときブレ補正の制御量の単位時間当たりの取得回数を増加させ、表情度合いが低いときブレ補正の制御量の単位時間当たりの取得回数を減少させるものであってもよい。かかる構成により、表情度合いに応じて、ブレ補正の制御量が変化する。
【００１８】
上記検出された表情に対して相関演算するための基準表情に関するデータが記録された表情データ記録部と、検出された表情と基準表情との相関を演算する相関演算部とを備え、表情相関算出部は、相関演算部で算出された相関度から表情度合いを算出するものであってもよい。
【００１９】
上記被写体の顔の位置または大きさを抽出する顔位置サイズ処理部を備え、表情データ記録部は、顔の位置または大きさに基づいた基準表情に関するデータが記録され、相関演算部は、抽出された顔の位置または大きさに応じて、検出された表情と、顔の位置または大きさに基づいた基準表情との相関を演算するものであってもよい。
【００２０】
上記表情データ記録部は、複数の表情について基準表情に関するデータが記録され、利用者の入力に応じて、複数の表情のうち少なくとも１つが選択され、表情相関算出部が表情度合いを算出する表情が切り替えられる表情データ切替部を備えるものであってもよい。
【００２１】
上記撮像画像取得部は、表情相関算出部で算出された表情度合いが所定の閾値を満たすとき、撮像面に結像された被写体像を取り込むものであってもよい。
【００２２】
また、上記課題を解決するために、本発明の別の観点によれば、撮像面に結像した被写体の画像データを取得するステップと、画像データの中から被写体の顔の表情を検出するステップと、検出された顔の表情度合いを算出するステップと、外部からの振動又は被写体の動きによって生じる画像データのブレ補正を行うステップと、算出された表情度合いに基づいてブレ補正を行うステップとを含むことを特徴とする撮像方法が提供される。
【発明の効果】
【００２３】
本発明によれば、撮影したい被写体の表情を取得しつつ、ブレ補正を確実に行うことができる。
【発明を実施するための最良の形態】
【００２４】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００２５】
（第１の実施形態）
まず、本発明の第１の実施形態に係る撮像装置１００について説明する。図５は、本実施形態に係る撮像装置を示すブロック図である。
【００２６】
撮像装置１００は、例えばデジタルカメラであり、被写体の静止画の撮影が可能である。撮像装置１００は、レンズユニット１０２と、信号処理部１１０と、ＣＰＵ（Central  Processing  Unit）１２０と、記録部１３０と、手振れ検出部１４０などからなる。なお、撮像装置１００は、被写体の動画の撮影が可能なビデオカメラなどであってもよい。
【００２７】
レンズユニット１０２は、被写体からの光を捉えて光情報を電気信号に変換させることができる。撮像素子１０６面上に結像された画像は、デジタル信号に変換されて信号処理部１１０に出力される。レンズユニット１０２は、レンズ１０４と撮像素子１０６などを備える。レンズ１０４は、例えばフォーカスレンズであり、被写体の像を撮像素子１０６面上に合焦させる。撮像素子１０６は、レンズ１０４を透過した光を光電変換して電気信号を生成する。撮像素子１０６は、例えばＣＣＤ（Charge  Coupled  Device）イメージセンサーである。
【００２８】
信号処理部１１０は、レンズユニット１０２で生成された電気信号（デジタル信号）を処理する。信号処理部１１０は、例えば、顔画像アドレスコントローラ１１１と、相関演算部１１２、１１４と、基準顔データ記録部１１３と、基準笑顔データ記録部１１５と、補正画像アドレスコントローラ１１６などからなる。
【００２９】
顔画像アドレスコントローラ１１１は、レンズユニット１０２から出力されたデジタル信号からなる画像データについて、１画像に対して任意の複数の領域の位置とサイズを決定し、複数の領域を設定する。顔画像アドレスコントローラ１１１は、顔位置サイズ処理部１２２の指示を受けて、相関演算部１１２の顔についての相関演算で扱う画像を抽出し、相関演算部１１２、１１４に画像データを出力する。
【００３０】
相関演算部１１２は、レンズユニット１０２に取り込まれた被写体の映像に顔が含まれるかを判断するため相関演算を行う。相関演算部１１２は、顔画像アドレスコントローラ１１１から出力された画像データと、基準顔データ記録部１１３から取得された基準顔データとの相関演算を行う。相関演算部１１２は、顔として信頼できる度合い（以下、「顔度合い」ともいう。）をＣＰＵ１２０に出力する。
【００３１】
基準顔データ記録部１１３は、基準顔データを保持している。基準顔データは、相関演算部１１２に入力された画像に顔が含まれるかを判断するため、入力された画像データとの相関を演算するために用いられる。
【００３２】
相関演算部１１４は、レンズユニット１０２に取り込まれた被写体の映像に笑顔が含まれるかを判断するため相関演算を行う。相関演算部１１４は、顔画像アドレスコントローラ１１１から出力された画像データと、基準笑顔データ記録部１１５から取得された基準笑顔データとの相関演算を行う。相関演算部１１４は、笑顔として信頼できる度合い（以下、「笑顔度」ともいう。）の相関値をＣＰＵ１２０に出力する。
【００３３】
基準笑顔データ記録部１１５は、表情データ記録部の一例であり、基準笑顔データを保持している。基準笑顔データは、相関演算部１１４に入力された画像に笑顔が含まれるかを判断するとき、入力された画像データとの相関を演算するために用いられる。基準笑顔データ記録部１１５は、撮像面を基準とした顔の位置又は大きさに基づいた基準笑顔データを保持している。
【００３４】
補正画像アドレスコントローラ１１６は、レンズユニット１０２から出力されたデジタル信号からなる画像データについて、ＣＰＵ１２０によって指示された領域を抽出する処理を行う。
【００３５】
ＣＰＵ１２０は、プログラムによって演算処理装置及び制御装置として機能し、撮像装置１００内に設けられた各構成要素の処理を制御することができる。ＣＰＵ１２０は、信号処理部１１０から出力された情報に基づいて、相関演算のために抽出する画像領域の決定、画像の取り込みの判断、笑顔度の算出、手振れ補正を行う。ＣＰＵ１２０は、例えば、顔位置サイズ処理部１２２と、取り込み判定部１２４と、笑顔度算出部１２６と、手振れ補正部１２８などからなる。
【００３６】
顔位置サイズ処理部１２２は、顔画像アドレスコントローラ１１１に対して、相関演算の対象領域の指示を処理する。顔の位置やサイズは、顔が存在すると予測される領域、又は顔が存在する領域に応じて切り替えることができる。例えば、撮像装置１００がポートレートを扱うモードに設定されているとき、顔の位置は画像中心付近、サイズは画角の半分等と指定することができる。
【００３７】
取り込み判定部１２４は、笑顔度算出部１２６から出力された笑顔度が、画像の取り込み可能な値であるか否かを判定する。取り込み判定部１２４は、画像の取り込みが可能であると判定した場合、記録部１３０に対して信号処理部１１０の出力画像について取り込み許可を出力する。取り込み判定部１２４は、例えば、所定の閾値と笑顔度算出部１２６から出力された笑顔度との比較を行い、笑顔度が所定の閾値を超えたとき、記録部１３０に対して取り込み許可を出力する。
【００３８】
笑顔度算出部１２６は、表情相関算出部の一例であり、相関演算部１１４が出力する相関値から笑顔度を算出する。笑顔度算出部１２６は、算出した笑顔度を取り込み判定部１２４に出力する。笑顔度は、笑顔度算出部１２６が顔の位置やサイズを参照することで、実際の笑顔の笑顔度合いとの一致度を高めることができる。
【００３９】
手振れ補正部１２８は、ブレ補正部の一例であり、手振れ補正動作を制御する。手振れ補正部１２８は、笑顔度が高いとき手振れ補正の制御量の単位時間当たりの取得回数を増加させ、笑顔度が低いとき手振れ補正の制御量の単位時間当たりの取得回数を減少させるものであってもよい。即ち、手振れ補正部１２８は、笑顔度算出部１２６から出力された笑顔度に応じて、手振れ補正動作の効きを変化させる。例えば、笑顔度が低いとき、手振れ補正動作の効きを弱くし、笑顔度が高いとき、手振れ補正動作の効きを強くする。その結果、笑顔度が低い状態では、手振れ補正動作の効きが弱くなるため、補正量が補正限界に到達するまで長時間かかる。一方、笑顔度が高い状態であるときは、手振れ補正動作の効きが強い状態であり、補正限界前に画像を取り込むことで、ユーザーが撮影したい表情を捉えることができる。
【００４０】
図６は、本実施形態の手振れ補正部１２８のデジタル処理における積分ブロックを示す説明図である。
【００４１】
手振れ補正部１２８は、速度を１サンプリング前の積分値と積分することで補正位置を演算している。本実施形態の手振れ補正部１２８では、笑顔度に応じて手振れ検出部１４０から出力される速度に１以下の係数を乗算するとしてもよい。その結果、補正の強弱を変化させることができる。
【００４２】
また、相関演算部１１２による顔の相関値、顔の位置やサイズなどを用いて係数を変化させることによって、顔の有無で手振れ補正の強弱を変化させることができる。例えば、レンズユニット１０２に取り込まれた画像内に顔が検出されない場合は、係数を０にすることで、手振れ補正を停止するとしてもよい。
【００４３】
記録部１３０は、撮像画像取得部の一例であり、取り込み判定部１２４の指示に基づいて、補正画像アドレスコントローラ１１６から画像を取り込み、当該画像を記録する。
【００４４】
手振れ検出部１４０は、撮像装置１００本体に設置され、撮像装置１００外部から加えられた振動に応じて手振れ信号をＣＰＵ１２０に出力する。
【００４５】
（第１の実施形態の動作）
次に、本実施形態の撮像装置の動作について説明する。図７は、本実施形態の撮像装置の動作を示すフローチャートである。
【００４６】
まず、撮像装置１００がユーザーによって構えられて、シャッターボタンが半押し状態になることで、撮像装置１００は撮影準備状態となる（ステップＳ１０１）。次に、レンズユニット１０２によって被写体の画像データが取り込まれ、顔に関する相関演算部１１２は、画像内に顔が含まれるか否かを検出するための相関値を算出する（ステップＳ１０２）。このとき、顔位置サイズ処理部１２２は、顔画像アドレスコントローラ１１１に対して相関演算の対象領域を指示する。顔が検出された場合、笑顔に関する相関演算部１１４は、画像内の顔の笑顔度に関する相関値を算出し、笑顔度算出部１２６は笑顔度を算出する（ステップＳ１０３）。そして、笑顔度の算出結果から、笑顔が検出されたか否かを判断する（ステップＳ１０４）。
【００４７】
笑顔が検出されたとき、手振れ補正部１２８は手振れ補正制御を行う（ステップＳ１０５）。このとき、手振れ補正部１２８は、笑顔度に応じて手振れ補正動作の効きを変化させている。また、笑顔が検出されると、取り込み判定部１２４は笑顔度が所定の閾値（取り込み閾値）を超えるか否かを判断する（ステップＳ１０６）。所定の閾値超えたときは、取り込み判定部１２４は、記録部１３０に取り込み許可を出力し、記録部１３０は補正画像アドレスコントローラ１１６から画像を取り込み、当該画像を記録する（ステップＳ１０７）。
【００４８】
従来の技術では、図２（ａ）に示すように被写体の笑顔を待つ間に長時間が経過し、手振れ補正部の補正限界を超えてしまっていた。一方、本実施形態によれば、図８（ｂ）に示すような笑顔度の変化に応じて、図８（ａ）に示すように補正量（手振れ補正の効き）を変化させるため、補正限界を超えることなく手振れ補正の効きを維持しつつ、被写体の笑顔を取り込むことができる。なお、図８は、カメラを構えてシャッターボタンを半押しした状態から、画像を取り込むまでの期間の補正量を示すグラフである。
【００４９】
（第２の実施形態）
次に、本発明の第２の実施形態に係る撮像装置２００について説明する。図９は、本実施形態に係る撮像装置を示すブロック図である。
【００５０】
上述した第１の実施形態は、電子式の手振れ補正機構を有する場合について説明した。一方、本実施形態では、光学シフト防振方式の手振れ補正機構を有する撮像装置について説明する。撮像装置２００は、レンズユニット２０２と、信号処理部２１０と、ＣＰＵ（Central  Processing  Unit）１２０と、記録部１３０と、手振れ検出部１４０などからなる。ＣＰＵ１２０と、記録部１３０と、手振れ検出部１４０については、第１の実施形態と同様の構成機能を有するため、詳細な説明は省略する。以下では、レンズユニット２０２と、信号処理部２１０について、説明する。
【００５１】
レンズユニット２０２は、第１の実施形態で説明したレンズ１０４、撮像素子１０６に加えて、シフト防振レンズ２０８とレンズシフトドライバ２０９を更に有する。
【００５２】
シフト防振レンズ２０８は、外部からの振動に応じて手振れ補正を行うことができるレンズであり、レンズシフトドライバ２０９の駆動によってレンズが移動する。レンズシフトドライバ２０９は、外部からの振動に応じてシフト防振レンズ２０８を駆動させる。このような構成によって、撮像素子１０６面上には手振れ補正がされたブレのない被写体が結像される。そして、撮像素子１０６は、ブレのない被写体像の画像信号を記録部１３０に出力する。
【００５３】
信号処理部２１０は、第１の実施形態と比較して、補正画像アドレスコントローラを備えていない。第２の実施形態の撮像装置２００は、シフト防振レンズ２０８を有する光学シフト防振方式の手振れ補正機構を備えるため、補正画像アドレスコントローラなしで、ブレのない画像を取得することができる。
【００５４】
そして、第１の実施形態で説明した場合と同様に、第２の実施形態は笑顔度の算出や笑顔度に応じた取り込みを行い、笑顔度に応じて補正の効きを変化させることができる。従って、図８（ｂ）に示すような笑顔度の変化に応じて、図８（ａ）に示すように補正量（手振れ補正の効き）を変化させるため、補正限界を超えることなく手振れ補正の効きを維持しつつ、被写体の笑顔を取り込むことができる。
【００５５】
（第３の実施形態）
次に、本発明の第３の実施形態に係る撮像装置３００について説明する。図１０は、本実施形態に係る撮像装置を示すブロック図である。
【００５６】
上述した第１の実施形態は、被写体の人物の笑顔を検出する場合について説明した。一方、本実施形態では、人物の笑顔に限定されず、その他の表情を捉えることができる撮像装置について説明する。撮像装置３００は、レンズユニット１０２と、信号処理部３１０と、ＣＰＵ（Central  Processing  Unit）３２０と、記録部１３０と、手振れ検出部１４０などからなる。レンズユニット１０２と、記録部１３０と、手振れ検出部１４０については、第１の実施形態と同様の構成機能を有するため、詳細な説明は省略する。以下では、信号処理部３１０と、ＣＰＵ３２０について説明する。なお、第３の実施形態は、電子式の手振れ補正機構を有する場合であるが、第２の実施形態で説明した光学シフト防振方式の手振れ補正機構を有する場合についても同様に適用することができる。
【００５７】
信号処理部３１０は、例えば、顔画像アドレスコントローラ１１１と、相関演算部１１２、３１７と、基準顔データ記録部１１３と、表情データ切替部３１８と、表情データ記録部３１９と、補正画像アドレスコントローラ１１６などからなる。
【００５８】
相関演算部３１７は、レンズユニット１０２に取り込まれた被写体の映像にユーザーが撮影を希望する表情が含まれるかを判断するため相関演算を行う。相関演算部３１７は、顔画像アドレスコントローラ１１１から出力された画像データと、表情データ記録部３１９から取得された表情データとの相関演算を行う。相関演算部３１７は、選択された表情として信頼できる度合い（以下、「表情度」ともいう。）の相関値をＣＰＵ３２０に出力する。
【００５９】
表情データ切替部３１８は、表情データ切替指示部３２５の指示に基づいて、表情データ記録部３１９に記録された表情データの出力の切替を行う。
【００６０】
表情データ記録部３１９は、様々な表情（例えば、笑った表情、怒った表情、泣いた表情など）の顔データを保持している。様々な表情の顔データは、相関演算部３１７に入力された画像に比較対象とする表情が含まれるかを判断するとき、入力された画像データとの相関を演算するために用いられる。
【００６１】
ＣＰＵ３２０は、例えば、顔位置サイズ処理部１２２と、取り込み判定部１２４と、表情データ切替指示部３２５と、表情相関算出部３２７と、手振れ補正部１２８などからなる。
【００６２】
表情データ切替指示部３２５は、ユーザーが撮影を希望する表情の選択に応じて、表情データ切替部３１８に対して表情データ記録部３１９からの表情データの取り込みの切り替えを指示する。これによって、様々な表情の顔データを切り替えることができる。
【００６３】
表情相関算出部３２７は、相関演算部３１７が出力する相関値から表情度を算出する。表情相関算出部３２７は、算出した表情度を取り込み判定部１２４に出力する。表情度は、表情相関算出部３２７が顔の位置やサイズを参照することで、実際の表情の表情度合いとの一致度を高めることができる。
【００６４】
次に、本実施形態の撮像装置の動作について説明する。図１１は、本実施形態の撮像装置の動作を示すフローチャートである。
【００６５】
まず、ユーザーによって撮影したい表情が選択され、表情データの切替が行われる（ステップＳ２０１）。撮像装置３００がユーザーによって構えられて、シャッターボタンが半押し状態になることで、撮像装置３００は撮影準備状態となる（ステップＳ２０２）。次に、レンズユニット１０２によって被写体の画像データが取り込まれ、顔に関する相関演算部１１２は、画像内に顔が含まれるか否かを検出するための相関値を算出する（ステップＳ２０３）。このとき、顔位置サイズ処理部１２２は、顔画像アドレスコントローラ１１１に対して相関演算の対象領域を指示する。顔が検出された場合、表情に関する相関演算部３１７は、画像内の顔の表情度に関する相関値を算出し、表情相関算出部３２７は表情度を算出する（ステップＳ２０４）。そして、表情度の算出結果から、選択された表情が検出されたか否かを判断する（ステップＳ２０５）。
【００６６】
選択された表情が検出されたとき、手振れ補正部１２８は手振れ補正制御を行う（ステップＳ２０６）。このとき、手振れ補正部１２８は、表情度に応じて手振れ補正動作の効きを変化させている。また、選択された表情が検出されると、取り込み判定部１２４は表情度が所定の閾値（取り込み閾値）を超えるか否かを判断する（ステップＳ２０７）。所定の閾値超えたときは、取り込み判定部１２４は、記録部１３０に取り込み許可を出力し、記録部１３０は補正画像アドレスコントローラ１１６から画像を取り込み、当該画像を記録する（ステップＳ２０８）。
【００６７】
本実施形態によれば、第１の実施形態のように被写体の表情が笑顔である場合に限定されず、他の表情についてもユーザーが希望する表情を確実に撮影することができる。
【００６８】
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
【図面の簡単な説明】
【００６９】
【図１】従来の撮像装置を構えてシャッターボタンを半押しした状態から、画像を取り込むまでの期間の補正量を示すグラフである。
【図２】従来の撮像装置を構えてシャッターボタンを半押しした状態から、画像を取り込むまでの期間の補正量を示すグラフである。
【図３】光学シフト防振方式のレンズを示す概略図である。
【図４】電子式手振れ補正の有効領域と実際に画像として抽出される実行領域を示す説明図である。
【図５】本発明の第１の実施形態に係る撮像装置を示すブロック図である。
【図６】同実施形態の手振れ補正部のデジタル処理における積分ブロックを示す説明図である。
【図７】同実施形態の撮像装置の動作を示すフローチャートである。
【図８】同実施形態の撮像装置を構えてシャッターボタンを半押しした状態から、画像を取り込むまでの期間の補正量を示すグラフである。
【図９】本発明の第２の実施形態に係る撮像装置を示すブロック図である。
【図１０】同実施形態に係る撮像装置を示すブロック図である。
【図１１】本発明の第３の実施形態の撮像装置の動作を示すフローチャートである。
【符号の説明】
【００７０】
１００、２００、３００      撮像装置
１０２、２０２      レンズユニット
１０４      レンズ
１０６      撮像素子
１１０、２１０、３１０      信号処理部
１１１      顔画像アドレスコントローラ
１１２、１１４、３１７      相関演算部
１１３      基準顔データ記録部
１１５      基準笑顔データ記録部
１１６      補正画像アドレスコントローラ
１２０、３２０      ＣＰＵ
１２２      顔位置サイズ処理部
１２４      取り込み判定部
１２６      笑顔度算出部
１２８      手振れ補正部
１３０      記録部
１４０      手振れ検出部
２０８      シフト防振レンズ
２０９      レンズシフトドライバ
３１８      表情データ切替部
３１９      表情データ記録部
３２５      表情データ切替指示部
３２７      表情相関算出部
【図１】
0004952462.tif 000002
【図２】
0004952462.tif 000003
【図３】
0004952462.tif 000004
【図４】
0004952462.tif 000005
【図５】
0004952462.tif 000006
【図６】
0004952462.tif 000007
【図７】
0004952462.tif 000008
【図８】
0004952462.tif 000009
【図９】
0004952462.tif 000010
【図１０】
0004952462.tif 000011
【図１１】
0004952462.tif 000012