(57)【要約】【課題】動画撮影中に静止画を記録する場合に、撮像素子に対し、最適な制御を行うことを可能とし、良好な記録画像を得ることができる撮影装置、動画静止画記録方法を提供する。【解決手段】動画撮影中に静止画を撮影するときに、顔検出部１１４の検出結果に基づき指定した指定領域の蓄積電荷を先読みする。この先読みした蓄積電荷から得た画像データに基づいて、静止画撮影後に継続する動画用の電荷蓄積時の撮像素子１０２への制御を行う。【選択図】図３
2010010737.tif 000002
【特許請求の範囲】
【請求項１】
撮像領域を露光することにより電荷を蓄積し、前記撮像領域内で指定された指定領域の前記電荷を出力可能なＸＹアドレス方式の撮像素子と、
前記撮像素子から得られた撮影画像中から被写体領域を検出する被写体領域検出部と、
前記撮像素子を用いて動画撮影から静止画撮影に切り換えるときに、前記被写体領域検出部の検出結果に基づいて前記指定領域を指定する領域指定部と、
前記領域指定部が指定した前記指定領域の電荷を、少なくとも静止画用の電荷を読み出し終わるよりも先に読み出すように前記撮像素子を制御する撮像素子制御部と、
を備える撮影装置。
【請求項２】
請求項１に記載の撮影装置において、
前記被写体領域検出部は、被写体の顔が存在する領域を検出した結果を用いて前記被写体領域を検出すること、
を特徴とする撮影装置。
【請求項３】
請求項１又は請求項２に記載の撮影装置において、
前記被写体領域検出部は、合焦状態に関する情報を用いて前記被写体領域を検出すること、
を特徴とする撮影装置。
【請求項４】
請求項１から請求項３までのいずれか１項に記載の撮影装置において、
前記被写体領域検出部は、前記撮像素子を露光する条件に関する情報を用いて前記被写体領域を検出すること、
を特徴とする撮影装置。
【請求項５】
請求項１から請求項４までのいずれか１項に記載の撮影装置において、
前記撮像素子を用いて前記静止画撮影から動画撮影に復帰するときに、
前記撮像素子制御部は、静止画用の電荷を読み出し終わるよりも先に読み出した前記指定領域の電荷を用いて生成された画像データに基づいて、前記動画撮影における露光を制御すること、
を特徴とする撮影装置。
【請求項６】
請求項１から請求項４までのいずれか１項に記載の撮影装置において、
静止画用の電荷を読み出し終わるよりも先に読み出した前記指定領域の電荷を用いて生成された画像データに基づいて、前記静止画用の電荷を用いて生成された画像データに対する画像処理を行う画像処理部を有すること、
を特徴とする撮影装置。
【請求項７】
請求項１から請求項６までのいずれか１項に記載の撮影装置において、
前記撮像素子制御部は垂直同期信号に同期して前記静止画用の電荷の読み出しを開始し、次の垂直同期信号までに、前記撮像領域のうち少なくとも前記指定領域の電荷の読み出しを終え、前記次の垂直同期信号よりも後に、前記撮像領域の残りの領域の電荷の読み出しを終えること、
を特徴とする撮影装置。
【請求項８】
動画撮影中に静止画を撮影する動画静止画記録方法であって、
撮像素子から得られた撮影画像中から被写体領域を検出し、
動画撮影から静止画撮影に切り換えるときに、前記被写体領域に基づいて前記撮像素子の撮像領域内の指定領域を指定し、
前記指定領域の電荷を、少なくとも静止画用の電荷を読み出し終わるよりも先に読み出して撮像素子の制御、又は、静止画の画像処理に利用すること、
を特徴とする動画静止画記録方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、動画と静止画の撮影を行えるデジタルスチルカメラ、デジタルビデオカメラ等の撮影装置、動画静止画記録方法に関するものである。
【背景技術】
【０００２】
デジタルスチルカメラ、デジタルビデオカメラ等の撮影装置では、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサ等の撮像素子により被写体像から画像データを取得している。撮像素子を用いた撮影では、例えば、被写体のコントラストによっては、撮影した画像の明るい部分が真っ白になってしまう白飛び、あるいは暗い部分が真っ黒になってしまう黒つぶれという現象が生じる場合がある。この場合、読み出された画素の電荷をＡ／Ｄ変換し、得られた画像データに基づき、被写体の輝度情報を検出し、この検出結果により撮像素子に対して最適な露光量制御を行う等の手法がある。例えば、暗い部分だけ選択的に長く露光して全体のコントラストを調整するという手法が知られている。
また、画像データから主たる被写体が存在する領域を検出し、検出した領域に焦点が合うようオートフォーカス制御を行い、かつ、輝度が適正値になるよう露出制御を行う撮像装置が存在する（例えば、特許文献１を参照）。このような撮像装置に上記の手法を適用すれば、主たる被写体が白飛びしたり、黒つぶれしたりすることを防止することが可能となる。
【０００３】
ところで、動画モードと静止画モードとを自由に切り換えられる撮影装置が存在する。静止画撮影では高解像度な画像データが要求され、動画用撮影では、定められたフレームレートで連続して画像データを読み出すことが要求される。そのため、動画モードと静止画モードのそれぞれに適したサイズの画像データを得るために、動画撮影時には加算読み出しが行われ、静止画撮影時には非加算読み出しが行われることが一般的である（例えば、特許文献２を参照）。
【０００４】
【特許文献１】特開２００６−１２７４８９号公報
【特許文献２】特開２００４−１４７０９２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかし、動画撮影中に静止画を記録すると、静止画用に撮像素子から蓄積電荷を読み出している間は、動画用の画像データの取得を行えない。
さらに、静止画撮影では、非加算読み出しが行われるため、加算読み出しの動画撮影時に比較して撮像素子から蓄積電荷を読み出す時間が長くかかってしまう。
その結果、撮像素子に対し、最適な制御を行う条件を決定するための画像データが得られなくなるため、その期間において被写体が動いてしまった場合には、被写体の位置を特定できず、その被写体における露光量等を最適化する制御を行うことができなかった。
【０００６】
本発明の課題は、動画撮影中に静止画を記録する場合に、撮像素子に対し、最適な制御を行うことを可能とし、良好な記録画像を得ることができる撮影装置、動画静止画記録方法を提供することである。
【課題を解決するための手段】
【０００７】
本発明の第１の側面としての撮影装置は、撮像領域を露光することにより電荷を蓄積し、前記撮像領域内で指定された指定領域の前記電荷を出力可能なＸＹアドレス方式の撮像素子と、前記撮像素子から得られた撮影画像中から被写体領域を検出する被写体領域検出部と、前記撮像素子を用いて動画撮影から静止画撮影に切り換えるときに、前記被写体領域検出部の検出結果に基づいて前記指定領域を指定する領域指定部と、前記領域指定部が指定した前記指定領域の電荷を、少なくとも静止画用の電荷を読み出し終わるよりも先に読み出すように前記撮像素子を制御する撮像素子制御部とを備える。
【０００８】
本発明の第２の側面としての動画静止画記録方法は、動画撮影中に静止画を撮影する動画静止画記録方法であって、撮像素子から得られた撮影画像中から被写体領域を検出し、動画撮影から静止画撮影に切り換えるときに、前記被写体領域に基づいて前記撮像素子の撮像領域内の指定領域を指定し、前記指定領域の電荷を、少なくとも静止画用の電荷を読み出し終わるよりも先に読み出して撮像素子の制御、又は、静止画の画像処理に利用することを特徴とする。
【発明の効果】
【０００９】
本発明によれば、動画撮影中に静止画を記録する場合に、撮像素子に対し、最適な制御を行うことを可能とし、良好な記録画像を得ることができる。
【発明を実施するための最良の形態】
【００１０】
以下、本発明を実施するための最良の形態について図面等を参照して説明する。
【００１１】
（第１実施形態）
図１は、本発明による撮影装置の第１実施形態を示す図である。
なお、図１を含め、以下に示す各図は、模式的に示した図であり、各部の大きさ、形状は、理解を容易にするために、適宜誇張して示している。
また、以下の説明では、具体的な構成等を示して説明を行うが、これらは、適宜変更することができる。
本実施形態の撮影装置１は、フォーカスレンズ１０１，撮像素子１０２，Ａ／Ｄ変換部１０３，カメラ信号処理部１０４，ＩＰ変換部１０５，動画リサイズ部１０６，ＮＲ（Noise Reduction）処理部１０７，動画符号化部１０８，記録信号処理部１０９，記録媒体１１０，メインメモリ１１１，肌色検出部１１２，顔検出リサイズ部１１３，顔検出部１１４，静止画符号化部１１５，静止画記録部１１６，被写体領域検出部１１７，撮像素子制御部１１８，領域指定部１１９，メカニカルシャッタ１２０を備えている。
【００１２】
フォーカスレンズ１０１は、不図示の他のレンズ群と共に撮影光学系を形成するレンズである。フォーカスレンズ１０１は、この撮影光学系により得られる被写体像を後述の撮像素子の撮像面上に合焦させるときに、その光軸方向に沿って移動する。
撮像素子１０２は、その撮像領域が露光されると撮像領域内に設けられた単位セル毎に電荷を蓄積し、この電荷を出力することにより、光を電気信号に変換する固体撮像素子である。本実施形態の撮像素子１０２は、ＣＭＯＳイメージセンサを用いている。ＣＭＯＳイメージセンサは、撮像領域内の全領域の蓄積電荷を端から順に出力する他に、指定された任意の指定領域の蓄積電荷を任意の順序で出力することも可能なＸＹアドレス方式（または、アドレス指定型）の撮像素子である。ＣＭＯＳイメージセンサは、所謂ローリングシャッタと呼ばれる、行毎に異なるタイミングで電荷の蓄積を行っている。現状の一般的な構成のローリングシャッタでは、全ての画素の電荷を同時にリセットしたり、蓄積動作を同時に終了したりする（蓄積された電荷の読み出しを同時に行う）ことができない。また、ローリングシャッタでは、走査画面の最初の行と最後の行とで蓄積期間が１フレーム近くずれてしまうため、動く被写体を静止画として撮像するには適していない。そこで、本実施形態では、後述するメカニカルシャッタを併用している。
【００１３】
Ａ／Ｄ変換部１０３は、撮像素子１０２から読み出されたアナログの信号をデジタル信号に変換する部分である。
カメラ信号処理部１０４は、Ａ／Ｄ変換部１０３によりデジタル信号に変換された撮像素子からの信号を処理し、画像データを生成する部分である。
ＩＰ変換部１０５は、画像データを高精細な静止画生成のためにインターレースからプログレッシブに変換する部分である。
動画リサイズ部１０６は、画像データを動画像記録のサイズに変更（リサイズ）する部分である。
ＮＲ処理部１０７は、動画リサイズ部１０６によりリサイズした画像に対して、ノイズ低減処理を行う部分である。
動画符号化部１０８は、動画像の画角にリサイズされ、ノイズ低減処理された画像データを符号化する部分である。
記録信号処理部１０９は、映像信号と音声情報入力手段であるマイクロフォン（不図示）からの音声情報信号を記録するフォーマットに変換する部分であり、更に、音声データを復号処理し、音声信号としてスピーカー（不図示）に送る機能も有している。
記録媒体１１０は、映像情報、音声情報を記録する媒体であり、例えば、内蔵フラッシュメモリ，メモリカード，ハードディスク等を用いることができる。
【００１４】
メインメモリ１１１は、各信号処理部と符号化手段等の機能ブロックにより処理されたデータを一旦、格納するＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）等の記憶領域である。各機能ブロックは、メインメモリ１１１をシェアして使用しており、メインメモリ１１１を介して信号処理データ、画像データの受け渡しを行っている。
肌色検出部１１２は、後述する、被写体における肌色領域を検出する部分である。肌色検出部１１２が検出した肌色領域の情報は、撮像素子制御部１１８へ送られる。
顔検出リサイズ部１１３は、カメラ信号処理部１０４で処理された画像データを顔検出処理できるような画角にリサイズする部分である。
顔検出部１１４は、顔検出リサイズ部１１３によりリサイズされた画像データにおける被写体の顔部分を検出する部分である。
【００１５】
静止画符号化部１１５は、静止画に対してＪＰＥＧ化等の符号化処理を行う部分である。
静止画記録部１１６は、静止画符号化部１１５によって符号化されたＪＰＥＧ形式等の静止画像データを記録する媒体であり、例えば、内蔵フラッシュメモリ，メモリカード，ハードディスク等を用いることができる。なお、静止画記録部１１６と上述の記録媒体１１０とは、同様な機能を有するので、これらをまとめた共通の記録部としてもよい。
撮像素子制御部１１８は、撮像素子１０２に対し、露光量や蓄積電荷の読み出し領域等の種々の撮像条件の制御を行う部分である。露光量の制御としては、例えば、全体の蓄積時間を変更したり、暗い部分だけ選択的に長く露光したりする等の方法がある。
【００１６】
被写体領域検出部１１７は、顔検出部１１４の検出結果に基づき、被写体の領域を検出する部分である。本実施形態では、顔検出部１１４の検出結果に基づき検出を行うので、撮影された画像中に人の顔がある部分を主要な被写体の存在する領域として判断する。ここで、複数の顔が検出されたときには、その全ての領域を被写体の領域であるとしてもよいし、顔が検出された面積の大きい領域を被写体の領域としてもよい。なお、ここで被写体領域とは、主要な被写体と判断される被写体が存在している領域を指すものである。被写体領域検出部１１７の検出結果は、露出制御及び画像処理時の色補正に利用される他、静止画記録時には、領域指定部１１９へ伝えられる。
領域指定部１１９は、撮像素子１０２の撮像領域の内で、電荷の読み出しを行う領域を指定する部分である。本実施形態では、領域指定部１１９は、後述する動画撮影中に静止画を記録するときに、先読みする領域を指定する。
メカニカルシャッタ１２０は、フォーカスレンズ１０１を含む撮影光学系と撮像素子１０２との間の光路中に設けられた機械式のシャッタである。メカニカルシャッタ１２０が開状態のときに、撮像素子１０２は、電荷の蓄積を行える。
【００１７】
ここで、本実施形態の撮影装置の動作の説明に先立ち、動画静止画記録を行うときの問題点について説明する。なお、動画静止画記録とは、動画を継続的に撮影しながら、撮影者が撮影指示を行った時点で一時的に静止画の記録に切り換えることを指す。したがって、静止画の記録後はすぐに動画の撮影に復帰する。
図２は、本発明を適用しない場合を想定した動画静止画記録を行うときの静止画記録周辺の処理のタイミングを示す図である。なお、以下の説明では、本実施形態との対比を行い易くして理解を容易とするために、本実施形態の撮影装置と同じ符号を付して説明する。
図２の上方には、ＶＤ（垂直同期信号）の区分、メカニカルシャッタ１２０の開閉状態を示している。また、撮像素子の蓄積期間（Ａ０，Ｂ０，Ｃ０，Ｄ０，Ｅ０）、撮像素子１０２からの蓄積電荷読み出し期間（Ｚ１，Ａ１，Ｂ１，Ｃ１，Ｄ１）、及び、カメラ信号処理部１０４により信号処理された画像データ（Ｚ２，Ａ２，Ｂ２，Ｃ２，Ｄ２）を表している。これらのうち、Ｃ０，Ｃ１，Ｃ２は、それぞれ静止画の蓄積期間、静止画の蓄積電荷読み出し期間、静止画の画像データを表している。
【００１８】
撮像素子１０２から画像データとしての電荷読み出し後、次のＶＤ（垂直同期信号）に同期してカメラ信号処理部１０４の処理が開始され、メインメモリ１１１に格納される。
動画記録に関しては、あるＶＤに同期して撮像素子１０２における電荷の蓄積が開始され、それから２つ後のＶＤに同期してカメラ信号処理部１０４による信号処理が開始される。
具体的には、動画記録における撮像素子１０２に対する制御は、次のように行われる。あるＶＤに同期して撮像素子１０２に電荷蓄積（図中、Ａ０，Ｂ０）を開始し、次のＶＤに同期して画素データとしての電荷の加算読み出し（図中、Ａ１，Ｂ１）が開始される。読み出された電荷はＡ／Ｄ変換処理され、その次のＶＤに同期してカメラ信号処理部１０４によって処理（図中、Ａ２，Ｂ２）が行われ、画像が生成される。そして、その生成された画像に基づいて撮像素子１０２に対する制御が行われる。
すなわち、図中、Ｂ０の電荷蓄積に対する撮像素子１０２の制御は、ＶＤ１に同期して画素データとしての電荷を読み出し（Ｚ１）、その後、次のＶＤ２に同期してカメラ信号処理部１０４によって信号処理された画像データ（Ｚ２）に基づいて行われる。上述のように、動画記録における蓄積電荷の読み出し（Ｚ１，Ａ１，Ｂ１，Ｄ１）は、複数の画素の電荷を加算して行われるので、動画の画像データは、撮像素子１０２の総画素数よりも画素数が少なくなり、データ量が静止画の場合と比べて少ない。
【００１９】
ここで、図２に示すタイミングで動画記録から静止画記録に切り換える場合、撮像素子１０２の電荷蓄積（図中、Ｃ０の蓄積期間）に対する撮像素子１０２の制御は、画像データＡ２に基づいて行われる。そして、次のＶＤに同期してＣ０の蓄積期間で電荷蓄積された撮像素子１０２から電荷の読み出し（Ｃ１）が開始される。
動画用の画像データに比べて静止画用の画像データは、高解像度のデータを要求される。よって、静止画記録における蓄積電荷の読み出し（Ｃ１）は、複数画素の加算を行わない非加算の状態で行われる。これにより、動画撮影の場合に比べて、静止画撮影では、撮像素子１０２から蓄積電荷を読み出す時間が長く掛かってしまい、読み出しを開始した後のＶＤでは、まだ読み出し処理が継続されている。すなわち、ＶＤ４〜ＶＤ６の期間に渡って、非加算読み出しが行われる。したがって、静止画記録時には、読み出し処理中のＶＤ４〜ＶＤ５期間は、撮像素子１０２に対し、電荷蓄積を行うことができない。そのため、ＶＤ５のタイミング（図中、破線で示したＸ部）においては、画像データ（動画像）を得ることができない。
【００２０】
従って、静止画記録直後の動画記録において、撮像素子１０２に対する制御に必要な画像データを得ることができない。よって、静止画記録直後の動画記録時の撮像素子１０２に対する最適な制御は行われなくなり、その結果、良好な記録画像を得ることができないおそれがある。
このような場合、ＶＤ４において得られる画像データＢ２を撮像素子１０２に対する制御を行うときの画像データとして用いて制御を行うことが考えられる。しかし、画像データＢ２を用いると、例えば、被写体の動きが大きい、あるいは高速に動く被写体の場合、最適な撮像素子１０２の制御を行うことができないおそれがある。最適な撮像素子１０２の制御を行うためには、電荷蓄積を行う直前に得られた画像データに基づいて行うことが望ましい。
【００２１】
次に、本実施形態の撮影装置による動画静止画記録方法について説明する。
図３は、第１実施形態の撮影装置を用いて動画静止画記録を行うときの静止画記録周辺の処理のタイミングを示す図である。
図３の上方には、ＶＤ（垂直同期信号）の区分、メカニカルシャッタ１２０の開閉状態を示している。また、撮像素子の蓄積期間（Ｂ０，Ｃ０，Ｄ０，Ｅ０）、撮像素子１０２からの蓄積電荷読み出し期間（Ａ１，Ｂ１，Ｃ１，Ｄ１）、カメラ信号処理部１０４により信号処理された画像データ（Ａ２，Ｂ２，Ｐｒｅ＿Ｃ，Ｃ２，Ｄ２）を表している。さらに、顔検出に使用する検出用画像（Ａ２，Ｂ２，Ｄ２）、被写体の顔を検出した結果（ｄｅｔ＿Ａ２，ｄｅｔ＿Ｂ２，ｄｅｔ＿Ｐｒｅ＿Ｃ）を表している。これらのうち、Ｃ０，Ｃ１，Ｃ２は、それぞれ静止画の蓄積期間、静止画の蓄積電荷読み出し期間、静止画の画像データを表している。
【００２２】
動画記録中には、撮像素子１０２から画素データとして読み出した電荷をＡ／Ｄ変換部１０３によってデジタル信号に変換を行い、カメラ信号処理部１０４へ送る。動画記録中に被写体の顔を検出するときには、カメラ信号処理部１０４によって信号処理された画像データから顔検出処理を行うときに必要な検出用画像を顔検出リサイズ部１１３によって生成する。
【００２３】
図３中で、太枠で囲んだ部分は、動画及び静止画を記録中の被写体の顔を検出するときに必要な検出用画像を示しているが、画像データＰｒｅ＿Ｃについては、検出用画像としての役割も有するので、太枠で囲んで示している。さらに、図３中で、二重枠で囲んだ部分は、検出用画像から被写体の顔を検出した結果を示しており、検出用画像と同一のＶＤ期間内で得ることができる。検出結果は、例えば、検出用画像中の顔領域部分の座標位置とする。
【００２４】
図４は、顔検出部１１４が検出した被写体の顔の座標位置の例を示す図である。
図４中で、Ｘ印を検出領域の開始点とし、ｘ、ｙの座標で定義し、Ｈ、Ｖをそれぞれ水平方向、垂直方向の画素数とする。そして、この検出した開始点、及び、各方向の画素数によって、顔が含まれる領域を表す座標の範囲を示している。
【００２５】
図３に戻って、動画撮影中に静止画の撮影がＶＤ２で開始されると、メカニカルシャッタ１２０が一旦閉じた後撮像素子１０２の全画素をリセットし、その後再度メカニカルシャッタ１２０を開き、静止画用の蓄積を行う（Ｃ０）。そして、メカニカルシャッタ１２０が閉じることで電荷の蓄積が終了する。これと平行して、直前に顔検出部１１４が検出した検出結果である顔領域の座標位置ｄｅｔ＿Ａ２に基づき、被写体領域検出部１１７が主要な被写体が存在する被写体領域を検出する。また、領域指定部１１９は、被写体領域検出部１１７が検出した被写体領域に応じて撮像素子１０２の蓄積電荷を読み出す指定領域を撮像素子制御部１１８に指定する。領域指定部１１９は、主被写体が動いていることを考慮するため、被写体領域検出部１１７が検出した被写体領域よりも広い領域を指定領域として設定する。例えば、水平方向、垂直方向ともに、被写体領域検出部１１７が検出した被写体領域を２倍に拡大した領域を指定する。
【００２６】
撮像素子制御部１１８は、領域指定部１１９により指定された指定領域に対する蓄積電荷を先行して読み出す。したがってこの場合、被写体における顔部分の領域の蓄積電荷を静止画用の蓄積電荷を読み出す期間Ｃ１が終了するよりも先に、先行して読み出すこととなる。なお、この先行して読み出すのは、静止画用の蓄積電荷の読み出し開始よりも先に行うことが望ましいが、ＶＤ４よりも前に先行読みだしが完了すれば、静止画用の蓄積電荷の読み出し途中で行ってもよい。
撮像素子１０２から読み出された電荷は、Ａ／Ｄ変換部１０３によってデジタル信号に変換した後、カメラ信号処理部１０４によって信号処理されて画像データとなりＶＤ４に同期するタイミングで取得できる（図３中、Ｐｒｅ＿Ｃ）。
ここで、先行して読み出す指定領域（本実施形態では、顔部分の領域と一致）が占める面積は、通常、撮影領域全体と比べると、はるかに小さい。したがって、この指定領域に対する蓄積電荷（Ｐｒｅ＿Ｃに対応）の読み出しは、静止画用の蓄積電荷を読み出す期間Ｃ１よりも短時間で終了できる。
【００２７】
そして、肌色部検出部１１２が、読み出した指定領域に対する蓄積電荷から、当該指定領域の肌色部を検出する。指定領域は、被写体が動くことを考慮して、被写体領域検出部１１７が検出した被写体領域よりも広く設定されているため、指定領域には顔以外の背景等に対応する蓄積電荷も多く含まれてしまっている。そこで、指定領域から肌色部を検出することで、指定領域における被写体の顔領域を特定している。なお、指定領域における顔領域を特定する際に、顔検出部１１４を用いたほうが精度の高い検出結果を得ることができるが、顔領域の特定に要する時間を短くするため、ここでは簡易な方法である肌色部の検出を行っている。
そして、上述の指定領域について先行して読み出された蓄積電荷から得られた画像データ（Ｐｒｅ＿Ｃ）の肌色部に基づいて、撮像素子制御部１１８が静止画記録直後の動画記録を行うときの撮像素子１０２に対する電荷蓄積（図中、Ｄ）時の撮像条件の制御を行う。例えば、撮像素子１０２から顔部分の領域を先行して蓄積電荷を読み出しているので、被写体の顔が白飛びしないような最適な蓄積（露光）制御を行う。
【００２８】
このように、動画記録中に静止画を記録するときに画像データが得られない期間において、被写体の顔検出結果に基づいて撮像素子の蓄積電荷読み出し領域を限定する。そして、この限定された領域（指定領域）を先行して読み出すことにより、静止画記録直後の画像記録に対する撮像素子の最適な蓄積制御を行うことができる。
【００２９】
また、顔領域の座標位置を示す検出結果ｄｅｔ＿Ａ２に基づき、被写体領域検出部１１７が被写体の領域を検出し、これに基づき領域指定部１１９が撮像素子１０２から蓄積電荷を読み出す指定領域を指定する。これにしたがい、撮像素子制御部１１８が、指定領域に対する蓄積電荷を先行して読み出すように撮像素子１０２を制御すると、被写体の顔部分近傍の領域の蓄積電荷を先行して読み出すこととなる。そして、この読み出された電荷はＡ／Ｄ変換部１０３によってデジタル信号に変換され、ＶＤ４に同期して画像データとして取得される。動画撮影に復帰する際には、この画像データにおける肌色部検出部１１２によって当該指定領域の肌色部を検出することで、被写体の肌色部が最適になるような蓄積（露光）制御を行うことで被写体の顔部分の輝度を適正値とすることができる。その結果、顔部分が白飛びしたり、黒つぶれしたりすることを防止することが可能となる。
ここで、肌色部が最適になるような撮像素子の制御については、撮影装置の美肌モードに移行したときに、実行させてもよい。なお、美肌モードとは、肌色部分がより美しく表現されるように撮影者が撮影装置に対して設定する撮影モードを指している。したがって、美肌モードの他に、ポートレートモード、赤ちゃんモード等、人物撮影に適した同様な撮影モードであってもよい。
【００３０】
（第２実施形態）
図５は、本発明による撮影装置の第２実施形態を示す図である。
第２実施形態の撮像装置２は、図５において追加した画像処理部１２１をさらに有している点のみが第１実施形態と異なっている。よって、前述した第１実施形態と同様の機能を果たす部分には、同一の符号を付して、重複する説明を適宜省略する。
画像処理部１２１は、静止画記録部１１６に記録する前の画像データに対して、フィルター処理等の画像処理を行う部分である。
なお、第１実施形態においても、静止画記録部１１６に記録する前の画像データに対して、フィルター処理等の画像処理を行う部分が設けられている。しかし、第２実施形態では、この画像処理部１２１の動作に第２実施形態と異なる部分が含まれている。よって、第１実施形態との差異を明確にするために、図１には画像処理部１２１を示さずに、図５で追加的に示している。
【００３１】
図６は、第２実施形態の撮影装置を用いて動画静止画記録を行うときの静止画記録周辺の処理のタイミングを示す図である。図６は、第１実施形態における図３と同様に示している。
第２実施形態では、第１実施形態と同様に、静止画撮影時に、ＩＰ変換部１０５によってインターレースからプログレッシブに変換された画像データに対し、静止画符号化部１１５によってＪＰＥＧ化等の符号化処理を行う。そして、静止画符号化手段１１５によって符号化されたＪＰＥＧ形式等の静止画の画像データが静止画記録部１１６に記録される。
【００３２】
ここで、第２実施形態では、静止画の画像データを記録するとき、領域指定部１１９によって指定された指定領域、すなわち、被写体の顔部分に対応する領域の蓄積電荷を先行して読み出す。読み出した蓄積電荷を、Ａ／Ｄ変換部１０３によってデジタル信号に変換し、カメラ信号処理部１０４によって信号処理された画像データ（Ｐｒｅ＿Ｃ）を得る。そして、この画像データ（Ｐｒｅ＿Ｃ）から顔検出部１１４によって被写体の顔領域が検出される。この検出結果（図中、ｄｅｔ＿Ｐｒｅ＿Ｃ）に基づき、静止画の記録画像を生成するときの画像処理（フィルター）のパラメータを最適化する。これにより、良好な静止画の記録画像を記録できる。
上述した静止画記録時の画像処理に関する画像処理の最適化は、撮影装置における美肌モード設定時に機能させてもよい。
【００３３】
このように、第２実施形態によれば、静止画の記録時に最適な画像処理を行うときに、先読みしたデータを使用することから、より速く一連の処理を完了することができる。
【００３４】
（第３実施形態）
図７は、本発明による撮影装置の第３実施形態を示す図である。
第３実施形態の撮像装置３は、図７において追加した露出演算部１２２及びＡＦ制御部１２３をさらに有している点と、被写体領域検出部１１７の動作のみが第２実施形態と異なっている。よって、前述した第２実施形態と同様の機能を果たす部分には、同一の符号を付して、重複する説明を適宜省略する。
【００３５】
露出演算部１２２は、撮影時の露出制御に関する各種演算処理を行う部分である。露出演算部１２２は、不図示の指示入力部により撮影者によって指示された測光範囲に対して行われる測光結果に基づき、露出演算を行う。また、露出演算部１２２は、露光の条件に関する情報を被写体領域検出部１１７へ送る。露光の条件に関する情報としては、例えば、スポット測光範囲や、ＡＦ（オートフォーカス）領域を示すＡＦターゲット範囲に連動する測光範囲等である。
【００３６】
ＡＦ制御部１２３は、ＡＦに関する各種制御を行う部分であり、フォーカスレンズ１０１の駆動制御を行う。ＡＦ制御部１２３は、合焦状態に関する情報を被写体領域検出部１１７へ送る。合焦状態に関する情報とは、例えば、合焦位置が撮像領域内のいずれの位置にあるのか、ＡＦモードがどのようなモード（例えば、ワンショットモード、動態撮影モード、マニュアルモード等）であるか等である。また、ＡＦ制御部１２３が被写体領域検出部１１７へ送る合焦状態に関する情報として被写体の形状や色、コントラスト等に基づき被写体を判断したり追尾したりしている場合には、この追尾条件等を含んでもよい。
【００３７】
なお、第２実施形態においても、露出演算をする部分とＡＦ制御をする部分が設けられている。しかし、第３実施形態では、この露出演算部１２２及びＡＦ制御部１２３の動作に第２実施形態とは異なる部分が含まれている。よって、第２実施形態との差異を明確にするために、図５には露出演算部１２２及びＡＦ制御部１２３を示さずに、図７で追加的に示している。
【００３８】
第３実施形態では、被写体領域検出部１１７は、顔検出部１１４と露出演算部１２２とＡＦ制御部１２３とから得られる各情報を用いて、被写体の領域を検出する。例えば、各情報が示す領域が一致するときには、その領域が被写体の領域であるとして検出する。一方、各情報が示す領域が一致しないときには、各情報が持つ付加的情報（例えば、顔検出部１１４が検出した顔の領域の大きさ等）を参照して重み付けを行い、最終的に被写体の領域を検出する。
【００３９】
本実施形態によれば、被写体領域検出部１１７は、顔検出部１１４に加えて、露出演算部１２２とＡＦ制御部１２３とから得られる各情報を用いて、被写体の領域を検出するので、被写体の領域をより的確に検出できる。よって、画像処理部１２１は、より好ましい画像処理を行うことができる。
【００４０】
（変形形態）
以上説明した実施形態に限定されることなく、種々の変形や変更が可能であって、それらも本発明の範囲内である。
（１）各実施形態において、撮像素子１０２は、ＣＭＯＳイメージセンサを用いる例を示したが、これに限らず、アドレス指定して特定の領域から電荷を先読みできる撮像素子であれば、他の種類の撮像素子を用いてもよい。
【００４１】
（２）各実施形態において、メカニカルシャッタ１２０を併用する例を示したが、これに限らず、例えば、メカニカルシャッタを用いずに電子シャッタのみとしてもよい。また、メカニカルシャッタ１２０は、静止画の蓄積開始時に閉開動作を行う例を示したが、蓄積開始時に閉開動作を行わなくてもよい。
【００４２】
（３）第３実施形態において、被写体領域検出部１１７は、顔検出部１１４と露出演算部１２２とＡＦ制御部１２３とから情報を得て被写体の領域を検出する例を示したが、これらの内の１つ、または、２つを組み合わせた情報に基づき検出を行ってもよい。
なお、第１実施形態〜第３実施形態及び変形形態は、適宜組み合わせて用いることもできるが、詳細な説明は省略する。また、本発明は以上説明した各実施形態によって限定されることはない。
【図面の簡単な説明】
【００４３】
【図１】本発明による撮影装置の第１実施形態を示す図である。
【図２】本発明を適用しない場合を想定した動画静止画記録を行うときの静止画記録周辺の処理のタイミングを示す図である。
【図３】第１実施形態の撮影装置を用いて動画静止画記録を行うときの静止画記録周辺の処理のタイミングを示す図である。
【図４】顔検出部１１４が検出した被写体の顔の座標位置の例を示す図である。
【図５】本発明による撮影装置の第２実施形態を示す図である。
【図６】第２実施形態の撮影装置を用いて動画静止画記録を行うときの静止画記録周辺の処理のタイミングを示す図である。
【図７】本発明による撮影装置の第３実施形態を示す図である。
【符号の説明】
【００４４】
１０１  フォーカスレンズ
１０２  撮像素子
１０３  Ａ／Ｄ変換部
１０４  カメラ信号処理部
１０５  ＩＰ変換部
１０６  動画リサイズ部
１０７  ＮＲ処理部
１０８  動画符号化部
１０９  記録信号処理部
１１０  記録媒体
１１１  メインメモリ
１１２  肌色検出部
１１３  顔検出リサイズ部
１１４  顔検出部
１１５  静止画符号化部
１１６  静止画記録媒体
１１８  撮像素子制御部
１１９  領域指定部
１２０  メカニカルシャッタ
１２１  画像処理部
１２２  露出演算部
１２３  ＡＦ制御部
【図１】
2010010737.tif 000003
【図２】
2010010737.tif 000004
【図３】
2010010737.tif 000005
【図４】
2010010737.tif 000006
【図５】
2010010737.tif 000007
【図６】
2010010737.tif 000008
【図７】
2010010737.tif 000009