(57)【要約】【課題】静止画撮影時の色再現性と、静止画撮影待機状態へ復帰した際の色再現性の連続性を保つことを可能にする。【解決手段】駆動形態によって分光感度が異なるイメージセンサを用いた撮像装置は、静止画撮影とは異なる駆動形態でイメージセンサを駆動する所定の動作状態での動作中に、ユーザからの所定の操作指示に応じて静止画撮影を実行する（Ｓ４０９、Ｓ４１０）。この静止画撮影において、静止画撮影のための駆動形態でイメージセンサを駆動して取得された画像信号に基づいて静止画撮影用のホワイトバランス制御値が取得され、静止画撮影におけるホワイトバランスが制御される。静止画撮影から上記所定の動作状態へ復帰する際には、この静止画撮影で得られたホワイトバランス制御値を所定の動作状態におけるイメージセンサの駆動形態に応じたホワイトバランス制御値へ変換し、得られたホワイトバランス制御値が適用される（Ｓ４１２）。【選択図】図４
2006304001.tif 000002
【特許請求の範囲】
【請求項１】
動画像を撮像する第１の動作中に、静止画撮影を実行する第２の動作を行う静止画撮影手段と、
前記静止画撮影によって取得された第１の画像信号に基づいてホワイトバランス制御値を取得し、該ホワイトバランス制御値を用いて前記第１の画像信号を補正するように制御する第１の制御手段と、
前記第１の画像信号に基づいて取得されたホワイトバランス制御値に基づいて、前記静止画撮影後の前記第１の動作中に得られる第２の画像信号を補正するように制御する第２の制御手段とを備えることを特徴とする撮像装置。
【請求項２】
前記第１の動作は、前記動画像を、前記動画像を撮像後も再生可能な状態にする動作を含むことを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記静止画撮影によって取得された前記第１の画像信号を、前記動画像の一部として用いるように制御する第３の制御手段を有し、
前記動画像の一部として用いられる前記第１の画像信号は、前記静止画撮影によって取得された前記第１の画像信号に基づいたホワイトバランス制御値によって補正されていることを特徴とする請求項１又は２に記載の撮像装置。
【請求項４】
前記第１の動作は、前記静止画撮影前に、前記静止画撮影する被写体の確認のために動画像を表示手段に表示する動作を含むことを特徴とする請求項１に記載の撮像装置。
【請求項５】
前記第１の画像信号及び前記第２の画像信号を得るための撮像素子の分光感度特性を、前記第１の動作中と前記第２の動作の際で切り替える切り替え手段を有し、
前記第２の制御手段は、前記第１の画像信号に基づいて取得されたホワイトバランス制御値を、前記第１の動作中の前記撮像素子の分光感度特性に応じたホワイトバランス制御値に変換し、変換された前記ホワイトバランス制御値を用いて前記第２の画像信号を補正するように制御することを特徴とする請求項１乃至４のいずれかに記載の撮像装置。
【請求項６】
撮像素子を第１の分光感度特性で駆動する第１の動作と、前記撮像素子を第２の分光感度特性で駆動する第２の動作とを制御する駆動手段と、
前記第１の動作の際に得られた第１の画像信号に基づいてホワイトバランス制御値を取得し、該ホワイトバランス制御値を用いて前記第１の画像信号を補正するように制御する第１の制御手段と、
前記第１の画像信号に基づいて取得されたホワイトバランス制御値を、前記第２の動作の際の前記撮像素子の分光感度特性に応じたホワイトバランス制御値に変換し、変換された前記ホワイトバランス制御値を用いて前記第２の画像信号を補正するように制御する第２の制御手段とを備えることを特徴とする撮像装置。
【請求項７】
動画像を撮像する第１の動作中に、静止画撮影を実行する第２の動作を行う静止画撮影手段と、
光源の変化があった際に、前記第２の動作前の前記第１の動作中に得られる第１の画像信号を光源へ追従するように補正するよりも、より光源に追従するように、前記静止画撮影によって取得された第２の画像信号を補正をするとともに、前記静止画撮影後の前記第１の動作中に得られる第３の画像信号に基づく画像の色再現性が、前記第１の画像信号に基づく画像の色再現性よりも、前記第２の画像信号に基づく画像の色再現性に近くなるように制御する制御手段とを有することを特徴とする撮像装置。
【請求項８】
動画像を撮像する第１の動作中に、静止画撮影のための焦点調整若しくは露光調整の少なくとも一つの動作を実行する第２の動作を行う調整手段と、
前記第２の動作中に、静止画撮影を実行する第３の動作を行う静止画撮影手段と、
光源の変化があった際に、前記第２の動作中に得られる第１の画像信号を光源へ追従するように補正するよりも、より光源に追従するように、前記静止画撮影によって取得された第２の画像信号を補正をするとともに、前記静止画撮影後の前記第１の動作中に得られる第３の画像信号に基づく画像の色再現性が、前記第１の画像信号に基づく画像の色再現性よりも、前記第２の画像信号に基づく画像の色再現性に近くなるように制御する制御手段とを有することを特徴とする撮像装置。
【請求項９】
前記制御手段は、前記第３の画像信号に基づく画像の色再現性が、前記第２の画像信号に基づく画像の色再現性と同じになるように制御することを特徴とする請求項７又は８に記載の撮像装置。
【請求項１０】
前記第１の動作は、前記動画像を、前記動画像を撮像後も再生可能な状態にする動作を含むことを特徴とする請求項７乃至９のいずれかに記載の撮像装置。
【請求項１１】
前記静止画撮影によって取得された前記第２の画像信号を、前記動画像の一部として用いるように制御する第２の制御手段を有することを特徴とする請求項１０に記載の撮像装置。
【請求項１２】
前記第１の動作は、前記静止画撮影前に、前記静止画撮影する被写体の確認のために動画像を表示手段に表示する動作を含むことを特徴とする請求項７乃至９のいずれかに記載の撮像装置。
【請求項１３】
動画像を撮像する動作を含む第１の動作中に、静止画撮影を実行する第２の動作を行う静止画撮影ステップと、
光源の変化があった際に、前記第２の動作前の前記第１の動作中に得られる第１の画像信号を光源へ追従するように補正するよりも、より光源に追従するように、前記静止画撮影によって取得された第２の画像信号を補正をするとともに、前記静止画撮影後の前記第１の動作中に得られる第３の画像信号に基づく画像の色再現性が、前記第１の画像信号に基づく画像の色再現性よりも、前記第２の画像信号に基づく画像の色再現性に近くなるように制御する制御ステップとを有することを特徴とする制御方法。
【請求項１４】
撮像素子を第１の分光感度特性で駆動する第１の動作と、前記撮像素子を第２の分光感度特性で駆動する第２の動作とを制御する駆動ステップと、
前記第１の動作の際に得られた第１の画像信号に基づいてホワイトバランス制御値を取得し、該ホワイトバランス制御値を用いて前記第１の画像信号を補正するように制御する第１の制御ステップと、
前記第１の画像信号に基づいて取得されたホワイトバランス制御値を、前記第２の動作の際の前記撮像素子の分光感度特性に応じたホワイトバランス制御値に変換し、変換された前記ホワイトバランス制御値を用いて前記第２の画像信号を補正するように制御する第２の制御ステップとを備えることを特徴とする制御方法。
【請求項１５】
動画像を撮像する第１の動作中に、静止画撮影を実行する第２の動作を行う静止画撮影ステップと、
光源の変化があった際に、前記静止画撮影によって取得された第１の画像信号の補正を、前記第２の動作前の前記第１の動作の際に得られる第２の画像信号の補正よりも、光源へ追従するように制御するとともに、前記静止画撮影後の前記第１の動作の際に得られる第３の画像信号に基づく画像の色再現性が、前記第２の画像信号に基づく画像の色再現性よりも、前記第１の画像信号に基づく画像の色再現性に近くなるように制御する制御ステップとを有することを特徴とする制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像素子で得られた画像信号を処理するする撮像装置に関する。
【背景技術】
【０００２】
一般的なデジタルカメラのホワイトバランス制御（以下ＷＢと記す場合もある）は、被写体から反射する反射光を分析し、得られたスペクトル分布から光源の種類を特定し、光源色に依らない色再現を得るようにホワイトバランス制御値を変化させている。一般に、光源が変化した場合に、静止画撮影の際には、光源に直ぐに追従するようにしているが、動画像を撮像している最中は、光源の変化に対して、時定数を持たせて追従するようにしている。
【０００３】
特許文献１は、静止画を撮影する際に、静止画撮影待機状態（動画像の撮像を行っている状態）の最後のホワイトバランス制御値を記憶しておき、静止画撮影が完了して静止画撮影待機状態（動画像の撮像を行っている状態）に復帰する際にはその記憶しておいたホワイトバランス制御値を再設定することを記載している。。
【特許文献１】特開２００３−６１１１３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
上記の特許文献１に記載されたデジタルカメラは、静止画撮影が完了して静止画撮影待機状態へと復帰する際に、静止画撮影の直前のホワイトバランス制御値を設定する。そのため、上記で説明したように、静止画撮影と、動画像の撮像の場合における、光源の追従性の違いにより、静止画撮影待機状態への復帰直後では光源色を補正しきれていないという課題があった。
【０００５】
つまり、このようなホワイトバランス制御を行うと、静止画撮影から得られた画像と、その後の動画像の撮像により得られた画像との間で色味が異なってしまい、色の連続性が保てなくなるという課題がある。
【０００６】
本発明は上記の課題に鑑みてなされたものであり、例えば、静止画撮影動作と動画撮像動作等の異なる動作で各々得られた画像の色再現性の連続性を保つことを可能にすることを目的とする。
【課題を解決するための手段】
【０００７】
上記の目的を達成するために、本願発明によれば、動画像を撮像する第１の動作中に、静止画撮影を実行する第２の動作を行う静止画撮影手段と、前記静止画撮影によって取得された第１の画像信号に基づいてホワイトバランス制御値を取得し、該ホワイトバランス制御値を用いて前記第１の画像信号を補正するように制御する第１の制御手段と、前記第１の画像信号に基づいて取得されたホワイトバランス制御値に基づいて、前記静止画撮影後の前記第１の動作中に得られる第２の画像信号を補正するように制御する第２の制御手段とを備える撮像装置が提供される。
【０００８】
また、本願発明の他の態様によれば、撮像素子を第１の分光感度特性で駆動する第１の動作と、前記撮像素子を第２の分光感度特性で駆動する第２の動作とを制御する駆動手段と、前記第１の動作の際に得られた第１の画像信号に基づいてホワイトバランス制御値を取得し、該ホワイトバランス制御値を用いて前記第１の画像信号を補正するように制御する第１の制御手段と、前記第１の画像信号に基づいて取得されたホワイトバランス制御値を、前記第２の動作の際の前記撮像素子の分光感度特性に応じたホワイトバランス制御値に変換し、変換された前記ホワイトバランス制御値を用いて前記第２の画像信号を補正するように制御する第２の制御手段とを備える撮像装置が提供される。
【０００９】
また、また、本願発明の他の態様によれば、動画像を撮像する第１の動作中に、静止画撮影を実行する第２の動作を行う静止画撮影手段と、光源の変化があった際に、前記第２の動作前の前記第１の動作中に得られる第１の画像信号を光源へ追従するように補正するよりも、より光源に追従するように、前記静止画撮影によって取得された第２の画像信号を補正をするとともに、前記静止画撮影後の前記第１の動作中に得られる第３の画像信号に基づく画像の色再現性が、前記第１の画像信号に基づく画像の色再現性よりも、前記第２の画像信号に基づく画像の色再現性に近くなるように制御する制御手段とを有することを特徴とする撮像装置が提供される。
【００１０】
また、また、本願発明の他の態様によれば、動画像を撮像する動作を含む第１の動作中に、静止画撮影を実行する第２の動作を行う静止画撮影ステップと、光源の変化があった際に、前記第２の動作前の前記第１の動作中に得られる第１の画像信号を光源へ追従するように補正するよりも、より光源に追従するように、前記静止画撮影によって取得された第２の画像信号を補正をするとともに、前記静止画撮影後の前記第１の動作中に得られる第３の画像信号に基づく画像の色再現性が、前記第１の画像信号に基づく画像の色再現性よりも、前記第２の画像信号に基づく画像の色再現性に近くなるように制御する制御ステップとを有することを特徴とする制御方法が提供される。
【００１１】
また、また、本願発明の他の態様によれば、撮像素子を第１の分光感度特性で駆動する第１の動作と、前記撮像素子を第２の分光感度特性で駆動する第２の動作とを制御する駆動ステップと、前記第１の動作の際に得られた第１の画像信号に基づいてホワイトバランス制御値を取得し、該ホワイトバランス制御値を用いて前記第１の画像信号を補正するように制御する第１の制御ステップと、前記第１の画像信号に基づいて取得されたホワイトバランス制御値を、前記第２の動作の際の前記撮像素子の分光感度特性に応じたホワイトバランス制御値に変換し、変換された前記ホワイトバランス制御値を用いて前記第２の画像信号を補正するように制御する第２の制御ステップとを備えることを特徴とする制御方法が提供される。
【００１２】
また、また、本願発明の他の態様によれば、動画像を撮像する第１の動作中に、静止画撮影を実行する第２の動作を行う静止画撮影ステップと、光源の変化があった際に、前記静止画撮影によって取得された第１の画像信号の補正を、前記第２の動作前の前記第１の動作の際に得られる第２の画像信号の補正よりも、光源へ追従するように制御するとともに、前記静止画撮影後の前記第１の動作の際に得られる第３の画像信号に基づく画像の色再現性が、前記第２の画像信号に基づく画像の色再現性よりも、前記第１の画像信号に基づく画像の色再現性に近くなるように制御する制御ステップとを有することを特徴とする制御方法が提供される。
【発明の効果】
【００１３】
本発明によれば、色再現性の連続性を保つことが可能になり、画像を見た場合の違和感が緩和される。
【発明を実施するための最良の形態】
【００１４】
以下、添付の図面を参照して本発明の好適な実施形態を説明する。
【００１５】
＜第１実施形態＞
図１は、本実施形態による画像処理装置としての撮像装置１００の構成例を示すブロック図である。撮像装置１００は、光学系として撮影レンズ１０、絞り機能を備えるシャッター１２、光学像を電気信号に変換する撮像素子１４を有する。撮像素子１４のアナログ信号出力はＡ／Ｄ変換器１６によりディジタル信号に変換される。
【００１６】
タイミング発生回路１８は、撮像素子１４、Ａ／Ｄ変換器１６、Ｄ／Ａ変換器２６にクロック信号や制御信号を供給する。なお、タイミング発生回路１８は、メモリ制御回路２２及びシステム制御回路５０により制御される。
【００１７】
画像処理回路２０は、Ａ／Ｄ変換器１６からのデータ或いはメモリ制御回路２２からのデータに対して所定の画素補間処理や色変換処理を行う。また、画像処理回路２０は、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果をシステム制御回路５０に提供する。システム制御回路５０はこれらの演算結果に基づいて露光制御部４０、測距制御部４２を制御し、ＴＴＬ（スルー・ザ・レンズ）方式のＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＥＦ（フラッシュプリ発光）処理を実現する。さらに、画像処理回路２０においては、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてＴＴＬ方式のＡＷＢ（オートホワイトバランス）処理も行っている。
【００１８】
メモリ制御回路２２は、Ａ／Ｄ変換器１６、タイミング発生回路１８、画像処理回路２０、画像表示メモリ２４、Ｄ／Ａ変換器２６、メモリ３０、圧縮・伸長回路３２を制御する。Ａ／Ｄ変換器１６より出力されたデータは画像処理回路２０及びメモリ制御回路２２を介して、或いは直接メモリ制御回路２２を介して、画像表示メモリ２４或いはメモリ３０に書き込まれる。
【００１９】
画像表示メモリ２４に書き込まれた表示用の画像データはＤ／Ａ変換器２６によりアナログ信号に変換され、画像表示部２８により表示される。画像表示部２８を用いて撮像した画像データを逐次表示すれば、電子ファインダー（ＥＶＦ）機能を実現することが可能である。また、画像表示部２８の表示はシステム制御回路５０の制御により任意にＯＮ／ＯＦＦすることができる。画像表示部２８の表示をＯＦＦにした場合には撮像装置１００の電力消費を大幅に低減することが出来る。
【００２０】
メモリ３０は撮影した静止画像や動画像を格納する。メモリ３０は、所定枚数の静止画像や所定時間の動画像を格納するのに十分な記憶量を備えている。これにより、複数枚の静止画像を連続して撮影する連写撮影やパノラマ撮影の場合にも、高速かつ大量の画像書き込みをメモリ３０に対して行うことが可能となる。また、メモリ３０はシステム制御回路５０の作業領域としても使用することが可能である。
【００２１】
圧縮・伸長回路３２は適応離散コサイン変換（ＡＤＣＴ）等により画像データを圧縮伸長する。圧縮・伸長回路３２は、メモリ３０に格納された画像を読み込んで圧縮処理或いは伸長処理を行い、処理を終えたデータをメモリ３０に書き込む。
【００２２】
露光制御部４０はシャッター１２が備える絞り機能を制御する。露光制御部４０はさらにフラッシュ４８と連携し、フラッシュ調光機能を有する。測距制御部４２は撮影レンズ１０のフォーカシングを制御する。ズーム制御部４４は撮影レンズ１０のズーミングを制御する。バリア制御部４６はバリアである保護部材１０２の動作を制御する。フラッシュ４８は、フラッシュ撮影のための発光機能の他、ＡＦ補助光の投光機能、フラッシュ調光機能も有する。露光制御部４０、測距制御部４２はＴＴＬ方式を用いて制御される。すなわち、上述のように、システム制御回路５０が、撮像した画像データを画像処理回路２０が演算した演算結果に基づいて露光制御部４０、測距制御部４２に対して制御を行う。
【００２３】
システム制御回路５０は撮像装置１００の全体を制御する。メモリ５２はシステム制御回路５０の動作用の定数、変数、プログラム等を記憶する。メモリ５２はまた、ＡＥで用いるプログラム線図も格納している。プログラム線図は、露出値に対する絞り開口径とシャッター速度の制御値の関係を定義したテーブルである。
【００２４】
提示部５４はシステム制御回路５０の制御下で、文字、画像、音（音声）等を用いて動作状態やメッセージ等をユーザに通知する。提示部５４は、撮像装置１００の操作部近辺の視認し易い位置に単数或いは複数個所設置され、例えばＬＣＤやＬＥＤ、発音素子等の組み合わせにより構成されている。また、提示部５４は、その一部の機能が光学ファインダー１０４内に設置されている。提示部５４において、ＬＣＤ等に表示するものとしては、シングルショット／連写撮影表示、セルフタイマー表示、圧縮率表示、記録画素数表示、記録枚数表示、残撮影可能枚数表示、シャッタースピード表示、絞り値表示、露出補正表示、フラッシュ表示、赤目緩和表示、マクロ撮影表示、ブザー設定表示、時計用電池残量表示、電池残量表示、エラー表示、複数桁の数字による情報表示、記録媒体２００及び２１０の着脱状態表示、通信Ｉ／Ｆ動作表示、日付け・時刻表示、等がある。また、提示部５４の表示内容のうち、光学ファインダー１０４内に表示するものとしては、合焦表示、手振れ警告表示、フラッシュ充電表示、シャッタースピード表示、絞り値表示、露出補正表示、等がある。
【００２５】
不揮発性メモリ５６は電気的に消去・記録可能なメモリであり、例えばＥＥＰＲＯＭ等が用いられる。
【００２６】
６０、６１、６２、６４及び７０は、システム制御回路５０の各種の動作指示を入力するための操作部を構成し、スイッチやダイアル、タッチパネル、視線検知によるポインティング、音声認識装置等により構成される。ここで、これらの操作部について具体的に説明する。
【００２７】
モードダイアルスイッチ６０は、電源オフ、自動撮影モード、撮影モード、パノラマ撮影モード、再生モード、マルチ画面再生・消去モード、ＰＣ接続モード等の各機能モードを切り替える。動画ボタン６１は、動画撮影の開始と終了を指示する。動画ボタン６１の押下により動画撮影が開始され、動画撮影中に再び動画ボタン６１が押下されると当該動画撮影が終了する。
【００２８】
シャッタースイッチ（ＳＷ１）６２で、不図示のシャッターボタンの半押し状態でＯＮとなる。シャッタースイッチ６２のＯＮにより、ＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＡＷＢ（オートホワイトバランス）処理、ＥＦ（フラッシュプリ発光）処理等の動作が開始される。シャッタースイッチ（ＳＷ２）６４は、不図示のシャッターボタンの押し込み完了でＯＮとなる。シャッタースイッチ６４のＯＮにより、露光処理（撮像素子１２から読み出した信号をＡ／Ｄ変換器１６、メモリ制御回路２２を介してメモリ３０に生画像データとして書き込む処理）、現像処理（画像処理回路２０やメモリ制御回路２２での演算により生画像データを画像化し画像データとしてメモリ３０に書き込む処理）、記録処理（メモリ３０から画像データを読み出し、圧縮・伸長回路３２で圧縮を行い、記録媒体２００或いは２１０に圧縮画像データを書き込む）という一連の処理の動作を開始する。
【００２９】
７０は上述以外の各種ボタンやタッチパネル等からなる操作部である。操作部７０は、たとえば、メニューボタン、セットボタン、マクロボタン、マルチ画面再生改ページボタン、フラッシュ設定ボタン、単写／連写／セルフタイマー切り替えボタン、メニュー移動＋（プラス）ボタン、メニュー移動−（マイナス）ボタン、再生画像移動＋（プラス）ボタン、再生画像−（マイナス）ボタン、撮影画質選択ボタン、露出補正ボタン、日付/時間設定ボタン等を含む。
【００３０】
電源制御部８０は、電池検出回路、ＤＣ−ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成される。電源制御部８０は、電池の装着の有無、電池の種類、電池残量の検出を行う。そして、その検出結果及びシステム制御回路５０の指示に基づいてＤＣ−ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体を含む各部へ供給する。電源制御部８０には、コネクタ８２及びコネクタ８４を介して電源８６が接続される。電源８６は、アルカリ電池やリチウム電池等の一次電池やＢＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ電池等の二次電池、ＡＣアダプター等からなる。
【００３１】
インターフェース９０及び９４はメモリカードやハードディスク等の記録媒体とシステムバスを接続する。また、コネクタ９２及び９６を介して着脱可能なメモリカードやハードディスク等の記録媒体との接続が行われる。記録媒体着脱検知部９８はコネクタ９２及び／又は９６に記録媒体２００或いは２１０が装着されているか否かを検知する。
【００３２】
なお、本実施形態では記録媒体を取り付けるインターフェース及びコネクタを２系統持つものとして説明している。もちろん、記録媒体を取り付けるインターフェース及びコネクタは、単数或いは複数、いずれの系統数を備える構成としても構わない。また、異なる規格のインターフェース及びコネクタを組み合わせて備える構成としても構わない。また、インターフェース及びコネクタとしては、ＰＣＭＣＩＡカードやＣＦ（コンパクトフラッシュ（登録商標））カード等の規格に準拠したものを用いて構成して構わない。
【００３３】
さらに、インタフェース９０及び９４、そしてコネクタ９２及び９６をＰＣＭＣＩＡカードやＣＦ（コンパクトフラッシュ（登録商標））カード等の規格に準拠したものを用いて構成した場合、ＬＡＮカードやモデムカード、ＵＳＢカード、ＩＥＥＥ１３９４カード、Ｐ１２８４カード、ＳＣＳＩカード、ＰＨＳ等の通信カードを接続することにより、他のコンピュータやプリンタ等の周辺機器との間で画像データや画像データに付属した管理情報を転送し合うことが可能となる。
【００３４】
保護部材１０２は、画像処理装置１００のレンズ１０を含む撮像部を覆うことにより、当該撮像部の汚れや破損を防止するバリアとして機能する。また、光学ファインダ１０４は、画像表示部２８による電子ファインダー機能を使用すること無しに撮影を行うことを可能にする。上述したように、光学ファインダー１０４内には、提示部５４の一部の機能、例えば、合焦表示、手振れ警告表示、フラッシュ充電表示、シャッタースピード表示、絞り値表示、露出補正表示などが設置されている。
【００３５】
通信部１１０は、ＲＳ２３２ＣやＵＳＢ、ＩＥＥＥ１３９４、Ｐ１２８４、ＳＣＳＩ、モデム、ＬＡＮ、無線通信、等の各種通信機能を有する。１１２は通信部１１０が有線通信の場合はコネクタであり、なお通信部１１０が無線通信の場合はアンテナである。
【００３６】
記録媒体２００はメモリカードやハードディスク等である。記録媒体２００は、半導体メモリや磁気ディスク等から構成される記録部２０２、撮像装置１００とのインタフェース２０４、撮像装置１００と接続を行うためのコネクタ２０６を備えている。記録媒体２１０も記録媒体２００と同様であり、記録部２１２、インタフェース２１４、コネクタ２１６を備えている。
【００３７】
図２、図３、図４は本実施形態における撮像装置１００の主要な動作を説明するフローチャートである。以下で説明する処理はシステム制御部５０がメモリ５２に格納された制御プログラムを実行することにより実現される。
【００３８】
電池交換等により撮像装置１００に電源が投入されると、まずステップＳ２０１において、システム制御回路５０はフラグや制御変数等を初期化する。そして、ステップＳ２０２において、画像表示部２８の画像表示をＯＦＦ状態に初期設定する。
【００３９】
次に、ステップＳ２０３においてシステム制御回路５０はモードダイアル６０の設定位置により設定された動作モードを判断する。モードダイアル６０が電源ＯＦＦに設定されていた場合は、ステップＳ２０５へ進み終了処理を行う。終了処理にはたとえば以下のような処理が含まれる。すなわち、提示部５４や画像表示部２８の各部の表示を終了状態に変更し、保護部材１０２を閉じて撮像部を保護する。また、フラグや制御変数等を含む必要なパラメータや設定値、設定モードを不揮発性メモリ５６に記録する。そして、電源制御部８０により画像表示部２８を含む画像処理装置１００各部の不要な電源を遮断する。終了処理を終えると処理はステップＳ２０３へ戻る。
【００４０】
一方、モードダイアル６０が撮影モードに設定されていた場合は、処理はステップＳ２０３からステップＳ２０６へ進み、撮影モード処理が実行される。また、モードダイアル６０がその他のモードに設定されていた場合は、ステップＳ２０３からステップＳ２０４へ進み、システム制御回路５０は選択されたモードに応じた処理を実行する。そして処理を終えたならばステップＳ２０３に戻る。
【００４１】
さて、モードダイアル６０によって撮影モードが指定された場合の撮影モード処理では、まずステップＳ２０６において、システム制御回路５０は電源制御部８０により電池等で構成される電源８６の残容量や動作情況が撮像装置１００の動作に問題があるか否かを判断する。問題があるならばステップＳ２０８へ進み、表示部５４を用いて画像や音声により所定の警告表示を行い、ステップＳ２０３に戻る。電源８６に問題が無ければ、ステップＳ２０７へ進み、システム制御回路５０は記録媒体２００或いは２１０の動作状態が撮像装置１００の動作、特に記録媒体に対する画像データの記録再生動作に問題があるか否かを判断する。問題があるならばステップＳ２０８へ進み、表示部５４を用いて画像や音声により所定の警告表示を行う。そしてステップＳ２０３に戻る。記録媒体２００或いは２１０の動作状態に問題が無いならば処理はステップＳ２０９に進む。
【００４２】
ステップＳ２０９では、スルー画像（撮像素子１４によって撮像された動画像）を画像表示部２８に表示するための撮影準備（初期化）を行う。ここでは、撮像素子から、複数ライン毎に加算して信号を読み出す（加算読み出し）。撮影準備が完了したらステップＳ２１０において、画像表示部２８へのスルー画像の表示を開始する。すなわち、撮像素子１４によって撮像された動画像を表示して電子ファインダー機能を実現する。このスルー表示に於いては、撮像素子１２、Ａ／Ｄ変換器１６、画像処理回路２０、メモリ制御回路２２を介して、画像表示メモリ２４に逐次書き込まれたデータが、メモリ制御回路２２、Ｄ／Ａ変換器２６を介して画像表示部２８により逐次表示される。なお、スルー画像表示における撮像素子１４の駆動形態としては、例えば後述する動画撮影時と同様に「加算読み出し」を用いることができる。
【００４３】
次に上記撮影モードにおいて、動画撮影が指示された場合の処理を図３、図４のフローチャートにより説明する。なお、図４のフローチャートには、動画撮影中に静止画撮影が指示された場合の処理も含まれている。
【００４４】
システム制御部５０は、モードダイアル６０の状態をチェックし、モードダイアル６０が撮影モードから変更されていたらステップＳ２０３に戻る。モードダイアル６０が変更されていなければステップＳ３０２に進む。ステップＳ３０２では動画ボタン６１の状態がチェックされる。動画ボタン６１が押されていなければ処理はステップＳ３０３へ進み、スルー画表示を継続して行う。なお、ステップＳ３０４に示されるように、スルー画像の表示の継続においては、ＡＥ処理が行われる。ＡＥ処理では、画像処理回路２０が撮像素子１４から得られた信号に対して所定の測光演算を行いその演算結果をメモリ３０に格納する。システム制御回路５０はこの演算結果を元に露光制御部４０を用いてスルー画像に対するＡＥ処理を行う。その後Ｓ３０１に戻る。
【００４５】
ステップＳ３０２において動画ボタン６１が押下されていると判断された場合は、処理はステップＳ３０５に進む。ステップＳ３０５では動画撮影のためのＡＦ処理が行われる。このＡＦ処理では、画像処理回路２０が撮像素子１４から得られた信号に対して所定の測距演算を行い、その演算結果をメモリ３０に格納する。システム制御回路５０はこの測距演算結果を元に測距制御部４４を用いてＡＦ処理を行い、撮影レンズ１０の焦点を被写体に合わせる。その後、ステップＳ３０６に進み、ステップＳ３０４と同様の手順でＡＥ処理を行う。
【００４６】
ステップＳ３０７では一連の撮影動作を行う動画撮影処理を実行する。撮影処理後メモリ３０には、撮像素子１４からＡ／Ｄ変換機１６を通して読み出される。そして、読み出された画像データに対してＪＰＥＧなどの所定の現像及び圧縮処理を行い、処理後の画像データをメモリ３０内に保存する。メモリ３０に保存された圧縮画像データを動画ファイルとして記録媒体２００へ書き込み、ステップＳ３０８に進む。ステップＳ３０８ではステップＳ３０７で撮像された画像をスルー画像として画像表示部２８に表示して、動画撮影撮影の開始処理を完了する。その後、モードダイアル６０の設定が変更されるか、再び動画ボタン６１が押されるまで、動画撮影及び記録（ステップＳ４０３〜Ｓ４０７）が行われる。
【００４７】
以上のようにして動画撮影が開始されると、図４に示す動画撮影処理中の処理が実行される。
【００４８】
まず、ステップＳ４０１において、モードダイアル６０が変更されたかどうかを判断する。モードダイアル６０が変更された場合は、当該動画撮影処理を終了してステップＳ２０３に戻る。モードダイアル６０が変更されていなければステップＳ４０２に進む。ステップＳ４０２では動画ボタン６１が押下されたかどうかを判断する。動画撮影中に動画ボタン６１の押下が検出されると、当該動画撮影処理を終了する。そして処理をステップＳ２０３に戻す。ステップＳ４０２において動画ボタンが押されていなければ、ステップＳ４０３に進み、動画撮影処理が継続される。
【００４９】
ステップＳ４０３では動画読み出し処理が行なわれる。この動画読み出し処理では、撮像素子１４から加算読み出しによって撮像信号が読み出される。そして、撮像素子１４から読み出された撮像信号はＡ／Ｄ変換器１６を通してデジタル信号に変換されメモリ３０に保存される（露光処理）。すなわち、メモリ３０には信号処理前の未処理画像データが保存される。ステップＳ４０４では、ステップＳ３０４、Ｓ３０６と同様のＡＥ処理が行なわれる。すなわち、画像処理回路２０が撮像素子１４から得られた信号に対して所定の測光演算を行いその演算結果をメモリ３０に格納する。システム制御回路５０はこの演算結果を元に露光制御部４０を用いてＡＥ処理を行う。なお、ここで、ステップＳ３０５のようなＡＦ処理を実行できるようにしてもよい。
【００５０】
ステップＳ４０５において、画像処理回路２０はシステム制御回路５０からの指示に従って、ステップＳ４０３でメモリ３０に格納された画像データを読み出し、この画像データに基づいて色補正のための制御値、すなわちホワイトバランス制御値（ＷＢ制御値）を取得する。このとき得られたＷＢ制御値は、動画用のＷＢ制御値としてメモリ３０に格納される。ステップＳ４０６ではステップＳ４０３でメモリ３０に格納された画像データに対して、ステップＳ４０５で取得され、メモリ３０に格納されたＷＢ制御値による色補正（ホワイトバランス処理）等の、所謂現像処理を施す。ステップＳ４０７では、ステップＳ４０６で現像された画像を用いて画像表示部２８によるスルー画像表示を行う。ステップＳ４０８では、動画撮影によって得られた画像を、撮影後も再生可能な状態にする動作として、メモリ３０に保存された画像データをＪＰＥＧなどの所定の圧縮処理を行い、処理後の画像データをメモリ３０内に保存する（記録処理）。そして、メモリ３０に保存された圧縮画像データを動画ファイルとして記録媒体２００へ書き込み、ステップＳ４０９に進む。
【００５１】
静止画記録のためのシャッターボタンの半押し状態（シャッタースイッチ６２（ＳＷ１）の信号のＯＮ状態）が検出されるまで、上述のステップＳ４０１〜Ｓ４０８による動画撮影処理が繰り返される。ステップＳ４０９においてシャッタースイッチ６２（ＳＷ１）の信号のＯＮが検出されると、動画撮影中の静止画撮影を開始するべく処理はステップＳ４１０に進む。
【００５２】
ステップＳ４１０では、動画記録中の静止画撮影の処理を行う。動画中静止画撮影処理Ｓ４０９の詳細は図５のフローチャートにより後述する。続いてステップＳ４１１では、ステップＳ４１０で実行された静止画撮影のレビュー画像の表示を行う。すなわち、画像表示部２８に静止画撮影で記録された画像（の縮小画像）が表示される。ステップＳ４１１でレビュー画像を所定の時間だけ表示した後、処理はステップＳ４１２に進む。ステップＳ４１２では、動画撮影に復帰するためのホワイトバランスの処理（動画復帰用ＷＢ処理）が実行される。この動画復帰用ＷＢ処理の詳細は図６を用いて後述する。
【００５３】
図５は、ステップＳ４１０における動画中静止画撮影処理を示すフローチャートである。まず、シャッターボタンの半押し状態が解除された場合には本処理を終了して通常の動画撮影に復帰させる。そのため、ステップＳ５０１ではシャッタースイッチ６２（ＳＷ１）がＯＮか否かを判定し、ＯＦＦならば動画撮影を継続して行うための処理を行うべく本処理を終了し、処理をステップＳ４０１へ戻す。一方、シャッタースイッチ６２（ＳＷ１）がＯＮならば、ステップＳ５０２に進む。
【００５４】
ステップＳ５０２、Ｓ５０３では、図３のステップＳ３０５、ステップＳ３０６と同様にＡＦ処理とＡＥ処理を実行し、ロックする。そして、ステップＳ５０４においてＷＢ処理を行ない、ステップＳ５０５でスルー画像表示（ＥＶＦ表示）を行い、ステップＳ５０６で動画記録処理を行なう。これらの処理は図４のステップＳ４０５〜Ｓ４０８の処理と同様である。すなわち、シャッタースイッチ６２（ＳＷ１）がＯＮになり、シャッタースイッチ６４（ＳＷ２）がＯＮするまでの間は、静止画撮影のための準備（ＡＦ，ＡＥのロック）が行われるとともに動画撮影が継続して行われる。一方、シャッタースイッチ６４（ＳＷ２）が押されたならば処理はステップＳ５０７からステップＳ５０８に進み、静止画撮影処理を実行する。
【００５５】
まず、ステップＳ５０８において、静止画撮影の一連の撮影動作を行う。すなわち、撮像素子１４が静止画撮影用の駆動形態（撮像素子から非加算で信号を読み出す（非加算読み出し））で駆動され、撮像素子１４からＡ／Ｄ変換機１６を通して読み出された信号処理前の未処理画像データ（静止画像生（ＲＡＷ）データ）がメモリ３０に保存される。次に、ステップＳ５０９において、画像処理回路２０は、ステップＳ５０８で格納された静止画生データをメモリ３０から読み出し、該データに基づいてＷＢ制御値を算出する。そして、このＷＢ制御値をメモリ３０に格納する。
【００５６】
続いて、ステップＳ５１０では、ステップＳ５０５でメモリ３０に格納された静止画生データに縮小処理を施し、当該静止画撮影によって欠落した動画フレームの代替フレームとして利用するための縮小画像（代替フレームの生データ）を得る。次にステップＳ５１１において、ステップＳ５０８でメモリ３０に格納された静止画生データに対して、ステップＳ５０９で決定された静止画用のＷＢ制御値を用いた色補正（ホワイトバランス）を含む現像処理を行う。そして、現像処理で得られた画像データにＪＰＥＧなどの所定の圧縮処理を施し、得られた圧縮画像データを静止画ファイルとしてメモリ３０に保存する。ステップＳ５１２では、ステップＳ５１０で得られた縮小画像に対して、ステップＳ５０９で決定されたホワイトバランス制御値を用いた色補正（ホワイトバランス）を含む現像処理を施す。そして、現像処理で得られた画像データに対してＪＰＥＧ等で圧縮処理を施し、欠落フレームに対する代替フレームとしてステップＳ４０７で作成中の動画ファイルに追加する。以上で、動画撮影中の静止画撮影を終了する。
【００５７】
なお、上記処理では、静止画生データから縮小画像を生成したが、現像後の静止画データを用いて縮小画像を生成するようにしてもよい。
【００５８】
図６は図４のステップＳ４１１に示した動画復帰用のホワイトバランス処理を示すフローチャートである。
【００５９】
ステップＳ６０１では、ステップＳ５０６で静止画生データから取得されたホワイトバランス制御値をメモリ３０から読み出し、これを静止画用ホワイトバランス制御値としてメモリ３０に格納する。続いてステップＳ６０２では、ステップＳ６０１でメモリ３０に格納した静止画用ホワイトバランス制御値を動画用ホワイトバランス制御値へ変換し、得られた動画用ホワイトバランス制御値をメモリ３０に格納する。変換方法については図８を用いて後述する。ステップＳ６０３ではステップＳ６０２で算出した動画用ホワイトバランス制御値を画像処理回路２０へ予め設定して、動画撮影復帰用のホワイトバランス処理を終了する。
【００６０】
図７は、動画中の静止画撮影における時間方向のシーケンスを図示したタイミングチャートである。動画撮影が継続している状態において、シャッタースイッチ６４（ＳＷ２）がＯＮすると、静止画の撮影をすると共に、静止画像を縮小した画像（ステップＳ５１２）を動画の代替フレームとして用いる。静止画撮影期間の長さに応じて、複数枚の代替フレームを使用する。動画中の静止画撮影が完了した後は動画の撮影を再開する。なお、ＳＷ２信号の入力直後に１フレーム分の黒画像が挿入されているが、これはなくてもかまわない。
【００６１】
図８は、動画用ホワイトバランス制御値と静止画用のホワイトバランス制御値の相互変換を行う方法の一例を示した図である。予め撮像素子の駆動毎（静止画撮影の駆動と動画撮影の駆動）の分光感度（ＲＧＢ各色に対して）を計測し、ＸＹ色度図で表現されたＣｘ、Ｃｙの座標上において両者の差を求めておく。図８のDIFF_CXとDIFF_CYが駆動形態に起因した分光感度の差を表している。そして、動画用のホワイトバランス制御値が図示したMovCx、MovCyで表現されるとき、撮像素子の駆動に応じてDIFF_Cx、DIFF_CY分だけ補正することで、静止画用のホワイトバランス制御値StillCx、StillCyを得ることができる。
【００６２】
ここではＸＹ色度図で表現した分光感度補正について説明したが、ＲＧＢの各色に対するカラーゲインに所定の係数を掛けることで補正するなど、他の補正手段であっても構わない。また、ここでは動画用ホワイトバランス制御値と静止画用ホワイトバランス制御値の変換方法について述べたが、動画撮影も静止画撮影も行われていない間の電子ビューファインダーへの表示のためのＷＢ制御値（ＥＶＦ用のＷＢ制御値）へ変換する際も同様の方法を用いて変換を行う。この点については第２実施形態で説明する。
【００６３】
図９は、動画撮影中に被写体光源へＷＢが追従する様子を示した図である。点線で示されたグラフが動画撮影中におけるＷＢの光源の変化に対する追従の軌跡である。図示した光源１に対して最適な色温度がＣ１であるとき、時間Ｔ１において光源１から光源２へ切り替わった際の時間方向の動きを示している。
【００６４】
時間Ｔ１で光源１から光源２への切り替わりを検出すると、時間Ｔmoveだけ要して光源２へ追従を完了する。光源１から光源２へ追従するべくＷＢ制御値をいきなり切り替えると、画像の色が突然変化して不自然となる、光源１と光源２の間の切り換えが頻発した際に画像がちらついてしまうという不具合が生じる。そのため、時間Ｔmoveをかけて徐々にＷＢ制御値が変化するようにしている。光源２への追従が完了したときの色温度はＣ３である。以上のように、光源の切り替わりを検出してから時間Ｔmoveをかけて追従が完了する。
【００６５】
動画撮影においては上述のような制御を行うので、光源追従の途中、例えば図９に示した時間Ｔ２で静止画が撮影される場合がある。このとき、追従途中の色温度はＣ２である。なお、シャッターボタンの半押しの状態、すなわちシャッタースイッチ６２（ＳＷ１）がＯＮでありシャッタースイッチ６４（ＳＷ２）がＯＦＦの状態では、動画撮影が継続するため、光源追従が継続している。
【００６６】
また、図９の実線で示されたグラフは、図４のステップＳ４１２と図６で説明した方法を用いた場合のＷＢの追従の様子を示している。被写体光源の変化を時間Ｔ１において検出し追従を開始する様子は同様である。しかし、時間Ｔ２において静止画撮影が行われると、図５のステップＳ５０９で説明したように静止画像生データからＷＢ処理を行うことで、被写体光源へ追従することができる。続いて、図６で説明した処理（動画復帰用ＷＢ処理）を行うことで、時間Ｔ３で動画撮影に復帰したあとも被写体に追従した色温度Ｃ３を保持することが可能となる。すなわち、以降の動画撮影においては、静止画像生データから得られたＷＢ制御値に相当する動画用のＷＢ制御値で動画撮影が再開され、光源変化が検出されるまでこのＷＢ制御値が用いられることになる。
【００６７】
これに対して、一般的な撮像装置では、静止画から動画撮影のためのＷＢ制御値を生成しないので、動画撮影に復帰した際の動画撮影の駆動形態に対応したＷＢ制御値として静止画撮影の直前のＷＢ制御値（図９のＴ２の時点のＷＢ制御値）を利用することになる。このため、静止画から派生した動画用の代替フレームの色再現性と動画復帰時の色再現性がずれ、動画が不自然になってしまう。本実施形態によれば、静止画撮影のＷＢ制御値に相当する動画撮影のＷＢ制御値が得られるので、そのような不自然さを解消できる。
【００６８】
上記第１実施形態によれば、静止画撮影で撮影された静止画に基づいてレビュー表示が行われてから動画撮影に復帰している。このため、動画撮影中の静止画撮影を実行した後の動画撮像における色の再現性は、静止画撮影のためのシャッターボタン半押し操作開始時（シャッタースイッチ６２（ＳＷ１）ＯＮ時）の色再現性よりも、レビュー表示の画像の色再現性に近くなる。
【００６９】
＜第２実施形態＞
第１実施形態では動画撮影中の静止画撮影が実行された場合に、静止画撮影で算出されたＷＢ制御値から動画撮影用のＷＢ制御値を派生し、以降の動画撮影にこれを用いる構成を説明した。第２実施形態では、静止画撮影前に、静止画撮影する被写体の確認のために動画像を電子ビューファインダに表示する動作として、静止画撮影時における電子ビューファインダ（ＥＶＦ）への画像表示のためのＷＢ制御値の設定に本発明を適用した場合を、図１０〜図１２を参照して説明する。
【００７０】
図１０は、撮影モードにおいて、動画撮影が行われていない間に静止画を撮影する際の処理を説明したフローチャートである。
【００７１】
ステップＳ１００１において、モードダイアル６０の状態をチェックし、撮影モードから変更されていたら図２のステップＳ２０１に戻る。撮影モードが維持されていれば、ステップＳ１００１からステップＳ１００２へ進み、シャッターボタンが半押し状態か否か、すなわちシャッタースイッチ６２（ＳＷ１）がＯＮしたかどうかを判定する。シャッタースイッチ６２（ＳＷ１）がＯＮでなければステップＳ１００３へ進み、スルー画像表示を継続する。すなわち、ＥＶＦ用のＷＢ制御値を算出し、このＷＢ制御値を用いて画像表示部２８上へのスルー画像表示（ＥＶＦ表示）を行う。そして、ステップＳ１００５において、画像処理回路２０が撮像素子１４から得られた信号に対して所定の測光演算を行いその演算結果をメモリ３０に格納する。システム制御回路５０はこの演算結果を元に露光制御部４０を用いてスルー画像のための撮影に対するＡＥ処理を行う。その後、ステップＳ１００１に戻る。
【００７２】
シャッタースイッチ６２（ＳＷ１）がＯＮになったならば、ステップＳ１００２からステップＳ１００６へ進み、静止画撮影処理を行なう。図１２は、ステップＳ１００６における静止画撮影処理を示すフローチャートである。まず、シャッタースイッチ６２（ＳＷ１）がＯＦＦになった場合は本処理を終了して静止画撮影待機状態に復帰させる。そのため、ステップＳ１２０１ではシャッタースイッチ６２（ＳＷ１）がＯＮか否かを判定し、ＯＦＦならば静止画撮影待機状態へ戻るべくステップＳ１００１へ処理を戻す。一方、シャッタースイッチ６２（ＳＷ１）がＯＮならば（シャッターボタンの半押し状態が継続されていれば）、ステップＳ１２０２に進む。
【００７３】
ステップＳ１２０２では静止画撮影用のＡＦ処理を、ステップＳ１２０３では静止画撮影用のＡＥ処理を実行し、ロックする。すなわち、画像処理回路２０が撮像素子１４から得られた信号に対して所定の測距演算を行いその演算結果をメモリ３０に格納する。システム制御回路５０はこの測距演算結果を元に測距制御部４４を用いてＡＦ処理を行い、撮影レンズ１０の焦点を被写体に合わせ、そのＡＦ状態を固定する。また、ＡＥ処理では、画像処理回路２０が撮像素子１４から得られた信号に対して測光演算を行い、測光結果をメモリ３０に格納する。システム制御回路５０はこの測光演算結果を元に測光制御部４０を用いて露出（シャッター１２の絞り）を調整し、固定する。
【００７４】
ステップＳ１２０４では、ＥＶＦ表示のための撮像素子１４の駆動により得られた画像データに基づいてＥＶＦ表示のためのＷＢ制御値の算出を行う。このＷＢ制御値の算出はシャッタースイッチ６２（ＳＷ１）がＯＮしたときに１回だけ実行され、ＷＢ制御値もロックされる。よって、シャッターボタンの半押し状態では、シャッタースイッチ６２（ＳＷ１）がＯＮした時点のＷＢ制御値を用いてＷＢ処理が行なわれ、ステップＳ１２０５でスルー画像表示（ＥＶＦ表示)が行われる。
【００７５】
シャッターボタンが完全に押し込まれるとシャッタースイッチ６４（ＳＷ２）がＯＮする。シャッタースイッチ６４（ＳＷ２）がＯＮしたならば処理はステップＳ１２０６からステップＳ１２０７に進み、静止画撮影処理を実行する。まず、ステップＳ１２０７において、静止画撮影のための露光処理を行う。この露光処理において、撮像素子１４からＡ／Ｄ変換機１６を通して読み出された信号処理前の未処理画像データ（静止画像生（ＲＡＷ）データ）がメモリ３０に保存される。次に、ステップＳ１２０８において、画像処理回路２０は、ステップＳ５０８で格納された静止画生データをメモリ３０から読み出し、該データに基づいてＷＢ制御値を算出する。そして、このＷＢ制御値をメモリ３０に格納する。
【００７６】
そして、ステップＳ１２０９において、ステップＳ１２０７でメモリ３０に格納された静止画生データに対して、ステップＳ１２０８で算出された静止画用ＷＢ制御値を用いた色補正（ホワイトバランス）を含む現像処理を行う。そして、現像処理で得られた画像データにＪＰＥＧなどの所定の圧縮処理を施し、得られた圧縮画像データを静止画ファイルとしてメモリ３０に保存する。
【００７７】
以上のようにして静止画撮影処理（ステップＳ１００６）を終了すると、ステップＳ１００７へ進み、ステップＳ１００６で撮影した静止画像のレビュー表示を所定の時間行い、ステップＳ１００８に進む。ステップＳ１００８では、ＥＶＦに復帰するためのホワイトバランスの処理が実行される。ＥＶＦ復帰用ＷＢ処理（Ｓ１００８）の詳細を図１１のフローチャートに示す。
【００７８】
ステップＳ１１０１では、ステップＳ５０６で静止画生データから得られたホワイトバランス制御値をメモリ３０から読み出し、これを静止画用ホワイトバランス制御値としてメモリ３０に格納する。続いてステップＳ１１０２では、ステップＳ１１０１でメモリ３０に格納した静止画用ホワイトバランス制御値をＥＶＦ用ホワイトバランス制御値へ変換し、ＥＶＦ用ホワイトバランス制御値としてメモリ３０に格納する。変換方法については図８により説明したとおりである。ステップＳ１１０３では、ステップＳ１１０２で算出したＥＶＦ用ホワイトバランス制御値を画像処理回路２０へ設定し、以上でＥＶＦ復帰用のホワイトバランス処理を終了する。
【００７９】
図１３は静止画撮影の前後において被写体光源へＷＢが追従する様子を示したものである。図９と同様に、静止画撮影時のホワイトバランス制御値をＥＶＦ用ＷＢ制御値へ変換することで、レビュー画像表示からＥＶＦへ復帰した場合においても、色温度Ｃ３を保持することが可能となっている。ＥＶＦ用のＷＢ制御値においても、光源の変化が検出された場合にＴmoveをかけて高原の追従が完了するように制御される。図９との差異は、時間Ｔ２においてシャッタースイッチ６２（ＳＷ１）がＯＮになった時点でホワイトバランス制御値がその時点の値に固定され（Ｓ１２０４）、時間Ｔ３における静止画撮影が行われることで、被写体光源への追従が完了する点である。
【００８０】
これに対して、一般的な撮像装置では、静止画からＥＶＦ表示のためのＷＢ制御値を生成しないので、レビュー表示からＥＶＦ表示に復帰した際のＥＶＦ表示のためのＷＢ制御値として静止画撮影の直前のＷＢ制御値（図１３のＴ２の時点のＷＢ制御値）を利用することになる。このため、静止画撮影に続くレビュー表示の色再現性とＥＶＦ表示復帰時の色再現性がずれ、表示が不自然になってしまう。本実施形態によれば、静止画撮影のＷＢ制御値に相当するＥＶＦ用のＷＢ制御値が得られるので、そのような不自然さを解消できる。
【００８１】
また、上記実施形態によれば、静止画撮影で撮影された静止画に基づいてレビュー表示が行われてから待機状態（ＥＶＦ表示状態）に復帰している。このため、静止画撮影を実行した後のＥＶＦ表示における色の再現性は、静止画撮影のためのシャッターボタン半押し操作開始時（シャッタースイッチ６２（ＳＷ１）ＯＮ時）の色再現性よりも、レビュー表示の画像の色再現性に近くなる。
【００８２】
なお、上記各実施形態において、撮像素子１４からの静止画撮影時の読み出し、動画撮影時及びＥＶＦ表示のための読み出しのそれぞれの駆動形態の切り替えは、システム制御回路５０の制御に基づき、タイミング発生回路からの信号により、撮像素子１４の基板電圧を切り替えることでなされる。
【００８３】
以上説明したように、上記各実施形態によれば、静止画撮影後の静止画撮影の待機状態（動画撮影或いは静止画撮影前のＥＶＦ表示）への復帰において、静止画撮影時の信号処理によって得られたＷＢ制御値が利用される。すなわち、静止画撮影時のＷＢ制御値が、静止画撮影の待機状態における撮像素子の駆動形態に合わせたＷＢ制御値に変換され、設定される。このため、静止画撮影のレビュー画像と静止画撮影待機状態の色の連続性を保ち、静止画撮影待機状態を被写体光源へ追従したところから開始することが可能となる。例えば、第１実施形態では、動画撮影モードにおける静止画撮影において、静止画撮影によって欠落した動画の代替フレームとして静止画の縮小画像を利用する際に、静止画撮影完了後の動画撮影の再開時と代替フレーム画像との間で色の連続性を損なうことがない。また、被写体の光源色を補正した状態で動画撮影を再開することが可能となる。第２実施形態では、静止画撮影モードでは静止画撮影のレビュー画像と電子ファインダー復帰の色の連続性を損なうことがなく、また、被写体の光源色を補正した状態でＥＶＦに復帰することが可能となる。
【００８４】
なお、上記の各実施形態では、静止画撮影時と動画像撮像中（実施形態１における動画撮影或いは実施形態２における静止画撮影前のＥＶＦ表示）とで基板電圧を切り替えるものを説明したが、それに限らず、静止画撮影時と動画像撮像中とで同じ基板電圧を用いるようにしても良い。その場合には、静止画撮影で得られる画像から得られるホワイトバランス制御値に対して、撮像素子の分光感度特性に応じたホワイトバランス制御値に変換することなく、その後の動画像撮像で得られる画像に対して、変換されていないホワイトバランス制御値で補正を行うことが可能となる。
【００８５】
また、上記の各実施形態では、静止画撮影後の動画像撮像で得られる画像は、静止画撮影で得られる画像から得られるホワイトバランス制御値を用いているが、それに限るものではない。つまり、静止画撮影後の動画像撮像により得られる画像（例えば、図７の第４動画フレーム）の色再現性が、ＳＷ１〜ＳＷ２の間に得られた画像（例えば、図７の第３動画フレーム）の色再現性よりも、静止画撮影により得られる画像（例えば、図７の静止画像若しくは縮小静止画）の色再現性に近くなるように制御するものであれば良い。
【００８６】
具体的には、ＳＷ１〜ＳＷ２の間に得られた画像（例えば、図７の第３動画フレーム）から光源に静止画撮影時と同じ方法で光源に直ぐに追従するホワイトバランス制御値を算出し（ただし、第３動画フレームは、第１実施形態で説明したようにホワイトバランス制御する）、そのホワイトバランス制御値によって、静止画撮影後の動画像撮像により得られる画像（例えば、図７の第４動画フレーム）を補正するようにしても良い。また、上記各々の実施形態に於いては、動画像撮像中の動作と、静止画撮影の動作との場合について説明したが、これに限定されるものでは無い。
【００８７】
例えば、動画像撮像、静止画撮影に関係なく、動画撮像素子に印加する基板電圧を第１の基板電圧にして駆動する動作（撮像素子が第１の分光感度特性になる）と、撮像素子に印加する基板電圧を第２の基板電圧にして駆動する動作（撮像素子が第２の分光感度特性になる）との場合であっても良い。
【００８８】
（本発明の他の実施の形態）
本発明は複数の機器から構成されるシステムに適用しても１つの機器からなる装置に適用しても良い。
【００８９】
また、上述した実施の形態の機能を実現するように各種のデバイスを動作させるように、上記各種デバイスと接続された装置あるいはシステム内のコンピュータに対し、記憶媒体から、またはインターネット等の伝送媒体を介して上記実施の形態の機能を実現するためのソフトウェアのプログラムコードを供給し、そのシステムあるいは装置のコンピュータ（ＣＰＵあるいはＭＰＵ）に格納されたプログラムに従って上記各種デバイスを動作させることによって実施したものも、本発明の範疇に含まれる。
【００９０】
また、この場合、上記ソフトウェアのプログラムコード自体が上述した実施の形態の機能を実現することになり、そのプログラムコード自体、およびそのプログラムコードをコンピュータに供給するための手段、例えばかかるプログラムコードを格納した記憶媒体は本発明を構成する。かかるプログラムコードを記憶する記憶媒体としては、例えばフレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、磁気テープ、不揮発性のメモリカード、ＲＯＭ等を用いることができる。
【００９１】
また、コンピュータが供給されたプログラムコードを実行することにより、上述の実施の形態で説明した機能が実現されるだけでなく、そのプログラムコードがコンピュータにおいて稼働しているＯＳ（オペレーティングシステム）あるいは他のアプリケーションソフト等と共同して上述の実施の形態で示した機能が実現される場合にもかかるプログラムコードは本発明の実施の形態に含まれることは言うまでもない。
【００９２】
さらに、供給されたプログラムコードがコンピュータの機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに格納された後、そのプログラムコードの指示に基づいてその機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行ない、その処理によって上述した実施の形態の機能が実現される場合にも本発明に含まれる。
【図面の簡単な説明】
【００９３】
【図１】第１実施形態における撮像装置のブロック図である。
【図２】第１実施形態における撮像装置の主ルーチンの動作処理を示すフローチャートである。
【図３】第１実施形態における撮像装置の動画記録開始の動作処理を示すフローチャートである。
【図４】第１実施形態における撮像装置の動画撮影の動作処理を示すフローチャートである。
【図５】第１実施形態における撮像装置の動画撮影中の静止画撮影の動作処理を示すフローチャートである。
【図６】第１実施形態における撮像装置の動画撮影に復帰する際のホワイトバランスの動作処理を示すフローチャートである。
【図７】第１実施形態における撮像装置の動画撮影中の静止画撮影のタイミングチャートである。
【図８】第１実施形態における撮像装置の動画撮影中の静止画撮影のホワイトバランス処理において分光感度に応じた補正変換の一例を示す図である。
【図９】第１実施形態における撮像装置の動画撮影中の静止画撮影のホワイトバランス処理の時間方向の変化を示した図である。
【図１０】第２実施形態における撮像装置の静止画撮影の動作処理を示すフローチャートである。
【図１１】第２実施形態における撮像装置のＥＶＦに復帰する際のホワイトバランスの動作処理を示すフローチャートである。
【図１２】第２実施形態における撮像装置の静止画撮影における動作処理を示すフローチャートである。
【図１３】第２実施形態における撮像装置の静止画撮影の前後のホワイトバランス処理の時間方向の変化を示した図である。
【図１】
2006304001.tif 000003
【図２】
2006304001.tif 000004
【図３】
2006304001.tif 000005
【図４】
2006304001.tif 000006
【図５】
2006304001.tif 000007
【図６】
2006304001.tif 000008
【図７】
2006304001.tif 000009
【図８】
2006304001.tif 000010
【図９】
2006304001.tif 000011
【図１０】
2006304001.tif 000012
【図１１】
2006304001.tif 000013
【図１２】
2006304001.tif 000014
【図１３】
2006304001.tif 000015