(57)【要約】【課題】ユーザが意図するカラーフィルタ効果を実現することができる撮像装置及び撮像方法等を提供する。【解決手段】撮影により光信号を電気信号の画像信号に変換するイメージセンサ部２０３と、イメージセンサ部２０３から出力された画像信号に含まれる色信号をホワイトバランスのゲインに応じて調節するホワイトバランス制御部１０６を含み、画像信号の処理を行うカメラ信号処理部１０５と、撮影が行われたシーンの色温度を推定する色温度推定部１１５と、色温度推定部１１５が推定した色温度とホワイトバランス制御部１０６で制御されているホワイトバランスの状態から推定される色温度とを比較して差異の有無を判定するホワイトバランス設定判定部１１６と、が設けられている。カメラ信号処理部１０５は、ホワイトバランス設定判定部１１６による判定の結果に基づいて画像信号の処理の内容を変更する。【選択図】図１
2014220701.tif 000002
【特許請求の範囲】
【請求項１】
撮影により光信号を電気信号の画像信号に変換する撮像素子と、
前記撮像素子から出力された画像信号に含まれる色信号をホワイトバランスのゲインに応じて調節するホワイトバランス制御手段を含み、前記画像信号の処理を行う信号処理手段と、
前記撮影が行われたシーンの色温度を推定する色温度推定手段と、
前記色温度推定手段が推定した色温度と前記ホワイトバランス制御手段で制御されているホワイトバランスの状態から推定される色温度とを比較して差異の有無を判定するホワイトバランス設定判定手段と、
を有し、
前記信号処理手段は、前記ホワイトバランス設定判定手段による判定の結果に基づいて前記画像信号の処理の内容を変更することを特徴とする撮像装置。
【請求項２】
前記信号処理手段は、前記ホワイトバランス設定判定手段が、前記差異がないと判定した場合には、前記差異があると判定した場合と比較して広い制御範囲で前記画像信号の処理を行うことを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記色温度推定手段は、前記撮影の際のフォーカス情報及び明るさ情報から前記色温度を推定することを特徴とする請求項１又は２に記載の撮像装置。
【請求項４】
前記色温度推定手段は、前記フォーカス情報が被写体までの距離が大きいことを示している場合ほど前記色温度を高く推定し、前記明るさ情報が被写体が明るいことを示している場合ほど前記色温度を高く推定することを特徴とする請求項３に記載の撮像装置。
【請求項５】
前記信号処理手段は、前記画像信号の明るさ制御、ホワイトバランス制御、カラーバランス制御及びノイズリダクション制御からなる群から選択された少なくとも一種の内容を変更することを特徴とする請求項１乃至４のいずれか１項に記載の撮像装置。
【請求項６】
前記ホワイトバランス制御は、オートホワイトバランスにおける白抽出範囲及びゲイン制御範囲の制御を含むことを特徴とする請求項５に記載の撮像装置。
【請求項７】
ノイズリダクション制御は、人肌にかけるノイズリダクション処理の対象領域となる色相及び彩度の制御を含むことを特徴とする請求項５又は６に記載の撮像装置。
【請求項８】
前記信号処理手段は、前記色温度推定手段による推定の信頼度に応じて、前記画像信号の処理の内容を変更する範囲を調整する請求項１乃至７のいずれか１項に記載の撮像装置。
【請求項９】
前記色温度推定手段による推定の信頼度は、前記撮影の際のフォーカス情報及び明るさ情報から重み付けされて決定されることを特徴とする請求項８に記載の撮像装置。
【請求項１０】
前記信号処理手段は、前記色温度推定手段による推定の信頼度が高いほど、狭い制御範囲で前記画像信号の処理を行うことを特徴とする請求項８又は９に記載の撮像装置。
【請求項１１】
前記信号処理手段は、前記ホワイトバランスの状態から推定される色温度の信頼度に応じて、前記画像信号の処理の内容を変更する範囲を調整することを特徴とする請求項１乃至７のいずれか１項に記載の撮像装置。
【請求項１２】
前記ホワイトバランスの状態から推定される色温度の信頼度は、前記ホワイトバランスのゲインから重み付けされて決定されることを特徴とする請求項１１に記載の撮像装置。
【請求項１３】
前記信号処理手段は、前記ホワイトバランスの状態から推定される色温度の信頼度が高いほど、狭い制御範囲で前記画像信号の処理を行うことを特徴とする請求項８又は９に記載の撮像装置。
【請求項１４】
前記信号処理手段は、スルー時と記録時とで可変の時定数を変更することを特徴とする請求項１乃至１３のいずれか１項に記載の撮像装置。
【請求項１５】
撮影により光信号を電気信号の画像信号に変換する撮像ステップと、
前記撮像ステップにおいて取得した画像信号に含まれる色信号をホワイトバランスのゲインに応じて調節するホワイトバランス制御ステップを含み、前記画像信号の処理を行う信号処理ステップと、
前記撮影が行われたシーンの色温度を推定する色温度推定ステップと、
前記色温度推定ステップにおいて推定した色温度と前記ホワイトバランス制御ステップにおいて制御されているホワイトバランスの状態から推定される色温度とを比較して差異の有無を判定するホワイトバランス設定判定ステップと、
を有し、
前記信号処理ステップは、前記ホワイトバランス設定判定ステップにおける判定の結果に基づいて前記画像信号の処理の内容を変更するステップを有することを特徴とする撮像方法。
【請求項１６】
コンピュータに、
撮影により光信号を電気信号の画像信号に変換する撮像ステップと、
前記撮像ステップにおいて取得した画像信号に含まれる色信号をホワイトバランスのゲインに応じて調節するホワイトバランス制御ステップを含み、前記画像信号の処理を行う信号処理ステップと、
前記撮影が行われたシーンの色温度を推定する色温度推定ステップと、
前記色温度推定ステップにおいて推定した色温度と前記ホワイトバランス制御ステップにおいて制御されているホワイトバランスの状態から推定される色温度とを比較して差異の有無を判定するホワイトバランス設定判定ステップと、
を実行させるプログラムであって、
前記信号処理ステップは、前記ホワイトバランス設定判定ステップにおける判定の結果に基づいて前記画像信号の処理の内容を変更するステップを有することを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、デジタルビデオカメラ等の撮像装置及び撮像方法等に関する。
【背景技術】
【０００２】
デジタルビデオカメラ等の撮像装置の使用の際に、ユーザが、カラーフィルタ効果を得るためにホワイトバランス機能を使用することがある。例えば、屋外撮影時に「プリセットホワイトバランス電球」を使用することで、あえて映像を寒色系にすることがある。また、低色温度光源下の撮影時に白セットホワイトバランスで青い被写体を取り込み、あえてホワイトバランスを高色温度設定状態にして、映像を暖色系にすることもある。
【０００３】
一方、デジタルビデオカメラ等の撮像装置では、ホワイトバランスの状態から光源推定を行い、推定した光源に応じた映像信号処理を施すことがある。例えば、白セットホワイトバランス使用時にホワイトバランスのゲイン量から光源推定を行い、推定された光源に合わせて色味補正を施すことがある。また、プリセットホワイトバランスでは想定光源が決まっているため、想定光源に合わせた映像信号処理を施すことがある。例えば、「プリセットホワイトバランス電球」の選択時は、想定光源であるハロゲン光下の色味補正を施しておくことがある。
【０００４】
また、プリセットホワイトバランスのゲイン量が所定の固定値である場合はセンサ及びローパスフィルタ（ＬＰＦ）等の光学部品のばらつきにより個体差が生じることがある。このため、自動ホワイトバランス制御（オート制御）が行われることもある。オート制御によれば、想定光源に応じた白検出範囲及び制御範囲を設けることで、想定光源下でのホワイトバランス性能を向上させることができる。
【０００５】
ホワイトバランスに関し、撮影シーンの推定を行い、推定結果に応じてオートホワイトバランスの制御を変更し、より正しく白を引き込むようカメラ制御を変更する技術も提案されている（特許文献１）。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００８−３０１２７９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、従来の技術では、ユーザがホワイトバランスを使用してカラーフィルタ効果を得ようとした際に、推定光源に応じて設定されている制御によって、ユーザの意図した色味が得られないことがある。また、オート制御によってカラーフィルタ効果が一定にならないこともある。このように、従来のオート制御では、ユーザの意図したカラーフィルタ効果が得られないことがある。特許文献１に記載された方法でも同様である。
【０００８】
本発明は、ユーザが意図するカラーフィルタ効果を実現することができる撮像装置及び撮像方法等を提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明に係る撮像装置は、撮影により光信号を電気信号の画像信号に変換する撮像素子と、前記撮像素子から出力された画像信号に含まれる色信号をホワイトバランスのゲインに応じて調節するホワイトバランス制御手段を含み、前記画像信号の処理を行う信号処理手段と、前記撮影が行われたシーンの色温度を推定する色温度推定手段と、前記色温度推定手段が推定した色温度と前記ホワイトバランス制御手段で制御されているホワイトバランスの状態から推定される色温度とを比較して差異の有無を判定するホワイトバランス設定判定手段と、を有し、前記信号処理手段は、前記ホワイトバランス設定判定手段による判定の結果に基づいて前記画像信号の処理の内容を変更することを特徴とする。
【００１０】
本発明に係る撮像方法は、撮影により光信号を電気信号の画像信号に変換する撮像ステップと、前記撮像ステップにおいて取得した画像信号に含まれる色信号をホワイトバランスのゲインに応じて調節するホワイトバランス制御ステップを含み、前記画像信号の処理を行う信号処理ステップと、前記撮影が行われたシーンの色温度を推定する色温度推定ステップと、前記色温度推定ステップにおいて推定した色温度と前記ホワイトバランス制御ステップにおいて制御されているホワイトバランスの状態から推定される色温度とを比較して差異の有無を判定するホワイトバランス設定判定ステップと、を有し、前記信号処理ステップは、前記ホワイトバランス設定判定ステップにおける判定の結果に基づいて前記画像信号の処理の内容を変更するステップを有することを特徴とする。
【発明の効果】
【００１１】
本発明によれば、ユーザが意図するカラーフィルタ効果をより確実に実現することができる。
【図面の簡単な説明】
【００１２】
【図１】本発明の実施形態に係るデジタルビデオカメラ（撮像装置）の構成を示すブロック図である。
【図２】ホワイトバランスにおけるＲ及びＢのゲイン量の関係を示す図である。
【図３】色温度推定部による撮影場所の判定基準を示す図である。
【図４】ホワイトバランス設定判定部による色温度を推定する動作を示すフローチャートである。
【図５】ホワイトバランスのゲイン量と光源との関係を示す図である。
【図６】プリセットホワイトバランス電球のオート制御時のゲイン制御範囲を示す図である。
【図７】屋内外判定の信頼度を示す図である。
【図８】信頼度に応じたホワイトバランスのゲイン量の制御範囲を示す図である。
【図９】オート制御範囲の時間特性を示す図である。
【発明を実施するための形態】
【００１３】
以下、本発明の実施形態について添付の図面を参照して具体的に説明する。図１は、本発明の実施形態に係るデジタルビデオカメラ（撮像装置）の構成を示すブロック図である。
【００１４】
本実施形態に係るデジタルビデオカメラには、レンズ部１０１、絞り１０２、イメージセンサ部１０３、ＣＤＳ／ＡＧＣ部１０４、カメラ信号処理部１０５、表示装置部１０９、及び記録部１１０が含まれている。このデジタルカメラには、更に、フォーカス操作部１１１、レンズ駆動部１１２、ホワイトバランスモード選択ＵＩ部１１３、システム制御部１１４、色温度推定部１１５、及びホワイトバランス設定判定部１１６が含まれている。カメラ信号処理部１０５には、ホワイトバランス制御部１０６、検波部１０７、及び映像信号処理部１０８が含まれている。
【００１５】
レンズ部１０１にはフォーカスレンズ群も具備されており、レンズ部１０１は被写体からの入射光を結像させる。絞り１０２はイメージセンサ部１０３に到達する光量を調整する機能を備える。イメージセンサ部１０３にはＣＣＤ（Charged Coupled Device）素子又はＣＭＯＳ（Complementary Metal Oxide Semiconductor）素子等が用いられている。イメージセンサ部１０３は結像した光学像（光信号）を電気信号の画像信号に変換する。ＣＤＳ／ＡＧＣ部１０４はアナログ画像信号のノイズを相関二重サンプリング（Correlated Double Sampling）により削減し、自動利得制御（Auto Gain Controller）によりその信号レベルを自動制御する。ホワイトバランス制御部１０６は、本実施形態では、Ｒゲイン及びＢゲインを制御してホワイトバランスのゲインを変更する。つまり、ホワイトバランス制御部１０６は、イメージセンサ部１０３の撮像素子から出力された画像信号に含まれる色信号をホワイトバランスのゲインに応じて調節する。ホワイトバランス制御部１０６は、後述するホワイトバランス制御のためにＲ（レッド）／Ｇ（グリーン）／Ｂ（ブルー）の各色独立したゲインを掛けることができる。検波部１０７はホワイトバランスのフィードバック制御のために画像を検波する。映像信号処理部１０８はガンマ処理、ノイズリダクション処理（ＮＲ処理）及び／又はエッジ強調等を実施する。このように、カメラ信号処理部１０５は映像信号にホワイトバランス処理、ガンマ処理、ノイズリダクション処理（ＮＲ処理）、色処理等の周知のカメラ処理を行う。
【００１６】
表示装置部１０９には液晶表示パネル等が用いられており、表示装置部１０９は映像を表示する。記録部１１０は画像データを記録処理して記録媒体に画像データを記録する。フォーカス操作部１１１はユーザがフォーカスの調整を行うための機構を備えている。レンズ駆動部１１２はレンズ部１０１に含まれるフォーカスレンズ群を駆動する。ホワイトバランスモード選択ＵＩ部１１３はユーザがホワイトバランスモードを選択するためユーザインタフェース（ＵＩ）である。システム制御部１１４はデジタルビデオカメラ（撮像装置）の各部の情報を読み取り、それらの情報を基に各部の動作を制御する。
【００１７】
色温度推定部１１５はカメラ設定及び画像データ等から被写体の色温度を推定する。ホワイトバランス設定判定部１１６は色温度推定部１１５が推定した色温度とホワイトバランス状態から推定される色温度とを比較して、これらの間の差異の有無を判定する。この差異の有無の判定では、例えば、一方の色温度の範囲が他方の色温度の範囲内にあれば、有無がないとする。色温度推定部１１５及びホワイトバランス設定判定部１１６の構成並びにこれに関するホワイトバランス制御動作の詳細については後述する。
【００１８】
次に、本実施形態に係るデジタルビデオカメラの動作の概略について説明する。
【００１９】
レンズ部１０１によって結像される被写体像は、絞り１０２によって光量が調節された後、イメージセンサ部１０３にて光学像を電気信号に変換される。イメージセンサ部１０３は、電荷蓄積時間を調整可能であり、これにより電子シャッター機能を実現できる。続いてＣＤＳ／ＡＧＣ部１０４では、イメージセンサ部１０３からのアナログ画像信号のノイズを相関二重サンプリング（Correlated Double Sampling）により削減し、自動利得制御（Auto Gain Controller）によりその信号レベルを自動制御した上でカメラ信号処理部１０５に供給する。カメラ信号処理部１０５は、自動制御を含んだホワイトバランス処理、ガンマ処理、ＮＲ処理、色処理等の周知のカメラ信号処理を実行する。
【００２０】
カメラ信号処理部１０５にてカメラ信号処理の施された信号は表示装置部１０９に送られ、ユーザが画角等を確認できる。また、カメラ信号処理部１０５から出力される信号処理の施された画像データは記録部１１０に送られる。記録部１１０では、画像データを記録処理して記録媒体に画像データを記録する。記録媒体の例としては、ＳＤカード、光ディスク及びハードディスク等が挙げられる。
【００２１】
ここで、本実施形態におけるホワイトバランス制御動作の詳細について説明する。ここでは、Ｒ、Ｇ及びＢのうち、Ｇのゲインを固定し、Ｒ及びＢのゲインの制御量を変化させることとする。このため、上記のように、ホワイトバランス制御部１０６は、本実施形態では、Ｒゲイン及びＢゲインを制御してホワイトバランスのゲインを変更するのである。Ｒのゲインを固定し、Ｇ及びＢのゲインの制御量を変化させても、Ｂのゲインを固定し、Ｒ及びＧのゲインの制御量を変化させても、同様の効果を得ることができる。
【００２２】
ユーザはホワイトバランスモード選択ＵＩ部１１３により、予め設定されている複数のホワイトバランスモードの中から任意のホワイトバランスモードを選択することができる。複数のホワイトバランスモードには、例えば、プリセットホワイトバランス及び白セットホワイトバランスが含まれる。また、プリセットホワイトバランスは想定光源に応じて所定のゲイン量に制御させるモードであり、プリセットホワイトバランスには、例えば、プリセットホワイトバランス電球及びプリセットホワイトバランス日陰等が含まれる。また、プリセットホワイトバランスでは、固定のゲイン量ではなく想定光源に合わせたオート制御、いわゆるオートホワイトバランス（ＡＷＢ）制御が行われることもある。
【００２３】
ホワイトバランスモード選択ＵＩ部１１３にて選択されたホワイトバランスモードはシステム制御部１１４に送られる。システム制御部１１４は、選択された任意のホワイトバランスモードに応じて予め設定されているＲ及びＢのゲイン量に変更するようホワイトバランス制御部１０６の制御を行う。例えば、図２に示す例において、破線領域２０１はハロゲン電球及び白熱電球等の色温度が３０００Ｋ前後と比較的低い光源が想定光源である場合の制御量を示しており、Ｂのゲイン量が高く、Ｒのゲイン量が低い。一方、点線領域２０２は日陰等の色温度が１００００Ｋ前後と比較的高い光源が想定光源である場合の制御量を示しており、Ｂのゲイン量が低く、Ｒのゲイン量が高い。
【００２４】
また、オート制御が行われる場合には、検波部１０７にて画像データから白抽出範囲の色だけを抜き出すか、又は全面の平均色を取得し、白に相当する基準値と比較することによりホワイトバランスの補正データを演算する。ここで、白抽出範囲の色は、無彩色部に相当する色である。そして、演算された補正データをもとにＲＧＢの各信号又はＲ−Ｙ／Ｂ−Ｙ信号に対する補正を行うことで、自動的にホワイトバランス制御が行われる。
【００２５】
白セットホワイトバランスでは、白い紙又は布等の被写体を撮像し、画像データ中の所定の領域から色情報を抜き出し、白に相当する基準値と比較することによりホワイトバランスの補正データを演算する。演算された補正データをもとにＲＧＢの各信号又はＲ−Ｙ／Ｂ−Ｙ信号に対して補正を行うことで、ホワイトバランス制御が行われる。
【００２６】
次に、フォーカス操作について説明する。フォーカス操作時に、ユーザはフォーカス操作部１１１によりフォーカスをシステム制御部１１４に指示できる。例えば、レンズ部１０１を収容するレンズ鏡筒の外周に、ユーザが回転操作可能なフォーカスリングが装備され、このフォーカスリングをユーザが回転操作することで、フォーカス位置をレンズ駆動部１１２に指示する。このとき、電子的又は機械的な回転検知機構が、フォーカスリングの回転方向及び回転角を検出し、システム制御部１１４に通知する。このような電子的又は機械的な回転検知機構は周知である。レンズ駆動部１１２はシステム制御部１１４の制御信号に従って、フォーカスレンズ群を移動させる。
【００２７】
次に、色温度推定部１１５の動作について説明する。本実施形態では、色温度推定部１１５が、明るさ情報（ＥＶ値）及びフォーカス情報から、撮影場所が屋内外のいずれかであるかの判定を行い、この結果に基づいて色温度の推定を行う。撮影場所が屋内と判定した場合、色温度を２５００［Ｋ］〜５０００［Ｋ］と推定し、撮影場所が屋外と判定した場合、色温度を５０００［Ｋ］〜１４０００［Ｋ］と推定する。色温度推定部１１５には、システム制御部１１４を通して、フォーカス操作部１１１からフォーカス位置情報が送られる。また、色温度推定部１１５には、システム制御部１１４を通して、絞り１０２から絞り情報が送られ、イメージセンサ部１０３からシャッター情報が送られ、ＣＤＳ／ＡＧＣ部１０４からゲイン情報が送られる。このため、色温度推定部１１５はこれらの情報を用いて明るさ情報であるＥＶ値を算出することができる。ＥＶ値はその値が高いほど明るい映像であることを表わす。
【００２８】
図３は、本実施形態における色温度推定部１１５による撮影場所の判定基準を示す図である。図３に示すように、ＥＶ値及びフォーカス情報に基づいて、屋内で撮影されたと判定する領域３０１及び屋外で撮影されたと判定する領域３０２が設けられている。色温度推定部１１５には、図３に示すように、ＥＶ値が高いほど、即ち明るい映像であるほど、撮影場所が屋外であると判定しやすい傾向がある。また、フォーカスが無限遠であるほど、即ち被写体までの距離が大きいほど、撮影場所が屋外であると判定しやすい傾向もある。逆の見方をすると、色温度推定部１１５には、暗い映像であるほど、また被写体までの距離が小さいほど、撮影場所が屋内であると判定しやすい傾向がある。そして、本実施形態では、ＥＶ値及びフォーカス情報の関係に閾値が設定されており、この閾値を境にして領域３０１及び領域３０２が画定されている。色温度推定部１１５は、このようにして屋内外の判定を実施し、色温度の推定を行う。推定した色温度の結果はシステム制御部１１４を通して、ホワイトバランス設定判定部１１６へ送られる。なお、ＧＰＳ（Global Positioning System）により示される位置情報及び顔検出情報等のデジタルビデオカメラが取得し得るあらゆる情報を使って撮影シーンの色温度を推定してもよい。
【００２９】
次に、本実施形態におけるホワイトバランス設定判定部１１６の動作について説明する。ホワイトバランス設定判定部１１６には、システム制御部１１４を通して、ホワイトバランス制御部１０６から、Ｒ及びＢの各ゲイン情報が送られ、ホワイトバランスモード選択ＵＩ部１１３からホワイトバランスモードの情報が送られる。ホワイトバランス設定判定部１１６には、システム制御部１１４を通して、色温度推定部１１５にて推定された撮影シーンの色温度の推定結果も送られる。ホワイトバランス設定判定部１１６は、色温度推定部１１５により推定された色温度と、ホワイトバランスモードの情報から推定される色温度との間に差異があるか否かの判定を行う。
【００３０】
ここで、ホワイトバランスモードの情報からの色温度の推定について説明する。ホワイトバランスモードの情報からの色温度の推定は、例えばホワイトバランス設定判定部１１６自身により行われる。ここでは、ホワイトバランスモードに、プリセットホワイトバランス電球、プリセットホワイトバランス日陰、及び白セットホワイトバランスの３種が設定されているとする。図４は、ホワイトバランス設定判定部１１６による色温度を推定する動作を示すフローチャートである。図５は、ホワイトバランスのゲイン量と光源との関係を示す図である。
【００３１】
先ず、ステップＳ４０１にて、ホワイトバランス設定判定部１１６が、プリセットホワイトバランス電球（プリセットＷＢ  電球）が選択されているかを判断する。プリセットホワイトバランス電球が選択されていなければステップＳ４０２に進み、プリセットホワイトバランス電球が選択されている場合は撮影場所が屋内であると判定する。この場合、ホワイトバランス設定判定部１１６は、色温度を２５００［Ｋ］〜３５００［Ｋ］と推定する。
【００３２】
ステップＳ４０２では、ホワイトバランス設定判定部１１６が、プリセットホワイトバランス日陰（プリセットＷＢ  日陰）が選択されているかを判断する。プリセットホワイトバランス日陰が選択されていなければステップＳ４０３に進み、プリセットホワイトバランス日陰が選択されている場合は撮影場所が屋外であると判定する。この場合、ホワイトバランス設定判定部１１６は、色温度を８０００［Ｋ］〜１４０００［Ｋ］と推定する。
【００３３】
このようにプリセットホワイトバランスでは、想定光源が明確であるため選択されたホワイトバランスモードに応じて撮影シーンの推定が可能であり、色温度の推定ができる。
【００３４】
ステップＳ４０２にてプリセットホワイトバランス日陰が選択されていない場合は、ホワイトバランスモードは白セットホワイトバランスであることになる。ステップＳ４０３では、ホワイトバランス設定判定部１１６が、ホワイトバランスのゲイン量がハロゲン灯領域（領域Ａ）５０１内にあるかを判断する。領域Ａ内になければステップＳ４０４へと進み、領域Ａ内にあれば撮影場所がハロゲン灯光源下であると判断する。この場合、ホワイトバランス設定判定部１１６は、色温度を２５００［Ｋ］〜３５００［Ｋ］と推定する。
【００３５】
ステップＳ４０４では、ホワイトバランス設定判定部１１６が、ホワイトバランスのゲイン量が日陰領域（領域Ｂ）５０２内にあるかを判断する。領域Ｂ内にあれば日陰と判断する。この場合、ホワイトバランス設定判定部１１６は、色温度を８０００［Ｋ］〜１４０００［Ｋ］と推定する。
【００３６】
このように白セットホワイトバランスでは、ホワイトバランスのゲイン量に応じて、光源の色温度が推定可能である。なお、ステップＳ４０４においてホワイトバランスのゲイン量が領域Ｂ内になければ、ホワイトバランスのゲイン量からでは撮影シーンを推定できないと判断する。
【００３７】
このようにして、ホワイトバランスの状態から撮影シーンの色温度推定が行われる。なお、この色温度推定が色温度推定部１１５により行われてもよい。
【００３８】
ホワイトバランス設定判定部１１６は、色温度推定部１１５により推定された色温度とホワイトバランスの状態から推定された色温度との間に差異があるか判定する。そして、ホワイトバランス設定判定部１１６は、差異があれば、システム制御部１１４を通して、カメラ信号処理部１０５に対してカメラ信号処理を変更することを要求する。そして、カメラ信号処理部１０５は、この要求を受け取ると、この判定の結果に基づいて画像信号の処理の内容を変更する。つまり、カメラ信号処理部１０５は、画像信号の明るさ制御、ホワイトバランス制御、カラーバランス制御及びノイズリダクション制御からなる群から選択された少なくとも一種の内容を変更する。
【００３９】
次に、カメラ信号処理を変更する際のカメラ信号処理部１０５の動作について説明する。ここでは、カメラ信号処理の変更の例として、プリセットホワイトバランスを所定のゲイン量に固定しているのではなく、オート制御が行われる場合のゲイン制御範囲の変更について説明する。
【００４０】
ホワイトバランスのオート遷移は、ホワイトバランスでカラーフィルタ効果を付けたいというユーザの意思にも拘わらず、所定の色を引き込んでしまうため、カラーフィルタ効果が薄れる方向に働いてしまうことがある。また、カラーフィルタ効果は一定であることが望ましいが、オート遷移によって画像データの色味が変動し、カラーフィルタ効果が変動しているように見えてしまうこともある。図６は、プリセットホワイトバランス電球のオート制御時のゲイン制御範囲を示す図である。制御範囲６０１は、通常時（色温度推定部１１５による色温度の推定結果とホワイトバランスの状態から推定された色温度の推定結果に差異がない場合）のゲイン制御範囲である。一方、制御範囲６０２は、色温度推定部１１５による色温度の推定結果とホワイトバランスの状態から推定された色温度の推定結果に差異がある場合のゲイン制御範囲である。図６に示すように、本実施形態では、色温度推定部１１５による色温度の推定結果とホワイトバランスの状態から推定された色温度の推定結果との間に差異がある場合は、ゲイン制御範囲を狭める。この結果、オート遷移に伴う色の引き込み、及び色味の変動を軽減することができ、カラーフィルタ効果を損なわれにくくすることができる。
【００４１】
なお、カメラ信号処理の変更として、ホワイトバランス制御における白検出範囲の変更、プリセットホワイトバランス電球選択時に施しているハロゲン灯用の色味補正等の各種光源向けの色味補正の変更等を行ってもよい。また、人肌に掛けるＮＲ処理の対象領域を色相及び彩度で設定している場合、カラーフィルタ効果を掛けていることを考慮して、ＮＲ処理を施す対象領域の色相及び彩度の設定を変更してもよい。
【００４２】
更に、本実施形態において、色温度推定部１１５の推定結果の信頼度に応じて、カメラ信号処理の内容を変更する範囲を調整することが好ましい。図７は、屋内外判定の信頼度を示す図である。図７に示すように、ＥＶ値及びフォーカス情報に基づいて、屋内で撮影されたと高い信頼度をもって判定する領域７０１、及び屋内で撮影されたと低い信頼度をもって判定する領域７０２が設けられている。領域７０１及び領域７０２の総和は、図３に示す判定基準の領域３０１に相当する。同様に、ＥＶ値及びフォーカス情報に基づいて、屋外で撮影されたと高い信頼度をもって判定する領域７０４、及び屋外で撮影されたと低い信頼度をもって判定する領域７０３が設けられている。領域７０３及び領域７０４の総和は、図３に示す判定基準の領域３０２に相当する。つまり、図７において、領域７０１はＥＶ値が低く、フォーカスが至近に近い領域であり、屋内で撮影されたことの信頼度が高い領域である。領域７０２はこのような信頼度が低い領域である。領域７０４はＥＶ値が高く、フォーカスが無限遠に近い領域であり、屋外で撮影されたことの信頼度が高い領域である。領域７０３はこのような信頼度が低い領域である。そして、このような色温度推定部１１５の推定結果に応じて、即ち領域７０１〜７０４のどこに属しているかに応じた重み付けにより信頼度が決定される。
【００４３】
図８は、プリセットホワイトバランス電球が選択されている場合の信頼度に応じたホワイトバランスのゲイン量の制御範囲を示す図である。
【００４４】
プリセットホワイトバランス電球が選択されている場合のオート制御範囲には、図８に示すように、３種類のオート制御範囲８０１、８０２及び８０３が設定されている。オート制御範囲８０１は、通常時、つまりホワイトバランス設定判定部１１６が色温度に差異がないと判定した場合の制御範囲である。オート制御範囲８０２は、屋外で撮影されたと低い信頼度で判定された場合の制御範囲である。オート制御範囲８０３は、屋外で撮影されたと高い信頼度で判定された場合の制御範囲である。そして、ホワイトバランス制御部１０６が、図８に示す基準に基づいて、適宜、プリセットホワイトバランス電球のオート制御範囲を変更する。つまり、信頼度が高いほど、狭いオート制御範囲が採用される。
【００４５】
なお、プリセットホワイトバランス日陰が選択されている場合にも、信頼度に応じたホワイトバランスのゲイン量の制御範囲の調整を行うことができる。この場合、ホワイトバランス設定判定部１１６が色温度に差異がないと判定した場合の制御範囲、屋内で撮影されたと高い信頼度で判定された場合の制御範囲、及び屋内で撮影されたと低い信頼度で判定された場合の制御範囲が用いられる。
【００４６】
また、カメラ信号処理部１０５は、ホワイトバランスの状態から推定される色温度の信頼度に応じて、画像信号の処理の内容を変更してもよい。例えば、この信頼度が高いほど、狭い制御範囲で画像信号の処理を行ってもよい。この場合、例えば、ホワイトバランスのゲインと信頼度との関係を予め求めておき、この関係に基づいた重み付けにより信頼度が決定される。
【００４７】
また、本実施形態において、記録部１１０を用いた記録前の液晶表示パネル等の表示装置部１０９への表示の際と、記録部１１０を用いた記録中との間で、制御範囲の時間変化の割合を異なるものとすることが好ましい。図９は、ホワイトバランスをカラーフィルタ効果として利用していると判定した際の、オート制御範囲の時間特性を示す図である。図９に示すように、非記録時（スルー時）の時間特性９０１と記録時の時間特性９０２とが相違している。例えば、記録時の時間特性９０２の傾きが、スルー時の時間特性９０１の傾きの１／２に設定されている。この場合、ある所定のオート制御範囲９０３までの移行に、記録時にはスルー時の２倍の時間がかかることになる。つまり、スルー時と記録時とで可変の時定数が相違することとなる。なお、この制御は、例えばシステム制御部１１４によって行われる。また、オート制御範囲９０３が大きいほど図８に示す制御範囲が広いことを示している。
【００４８】
このような制御により、表示装置部１０９を用いたカラーフィルタ効果の確認を素早く行うことができ、記録部１１０を用いた記録中にはシーン変化に伴う判定結果遷移に伴うカメラ信号処理の制御の変化の極端な切り替わりを回避できる。
【００４９】
以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。
【００５０】
本発明の各工程は、ネットワーク又は各種記憶媒体を介して取得したソフトウェア（プログラム）をパーソナルコンピュータ等の処理装置（ＣＰＵ、プロセッサ）にて実行することでも実現できる。
【符号の説明】
【００５１】
１０５：カメラ信号処理部  １１１：フォーカス操作部  １１２：レンズ駆動部  １１３：ホワイトバランスモード選択ＵＩ部  １１４：システム制御部  １１５：色温度推定部  １１６：ホワイトバランス設定判定部
【図１】
2014220701.tif 000003
【図２】
2014220701.tif 000004
【図３】
2014220701.tif 000005
【図４】
2014220701.tif 000006
【図５】
2014220701.tif 000007
【図６】
2014220701.tif 000008
【図７】
2014220701.tif 000009
【図８】
2014220701.tif 000010
【図９】
2014220701.tif 000011