(57)【要約】【課題】  自分撮り用の撮像部が光源の種類を検出することが困難な場合にも、光源の種類に基づく画像処理を適切に行えるようにすること。【解決手段】  メイン撮像系と、サブ撮像系とを有する撮像装置であって、メイン撮像系に構成され、メイン撮像系により撮影を行って得られたメイン画像データに基づいて、撮影を行った時の光源を推定する光源推定部（２０４）と、サブ撮像系に構成され、光源推定部により推定された光源の情報に基づいて、サブ撮像系により撮影を行って得られたサブ画像データを処理する色シェーディング補正部（２０５）とを有する。【選択図】  図４
2015126295.tif 000002
【特許請求の範囲】
【請求項１】
第１の撮像系と、前記第１の撮像系と異なる第２の撮像系とを有する撮像装置であって、
前記第１の撮像系に構成され、前記第１の撮像系により撮影を行って得られた第１の画像データに基づいて、前記撮影を行った時の光源を推定する光源推定手段と、
前記第２の撮像系に構成され、前記光源推定手段により推定された光源の情報に基づいて、前記第２の撮像系により撮影を行って得られた第２の画像データを処理する処理手段と
を有することを特徴とする撮像装置。
【請求項２】
第１の撮像系と、前記第１の撮像系と異なる第２の撮像系とを有する撮像装置であって、
前記第１の撮像系に構成され、前記第１の撮像系により撮影を行って得られた第１の画像データと、前記第２の撮像系により撮影を行って得られた第２の画像データとに基づいて、前記第２の撮像系により前記撮影を行った時の光源を推定する光源推定手段と、
前記第２の撮像系に構成され、前記光源推定手段により推定された光源の情報に基づいて、前記第２の画像データを処理する処理手段と
を有することを特徴とする撮像装置。
【請求項３】
前記第２の撮像系は、光源推定手段を有さないことを特徴とする請求項１または２に記載の撮像装置。
【請求項４】
前記光源推定手段は、入力された画像データの色温度及び明るさに基づいて、光源を推定することを特徴とする請求項１乃至３のいずれか１項に記載の撮像装置。
【請求項５】
前記光源推定手段は、前記第１の画像データの色温度及び明るさと、前記第２の画像データの色温度及び明るさとのそれぞれの差が、共に予め決められた範囲内である場合に、前記第１の画像データの色温度及び明るさに基づいて光源を推定し、前記色温度及び明るさの少なくとも一方の差が前記予め決められた範囲内にない場合に、前記第２の画像データの色温度及び明るさに基づいて光源を推定することを特徴とする請求項２に記載の撮像装置。
【請求項６】
前記処理手段は、前記推定された光源の情報に基づいて、色シェーディング補正を行うことを特徴とする請求項１乃至５のいずれか１項に記載の撮像装置。
【請求項７】
前記光源推定手段は、前記光源の推定を前記第２の撮像系の起動した時に実施することを特徴とする請求項１乃至６のいずれか１項に記載の撮像装置。
【請求項８】
前記第１の撮像系は、更に、光学系と、前記光学系を介して入射する光を光電変換する撮像素子と、前記光学系及び撮像素子を駆動する駆動手段と、前記撮像素子から得られた信号を処理する処理手段とを有し、
前記第２の撮像系は、更に、光学系と、前記光学系を介して入射する光を光電変換する撮像素子と、前記撮像素子を駆動する駆動手段とを有する
ことを特徴とする請求項１乃至７のいずれか１項に記載の撮像装置。
【請求項９】
第１の撮像系と、前記第１の撮像系と異なる第２の撮像系とを有する撮像装置の制御方法であって、
前記第１の撮像系に構成された光源推定手段により、前記第１の撮像系により撮影を行って得られた第１の画像データに基づいて、前記撮影を行った時の光源を推定する光源推定工程と、
前記第２の撮像系に構成された処理手段により、前記光源推定工程で推定された光源の情報に基づいて、前記第２の撮像系により撮影を行って得られた第２の画像データを処理する処理工程と
を有することを特徴とする撮像装置の制御方法。
【請求項１０】
第１の撮像系と、前記第１の撮像系と異なる第２の撮像系とを有する撮像装置の制御方法であって、
前記第１の撮像系に構成された光源推定手段により、前記第１の撮像系により撮影を行って得られた第１の画像データと、前記第２の撮像系により撮影を行って得られた第２の画像データとに基づいて、前記第２の撮像系により前記撮影を行った時の光源を推定する光源推定工程と、
前記第２の撮像系に構成された処理手段により、前記光源推定工程で推定された光源の情報に基づいて、前記第２の画像データを処理する処理工程と
を有することを特徴とする撮像装置の制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は撮像装置及びその制御方法に関し、特に色シェーディング補正を行う技術に関する。
【背景技術】
【０００２】
一般的な撮像装置では、色シェーディングを補正する場合、ホワイトバランスからから光源を推定し、色ごとに光源に適したシェーディング補正値で補正している。
【０００３】
また、特許文献１には、被写体撮影用の撮像部と、該撮像部と反対側に設けられた自分撮り用の撮像部を有し、適切に撮像部の色シェーディング補正を行うことが可能な撮像装置が提案されている。この構成では、被写体が逆光になることを撮影者が嫌うことから、自分撮り用の撮像部は環境光源が映る可能性が高いという経験則に基づいて色シェーディング補正を行っている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１３−４２４２８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、自分撮り用の撮像部に光源が映ると自分が逆光状態になるため、ホワイトバランスから光源推定することが困難である。また、自分撮り用の撮像部は、被写体撮影用の撮像部と比較して、光学系・撮像系の制約や、ニーズの観点から性能が劣ることが多く、光源推定精度が低いことが多い。
【０００６】
本発明は上記問題点を鑑みてなされたものであり、自分撮り用の撮像部が光源の種類を検出することが困難な場合にも、光源の種類に基づく画像処理を適切に行えるようにすることを目的とする。
【課題を解決するための手段】
【０００７】
上記目的を達成するために、第１の撮像系と、前記第１の撮像系と異なる第２の撮像系とを有する本発明の撮像装置は、前記第１の撮像系に構成され、前記第１の撮像系により撮影を行って得られた第１の画像データに基づいて、前記撮影を行った時の光源を推定する光源推定手段と、前記第２の撮像系に構成され、前記光源推定手段により推定された光源の情報に基づいて、前記第２の撮像系により撮影を行って得られた第２の画像データを処理する処理手段とを有する。
【発明の効果】
【０００８】
本発明によれば、自分撮り用の撮像部が光源の種類を検出することが困難な場合にも、光源の種類に基づく画像処理を適切に行うことができる。
【図面の簡単な説明】
【０００９】
【図１】本発明の実施形態における撮像装置の概略構成を示すブロック図。
【図２】実施形態における画像表示処理のフローチャート。
【図３】実施形態における静止画撮影処理のフローチャート。
【図４】第１の実施形態におけるメイン信号処理部及びサブ信号処理部の構成を示すブロック図。
【図５】第１の実施形態におけるサブ画像を色シェーディング補正する処理を示すシーケンス図。
【図６】第１の実施形態における光源推定方法を示す図。
【図７】第２の実施形態におけるメイン信号処理部及びサブ信号処理部の構成を示すブロック図。
【図８】第２の実施形態におけるサブ画像を色シェーディング補正する処理を示すシーケンス図。
【図９】第２の実施形態における光源推定方法を示す図。
【発明を実施するための形態】
【００１０】
以下、添付図面を参照して本発明を実施するための形態を詳細に説明する。なお、以下に説明する実施形態は、本発明の実現手段としての一例であり、本発明が適用される装置の構成や各種条件によって適宜修正または変更されるべきものであり、本発明は以下の実施形態に限定されるものではない。
【００１１】
＜第１の実施形態＞
図１は、本発明の第１の実施形態に係る、２つの撮像系を備える撮像装置の構成を示す図である。撮像装置は、メイン光学系１０１、メイン撮像素子１０２、メイン駆動回路部１０３、メイン信号処理部１０４からなるメイン撮像系と、サブ光学系１１０、サブ撮像素子１１１、サブ駆動回路部１１２、サブ信号処理部１１３からなるサブ撮像系を有する。更に、画像を記憶するメモリ部１０５、画像表示部１０６、画像記録部１０７、操作部１０８、同期制御部１０９等も含む。
【００１２】
メイン光学系１０１は、被写体像をメイン撮像素子１０２に結像させる合焦レンズ、光学ズームを行うズームレンズ、被写体像の明るさを調整する絞り、露光を制御するシャッタ等からなり、それらはメイン駆動回路部１０３により駆動される。メイン撮像素子１０２は、メイン光学系１０１を介して入射する光を光電変換する水平垂直方向に配列された複数の画素と、これらの画素から読み出された画像信号を所定の順番で出力する回路から構成され、メイン駆動回路部１０３により駆動される。メイン駆動回路部１０３は、同期制御部１０９からの制御信号に基づいて、メイン光学系１０１及びメイン撮像素子１０２を動作させる。
【００１３】
メイン信号処理部１０４は、同期制御部１０９からの制御信号により制御され、メイン撮像素子１０２から送られてくるデジタル信号に変換された出力信号に対して各種信号処理を行い、画像データに変換する。そして、メモリ部１０５や画像記録部１０７へ出力信号や画像データを出力したり、あるいは、メモリ部１０５や画像記録部１０７から画像データを受けて信号処理を行う。さらに、メイン撮像素子１０２から得られた画像信号から合焦状態や露光量等の測光データを検出し、同期制御部１０９に送信する機能も有する。
【００１４】
メモリ部１０５は、同期制御部１０９からの制御信号により制御され、メイン撮像素子１０２からの出力信号や、メイン信号処理部１０４により信号処理された画像データを一時的に記憶する。さらに、表示用の画像データを画像表示部１０６へ出力する。
【００１５】
画像表示部１０６は、同期制御部１０９からの制御信号により制御され、例えば、液晶ディスプレイ（ＬＣＤ）で構成される。メモリ部１０５に記憶された表示用の画像データを画像表示部１０６に表示することで、電子ビューファインダー（ＥＶＦ）として用いて撮影前の構図決めをしたり、また、撮影後の画像を表示することで、撮影内容の確認をしたりすることができる。
【００１６】
画像記録部１０７は、着脱可能なメモリ等を備え、同期制御部１０９からの制御信号により制御され、メイン信号処理部１０４から送られてくる、出力信号や画像データの記録や、着脱可能なメモリからの読み出しを行う。
【００１７】
操作部１０８は、スイッチ、押しボタン等の操作部材を含み、これらの操作部材を用いた外部からの指示などの情報を同期制御部１０９に伝える。伝える情報としては、例えば、撮像装置の電源スイッチの状態、撮影前の画像表示の指示、撮影の各種指示、撮影した画像の表示、あるいは、撮像装置の動作をあらかじめ指示するメニュー操作等を含む。更に、同期制御部１０９からの制御信号により、ＬＣＤやフォトダイオード等の表示部材あるいは画像表示部１０６を用いて、撮像装置の状態を表示する。また、操作部材として、表示部材である画像表示部１０６にタッチパネルを装着し、オンスクリーンでの操作を行えるように構成してもよい。
【００１８】
同期制御部１０９は、操作部１０８からの指示により、撮像装置全体を制御する。また、メイン信号処理部１０４から送られてくる合焦状態や露光量等の測光データに応じて、メイン光学系１０１を制御して、最適な被写体像をメイン撮像素子１０２に結像させる。
【００１９】
サブ光学系１１０は、被写体像をサブ撮像素子１１１に結像させる、制御要素の無い単焦点レンズである。サブ撮像素子１１１は、サブ光学系１１０を介して入射する光を光電変換する水平垂直方向に配列された複数の画素と、これら画素から読み出された信号を所定の順番で出力する回路から構成されている。サブ駆動回路部１１２は、サブ撮像素子１１１を動作させる。
【００２０】
サブ信号処理部１１３は、同期制御部１０９からの制御信号により制御され、サブ撮像素子１１１から送られてくるデジタル信号に変換された出力信号に対して各種信号処理を行って画像データに変換し、メイン信号処理部１０４へ出力する。
【００２１】
次に、上記構成を有する撮像装置による画像表示処理について、メイン撮像系（第１の撮像系）及びサブ撮像系（第２の撮像系）により得られた画像を共に表示する場合について、図２に示すフローチャートを用いて説明する。
【００２２】
Ｓ１１において、操作部１０８の電源スイッチからの指示により電源がオンすると、Ｓ１２に進んで、メイン信号処理部１０４は、メイン撮像素子１０２からの出力信号を表示用の画像データに変換して、画像表示部１０６に表示する。なお、以下の説明において、メイン撮像系の信号（第１の画像データ）を「メイン画像信号」または「メイン画像データ」、また、メイン画像信号が表す画像を「メイン画像」と呼ぶ。更に、Ｓ１３において、メイン信号処理部１０４は、同じメイン画像信号から測光データを検出する。メイン駆動回路部１０３は、検出した測光データに基づいて適正露出となるように、メイン光学系１０１の絞り及びシャッタ、メイン撮像素子１０２の感度等を制御する。また、同じメイン画像信号から合焦状態を検出し、検出した合焦状態に基づいて、メイン駆動回路部１０３はメイン光学系１０１の合焦レンズを制御する。
【００２３】
また、Ｓ１４において、メイン信号処理部１０４は、サブ撮像素子１１１からの出力信号を表示用の画像データに変換して、例えば、画像表示部１０６の右下に表示する。なお、以下の説明において、サブ撮像系の信号（第２の画像データ）を「サブ画像信号」または「サブ画像データ」、また、サブ画像信号が表す画像を「サブ画像」と呼ぶ。更に、Ｓ１５において、メイン信号処理部１０４は、同じサブ画像信号から測光データを検出し、サブ信号処理部１１３に送信する。サブ信号処理部１１３は、メイン信号処理部１０４から送信された測光データに基づいて、サブ駆動回路部１１２を制御する。なお、Ｓ１２〜Ｓ１５の処理は、少なくともその一部を並行して行っても良い。
【００２４】
Ｓ１６において、操作部１０８からの表示終了が指示されたかどうかを判断し、表示終了が指示されていなければＳ１２に戻って上記処理を繰り返し、指示されていれば、表示を終了する。
【００２５】
なお、操作部１０８によりメイン撮像系及びサブ撮像系のいずれか一方から得られた画像を表示するように設定されている場合、Ｓ１２及びＳ１３、または、Ｓ１４及びＳ１５のいずれか一方の処理のみが行われる。その際、サブ撮像系が選択されていれば、画像表示部１０６全面にサブ画像を表示する。
【００２６】
次に、本第１の実施形態におけるメイン撮像系及びサブ撮像系により得られた静止画の撮像処理について、図３に示すフローチャートに沿って説明する。Ｓ２１において、操作部１０８により静止画撮影が指示されたかどうかを判定し、静止画撮影が指示されると、Ｓ２２において、メイン信号処理部１０４は、メイン画像信号から合焦状態及び測光データを検出し、同期制御部１０９に送信する。Ｓ２３において、同期制御部１０９は検出した合焦状態と測光データを元にしてメイン駆動回路部１０３へ制御信号を送り、メイン光学系１０１とメイン撮像素子１０２を制御し、静止画記録用の露光と画像信号の出力を行う。
【００２７】
一方、Ｓ２４において、サブ信号処理部１１３は、サブ画像信号から測光データを検出し、同期制御部１０９に送信する。Ｓ２５において、同期制御部１０９は、測光データを元にして、サブ駆動回路部１１２へ制御信号を送り、サブ撮像素子１１１を制御し、静止画記録用の露光と画像信号の出力を行う。
【００２８】
Ｓ２６において、メイン信号処理部１０４とサブ信号処理部１１３それぞれにおいて、メイン画像信号とサブ撮像信号をそれぞれ記録用の画像データに変換し、画像記録部１０７に送り、着脱可能なメモリに記録する。更に、メイン画像信号とサブ画像信号を表示用の画像データに変換して、画像表示部１０６に表示し、撮影処理を終了する。
【００２９】
次に、本第１の実施形態における色シェーディング補正処理の手順について説明する。図４は、第１の実施形態におけるメイン信号処理部１０４及びサブ信号処理部１１３の構成を示すブロック図である。メイン信号処理部１０４は、画像情報検出部２０１及び光源推定部２０４を含み、画像情報検出部２０１は、色温度検出部２０２、明るさ検出部２０３を含んでいる。また、サブ信号処理部１１３は、色シェーディング補正部２０５を含む。
【００３０】
画像情報検出部２０１は、メイン画像の画像情報を検出する。色温度検出部２０２は、メイン画像の色温度を検出する。明るさ検出部２０３は、メイン画像の明るさを検出する。そして、光源推定部２０４は、画像情報検出部２０１の情報から光源を推定し、推定した結果を色シェーディング補正部２０５へ送信する。
【００３１】
色シェーディング補正部２０５は、光源推定部２０４から受信した光源情報から、Ｒ、Ｇ、Ｂのそれぞれの色信号ごとに、光源に適したシェーディング補正値を決定し、サブ画像の色シェーディングを補正する。
【００３２】
図５は、サブ画像を色シェーディング補正する処理を示すシーケンス図である。なお、第１の実施形態では、メイン撮像系は光源検出機能を有し、サブ撮像系は光源検出機能を有さない。
【００３３】
Ｓ３０１において、メイン信号処理部１０４はメイン画像データを取得する。Ｓ３０２において、取得したメイン画像データから、画像情報検出部２０１により色温度及び明るさの情報を検出する。Ｓ３０３において、検出した色温度及び明るさの情報から、光源推定部２０４により光源を推定する。Ｓ３０４において、推定した光源情報を、メイン信号処理部１０４からサブ信号処理部１１３へ送信する。
【００３４】
なお、Ｓ３０１からＳ３０４までの処理は、定期的に実施してもよい。また通信負荷の制約がある場合は、光源の変化を検知したときや、サブ撮像系が起動したとき等、特定の条件でのみ実施しても良い。
【００３５】
Ｓ３０４でメイン信号処理部１０４からサブ信号処理部１１３へ推定した光源情報が送られると、Ｓ３０５において、サブ信号処理部１１３は、メイン信号処理部１０４で推定した光源情報を受信する。Ｓ３０６において、サブ画像データを取得する。Ｓ３０７において、Ｓ３０６で取得したサブ画像データに対し、Ｓ３０５で受信した光源情報に基づいて色シェーディング補正を実施する。なお、サブ画像データを取得するタイミングは光源情報を受信した後でなくても良い。即ち、サブ画像データを取得するタイミングと、メイン信号処理部１０４から光源情報を受信するタイミングは、Ｓ３０７でサブ画像データを色シェーディング補正するときに、直近に得られた光源情報を用いる関係となる。
【００３６】
図６は、Ｓ３０３で光源推定部２０４が行う、光源推定処理の説明図である。Ｓ３０２で取得した被写体の色温度をC.Temp、被写体の明るさをBvとして、C.TempとBvとの関係と、光源との対応を示している。例えば、被写体の明るさBvの値が大きい光源１は、屋外の太陽光源を想定している。また、被写体の明るさBvの値が小さく、色温度C.Tempの値が大きい光源３は、電球光源を想定している。
【００３７】
次に、図６を用いた光源の推定方法について説明する。C.TempとBvを図６のBv-C.Tempの入力すると、この例では３種類の光源１〜３のどれかを推定して結果を出力する。例えば、Bv＜Param1かつC.Temp＞Param2のとき、光源３と推定される。また、Bv＞Param0の場合、光源１と推定される。光源１と光源３の条件に当てはまらない場合は光源２と推定される。
【００３８】
上記の通り本第１の実施形態によれば、メイン画像からサブ撮像系の被写体の光源を推定し、補正値を選択することで、光源検出機能の無いサブ撮像系において、適切な色シェーディング補正を行うことができる。
【００３９】
＜第２の実施形態＞
次に、本発明の第２の実施形態について説明する。上述した第１の実施形態では、メイン画像データから、サブ画像データの色シェーディング補正値を求めた。しかしながら、メイン撮像素子１０２が撮影する被写体と、サブ撮像素子１１１が撮影する被写体とで、光源が異なる可能性がある。そのため、本第２の実施形態では、メイン画像データとサブ画像データの両方に基づいて光源を推定し、サブ画像データを処理するための色シェーディング補正値を求める。なお、撮像装置の全体構成は第１の実施形態で図１を参照して説明したものと同様であるため、ここでは説明を省略する。
【００４０】
次に、本第２の実施形態における色シェーディング補正処理の手順について説明する。図７は、第２の実施形態におけるメイン信号処理部１０４及びサブ信号処理部１１３の構成を示すブロック図である。メイン信号処理部１０４は、画像情報検出部５０１及び光源推定部５０４を含み、画像情報検出部５０１は、色温度検出部５０２、明るさ検出部５０３を含んでいる。また、サブ信号処理部１１３は、サブ画像データ送信部５０５、色シェーディング補正部５０６を含む。
【００４１】
画像情報検出部５０１は、メイン撮像素子１０２から得られたメイン画像及びサブ画像データ送信部５０５から入力されたサブ画像の画像情報を検出する。色温度検出部５０２は、入力されたメイン画像及びサブ画像の色温度を検出する。明るさ検出部５０３は、入力されたメイン画像及びサブ画像の明るさを検出する。そして、光源推定部５０４は、画像情報検出部５０１の情報から光源を推定し、推定した結果を色シェーディング補正部５０６へ送信する。
【００４２】
サブ画像データ送信部５０５は、サブ撮像素子１１１から得られたサブ画像を画像情報検出部５０１へ送信する。色シェーディング補正部５０６は、光源推定部５０４から受信した光源情報から色シェーディング補正値を決定し、サブ画像の色シェーディングを補正する。
【００４３】
図８は、サブ画像を色シェーディング補正する処理を示すシーケンス図である。なお、第１の実施形態と同様に、メイン撮像系は光源検出機能を有し、サブ撮像系は光源検出機能を有さない構成であるものとする。
【００４４】
Ｓ６０１において、メイン信号処理部１０４はメイン画像データを取得する。一方、サブ信号処理部１１３では、Ｓ６０６においてサブ画像データを取得し、サブ画像データ送信部５０５によりメイン信号処理部１０４に転送する。Ｓ６０２において、取得したメイン画像データ及び転送されたサブ画像データから、画像情報検出部５０１により色温度及び明るさの情報をそれぞれ検出する。
【００４５】
Ｓ６０３において、メイン画像データ及びサブ画像データからそれぞれ検出した色温度及び明るさの情報から、光源推定部５０４により光源を推定する。なお、具体的な光源推定方法は図９を用いて後述するが、メイン画像データとサブ画像データとの明るさの差と色温度の差とがそれぞれ一定値以内であれば（即ち、予め決められた範囲内にあれば）、メイン画像とサブ画像の被写体光源は同一光源と判断する。そして、メイン画像データから色シェーディングの補正値を求める。また、明るさの差と色温度の差とのどちらか片方でも値が大きく離れていれば（即ち、予め決められた範囲内に無ければ）、メイン画像とサブ画像の被写体は光源が異なると判断し、サブ画像データから色シェーディングの補正値を求める。光源推定に使用する画像を決めたら、後述する光源推定の処理で光源を推定する。Ｓ６０４において、推定した光源情報を、メイン信号処理部１０４からサブ信号処理部１１３へ送信する。
【００４６】
なお、Ｓ６０１〜Ｓ６０４、Ｓ６０６の処理は、定期的に実施してもよい。また通信負荷の制約がある場合は、メイン画像またはサブ画像の光源の変化を検出したときや、サブ撮像系が起動したとき等、特定の条件でのみ実施しても良い。
【００４７】
Ｓ６０４でメイン信号処理部１０４からサブ信号処理部１１３へ推定した光源情報が送られると、Ｓ６０５において、サブ信号処理部１１３は、メイン信号処理部１０４で推定した光源情報を受信する。
【００４８】
なお、本第２の実施形態では、メイン信号処理部１０４から光源情報を受信するまで、Ｓ６０６で取得したサブ画像データを保持しておく。Ｓ６０７において、Ｓ６０６で取得したサブ画像データに対し、Ｓ６０５で受信した光源情報に基づいて色シェーディング補正を実施する。
【００４９】
図９は、図６と同様にＳ６０３で光源推定部５０４が行う、光源推定処理の説明図である。Ｓ６０２で取得したメイン画像の色温度をMain_C.Temp、サブ画像の色温度をSub_C.Temp、メイン画像の被写体の明るさをMain_Bv、サブ画像の被写体の明るさをSub_Bvとする。これら４つのパラメータを図９のBv-C.Tempに入力する。
【００５０】
本第２の実施形態では、これら４つのパラメータに応じて、３種類の光源１〜３のどれかを推定して結果を出力する。図９（ａ）及び（ｂ）は、その一例を示す。図９（ａ）及び（ｂ）において、メイン画像の被写体の明るさと色温度を（Main_Bv、Main_C.Temp）、サブ画像の被写体の明るさと色温度を（Sub_Bv、Sub_C.Temp）としてプロットしている。
【００５１】
メイン画像の被写体の明るさMain_Bvを中心に予め決められた明るさの許容範囲をBvlim、メイン画像の色温度Main_C.Tempを中心にあらかじめ決められた色温度の許容範囲をC.Templimとする。ここで、サブ画像の被写体の明るさSub_Bvが明るさの許容範囲Bvlimに収まっており、且つ、サブ画像の色温度Sub_C.Tempが色温度の許容範囲C.Templimに収まっていれば、メイン画像の被写体の明るさ及び色温度の情報からサブ画像の光源を推定する。即ち、図９（ａ）の場合で、光源２が選択される。
【００５２】
一方、サブ画像の被写体の明るさSub_Bvが明るさの許容範囲Bvlimに収まっていなかったり、サブ画像の色温度Sub_C.Tempが色温度の許容範囲C.Templimに収まっていなければ、サブ画像の被写体の明るさ及び色温度の情報からサブ画像の光源を推定する。即ち、図９（ｂ）の場合で、光源３が選択される。
【００５３】
上記の通り本第２の実施形態によれば、メイン撮像系とサブ撮像系の画像からサブ撮像系の被写体の光源を推定し、補正値を選択することで、光源検出機能の無いサブ撮像系において、適切な色シェーディング補正を行うことができる。
【００５４】
なお、上記第１及び第２の実施形態では、推定した光源に基づいて色シェーディング補正を行う場合について説明したが、本発明はこれに限られるものではなく、光源の種類に基づいて制御される処理に適用することが可能である。
【図１】
2015126295.tif 000003
【図２】
2015126295.tif 000004
【図３】
2015126295.tif 000005
【図４】
2015126295.tif 000006
【図５】
2015126295.tif 000007
【図６】
2015126295.tif 000008
【図７】
2015126295.tif 000009
【図８】
2015126295.tif 000010
【図９】
2015126295.tif 000011