(57)【特許請求の範囲】
【請求項１】
低感度と高感度の受光素子が所定のパターンで配置されている単板式固体撮像素子を備える撮像装置において、
被写体を撮像して、対応する感度モザイク画像を生成する撮像手段と、
被写体のダイナミックレンジを測定する測定手段と、
複数の撮影モードのうちの１つの撮影モードを利用者に選択させるか、または被写体のダイナミックレンジに基づいて撮影モードを自動的に選択する選択手段と、
被写体のダイナミックレンジに基づいて、撮像時の露出を制御する露出制御手段と、
前記撮影モードに従い、撮像された前記感度モザイク画像を元にして、広ダイナミックレンジ画像または高解像度画像を生成する画像処理手段とを含み、
前記露出制御手段は、
ダイナミックレンジ優先撮影モードにおいて、前記低感度の受光素子によって撮像された低感度画素の飽和レベルが前記被写体のダイナミックレンジの上限値に一致するように前記露出を制御し、
解像度優先撮影モードにおいて、前記高感度の受光素子によって撮像された高感度画素の飽和レベルが前記被写体のダイナミックレンジの上限値に一致するように前記露出を制御し、
前記選択手段は、
前記被写体のダイナミックレンジが前記受光素子のダイナミックレンジよりも広い場合、前記撮影モードを前記ダイナミックレンジ優先撮影モードに決定し、
前記被写体のダイナミックレンジが前記受光素子のダイナミックレンジよりも狭い場合、前記撮影モードを前記解像度優先撮影モードに決定し、
前記画像処理手段は、
前記ダイナミックレンジ優先撮影モードにおいて欠落画素を補間し、
前記解像度優先撮影モードにおいて前記欠落画素の補間を省略する
ことを特徴とする撮像装置。
【請求項２】
低感度と高感度の受光素子が所定のパターンで配置されている単板式固体撮像素子を備える撮像装置の撮像方法において、
被写体を撮像して、対応する感度モザイク画像を生成する撮像ステップと、
被写体のダイナミックレンジを測定する測定ステップと、
複数の撮影モードのうちの１つの撮影モードを利用者に選択させるか、または被写体のダイナミックレンジに基づいて撮影モードを自動的に選択する選択ステップと、
被写体のダイナミックレンジに基づいて、撮像時の露出を制御する露出制御ステップと、
前記撮影モードに従い、前記撮像ステップの処理で撮像された前記感度モザイク画像を元にして、広ダイナミックレンジ画像または高解像度画像を生成する画像処理ステップとを含み、
前記露出制御ステップは、
ダイナミックレンジ優先撮影モードにおいて、前記低感度の受光素子によって撮像された低感度画素の飽和レベルが前記被写体のダイナミックレンジの上限値に一致するように前記露出を制御し、
解像度優先撮影モードにおいて、前記高感度の受光素子によって撮像された高感度画素の飽和レベルが前記被写体のダイナミックレンジの上限値に一致するように前記露出を制御し、
前記選択ステップは、
前記被写体のダイナミックレンジが前記受光素子のダイナミックレンジよりも広い場合、前記撮影モードを前記ダイナミックレンジ優先撮影モードに決定し、
前記被写体のダイナミックレンジが前記受光素子のダイナミックレンジよりも狭い場合、前記撮影モードを前記解像度優先撮影モードに決定し、
前記画像処理ステップは、
前記ダイナミックレンジ優先撮影モードにおいて欠落画素を補間し、
前記解像度優先撮影モードにおいて前記欠落画素の補間を省略する
ことを特徴とする撮像方法。
【請求項３】
低感度と高感度の受光素子が所定のパターンで配置されている単板式固体撮像素子を備える撮像装置の制御用のプログラムであって、
被写体を撮像して、対応する感度モザイク画像を生成する撮像ステップと、
被写体のダイナミックレンジを測定する測定ステップと、
複数の撮影モードのうちの１つの撮影モードを利用者に選択させるか、または被写体のダイナミックレンジに基づいて撮影モードを自動的に選択する選択ステップと、
被写体のダイナミックレンジに基づいて、撮像時の露出を制御する露出制御ステップと、
前記撮影モードに従い、前記撮像ステップの処理で撮像された前記感度モザイク画像を元にして、広ダイナミックレンジ画像または高解像度画像を生成する画像処理ステップとを含み、
前記露出制御ステップは、
ダイナミックレンジ優先撮影モードにおいて、前記低感度の受光素子によって撮像された低感度画素の飽和レベルが前記被写体のダイナミックレンジの上限値に一致するように前記露出を制御し、
解像度優先撮影モードにおいて、前記高感度の受光素子によって撮像された高感度画素の飽和レベルが前記被写体のダイナミックレンジの上限値に一致するように前記露出を制御し、
前記選択ステップは、
前記被写体のダイナミックレンジが前記受光素子のダイナミックレンジよりも広い場合、前記撮影モードを前記ダイナミックレンジ優先撮影モードに決定し、
前記被写体のダイナミックレンジが前記受光素子のダイナミックレンジよりも狭い場合、前記撮影モードを前記解像度優先撮影モードに決定し、
前記画像処理ステップは、
前記ダイナミックレンジ優先撮影モードにおいて欠落画素を補間し、
前記解像度優先撮影モードにおいて前記欠落画素の補間を省略する
処理を撮像装置のコンピュータに実行させるプログラムが記録されていることを特徴とする記録媒体。
【請求項４】
低感度と高感度の受光素子が所定のパターンで配置されている単板式固体撮像素子を備える撮像装置の制御用のプログラムであって、
被写体を撮像して、対応する感度モザイク画像を生成する撮像ステップと、
被写体のダイナミックレンジを測定する測定ステップと、
複数の撮影モードのうちの１つの撮影モードを利用者に選択させるか、または被写体のダイナミックレンジに基づいて撮影モードを自動的に選択する選択ステップと、
被写体のダイナミックレンジに基づいて、撮像時の露出を制御する露出制御ステップと、
前記撮影モードに従い、前記撮像ステップの処理で撮像された前記感度モザイク画像を元にして、広ダイナミックレンジ画像または高解像度画像を生成する画像処理ステップとを含み、
前記露出制御ステップは、
ダイナミックレンジ優先撮影モードにおいて、前記低感度の受光素子によって撮像された低感度画素の飽和レベルが前記被写体のダイナミックレンジの上限値に一致するように前記露出を制御し、
解像度優先撮影モードにおいて、前記高感度の受光素子によって撮像された高感度画素の飽和レベルが前記被写体のダイナミックレンジの上限値に一致するように前記露出を制御し、
前記選択ステップは、
前記被写体のダイナミックレンジが前記受光素子のダイナミックレンジよりも広い場合、前記撮影モードを前記ダイナミックレンジ優先撮影モードに決定し、
前記被写体のダイナミックレンジが前記受光素子のダイナミックレンジよりも狭い場合、前記撮影モードを前記解像度優先撮影モードに決定し、
前記画像処理ステップは、
前記ダイナミックレンジ優先撮影モードにおいて欠落画素を補間し、
前記解像度優先撮影モードにおいて前記欠落画素の補間を省略する
処理を撮像装置のコンピュータに実行させることを特徴とするプログラム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、撮像装置および方法、記録媒体、並びにプログラムに関し、例えば、広ダイナミックレンジの画像信号を取得するダイナミックレンジ優先撮影モードと、高解像度の画像信号を取得する解像度優先撮影モードを適応的に切り替える場合に用いて好適な撮像装置および方法、記録媒体、並びにプログラムに関する。
【０００２】
【背景の技術】
従来、CCD(Charge Coupled Device)、CMOS(Complementary Mental-Oxide Semiconductor)などの固体撮像素子を用いたディジタルスチルカメラによって取得する画像信号のダイナミックレンジを広域化する技術がある。
【０００３】
この技術は、例えば、シャッタ速度および絞りを調整することによって露出を変化させて連続的に撮影する方法、感度が異なる複数の撮像素子を用いる方法、感度モザイク画像（後述）を用いる方法などがある。
【０００４】
感度モザイク画像を用いる方法は、例えば、文献「S. K. Nayar and T. Mitsunaga, “High Dynamic Range Imaging: Spatially Varying Pixel Exposures”, Proc. of Computer Vision and Pattern Recognition 2000, Vol. 1, pp. 472-479, June, 2000」（以下、文献１と記述する）には、開示されている。
【０００５】
文献１に開示されている感度モザイク画像を用いる方法の概要について、図１を参照して説明する。撮像部１は、被写体の光学像を集光するレンズ、光の入射量を制限する絞り、および複数の受光素子からなる撮像素子など（いずれも不図示）から構成される。
【０００６】
図２は、撮像素子の一例を示している。１個の矩形が１個の受光素子に相当する。撮像素子を構成する受光素子のうち、例えば図示するように市松模様状に位置する受光素子３ａは、光の透過を制限するＮＤ(Neutral Density)フィルタ等で覆われている。それに対して、受光素子３ｂは、光の透過を制限するＮＤフィルタ等で覆われていない。
【０００７】
これにより、受光素子３ａは、被写体のダイナミックレンジに対して、主に明るい方の帯域に感度を有することとなり、受光素子３ｂは、被写体のダイナミックレンジに対して、主に暗い方の帯域に感度を有することとなる。
【０００８】
したがって、このような撮像素子からなる撮像部１が出力する画像は、隣接する画素の撮影時の感度が異なるものとなる。以下、このような画像を、感度モザイク画像を記述する。
【０００９】
画像処理部２は、撮像部１によって撮影された感度モザイク画像を、全ての画素の撮影時の感度が均一になるように空間的に補間して広ダイナミックレンジ画像を生成する。
【００１０】
上述した感度モザイク画像を撮影する方法によれば、連続的に露出することなく、１回の露出で広ダイナミックレンジ画像を取得することができる。また、複数の撮像素子を必要とせず、１つの撮像素子を用いるので、装置規模の大型化と製造コストの増加を抑えることが可能である。
【００１１】
【発明が解決しようとしている課題】
しかしながら、上述した感度モザイク画像を撮影する方法では、各受光素子が被写体の異なる輝度帯域を撮像しているので、撮影された感度モザイク画像のうち、日向や照明が当たる明るい方の領域では、高感度の受光素子３ｂに蓄積される電荷が飽和したものとなってしまい、反対に、日陰や照明の当たらない暗い方の領域では、低感度の受光素子３ａに蓄積される電荷はノイズに埋もれたものとなってしまう。
【００１２】
したがって、撮影された感度モザイク画像のうち、明るすぎる領域や暗すぎる領域では、信頼できる信号のサンプリング周波数が低下してしまい、このような感度モザイク画像を補間して得られる広ダイナミックレンジ画像の解像度が劣化してしまうという課題があった。
【００１３】
さらに、上述した感度モザイク画像を撮影する方法では、ダイナミックレンジの拡大を目的としているため、被写体の実際のダイナミックレンジが狭い場合においても、ダイナミックレンジを拡大するように処理してしまうので、それに起因して、最終的に得られる画像の解像度が劣化してしまうことがあった。
【００１４】
ところで、特開２０００−７８４６３号公報には、露出時間が異なる２つの撮像素子を備え、広ダイナミックレンジ優先モード、画質優先モード、および中間モードを手動で切り替えることができる画像取り込み装置が開示されているが、このような２つの撮像素子を備える装置は、単板式撮像素子を用いる装置に比較して、装置の小型化や製造コストの削減が不利である課題があった。
【００１５】
本発明はこのような状況に鑑みてなされたものであり、解像度を優先して補間処理を行う解像度優先モードと、ダイナミックレンジの拡大を優先して補間処理を行うダイナミックレンジ優先モードを設け、被写体のダイナミックレンジに応じてこれらのモードを切り替えて使用することにより、解像度の劣化を引き起こさずに撮影することができるディジタルスチルカメラを実現することを目的とする。
【００１６】
【課題を解決するための手段】
本発明の撮像装置は、被写体を撮像して、対応する感度モザイク画像を生成する撮像手段と、被写体のダイナミックレンジを測定する測定手段と、複数の撮影モードのうちの１つの撮影モードを利用者に選択させるか、または被写体のダイナミックレンジに基づいて撮影モードを自動的に選択する選択手段と、被写体のダイナミックレンジに基づいて、撮像手段の露出を制御する露出制御手段と、撮影モードに従い、撮像手段によって撮像された感度モザイク画像を元にして、広ダイナミックレンジ画像または高解像度画像を生成する画像処理手段とを含み、露出制御手段は、ダイナミックレンジ優先撮影モードにおいて、低感度の受光素子によって撮像された低感度画素の飽和レベルが被写体のダイナミックレンジの上限値に一致するように露出を制御し、解像度優先撮影モードにおいて、高感度の受光素子によって撮像された高感度画素の飽和レベルが被写体のダイナミックレンジの上限値に一致するように露出を制御し、選択手段は、被写体のダイナミックレンジが受光素子のダイナミックレンジよりも広い場合、撮影モードをダイナミックレンジ優先撮影モードに決定し、被写体のダイナミックレンジが受光素子のダイナミックレンジよりも狭い場合、撮影モードを解像度優先撮影モードに決定し、画像処理手段は、ダイナミックレンジ優先撮影モードにおいて欠落画素を補間し、解像度優先撮影モードにおいて欠落画素の補間を省略することを特徴とする。
【００１７】
本発明の撮像方法は、被写体を撮像して、対応する感度モザイク画像を生成する撮像ステップと、被写体のダイナミックレンジを測定する測定ステップと、複数の撮影モードのうちの１つの撮影モードを利用者に選択させるか、または被写体のダイナミックレンジに基づいて撮影モードを自動的に選択する選択ステップと、被写体のダイナミックレンジに基づいて、撮像時の露出を制御する露出制御ステップと、撮影モードに従い、撮像ステップの処理で撮像された感度モザイク画像を元にして、広ダイナミックレンジ画像または高解像度画像を生成する画像処理ステップとを含み、露出制御ステップは、ダイナミックレンジ優先撮影モードにおいて、低感度の受光素子によって撮像された低感度画素の飽和レベルが被写体のダイナミックレンジの上限値に一致するように露出を制御し、解像度優先撮影モードにおいて、高感度の受光素子によって撮像された高感度画素の飽和レベルが被写体のダイナミックレンジの上限値に一致するように露出を制御し、選択ステップは、被写体のダイナミックレンジが受光素子のダイナミックレンジよりも広い場合、撮影モードをダイナミックレンジ優先撮影モードに決定し、被写体のダイナミックレンジが受光素子のダイナミックレンジよりも狭い場合、撮影モードを解像度優先撮影モードに決定し、画像処理ステップは、ダイナミックレンジ優先撮影モードにおいて欠落画素を補間し、解像度優先撮影モードにおいて欠落画素の補間を省略することを特徴とする。
【００１８】
本発明の記録媒体は、被写体を撮像して、対応する感度モザイク画像を生成する撮像ステップと、被写体のダイナミックレンジを測定する測定ステップと、複数の撮影モードのうちの１つの撮影モードを利用者に選択させるか、または被写体のダイナミックレンジに基づいて撮影モードを自動的に選択する選択ステップと、被写体のダイナミックレンジに基づいて、撮像時の露出を制御する露出制御ステップと、撮影モードに従い、撮像ステップの処理で撮像された感度モザイク画像を元にして、広ダイナミックレンジ画像または高解像度画像を生成する画像処理ステップとを含み、露出制御ステップは、ダイナミックレンジ優先撮影モードにおいて、低感度の受光素子によって撮像された低感度画素の飽和レベルが被写体のダイナミックレンジの上限値に一致するように露出を制御し、解像度優先撮影モードにおいて、高感度の受光素子によって撮像された高感度画素の飽和レベルが被写体のダイナミックレンジの上限値に一致するように露出を制御し、選択ステップは、被写体のダイナミックレンジが受光素子のダイナミックレンジよりも広い場合、撮影モードをダイナミックレンジ優先撮影モードに決定し、被写体のダイナミックレンジが受光素子のダイナミックレンジよりも狭い場合、撮影モードを解像度優先撮影モードに決定し、画像処理ステップは、ダイナミックレンジ優先撮影モードにおいて欠落画素を補間し、解像度優先撮影モードにおいて欠落画素の補間を省略する処理を撮像装置のコンピュータに実行させるプログラムが記録されていることを特徴とする。
【００１９】
本発明のプログラムは、被写体を撮像して、対応する感度モザイク画像を生成する撮像ステップと、被写体のダイナミックレンジを測定する測定ステップと、複数の撮影モードのうちの１つの撮影モードを利用者に選択させるか、または被写体のダイナミックレンジに基づいて撮影モードを自動的に選択する選択ステップと、被写体のダイナミックレンジに基づいて、撮像時の露出を制御する露出制御ステップと、撮影モードに従い、撮像ステップの処理で撮像された感度モザイク画像を元にして、広ダイナミックレンジ画像または高解像度画像を生成する画像処理ステップとを含み、露出制御ステップは、ダイナミックレンジ優先撮影モードにおいて、低感度の受光素子によって撮像された低感度画素の飽和レベルが被写体のダイナミックレンジの上限値に一致するように露出を制御し、解像度優先撮影モードにおいて、高感度の受光素子によって撮像された高感度画素の飽和レベルが被写体のダイナミックレンジの上限値に一致するように露出を制御し、選択ステップは、被写体のダイナミックレンジが受光素子のダイナミックレンジよりも広い場合、撮影モードをダイナミックレンジ優先撮影モードに決定し、被写体のダイナミックレンジが受光素子のダイナミックレンジよりも狭い場合、撮影モードを解像度優先撮影モードに決定し、画像処理ステップは、ダイナミックレンジ優先撮影モードにおいて欠落画素を補間し、解像度優先撮影モードにおいて欠落画素の補間を省略する処理を撮像装置のコンピュータに実行させることを特徴とする。
【００２０】
本発明においては、被写体のダイナミックレンジが測定され、複数の撮影モードのうちの１つの撮影モードを利用者に選択させるか、または被写体のダイナミックレンジに基づいて撮影モードが自動的に選択され、被写体のダイナミックレンジに基づいて、撮像時の露出が制御される。そして、撮影モードに従って、撮像された感度モザイク画像を元にして、広ダイナミックレンジ画像または高解像度画像が生成される。
【００２６】
【発明の実施の形態】
以下、本発明を適用したディジタルスチルカメラの構成例について、図を参照して説明する。図３は、本発明を適用したディジタルスチルカメラの外観を示す斜視図である。このディジタルスチルカメラ１１の正面には、レンズ１２が設けられている。ディジタルスチルカメラ１１の上面には、撮影タイミングを指示するためのレリーズボタン１３、撮影モードを設定するための撮影モードスイッチ１４、および露出モードを設定するための露出モードダイヤル１５が設けられている。
【００２７】
図４は、ディジタルスチルカメラ１１の上面図である。レリーズボタン１３は、ユーザが露出制御の開始を指示するときに半押しすることができ、撮影タイミングを指示するときに全押しすることができるようになされている。
【００２８】
撮影モードスイッチ１４は、通常のダイナミックレンジであって解像度劣化が少ない高解像画像を取得できる解像度優先（ＨＲ）撮影モード、通常のダイナミックレンジよりも広いダイナミックレンジの画像信号を取得できるダイナミックレンジ優先（ＷＤＲ）撮影モード、および解像度優先撮影モードまたはダイナミックレンジ優先撮影モードを自動的に選択する自動選択（ＡＵＴＯ）撮影モードのいずれかの撮影モードをユーザが選択できるようになされている。
【００２９】
露出モードダイヤル１５は、予め設定されたシャッタ速度と絞りで露出量が決定されるプログラム（Ｐ）自動露出モード、絞りを優先して露出量が決定される絞り優先（Ａ）自動露出モード、シャッタ速度を優先して露出量が決定されるシャッタ優先（Ｓ）自動露出モード、または撮影度にユーザがシャッタ速度と絞りを決定するマニュアル（Ｍ）露出のいずれかの露出をユーザが選択できるようになされている。
【００３０】
図５は、ディジタルカメラ１１の内部構成例を示している。撮像部２１は、被写体の光学像を集光するレンズ１２、光の入射量を制限する絞り２２、入射光の透過を制限するＮＤフィルタ２３、および複数の受光素子からなる単板式固体撮像素子２４から構成される。なお、ＮＤフィルタ２３の代わりに、光の透過を制限する他のフィルタ等を用いてもよい。
【００３１】
図６は、単板式固体撮像素子２４の構成を示している。１個の矩形が１個の受光素子に相当する。単板式固体撮像素子２４を構成する受光素子のうち、例えば図示するように市松模様状に配置された受光素子４１ａだけが、光の透過を制限するＮＤフィルタ２３で覆われている。それに対して、受光素子４１ｂは、光の透過を制限するＮＤフィルタ２３で覆われていない。
【００３２】
これにより、受光素子４１ａは、被写体のダイナミックレンジに対して、主に明るい方の帯域に感度を有することとなり、受光素子４１ｂは、被写体のダイナミックレンジに対して、主に暗い方の帯域に感度を有することとなる。以下、受光素子４１ａを低感度受光素子４１ａ、受光素子４１ｂを高感度受光素子４１ｂとも記述する。
【００３３】
さらに、単板式固体撮像素子２４の各受光素子は、ＲＧＢ等の各色成分が例えばベイヤ配列をなしている色フィルタ（不図示）に覆われている。
【００３４】
このように構成される撮像部２１は、隣り合う画素の撮影時の感度が異なり、また、隣り合う画素の有する色成分が異なる画像を撮像し、画像処理部２５に供給する。以下、撮像部２１によって画像処理部２５に供給される画像を、感度モザイク画像と記述する。
【００３５】
また、撮像部２１は、例えば、感度モザイク画像の画素を行単位で間引くことにより、逐次、モニタ画像を生成して自動露出制御部２６に出力する。なお、モニタ画像は、高感度で撮影された画素と低感度で撮影された画素の配置や割合、各色成分を有する画素の配置や割合が、感度モザイク画像のそれと同一となるようになされている。
【００３６】
画像処理部２５は、設定される撮影モードに対応し、撮像部２１が生成した感度モザイク画像を元にして、広ダイナミックレンジ画像または高解像度画像を生成する。自動露出制御部２６は、撮像部２１が生成したモニタ画像に基づき、設定される撮影モードに対応して撮像部２１の露出を制御する。
【００３７】
制御部２７は、記録媒体２８に記憶されている制御用プログラムと操作部２９から入力される操作信号に基づいて自動露出制御部２６および画像処理部２５を制御する。
【００３８】
レリーズボタン１３乃至露出モードダイヤル１５に相当する操作部２９は、レリーズボタン１３乃至露出モードダイヤル１５に対するユーザの操作に対応する操作信号を制御部２７に出力する。
【００３９】
図７は、単板式固体撮像素子２４を構成する低感度受光素子４１ａおよび高感度受光素子４１ｂそれぞれの輝度に対する感度帯域を模式的に示している。図示するように、低感度受光素子４１ａと高感度受光素子４１ｂのダイナミックレンジ（すなわち、感度帯域の幅）は同一であり、それぞれの感度帯域の一部が重なるようになされている。この重なり具合は、撮像部２１に設けられるＮＤフィルタ２３の透過率によって決定される。したがって、低感度受光素子４１ａの感度帯域と高感度受光素子４１ｂの感度帯域との相対的な位置関係は、ＮＤフィルタ２３の透過率を変えない限り固定とされている。
【００４０】
なお、低感度受光素子４１ａの感度帯域と高感度受光素子４１ｂの感度帯域は、その相対的な位置関係を崩すことなく、設定される撮影モードに対応して制御される撮像部２１の露出（シャッタ速度および絞り）に応じて、任意の方向にシフトされる。
【００４１】
ここで、撮影モードに対応して制御される低感度受光素子４１ａおよび高感度受光素子４１ｂそれぞれの感度帯域の関係について、図８乃至図１１に示すヒストグラムを参照して説明する。なお、図８乃至図１１において、各横軸は、輝度レベルの対数を示しており、縦軸は、分布の度数を示している。
【００４２】
始めに、ダイナミックレンジ優先撮影モードに対応する低感度受光素子４１ａおよび高感度受光素子４１ｂそれぞれの感度帯域の制御について説明する。ダイナミックレンジ優先撮影モードにおいては、被写体のダイナミックレンジのうち、明るい方の領域を低感度受光素子４１ａが受け持ち、暗い方の領域を高感度受光素子４１ｂが受け持つように自動露出を制御する。具体的には、被写体の輝度ヒストグラムの上限値に、低感度受光素子４１ａの飽和レベルが一致するように撮像素子２１の露出が制御される。
【００４３】
なお、ダイナミックレンジ優先撮影モードにおいて、低感度受光素子４１ａおよび高感度受光素子４１ｂのノイズレベルよりも低い輝度の画素はノイズ成分が支配的であってその値の信頼性が低いので、切り捨てるようになされている。また、それぞれの飽和レベルよりも高い輝度の画素は、その値が被写体の実際の輝度に対応していないので、切り捨てるようになされている。なお、切り捨てられた画素（欠落画素）は、周囲の画素を用いた補間によって復元される。その詳細は後述する。
【００４４】
図８は、被写体の輝度ダイナミックレンジが、低感度受光素子４１ａのダイナミックレンジ（または高感度受光素子４１ｂのダイナミックレンジ）よりも広い場合の例を示している。
【００４５】
図８Ａは、被写体の輝度ヒストグラムを示している。以下、被写体の輝度ヒストグラムを３つに領域に分割して領域ａ乃至ｃと記述する。
【００４６】
図８Ｂは、低感度受光素子４１ａのダイナミックレンジ（両矢印で示す）と低感度受光素子４１ａに対応する画素（以下、低感度画素と記述する）の輝度ヒストグラムを示している。図示するように、低感度受光素子４１ａでは、被写体の輝度ヒストグラムの暗い方の領域ａの情報が欠落したものとなる。なお、低感度受光素子４１ａのダイナミックレンジの下限側の分布は、被写体の輝度ヒストグラムの暗い方の領域ａの存在に起因して、被写体の輝度ヒストグラムよりも度数が高くなる。
【００４７】
図８Ｃは、高感度受光素子４１ｂのダイナミックレンジ（両矢印で示す）と高感度受光素子４１ｂに対応する画素（以下、高感度画素と記述する）の輝度ヒストグラムを示している。図示するように、高感度受光素子４１ｂでは、被写体の輝度ヒストグラムの明るい方の領域ｃの情報が欠落したものとなる。なお、高感度受光素子４１ｂのダイナミックレンジの上限側の分布は、被写体の輝度ヒストグラムの明るい方の領域ｃの存在に起因して、被写体の輝度ヒストグラムよりも度数が高くなる。
【００４８】
図８の場合、明るい方の領域ｃは、低感度受光素子４１ａによって情報が取得され、暗い方の領域ａは、高感度受光素子４１ｂによって情報が取得されるので、これらの情報を空間的に補間することにより、広ダイナミックレンジ画像を生成することができる。このとき、中間の領域ｂでは、高感度画素および低感度画素の情報があるので解像度の劣化は生じないが、暗い方の領域ａおよび明るい方の領域ｃでは、高感度画素または低感度画素の一方しか情報がないので、解像度の劣化が生じる。
【００４９】
また、図８のように、被写体のダイナミックレンジが受光素子のダイナミックレンジよりも広い場合、通常の撮像素子で発生するような白とび（飽和）や黒つぶれ（ノイズ）を引き起こさない広ダイナミックレンジ画像を出力することができる。
【００５０】
図９は、被写体の輝度ダイナミックレンジが、低感度受光素子４１ａのダイナミックレンジ（または高感度受光素子４１ｂのダイナミックレンジ）よりも狭い場合の例を示している。
【００５１】
図９Ａは、被写体の輝度ヒストグラムを示している。以下、被写体の輝度ヒストグラムを２つの領域に分割して領域ｄ，ｅと記述する。
【００５２】
図９Ｂは、低感度受光素子４１ａのダイナミックレンジ（両矢印で示す）と低感度画素の輝度ヒストグラムを示している。図示するように、低感度受光素子４１ａは、被写体の輝度ヒストグラムの全ての領域ｄ，ｅの情報を取得できることになる。
【００５３】
図９Ｃは、高感度受光素子４１ｂのダイナミックレンジ（両矢印で示す）と高感度画素の輝度ヒストグラムを示している。図示するように、高感度受光素子４１ｂでは、被写体の輝度ヒストグラムの明るい方の領域ｅの情報が欠落したものとなる。なお、高感度受光素子４１ｂのダイナミックレンジの上限側の分布は、被写体の輝度ヒストグラムの明るい方の領域ｅの存在に起因して、被写体の輝度ヒストグラムよりも度数が高くなる。
【００５４】
図９の場合、輝度ヒストグラムの全ての領域ｄ，ｅは、低感度受光素子４１ａによって情報が取得され、暗い方の領域ｄは、高感度受光素子４１ｂによって情報が取得されるので、これらの情報を空間的に補間することにより、広ダイナミックレンジ画像を生成することができる。このとき、暗い方の領域ｄでは、高感度画素および低感度画素の情報があるので解像度の劣化は生じないが、明るい方の領域ｅでは、低感度画素の一方しか情報がないので、解像度の劣化が生じる。また、暗い領域ｄでは、高感度画素は信号対雑音比（ＳＮＲ）が大きいため、低感度画素のみで撮像する場合（通常のCCDカメラの露出設定）に比べてＳＮＲが向上する。
【００５５】
次に、解像度優先撮影モードに対応する低感度受光素子４１ａおよび高感度受光素子４１ｂそれぞれの感度帯域の制御について説明する。解像度優先撮影モードは、被写体のダイナミックレンジが、図１０に示すように、低感度受光素子４１ａのダイナミックレンジ（または高感度受光素子４１ｂのダイナミックレンジ）よりも狭い場合に適した撮影モードである。
【００５６】
解像度優先撮影モードにおいては、飽和する画素が発生しないように、具体的には、被写体の輝度ヒストグラムの上限値に、高感度受光素子４１ｂの飽和レベルが一致するように撮像素子２１の露出が制御される。
【００５７】
なお、解像度優先撮影モードにおいて、低感度受光素子４１ａおよび高感度受光素子４１ｂのノイズレベルよりも低い輝度の画素はノイズ成分が支配的ではあるが、欠落画素の補間を行わないので、そのまま保持するようになされている。
【００５８】
図１０Ａは、被写体の輝度ヒストグラムを示している。以下、被写体の輝度ヒストグラムを２つに領域に分割して領域ｆ，ｇと記述する。
【００５９】
図１０Ｂは、低感度受光素子４１ａのダイナミックレンジ（両矢印で示す）と低感度画素の輝度ヒストグラムを示している。図示するように、低感度受光素子４１ａでは、被写体の輝度ヒストグラムの全ての領域ｆ，ｇの情報を取得することができる。しかしながら、ノイズレベルを下回る領域ｆはノイズ成分が支配的になるために被写体のヒストグラムを正しく保存できていない。
【００６０】
図１０Ｃは、高感度受光素子４１ｂのダイナミックレンジ（両矢印で示す）と高感度画素の輝度ヒストグラムを示している。図示するように、高感度受光素子４１ｂでは、被写体の輝度ヒストグラムの全ての領域ｆ，ｇの情報を取得することができる。
【００６１】
図１０の場合、被写体の輝度ヒストグラムの明るい方の領域ｇでは、画素欠落が発生せず解像度が維持される。一方、暗い方の領域ｆでは、ノイズレベルを下回る輝度の画素ではノイズ成分が支配的になっているが、高感度画素を用いてある程度のノイズ除去を行うことが可能である。また、暗い方の領域ｆでは視覚的にも感受性が低いために輝度の増幅を行わない限りノイズが目立つことはない。
【００６２】
図１１は、被写体のダイナミックレンジが、低感度受光素子４１ａのダイナミックレンジ（または高感度受光素子４１ｂのダイナミックレンジ）よりも広い場合の例を示している。
【００６３】
図１１Ａは、被写体の輝度ヒストグラムを示している。以下、被写体の輝度ヒストグラムを５つに領域に分割して領域ｈ乃至ｌと記述する。
【００６４】
図１１Ｂは、低感度受光素子４１ａのダイナミックレンジ（両矢印で示す）と低感度画素の輝度ヒストグラムを示している。図示するように、低感度受光素子４１ａでは、被写体の輝度ヒストグラムのうち、領域ｋ，ｌの情報を取得することができる。ただし、ノイズレベルを下回る領域ｋはノイズ成分が支配的となる。また、低感度受光素子４１ａでは、領域ｈ乃至ｊの情報を取得することができない。
【００６５】
図１１Ｃは、高感度受光素子４１ｂのダイナミックレンジ（両矢印で示す）と高感度画素の輝度ヒストグラムを示している。図示するように、高感度受光素子４１ｂでは、被写体の輝度ヒストグラムのうち、領域ｉ乃至ｌの情報を取得することができる。
【００６６】
図１１の場合、明るい方の領域ｌでは低解像度画素と高解像度画素が存在するので解像度が維持されているが、低感度受光素子４１ａのノイズレベル以下の領域ｋではノイズが目立ち、さらに低感度受光素子４１ａのダイナミックレンジよりも暗い領域ｉ，ｊでは解像度劣化が発生する。さらに、高感度受光素子４１ｂのダイナミックレンジよりも暗い領域ｈでは全ての画素の情報が欠落してしまう。したがって、解像度優先モードでは、受光素子のダイナミックレンジよりも広いダイナミックレンジを撮像することはできない。
【００６７】
次に、図１２は、画像処理部２５の構成例を示している。画像処理部２５は、撮影モード選択部６３によって決定される撮影モードに従って動作する。図中において、実線はダイナミックレンジ優先撮影モードにおける画像信号の流れを示し、破線は解像度優先撮影モードにおける画像信号の流れを示している。
【００６８】
ダイナミックレンジ優先撮影モードにおいて、第１クリッピング部５１は、撮像部２１からの感度モザイク画像のうち、低感度受光素子４１ａと高感度受光素子４１ｂのそれぞれの飽和レベルを上回る画素を飽和レベルで置換（クリッピング）し、それぞれのノイズレベルを下回る画素をノイズレベルで置換（クリッピング）する。
【００６９】
ダイナミックレンジ優先撮影モードにおいて、感度均一化部５２は、第１クリッピング部５１から入力されるクリッピングされた感度モザイク画像の各画素に所定のゲインを乗算して、全ての画素の撮影時における感度を均一化する。以下、感度が均一化された画像を、感度均一化画像と記述する。
【００７０】
ダイナミックレンジ優先撮影モードにおいて、欠落画素補間部５４は、感度均一化部５２からの感度均一化画像のうち、第１クリッピング部５１によってクリッピングされた画素（すなわち、正しい値を有していない欠落画素）を、周囲の画素を用いて補間する。
【００７１】
ダイナミックレンジ優先撮影モードにおいて、カラーデモザイク部５５は、欠落画素補間部５４からの各画素が単一の色成分だけを有する画像に色補間処理を施すことにより、各画素が全ての色成分を有している画像、すなわち、広ダイナミック画像を生成する。
【００７２】
解像度優先撮影モードにおいて、感度均一化部５２は、撮像部２１から入力される感度モザイク画像の各画素に所定のゲインを乗算して、全ての画素の撮影時における感度を均一化する。
【００７３】
解像度優先撮影モードにおいて、第２クリッピング部５３は、感度均一化部５２からの感度均一化画像のうち、予め設定された飽和レベルを上回る画素を飽和レベルで置換する。なお、第２クリッピング部５３では、ノイズレベルを下回る画素のクリッピングは行われない。
【００７４】
解像度優先撮影モードにおいて、カラーデモザイク部５５は、第２クリッピング部５３からの各画素が単一の色成分だけを有する画像に色補間処理を施すことにより、各画素が全ての色成分を有している画像、すなわち高解像度画像を生成する。
【００７５】
図１３は、自動露出制御部２６の構成例を示している。感度均一化部６１は、撮像部２１からの高感度画素と低感度画素からなるモニタ画像の各画素に所定のゲインを乗算することによって、全ての画素の撮影時における感度を均一化する。
【００７６】
ヒストグラム検波部６２は、図１４に示すような感度が均一化されたモニタ画像の輝度のヒストグラムを生成し、さらに、図１５に示すような累積ヒストグラムを生成して、被写体のダイナミックレンジの上限値と下限値を検出する。
【００７７】
なお、図１４および図１５において、横軸は、感度が均一化されたモニタ画像の輝度を１で正規化した値を示しており、縦軸は、度数を１で正規化した値を示している。被写体のダイナミックレンジの上限値としては、累積ヒストグラムにおいて予め設定されている上限閾値に対応する輝度を検出する。被写体のダイナミックレンジの下限値としては、累積ヒストグラムにおいて予め設定されている下限閾値に対応する輝度を検出する。
【００７８】
撮影モード選択部６３は、撮影モード選択スイッチ１４が自動選択撮影モードのスイッチングされている場合、ヒストグラム検波部６２によって検出された被写体のダイナミックレンジに基づき、撮影モードを解像度優先撮影モードまたはダイナミックレンジ優先撮影モードに決定する。撮影モード選択部６３によって選択された撮影モード（解像度優先撮影モード、またはダイナミックレンジ優先撮影モード）は、制御部２７を介して画像処理部２５に通知される。
【００７９】
露出量算出部６４は、ユーザまたは撮影モード選択部６３によって決定された撮影モードおよびヒストグラム検波部６２で検出されるダイナミックレンジの上限値に基づき、絞り２２の設定値とシャッタ速度の設定値を決定して、対応する制御信号を撮像部２１に出力する。
【００８０】
なお、自動露出制御部２６を構成する感度均一化部６１乃至露出量算出部６４は、露出制御が目標値になるまで繰り返し動作するようになされている。
【００８１】
次に、自動露出制御部２６による露出制御処理について、図１６のフローチャートを参照して説明する。この露出制御処理は、レリーズボタン１３が半押しされたときに開始される。
【００８２】
ステップＳ１において、感度均一化部６１は、撮像部２１によって逐次生成されるモニタ画像の画素の感度を均一化する。ヒストグラム検波部６２は、感度が均一化されたモニタ画像の輝度のヒストグラムを生成し、さらに累積ヒストグラムを生成して、被写体のダイナミックレンジの上限値と下限値を検出する。
【００８３】
ステップＳ２において、撮影モード選択部６３は、撮影モード選択スイッチ１４が解像度優先撮影モードにスイッチングされているか、あるいは撮影モード選択スイッチ１４が自動選択撮影モードにスイッチングされていて、かつ、後述するステップＳ１０の処理において撮影モードを解像度優先撮影モードに決定したか否かを判定する。撮影モード選択スイッチ１４が解像度優先撮影モードにスイッチングされている、あるいは撮影モード選択スイッチ１４が自動選択撮影モードにスイッチングされていて、かつ、自己が撮影モードを解像度優先撮影モードに決定したと判定された場合、処理はステップＳ３に進む。
【００８４】
ステップＳ３において、露出量算出部６４は、ヒストグラム検波部６２で検出される被写体のダイナミックレンジの上限値に基づき、現在の露出が解像度優先撮影モードの目標とする状態（被写体のダイナミックレンジの上限値と、高感度受光素子４１ｂの飽和レベルが一致した状態）であるか否かを判定する。現在の露出が解像度優先撮影モードの目標とする状態ではないと判定された場合、処理はステップＳ４に進む。
【００８５】
ステップＳ４において、露出量算出部６４は、被写体のダイナミックレンジの上限値と、高感度受光素子４１ｂの飽和レベルが一致するように、絞り２２の設定値とシャッタ速度の設定値を決定して、対応する制御信号を撮像部２１に出力する。処理はステップＳ１に戻り、それ以降の処理が繰り返され、ステップＳ３において、現在の露出が解像度優先撮影モードの目標とする状態であると判定された場合、露出制御処理は終了される。この後、レリーズボタン１３が全押しされれば、適切な露出の高感度画像が生成されることになる。
【００８６】
ステップＳ２において、撮影モード選択スイッチ１４が解像度優先撮影モードにスイッチングされていない、あるいは撮影モード選択スイッチ１４が自動選択撮影モードにスイッチングされていて、かつ、後述するステップ１０の処理において撮影モードが解像度優先撮影モードに決定していないと判定された場合、処理はステップＳ５に進む。
【００８７】
ステップＳ５において、露出量算出部６４は、ヒストグラム検波部６２で検出される被写体のダイナミックレンジの上限値に基づき、現在の露出がダイナミックレンジ優先撮影モードの目標とする状態（被写体のダイナミックレンジの上限値と、低感度受光素子４１ａの飽和レベルが一致した状態）であるか否かを判定する。現在の露出がダイナミックレンジ優先撮影モードの目標とする状態ではない判定された場合、処理はステップＳ６に進む。
【００８８】
ステップＳ６において、露出量算出部６４は、被写体のダイナミックレンジの上限値と、低感度受光素子４１ａの飽和レベルが一致するように、絞り２２の設定値とシャッタ速度の設定値を決定して、対応する制御信号を撮像部２１に出力する。処理はステップＳ１に戻り、それ以降の処理が繰り返され、ステップＳ５において、現在の露出がダイナミックレンジ優先撮影モードの目標とする状態であると判定された場合、処理はステップＳ７に進む。
【００８９】
ステップＳ７において、撮影モード選択部６３は、撮影モード選択スイッチ１４がダイナミックレンジ優先撮影モードにスイッチングされているか否かを判定する。撮影モード選択スイッチ１４がダイナミックレンジ優先撮影モードにスイッチングされていると判定された場合、露出制御処理は終了される。この後、レリーズボタン１３が全押しされれば、適切な露出の高感度画像が生成されることになる。
【００９０】
ステップＳ７において、撮影モード選択部６３は、撮影モード選択スイッチ１４がダイナミックレンジ優先撮影モードにスイッチングされていないと判定された場合、すなわち、撮影モード選択スイッチ１４が自動選択露出モードにスイッチングされていると判定された場合、処理はステップＳ８に進む。ステップＳ８において、ヒストグラム検波部６２は、被写体の累積ヒストグラムに基づき、被写体のダイナミックレンジを算出する。
【００９１】
ステップＳ９において、撮影モード選択部６３は、被写体のダイナミックレンジが、低感度受光素子４１ａ（または高感度受光素子４１ｂ）のダイナミックレンジよりも広いか否かを判定する。被写体のダイナミックレンジが、低感度受光素子４１ａ（または高感度受光素子４１ｂ）のダイナミックレンジよりも広くないと判定された場合、処理はステップＳ１０に進む。ステップＳ１０において、撮影モード選択部６３は、撮影モードをダイナミックレンジ優先撮影モードに決定し、制御部２７を介して画像処理部２５に通知する。露出制御処理は終了される。この後、レリーズボタン１３が全押しされれば、適切な露出の高感度画像が生成されることになる。
【００９２】
ステップＳ９において、被写体のダイナミックレンジが、低感度受光素子４１ａ（または高感度受光素子４１ｂ）のダイナミックレンジよりも広いと判定された場合、処理はステップＳ１１に進む。ステップＳ１１において、撮影モード選択部６３は、撮影モードを解像度優先撮影モードに決定し、制御部２７を介して画像処理部２５に通知する。処理はステップＳ２に戻り、それ以降の処理が繰り返される。以上、自動露出制御部２６による露出制御処理の説明を終了する。
【００９３】
次に、自動露出制御部２６による露出制御処理の一例について、図１７乃至図２０を参照して説明する。なお、図１７乃至図２０は、同一の被写体に対応するモニタ画像であり、横軸は感度が均一化されたモニタ画像の輝度を１で正規化した値を示しており、縦軸は度数を１で正規化した値を示している。
【００９４】
図１７は、自動露出制御処理の過程におけるモニタ画像の累積ヒストグラムのであり、過露出の状態を示している。このような場合、モニタ画像の画素は飽和してしまうものが多いので、累積ヒストグラムの上限値は、輝度の最大値（すなわち、１）に近い値になっている。
【００９５】
図１８は、自動露出制御処理の過程における累積ヒストグラムの他の一例であり、露出不足の状態を示している。このような場合、モニタ画像の画素の輝度は飽和レベルに達しておらず、累積ヒストグラムの上限値は飽和レベルよりも低い値になっている。
【００９６】
図１９は、ダイナミックレンジ優先撮影モードとして露出制御が終了された状態のモニタ画像の累積ヒストグラムを示している。
【００９７】
図１７のような過露出の状態を、図１９のような状態とするためには、露出量をＣＤ０（図１７）だけ減少させて、図１７の上限値が図１９に示す低感度画素４１ａの飽和レベルに一致するように制御する。反対に、図１８のような露出不足の状態を、図１９のような状態とするためには、露出量をＣＤ１（図１８）だけ増加させて、図１８の上限値が図１９に示す低感度画素４１ａの飽和レベルに一致するように制御する。これにより、ダイナミックレンジ優先撮影モードでは、低感度受光素子４１ａおよび高感度受光素子４１ｂからなる単板式固体撮像素子２４が有するダイナミックレンジを最大限に活用することが可能となる。
【００９８】
図２０は、解像度優先撮影モードとして露出制御が終了された状態のモニタ画像の累積ヒストグラムを示している。
【００９９】
図１７のような過露出の状態を、図２０のような状態とするためには、露出量をＣｒ０（図１７）だけ減少させて、図１７の上限値が図２０に示す高感度画素４１ｂの飽和レベルに一致するように制御する。反対に、図１８のような露出不足の状態を、図２０のような状態とするためには、露出量をＣＲ１（図１８）だけ減少させて、図１８の上限値が図２０に示す高感度画素４１ｂの飽和レベルに一致するように制御する。これにより、解像度優先撮影モードでは、低感度受光素子４１ａ（または高感度受光素子４１ｂ）のダイナミックレンジで画像取得することが可能である。
【０１００】
なお、図２０に示した例では、被写体のダイナミックレンジが低感度受光素子４１ａ（または高感度受光素子４１ｂ）のダイナミックレンジよりも広いので、暗い部分はつぶれてしまっている。
【０１０１】
ただし、撮影モード選択スイッチ１４が自動選択撮影モードにスイッチングされていれば、このように被写体のダイナミックレンジが低感度受光素子４１ａ（または高感度受光素子４１ｂ）のダイナミックレンジよりも広い場合には、ダイナミックレンジ優先撮影モードに決定されるので、図１９に示すような結果を得ることができる。
【０１０２】
なお、本発明は、本実施の形態のようなディジタルスチルカメラの他、画像処理を実施するあらゆる機器に適用することが可能である。
【０１０３】
ところで、上述した一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、例えば図５の記録媒体２８からインストールされる。
【０１０４】
この記録媒体２５は、磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM(Compact Disc-Read Only Memory)、DVD(Digital Versatile Disc)を含む）、光磁気ディスク（ＭＤ(Mini Disc)を含む）、もしくは半導体メモリなどよりなるパッケージメディアにより構成されるだけでなく、コンピュータに予め組み込まれた状態でユーザに提供される、プログラムが記録されているROMやハードディスクなどで構成される。
【０１０５】
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に従って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【０１０６】
【発明の効果】
以上のように、本発明によれば、解像度を優先して補間処理を行う解像度優先モードと、ダイナミックレンジの拡大を優先して補間処理を行うダイナミックレンジ優先モードを、被写体のダイナミックレンジに応じて切り替えて使用することができ、さらに、画像の解像度の劣化を引き起こすことがないディジタルスチルカメラを実現することが可能となる。
【図面の簡単な説明】
【図１】文献１に開示されている感度モザイク画像を用いる方法の概要を説明するためのブロック図である。
【図２】図１の撮像部１に含まれる撮像素子の一例を示している。
【図３】本発明を適用したディジタルスチルカメラ１１の外観を示す斜視図である。
【図４】ディジタルスチルカメラ１１の上面図である。
【図５】ディジタルカメラ１１の内部構成例を示すブロック図である。
【図６】図５の単板式固体撮像素子２４を構成する低感度受光素子４１ａおよび高感度受光素子４１ｂの配置を示す図である。
【図７】単板式固体撮像素子２４を構成する低感度受光素子４１ａおよび高感度受光素子４１ｂそれぞれの輝度に対する感度帯域を模式的に示す図である。
【図８】撮影モードに対応して制御される低感度受光素子４１ａおよび高感度受光素子４１ｂそれぞれの感度帯域の関係を説明するための図である。
【図９】撮影モードに対応して制御される低感度受光素子４１ａおよび高感度受光素子４１ｂそれぞれの感度帯域の関係を説明するための図である。
【図１０】撮影モードに対応して制御される低感度受光素子４１ａおよび高感度受光素子４１ｂそれぞれの感度帯域の関係を説明するための図である。
【図１１】撮影モードに対応して制御される低感度受光素子４１ａおよび高感度受光素子４１ｂそれぞれの感度帯域の関係を説明するための図である。
【図１２】図５の画像処理部２５の構成例を示すブロック図である。
【図１３】図５の自動露出制御部２６の構成例を示すブロック図である。
【図１４】ヒストグラム検波部６２が生成する、感度が均一化されたモニタ画像の輝度のヒストグラムの一例を示す図である。
【図１５】ヒストグラム検波部６２が生成する、感度が均一化されたモニタ画像の輝度の累積ヒストグラムの一例を示す図である。
【図１６】自動露出制御部２６による露出制御処理を説明するフローチャートである。
【図１７】自動露出制御部２６による露出制御処理の一例を説明するための図である。
【図１８】自動露出制御部２６による露出制御処理の一例を説明するための図である。
【図１９】自動露出制御部２６による露出制御処理の一例を説明するための図である。
【図２０】自動露出制御部２６による露出制御処理の一例を説明するための図である。
【符号の説明】
１１  ディジタルスチルカメラ，  １２  レンズ，  １３  レリーズボタン，１４  撮影モード選択スイッチ，  １５  露出モードダイヤル，  ２１  撮像部，  ２２  絞り，  ２３  ＮＤフィルタ，  ２４  単板式固体撮像素子，  ２５  画像処理部，  ２６  自動露出制御部，  ２７  制御部，  ２８  記録媒体，  ２９  操作部，  ４１ａ  低感度受光素子，  ４１ｂ  高感度受光素子，  ５１  第１クリッピング部，  ５２  感度均一化部，  ５３  第２クリッピング部，  ５４  欠落画素補間部，  ５５  カラーデモザイク部，  ６１  感度均一化部，  ６２  ヒストグラム検波部，  ６３  撮影モード選択部，  ６４  露出量算出部
【図１】
0004196588.tif 000002
【図２】
0004196588.tif 000003
【図３】
0004196588.tif 000004
【図４】
0004196588.tif 000005
【図５】
0004196588.tif 000006
【図６】
0004196588.tif 000007
【図７】
0004196588.tif 000008
【図８】
0004196588.tif 000009
【図９】
0004196588.tif 000010
【図１０】
0004196588.tif 000011
【図１１】
0004196588.tif 000012
【図１２】
0004196588.tif 000013
【図１３】
0004196588.tif 000014
【図１４】
0004196588.tif 000015
【図１５】
0004196588.tif 000016
【図１６】
0004196588.tif 000017
【図１７】
0004196588.tif 000018
【図１８】
0004196588.tif 000019
【図１９】
0004196588.tif 000020
【図２０】
0004196588.tif 000021