(57)【特許請求の範囲】
【請求項１】
光電変換手段と、電荷電圧変換手段と、活性状態において、前記光電変換手段により蓄積された電荷を前記電荷電圧変換手段へ転送し、非活性状態において、前記光電変換手段により蓄積された電荷を前記電荷電圧変換手段へ転送しない転送手段と、前記電荷電圧変換手段の電圧に基づく信号を出力する出力手段とを含む画素が複数配列された画素配列と、
前記転送手段が非活性状態にある際に前記光電変換手段から前記電荷電圧変換手段にあふれ出た余剰電荷に基づく余剰信号を前記出力手段を介して前記画素配列の前記複数の画素のそれぞれから読み出して増幅するとともに、前記転送手段が活性状態にある際に前記光電変換手段から前記転送手段により前記電荷電圧変換手段へ転送された蓄積電荷に基づく蓄積信号を前記出力手段を介して前記画素配列の前記複数の画素のそれぞれから読み出して増幅する読み出し手段と、
前記読み出し手段から出力された前記余剰信号をＡ／Ｄ変換することにより余剰画像データを生成するとともに、前記読み出し手段から出力された前記蓄積信号をＡ／Ｄ変換することにより蓄積画像データを生成するＡ／Ｄ変換手段と、
前記Ａ／Ｄ変換手段から出力された前記余剰画像データに基づいて、前記読み出し手段により増幅される前記蓄積信号の信号レベルが前記Ａ／Ｄ変換手段のダイナミックレンジを圧迫するか否かを判断するとともに、前記読み出し手段により増幅される前記蓄積信号の信号レベルが前記Ａ／Ｄ変換手段のダイナミックレンジを圧迫しないと判断された場合に、前記読み出し手段が前記蓄積信号を増幅する際の読み出し増幅率を基準値より高い値となるように制御する制御手段と、を備え、
前記制御手段は、
前記余剰画像データが示す画像の画素数に対する、当該余剰画像データが示す画像において所定の信号レベル以上を有する画素数の割合である飽和度を検出する検出手段と、
前記飽和度が閾値以下である場合、前記読み出し手段により増幅される前記蓄積信号の信号レベルが前記Ａ／Ｄ変換手段のダイナミックレンジを圧迫しないと判断し、前記飽和度が前記閾値を超える場合、前記読み出し手段により増幅される前記蓄積信号の信号レベルが前記Ａ／Ｄ変換手段のダイナミックレンジを圧迫すると判断する判断手段と、
を含む
ことを特徴とする撮像システム。
【請求項２】
前記制御手段は、前記読み出し手段により増幅される前記蓄積信号の信号レベルが前記Ａ／Ｄ変換手段のダイナミックレンジを圧迫すると前記判断手段により判断される場合、前記読み出し増幅率を前記基準値より低い値となるように制御する
ことを特徴とする請求項１に記載の撮像システム。
【請求項３】
前記読み出し手段から出力された前記余剰信号と前記蓄積信号とをそれぞれアナログ増幅率で増幅するアナログ増幅手段をさらに備え、
前記制御手段は、前記読み出し手段及び前記アナログ増幅手段により増幅される前記蓄積信号の信号レベルが前記Ａ／Ｄ変換手段のダイナミックレンジを圧迫しないと前記判断手段により判断される場合、前記読み出し増幅率と前記アナログ増幅率との積が前記基準値より高い値となるように前記読み出し増幅率及び前記アナログ増幅率を制御し、前記読み出し手段及び前記アナログ増幅手段により増幅される前記蓄積信号の信号レベルが前記Ａ／Ｄ変換手段のダイナミックレンジを圧迫すると前記判断手段により判断される場合、前記読み出し増幅率と前記アナログ増幅率との積が前記基準値より低い値となるように前記読み出し増幅率及び前記アナログ増幅率を制御する
ことを特徴とする請求項２に記載の撮像システム。
【請求項４】
前記Ａ／Ｄ変換手段から出力された前記余剰画像データと前記蓄積画像データとをそれぞれデジタル増幅率で増幅するデジタル増幅手段をさらに備え、
前記制御手段は、前記読み出し手段が前記蓄積信号を増幅する際の読み出し増幅率と、前記デジタル増幅手段が前記蓄積画像データを増幅する際の前記デジタル増幅率との積が一定の値となるように、前記読み出し増幅率及び前記デジタル増幅率を制御する
ことを特徴とする請求項２に記載の撮像システム。
【請求項５】
前記制御手段は、前記読み出し手段により増幅される前記蓄積信号の信号レベルが前記Ａ／Ｄ変換手段のダイナミックレンジを圧迫しないと前記判断手段により判断される場合、前記読み出し増幅率をＭ倍（Ｍ；自然数）に制御するとともに前記デジタル増幅率をＮ倍（Ｎ；自然数）に制御し、前記読み出し手段により増幅される前記蓄積信号の信号レベルが前記Ａ／Ｄ変換手段のダイナミックレンジを圧迫すると前記判断手段により判断される場合、前記読み出し増幅率をＭ／Ｋ倍（Ｋ；自然数）に制御するとともに前記デジタル増幅率をＮ×Ｋ倍に制御する
ことを特徴とする請求項４に記載の撮像システム。
【請求項６】
光電変換手段と、電荷電圧変換手段と、活性状態において、前記光電変換手段により蓄積された電荷を前記電荷電圧変換手段へ転送し、非活性状態において、前記光電変換手段により蓄積された電荷を前記電荷電圧変換手段へ転送しない転送手段と、前記電荷電圧変換手段の電圧に基づく信号を出力する出力手段とを含む画素が複数配列された画素配列と、前記転送手段が非活性状態にある際に前記光電変換手段から前記電荷電圧変換手段にあふれ出た余剰電荷に基づく余剰信号を前記出力手段を介して前記画素配列の前記複数の画素のそれぞれから読み出して増幅するとともに、前記転送手段が活性状態にある際に前記光電変換手段から前記転送手段により前記電荷電圧変換手段へ転送された蓄積電荷に基づく蓄積信号を前記出力手段を介して前記画素配列の前記複数の画素のそれぞれから読み出して増幅する読み出し手段と、前記読み出し手段から出力された前記余剰信号をＡ／Ｄ変換することにより余剰画像データを生成するとともに、前記読み出し手段から出力された前記蓄積信号をＡ／Ｄ変換することにより蓄積画像データを生成するＡ／Ｄ変換手段とを有する撮像システムの制御方法であって、
検出手段が、前記余剰画像データが示す画像の画素数に対する、当該余剰画像データが示す画像において所定のレベル以上を有する画素数の割合である飽和度を検出する検出ステップと、
判断手段が、前記飽和度が閾値以下である場合、前記読み出し手段により増幅される前記蓄積信号の信号レベルが前記Ａ／Ｄ変換手段のダイナミックレンジを圧迫しないと判断し、前記飽和度が前記閾値を超える場合、前記読み出し手段により増幅される前記蓄積信号の信号レベルが前記Ａ／Ｄ変換手段のダイナミックレンジを圧迫すると判断する判断ステップと、
制御手段が、前記判断ステップで前記読み出し手段により増幅される前記蓄積信号の信号レベルが前記Ａ／Ｄ変換手段のダイナミックレンジを圧迫しないと判断された場合に、前記読み出し手段が前記蓄積信号を増幅する際の読み出し増幅率を基準値より高い値となるように制御する制御ステップと、
を備えたことを特徴とする撮像システムの制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像システム、及び撮像システムの制御方法に関する。
【背景技術】
【０００２】
デジタルカメラなどの撮像システムでは、ＣＭＯＳセンサなどの撮像装置が使用される。このような撮像システムの構成を、図６を用いて説明する。
【０００３】
撮像システム１００は、図６に示すように、撮像装置９０、タイミング発生部（以下ＴＧとする）９１、アンプ９２、Ａ／Ｄ変換器９３、及び画像処理部９４を備える。
【０００４】
撮像装置９０は、ＴＧ９１により駆動される。撮像装置９０から出力された画像信号（アナログ信号）は、アンプ９２により所定のアナログ増幅率で増幅される。Ａ／Ｄ変換器９３は、アンプ９２により増幅された画像信号をＡ／Ｄ変換して画像データを生成する。画像処理部９４は、Ａ／Ｄ変換器９３により生成された画像データに所定の画像処理を施して、処理後の画像データに基づいて表示用の画像や記録用の画像が得られるようにする。
【０００５】
次に、撮像装置９０の構成を、図７を用いて説明する。図７は、撮像装置９０の構成図である。
【０００６】
撮像装置９０は、画素配列ＰＡａ、複数の垂直出力線１５８及び読み出し部１６０を含む。
【０００７】
画素配列ＰＡａでは、画素１５９が行方向及び列方向に複数配列されている。画素配列ＰＡａの各画素１５９は、フォトダイオード（以下ＰＤとする）１５１、転送トランジスタ１５２、フローティングディフュージョン（以下ＦＤとする）１５３、リセットトランジスタ１５４、増幅トランジスタ１５６、及び選択トランジスタ１５７を含む。
【０００８】
ＰＤ１５１は、光に応じた電荷を蓄積する。転送トランジスタ１５２は、オンされた際、ＰＤ１５１により蓄積された電荷をＦＤ１５３へ転送する。転送トランジスタ１５２は、オフされた際、ＰＤ１５１により蓄積された電荷をＦＤ１５３へ転送しない。ＦＤ１５３は、電荷を電圧に変換する。増幅トランジスタ１５６は、ＦＤ１５３の電圧に基づく信号を増幅して出力する。リセットトランジスタ１５４は、ＦＤ１５３をリセットレベルの電圧にリセットする。リセットトランジスタ１５４は、そのドレインがリセット電源１５５に接続されている。増幅トランジスタ１５６は、そのゲートがＦＤ１５３に接続されており、そのドレインが所定の電源に接続されており、そのソースが選択トランジスタ１５７を介して垂直出力線１５８に接続されている。
【０００９】
複数の垂直出力線１５８のそれぞれは、画素配列ＰＡａの各列の画素１５９に接続されている。また、それぞれの垂直出力線１５８には少なくとも１つの定電流源１６１が接続されており、選択トランジスタ１５７がオンされた際に、定電流源１６１と増幅トランジスタ１５６とがソースフォロワ動作を行う。これにより、ＦＤ１５３の電圧に基づく信号は、増幅トランジスタ１５６により増幅されて垂直出力線１５８へ読み出される。
【００１０】
読み出し部１６０は、垂直出力線１５８を介して各列の画素１５９から信号を読み出す。読み出し部１６０は、ノイズ信号転送部１６５、ノイズ信号保持容量１６４、ノイズ信号出力線１６７、光信号転送部１６３、光信号保持容量１６２、光信号出力線１６６、及び差動アンプ１６８を含む。読み出し部１６０は、光信号からノイズ信号を除去して画像信号を得るためのノイズ除去処理を行う。
【００１１】
ノイズ信号転送部１６５は、図７の右側の端子に接続されるようにオンした際に、垂直出力線１５８により画素１５９から伝達されたノイズ信号を、ノイズ信号保持容量１６４へ転送する。ノイズ信号は、リセットトランジスタ１５４によりＦＤ１５３がリセットされた状態で増幅トランジスタ１５６から垂直出力線１５８へ読み出される信号である。ノイズ信号転送部１６５は、図７の左側の端子に接続されるようにオンした際に、ノイズ信号保持容量１６４に保持されたノイズ信号を、ノイズ信号出力線１６７へ転送する。
【００１２】
ノイズ信号保持容量１６４は、垂直出力線１５８により画素１５９から伝達されたノイズ信号を一時的に記憶（保持）するためのメモリとして機能する。
【００１３】
ノイズ信号出力線１６７は、ノイズ信号保持容量１６４から転送されたノイズ信号を差動アンプ１６８へ伝達する。
【００１４】
光信号転送部１６３は、図７の右側の端子に接続されるようにオンした際に、垂直出力線１５８により画素１５９から伝達された光信号を、光信号保持容量１６２へ転送する。光信号は、ＰＤ１５１で蓄積されＦＤ１５３へ転送された電荷に応じた信号（画像信号）にノイズ信号が重畳された信号であって、転送トランジスタ１５２がオンされた後に増幅トランジスタ１５６から垂直出力線１５８へ読み出される信号である。光信号転送部１６３は、図７の左側の端子に接続されるようにオンした際に、光信号保持容量１６２に保持された光信号を、光信号出力線１６６へ転送する。
【００１５】
光信号保持容量１６２は、垂直出力線１５８により画素１５９から伝達された光信号を一時的に記憶（保持）するためのメモリとして機能する。
【００１６】
光信号出力線１６６は、光信号保持容量１６２から転送された光信号を差動アンプ１６８へ伝達する。
【００１７】
差動アンプ１６８は、ノイズ信号出力線１６７へ転送されたノイズ信号と、光信号出力線１６６へ転送された光信号との差分を演算する（ノイズ除去処理する）ことにより、画像信号を生成するとともに所定の読み出し増幅率で増幅する。
【００１８】
次に、撮像装置９０の動作を、図８を用いて説明する。図８に示すパルスは、いずれも、ＴＧ９１により撮像装置９０へ供給される。
【００１９】
タイミングＴ１０１では、ＴＧ９１が、画素配列ＰＡａにおける所定の画素の選択トランジスタ１５７のゲートにアクティブな選択パルスを供給する。これにより、所定の画素では、選択トランジスタ１５７がオンして、選択された状態になる。以下では、選択された所定の画素を中心に説明する。
【００２０】
ＴＧ９１は、リセットトランジスタ１５４のゲートに、アクティブなリセットパルスを供給している。これにより、リセットトランジスタ１５４は、オンして、ＦＤ１５３をリセットレベルの電圧にリセットしている。増幅トランジスタ１５６は、リセットレベルの電圧に基づく信号を増幅して、ノイズ信号として垂直出力線１５８へ出力する。
【００２１】
タイミングＴ１０２では、ＴＧ９１が、リセットトランジスタ１５４のゲートに、ノンアクティブなリセットパルスを供給する。これにより、リセットトランジスタ１５４は、オフする。
【００２２】
タイミングＴ１０３では、ＴＧ９１が、ノイズ信号転送部１６５に、アクティブな第１メモリパルスを供給する。これにより、ノイズ信号転送部１６５は、図７の右側の端子に接続されるようにオンすることにより、垂直出力線１５８により画素１５９から伝達されたノイズ信号を、ノイズ信号保持容量１６４へ転送する。
【００２３】
タイミングＴ１０４では、ＴＧ９１が、ノイズ信号転送部１６５に、ノンアクティブな第１メモリパルスを供給する。これにより、ノイズ信号転送部１６５は、オフする。ノイズ信号保持容量１６４は、垂直出力線１５８により画素１５９から伝達されたノイズ信号を一時的に記憶（保持）する。
【００２４】
タイミングＴ１０５では、ＴＧ９１が、転送トランジスタ１５２のゲートに、アクティブな転送パルスを供給する。これにより、転送トランジスタ１５２は、オンして、ＰＤ１５１により蓄積された電荷をＦＤ１５３へ転送する。ＦＤ１５３は、転送された電荷を電圧に変換する。増幅トランジスタ１５６は、ＦＤ１５３の電圧に基づく信号を増幅して、光信号として垂直出力線１５８へ出力する。
【００２５】
タイミングＴ１０６では、ＴＧ９１が、転送トランジスタ１５２のゲートに、ノンアクティブな転送パルスを供給する。これにより、転送トランジスタ１５２は、オフする。
【００２６】
タイミングＴ１０７では、ＴＧ９１が、光信号転送部１６３に、アクティブな第２メモリパルスを供給する。これにより、光信号転送部１６２は、図７の右側の端子に接続されるようにオンすることにより、垂直出力線１５８により画素１５９から伝達された光信号を、光信号保持容量１６２へ転送する。
【００２７】
タイミングＴ１０８では、ＴＧ９１が、光信号転送部１６３に、ノンアクティブな第２メモリパルスを供給する。これにより、光信号転送部１６３は、オフする。光信号保持容量１６２は、垂直出力線１５８により画素１５９から伝達された光信号を一時的に記憶（保持）する。
【００２８】
タイミングＴ１０９〜Ｔ１１０の期間では、ＴＧ９１が、ノイズ信号転送部１６５及び光信号転送部１６３に、アクティブな読み出しパルスを供給する。これにより、ノイズ信号転送部１６５は、図７の左側の端子に接続されるようにオンすることにより、ノイズ信号保持容量１６４に保持されたノイズ信号を、ノイズ信号出力線１６７へ転送する。光信号転送部１６３は、図７の左側の端子に接続されるようにオンすることにより、光信号保持容量１６２に保持された光信号を、光信号出力線１６６へ転送する。
【００２９】
差動アンプ１６８は、ノイズ信号出力線１６７へ転送されたノイズ信号と、光信号出力線１６６へ転送された光信号との差分を演算することにより、ノイズ信号が除去された画像信号を生成するとともにその画像信号を所定の読み出し増幅率で増幅する。差動アンプ１６８は、画像信号（アナログ信号）を後段（図６に示すアンプ９２）へ出力する。
【特許文献１】特開２００６−２２２７６２号公報
【発明の開示】
【発明が解決しようとする課題】
【００３０】
図６〜図８に示す撮像システム１００では、読み出し部１６０がノイズ除去処理を行うので、ノイズ信号が光信号から除去された画像信号を得ることができる。一方、撮像装置９０から出力された後に信号へ混入するノイズ成分は、除去しにくい。画素配列ＰＡａの各画素１５９から読み出される画像信号のＳ／Ｎ比を向上するためには、撮像装置９０から出力される際の読み出し増幅率を大きくすることが好ましい。
【００３１】
しかし、読み出し増幅率を大きくすると、撮像装置９０から出力された後にＡ／Ｄ変換器へ供給される画像信号の信号レベルがＡ／Ｄ変換器のダイナミックレンジを圧迫してしまう可能性がある。すなわち、撮像装置９０から出力された後にＡ／Ｄ変換器へ供給される画像信号の信号レベルが、Ａ／Ｄ変換器により十分な精度でＡ／Ｄ変換可能な信号の範囲から外れる可能性が高くなる。
【００３２】
本発明の目的は、画像信号の信号レベルがＡ／Ｄ変換器のダイナミックレンジを圧迫しない範囲で、画像信号のＳ／Ｎ比を向上することにある。
【課題を解決するための手段】
【００３３】
本発明の第１側面に係る撮像システムは、光電変換手段と、電荷電圧変換手段と、活性状態において、前記光電変換手段により蓄積された電荷を前記電荷電圧変換手段へ転送し、非活性状態において、前記光電変換手段により蓄積された電荷を前記電荷電圧変換手段へ転送しない転送手段と、前記電荷電圧変換手段の電圧に基づく信号を出力する出力手段とを含む画素が複数配列された画素配列と、前記転送手段が非活性状態にある際に前記光電変換手段から前記電荷電圧変換手段にあふれ出た余剰電荷に基づく余剰信号を前記出力手段を介して前記画素配列の前記複数の画素のそれぞれから読み出して増幅するとともに、前記転送手段が活性状態にある際に前記光電変換手段から前記転送手段により前記電荷電圧変換手段へ転送された蓄積電荷に基づく蓄積信号を前記出力手段を介して前記画素配列の前記複数の画素のそれぞれから読み出して増幅する読み出し手段と、前記読み出し手段から出力された前記余剰信号をＡ／Ｄ変換することにより余剰画像データを生成するとともに、前記読み出し手段から出力された前記蓄積信号をＡ／Ｄ変換することにより蓄積画像データを生成するＡ／Ｄ変換手段と、前記Ａ／Ｄ変換手段から出力された前記余剰画像データに基づいて、前記読み出し手段により増幅される前記蓄積信号の信号レベルが前記Ａ／Ｄ変換手段のダイナミックレンジを圧迫するか否かを判断するとともに、前記読み出し手段により増幅される前記蓄積信号の信号レベルが前記Ａ／Ｄ変換手段のダイナミックレンジを圧迫しないと判断された場合に、前記読み出し手段が前記蓄積信号を増幅する際の読み出し増幅率を基準値より高い値となるように制御する制御手段と、を備え、前記制御手段は、前記余剰画像データが示す画像の画素数に対する、当該余剰画像データが示す画像において所定の信号レベル以上を有する画素数の割合である飽和度を検出する検出手段と、前記飽和度が閾値以下である場合、前記読み出し手段により増幅される前記蓄積信号の信号レベルが前記Ａ／Ｄ変換手段のダイナミックレンジを圧迫しないと判断し、前記飽和度が前記閾値を超える場合、前記読み出し手段により増幅される前記蓄積信号の信号レベルが前記Ａ／Ｄ変換手段のダイナミックレンジを圧迫すると判断する判断手段と、を含むことを特徴とする。
【００３５】
本発明の第３側面に係る撮像システムの制御方法は、光電変換手段と、電荷電圧変換手段と、活性状態において、前記光電変換手段により蓄積された電荷を前記電荷電圧変換手段へ転送し、非活性状態において、前記光電変換手段により蓄積された電荷を前記電荷電圧変換手段へ転送しない転送手段と、前記電荷電圧変換手段の電圧に基づく信号を出力する出力手段とを含む画素が複数配列された画素配列と、前記転送手段が非活性状態にある際に前記光電変換手段から前記電荷電圧変換手段にあふれ出た余剰電荷に基づく余剰信号を前記出力手段を介して前記画素配列の前記複数の画素のそれぞれから読み出して増幅するとともに、前記転送手段が活性状態にある際に前記光電変換手段から前記転送手段により前記電荷電圧変換手段へ転送された蓄積電荷に基づく蓄積信号を前記出力手段を介して前記画素配列の前記複数の画素のそれぞれから読み出して増幅する読み出し手段と、前記読み出し手段から出力された前記余剰信号をＡ／Ｄ変換することにより余剰画像データを生成するとともに、前記読み出し手段から出力された前記蓄積信号をＡ／Ｄ変換することにより蓄積画像データを生成するＡ／Ｄ変換手段とを有する撮像システムの制御方法であって、検出手段が、前記余剰画像データが示す画像の画素数に対する、当該余剰画像データが示す画像において所定のレベル以上を有する画素数の割合である飽和度を検出する検出ステップと、判断手段が、前記飽和度が閾値以下である場合、前記読み出し手段により増幅される前記蓄積信号の信号レベルが前記Ａ／Ｄ変換手段のダイナミックレンジを圧迫しないと判断し、前記飽和度が前記閾値を超える場合、前記読み出し手段により増幅される前記蓄積信号の信号レベルが前記Ａ／Ｄ変換手段のダイナミックレンジを圧迫すると判断する判断ステップと、制御手段が、前記判断ステップで前記読み出し手段により増幅される前記蓄積信号の信号レベルが前記Ａ／Ｄ変換手段のダイナミックレンジを圧迫しないと判断された場合に、前記読み出し手段が前記蓄積信号を増幅する際の読み出し増幅率を基準値より高い値となるように制御する制御ステップと、を備えたことを特徴とする。
【発明の効果】
【００３７】
本発明によれば、画像信号の信号レベルがＡ／Ｄ変換器のダイナミックレンジを圧迫しない範囲で、画像信号のＳ／Ｎ比を向上することができる。
【発明を実施するための最良の形態】
【００３８】
本発明の実施形態に係る撮像システム１を、図１を用いて説明する。図１は、本発明の実施形態に係る撮像システム１の構成図である。
【００３９】
撮像システム１は、次の構成要素を備える。
【００４０】
５１は、被写体の像を撮像装置５５の撮像面（画素配列）に形成するレンズである。５２は、レンズ５１を通過後に撮像装置５５へ導かれる光の量を制御するための絞りである。絞り５２は、絞り制御部６３によりその開度が制御される。５４は、撮像装置５５に入射する光の波長又は空間周波数を制限する光学フィルタである。
【００４１】
５５は、レンズ５１により画素配列に形成された被写体の像を画像信号に変換するための撮像装置である。撮像装置５５は、画素配列から画像信号を読み出して出力する。
【００４２】
５６は、撮像装置５５により出力される画像信号のアナログ処理を行うためのアナログフロントエンド（以下、ＡＦＥとする）である。ＡＦＥ５６は、アンプ（アナログ増幅手段）５８及びＡ／Ｄ変換器５９を含む。アンプ５８は、画像信号（アナログ信号）を所定のアナログ増幅率で増幅する。Ａ／Ｄ変換器５９は、アンプ５８により増幅された画像信号をＡ／Ｄ変換して画像データを生成する。
【００４３】
画像処理部６０は、Ａ／Ｄ変換器５９により生成された画像データに所定の画像処理を施す。所定の画像処理は、画像データに各種の補正を行うための処理、画像データの解像度を変換するための処理などを含む。
【００４４】
６５は、撮像装置５５、ＡＦＥ５６、及び画像処理部６０のそれぞれに、タイミング信号を供給するためのタイミング発生部（以下ＴＧとする）である。６１は、撮像システム１の各部を全体的に制御するためのシステム制御ＣＰＵである。６２は、画像データを一時的に記憶するための画像メモリである。
【００４５】
６６は、画像データに応じた画像を表示するための表示インターフェース（Ｉ／Ｆ）部である。６７は、液晶ディスプレイ等の表示部である。すなわち、表示インターフェース部６６は、画像データを表示用のアナログ信号にＤ／Ａ変換して、その表示用のアナログ信号に応じた画像を表示部６７に表示する。
【００４６】
６８は、画像データを記録媒体に記録したり、画像データを記録媒体から読み出したりするための記録インターフェース（Ｉ／Ｆ）部である。６９は、画像データを記録するための半導体メモリ等の記録媒体であり、記録インターフェース部６８に着脱可能に構成されている。すなわち、記録インターフェース部６８は、システム制御ＣＰＵ６１から画像データを受け取り、その画像データを圧縮した後、圧縮された画像データを記録媒体６９へ記録する。また、記録インターフェース部６８は、圧縮された画像データを記録媒体６９から読み出した後、圧縮された画像データを伸張してシステム制御ＣＰＵ６１へ供給する。
【００４７】
７０は、外部コンピュータ７１等と通信するための外部インターフェース（Ｉ／Ｆ）部である。
【００４８】
次に、撮像装置５５の構成を、図２を用いて説明する。図２は、本発明の実施形態における撮像装置５５の構成図である。
【００４９】
撮像装置５５は、画素配列ＰＡ、複数の垂直出力線３８及び読み出し部２６０を含む。
【００５０】
画素配列ＰＡでは、画素３９が行方向及び列方向に複数配列されている。画素配列ＰＡの各画素３９は、フォトダイオード（光電変換手段、以下ＰＤとする）３１、及び転送トランジスタ３２を含む。各画素３９は、フローティングディフュージョン（電荷電圧変換手段、以下ＦＤとする）３３、リセットトランジスタ３４、増幅トランジスタ（出力手段）３６、及び選択トランジスタ３７を含む。
【００５１】
ＰＤ３１は、光に応じた電荷を蓄積する。転送トランジスタ３２は、オンされた際（活性状態において）、ＰＤ３１により蓄積された電荷をＦＤ３３へ転送する。転送トランジスタ３２は、オフされた際（非活性状態において）、ＰＤ３１により蓄積された電荷をＦＤ３３へ転送しない。ＦＤ３３は、電荷を電圧に変換する。増幅トランジスタ３６は、ＦＤ３３の電圧に基づく信号を増幅して出力する。リセットトランジスタ３４は、ＦＤ３３をリセットレベルの電圧にリセットする。リセットトランジスタ３４は、そのドレインがリセット電源３５に接続されている。増幅トランジスタ３６は、そのゲートがＦＤ３３に接続されており、そのドレインが所定の電源に接続されており、そのソースが選択トランジスタ３７を介して垂直出力線３８に接続されている。
【００５２】
ここで、各画素３９の断面構成は、図３に示すように、転送トランジスタ３２がオフされている際には、ＰＤ３１とＦＤ３３との間に電位障壁がある。しかし、ＰＤ３１が光電変換した電荷の量がその飽和電荷量を超えると、超えた分の電荷、すなわち余剰電荷が、電位障壁の乗り越えてＰＤ３１からＦＤ３３へあふれ出すようになっている。なお、図３は、各画素３９の断面構成及びポテンシャルの分布を示す図である。
【００５３】
複数の垂直出力線３８のそれぞれは、画素配列ＰＡの各列の画素３９に接続されている。また、それぞれの垂直出力線３８には少なくとも１つの定電流源１１が接続されており、選択トランジスタ３７がオンされた際に、定電流源１１と増幅トランジスタ３６とがソースフォロワ動作を行う。これにより、ＦＤ３３の電圧に基づく信号は、増幅トランジスタ３６により増幅されて垂直出力線３８へ読み出される。
【００５４】
読み出し部２６０は、垂直出力線３８を介して各列の画素３９から余剰信号及び蓄積信号をそれぞれ異なるタイミングで読み出す。すなわち、読み出し部２６０は、転送トランジスタ３２がオフされた際にＰＤ３１からＦＤ３３にあふれ出た余剰電荷に基づく余剰信号を画素配列ＰＡの複数の画素のそれぞれから読み出して増幅する。読み出し部２６０は、増幅した余剰信号をアンプ５８（図１参照）へ出力する。また、読み出し部２６０は、転送トランジスタ３２がオンされた際にＰＤ３１からＦＤ３３へ転送された蓄積電荷に基づく蓄積信号を画素配列ＰＡの複数の画素のそれぞれから読み出して増幅する。読み出し部２６０は、増幅した蓄積信号をアンプ５８（図１参照）へ出力する。
【００５５】
読み出し部２６０は、ノイズ信号転送部１５、ノイズ信号保持容量１４、ノイズ信号出力線１７、光信号転送部１３、光信号保持容量１２、スイッチ２０，２１、容量１９，２２、及び差動アンプ１８を含む。読み出し部２６０は、光信号からノイズ信号を除去して画像信号を得るためのノイズ除去処理を、余剰信号及び蓄積信号についてそれぞれ行う。
【００５６】
ノイズ信号転送部１５は、図７の右側の端子に接続されるようにオンした際に、垂直出力線３８により画素３９から伝達されたノイズ信号を、ノイズ信号保持容量１４へ転送する。ノイズ信号は、リセットトランジスタ３４によりＦＤ３３がリセットされた状態で増幅トランジスタ３６から垂直出力線３８へ読み出される信号である。ノイズ信号転送部１５は、図７の左側の端子に接続されるようにオンした際に、ノイズ信号保持容量１４に保持されたノイズ信号を、ノイズ信号出力線１７へ転送する。
【００５７】
ノイズ信号保持容量１４は、垂直出力線３８により画素３９から伝達されたノイズ信号を一時的に記憶（保持）するためのメモリとして機能する。
【００５８】
ノイズ信号出力線１７は、ノイズ信号保持容量１４から転送されたノイズ信号を差動アンプ１８へ伝達する。
【００５９】
光信号転送部１３は、図７の右側の端子に接続されるようにオンした際に、垂直出力線３８により画素３９から伝達された光信号を、光信号保持容量１２へ転送する。光信号は、ＰＤ３１で蓄積されＦＤ３３へ転送された電荷に応じた信号にノイズ信号が重畳された信号であって、転送トランジスタ３２がオンされた後に増幅トランジスタ３６から垂直出力線３８へ読み出される信号である。光信号転送部１３は、図７の左側の端子に接続されるようにオンした際に、光信号保持容量１２に保持された光信号を、光信号出力線１６へ転送する。
【００６０】
光信号保持容量１２は、垂直出力線３８により画素３９から伝達された信号を一時的に記憶（保持）するためのメモリとして機能する。
【００６１】
光信号出力線１６は、光信号保持容量１２から転送された光信号を差動アンプ１８へ伝達する。
【００６２】
差動アンプ１８は、ノイズ信号出力線１７へ転送されたノイズ信号と、光信号出力線１６へ転送された光信号との差分を演算することにより、画像信号（すなわち、余剰信号又は蓄積信号）を生成するとともに所定の読み出し増幅率で増幅する。
【００６３】
ここで、差動アンプ１８が画像信号を増幅する際の読み出し増幅率は、オンしているスイッチ２１，２２の数によって変わる。例えば、スイッチ２１のみがオンしており、容量１９のみが増幅に寄与する場合の読み出し増幅率をＭ／Ｋ倍（Ｍ；自然数、Ｋ；自然数）とし、スイッチ２１，２２がオンしており、容量１９，２２が増幅に寄与する場合の読み出し増幅率をＭ倍とする。このとき、
（Ｍ／Ｋ）＜Ｍ・・・数式１
の関係が成り立つ。
【００６４】
次に、余剰信号及び蓄積信号に関するアンプ５８、Ａ／Ｄ変換器５９、画像処理部６０及びシステム制御ＣＰＵ６１の構成及び動作を説明する。
【００６５】
アンプ５８は、上記の差動アンプ１８が所定の読み出し増幅率で増幅した余剰信号及び蓄積信号を、それぞれ、異なるタイミングで読み出し部２６０から受け取る。アンプ５８は、余剰信号及び蓄積信号を、それぞれ、所定のアナログ増幅率で増幅する。アンプ５８は、増幅した余剰信号及び蓄積信号をＡ／Ｄ変換器５９へ供給する。
【００６６】
Ａ／Ｄ変換器５９は、アンプ５８が所定のアナログ増幅率で増幅した余剰信号及び蓄積信号を、それぞれ、異なるタイミングでアンプ５８から受け取る。Ａ／Ｄ変換器５９は、余剰信号を受け取った場合、余剰信号をＡ／Ｄ変換することにより余剰画像データを生成して、その余剰画像データを画像処理部６０へ供給する。また、Ａ／Ｄ変換器５９は、蓄積信号を受け取った場合、蓄積信号をＡ／Ｄ変換することにより蓄積画像データを生成して、その蓄積画像データを画像処理部６０へ供給する。
【００６７】
画像処理部６０は、Ａ／Ｄ変換器５９から出力された余剰画像データ及び蓄積画像データをそれぞれ異なるタイミングで受け取る。画像処理部６０は、デジタル増幅部６０ａを含む。デジタル増幅部６０ａは、余剰画像データと蓄積画像データとをそれぞれ所定のデジタル増幅率で増幅する。デジタル増幅部６０ａは、増幅した余剰画像データと蓄積画像データとをそれぞれシステム制御ＣＰＵ６１へ供給する。
【００６８】
システム制御ＣＰＵ６１は、余剰画像データに基づいて、Ａ／Ｄ変換器５９のダイナミックレンジを圧迫しないように、読み出し部２６０（図２参照）が蓄積信号を増幅する際の読み出し増幅率を制御する。システム制御ＣＰＵ６１は、検出部６１ｃ、判断部６１ｂ、及び決定部６１ｃを含む。
【００６９】
検出部６１ｃは、飽和度を検出する。飽和度は、余剰画像データに応じた画像の画素数に対する飽和領域の画素数の割合である。飽和領域は、蓄積電荷が飽和している領域である。検出部６１ｃは、検出した飽和度の情報を判断部６１ｂへ供給する。
【００７０】
判断部６１ｂは、飽和度が閾値以下であるか否かを判断する。判断部６１ｂは、飽和度が閾値以下である場合、読み出し部２６０により増幅される蓄積信号の信号レベルがＡ／Ｄ変換器５９のダイナミックレンジを圧迫しないと判断する。判断部６１ｂは、飽和度が閾値を超える場合、読み出し部２６０により増幅される蓄積信号の信号レベルがＡ／Ｄ変換器５９のダイナミックレンジを圧迫すると判断する。判断部６１ｂは、判断した結果を決定部６１ｃへ供給する。
【００７１】
決定部６１ｃは、判断部６１ｂにより判断された結果に応じて、Ａ／Ｄ変換器５９のダイナミックレンジを圧迫しないように読み出し増幅率を決定し、決定された読み出し増幅率で蓄積信号を増幅するように読み出し部２６０を制御する。決定部６１ｃは、Ａ／Ｄ変換部５９のダイナミックレンジを圧迫しないように、読み出し部２６０が蓄積信号を増幅する際の読み出し増幅率と、アンプ５８が蓄積信号を増幅する際のアナログ増幅率との積を制御する。決定部６１ｃは、Ａ／Ｄ変換部５９のダイナミックレンジを圧迫しないように、かつ、蓄積信号が増幅される際の読み出し増幅率と蓄積画像データが増幅される際のデジタル増幅率との積が一定の値となるように、読み出し増幅率及びデジタル増幅率を決定する。
【００７２】
具体的には決定部６１ｃは、読み出し部２６０により増幅される蓄積信号の信号レベルがＡ／Ｄ変換器５９のダイナミックレンジを圧迫しないと判断部６１ｂにより判断される場合、読み出し増幅率を基準値より高い値（例えば数式１に示すＭ倍）に決定する。決定部６１ｃは、読み出し部２６０及びアンプ５８により増幅される蓄積信号の信号レベルがＡ／Ｄ変換部５９のダイナミックレンジを圧迫しないと判断部６１ｂにより判断される場合、読み出し増幅率とアナログ増幅率との積を基準値より高い値に決定する。決定部６１ｃは、読み出し部２６０により増幅される蓄積信号の信号レベルがＡ／Ｄ変換器５９のダイナミックレンジを圧迫しないと判断部６１ｂにより判断される場合、読み出し増幅率をＭ倍に決定するとともにデジタル増幅率をＮ倍（Ｎ；自然数）に決定する。
【００７３】
あるいは決定部６１ｃは、読み出し部２６０により増幅される蓄積信号の信号レベルがＡ／Ｄ変換部５９のダイナミックレンジを圧迫すると判断部６１ｂにより判断される場合、読み出し増幅率を基準値より低い値（例えば数式１に示すＭ／Ｋ倍）に決定する。決定部６１ｃは、読み出し部２６０及びアンプ５８により増幅される蓄積信号の信号レベルがＡ／Ｄ変換部５９のダイナミックレンジを圧迫すると判断部６１ｂにより判断される場合、読み出し増幅率とアナログ増幅率との積を基準値より低い値に決定する。これにより、読み出し部２６０により増幅される蓄積信号の信号レベルがＡ／Ｄ変換器５９のダイナミックレンジを圧迫しにくくなるようにすることができる。決定部６１ｃは、Ａ／Ｄ変換部５９のダイナミックレンジを圧迫すると判断部６１ｂにより判断される場合、読み出し増幅率をＭ／Ｋ倍（Ｋ；自然数）に決定するとともにデジタル増幅率をＮ×Ｋ倍に決定する。
【００７４】
次に、撮像装置５５の動作を、図４を用いて説明する。図４は、撮像装置５５の動作を示すタイミングチャートである。図４に示すパルスは、いずれも、ＴＧ６５により撮像装置５５へ供給される。
【００７５】
タイミングＴ１より前のタイミングでは、ＴＧ６５が、リセットトランジスタ３４のゲートに、アクティブなリセットパルスを供給している。これにより、リセットトランジスタ３４は、オンして、ＦＤ３３をリセットレベルの電圧にリセットしている。増幅トランジスタ３６は、リセットレベルの電圧に基づく信号を増幅して、ノイズ信号として垂直出力線３８へ出力する。ＴＧ６５は、リセットトランジスタ３４のゲートに、ノンアクティブなリセットパルスを供給する。これにより、リセットトランジスタ３４は、オフする。
【００７６】
ＴＧ６５は、ノイズ信号転送部１５に、アクティブな第１メモリパルスを供給する。これにより、ノイズ信号転送部１５は、図７の右側の端子に接続されるようにオンすることにより、垂直出力線３８により画素３９から伝達されたノイズ信号を、ノイズ信号保持容量１４へ転送する。ＴＧ６５は、ノイズ信号転送部１５に、ノンアクティブな第１メモリパルスを供給する。これにより、ノイズ信号転送部１５は、オフする。ノイズ信号保持容量１４は、垂直出力線３８により画素３９から伝達されたノイズ信号を一時的に記憶（保持）する。
【００７７】
タイミングＴ１では、ＴＧ６５が、画素配列ＰＡにおける所定の画素の選択トランジスタ３７のゲートにアクティブな選択パルスを供給する。これにより、所定の画素では、選択トランジスタ３７がオンして、選択された状態になる。以下では、選択された所定の画素を中心に説明する。
【００７８】
ここで、ＰＤ３１が光電変換した電荷の量がその飽和電荷量を超えると、超えた分の電荷、すなわち余剰電荷が、電位障壁の乗り越えてＰＤ３１からＦＤ３３へあふれ出している。ＦＤ３３は、余剰電荷を電圧に変換する。増幅トランジスタ３６は、ＦＤ３３の電圧に基づく信号を増幅して光信号として垂直出力線３８へ出力する。この光信号は、余剰電荷に基づく余剰信号に、ノイズ信号が重畳された信号である。
【００７９】
タイミングＴ２では、ＴＧ６５が、光信号転送部１３に、アクティブな第２メモリパルスを供給する。これにより、光信号転送部１３は、図７の右側の端子に接続されるようにオンすることにより、垂直出力線３８により画素３９から伝達された光信号を、光信号保持容量１２へ転送する。
【００８０】
タイミングＴ３では、ＴＧ６５が、光信号転送部１３に、ノンアクティブな第２メモリパルスを供給する。これにより、光信号転送部１３は、オフする。光信号保持容量１２は、垂直出力線３８により画素３９から伝達された光信号を一時的に記憶（保持）する。
【００８１】
タイミングＴ４〜Ｔ５の期間では、ＴＧ６５が、ノイズ信号転送部１５及び光信号転送部１３に、アクティブな読み出しパルスを供給する。これにより、ノイズ信号転送部１５は、図７の左側の端子に接続されるようにオンすることにより、ノイズ信号保持容量１４に保持されたノイズ信号を、ノイズ信号出力線１７へ転送する。光信号転送部１３は、図７の左側の端子に接続されるようにオンすることにより、光信号保持容量１２に保持された光信号を、光信号出力線１６へ転送する。
【００８２】
差動アンプ１８は、ノイズ信号出力線１７へ転送されたノイズ信号と、光信号出力線１６へ転送された光信号との差分を演算することにより、ノイズ信号が除去された余剰信号を生成するとともにその余剰信号を所定の読み出し増幅率で増幅する。差動アンプ１８は、余剰信号（アナログ信号）を後段（図１に示すアンプ５８）へ出力する。
【００８３】
タイミングＴ６では、ＴＧ６５が、画素配列ＰＡにおける所定の画素の選択トランジスタ３７のゲートにアクティブな選択パルスを供給する。これにより、所定の画素では、選択トランジスタ３７がオンして、選択された状態になる。以下では、選択された所定の画素を中心に説明する。
【００８４】
ＴＧ６５は、リセットトランジスタ３４のゲートに、アクティブなリセットパルスを供給している。これにより、リセットトランジスタ３４は、オンして、ＦＤ３３をリセットレベルの電圧にリセットしている。増幅トランジスタ３６は、リセットレベルの電圧に基づく信号を増幅して、ノイズ信号として垂直出力線３８へ出力する。
【００８５】
タイミングＴ７では、ＴＧ６５が、リセットトランジスタ３４のゲートに、ノンアクティブなリセットパルスを供給する。これにより、リセットトランジスタ３４は、オフする。
【００８６】
タイミングＴ８では、ＴＧ６５が、ノイズ信号転送部１５に、アクティブな第１メモリパルスを供給する。これにより、ノイズ信号転送部１５は、図７の右側の端子に接続されるようにオンすることにより、垂直出力線３８により画素３９から伝達されたノイズ信号を、ノイズ信号保持容量１４へ転送する。
【００８７】
タイミングＴ９では、ＴＧ６５が、ノイズ信号転送部１５に、ノンアクティブな第１メモリパルスを供給する。これにより、ノイズ信号転送部１５は、オフする。ノイズ信号保持容量１４は、垂直出力線３８により画素３９から伝達されたノイズ信号を一時的に記憶（保持）する。
【００８８】
タイミングＴ１０では、ＴＧ６５が、転送トランジスタ３２のゲートに、アクティブな転送パルスを供給する。これにより、転送トランジスタ３２は、オンして、ＰＤ３１により蓄積された蓄積電荷をＦＤ３３へ転送する。ＦＤ３３は、転送された蓄積電荷を電圧に変換する。増幅トランジスタ３６は、ＦＤ３３の電圧に基づく信号を増幅して、光信号として垂直出力線３８へ出力する。この光信号は、蓄積電荷に基づく蓄積信号に、ノイズ信号が重畳された信号である。
【００８９】
タイミングＴ１１では、ＴＧ６５が、転送トランジスタ３２のゲートに、ノンアクティブな転送パルスを供給する。これにより、転送トランジスタ３２は、オフする。
【００９０】
タイミングＴ１２では、ＴＧ６５が、光信号転送部１３に、アクティブな第２メモリパルスを供給する。これにより、光信号転送部１３は、図７の右側の端子に接続されるようにオンすることにより、垂直出力線３８により画素３９から伝達された光信号を、光信号保持容量１２へ転送する。
【００９１】
タイミングＴ１３では、ＴＧ６５が、光信号転送部１３に、ノンアクティブな第２メモリパルスを供給する。これにより、光信号転送部１３は、オフする。光信号保持容量１２は、垂直出力線３８により画素３９から伝達された光信号を一時的に記憶（保持）する。
【００９２】
タイミングＴ１４〜Ｔ１５の期間では、ＴＧ６５が、ノイズ信号転送部１５及び光信号転送部１３に、アクティブな読み出しパルスを供給する。これにより、ノイズ信号転送部１５は、図７の左側の端子に接続されるようにオンすることにより、ノイズ信号保持容量１４に保持されたノイズ信号を、ノイズ信号出力線１７へ転送する。光信号転送部１３は、図７の左側の端子に接続されるようにオンすることにより、光信号保持容量１２に保持された光信号を、光信号出力線１６へ転送する。
【００９３】
差動アンプ１８は、ノイズ信号出力線１７へ転送されたノイズ信号と、光信号出力線１６へ転送された光信号との差分を演算することにより、ノイズ信号が除去された画像信号を生成するとともにその画像信号を所定の読み出し増幅率で増幅する。差動アンプ１８は、画像信号（アナログ信号）を後段（図１に示すアンプ５８）へ出力する。
【００９４】
次に、撮像システム１における撮影処理の動作を、図５を用いて説明する。図５は、撮像システム１の動作を示すフローチャートである。
【００９５】
ステップＳ４０１では、システム制御ＣＰＵ６１が、入力部（図示せず）を介して、撮影処理を開始するための撮影指示を受け取る。システム制御ＣＰＵ６１は、撮影指示に応じて、適正な露出値が得られるように、画素配列ＰＡの各画素３９のＰＤ３１が信号（電荷）を蓄積する蓄積時間を決定する。システム制御ＣＰＵ６１は、ＰＤ３１が電荷蓄積動作を開始（蓄積スタート）するように、ＴＧ６５経由で撮像装置５５を制御する。また、システム制御ＣＰＵ６１は、タイマー（図示せず）が蓄積期間をカウントし始めるようにする。
【００９６】
ステップＳ４０２では、システム制御ＣＰＵ６１が、タイマーを参照して、蓄積期間が終了するタイミングから所定時間前であるか否かを判断する。システム制御ＣＰＵ６１は、終了するタイミングから所定時間前であると判断する場合、処理をステップＳ４０３へ進め、終了するタイミングから所定時間前でないと判断する場合、処理をステップＳ４０２へ進める。
【００９７】
ステップＳ４０３では、撮像装置５５の読み出し部２６０が、所定の読み出し増幅率で増幅した余剰信号をアンプ５８へ出力する。アンプ５８は、余剰信号を所定のアナログ増幅率で増幅する。アンプ５８は、増幅した余剰信号をＡ／Ｄ変換器５９へ供給する。Ａ／Ｄ変換器５９は、アンプ５８が所定のアナログ増幅率で増幅した余剰信号をアンプ５８から受け取る。Ａ／Ｄ変換器５９は、余剰信号をＡ／Ｄ変換することにより余剰画像データを生成して、その余剰画像データを画像処理部６０へ供給する。画像処理部６０は、Ａ／Ｄ変換器５９から出力された余剰画像データを受け取る。画像処理部６０のデジタル増幅部６０ａは、余剰画像データを所定のデジタル増幅率で増幅する。デジタル増幅部６０ａは、増幅した余剰画像データをシステム制御ＣＰＵ６１へ供給する。
【００９８】
システム制御ＣＰＵ６１の検出部６１ｃは、飽和度を検出する。飽和度は、余剰画像データに応じた画像の画素数に対する飽和領域の画素数の割合である。飽和領域は、蓄積電荷が飽和している領域であり、余剰画像データが示す画像において所定のレベル以上の輝度を有する画素の領域である。例えば、検出部６１ｃは、画素ごとにその信号レベル（輝度）が所定のレベルを超えているか否かを判断することにより、飽和領域を検出する。検出部６１ｃは、検出した飽和度の情報を判断部６１ｂへ供給する。
【００９９】
ステップＳ４０４では、システム制御ＣＰＵ６１の判断部６１ｂが、飽和度が閾値以下であるか否かを判断する。判断部６１ｂは、飽和度が閾値以下である場合、読み出し部２６０により増幅される蓄積信号の信号レベルがＡ／Ｄ変換器５９のダイナミックレンジを圧迫しないと判断して、処理をステップＳ４０６へ進める。判断部６１ｂは、飽和度が閾値を超える場合、読み出し部２６０により増幅される蓄積信号の信号レベルがＡ／Ｄ変換器５９のダイナミックレンジを圧迫すると判断して、処理をステップＳ４０５へ進める。判断部６１ｂは、判断した結果を決定部６１ｃへ供給する。
【０１００】
ステップＳ４０５では、システム制御ＣＰＵ６１の決定部６１ｃは、読み出し増幅率を基準値より高い値（例えば、数式１に示すＭ倍）に決定する。決定部６１ｃは、読み出し増幅率とアナログ増幅率との積を基準値より高い値に決定する。決定部６１ｃは、読み出し増幅率をＭ倍に決定するとともにデジタル増幅率をＮ倍（Ｎ；自然数）に決定する。システム制御ＣＰＵ６１は、決定した読み出し増幅率、アナログ増幅率、及びデジタル増幅率を、それぞれ、読み出し部２６０、アンプ５８、及び画像処理部６０に設定する。
【０１０１】
ステップＳ４０６では、決定部６１ｃは、読み出し増幅率を基準値より低い値（例えば、数式１に示すＭ／Ｋ倍）に決定する。決定部６１ｃは、読み出し増幅率とアナログ増幅率との積を基準値より低い値に決定する。決定部６１ｃは、読み出し増幅率をＭ／Ｋ倍（Ｋ；自然数）に決定するとともにデジタル増幅率をＮ×Ｋ倍に決定する。システム制御ＣＰＵ６１は、決定した読み出し増幅率、アナログ増幅率、及びデジタル増幅率を、それぞれ、読み出し部２６０、アンプ５８、及び画像処理部６０に設定する。
【０１０２】
ステップＳ４０７では、システム制御ＣＰＵ６１が、タイマーを参照して、ＰＤ３１が電荷蓄積動作を終了（蓄積エンド）するように、ＴＧ６５経由で撮像装置５５を制御する。そして、システム制御ＣＰＵ６１は、画素配列ＰＡの各画素３９から蓄積信号が読み出されるように、ＴＧ６５経由で撮像装置５５を制御する。これにより、撮像装置５５の読み出し部２６０は、決定された読み出し増幅率で増幅した蓄積信号をアンプ５８へ出力する。アンプ５８は、蓄積信号を所定のアナログ増幅率で増幅する。アンプ５８は、増幅した蓄積信号をＡ／Ｄ変換器５９へ供給する。Ａ／Ｄ変換器５９は、アンプ５８が所定のアナログ増幅率で増幅した蓄積信号をアンプ５８から受け取る。Ａ／Ｄ変換器５９は、蓄積信号をＡ／Ｄ変換することにより蓄積画像データを生成して、その蓄積画像データを画像処理部６０へ供給する。
【０１０３】
ステップＳ４０８では、画像処理部６０が、Ａ／Ｄ変換器５９から出力された蓄積画像データを受け取る。画像処理部６０は、蓄積画像データに所定の画像処理を施す。所定の画像処理は、画像データに各種の補正を行うための処理、画像データの解像度を変換するための処理などを含む。画像処理部６０のデジタル増幅部６０ａは、蓄積画像データを所定のデジタル増幅率で増幅する。デジタル増幅部６０ａは、増幅した蓄積画像データをシステム制御ＣＰＵ６１へ供給する。
【０１０４】
ステップＳ４０９では、システム制御ＣＰＵ６１が、蓄積画像データをデジタル増幅部６０ａから受け取る。システム制御ＣＰＵ６１は、記録インターフェース部６８を介して、蓄積画像データを記録媒体６９へ記録する。
【０１０５】
以上のように、本実施形態では、余剰画像データに基づいて、Ａ／Ｄ変換器のダイナミックレンジを圧迫しないか否かを判断し、判断した結果に応じて、読み出し部が蓄積信号を増幅する際の読み出し増幅率を制御する。これにより、Ａ／Ｄ変換器のダイナミックレンジを圧迫する場合の読み出し増幅率に比べて、Ａ／Ｄ変換器のダイナミックレンジを圧迫しない場合の読み出し増幅率を高くするように、読み出し増幅率を制御することができる。したがって、画像信号の信号レベルがＡ／Ｄ変換器のダイナミックレンジを圧迫しない範囲で、画像信号のＳ／Ｎ比を向上することができる。
【０１０６】
なお、上記の実施形態において、飽和度が閾値以下であるような撮影シーンには、天体撮影や夜景撮影などのシーンが含まれる。このような撮影シーンを撮像して得られる画像データに応じた画像では、局所的に輝度が高く、高輝度部分が飽和しても画質劣化となり難い。すなわち、このような撮影シーンでは、撮像して得られる画像信号の信号レベルがＡ／Ｄ変換器のダイナミックレンジを圧迫する可能性が低い。
【０１０７】
また、読み出し部により増幅される蓄積信号の信号レベルがＡ／Ｄ変換器のダイナミックレンジを圧迫しないか否かは、適正な露出値が得られるように決められたＰＤ３１の蓄積時間に基づいて判断されても良い。この場合、システム制御ＣＰＵ６１は、露出制御部（図示せず）をさらに含む。露出制御部は、適正な露出値が得られるようにＰＤ３１が信号を蓄積する蓄積時間を制御する。そして、システム制御ＣＰＵ６１は、ＰＤ３１が電荷蓄積動作を開始するように、ＴＧ６５経由で撮像装置５５を制御する。また、システム制御ＣＰＵ６１は、タイマー（図示せず）が蓄積期間をカウントし始めるようにする。そして、システム制御ＣＰＵ６１は、露出制御部により制御された蓄積時間に基づいて、Ａ／Ｄ変換器のダイナミックレンジを圧迫しないように、読み出し部２６０が画像信号を増幅する際の読み出し増幅率を制御する。すなわち、システム制御ＣＰＵ６１は、露出制御部により制御された蓄積時間が閾値時間以上である場合、Ａ／Ｄ変換器のダイナミックレンジを圧迫しないと判断して、読み出し増幅率を基準値より高い値に決定する。あるいは、システム制御ＣＰＵ６１は、露出制御部により制御された蓄積時間が閾値時間未満である（小さい）場合、Ａ／Ｄ変換器のダイナミックレンジを圧迫すると判断して、読み出し増幅率を基準値より低い値に決定する。その後、システム制御ＣＰＵ６１が、タイマーを参照して、ＰＤ３１が電荷蓄積動作を終了するように、ＴＧ６５経由で撮像装置５５を制御する。
【０１０８】
また、天体撮影や夜景撮影であることを設定するモード設定手段を具備することで、天体撮影や夜景撮影と判断し基準値に対するゲイン変更を行っても良い。
【０１０９】
また、測光手段による露出値にくらべ、蓄積時間が長く設定されていた場合に、天体撮影や夜景撮影と判断しゲイン変更を行ってもよい。
【図面の簡単な説明】
【０１１０】
【図１】本発明の実施形態に係る撮像システム１の構成図。
【図２】本発明の実施形態における撮像装置５５の構成図。
【図３】各画素３９の断面構成及びポテンシャルの分布を示す図。
【図４】撮像装置５５の動作を示すタイミングチャート。
【図５】撮像システム１の動作を示すフローチャート。
【図６】背景技術を説明するための図。
【図７】背景技術を説明するための図。
【図８】背景技術を説明するための図。
【符号の説明】
【０１１１】
１，１００  撮像システム
５５，９０  撮像装置
【図１】
0005127467.tif 000002
【図２】
0005127467.tif 000003
【図３】
0005127467.tif 000004
【図４】
0005127467.tif 000005
【図５】
0005127467.tif 000006
【図６】
0005127467.tif 000007
【図７】
0005127467.tif 000008
【図８】
0005127467.tif 000009