(57)【要約】【課題】  通常の画像撮像時において、ノイズのない良好な信号を生成する。【解決手段】  シャッタ１１によって遮光された状態の有効画像領域Ａのカラムノイズ値をカラムノイズ検出部３１において検出し、ＨＯＰＢ領域Ｂのカラムノイズ変化量をリアルタイムにカラムノイズ変化検出部３３において検出し、カラムノイズ変化検出部３３で検出したカラムノイズ変化量に基づいてカラムノイズ検出部３１で検出したカラムノイズ値を補正し、カラムノイズ補正値をカラムノイズ補正値生成部３４によって生成し、このカラムノイズ補正値に基づいて、通常の画像撮影時において有効画像領域Ａから供給された信号Ｓ４をカラムノイズ補正部３５によって補正する。【選択図】  図４
2007081453.tif 000002
【特許請求の範囲】
【請求項１】
画素が行列状に配置され、光が照射される有効画像領域と、光の照射が遮られる水平遮光画像領域とからなる画素部と、垂直選択線で共通に接続された同一行の画素の制御電極を制御する垂直走査回路と、同一列の画素の主電極が共通に接続された垂直信号線を介して出力される画素信号を行単位で順次出力する水平走査回路と、上記水平走査回路からの画素信号を出力する出力回路とを有する固体撮像素子手段と、
上記有効画像領域に照射される光を遮光する遮光手段と、
上記遮光手段により光が遮光された状態で上記有効画像領域に配置されている画素から出力される画素信号に基づき、上記有効画像領域のオフセット信号を検出する第１の検出手段と、
上記水平遮光画像領域に配置されている画素から出力される画素信号に基づき、上記水平遮光画像領域の基準となるオフセット信号を検出する第２の検出手段と、
上記第２の検出手段により上記基準となるオフセット信号を検出した後に、上記水平遮光画像領域に配置されている画素から出力される画素信号に基づき、上記水平遮光画像領域のオフセット信号を検出する第３の検出手段と、
上記第２の検出手段により検出された上記基準オフセット信号と、上記第３の検出手段により検出された所定時間経過後の上記オフセット信号を比較する比較手段と、
上記第１の検出手段から検出されたオフセット信号と、上記比較手段による比較結果とに基づいて補正信号を生成する補正信号生成手段と、
上記補正信号生成手段により生成された上記補正信号に基づいて、上記有効画像領域に配置されている画素から出力されている画素信号を補正する補正手段とを備えることを特徴とする撮像装置。
【請求項２】
上記有効画像領域の画素を複数の列ごとに分け、当該複数の列ごとにオフセット信号を調整するための調整値を保持する調整値保持手段を備え、
上記補正信号生成手段は、上記第１の検出手段から検出されたオフセット信号と、上記比較手段による比較結果と、上記調整値保持手段により保持されている上記調整値に基づいて補正信号を生成することを特徴とする請求項１記載の撮像装置。
【請求項３】
画素が行列状に配置され、光が照射される有効画像領域と、光の照射が遮られる水平遮光画像領域とからなる画素部と、垂直選択線で共通に接続された同一行の画素の制御電極を制御する垂直走査回路と、同一列の画素の主電極が共通に接続された垂直信号線を介して出力される画素信号を行単位で順次出力する水平走査回路と、上記水平走査回路からの画素信号を出力する出力回路とを有する固体撮像素子から出力される信号の信号処理方法であって、
上記有効画像領域に照射される光を遮光する遮光工程と、
上記遮光工程により光が遮光された状態で上記有効画像領域に配置されている画素から出力される画素信号に基づき、上記有効画像領域のオフセット信号を検出する第１の検出工程と、
上記水平遮光画像領域に配置されている画素から出力される画素信号に基づき、上記水平遮光画像領域の基準となるオフセット信号を検出する第２の検出工程と、
上記第２の検出工程により上記基準となるオフセット信号を検出した後に、上記水平遮光画像領域に配置されている画素から出力される画素信号に基づき、上記水平遮光画像領域のオフセット信号を検出する第３の検出工程と、
上記第２の検出工程により検出された上記基準オフセット信号と、上記第３の検出工程により検出された所定時間経過後の上記オフセット信号を比較する比較工程と、
上記第１の検出工程から検出されたオフセット信号と、上記比較工程による比較結果とに基づいて補正信号を生成する補正信号生成工程と、
上記補正信号生成工程により生成された上記補正信号に基づいて、上記有効画像領域に配置されている画素から出力されている画素信号を補正する補正工程とを備えることを特徴とする信号処理方法。
【請求項４】
上記補正信号生成工程は、上記第１の検出工程から検出されたオフセット信号と、上記比較工程による比較結果と、上記有効画像領域の画素を複数の列ごとに分け、当該複数の列ごとにオフセット信号を調整するための調整値を保持する調整値保持部によって保持されている上記調整値とに基づいて補正信号を生成することを特徴とする請求項３記載の信号処理方法。
【請求項５】
画素が行列状に配置され、光が照射される有効画像領域と、光の照射が遮られる水平遮光画像領域とからなる画素部と、垂直選択線で共通に接続された同一行の画素の制御電極を制御する垂直走査回路と、同一列の画素の主電極が共通に接続された垂直信号線を介して出力される画素信号を行単位で順次出力する水平走査回路と、上記水平走査回路からの画素信号を出力する出力回路とを有する固体撮像素子から出力される信号を処理するプログラムであって、
上記有効画像領域に照射される光を遮光する遮光工程と、
上記遮光工程により光が遮光された状態で上記有効画像領域に配置されている画素から出力される画素信号に基づき、上記有効画像領域のオフセット信号を検出する第１の検出工程と、
上記水平遮光画像領域に配置されている画素から出力される画素信号に基づき、上記水平遮光画像領域の基準となるオフセット信号を検出する第２の検出工程と、
上記第２の検出工程により上記基準となるオフセット信号を検出した後に、上記水平遮光画像領域に配置されている画素から出力される画素信号に基づき、上記水平遮光画像領域のオフセット信号を検出する第３の検出工程と、
上記第２の検出工程により検出された上記基準オフセット信号と、上記第３の検出工程により検出された所定時間経過後の上記オフセット信号を比較する比較工程と、
上記第１の検出工程から検出されたオフセット信号と、上記比較工程による比較結果とに基づいて補正信号を生成する補正信号生成工程と、
上記補正信号生成工程により生成された上記補正信号に基づいて、上記有効画像領域に配置されている画素から出力されている画素信号を補正する補正工程とをコンピュータに実行させるためのプログラム。
【請求項６】
上記補正信号生成工程は、上記第１の検出工程から検出されたオフセット信号と、上記比較工程による比較結果と、上記有効画像領域の画素を複数の列ごとに分け、当該複数の列ごとにオフセット信号を調整するための調整値を保持する調整値保持部によって保持されている上記調整値とに基づいて補正信号を生成することを特徴とする請求項５記載のプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、Ｘ−Ｙアドレス型固体撮像素子により被写体を撮像する撮像装置及び信号処理方法並びにプログラムに関する。
【背景技術】
【０００２】
ＣＭＯＳ（complementary metal oxide semiconductor）センサに代表されるＸ−Ｙアドレス型の固体撮像素子１は、図６に示すように多数の画素が行列状に配列されており、この画素部５２の各行（以下、ラインという。）を順に選択するための垂直走査回路５４と、画素部５２の各列（以下、カラムという。）を順に選択するための水平走査回路６０と、信号を出力するための出力回路６１を備えている。
【０００３】
また、垂直走査回路５４と水平走査回路５９は、例えば、シフトレジスタによって構成され、垂直走査パルスおよび水平走査パルスをラインごと及びカラムごとに１個ずつ順に発生するようになっている。
【０００４】
また、各画素に蓄えられた画像信号を読み出す際には、垂直走査回路５４によりパルス信号が一の垂直選択線５３に加えられ、１ライン分の各画素トランジスタ５１をすべて通電させ、各感光部５０から画像信号が各垂直信号線５５に読み出される。各垂直信号線５５に読み出された画像信号は、画素ごとのオフセット信号を除去する相関二重サンプリング回路（ＣＤＳ）５６等の回路に供給される。
【０００５】
水平走査回路５９は、各垂直信号線５５に接続されているトランジスタ５１に水平選択線５９を介してパルス信号を加え、該トランジスタ５１を通電状態にする。ＣＤＳ５６によりオフセット信号が除去されたカラムの画素信号は、水平信号線５８に読み出され、出力回路６１により電圧信号に変換されて、外部に出力される。
【０００６】
このようなＸ−Ｙアドレス型の固体撮像素子では、出力回路６１から供給される画素信号は、カラムごとに垂直信号線５５が異なるため、ＣＤＳ５６やトランジスタ５７などに特性のばらつきがあると、カラムごとに異なるオフセットが画像信号に乗ってしまう。このカラムごとのオフセットが表示画面上に筋状の固定パターンノイズ（以下、カラムノイズという。）として現れ、画質の劣化を生じさせてしまう。
【０００７】
この劣化の防止を図る方法として、固体撮像素子からカラムノイズ成分のみを抽出し、抽出したカラムノイズ成分を補正のための基準信号として保持しておき、通常の撮像動作時に固体撮像素子の信号出力から保持されている基準信号を減算することによってカラムノイズを補正するものがある。
【０００８】
しかし、通常は、画素部５２に光が照射されると、カラムノイズ成分に入射光による信号成分が加算されるため、この出力信号を補正のための基準信号として使うことはできない。そこで、特許文献１では、図７に示すように、画素部５２を、光が照射される有効画像領域Ａと、アルミ薄膜等による遮光板により数カラムから数十カラムに渡って光の照射が遮られる水平オプティカルブラック（以下、ＨＯＰＢという。）領域Ｂと、アルミ薄膜等による遮光板により数ラインから数十ラインに渡って光の照射が遮られる垂直オプティカルブラック（以下、ＶＯＰＢという。）領域Ｃとにより構成し、カラムノイズの検出・補正を行っている。
【０００９】
ところで、カラムノイズの原因となるカラムごとのオフセットは、有効画像領域Ａに位置する画素だけではなく、遮光された黒レベル基準のＶＯＰＢ領域Ｃに位置する画素からの出力にも同様に現れる。そのため、ＶＯＰＢ領域Ｃの画素からの信号を用いてカラムノイズ成分を検出し、有効画像領域Ａの画素からの信号から差し引くことで補正できる。
【００１０】
しかし、ＶＯＰＢ領域Ｃの各画素の信号を用いてカラムノイズを補正するための基準信号を得る場合には、ＶＯＰＢ領域Ｃの各画素から出力されるばらつきのある暗電流成分（以下、ランダムノイズという。）の影響が問題となる。特に、ＶＯＰＢ領域Ｃは、数ラインから数十ライン分であるため画素数が少なく、平均化処理を行ったとしても、各画素から出力されるランダムノイズを十分に抑圧することができない。
【００１１】
そこで、ＶＯＰＢ領域Ｃのライン数を増加してしまうと、カラムノイズ検出専用の領域が大きくなり、その分、固体撮像素子が大きくなってしまう。
【００１２】
また、固体撮像素子から読み出す信号量もＶＯＰＢ領域Ｃの分増加し、高速に読み出して処理できるだけの性能がハードウェアに求められる。
【００１３】
これに対して、固体撮像素子を有効画像領域ＡとＨＯＰＢ領域Ｂのみで構成することが考えられる。この構成の場合には、有効画像領域Ａを一時的に遮光してカラムノイズを検出してメモリに保存し、カラムノイズの補正を行う。
【００１４】
【特許文献１】特開平１０−１２６６９７号公報
【発明の開示】
【発明が解決しようとする課題】
【００１５】
しかしながら、このような方法では、工場出荷時又は電源投入時の一度しかカラムノイズを検出しないため、熱などの外的要因によってカラムノイズ成分が変化したときには、カラムノイズの補正がうまく行かず、結果として画質を劣化させてしまう。
【００１６】
そこで、本発明では、固体撮像素子を有効画像領域ＡとＨＯＰＢ領域Ｂのみで構成しながら、カラムノイズ成分が変化した場合であっても、当該カラムノイズ成分の変化に適応的に対応し、良質な画像を得る撮像装置及び信号処理方法並びにプログラムを提供する。
【課題を解決するための手段】
【００１７】
本発明に係る撮像装置は、上述の課題を解決するために、画素が行列状に配置され、光が照射される有効画像領域と、光の照射が遮られる水平遮光画像領域とからなる画素部と、垂直選択線で共通に接続された同一行の画素の制御電極を制御する垂直走査回路と、同一列の画素の主電極が共通に接続された垂直信号線を介して出力される画素信号を行単位で順次出力する水平走査回路と、水平走査回路からの画素信号を出力する出力回路とを有する固体撮像素子手段と、有効画像領域に照射される光を遮光する遮光手段と、遮光手段により光が遮光された状態で有効画像領域に配置されている画素から出力される画素信号に基づき、有効画像領域のオフセット信号を検出する第１の検出手段と、水平遮光画像領域に配置されている画素から出力される画素信号に基づき、水平遮光画像領域の基準となるオフセット信号を検出する第２の検出手段と、第２の検出手段により基準となるオフセット信号を検出した後に、水平遮光画像領域に配置されている画素から出力される画素信号に基づき、水平遮光画像領域のオフセット信号を検出する第３の検出手段と、第２の検出手段により検出された基準オフセット信号と、第３の検出手段により検出された所定時間経過後のオフセット信号を比較する比較手段と、第１の検出手段から検出されたオフセット信号と、比較手段による比較結果とに基づいて補正信号を生成する補正信号生成手段と、補正信号生成手段により生成された補正信号に基づいて、有効画像領域に配置されている画素から出力されている画素信号を補正する補正手段とを備える。
【００１８】
また、本発明に係る信号処理方法は、上述の課題を解決するために、画素が行列状に配置され、光が照射される有効画像領域と、光の照射が遮られる水平遮光画像領域とからなる画素部と、垂直選択線で共通に接続された同一行の画素の制御電極を制御する垂直走査回路と、同一列の画素の主電極が共通に接続された垂直信号線を介して出力される画素信号を行単位で順次出力する水平走査回路と、水平走査回路からの画素信号を出力する出力回路とを有する固体撮像素子から出力される信号の信号処理方法であって、有効画像領域に照射される光を遮光する遮光工程と、遮光工程により光が遮光された状態で有効画像領域に配置されている画素から出力される画素信号に基づき、有効画像領域のオフセット信号を検出する第１の検出工程と、水平遮光画像領域に配置されている画素から出力される画素信号に基づき、水平遮光画像領域の基準となるオフセット信号を検出する第２の検出工程と、第２の検出工程により基準となるオフセット信号を検出した後に、水平遮光画像領域に配置されている画素から出力される画素信号に基づき、水平遮光画像領域のオフセット信号を検出する第３の検出工程と、第２の検出工程により検出された基準オフセット信号と、第３の検出工程により検出された所定時間経過後のオフセット信号を比較する比較工程と、第１の検出工程から検出されたオフセット信号と、比較工程による比較結果とに基づいて補正信号を生成する補正信号生成工程と、補正信号生成工程により生成された補正信号に基づいて、有効画像領域に配置されている画素から出力されている画素信号を補正する補正工程とを備える。
【００１９】
また、本発明に係るプログラムは、上述の課題を解決するために、画素が行列状に配置され、光が照射される有効画像領域と、光の照射が遮られる水平遮光画像領域とからなる画素部と、垂直選択線で共通に接続された同一行の画素の制御電極を制御する垂直走査回路と、同一列の画素の主電極が共通に接続された垂直信号線を介して出力される画素信号を行単位で順次出力する水平走査回路と、水平走査回路からの画素信号を出力する出力回路とを有する固体撮像素子から出力される信号を処理するプログラムであって、有効画像領域に照射される光を遮光する遮光工程と、遮光工程により光が遮光された状態で有効画像領域に配置されている画素から出力される画素信号に基づき、有効画像領域のオフセット信号を検出する第１の検出工程と、水平遮光画像領域に配置されている画素から出力される画素信号に基づき、水平遮光画像領域の基準となるオフセット信号を検出する第２の検出工程と、第２の検出工程により基準となるオフセット信号を検出した後に、水平遮光画像領域に配置されている画素から出力される画素信号に基づき、水平遮光画像領域のオフセット信号を検出する第３の検出工程と、第２の検出工程により検出された基準オフセット信号と、第３の検出工程により検出された所定時間経過後のオフセット信号を比較する比較工程と、第１の検出工程から検出されたオフセット信号と、比較工程による比較結果とに基づいて補正信号を生成する補正信号生成工程と、補正信号生成工程により生成された補正信号に基づいて、有効画像領域に配置されている画素から出力されている画素信号を補正する補正工程とをコンピュータに実行させるためのものである。
【発明の効果】
【００２０】
本発明では、通常の撮像装置が有する固体撮像素子の構成（有効画像領域とＨＯＰＢ領域）において、時間の経過により有効画像領域Ａのカラムノイズ値が変化した場合に、ＨＯＰＢ領域Ｂにおけるカラムノイズの変化に応じてカラムノイズ補正値を生成し、当該カラムノイズ補正値によって有効画像領域Ａのカラムノイズを適宜補正するので、常に良質な画像を得ることができる。
【発明を実施するための最良の形態】
【００２１】
以下、本発明の実施の形態として、被写体を撮像する撮像装置及び信号処理方法並びにプログラムについて説明する。
【００２２】
撮像装置１は、図１に示すように、入射光を集光するレンズ１０と、レンズ１０で集光された光を所定時間だけ通過させるシャッタ１１と、レンズ１０及びシャッタ１１を介して入射される被写体の画像を撮像する固体撮像素子１２と、シャッタ１１と固体撮像素子１２を制御する制御部１３と、固体撮像素子１２により撮像された画素信号に所定の信号処理を行う信号処理部１４とを備えている。
【００２３】
被写体から発せられた光は、レンズ１０及びシャッタ１１の光学系を経て、固体撮像素子１２に入射する。固体撮像素子１２は、被写体を撮像する画素部を有している。画素部は、図２に示すように、光が照射される有効画像領域Ａと、アルミ薄膜等による遮光板により数カラムから数十カラムに渡って光の照射が遮られる水平オプティカルブラック（以下、ＨＯＰＢという。）領域Ｂで構成されている。このＨＯＰＢ領域Ｂは、基準となる黒の信号レベルを獲得するために存在する。画像を撮影するときには、有効画像領域ＡとＨＯＰＢ領域Ｂの信号を同一フレーム内に読出し、画像の黒レベルを検出・補正している。本発明では、詳細は以下に述べるが、ＨＯＰＢ領域Ｂの信号にもカラムノイズが存在することを利用してカラムノイズ成分の変化分をリアルタイムに検出し、メモリに蓄えられたカラムノイズ量に補正処理を行うものである。
【００２４】
制御部１３は、シャッタ１１の開閉動作を制御する。また、制御部１３は、固体撮像素子１２を制御し、選択的に有効画像領域Ａ及びＨＯＰＢ領域Ｂに配置されている画素から出力される画素信号Ｓ１を信号処理部１４に出力させる。
【００２５】
ここで、固体撮像素子１２について図３を用いて説明する。固体撮像素子１２は、例えば、Ｘ−Ｙアドレス型を採用し、図３に示すように、光の照射に応じて電荷を蓄積する感光部１５と、感光部１５に蓄積されている電荷を出力する画素トランジスタ１６からなる画素が行列状に配置されてなる画素部１７と、画素部１７に配列されている画素を行（ライン）ごとに接続している垂直選択線１８にパルス信号を印加する垂直走査回路１９と、垂直走査回路１９によるパルス信号の印加により、画素部１７に配列されている画素を列（カラム）ごとに接続している垂直信号線２０に供給された信号のオフセット信号を除去する相関２重サンプリング回路（ＣＤＳ）２１と、ＣＤＳ２１によりオフセット信号が除去された信号を水平信号線２２に供給するためのトランジスタ２３と、ＣＤＳ２１によりオフセット信号が除去された信号を水平信号線２２に供給させるために水平選択線２４を介してトランジスタ２３にパルス信号を供給する水平走査回路２５と、水平走査回路２５に供給された信号を信号処理部１４に供給する出力回路２６とを備える。
【００２６】
このようなＸ−Ｙアドレス型の固体撮像素子１２では、出力回路２６から供給される画素信号は、配置されている画素により列（カラム）ごとに垂直信号線４が異なるため、ＣＤＳ２１やトランジスタ２３などに特性のばらつきがあると、カラムごとに異なるオフセット信号が画像信号に乗ってしまう。このカラムごとのオフセット信号が表示画面上に筋状の固定パターンノイズ（以下、カラムノイズという。）として現れ、画質の劣化を生じさせてしまう原因となる。固体撮像素子１２の後段にある信号処理部１４は、このようなカラムノイズを除去する。
【００２７】
つぎに、信号処理部１４の構成について以下に説明する。信号処理部１４は、図４に示すように、固体撮像素子１２の出力信号をデジタル信号に変換するＡＦＥ（analog front end）部３０と、シャッタ１１で遮光された有効画像領域Ａのカラムノイズ成分を検出するカラムノイズ検出部３１と、カラムノイズ検出部３１で検出されたカラムノイズ成分を記憶保持するラインメモリ３２と、ＨＯＰＢ領域Ｂのカラムノイズを検出し、基準となるカラムノイズと所定時間経過後のカラムノイズとを比較し、変化を検出するカラムノイズ変化検出部３３と、カラムノイズ変化検出部３３で検出されたカラムノイズの変化量と、ラインメモリ３２に記憶されているカラムノイズに基づいてカラムノイズ補正値を生成するカラムノイズ補正値生成部３４と、カラムノイズ補正値生成部３４で生成されたカラムノイズ補正値に基づき、ＡＦＥ部３０から供給される画素信号のカラムノイズ成分を補正するカラムノイズ補正部３５と、カラムノイズ補正部３５の出力信号に所定のカメラ処理を行うカメラ信号処理部３６とを備える。
【００２８】
ＡＦＥ部３０は、固体撮像素子１２から供給された画素信号Ｓ１をデジタル信号に変換し、変換後の画素信号を出力する。また、ＡＦＥ部３０は、ＨＯＰＢ領域Ｂに配置されている画素から出力される信号Ｓ２をカラムノイズ変化検出部３３に供給し、シャッタ１１により光が遮光された状態で有効画像領域Ａに配置されている画素から出力される信号Ｓ３をカラムノイズ検出部３１に供給し、シャッタ１１により光が遮光されていない状態で有効画像領域Ａに配置されている画素から出力される信号Ｓ４をカラムノイズ補正部３５に供給する。
【００２９】
カラムノイズ検出部３１は、ＡＦＥ部３０から供給された信号Ｓ３に基づき、有効画像領域Ａのカラムノイズ値を検出する。カラムノイズ検出部３１は、有効画像領域Ａのカラムノイズ値を求める時（例えば、工場調整時又は電源投入時）は、制御部１３による制御に応じてシャッタ１１が閉じられ、有効画像領域Ａが遮光された状態における固体撮像素子１２からカラムノイズ検出用の信号Ｓ３が供給される。カラムノイズ検出部３１は、信号Ｓ３に基づいて演算を行い、演算により得られた（検出された）カラムノイズ値をラインメモリ３２に保存する。なお、カラムノイズ検出部３１は、有効画像領域Ａのカラムごとにカラムノイズ値を算出し、算出したカラムごとのカラムノイズ値をラインメモリ３２に記憶する。
【００３０】
カラムノイズ変化検出部３３は、カラムノイズ検出部３１により有効画像領域Ａのカラムノイズ量を求める時（例えば、工場調整時又は電源投入時）にＡＦＥ部３０から供給されてきたＨＯＰＢ領域Ｂの信号Ｓ２に基づいてカラムノイズ（基準カラムノイズ）を検出する。また、カラムノイズ変化検出部３３は、基準カラムノイズを検出した後に、ＡＦＥ部３０から供給されてきたＨＯＰＢ領域Ｂの信号Ｓ２に基づいてカラムノイズ（比較対照カラムノイズ）を検出する。カラムノイズ変化検出部３３は、基準カラムノイズと比較対照カラムノイズを比較し、カラムノイズの変化量をリアルタイムに検出する。そして、カラムノイズ変化検出部３３は、検出したカラムノイズの変化量をカラムノイズ補正値生成部３４に供給する。
【００３１】
ここで、カラムノイズ変化検出部３３によりカラムノイズの変化を検出する場合の一例について説明する。図５に示すように、ＨＯＰＢ領域Ｂの各カラムで検出したカラムノイズＣＮｉは正負存在する。そこで、カラムノイズの絶対値｜ＣＮｉ｜を取り、平均化Ａ＝1／Ｎ（Σ｜ＣＮｉ｜）を行う（ＨＯＰＢ領域Ｂのカラム数をＮとする）。なお、平均化においては、カラム毎に変化量を求めてから、その変化量を平均化してもよい。
【００３２】
カラムノイズ変化検出部３３は、基準カラムノイズＡと、画像撮影時のカラムノイズＢとの比をカラムノイズの変化量とし、例えば、カラムノイズＢ／カラムノイズＡ＝２であれば、カラムノイズが２倍に変化したものと想定する。
【００３３】
カラムノイズ補正値生成部３４は、カラムノイズ変化検出部３３から供給されたＨＯＰＢ領域Ｂのカラムノイズの変化量に基づいて、ラインメモリ３２に保存されている有効画像領域Ａのカラムノイズ値を補正し、カラムノイズ補正値を生成する。カラムノイズ補正値生成部３４は、生成したカラムノイズ補正値をカラムノイズ補正部３５に供給する。
【００３４】
また、カラムノイズ補正値生成部３４は、カラムノイズ変化検出部３３で検出されたカラムノイズの変化量をそのままカラムノイズ補正値の生成に使用しても良いが、ＨＯＰＢ領域Ｂと有効画像領域Ａのカラムノイズの特性が多少異なり変化量をそのまま使えない場合には、カラムノイズ変化検出部３３で検出されたカラムノイズ変化量に対応する変換テーブルを有し、当該変換テーブルを参照してラインメモリ３２に記憶されている有効画像領域Ａのカラムノイズ値を補正し、カラムノイズ補正値を生成しても良い。
【００３５】
また、カラムノイズ補正値生成部３４は、カラムノイズ変化検出部３３により検出されたカラムノイズ変化量に時定数の大きいフィルタをかけて、カラムノイズ補正部３５で用いるカラムノイズ値の変化を緩やかにする構成であっても良いし、ランダムノイズ成分を取り除くフィルタをかけることにより、カラムノイズ変化の検出精度を高める構成であっても良い。
【００３６】
また、有効画像領域Ａは、熱源（例えば、電源）に近いカラムほど温度による影響を受けやすい傾向にある。撮像装置１は、このような熱源による影響を考慮してカラムノイズ補正値を生成するために、有効画像領域Ａの画素を複数のカラムごとに分け、複数のカラムごとにカラムノイズを調整するための調整値を保持する調整値保持部３７を備える。
【００３７】
カラムノイズ補正値生成部３４は、カラムノイズ変化検出部３３から供給されたＨＯＰＢ領域Ｂのカラムノイズの変化量と、調整値保持部３７により保持されている調整値に基づいて、ラインメモリ３２に保存されている有効画像領域Ａのカラムノイズ値を補正し、カラムノイズ補正値を生成する。
【００３８】
カラムノイズ補正部３５は、カラムノイズ補正値生成部３４から供給されたカラムノイズ補正値に基づき、ＡＦＥ部３０から供給される画素信号のカラムノイズ成分を補正する。カラムノイズ補正部３５は、カラムノイズ成分を補正した画素信号をカメラ信号処理部３６に供給する。
【００３９】
カメラ信号処理部３６は、カラムノイズ補正部３５でカラムノイズが補正処理された信号に所定のカメラ信号処理を行う。
【００４０】
ここで、撮像装置１の動作について説明する。撮像装置１では、通常の画像撮影時には、固体撮像素子１２から有効画像領域Ａの信号Ｓ４とＨＯＰＢ領域Ｂの信号Ｓ２が読み出され、カラムノイズ変化検出部３３によりＨＯＰＢ領域Ｂのカラムノイズ量の変化がリアルタイムに観測される。
【００４１】
カラムノイズ補正値生成部３４は、カラムノイズ変化検出部３３から供給されるカラムノイズの変化量に基づいて、ラインメモリ３２に記憶されている有効画像領域Ａのカラムノイズ値に補正を行い、カラムノイズ補正値を生成する。
【００４２】
カラムノイズ補正部３５では、カラムノイズ補正値生成部３４から供給されるＨＯＰＢ領域Ｂのカラムノイズの変化に合わせて補正されたカラムノイズ補正値を用いて、本線系の信号からカラムノイズ成分を減じ、カメラ信号処理部３６へと信号を供給する。
【００４３】
このようにして本発明に係る撮像装置１は、通常の撮像装置が有する固体撮像素子１２の構成（有効画像領域ＡとＨＯＰＢ領域Ｂ）において、固体撮像素子１２の出力信号をデジタル信号に変換するＡＦＥ部３０と、シャッタ１１で遮光された有効画像領域Ａのカラムノイズ成分を検出するカラムノイズ検出部３１と、カラムノイズ検出部３１で検出されたカラムノイズ成分を記憶保持するラインメモリ３２と、ＨＯＰＢ領域Ｂのカラムノイズを検出し、基準となるカラムノイズと所定時間経過後のカラムノイズとを比較し、変化を検出するカラムノイズ変化検出部３３と、カラムノイズ変化検出部３３で検出されたカラムノイズの変化量と、ラインメモリ３２に記憶されているカラムノイズに基づいてカラムノイズ補正値を生成するカラムノイズ補正値生成部３４と、カラムノイズ補正値生成部３４で生成されたカラムノイズ補正値に基づき、ＡＦＥ部３０から供給される画素信号のカラムノイズ成分を補正するカラムノイズ補正部３５と、カラムノイズ補正部３５の出力信号に所定のカメラ処理を行うカメラ信号処理部３６とを備える信号処理部１４を有し、シャッタ１１によって遮光された状態の有効画像領域Ａのカラムノイズ値をカラムノイズ検出部３１において検出し、ＨＯＰＢ領域Ｂのカラムノイズ変化量をリアルタイムにカラムノイズ変化検出部３３において検出し、カラムノイズ変化検出部３３で検出したカラムノイズ変化量に基づいてカラムノイズ検出部３１で検出したカラムノイズ値を補正し、カラムノイズ補正値をカラムノイズ補正値生成部３４によって生成し、このカラムノイズ補正値に基づいて、通常の画像撮影時において有効画像領域Ａから供給された信号Ｓ４をカラムノイズ補正部３５によって補正するので、時間の経過により有効画像領域Ａのカラムノイズ値が変化した場合に、ＨＯＰＢ領域Ｂにおけるカラムノイズの変化に応じてカラムノイズ補正値を生成し、当該カラムノイズ補正値によって有効画像領域Ａのカラムノイズを適宜補正するので、常に良質な画像を得ることができる。
【００４４】
また、本発明に係る撮像装置１では、有効画像領域Ａで検出したカラムノイズの変化分を補正するために特別のモードに移行する必要がなく、通常の画像撮影を行いながらリアルタイムにカラムノイズ補正を行うことができ、特に、画像の撮影が連続するような、いわゆる動画撮影において効果を発揮する。
【００４５】
また、本発明では、上述で説明した撮像装置１による一連の処理は、ソフトウェアにより行うこともできる。一連の処理をソフトウェアによって行う場合には、そのソフトウェアを構成するプログラムが、汎用のコンピュータ等にインストールされる。また、当該プログラムは、ＣＤ−ＲＯＭのようなリムーバブルメディアに記録されてユーザに配布されても良いし、ネットワークを介してユーザのコンピュータにダウンロードされることにより配布されても良い。
【図面の簡単な説明】
【００４６】
【図１】本願発明に係る固体撮像素子装置の構成を示すブロック図である。
【図２】固体撮像素子の画素部を有効画像領域とＨＯＰＢ領域に分割して構成したときの様子を示す図である。
【図３】固体撮像素子の構造を示す模式図である。
【図４】信号処理部の構成を示すブロック図である。
【図５】カラムノイズの変化量の検出についての説明に供する図である。
【図６】固体撮像素子の構造を示す模式図である。
【図７】固体撮像素子の画素部を有効画像領域と、ＶＯＰＢ領域と、ＨＯＰＢ領域に分割して構成したときの様子を示す図である。
【符号の説明】
【００４７】
１  撮像装置、１０  レンズ、１１  シャッタ、１２  固体撮像素子、１３  制御部、１４  信号処理部、１５  感光部、１６  画素トランジスタ、１７  画素部、１８  垂直選択線、１９  垂直走査回路、２０  垂直信号線、２１  相関２重サンプリング回路（ＣＤＳ）、２２  水平信号線、２３  トランジスタ、２４  水平選択線、２５  水平走査回路、２６  出力回路、３０  ＡＦＥ（analog front end）部、３１  カラムノイズ検出部、３２  ラインメモリ、３３  カラムノイズ変化検出部、３４  カラムノイズ補正値生成部、３５  カラムノイズ補正部、３６  カメラ信号処理部、３７  調整値保持部
【図１】
2007081453.tif 000003
【図２】
2007081453.tif 000004
【図３】
2007081453.tif 000005
【図４】
2007081453.tif 000006
【図５】
2007081453.tif 000007
【図６】
2007081453.tif 000008
【図７】
2007081453.tif 000009