(57)【要約】【課題】電子シャッタ傷の位置を簡単に特定して補正を行うことが可能な撮像装置を提供する。【解決手段】電荷転送部を有する撮像素子５と、撮像素子５に電子シャッタ信号を供給する駆動部１２とを有する撮像装置であって、撮像素子５から動画の１フレームを読み出す期間であるフレーム期間における、電子シャッタ信号の供給を停止するシャッタ停止タイミング、電荷転送部による電荷の転送を開始する転送開始タイミング、及び電荷転送部による転送パターンの情報を取得し、この情報に基づいて、１フレームに含まれる電子シャッタ信号によって発生する電子シャッタ傷の座標を算出する電子シャッタ傷座標算出部１６と、算出された電子シャッタ傷の座標の情報にしたがって、当該電子シャッタ傷を補正する電子シャッタ傷補正部２２とを備える。【選択図】図１
2011239228.tif 000002
【特許請求の範囲】
【請求項１】
電荷転送部を有する撮像素子と、前記撮像素子に電子シャッタ信号を供給する駆動部とを有する撮像装置であって、
前記撮像素子から動画の１フレームを読み出す期間であるフレーム期間における、前記電子シャッタ信号の供給を停止するシャッタ停止タイミング、前記電荷転送部による電荷の転送を開始する転送開始タイミング、及び前記電荷転送部による転送パターンの情報を取得する情報取得部と、
前記情報に基づいて、前記１フレームに含まれる前記電子シャッタ信号によって発生する電子シャッタ傷の座標の情報を生成する電子シャッタ傷座標情報生成部と、
前記電子シャッタ傷の座標の情報にしたがって、当該電子シャッタ傷を補正する電子シャッタ傷補正部とを備える撮像装置。
【請求項２】
請求項１記載の撮像装置であって、
前記フレーム期間よりも少なくとも２つ前のフレーム期間において前記１フレームを撮像するときの露出値を決定する露出決定部と、
前記露出値に基づいて、前記フレーム期間における、前記撮像素子に含まれる画素からの電荷を読み出す読出しタイミング、前記転送開始タイミング、及び前記電荷転送部による転送パターンの組み合わせでなる駆動パターンを決定する駆動パターン決定部と、
前記読出しタイミングと前記露出値に基づく前記１フレームを撮像するときの露光時間にしたがって前記フレーム期間の１つ前のフレーム期間における前記シャッタ停止タイミングを決定するシャッタ停止タイミング決定部とを備え、
前記情報取得部は、前記フレーム期間における前記転送開始タイミング及び前記電荷転送部による転送パターンの情報を前記駆動パターン決定部から取得し、前記フレーム期間における前記シャッタ停止タイミングを前記シャッタ停止タイミング決定部から取得する撮像装置。
【請求項３】
請求項１又は２記載の撮像装置であって、
前記電子シャッタ傷補正部が、前記電子シャッタ傷が前記撮像素子の非遮光領域から得られたラインにある場合に当該電子シャッタ傷を補正する撮像装置。
【請求項４】
請求項３記載の撮像装置であって、
前記撮像素子の遮光領域にある画素から得られる信号を用いて前記１フレームのスミア補正を実施するスミア補正部を備え、
前記スミア補正部は、前記電子シャッタ傷が前記遮光領域から得られたラインにある場合には、当該電子シャッタ傷のデータを前記スミア補正に使用しない撮像装置。
【請求項５】
請求項１又は２記載の撮像装置であって、
前記電子シャッタ傷補正部が、前記電子シャッタ傷が前記撮像素子の遮光領域から得られたラインにある場合に当該電子シャッタ傷を補正する撮像装置。
【請求項６】
請求項１又は２記載の撮像装置であって、
前記電子シャッタ傷補正部が、前記電子シャッタ傷が前記撮像素子の非遮光領域と遮光領域のいずれかから得られたラインにある場合に当該電子シャッタ傷を補正する撮像装置。
【請求項７】
請求項３又は４記載の撮像装置であって、
前記電子シャッタ傷補正部が、前記電子シャッタ傷を、前記非遮光領域から得られた当該電子シャッタ傷以外のラインを用いて補正する撮像装置。
【請求項８】
請求項１、２、３、４、又は７記載の撮像装置であって、
前記電子シャッタ傷補正部が、前記電子シャッタ傷を、前記電子シャッタ傷と同色成分の信号を含む当該電子シャッタ傷に最も近接するラインを用いて補正する撮像装置。
【請求項９】
請求項５記載の撮像装置であって、
前記電子シャッタ傷補正部が、前記電子シャッタ傷を、前記遮光領域から得られた当該電子シャッタ傷以外のラインを用いて補正する撮像装置。
【請求項１０】
請求項５又は９記載の撮像装置であって、
前記電子シャッタ傷補正部が、前記電子シャッタ傷を、前記電子シャッタ傷に隣接するラインを用いて補正する撮像装置。
【請求項１１】
請求項６記載の撮像装置であって、
前記電子シャッタ傷補正部が、前記電子シャッタ傷が前記非遮光領域から得られたラインにある場合には、当該電子シャッタ傷を前記非遮光領域から得られた当該電子シャッタ傷以外のラインを用いて補正し、前記電子シャッタ傷が前記遮光領域から得られたラインにある場合には、当該電子シャッタ傷を前記遮光領域から得られた当該電子シャッタ傷以外のラインを用いて補正する撮像装置。
【請求項１２】
請求項６又は１１記載の撮像装置であって、
前記電子シャッタ傷補正部が、前記電子シャッタ傷が前記非遮光領域から得られたラインにある場合には、当該電子シャッタ傷を当該電子シャッタ傷と同色成分の信号を含む当該電子シャッタ傷に最も近接するラインを用いて補正し、前記電子シャッタ傷が前記遮光領域から得られたラインにある場合には、当該電子シャッタ傷を当該電子シャッタ傷に隣接するラインを用いて補正する撮像装置。
【請求項１３】
請求項１〜１２のいずれか１項記載の撮像装置であって、
前記電子シャッタ傷座標情報生成部が、前記情報に変更があったときにのみ前記電子シャッタ傷の座標の情報を生成する撮像装置。
【請求項１４】
請求項１〜１３のいずれか１項記載の撮像装置であって、
前記電子シャッタ傷座標情報生成部が、前記電子シャッタ傷補正部が前記電子シャッタ傷の補正処理を行っている際中に、次のフレームの前記電子シャッタ傷の座標の情報を生成する撮像装置。
【請求項１５】
電荷転送部を有する撮像素子に電子シャッタ信号を供給して撮像を行う撮像方法であって、
前記撮像素子から動画の１フレームを読み出す期間であるフレーム期間における、前記電子シャッタ信号の供給を停止するシャッタ停止タイミング、前記電荷転送部による電荷の転送を開始する転送開始タイミング、及び前記電荷転送部による転送パターンの情報を取得する情報取得ステップと、
前記情報に基づいて、前記１フレームに含まれる前記電子シャッタ信号によって発生する電子シャッタ傷の座標の情報を生成する電子シャッタ傷座標情報生成ステップと、
前記電子シャッタ傷の座標の情報にしたがって、当該電子シャッタ傷を補正する電子シャッタ傷補正ステップとを備える撮像方法。
【請求項１６】
請求項１５記載の撮像方法であって、
前記フレーム期間よりも少なくとも２つ前のフレーム期間において前記１フレームを撮像するときの露出値を決定する露出決定ステップと、
前記露出値に基づいて、前記フレーム期間における、前記撮像素子に含まれる画素からの電荷を読み出す読出しタイミング、前記転送開始タイミング、及び前記電荷転送部による転送パターンの組み合わせでなる駆動パターンを決定する駆動パターン決定ステップと、
前記読出しタイミングと前記露出値に基づく前記１フレームを撮像するときの露光時間にしたがって前記フレーム期間の１つ前のフレーム期間における前記シャッタ停止タイミングを決定するシャッタ停止タイミング決定ステップとを備え、
前記情報取得ステップでは、前記フレーム期間における前記転送開始タイミング及び前記電荷転送部による転送パターンの情報を前記駆動パターン決定部から取得し、前記フレーム期間における前記シャッタ停止タイミングを前記シャッタ停止タイミング決定部から取得する撮像方法。
【請求項１７】
請求項１５又は１６記載の撮像方法であって、
前記電子シャッタ傷補正ステップでは、前記電子シャッタ傷が前記撮像素子の非遮光領域から得られたラインにある場合に当該電子シャッタ傷を補正する撮像方法。
【請求項１８】
請求項１７記載の撮像方法であって、
前記撮像素子の遮光領域にある画素から得られる信号を用いて前記１フレームのスミア補正を実施するスミア補正ステップを備え、
前記スミア補正ステップでは、前記電子シャッタ傷が前記遮光領域から得られたラインにある場合には、当該電子シャッタ傷のデータを前記スミア補正に使用しない撮像方法。
【請求項１９】
請求項１５又は１６記載の撮像方法であって、
前記電子シャッタ傷補正ステップでは、前記電子シャッタ傷が前記撮像素子の遮光領域から得られたラインにある場合に当該電子シャッタ傷を補正する撮像方法。
【請求項２０】
請求項１５又は１６記載の撮像方法であって、
前記電子シャッタ傷補正ステップでは、前記電子シャッタ傷が前記撮像素子の非遮光領域と遮光領域のいずれかから得られたラインにある場合に当該電子シャッタ傷を補正する撮像方法。
【請求項２１】
請求項１７又は１８記載の撮像方法であって、
前記電子シャッタ傷補正ステップでは、前記電子シャッタ傷を、前記非遮光領域から得られた当該電子シャッタ傷以外のラインを用いて補正する撮像方法。
【請求項２２】
請求項１７、１８、又は２１記載の撮像方法であって、
前記電子シャッタ傷補正ステップでは、前記電子シャッタ傷を、前記電子シャッタ傷と同色成分の信号を含む当該電子シャッタ傷に最も近接するラインを用いて補正する撮像方法。
【請求項２３】
請求項１９記載の撮像方法であって、
前記電子シャッタ傷補正ステップでは、前記電子シャッタ傷を、前記遮光領域から得られた当該電子シャッタ傷以外のラインを用いて補正する撮像方法。
【請求項２４】
請求項１９又は２３記載の撮像方法であって、
前記電子シャッタ傷補正ステップでは、前記電子シャッタ傷を、前記電子シャッタ傷に隣接するラインを用いて補正する撮像方法。
【請求項２５】
請求項２０記載の撮像方法であって、
前記電子シャッタ傷補正ステップでは、前記電子シャッタ傷が前記非遮光領域から得られたラインにある場合には、当該電子シャッタ傷を前記非遮光領域から得られた当該電子シャッタ傷以外のラインを用いて補正し、前記電子シャッタ傷が前記遮光領域から得られたラインにある場合には、当該電子シャッタ傷を前記遮光領域から得られた当該電子シャッタ傷以外のラインを用いて補正する撮像方法。
【請求項２６】
請求項２０又は２５記載の撮像方法であって、
前記電子シャッタ傷補正ステップでは、前記電子シャッタ傷が前記非遮光領域から得られたラインにある場合には、当該電子シャッタ傷を当該電子シャッタ傷と同色成分の信号を含む当該電子シャッタ傷に最も近接するラインを用いて補正し、前記電子シャッタ傷が前記遮光領域から得られたラインにある場合には、当該電子シャッタ傷を当該電子シャッタ傷に隣接するラインを用いて補正する撮像方法。
【請求項２７】
請求項１５〜２６のいずれか１項記載の撮像方法であって、
前記電子シャッタ傷座標情報生成ステップでは、前記情報に変更があったときにのみ前記電子シャッタ傷の座標の情報を生成する撮像方法。
【請求項２８】
請求項１５〜２７のいずれか１項記載の撮像方法であって、
前記電子シャッタ傷座標情報生成ステップでは、前記電子シャッタ傷補正部が前記電子シャッタ傷の補正処理を行っている際中に、次のフレームの前記電子シャッタ傷の座標の情報を生成する撮像方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置及び撮像方法に関する。
【背景技術】
【０００２】
ＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）型の撮像素子は、電子シャッタ信号に基づいて基板に印加される電圧によって、各フォトダイオード（画素）に蓄積された電荷を基板側に掃き捨てることができるように構成されている。
【０００３】
図１５は、ＣＣＤ型の撮像素子の駆動例を示すタイミングチャートである。図１５では、動画撮像（撮像中の被写体を表示部でリアルタイムに確認するためのライブビュー画像（スルー画像）を生成するための動画撮像を含む）時のタイミングチャートを示した。
【０００４】
図１５において、フレーム同期信号の立下りから次の立下りまでの期間が動画の１フレームを出力する１フレーム期間である。この１フレーム期間において、露光中に各画素に蓄積された信号電荷の垂直電荷転送部への読出しが読出信号にしたがって行われる。また、垂直電荷転送部から水平電荷転送部への信号電荷の転送が垂直転送信号にしたがって行われる。また、水平電荷転送部に転送された信号電荷の出力アンプへの転送が図示しない水平転送信号にしたがって行われる。
【０００５】
垂直転送信号は、周期ｔのパルスであり、１つのパルスが供給される毎に、１ライン分の画素の信号電荷が水平電荷転送部に転送される。なお、ハニカム配列（奇数行が偶数行に対して各行の画素配列ピッチの１／２だけ行方向にずれている配列）の場合には、隣接２ライン分の画素を１ライン分として扱う。
【０００６】
１ライン分の画素の信号電荷が水平電荷転送部に転送されると、水平転送信号が撮像素子に供給されて、この信号電荷が出力アンプにまで転送される。そして、この信号電荷が出力アンプで電圧信号に変換され、この電圧信号が撮像素子外部に出力される。１ライン分の信号電荷の出力アンプへの転送が終了すると、次の垂直転送信号が撮像素子に供給され、次の１ライン分の画素からの信号電荷が水平電荷転送部に転送される。このような動作が繰り返されて、全ての画素から電圧信号が読み出される。
【０００７】
電子シャッタ信号は、露光期間中はその供給が停止され、それ以外の期間に撮像素子に供給される。図１５の例では、フレーム期間１の読出信号の供給が終わってから電子シャッタ信号の供給が開始され、垂直転送信号が供給されている期間（垂直電荷転送期間）の途中で、この電子シャッタ信号の供給が停止される。この電子シャッタ信号の供給の停止をもって、次のフレーム期間２で出力するフレームの露光が開始される。この露光は、フレーム期間２の開始後に供給される読出信号の停止をもって終了する。この露光の終了後、フレーム期間２の垂直電荷転送期間が開始されるまでの間に、電子シャッタ信号の供給が再開される。なお、電子シャッタ信号と垂直転送信号は、その供給タイミングが同じになるように同期している。
【０００８】
このように、動画撮像時には、垂直電荷転送期間の途中で、電子シャッタ信号を停止して次のフレームの露光を開始するようになっている。電子シャッタ信号を停止すると、出力アンプに含まれるエミッタフォロワ回路等の出力系電源に揺らぎが発生する。このため、電子シャッタ信号を停止した直後に供給される垂直転送信号（停止直前の最後の電子シャッタ信号と同時に供給された垂直転送信号の次の垂直転送信号）によって水平電荷転送部に転送され、撮像素子外部に出力される１ライン分の電圧信号には、この揺らぎの影響が加わる。
【０００９】
このような揺らぎの影響がある結果、撮像素子から出力される動画の１フレームは、図１６に示したように、電子シャッタ信号の停止直後に出力された１ライン分の信号が傷Ｋとなってしまい、画質が劣化する。この傷Ｋは、電子シャッタ信号が原因で発生するものであるため、電子シャッタ傷と呼ばれる。
【００１０】
動画撮像時には、１フレーム期間毎に、読出信号の供給タイミング、垂直転送信号の供給開始タイミング、及び垂直転送信号の周期ｔ等が異なるため、この電子シャッタ傷の座標はフレーム毎に変化する。
【００１１】
この電子シャッタ傷は、出力系電源の揺らぎを部品の追加・変更で対応することで目立たなくすることはできる。しかし、小型、低コストが求められる撮像素子において、このような対応を行うことは難しい。
【００１２】
特許文献１には、電子シャッタ信号によって発生する傷を防止する方法として、電子シャッタ信号の出力の前後で垂直電荷転送を停止させる方法が開示されている。しかし、この方法は、フレーム期間の途中で垂直転送が一時停止するため、このフレーム期間に得られるフレームの画面上下でスミア量が変化してしまい、スミア補正を精度よく行うことができない。
【００１３】
特許文献２、３には、予め登録した欠陥画素のアドレスにしたがって欠陥補正を行うことで、傷を目立たなくする技術が開示されている。しかし、これらの技術は、アドレスが既知の欠陥画素の補正に有効な技術であり、フレーム毎に座標が変化する電子シャッタ傷には適用することができない。
【００１４】
特許文献４には、注目画素とその周囲の参照画素とから、当該注目画素が欠陥画素かどうかを判定する方法が開示されている。しかし、この方法では、正常な画素についても欠陥画素かどうかの判定が必要になり、動画撮像のように即時性が要求されるケースには向かない。
【００１５】
特許文献５には、欠陥補正パルスにしたがって欠陥画素の位置を特定して欠陥補正を行う方法が開示されている。しかし、この方法では、欠陥補正パルスを発生させる構成が必要となる。また、欠陥補正パルスが来て初めて欠陥画素の座標が分かるので、順次転送されてくる画素の出力信号をメモリに常時保持しておく必要がある。
【先行技術文献】
【特許文献】
【００１６】
【特許文献１】特開２００５−２４４５６４号公報
【特許文献２】特開２００６−１０８９１８号公報
【特許文献３】特開２０００−５９６９０号公報
【特許文献４】特開２００８−１１３１６３号公報
【特許文献５】特開２００１−３５８９９６号公報
【発明の概要】
【発明が解決しようとする課題】
【００１７】
本発明の目的は、電子シャッタ傷の位置を簡単に特定して補正を行うことが可能な撮像装置及び撮像方法を提供することにある。
【課題を解決するための手段】
【００１８】
本発明の撮像装置は、電荷転送部を有する撮像素子と、前記撮像素子に電子シャッタ信号を供給する駆動部とを有する撮像装置であって、前記撮像素子から動画の１フレームを読み出す期間であるフレーム期間における、前記電子シャッタ信号の供給を停止するシャッタ停止タイミング、前記電荷転送部による電荷の転送を開始する転送開始タイミング、及び前記電荷転送部による転送パターンの情報を取得する情報取得部と、前記情報に基づいて、前記１フレームに含まれる前記電子シャッタ信号によって発生する電子シャッタ傷の座標の情報を生成する電子シャッタ傷座標情報生成部と、前記電子シャッタ傷の座標の情報にしたがって、当該電子シャッタ傷を補正する電子シャッタ傷補正部とを備えるものである。
【００１９】
本発明の撮像方法は、電荷転送部を有する撮像素子に電子シャッタ信号を供給して撮像を行う撮像方法であって、前記撮像素子から動画の１フレームを読み出す期間であるフレーム期間における、前記電子シャッタ信号の供給を停止するシャッタ停止タイミング、前記電荷転送部による電荷の転送を開始する転送開始タイミング、及び前記電荷転送部による転送パターンの情報を取得する情報取得ステップと、前記情報に基づいて、前記１フレームに含まれる前記電子シャッタ信号によって発生する電子シャッタ傷の座標の情報を生成する電子シャッタ傷座標情報生成ステップと、前記電子シャッタ傷の座標の情報にしたがって、当該電子シャッタ傷を補正する電子シャッタ傷補正ステップとを備えるものである。
【発明の効果】
【００２０】
本発明によれば、電子シャッタ傷の位置を簡単に特定して補正を行うことが可能な撮像装置及び撮像方法を提供することができる。
【図面の簡単な説明】
【００２１】
【図１】本発明の一実施形態を説明するための撮像装置の概略構成を示す図
【図２】図１に示すデジタルカメラの動画撮像時における撮像素子５の駆動例を示したタイミングチャート
【図３】図１に示すデジタルカメラの電子シャッタ傷の補正に関係するブロックの接続関係をより具体的に示した図
【図４】図１に示すデジタルカメラの動画撮像時の動作を説明するためのフローチャート
【図５】図１に示すデジタルカメラの第一の変形例のデジタルカメラの動画撮像時の動作を説明するためのフローチャート
【図６】スミア補正方法を説明するための図
【図７】図１に示すデジタルカメラの第三の変形例のデジタルカメラの構成を示す図
【図８】図７に示すデジタルカメラの動画撮像時の動作を説明するためのフローチャート
【図９】図１に示すデジタルカメラの第四の変形例のデジタルカメラの構成を示す図
【図１０】図９に示したデジタルカメラの動画撮像時の動作を説明するためのフローチャート
【図１１】図１に示すデジタルカメラの第五の変形例のデジタルカメラの構成を示す図
【図１２】図１１に示したデジタルカメラの動画撮像時の動作を説明するためのフローチャート
【図１３】図１に示すデジタルカメラの第六の変形例のデジタルカメラの構成を示す図
【図１４】図１３に示したデジタルカメラの動画撮像時の動作を説明するためのフローチャート
【図１５】従来の撮像素子の駆動例を示したタイミングチャート
【図１６】電子シャッタ傷を説明するための図
【発明を実施するための形態】
【００２２】
以下、本発明の実施形態について図面を参照して説明する。
【００２３】
図１は、本発明の一実施形態を説明するための撮像装置の概略構成を示す図である。撮像装置としては、デジタルカメラ及びデジタルビデオカメラ等の撮像装置、電子内視鏡及びカメラ付携帯電話機等に搭載される撮像モジュール、等があり、ここではデジタルカメラを例にして説明する。
【００２４】
図示するデジタルカメラの撮像系は、絞り１と、撮影レンズ２と、メカニカルシャッタ３と、ＣＣＤ型の撮像素子５とを備える。
【００２５】
撮像素子５は、水平方向とこれに直交する垂直方向に二次元状に配列された複数の光電変換素子（画素）を有している。複数の画素は、水平方向に並ぶ複数の画素からなる画素ラインを垂直方向に複数並べた配置となっている。
【００２６】
複数の画素ラインのうち、撮像素子の端部にある少なくとも１つの画素ラインは、スミアを検出するために遮光されている。このため、撮像素子５には、遮光された画素が配置される領域である遮光領域と、遮光されない画素が配置される領域である非遮光領域とが存在する。
【００２７】
また、撮像素子５の各画素の上方にはカラーフィルタが設けられ、このカラーフィルタ配列は例えばベイヤ配列となっている。
【００２８】
デジタルカメラの電気制御系全体を統括制御するシステム制御部１１は、モータドライバ８を制御して絞り１の開口量を制御して露光量調整を行い、モータドライバ９を制御して撮影レンズ２の位置をフォーカス位置に調整して焦点調節制御を行い、モータドライバ１０を制御してメカニカルシャッタ３の開閉制御を行う。
【００２９】
また、システム制御部１１は、撮像素子駆動部１２を介して撮像素子５を駆動し、撮影レンズ２を通して撮像した被写体像を撮像画像信号として出力させる。システム制御部１１には、操作部１３を通してユーザからの指示信号が入力される。
【００３０】
デジタルカメラの電気制御系は、更に、撮像素子５の出力に接続された相関二重サンプリング処理、信号増幅処理等のアナログ信号処理を行うアナログ信号処理部６と、このアナログ信号処理部６から出力された撮像画像信号をデジタル信号に変換するＡ／Ｄ変換回路７とを備え、これらはシステム制御部１１によって制御される。
【００３１】
更に、このデジタルカメラの電気制御系は、画像入力コントローラ１４と、画像信号処理回路１５と、電子シャッタ傷座標算出回路１６と、圧縮処理回路１７と、画像表示装置１９に接続されるビデオエンコーダ１８と、ＡＥ・ＡＷＢ検出回路２０と、メインメモリ２１と、電子シャッタ傷補正回路２２と、記録メディア２４に接続されるメディアコントローラ２３とを備え、これらはバス２５によって相互に接続され、システム制御部１１からの指令によって制御される。
【００３２】
画像入力コントローラ１４は、Ａ／Ｄ変換回路７から出力される撮像画像信号を入力する。
【００３３】
ＡＥ・ＡＷＢ検出回路２０は、画像入力コントローラ１４から入力された撮像画像信号の明るさのレベルを検出したり、ホワイトバランスゲイン決定のための光源種別を検出したりする。システム制御部１１は、ＡＥ・ＡＷＢ検出回路２０の検出データに基づいて、露出値を決定して絞り１の絞り値及びシャッタスピード等を設定したり、ホワイトバランスゲインを設定したりする。
【００３４】
画像信号処理回路１５は、撮像画像信号に所定のデジタル信号処理を施して撮像画像データを生成する。
【００３５】
圧縮処理回路１７は、撮像画像データを圧縮して、記録メディア２４に記録する。
【００３６】
ビデオエンコーダ１８は、画像信号処理回路１５で生成された表示用の撮像画像データや記録メディア２４に記録されている撮像画像データを画像表示装置１９に表示させる。
【００３７】
図２は、図１に示すデジタルカメラの動画撮像時における撮像素子５の駆動例を示したタイミングチャートである。
【００３８】
図２において、動画の任意のフレームａを読み出す期間をフレーム期間Ａとし、フレームａの次のフレームｂを読み出す期間をフレーム期間Ｂとする。また、各フレーム期間において、そのフレーム期間の開始から垂直電荷転送部による電荷の転送を開始する転送開始タイミングまでの時間をＴｔｏｐとし、そのフレーム期間の開始から読出信号が供給される読出しタイミングまでの時間をＴＳＧとし、そのフレーム期間の開始から電子シャッタ信号の供給が停止されるシャッタ停止タイミングまでの時間をＴｓｕｂｓｔｏｐとし、そのフレーム期間の長さをＴｆｒａｍｅとし、フレーム期間Ａのシャッタ停止タイミングからフレーム期間Ｂの読出しタイミングまでの時間（フレームｂの露光時間）をＴｅｘｐとしている。
【００３９】
なお、このデジタルカメラでは、垂直電荷転送部による電荷転送期間中において垂直転送信号の周期はｔで固定されるものとして説明する。また、転送開始タイミングは、フレーム期間において、読出信号が出力された後に垂直転送信号の供給が開始される時点を示す。また、電子シャッタ信号は、フレーム期間において、読出信号の供給終了後でかつ転送開始タイミングよりも前に、その供給が開始されるものとする。
【００４０】
図３は、図１に示すデジタルカメラの電子シャッタ傷の補正に関係するブロックの接続関係をより具体的に示した図である。
【００４１】
図３に示すように、システム制御部１１は、電子シャッタ出力制御部１１ａと、撮像素子駆動パターン指定部１１ｂとを有する。
【００４２】
撮像素子駆動パターン指定部１１ｂは、フレームａを得るための撮像時の露出値を、フレーム期間Ａの少なくとも２つ前のフレーム期間に読み出された撮像画像信号からＡＥ・ＡＷＢ検出回路２０で検出された明るさに基づいて決定し、この露出値にしたがって、フレーム期間Ａにおける撮像素子５の駆動パターンを決定する。
【００４３】
駆動パターンとは、フレーム期間における、読出信号の供給開始タイミング（読出しタイミング）、上記転送開始タイミング、及びそのフレーム期間でフレームを読み出すのに最低限必要な垂直転送信号のパルスの総本数及び各パルスの周期で決まる転送パターンの組み合わせでなるパターンのことを言う。
【００４４】
電子シャッタ出力制御部１１ａは、撮像素子駆動パターン指定部１１ｂで決定されたフレームａを得るための撮像時の露出値から、フレームａを得るための撮像時の露光時間を決定し、この露光時間と、撮像素子駆動パターン指定部１１ｂで決定されたフレーム期間Ａの駆動パターンとにしたがって、フレーム期間Ａの１つ前のフレーム期間における電子シャッタ信号の供給停止のタイミング（フレームａの露光開始タイミング）であるシャッタ停止タイミングを決定する。
【００４５】
図２の例では、まず、システム制御部１１が、フレーム期間Ａの１つ前のフレーム期間で読み出された撮像画像信号から決定した露出値に基づいて、フレーム期間Ｂにおける駆動パターンを決定する。
【００４６】
次に、システム制御部１１は、当該露出値に基づいてフレーム期間Ｂで読み出すフレームｂの露光時間を決定し、この露光時間とフレーム期間Ｂの駆動パターンとに基づいて、フレームｂの露光開始タイミング（フレーム期間Ａにおけるシャッタ停止タイミング）を決定する。
【００４７】
フレームｂの露光時間は、フレーム期間Ａのシャッタ停止タイミングからフレーム期間Ｂの読出しタイミングまでの時間であり、フレーム期間Ｂの読出しタイミングはフレーム期間Ｂの駆動パターンによって決まる。このため、この読出しタイミングから露光時間分遡ったタイミングが、フレーム期間Ａのシャッタ停止タイミング（フレームｂの露光開始タイミング）になる。
【００４８】
次に、システム制御部１１は、フレームｂの露光時間に基づいて、フレーム期間Ａの終了タイミングを決定して、フレーム期間Ａの長さを決定する。
【００４９】
このように、システム制御部１１は、フレーム期間Ａにおける駆動パターン（読出しタイミング、転送開始タイミング、及び転送パターン）、シャッタ停止タイミング、及びフレーム期間長さからなる駆動内容のうち、駆動パターンを２つ前のフレーム期間において決定し、シャッタ停止タイミング及びフレーム期間長さを１つ前のフレーム期間において決定する。
【００５０】
撮像素子駆動部１２は、システム制御部１１で決定された駆動内容にしたがって、撮像素子５に電子シャッタ信号、垂直転送信号、読出し信号等を供給して、撮像素子５を駆動する。
【００５１】
電子シャッタ傷座標算出回路１６は、フレームａに含まれる電子シャッタ傷の座標を次のようにして算出して、当該電子シャッタ傷の座標の情報を生成する。
【００５２】
図２に示すように、フレーム期間Ａにおいて電子シャッタ信号が停止した直後に供給される垂直転送信号によって撮像素子５から出力される１画素ライン分の信号（以下、ラインという）が、フレームａの電子シャッタ傷になる。したがって、フレーム期間Ａにおいて、電子シャッタ信号が停止した直後に出力された垂直転送信号が、転送開始タイミングから何個目のパルスであるかが分かれば、フレームａにおいて、何ライン目に電子シャッタ傷があるのかを知ることができる。
【００５３】
そこで、電子シャッタ傷座標算出回路１６は、フレーム期間Ａにおけるシャッタ停止タイミング、転送開始タイミング、及び転送パターンの情報に基づいて、フレームａの電子シャッタ傷の座標Ｋｉｚｕ＿Ｙを算出する。例えば、次の式（１）により、フレームａの電子シャッタ傷の座標Ｋｉｚｕ＿Ｙを算出する。
【００５４】
Ｋｉｚｕ＿Ｙ＝（Ｔｓｕｂｓｔｏｐ−Ｔｔｏｐ）／ｔ      （１）
【００５５】
ここでは、垂直転送信号の周期ｔが、垂直転送期間において一定であることを前提としたため、式（１）によって電子シャッタ傷の座標を求めることができるが、周期ｔを垂直転送期間中に変化させる転送パターンや、垂直転送信号を断続的に供給する転送パターンも存在する。
【００５６】
このような転送パターンの場合でも、シャッタ停止タイミング、転送開始タイミング、及び転送パターンの情報から、電子シャッタ信号が停止した直後に出力された垂直転送信号が転送開始タイミングから何個目のパルスであるかが分かるため、この情報に基づいて座標Ｋｉｚｕ＿Ｙを算出することができる。
【００５７】
電子シャッタ傷座標算出回路１６は、フレーム期間Ａにおける転送開始タイミング及び転送パターンの情報を撮像素子駆動パターン指定部１１ｂから取得し、フレーム期間Ａにおけるシャッタ停止タイミングの情報を電子シャッタ出力制御部１１ａから取得し、取得した情報により、座標Ｋｉｚｕ＿Ｙを算出する。
【００５８】
電子シャッタ傷補正回路２２は、フレームａの座標Ｋｉｚｕ＿Ｙにあるラインを、その周囲のラインを用いて補正する。補正方法としては、欠陥画素を補正する際に用いる周知の方法を採用すればよい。
【００５９】
次に、このように構成されたデジタルカメラの動作について説明する。
【００６０】
図４は、図１に示すデジタルカメラの動画撮像時の動作を説明するためのフローチャートである。
【００６１】
フレーム期間Ａの１つ前のフレーム期間で読み出された撮像画像信号に基づいて、ＡＥ・ＡＷＢ検出回路２０が測光を行う（ステップＳ１）。システム制御部１１は、ステップＳ１での測光結果に基づいて、フレームｂの撮像時の露出値を計算する（ステップＳ２）。
【００６２】
次に、システム制御部１１は、算出した露出値に基づいて、フレーム期間Ｂの駆動パターン、フレーム期間Ａのシャッタ停止タイミング、及びフレーム期間Ａの長さを決定する（ステップＳ３）。フレーム期間Ａの２つ前のフレーム期間において、フレーム期間Ａの駆動パターンは決定されているため、このステップＳ３において、フレーム期間Ａの駆動内容が確定する。
【００６３】
フレーム期間Ａの駆動内容が確定すると、電子シャッタ傷座標算出回路１６が、フレーム期間Ａの転送開始タイミング、シャッタ停止タイミング、及び転送パターンの情報をシステム制御部１１から取得し、取得した情報に基づいてフレームａの電子シャッタ傷の座標を算出する（ステップＳ４）。
【００６４】
次に、電子シャッタ傷座標算出回路１６は、算出した座標値をメモリ２１の電子シャッタ傷座標記憶領域に記憶して、電子シャッタ傷座標をフレームａ用に更新する（ステップＳ５）。
【００６５】
次に、フレーム期間Ａになると、ステップＳ３で確定した駆動内容にしたがって各種信号が撮像素子５に供給されて、撮像素子５からフレームａが出力される。そして、フレームａが、画像入力コントローラ１４を介して電子シャッタ傷補正回路２２に１ラインずつ入力される（ステップＳ６）。
【００６６】
次に、電子シャッタ傷補正回路２２は、入力中のラインの座標が、メモリ２１に記憶されている電子シャッタ傷座標と一致するかどうかを判定する（ステップＳ８）。
【００６７】
ステップＳ８の判定がＹＥＳであった場合、電子シャッタ傷補正回路２２は、その入力されたラインについては、そのラインの周囲のラインを用いて補正する（ステップＳ９）。なお、この補正は、補正に必要な周囲のラインの入力がなされてから行う。
【００６８】
ステップＳ８の判定がＮＯであった場合、電子シャッタ傷補正回路２２は、入力されたラインについては補正をしない（ステップＳ１０）。
【００６９】
次に、システム制御部１１が、フレームａの全てのラインが電子シャッタ傷補正回路２２に入力されたかどうかを判定し、入力されていない場合（ステップＳ１１：ＮＯ）は、画像入力コントローラ１４を介して次のラインの入力を開始する（ステップＳ１２）。ステップＳ１２の後はステップＳ７に処理を移行する。
【００７０】
システム制御部１１は、フレームａの全てのラインが電子シャッタ傷補正回路２２に入力された場合（ステップＳ１１：ＹＥＳ）、動画撮像を終了するか否かを判定し、終了しない場合（ステップＳ１３：ＮＯ）には、ステップＳ１４に処理を移行し、終了する場合（ステップＳ１３：ＹＥＳ）には、動画撮像を終了する。
【００７１】
ステップＳ１４では、フレーム期間Ｂの１つ後のフレーム期間をフレーム期間Ｂとし、フレーム期間Ｂをフレーム期間Ａとする。ステップＳ１４の後は、ステップＳ１以降の処理を行う。
【００７２】
以上のように、図１に示したデジタルカメラによれば、動画のフレーム毎に、当該フレームを読み出すフレーム期間における転送開始タイミング、シャッタ停止タイミング、及び転送パターンの情報に基づいて、当該フレーム毎に変化する電子シャッタ傷の座標を算出することができる。
【００７３】
この情報は、撮像素子５を駆動するために必ず求める情報であるため、従来のデジタルカメラの構成を大きく変えることなく、フレーム毎に変化する電子シャッタ傷の座標を正確に算出し、これを補正して画質劣化を防ぐことができる。また、電子シャッタ傷座標は上記情報に基づく１回の演算で求まるため、電子シャッタ傷座標の特定までの時間を短くすることができ、動画撮像のように即時性が求められるモードにおいて特に有効となる。
【００７４】
また、画質劣化が目立たなくなる分、高ゲインでの動画撮像が実施できるため、低輝度側への追従性を向上させることができる。また、電子シャッタ信号が、水平ブランキング期間以外のタイミングでも出力可能となり、露光時間の自由度が高まる。
【００７５】
なお、図４のフローチャートでは、フレームａの入力が完了してから、ステップＳ１〜ステップＳ５の処理を行うものとしたが、これに限らない。例えば、ステップＳ６〜ステップＳ１２の処理（フレームａの電子シャッタ傷の補正処理）と並行して、ステップＳ１〜Ｓ５を実施してもよい。このようにすることで、前のフレームの電子シャッタ傷の補正完了後、遅延なく、次のフレームの電子シャッタ傷の補正が可能となる。
【００７６】
次に、図１に示したデジタルカメラの変形例を説明する。
【００７７】
（第一の変形例）
第一の変形例のデジタルカメラのブロック図は図１に示したものと同じである。ただし、この変形例のデジタルカメラでは、電子シャッタ傷補正回路２２が、電子シャッタ傷が遮光領域の画素から得られたものである場合にのみ、電子シャッタ傷の補正を行う。
【００７８】
図５は、図１に示すデジタルカメラの第一の変形例のデジタルカメラの動画撮像時の動作を説明するためのフローチャートである。図５において、図４と同じ処理には同一符号を付して説明を省略する。
【００７９】
ステップＳ６の後、電子シャッタ傷補正回路２２は、入力中のラインの座標が、遮光領域の画素から得られるラインの座標と一致するかどうかを判定する（ステップＳ７）。
【００８０】
入力中のラインの座標が遮光領域の画素から得られるラインの座標と一致しない場合（ステップＳ７：ＮＯ）、電子シャッタ傷補正回路２２は、ステップＳ１０に処理を移行する。入力中のラインの座標が遮光領域の画素から得られるラインの座標と一致する場合（ステップＳ７：ＹＥＳ）、電子シャッタ傷補正回路２２は、ステップＳ８に処理を移行する。
【００８１】
以上のように、第一の変形例のデジタルカメラによれば、遮光領域から得られた電子シャッタ傷のみを補正する構成であるため、電子シャッタ傷の補正にかかる時間を短縮することができる。また、遮光領域から得られた電子シャッタ傷を補正することができるため、スミア補正を精度良く行うことができる。以下、この理由を説明する。
【００８２】
図１に示したデジタルカメラでは、画像信号処理回路１５が、各フレームに含まれる遮光領域から得られた信号に基づいてスミアを補正する処理を行う。
【００８３】
図６は、スミア補正方法を説明するための図である。図６では、フレームａに高輝度被写体４２が存在し、これによってスミア４３が発生している状態を示した。また、フレームａの撮像素子５の遮光領域４４から得られたライン群の中に電子シャッタ傷４６が存在している例を示した。
【００８４】
図６に示したようなフレームａが得られた場合、遮光領域４４から得られた各ラインの各信号の垂直方向の積算平均レベルは符号４８に示したものとなる。遮光領域４４に電子シャッタ傷４６が存在しない場合には、積算平均レベルは符号４７に示したものになる。
【００８５】
画像信号処理回路１５では、積算平均レベルが所定値ｋよりも高いアドレスを検出し、このアドレスの積算平均レベルを、フレームａ全体から一律に減算することで、スミア補正を行う。
【００８６】
しかし、遮光領域４４から得られたライン群に電子シャッタ傷４６が含まれていると、積算平均レベルが例えば符号４８のように上昇する。このため、フレームａを積算平均レベル４８にしたがってスミア補正した後のフレームａ’は、図６に示したように、フレームａよりも全体的に暗い画像となってしまう。
【００８７】
そこで、電子シャッタ傷４６を補正してから、スミア補正を行うようにすれば、補正後のフレームをフレームａ’’のようにすることができ、スミア４３だけを除去した良好な画像を得ることができる。このように、遮光領域から得られるラインに電子シャッタ傷が存在する場合には、スミア補正後の画質劣化が顕著となるため、遮光領域から得られるラインに電子シャッタ傷が含まれる場合にのみ、電子シャッタ傷を補正し、非遮光領域から得られるラインに電子シャッタ傷が含まれる場合には電子シャッタ傷の補正を行わない構成としても、十分に画質劣化を防ぐことができる。
【００８８】
なお、第一の変形例のデジタルカメラにおいて、電子シャッタ傷の補正に用いるラインは、遮光領域から得られたラインに限定することが好ましい。このようにすることで、電子シャッタ傷を遮光領域から得られたラインのみを用いて補正することができるため、精度の高い補正が可能となる。
【００８９】
（第二の変形例）
第二の変形例のデジタルカメラのブロック図は図１に示したものと同じである。この変形例のデジタルカメラの電子シャッタ傷補正回路２２は、座標Ｋｉｚｕ＿Ｙにあるラインが、撮像素子５の非遮光領域の画素から得られたものである場合に、そのラインを周囲のラインを用いて補正し、遮光領域の画素から得られたものである場合には、そのラインの補正を行わない。そして、この変形例のデジタルカメラの画像信号処理回路１５は、電子シャッタ傷が遮光領域の画素から得られたものであった場合には、この電子シャッタ傷のデータをスミア補正には使用しない（電子シャッタ傷以外のデータを用いてスミア補正を行う）。
【００９０】
図６に示した積算平均レベル４８は、電子シャッタ傷４６を含めて積算平均を算出したために、符号４７よりもレベルが上昇してしまっている。そこで、この変形例のデジタルカメラでは、積算平均レベルを算出する際に、電子シャッタ傷４６を積算平均対象にしないことで、スミア補正を正確に行うことを可能にしている。
【００９１】
また、この変形例のデジタルカメラによれば、遮光領域から得られる信号は電子シャッタ傷の補正対象としなくてよいため、電子シャッタ傷の補正に要する時間を短縮しながら、画質向上を図ることができる。
【００９２】
なお、第二の変形例のデジタルカメラにおいて、電子シャッタ傷の補正に用いるラインは、非遮光領域から得られたラインに限定することが好ましい。このようにすることで、電子シャッタ傷を非遮光領域から得られたラインのみを用いて補正することができるため、精度の高い補正が可能となる。
【００９３】
（第三の変形例）
図７は、図１に示すデジタルカメラの第三の変形例のデジタルカメラの構成を示す図であり、図３に対応する図である。
【００９４】
図７に示すデジタルカメラは、設定値差分抽出部５１とスイッチ５２を追加した点を除いては、図３に示した構成と同じである。
【００９５】
設定値差分抽出部５１は、システム制御部１１によって決定されたフレーム期間Ａにおける転送開始タイミング、シャッタ停止タイミング、及び転送パターンの情報が、そのフレーム期間Ａの１つ前のフレーム期間に対して決定した転送開始タイミング、シャッタ停止タイミング、及び転送パターンの情報と一致するか否かを判定し、一致する場合には、スイッチ５２を開放状態とし、一致しない場合には、スイッチ５２を閉じると共に、電子シャッタ傷座標算出回路１６に、電子シャッタ傷の座標の算出を指示する。
【００９６】
次に、図７に示すデジタルカメラの動画撮像時の動作について説明する。
【００９７】
図８は、図７に示すデジタルカメラの動画撮像時の動作を説明するためのフローチャートである。図８において図４と同じ処理には同一符号を付して説明を省略する。
【００９８】
ステップＳ３の後、設定値差分抽出部５１が、ステップＳ３で決定されたフレーム期間Ａの転送開始タイミング、シャッタ停止タイミング、及び転送パターンの情報が、このフレーム期間Ａの１つ前のフレーム期間に対して決定した情報から変化があったかどうかを判定する（ステップＳ２１）。
【００９９】
変化がなかった場合（ステップＳ２１：ＮＯ）は、電子シャッタ傷座標算出回路１６による電子シャッタ傷座標の算出は行われず、図４に示したステップＳ６以降の処理が実施される。
【０１００】
変化があった場合（ステップＳ２１：ＹＥＳ）は、ステップＳ４，Ｓ５が実施され、算出された電子シャッタ傷座標が電子シャッタ傷座標記憶領域に上書きされる。ステップ５の後は、図４に示したステップＳ６以降の処理が実施される。
【０１０１】
このように、図７に示したデジタルカメラによれば、電子シャッタ傷の補正対象となるフレームを読み出すフレーム期間に対して決定される情報（転送開始タイミング、シャッタ停止タイミング、及び転送パターン）に変化があったときにのみ、この情報に基づいて電子シャッタ傷座標が更新されるため、電子シャッタ傷座標を常に算出する必要がなく、処理の効率化を図ることができる。
【０１０２】
なお、第三の変形例は、第二の変形例と組み合わせることも可能である。
【０１０３】
（第四の変形例）
図９は、図１に示すデジタルカメラの第四の変形例のデジタルカメラの構成を示す図であり、図３に対応する図である。
【０１０４】
図９に示したデジタルカメラは、電子シャッタ傷補正回路２２を、電子シャッタ傷補正回路２２Ａに変更した点を除いては、図３に示した構成と同じである。
【０１０５】
電子シャッタ傷補正回路２２Ａは、傷同色最近接画素用メモリ７１と、傷画素用メモリ７２と、切替部７３とを備え、電子シャッタ傷の位置に関わらず、電子シャッタ傷を補正する。
【０１０６】
傷画素用メモリ７２は、入力されたフレームに含まれる電子シャッタ傷を記憶する。
【０１０７】
傷同色最近接画素用メモリ７１は、入力されたフレームに含まれる電子シャッタ傷の各信号と同色成分の信号でかつ各信号に垂直方向で最も近接する信号で構成されるライン（同色最近接ライン）を記憶する。
【０１０８】
撮像素子５では、カラーフィルタがベイヤ配列であるため、例えば、赤色信号と緑色信号を含むラインが電子シャッタ傷であった場合には、このラインの２つ上にある赤色信号と緑色信号を含むラインが同色最近接ラインとなる。
【０１０９】
切替部７３は、画像入力コントローラ１４と電子シャッタ傷座標算出回路１６に接続されている。
【０１１０】
切替部７３は、電子シャッタ傷座標算出回路１６で算出されてメモリ２１に記憶された電子シャッタ傷座標の情報を取得し、この電子シャッタ傷座標の情報から、電子シャッタ傷の同色最近接ラインの座標を求める。そして、画像入力コントローラ１４から入力されるラインのうち、同色最近接ラインの座標と同じ座標のものは傷同色最近接画素用メモリ７１に記憶し、電子シャッタ傷座標と同じ座標のものは傷画素用メモリ７２に記憶し、それ以外のものはいずれにも記憶しない。
【０１１１】
図１０は、図９に示したデジタルカメラの動画撮像時の動作を説明するためのフローチャートである。図１０に示すフローチャートは、図４のステップＳ８〜Ｓ１２を、ステップＳ９１〜Ｓ９７に変更した以外は、図４に示したものと同じである。
【０１１２】
図４に示したステップＳ６で、フレームａの電子シャッタ傷補正回路２２Ａへの入力が開始されると、切替部７３が、入力中のラインの座標が、電子シャッタ傷の座標か、同色最近接ラインの座標か、それ以外のラインの座標かを判定する（ステップＳ９１）。
【０１１３】
入力中のラインの座標が、電子シャッタ傷の座標であった場合、切替部７３は、傷画素用メモリ７２と画像入力コントローラ１４を接続し、入力中のラインを傷画素用メモリ７２に記憶する（ステップＳ９２）。
【０１１４】
入力中のラインの座標が、同色最近接ラインの座標であった場合、切替部７３は、傷同色最近接画素用メモリ７１と画像入力コントローラ１４を接続し、入力中のラインを傷同色最近接画素用メモリ７１に記憶する（ステップＳ９３）。
【０１１５】
入力中のラインの座標が、電子シャッタ傷と同色最近接ラインの座標のいずれでもなかった場合、切替部７３は、画像入力コントローラ１４をメモリ７１，７２のいずれにも接続せず、入力中のラインを記憶しない（ステップＳ９４）。
【０１１６】
ステップＳ９２、Ｓ９３、Ｓ９４の後、切替部７３は、傷画素用メモリ７２に電子シャッタ傷が記憶され、傷同色最近接画素用メモリ７１に同色最近接ラインが記憶されたかどうかを判定する（ステップＳ９５）。
【０１１７】
ステップＳ９５の判定がＮＯの場合は、ステップＳ９６で次のラインが切替部７３に入力され、ステップＳ９１に処理が移行される。
【０１１８】
ステップＳ９５の判定がＹＥＳの場合は、電子シャッタ傷補正回路２２Ａが、傷画素用メモリ７２に記憶した電子シャッタ傷を、傷同色最近接画素用メモリ７１に記憶した同色最近接ラインを用いて補正する（ステップＳ９７）。例えば、電子シャッタ傷の各信号を、それと同色成分の信号でかつ垂直方向で最も近接する信号の平均値に置き換えて補正を行う。
【０１１９】
ステップＳ９７の後は、ステップＳ１３に処理を移行する。
【０１２０】
以上のように、図９に示すデジタルカメラによれば、電子シャッタ傷を、それに最も近接する同色成分の信号を含む同色最近接ラインを用いて補正するため、補正痕を目立たなくすることができる。また、このデジタルカメラによれば、電子シャッタ傷と、その周辺のラインのみをメモリ７１，７２に記憶すればよいため、メモリ使用効率の上で有利であり、メモリの劣化や電力を抑えることができる。
【０１２１】
また、この変形例のデジタルカメラでは、電子シャッタ傷の補正に用いるラインを、電子シャッタ傷が非遮光領域から得られたものである場合には、非遮光領域から得られたラインに限定し、電子シャッタ傷が遮光領域から得られたものである場合には、遮光領域から得られたラインに限定することが好ましい。このようにすることで、電子シャッタ傷を、それと同じ領域から得られたラインのみを用いて補正することができるため、精度の高い補正が可能となる。
【０１２２】
なお、ここでは、電子シャッタ傷補正回路２２Ａが、電子シャッタ傷の座標に関わらず、電子シャッタ傷を補正するものとしたが、電子シャッタ傷が遮光領域から得られたものである場合にのみ補正を実施する構成、又は、電子シャッタ傷が非遮光領域から得られたものである場合にのみ補正を実施する構成であってもよい。電子シャッタ傷が遮光領域から得られたものである場合にのみ補正を実施する構成のときには、電子シャッタ傷の補正に用いるラインを遮光領域から得られたラインに限定することが好ましい。電子シャッタ傷が非遮光領域から得られたものである場合にのみ補正を実施する構成のときには、電子シャッタ傷の補正に用いるラインを非遮光領域から得られたラインに限定することが好ましい。
【０１２３】
なお、第四の変形例は、第二の変形例と組み合わせることも可能である。
【０１２４】
（第五の変形例）
図１１は、図１に示すデジタルカメラの第五の変形例のデジタルカメラの構成を示す図であり、図３に対応する図である。
【０１２５】
図１１に示したデジタルカメラは、電子シャッタ傷補正回路２２を、電子シャッタ傷補正回路２２Ｂに変更した点を除いては、図３に示した構成と同じである。
【０１２６】
電子シャッタ傷補正回路２２Ｂは、傷隣接画素用メモリ９１と、傷画素用メモリ９２と、切替部９３とを備え、電子シャッタ傷が遮光領域から得られるラインにあった場合に電子シャッタ傷を補正し、電子シャッタ傷が非遮光領域から得られるラインにあった場合には電子シャッタ傷を補正しない。
【０１２７】
傷画素用メモリ９２は、入力されたフレームに含まれる電子シャッタ傷を記憶する。
【０１２８】
傷隣接画素用メモリ９１は、入力されたフレームに含まれる電子シャッタ傷の各信号に垂直方向で隣接する信号で構成されるライン（隣接ライン）を記憶する。
【０１２９】
切替部９３は、画像入力コントローラ１４と電子シャッタ傷座標算出回路１６に接続されている。
【０１３０】
切替部９３は、電子シャッタ傷座標算出回路１６で算出された電子シャッタ傷座標を取得し、この電子シャッタ傷座標から、電子シャッタ傷の隣接ラインの座標を求める。そして、画像入力コントローラ１４から入力されるラインのうち、隣接ラインの座標と同じ座標のものは傷隣接画素用メモリ９１に記憶し、電子シャッタ傷座標と同じ座標のものは傷画素用メモリ９２に記憶し、それ以外のものはいずれにも記憶しない。
【０１３１】
図１２は、図１１に示したデジタルカメラの動画撮像時の動作を説明するためのフローチャートである。図１２に示すフローチャートは、図５のステップＳ８〜Ｓ１２を、ステップＳ１１１〜Ｓ１１７に変更した以外は、図５に示したものと同じである。
【０１３２】
電子シャッタ傷補正回路２２Ｂは、ステップＳ６で入力されたラインの座標が、遮光領域の画素から得られるラインの座標と一致するかどうかを判定する（ステップＳ７）。
【０１３３】
入力中のラインの座標が遮光領域の画素から得られるラインの座標と一致しない場合（ステップＳ７：ＮＯ）、電子シャッタ傷補正回路２２は、ステップＳ１１４に処理を移行する。入力中のラインの座標が遮光領域の画素から得られるラインの座標と一致する場合（ステップＳ７：ＹＥＳ）、電子シャッタ傷補正回路２２は、ステップＳ１１１に処理を移行する。
【０１３４】
ステップＳ１１１では、切替部９３が、入力中のラインの座標が、電子シャッタ傷の座標か、隣接ラインの座標か、それ以外のラインの座標かを判定する。
【０１３５】
入力中のラインの座標が、電子シャッタ傷の座標であった場合、切替部９３は、傷画素用メモリ９２と画像入力コントローラ１４を接続し、入力中のラインを傷画素用メモリ９２に記憶する（ステップＳ１１２）。
【０１３６】
入力中のラインの座標が、隣接ラインの座標であった場合、切替部９３は、傷隣接画素用メモリ９１と画像入力コントローラ１４を接続し、入力中のラインを傷隣接画素用メモリ９１に記憶する（ステップＳ１１３）。
【０１３７】
入力中のラインの座標が、電子シャッタ傷と隣接ラインの座標のいずれでもなかった場合、切替部９３は、画像入力コントローラ１４をメモリ９１，９２のいずれにも接続せず、入力中のラインを記憶しない（ステップＳ１１４）。
【０１３８】
ステップＳ１１２、Ｓ１１３、Ｓ１１４の後、切替部９３は、傷画素用メモリ９２に電子シャッタ傷が記憶され、傷隣接画素用メモリ９１に隣接ラインが記憶されたかどうかを判定する（ステップＳ１１５）。
【０１３９】
ステップＳ１１５の判定がＮＯの場合は、ステップＳ１１６で次のラインが切替部９３に入力され、ステップＳ７に処理が移行される。
【０１４０】
ステップＳ１１５の判定がＹＥＳの場合は、電子シャッタ傷補正回路２２Ｂが、傷画素用メモリ９２に記憶した電子シャッタ傷を、傷隣接画素用メモリ９１に記憶した隣接ラインを用いて補正する（ステップＳ１１７）。例えば、電子シャッタ傷の各信号を、それに垂直方向で隣接する信号の平均値で置き換えることで補正を行う。
【０１４１】
ステップＳ１１７の後は、図４のステップＳ１３に処理を移行する。
【０１４２】
以上のように、図１１に示すデジタルカメラによれば、遮光領域から得られた電子シャッタ傷を、それに隣接するラインを用いて補正しているため、補正痕を目立ちにくくすることができる。遮光領域から得られる信号には、被写体に応じた信号レベルは含まれていない。このため、同色、異色に関わらず電子シャッタ傷の各信号に最も近い信号を用いて補正を行うことが、補正ズレ防止の上では有利である。特に、電子シャッタ傷に隣接するラインは、そこに含まれるスミア量が電子シャッタ傷と近いため、この点からも補正ズレを小さくすることができる。また、このデジタルカメラによれば、電子シャッタ傷と、その周辺のラインのみをメモリ９１，９２に記憶すればよいため、メモリ使用効率の上で有利であり、メモリの劣化や電力を抑えることができる。
【０１４３】
なお、傷隣接画素用メモリ９１に記憶する隣接ラインは、遮光画素から得られたラインに限定することが好ましい。このようにすることで、電子シャッタ傷を遮光画素から得られたラインのみを用いて補正することができるため、精度の高い補正が可能となる。
【０１４４】
また、第五の変形例は、第二の変形例と組み合わせることも可能である。
【０１４５】
（第六の変形例）
図１３は、図１に示すデジタルカメラの第六の変形例のデジタルカメラの構成を示す図であり、図３に対応する図である。
【０１４６】
図１３に示したデジタルカメラは、電子シャッタ傷補正回路２２を、図９に示した電子シャッタ傷補正回路２２Ａと、図１１に示した電子シャッタ傷補正回路２２Ｂと、切替部２２Ｃとで構成した点を除いては、図３に示した構成と同じである。
【０１４７】
切替部２２Ｃは、画像入力コントローラ１４に接続されている。切替部２２Ｃは、画像入力コントローラ１４から入力されるラインのうち、非遮光領域から得られたラインについては、電子シャッタ傷補正回路２２Ａの切替部７３に入力し、遮光領域から得られたラインについては、電子シャッタ傷補正回路２２Ｂの切替部９３に入力する。
【０１４８】
図１４は、図１３に示したデジタルカメラの動画撮像時の動作を説明するためのフローチャートである。図１４に示すフローチャートは、図４のステップＳ８〜Ｓ１２を、ステップＳ１３１〜Ｓ１３５に変更した以外は、図４に示したものと同じである。
【０１４９】
図４のステップＳ６で、フレームａの切替部２２Ｃへの入力が開始されると、切替部２２Ｃが、入力中のラインの座標が、遮光領域から得られたラインの座標と一致するか否かを判定する（ステップＳ１３１）。
【０１５０】
入力中のラインの座標が遮光領域から得られたラインの座標と一致する場合（ステップＳ１３１：ＹＥＳ）、切替部２２Ｃは、入力中のラインを電子シャッタ傷補正回路２２Ｂに入力する（ステップＳ１３４）。ステップＳ１３４の後は、図１２に示したステップＳ１１１〜Ｓ１１７の処理が実施され（ステップＳ１３５）、その後、ステップＳ１３に処理を移行する。
【０１５１】
入力中のラインの座標が遮光領域から得られたラインの座標と一致しない場合（ステップＳ１３１：ＮＯ）、切替部２２Ｃは、入力中のラインを電子シャッタ傷補正回路２２Ａに入力する（ステップＳ１３２）。ステップＳ１３２の後は、図１０に示したステップＳ９１〜Ｓ９７の処理が実施され（ステップＳ１３３）、その後、ステップＳ１３に処理を移行する。
【０１５２】
電子シャッタ傷が遮光領域から得られた場合と、電子シャッタ傷が非遮光領域から得られた場合とでは、最適な補正方法が異なる。この変形例のデジタルカメラによれば、遮光領域から得られる電子シャッタ傷と、非遮光領域から得られる電子シャッタ傷とで補正方法を変更することができるため、電子シャッタ傷の位置に適した補正を実施することができる。このため、非遮光領域から得られる電子シャッタ傷が、その隣接ラインを用いて補正されるといったことがなくなり、精度の高い補正が可能となる。
【０１５３】
なお、第六の変形例は、第二の変形例と組み合わせることも可能である。
【０１５４】
第一の変形例〜第六の変形例は、矛盾の生じない限り、適宜組み合わせることが可能である。
【０１５５】
以上説明してきたように、本明細書には次の事項が開示されている。
【０１５６】
開示された撮像装置は、電荷転送部を有する撮像素子と、前記撮像素子に電子シャッタ信号を供給する駆動部とを有する撮像装置であって、前記撮像素子から動画の１フレームを読み出す期間であるフレーム期間における、前記電子シャッタ信号の供給を停止するシャッタ停止タイミング、前記電荷転送部による電荷の転送を開始する転送開始タイミング、及び前記電荷転送部による転送パターンの情報を取得する情報取得部と、前記情報に基づいて、前記１フレームに含まれる前記電子シャッタ信号によって発生する電子シャッタ傷の座標の情報を生成する電子シャッタ傷座標情報生成部と、前記電子シャッタ傷の座標の情報にしたがって、当該電子シャッタ傷を補正する電子シャッタ傷補正部とを備えるものである。
【０１５７】
開示された撮像装置は、前記フレーム期間よりも少なくとも２つ前のフレーム期間において前記１フレームを撮像するときの露出値を決定する露出決定部と、前記露出値に基づいて、前記フレーム期間における、前記撮像素子に含まれる画素からの電荷を読み出す読出しタイミング、前記転送開始タイミング、及び前記電荷転送部による転送パターンの組み合わせでなる駆動パターンを決定する駆動パターン決定部と、前記読出しタイミングと前記露出値に基づく前記１フレームを撮像するときの露光時間にしたがって前記フレーム期間の１つ前のフレーム期間における前記シャッタ停止タイミングを決定するシャッタ停止タイミング決定部とを備え、前記情報取得部は、前記フレーム期間における前記転送開始タイミング及び前記電荷転送部による転送パターンの情報を前記駆動パターン決定部から取得し、前記フレーム期間における前記シャッタ停止タイミングを前記シャッタ停止タイミング決定部から取得するものである。
【０１５８】
開示された撮像装置は、前記電子シャッタ傷補正部が、前記電子シャッタ傷が前記撮像素子の非遮光領域から得られたラインにある場合に当該電子シャッタ傷を補正するものである。
【０１５９】
開示された撮像装置は、前記撮像素子の遮光領域にある画素から得られる信号を用いて前記１フレームのスミア補正を実施するスミア補正部を備え、前記スミア補正部は、前記電子シャッタ傷が前記遮光領域から得られたラインにある場合には、当該電子シャッタ傷のデータを前記スミア補正に使用しないものである。
【０１６０】
開示された撮像装置は、前記電子シャッタ傷補正部が、前記電子シャッタ傷が前記撮像素子の遮光領域から得られたラインにある場合に当該電子シャッタ傷を補正するものである。
【０１６１】
開示された撮像装置は、前記電子シャッタ傷補正部が、前記電子シャッタ傷が前記撮像素子の非遮光領域と遮光領域のいずれかから得られたラインにある場合に当該電子シャッタ傷を補正するものである。
【０１６２】
開示された撮像装置は、前記電子シャッタ傷補正部が、前記電子シャッタ傷を、前記非遮光領域から得られた当該電子シャッタ傷以外のラインを用いて補正するものである。
【０１６３】
開示された撮像装置は、前記電子シャッタ傷補正部が、前記電子シャッタ傷を、前記電子シャッタ傷と同色成分の信号を含む当該電子シャッタ傷に最も近接するラインを用いて補正するものである。
【０１６４】
開示された撮像装置は、前記電子シャッタ傷補正部が、前記電子シャッタ傷を、前記遮光領域から得られた当該電子シャッタ傷以外のラインを用いて補正するものである。
【０１６５】
開示された撮像装置は、前記電子シャッタ傷補正部が、前記電子シャッタ傷を、前記電子シャッタ傷に隣接するラインを用いて補正するものである。
【０１６６】
開示された撮像装置は、前記電子シャッタ傷補正部が、前記電子シャッタ傷が前記非遮光領域から得られたラインにある場合には、当該電子シャッタ傷を前記非遮光領域から得られた当該電子シャッタ傷以外のラインを用いて補正し、前記電子シャッタ傷が前記遮光領域から得られたラインにある場合には、当該電子シャッタ傷を前記遮光領域から得られた当該電子シャッタ傷以外のラインを用いて補正するものである。
【０１６７】
開示された撮像装置は、前記電子シャッタ傷補正部が、前記電子シャッタ傷が前記非遮光領域から得られたラインにある場合には、当該電子シャッタ傷を当該電子シャッタ傷と同色成分の信号を含む当該電子シャッタ傷に最も近接するラインを用いて補正し、前記電子シャッタ傷が前記遮光領域から得られたラインにある場合には、当該電子シャッタ傷を当該電子シャッタ傷に隣接するラインを用いて補正するものである。
【０１６８】
開示された撮像装置は、前記電子シャッタ傷座標情報生成部が、前記情報に変更があったときにのみ前記電子シャッタ傷の座標の情報を生成するものである。
【０１６９】
開示された撮像装置は、前記電子シャッタ傷座標情報生成部が、前記電子シャッタ傷補正部が前記電子シャッタ傷の補正処理を行っている際中に、次のフレームの前記電子シャッタ傷の座標の情報を生成するものである。
【０１７０】
開示された撮像方法は、電荷転送部を有する撮像素子に電子シャッタ信号を供給して撮像を行う撮像方法であって、前記撮像素子から動画の１フレームを読み出す期間であるフレーム期間における、前記電子シャッタ信号の供給を停止するシャッタ停止タイミング、前記電荷転送部による電荷の転送を開始する転送開始タイミング、及び前記電荷転送部による転送パターンの情報を取得する情報取得ステップと、前記情報に基づいて、前記１フレームに含まれる前記電子シャッタ信号によって発生する電子シャッタ傷の座標の情報を生成する電子シャッタ傷座標情報生成ステップと、前記電子シャッタ傷の座標の情報にしたがって、当該電子シャッタ傷を補正する電子シャッタ傷補正ステップとを備えるものである。
【０１７１】
開示された撮像方法は、前記フレーム期間よりも少なくとも２つ前のフレーム期間において前記１フレームを撮像するときの露出値を決定する露出決定ステップと、前記露出値に基づいて、前記フレーム期間における、前記撮像素子に含まれる画素からの電荷を読み出す読出しタイミング、前記転送開始タイミング、及び前記電荷転送部による転送パターンの組み合わせでなる駆動パターンを決定する駆動パターン決定ステップと、前記読出しタイミングと前記露出値に基づく前記１フレームを撮像するときの露光時間にしたがって前記フレーム期間の１つ前のフレーム期間における前記シャッタ停止タイミングを決定するシャッタ停止タイミング決定ステップとを備え、前記情報取得ステップでは、前記フレーム期間における前記転送開始タイミング及び前記電荷転送部による転送パターンの情報を前記駆動パターン決定部から取得し、前記フレーム期間における前記シャッタ停止タイミングを前記シャッタ停止タイミング決定部から取得するものである。
【０１７２】
開示された撮像方法は、前記電子シャッタ傷補正ステップでは、前記電子シャッタ傷が前記撮像素子の非遮光領域から得られたラインにある場合に当該電子シャッタ傷を補正するものである。
【０１７３】
開示された撮像方法は、前記撮像素子の遮光領域にある画素から得られる信号を用いて前記１フレームのスミア補正を実施するスミア補正ステップを備え、前記スミア補正ステップでは、前記電子シャッタ傷が前記遮光領域から得られたラインにある場合には、当該電子シャッタ傷のデータを前記スミア補正に使用しないものである。
【０１７４】
開示された撮像方法は、前記電子シャッタ傷補正ステップでは、前記電子シャッタ傷が前記撮像素子の遮光領域から得られたラインにある場合に当該電子シャッタ傷を補正するものである。
【０１７５】
開示された撮像方法は、前記電子シャッタ傷補正ステップでは、前記電子シャッタ傷が前記撮像素子の非遮光領域と遮光領域のいずれかから得られたラインにある場合に当該電子シャッタ傷を補正するものである。
【０１７６】
開示された撮像方法は、前記電子シャッタ傷補正ステップでは、前記電子シャッタ傷を、前記非遮光領域から得られた当該電子シャッタ傷以外のラインを用いて補正するものである。
【０１７７】
開示された撮像方法は、前記電子シャッタ傷補正ステップでは、前記電子シャッタ傷を、前記電子シャッタ傷と同色成分の信号を含む当該電子シャッタ傷に最も近接するラインを用いて補正するものである。
【０１７８】
開示された撮像方法は、前記電子シャッタ傷補正ステップでは、前記電子シャッタ傷を、前記遮光領域から得られた当該電子シャッタ傷以外のラインを用いて補正するものである。
【０１７９】
開示された撮像方法は、前記電子シャッタ傷補正ステップでは、前記電子シャッタ傷を、前記電子シャッタ傷に隣接するラインを用いて補正するものである。
【０１８０】
開示された撮像方法は、前記電子シャッタ傷補正ステップでは、前記電子シャッタ傷が前記非遮光領域から得られたラインにある場合には、当該電子シャッタ傷を前記非遮光領域から得られた当該電子シャッタ傷以外のラインを用いて補正し、前記電子シャッタ傷が前記遮光領域から得られたラインにある場合には、当該電子シャッタ傷を前記遮光領域から得られた当該電子シャッタ傷以外のラインを用いて補正するものである。
【０１８１】
開示された撮像方法は、前記電子シャッタ傷補正ステップでは、前記電子シャッタ傷が前記非遮光領域から得られたラインにある場合には、当該電子シャッタ傷を当該電子シャッタ傷と同色成分の信号を含む当該電子シャッタ傷に最も近接するラインを用いて補正し、前記電子シャッタ傷が前記遮光領域から得られたラインにある場合には、当該電子シャッタ傷を当該電子シャッタ傷に隣接するラインを用いて補正するものである。
【０１８２】
開示された撮像方法は、前記電子シャッタ傷座標情報生成ステップでは、前記情報に変更があったときにのみ前記電子シャッタ傷の座標の情報を生成するものである。
【０１８３】
開示された撮像方法は、前記電子シャッタ傷座標情報生成ステップでは、前記電子シャッタ傷補正部が前記電子シャッタ傷の補正処理を行っている際中に、次のフレームの前記電子シャッタ傷の座標の情報を生成するものである。
【符号の説明】
【０１８４】
５  撮像素子
１２  駆動部
１６  電子シャッタ傷座標算出回路
２２  電子シャッタ傷補正部
【図１】
2011239228.tif 000003
【図２】
2011239228.tif 000004
【図３】
2011239228.tif 000005
【図４】
2011239228.tif 000006
【図５】
2011239228.tif 000007
【図６】
2011239228.tif 000008
【図７】
2011239228.tif 000009
【図８】
2011239228.tif 000010
【図９】
2011239228.tif 000011
【図１０】
2011239228.tif 000012
【図１１】
2011239228.tif 000013
【図１２】
2011239228.tif 000014
【図１３】
2011239228.tif 000015
【図１４】
2011239228.tif 000016
【図１５】
2011239228.tif 000017
【図１６】
2011239228.tif 000018