(57)【要約】【課題】光電変換部から保持部への電荷漏れによる色付きの影響を軽減することができる撮像装置および撮像装置の処理方法を提供することを課題とする。【解決手段】撮像装置は、光電変換により映像信号を生成する複数の画素（１０２）と、前記映像信号を基に外部閃光を検出する検出部（２０２）と、前記検出部により外部閃光が検出された場合には、前記外部閃光が検出されたフレームの１フレーム前のフレームの映像信号に対して、前記外部閃光の影響を低減する処理を行う処理部（２０４）とを有し、前記複数の画素の各々は、光を電荷に変換して蓄積する光電変換部と、電荷を保持する保持部と、電荷に基づく信号を増幅する増幅部と、前記光電変換部の電荷を前記保持部に転送する第１の転送スイッチと、前記保持部の電荷を前記増幅部に転送する第２の転送スイッチとを有する。【選択図】図１
2018186460.tif 000002
【特許請求の範囲】
【請求項１】
光電変換により映像信号を生成する複数の画素と、
前記映像信号を基に外部閃光を検出する検出部と、
前記検出部により外部閃光が検出された場合には、前記外部閃光が検出されたフレームの１フレーム前のフレームの映像信号に対して、前記外部閃光の影響を低減する処理を行う処理部とを有し、
前記複数の画素の各々は、
光を電荷に変換して蓄積する光電変換部と、
電荷を保持する保持部と、
電荷に基づく信号を増幅する増幅部と、
前記光電変換部の電荷を前記保持部に転送する第１の転送スイッチと、
前記保持部の電荷を前記増幅部に転送する第２の転送スイッチとを有することを特徴とする撮像装置。
【請求項２】
前記処理部は、前記外部閃光が検出されない場合には、前記外部閃光が検出されないフレームの１フレーム前のフレームの映像信号に対して、第１の補正値で色抑圧処理を行い、前記外部閃光が検出された場合には、前記外部閃光が検出されたフレームの１フレーム前のフレームの映像信号に対して、第２の補正値で色抑圧処理を行うことを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記複数の画素の各々は、前記光電変換部の電荷をリセットするためのリセットスイッチを有し、
前記処理部は、
前記外部閃光が検出されない場合には、前記外部閃光が検出されないフレームの１フレーム前のフレームの映像信号に対して、第１の補正値で色抑圧処理を行い、
前記外部閃光が検出された場合には、前記外部閃光が検出されたフレームの１フレーム前のフレームにおいて、前記リセットスイッチが前記光電変換部の電荷をリセットしている期間に前記第２の転送スイッチが前記保持部の電荷を前記増幅部に転送したラインの映像信号に対して、第１の補正値で色抑圧処理を行い、前記リセットスイッチが前記光電変換部の電荷をリセットしていない期間に前記第２の転送スイッチが前記保持部の電荷を前記増幅部に転送したラインの映像信号に対して、第２の補正値で色抑圧処理を行うことを特徴とする請求項１に記載の撮像装置。
【請求項４】
前記処理部は、前記外部閃光が検出されない場合には、前記外部閃光が検出されないフレームの１フレーム前のフレームの映像信号に対して、赤、緑および青が均一になるような処理を行い、前記外部閃光が検出された場合には、前記外部閃光が検出されたフレームの１フレーム前のフレームの映像信号に対して、赤、緑、および青のうちの緑のゲインが下がるような処理を行うことを特徴とする請求項１または２に記載の撮像装置。
【請求項５】
前記複数の画素の各々は、前記光電変換部の電荷をリセットするためのリセットスイッチを有し、
前記処理部は、
前記外部閃光が検出されない場合には、前記外部閃光が検出されないフレームの１フレーム前のフレームの映像信号に対して、赤、緑および青が均一になるような処理を行い、
前記外部閃光が検出された場合には、前記外部閃光が検出されたフレームの１フレーム前のフレームにおいて、前記リセットスイッチが前記光電変換部の電荷をリセットしている期間に前記第２の転送スイッチが前記保持部の電荷を前記増幅部に転送したラインの映像信号に対して、赤、緑および青が均一になるような処理を行い、前記リセットスイッチが前記光電変換部の電荷をリセットしていない期間に前記第２の転送スイッチが前記保持部の電荷を前記増幅部に転送したラインの映像信号に対して、赤、緑、および青のうちの緑のゲインが下がるような処理を行うことを特徴とする請求項１に記載の撮像装置。
【請求項６】
前記処理部は、前記複数の画素により生成された映像信号を記憶するフレームメモリであり、
前記フレームメモリは、前記外部閃光が検出されない場合には、前記外部閃光が検出されないフレームの１フレーム前のフレームの映像信号を読み出し、前記外部閃光が検出された場合には、前記外部閃光が検出されたフレームの２フレーム前のフレームの映像信号を読み出すことを特徴とする請求項１に記載の撮像装置。
【請求項７】
前記複数の画素の各々は、前記光電変換部の電荷をリセットするためのリセットスイッチを有し、
前記処理部は、前記複数の画素により生成された映像信号を記憶するフレームメモリであり、
前記フレームメモリは、
前記外部閃光が検出されない場合には、前記外部閃光が検出されないフレームの１フレーム前のフレームの映像信号を読み出し、
前記外部閃光が検出された場合には、前記外部閃光が検出されたフレームの１フレーム前のフレームにおいて、前記リセットスイッチが前記光電変換部の電荷をリセットしている期間に前記第２の転送スイッチが前記保持部の電荷を前記増幅部に転送したラインの映像信号を読み出し、前記外部閃光が検出されたフレームの２フレーム前のフレームにおいて、前記リセットスイッチが前記光電変換部の電荷をリセットしていない期間に前記第２の転送スイッチが前記保持部の電荷を前記増幅部に転送したラインの映像信号を読み出すことを特徴とする請求項１に記載の撮像装置。
【請求項８】
前記複数の画素の各々は、前記光電変換部の電荷をリセットするためのリセットスイッチを有し、
前記処理部は、前記外部閃光が検出された場合には、前記外部閃光が検出されたフレームの１フレーム前のフレームにおいて、前記リセットスイッチが前記光電変換部の電荷をリセットしていない期間に前記第２の転送スイッチが前記保持部の電荷を前記増幅部に転送したラインの映像信号に対して、前記外部閃光の影響を低減する処理を行うことを特徴とする請求項１に記載の撮像装置。
【請求項９】
複数の画素の各々が、
光を電荷に変換して蓄積する光電変換部と、
電荷を保持する保持部と、
電荷に基づく信号を増幅する増幅部と、
前記光電変換部の電荷を前記保持部に転送する第１の転送スイッチと、
前記保持部の電荷を前記増幅部に転送する第２の転送スイッチとを有する撮像装置の処理方法であって、
前記複数の画素により、光電変換により映像信号を生成するステップと、
検出部により、前記映像信号を基に外部閃光を検出するステップと、
処理部により、前記外部閃光が検出された場合には、前記外部閃光が検出されたフレームの１フレーム前のフレームの映像信号に対して、前記外部閃光の影響を低減する処理を行うステップと
を有することを特徴とする撮像装置の処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置および撮像装置の処理方法に関する。
【背景技術】
【０００２】
ビデオカメラに代表される撮像装置の撮像素子として、ＣＭＯＳ型イメージセンサ（以下、ＣＭＯＳセンサという）が用いられている。ＣＭＯＳセンサは、水平ラインを順次露光し、ラインごとに映像信号を順次読み出して１つのフレームを生成するローリングシャッタ方式を採用するものが主流であった。近年は、水平ラインの露光タイミングを全行で同時にして映像を読み出すグローバルシャッタ方式を採用したＣＭＯＳセンサが増えてきている。一般的に、ローリングシャッタ方式では、各行で露光時間がずれることによるローリングシャッタ歪が発生する。これに対し、グローバルシャッタ方式では、全行で同時に露光を行うことで、ローリングシャッタ歪が発生せず、動体を撮影するときに有効である。
【０００３】
グローバルシャッタ方式を実現するためには、ＣＭＯＳセンサは、光電変換部の他、電荷を保持する保持部を持つ。しかしながら、グローバルシャッタ方式は、ローリングシャッタ方式に比べ、保持部を持つことにより、光電変換部の面積が小さくなり、１画素が処理できる飽和電荷量が少なく、飽和した電荷が保持部に流れ込んでしまう。グローバルシャッタ方式では、ストロボ光などの外部閃光によって、特に光電変換部の感度が高い色の画素で飽和した電荷が保持部に流れ込むことで、帯状に色付いた疑似信号として読み出されてしまう課題がある。
【０００４】
特許文献１には、映像の輝度レベルの増加からストロボ光などの外部閃光の影響が開始するラインと終了するラインを検出し、影響のあるラインと影響のないラインに対して、それぞれ輝度ゲインの調整を行う方法が記載されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０１１−１９３１９４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、グローバルシャッタ方式では、光電変換部がＮフレーム目の電荷を蓄積中に、保持部からＮ−１フレーム目の電荷を読み出すことがある。そのため、グローバルシャッタ方式では、Ｎフレーム目の電荷の蓄積中に外部閃光が入射すると、Ｎフレーム目ではなく、Ｎ−１フレーム目に対して帯状に色の付いた疑似信号が発生してしまう課題がある。また、グローバルシャッタ方式では、水平ラインの露光タイミングを全行で同時にして映像を読み出すので、外部閃光による輝度レベルの増加は、Ｎフレーム目中の全ラインに対して発生するので、外部閃光の影響が開始するラインと終了するラインを検出できない。
【０００７】
本発明の目的は、光電変換部から保持部への電荷漏れによる色付きの影響を軽減することができる撮像装置および撮像装置の処理方法を提供することである。
【課題を解決するための手段】
【０００８】
本発明の撮像装置は、光電変換により映像信号を生成する複数の画素と、前記映像信号を基に外部閃光を検出する検出部と、前記検出部により外部閃光が検出された場合には、前記外部閃光が検出されたフレームの１フレーム前のフレームの映像信号に対して、前記外部閃光の影響を低減する処理を行う処理部とを有し、前記複数の画素の各々は、光を電荷に変換して蓄積する光電変換部と、電荷を保持する保持部と、電荷に基づく信号を増幅する増幅部と、前記光電変換部の電荷を前記保持部に転送する第１の転送スイッチと、前記保持部の電荷を前記増幅部に転送する第２の転送スイッチとを有する。
【発明の効果】
【０００９】
光電変換部から保持部への電荷漏れによる色付きの影響を軽減することができる。
【図面の簡単な説明】
【００１０】
【図１】第１の実施形態に係る撮像装置の構成例を示すブロック図である。
【図２】第１の実施形態に係る画素部の構成例を示す図である。
【図３】第１の実施形態に係る撮像素子の動作を示すタイミングチャートである。
【図４】第１の実施形態に係る外部出力回路から出力される画像を示す図である。
【図５】第１の実施形態に係るＬＳＩの動作を示すフローチャートである。
【図６】第１の実施形態に係るＬＳＩの動作を示すタイミングチャートである。
【図７】第２の実施形態に係る撮像装置の構成例を示すブロック図である。
【図８】第２の実施形態に係る撮像素子の動作を示すタイミングチャートである。
【図９】第２の実施形態に係るＬＳＩの動作を示すタイミングチャートである。
【図１０】第３の実施形態に係る撮像装置の構成例を示すブロック図である。
【図１１】第３の実施形態に係るＬＳＩの動作を示すフローチャートである。
【図１２】第３の実施形態に係るＬＳＩの動作を示すタイミングチャートである。
【図１３】第４の実施形態に係る撮像装置の構成例を示すブロック図である。
【図１４】第４の実施形態に係るＬＳＩの動作を示すタイミングチャートである。
【発明を実施するための形態】
【００１１】
（第１の実施形態）
図１は、本発明の第１の実施形態に係る撮像装置の構成例を示すブロック図である。撮像装置は、撮像素子１００とＬＳＩ２００を有し、動画を撮影する。撮像装置は、デジタルカメラ、ビデオカメラの他、スマートフォン、タブレット、工業用カメラ、医療用カメラ等に適用可能である。以下、撮像装置の処理方法を説明する。撮像素子１００は、例えばＣＭＯＳセンサであり、タイミング制御部１０１と、画素部１０２と、垂直走査回路１０３と、列回路１０４と、水平転送回路１０５と、信号処理回路１０６と、外部出力回路１０７と、コントローラ回路１０８とを有する。ＬＳＩ２００は、例えばＦＰＧＡまたはＡＳＩＣであり、外部入力回路２０１と、フラッシュ検出回路２０２と、フレームメモリ２０３と、色抑圧回路２０４と、カメラ信号処理部２０５と、映像出力部２０６と、ＣＰＵ２０７とを有する。
【００１２】
まず、撮像素子１００について説明する。コントローラ回路１０８は、撮像素子１００とＬＳＩ２００との間のシリアル通信を行うインターフェース部であり、ＬＳＩ２００のＣＰＵ２０７から撮像素子１００への制御信号を受信する。タイミング制御部１０１は、撮像素子１００の各ブロックに対して、動作クロック信号およびタイミング信号を供給し、動作を制御する。
【００１３】
画素部１０２は、２次元行列状に配列され、光電変換により映像信号を生成する複数の画素を有する。各画素は、入射光量に応じて光電変換し、電圧を出力する光電変換部を有する。光電変換部は、例えばフォトダイオードである。各画素の光電変換部の表面には、それぞれ、カラーフィルタとマイクロレンズが実装されており、Ｒ(赤)，Ｇ(緑)，Ｂ(青)の３色のカラーフィルタを用いることで、いわゆるＲＧＢ原色カラーフィルタによるベイヤ配列の周期構造をとる。なお、ベイヤ配列に限定されず、他の配列でもよい。画素部１０２は、グローバルシャッタ方式を実現する。なお、画素部１０２の構成は、図２を用いて後述する。
【００１４】
垂直走査回路１０３は、画素部１０２内に行列状に配置された複数の画素の画素信号電圧を、１フレーム中に順次読み出しするためのタイミング制御を行う。各列の信号線１１７は、それぞれ、画素部１０２内の各列の画素に接続される。垂直走査回路１０３は、画素部１０２に対して、１フレーム中の上部の行から下部の行にかけて、行単位で順次、画素信号を各列の信号線１１７に読み出す。列回路１０４は、各列の信号線１１７の画素信号を電気的に増幅するためのアンプと、画素信号をアナログからデジタルに変換するアナログデジタル変換回路を有する。
【００１５】
水平転送回路１０５は、列回路１０４から出力される行単位の画素信号を、列ごとに順に信号処理回路１０６に出力する。信号処理回路１０６は、画素信号に対して、デジタル信号処理を行う。具体的には、信号処理回路１０６は、画素信号に対して、デジタル処理により一定量のオフセット値を加算し、シフト演算および乗算を行うことにより、簡易にゲイン演算を行う。また、画素部１０２は、遮光した画素の領域を有し、信号処理回路１０６は、遮光した画素の信号を用いて、通常の画素の信号のデジタルの黒レベルクランプ動作を行う。
【００１６】
信号処理回路１０６は、デジタル処理した信号を外部出力回路１０７に出力する。外部出力回路１０７は、シリアライザであり、信号処理回路１０６から出力された多ビットのパラレル信号をシリアル信号に変換し、そのシリアル信号を例えばＬＶＤＳ信号等に変換し、ＬＳＩ２００に映像信号として出力する。撮像素子１００は、所定時間間隔の複数フレームの映像信号をＬＳＩ２００に出力する。
【００１７】
次に、ＬＳＩ２００について説明する。外部入力回路２０１は、デシリアライザであり、撮像素子１００内の外部出力回路１０７から入力されたシリアル信号を画素毎の多ビットのパラレル信号に変換する。外部入力回路２０１は、変換した画素毎の多ビットのパラレル信号を映像信号として、フラッシュ検出回路２０２とフレームメモリ２０３へ出力する。
【００１８】
フラッシュ検出回路２０２は、外部入力回路２０１から入力した映像信号の輝度信号を抽出し、１フレーム期間内の輝度信号の平均値を算出する。フラッシュ検出回路２０２は、１つ前のフレームの輝度信号平均値を保持し、現在のフレームの輝度信号平均値との差分データを算出する。そして、フラッシュ検出回路２０２は、その差分データが閾値より大きい場合には、外部閃光が入射したと判断して、フラッシュ検出情報を色抑圧回路２０４へ出力する。フラッシュ検出回路２０２は、検出部であり、その差分データが閾値より大きい場合には、現在のフレームに対して外部閃光を検出したと判断し、その差分データが閾値より小さい場合には、現在のフレームに対して外部閃光を検出しないと判断する。
【００１９】
フレームメモリ２０３は、２フレーム期間の映像信号を保持することができる容量を持つ。フレームメモリ２０３は、外部入力回路２０１から入力された映像信号を２フレーム遅延させて、色抑圧回路２０４へ出力する。
【００２０】
色抑圧回路２０４は、フラッシュ検出回路２０２からフラッシュ検出情報を入力し、フレームメモリ２０３から映像信号を入力する。色抑圧回路２０４は、フラッシュ検出情報に応じて、映像信号を色抑圧処理するための補正値を変更し、補正値に応じて色抑圧処理を行い、色抑圧処理後の映像信号をカメラ信号処理部２０５へ出力する。
【００２１】
カメラ信号処理部２０５は、ガンマ処理回路および輝度調整回路などを有し、映像信号に対して信号処理を行い、信号処理後の映像信号を映像出力部２０６へ出力する。映像出力部２０６は、映像信号を撮像装置の外部に出力するためのフォーマットに変換する。例えば、映像出力部２０６は、映像信号をシリアルデジタルインターフェース（以下、ＳＤＩという）のフォーマットに変換する。ＣＰＵ２０７は、ユーザインターフェースから撮像素子１００の１フレーム期間の時間および蓄積時間などを決める設定値を入力し、コントローラ回路１０８へ出力する。
【００２２】
図２は、図１の画素部１０２内に配列された複数の画素のうちの１個の画素の構成例を示す図である。複数の画素は、相互に同様の構成を有する。画素は、光電変換部１１０と、転送トランジスタＴＸ１と、保持部１１２と、転送トランジスタＴＸ２と、保持部１１４と、リセットトランジスタＲＥＳと、増幅トランジスタ１１５と、選択トランジスタＳＥＬとを有する。各列の信号線１１７は、それぞれ、画素部１０２内の各列の画素に接続される。
【００２３】
光電変換部１１０は、例えばフォトダイオードであり、入射した光を電荷に変換して蓄積する。転送トランジスタＴＸ１は、転送スイッチであり、ゲート電圧に応じて、光電変換部１１０に蓄積された電荷を保持部１１２へ転送する。転送トランジスタＴＸ２は、転送スイッチであり、ゲート電圧に応じて、保持部１１２に保持された電荷を保持部１１４および増幅トランジスタ１１５へ転送する。リセットトランジスタＲＥＳは、ゲート電圧に応じて、保持部１１４の電圧を電源電圧ＶＤＤにリセットする。増幅トランジスタ１１５は、増幅部であり、保持部１１４の電荷に基づく信号を増幅し、選択トランジスタＳＥＬを介して、信号線１１７に出力する。選択トランジスタＳＥＬは、ゲート電圧に応じて、増幅トランジスタ１１５の出力電圧を、信号線１１７へ出力する。トランジスタＯＦＤは、リセットスイッチであり、ゲート電圧に応じて、光電変換部１１０の電荷をリセットする。
【００２４】
保持部１１２を設けることにより、保持部１１４の電荷に応じた電圧を信号線１１７へ出力するまで、保持部１１２は、光電変換部１１０の電荷を蓄積することができ、その期間に、光電変換部１１０は、光電変換に基づく電荷を蓄積することができる。そのため、画素部１０２は、全画素同時に露光を行うグローバルシャッタ動作が可能となる。
【００２５】
図３は、撮像素子１００の動作を示すタイミングチャートである。以下、撮像素子１００の動作フレームレートと、光電変換部１１０の動作と、トランジスタＯＦＤの動作と、転送トランジスタＴＸ１の動作と、保持部１１２の動作と、各ラインの転送トランジスタＴＸ２の動作と、外部出力回路１０７の出力映像信号を説明する。時刻ｔｆでは、外部閃光が画素部１０２に入射される。
【００２６】
時刻ｔ０〜ｔ３は、撮像素子１００のＮ−１フレーム目の動作期間である。時刻ｔ３〜ｔ６は、撮像素子１００のＮフレーム目の動作期間である。時刻ｔ６〜ｔ９は、撮像素子１００のＮ＋１フレーム目の動作期間である。時刻ｔ９〜ｔ１２は、撮像素子１００のＮ＋２フレーム目の動作期間である。
【００２７】
時刻ｔ０〜ｔ１では、全画素のトランジスタＯＦＤは、導通し、全画素の光電変換部１１０で発生した電荷をそれぞれリセットする。同様に、時刻ｔ３〜ｔ４、ｔ６〜ｔ７、ｔ９〜ｔ１０では、全画素のトランジスタＯＦＤは、導通し、全画素の光電変換部１１０で発生した電荷をそれぞれリセットする。
【００２８】
時刻ｔ１〜ｔ３では、全画素の光電変換部１１０は、光電変換により生成されたＮフレーム目の電荷をそれぞれ蓄積する。時刻ｔ４〜ｔ６では、全画素の光電変換部１１０は、光電変換により生成されたＮ＋１フレーム目の電荷をそれぞれ蓄積する。時刻ｔ７〜ｔ９では、全画素の光電変換部１１０は、光電変換により生成されたＮ＋２フレーム目の電荷をそれぞれ蓄積する。時刻ｔ１０〜ｔ１２では、全画素の光電変換部１１０は、光電変換により生成されたＮ＋３フレーム目の電荷をそれぞれ蓄積する。
【００２９】
時刻ｔ０の直前では、全画素の転送トランジスタＴＸ１は、導通し、全画素の光電変換部１１０で蓄積されたＮ−１フレーム目の電荷を全画素の保持部１１２へそれぞれ転送する。時刻ｔ３の直前では、全画素の転送トランジスタＴＸ１は、導通し、全画素の光電変換部１１０で蓄積されたＮフレーム目の電荷を全画素の保持部１１２へそれぞれ転送する。時刻ｔ６の直前では、全画素の転送トランジスタＴＸ１は、導通し、全画素の光電変換部１１０で蓄積されたＮ＋１フレーム目の電荷を全画素の保持部１１２へそれぞれ転送する。時刻ｔ９の直前では、全画素の転送トランジスタＴＸ１は、導通し、全画素の光電変換部１１０で蓄積されたＮ＋２フレーム目の電荷を全画素の保持部１１２へそれぞれ転送する。全画素の保持部１１２は、Ｎ＋２フレーム目の電荷を保持する。
【００３０】
時刻ｔ０〜ｔ３では、全画素の保持部１１２は、Ｎ−１フレーム目の電荷を保持する。時刻ｔ３〜ｔ６では、全画素の保持部１１２は、Ｎフレーム目の電荷を保持する。時刻ｔ６〜ｔ９では、全画素の保持部１１２は、Ｎ＋１フレーム目の電荷を保持する。時刻ｔ９〜ｔ１２では、全画素の保持部１１２は、Ｎ＋２フレーム目の電荷を保持する。
【００３１】
時刻ｔ０〜ｔ２では、１ライン目〜最終ラインのＬライン目の転送トランジスタＴＸ２は、行順次で導通し、Ｎ−１フレーム目の信号を行順次で信号線１１７へ出力する。時刻ｔ３〜ｔ５では、１ライン目〜最終ラインのＬライン目の転送トランジスタＴＸ２は、行順次で導通し、Ｎフレーム目の信号を行順次で信号線１１７へ出力する。時刻ｔ６〜ｔ８では、１ライン目〜最終ラインのＬライン目の転送トランジスタＴＸ２は、行順次で導通し、Ｎ＋１フレーム目の信号を行順次で信号線１１７へ出力する。時刻ｔ９〜ｔ１１では、１ライン目〜最終ラインのＬライン目の転送トランジスタＴＸ２は、行順次で導通し、Ｎ＋２フレーム目の信号を行順次で信号線１１７へ出力する。
【００３２】
時刻ｔ０〜ｔ２では、外部出力回路１０７は、Ｎ−１フレーム目の信号を出力する。時刻ｔ３〜ｔ５では、外部出力回路１０７は、Ｎフレーム目の信号を出力する。時刻ｔ６〜ｔ８では、外部出力回路１０７は、Ｎ＋１フレーム目の信号を出力する。時刻ｔ９〜ｔ１１では、外部出力回路１０７は、Ｎ＋２フレーム目の信号を出力する。
【００３３】
図３の時刻ｔｆでは、外部閃光が画素部１０２に入射する。すると、Ｎ＋１フレーム目の電荷を蓄積中の光電変換部１１０の電荷が飽和し、転送トランジスタＴＸ１が導通していない状態でも、光電変換部１１０からＮフレーム目の電荷を保持している保持部１１２へ電荷が漏れ出す。
【００３４】
時刻ｔｆでは、既に、１ライン目〜Ｍ−１ライン目の転送トランジスタＴＸ２は、Ｎフレーム目の１ライン目〜Ｍ−１ライン目の電荷を保持部１１２から保持部１１４に転送済みである。これに対して、Ｍライン目〜Ｌライン目の転送トランジスタＴＸ２は、Ｎフレーム目のＭライン目〜Ｌライン目の電荷を保持部１１２から保持部１１４に転送していない。Ｍライン目〜Ｌライン目の保持部１１２において、Ｎフレーム目のＭライン目〜Ｌライン目の電荷は、未だ転送されていないので、光電変換部１１０から漏れ出した電荷の影響を受ける。一般的に、Ｒ（赤），Ｇ（緑），Ｂ（青）の画素において、最も感度が高くて飽和しやすいのはＧ（緑）の画素なので、Ｎフレーム目のＭライン目〜Ｌライン目の画素信号は緑色に色付いたように見える。
【００３５】
図４は、図３のタイミングチャートに対応し、外部出力回路１０７からＬＳＩ２００に出力される映像信号を各フレーム毎に並べた図である。Ｎ−１フレーム目の映像信号は、外部閃光が入射されていないので、通常の画像として出力される。Ｎフレーム目の映像信号は、上述したように１ライン目〜Ｍ−１ライン目では通常の画像として出力され、Ｍライン目〜Ｌライン目では緑色に色付いた画像として出力される。Ｎ＋１フレーム目の映像信号は、光電変換部１１０の電荷蓄積時に外部閃光が入射するため、１ライン目〜Ｌライン目では高輝度なフラッシュ画像として出力される。Ｎ＋２フレーム目の映像信号は、通常の画像として出力される。
【００３６】
図５は、ＬＳＩ２００の動作を示すフローチャートである。以下、図５を用いて、ＬＳＩ２００がＮフレーム目の緑色の色付き画像を補正する方法について説明する。ステップＳ１００では、外部入力回路２０１は、撮像素子１００からシリアルの映像信号を入力し、その入力したシリアル信号を画素毎の多ビットのパラレル信号に変換してフラッシュ検出回路２０２とフレームメモリ２０３へ出力する。フレームメモリ２０３は、その映像信号を保持する。次に、ステップＳ１０１では、フラッシュ検出回路２０２は、現フレームの映像信号の平均輝度値を算出して保持する。
【００３７】
次に、ステップＳ１０２では、フラッシュ検出回路２０２は、現フレームの映像信号の平均輝度値と１フレーム前の映像信号の平均輝度値の差分を算出し、その差分が所定の値以下であるかを判定する。そして、フラッシュ検出回路２０２は、その差分が所定の値以下であると判定した場合には、フラッシュ画像（外部閃光）が検出されなかったことを示すフラッシュ検出情報を色抑圧回路２０４へ出力し、ステップＳ１０３に処理を進める。また、フラッシュ検出回路２０２は、その差分が所定の値より大きいと判定した場合には、フラッシュ画像を検出したことを示すフラッシュ検出情報を色抑圧回路２０４へ出力し、ステップＳ１０４に処理を進める。
【００３８】
ステップＳ１０３では、色抑圧回路２０４は、フラッシュ画像が検出されなかったので、Ｒ（赤），Ｇ（緑），Ｂ（青）が均一になるような色抑圧補正値Ｃｗを設定し、ステップＳ１０５に処理を進める。
【００３９】
ステップＳ１０４では、色抑圧回路２０４は、フラッシュ画像が検出されたので、Ｒ（赤），Ｇ（緑），Ｂ（青）のうちのＧ（緑）のゲインが下がるような色抑圧補正値Ｃｇを設定し、ステップＳ１０５に処理を進める。
【００４０】
ステップＳ１０５では、色抑圧回路２０４は、フレームメモリ２０３がステップＳ１００において保持したフレームの映像信号の２つ前のフレームの映像信号をフレームメモリ２０３から読み出す。次に、ステップＳ１０６では、色抑圧回路２０４は、フレームメモリ２０３から読み出した映像信号に対して色抑圧処理を行う。
【００４１】
次に、ステップＳ１０７では、ＬＳＩ２００は、動作を終了するか否かを判定し、動作を終了すると判定した場合には処理を終了し、動作を終了しないと判定した場合にはステップＳ１０８に処理を進める。ステップＳ１０８では、ＬＳＩ２００は、次のフレームの映像信号が入力されるまで待機し、次のフレームの映像信号が入力された場合には、ステップＳ１００に処理を戻し、次のフレームの処理を繰り返す。
【００４２】
図６は、ＬＳＩ２００の動作を示すタイミングチャートである。図６を用いて、横軸を時間として、フラッシュ検出回路２０２への入力信号と、フラッシュ検出回路２０２の検出結果と、色抑圧回路２０４に適応されている色抑圧補正値と、フレームメモリ２０３から読み出される映像信号の動作タイミングについて説明する。
【００４３】
フラッシュ検出回路２０２は、時刻ｔ２０〜ｔ２１ではＮ−１フレーム目の映像信号、時刻ｔ２１〜ｔ２２ではＮフレーム目の映像信号、時刻ｔ２２〜ｔ２３ではＮ＋１フレーム目の映像信号、時刻ｔ２３〜ｔ２４ではＮ＋２フレーム目の映像信号を入力する。
【００４４】
フラッシュ検出回路２０２は、時刻ｔ２０〜ｔ２１では、Ｎ−２フレーム目の映像信号に対して外部閃光を検出しない結果を示すフラッシュ検出情報を色抑圧回路２０４に出力する。また、フラッシュ検出回路２０２は、時刻ｔ２１〜ｔ２２では、Ｎ−１フレーム目の映像信号に対して外部閃光を検出しない結果を示すフラッシュ検出情報を色抑圧回路２０４に出力する。また、フラッシュ検出回路２０２は、時刻ｔ２２〜ｔ２３では、Ｎフレーム目の映像信号に対して外部閃光を検出しない結果を示すフラッシュ検出情報を色抑圧回路２０４に出力する。また、フラッシュ検出回路２０２は、時刻ｔ２３〜ｔ２４では、Ｎ＋１フレーム目の映像信号に対して外部閃光を検出した結果を示すフラッシュ検出情報を色抑圧回路２０４に出力する。
【００４５】
色抑圧回路２０４は、外部閃光が検出されない時刻ｔ２０からｔ２３では、色抑圧補正値をＣｗに設定し、外部閃光が検出された時刻ｔ２３からｔ２４では、色抑圧補正値をＣｇに設定する。
【００４６】
フレームメモリ２０３は、入力された映像信号から２フレーム遅延させたフレームが読み出される。フレームメモリ２０３は、時刻ｔ２０〜ｔ２１ではＮ−３フレーム目の映像信号、時刻ｔ２１〜ｔ２２ではＮ−２フレーム目の映像信号、時刻ｔ２２〜ｔ２３ではＮ−１フレーム目の映像信号、時刻ｔ２３〜ｔ２４ではＮフレーム目の映像信号が読み出される。
【００４７】
色抑圧回路２０４は、Ｎ−３フレーム目の映像信号に対して、色抑圧補正値Ｃｗで色抑圧処理を行う。また、色抑圧回路２０４は、Ｎ−２フレーム目の映像信号に対して、色抑圧補正値Ｃｗで色抑圧処理を行う。色抑圧回路２０４は、Ｎ−１フレーム目の映像信号に対して、色抑圧補正値Ｃｗで色抑圧処理を行う。また、色抑圧回路２０４は、Ｎフレーム目の映像信号に対して、色抑圧補正値Ｃｇで色抑圧処理を行う。
【００４８】
色抑圧回路２０４は、外部閃光が検出された場合には、外部閃光が検出されたＮ＋１フレーム目の１フレーム前のＮフレーム目の映像信号に対して、外部閃光の影響を低減するため、色抑圧補正値Ｃｇで色抑圧処理を行う。具体的には、色抑圧回路２０４は、外部閃光が検出されない場合には、外部閃光が検出されないＮフレーム目の１フレーム前のＮ−１フレーム目の映像信号に対して、補正値Ｃｗで色抑圧処理を行う。また、色抑圧回路２０４は、外部閃光が検出された場合には、外部閃光が検出されたＮ＋１フレーム目の１フレーム前のＮフレーム目の映像信号に対して、補正値Ｃｇで色抑圧処理を行う。
【００４９】
以上の動作によって、ＬＳＩ２００は、光電変換部１１０の電荷漏れの影響によって緑色に色付いたＮフレーム目の映像信号に対して、Ｒ（赤），Ｇ（緑），Ｂ（青）のうちのＧ（緑）のゲインが下がるような色抑圧補正値Ｃｇで色抑圧処理を実行できる。ＬＳＩ２００は、フラッシュ画像を検出し、検出結果に応じて色抑圧補正値を変更することで、グローバルシャッタセンサにおける保持部１１２への電荷漏れによる色付きの影響を軽減できる。
【００５０】
なお、本実施形態では、フレームメモリ２０３の遅延量を２フレームとして説明したが、フラッシュ画像の検出を１フレーム期間すべての画素でなく、フレーム期間の最初の数ラインで行うことで１フレームと数ライン分の遅延量としてもよい。
【００５１】
（第２の実施形態）
図７は、本発明の第２の実施形態に係る撮像装置の構成例を示すブロック図である。以下、本実施形態が第１の実施形態と異なる点を説明する。第１の実施形態では、ＬＳＩ２００は、フラッシュ画像を検出して電荷漏れの影響のあるフレームのすべてに色抑圧補正値Ｃｇで色抑圧処理を実行する。これに対し、第２の実施形態では、ＬＳＩ２００は、電荷漏れの起こる可能性のあるラインにのみ色抑圧補正値Ｃｇで色抑圧処理を実行する。
【００５２】
図７の撮像装置は、図１の撮像装置に対して、色抑圧回路２０４の代わりに、ＬＵＴ３０８と色抑圧回路３０４を設けたものである。ＬＵＴ３０８は、１フレーム期間の時間と電荷蓄積時間から、光電変換部１１０の電荷蓄積開始と同時に転送トランジスタＴＸ２が導通するラインを対応付けるルックアップテーブルである。ＬＵＴ３０８は、ＣＰＵ２０７から１フレーム期間の時間、電荷蓄積時間の情報を入力し、光電変換部１１０の電荷蓄積開始と同時に転送トランジスタＴＸ２が導通するラインの情報を色抑圧回路３０４へ出力する。以下、光電変換部１１０の電荷蓄積開始と同時に転送トランジスタＴＸ２が導通するラインはＰライン目とする。色抑圧回路３０４は、フラッシュ検出回路２０２からのフラッシュ検出情報とＬＵＴ３０８からの情報に応じて、映像信号を色抑圧処理するための色抑圧補正値をＰライン目以降に変更する。
【００５３】
図８は、撮像素子１００の動作を示すタイミングチャートである。以下、撮像素子１００の動作フレームレートと、光電変換部１１０の動作と、トランジスタＯＦＤの動作と、転送トランジスタＴＸ１の動作と、保持部１１２の動作と、各ラインの転送トランジスタＴＸ２の動作と、外部出力回路１０７の出力映像信号を説明する。時刻ｔｆでは、外部閃光が画素部１０２に入射される。
【００５４】
図８は、図３に対して、光電変換部１１０の電荷蓄積開始タイミングｔ１とＰライン目の転送トランジスタＴＸ２が導通するタイミングｔ１が同じである点が異なる。同様に、図８では、光電変換部１１０の電荷蓄積開始タイミングｔ４、ｔ７、ｔ１０とＰライン目の転送トランジスタＴＸ２が導通するタイミングｔ４、ｔ７、ｔ１０がそれぞれ同じである。
【００５５】
各フレーム期間のトランジスタＯＦＤが導通していない期間に外部閃光が画素部１０２へ入射すると、光電変換部１１０の電荷が飽和して、光電変換部１１０から保持部１１２へ電荷が漏れてしまう。しかし、時刻ｔ０〜ｔ１のトランジスタＯＦＤが導通している期間に外部閃光が画素部１０２へ入射しても、光電変換部１１０の電荷はトランジスタＯＦＤによりリセットされるので、光電変換部１１０から保持部１１２へ電荷が漏れることはない。つまり、時刻ｔ０〜ｔ１の間に保持部１１２から読み出される１ライン目〜Ｐ−１ライン目の電荷は、漏れによる緑色に色付く現象が起きない。時刻ｔ３〜ｔ４、ｔ６〜ｔ７、ｔ９〜ｔ１０でも同様に、１ライン目〜Ｐ−１ライン目の電荷は、漏れによる緑色に色付く現象が起きない。
【００５６】
図９は、ＬＳＩ２００の動作を示すタイミングチャートである。図９は、フラッシュ検出回路２０２への入力映像信号と、フラッシュ検出回路２０２の検出結果と、色抑圧回路３０４に適応されている色抑圧補正値と、フレームメモリ２０３から読み出される映像信号を示す。第１の実施形態（図６）では、時刻ｔ２３〜ｔ２４において、色抑圧回路２０４は、Ｎフレーム目のすべてのラインに対して、色抑圧補正値Ｃｇを設定する。
【００５７】
これに対し、本実施形態（図９）では、時刻ｔ２３〜ｔ３０において、色抑圧回路３０４は、電荷漏れによって緑色の色付きが発生している可能性がないＮフレーム目の１ライン目〜Ｐ−１ライン目の信号に対して、色抑圧補正値Ｃｗを設定する。そして、時刻ｔ３０〜ｔ２４では、色抑圧回路３０４は、電荷漏れによって緑色の色付きが発生している可能性があるＮフレーム目のＰライン目〜Ｌライン目の信号に対して、色抑圧補正値Ｃｇを設定する。
【００５８】
以上のように、色抑圧回路３０４は、外部閃光が検出されない場合には、外部閃光が検出されないＮフレーム目の１フレーム前のＮ−１フレーム目の映像信号に対して、補正値Ｃｗで色抑圧処理を行う。また、色抑圧回路３０４は、外部閃光が検出された場合には、外部閃光が検出されたＮ＋１フレーム目の１フレーム前のＮフレーム目において、１ライン目〜Ｐ−１ライン目の映像信号に対して、補正値Ｃｗで色抑圧処理を行う。１ライン目〜Ｐ−１ライン目の映像信号は、トランジスタＯＦＤが光電変換部１１０の電荷をリセットしている期間に転送トランジスタＴＸ２が保持部１１２の電荷を増幅トランジスタ１１５に転送したラインの映像信号である。また、色抑圧回路３０４は、外部閃光が検出された場合には、外部閃光が検出されたＮ＋１フレーム目の１フレーム前のＮフレーム目において、Ｐライン目〜Ｌライン目の映像信号に対して、補正値Ｃｇで色抑圧処理を行う。Ｐライン目〜Ｌライン目の映像信号は、トランジスタＯＦＤが光電変換部１１０の電荷をリセットしていない期間に転送トランジスタＴＸ２が保持部１１２の電荷を増幅トランジスタ１１５に転送したラインの映像信号である。
【００５９】
なお、色抑圧回路３０４は、時刻ｔ３０〜ｔ２４の期間において、色抑圧補正値をＣｇに設定しているが、時刻ｔ２３〜ｔ２４の期間において、色抑圧補正値をＣｇに設定することにより、電荷漏れによる色付きの影響を軽減してもよい。
【００６０】
上述したように、色抑圧回路３０４は、フレームレートと蓄積時間から、電荷漏れによる色付きの影響が発生する可能性があるラインの信号の色抑圧補正値をＣｇに設定する。これにより、グローバルシャッタセンサにおける保持部１１２への電荷漏れによる色付きの影響を軽減できる。
【００６１】
（第３の実施形態）
図１０は、本発明の第３の実施形態に係る撮像装置の構成例を示すブロック図である。以下、本実施形態が第１の実施形態と異なる点を説明する。第１の実施形態では、ＬＳＩ２００は、フラッシュ画像を検出し、その検出結果に応じて電荷漏れの影響があるフレームに対して、色抑圧補正値をＣｇに設定し、色抑圧処理を実行する。第３の実施形態では、ＬＳＩ２００は、電荷漏れの影響があるフレームを読み出さずに、影響がない別フレームを代わりに読み出す。
【００６２】
図１０の撮像装置は、図１の撮像装置に対して、フレームメモリ２０３と色抑圧回路２０４の代わりに、フレームメモリ４０３を設けたものである。フレームメモリ４０３は、フラッシュ検出回路２０２からフラッシュ検出情報を入力し、フラッシュ検出情報に応じて読み出しアドレスを変更する。
【００６３】
図１１は、ＬＳＩ２００の動作を示すフローチャートである。以下、図１１を用いて、ＬＳＩ２００がＮフレーム目の緑色の色付き画像を補正する方法について説明する。図１１のフローチャートは、図５のフローチャートに対して、ステップＳ１０３およびＳ１０４の代わりにステップＳ２０３およびＳ２０４が設けられ、ステップＳ１０６が削除されたものである。以下、図１１のフローチャートが図５のフローチャートと異なる点を説明する。
【００６４】
ステップＳ１０２では、フラッシュ検出回路２０２は、現フレームと前フレームの映像信号の平均輝度値の差分が所定の値以下であると判定した場合には、ステップＳ２０３に処理を進め、所定の値より大きいと判定した場合にはステップＳ２０４に処理を進める。
【００６５】
ステップＳ２０３では、フレームメモリ４０３は、読み出しアドレスの値を（書き込みアドレス−２）に設定し、ステップＳ１０５に処理を進める。ステップＳ２０４では、フレームメモリ４０３は、読み出しアドレスの値を（書き込みアドレス−３）に設定し、ステップＳ１０５に処理を進める。
【００６６】
ステップＳ１０５では、フレームメモリ４０３は、ステップＳ２０３またはＳ２０４で設定された読み出しアドレスが示すフレームの映像信号を読み出し、ステップＳ１０７に処理を進める。現フレームと前フレームの映像信号の平均輝度値の差分が所定の値以下であり、フラッシュ画像が検出されない場合には、フレームメモリ４０３は、ステップＳ１００において保持したフレームの映像信号の２つ前のフレームの映像信号を読み出す。また、現フレームと前フレームの映像信号の平均輝度値の差分が所定の値より大きく、フラッシュ画像が検出された場合には、フレームメモリ４０３は、ステップＳ１００において保持したフレームの映像信号の３つ前のフレームの映像信号を読み出す。
【００６７】
図１２は、ＬＳＩ２００の動作を示すタイミングチャートである。図１２は、フラッシュ検出回路２０２への入力映像信号と、フレームメモリ４０３の書き込みアドレスと、フラッシュ検出回路２０２の検出結果と、フレームメモリ４０３の読み出しアドレスと、フレームメモリ４０３から読み出される映像信号を示す。図６では、フラッシュ画像を検出した時刻ｔ２３〜ｔ２４の期間では、色抑圧回路２０４は、色抑圧補正値をＣｇに設定する。これに対し、図１２では、フラッシュ画像を検出した時刻ｔ２３〜ｔ２４の期間では、フレームメモリ４０３は、読み出しアドレスを（書き込みアドレス−３）に設定する。
【００６８】
まず、フレームメモリ４０３の書き込みアドレスについて説明する。フレームメモリ４０３は、時刻ｔ２０〜ｔ２１では書き込みアドレスＡＤＤ−１にＮ−１フレーム目の信号を書き込み、時刻ｔ２１〜ｔ２２では書き込みアドレスＡＤＤにＮフレーム目の信号を書き込む。そして、フレームメモリ４０３は、時刻ｔ２２〜ｔ２３では書き込みアドレスＡＤＤ＋１にＮ＋１フレーム目の信号を書き込み、時刻ｔ２３〜ｔ２４では書き込みアドレスＡＤＤ＋２にＮ＋２フレーム目の信号を書き込む。
【００６９】
次に、フレームメモリ４０３の読み出しアドレスについて説明する。時刻ｔ２０〜ｔ２１では、フレームメモリ４０３は、フラッシュ画像が検出されないので、（書き込みアドレス−２）を読み出しアドレスＡＤＤ−３として設定し、読み出しアドレスＡＤＤ−３のＮ−３フレーム目の信号を読み出す。次に、時刻ｔ２１〜ｔ２２では、フレームメモリ４０３は、フラッシュ画像が検出されないので、（書き込みアドレス−２）を読み出しアドレスＡＤＤ−２として設定し、読み出しアドレスＡＤＤ−２のＮ−２フレーム目の信号を読み出す。次に、時刻ｔ２２〜ｔ２３では、フレームメモリ４０３は、フラッシュ画像が検出されないので、（書き込みアドレス−２）を読み出しアドレスＡＤＤ−１として設定し、読み出しアドレスＡＤＤ−１のＮ−１フレーム目の信号を読み出す。次に、時刻ｔ２３〜ｔ２４では、フレームメモリ４０３は、フラッシュ画像が検出されたので、（書き込みアドレス−３）を読み出しアドレスＡＤＤ−１として設定し、読み出しアドレスＡＤＤ−１のＮ−１フレーム目の信号を読み出す。
【００７０】
フレームメモリ４０３は、フラッシュ画像が検出された場合には、電荷漏れによる色付きが発生しているＮフレーム目の信号を読み出さずに、電荷漏れの影響がないＮ−１フレーム目の信号を代わりに読み出す。フレームメモリ４０３は、フラッシュ画像が検出された場合には、読み出しアドレスを変更することにより、グローバルシャッタセンサにおける保持部１１２への電荷漏れによる色付きの影響を軽減できる。
【００７１】
本実施形態では、フレームメモリ４０３の遅延量を２フレームとして説明したので、図１１のステップＳ２０３で設定する読み出しアドレスを（書き込みアドレス−２）にし、ステップＳ２０４で設定する読み出しアドレスを（書き込みアドレス−３）にした。この読み出しアドレスの設定は、フレームメモリ４０３での遅延量に応じて、適宜変えてもよい。
【００７２】
フレームメモリ４０３は、撮像素子１００により生成された映像信号を記憶する。フレームメモリ４０３は、外部閃光が検出されない場合には、外部閃光が検出されないＮフレーム目の１フレーム前のＮ−１フレーム目の映像信号を読み出す。また、フレームメモリ４０３は、外部閃光が検出された場合には、外部閃光が検出されたＮ＋１フレーム目の２フレーム前のＮ−１フレーム目の映像信号を読み出す。
【００７３】
（第４の実施形態）
図１３は、本発明の第４の実施形態に係る撮像装置の構成例を示すブロック図である。以下、本実施形態が第３の実施形態と異なる点を説明する。第３の実施形態では、ＬＳＩ２００は、フラッシュ画像を検出し、その検出結果に応じて電荷漏れの影響があるフレームの全ラインを電荷漏れの影響がないフレームの全フレームと入れ替える。本実施形態では、ＬＳＩ２００は、電荷漏れが起こる可能性があるフレームのラインのみを、電荷漏れの影響がないフレームのラインと入れ替える。
【００７４】
図１３の撮像装置は、図１０の撮像装置に対して、フレームメモリ４０３の代わりに、ＬＵＴ３０８とフレームメモリ５０３を設けたものである。ＬＵＴ３０８は、第２の実施形態（図７）で説明したものと同一である。ＬＵＴ３０８は、光電変換部１１０の電荷蓄積開始と同時に転送トランジスタＴＸ２が導通するラインの情報をフレームメモリ５０３に出力する。本実施形態の説明では、光電変換部１１０の電荷蓄積開始と同時に転送トランジスタＴＸ２が導通するラインはＰライン目とする。フレームメモリ５０３は、フラッシュ検出回路２０２からのフラッシュ検出情報とＬＵＴ３０８からの情報に応じて、フラッシュ画像のフレームのＰライン目の以降の読み出しアドレスを、前フレームのＰライン目以降の読み出しアドレスに変更する。
【００７５】
図１４は、ＬＳＩ２００の動作を示すタイミングチャートである。図１４は、フラッシュ検出回路２０２への入力映像信号と、フレームメモリ５０３の書き込みアドレスと、フラッシュ検出回路２０２の検出結果と、フレームメモリ５０３の読み出しアドレスと、フレームメモリ５０３から読み出される映像信号を示す。第３の実施形態（図１２）では、時刻ｔ２３〜ｔ２４の期間において、フレームメモリ４０３は、Ｎフレーム目のすべてのラインをＮ−１フレーム目のすべてのラインに入れ替える。
【００７６】
次に、本実施形態（図１４）のフレームメモリ４０３の読み出しアドレスについて説明する。時刻ｔ２３〜ｔ３０では、フレームメモリ５０３は、電荷漏れによって緑色の色付きが発生している可能性がない１ライン目〜Ｐ−１ライン目の信号に対して、（書き込みアドレス−２）を読み出しアドレスＡＤＤとして設定する。そして、フレームメモリ５０３は、読み出しアドレスＡＤＤが示すＮフレーム目の１ライン目〜Ｐ−１ライン目の信号を読み出す。
【００７７】
時刻ｔ３０〜ｔ２４では、フレームメモリ５０３は、電荷漏れによって緑色の色付きが発生している可能性があるＰ−１ライン目〜Ｌライン目の信号に対して、（書き込みアドレス−３）を読み出しアドレスＡＤＤ−１として設定する。そして、フレームメモリ５０３は、読み出しアドレスＡＤＤ−１が示すＮ−１フレーム目のＰ−１ライン目〜Ｌライン目の信号を読み出す。
【００７８】
上述のように、フレームメモリ５０３は、フレームレートと蓄積時間から、電荷漏れによる色付きの影響が発生する可能性がある範囲のラインの読み出しアドレスを、電荷漏れによる色付きの影響が発生する可能性がない範囲のラインの読み出しアドレスに変更する。これにより、グローバルシャッタセンサにおける保持部１１２への電荷漏れによる色付きの影響を軽減できる。
【００７９】
フレームメモリ５０３は、撮像素子１００により生成された映像信号を記憶する。フレームメモリ５０３は、外部閃光が検出されない場合には、外部閃光が検出されないＮフレーム目の１フレーム前のＮ−１フレーム目の映像信号を読み出す。また、フレームメモリ５０３は、外部閃光が検出された場合には、外部閃光が検出されたＮ＋１フレーム目の１フレーム前のＮフレームにおいて、１ライン目〜Ｐ−１ライン目の映像信号を読み出す。１ライン目〜Ｐ−１ライン目の映像信号は、トランジスタＯＦＤが光電変換部１１０の電荷をリセットしている期間に転送トランジスタＴＸ２が保持部１１２の電荷を増幅トランジスタ１１５に転送したラインの映像信号である。また、フレームメモリ５０３は、外部閃光が検出された場合には、外部閃光が検出されたＮ＋１フレーム目の２フレーム前のＮ−１フレームにおいて、Ｐライン目〜Ｌライン目の映像信号を読み出す。Ｐライン目〜Ｌライン目の映像信号は、トランジスタＯＦＤが光電変換部１１０の電荷をリセットしていない期間に転送トランジスタＴＸ２が保持部１１２の電荷を増幅トランジスタ１１５に転送したラインの映像信号である。
【００８０】
第１〜第４の実施形態によれば、グローバルシャッタ方式のセンサでは、光電変換部１１０がＮ＋１フレーム目の電荷を蓄積中に、外部閃光が入射されると、光電変換部１１０から保持部１１２に電荷が漏れる。保持部１１２には、Ｎフレーム目の電荷が蓄積している。そのため、Ｎフレーム目の映像信号は、外部閃光による電荷漏れの影響で、緑色の色付きが生じてしまう。色抑圧回路またはフレームメモリは、処理部であり、外部閃光が検出された場合には、外部閃光が検出されたフレームの１フレーム前のフレームの映像信号に対して、外部閃光の影響を低減する処理を行う。これにより、グローバルシャッタ方式のセンサにおける光電変換部１１０から保持部１１２への電荷漏れによる色付きの影響を軽減できる。
【００８１】
以上、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。上述の実施形態の一部を適宜組み合わせてもよい。
【符号の説明】
【００８２】
１０２  画素部、１１０  光電変換部、ＴＸ１，ＴＸ２  転送トランジスタ、１１２  保持部、１１５  増幅トランジスタ、ＯＦＤ  トランジスタ、２０２  フラッシュ検出回路、２０３，４０３，５０３  フレームメモリ、２０４，３０４  色抑圧回路
【図１】
2018186460.tif 000003
【図２】
2018186460.tif 000004
【図３】
2018186460.tif 000005
【図４】
2018186460.tif 000006
【図５】
2018186460.tif 000007
【図６】
2018186460.tif 000008
【図７】
2018186460.tif 000009
【図８】
2018186460.tif 000010
【図９】
2018186460.tif 000011
【図１０】
2018186460.tif 000012
【図１１】
2018186460.tif 000013
【図１２】
2018186460.tif 000014
【図１３】
2018186460.tif 000015
【図１４】
2018186460.tif 000016