(57)【要約】  撮像装置において、閃光による画面内の明るさの不均一をなくし、かつ動画として連続性を確保した映像を得る。撮像装置（１）において、撮像して得た映像信号の閃光の影響がまたがったフィールドの信号を加算または加算平均することで、画面に不均一に現れる閃光の影響を均一化する。
2010100866.tif 000002
【特許請求の範囲】
【請求項１】
撮像素子を有し、被写体から入射する光信号を電気信号に変換して映像信号を取得し、出力する撮像部と、
前記撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出する閃光検出部と、
前記閃光検出部により、前記撮像部により取得される映像信号が、閃光の影響を受けていると判断された場合、閃光の影響を受けていると判断された前記映像信号を用いて、前記撮像部から出力される映像信号を補正する閃光補正部と、
を備える撮像装置。
【請求項２】
前記閃光検出部により、Ｎ番目（Ｎは整数）の単位画像を形成する映像信号であるＮ番目映像信号およびＮ＋１番目（Ｎは整数）の単位画像を形成する映像信号である（Ｎ＋１）番目映像信号が、閃光の影響を受けていると判断された場合、
前記閃光補正部は、前記Ｎ番目映像信号および前記（Ｎ＋１）番目映像信号を用いて補正映像信号を生成し、前記撮像部から出力される映像信号を、前記補正映像信号に置換することで、前記撮像部から出力される映像信号を補正する、
請求項１に記載の撮像装置。
【請求項３】
前記閃光補正部は、
複数の映像信号を入力することができ、入力される複数の映像信号から、前記閃光検出部の検出結果に基づいて、いずれか１つの映像信号を選択し、出力する第１選択部と、
前記第１選択部から出力される映像信号を、映像信号により形成される単位画像に相当する時間である単位画像時間だけ遅延させて出力する遅延部と、
前記撮像部から出力される映像信号および前記遅延部から出力される映像信号に対して加算処理を行い、前記処理を行った映像信号を出力する加算部と、
前記加算部から出力される映像信号または前記遅延部から出力される映像信号のどちらか一方を選択して出力する出力選択部と、
を有し、
前記第１選択部は、前記撮像部から出力される映像信号および前記加算部から出力される映像信号を入力とし、前記閃光検出部により、前記撮像部から出力される映像信号が、閃光の影響を受けていないと判断された場合、前記撮像部から出力される映像信号を選択して出力し、前記閃光検出部により、前記撮像部から出力される映像信号が、閃光の影響を受けていると判断された場合、前記加算部から出力される映像信号を選択して出力し、
前記出力選択部は、前記閃光検出部により、前記撮像部から出力される映像信号が、閃光の影響を受けていないと判断された場合、前記遅延部から出力される映像信号を選択して出力し、前記閃光検出部により、前記撮像部から出力される映像信号が、閃光の影響を受けていると判断された場合、前記加算部から出力される映像信号を選択して出力する、
請求項１または２に記載の撮像装置。
【請求項４】
前記加算部は、前記撮像部から出力される映像信号と、前記遅延部から出力される映像信号と、を加算することで、前記加算処理を行う、
請求項３に記載の撮像装置。
【請求項５】
前記加算部は、前記撮像部から出力される映像信号と、前記遅延部から出力される映像信号と、を加算して平均することで、前記加算処理を行う、
請求項３に記載の撮像装置。
【請求項６】
前記閃光検出部は、前記撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出し、映像信号により形成される単位画像に相当する時間である単位画像時間前の検出結果を保持し、
前記閃光補正部は、
複数の映像信号を入力することができ、入力される複数の映像信号から、前記閃光検出部の検出結果に基づいて、いずれか１つの映像信号を選択し、出力する第１選択部と、
前記第１選択部から出力される映像信号を、１単位画像時間だけ遅延させて出力する遅延部と、
前記撮像部から出力される映像信号または前記遅延部から出力される映像信号のどちらか一方を選択して出力する出力選択部と、
を有し、
前記第１選択部は、前記閃光検出部により、１単位画像前の映像信号により形成される単位画像の画面の下部に相当する映像信号が、閃光による影響を受けていると判断された場合、処理対象となっている単位画像において、前記画面の下部に相当する期間、前記遅延部から出力される映像信号を選択して出力し、それ以外の場合、前記撮像部から出力される映像信号を選択して出力し、
前記出力選択部は、前記閃光検出部により、映像信号により形成される単位画像の画面の上部に相当する映像信号が、閃光による影響を受けていると判断された場合、処理対象となっている単位画像において、前記画面の上部に相当する期間、前記撮像部から出力される映像信号を選択して出力し、それ以外の場合、前記遅延部から出力される映像信号を選択して出力する、
請求項１または２に記載の撮像装置。
【請求項７】
前記閃光検出部は、前記撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出し、映像信号により形成される単位画像に相当する時間である単位画像時間前の検出結果を保持し、
前記閃光補正部は、
前記閃光検出部により、１単位画像前の映像信号により形成される単位画像の画面の下部に相当する映像信号が、閃光による影響を受けていると判断された場合、処理対象となっている単位画像において、前記画面の下部に相当する期間、前記撮像部から出力される映像信号を受け付けずに、１単位画像時間前に、前記撮像部から受け付けた映像信号を、さらに１単位画像時間遅延させて出力し、それ以外の場合、前記撮像部からの映像信号を１単位画像時間遅延させて出力する遅延部と、
前記閃光検出部により、映像信号により形成される単位画像の画面の上部に相当する映像信号が、閃光による影響をうけていると判断された場合、処理対象となっている単位画像において、前記画面の上部に相当する期間、前記撮像部から出力される映像信号を選択して出力し、それ以外の場合、前記遅延部から出力される映像信号を選択して出力する選択部と、
を有する、
請求項１または２に記載の撮像装置。
【請求項８】
前記閃光検出部は、前記撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出し、映像信号により形成される単位画像に相当する時間である単位画像時間前の検出結果を保持し、
前記閃光補正部は、
複数の映像信号を入力することができ、入力される複数の映像信号から、前記閃光検出部の検出結果に基づいて、いずれか１つの映像信号を選択し、出力する第１選択部と、
前記遅延部は、前記第１選択部から出力される映像信号を１単位画像時間遅延させた第１遅延信号と、前記第１遅延信号を１単位画像時間遅延させた第２遅延信号と、を出力する遅延部と、
前記撮像部から出力される映像信号と前記遅延部から出力される前記第１遅延信号とに対して加算処理を行い、前記処理をおこなった映像信号を出力する加算部と、
前記加算部から出力される映像信号と前記第２遅延信号と、を所定の割合で混合し、出力する混合部と、
前記混合部から出力される映像信号または前記遅延部から出力される前記第１遅延信号のどちらか一方を選択して出力する出力選択部と、
を有し、
前記第１選択部は、前記撮像部から出力される映像信号および前記混合部から出力される映像信号を入力とし、前記閃光検出部により、前記撮像部から出力される映像信号が、閃光の影響を受けていないと判断された場合、前記撮像部から出力される映像信号を選択して出力し、前記閃光検出部により、前記撮像部から出力される映像信号が、閃光の影響を受けていると判断された場合、前記混合部から出力される映像信号を選択して出力し、
前記出力選択部は、前記閃光検出部により、前記撮像部から出力される映像信号が、閃光の影響を受けていないと判断された場合、前記第１遅延信号を選択して出力し、前記閃光検出部により、前記撮像部から出力される映像信号が、閃光の影響を受けていると判断された場合、前記混合部から出力される映像信号を選択して出力する、
請求項１または２に記載の撮像装置。
【請求項９】
前記遅延部は、前記閃光検出部により、前記撮像部から出力される映像信号が、閃光の影響を受けていると判断された場合のみ、前記第２遅延信号を出力する、
請求項８に記載の撮像装置。
【請求項１０】
前記単位画像は、フィールド画像であり、
前記単位画像時間は、フィールド時間である、
請求項１から９のいずれかに記載の撮像装置。
【請求項１１】
閃光検出部は、
画素単位、ライン単位、または、フィールド単位のいずれかで前記撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出し、
前記映像信号により形成される画像の画面において、閃光の影響を受けている画面領域に相当する期間だけ、閃光の影響があることを示す値を出力する第１閃光判断信号の生成と、
前記映像信号により形成される画像の画面の開始時において、閃光の影響を受けていると判断した場合、前記画面全部に相当する期間だけ、閃光の影響があることを示す値を出力する第２閃光判断信号の生成と、
前記映像信号により形成される画像の画面内の下部だけに閃光の影響が有ると判断した場合、前記画面全部に相当する期間だけ、閃光の影響があることを示す値を出力する第３閃光判断信号の生成と、
を行い、
前記第１閃光判断信号、前記第２閃光判断信号および前記第３閃光判断信号を、それぞれ、所定時間遅延させることができ、
前記第１閃光判断信号、前記第２閃光判断信号および前記第３閃光判断信号、並びに、第１閃光判断信号、前記第２閃光判断信号および前記第３閃光判断信号を所定時間遅延させた信号のうちのいずれか１つまたは複数の信号を出力することができる、
請求項１から１０のいずれかに記載の撮像装置。
【請求項１２】
前記加算部および前記選択部は、前記加算部及び前記選択部に入力される２つの映像信号の垂直位相が互いに０．５ラインずれているとき、どちらかの映像信号を０．５ライン分シフトして垂直方向の位相を合わせた上で信号を加算及び選択する、
請求項１から１１のいずれかに記載の撮像装置。
【請求項１３】
撮像素子を有し、被写体から入射する光信号を電気信号に変換して映像信号を取得し、出力する撮像部を備える撮像装置に用いられる撮像方法であって、
前記撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出する閃光検出ステップと、
前記閃光検出ステップにより、前記撮像部により取得される映像信号が、閃光の影響を受けていると判断された場合、閃光の影響を受けていると判断された前記映像信号を用いて、前記撮像部から出力される映像信号を補正する閃光補正ステップと、
を備える撮像方法。
【請求項１４】
撮像素子を有し、被写体から入射する光信号を電気信号に変換して映像信号を取得し、出力する撮像部を備える撮像装置に用いられる撮像方法をコンピュータに実行させるプログラムであって、
前記撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出する閃光検出ステップと、
前記閃光検出ステップにより、前記撮像部により取得される映像信号が、閃光の影響を受けていると判断された場合、閃光の影響を受けていると判断された前記映像信号を用いて、前記撮像部から出力される映像信号を補正する閃光補正ステップと、
を備える撮像方法をコンピュータに実行させるプログラム。
【請求項１５】
撮像素子を有し、被写体から入射する光信号を電気信号に変換して映像信号を取得し、出力する撮像部を備える撮像装置に用いられる集積回路であって、
前記撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出する閃光検出部と、
前記閃光検出部により、前記撮像部により取得される映像信号が、閃光の影響を受けていると判断された場合、閃光の影響を受けていると判断された前記映像信号を用いて、前記撮像部から出力される映像信号を補正する閃光補正部と、
を備える
集積回路。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、連続画像を撮像するデジタルカメラやビデオカメラなどの撮像装置に活用される技術であって、外部閃光による悪影響を緩和することができる撮像装置に関するものである。
【背景技術】
【０００２】
撮像装置（カメラ等）のフラッシュなどの外部閃光により、撮像装置により撮像（取得）される画像において、画面が急に明るくなりすぎることがある。このとき、ＣＣＤ型撮像素子（ＣＣＤ型イメージセンサ）を使用した撮像装置（カメラ等）では、外部閃光による影響は、撮像画像の画面でほぼ一律に現れる。これは、ＣＣＤ型撮像素子の画素ごとに設けられたフォトダイオードから電荷をバッファとなるＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）に送る動作が、全てのフォトダイオードで同時に行われるためである。
しかしながら、近年、撮像装置（カメラ等）に搭載されるようになった、ＣＭＯＳ型撮像素子（ＣＭＯＳ型イメージセンサ）は、ＣＭＯＳ型撮像素子の画素ごとに設けられたフォトダイオードの電荷（蓄積電荷）を画面（撮像素子面）の上から順にバッファとなる部分に送る。このため、ＣＭＯＳ型撮像素子では、画面（撮像素子面）の上部に配置されているフォトダイオードにより蓄積された電荷がバッファに転送される期間と、画面（撮像素子面）の下部に配置されているフォトダイオードにより蓄積された電荷がバッファに転送される期間と、にずれが生じる。【０００３】
例えば、図１７（ａ）に示すような期間に、フラッシュによる強い光がＣＭＯＳ型撮像素子に入ったとすると、図１７（ａ）に示すように、このＣＭＯＳ型撮像素子により取得される撮像画像の画面の下の部分では、「フィールド２」が、画面の上の部分では、「フィールド３」が、それぞれ、フラッシュ光による影響を受ける。その結果、図１７（ｂ）に示す通り、「フィールド２」では、撮像画像の画面の下だけが明るくなり、「フィールド３」では、撮像画像の画面の上だけが明るくなってしまう。そして、フラッシュの光は強い光なので、このような状況下で、撮像された映像（画像）は、その明るくなる部分が白く飛ぶことになり（いわゆる「白飛び」現象が発生し）、白い帯状になる（画像（映像上）に白い帯状の高輝度部分が発生する）ことが多い。
こうした映像に対し、特許文献１に開示されている技術（従来の撮像装置）では、映像を記録するときに、閃光による帯状の映像が含まれるフィールドを記録せず、代わりに帯状の映像の影響を受けていない前後の映像を記録するようにしている。例えば、図１７（ｂ）に示す映像で言えば、従来の撮像装置では、「フィールド２」の映像（画像）と「フィールド３」の映像（画像）の代わりに、「フィールド１」の映像（画像）を記録する。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−３０６２２５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、従来の方法（従来の撮像装置）では、静止画を撮影する場合は良いが、動画を撮影する場合、閃光の影響により置き換えられた箇所で映像が不連続になりぎこちなさが生じる。また、従来の方法（従来の撮像装置）により撮像した映像では、閃光が入った映像が残らないため、閃光の有無もわからない（従来の撮像装置により、実際に閃光があったシーンを撮像する場合、現実には、閃光があったにも関わらず、撮像映像では、閃光が存在しないため、現実のシーンを忠実に再現していないことになる。）。
本発明は、上記従来の課題を解決するもので、外部閃光による明るい横帯のある不自然な画面（撮像画像）を無くし、閃光が入ったかどうかもわかるようにし、動画として連続性を確保した画像（映像）を出力する撮像装置、撮像方法、プログラムおよび集積回路を提供することを目的とする。
【課題を解決するための手段】
【０００６】
第１の発明は、撮像部と、閃光検出部と、閃光補正部と、を備える撮像装置である。
撮像部は、撮像素子を有し、被写体から入射する光信号を電気信号に変換して映像信号を取得し、出力する。閃光検出部は、撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出する。閃光補正部は、閃光検出部により、撮像部により取得される映像信号が、閃光の影響を受けていると判断された場合、閃光の影響を受けていると判断された映像信号を用いて、撮像部から出力される映像信号を補正する。
この撮像装置では、上記構成により、撮像部により取得される映像信号が、閃光の影響を受けていると判断された場合、閃光の影響を受けていると判断された映像信号を用いて、撮像部から出力される映像信号を補正する。これにより、この撮像装置では、外部閃光による明るい横帯のある不自然な画面を無くし、また、閃光が撮像装置に入ったかどうかも分かるようにしつつ、動画として連続性を確保した映像（画像）を得ることができる。【０００７】
第２の発明は、第１の発明であって、閃光検出部により、Ｎ番目（Ｎは整数）の単位画像を形成する映像信号であるＮ番目映像信号およびＮ＋１番目（Ｎは整数）の単位画像を形成する映像信号である（Ｎ＋１）番目映像信号が、閃光の影響を受けていると判断された場合、閃光補正部は、Ｎ番目映像信号および（Ｎ＋１）番目映像信号を用いて補正映像信号を生成し、撮像部から出力される映像信号を、補正映像信号に置換することで、撮像部から出力される映像信号を補正する。
これにより、閃光の影響を受けているＮ番目映像信号および（Ｎ＋１）番目映像信号が形成する画面（N番目の画面および（Ｎ＋１）番目の画面）において、外部閃光による明るい横帯のある不自然な画面を無くし、また、閃光が撮像装置に入ったかどうかも分かるようにしつつ、動画として連続性を確保した映像（画像）を得ることができる。【０００８】
なお、「単位画像」とは、映像信号（画像信号）により形成される画像であり、表示装置において、１画面を構成する。例えば、フィールド画像（映像）やフレーム画像（映像）が、「単位画像」に該当する。
なお、「置換」とは、一部を置換することを含む概念である。「置換」は、例えば、以下のような一部を置換する場合を含む。
すなわち、「単位画像」がフィールド画像である場合において、１番目のフィールド画像は、外部閃光の影響を受けておらず、２番目および３番目のフィールド画像が、外部閃光の影響を受けており、そして、４番目のフィールド画像は、外部閃光の影響を受けていない場合、
（１）２番目のフィールド画像を、外部閃光の影響を受けていない１番目のフィールド画像で置換し、
（２）３番目のフィールド画像を、外部閃光の影響を受けている２番目のフィールド画像および３番目のフィールド画像を加算することで生成した補正画像で置換する。【０００９】
「置換」には、上記のように、外部閃光の影響を受けている２つのフィールド画像のうち、１つのフィールド画像のみを、外部閃光の影響を受けているフィールド画像を用いて生成した補正画像で置換することが含まれる。
第３の発明は、第１または第２の発明であって、閃光補正部は、第１選択部と、遅延部と、出力選択部と、を有する。
第１選択部は、複数の映像信号を入力することができ、入力される複数の映像信号から、閃光検出部の検出結果に基づいて、いずれか１つの映像信号を選択し、出力する。遅延部は、第１選択部から出力される映像信号を、映像信号により形成される単位画像に相当する時間である単位画像時間だけ遅延させて出力する。加算部は、撮像部から出力される映像信号および遅延部から出力される映像信号に対して加算処理を行い、処理を行った映像信号を出力する。出力選択部は、加算部から出力される映像信号または遅延部から出力される映像信号のどちらか一方を選択して出力する。【００１０】
そして、第１選択部は、撮像部から出力される映像信号および加算部から出力される映像信号を入力とし、閃光検出部により、撮像部から出力される映像信号が、閃光の影響を受けていないと判断された場合、撮像部から出力される映像信号を選択して出力し、閃光検出部により、撮像部から出力される映像信号が、閃光の影響を受けていると判断された場合、加算部から出力される映像信号を選択して出力する。出力選択部は、閃光検出部により、撮像部から出力される映像信号が、閃光の影響を受けていないと判断された場合、遅延部から出力される映像信号を選択して出力し、閃光検出部により、撮像部から出力される映像信号が、閃光の影響を受けていると判断された場合、加算部から出力される映像信号を選択して出力する。
この撮像装置では、上記構成により、その画面の一部（例えば、画面上部または画面下部）において閃光の影響を受けて明るくなっている単位画像（例えば、フィールド画像やフレーム画像）を検出し、当該単位画像を、閃光の影響を受けて明るくなっている画像領域（例えば、画面上部または画面下部）を用いて補正することができる。その結果、この撮像装置により取得される映像において、閃光の影響が不自然に発生することを防止することができる。【００１１】
これにより、この撮像装置では、外部閃光による明るい横帯のある不自然な画面を無くし、また、閃光が撮像装置に入ったかどうかも分かるようにしつつ、動画として連続性を確保した映像（画像）を得ることができる。
なお、「単位画像」とは、映像信号（画像信号）により形成される画像であり、表示装置において、１画面を構成する。例えば、フィールド画像（映像）やフレーム画像（映像）が、「単位画像」に該当する。
また、「単位画像時間」とは、映像信号により単位画像が形成されるのに要する時間であり、例えば、「単位画像」が「フィールド画像」である場合、「単位画像時間」は、「フィールド時間」であり、「単位画像」が「フレーム画像」である場合、「単位画像時間」は、「フレーム時間」である。【００１２】
第４の発明は、第３の発明であって、加算部は、撮像部から出力される映像信号と、遅延部から出力される映像信号と、を加算することで、加算処理を行う。
第５の発明は、第３の発明であって、加算部は、撮像部から出力される映像信号と、遅延部から出力される映像信号と、を加算して平均することで、加算処理を行う。
これにより、この撮像装置により取得される映像信号の信号値が大きくなりすぎることを防ぐことができるので、閃光の影響に発生する、いわゆる「白飛び」現象等を効果的に抑制することができる。
なお、「加算して平均する」とは、２つの映像信号を加算し、平均をとること以外に、２つの映像信号に、それぞれ、「１／２」の重付をして加算することも含む。さらに、「１／２」以外の重付による加算をも含む。【００１３】
第６の発明は、第１または第２の発明であって、閃光検出部は、撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出し、映像信号により形成される単位画像に相当する時間である単位画像時間前の検出結果を保持する。
そして、閃光補正部は、第１選択部と、遅延部と、出力選択部と、を有している。
第１選択部は、複数の映像信号を入力することができ、入力される複数の映像信号から、閃光検出部の検出結果に基づいて、いずれか１つの映像信号を選択し、出力する。遅延部は、第１選択部から出力される映像信号を、１単位画像時間だけ遅延させて出力する。出力選択部は、撮像部から出力される映像信号または遅延部から出力される映像信号のどちらか一方を選択して出力する。
そして、第１選択部は、閃光検出部により、１単位画像前の映像信号により形成される単位画像の画面の下部に相当する映像信号が、閃光による影響を受けていると判断された場合、処理対象となっている単位画像において、画面の下部に相当する期間、遅延部から出力される映像信号を選択して出力し、それ以外の場合、撮像部から出力される映像信号を選択して出力する。出力選択部は、閃光検出部により、映像信号により形成される単位画像の画面の上部に相当する映像信号が、閃光による影響を受けていると判断された場合、処理対象となっている単位画像において、画面の上部に相当する期間、撮像部から出力される映像信号を選択して出力し、それ以外の場合、遅延部から出力される映像信号を選択して出力する。【００１４】
この撮像装置では、上記構成により、その画面の一部（例えば、画面上部または画面下部）において閃光の影響を受けて明るくなっている単位画像（例えば、フィールド画像やフレーム画像）を検出し、当該単位画像を、閃光の影響を受けて明るくなっている画像領域（例えば、画面上部または画面下部）を用いて補正することができる。その結果、この撮像装置により取得される映像において、閃光の影響が不自然に発生することを防止することができる。
これにより、この撮像装置では、外部閃光による明るい横帯のある不自然な画面を無くし、また、閃光が撮像装置に入ったかどうかも分かるようにしつつ、動画として連続性を確保した映像（画像）を得ることができる。また、閃光が入った画像の元の画像が第３の発明よりわかりやすくなる。【００１５】
第７の発明は、第１または第２の発明であって、閃光検出部は、撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出し、映像信号により形成される単位画像に相当する時間である単位画像時間前の検出結果を保持する。
そして、閃光補正部は、遅延部と、選択部と、を有する。
遅延部は、閃光検出部により、１単位画像前の映像信号により形成される単位画像の画面の下部に相当する映像信号が、閃光による影響を受けていると判断された場合、処理対象となっている単位画像において、画面の下部に相当する期間、撮像部から出力される映像信号を受け付けずに、１単位画像時間前に、撮像部から受け付けた映像信号を、さらに１単位画像時間遅延させて出力し、それ以外の場合、撮像部からの映像信号を１単位画像時間遅延させて出力する。選択部は、閃光検出部により、映像信号により形成される単位画像の画面の上部に相当する映像信号が、閃光による影響をうけていると判断された場合、処理対象となっている単位画像において、画面の上部に相当する期間、撮像部から出力される映像信号を選択して出力し、それ以外の場合、遅延部から出力される映像信号を選択して出力する。【００１６】
この撮像装置では、上記構成により、その画面の一部（例えば、画面上部または画面下部）において閃光の影響を受けて明るくなっている単位画像（例えば、フィールド画像やフレーム画像）を検出し、当該単位画像を、閃光の影響を受けて明るくなっている画像領域（例えば、画面上部または画面下部）を用いて補正することができる。その結果、この撮像装置により取得される映像において、閃光の影響が不自然に発生することを防止することができる。
これにより、この撮像装置では、外部閃光による明るい横帯のある不自然な画面を無くし、また、閃光が撮像装置に入ったかどうかも分かるようにしつつ、動画として連続性を確保した映像（画像）を得ることができる。第６の発明より回路規模が小さくなり、閃光の影響のある画像を処理するときの電力も小さくなる。【００１７】
なお、「処理対象となっている単位画像において、前記画面の下部（上部）に相当する期間」とは、例えば、「単位画像」を「フィールド画像」とした場合、現在、撮像装置が処理対象としているフィールド画像において、そのフィールド画像の画面の下部（上部）を形成する映像信号が、撮像装置において処理対象となる時間（期間）のことをいう。
第８の発明は、第１または第２の発明であって、閃光検出部は、撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出し、映像信号により形成される単位画像に相当する時間である単位画像時間前の検出結果を保持する。
そして、閃光補正部は、第１選択部と、遅延部と、加算部と、混合部と、出力選択部と、を有する。
第１選択部は、複数の映像信号を入力することができ、入力される複数の映像信号から、閃光検出部の検出結果に基づいて、いずれか１つの映像信号を選択し、出力する。遅延部は、第１選択部から出力される映像信号を１単位画像時間遅延させた第１遅延信号と、第１遅延信号を１単位画像時間遅延させた第２遅延信号と、を出力する。加算部は、撮像部から出力される映像信号と遅延部から出力される第１遅延信号とに対して加算処理を行い、処理をおこなった映像信号を出力する。混合部は、加算部から出力される映像信号と第２遅延信号と、を所定の割合で混合し、出力する。出力選択部は、混合部から出力される映像信号または遅延部から出力される第１遅延信号のどちらか一方を選択して出力する。【００１８】
そして、第１選択部は、撮像部から出力される映像信号および混合部から出力される映像信号を入力とし、閃光検出部により、撮像部から出力される映像信号が、閃光の影響を受けていないと判断された場合、撮像部から出力される映像信号を選択して出力し、閃光検出部により、撮像部から出力される映像信号が、閃光の影響を受けていると判断された場合、混合部から出力される映像信号を選択して出力する。出力選択部は、閃光検出部により、撮像部から出力される映像信号が、閃光の影響を受けていないと判断された場合、第１遅延信号を選択して出力し、閃光検出部により、撮像部から出力される映像信号が、閃光の影響を受けていると判断された場合、混合部から出力される映像信号を選択して出力する。
この撮像装置では、上記構成により、その画面の一部（例えば、画面上部または画面下部）において閃光の影響を受けて明るくなっている単位画像（例えば、フィールド画像やフレーム画像）を検出し、当該単位画像を、閃光の影響を受けて明るくなっている画像領域（例えば、画面上部または画面下部）を用いて補正することができる。その結果、この撮像装置により取得される映像において、閃光の影響が不自然に発生することを防止することができる。【００１９】
これにより、この撮像装置では、外部閃光による明るい横帯のある不自然な画面を無くし、また、閃光が撮像装置に入ったかどうかも分かるようにしつつ、動画として連続性を確保した映像（画像）を得ることができる。また、この撮像装置では、混合部により、より多くの単位画像を用いて生成される画像（映像）により、閃光補正を行うので、第３の発明より動きの不連続さを緩和することができる。
第９の発明は、第８の発明であって、遅延部は、閃光検出部により、撮像部から出力される映像信号が、閃光の影響を受けていると判断された場合のみ、第２遅延信号を出力する。
この撮像装置では、必要なときのみ、遅延部により、第２遅延信号が出力されるので、第８の発明より閃光の影響のある画像を処理するときの電力が小さくなる。【００２０】
第１０の発明は、第１から第９のいずれかの発明であって、単位画像は、フィールド画像であり、単位画像時間は、フィールド時間である。
これにより、フィールド単位での閃光補正処理を行うことができる。
第１１の発明は、第１から第１０のいずれかの発明であって、閃光検出部は、画素単位、ライン単位、または、フィールド単位のいずれかで撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出する。
また、閃光検出部は、以下の信号の生成を行う。
（１）映像信号により形成される画像の画面において、閃光の影響を受けている画面領域に相当する期間だけ、閃光の影響があることを示す値を出力する第１閃光判断信号の生成。
（２）映像信号により形成される画像の画面の開始時において、閃光の影響を受けていると判断した場合、画面全部に相当する期間だけ、閃光の影響があることを示す値を出力する第２閃光判断信号の生成。
（３）映像信号により形成される画像の画面内の下部だけに閃光の影響が有ると判断した場合、画面全部に相当する期間だけ、閃光の影響があることを示す値を出力する第３閃光判断信号の生成。【００２１】
そして、閃光検出部は、第１閃光判断信号、第２閃光判断信号および第３閃光判断信号を、それぞれ、所定時間遅延させることができ、第１閃光判断信号、第２閃光判断信号および第３閃光判断信号、並びに、第１閃光判断信号、第２閃光判断信号および第３閃光判断信号を所定時間遅延させた信号のうちのいずれか１つまたは複数の信号を出力することができる。
これにより、どの単位画像が閃光の影響を受けているかを示す信号、映像信号により形成される画像において画面のどの領域が閃光の影響を受けているかを示す信号を生成することができ、これらの信号を用いて、撮像装置において、適切に閃光補正処理を行うことができる。
第１２の発明は、第１から第１１のいずれかの発明であって、加算部および選択部は、加算部及び選択部に入力される２つの映像信号の垂直位相が互いに０．５ラインずれているとき、どちらかの映像信号を０．５ライン分シフトして垂直方向の位相を合わせた上で信号を加算及び選択する。【００２２】
この撮像装置では、撮像部で生成する信号が、加算部及び選択部に入力される２つの映像信号の垂直位相が互いに０．５ラインずれているとき、どちらかの映像信号を０．５ライン分シフトして垂直方向の位相を合わせた上で信号を加算及び選択することで、信号の垂直方向の位相が処理によりずれることがなくなる。
これにより、インターレース形式の映像信号に対しても閃光補正処理を適切に行うことができる。
第１３の発明は、撮像素子を有し、被写体から入射する光信号を電気信号に変換して映像信号を取得し、出力する撮像部を備える撮像装置に用いられる撮像方法であって、閃光検出ステップと、閃光補正ステップと、を備える撮像方法である。
閃光検出ステップでは、撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出する。閃光補正ステップでは、閃光検出ステップにより、撮像部により取得される映像信号が、閃光の影響を受けていると判断された場合、閃光の影響を受けていると判断された映像信号を用いて、撮像部から出力される映像信号を補正する。【００２３】
これにより、第１の発明と同様の効果を奏する撮像方法を実現することができる。
第１４の発明は、撮像素子を有し、被写体から入射する光信号を電気信号に変換して映像信号を取得し、出力する撮像部を備える撮像装置に用いられる撮像方法をコンピュータに実行させるプログラムである。そして、撮像方法は、閃光検出ステップと、閃光補正ステップと、を備える。
閃光検出ステップでは、撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出する。閃光補正ステップでは、閃光検出ステップにより、撮像部により取得される映像信号が、閃光の影響を受けていると判断された場合、閃光の影響を受けていると判断された映像信号を用いて、撮像部から出力される映像信号を補正する。
これにより、第１の発明と同様の効果を奏する撮像方法をコンピュータに実行させるプログラムを実現することができる。【００２４】
第１５の発明は、撮像素子を有し、被写体から入射する光信号を電気信号に変換して映像信号を取得し、出力する撮像部を備える撮像装置に用いられる集積回路であって、閃光検出部と、閃光補正部と、を備える。
閃光検出部は、撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出する。閃光補正部は、閃光検出部により、撮像部により取得される映像信号が、閃光の影響を受けていると判断された場合、閃光の影響を受けていると判断された映像信号を用いて、撮像部から出力される映像信号を補正する。
これにより、第１の発明と同様の効果を奏する集積回路を実現することができ
【発明の効果】
【００２５】
本発明によれば、外部閃光による明るい横帯のある不自然な画面を無くし、また、閃光が入ったかどうかも分かるようにしつつ、動画として連続性を確保した映像（画像）を得ることができる撮像装置、撮像方法、プログラムおよび集積回路を実現することができる。
【図面の簡単な説明】
【００２６】
【図１】第１実施形態の撮像装置１のブロック図
【図２】第１実施形態の閃光補正部１０３のブロック図
【図３】第１実施形態の各部の映像の様子を示す図
【図４】第１実施形態の第１変形例の閃光補正部１０３のブロック図
【図５】第１実施形態の第１変形例の各部の映像の様子を示す図
【図６】第１実施形態の第２変形例の閃光補正部１０３Ｂのブロック図
【図７】第１実施形態の第２変形例の各部の映像の様子を示す図
【図８】第１実施形態の第３変形例の閃光補正部１０３Ｂのブロック図
【図９】第１実施形態の第３変形例の各部の映像の様子を示す図
【図１０】第２実施形態の撮像装置２のブロック図
【図１１】第２実施形態の閃光補正部１０３のブロック図
【図１２】第２実施形態の閃光補正部１０３のブロック図
【図１３】第２実施形態の各部の映像の様子を示す図
【図１４】第３実施形態の閃光補正部１０３のブロック図
【図１５】第３実施形態の閃光補正部１０３のブロック図
【図１６】第３実施形態の各部の映像の様子を示す図
【図１７】ＣＭＯＳ型撮像素子を使用したときに閃光が入ったときの例を示す図
【発明を実施するための形態】
【００２７】
以下、実施形態について、図面を参照しながら説明する。
［第１実施形態］
＜１．１：撮像装置の構成＞
図１に、第１実施形態の撮像装置１のブロック図（概略構成図）を示す。
なお、以下では、説明便宜のため、フィールド単位での処理について説明する。
図１に示すように、撮像装置１は、被写体を撮して映像信号ＶＩを生成する撮像部１０１と、撮像部１０１で生成した映像信号ＶＩから外部閃光の有無をフィールド単位で検出し、検出結果の情報を含む閃光検出信号ＦＤを生成するする閃光検出部１０２と、閃光検出部１０２により生成された閃光検出信号ＦＤに従って外部閃光の影響を受けた撮像部１０１の出力映像信号ＶＩを補正する閃光補正部１０３と、を備える。
【００２８】
撮像部１０１は、例えば、ＣＭＯＳ型撮像素子（ＣＭＯＳ型イメージセンサ等）を含み、被写体からの光を集光し、集光した光を光電変換することにより映像信号ＶＩとして取得する。撮像部１０１は、取得した映像信号ＶＩを閃光検出部１０２および閃光補正部１０３に出力する。
閃光検出部１０２は、撮像部１０１から出力される映像信号ＶＩを入力とし、映像信号ＶＩから外部閃光の有無をフィールド単位で検出する。具体的には、映像信号ＶＩにより形成されるフィールドにおいて、フィールドの開始時に相当する映像信号ＶＩが外部閃光による影響を受けていると判定した場合（フィールドの１ライン目の映像信号ＶＩが外部閃光による影響を受けていると判定した場合）、当該フィールドフィールド期間において、「１」になり、他の場合は、「０」になる閃光検出信号ＦＤを生成する。そして、閃光検出部１０２は、生成した閃光検出信号ＦＤを閃光補正部１０３に出力する。
【００２９】
閃光補正部１０３は、撮像部１０１から出力される映像信号ＶＩと、閃光検出部１０２から出力される閃光検出信号ＦＤと、を入力として、閃光検出信号ＦＤに基づいて、映像信号ＶＩに対して、閃光補正処理を行い、閃光補正処理後の映像信号ＶＯを出力する。
図２に示すように、閃光補正部１０３は、第１選択部２０１と、出力選択部２０２と、遅延部２０３と、加算部２０４と、を有する。
第１選択部２０１は、撮像部１０１から出力される映像信号ＶＩと、加算部２０４から出力される映像信号ＶＭと、閃光検出部１０２から出力される閃光検出信号ＦＤと、を入力とし、閃光検出信号ＦＤに基づいて、映像信号ＶＩまたは映像信号ＶＭのいずれかを選択し、映像信号ＶＷとして、遅延部２０３に出力する。
具体的には、第１選択部２０１は、以下のようにして、選択処理を行い、映像信号ＶＷを出力する。
（１）閃光検出信号ＦＤが「０」のときは、撮像部１０１から出力される映像信号ＶＩを選択し、映像信号ＶＷとして、遅延部２０３に出力する。
（２）閃光検出信号ＦＤが「１」のときは、加算部２０４から出力される映像信号ＶＭを選択し、映像信号ＶＷとして、遅延部２０３に出力する。
【００３０】
遅延部２０３は、第１選択部２０１から出力される映像信号ＶＷを入力とし、映像信号ＶＷを１フィールド遅延（１フィールド期間に相当する時間だけ遅延）させた映像信号を、映像信号ＶＲとして、加算部２０４および出力選択部２０２に出力する。
加算部２０４は、撮像部１０１から出力される映像信号ＶＩと、遅延部２０３から出力される映像信号ＶＲと、を入力とし、映像信号ＶＩと映像信号ＶＲとを加算した映像信号ＶＭを生成する。そして、加算部２０４は、映像信号ＶＭを出力選択部２０２に出力する。
出力選択部２０２は、遅延部２０３から出力される映像信号ＶＲと、加算部２０４から出力される映像信号ＶＭと、閃光検出部１０２から出力される閃光検出信号ＦＤと、を入力とし、閃光検出信号ＦＤに基づいて、映像信号ＶＲまたは映像信号ＶＭのいずれかを選択し、映像信号ＶＯとして、出力する。
【００３１】
具体的には、出力選択部２０２は、以下のようにして、選択処理を行い、映像信号ＶＯを出力する。
（１）閃光検出信号ＦＤが「０」のときは、遅延部２０３から出力される映像信号ＶＲを選択し、映像信号ＶＯとして、出力する。
（２）閃光検出信号ＦＤが「１」のときは、加算部２０４から出力される映像信号ＶＭを選択し、映像信号ＶＯとして、出力する。
＜１．２：撮像装置の動作＞
以上のように構成された撮像装置１について、その動作を、図３を併用し説明する。
図３は、図１７で示すタイミングで閃光が、撮像装置１に入射した場合の映像信号ＶＩ、ＶＲ、ＶＭ、ＶＯ、ＶＷ、および、閃光検出信号ＦＤの関係を、時間軸を合わせて示す図である。図３では、映像信号ＶＩ、ＶＲ、ＶＭ、ＶＯ、およびＶＷ、のそれぞれにより形成される画像（映像）における閃光の影響の様子を模式的に示している。
【００３２】
なお、図３中のイタリック文字（太字）の番号は、入力映像（信号）のフィールドの番号を示している（以下、同様）。
まず、撮像部１０１では、撮像部１０１に含まれるレンズを通して、ＣＭＯＳ型撮像素子に入った光学像（被写体からの光）が電気信号に変換される。その電気信号に対して、Ａ／Ｄ変換を行い、さらに、ホワイトバランスなどの処理が行うことで生成（取得）された信号は、映像信号ＶＩとして、撮像部１０１から閃光検出部１０２および閃光補正部１０３に出力される。
そして、この映像（映像信号ＶＩにより形成される映像）に対して、図１７に示すようなタイミングで閃光が入ると、図３に示したＶＩのような映像（フィールド画像）になる。すなわち、閃光が入ったとき、「画面２」（フィールド２）（以下、「フィールドＮ」（Ｎ：整数）のことを「画面Ｎ」ということがある。）の上部は、既に映像信号として出力された後なので（「画面２」の上部に相当する部分の映像（画像）を形成する映像信号を生成するための蓄積電荷（撮像部１０１のＣＭＯＳ型撮像素子の画素に蓄積される電荷）は、（閃光の前に）既に、撮像部１０１のＣＭＯＳ型撮像素子から読み出されているので）、閃光の影響を受けておらず、通常の映像となる。一方、「画面２」の下部は、閃光により明るくなって、図３のＶＩの「画面２」（フィールド２）に示すような映像になる。これは、「画面２」の下部に相当する部分の映像（画像）を形成する映像信号を生成するための蓄積電荷（撮像部１０１のＣＭＯＳ型撮像素子の画素に蓄積される電荷）が、閃光があった後に、撮像部１０１のＣＭＯＳ型撮像素子から読み出されるからである。そして、「画面３」（フィールド３）は、閃光が入っている間に画面の上部の映像が生成されるので（「画面３」の上部に相当する部分の映像（画像）を形成する映像信号を生成するための蓄積電荷（撮像部１０１のＣＭＯＳ型撮像素子の画素に蓄積される電荷）は、閃光があった後に、撮像部１０１のＣＭＯＳ型撮像素子から読み出されるので）、「画面３」の画面上部は、明るい映像になり、「画面３」の画面下部の映像が生成されるときには、閃光がなくなっているので、「画面３」の画面下部は、閃光の影響を受けることなく通常の映像となる。
【００３３】
この映像信号ＶＩに基づいて、閃光検出部１０２により、図３に示すような閃光検出信号ＦＤが生成される。つまり、閃光検出部１０２は、映像信号ＶＩが形成するフィールド画像の最初に（最初のラインに）外部閃光が入っている（外部閃光の影響を受けている）と判断した場合、当該フィールド期間において、閃光検出信号ＦＤの信号値を「１」（Ｈ）にして出力する。すなわち、図３に示す場合、閃光検出部１０２は、映像信号ＶＩが「画面３」のときに、閃光検出信号ＦＤの信号値は「１」（Ｈ）にして出力し、それ以外のフィールドでは、閃光検出信号ＦＤの信号値は「０」（Ｌ）にして出力する。なお、外部閃光の検出方法自体は、本発明の主とするところではないので、詳細な説明は省略する。
（１．２．１：閃光補正部１０３の動作）
次に、図３の「画面１」から「画面５」までの映像信号ＶＩが、閃光補正部１０３に入力されたときの動作について、説明する。なお、ここで、「画面１」の前のフィールドの映像を「画面０」とし、「画面０」では外部閃光の影響はないものとする。
（「画面１」のとき）：
映像信号ＶＩが「画面１」のときは、外部閃光はなく（外部閃光の影響はなく）閃光検出信号ＦＤの値が「０」なので、第１選択部２０１では、映像信号ＶＩが選択される。したがって、図３に示すように、映像信号ＶＷは、「画面１」の映像信号となり、遅延部２０３に出力される。
【００３４】
遅延部２０３では、１フィールド前のフィールドの映像信号が出力されるので、図３に示すように、映像信号ＶＲは、「画面０」の信号となる。
そして、出力選択部２０２では、閃光検出信号ＦＤの値が「０」なので、映像信号ＶＲが選択される。したがって、図３に示すように、出力選択部２０２の出力信号である映像信号ＶＯは、「画面０」の映像信号になる。
（「画面２」のとき）：
次のフィールドでは、「画面２」、すなわち、図３に示すように画面下部が閃光の影響で明るくなった映像が入力される。このとき、閃光検出信号ＦＤの値は、「０」なので、「画面１」が入力されるときと同じ動作になり、図３に示すように、映像信号ＶＲは、「画面１」の映像信号となり、出力選択部２０２の出力であり、閃光補正部１０３の出力でもある映像信号ＶＯは、「画面１」の映像信号となり、１フィールド遅延させるために、遅延部２０３に入力される映像信号ＶＷは、「画面２」の映像信号となる。
（「画面３」のとき）：
さらに、次のフィールドでは、「画面３」、すなわち、図３に示すように画面上部が閃光の影響で明るくなった映像が入力される。このとき、閃光検出信号ＦＤの値は、「１」なので、「画面１」が入力されるときと異なる動作になる。
【００３５】
遅延部２０３では、前のフィールドで、１フィールド遅延させるために、遅延部２０３に入力された「画面２」の映像信号が、１フィールド遅延されて映像信号ＶＲとして出力される。この映像信号ＶＲである「画面２」の映像信号と映像信号ＶＩである「画面３」の映像信号とが加算部２０４で加算され、映像信号ＶＭが生成される。そして、閃光検出信号ＦＤの値が「１」であるので、「画面２」の映像信号と「画面３」の映像信号とを加算して生成された映像信号ＶＭは、出力選択部２０２により選択され、閃光補正部１０３としての出力信号ＶＯとなる。また、閃光検出信号ＦＤの値が「１」であるので、第１選択部２０１では、「画面２」の映像信号と「画面３」の映像信号とを加算して生成された映像信号ＶＭが選択される。つまり、１フィールド遅延させるために、遅延部２０３に入力される映像信号ＶＷは、映像信号ＶＭとなる。
（「画面４」のとき）：
さらに次のフィールドでは、図３に示すような「画面４」の映像信号が入力される。このとき、閃光検出信号ＦＤの値は、「０」なので、「画面１」が入力されるときと同じ動作になる。従って、図３に示すように、映像信号ＶＲは、前のフィールドで映像信号ＶＷであった「画面２」の映像信号と「画面３」の映像信号とを加算した信号となる。そして、出力選択部２０２の出力であり、閃光補正部１０３の出力でもある映像信号ＶＯは、閃光検出信号ＦＤの値が「０」なので、映像信号ＶＲである「画面２」の映像信号と「画面３」の映像信号とを加算した信号を選択し、映像信号ＶＯとする。また、遅延部２０３へ１フィールド遅延させるために出力される映像信号ＶＷは、入力された映像信号ＶＩである「画面４」の映像信号になる。
（「画面５」のとき）：
さらに次も同様に、映像信号ＶＩとして、「画面５」の信号が入力されると、図３に示すように、映像信号ＶＲは、「画面４」の映像信号になり、映像信号ＶＯは、「画面４」の映像信号になり、そして、映像信号ＶＷは、「画面５」の映像信号になる。以下同様の動作が毎フィールド繰り返されていく。
【００３６】
なお、加算部２０４にて、２つの映像信号を加算した結果、加算後の信号値が大きくなりすぎたときは、当該加算後の信号値を、入力映像信号が表現できる最大値に置き換えても良い。例えば、入力映像信号が１０ビットのデジタル信号であれば、加算結果（加算後の信号値）が１０２４〜２０４６になると、これを１０２３に置き換えるようにしても良い。
以上の動作により、撮像装置１では、図３の映像信号ＶＩのように「画面２」で画面下部が、「画面３」で画面上部が、それぞれ、閃光の影響で明るい映像になっていた映像信号を、図３の出力映像信号ＶＯのように、映像信号ＶＩの「画面２」および「画面３」に相当するところで、画面全部が明るい映像（「画面２」の映像信号と「画面３」の映像信号とを加算した映像信号による映像）になり、実際の被写体のように全部が均一に明るくなる映像を生成することができる。また、撮像装置１では、閃光の影響のある映像を使用することで、閃光が入ったかどうかも映像信号に残るようになる。
【００３７】
なお、撮像部１０１で生成される映像信号が、インターレースの形式のときには、図２の加算部２０４で映像信号を加算するとき映像信号ＶＩのほうを０．５ライン分垂直方向にシフトして映像信号ＶＲと垂直の画面の位置が同じになるように補正してから加算する。このとき、上記で説明した場合とは遅延量が変わることになるが、遅延部２０３から映像信号ＶＲを読み出すタイミングを変えることで調整すれば良い。
また、本実施形態では、撮像装置１において、閃光が入ったかどうかを判断するための情報として映像信号ＶＩを使用したが、これに限定されることはなく、例えば、閃光そのものを検出する専用のセンサーを撮像装置１に設け、撮像装置１では、そのセンサーから得られる信号で閃光検出信号ＦＤを生成するようにしても良い。
≪第１変形例≫
次に、本実施形態の第１変形例について、説明する。
【００３８】
本変形例の撮像装置では、撮像装置１において、閃光補正部１０３を、図４に示す閃光補正部１０３Ａに置換した構成となっている。閃光補正部１０３Ａは、閃光補正部１０３における加算部２０４（図２参照）を、図４に示すように加算平均部４０４に置換した構成となっており、それ以外については、閃光補正部１０３Ａは、閃光補正部１０３と同様である。
閃光補正部１０３を、図４に示す閃光補正部１０３Ａに置換した構成の撮像装置では、図３で、「画面２」及び「画面３」のところで、「画面２」の映像信号と「画面３」の映像信号とを加算した映像信号による画面（図３中では、「２＋３」と表記）に置き換わっていた信号が、図５に示すように、「画面２」の映像信号と「画面３」と映像信号とを加算平均した映像信号による画面（図５中では、「（２＋３）／２」と表記）になる。これにより、この撮像装置では、加算したときと同様に、画面全部が均一に明るくなる映像を得ることができ、かつ、加算したときと違い、閃光の影響を受けていない部分の映像の情報が、閃光が強すぎることにより何が写っているかわからなくなることがなくなる（閃光が強すぎることによる影響を抑制することができる）。その代わり、この撮像装置では、閃光により明るくなる効果が抑えられることになる。そこで、この撮像装置において、加算して取得した映像信号を半分にする加算平均処理ではなく、加算して取得した映像信号に４分の３をかけることで加算平均処理を行うようにしてもよい。これにより、この撮像装置では、閃光により明るくなる効果を残しつつ、閃光が強すぎることによる影響を効果的に抑制することができる。なお、上記において、加算して取得した映像信号にかける数値は、「３／４」以外の数値であってもよいことは言うまでもない。
【００３９】
≪第２変形例≫
次に、本実施形態の第２変形例について、説明する。
本変形例の撮像装置では、撮像装置１において、閃光補正部１０３を、図６に示す閃光補正部１０３Ｂに置換した構成となっている。なお、以下では、上記と同様の部分については、同一符号を付し、詳細な説明を省略する。
閃光補正部１０３Ｂは、図６に示すように、第１選択部２０１と、加算部２０４と、遅延部２０３Ｂと、を備える。
第１選択部２０１は、映像信号ＶＩと、加算部２０４から出力される映像信号ＶＭと、閃光検出信号ＦＤとを入力とする。第１選択部２０１は、閃光検出信号ＦＤに基づいて、映像信号ＶＩおよび映像信号ＶＭのいずれか一方を選択し、選択した映像信号を映像信号ＶＷとして、遅延部２０３Ｂに出力する。
【００４０】
加算部２０４は、映像信号ＶＩと、遅延部２０３Ｂから出力される映像信号ＶＲとを入力とする。加算部２０４は、映像信号ＶＩと映像信号ＶＲとを加算した映像信号ＶＭを、第１選択部２０１に出力する。
遅延部２０３Ｂは、閃光検出信号ＦＤと、第１選択部２０１から出力される映像信号ＶＷとを入力とする。遅延部２０３Ｂは、映像信号ＶＷを１フィールド遅延（１フィールド期間に相当する時間だけ遅延）させた映像信号を、映像信号ＶＲとして、加算部２０４に出力する。また、遅延部２０３Ｂは、閃光検出信号ＦＤに基づいて、映像信号ＶＯを出力する。すなわち、
（１）閃光検出信号ＦＤが「０」のとき、遅延部２０３Ｂは、映像信号ＶＲと同じ映像信号を、映像信号ＶＯとして出力する。
（２）閃光検出信号ＦＤが「１」のとき、遅延部２０３Ｂは、１フィールド前の映像信号ＶＲと同じ映像信号を、映像信号ＶＯとして出力する。つまり、現在処理中のフィールドがＮ（Ｎは自然数）番目のフィールドである場合、遅延部２０３Ｂは、（Ｎ−１）番目のフィールドの映像信号ＶＲを出力する。
【００４１】
図７は、図１７で示すタイミングで閃光が、本変形例の撮像装置に入射した場合の映像信号ＶＩ、ＶＲ、ＶＭ、ＶＯ、ＶＷ、および、閃光検出信号ＦＤの関係を、時間軸を合わせて示す図である。
図７に示すように、本変形例の撮像装置では、図３の場合と比較して、以下の点が異なる。
すなわち、図３の場合、「画面３」において、映像信号ＶＯは、「画面２」の映像信号と「画面３」の映像信号とを加算した映像信号（図３中では、「２＋３」と表記）である。
一方、図７の場合、「画面３」において、映像信号ＶＯは、「画面１」の映像信号（図７中では、「１」と表記）である。
【００４２】
つまり、本変形例の撮像装置では、「画面３」において、閃光検出信号ＦＤが「１」であるので、映像信号ＶＯとして、１フィールド前の映像信号（図７中では、「１」と表記）（「画面２」における映像信号Ｖ０（ＶＲ））が出力されることになる。
≪第３変形例≫
次に、本実施形態の第３変形例について、説明する。
本変形例の撮像装置では、撮像装置１において、閃光補正部１０３を、図８に示す閃光補正部１０３Ｃに置換した構成となっている。なお、以下では、上記と同様の部分については、同一符号を付し、詳細な説明を省略する。
閃光補正部１０３Ｃは、図８に示すように、図２に示す閃光補正部１０３から、出力選択部２０２を削除し、遅延部２０３を遅延部２０３Ｃに置換した構成となっている。それ以外については、閃光補正部１０３Ｃは、閃光補正部１０３と同様である。
【００４３】
遅延部２０３Ｃは、閃光検出信号ＦＤと、第１選択部２０１から出力される映像信号ＶＷとを入力とする。遅延部２０３Ｃは、映像信号ＶＷを１フィールド遅延（１フィールド期間に相当する時間だけ遅延）させた映像信号を、映像信号ＶＲとして、加算平均部４０４に出力する。また、遅延部２０３Ｃは、閃光検出信号ＦＤに基づいて、映像信号ＶＯを出力する。すなわち、
（１）閃光検出信号ＦＤが「０」のとき、遅延部２０３Ｃは、映像信号ＶＲと同じ映像信号を、映像信号ＶＯとして出力する。
（２）閃光検出信号ＦＤが「１」のとき、遅延部２０３Ｃは、１フィールド前の映像信号ＶＲと同じ映像信号を、映像信号ＶＯとして出力する。つまり、現在処理中のフィールドがＮ（Ｎは自然数）番目のフィールドである場合、遅延部２０３Ｂは、（Ｎ−１）番目のフィールドの映像信号ＶＲを出力する。
【００４４】
図９は、図１７で示すタイミングで閃光が、本変形例の撮像装置に入射した場合の映像信号ＶＩ、ＶＲ、ＶＭ、ＶＯ、ＶＷ、および、閃光検出信号ＦＤの関係を、時間軸を合わせて示す図である。
図９に示すように、本変形例の撮像装置では、図５の場合と比較して、以下の点が異なる。
すなわち、図５の場合、「画面３」において、映像信号ＶＯは、「画面２」の映像信号と「画面３」の映像信号とを加算平均した映像信号（図３中では、「（２＋３）／２」と表記）である。
一方、図９の場合、「画面３」において、映像信号ＶＯは、「画面１」の映像信号（図９中では、「１」と表記）である。
【００４５】
つまり、本変形例の撮像装置では、「画面３」において、閃光検出信号ＦＤが「１」であるので、映像信号ＶＯとして、１フィールド前の映像信号（図９中では、「１」と表記）（「画面２」における映像信号Ｖ０（ＶＲ））が出力されることになる。
［第２実施形態］
本実施形態は、第１実施形態と信号の流れはほぼ同じで、主に、閃光補正部１０３の構成と動作とが異なるので、その異なる部分を中心に、以下説明する。
＜２．１：撮像装置の構成＞
図１０に示すように、本実施形態の撮像装置２は、第１実施形態の撮像装置１において、閃光検出部１０２を閃光検出部１０２Ａに置換し、閃光補正部１０３を閃光補正部１０３Ｂに置換したものであり、それ以外については、本実施形態の撮像装置は、第１実施形態の撮像装置１と同様である。
【００４６】
なお、本実施形態において、上記実施形態と同様の部分については、同一の符号を付し、詳細な説明を省略する。
閃光検出部１０２Ａは、撮像部１０１から出力される映像信号ＶＩを入力とし、映像信号ＶＩから閃光検出信号ＦＤを生成し、閃光補正部１０３Ｂに出力する。なお、閃光検出信号ＦＤは、上位ビットをＦＤＯ、下位ビットをＦＤＷで構成される２ビットの信号であるものとする。
具体的には、閃光検出部１０２Ａは、以下のようにして、閃光検出信号ＦＤに生成し、出力する。
（１）閃光検出部１０２Ａが、各フィールド画像の画面において、画面の上部だけ閃光がある（画面上部が閃光の影響を受けている）と判断したとき、閃光検出部１０２Ａは、閃光検出信号の上位ビットＦＤＯの値を「１」にし、それ以外のときは、閃光検出信号の上位ビットＦＤＯの値を「０」にして、閃光補正部１０３Ｂに出力する。
（２）閃光検出部１０２Ａが、１フィールド前のフィールド画像の画面において、画面の下部にだけ閃光がある（画面下部が閃光の影響を受けている）と判断したとき、閃光検出部１０２Ａは、閃光検出信号の下位ビットＦＤＯの値を「１」にし、それ以外のときは、閃光検出信号の下位ビットＦＤＯの値を「０」にして、閃光補正部１０３Ｂに出力する。
【００４７】
閃光補正部１０３Ｂは、図１１に示すように、第１選択部６０１と、出力選択部６０２と、遅延部２０３と、を備える。
第１選択部６０１は、閃光検出信号の下位ビットＦＤＷが「０」のときは、撮像部１０１から出力される映像信号ＶＩを選択し、閃光検出信号の下位ビットＦＤＷが「１」のときは、遅延部２０３から出力される映像信号ＶＲを選択し、映像信号ＶＷを生成し、遅延部２０３に出力する。
遅延部２０３は、第１選択部６０１から出力される映像信号ＶＷを１フィールド遅延させて映像信号ＶＲを生成し、第１選択部６０１および出力選択部６０２に出力する。
出力選択部６０２は、閃光検出信号の上位ビットＦＤＯが「０」のときは、遅延部２０３から出力される映像信号ＶＲを選択し、閃光検出信号の上位ビットＦＤＯが「１」のときは、撮像部１０１から出力される映像信号ＶＩを選択し、映像信号ＶＯとして出力する。
【００４８】
＜２．２：撮像装置の動作＞
以上のように構成された撮像装置２について、その動作を、図１３を併用し説明する。また、図１３の「画面１」の前のフィールドの映像を「画面０」とし、「画面０」では、外部閃光の影響はないものとする。
撮像部１０１から出力された映像信号ＶＩは、図１３に示すように、「画面２」では、画面の下部が閃光の影響を受けて明るくなっており、「画面３」では、画面の上部が閃光の影響を受けて明るくなっている。
閃光検出部１０２Ａでは、図１１に示すように、閃光の影響を受けている「画面２」と「画面３」の映像信号に対して、画面の上部だけ閃光があると判断されるとき「１」になる閃光検出信号ＦＤＯ（閃光検出信号ＦＤの上位１ビットによる信号）と、前のフィールドで画面の下部だけ閃光があると判断されるときだけ「１」になる閃光検出信号ＦＤＷ（閃光検出信号ＦＤの下位１ビットによる信号）を生成する。
【００４９】
図１１に示す場合、閃光検出部１０２Ａは、「画面２」の最後（「画面２」の最後のラインを形成する映像信号）に、まだ、閃光が入っている（閃光の影響を受けている）と判断し、次の垂直ブランキング期間になったら、閃光検出信号ＦＤＯの値を、「１」にして出力する。そして、閃光検出部１０２Ａは、映像信号ＶＩを監視しつづけて、閃光による明るさの増加（閃光による影響）がなくなったと判断できる「画面３」の中央部分で、閃光検出信号ＦＤＯの値を、「０」にする。
また、閃光検出部１０２Ａは、閃光が入り始めたラインを記憶しておき、次のフィールドで記憶しておいたラインになったときに、閃光検出信号ＦＤＷの値を「１」にして、さらに、次の垂直ブランキング期間が来たときに、閃光検出信号ＦＤＷの値を「０」にする。
【００５０】
（２．２．１：閃光補正部１０３Ｂの動作）
次に、図１３の「画面１」から「画面５」までの映像信号ＶＩが閃光補正部１０３Ｂに入力されたときの動作を説明する。
（「画面１」のとき）：
閃光補正部１０３Ｂに入力された映像信号ＶＩが「画面１」のときは、閃光検出信号ＦＤＷの値が「０」なので、第１選択部６０１では、映像信号ＶＩが選択され、映像信号ＶＷは、「画面１」の映像信号となり、遅延部２０３に出力される。
遅延部２０３では、１フィールド遅延した映像信号ＶＲを出力するので、１フィールド前のフィールドの映像信号である「画面０」の信号を、第１選択部６０１および出力選択部６０２に出力する。
【００５１】
出力選択部６０２では、閃光検出信号ＦＤＯの値が「０」なので遅延部２０３から出力される映像信号ＶＲが選択されるので、図３に示すように、出力選択部６０２の出力信号である映像信号ＶＯは、「画面０」の映像信号になる。
（「画面２」のとき）：
次のフィールドでは、「画面２」、すなわち、図１３に示すように、画面下半分が閃光の影響で明るくなった映像が入力される。このとき、閃光検出信号ＦＤＷとＦＤＯとは、ともに「０」なので、「画面１」が入力されるときと同じ動作になり、図１３に示すように、映像信号ＶＲは、「画面１」の映像信号となり、出力選択部６０２の出力であり閃光補正部１０３Ｂの出力でもある映像信号ＶＯは、「画面１」の映像信号となり、遅延部２０３へ１フィールド遅延させるために入力される映像信号ＶＷは、「画面２」の映像信号になる。
（「画面３」のとき）：
さらに、次のフィールドでは、「画面３」、すなわち、図１３に示すように、画面上部が閃光の影響で明るくなった映像が入力される。このとき、閃光検出信号ＦＤＷの値が「１」になる期間と、閃光検出信号ＦＤＯの値が「１」になる期間とがあるので、「画面１」が入力されるときと異なる動作になる。
【００５２】
遅延部２０３では、前のフィールドで、１フィールド遅延させるために、遅延部２０３に入力された「画面２」の映像信号が、１フィールド遅延されて映像信号ＶＲとして出力される。
そして、出力選択部６０２では、閃光検出信号ＦＤＯの値が「１」のときは、映像信号ＶＩである「画面３」の映像信号が選択され、閃光検出信号ＦＤＯの値が「０」のときは、映像信号ＶＲである「画面２」の映像信号が選択される。ここで、図１３に示すように、閃光検出信号ＶＤＯの値が「１」のとき、映像信号ＶＩである「画面３」の映像信号は、閃光の影響を受けて明るい映像になっており、また、閃光検出信号ＶＤＯの値が「０」のとき、映像信号ＶＲである「画面２」の映像信号が閃光の影響を受けて明るくなっているので、図１３の映像信号ＶＩが「画面３」のときの、映像信号ＶＯに示すように、画面上部が「画面３」、下部が「画面２」となり、共に閃光の影響を受けて明るくなっているので、画面全部が明るい映像になる。すなわち、出力選択部６０２の出力、すなわち閃光補正部１０３Ｂの出力の映像信号は、画面全部が明るい映像信号になる。
（「画面４」のとき）：
さらに次のフィールドでは、図１３に示すように、閃光の影響を受けていない「画面４」の映像信号が入力される。このとき、閃光検出信号ＦＤＷ及びＦＤＯの値は、「０」なので、「画面１」が入力されるときと同じ動作になる。従って、図１３に示すように、映像信号ＶＲは、前のフィールドで映像信号ＶＷであった「画面２」と「画面３」を組み合わせた画面全体が明るい映像信号になり、その映像信号が、出力選択部６０２にて選択され、閃光補正部１０３Ｂの出力でもある映像信号ＶＯとなる。また、遅延部２０３へ１フィールド遅延させるために入力される映像信号ＶＷは、入力された映像信号ＶＩである「画面４」の映像信号になる。
（「画面５」のとき）：
さらに次のフィールドでも同様に、映像信号ＶＩとして、「画面５」の信号が入力されると、図１３に示すように、映像信号ＶＲは、「画面４」の映像信号になり、映像信号ＶＯは、「画面４」の映像信号になり、そして、映像信号ＶＷは、「画面５」の映像信号になる。そして、以下同様の動作が毎フィールド繰り返されていく。
【００５３】
以上の動作により、本実施形態の撮像装置２では、図１３の映像信号ＶＩのように、画面下部が閃光の影響により明るい画面である「画面２」の映像信号と、画面上部が閃光の影響により明るい画面である「画面３」の映像信号と、を組み合わせることで、図３に示した映像信号ＶＯと同様に、「画面２」および「画面３」に相当するところで、画面全部が明るい映像になり、実際の被写体のように全部が均一に明るくなる映像を生成することができる。また、撮像装置２では、閃光の影響のある映像を使用することで、閃光が入ったかどうかも映像信号に残るようになる。そして、撮像装置２では、第１実施形態の撮像装置１に比べて、加算部がない分だけ回路規模が小さくなり、また、加算処理によるオーバーフローも生じない。
なお、撮像部１０１で生成される映像信号が、インターレースの形式のときには、図１１の出力選択部６０２で映像信号を選択するとき映像信号ＶＩのほうを０．５ライン分垂直方向にシフトして映像信号ＶＲと垂直の画面の位置が同じになるように補正してから選択する。このとき、上記で説明した場合とは、遅延量が変わることになるが、遅延部２０３から映像信号ＶＲを読み出すタイミングを変えることで調整すれば良い。
【００５４】
また、本実施形態では、撮像装置２において、閃光が入ったかどうかを判断するための情報として映像信号ＶＩを使用したが、これに限定されることはなく、例えば、閃光そのものを検出する専用のセンサーを撮像装置２に設け、そのセンサーから得られる信号で閃光検出信号ＦＤを生成するようにしても良い。
≪変形例≫
また、撮像装置２において、閃光補正部１０３Ｂを、図１２に示す閃光補正部１０３Ｃに置換してもよい。図１２に示すように、閃光補正部１０３Ｃは、閃光検出信号ＦＤＷを遅延部７０３の制御に加えて、第１選択部６０１を省略した構成となっている。
この撮像装置（本変形例の撮像装置）において、遅延部７０３では、ＦＤＷの値が「１」のとき、１フィールド遅延させるために入力される映像信号ＶＷを受け付けないようにして、前のフィールドの値を維持する。すなわち、遅延部７０３では、「画面３」の映像が入力されるフィールドにおいて、「画面３」の上部の映像信号は、１フィールド遅延すべき信号として受け付けられ（遅延部７０３に入力され）、１フィールド遅延されて、次のフィールドで出力される。一方、遅延部７０３では、「画面３」の下部の映像信号は無視され（遅延部７０３に入力されず）、その代わり、遅延部７０３は、前のフィールドで受け付けた「画面２」の下部の映像信号をそのまま維持し、次のフィールドで「画面２」の下部の映像信号を出力する。
【００５５】
これによって、この撮像装置（本変形例の撮像装置）では、図１１の構成と同じ映像信号ＶＲを得ることができる。この撮像装置の遅延部７０３を半導体メモリで実現するならば、遅延部７０３に対して、書き込みの許可を閃光検出信号ＦＤＷが「１」のときは与えないようにする。これにより、選択部（第１選択部６０１に相当。）が１つ減ることになる。
［第３実施形態］
本実施形態は、第１実施形態と信号の流れはほぼ同じで、主に、閃光補正部１０３の構成と動作が異なるので、その異なる部分を中心に、以下説明する。
＜３．１：撮像装置の構成＞
本実施形態の撮像装置は、第１実施形態の撮像装置１において、閃光補正部１０３を、図１４に示す閃光補正部１０３Ｄに置換したものである。
【００５６】
閃光補正部１０３Ｄにおいて、第１実施形態の閃光補正部１０３と相違する点は以下の通りである。
すなわち、閃光補正部１０３Ｄでは、図１４に示すように、
（１）加算部２０４の後に混合部９０５が追加されたこと、
（２）その混合部９０５に、遅延部９０３により、第１選択部２０１の出力信号を２フィールド遅延した信号ＶＲ２を入力するようにしたこと、
（３）遅延部９０３が、２フィールド遅延した信号ＶＲ２を生成できるようにしたこと、
である。
ここで、混合部９０５は、加算部２０４から出力される映像信号と、映像信号ＶＷを２フィールド遅延した映像信号ＶＲ２と、を７対１の比で混合する。
【００５７】
＜３．２：撮像装置の動作＞
以上のように構成された閃光補正部１０３Ｄを含む本実施形態の撮像装置について、その動作を、図１６を併用し説明する。また、図１６の「画面１」の前のフィールドの映像を「画面０」とし、「画面０」では、外部閃光の影響はないものとする。
撮像部１０１から出力された映像信号ＶＩは、図１３に示すように、「画面２」では、画面の下部が閃光の影響を受けて明るくなっており、「画面３」では、画面の上部が閃光の影響を受けて明るくなっている。この映像信号ＶＩが閃光補正部１０３Ｄに入力される。
（「画面１」、「画面２」、「画面５」のとき）：
「画面１」、「画面２」、「画面５」が入力されるときは、第１実施形態と同じく、図１６に示す通り、映像信号ＶＩを１フィールド遅延させた映像信号が、閃光補正部１０３Ｄの出力信号ＶＯになる。
（「画面３」のとき）：
「画面３」が入力されるとき、加算部２０４では、遅延部９０３から映像信号ＶＷを１フィールド遅延させた映像信号ＶＲ１である「画面２」の映像信号と、撮像部１０１から出力される映像信号ＶＩ、すなわち、「画面３」の映像信号が加算され、混合部９０５に出力される。そして、この「画面２」の映像信号と「画面３」の映像信号とが加算された映像信号は、混合部９０５にて、遅延部９０３から出力される映像信号ＶＷを２フィールド遅延した映像信号ＶＲ２、すなわち「画面１」の映像信号と、７対１の比で混合され、映像信号ＶＭが生成される。
【００５８】
すなわち、映像信号ＶＭは、
（（画面２）＋（画面３））×（７／８）＋（画面１）×（１／８）
により取得された信号値を有する信号として、閃光補正部１０３Ｄにより生成される。なお、上式において、「（画面Ｎ）」（Ｎ：整数）は、「画面Ｎ」の映像信号の信号値を示している。
そして、出力選択部２０２では、閃光検出信号ＦＤの値が「１」なので、この映像信号ＶＭを選択し、閃光補正部１０３Ｄの出力信号ＶＯとなる。よって、閃光補正部１０３Ｄの出力信号ＶＯは、「画面２」の映像信号および「画面３」の映像信号を加算した映像信号と、「画面１」の映像信号と、を７対１の比で混合した映像信号になる。
一方、この混合した映像信号ＶＭは、閃光検出信号ＦＤの値が「１」なので、第１選択部２０１で選択され、遅延部９０３に出力される。ここで、混合部で、７対１の比で混合する処理は、８分の７を乗じた信号と８分の１を乗じた信号を加算することである。なお、上記において混合比は、７対１の場合について説明したが、これに限定されず、他の混合比であってもよい。また、加算処理の代わりに、加算平均処理、重付平均処理等を用いるようにしてもよい。
（「画面４」のとき）：
次に、撮像部１０１から「画面４」の映像信号が入力されるときは、動作自体は、「画面１」の映像信号が入力されるときと同じだが、遅延部９０３で１フィールド遅延された映像信号ＶＲ１が、前のフィールドで「画面２」の映像信号、および「画面３」の映像信号を加算した映像信号と、「画面１」の映像信号と、を７対１の比で混合した映像信号になる点が異なる。
【００５９】
従って、出力選択部２０２の出力は、映像信号ＶＲ１になるので、閃光補正部１０３Ｄの出力信号ＶＯとしては、図１６に示すように、前のフィールドと同じく、「画面２」の映像信号および「画面３」の映像信号を加算した映像信号と、「画面１」の映像信号を７対１の比で混合した信号になる。
一方、第１選択部２０１では、閃光検出信号ＦＤの値が「０」なので、撮像部１０１から出力された映像信号である「画面４」の映像信号が選択され、映像信号ＶＷとして、遅延部９０３に出力される。
以上の動作により、本実施形態の撮像装置では、図１６の映像信号ＶＩのように、画面下部が閃光の影響により明るい画面である「画面２」の映像信号と、画面上部が閃光の影響により明るい画面である「画面３」の映像信号を、図１６の映像信号ＶＯのように、「画面２」および「画面３」に相当するところで、画面全部が明るい映像を得ることができる。また、本実施形態の撮像装置では、加算してオーバーフローしたところ（場合）でも、およそどのような映像かがわかる映像を得ることができる。また、本実施形態の撮像装置では、閃光の影響のある映像を使用するので（閃光の影響のある映像を完全に削除することなく、使用するので）、本実施形態の撮像装置から出力される映像信号により形成される映像において、閃光が入ったかどうかも分かる。
【００６０】
なお、撮像部１０１で生成される映像信号が、インターレースの形式のときには、図１４の加算部２０４で映像信号を加算するとき映像信号ＶＩのほうを０．５ライン分垂直方向にシフトして映像信号ＶＲ１と垂直の画面の位置が同じになるように補正してから選択する。このとき、上記で説明した場合とは、遅延量が変わることになるが、遅延部９０３から映像信号ＶＲ１を読み出すタイミングを変えることで調整すれば良い。
また、本実施形態の撮像装置では、閃光が入ったかどうかを判断するための情報として映像信号ＶＩを使用したが、これに限定されることはなく、例えば、閃光そのものを検出する専用のセンサーを本実施形態の撮像装置に設け、そのセンサーから得られる信号で閃光検出信号ＦＤを生成するようにしても良い。
≪変形例≫
また、本実施形態の撮像装置において、閃光補正部１０３Ｄを、図１５に示す閃光補正部１０３Ｅに置換してもよい。図１５に示すように、閃光補正部１０３Ｅは、閃光補正部１０３Ｄにおいて、遅延部９０３を、遅延部１００３に置換した構成となっている。つまり、遅延部１００３に、閃光検出信号ＦＤを入力するようにし、遅延部１００３が閃光検出信号ＦＤにより制御される構成とする。
【００６１】
そして、遅延部１００３は、閃光検出信号ＦＤの値が「１」のときだけ、映像信号ＶＲ２を出力する。このようにすることで、遅延部１００３による読み出し処理が止まった分だけ、撮像装置において、電力を削減することができる。
また、図１４、図１５の加算部２０４の処理を加算平均に置き換えても良い。これにより、閃光が当てられた被写体がどのようなものかが、より分かるようになる。但し、閃光の影響が少なくなるので、強い光が入ったという印象が小さくなる。
また、本実施形態では、「画面１」の映像を混合する場合について述べたが、「画面４」の映像を混合しても同様の効果を得ることができる。
また、本実施形態では、３つの画面（フィールド）を混合（上記では、「画面１」、「画面２」および「画面３」を混合）する場合について説明したが、これに限定されることはなく、さらに多くの画面（フィールド）を混合するようにしてもよい。
【００６２】
［他の実施形態］
なお、上記においては、フィールド単位での処理について説明したが、これに限定されることはなく、例えば、撮像装置が、フレーム単位での処理を行うものであってもよい。
また、上記実施形態で説明した撮像装置において、各ブロックは、ＬＳＩなどの半導体装置により個別に１チップ化されても良いし、一部又は全部を含むように１チップ化されても良い。
なお、ここでは、ＬＳＩとしたが、集積度の違いにより、ＩＣ、システムＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。
また、集積回路化の手法はＬＳＩに限るものではなく、専用回路又は汎用プロセサで実現してもよい。ＬＳＩ製造後に、プログラムすることが可能なＦＰＧＡ（Ｆｉｅｌｄ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）や、ＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサーを利用しても良い。
【００６３】
さらには、半導体技術の進歩又は派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適用等が可能性としてあり得る。
また、上記実施形態の各処理をハードウェアにより実現してもよいし、ソフトウェア（ＯＳ（オペレーティングシステム）、ミドルウェア、あるいは、所定のライブラリとともに実現される場合を含む。）により実現してもよい。さらに、ソフトウェアおよびハードウェアの混在処理により実現しても良い。なお、上記実施形態に係る撮像装置をハードウェアにより実現する場合、各処理を行うためのタイミング調整を行う必要があるのは言うまでもない。上記実施形態においては、説明便宜のため、実際のハードウェア設計で生じる各種信号のタイミング調整の詳細については省略している。
【００６４】
また、上記実施形態における処理方法の実行順序は、必ずしも、上記実施形態の記載に制限されるものではなく、発明の要旨を逸脱しない範囲で、実行順序を入れ替えることができるものである。
なお、本発明の具体的な構成は、前述の実施形態に限られるものではなく、発明の要旨を逸脱しない範囲で種々の変更および修正が可能である。
【産業上の利用可能性】
【００６５】
本実施形態にかかる撮像装置、撮像方法、プログラムおよび集積回路は、外部閃光による高輝度の横帯が撮像した映像（画像）に発生するのを防止し、かつ、動画として連続性を確保した画像（映像）を出力することが可能になるため、連続画像を撮像するデジタルカメラやビデオカメラなどに有用である。
【符号の説明】
【００６６】
１、２００  撮像装置
１０１  撮像部
１０２  閃光検出部
１０３、１０３Ａ、１０３Ｂ、１０３Ｃ、１０３Ｄ、１０３Ｅ  閃光補正部
２０１、６０１  第１選択部
２０２、６０２  出力選択部
２０３、７０３、９０３、１００３  遅延部
２０４  加算部
４０４  加算平均部
９０５  混合部
【図１】
2010100866.tif 000003
【図２】
2010100866.tif 000004
【図３】
2010100866.tif 000005
【図４】
2010100866.tif 000006
【図５】
2010100866.tif 000007
【図６】
2010100866.tif 000008
【図７】
2010100866.tif 000009
【図８】
2010100866.tif 000010
【図９】
2010100866.tif 000011
【図１０】
2010100866.tif 000012
【図１１】
2010100866.tif 000013
【図１２】
2010100866.tif 000014
【図１３】
2010100866.tif 000015
【図１４】
2010100866.tif 000016
【図１５】
2010100866.tif 000017
【図１６】
2010100866.tif 000018
【図１７】
2010100866.tif 000019
【手続補正書】
【提出日】平成23年8月30日(2011.8.30)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
撮像素子を有し、被写体から入射する光信号を電気信号に変換して映像信号を取得し、出力する撮像部と、
前記撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出する閃光検出部と、
前記閃光検出部により、前記撮像部により取得される単位画像を形成する映像信号が、閃光の影響を受けていると判断された場合、閃光の影響を受けていると判断された前記映像信号を用いて補正映像信号を生成し、閃光の影響を受けていると判断された前記映像信号の少なくとも一つを前記補正映像信号で置換する閃光補正部と、
を備える撮像装置。
【請求項２】
前記閃光検出部により、Ｎ番目（Ｎは整数）の単位画像を形成する映像信号であるＮ番目映像信号およびＮ＋１番目（Ｎは整数）の単位画像を形成する映像信号である（Ｎ＋１）番目映像信号が、閃光の影響を受けていると判断された場合、
前記閃光補正部は、前記Ｎ番目映像信号および前記（Ｎ＋１）番目映像信号を用いて補正映像信号を生成し、前記撮像部から出力される映像信号を、前記補正映像信号に置換することで、前記撮像部から出力される映像信号を補正する、
請求項１に記載の撮像装置。
【請求項３】
前記閃光補正部は、
複数の映像信号を入力することができ、入力される複数の映像信号から、前記閃光検出部の検出結果に基づいて、いずれか１つの映像信号を選択し、出力する第１選択部と、
前記第１選択部から出力される映像信号を、映像信号により形成される単位画像に相当する時間である単位画像時間だけ遅延させて出力する遅延部と、
前記撮像部から出力される映像信号および前記遅延部から出力される映像信号に対して加算処理を行い、前記処理を行った映像信号を出力する加算部と、
前記加算部から出力される映像信号または前記遅延部から出力される映像信号のどちらか一方を選択して出力する出力選択部と、
を有し、
前記第１選択部は、前記撮像部から出力される映像信号および前記加算部から出力される映像信号を入力とし、前記閃光検出部により、前記撮像部から出力される映像信号が、閃光の影響を受けていないと判断された場合、前記撮像部から出力される映像信号を選択して出力し、前記閃光検出部により、前記撮像部から出力される映像信号が、閃光の影響を受けていると判断された場合、前記加算部から出力される映像信号を選択して出力し、
前記出力選択部は、前記閃光検出部により、前記撮像部から出力される映像信号が、閃光の影響を受けていないと判断された場合、前記遅延部から出力される映像信号を選択して出力し、前記閃光検出部により、前記撮像部から出力される映像信号が、閃光の影響を受けていると判断された場合、前記加算部から出力される映像信号を選択して出力する、
請求項１または２に記載の撮像装置。
【請求項４】
前記加算部は、前記撮像部から出力される映像信号と、前記遅延部から出力される映像信号と、を加算することで、前記加算処理を行う、
請求項３に記載の撮像装置。
【請求項５】
前記加算部は、前記撮像部から出力される映像信号と、前記遅延部から出力される映像信号と、を加算して平均することで、前記加算処理を行う、
請求項３に記載の撮像装置。
【請求項６】
前記閃光検出部は、前記撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出し、映像信号により形成される単位画像に相当する時間である単位画像時間前の検出結果を保持し、
前記閃光補正部は、
複数の映像信号を入力することができ、入力される複数の映像信号から、前記閃光検出部の検出結果に基づいて、いずれか１つの映像信号を選択し、出力する第１選択部と、
前記第１選択部から出力される映像信号を、１単位画像時間だけ遅延させて出力する遅延部と、
前記撮像部から出力される映像信号または前記遅延部から出力される映像信号のどちらか一方を選択して出力する出力選択部と、
を有し、
前記第１選択部は、前記閃光検出部により、１単位画像前の映像信号により形成される単位画像の画面の下部に相当する映像信号が、閃光による影響を受けていると判断された場合、処理対象となっている単位画像において、前記画面の下部に相当する期間、前記遅延部から出力される映像信号を選択して出力し、それ以外の場合、前記撮像部から出力される映像信号を選択して出力し、
前記出力選択部は、前記閃光検出部により、映像信号により形成される単位画像の画面の上部に相当する映像信号が、閃光による影響を受けていると判断された場合、処理対象となっている単位画像において、前記画面の上部に相当する期間、前記撮像部から出力される映像信号を選択して出力し、それ以外の場合、前記遅延部から出力される映像信号を選択して出力する、
請求項１または２に記載の撮像装置。
【請求項７】
前記閃光検出部は、前記撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出し、映像信号により形成される単位画像に相当する時間である単位画像時間前の検出結果を保持し、
前記閃光補正部は、
前記閃光検出部により、１単位画像前の映像信号により形成される単位画像の画面の下部に相当する映像信号が、閃光による影響を受けていると判断された場合、処理対象となっている単位画像において、前記画面の下部に相当する期間、前記撮像部から出力される映像信号を受け付けずに、１単位画像時間前に、前記撮像部から受け付けた映像信号を、さらに１単位画像時間遅延させて出力し、それ以外の場合、前記撮像部からの映像信号を１単位画像時間遅延させて出力する遅延部と、
前記閃光検出部により、映像信号により形成される単位画像の画面の上部に相当する映像信号が、閃光による影響をうけていると判断された場合、処理対象となっている単位画像において、前記画面の上部に相当する期間、前記撮像部から出力される映像信号を選択して出力し、それ以外の場合、前記遅延部から出力される映像信号を選択して出力する選択部と、
を有する、
請求項１または２に記載の撮像装置。
【請求項８】
前記閃光検出部は、前記撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出し、映像信号により形成される単位画像に相当する時間である単位画像時間前の検出結果を保持し、
前記閃光補正部は、
複数の映像信号を入力することができ、入力される複数の映像信号から、前記閃光検出部の検出結果に基づいて、いずれか１つの映像信号を選択し、出力する第１選択部と、
前記第１選択部から出力される映像信号を１単位画像時間遅延させた第１遅延信号と、前記第１遅延信号を１単位画像時間遅延させた第２遅延信号と、を出力する遅延部と、
前記撮像部から出力される映像信号と前記遅延部から出力される前記第１遅延信号とに対して加算処理を行い、前記処理をおこなった映像信号を出力する加算部と、
前記加算部から出力される映像信号と前記第２遅延信号と、を所定の割合で混合し、出力する混合部と、
前記混合部から出力される映像信号または前記遅延部から出力される前記第１遅延信号のどちらか一方を選択して出力する出力選択部と、
を有し、
前記第１選択部は、前記撮像部から出力される映像信号および前記混合部から出力される映像信号を入力とし、前記閃光検出部により、前記撮像部から出力される映像信号が、閃光の影響を受けていないと判断された場合、前記撮像部から出力される映像信号を選択して出力し、前記閃光検出部により、前記撮像部から出力される映像信号が、閃光の影響を受けていると判断された場合、前記混合部から出力される映像信号を選択して出力し、
前記出力選択部は、前記閃光検出部により、前記撮像部から出力される映像信号が、閃光の影響を受けていないと判断された場合、前記第１遅延信号を選択して出力し、前記閃光検出部により、前記撮像部から出力される映像信号が、閃光の影響を受けていると判断された場合、前記混合部から出力される映像信号を選択して出力する、
請求項１または２に記載の撮像装置。
【請求項９】
前記遅延部は、前記閃光検出部により、前記撮像部から出力される映像信号が、閃光の影響を受けていると判断された場合のみ、前記第２遅延信号を出力する、
請求項８に記載の撮像装置。
【請求項１０】
前記単位画像は、フィールド画像であり、
前記単位画像時間は、フィールド時間である、
請求項１から９のいずれかに記載の撮像装置。
【請求項１１】
閃光検出部は、
画素単位、ライン単位、または、フィールド単位のいずれかで前記撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出し、
前記映像信号により形成される画像の画面において、閃光の影響を受けている画面領域に相当する期間だけ、閃光の影響があることを示す値を出力する第１閃光判断信号の生成と、
前記映像信号により形成される画像の画面の開始時において、閃光の影響を受けていると判断した場合、前記画面全部に相当する期間だけ、閃光の影響があることを示す値を出力する第２閃光判断信号の生成と、
前記映像信号により形成される画像の画面内の下部だけに閃光の影響が有ると判断した場合、前記画面全部に相当する期間だけ、閃光の影響があることを示す値を出力する第３閃光判断信号の生成と、
を行い、
前記第１閃光判断信号、前記第２閃光判断信号および前記第３閃光判断信号を、それぞれ、所定時間遅延させることができ、
前記第１閃光判断信号、前記第２閃光判断信号および前記第３閃光判断信号、並びに、第１閃光判断信号、前記第２閃光判断信号および前記第３閃光判断信号を所定時間遅延させた信号のうちのいずれか１つまたは複数の信号を出力することができる、
請求項１から１０のいずれかに記載の撮像装置。
【請求項１２】
前記加算部および前記選択部は、前記加算部及び前記選択部に入力される２つの映像信号の垂直位相が互いに０．５ラインずれているとき、どちらかの映像信号を０．５ライン分シフトして垂直方向の位相を合わせた上で信号を加算及び選択する、
請求項１から１１のいずれかに記載の撮像装置。
【請求項１３】
撮像素子を有し、被写体から入射する光信号を電気信号に変換して映像信号を取得し、出力する撮像部を備える撮像装置に用いられる撮像方法であって、
前記撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出する閃光検出ステップと、
前記閃光検出ステップにより、前記撮像部により取得される単位画像を形成する映像信号が、閃光の影響を受けていると判断された場合、閃光の影響を受けていると判断された前記映像信号を用いて補正映像信号を生成し、閃光の影響を受けていると判断された前記映像信号の少なくとも一つを前記補正映像信号で置換する閃光補正ステップと、
を備える撮像方法。
【請求項１４】
撮像素子を有し、被写体から入射する光信号を電気信号に変換して映像信号を取得し、出力する撮像部を備える撮像装置に用いられる撮像方法をコンピュータに実行させるプログラムであって、
前記撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出する閃光検出ステップと、
前記閃光検出ステップにより、前記撮像部により取得される単位画像を形成する映像信号が、閃光の影響を受けていると判断された場合、閃光の影響を受けていると判断された前記映像信号を用いて補正映像信号を生成し、閃光の影響を受けていると判断された前記映像信号の少なくとも一つを前記補正映像信号で置換する閃光補正ステップと、
を備える撮像方法をコンピュータに実行させるプログラム。
【請求項１５】
撮像素子を有し、被写体から入射する光信号を電気信号に変換して映像信号を取得し、出力する撮像部を備える撮像装置に用いられる集積回路であって、
前記撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出する閃光検出部と、
前記閃光検出部により、前記撮像部により取得される単位画像を形成する映像信号が、閃光の影響を受けていると判断された場合、閃光の影響を受けていると判断された前記映像信号を用いて補正映像信号を生成し、閃光の影響を受けていると判断された前記映像信号の少なくとも一つを前記補正映像信号で置換する閃光補正部と、
を備える集積回路。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、連続画像を撮像するデジタルカメラやビデオカメラなどの撮像装置に活用される技術であって、外部閃光による悪影響を緩和することができる撮像装置に関するものである。
【背景技術】
【０００２】
撮像装置（カメラ等）のフラッシュなどの外部閃光により、撮像装置により撮像（取得）される画像において、画面が急に明るくなりすぎることがある。このとき、ＣＣＤ型撮像素子（ＣＣＤ型イメージセンサ）を使用した撮像装置（カメラ等）では、外部閃光による影響は、撮像画像の画面でほぼ一律に現れる。これは、ＣＣＤ型撮像素子の画素ごとに設けられたフォトダイオードから電荷をバッファとなるＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）に送る動作が、全てのフォトダイオードで同時に行われるためである。
しかしながら、近年、撮像装置（カメラ等）に搭載されるようになった、ＣＭＯＳ型撮像素子（ＣＭＯＳ型イメージセンサ）は、ＣＭＯＳ型撮像素子の画素ごとに設けられたフォトダイオードの電荷（蓄積電荷）を画面（撮像素子面）の上から順にバッファとなる部分に送る。このため、ＣＭＯＳ型撮像素子では、画面（撮像素子面）の上部に配置されているフォトダイオードにより蓄積された電荷がバッファに転送される期間と、画面（撮像素子面）の下部に配置されているフォトダイオードにより蓄積された電荷がバッファに転送される期間と、にずれが生じる。
【０００３】
例えば、図１７（ａ）に示すような期間に、フラッシュによる強い光がＣＭＯＳ型撮像素子に入ったとすると、図１７（ａ）に示すように、このＣＭＯＳ型撮像素子により取得される撮像画像の画面の下の部分では、「フィールド２」が、画面の上の部分では、「フィールド３」が、それぞれ、フラッシュ光による影響を受ける。その結果、図１７（ｂ）に示す通り、「フィールド２」では、撮像画像の画面の下だけが明るくなり、「フィールド３」では、撮像画像の画面の上だけが明るくなってしまう。そして、フラッシュの光は強い光なので、このような状況下で、撮像された映像（画像）は、その明るくなる部分が白く飛ぶことになり（いわゆる「白飛び」現象が発生し）、白い帯状になる（画像（映像上）に白い帯状の高輝度部分が発生する）ことが多い。
こうした映像に対し、特許文献１に開示されている技術（従来の撮像装置）では、映像を記録するときに、閃光による帯状の映像が含まれるフィールドを記録せず、代わりに帯状の映像の影響を受けていない前後の映像を記録するようにしている。例えば、図１７（ｂ）に示す映像で言えば、従来の撮像装置では、「フィールド２」の映像（画像）と「フィールド３」の映像（画像）の代わりに、「フィールド１」の映像（画像）を記録する。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−３０６２２５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、従来の方法（従来の撮像装置）では、静止画を撮影する場合は良いが、動画を撮影する場合、閃光の影響により置き換えられた箇所で映像が不連続になりぎこちなさが生じる。また、従来の方法（従来の撮像装置）により撮像した映像では、閃光が入った映像が残らないため、閃光の有無もわからない（従来の撮像装置により、実際に閃光があったシーンを撮像する場合、現実には、閃光があったにも関わらず、撮像映像では、閃光が存在しないため、現実のシーンを忠実に再現していないことになる。）。
本発明は、上記従来の課題を解決するもので、外部閃光による明るい横帯のある不自然な画面（撮像画像）を無くし、閃光が入ったかどうかもわかるようにし、動画として連続性を確保した画像（映像）を出力する撮像装置、撮像方法、プログラムおよび集積回路を提供することを目的とする。
【課題を解決するための手段】
【０００６】
第１の発明は、撮像部と、閃光検出部と、閃光補正部と、を備える撮像装置である。
撮像部は、撮像素子を有し、被写体から入射する光信号を電気信号に変換して映像信号を取得し、出力する。閃光検出部は、撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出する。閃光補正部は、閃光検出部により、撮像部により取得される映像信号が、閃光の影響を受けていると判断された場合、閃光の影響を受けていると判断された映像信号を用いて、撮像部から出力される映像信号を補正する。
この撮像装置では、上記構成により、撮像部により取得される映像信号が、閃光の影響を受けていると判断された場合、閃光の影響を受けていると判断された映像信号を用いて、撮像部から出力される映像信号を補正する。これにより、この撮像装置では、外部閃光による明るい横帯のある不自然な画面を無くし、また、閃光が撮像装置に入ったかどうかも分かるようにしつつ、動画として連続性を確保した映像（画像）を得ることができる。
【０００７】
第２の発明は、第１の発明であって、閃光検出部により、Ｎ番目（Ｎは整数）の単位画像を形成する映像信号であるＮ番目映像信号およびＮ＋１番目（Ｎは整数）の単位画像を形成する映像信号である（Ｎ＋１）番目映像信号が、閃光の影響を受けていると判断された場合、閃光補正部は、Ｎ番目映像信号および（Ｎ＋１）番目映像信号を用いて補正映像信号を生成し、撮像部から出力される映像信号を、補正映像信号に置換することで、撮像部から出力される映像信号を補正する。
これにより、閃光の影響を受けているＮ番目映像信号および（Ｎ＋１）番目映像信号が形成する画面（N番目の画面および（Ｎ＋１）番目の画面）において、外部閃光による明るい横帯のある不自然な画面を無くし、また、閃光が撮像装置に入ったかどうかも分かるようにしつつ、動画として連続性を確保した映像（画像）を得ることができる。
【０００８】
なお、「単位画像」とは、映像信号（画像信号）により形成される画像であり、表示装置において、１画面を構成する。例えば、フィールド画像（映像）やフレーム画像（映像）が、「単位画像」に該当する。
なお、「置換」とは、一部を置換することを含む概念である。「置換」は、例えば、以下のような一部を置換する場合を含む。
すなわち、「単位画像」がフィールド画像である場合において、１番目のフィールド画像は、外部閃光の影響を受けておらず、２番目および３番目のフィールド画像が、外部閃光の影響を受けており、そして、４番目のフィールド画像は、外部閃光の影響を受けていない場合、
（１）２番目のフィールド画像を、外部閃光の影響を受けていない１番目のフィールド画像で置換し、
（２）３番目のフィールド画像を、外部閃光の影響を受けている２番目のフィールド画像および３番目のフィールド画像を加算することで生成した補正画像で置換する。
【０００９】
「置換」には、上記のように、外部閃光の影響を受けている２つのフィールド画像のうち、１つのフィールド画像のみを、外部閃光の影響を受けているフィールド画像を用いて生成した補正画像で置換することが含まれる。
第３の発明は、第１または第２の発明であって、閃光補正部は、第１選択部と、遅延部と、出力選択部と、を有する。
第１選択部は、複数の映像信号を入力することができ、入力される複数の映像信号から、閃光検出部の検出結果に基づいて、いずれか１つの映像信号を選択し、出力する。遅延部は、第１選択部から出力される映像信号を、映像信号により形成される単位画像に相当する時間である単位画像時間だけ遅延させて出力する。加算部は、撮像部から出力される映像信号および遅延部から出力される映像信号に対して加算処理を行い、処理を行った映像信号を出力する。出力選択部は、加算部から出力される映像信号または遅延部から出力される映像信号のどちらか一方を選択して出力する。
【００１０】
そして、第１選択部は、撮像部から出力される映像信号および加算部から出力される映像信号を入力とし、閃光検出部により、撮像部から出力される映像信号が、閃光の影響を受けていないと判断された場合、撮像部から出力される映像信号を選択して出力し、閃光検出部により、撮像部から出力される映像信号が、閃光の影響を受けていると判断された場合、加算部から出力される映像信号を選択して出力する。出力選択部は、閃光検出部により、撮像部から出力される映像信号が、閃光の影響を受けていないと判断された場合、遅延部から出力される映像信号を選択して出力し、閃光検出部により、撮像部から出力される映像信号が、閃光の影響を受けていると判断された場合、加算部から出力される映像信号を選択して出力する。
この撮像装置では、上記構成により、その画面の一部（例えば、画面上部または画面下部）において閃光の影響を受けて明るくなっている単位画像（例えば、フィールド画像やフレーム画像）を検出し、当該単位画像を、閃光の影響を受けて明るくなっている画像領域（例えば、画面上部または画面下部）を用いて補正することができる。その結果、この撮像装置により取得される映像において、閃光の影響が不自然に発生することを防止することができる。
【００１１】
これにより、この撮像装置では、外部閃光による明るい横帯のある不自然な画面を無くし、また、閃光が撮像装置に入ったかどうかも分かるようにしつつ、動画として連続性を確保した映像（画像）を得ることができる。
なお、「単位画像」とは、映像信号（画像信号）により形成される画像であり、表示装置において、１画面を構成する。例えば、フィールド画像（映像）やフレーム画像（映像）が、「単位画像」に該当する。
また、「単位画像時間」とは、映像信号により単位画像が形成されるのに要する時間であり、例えば、「単位画像」が「フィールド画像」である場合、「単位画像時間」は、「フィールド時間」であり、「単位画像」が「フレーム画像」である場合、「単位画像時間」は、「フレーム時間」である。
【００１２】
第４の発明は、第３の発明であって、加算部は、撮像部から出力される映像信号と、遅延部から出力される映像信号と、を加算することで、加算処理を行う。
第５の発明は、第３の発明であって、加算部は、撮像部から出力される映像信号と、遅延部から出力される映像信号と、を加算して平均することで、加算処理を行う。
これにより、この撮像装置により取得される映像信号の信号値が大きくなりすぎることを防ぐことができるので、閃光の影響に発生する、いわゆる「白飛び」現象等を効果的に抑制することができる。
なお、「加算して平均する」とは、２つの映像信号を加算し、平均をとること以外に、２つの映像信号に、それぞれ、「１／２」の重付をして加算することも含む。さらに、「１／２」以外の重付による加算をも含む。
【００１３】
第６の発明は、第１または第２の発明であって、閃光検出部は、撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出し、映像信号により形成される単位画像に相当する時間である単位画像時間前の検出結果を保持する。
そして、閃光補正部は、第１選択部と、遅延部と、出力選択部と、を有している。
第１選択部は、複数の映像信号を入力することができ、入力される複数の映像信号から、閃光検出部の検出結果に基づいて、いずれか１つの映像信号を選択し、出力する。遅延部は、第１選択部から出力される映像信号を、１単位画像時間だけ遅延させて出力する。出力選択部は、撮像部から出力される映像信号または遅延部から出力される映像信号のどちらか一方を選択して出力する。
そして、第１選択部は、閃光検出部により、１単位画像前の映像信号により形成される単位画像の画面の下部に相当する映像信号が、閃光による影響を受けていると判断された場合、処理対象となっている単位画像において、画面の下部に相当する期間、遅延部から出力される映像信号を選択して出力し、それ以外の場合、撮像部から出力される映像信号を選択して出力する。出力選択部は、閃光検出部により、映像信号により形成される単位画像の画面の上部に相当する映像信号が、閃光による影響を受けていると判断された場合、処理対象となっている単位画像において、画面の上部に相当する期間、撮像部から出力される映像信号を選択して出力し、それ以外の場合、遅延部から出力される映像信号を選択して出力する。
【００１４】
この撮像装置では、上記構成により、その画面の一部（例えば、画面上部または画面下部）において閃光の影響を受けて明るくなっている単位画像（例えば、フィールド画像やフレーム画像）を検出し、当該単位画像を、閃光の影響を受けて明るくなっている画像領域（例えば、画面上部または画面下部）を用いて補正することができる。その結果、この撮像装置により取得される映像において、閃光の影響が不自然に発生することを防止することができる。
これにより、この撮像装置では、外部閃光による明るい横帯のある不自然な画面を無くし、また、閃光が撮像装置に入ったかどうかも分かるようにしつつ、動画として連続性を確保した映像（画像）を得ることができる。また、閃光が入った画像の元の画像が第３の発明よりわかりやすくなる。
【００１５】
第７の発明は、第１または第２の発明であって、閃光検出部は、撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出し、映像信号により形成される単位画像に相当する時間である単位画像時間前の検出結果を保持する。
そして、閃光補正部は、遅延部と、選択部と、を有する。
遅延部は、閃光検出部により、１単位画像前の映像信号により形成される単位画像の画面の下部に相当する映像信号が、閃光による影響を受けていると判断された場合、処理対象となっている単位画像において、画面の下部に相当する期間、撮像部から出力される映像信号を受け付けずに、１単位画像時間前に、撮像部から受け付けた映像信号を、さらに１単位画像時間遅延させて出力し、それ以外の場合、撮像部からの映像信号を１単位画像時間遅延させて出力する。選択部は、閃光検出部により、映像信号により形成される単位画像の画面の上部に相当する映像信号が、閃光による影響をうけていると判断された場合、処理対象となっている単位画像において、画面の上部に相当する期間、撮像部から出力される映像信号を選択して出力し、それ以外の場合、遅延部から出力される映像信号を選択して出力する。
【００１６】
この撮像装置では、上記構成により、その画面の一部（例えば、画面上部または画面下部）において閃光の影響を受けて明るくなっている単位画像（例えば、フィールド画像やフレーム画像）を検出し、当該単位画像を、閃光の影響を受けて明るくなっている画像領域（例えば、画面上部または画面下部）を用いて補正することができる。その結果、この撮像装置により取得される映像において、閃光の影響が不自然に発生することを防止することができる。
これにより、この撮像装置では、外部閃光による明るい横帯のある不自然な画面を無くし、また、閃光が撮像装置に入ったかどうかも分かるようにしつつ、動画として連続性を確保した映像（画像）を得ることができる。第６の発明より回路規模が小さくなり、閃光の影響のある画像を処理するときの電力も小さくなる。
【００１７】
なお、「処理対象となっている単位画像において、前記画面の下部（上部）に相当する期間」とは、例えば、「単位画像」を「フィールド画像」とした場合、現在、撮像装置が処理対象としているフィールド画像において、そのフィールド画像の画面の下部（上部）を形成する映像信号が、撮像装置において処理対象となる時間（期間）のことをいう。
第８の発明は、第１または第２の発明であって、閃光検出部は、撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出し、映像信号により形成される単位画像に相当する時間である単位画像時間前の検出結果を保持する。
そして、閃光補正部は、第１選択部と、遅延部と、加算部と、混合部と、出力選択部と、を有する。
第１選択部は、複数の映像信号を入力することができ、入力される複数の映像信号から、閃光検出部の検出結果に基づいて、いずれか１つの映像信号を選択し、出力する。遅延部は、第１選択部から出力される映像信号を１単位画像時間遅延させた第１遅延信号と、第１遅延信号を１単位画像時間遅延させた第２遅延信号と、を出力する。加算部は、撮像部から出力される映像信号と遅延部から出力される第１遅延信号とに対して加算処理を行い、処理をおこなった映像信号を出力する。混合部は、加算部から出力される映像信号と第２遅延信号と、を所定の割合で混合し、出力する。出力選択部は、混合部から出力される映像信号または遅延部から出力される第１遅延信号のどちらか一方を選択して出力する。
【００１８】
そして、第１選択部は、撮像部から出力される映像信号および混合部から出力される映像信号を入力とし、閃光検出部により、撮像部から出力される映像信号が、閃光の影響を受けていないと判断された場合、撮像部から出力される映像信号を選択して出力し、閃光検出部により、撮像部から出力される映像信号が、閃光の影響を受けていると判断された場合、混合部から出力される映像信号を選択して出力する。出力選択部は、閃光検出部により、撮像部から出力される映像信号が、閃光の影響を受けていないと判断された場合、第１遅延信号を選択して出力し、閃光検出部により、撮像部から出力される映像信号が、閃光の影響を受けていると判断された場合、混合部から出力される映像信号を選択して出力する。
この撮像装置では、上記構成により、その画面の一部（例えば、画面上部または画面下部）において閃光の影響を受けて明るくなっている単位画像（例えば、フィールド画像やフレーム画像）を検出し、当該単位画像を、閃光の影響を受けて明るくなっている画像領域（例えば、画面上部または画面下部）を用いて補正することができる。その結果、この撮像装置により取得される映像において、閃光の影響が不自然に発生することを防止することができる。
【００１９】
これにより、この撮像装置では、外部閃光による明るい横帯のある不自然な画面を無くし、また、閃光が撮像装置に入ったかどうかも分かるようにしつつ、動画として連続性を確保した映像（画像）を得ることができる。また、この撮像装置では、混合部により、より多くの単位画像を用いて生成される画像（映像）により、閃光補正を行うので、第３の発明より動きの不連続さを緩和することができる。
第９の発明は、第８の発明であって、遅延部は、閃光検出部により、撮像部から出力される映像信号が、閃光の影響を受けていると判断された場合のみ、第２遅延信号を出力する。
この撮像装置では、必要なときのみ、遅延部により、第２遅延信号が出力されるので、第８の発明より閃光の影響のある画像を処理するときの電力が小さくなる。
【００２０】
第１０の発明は、第１から第９のいずれかの発明であって、単位画像は、フィールド画像であり、単位画像時間は、フィールド時間である。
これにより、フィールド単位での閃光補正処理を行うことができる。
第１１の発明は、第１から第１０のいずれかの発明であって、閃光検出部は、画素単位、ライン単位、または、フィールド単位のいずれかで撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出する。
また、閃光検出部は、以下の信号の生成を行う。
（１）映像信号により形成される画像の画面において、閃光の影響を受けている画面領域に相当する期間だけ、閃光の影響があることを示す値を出力する第１閃光判断信号の生成。
（２）映像信号により形成される画像の画面の開始時において、閃光の影響を受けていると判断した場合、画面全部に相当する期間だけ、閃光の影響があることを示す値を出力する第２閃光判断信号の生成。
（３）映像信号により形成される画像の画面内の下部だけに閃光の影響が有ると判断した場合、画面全部に相当する期間だけ、閃光の影響があることを示す値を出力する第３閃光判断信号の生成。
【００２１】
そして、閃光検出部は、第１閃光判断信号、第２閃光判断信号および第３閃光判断信号を、それぞれ、所定時間遅延させることができ、第１閃光判断信号、第２閃光判断信号および第３閃光判断信号、並びに、第１閃光判断信号、第２閃光判断信号および第３閃光判断信号を所定時間遅延させた信号のうちのいずれか１つまたは複数の信号を出力することができる。
これにより、どの単位画像が閃光の影響を受けているかを示す信号、映像信号により形成される画像において画面のどの領域が閃光の影響を受けているかを示す信号を生成することができ、これらの信号を用いて、撮像装置において、適切に閃光補正処理を行うことができる。
第１２の発明は、第１から第１１のいずれかの発明であって、加算部および選択部は、加算部及び選択部に入力される２つの映像信号の垂直位相が互いに０．５ラインずれているとき、どちらかの映像信号を０．５ライン分シフトして垂直方向の位相を合わせた上で信号を加算及び選択する。
【００２２】
この撮像装置では、撮像部で生成する信号が、加算部及び選択部に入力される２つの映像信号の垂直位相が互いに０．５ラインずれているとき、どちらかの映像信号を０．５ライン分シフトして垂直方向の位相を合わせた上で信号を加算及び選択することで、信号の垂直方向の位相が処理によりずれることがなくなる。
これにより、インターレース形式の映像信号に対しても閃光補正処理を適切に行うことができる。
第１３の発明は、撮像素子を有し、被写体から入射する光信号を電気信号に変換して映像信号を取得し、出力する撮像部を備える撮像装置に用いられる撮像方法であって、閃光検出ステップと、閃光補正ステップと、を備える撮像方法である。
閃光検出ステップでは、撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出する。閃光補正ステップでは、閃光検出ステップにより、撮像部により取得される映像信号が、閃光の影響を受けていると判断された場合、閃光の影響を受けていると判断された映像信号を用いて、撮像部から出力される映像信号を補正する。
【００２３】
これにより、第１の発明と同様の効果を奏する撮像方法を実現することができる。
第１４の発明は、撮像素子を有し、被写体から入射する光信号を電気信号に変換して映像信号を取得し、出力する撮像部を備える撮像装置に用いられる撮像方法をコンピュータに実行させるプログラムである。そして、撮像方法は、閃光検出ステップと、閃光補正ステップと、を備える。
閃光検出ステップでは、撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出する。閃光補正ステップでは、閃光検出ステップにより、撮像部により取得される映像信号が、閃光の影響を受けていると判断された場合、閃光の影響を受けていると判断された映像信号を用いて、撮像部から出力される映像信号を補正する。
これにより、第１の発明と同様の効果を奏する撮像方法をコンピュータに実行させるプログラムを実現することができる。
【００２４】
第１５の発明は、撮像素子を有し、被写体から入射する光信号を電気信号に変換して映像信号を取得し、出力する撮像部を備える撮像装置に用いられる集積回路であって、閃光検出部と、閃光補正部と、を備える。
閃光検出部は、撮像部により取得される映像信号が、閃光の影響を受けているか否かを検出する。閃光補正部は、閃光検出部により、撮像部により取得される映像信号が、閃光の影響を受けていると判断された場合、閃光の影響を受けていると判断された映像信号を用いて、撮像部から出力される映像信号を補正する。
これにより、第１の発明と同様の効果を奏する集積回路を実現することができる。
【発明の効果】
【００２５】
本発明によれば、外部閃光による明るい横帯のある不自然な画面を無くし、また、閃光が入ったかどうかも分かるようにしつつ、動画として連続性を確保した映像（画像）を得ることができる撮像装置、撮像方法、プログラムおよび集積回路を実現することができる。
【図面の簡単な説明】
【００２６】
【図１】第１実施形態の撮像装置１のブロック図
【図２】第１実施形態の閃光補正部１０３のブロック図
【図３】第１実施形態の各部の映像の様子を示す図
【図４】第１実施形態の第１変形例の閃光補正部１０３Ａのブロック図
【図５】第１実施形態の第１変形例の各部の映像の様子を示す図
【図６】第１実施形態の第２変形例の閃光補正部１０３Ｂのブロック図
【図７】第１実施形態の第２変形例の各部の映像の様子を示す図
【図８】第１実施形態の第３変形例の閃光補正部１０３Ｃのブロック図
【図９】第１実施形態の第３変形例の各部の映像の様子を示す図
【図１０】第２実施形態の撮像装置２のブロック図
【図１１】第２実施形態の閃光補正部１０３Ｂ’のブロック図
【図１２】第２実施形態の閃光補正部１０３Ｃ’のブロック図
【図１３】第２実施形態の各部の映像の様子を示す図
【図１４】第３実施形態の閃光補正部１０３Ｄのブロック図
【図１５】第３実施形態の閃光補正部１０３Ｅのブロック図
【図１６】第３実施形態の各部の映像の様子を示す図
【図１７】ＣＭＯＳ型撮像素子を使用したときに閃光が入ったときの例を示す図
【発明を実施するための形態】
【００２７】
以下、実施形態について、図面を参照しながら説明する。
［第１実施形態］
＜１．１：撮像装置の構成＞
図１に、第１実施形態の撮像装置１のブロック図（概略構成図）を示す。
なお、以下では、説明便宜のため、フィールド単位での処理について説明する。
図１に示すように、撮像装置１は、被写体を撮して映像信号ＶＩを生成する撮像部１０１と、撮像部１０１で生成した映像信号ＶＩから外部閃光の有無をフィールド単位で検出し、検出結果の情報を含む閃光検出信号ＦＤを生成するする閃光検出部１０２と、閃光検出部１０２により生成された閃光検出信号ＦＤに従って外部閃光の影響を受けた撮像部１０１の出力映像信号ＶＩを補正する閃光補正部１０３と、を備える。
【００２８】
撮像部１０１は、例えば、ＣＭＯＳ型撮像素子（ＣＭＯＳ型イメージセンサ等）を含み、被写体からの光を集光し、集光した光を光電変換することにより映像信号ＶＩとして取得する。撮像部１０１は、取得した映像信号ＶＩを閃光検出部１０２および閃光補正部１０３に出力する。
閃光検出部１０２は、撮像部１０１から出力される映像信号ＶＩを入力とし、映像信号ＶＩから外部閃光の有無をフィールド単位で検出する。具体的には、映像信号ＶＩにより形成されるフィールドにおいて、フィールドの開始時に相当する映像信号ＶＩが外部閃光による影響を受けていると判定した場合（フィールドの１ライン目の映像信号ＶＩが外部閃光による影響を受けていると判定した場合）、当該フィールドフィールド期間において、「１」になり、他の場合は、「０」になる閃光検出信号ＦＤを生成する。そして、閃光検出部１０２は、生成した閃光検出信号ＦＤを閃光補正部１０３に出力する。
【００２９】
閃光補正部１０３は、撮像部１０１から出力される映像信号ＶＩと、閃光検出部１０２から出力される閃光検出信号ＦＤと、を入力として、閃光検出信号ＦＤに基づいて、映像信号ＶＩに対して、閃光補正処理を行い、閃光補正処理後の映像信号ＶＯを出力する。
図２に示すように、閃光補正部１０３は、第１選択部２０１と、出力選択部２０２と、遅延部２０３と、加算部２０４と、を有する。
第１選択部２０１は、撮像部１０１から出力される映像信号ＶＩと、加算部２０４から出力される映像信号ＶＭと、閃光検出部１０２から出力される閃光検出信号ＦＤと、を入力とし、閃光検出信号ＦＤに基づいて、映像信号ＶＩまたは映像信号ＶＭのいずれかを選択し、映像信号ＶＷとして、遅延部２０３に出力する。
具体的には、第１選択部２０１は、以下のようにして、選択処理を行い、映像信号ＶＷを出力する。
（１）閃光検出信号ＦＤが「０」のときは、撮像部１０１から出力される映像信号ＶＩを選択し、映像信号ＶＷとして、遅延部２０３に出力する。
（２）閃光検出信号ＦＤが「１」のときは、加算部２０４から出力される映像信号ＶＭを選択し、映像信号ＶＷとして、遅延部２０３に出力する。
【００３０】
遅延部２０３は、第１選択部２０１から出力される映像信号ＶＷを入力とし、映像信号ＶＷを１フィールド遅延（１フィールド期間に相当する時間だけ遅延）させた映像信号を、映像信号ＶＲとして、加算部２０４および出力選択部２０２に出力する。
加算部２０４は、撮像部１０１から出力される映像信号ＶＩと、遅延部２０３から出力される映像信号ＶＲと、を入力とし、映像信号ＶＩと映像信号ＶＲとを加算した映像信号ＶＭを生成する。そして、加算部２０４は、映像信号ＶＭを出力選択部２０２に出力する。
出力選択部２０２は、遅延部２０３から出力される映像信号ＶＲと、加算部２０４から出力される映像信号ＶＭと、閃光検出部１０２から出力される閃光検出信号ＦＤと、を入力とし、閃光検出信号ＦＤに基づいて、映像信号ＶＲまたは映像信号ＶＭのいずれかを選択し、映像信号ＶＯとして、出力する。
【００３１】
具体的には、出力選択部２０２は、以下のようにして、選択処理を行い、映像信号ＶＯを出力する。
（１）閃光検出信号ＦＤが「０」のときは、遅延部２０３から出力される映像信号ＶＲを選択し、映像信号ＶＯとして、出力する。
（２）閃光検出信号ＦＤが「１」のときは、加算部２０４から出力される映像信号ＶＭを選択し、映像信号ＶＯとして、出力する。
＜１．２：撮像装置の動作＞
以上のように構成された撮像装置１について、その動作を、図３を併用し説明する。
図３は、図１７で示すタイミングで閃光が、撮像装置１に入射した場合の映像信号ＶＩ、ＶＲ、ＶＭ、ＶＯ、ＶＷ、および、閃光検出信号ＦＤの関係を、時間軸を合わせて示す図である。図３では、映像信号ＶＩ、ＶＲ、ＶＭ、ＶＯ、およびＶＷ、のそれぞれにより形成される画像（映像）における閃光の影響の様子を模式的に示している。
【００３２】
なお、図３中のイタリック文字（太字）の番号は、入力映像（信号）のフィールドの番号を示している（以下、同様）。
まず、撮像部１０１では、撮像部１０１に含まれるレンズを通して、ＣＭＯＳ型撮像素子に入った光学像（被写体からの光）が電気信号に変換される。その電気信号に対して、Ａ／Ｄ変換を行い、さらに、ホワイトバランスなどの処理が行うことで生成（取得）された信号は、映像信号ＶＩとして、撮像部１０１から閃光検出部１０２および閃光補正部１０３に出力される。
そして、この映像（映像信号ＶＩにより形成される映像）に対して、図１７に示すようなタイミングで閃光が入ると、図３に示したＶＩのような映像（フィールド画像）になる。すなわち、閃光が入ったとき、「画面２」（フィールド２）（以下、「フィールドＮ」（Ｎ：整数）のことを「画面Ｎ」ということがある。）の上部は、既に映像信号として出力された後なので（「画面２」の上部に相当する部分の映像（画像）を形成する映像信号を生成するための蓄積電荷（撮像部１０１のＣＭＯＳ型撮像素子の画素に蓄積される電荷）は、（閃光の前に）既に、撮像部１０１のＣＭＯＳ型撮像素子から読み出されているので）、閃光の影響を受けておらず、通常の映像となる。一方、「画面２」の下部は、閃光により明るくなって、図３のＶＩの「画面２」（フィールド２）に示すような映像になる。これは、「画面２」の下部に相当する部分の映像（画像）を形成する映像信号を生成するための蓄積電荷（撮像部１０１のＣＭＯＳ型撮像素子の画素に蓄積される電荷）が、閃光があった後に、撮像部１０１のＣＭＯＳ型撮像素子から読み出されるからである。そして、「画面３」（フィールド３）は、閃光が入っている間に画面の上部の映像が生成されるので（「画面３」の上部に相当する部分の映像（画像）を形成する映像信号を生成するための蓄積電荷（撮像部１０１のＣＭＯＳ型撮像素子の画素に蓄積される電荷）は、閃光があった後に、撮像部１０１のＣＭＯＳ型撮像素子から読み出されるので）、「画面３」の画面上部は、明るい映像になり、「画面３」の画面下部の映像が生成されるときには、閃光がなくなっているので、「画面３」の画面下部は、閃光の影響を受けることなく通常の映像となる。
【００３３】
この映像信号ＶＩに基づいて、閃光検出部１０２により、図３に示すような閃光検出信号ＦＤが生成される。つまり、閃光検出部１０２は、映像信号ＶＩが形成するフィールド画像の最初に（最初のラインに）外部閃光が入っている（外部閃光の影響を受けている）と判断した場合、当該フィールド期間において、閃光検出信号ＦＤの信号値を「１」（Ｈ）にして出力する。すなわち、図３に示す場合、閃光検出部１０２は、映像信号ＶＩが「画面３」のときに、閃光検出信号ＦＤの信号値は「１」（Ｈ）にして出力し、それ以外のフィールドでは、閃光検出信号ＦＤの信号値は「０」（Ｌ）にして出力する。なお、外部閃光の検出方法自体は、本発明の主とするところではないので、詳細な説明は省略する。
（１．２．１：閃光補正部１０３の動作）
次に、図３の「画面１」から「画面５」までの映像信号ＶＩが、閃光補正部１０３に入力されたときの動作について、説明する。なお、ここで、「画面１」の前のフィールドの映像を「画面０」とし、「画面０」では外部閃光の影響はないものとする。
（「画面１」のとき）：
映像信号ＶＩが「画面１」のときは、外部閃光はなく（外部閃光の影響はなく）閃光検出信号ＦＤの値が「０」なので、第１選択部２０１では、映像信号ＶＩが選択される。したがって、図３に示すように、映像信号ＶＷは、「画面１」の映像信号となり、遅延部２０３に出力される。
【００３４】
遅延部２０３では、１フィールド前のフィールドの映像信号が出力されるので、図３に示すように、映像信号ＶＲは、「画面０」の信号となる。
そして、出力選択部２０２では、閃光検出信号ＦＤの値が「０」なので、映像信号ＶＲが選択される。したがって、図３に示すように、出力選択部２０２の出力信号である映像信号ＶＯは、「画面０」の映像信号になる。
（「画面２」のとき）：
次のフィールドでは、「画面２」、すなわち、図３に示すように画面下部が閃光の影響で明るくなった映像が入力される。このとき、閃光検出信号ＦＤの値は、「０」なので、「画面１」が入力されるときと同じ動作になり、図３に示すように、映像信号ＶＲは、「画面１」の映像信号となり、出力選択部２０２の出力であり、閃光補正部１０３の出力でもある映像信号ＶＯは、「画面１」の映像信号となり、１フィールド遅延させるために、遅延部２０３に入力される映像信号ＶＷは、「画面２」の映像信号となる。
（「画面３」のとき）：
さらに、次のフィールドでは、「画面３」、すなわち、図３に示すように画面上部が閃光の影響で明るくなった映像が入力される。このとき、閃光検出信号ＦＤの値は、「１」なので、「画面１」が入力されるときと異なる動作になる。
【００３５】
遅延部２０３では、前のフィールドで、１フィールド遅延させるために、遅延部２０３に入力された「画面２」の映像信号が、１フィールド遅延されて映像信号ＶＲとして出力される。この映像信号ＶＲである「画面２」の映像信号と映像信号ＶＩである「画面３」の映像信号とが加算部２０４で加算され、映像信号ＶＭが生成される。そして、閃光検出信号ＦＤの値が「１」であるので、「画面２」の映像信号と「画面３」の映像信号とを加算して生成された映像信号ＶＭは、出力選択部２０２により選択され、閃光補正部１０３としての出力信号ＶＯとなる。また、閃光検出信号ＦＤの値が「１」であるので、第１選択部２０１では、「画面２」の映像信号と「画面３」の映像信号とを加算して生成された映像信号ＶＭが選択される。つまり、１フィールド遅延させるために、遅延部２０３に入力される映像信号ＶＷは、映像信号ＶＭとなる。
（「画面４」のとき）：
さらに次のフィールドでは、図３に示すような「画面４」の映像信号が入力される。このとき、閃光検出信号ＦＤの値は、「０」なので、「画面１」が入力されるときと同じ動作になる。従って、図３に示すように、映像信号ＶＲは、前のフィールドで映像信号ＶＷであった「画面２」の映像信号と「画面３」の映像信号とを加算した信号となる。そして、出力選択部２０２の出力であり、閃光補正部１０３の出力でもある映像信号ＶＯは、閃光検出信号ＦＤの値が「０」なので、映像信号ＶＲである「画面２」の映像信号と「画面３」の映像信号とを加算した信号を選択し、映像信号ＶＯとする。また、遅延部２０３へ１フィールド遅延させるために出力される映像信号ＶＷは、入力された映像信号ＶＩである「画面４」の映像信号になる。
（「画面５」のとき）：
さらに次も同様に、映像信号ＶＩとして、「画面５」の信号が入力されると、図３に示すように、映像信号ＶＲは、「画面４」の映像信号になり、映像信号ＶＯは、「画面４」の映像信号になり、そして、映像信号ＶＷは、「画面５」の映像信号になる。以下同様の動作が毎フィールド繰り返されていく。
【００３６】
なお、加算部２０４にて、２つの映像信号を加算した結果、加算後の信号値が大きくなりすぎたときは、当該加算後の信号値を、入力映像信号が表現できる最大値に置き換えても良い。例えば、入力映像信号が１０ビットのデジタル信号であれば、加算結果（加算後の信号値）が１０２４〜２０４６になると、これを１０２３に置き換えるようにしても良い。
以上の動作により、撮像装置１では、図３の映像信号ＶＩのように「画面２」で画面下部が、「画面３」で画面上部が、それぞれ、閃光の影響で明るい映像になっていた映像信号を、図３の出力映像信号ＶＯのように、映像信号ＶＩの「画面２」および「画面３」に相当するところで、画面全部が明るい映像（「画面２」の映像信号と「画面３」の映像信号とを加算した映像信号による映像）になり、実際の被写体のように全部が均一に明るくなる映像を生成することができる。また、撮像装置１では、閃光の影響のある映像を使用することで、閃光が入ったかどうかも映像信号に残るようになる。
【００３７】
なお、撮像部１０１で生成される映像信号が、インターレースの形式のときには、図２の加算部２０４で映像信号を加算するとき映像信号ＶＩのほうを０．５ライン分垂直方向にシフトして映像信号ＶＲと垂直の画面の位置が同じになるように補正してから加算する。このとき、上記で説明した場合とは遅延量が変わることになるが、遅延部２０３から映像信号ＶＲを読み出すタイミングを変えることで調整すれば良い。
また、本実施形態では、撮像装置１において、閃光が入ったかどうかを判断するための情報として映像信号ＶＩを使用したが、これに限定されることはなく、例えば、閃光そのものを検出する専用のセンサーを撮像装置１に設け、撮像装置１では、そのセンサーから得られる信号で閃光検出信号ＦＤを生成するようにしても良い。
≪第１変形例≫
次に、本実施形態の第１変形例について、説明する。
【００３８】
本変形例の撮像装置では、撮像装置１において、閃光補正部１０３を、図４に示す閃光補正部１０３Ａに置換した構成となっている。閃光補正部１０３Ａは、閃光補正部１０３における加算部２０４（図２参照）を、図４に示すように加算平均部４０４に置換した構成となっており、それ以外については、閃光補正部１０３Ａは、閃光補正部１０３と同様である。
閃光補正部１０３を、図４に示す閃光補正部１０３Ａに置換した構成の撮像装置では、図３で、「画面２」及び「画面３」のところで、「画面２」の映像信号と「画面３」の映像信号とを加算した映像信号による画面（図３中では、「２＋３」と表記）に置き換わっていた信号が、図５に示すように、「画面２」の映像信号と「画面３」と映像信号とを加算平均した映像信号による画面（図５中では、「（２＋３）／２」と表記）になる。これにより、この撮像装置では、加算したときと同様に、画面全部が均一に明るくなる映像を得ることができ、かつ、加算したときと違い、閃光の影響を受けていない部分の映像の情報が、閃光が強すぎることにより何が写っているかわからなくなることがなくなる（閃光が強すぎることによる影響を抑制することができる）。その代わり、この撮像装置では、閃光により明るくなる効果が抑えられることになる。そこで、この撮像装置において、加算して取得した映像信号を半分にする加算平均処理ではなく、加算して取得した映像信号に４分の３をかけることで加算平均処理を行うようにしてもよい。これにより、この撮像装置では、閃光により明るくなる効果を残しつつ、閃光が強すぎることによる影響を効果的に抑制することができる。なお、上記において、加算して取得した映像信号にかける数値は、「３／４」以外の数値であってもよいことは言うまでもない。
【００３９】
≪第２変形例≫
次に、本実施形態の第２変形例について、説明する。
本変形例の撮像装置では、撮像装置１において、閃光補正部１０３を、図６に示す閃光補正部１０３Ｂに置換した構成となっている。なお、以下では、上記と同様の部分については、同一符号を付し、詳細な説明を省略する。
閃光補正部１０３Ｂは、図６に示すように、第１選択部２０１と、加算部２０４と、遅延部２０３Ｂと、を備える。
第１選択部２０１は、映像信号ＶＩと、加算部２０４から出力される映像信号ＶＭと、閃光検出信号ＦＤとを入力とする。第１選択部２０１は、閃光検出信号ＦＤに基づいて、映像信号ＶＩおよび映像信号ＶＭのいずれか一方を選択し、選択した映像信号を映像信号ＶＷとして、遅延部２０３Ｂに出力する。
【００４０】
加算部２０４は、映像信号ＶＩと、遅延部２０３Ｂから出力される映像信号ＶＲとを入力とする。加算部２０４は、映像信号ＶＩと映像信号ＶＲとを加算した映像信号ＶＭを、第１選択部２０１に出力する。
遅延部２０３Ｂは、閃光検出信号ＦＤと、第１選択部２０１から出力される映像信号ＶＷとを入力とする。遅延部２０３Ｂは、映像信号ＶＷを１フィールド遅延（１フィールド期間に相当する時間だけ遅延）させた映像信号を、映像信号ＶＲとして、加算部２０４に出力する。また、遅延部２０３Ｂは、閃光検出信号ＦＤに基づいて、映像信号ＶＯを出力する。すなわち、
（１）閃光検出信号ＦＤが「０」のとき、遅延部２０３Ｂは、映像信号ＶＲと同じ映像信号を、映像信号ＶＯとして出力する。
（２）閃光検出信号ＦＤが「１」のとき、遅延部２０３Ｂは、１フィールド前の映像信号ＶＲと同じ映像信号を、映像信号ＶＯとして出力する。つまり、現在処理中のフィールドがＮ（Ｎは自然数）番目のフィールドである場合、遅延部２０３Ｂは、（Ｎ−１）番目のフィールドの映像信号ＶＲを出力する。
【００４１】
図７は、図１７で示すタイミングで閃光が、本変形例の撮像装置に入射した場合の映像信号ＶＩ、ＶＲ、ＶＭ、ＶＯ、ＶＷ、および、閃光検出信号ＦＤの関係を、時間軸を合わせて示す図である。
図７に示すように、本変形例の撮像装置では、図３の場合と比較して、以下の点が異なる。
すなわち、図３の場合、「画面３」において、映像信号ＶＯは、「画面２」の映像信号と「画面３」の映像信号とを加算した映像信号（図３中では、「２＋３」と表記）である。
一方、図７の場合、「画面３」において、映像信号ＶＯは、「画面１」の映像信号（図７中では、「１」と表記）である。
【００４２】
つまり、本変形例の撮像装置では、「画面３」において、閃光検出信号ＦＤが「１」であるので、映像信号ＶＯとして、１フィールド前の映像信号（図７中では、「１」と表記）（「画面２」における映像信号Ｖ０（ＶＲ））が出力されることになる。
≪第３変形例≫
次に、本実施形態の第３変形例について、説明する。
本変形例の撮像装置では、撮像装置１において、閃光補正部１０３を、図８に示す閃光補正部１０３Ｃに置換した構成となっている。なお、以下では、上記と同様の部分については、同一符号を付し、詳細な説明を省略する。
閃光補正部１０３Ｃは、図８に示すように、図２に示す閃光補正部１０３から、出力選択部２０２を削除し、遅延部２０３を遅延部２０３Ｃに置換した構成となっている。それ以外については、閃光補正部１０３Ｃは、閃光補正部１０３と同様である。
【００４３】
遅延部２０３Ｃは、閃光検出信号ＦＤと、第１選択部２０１から出力される映像信号ＶＷとを入力とする。遅延部２０３Ｃは、映像信号ＶＷを１フィールド遅延（１フィールド期間に相当する時間だけ遅延）させた映像信号を、映像信号ＶＲとして、加算平均部４０４に出力する。また、遅延部２０３Ｃは、閃光検出信号ＦＤに基づいて、映像信号ＶＯを出力する。すなわち、
（１）閃光検出信号ＦＤが「０」のとき、遅延部２０３Ｃは、映像信号ＶＲと同じ映像信号を、映像信号ＶＯとして出力する。
（２）閃光検出信号ＦＤが「１」のとき、遅延部２０３Ｃは、１フィールド前の映像信号ＶＲと同じ映像信号を、映像信号ＶＯとして出力する。つまり、現在処理中のフィールドがＮ（Ｎは自然数）番目のフィールドである場合、遅延部２０３Ｃは、（Ｎ−１）番目のフィールドの映像信号ＶＲを出力する。
【００４４】
図９は、図１７で示すタイミングで閃光が、本変形例の撮像装置に入射した場合の映像信号ＶＩ、ＶＲ、ＶＭ、ＶＯ、ＶＷ、および、閃光検出信号ＦＤの関係を、時間軸を合わせて示す図である。
図９に示すように、本変形例の撮像装置では、図５の場合と比較して、以下の点が異なる。
すなわち、図５の場合、「画面３」において、映像信号ＶＯは、「画面２」の映像信号と「画面３」の映像信号とを加算平均した映像信号（図５中では、「（２＋３）／２」と表記）である。
一方、図９の場合、「画面３」において、映像信号ＶＯは、「画面１」の映像信号（図９中では、「１」と表記）である。
【００４５】
つまり、本変形例の撮像装置では、「画面３」において、閃光検出信号ＦＤが「１」であるので、映像信号ＶＯとして、１フィールド前の映像信号（図９中では、「１」と表記）（「画面２」における映像信号Ｖ０（ＶＲ））が出力されることになる。
［第２実施形態］
本実施形態は、第１実施形態と信号の流れはほぼ同じで、主に、閃光補正部１０３の構成と動作とが異なるので、その異なる部分を中心に、以下説明する。
＜２．１：撮像装置の構成＞
図１０に示すように、本実施形態の撮像装置２は、第１実施形態の撮像装置１において、閃光検出部１０２を閃光検出部１０２Ａに置換し、閃光補正部１０３を閃光補正部１０３Ｂ’に置換したものであり、それ以外については、本実施形態の撮像装置は、第１実施形態の撮像装置１と同様である。
【００４６】
なお、本実施形態において、上記実施形態と同様の部分については、同一の符号を付し、詳細な説明を省略する。
閃光検出部１０２Ａは、撮像部１０１から出力される映像信号ＶＩを入力とし、映像信号ＶＩから閃光検出信号ＦＤを生成し、閃光補正部１０３Ｂ’に出力する。なお、閃光検出信号ＦＤは、上位ビットをＦＤＯ、下位ビットをＦＤＷで構成される２ビットの信号であるものとする。
具体的には、閃光検出部１０２Ａは、以下のようにして、閃光検出信号ＦＤに生成し、出力する。
（１）閃光検出部１０２Ａが、各フィールド画像の画面において、画面の上部だけ閃光がある（画面上部が閃光の影響を受けている）と判断したとき、閃光検出部１０２Ａは、閃光検出信号の上位ビットＦＤＯの値を「１」にし、それ以外のときは、閃光検出信号の上位ビットＦＤＯの値を「０」にして、閃光補正部１０３Ｂ’に出力する。
（２）閃光検出部１０２Ａが、１フィールド前のフィールド画像の画面において、画面の下部にだけ閃光がある（画面下部が閃光の影響を受けている）と判断したとき、閃光検出部１０２Ａは、閃光検出信号の下位ビットＦＤＷの値を「１」にし、それ以外のときは、閃光検出信号の下位ビットＦＤＷの値を「０」にして、閃光補正部１０３Ｂ’に出力する。
【００４７】
閃光補正部１０３Ｂ’は、図１１に示すように、第１選択部６０１と、出力選択部６０２と、遅延部２０３と、を備える。
第１選択部６０１は、閃光検出信号の下位ビットＦＤＷが「０」のときは、撮像部１０１から出力される映像信号ＶＩを選択し、閃光検出信号の下位ビットＦＤＷが「１」のときは、遅延部２０３から出力される映像信号ＶＲを選択し、映像信号ＶＷを生成し、遅延部２０３に出力する。
遅延部２０３は、第１選択部６０１から出力される映像信号ＶＷを１フィールド遅延させて映像信号ＶＲを生成し、第１選択部６０１および出力選択部６０２に出力する。
出力選択部６０２は、閃光検出信号の上位ビットＦＤＯが「０」のときは、遅延部２０３から出力される映像信号ＶＲを選択し、閃光検出信号の上位ビットＦＤＯが「１」のときは、撮像部１０１から出力される映像信号ＶＩを選択し、映像信号ＶＯとして出力する。
【００４８】
＜２．２：撮像装置の動作＞
以上のように構成された撮像装置２について、その動作を、図１３を併用し説明する。また、図１３の「画面１」の前のフィールドの映像を「画面０」とし、「画面０」では、外部閃光の影響はないものとする。
撮像部１０１から出力された映像信号ＶＩは、図１３に示すように、「画面２」では、画面の下部が閃光の影響を受けて明るくなっており、「画面３」では、画面の上部が閃光の影響を受けて明るくなっている。
閃光検出部１０２Ａでは、図１３に示すように、閃光の影響を受けている「画面２」と「画面３」の映像信号に対して、画面の上部だけ閃光があると判断されるとき「１」になる閃光検出信号ＦＤＯ（閃光検出信号ＦＤの上位１ビットによる信号）と、前のフィールドで画面の下部だけ閃光があると判断されるときだけ「１」になる閃光検出信号ＦＤＷ（閃光検出信号ＦＤの下位１ビットによる信号）を生成する。
【００４９】
図１３に示す場合、閃光検出部１０２Ａは、「画面２」の最後（「画面２」の最後のラインを形成する映像信号）に、まだ、閃光が入っている（閃光の影響を受けている）と判断し、次の垂直ブランキング期間になったら、閃光検出信号ＦＤＯの値を、「１」にして出力する。そして、閃光検出部１０２Ａは、映像信号ＶＩを監視しつづけて、閃光による明るさの増加（閃光による影響）がなくなったと判断できる「画面３」の中央部分で、閃光検出信号ＦＤＯの値を、「０」にする。
また、閃光検出部１０２Ａは、閃光が入り始めたラインを記憶しておき、次のフィールドで記憶しておいたラインになったときに、閃光検出信号ＦＤＷの値を「１」にして、さらに、次の垂直ブランキング期間が来たときに、閃光検出信号ＦＤＷの値を「０」にする。
【００５０】
（２．２．１：閃光補正部１０３Ｂ’の動作）
次に、図１３の「画面１」から「画面５」までの映像信号ＶＩが閃光補正部１０３Ｂ’に入力されたときの動作を説明する。
（「画面１」のとき）：
閃光補正部１０３Ｂ’に入力された映像信号ＶＩが「画面１」のときは、閃光検出信号ＦＤＷの値が「０」なので、第１選択部６０１では、映像信号ＶＩが選択され、映像信号ＶＷは、「画面１」の映像信号となり、遅延部２０３に出力される。
遅延部２０３では、１フィールド遅延した映像信号ＶＲを出力するので、１フィールド前のフィールドの映像信号である「画面０」の信号を、第１選択部６０１および出力選択部６０２に出力する。
【００５１】
出力選択部６０２では、閃光検出信号ＦＤＯの値が「０」なので遅延部２０３から出力される映像信号ＶＲが選択されるので、図１３に示すように、出力選択部６０２の出力信号である映像信号ＶＯは、「画面０」の映像信号になる。
（「画面２」のとき）：
次のフィールドでは、「画面２」、すなわち、図１３に示すように、画面下半分が閃光の影響で明るくなった映像が入力される。このとき、閃光検出信号ＦＤＷとＦＤＯとは、ともに「０」なので、「画面１」が入力されるときと同じ動作になり、図１３に示すように、映像信号ＶＲは、「画面１」の映像信号となり、出力選択部６０２の出力であり閃光補正部１０３Ｂ’の出力でもある映像信号ＶＯは、「画面１」の映像信号となり、遅延部２０３へ１フィールド遅延させるために入力される映像信号ＶＷは、「画面２」の映像信号になる。
（「画面３」のとき）：
さらに、次のフィールドでは、「画面３」、すなわち、図１３に示すように、画面上部が閃光の影響で明るくなった映像が入力される。このとき、閃光検出信号ＦＤＷの値が「１」になる期間と、閃光検出信号ＦＤＯの値が「１」になる期間とがあるので、「画面１」が入力されるときと異なる動作になる。
【００５２】
遅延部２０３では、前のフィールドで、１フィールド遅延させるために、遅延部２０３に入力された「画面２」の映像信号が、１フィールド遅延されて映像信号ＶＲとして出力される。
そして、出力選択部６０２では、閃光検出信号ＦＤＯの値が「１」のときは、映像信号ＶＩである「画面３」の映像信号が選択され、閃光検出信号ＦＤＯの値が「０」のときは、映像信号ＶＲである「画面２」の映像信号が選択される。ここで、図１３に示すように、閃光検出信号ＦＤＯの値が「１」のとき、映像信号ＶＩである「画面３」の映像信号は、閃光の影響を受けて明るい映像になっており、また、閃光検出信号ＦＤＯの値が「０」のとき、映像信号ＶＲである「画面２」の映像信号が閃光の影響を受けて明るくなっているので、図１３の映像信号ＶＩが「画面３」のときの、映像信号ＶＯに示すように、画面上部が「画面３」、下部が「画面２」となり、共に閃光の影響を受けて明るくなっているので、画面全部が明るい映像になる。すなわち、出力選択部６０２の出力、すなわち閃光補正部１０３Ｂ’の出力の映像信号は、画面全部が明るい映像信号になる。
（「画面４」のとき）：
さらに次のフィールドでは、図１３に示すように、閃光の影響を受けていない「画面４」の映像信号が入力される。このとき、閃光検出信号ＦＤＷ及びＦＤＯの値は、「０」なので、「画面１」が入力されるときと同じ動作になる。従って、図１３に示すように、映像信号ＶＲは、前のフィールドで映像信号ＶＷであった「画面２」と「画面３」を組み合わせた画面全体が明るい映像信号になり、その映像信号が、出力選択部６０２にて選択され、閃光補正部１０３Ｂ’の出力でもある映像信号ＶＯとなる。また、遅延部２０３へ１フィールド遅延させるために入力される映像信号ＶＷは、入力された映像信号ＶＩである「画面４」の映像信号になる。
（「画面５」のとき）：
さらに次のフィールドでも同様に、映像信号ＶＩとして、「画面５」の信号が入力されると、図１３に示すように、映像信号ＶＲは、「画面４」の映像信号になり、映像信号ＶＯは、「画面４」の映像信号になり、そして、映像信号ＶＷは、「画面５」の映像信号になる。そして、以下同様の動作が毎フィールド繰り返されていく。
【００５３】
以上の動作により、本実施形態の撮像装置２では、図１３の映像信号ＶＩのように、画面下部が閃光の影響により明るい画面である「画面２」の映像信号と、画面上部が閃光の影響により明るい画面である「画面３」の映像信号と、を組み合わせることで、図３に示した映像信号ＶＯと同様に、「画面２」および「画面３」に相当するところで、画面全部が明るい映像になり、実際の被写体のように全部が均一に明るくなる映像を生成することができる。また、撮像装置２では、閃光の影響のある映像を使用することで、閃光が入ったかどうかも映像信号に残るようになる。そして、撮像装置２では、第１実施形態の撮像装置１に比べて、加算部がない分だけ回路規模が小さくなり、また、加算処理によるオーバーフローも生じない。
なお、撮像部１０１で生成される映像信号が、インターレースの形式のときには、図１１の出力選択部６０２で映像信号を選択するとき映像信号ＶＩのほうを０．５ライン分垂直方向にシフトして映像信号ＶＲと垂直の画面の位置が同じになるように補正してから選択する。このとき、上記で説明した場合とは、遅延量が変わることになるが、遅延部２０３から映像信号ＶＲを読み出すタイミングを変えることで調整すれば良い。
【００５４】
また、本実施形態では、撮像装置２において、閃光が入ったかどうかを判断するための情報として映像信号ＶＩを使用したが、これに限定されることはなく、例えば、閃光そのものを検出する専用のセンサーを撮像装置２に設け、そのセンサーから得られる信号で閃光検出信号ＦＤを生成するようにしても良い。
≪変形例≫
また、撮像装置２において、閃光補正部１０３Ｂ’を、図１２に示す閃光補正部１０３Ｃ’に置換してもよい。図１２に示すように、閃光補正部１０３Ｃ’は、閃光検出信号ＦＤＷを遅延部７０３の制御に加えて、第１選択部６０１を省略した構成となっている。
この撮像装置（本変形例の撮像装置）において、遅延部７０３では、ＦＤＷの値が「１」のとき、１フィールド遅延させるために入力される映像信号ＶＷを受け付けないようにして、前のフィールドの値を維持する。すなわち、遅延部７０３では、「画面３」の映像が入力されるフィールドにおいて、「画面３」の上部の映像信号は、１フィールド遅延すべき信号として受け付けられ（遅延部７０３に入力され）、１フィールド遅延されて、次のフィールドで出力される。一方、遅延部７０３では、「画面３」の下部の映像信号は無視され（遅延部７０３に入力されず）、その代わり、遅延部７０３は、前のフィールドで受け付けた「画面２」の下部の映像信号をそのまま維持し、次のフィールドで「画面２」の下部の映像信号を出力する。
【００５５】
これによって、この撮像装置（本変形例の撮像装置）では、図１１の構成と同じ映像信号ＶＲを得ることができる。この撮像装置の遅延部７０３を半導体メモリで実現するならば、遅延部７０３に対して、書き込みの許可を閃光検出信号ＦＤＷが「１」のときは与えないようにする。これにより、選択部（第１選択部６０１に相当。）が１つ減ることになる。
［第３実施形態］
本実施形態は、第１実施形態と信号の流れはほぼ同じで、主に、閃光補正部１０３の構成と動作が異なるので、その異なる部分を中心に、以下説明する。
＜３．１：撮像装置の構成＞
本実施形態の撮像装置は、第１実施形態の撮像装置１において、閃光補正部１０３を、図１４に示す閃光補正部１０３Ｄに置換したものである。
【００５６】
閃光補正部１０３Ｄにおいて、第１実施形態の閃光補正部１０３と相違する点は以下の通りである。
すなわち、閃光補正部１０３Ｄでは、図１４に示すように、
（１）加算部２０４の後に混合部９０５が追加されたこと、
（２）その混合部９０５に、遅延部９０３により、第１選択部２０１の出力信号を２フィールド遅延した信号ＶＲ２を入力するようにしたこと、
（３）遅延部９０３が、２フィールド遅延した信号ＶＲ２を生成できるようにしたこと、
である。
ここで、混合部９０５は、加算部２０４から出力される映像信号と、映像信号ＶＷを２フィールド遅延した映像信号ＶＲ２と、を７対１の比で混合する。
【００５７】
＜３．２：撮像装置の動作＞
以上のように構成された閃光補正部１０３Ｄを含む本実施形態の撮像装置について、その動作を、図１６を併用し説明する。また、図１６の「画面１」の前のフィールドの映像を「画面０」とし、「画面０」では、外部閃光の影響はないものとする。
撮像部１０１から出力された映像信号ＶＩは、図１６に示すように、「画面２」では、画面の下部が閃光の影響を受けて明るくなっており、「画面３」では、画面の上部が閃光の影響を受けて明るくなっている。この映像信号ＶＩが閃光補正部１０３Ｄに入力される。
（「画面１」、「画面２」、「画面５」のとき）：
「画面１」、「画面２」、「画面５」が入力されるときは、第１実施形態と同じく、図１６に示す通り、映像信号ＶＩを１フィールド遅延させた映像信号が、閃光補正部１０３Ｄの出力信号ＶＯになる。
（「画面３」のとき）：
「画面３」が入力されるとき、加算部２０４では、遅延部９０３から映像信号ＶＷを１フィールド遅延させた映像信号ＶＲ１である「画面２」の映像信号と、撮像部１０１から出力される映像信号ＶＩ、すなわち、「画面３」の映像信号が加算され、混合部９０５に出力される。そして、この「画面２」の映像信号と「画面３」の映像信号とが加算された映像信号は、混合部９０５にて、遅延部９０３から出力される映像信号ＶＷを２フィールド遅延した映像信号ＶＲ２、すなわち「画面１」の映像信号と、７対１の比で混合され、映像信号ＶＭが生成される。
【００５８】
すなわち、映像信号ＶＭは、
（（画面２）＋（画面３））×（７／８）＋（画面１）×（１／８）
により取得された信号値を有する信号として、閃光補正部１０３Ｄにより生成される。なお、上式において、「（画面Ｎ）」（Ｎ：整数）は、「画面Ｎ」の映像信号の信号値を示している。
そして、出力選択部２０２では、閃光検出信号ＦＤの値が「１」なので、この映像信号ＶＭを選択し、閃光補正部１０３Ｄの出力信号ＶＯとなる。よって、閃光補正部１０３Ｄの出力信号ＶＯは、「画面２」の映像信号および「画面３」の映像信号を加算した映像信号と、「画面１」の映像信号と、を７対１の比で混合した映像信号になる。
一方、この混合した映像信号ＶＭは、閃光検出信号ＦＤの値が「１」なので、第１選択部２０１で選択され、遅延部９０３に出力される。ここで、混合部で、７対１の比で混合する処理は、８分の７を乗じた信号と８分の１を乗じた信号を加算することである。なお、上記において混合比は、７対１の場合について説明したが、これに限定されず、他の混合比であってもよい。また、加算処理の代わりに、加算平均処理、重付平均処理等を用いるようにしてもよい。
（「画面４」のとき）：
次に、撮像部１０１から「画面４」の映像信号が入力されるときは、動作自体は、「画面１」の映像信号が入力されるときと同じだが、遅延部９０３で１フィールド遅延された映像信号ＶＲ１が、前のフィールドで「画面２」の映像信号、および「画面３」の映像信号を加算した映像信号と、「画面１」の映像信号と、を７対１の比で混合した映像信号になる点が異なる。
【００５９】
従って、出力選択部２０２の出力は、映像信号ＶＲ１になるので、閃光補正部１０３Ｄの出力信号ＶＯとしては、図１６に示すように、前のフィールドと同じく、「画面２」の映像信号および「画面３」の映像信号を加算した映像信号と、「画面１」の映像信号を７対１の比で混合した信号になる。
一方、第１選択部２０１では、閃光検出信号ＦＤの値が「０」なので、撮像部１０１から出力された映像信号である「画面４」の映像信号が選択され、映像信号ＶＷとして、遅延部９０３に出力される。
以上の動作により、本実施形態の撮像装置では、図１６の映像信号ＶＩのように、画面下部が閃光の影響により明るい画面である「画面２」の映像信号と、画面上部が閃光の影響により明るい画面である「画面３」の映像信号を、図１６の映像信号ＶＯのように、「画面２」および「画面３」に相当するところで、画面全部が明るい映像を得ることができる。また、本実施形態の撮像装置では、加算してオーバーフローしたところ（場合）でも、およそどのような映像かがわかる映像を得ることができる。また、本実施形態の撮像装置では、閃光の影響のある映像を使用するので（閃光の影響のある映像を完全に削除することなく、使用するので）、本実施形態の撮像装置から出力される映像信号により形成される映像において、閃光が入ったかどうかも分かる。
【００６０】
なお、撮像部１０１で生成される映像信号が、インターレースの形式のときには、図１４の加算部２０４で映像信号を加算するとき映像信号ＶＩのほうを０．５ライン分垂直方向にシフトして映像信号ＶＲ１と垂直の画面の位置が同じになるように補正してから選択する。このとき、上記で説明した場合とは、遅延量が変わることになるが、遅延部９０３から映像信号ＶＲ１を読み出すタイミングを変えることで調整すれば良い。
また、本実施形態の撮像装置では、閃光が入ったかどうかを判断するための情報として映像信号ＶＩを使用したが、これに限定されることはなく、例えば、閃光そのものを検出する専用のセンサーを本実施形態の撮像装置に設け、そのセンサーから得られる信号で閃光検出信号ＦＤを生成するようにしても良い。
≪変形例≫
また、本実施形態の撮像装置において、閃光補正部１０３Ｄを、図１５に示す閃光補正部１０３Ｅに置換してもよい。図１５に示すように、閃光補正部１０３Ｅは、閃光補正部１０３Ｄにおいて、遅延部９０３を、遅延部１００３に置換した構成となっている。つまり、遅延部１００３に、閃光検出信号ＦＤを入力するようにし、遅延部１００３が閃光検出信号ＦＤにより制御される構成とする。
【００６１】
そして、遅延部１００３は、閃光検出信号ＦＤの値が「１」のときだけ、映像信号ＶＲ２を出力する。このようにすることで、遅延部１００３による読み出し処理が止まった分だけ、撮像装置において、電力を削減することができる。
また、図１４、図１５の加算部２０４の処理を加算平均に置き換えても良い。これにより、閃光が当てられた被写体がどのようなものかが、より分かるようになる。但し、閃光の影響が少なくなるので、強い光が入ったという印象が小さくなる。
また、本実施形態では、「画面１」の映像を混合する場合について述べたが、「画面４」の映像を混合しても同様の効果を得ることができる。
また、本実施形態では、３つの画面（フィールド）を混合（上記では、「画面１」、「画面２」および「画面３」を混合）する場合について説明したが、これに限定されることはなく、さらに多くの画面（フィールド）を混合するようにしてもよい。
【００６２】
［他の実施形態］
なお、上記においては、フィールド単位での処理について説明したが、これに限定されることはなく、例えば、撮像装置が、フレーム単位での処理を行うものであってもよい。
また、上記実施形態で説明した撮像装置において、各ブロックは、ＬＳＩなどの半導体装置により個別に１チップ化されても良いし、一部又は全部を含むように１チップ化されても良い。
なお、ここでは、ＬＳＩとしたが、集積度の違いにより、ＩＣ、システムＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。
また、集積回路化の手法はＬＳＩに限るものではなく、専用回路又は汎用プロセサで実現してもよい。ＬＳＩ製造後に、プログラムすることが可能なＦＰＧＡ（Ｆｉｅｌｄ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）や、ＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサーを利用しても良い。
【００６３】
さらには、半導体技術の進歩又は派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適用等が可能性としてあり得る。
また、上記実施形態の各処理をハードウェアにより実現してもよいし、ソフトウェア（ＯＳ（オペレーティングシステム）、ミドルウェア、あるいは、所定のライブラリとともに実現される場合を含む。）により実現してもよい。さらに、ソフトウェアおよびハードウェアの混在処理により実現しても良い。なお、上記実施形態に係る撮像装置をハードウェアにより実現する場合、各処理を行うためのタイミング調整を行う必要があるのは言うまでもない。上記実施形態においては、説明便宜のため、実際のハードウェア設計で生じる各種信号のタイミング調整の詳細については省略している。
【００６４】
また、上記実施形態における処理方法の実行順序は、必ずしも、上記実施形態の記載に制限されるものではなく、発明の要旨を逸脱しない範囲で、実行順序を入れ替えることができるものである。
なお、本発明の具体的な構成は、前述の実施形態に限られるものではなく、発明の要旨を逸脱しない範囲で種々の変更および修正が可能である。
【産業上の利用可能性】
【００６５】
本実施形態にかかる撮像装置、撮像方法、プログラムおよび集積回路は、外部閃光による高輝度の横帯が撮像した映像（画像）に発生するのを防止し、かつ、動画として連続性を確保した画像（映像）を出力することが可能になるため、連続画像を撮像するデジタルカメラやビデオカメラなどに有用である。
【符号の説明】
【００６６】
１、２００  撮像装置
１０１  撮像部
１０２  閃光検出部
１０３、１０３Ａ、１０３Ｂ、１０３Ｃ、１０３Ｄ、１０３Ｅ  閃光補正部
２０１、６０１  第１選択部
２０２、６０２  出力選択部
２０３、７０３、９０３、１００３  遅延部
２０４  加算部
４０４  加算平均部
９０５  混合部
【手続補正３】
【補正対象書類名】図面
【補正対象項目名】全図
【補正方法】変更
【補正の内容】
【図１】
2010100866.tif 000020
【図２】
2010100866.tif 000021
【図４】
2010100866.tif 000022
【図６】
2010100866.tif 000023
【図８】
2010100866.tif 000024
【図１０】
2010100866.tif 000025
【図１１】
2010100866.tif 000026
【図１２】
2010100866.tif 000027
【図１４】
2010100866.tif 000028
【図１５】
2010100866.tif 000029
【図３】
2010100866.tif 000030
【図５】
2010100866.tif 000031
【図７】
2010100866.tif 000032
【図９】
2010100866.tif 000033
【図１３】
2010100866.tif 000034
【図１６】
2010100866.tif 000035
【図１７】
2010100866.tif 000036
【国際調査報告】
2010100866.tif 000037
2010100866.tif 000038