(57)【特許請求の範囲】
【請求項１】
画像を連続して撮像する撮像手段と、
前記撮像手段により撮像された前記画像を評価する評価手段と、
前記撮像手段により連続して撮像された前記画像のうちの、所定のタイミングで撮像された前記画像に対する評価に基づいて、所定のタイミングで撮像された前記画像を、前記画像を記録する記録手段に記録させるか否かを判定する判定手段と、
前記判定手段による判定結果に基づいて、前記記録手段に前記画像を記録させる記録制御手段と、
前記記録制御手段が、静止画像の撮像を要求するユーザの操作に応じて、１枚の前記画像を前記記録手段に記録させる場合において、前記撮像手段により連続して撮像された前記画像のうちの、前記静止画像の撮像の要求に応じたタイミングで撮像された前記画像である記録対象画像に対する評価と、前記記録対象画像の前に撮像された前記画像である比較対象画像に対する評価とを比較する静止画像比較手段と
を備え、
前記判定手段は、前記比較対象画像に対する評価と前記記録対象画像に対する評価との比較結果に基づいて、前記記録対象画像を前記記録手段に記録させるか否かを判定し、
前記静止画像比較手段は、前記判定手段により、前記記録対象画像を前記記録手段に記録させないと判定された場合、前記記録対象画像の後に前記撮像手段により撮像された前記画像を新たな記録対象画像として、前記比較対象画像との評価を比較する
撮像装置。
【請求項２】
前記記録制御手段が、動画像の撮像を要求するユーザの操作に応じて、複数のフレームからなる前記動画像の各フレームに対応する前記画像を前記記録手段に記録させる場合において、
前記撮像手段により連続して撮像された前記画像のうちの、所定のフレームに対応する前記画像として前記撮像手段により撮像された記録対象画像に対する評価と、前記所定のフレームの前のフレームに対応する前記画像である比較対象画像に対する評価とを比較する動画像比較手段
をさらに備え、
前記判定手段は、前記比較対象画像に対する評価と前記記録対象画像に対する評価との比較結果に基づいて、前記記録対象画像を前記記録手段に記録させるか否かを判定し、
前記記録制御手段は、前記判定手段により、前記記録対象画像を前記記録手段に記録させないと判定された場合、前記比較対象画像を前記所定のフレームに対応する画像として前記記録手段に記録させる
請求項１に記載の撮像装置。
【請求項３】
前記記録制御手段が、動画像の撮像を要求するユーザの操作に応じて、複数のフレームからなる前記動画像の各フレームに対応する前記画像を前記記録手段に記録させる場合において、
前記撮像手段により連続して撮像された前記画像のうちの、所定のフレームに対応する前記画像として前記撮像手段により撮像された記録対象画像と、前記所定のフレームの前後の複数のフレームに対応する前記画像をバッファリングするバッファと、
前記記録対象画像に対する評価と、前記所定のフレームの前後の複数のフレームに対応する前記画像に対するそれぞれの評価とを比較する動画像比較手段と
をさらに備え、
前記判定手段は、前記記録対象画像に対する評価と、前記複数のフレームに対応する画像に対するそれぞれの評価値との比較結果に基づいて、前記記録対象画像を前記記録手段に記録させるか否かを判定し、
前記記録制御手段は、前記判定手段により、前記記録対象画像を前記記録手段に記録させないと判定された場合、前記バッファにバッファリングされている複数の画像のうちの、前記所定のフレームの前のフレームに対応する前記画像を前記所定のフレームに対応する画像として前記記録手段に記録させる
請求項１に記載の撮像装置。
【請求項４】
前記記録制御手段は、前記判定手段により、前記記録対象画像を前記記録手段に記録させないと判定された場合、前記所定のフレームの前後のフレームに対応する前記画像であって、前記記録手段に記録させると判定された前記画像を合成し、合成した結果得られる合成画像を前記所定のフレームに対応する画像として前記記録手段に記録させる
請求項３に記載の撮像装置。
【請求項５】
前記判定手段により前記記録手段に記録させると判定された前記画像に対する評価に基づいて、前記撮像手段による前記画像の撮像時のフォーカスおよび露出を調整する調整手段
をさらに備える請求項１に記載の撮像装置。
【請求項６】
前記判定手段により前記記録手段に記録させると判定された前記画像に対する評価に基づいて、前記撮像手段により撮像される前記画像に対して画像処理を施す画像処理手段
をさらに備える請求項１に記載の撮像装置。
【請求項７】
前記評価手段は、前記撮像手段により撮像された前記画像の垂直方向の明るさの差分に基づいて、前記画像を評価する
請求項１に記載の撮像装置。
【請求項８】
前記記録制御手段は、動画像を前記記録手段に記録させる処理の実行中に、ユーザにより静止画像の撮像が要求された場合、動画像を前記記録手段に記録させる処理と並行して、静止画像を前記記録手段に記録させる処理を実行する
請求項１に記載の撮像装置。
【請求項９】
連続して撮像された画像を評価し、
連続して撮像された前記画像のうちの、所定のタイミングで撮像された前記画像に対する評価に基づいて、所定のタイミングで撮像された前記画像を、前記画像を記録する記録手段に記録させるか否かを判定し、
判定結果に基づいて、前記記録手段に前記画像を記録させ、
静止画像の撮像を要求するユーザの操作に応じて、１枚の前記画像を前記記録手段に記録させる場合において、前記連続して撮像された前記画像のうちの、前記静止画像の撮像の要求に応じたタイミングで撮像された前記画像である記録対象画像に対する評価と、前記記録対象画像の前に撮像された前記画像である比較対象画像に対する評価とを比較する
ステップを含み、
前記判定の処理においては、前記比較対象画像に対する評価と前記記録対象画像に対する評価との比較結果に基づいて、前記記録対象画像を前記記録手段に記録させるか否かが判定され、
前記比較の処理においては、前記判定の処理により、前記記録対象画像を前記記録手段に記録させないと判定された場合、前記記録対象画像の後に前記撮像された前記画像を新たな記録対象画像として、前記比較対象画像との評価が比較される
撮像方法。
【請求項１０】
連続して撮像された画像を評価し、
連続して撮像された前記画像のうちの、所定のタイミングで撮像された前記画像に対する評価に基づいて、所定のタイミングで撮像された前記画像を、前記画像を記録する記録手段に記録させるか否かを判定し、
判定結果に基づいて、前記記録手段に前記画像を記録させ、
静止画像の撮像を要求するユーザの操作に応じて、１枚の前記画像を前記記録手段に記録させる場合において、前記連続して撮像された前記画像のうちの、前記静止画像の撮像の要求に応じたタイミングで撮像された前記画像である記録対象画像に対する評価と、前記記録対象画像の前に撮像された前記画像である比較対象画像に対する評価とを比較する
ステップを含み、
前記判定の処理においては、前記比較対象画像に対する評価と前記記録対象画像に対する評価との比較結果に基づいて、前記記録対象画像を前記記録手段に記録させるか否かが判定され、
前記比較の処理においては、前記判定の処理により、前記記録対象画像を前記記録手段に記録させないと判定された場合、前記記録対象画像の後に前記撮像された前記画像を新たな記録対象画像として、前記比較対象画像との評価が比較される
処理を、コンピュータに実行させるプログラム。
【請求項１１】
画像を連続して撮像する撮像手段により撮像された前記画像を評価する評価手段と、
前記撮像手段により連続して撮像された前記画像のうちの、所定のタイミングで撮像された前記画像に対する評価に基づいて、所定のタイミングで撮像された前記画像を、前記画像を記録する記録手段に記録させるか否かを判定する判定手段と、
前記判定手段による判定結果に基づいて、前記記録手段に前記画像を記録させる記録制御手段と、
前記記録制御手段が、静止画像の撮像を要求するユーザの操作に応じて、１枚の前記画像を前記記録手段に記録させる場合において、前記撮像手段により連続して撮像された前記画像のうちの、前記静止画像の撮像の要求に応じたタイミングで撮像された前記画像である記録対象画像に対する評価と、前記記録対象画像の前に撮像された前記画像である比較対象画像に対する評価とを比較する静止画像比較手段と
を備え、
前記判定手段は、前記比較対象画像に対する評価と前記記録対象画像に対する評価との比較結果に基づいて、前記記録対象画像を前記記録手段に記録させるか否かを判定し、
前記静止画像比較手段は、前記判定手段により、前記記録対象画像を前記記録手段に記録させないと判定された場合、前記記録対象画像の後に前記撮像手段により撮像された前記画像を新たな記録対象画像として、前記比較対象画像との評価を比較する
画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置、撮像方法、プログラム、および画像処理装置に関し、特に、例えば、外部の閃光による悪影響を受けた画像を除外して、画像を記録することができるようにした撮像装置、撮像方法、プログラム、および画像処理装置に関する。
【背景技術】
【０００２】
最近のデジタルカメラでは、デジタルスチルカメラまたはデジタルビデオカメラのいずれであっても、静止画像と動画像とを撮像することができる。
【０００３】
デジタルカメラでは、CCD(Charge Coupled Device)やCMOS(Complementary Metal-Oxide Semiconductor)センサなどの撮像素子において、画像の撮像が行われる。即ち、撮像素子では、所定の露光時間だけ光が受光され、その光の受光量に応じた電気信号としての画像が出力される。この画像は、例えば、半導体メモリや光ディスク等の記録媒体に記録される。
【０００４】
例えば、ユーザが、デジタルカメラのシャッタボタンを操作すると、デジタルカメラは、ユーザの操作に応じたタイミングで、１枚の画像を撮像し、静止画像として記録する。また、ユーザが、デジタルカメラの録画ボタンを操作すると、デジタルカメラは、例えば、１／３０秒などのフレーム周期で撮像を行い、その結果得られる連続的な画像、つまり動画像に対し、所定の符号化方式で圧縮する処理を施して記録する。
【０００５】
また、撮像素子が連続して撮像した画像の差分を演算し、その演算結果に基づいて、手ぶれの発生を警告する撮像装置がある（例えば、特許文献１および２参照）。
【特許文献１】特開２００５−２０２２６号公報
【特許文献２】特開昭６３−１２９３２８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
ところで、撮像素子による撮像時に、外部に閃光が発生する（例えば、他のデジタルカメラがフラッシュを発光する）と、撮像によって得られる画像は、外部の閃光による影響により明るくなり、さらには、スミアが発生することがある。
【０００７】
例えば、ユーザによるシャッタボタンの操作に応じたタイミングで撮像素子が画像の撮像を行っている間に、外部に閃光が発生すると、デジタルカメラでは、ユーザによりシャッタボタンが操作された時点の明るさ、即ち、ユーザが撮像を意図した明るさよりも明るい静止画像が撮像される。
【０００８】
また、例えば、デジタルカメラが動画像を撮像しているときに、外部に閃光が発生すると、その閃光による影響を受けた画像だけが明るくなることにより、連続するフレームの画像どうしの差分が大きくなり、画像をブロック単位で処理するとともにフレーム間の相関を利用する、例えば、MPEG(Moving Picture Experts Group)などの符号化方式で圧縮する処理において、例えば、ブロックノイズが発生したり、圧縮率が低下する。
【０００９】
本発明は、このような状況に鑑みてなされたものであり、例えば、外部の閃光による悪影響を受けた画像を除外して、画像を記録することができるようにするものである。
【課題を解決するための手段】
【００１０】
本発明の一側面の撮像装置は、画像を連続して撮像する撮像手段と、前記撮像手段により撮像された前記画像を評価する評価手段と、前記撮像手段により連続して撮像された前記画像のうちの、所定のタイミングで撮像された前記画像に対する評価に基づいて、所定のタイミングで撮像された前記画像を、前記画像を記録する記録手段に記録させるか否かを判定する判定手段と、前記判定手段による判定結果に基づいて、前記記録手段に前記画像を記録させる記録制御手段と、前記記録制御手段が、静止画像の撮像を要求するユーザの操作に応じて、１枚の前記画像を前記記録手段に記録させる場合において、前記撮像手段により連続して撮像された前記画像のうちの、前記静止画像の撮像の要求に応じたタイミングで撮像された前記画像である記録対象画像に対する評価と、前記記録対象画像の前に撮像された前記画像である比較対象画像に対する評価とを比較する静止画像比較手段とを備え、前記判定手段は、前記比較対象画像に対する評価と前記記録対象画像に対する評価との比較結果に基づいて、前記記録対象画像を前記記録手段に記録させるか否かを判定し、前記静止画像比較手段は、前記判定手段により、前記記録対象画像を前記記録手段に記録させないと判定された場合、前記記録対象画像の後に前記撮像手段により撮像された前記画像を新たな記録対象画像として、前記比較対象画像との評価を比較する。
【００１１】
本発明の一側面の撮像方法またはプログラムは、連続して撮像された画像を評価し、連続して撮像された前記画像のうちの、所定のタイミングで撮像された前記画像に対する評価に基づいて、所定のタイミングで撮像された前記画像を、前記画像を記録する記録手段に記録させるか否かを判定し、判定結果に基づいて、前記記録手段に前記画像を記録させ、静止画像の撮像を要求するユーザの操作に応じて、１枚の前記画像を前記記録手段に記録させる場合において、前記連続して撮像された前記画像のうちの、前記静止画像の撮像の要求に応じたタイミングで撮像された前記画像である記録対象画像に対する評価と、前記記録対象画像の前に撮像された前記画像である比較対象画像に対する評価とを比較するステップを含み、前記判定の処理においては、前記比較対象画像に対する評価と前記記録対象画像に対する評価との比較結果に基づいて、前記記録対象画像を前記記録手段に記録させるか否かが判定され、前記比較の処理においては、前記判定の処理により、前記記録対象画像を前記記録手段に記録させないと判定された場合、前記記録対象画像の後に前記撮像された前記画像を新たな記録対象画像として、前記比較対象画像との評価が比較される。
本発明の一側面の画像処理装置は、画像を連続して撮像する撮像手段により撮像された前記画像を評価する評価手段と、前記撮像手段により連続して撮像された前記画像のうちの、所定のタイミングで撮像された前記画像に対する評価に基づいて、所定のタイミングで撮像された前記画像を、前記画像を記録する記録手段に記録させるか否かを判定する判定手段と、前記判定手段による判定結果に基づいて、前記記録手段に前記画像を記録させる記録制御手段と、前記記録制御手段が、静止画像の撮像を要求するユーザの操作に応じて、１枚の前記画像を前記記録手段に記録させる場合において、前記撮像手段により連続して撮像された前記画像のうちの、前記静止画像の撮像の要求に応じたタイミングで撮像された前記画像である記録対象画像に対する評価と、前記記録対象画像の前に撮像された前記画像である比較対象画像に対する評価とを比較する静止画像比較手段とを備え、前記判定手段は、前記比較対象画像に対する評価と前記記録対象画像に対する評価との比較結果に基づいて、前記記録対象画像を前記記録手段に記録させるか否かを判定し、前記静止画像比較手段は、前記判定手段により、前記記録対象画像を前記記録手段に記録させないと判定された場合、前記記録対象画像の後に前記撮像手段により撮像された前記画像を新たな記録対象画像として、前記比較対象画像との評価を比較する。
【００１２】
本発明の一側面においては、連続して撮像された画像が評価され、連続して撮像された画像のうちの、所定のタイミングで撮像された画像に対する評価に基づいて、その画像を記録手段に記録させるか否かが判定される。そして、その判定結果に基づいて、記録手段に画像が記録される。静止画像の撮像を要求するユーザの操作に応じて、１枚の画像を記録手段に記録させる場合において、連続して撮像された画像のうちの、静止画像の撮像の要求に応じたタイミングで撮像された画像である記録対象画像に対する評価と、記録対象画像の前に撮像された画像である比較対象画像に対する評価とが比較される。さらに、比較対象画像に対する評価と記録対象画像に対する評価との比較結果に基づいて、記録対象画像を記録手段に記録させるか否かが判定され、記録対象画像を記録手段に記録させないと判定された場合、記録対象画像の後に撮像された画像を新たな記録対象画像として、比較対象画像との評価が比較される。
【発明の効果】
【００１３】
本発明の一側面によれば、外部の閃光による悪影響を受けた画像を除外して、画像を記録することができる。
【発明を実施するための最良の形態】
【００１４】
以下に本発明の実施の形態を説明する。
【００２２】
以下、本発明を適用した具体的な実施の形態について、図面を参照しながら詳細に説明する。
【００２３】
図１は、本発明を適用した撮像装置１１の一実施の形態の構成例を示すブロック図である。
【００２４】
図１において、撮像装置１１は、レンズ部１２、撮像部１３、画像処理部１４、バッファ１５、記録表示処理部１６、バッファ１７、記録部１８、表示部１９、評価部２０、記憶部２１、操作部２２、および制御部２３から構成される。
【００２５】
レンズ部１２は、レンズ機構３１、絞り（アイリス）機構３２等の光学系を備え、そこに入射する被写体からの光を、撮像部１３の撮像素子４１上に集光させる。
【００２６】
即ち、レンズ機構３１は、例えば、複数枚のレンズや、それらのレンズを駆動する駆動部などを備え、制御部２３の制御に基づいて、ズームやフォーカス（ピント）を調整する。
【００２７】
絞り機構３２は、制御部２３の制御に基づいて、撮像素子４１に入射する光の光量を調整する。
【００２８】
撮像部１３は、撮像素子４１、CDS（Correlated Double Sampling）回路４２、A/D(Analog/Digital)回路４３、シグナルジェネレータ（SG）４４、およびタイミングジェネレータ（TG）４５を備え、被写体を撮像し、その結果得られる画像を、画像処理部１４に供給する。
【００２９】
即ち、撮像素子４１は、例えば、CCD（Charge Coupled Device）や、CMOS(Complementary Metal Oxide Semiconductor)センサなどで構成され、レンズ部１２を介して入射する被写体からの光を受光して光電変換することにより、電気信号としての画像信号を出力する。
【００３０】
例えば、撮像素子４１は、受光した光の量に応じて電荷を蓄積する複数の画素が、格子状の配置で平面状に敷き詰められて構成されており、タイミングジェネレータ４５から供給される水平駆動信号と垂直駆動信号にしたがって、所定の露光時間だけレンズ部１２からの光を受光する。撮像素子４１の各画素には、受光した光の量に応じた電荷が蓄積され、撮像素子４１は、その電荷を、アナログの画像信号として、CDS回路４２に供給する。
【００３１】
CDS回路４２は、撮像素子４１から供給されたアナログの画像信号のノイズ成分を、相関２重サンプリングを施すことによって除去する。CDS回路４２は、ノイズ成分を除去した画像信号をA/D回路４３に供給する。
【００３２】
A/D回路４３は、CDS回路４２からのアナログの画像信号をA/D変換し、その結果得られるデジタルの画像データを画像処理部１４に供給する。
【００３３】
シグナルジェネレータ４４は、制御部２３の制御に基づいて、水平同期信号と垂直同期信号をそれぞれ発生し、タイミングジェネレータ４５に出力する。
【００３４】
タイミングジェネレータ４５は、シグナルジェネレータ４４から供給された水平同期信号と垂直同期信号に基づいて、撮像素子４１を駆動させるための水平駆動信号と垂直駆動信号をそれぞれ発生し、撮像素子４１に供給する。
【００３５】
画像処理部１４は、Ｙ−Ｃ分離回路５１、フィルタ回路５２，ＷＢ（White Balance）回路５３、およびアパコンガンマ回路５４から構成され、撮像部１３のA/D回路４３から供給される画像データに、所定の画像処理を施す。画像処理部１４は、画像処理を施した画像（画像データ）を、記録表示処理部１６および評価部２０に供給する。
【００３６】
即ち、Ｙ−Ｃ分離回路５１は、撮像部１３からの画像データを、輝度信号（Ｙ）とクロマ信号（Ｃ）とに分離するＹ−Ｃ分離処理を行う。
【００３７】
フィルタ回路５２は、撮像部１３からの画像データをフィルタリングし、その画像データに含まれるノイズ成分をカットするノイズリダクション処理を行う。
【００３８】
ＷＢ回路５３は、例えば、白い被写体のＲＧＢレベルが等しくなるように、撮像部１３からの画像データにゲインを乗算し、画像のホワイトバランスを調整する処理を行う。
【００３９】
アパコンガンマ回路５４は、撮像部１３からの画像データに対して、画像のエッジ部分を強調するアパーチャ補正や、画像の色合いを調整するガンマ補正などの画質を調整する処理を行う。
【００４０】
バッファ１５には、画像処理部１４が画像処理を行う際に、一時的に記憶させる必要があるデータが記憶される。
【００４１】
記録表示処理部１６には、画像処理部１４から画像処理が施された画像（データ）が供給され、記録表示処理部１６は、その画像を、記録部１８に記録させる記録制御、および表示部１９に表示させる表示制御を行う。
【００４２】
例えば、記録表示処理部１６は、静止画像については、ユーザからの静止画像の撮像の要求に応じたタイミングで、撮像素子４１により撮像され、画像処理部１４から供給される１枚の画像を、記録部１８に記録させる。また、記録表示処理部１６は、動画像については、撮像素子４１により連続して撮像され、画像処理部１４から供給される一連の画像、つまり、動画像に対し、例えば、MPEG(Moving Picture Experts Group)等の所定の符号化方式で圧縮する処理を施し、その結果得られるデータを記録部１８に記録させる。
【００４３】
バッファ１７には、記録表示処理部１６が、記録制御や表示制御を行う際に、一時的に記憶させる必要があるデータが記憶される。
【００４４】
記録部１８は、例えば、磁気テープや、磁気ディスク、光ディスク、光磁気ディスク、
半導体メモリなどの記録媒体を駆動するドライブからなり、記録表示処理部１６から供給されるデータを、記録媒体に記録する。なお、記録媒体は、記録部１８に内蔵されていてもよく、また、記録部１８に着脱可能となっていてもよい。
【００４５】
表示部１９は、例えば、LCD（Liquid Crystal Display）パネルなどからなり、撮像部１３により撮像され、記録表示処理部１６から供給される画像を表示する。
【００４６】
評価部２０は、画像の明るさや色の分布を検波する検波回路６１を備え、評価部２０には、撮像素子４１により撮像された画像が画像処理部１４から供給される。検波回路６１は、撮像素子４１により撮像され、画像処理部１４から供給された画像を検波し、その結果得られる情報、例えば、画像の所定の部分の明るさや色の分布を示す情報や、画像の所定の部分の空間周波数を示す情報などを、撮像素子４１により撮像された画像に対する評価値として出力する。評価部２０は、検波回路６１が出力する評価値を、制御部２３に供給する。
【００４７】
記憶部２１は、ROM（Read Only Memory），RAM(Random Access Memory)、またはEEPROM（Electronically Erasable and Programmable Read Only Memory）などからなり、制御部２３の図示しないCPU（Central Processing Unit）が実行するプログラムや、制御部２３が処理を行う上で必要なデータ、撮像装置１１の電源がオフにされたときも保持しておく必要があるデータなどを記憶する。
【００４８】
操作部２２は、例えば、図示しないシャッタボタンや録画ボタンなどを備え、ユーザによって操作される。操作部２２は、ユーザの操作に応じて、静止画像の撮像を要求する信号や、動画像の撮像の開始または停止を要求する信号を制御部２３に供給する。
【００４９】
制御部２３は、図示しないCPUと、差分値を演算する演算回路７１とを備えている。制御部２３には、撮像素子４１により撮像された画像に対する評価値が評価部２０から供給され、制御部２３は、評価部２０から供給される評価値を記憶部２１に一時的に記憶させる。演算回路７１は、所定の２つの評価値どうしの差分値を演算し、制御部２３は、演算回路７１により算出された差分値に基づいて、撮像装置１１の各部を制御する。
【００５０】
例えば、制御部２３は、ユーザの操作に応じて静止画像または動画像が撮像された場合において、演算回路７１により算出された差分値に基づいて、撮像装置１１の各部を制御し、外部の閃光による悪影響を受けた画像を排除し、外部の閃光による悪影響を受けていない画像を記録部１８に記録させる。
【００５１】
ここで、図２および図３を参照して、外部の閃光により画像が受ける影響について説明する。なお、撮像素子４１がCCDである場合と、撮像素子４１がCMOSである場合とで、外部の閃光により画像が受ける影響は、それぞれ相違する。
【００５２】
図２は、撮像素子４１がCCDである場合において、外部の閃光により画像が受ける影響を説明する図である。
【００５３】
図２に示すように、CCDは、図１のシグナルジェネレータ４４が出力する垂直同期信号に同期して撮像を行っており、例えば、時刻Ｔ11から時刻Ｔ12までの１フレーム分の時間の露光により、CCDの各画素には、画像１０１に対応する画像信号となる電荷が蓄積される。また、時刻Ｔ12から時刻Ｔ13までの１フレーム分の時間の露光により、CCDの各画素には、画像１０２に対応する画像信号となる電荷が蓄積され、時刻Ｔ13から時刻Ｔ14までの１フレーム分の時間の露光により、CCDの各画素には、画像１０３に対応する画像信号となる電荷が蓄積される。
【００５４】
そして、ある１フレーム分の時間の露光によりCCDの各画素に蓄積された電荷は、その次の１フレーム分の時間の露光が行われている間に読み出され、図１のCDS回路４２に供給される。例えば、画像１０２に対応する画像信号となる電荷は、画像１０３の撮像のための露光が行われている間に読み出される。
【００５５】
また、例えば、CCDの各画素に蓄積された電荷の読み出しは、画像の水平方向に並ぶ画素の水平ラインごとに順番に行われる。例えば、画像の垂直方向の上から下に向かって、１ライン目からｎライン目までの水平ラインでCCDが構成されているとすると、１ライン目から電荷の読み出しが開始され、順次、ｎライン目まで電荷の読み出しが行われる。
【００５６】
また、CCDでは、各水平ラインの露光は、同時に行われる。従って、例えば、画像１０２の撮像のための露光が行われているときに、外部の閃光が発生すると、その閃光の影響により、画像１０２の全体が、画像１０２の直前の画像１０１や、画像１０２の直後の画像１０３よりも、明るくなる。
【００５７】
このように、画像１０２が画像１０１および画像１０３よりも明るくなることにより、例えば、撮像装置１１が動画像を撮像する場合においては、記録表示処理部１６が画像を圧縮する処理において、画像１０１と画像１０２の差分、および画像１０２と画像１０３の差分が大きくなり、ブロックノイズが発生したり、圧縮率が低下する。
【００５８】
また、例えば、ユーザからの静止画像の撮像の要求に応じて撮像素子４１により撮像された画像が画像１０２であった場合には、ユーザが撮像を意図した画像、例えば、ユーザが操作部２２のシャッタボタンの操作を開始しようとしたときに表示部１９に表示されていた画像よりも明るい画像が、静止画像として記録部１８に記録される。
【００５９】
次に、図３は、撮像素子４１がCMOSである場合において、外部の閃光により画像が受ける悪影響を説明する図である。
【００６０】
図３に示すように、図２のCCDと同様に、CMOSは、図１のシグナルジェネレータ４４が出力する垂直同期信号に同期して撮像を行っており、その撮像により、CMOSの各画素には、画像１１１乃至画像１１３に対応する画像信号となる電荷が蓄積される。
【００６１】
ここで、CMOSでは、CCDと異なり、水平ラインごとにずらして露光が開始される。即ち、例えば、CMOSでは、画像１１２の撮像時には、時刻Ｔ12で１ライン目の露光が開始され、１ライン目の露光が開始されてから所定の時間ｔが経過した後に、２ライン目の露光が開始される。そして、以下、同様に、CMOSでは、所定の時間ｔずつずらして、ｎライン目までの露光が開始される。水平ラインの露光は、露光の開始から、例えば、１フレーム分の時間の経過後に終了され、その終了後に、各水平ラインの画素に蓄積された電荷、即ち、画像１１２に対応する画像信号となる電荷が、順次読み出される。
【００６２】
このように、CMOSでは、各水平ラインの露光の開始と終了の時刻がずれているため、例えば、時刻Ｔ12から時刻Ｔ13までの間のある時刻においては、CMOSの上部分の画素では、画像１１２に対応する画像信号となる電荷の蓄積が行われ、CMOSの下部分の画素では画像１１１に対応する画像信号となる電荷の蓄積が行われる。
【００６３】
従って、例えば、時刻Ｔ12から時刻Ｔ13までの間のある時刻において、外部の閃光が発生すると、その閃光の影響により、画像１１１は、下部分が上部分よりも明るくなった不自然な画像となり、画像１１２は、上部分が下部分よりも明るくなった不自然な画像となる。
【００６４】
そして、例えば、ユーザからの静止画像の撮像の要求に応じて撮像素子４１により撮像された画像が画像１１２であった場合には、ユーザが撮像を意図した明るさと異なり、上部分が下部分よりも明るくなった不自然な画像が、静止画像として記録部１８に記録される。
【００６５】
また、例えば、撮像装置１１が動画像を撮像する場合においては、画像１１１と画像１１２との明るさの分布が異なり、画像１１２と画像１１３との明るさの分布も異なるので、撮像素子４１がCCDである場合と同様に、記録表示処理部１６が画像を圧縮する処理において、ブロックノイズが発生したり、圧縮率が低下する。
【００６６】
このように、撮像素子４１による撮像時に、外部に閃光が発生すると、撮像によって得られる画像は、外部の閃光による悪影響を受ける。そこで、上述したように、制御部２３は、演算回路７１により算出された差分値に基づいて、撮像装置１１の各部を制御し、外部の閃光による悪影響を受けた画像を排除し、外部の閃光による悪影響を受けていない画像を記録部１８に記録させる。
【００６７】
次に、図４は、図１の撮像装置１１において静止画像を撮像する処理を説明するフローチャートである。
【００６８】
撮像装置１１は、ユーザの操作に応じて電源がオンになると、処理を開始し、ステップＳ１１において、撮像素子４１は、タイミングジェネレータ４５から供給される水平駆動信号と垂直駆動信号にしたがって、画像を撮像する。撮像部１３は、撮像素子４１が撮像した画像を画像処理部１４に供給し、画像処理部１４は、その画像に所定の画像処理を施して、記録表示処理部１６および評価部２０に供給する。
【００６９】
ステップＳ１１の処理後、ステップＳ１２に進み、記録表示処理部１６は、画像処理部１４が画像処理を施した画像を、バッファ１７にバッファリングし、その画像を表示部１９に表示させる表示制御を行い、ステップＳ１３に進む。
【００７０】
ステップＳ１３において、評価部２０の検波回路６１は、ステップＳ１１で画像処理部１４から供給された画像を検波し、その画像に対する評価値を出力する。評価部２０は、検波回路６１から出力された評価値を制御部２３に供給し、制御部２３は、評価部２０からの評価値を記憶部２１に一時的に記憶させて、ステップＳ１４に進む。
【００７１】
ステップＳ１４において、制御部２３の演算回路７１は、直前のステップＳ１３で評価部２０から供給された評価値と、記憶部２１に既に記憶されている評価値、即ち、直前のステップＳ１３以前に評価部２０から供給されて記憶部２１に記憶させた評価値との差分値を算出し、ステップＳ１５に進む。なお、記憶部２１に評価値がまだ記憶されていなければ、制御部２３は、ステップＳ１４をスキップしてステップＳ１５に進む。
【００７２】
ステップＳ１５において、制御部２３は、静止画像または動画像の撮像が要求されたか否かを判定する。
【００７３】
例えば、ユーザが操作部２２のシャッタボタンを操作し、静止画像の撮像を要求する信号が、操作部２２から制御部２３に供給されると、操作部２２は、静止画像の撮像が要求されたと判定して、ステップＳ１６に進む。
【００７４】
ステップＳ１６において、撮像素子４１は、静止画像の撮像が要求されたタイミングに応じて、記録部１８が記録する対象となる画像である記録対象画像を撮像する。撮像部１３は、撮像素子４１が撮像した記録対象画像を画像処理部１４に供給し、画像処理部１４は、その記録対象画像に所定の画像処理を施して、記録表示処理部１６および評価部２０に供給する。
【００７５】
ステップＳ１６の処理後、ステップＳ１７に進み、記録表示処理部１６は、画像処理部１４が画像処理を施した記録対象画像を、バッファ１７にバッファリングし、その記録対象画像を表示部１９に表示させる表示制御を行い、ステップＳ１８に進む。
【００７６】
ステップＳ１８において、評価部２０の検波回路６１は、ステップＳ１６で画像処理部１４から供給された記録対象画像を検波し、記録対象画像に対する評価値を出力する。評価部２０は、検波回路６１から出力された評価値を制御部２３に供給し、制御部２３は、評価部２０からの評価値を記憶部２１に一時的に記憶させて、ステップＳ１９に進む。
【００７７】
ステップＳ１９において、制御部２３は、記録対象画像の前に撮像された画像を比較対象画像とし、記憶部２１に記憶されている評価値のうちの、比較対象画像に対する評価値を取得する。例えば、制御部２３は、記録対象画像の前に撮像された画像のうちの、静止画像の撮像が要求された時点で、表示部１９に表示されていた画像を比較対象画像とし、その比較対象画像に対する評価値を取得する。
【００７８】
そして、制御部２３の演算回路７１は、記録対象画像に対する評価値と、比較対象画像に対する評価値との差分値を演算し、ステップＳ２０に進む。
【００７９】
ステップＳ２０において、制御部２３は、演算回路７１が算出した差分値に基づき、記録対象画像を記録部１８に記録させるか否かを判定する。
【００８０】
例えば、制御部２３は、比較対象画像に対する評価値と記録対象画像に対する評価値との差分値が、予め設定されている基準値以上であれば、記録対象画像を記録部１８に記録させないと判定する。一方、制御部２３は、比較対象画像に対する評価値と記録対象画像に対する評価値との差分値が、予め設定されている基準値未満であれば、記録対象画像を記録部１８に記録させると判定する。
【００８１】
即ち、記録対象画像が外部の閃光による悪影響を受けていれば、記録対象画像は比較対象画像より明るくなっており、比較対象画像に対する評価値と記録対象画像に対する評価値との差分値は大きな値となる。従って、差分値が、予め設定されている基準値以上であれば、記録対象画像を記録部１８に記録させないと判定することによって、外部の閃光による悪影響を受けた画像が記録部１８に記録されることが回避される。
【００８２】
これに対し、記録対象画像が外部の閃光による悪影響を受けていなければ、記録対象画像は比較対象画像と同等の明るさとなっており、比較対象画像に対する評価値と記録対象画像に対する評価値との差分値は小さな値となる。従って、差分値が、予め設定されている基準値未満であれば、記録対象画像を記録部１８に記録させると判定することによって、外部の閃光による悪影響を受けていない画像が記録部１８に記録される。
【００８３】
ステップＳ２０において、記録対象画像を記録部１８に記録させると判定された場合、ステップＳ２１に進み、制御部２３は、記録表示処理部１６を制御し、記録対象画像を記録部１８に記録させて、ステップＳ１１に戻り、以下、同様の処理が繰り返される。
【００８４】
一方、ステップＳ２０において、記録対象画像を記録部１８に記録させないと判定された場合、ステップＳ１６に戻り、撮像素子４１は新しい記録対象画像を撮像し、その新しい記録対象画像に対して、同様の処理が行われる。
【００８５】
一方、ステップＳ１５において、動画像の撮像が要求されたと判定された場合、ステップＳ２２に進み、動画像を撮像する処理（後述する図６の処理）が行われ、ステップＳ２２の処理後、ステップＳ１１に戻る。また、ステップＳ１５において、静止画像および動画像の撮像が要求されていないと判定された場合、ステップＳ１１に戻り、以下、同様の処理が繰り返される。
【００８６】
次に、図５は、撮像装置１１において静止画像を撮像する処理を説明する図である。なお、図５には、CMOSにより撮像される画像が示されている。
【００８７】
図３を参照して説明したように、CMOSでは、水平ラインごとにずらして露光が開始される。
【００８８】
例えば、ユーザからの静止画像の撮像の要求に応じて、撮像素子４１が記録対象画像として画像１２２を撮像すると、制御部２３の演算回路７１は、評価部２０から供給される画像１２２に対する評価値と、記憶部２１に記憶されている比較対象画像としての画像１２１に対する評価値との差分値を演算する（例えば、図４のステップＳ１９の処理）。
【００８９】
ここで、例えば、図５に示すように、撮像素子４１による画像１２２の撮像時に外部の閃光が発生していれば、その閃光の影響により、画像１２２は、その上部分が下部分よりも明るくなるとともに、画像１２２の上部分は画像１２１よりも明るくなる。このように画像１２２が画像１２１よりも明るくなることにより、画像１２１に対する評価値と、画像１２２に対する評価値との差分値は大きな値になる。
【００９０】
そして、この差分値に基づき、制御部２３は、記録対象画像を記録部１８に記録させるか否かを判定する処理（例えば、図４のステップＳ２０の処理）において、画像１２２を記録部１８に記録させないと判定する。
【００９１】
制御部２３は、画像１２２を記録部１８に記録させないと判定した場合、画像１２２を破棄し、撮像素子４１は、画像１２２に続いて新しい記録対象画像として画像１２３を撮像する。そして、制御部２３の演算回路７１は、画像１２３に対する評価値と、記憶部２１に記憶されている画像１２１に対する評価値との差分値を演算する。
【００９２】
図５に示すように、撮像素子４１による画像１２３の撮像時に外部の閃光が発生していなければ、画像１２３は画像１２１と同等の明るさとなる。これにより、画像１２１に対する評価値と、画像１２３に対する評価値との差分値は小さな値になり、この差分値に基づき、制御部２３は、記録対象画像を記録部１８に記録させるか否かを判定する処理（例えば、図４のステップＳ２０の処理）において、画像１２３を記録部１８に記録させると判定する。
【００９３】
そして、制御部２３は、記録表示処理部１６を制御して、画像１２３を記憶部２１に記憶させる（例えば、図４のステップＳ２１の処理）。
【００９４】
以上のように、撮像装置１１において静止画像を撮像する処理において、比較対象画像の評価値と記録対象画像の評価値との差分値に基づき、記録対象画像を記録部１８に記録させるか否かを判定する処理を行うことにより、外部の閃光による悪影響を受けた画像を排除して、ユーザが撮像を意図した画像、例えば、ユーザによりシャッタボタンが操作されて静止画像の撮像が要求された時点に、表示部１９に表示されていた画像に類似する画像を撮像することができる。
【００９５】
次に、図６は、図１の制御部２３が、撮像装置１１において動画像を撮像させる処理を説明するフローチャートである。例えば、ユーザが、操作部２２の録画ボタンを操作し、図４のステップＳ１５において、動画像の撮像が要求されたと判定されると、処理が開始される。
【００９６】
ステップＳ３１において、制御部２３は、動画像の撮像が要求された時点で撮像素子４１が撮像した画像を比較対象画像とし、記録部１８に記録される動画像のフレーム番号を表す変数ｎを、初期値としての１にセットして、ステップＳ３２に進む。
【００９７】
ステップＳ３２において、撮像素子４１は、動画像のｎフレーム目として記録部１８が記録する対象となる画像である記録対象画像を撮像する。撮像部１３は、記録対象画像を画像処理部１４に供給し、画像処理部１４は、その記録対象画像に所定の画像処理を施して、記録表示処理部１６および評価部２０に供給する。
【００９８】
ステップＳ３２の処理後、ステップＳ３３に進み、記録表示処理部１６は、画像処理部１４が画像処理を施した記録対象画像を、バッファ１７にバッファリングし、その画像を表示部１９に表示させる表示制御を行い、ステップＳ３４に進む。なお、記録表示処理部１６は、バッファ１７の記憶領域のうちの、比較対象画像が記録されている領域とは異なる領域に記録対象画像をバッファリングする。
【００９９】
ステップＳ３４において、評価部２０の検波回路６１は、画像処理部１４から供給された記録対象画像を検波し、記録対象画像に対する評価値を出力する。評価部２０は、検波回路６１から出力された評価値を制御部２３に供給し、制御部２３は、評価部２０からの評価値を記憶部２１に一時的に記憶させて、ステップＳ３５に進む。
【０１００】
ステップＳ３５において、制御部２３の演算回路７１は、記憶部２１に記憶されている比較対象画像に対する評価値（例えば、図４のステップＳ１３で記憶部２１に一時的に記憶された評価値）と、直前のステップＳ３４で評価部２０から供給された記録対象画像に対する評価値との差分値を演算し、ステップＳ３６に進む。
【０１０１】
ステップＳ３６において、制御部２３は、演算回路７１が演算した差分値に基づき、記録対象画像をｎフレーム目の画像として記録部１８に記録させるか否かを判定する。
【０１０２】
例えば、制御部２３は、図４のステップＳ２０の処理と同様に、比較対象画像に対する評価値と記録対象画像に対する評価値との差分値が、予め設定されている基準値以上であれば、記録対象画像をｎフレーム目の画像として記録部１８に記録させないと判定し、比較対象画像に対する評価値と記録対象画像に対する評価値との差分値が、予め設定されている基準値未満であれば、記録対象画像をｎフレーム目の画像として記録部１８に記録させると判定する。
【０１０３】
ステップＳ３６において、記録対象画像をｎフレーム目の画像として記録部１８に記録させると判定された場合、ステップＳ３７に進み、制御部２３は、記録表示処理部１６を制御し、記録対象画像をｎフレーム目の画像として記録部１８に記録させる。
【０１０４】
ステップＳ３７の処理後、ステップＳ３８に進み、制御部２３は、直前のステップＳ３７で記録部１８に記録させた画像を、新たな比較対象画像として、ステップＳ４０に進む。
【０１０５】
一方、ステップＳ３６において、記録対象画像をｎフレーム目の画像として記録部１８に記録させないと判定された場合、ステップＳ３９に進み、制御部２３は、画像処理部１４を制御し、直前のステップＳ３３で画像処理部１４から供給された記録対象画像を破棄させる。そして、制御部２３は、バッファ１７にバッファリングされている比較対象画像をｎフレーム目の画像として記録部１８に記録させ、ステップＳ４０に進む。
【０１０６】
即ち、制御部２３は、外部の閃光による悪影響を受けていると判定された記録対象画像を破棄して、例えば、ｎ−１フレーム目の画像として記録されている比較対象画像を、ｎフレーム目の画像として記録部１８に記録させる。
【０１０７】
ステップＳ４０において、制御部２３は、ユーザの操作に応じ、操作部２２から、動画像の撮像の終了を要求する信号が供給されたか否かを判定する。
【０１０８】
ステップＳ４０において、動画像の撮像の終了を要求する信号が供給されていないと判定された場合、ステップＳ４１に進み、制御部２３は、フレーム番号を表す変数ｎを１だけインクリメントし、ステップＳ３２に戻り、以下、同様の処理が繰り返される。
【０１０９】
一方、ステップＳ４０において、動画像の撮像の終了を要求する信号が供給されたと判定された場合、処理は終了される。
【０１１０】
次に、図７は、撮像装置１１において動画像を撮像する処理を説明する図である。なお、図７には、CMOSにより撮像される画像が示されている。
【０１１１】
例えば、制御部２３は、まず、動画像の撮像が要求された時点で撮像された画像１３１を比較対象画像とし、画像１３１の次に撮像された画像１３２を記録対象画像として、画像１３２を１フレーム目の画像として記録部１８に記録させるか否かを判定する処理を行う。そして、以下、順次、制御部２３は、撮像素子４１により撮像される画像１３３乃至１３６を２乃至５フレーム目の画像として記録部１８に記録させるか否かを判定する処理を行う。
【０１１２】
ここで、例えば、図７に示すように、画像１３４および画像１３５の撮像時に外部に閃光が発生していれば、その閃光の影響により、画像１３４は、下部分が上部分よりも明るくなり、画像１３５は、上部分が下部分よりも明るくなる。また、画像１３４および画像１３５は、画像１３１、画像１３２、画像１３３、および画像１３６よりも明るくなっており、画像１３１、画像１３２、画像１３３、および画像１３６は、同等の明るさとなる。
【０１１３】
制御部２３は、画像１３２を１フレーム目の画像として記録部１８に記録させるか否かを判定する処理（例えば、図６のステップＳ３６の処理）において、画像１３１と画像１３２は同等の明るさであり、それらの画像に対する評価値の差分値は小さな値になるので、画像１３２を１フレーム目の画像として記録部１８に記録させると判定する。そして、その判定結果に応じて、記録表示処理部１６は、画像１３２を１フレーム目の画像として記録部１８に記録させる（例えば、図６のステップＳ３７の処理）。
【０１１４】
また、制御部２３は、画像１３３を２フレーム目の画像として記録部１８に記録させるか否かを判定する処理においても、画像１３２を１フレーム目の画像として記録部１８に記録させるか否かを判定する処理と同様に、画像１３３を２フレーム目の画像として記録部１８に記録させると判定し、記録表示処理部１６は、画像１３３を２フレーム目の画像として記録部１８に記録させる（例えば、図６のステップＳ３７の処理）。
【０１１５】
一方、制御部２３は、画像１３４を３フレーム目の画像として記録部１８に記録させるか否かを判定する処理においては、外部の閃光により画像１３４が画像１３３よりも明るくなっていることより、画像１３４を３フレーム目の画像として記録部１８に記録させないと判定する。そして、その判定結果に応じて、記録表示処理部１６は、画像１３３を３フレーム目の画像として記録部１８に記録させる（例えば、図６のステップＳ３９の処理）。
【０１１６】
また、制御部２３は、画像１３５を４フレーム目の画像として記録部１８に記録させるか否かを判定する処理においても、画像１３４を３フレーム目の画像として記録部１８に記録させるか否かを判定する処理と同様に、画像１３５を４フレーム目の画像として記録部１８に記録させないと判定する。そして、その判定結果に応じて、記録表示処理部１６は、画像１３３を４フレーム目の画像として記録部１８に記録させる（例えば、図６のステップＳ３９の処理）。
【０１１７】
さらに、制御部２３は、画像１３６を５フレーム目の画像として記録部１８に記録させるか否かを判定する処理においては、画像１３３と画像１３６は、同等の明るさであることより、画像１３６を５フレーム目の画像として記録部１８に記録させると判定する。そして、その判定結果に応じて、記録表示処理部１６は、画像１３６を５フレーム目の画像として記録部１８に記録させる（例えば、図６のステップＳ３７の処理）。
【０１１８】
次に、図８は、図７と同様に、撮像装置１１において動画像を撮像する処理を説明する図である。
【０１１９】
図７と同様に、撮像素子４１が撮像した画像のうち、画像１３４および画像１３５が外部の閃光による悪影響を受けていれば、図７を参照して説明したように、制御部２３は、画像１３２を１フレーム目の画像として記録させ、画像１３３を２乃至４フレーム目の画像として記録させ、画像１３６を５フレーム目の画像として記録させる。
【０１２０】
以上のように、撮像装置１１において動画像を撮像する処理において、比較対象画像の評価値と記録対象画像の評価値との差分値に基づき、外部の閃光による影響を受けた画像を排除して、外部の閃光を受けていない画像を記録させることができる。従って、記録表示処理部１６による画像を圧縮する処理において、ブロックノイズが発生することや、圧縮率が低下することを回避することができる。
【０１２１】
なお、図７および図８を参照して説明した処理においては、動画像の撮像が要求された時点で撮像された画像１３１は、記録部１８に記録されないが、制御部２３は、画像１３１を１フレーム目の画像として記録部１８に記録させ、画像１３２以降の画像を、２フレーム目以降の記録の対象として処理を行ってもよい。
【０１２２】
また、例えば、制御部２３は、撮像装置１１において動画像を撮像させる処理において、例えば、バッファ１７に複数の画像をバッファリングさせ、所定の記録対象画像の前後に撮像された複数の画像に対する評価値と、記録対象画像に対する評価値との差分値に基づいて、記録対象画像が外部の閃光による悪影響を受けているか否かを判定することができる。
【０１２３】
ここで、図９は、撮像装置１１において動画像を撮像する処理の他の実施の形態について説明する図である。なお、図９では、図７と同様に、撮像素子４１から出力される画像１３１乃至１３８のうち、画像１３４および画像１３５が外部の閃光により悪影響を受けている。
【０１２４】
例えば、図９に示すように、制御部２３は、画像１３２を記録対象画像とした場合においては、画像１３１乃至１３３をバッファ１７にバッファリングさせ、画像１３２に対する評価値と画像１３２の前に撮像された画像１３１に対する評価値との差分値、および、画像１３２に対する評価値と画像１３２の後に撮像された画像１３１に対する評価値との差分値に基づいて、画像１３２を１フレーム目の画像として記録部１８に記録させるか否かを判定することができる。
【０１２５】
同様に、例えば、制御部２３は、画像１３３を記録対象画像とした場合においては、画像１３２乃至１３４をバッファ１７にバッファリングさせ、画像１３３に対する評価値と画像１３２に対する評価値との差分値、および、画像１３３に対する評価値と画像１３４に対する評価値との差分値に基づいて、画像１３２を２フレーム目の画像として記録部１８に記録させるか否かを判定することができる。
【０１２６】
また、例えば、制御部２３は、記録対象画像をｎフレーム目の画像として記録部１８に記録させないと判定された場合に、ｎフレームの前後のフレームの画像であって、外部の閃光による悪影響を受けていない所定の２つの画像を合成させた画像を記録部１８に記録させることができる。
【０１２７】
例えば、図９に示すように、画像１３４および画像１３５が外部の閃光による悪影響を受けている場合においては、制御部２３は、外部の閃光による悪影響を受けていない画像１３３と画像１３６を合成させた画像を、３フレーム目および４フレーム目の画像として記録部１８に記録させることができる。
【０１２８】
また、例えば、検波回路６１は、評価値として、記録対象画像の輝度信号の垂直方向における差分を示す情報を制御部２３に供給することができ、制御部２３は、その情報に基づき、部分的に外部の閃光による影響を受けた画像が記録部１８に記録されないようにすることができる。
【０１２９】
即ち、撮像素子４１がCMOSである場合においては、例えば、図５を参照して説明したように、撮像素子４１による画像１２２の撮像時に外部の閃光が発生していれば、画像１２２は、その閃光の影響により、画像１２２の上部分が下部分よりも明るくなる。このような画像１２２が、記録対象画像となった場合においては、制御部２３は、検波回路６１から供給される画像１２２の輝度信号の垂直方向における差分を示す情報に基づき、画像１２２が部分的に外部の閃光の悪影響による影響を受けているため、画像１２２を記録部１８に記録しないと判定することができる。従って、制御部２３は、部分的に外部の閃光による影響を受けた画像が記録部１８に記録されないようにすることができる。
【０１３０】
また、撮像装置１１は、静止画として記録部１８に記録される画像を、動画像の１フレームの画像よりも高精細な画像とすることができる。例えば、撮像装置１１において静止画像を撮像する処理においては、画像処理部１４は、撮像素子４１の全ての画素に基づく画像に対して画像処理を行い、撮像装置１１において動画像を撮像する処理においては、撮像素子４１の全ての画素から一部分の画素が間引かれた画像に対して画像処理を行うことができる。
【０１３１】
このように、画像処理部１４において画像処理を切り換える場合においては、例えば、ユーザにより静止画像の撮像が要求されてから、静止画像が撮像されるまでに、タイムラグが発生することがある。このようなタイムラグが発生した場合においても、比較対象画像の評価値と記録対象画像の評価値との差分値に基づき、記録対象画像を記録部１８に記録させるか否かを判定する処理を行うことにより、外部の閃光による悪影響を受けた画像を排除して、ユーザが撮像を意図した画像を撮像することができる。
【０１３２】
さらに、撮像装置１１は、動画像を撮像する処理の実行中に、ユーザにより操作部２２のシャッタボタンが操作されると、動画像を撮像する処理と並行して、静止画像を撮像する処理を実行することができる。例えば、制御部２３は、画像処理部１４において静止画像として画像処理された高精細な画像を、一時的にバッファ１５に記憶させ、その高精細な画像から画素を間引いた画像を所定のフレームの画像として用いた動画像を記録部１８に記録させる。そして、動画像を記録部１８に記録させた後に、バッファ１５に記憶させた静止画像を記録部１８に記録させることができる。
【０１３３】
また、例えば、図４のステップＳ１６乃至Ｓ２０の処理を繰り返す回数は、予め上限となる所定の回数を設定することができ、所定の回数まで処理が繰り返されると、ステップＳ１１に戻るようにすることができる。また、ステップＳ１５において、静止画像の撮像が要求されたと判定されてから、所定の時間が経過するまでステップＳ１６乃至Ｓ２０の処理を繰り返すように予め設定し、所定の時間が経過すると、ステップＳ１１に戻るようにすることができる。
【０１３４】
さらに、例えば、ユーザによりシャッタボタンが深押しされた信号を操作部２２が検出するとステップＳ１６乃至Ｓ２０の処理の繰り返しを終了するように設定することができ、ユーザによりシャッタボタンが深押しされた信号を操作部２２が検出すると、ステップＳ１１に戻るようにすることができる。
【０１３５】
なお、撮像装置１１において静止画像を撮像させる処理においては、比較対象画像を含むその前後の画像に対する評価値の平均値と、記録対象画像の評価値との差分値に基づいて、記録対象画像を記録部１８に記録させるか否かを判定することができる。このような平均値を用いることにより、外部の閃光の影響を受けた画像を排除する精度を向上させることができる。
【０１３６】
また、制御部２３は、外部の閃光による悪影響を受けていない画像、即ち、記録部１８に記録させると判定された画像に対する評価値に基づいて、例えば、オートフォーカス制御や自動露出制御のための制御信号をレンズ部１２に供給したり、オートホワイトバランス制御のための制御信号を画像処理部１４のＷＢ回路５３に供給することができる。このように、制御部２３が、外部の閃光による悪影響を受けていない画像に対する評価値に基づいて自動制御を行うことにより、突発的に異常な画像が撮像されることを回避することができる。
【０１３７】
また、上述のフローチャートを参照して説明した各処理は、必ずしもフローチャートとして記載された順序に沿って時系列に処理する必要はなく、並列的あるいは個別に実行される処理（例えば、並列処理あるいはオブジェクトによる処理）も含むものである。
【０１３８】
なお、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
【図面の簡単な説明】
【０１３９】
【図１】本発明を適用した撮像装置１１の一実施の形態の構成例を示すブロック図である。
【図２】撮像素子４１がCCDである場合において、外部の閃光により画像が受ける悪影響を説明する図である。
【図３】撮像素子４１がCMOSである場合において、外部の閃光により画像が受ける悪影響を説明する図である。
【図４】静止画像を撮像する処理を説明するフローチャートである。
【図５】静止画像を撮像する処理を説明する図である。
【図６】動画像を撮像する処理を説明するフローチャートである。
【図７】動画像を撮像する処理を説明する図である。
【図８】動画像を撮像する処理を説明する図である。
【図９】動画像を撮像する処理の他の実施の形態について説明する図である。
【符号の説明】
【０１４０】
１１  撮像装置，  １２  レンズ部，  １３  撮像部，  １４  画像処理部，  １５  バッファ，  １６  記録表示処理部，  １７  バッファ，  １８  記録部，  １９  表示部，  ２０  評価部，  ２１  記憶部，  ２２  操作部，  ２３  制御部，  ３１  レンズ機構，  ３２  絞り機構，  ４１  撮像素子，  ４２  CDS回路，  ４３  A/D回路４３，  ４４  シグナルジェネレータ，  ４５  タイミングジェネレータ，  ５１  Ｙ−Ｃ分離回路，  ５２  フィルタ回路，  ５３  ＷＢ回路，  ５４  アパコンガンマ回路，  ６１  検波回路，  ７１  演算回路
【図１】
0004760518.tif 000002
【図２】
0004760518.tif 000003
【図３】
0004760518.tif 000004
【図４】
0004760518.tif 000005
【図５】
0004760518.tif 000006
【図６】
0004760518.tif 000007
【図７】
0004760518.tif 000008
【図８】
0004760518.tif 000009
【図９】
0004760518.tif 000010