(57)【要約】【課題】撮像視野に明暗差の大きい部分が含まれていても良好な動画を得ることが可能で、かつ、フレームレートの変換等を行うことなくＬＥＤ信号機の消灯現象の発生を抑えた動画を再生できるようにする。【解決手段】フレーム周期（１／３０秒）において長時間露光画像Ｌと短時間露光画像Ｓ１（Ｓ２）を撮像部１０に撮像させる制御部５０Ａと、撮像部１０から出力される画像データを記憶するフレームメモリ２０と、フレームメモリ２０に記憶されている画像データから１フレーム分の画像を表す画像データを合成して出力する処理をフレーム周期毎に実行する画像合成部３０Ａとを有する撮像装置１Ａにおいて、昼間においては長時間露光画像Ｌの撮像行タイミングが、夜間においては短時間露光画像Ｓ１（Ｓ２）の撮像タイミングが連続するフレーム間で異なったものとなるようにする制御を制御部５０Ａに実行させる。【選択図】図１
2011234318.tif 000002
【特許請求の範囲】
【請求項１】
フレーム周期において複数回の撮像を行い各々の撮像結果を示す撮像画像データを出力する撮像部と、
フレーム周期毎に前記撮像部から出力される撮像画像データを記憶するフレームメモリと、
前記フレームメモリに記憶されている撮像画像データを合成して１フレーム分の画像を表す画像データを生成し出力する処理をフレーム周期毎に実行する画像合成部と、
フレーム周期毎に露光時間の長い第１の撮像と露光時間の短い第２の撮像の少なくとも２種類の撮像が行われるように前記撮像部を制御するとともに、前記第１の撮像と前記第２の撮像の何れか一方の実行タイミングが連続するフレーム間で異なったものとなるように前記撮像部を制御する制御部と、
を有することを特徴とする撮像装置。
【請求項２】
前記制御部は、夜間モードと昼間モードの２つの動作モードの何れかで動作するとともに、夜間モードにおいては前記第２の撮像の実行タイミングが連続するフレーム間で異なったものとなるように前記撮像部を制御し、昼間モードにおいては前記第１の撮像の実行タイミングが連続するフレーム間で異なったものとなるように前記撮像部を制御することを特徴とする請求項１に記載の撮像装置。
【請求項３】
フレーム周期において複数回の撮像を行い各々の撮像結果を示す撮像画像データを出力する撮像部と、
フレーム周期毎に前記撮像部から出力される撮像画像データを記憶するフレームメモリと、
フレーム周期において露光時間の長い第１の撮像と露光時間の短い第２の撮像の少なくとも２種類の撮像が行われるように前記撮像部を制御するとともに、前記第１の撮像と前記第２の撮像の何れか一方が複数回行われるように前記撮像部を制御する制御部と、
前記フレームメモリに記憶されている撮像画像データを合成して１フレーム分の画像を表す出力画像データを生成し出力する処理をフレーム周期毎に実行する画像合成部であって、前記第１または第２の撮像を前記撮像部に複数回行わせることにより得られた複数の撮像画像データの各々、またはそれらのうちから選択したものを用いて前記出力画像データを合成し出力する画像合成部と
を有することを特徴とする撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、運転者の視点から見た動画を撮像するドライブレコーダに関し、特に、広ダイナミックレンジイメージセンサを用いたドライブレコーダに関する。
【背景技術】
【０００２】
近年、発光体としてＬＥＤ（Light Emitting Diode）素子を用いた信号機（以下、ＬＥＤ信号機）が急速に普及している。ＬＥＤ信号機のＬＥＤ素子は商用電源を全波整流したもので駆動されており、その設置場所の商用電源周波数の２倍の速さ（東日本であれば１００Ｈｚ、西日本であれば１２０Ｈｚ）で明滅している。例えば、西日本に設置されているＬＥＤ信号機は図７（Ａ）に示すように明滅している。このため、ドライブレコーダの撮像コマ数が毎秒３０コマや毎秒１０コマなどその明滅周波数の約数である場合には、ＬＥＤ信号機がまったく点灯していないかのような動画が撮像される現象（以下、「ＬＥＤ信号機の消灯現象」と呼ぶ）が起こり得る。例えば、撮像コマ数の整数倍と電源周波数とが完全に一致した場合には、撮像された全てのコマ（動画を構成する各静止画像；以下、フレームとも呼ぶ）でＬＥＤ信号機が消灯している可能性がある。このような場合には交差点内のＬＥＤ信号機の灯火状況が不明となり、ドライブレコーダ本来の役割（例えば、事故発生時の信号灯火色の確認など）を果たし得なくなる。そこで、ＬＥＤ信号機の消灯現象が発生しないようにするための技術が種々提案されており、その具体例としては、以下の３種類の技術が挙げられる。
【０００３】
第１の従来技術は、単位時間あたりの撮像コマ数の調整によりＬＥＤ信号機の消灯現象を解決するものである。例えば、西日本においては１秒あたりの撮像コマ数を３０．５コマにしておくといった具合に、単位時間当たりの撮像コマ数が商用電源周波数の約数とならないように調整しておく技術である。第２の従来技術は、カメラのシャッタースピードの調整によりＬＥＤ信号機の消灯現象を解決する技術である。例えば、ＬＥＤ素子の点滅の１周期分の時間長（例えば、西日本であれば１／１２０秒）よりも露光時間が長くなるようにカメラのシャッタースピードを遅くしておくのである。そして、第３の従来技術は、撮像方式のインターレース化よりＬＥＤ信号機の消灯現象を解決する技術である。具体的には、従来のテレビ映像の撮像方式と同様に、１コマの撮像の際に画面の走査線を１本おきに撮像し、その１／６０秒後に残りの走査線分を撮像し、これらを合成して１コマ分の画像を得るのである。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００９−２００７２６号公報
【特許文献２】特開２００１−１９７３６２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、第１、第２および第３の従来技術の各々には以下のような問題がある。まず、第１の従来技術の場合、ＬＥＤ信号機の消灯現象を完全には解決することはできず、撮像された動画にちらつきが発生する虞がある、といった問題点がある。これは、数コマに１枚の割合でＬＥＤ信号機が消灯して写っているコマがあるからである。また、第１の従来技術で撮像された動画は毎秒３０．５コマの静止画により構成されているため、毎秒３０コマを前提とするＮＴＳＣ（National Television System Committee）準拠の表示装置にその動画を表示させる際には、フレームレートの変換を行う必要がある、といった問題もある。第２の従来技術の場合、露光時間を長くする分だけ被写体のぶれが生じやすく、車載を前提としたドライブレコーダへの適用にはそもそも無理がある。また、第３の従来技術の場合、１／６０秒だけ撮像タイミングがずれた２枚の静止画が１フレームに共存するために東日本においてはいずれか一方の静止画はＬＥＤ信号機が点灯した状態で撮像されＬＥＤ信号機の消灯現象の発生が回避されるが、西日本では何れの静止画においてもＬＥＤ信号機が消灯していることが起こり得る。つまり、西日本においては第３の従来技術を用いたとしも、ＬＥＤ信号機の消灯現象が充分に発生しえるのである。
【０００６】
また、例えばトンネルの入口や出口のように撮像視野の明るい部分と暗い部分との明暗差が大きい場合であっても良好な画像を得られるようにするために、ドライブレコーダの撮像部として複数露光方式をベースとする広ダイナミックレンジイメージセンサを用いることが提案されているが、このような場合には、ＬＥＤ信号機の消灯現象との関係では単一露光方式とは異なる問題が生じ得る。なお、複数露光方式とは、フレーム周期（フレームの時間間隔）において露光時間を異ならせた複数回の撮像を行い、それら複数回の撮像結果から一枚の静止画を合成する撮像方式のことである（例えば、特許文献２参照）。
【０００７】
単一露光方式の場合、ＬＥＤ信号機の消灯現象は主に昼間の撮像において問題となることが多い。何故ならば、図７（Ｂ）に示すように夜間の撮像においてはＬＥＤ信号機の明滅周期に比較して露光時間が充分に長くＬＥＤ信号機の消灯現象は発生しにくくなるのであるが、昼間の撮像においては図７（Ｃ）に示すように露光時間が短いため、ＬＥＤ信号機が消灯している状態のコマが連続して撮像される場合がある（すなわち、ＬＥＤ信号機の消灯現象が発生しやすくなる）からである。これに対して、複数露光方式の場合には、昼夜を問わずにＬＥＤ信号機の消灯現象が発生する可能性がある。例えば夜間の撮像においては、図８（Ａ）に示すように連続するフレームの短時間露光画像Ｓ１(Ｓ２)においてＬＥＤ信号機の消灯現象が発生する可能性が高く、また、昼間の撮像においては図８（Ｂ）に示すように長時間露光画像Ｌと短時間露光画像Ｓ１(Ｓ２)の両方においてＬＥＤ信号機の消灯現象が発生する可能性がある。複数露光方式では長時間露光画像Ｌと短時間露光画像Ｓ１およびＳ２を合成して１コマ分の画像を合成しているため、長時間露光画像Ｌと短時間露光画像Ｓ１およびＳ２の両方においてＬＥＤ信号機の消灯現象が発生した場合は勿論、短時間露光画像Ｓ１（或いはＳ２）のみに同現象が発生している場合であっても、長時間露光画像と短時間露光画像とから合成される１コマ分の画像にそのＬＥＤ信号機の消灯現象に応じた影響が現れ得るのである。
【０００８】
本発明は上記課題に鑑みて為されたものであり、撮像視野の明るい部分と暗い部分の明暗差が大きい場合であっても良好な動画を撮像することが可能で、かつ、フレームレートの変換等を行うことなくＬＥＤ信号機の消灯現象の発生を抑えた動画を再生することを可能にする技術を提供することを目的とする。
【課題を解決するための手段】
【０００９】
上記課題を解決するために本発明は、フレーム周期において複数回の撮像を行い各々の撮像結果を示す撮像画像データを出力する撮像部と、フレーム周期毎に前記撮像部から出力される撮像画像データを記憶するフレームメモリと、前記フレームメモリに記憶されている撮像画像データを合成して１フレーム分の画像を表す画像データを生成し出力する処理をフレーム周期毎に実行する画像合成部と、フレーム周期毎に露光時間の長い第１の撮像と露光時間の短い第２の撮像の少なくとも２種類の撮像が行われるように前記撮像部を制御するとともに、前記第１の撮像と前記第２の撮像の何れか一方の実行タイミングが連続するフレーム間で異なったものとなるように前記撮像部を制御する制御部とを有することを特徴とする撮像装置、を提供する。
【００１０】
このような撮像装置によれば、例えば上記制御部を夜間モードと昼間モードの２つの動作モードの何れかで動作させるとともに、夜間モードにおいては前記第２の撮像の実行タイミングが連続するフレーム間で異なったものとなるように前記撮像部の制御を行わせ、昼間モードにおいては前記第１の撮像の実行タイミングが連続するフレーム間で異なったものとなるように前記撮像部の制御を行わせるようにすることにより、昼夜を問わずにＬＥＤ信号機の消灯現象の発生を抑えることができる。例えば、フレーム周期を１／３０秒とする（１秒あたり３０フレームで動画を構成する）場合には、１フレーム周期に８個のサブフレーム（すなわち、サブフレーム周期は１／２４０秒）を設定し、そのサブフレーム単位で第１または第２の撮像の実行タイミングを連続するフレーム間で異ならせるようにするのである。具体的には、連続するフレーム間で第１または第２の撮像の実行タイミングがサブフレーム周期の奇数倍だけずれるようにその実行タイミングを調整するのである。このサブフレーム周期は、西日本におけるＬＥＤ信号周期の１／２の時間長であるため、上記のようにすることで連続するフレームの何れかにおいては第１または第２の撮像の撮像によりＬＥＤ信号機が点灯した状態で撮像されるため、ＬＥＤ信号機の点灯現象の発生が抑えられる。なお、東日本においては、第１または第２の撮像の撮像の実行周期はＬＥＤ信号機の点滅周期（１００Ｈｚ）の約数にはならないため、ＬＥＤ信号機の消灯現象の発生が抑えられることは言うまでもない。
【００１１】
また、上記のように、フレーム周期を１／３０秒としておけばフレームレートの変換を行うことなく、撮像装置により撮像された動画をＮＴＳＣ準拠の表示装置に表示させることができる。なお、特許文献１に開示された技術は、上記第１の従来技術を改良したものであり、各画像の撮像タイミングをずらすことでＬＥＤ信号機の消灯現象の発生を抑えるととともに、各画像の撮像間隔の平均値が１／３０秒などのＮＴＳＣに準拠した値となるようにすることでフレームレートの変換を不要とすることを目的としたものである。しかし、この特許文献１に開示された技術では、厳密にＮＴＳＣに準拠しているわけではなく（すなわち、各フレームが厳密に１／３０秒間隔で撮像される訳ではない）、また、撮像視野の明るい部分と暗い部分の明暗差が大きい場合であっても良好な動画が得られるか否かについては不明であり、本願発明とは異なる技術である。
【００１２】
また上記課題を解決するために本発明は、フレーム周期において複数回の撮像を行い各々の撮像結果を示す撮像画像データを出力する撮像部と、フレーム周期毎に前記撮像部から出力される撮像画像データを記憶するフレームメモリと、フレーム周期において露光時間の長い第１の撮像と露光時間の短い第２の撮像の少なくとも２種類の撮像が行われるように前記撮像部を制御するとともに、前記第１の撮像と前記第２の撮像の何れか一方が複数回行われるように前記撮像部を制御する制御部と、前記フレームメモリに記憶されている撮像画像データを合成して１フレーム分の画像を表す出力画像データを生成し出力する処理をフレーム周期毎に実行する画像合成部であって、前記第１または第２の撮像を前記撮像部に複数回行わせることにより得られた複数の撮像画像データの各々、またはそれらのうちから選択したものを用いて前記出力画像データを合成し出力する画像合成部とを有することを特徴とする撮像装置、を提供する。
【００１３】
このような態様によれば、１フレーム周期において第１または第２の撮像を複数回行って得られた複数の撮像画像データの各々を重ね合わせて得られた画像データを用いて、またはそれらのうちからＬＥＤ信号が点灯している状態のものを選択して出力画像データを合成するようにすることでＬＥＤ信号機の消灯現象の発生を抑えることができる。
【図面の簡単な説明】
【００１４】
【図１】本発明の第１実施形態の撮像装置１Ａの構成例を示すブロック図である。
【図２】１フレームにおいて撮像装置１Ａが実行する撮像処理を説明するための図である。
【図３】夜間モードにおける撮像装置１Ａの動作を説明するための図である。
【図４】昼間モードにおける撮像装置１Ａの動作を説明するための図である。
【図５】本発明の第２実施形態の撮像装置１Ｂの構成例を示すブロック図である。
【図６】昼間モードにおける撮像装置１Ｂの動作を説明するための図である。
【図７】ＬＥＤ信号機の消灯現象を説明するための図である。
【図８】広ダイナミックレンジイメージセンサを用いたドライブレコーダとＬＥＤ信号機の消灯現象との関係を説明するための図である。
【発明を実施するための形態】
【００１５】
以下、図面を参照しつつ本発明の実施形態について説明する。
（Ａ：第１実施形態）
図１は、本発明の第１実施形態の撮像装置１Ａの構成例を示すブロック図である。
撮像装置１Ａは、所謂ドライブレコーダであり、車両の運転席から見た風景を毎秒３０コマ（フレーム）のフレームレートで撮像し、それらフレームの各々を表す画像データＤＹを記憶装置（図示略）に記憶させる。ここで、フレーム周期（各フレームの撮像間隔）を１／３０秒としたのは、ＮＴＳＣに準拠した撮像を行うためである。この撮像装置１０Ａは、図１に示すように撮像部１０、フレームメモリ２０、画像合成部３０Ａ、階調圧縮部４０、および制御部５０Ａを含んでいる。
【００１６】
撮像部１０は、ＣＣＤ（Charge Coupled Device）イメージセンサ或いはＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサであり、制御部５０Ａによる制御の下で撮像を行い、その撮像画像を表す画像データを出力する。本実施形態では、撮像部１０として１秒あたり少なくとも１２０コマ（フレーム）の撮像が可能なものが採用されている。図１の撮像装置１Ａでは、図２に示すようにフレーム周期毎に露光時間の異なる複数回の撮像（本実施形態では、露光時間がＬ、Ｓ１およびＳ２（Ｌ＞＞Ｓ１＞Ｓ２）の３回の撮像）を行い、照度に対する感度の異なる３種類の画像データＤＬ、ＤＳ１およびＤＳ２を取得し、これらを合成して１フレーム分の画像データＤＸを生成し後段装置へ出力するからである。撮像部１０から出力される画像データＤＬ、ＤＳ１およびＤＳ２の各々は、例えばＲＡＭ（Random Access Memory）などで構成されたフレームメモリ２０に書き込まれる。
【００１７】
画像合成部３０Ａは、例えばＤＳＰ（Digital Signal Processor）であり、各フレーム周期において、フレームメモリ２０に蓄積される画像データＤＬ、ＤＳ１およびＤＳ２を読み出して１枚の静止画を表す画像データＤＸに合成して出力する。ここで、照度に対する感度の異なる複数の画像データから１枚の画像を表す画像データを合成する際の具体的な手法としては周知のものを適宜採用すれば良い（例えば、特許文献２参照）。階調圧縮部４０は、画像データＤＸに対して階調圧縮処理を施し、例えば一般的な表示装置で表示可能な階調数（例えば８ビット：２５６階調）の画像を表す画像データＤＹに変換して出力する。画像データＤＬ、ＤＳ１およびＤＳ２を読み出して画像データＤＸを合成する処理（すなわち、画像合成部３０Ａによる処理）と、階調圧縮部４０による階調圧縮処理とについては、各フレーム周期の境界（図２では太線で明示）において１フレーム分の画像データＤＹが後段装置に出力されるように各々の実行タイミングの調整が制御部５０Ａによって行われる。
【００１８】
このように本実施形態の撮像装置１Ａは、各フレーム周期において露光時間の異なる複数回の撮像を行いダイナミックレンジの広い画像を合成するドライブレコーダであるから、前述したように、被写体にＬＥＤ信号機が含まれている場合には昼夜を問わずにその消灯現象が発生し得る。しかし、本実施形態では、制御部５０Ａに本実施形態の特徴を顕著に示す撮像制御を行わせることで、ＬＥＤ信号機の消灯現象の発生を抑止しているのである。以下、この撮像制御を中心に説明する。
【００１９】
制御部５０Ａは、例えばＣＰＵ（Central Processing Unit）である。この制御部５０Ａは、各フレーム周期を西日本におけるＬＥＤ信号機の点滅周期の１／２の時間長を有するサブフレーム周期（すなわち、１／２４０秒）に分割し、そのサブフレーム周期単位で長時間露光画像Ｌ（或いは短時間露光画像Ｓ１およびＳ２）の撮像の実行タイミング（以下、撮像タイミング）を調整する処理を記憶部（図示略）に記憶されているファームウェアにしたがって実行する。より詳細に説明すると、制御部５０Ａは、夜間モードと昼間モードの２つの動作モードを有しており、夜間モードにおいては短時間露光画像Ｓ１およびＳ２の撮像タイミングを調整する処理を、昼間モードにおいては長時間露光画像Ｌの撮像タイミングを調整する処理を、上記ファームウェアにしたがって実行する。なお、夜間モードと昼間モードのモード切り換えについては、上記モード切り換えのためのスイッチを撮像装置１Ａに設けておき、そのスイッチをユーザに操作させて動作モードを指示させても良く、時刻に応じてその切り換えを行っても良い。また、照度を計測しその照度に応じてモード切り換えを行っても良い。
【００２０】
図３は、夜間モードにおける撮像制御を説明するための図である。この夜間モードにおいては、制御部５０Ａは、連続するフレーム間で短時間露光画像Ｓ１と短時間露光画像Ｓ２の各々の撮像タイミングが異なったものとなるようにその撮像タイミングを調整する。具体的には、制御部５０Ａは、図３に示すように、連続するフレーム間で短時間露光画像Ｓ１と短時間露光画像Ｓ２の各々の撮像タイミングがサブフレーム周期の奇数倍だけずれるように各々の撮像タイミングを設定する。前述したようにサブフレーム周期は西日本におけるＬＥＤ信号機の点滅周期の１／２であるから、上記のように短時間露光画像Ｓ１と短時間露光画像Ｓ２の各々の撮像タイミングを設定することで西日本においては連続する２つのフレームのどちらかではＬＥＤ信号機が点灯している状態の短時間露光画像Ｓ１およびＳ２が得られ、ＬＥＤ信号機の消灯現象の発生が抑えられる。このように本実施形態では、短時間露光画像Ｓ１およびＳ２の各々の撮像間隔はサブフレーム周期の奇数倍となり、ＬＥＤ信号機の点滅周期の約数とはならないため、ＬＥＤ信号機の消灯現象の発生が抑えられるのである。
【００２１】
図４は、昼間モードにおける撮像装置１Ａの動作を説明するための図である。昼間においては夜間に比較して照度が高いため、露出オーバーとなることを避けるべく、制御部５０Ａは、長時間露光画像Ｌ、短時間露光画像Ｓ１およびＳ２の何れについても露光時間を夜間モードにおけるものより短く設定する。そして、この昼間モードにおいては、制御部５０Ａは、連続するフレーム間で長時間露光画像Ｌの撮像タイミングが異なったものとなるようにその撮像タイミングを調整する。具体的には、図４に示すように、長時間露光画像Ｌの撮像タイミングが連続するフレーム間でサブフレーム周期の奇数倍（すなわち、ＬＥＤ信号機の点滅周期の１／２の奇数倍）だけずれるようにその撮像タイミングを設定する。これにより連続する２つのフレームのどちらかでは、ＬＥＤ信号機が点灯している状態の長時間露光画像が得られるのである。なお、本実施形態では、昼間モードにおいては長時間露光画像Ｌの撮像タイミングのみを調整したが、短時間露光画像Ｓ１およびＳ２の両方（または何れか一方）の撮像タイミングの調整を合わせて行うようにしても勿論良い。
【００２２】
以上説明したように本実施形態では、各フレーム周期において露光時間の異なる複数回の撮像を行ってその撮像結果を合成して広ダイナミックレンジの画像を得られるようにしたため、撮像視野の明るい部分と暗い部分の明暗差が著しく大きい場合であっても、良好な画像を得ることができる。また、本実施形態によれば、夜間モードにおいては短時間露光画像像Ｓ１およびＳ２の各々の撮像タイミングを連続するフレーム間で異ならせ、昼間モードにおいては長時間露光画像Ｌの撮像タイミングを連続するフレーム間で異ならせるようにしたため、昼夜を問わずＬＥＤ信号機の消灯現象の発生を抑えることができる。また、本実施形態では、画像データＤＹはＮＴＳＣに準拠した一定の周期（１／３０秒間隔）で出力されるため、フレームレートの変換等を行うことなく、一般的な表示装置にその画像データＤＹに応じた画像を表示させることができる。
【００２３】
（Ｂ：第２実施形態）
次いで本発明の第２実施形態について図５および図６を参照しつつ説明する。
図５は、本発明の第２実施形態の撮像装置１Ｂの構成例を示すブロック図である。
図５においては第１実施形態と同一の構成要素には同一の符号が付されている。図５と図１とを対比すれば明らかように、撮像装置１Ｂは画像合成部３０Ａに換えて画像合成部３０Ｂを有する点と、制御部５０Ａに換えて制御部５０Ｂを有する点が撮像装置１Ａと異なる。以下、第１実施形態との相違点である画像合成部３０Ｂおよび制御部５０Ｂを中心に説明する。
【００２４】
制御部５０Ｂは、昼間モードと夜間モードの２種類の動作モードの何れかで動作する点、および夜間モードにおいては短時間露光画像Ｓ１およびＳ２の撮像タイミングが連続するフレーム間で異なったものとなるように撮像部１０の作動制御を行う点では制御部５０Ａと同一であるが、昼間モードの動作が制御部５０Ａと異なる。図６は、昼間モードにおける撮像装置１Ｂの動作例を示す図である。図６に示すように、制御部５０Ｂが実行する昼間モードの動作においては、フレーム周期において長時間露光画像Ｌの撮像が複数回（本実施形態では、３回）実行されるのである。
【００２５】
画像合成部３０Ｂは、フレーム周期毎にフレームメモリ２０に蓄積される長時間露光画像データＤＬ、短時間露光画像データＤＳ１およびＤＳ２から１枚の画像データＤＸを合成して出力する点は画像合成部３０Ａと同一であるが、昼間モードにおいては複数の長時間露光画像データＤＬがフレームメモリ２０に記憶されており、これら複数の長時間露光画像データＤＬの全て（或いは一部）と、短時間露光画像データＤＳ１およびＤＳ２から１枚の画像データＤＸを合成する点が画像合成部３０Ａと異なる。このように複数の長時間露光画像データＤＬがフレームメモリ２０に記憶されている場合、それら複数の長時間露光画像データＤＬの全てを用いて画像データＤＸを合成する処理を画像合成部３０Ｂに行わせても良く、また、複数の長時間露光画像データＤＬのうちから選択したもののみを用いて画像データＤＸを合成する処理を画像合成部３０Ｂに行わせるようにしても良い。
【００２６】
例えば、複数の長時間露光画像データＤＬの全てを用いる態様であれば、それら複数の長時間露光画像データＤＬを画素単位で重ね合わせ（均等な重みでの重み付け加算）を行った後に短時間露光画像データＤＳ１およびＤＳ２と合成して画像データＤＸを生成すれば良い。また、複数の長時間露光画像データＤＬｎ（ｎ＝１〜３）のうちから選択したもののみを用いる態様の場合には、それら複数の長時間露光画像データＤＬｎを解析してＬＥＤ信号機が被写体として写っているか否かを判定し、写っているものからさらにそのＬＥＤ信号機が点灯している状態のもののみを選択して画像データＤＸを合成するようにすれば良い。なお、ＬＥＤ信号機の検出およびその点灯検出については周知の技術を用いるようにすれば良い。
【００２７】
このように、本実施形態によっても、昼夜を問わずＬＥＤ信号機の消灯現象の発生を抑えることができる。また、撮像視野に含まれている明るい部分と暗い部分の明暗差が大きい場合であっても良好な画像を得られること、およびフレームレートの変換等を行うことなく一般的な表示装置に出力画像データに応じた画像を表示させることができることは、前述した第１実施形態と同様である。
【００２８】
（Ｃ：変形）
以上本発明の一実施形態について説明したが、以下に述べる変形を加えても勿論良い。
（１）上述した第１実施形態の昼間モードにおいては長時間露光画像の撮像タイミングを連続するフレーム間で異ならせ、第２実施形態の昼間モードにおいてはフレーム周期毎に長時間露光画像の撮像を複数回行いその撮像結果の全部または何れかを用いて出力画像データＤＸを合成した。しかし、両態様を実装し、ユーザの指示に応じてこれら２つの態様の何れかで動作するように切り換えても良い。また、ドライブレコーダが車両から動作電力の供給を受けるのではなく、内蔵バッテリ等から動作電力の供給を受ける場合には、その内部バッテリの電池残量に応じて上記２つの態様を切り換える（例えば、電池残量が充分（電池残量が所定の閾値以上）であれば、長時間露光画像の撮像を複数回行いその撮像結果の全部または何れかを用いて画像データＤＸを合成し、電池残量が上記閾値を下回ったら、長時間露光画像の撮像タイミングを連続するフレーム間で異ならせるようにするなど）態様であっても良い。各フレーム周期において長時間露光画像の撮像を複数回行えば、その分だけ電力消費量が増加するからである。
【００２９】
（２）上述した第１および第２実施形態の夜間モードにおいては、短時間露光画像の撮像タイミングを連続するフレーム間で異ならせたが、１フレームの間に短時間露光画像の撮像を複数回行いその撮像結果の全部または何れかを用いて画像データＤＸを合成しても良い。
【００３０】
（３）上述した第２実施形態の昼間モードにおいては、フレーム周期毎に長時間露光画像の撮像を複数回行いその撮像結果の全部または何れかを用いて出力画像データを合成したが、それら複数回の撮像結果を記憶装置に出力させるようにしても良い。各フレーム周期において撮像された複数の長時間露光画像の全てを表す画像データを記憶装置に記憶させておけば、それら画像データを解析することで、事故発生時のＬＥＤ信号機の灯火色をより確実に確認することができるからである。
【符号の説明】
【００３１】
１Ａ，１Ｂ…撮像装置、１０…撮像部、２０…フレームメモリ、３０Ａ，３０Ｂ…画像合成部、４０…階調圧縮部、５０Ａ，５０Ｂ…制御部。
【図１】
2011234318.tif 000003
【図２】
2011234318.tif 000004
【図３】
2011234318.tif 000005
【図４】
2011234318.tif 000006
【図５】
2011234318.tif 000007
【図６】
2011234318.tif 000008
【図７】
2011234318.tif 000009
【図８】
2011234318.tif 000010