(57)【要約】【課題】本発明は、動画撮影中に被写体に静止画撮影用のストロボ光が照射された場合においても、記録した動画像の再生時にストロボ光によるちらつきが生じないようにすると同時に、再生画像が滑らかで自然な動画像となるような撮像装置を提供する。【解決手段】撮像装置は、動画記録用の通常のフレームレート（第１の撮像時間間隔）より短い時間間隔（第２の撮像時間間隔）で被写体を撮影する。そして、被写体にストロボ光が照射されたことを検出した場合、撮像した画像のうち、ストロボ光が照射されていない被写体の画像を選択して動画像として記録する。【選択図】図３
2010011145.tif 000002
【特許請求の範囲】
【請求項１】
動画および静止画の撮影が可能な撮像装置において、
動画記録用の第１の撮像時間間隔よりも短い第２の撮像時間間隔で撮像することが可能な撮像手段と、
前記撮像手段により撮像された画像を動画像として記録媒体に記録する動画記録手段と、
被写体へのストロボ発光を検出するストロボ発光検出手段とを備え、
前記動画記録手段は、前記ストロボ発光検出手段がストロボ発光を検出した場合、前記撮像手段が撮像した画像のうち、ストロボ光が照射されていない被写体の画像を選択して動画像として記録することを特徴とする撮像装置。
【請求項２】
前記動画記録手段は、前記ストロボ発光検出手段がストロボ発光を検出した場合、ストロボ光が照射されていない被写体の画像のうち、前記第１の撮像時間間隔での撮像タイミングに最も近いタイミングの画像を選択して動画像として記録することを特徴とする請求項１記載の撮像装置。
【請求項３】
前記撮像手段により撮像された画像の少なくとも一つを一時的に記憶する記憶手段をさらに備え、
前記動画記録手段は、前記撮像手段が撮像した画像または前記記憶手段に記憶された画像のうち、ストロボ光が照射されていない被写体の画像を選択して動画像として記録することを特徴とする請求項１または２記載の撮像装置。
【請求項４】
前記撮像手段による撮像時間間隔を制御する制御手段をさらに備え、
前記制御手段は、前記ストロボ発光検出手段がストロボ発光を検出したときは、前記撮像手段が前記第２の撮像時間間隔で撮像を行い、それ以外の場合は前記第１の撮像時間間隔で撮像を行うように制御することを特徴とする請求項１乃至３のいずれか１項に記載の撮像装置。
【請求項５】
ストロボ発光を行うストロボ発光手段をさらに備え、
前記制御手段は、前記第２の撮像時間間隔での撮像タイミングのうち、前記ストロボ発光手段がストロボ発光を行うタイミングよりも少なくとも前記第１の撮像時間間隔の１周期分前から前記第２の撮像時間間隔で撮像を行うように制御することを特徴とする請求項４記載の撮像装置。
【請求項６】
動画および静止画の撮影並びに再生が可能な撮像装置において、
動画記録用の第１の撮像時間間隔よりも短い第２の撮像時間間隔で撮像することが可能な撮像手段と、
前記撮像手段により撮像された画像を、前記第１の撮像時間間隔で第１の動画記録方式により第１の動画像としてまた前記第２の撮像時間間隔で第２の動画記録方式により第２の動画像として、記録媒体に記録することが可能な動画記録手段と、
前記記録された第１の動画像と第２の動画像の時間的な同期を行うための同期情報を記録媒体に記録する同期情報記録手段と、
被写体へのストロボ発光を検出するストロボ発光検出手段と、
前記第１の動画像および前記第２の動画像の少なくとも一方を再生することが可能な動画再生手段とを備え、
前記動画記録手段は、前記ストロボ発光検出手段がストロボ光を検出した場合、前記第１の動画記録方式および前記第２の動画記録方式の両方または第２の動画記録方式のみで動画像の記録を行い、
前記動画再生手段は、記録された動画像のうちストロボ光が照射されていない被写体の動画像を選択して、前記同期情報記録手段により記録された同期情報を用いて前記第１の動画記録方式および前記第２の動画記録方式で記録された動画像を連続した動画として再生することを特徴とする撮像装置。
【請求項７】
前記動画再生手段は、ストロボ光が照射されていない被写体の画像のうち、前記第１の撮像時間間隔での撮像タイミングに最も近いタイミングの画像を選択することを特徴とする請求項６記載の撮像装置。
【請求項８】
前記撮像手段により撮像された画像の少なくとも一つを一時的に記憶する記憶手段をさらに備え、
前記動画記録手段は、前記ストロボ発光検出手段がストロボ発光を検出した場合には、前記撮像手段が撮像した画像に加えて前記記憶手段に記憶された画像のうちの少なくとも１つを、前記第１の動画記録方式と第２の動画記録方式の両方または第２の動画記録方式のみで記録することを特徴とする請求項６または７記載の撮像装置。
【請求項９】
前記撮像手段による撮像時間間隔を制御する制御手段をさらに備え、
前記制御手段は、前記ストロボ発光検出手段がストロボ発光を検出したときは、前記撮像手段が前記第２の撮像時間間隔で撮像を行い、それ以外の場合は前記第１の撮像時間間隔で撮像を行うように制御することを特徴とする請求項６乃至８のいずれか１項に記載の撮像装置。
【請求項１０】
ストロボ発光を行うストロボ発光手段をさらに備え、
前記制御手段は、前記第２の撮像時間間隔での撮像タイミングのうち、前記ストロボ発光手段がストロボ発光を行うタイミングよりも少なくとも前記第１の撮像時間間隔の１周期分前から前記第２の撮像時間間隔で撮像を行うように制御すると共に、
前記動画記録手段は、前記第１の動画記録方式と前記第２の動画記録方式の両方または第２の動画記録方式のみで動画像の記録を行うことを特徴とする請求項９記載の撮像装置。
【請求項１１】
前記撮像手段により撮像された画像を静止画像として記録媒体に記録する静止画記録手段と、
撮影者が静止画撮影を指示する静止画撮影指示手段とをさらに備え、
撮影者が静止画撮影を指示したとき、前記ストロボ発光検出手段がストロボ発光を検出した場合、前記静止画記録手段は、前記撮像手段が撮像した画像のうち、ストロボ光が照射されている画像を選択して静止画像として記録することを特徴とする請求項１乃至１０のいずれか１項に記載の撮像装置。
【請求項１２】
動画および静止画の撮影が可能な撮像装置の撮像方法において、
動画記録用の第１の撮像時間間隔よりも短い第２の撮像時間間隔で撮像することが可能な撮像工程と、
前記撮像工程にて撮像された画像を動画像として記録媒体に記録する動画記録工程と、
被写体へのストロボ発光を検出するストロボ発光検出工程とを備え、
前記動画記録工程は、前記ストロボ発光が検出された場合、撮像された画像のうち、ストロボ光が照射されていない被写体の画像を選択して動画像として記録することを特徴とする撮像方法。
【請求項１３】
動画および静止画の撮影並びに再生が可能な撮像装置の撮像方法において、
動画記録用の第１の撮像時間間隔よりも短い第２の撮像時間間隔で撮像することが可能な撮像工程と、
前記撮像工程にて撮像された画像を、前記第１の撮像時間間隔で第１の動画記録方式により第１の動画像としてまた前記第２の撮像時間間隔で第２の動画記録方式により第２の動画像として、記録媒体に記録することが可能な動画記録工程と、
前記記録された第１の動画像と第２の動画像の時間的な同期を行うための同期情報を記録媒体に記録する同期情報記録工程と、
被写体へのストロボ発光を検出するストロボ発光検出工程と、
前記第１の動画像および前記第２の動画像の少なくとも一方を再生することが可能な動画再生工程とを備え、
前記動画記録工程は、前記ストロボ光が検出された場合、前記第１の動画記録方式および前記第２の動画記録方式の両方または第２の動画記録方式のみで動画像の記録を行い、
前記動画再生工程は、記録された動画像のうちストロボ光が照射されていない被写体の動画像を選択して、前記記録された同期情報を用いて前記第１の動画記録方式および前記第２の動画記録方式で記録された動画像を連続した動画として再生することを特徴とする撮像方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、動画および静止画の撮影、記録、および／または再生が可能な撮像装置および方法に関する。
【背景技術】
【０００２】
近年、動画像を撮影・記録するビデオカメラ等の撮像装置は、携帯性を向上させるための小型軽量化が進んでいる。特に、記録メディアが磁気テープ、磁気ディスクや光学ディスクから、フラッシュメモリなどの半導体メディアに移行しつつあり、記録メディアを機械的に回転させるための駆動装置や機構部材などが不要となることから、小型軽量化が急激に進展している。
【０００３】
一方、ビデオカメラには、動画撮影機能だけでなく、デジタルスチルカメラと同様の静止画撮影機能を備えたものが多く、近年の動画用撮像素子の高画素化に伴ってスチルカメラに劣らない画質の静止画を撮影できるようになってきている。また、このようなビデオカメラには、動画撮影を行いながら同時に静止画撮影を行う機能を備えているものが多い。
【０００４】
これまでは、日常的な写真(静止画)撮影にはデジタルスチルカメラを用い、運動会などのイベントや旅行などの動画撮影を行いたい場合にのみビデオカメラを使用するといった使われ方が多かった。しかしながら、ビデオカメラの小型軽量化や静止画撮影機能の高性能化が進むことにより、ビデオカメラ１台で日常的な静止画撮影と動画撮影の両方を楽しむという使われ方が増えてくることが予想される。
【０００５】
ところで、静止画撮影においては、被写体の光量不足を補うためにストロボ光を照射することが頻繁に行われる。静止画撮影と動画撮影を１台のビデオカメラで行う場合、動画撮影中に静止画撮影用のストロボ光が照射されると、撮影した動画にストロボ発光のシーンが記録されてしまう。その結果、動画を再生して鑑賞する際に、記録されたストロボ光がちらつき、見苦しい映像になってしまうという問題がある。
【０００６】
このような問題を回避するために、従来のビデオカメラでは、動画撮影中に静止画撮影を行う場合にはストロボ光の照射を禁止する制御が一般に行われている。しかしながら、これでは、被写体の環境が暗いと静止画として十分な光量が得られない場合があり、静止画撮影の性能が十分得られなくなってしまう。この問題に対しては、ストロボ発光時に動画撮影を一時停止し、発光終了後に動画撮影を再開する技術が提案されている（特許文献１参照)。この場合、記録される動画像が途切れないように、動画撮影の一時停止中は直前の動画像を繰り返し記録するようにしている。このように、ストロボ発光中の撮影画像が動画像に記録されないようにすることで、再生時のストロボ光によるちらつきを防止することができる。
【０００７】
また、動画像撮影のフレームレートの整数倍(例えば２倍)で撮像素子を駆動し、撮像した画像を動画記録用フレームと静止画記録用フレームに分けた上で、ストロボ発光を静止画用フレームの受光期間に同期して行う技術が提案されている（特許文献２参照)。この場合も、動画記録用フレームにはストロボ光が記録されないために、前記の従来技術と同様に再生時のストロボ光によるちらつきを防止することができる。
【特許文献１】特開２００４−２００９５１号公報（第１５頁、図２）
【特許文献２】特開２００４−０６４４６７号公報（第１０頁、図３、図４）
【発明の開示】
【発明が解決しようとする課題】
【０００８】
しかしながら、上記従来技術においては、以下のような課題を有している。
【０００９】
まず、ストロボ発光時に動画撮影を一時停止し、発光終了後に動画撮影を再開する技術では、ストロボ発光中に記録された動画像部分は同じ画像が連続するので、動画像が不連続となる。その結果、記録した動画像を再生すると不連続部分で画像の動きが滑らかでなく不自然な動画像になってしまう。
【００１０】
次に、上記特許文献２に記載された技術では、静止画用フレームの受光期間内に正確に同期してストロボ発光を行い、動画記録用フレームの受光開始より前にストロボ発光が終了し残光が残らないように制御する必要がある。その上、ストロボ発光タイミングの制限が厳しく制御も複雑となる。
【００１１】
また、上記従来技術では、動画記録を行っているカメラ本体によるストロボ発光が動画記録用フレームに記録されないようにできるものの、他のカメラによるストロボ発光については動画記録用フレームと同期できないため、再生画像にストロボ光が写ってしまう。
【００１２】
本発明の目的は、動画撮影中に被写体に静止画撮影用のストロボ光が照射された場合でも、記録した動画像の再生時にストロボ光によるちらつきが生じないようにすると同時に、再生画像が滑らかで自然な動画像とする撮像装置および方法を提供することにある。
【００１３】
さらに、ストロボ発光タイミングの制御を容易にし、また他のカメラによるストロボ発光に対しても上記と同様の効果を得られるようにすることである。
【課題を解決するための手段】
【００１４】
上記目的を達成するために、請求項１記載の撮像装置は、動画および静止画の撮影が可能な撮像装置において、動画記録用の第１の撮像時間間隔よりも短い第２の撮像時間間隔で撮像することが可能な撮像手段と、前記撮像手段により撮像された画像を動画として記録媒体に記録する動画記録手段と、被写体へのストロボ発光を検出するストロボ発光検出手段とを備え、前記動画記録手段は、前記ストロボ発光検出手段がストロボ発光を検出した場合、前記撮像手段が撮像した画像のうち、ストロボ光が照射されていない被写体の画像を記録することを特徴とする。
【００１５】
上記目的を達成するために、請求項６記載の撮像装置は、動画および静止画の撮影並びに再生が可能な撮像装置において、動画記録用の第１の撮像時間間隔よりも短い第２の撮像時間間隔で撮像することが可能な撮像手段と、前記撮像手段により撮像された画像を、前記第１の撮像時間間隔で第１の動画記録方式により第１の動画像としてまた前記第２の撮像時間間隔で第２の動画記録方式により第２の動画像として、記録媒体に記録することが可能な動画記録手段と、前記記録された第１の動画像と第２の動画像の時間的な同期を行うための同期情報を記録媒体に記録する同期情報記録手段と、被写体へのストロボ発光を検出するストロボ発光検出手段と、前記第１の動画像および前記第２の動画像の少なくとも一方を再生することが可能な動画再生手段とを備え、前記動画記録手段は、前記ストロボ発光検出手段がストロボ光を検出した場合、前記第１の動画記録方式および前記第２の動画記録方式の両方または第２の動画記録方式のみで動画像の記録を行い、前記動画再生手段は、記録された動画像のうちストロボ光が照射されていない被写体の動画像を選択して、前記同期情報記録手段により記録された同期情報を用いて前記第１の動画記録方式および前記第２の動画記録方式で記録された動画像を連続した動画として再生することを特徴とする。
【発明の効果】
【００１６】
請求項１記載の発明によれば、動画撮影中に被写体に静止画撮影用のストロボ光が照射された場合でも、記録した動画像の再生時にストロボ光によるちらつきが生じないようにすると同時に、再生画像を滑らかで自然な動画像とすることができる。
【００１７】
請求項２記載の発明によれば、通常のフレームレートに近い撮像時間間隔の動画を記録、再生できるため、再生画像をさらに滑らかで自然な動画像とすることができる。
【００１８】
請求項３記載の発明によれば、ストロボ光が照射される以前に撮像されて記憶された画像とストロボ光が照射された後に撮像されて記憶された画像からストロボ光が照射されていない被写体の画像を選択することができ、画像の選択が容易になる。同時に、通常のフレームレートのタイミングにより近い画像を選択できることから再生画像を滑らかで自然な動画像とすることができる。
【００１９】
請求項４記載の発明によれば、ストロボ光が照射されていない被写体の場合は通常のフレームレートで撮像素子を駆動するので、撮像素子の駆動に伴う撮像装置の電力消費を抑制することができる。
【００２０】
請求項５記載の発明によれば、動画撮影を行う撮像装置本体がストロボ光を発光する場合、実際にストロボ発光が行われる前にストロボ発光が行われることを検知でき、予め通常のフレームレートより短い時間間隔での撮像および画像の一時記憶を開始できる。その結果、ストロボ光が照射される直前の画像も含めて通常のフレームレートのタイミングに近い撮像時間間隔の動画を選択でき、再生画像をさらに滑らかで自然な動画像とすることができる。
【００２１】
請求項６記載の発明によれば、ストロボ発光タイミングと動画の撮像タイミングが同期している必要がないことから、ストロボ発光タイミングの制御が容易であり、また他のカメラによるストロボ発光に対しても請求項１記載の発明と同様の効果を得ることができる。
【００２２】
請求項７記載の発明によれば、通常のフレームレートに近い撮像時間間隔の動画を再生できるため、再生画像をより滑らかで自然な動画像とすることができる。
【００２３】
請求項８記載の発明によれば、ストロボ発光前に撮像された画像とストロボ発光後に撮像された画像とを通常のフレームレートより短い時間間隔で記録し、再生時はこれらの画像の中からストロボ光が照射されていない被写体の画像を選択することができる。その結果、画像の選択が容易になると同時に、通常のフレームレートのタイミングにより近い画像を選択できることから再生画像を滑らかで自然な動画像とすることができる。
【００２４】
請求項９記載の発明によれば、ストロボ光が照射されていない被写体の場合は通常のフレームレートで撮像素子を駆動するので、撮像素子の駆動に伴う撮像装置の電力消費を抑制することができる。
【００２５】
請求項１０記載の発明によれば、動画撮影を行う撮像装置本体がストロボ光を発光する場合、ストロボ発光前に、ストロボ発光が行われることを検知できるので、予め通常のフレームレートより短い時間間隔で撮像および動画像の記録を行うことができる。その結果、再生時にはストロボ光が照射される直前の画像も含めて通常のフレームレートのタイミングに近い撮像時間間隔の動画を選択でき、再生画像をさらに滑らかで自然な動画像とすることができる。
【００２６】
請求項１１記載の発明によれば、動画撮影中に静止画を同時に撮影できると共に、静止画像としてはストロボ光が照射されている画像が記録されるので、暗い被写体を撮像した場合も十分な光量の静止画を記録することができる。
【発明を実施するための最良の形態】
【００２７】
以下、本発明の実施の形態を図面を参照して詳細に説明する。
【００２８】
［第１の実施形態］
図１は、本発明の第１の実施形態に係る撮像装置の構成を示す図である。
【００２９】
図１において、１０１は固定の第１群レンズ、１０２は変倍を行う変倍レンズ、１０３は絞り、１０４は固定の第２群レンズである。１０５は変倍に伴う焦点面の移動を補正する機能とピント合わせの機能を兼ね備えたフォーカスコンペレンズ（以下、「フォーカスレンズ」と呼ぶ）である。１０６は撮像素子であり、ＣＣＤやＣＭＯＳなどが用いられるが、特にＣＭＯＳセンサは撮像信号の高速読み出しが容易であり、本発明における撮像素子の高速駆動により適している。撮像素子１０６は、タイミング信号発生部１１３によって発生されたタイミング信号に同期したタイミングで駆動され、撮像信号を出力する。
【００３０】
１０７は撮像素子１０６の撮像信号出力をサンプリングし、ゲイン調整するサンプリング・ＡＧＣ部である。１０８は映像信号処理回路で、サンプリング・ＡＧＣ部１０７からの出力信号を後述の動画記録・再生部１１５、静止画記録・再生部１１６に対応した信号に処理する。また、映像信号処理回路１０８は、動画記録・再生部１１５、静止画記録・再生部１１６で再生された動画像・静止画像の処理も行う。また、映像信号処理回路１０８にはメモリ回路１２１が接続されており、メモリ回路１２１は、撮像した画像を一時的に記憶することが可能である。
【００３１】
１１５は動画の記録処理と再生処理を行う動画記録・再生部である。動画記録・再生部１１５は、不図示の不揮発性の記録媒体である磁気テープ、光ディスク、磁気ディスク、半導体メモリなどに動画を記録し、また当該記録媒体に記録された動画の再生処理を行う。１１６は静止画記録・再生部であり、動画記録・再生部と同様に不揮発性の記録媒体に静止画を記録し、また記録媒体に記録された静止画の再生を行う。なお、動画と静止画を同じ記録媒体に記録する構成とすることもできる。この場合は動画記録・再生部１１５と静止画記録・再生部１１６は共通とすることができる。
【００３２】
１１４は撮像装置の動作全般を統括的に制御するシステム制御部であり、１つまたは複数のマイクロコンピュータで構成されている。１１０は変倍レンズ１０２を移動させるための駆動源であるモータ、１１１はフォーカスレンズ１０５を移動させるための駆動源であるモータ、１１２は絞り１０３の駆動源であるモータやＩＧメータである。それぞれがシステム制御部１１４からの制御信号により変倍レンズ１０２、フォーカスレンズ１０５、絞り１０３を駆動する。
【００３３】
１０９は表示装置である。表示装置１０９は、映像信号処理回路１０８の出力信号が表示され、撮影者が画像をモニタするために用いられる。また、表示装置１０９は、動画記録・再生部１１５と静止画記録・再生部１１６にて再生された動画像・静止画像の表示にも用いられる。１１７は動画記録スイッチ、１１８はレリーズスイッチ（静止画撮影指示手段）であり、これらは、撮影者が動画撮影、静止画撮影を行うときに操作される。システム制御部１１４は、撮影者による動画記録スイッチ１１７、レリーズスイッチ１１８への操作に応じて、動画・静止画撮影処理を行う。
【００３４】
１１９はストロボ１２０を制御するストロボ制御部である。ストロボ１２０は被写体の光量不足が検出された場合や撮影者によってストロボ発光が指示された場合に、被写体に対しストロボ光を照射する。
【００３５】
次に、通常のフレームレートより短い時間間隔で動画像を撮像し、ストロボ光が照射された場合はストロボ光が照射されていない被写体の画像を選択して動画像として記録する撮像方法について説明する。
【００３６】
図２は、第１の実施形態における撮像装置の撮像素子１０６による動画の記録方法を示す概念図である。
【００３７】
動画撮影中は、図２に示すように、タイミング信号発生部１１３により発生したタイミング信号の周期で、撮像素子１０６の受光とサンプリング・ＡＧＣ部１０７へのデータ転送が周期的に行われるように、撮像素子１０６が駆動される。ここでタイミング信号発生部１１３は、通常の動画記録用のフレームレートである１／６０秒の４倍の周期で撮像素子１０６を駆動するようにタイミング信号を発生している。但し、動画を１／６０秒のフレームレートで記録すればよいので、動画記録用画像としては、図示の１、１ａ、１ｂのタイミングで撮像された画像のみを用いて記録を行っている。なお、ここでは動画のフレームレートの４倍の周期で撮像素子１０６を駆動しているが、通常のフレームレートより短い撮像時間間隔であればこれに限ったものではない。また、１フレーム分の画像では露光時間が短く画像の明るさが不足する場合には、例えば、１と２のタイミングで撮像された２つの画像を加算して記録したり、さらに画像信号のゲインを変化させて適正な明るさの画像に変換してから記録してもよい。
【００３８】
図３は、動画撮影中にストロボ発光が検出された場合の撮像素子１０６による動画および静止画の記録方法の一例を示す概念図である。
【００３９】
図３に示す期間にストロボ発光が行われた場合、通常の動画記録のタイミングである１ａで撮像された画像にはストロボ光が写ってしまうため、そのまま記録すると再生画像にストロボ光によるちらつきが現れてしまう。そこで、本実施形態では、ストロボ発光が４および１ａの撮像時に行われたことを検出すると、１ａのタイミングに最も近くかつストロボ発光がされていない２ａのタイミングで撮像された画像を動画記録用として用いる。２ａの撮像タイミングは、通常の動画記録の撮像タイミングとは１／４フレーム分しかずれていないため、再生される画像の不連続は目立たず滑らかで自然な動画像が再生できる。
【００４０】
ストロボ発光の検出については、動画撮影を行っている撮像装置本体でストロボ発光を行った場合は、例えば、システム制御手段１１４がストロボ制御部１１９によるタイミング情報を用いて検出する。一方、他のカメラによるストロボ発光の場合には、例えば、システム制御部１１４により、撮像素子１０６で撮像された画像の明るさの変化を用いてストロボ発光を検出することができる。
【００４１】
なお、動画撮影を行っている撮像装置本体で静止画撮影を行った場合は、ストロボ発光期間中である４のタイミングで撮像された画像と１ａのタイミングで撮像された画像のいずれか、または両方の画像の加算したものを用いて静止画記録を行う。画像信号のゲインを変化させて適正な明るさの画像に変換してから記録してもよいのは動画像の場合と同様である。
【００４２】
図４は、動画撮影中にストロボ発光が検出された場合の撮像素子１０６による動画および静止画の記録方法の他の例を示す概念図である。
【００４３】
図４に示す期間にストロボ発光が行われた場合、通常の動画記録のタイミングに最も近いのは４のタイミングで撮像された画像である。この画像はストロボ発光の検出以前に撮像された画像なので、ストロボ発光を検出した時点では既に１ａのタイミングで撮像が開始されている。しかしながら、予めメモリ回路１２１に直前の１画面乃至複数画面分の画像を一時記憶しておくことで、ストロボ発光を検出した場合に４のタイミングで撮像された画像を選択して記録することができる。このように、メモリ回路１２１に直前の画像を一時記憶しておくことで、ストロボ発光検出以前の画像を含めて通常の動画記録のタイミングに最も近い画像を選択し記録することができる。この結果、再生される画像を滑らかで自然な動画像とすることが可能となる。
【００４４】
図５は、本発明の第１の実施形態における動画・静止画記録の動作処理を示すフローチャートである。本処理は、システム制御部１１４で実行される。
【００４５】
まず、ステップＳ５０１では、システム制御部１１４は、撮像素子１０６から画像を取得する。次に、ステップＳ５０２では、システム制御部１１４は、ストロボ発光が検出された場合に動画記録用画像として使用するために、ステップＳ５０１で取得した画像データをメモリ回路１２１に記憶する。次に、ステップＳ５０３では、システム制御部１１４は、動画撮影中であるかどうかを判定する。
【００４６】
ステップＳ５０３で動画撮影中と判定された場合はステップＳ５０４に進み、システム制御部１１４は、レリーズスイッチがＯＮされて静止画撮影が撮影者より指示されているかどうかを判定する。レリーズスイッチＯＮの場合はステップＳ５０５に進み、静止画撮影においてストロボを発光するかどうかを判定する。被写体の光量が不足していたり、撮影者によってストロボ発光が指示されている場合など、システム制御部１１４がストロボ発光が必要と判定した場合にはステップＳ５０６に進んでストロボ発光を行う。一方、ストロボ発光が不要と判定した場合はステップＳ５０８に進む。
【００４７】
ストロボが発光されると、システム制御部１１４は、ストロボ光が被写体に照射されていない画像のうち、通常の動画記録のタイミングに最も近いタイミングで撮像された画像を選択し（ステップＳ５０７）、動画として記録する（ステップＳ５０８）。次に、ステップＳ５０９では、システム制御部１１４は、ストロボ光が被写体に照射されている画像から静止画記録用の画像を選択し、静止画として記録して（ステップＳ５１０）、ステップＳ５０１に戻る。
【００４８】
一方、ステップＳ５０４でレリーズスイッチがＯＦＦであった場合はステップＳ５１１に進み、システム制御部１１４は、撮像された画像の明るさの変化などにより被写体にストロボが照射されているかどうかを判定する。システム制御部１１４は、ストロボ光が照射されていないと判定した場合はステップＳ５１３に進む。一方、システム制御部１１４は、ストロボ光が照射されていると判定した場合は、ステップＳ５０７と同様に動画記録用の画像を選択し（ステップＳ５１２）、動画記録を行い（ステップＳ５１３）、ステップＳ５０１に戻る。
【００４９】
システム制御部１１４は、ステップＳ５０３で動画撮影中でないと判定した場合はステップＳ５１４に進み、レリーズスイッチがＯＮかどうかを判定する。システム制御部１１４は、ＯＮではないと判定した場合はステップＳ５０１に戻り、ＯＮであると判定した場合はステップＳ５１５に進む。ステップＳ５１５からステップＳ５１８までの処理は、動画記録用画像選択および動画記録を行わない点を除いてステップＳ５０５からステップＳ５１０までの処理と同様であるので説明は省略する。
【００５０】
上記実施形態によれば、動画記録用の通常のフレームレート（第１の撮像時間間隔）より短い時間間隔（第２の撮像時間間隔）で被写体を撮影する。そして、被写体にストロボ光が照射されたことを検出した場合、撮像した画像のうち、ストロボ光が照射されていない被写体の画像を選択して動画像として記録する。これにより、通常のフレームレートより短い時間間隔で動画像を撮像し、ストロボ光が照射された場合はストロボ光の照射開始の直前、もしくは照射が完了した直後の画像を動画像として記録することができる。その結果、再生画像にストロボ光によるちらつきが生じないようにすると同時に、動画の不連続期間を通常のフレームレートの周期より短かくできるので、再生画像を滑らかで自然な動画像とすることができる。
【００５１】
また、通常のフレームレートより短い時間間隔で撮像した画像からストロボ光が照射されていない被写体の画像を選択すればよいので、ストロボ発光タイミングを動画の撮像タイミングと同期する必要がなく、ストロボ発光タイミングの制御が容易となる。その上、他のカメラによるストロボ発光に対しても上記と同様の効果を得ることができる。
【００５２】
なお、動画像記録用に選択する画像は必ずしも１画面分でなくともよく、１画面分の露光時間では被写体の明るさが不十分である場合に、複数の画像を選択しそれらの画像を加算することで十分な明るさの画像を生成し記録してもよい。
【００５３】
［第２の実施形態］
次に、本発明の第２の実施形態に係る撮像装置について説明する。本発明の第２の実施の形態に係る撮像装置は、その構成（図１）が上記第１の実施の形態に係る撮像装置と同じであり、第１の実施の形態と同様の部分については、同一の符号を用いてその説明を省略する。以下に、上記第１の実施の形態と異なる点のみを説明する。
【００５４】
上記第１の実施形態の撮像装置は、動画記録中に常に通常のフレームレート（第１の撮像時間間隔）より短い時間間隔（第２の撮像時間間隔）で動画像を撮像する。これに対して、第２の実施形態における撮像装置は、被写体にストロボ光が照射されたことを検出した場合にのみ通常のフレームレートより短い時間間隔で撮像を行い、それ以外の場合は通常のフレームレートの間隔で撮像を行う点が異なる。
【００５５】
図６、図７および図８は、第２の実施形態における動画撮影中の撮像素子１０６の動画および静止画の記録方法の一例を示す概念図である。
【００５６】
被写体にストロボ光が照射されていない場合は、図６のように、通常のフレームレートである１／６０秒の周期で撮像素子１０６が駆動される。このように通常は低い周期の通常のフレームレートで撮像素子を駆動することで、撮像素子１０６の駆動に伴う撮像装置の電力消費を抑制し、連続撮影時間を長くすることができ、またバッテリーが小型化でき、携帯性を向上させることができる。
【００５７】
一方、ストロボ光が被写体に照射される場合は、図７のように、通常のフレームレートより短い時間間隔で撮像素子１０６が駆動され、動画像が記録される。ここで動画撮影を行っている撮像装置本体でストロボ発光を行う場合は、予めストロボ発光のタイミングがわかっていることから、図７に示すようにストロボ発光のタイミングよりも前から短い時間間隔の撮像を開始する。そして、メモリ回路１２１に撮像された画像を一時的に記憶させておく。そして、ストロボが発光された後、記憶されている画像を含めて通常の動画記録のタイミングに最も近い画像（図７における４のタイミングで記録された画像）を選択して動画として記録する。あわせて、ストロボ発光期間中である１ａの画像と２ａの画像のいずれか、または両方の画像の加算した画像を用いて静止画記録を行う。なお、図７では、ストロボ発光のタイミングに対し動画フレームレートの１周期分前から短い時間間隔の撮像を開始しているが、ストロボ発光より前のタイミングであれば撮像開始のタイミングはこれに限らずともよい。
【００５８】
他のカメラによるストロボ発光の場合には、ストロボ発光のタイミングが不明なため、図８のようにストロボ発光を検出した後に、通常のフレームレートより短い時間間隔で撮像素子１０６が駆動される。この場合は、図７における４のタイミングで撮像された画像は記録されていないため、通常の動画記録のタイミングに最も近い画像として３ａのタイミングで記録された画像を選択し記録する。３ａの撮像タイミングで記録された画像は、動画記録のタイミングに対して１／２フレーム分ずれているため、再生される画像の滑らかさは劣るが、上記従来技術のように１フレーム分欠落する場合に比べると、より滑らかな画像を再生することができる。
【００５９】
上記実施形態によれば、被写体にストロボ光が照射されたことが検出された場合にのみ通常のフレームレートより短い時間間隔で撮像を行い、それ以外の場合は通常のフレームレートの間隔で撮像を行う。これにより、撮像装置の消費電力を削減し撮影時間の延長、撮像装置の携帯性の向上を図ることができる。動画撮影を行っている撮像装置本体でストロボ発光を行う場合の効果は、上記第１の実施形態における効果と同等であり、他のカメラによるストロボ発光の場合は再生画像の滑らかさがやや劣るものの、従来技術と比較するとより滑らかな画像を再生することができる。
【００６０】
［第３の実施形態］
次に、本発明の第３の実施形態に係る撮像装置について説明する。本発明の第３の実施の形態に係る撮像装置は、その構成（図１）が上記第１の実施の形態に係る撮像装置と同じであり、第１の実施の形態と同様の部分については、同一の符号を用いてその説明を省略する。以下に、上記第１の実施の形態と異なる点のみを説明する。
【００６１】
上記第１及び第２の実施形態の撮像装置は、動画記録時にストロボ光が照射されていない被写体の画像を選択して記録する。これに対して、第３の実施形態における撮像装置は、動画記録時は画像の選択を行わず撮像した画像をそのまま記録し、記録した画像の再生時にストロボ光が照射されていない被写体の画像を選択して再生する点が異なる。
【００６２】
図９、図１０および図１１は、第３の実施形態における動画撮影中の撮像素子１０６の動画および静止画の記録方法の一例を示す概念図である。
【００６３】
被写体にストロボ光が照射されていない場合は、図９のように、動画は通常のフレームレートで第１の動画記録方式により第１の動画像データ(動画記録１)として記録される。このように通常は低い周期の通常のフレームレートで画像の記録を行う理由は、常に通常のフレームレートより短い時間間隔の動画を常に記録すると、記録媒体に記録する動画データ量が多くなり、記録媒体に記録できる時間が短くなってしまうためである。
【００６４】
一方、ストロボ光が被写体に照射される場合は、図１０および図１１のように、動画は通常のフレームレートより短い時間間隔で第２の動画記録方式により第２の動画像データ(動画記録２)として記録される。ここで第２の動画像データの記録中は、第１の動画像データの記録を継続してもよいし、中断してもよい。また、動画撮影を行っている撮像装置本体でストロボ発光および静止画撮影を行なう場合は、第１の実施形態、第２の実施形態と同様の方法により静止画記録もあわせて行う。
【００６５】
動画撮影中に撮像装置本体でストロボ発光を行う場合、図１０に示すように、予めストロボ発光のタイミングがわかっていることから、ストロボ発光のタイミングよりも前から短い時間間隔の撮像および記録を開始する。
【００６６】
一方、動画撮影中に他のカメラによるストロボ発光が検出された場合、図１１に示すように、ストロボ発光のタイミングはわかっていないが、メモリ回路１２１に直前に撮像された画像を常に保持しておくようにしておく。そして、図１１の１ａのタイミングでストロボ発光が検出された場合にメモリ回路１２１から直前の画像(図１１の１から４)を読み出して第２の動画像データとして記録する。このようにすることで、再生時にはストロボ発光検出以前の画像を含めて通常の動画記録のタイミングに最も近い画像を選択し再生を行うことができる。
【００６７】
なお、図１０および図１１では、ストロボ発光のタイミングに対し動画フレームレートの１周期分前から第２の動画像データの記録を開始しているが、ストロボ発光より前のタイミングであれば記録開始のタイミングはこれに限らずともよい。
【００６８】
記録された動画の再生時には、第１の動画像データと第２の動画像データの同期が行えるようにしておく必要がある。そこで、まず動画記録時において、第１の動画像データと第２の動画像データが同時に撮像された動画像であることが識別できるように、双方の動画像データに共通のＩＤ情報を生成し、それぞれの動画像データに付加して記録する。加えて、再生時に第１の動画像データと第２の動画像データの時間的な同期が行えるように、第１の動画像データのどの時刻で第２の動画像データが記録されたかが判別できる同期情報(タイムコードなど)もあわせて記録する（同期情報記録手段）。
【００６９】
記録された動画の再生時には、第１の動画像データと第２の動画像データを、記録された同期情報に基づいて撮像タイミングを判別する。そして、ストロボ光が照射されたシーンの再生時には第２の動画像データにおいてストロボ光が照射されていない被写体の画像のうち、通常の動画記録のタイミングに最も近い画像を選択して再生を行う（動画再生手段）。画像の選択の方法については第２の実施形態と共通であるので説明は省略する。
【００７０】
本実施形態によれば、動画記録時にストロボ光が被写体に照射された場合には通常のフレームレートより短い時間間隔で第２の動画像データとして記録する。そして、再生時に第２の動画像データにおいてストロボ光が照射されていない被写体の画像のうち、通常の動画記録のタイミングに最も近い画像を選択して再生を行う。これにより、ストロボ光が照射された場合は通常のフレームレートより短い時間間隔で撮像した動画像を記録し、再生時にはストロボ光の照射開始の直前、もしくは照射が完了した直後の画像を動画像として選択して再生することができる。その結果、再生画像にストロボ光によるちらつきが生じないようにすると同時に、再生画像を滑らかで自然な動画像とすることができる。
【００７１】
また再生時に通常のフレームレートより短い時間間隔で撮像した画像からストロボ光が照射されていない被写体の画像を選択するので、撮影時のストロボ発光タイミングを動画の撮像タイミングと同期する必要がなく、ストロボ発光タイミングの制御が容易となる。その上、他のカメラによるストロボ発光に対しても上記と同様の効果を得ることができる。ストロボ光が照射された場合は、撮像時間間隔が異なる複数の動画像が記録されるが、記録された同期情報を用いて再生時にこれら複数の動画像を連続した動画像として再生すればよい。
【００７２】
なお、動画再生時に選択する画像は必ずしも１画面分でなくともよく、１画面分の画像では被写体の明るさが不十分である場合に、複数の画像を選択しそれらの画像を加算することで十分な明るさの画像を生成し再生してもよい。
【００７３】
［第４の実施形態］
次に、本発明の第４の実施形態に係る撮像装置について説明する。本発明の第４の実施の形態に係る撮像装置は、その構成（図１）が上記第１の実施の形態に係る撮像装置と同じであり、第１の実施の形態と同様の部分については、同一の符号を用いてその説明を省略する。以下に、上記第１の実施の形態と異なる点のみを説明する。
【００７４】
第４の実施形態における撮像装置では、第３の実施形態と同様に、記録した画像の再生時にストロボ光が照射されていない被写体の画像を選択して再生する。これに加えて、第２の実施形態と同様に、被写体にストロボ光が照射されたことが検出された場合にのみ通常のフレームレートより短い時間間隔で撮像を行い、それ以外の場合は通常のフレームレートの間隔で撮像を行う。これにより、第３の実施形態における撮像装置に比べて、撮像素子の駆動に伴う撮像装置の電力消費を抑制し、連続撮影時間を長くでき、またバッテリーが小型化でき携帯性を向上させることができる。
【００７５】
図１２、図１３および図１４は、第４の実施形態における動画撮影中の撮像素子１０６の動画および静止画の記録方法の一例を示す概念図である。
【００７６】
被写体にストロボ光が照射されていない場合は、図１２のように、通常のフレームレートである１／６０秒の周期で撮像素子１０６が駆動されると共に、撮像した画像が通常のフレームレートの動画記録方式で第１の動画像データとして記録される。
【００７７】
一方、ストロボ光が被写体に照射される場合は、図１３および図１４のように、通常のフレームレートより短い時間間隔で動画像が撮像されると共に、撮像した画像が第２の動画像データとして記録される。
【００７８】
動画撮影中の撮像装置本体でストロボ発光を行う場合、図１３に示すように、予めストロボ発光のタイミングがわかっていることから、ストロボ発光のタイミングよりも前から短い時間間隔の撮像および記録が開始される。
【００７９】
一方、動画撮影中に他のカメラによるストロボ発光が検出された場合、図１４に示すように、ストロボ発光のタイミングはわかっていないため、図１４の１ａのタイミングでストロボ発光が検出された後に短い時間間隔の撮像および記録が開始される。したがって、再生時には通常の動画記録のタイミングに最も近い画像として３ａの画像を選択し再生することになり、再生される画像の滑らかさは劣るが、従来技術に比べるとより滑らかな画像を再生することができる点は第２の実施形態と同様である。
【００８０】
第１の動画像データと第２の動画像データの同期情報の記録および再生時の処理については第３の実施形態と同様であるので、その説明は省略する。
【００８１】
本実施形態によれば、再生時にストロボ光が照射されていない被写体の画像を選択して再生を行う点が異なるものの、第２の実施形態と同様の効果を得ることができる。
【００８２】
また、本発明の目的は、以下の処理を実行することによっても達成される。即ち、上述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記録媒体を、システム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）が記録媒体に格納されたプログラムコードを読み出す処理である。この場合、記録媒体から読み出されたプログラムコード自体が前述した実施の形態の機能を実現することになり、そのプログラムコードおよび該プログラムコードを記憶した記録媒体は本発明を構成することになる。
【００８３】
また、プログラムコードを供給するための記録媒体としては、次のものを用いることができる。例えば、フロッピー（登録商標）ディスク、ハードディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＤＶＤ−ＲＷ、ＤＶＤ＋ＲＷ、磁気テープ、不揮発性のメモリカード、ＲＯＭ等である。または、プログラムコードをネットワークを介してダウンロードしてもよい。
【００８４】
また、コンピュータが読み出したプログラムコードを実行することにより、上記実施の形態の機能が実現される場合も本発明に含まれる。加えて、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているＯＳ（オペレーティングシステム）等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれる。
【００８５】
さらに、前述した実施形態の機能が以下の処理によって実現される場合も本発明に含まれる。即ち、記録媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれる。その後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行う場合である。
【図面の簡単な説明】
【００８６】
【図１】本発明の第１の実施形態に係る撮像装置の構成を示す図である。
【図２】第１の実施形態における撮像装置の撮像素子による動画の記録方法を示す概念図である。
【図３】動画撮影中にストロボ発光が検出された場合の撮像素子による動画および静止画の記録方法の一例を示す概念図である。
【図４】動画撮影中にストロボ発光が検出された場合の撮像素子による動画および静止画の記録方法の他の例を示す概念図である。
【図５】本発明の第１の実施形態における動画・静止画記録の動作処理を示すフローチャートである。
【図６】第２の実施形態における撮像装置の撮像素子による動画の記録方法を示す概念図である。
【図７】動画撮影中に撮像装置本体でストロボ発光を行う場合の撮像素子による動画および静止画の記録方法の一例を示す概念図である。
【図８】動画撮影中に他のカメラによるストロボ発光を検出した場合の撮像素子による動画および静止画の記録方法に一例を示す概念図である。
【図９】本発明の第３の実施形態における撮像装置の撮像素子による動画の記録方法を示す概念図である。
【図１０】動画撮影中に撮像装置本体でストロボ発光を行う場合の撮像素子による動画および静止画の記録方法の一例を示す概念図である。
【図１１】動画撮影中に他のカメラによるストロボ発光が検出された場合の撮像素子１０６による動画および静止画の記録方法の一例を示す概念図である。
【図１２】本発明の第４の実施形態における撮像装置の撮像素子による動画の記録方法を示す概念図である。
【図１３】動画撮影中に撮像装置本体でストロボ発光を行う場合の撮像素子による動画および静止画の記録方法の一例を示す概念図である。
【図１４】動画撮影中に他のカメラによるストロボ発光が検出された場合の撮像素子による動画の記録方法の一例を示す概念図である。
【符号の説明】
【００８７】
１０１  固定の第１群レンズ
１０５  フォーカスコンペレンズ
１０６  撮像素子
１０８  映像信号処理回路
１０９  表示装置
１１３  タイミング信号発生部
１１４  システム制御部
１１５  動画記録・再生部
１１６  静止画記録・再生部
１１９  ストロボ制御部
１２０  ストロボ
１２１  メモリ回路
【図１】
2010011145.tif 000003
【図２】
2010011145.tif 000004
【図３】
2010011145.tif 000005
【図４】
2010011145.tif 000006
【図５】
2010011145.tif 000007
【図６】
2010011145.tif 000008
【図７】
2010011145.tif 000009
【図８】
2010011145.tif 000010
【図９】
2010011145.tif 000011
【図１０】
2010011145.tif 000012
【図１１】
2010011145.tif 000013
【図１２】
2010011145.tif 000014
【図１３】
2010011145.tif 000015
【図１４】
2010011145.tif 000016