(57)【要約】【課題】  利便性を高める。【解決手段】  動画撮影では、撮像素子１６の出力画像信号は、Ａ／Ｄ変換器１８、信号処理部２２及びリサイズ部３２を介して、ＤＲＡＭ２０の動画バッファに書き込まれる。動画記録が開始されると、ＪＰＥＧ処理部２４が、動画バッファの画像データを圧縮する。ＡＶＩデータ形式の動画ファイルが、記録媒体２８に記録される。動画記録中に静止画撮影のレリーズ操作があると、撮像素子１６は、静止画用の露光モードで動作する。静止画像データは圧縮され、ＤＲＡＭ２０の静止画バッファを介して、記録媒体２８に記録される。静止画を動画に優先して記録する静止画優先モードと、動画を静止画に優先して記録する動画優先モードを選択可能である。【選択図】  図１
2006310907.tif 000002
【特許請求の範囲】
【請求項１】
動画と静止画を記録可能な撮像装置であって、
光学像を画像信号に変換する撮像手段と、
前記画像信号を一時記憶するメモリと、
前記メモリに記憶される画像信号を、動画の場合には動画記録処理し、静止画の場合には静止画記録処理して、記録媒体に記録する記録手段
とを具備し、静止画を動画に優先して前記記録媒体に記録する静止画優先モードと、動画を静止画に優先して前記記録媒体に記録する動画優先モードを具備することを特徴とする撮像装置。
【請求項２】
さらに、前記静止画優先モードと前記動画優先モードの一方を設定する設定手段を具備することを特徴とする請求項１に記載の撮像装置。
【請求項３】
更に、前記メモリの空き容量に応じて、前記記録手段に前記静止画優先モードか前記動画優先モードを設定する制御手段を具備することを特徴とする請求項１に記載の撮像装置。
【請求項４】
前記制御手段は、前記メモリの動画用記憶領域の空き容量が所定値未満になると、前記記録手段を前記動画優先モードに設定する
ことを特徴とする請求項２に記載の画像処理装置。
【請求項５】
更に、前記記録媒体の書き込み速度、撮影する静止画サイズ、撮影する動画サイズ及び撮影する動画のフレームレートの１以上により、前記記録手段に前記静止画優先モードか前記動画優先モードを設定する制御手段を具備することを特徴とする請求項１に記載の撮像装置。
【請求項６】
光学像を画像信号に変換する撮像手段と、
前記画像信号を一時記憶するメモリと、
前記メモリに記憶される画像信号を、動画の場合には動画記録処理し、静止画の場合には静止画記録処理して、記録媒体に記録する記録手段
とを具備し、動画と静止画を記録可能な撮像装置を制御する方法であって、
前記メモリの空き容量を調べる調査ステップと、
前記メモリの前記空き容量に従い、静止画を動画に優先して前記記録媒体に記録する静止画優先モードか、動画を静止画に優先して前記記録媒体に記録する動画優先モードを前記記録手段に設定する設定ステップ
とを具備することを特徴とする撮像装置の制御方法。
【請求項７】
前記設定ステップは、前記メモリの動画用記憶領域の空き容量が所定値未満になると、前記記録手段を前記動画優先モードに設定することを特徴とする請求項６に記載の撮像装置の制御方法。
【請求項８】
更に、前記記録媒体の書き込み速度、撮影する静止画サイズ、撮影する動画サイズ及び撮影する動画のフレームレートの１以上により、前記記録手段に前記静止画優先モードか前記動画優先モードを設定するステップを具備することを特徴とする請求項６に記載の撮像装置の制御方法。
【請求項９】
光学像を画像信号に変換する撮像手段と、
前記画像信号を一時記憶するメモリと、
前記メモリに記憶される画像信号を、動画の場合には動画記録処理し、静止画の場合には静止画記録処理して、記録媒体に記録する記録手段
とを具備し、動画と静止画を記録可能な撮像装置を制御する方法であって、
前記記録媒体の書き込み速度、撮影する静止画サイズ、撮影する動画サイズ及び撮影する動画のフレームレートの１以上により、前記記録手段に前記静止画優先モードか前記動画優先モードを設定することを特徴とする撮像装置の制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、動画及び静止画の撮影が可能な撮像装置及びその制御方法に関し、より具体的には、動画撮影中に静止画撮影を可能な撮像装置及びその制御方法に関する。
【背景技術】
【０００２】
従来、動画撮影中に静止画撮影を可能としたカメラが提案されている。例えば、特許文献１には、動画撮影中に静止画撮影要求があった場合、静止画データを一時的にメモリに記憶しておき、動画撮影終了後に記録媒体へ書き込み可能なデジタルビデオカメラが記載されている。また、特許文献２には、連続撮影中の任意のフレームを高精細記録が行える画像処理装置及び方法が記載されている。すなわち、特許文献１及び特許文献２には、メモリ上の動画データを静止画に優先して記録媒体に書き込む構成が記載されている。
【０００３】
一方、特許文献３には、動画撮影中に静止画撮影要求があった場合、動画撮影のための画像データのメモリへの取り込みを中断し、静止画の記録媒体への書き込み終了後にメモリへの画像データの取り込みを再開する電子カメラ及び画像記録方法が記載されている。すなわち、特許文献３には、メモリ上の静止画データを動画に優先して記録媒体に書き込む構成が記載されている。
【特許文献１】特開平９−２３３４１０号公報
【特許文献２】特開平１０−２００８５９号公報
【特許文献３】特開２０００−３２４４３４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
特許文献１，２に記載の従来例にあっては、静止画データを記録媒体に書き出さずに内部メモリに記憶しておくので、動画撮影の中断はないものの、内部メモリの容量による制限が生じ、動画撮影中の静止画撮影可能枚数が限られてしまうという問題がある。
【０００５】
一方、特許文献３に記載の従来例のように静止画を優先記録する構成では、動画撮影中の静止画撮影可能枚数には制限が無い。しかし、静止画データのサイズや記録媒体の書き込み速度による制限が生じる。この制限により、静止画データサイズが大きいか、又は、記録媒体の書き込み速度が遅い場合には、動画撮影の中断時間が長くなってしまうという問題がある。
【０００６】
静止画撮影終了後、静止画データの記録媒体への書き込みが終了していなくても動画撮影のための画像データのメモリへの取り込みを再開することで、動画撮影の中断時間を短縮できる。しかし、この方法では、動画データを記憶しておくメモリが不足して、動画撮影が中断してしまうことがある。
【０００７】
そこで、本発明は、上記のような従来技術の問題点を解決する撮像装置及びその制御方法を提示することを目的とする。
【課題を解決するための手段】
【０００８】
上記の目的を達成するために、本発明に係る撮像装置は、動画と静止画を記録可能な撮像装置であって、光学像を画像信号に変換する撮像手段と、前記画像信号を一時記憶するメモリと、前記メモリに記憶される画像信号を、動画の場合には動画記録処理し、静止画の場合には静止画記録処理して、記録媒体に記録する記録手段とを具備し、静止画を動画に優先して前記記録媒体に記録する静止画優先モードと、動画を静止画に優先して前記記録媒体に記録する動画優先モードを具備することを特徴とする。
【０００９】
本発明に係る撮像装置の制御方法は、光学像を画像信号に変換する撮像手段と、前記画像信号を一時記憶するメモリと、前記メモリに記憶される画像信号を、動画の場合には動画記録処理し、静止画の場合には静止画記録処理して、記録媒体に記録する記録手段とを具備し、動画と静止画を記録可能な撮像装置を制御する方法であって、前記メモリの空き容量を調べる調査ステップと、前記メモリの前記空き容量に従い、静止画を動画に優先して前記記録媒体に記録する静止画優先モードか、動画を静止画に優先して前記記録媒体に記録する動画優先モードを前記記録手段に設定する設定ステップとを具備することを特徴とする。
【００１０】
本発明に係る撮像装置の制御方法は、光学像を画像信号に変換する撮像手段と、前記画像信号を一時記憶するメモリと、前記メモリに記憶される画像信号を、動画の場合には動画記録処理し、静止画の場合には静止画記録処理して、記録媒体に記録する記録手段とを具備し、動画と静止画を記録可能な撮像装置を制御する方法であって、前記記録媒体の書き込み速度、撮影する静止画サイズ、撮影する動画サイズ及び撮影する動画のフレームレートの１以上により、前記記録手段に前記静止画優先モードか前記動画優先モードを設定することを特徴とする。
【発明の効果】
【００１１】
本発明によれば、動画撮影中の静止画撮影に対し、操作性と性能を改善できる。
【発明を実施するための最良の形態】
【００１２】
以下、図面を参照して、本発明の実施例を詳細に説明する。
【実施例１】
【００１３】
図１は、本発明第一の実施例であるカメラの概略構成ブロック図を示す。図１において、カメラ１０は、動画及び静止画の両方を撮影可能な電子スチルカメラ又はデジタルカメラである。撮影レンズ１２は、１枚又は複数枚のレンズで構成される。露出制御機構１４は、絞り及びシャッタからなり、被写体の明るさと露出時間を調整する。撮像素子１６は、数百万画素程度のＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）撮像素子やＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ−Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）撮像素子などからなり、被写体像を画像信号に変換して出力する。Ａ／Ｄ変換器１８は、撮像素子１６からのアナログ画像信号をデジタル信号に変換する。
【００１４】
ＤＲＡＭ２０は、Ａ／Ｄ変換器１８からのデジタル画像信号を一時的に蓄えるバッファ機能を提供する。ここで、デジタル画像信号は、信号処理後の画像データ以外に、ＪＰＥＧ（Ｊｏｉｎｔ  Ｐｈｏｔｏｇｒａｐｈｉｃ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）圧縮後のＪＰＥＧデータ等をも意味する。通常は、図示しないメモリ制御回路を介して、ＤＲＡＭ２０に画像データが書き込まれ、ＤＲＡＭ２０から画像データが読み出される。
【００１５】
信号処理部２２は、Ａ／Ｄ変換後１８の出力画像信号を輝度信号と色差信号に分けて処理し、ＪＰＥＧデータの前段階としてＹＵＶデータを生成する。信号処理部２２はまた、ＹＵＶデータからカメラ１０で使用される一般的な記録フォーマットのＪＰＥＧデータを生成する。なお、ＹＵＶデータは、輝度（Ｙ）と、青の色差信号（Ｕ、Ｃｂ）と赤の色差信号（Ｖ、Ｃｒ）からなる２つの色度とで色を表現する画像データである。
【００１６】
ＪＰＥＧ処理部２４は、信号処理部２２からのＹＵＶデータをＪＰＥＧ形式に圧縮し、また、ＪＰＥＧデータをＹＵＶデータに伸長する。
【００１７】
インターフェース部２６は、ＪＰＥＧデータの記録媒体２８への書き込みと読み出しに使用される。記録媒体２８は、半導体メモリ素子、磁気記録媒体又は光記録媒体等からなり、カメラ１０から着脱可能である。
【００１８】
表示部３０はＴＶ又はカラー液晶などからなり、種々の情報をビューワ表示したり、撮影した画像をレビュー表示したり、伸長した画像を再生表示したりするのに使用される。
【００１９】
リサイズ部３２は、信号処理部２２のＹＵＶ出力データを任意のサイズにリサイズするのに使用される。
【００２０】
各デバイス１８〜２６，３０，３２は、ＣＰＵ３４のバスに繋がっている。ＣＰＵ３４は、これらデバイス１８〜３２の動作及びこれらの間のデータフローなどを制御する。
【００２１】
また、図示しないが、各デバイス１８，２２，２４，２６，３０，３２とＤＲＡＭ２０との間のデータ転送には、ＣＰＵ３４の介在を必要としないＤＭＡ（Ｄｉｒｅｃｔ  Ｍｅｍｏｒｙ  Ａｃｃｅｓｓ）転送が使用される。
【００２２】
さらに、Ａ／Ｄ変換器１８から信号処理部２２に、信号処理部２２からＪＰＥＧ処理部２４に、及び信号処理部２２からリサイズ部３２には、直接、データを転送するパスを接続してある。
【００２３】
音声処理部３６は、音声信号のＡ／Ｄ変換とＤ／Ａ変換を行っており、音声の録音処理と再生処理を担当する。マイク３８は録音する時に、音声を音声処理部３６に入力し、スピーカ４０は音声処理部３６からの音声を出力する。
【００２４】
次に、本実施例の動画撮影動作を説明する。被写体の光学像は、撮影レンズ１２及び露出制御機構１４により撮像素子１６に結像する。露出制御機構１４のシャッタは開放状態にあり、絞りが露光量を制御する。撮像素子１６は被写体の光学像を画像信号に変換する。Ａ／Ｄ変換器１８は、撮像素子１６からのアナログ画像信号をデジタル画像データに変換する。デジタル画像データは、システムバスを介して信号処理部２２に転送される。このとき、撮像素子１６からは、全画素の読み出しでなく、水平や垂直に間引かれた（あるいは加算されて重畳した）画素の電荷信号が、記録フレームレートに合わせ読み出される。
【００２５】
信号処理部２２は、水平垂直のフィルタ処理、アパチャー補正処理及びガンマ処理等を動画撮影用のモードで実行し、処理結果をリサイズ部３２に転送する。
【００２６】
リサイズ部３２は、画像データをＶＧＡサイズ（水平６４０画素、垂直４８０ライン）にリサイズして、ＤＲＡＭ２０に転送する。ＤＲＡＭ２０上のＶＧＡ画像データは、表示部３０に転送され、ＴＶやカメラ１０に搭載された液晶上にスルー画像として表示される。すなわち、動画撮影時のスタンバイ状態では、表示部３０にスルー画像が表示さあれる。
【００２７】
動画記録が開始されると、ＪＰＥＧ処理部２４が、ＤＲＡＭ２０上のＶＧＡ画像データをＪＰＥＧデータに変換すると同時に、音声処理部３６が、マイク３８で取り込んだ音声信号をＷＡＶＥ形式の音声データに変換する。ＣＰＵ３４は、画像のＪＰＥＧデータと音声のＷＡＶＥデータにヘッダ等を付加し、ＡＶＩ（Ａｕｄｉｏ  Ｖｉｓｕａｌ  Ｉｎｔｅｒｌｅａｖｅｄ）データ形式で動画ファイルを生成する。ＡＶＩデータ形式の動画ファイルは、インターフェ−ス部２６を介して、記録媒体２８に動画ファイルとして記録される。
【００２８】
映像データ及び音声データの記録処理を詳細に説明する。ＡＶＩファイルでは、ファイル先頭のヘッダが映像データと音声データの配置を管理する。例えば、ヘッダに続き音声データ（４４．１ＫＨｚサンプリング、１６ｂｉｔステレオ）を１秒間に約１７２ｋＢｙｔｅ置く。また、映像データの１枚１枚のＪＰＥＧデータを３０ｆｐｓ（Ｆｒａｍｅ／Ｓｅｃ）なら１秒間に３０フレーム置く。さらに、音声データと映像データを交互に１秒間置きに配置する。
【００２９】
動画ファイルを作成するために、ＪＰＥＧデータをバッファするための画像バッファ領域と音声データをバッファするための音声バッファ領域をＤＲＡＭ２０に確保する。画像バッファ領域と音声バッファ領域は、それぞれの生成された映像データと音声データを一時的に記憶する。そして、１秒単位にＡＶＩデータ形式の映像データと音声データとをまとめて、ＤＲＡＭ２０上の動画バッファ（ＡＶＩバッファ）領域に書きこむ。
【００３０】
音声データはＷＡＶＥ形式であるから、１秒間のデータサイズは固定となるが、映像データはＪＰＥＧ形式であるからデータサイズが不定となる。画像バッファ領域を動画バッファの映像データ領域と兼用することで、ＤＲＡＭ２０を削減する場合、動画バッファ領域上の音声データ領域を空けつつ、ＪＰＥＧデータを書き込む。動画バッファ領域に溜めこんだデータは、順に記録媒体２８に動画ファイル（音声データ、映像データ）として書き込まれる。
【００３１】
動画データ（ＡＶＩデータ）を再生する時には、記録媒体２８上の動画ファイルから音声データと映像データを読み込み、ＤＲＡＭ２０上の再生バッファ領域に置き、音声データと映像データを別々に処理して再生する。
【００３２】
ＣＰＵ３４は、音声データをＤＲＡＭ２０上の音声バッファから音声処理部３６に転送する。音声処理部３６は、再生音声データをＤ／Ａ変換し、ゲインを調整し、アナログ再生信号をスピーカ４０に出力する。これにより、再生音声がスピーカ４０から出力される。
【００３３】
映像データは、ＤＲＡＭ２０上の画像バッファから１フレームずつＤＭＡ転送でＪＰＥＧ処理部２４に転送され、ＪＰＥＧ処理部２４は、ＪＰＥＧデータを伸長して、ＹＵＶデータをリサイズ部３２に出力する。リサイズ部３２は、ＪＰＥＧ処理部２４からの画像データを、ＴＶや液晶表示パネルに表示するためのＶＲＡＭサイズ（７２０画素ｘ４８０ライン）にリサイズし、ＤＲＡＭ２０のＶＲＡＭ領域に書き込む。ＤＲＡＭ２０のＶＲＡＭ領域の画像データは、表示部３０にＤＭＡ転送され、表示される。
【００３４】
次に、本実施例の静止画撮影動作を説明する。静止画撮影の待機状態の動作は、動画のスタンバイ状態の動作とほぼ同じであり、撮像素子１６で撮像した画像がスルー画像として表示部３０に表示される。
【００３５】
カメラ１０の図示していないレリーズスイッチは、２段階形式のスイッチ（ＳＷ１、ＳＷ２）で構成されている。ここで、ＳＷ１オンはリレーズスイッチの半押し状態（撮影準備状態）を示し、ＳＷ２オンはリレーズスイッチの全押し状態（静止画撮影動作状態）を示す。ＳＷ１オンになると、静止画撮影に必要な測距（ＡＦ）と測光（ＡＥ）が行われる。
【００３６】
ＳＷ２オンになると、撮影準備状態から静止画撮影動作状態に切り替わり、シャッタを閉じてから撮像素子１６の読み出しを止め、撮像素子１６を、入射光量に応じた電荷を蓄積する露光モードに変更する。撮影準備状態で被写体の輝度から予め算出した露出設定に従い絞りを設定し、撮像素子１６の余分な電荷を吐き捨てた後、算出したシャッタスピードでシャッタを開閉する。シャッタが完全に閉じきってから撮像素子１６を露光モードから電荷読出しモードに切り換えて、複数フィールドに分けて全画素の電荷を読み出す。その読み出された電荷信号をＡ／Ｄ変換器１８でデジタル信号に変換し、Ａ／Ｄ変換器１８の出力（いわゆる、ＲＡＷデータ）は、バスを介してＤＲＡＭ２０に転送される。
【００３７】
この電荷読み出しが終了すると、現像処理が開始される。現像処理は、銀塩フィルムの写真処理からの類推で命名されたものであり、具体的には、先ず、ＤＲＡＭ２０からＲＡＷデータを読み出し、信号処理部２２に転送する。信号処理部２２は、水平垂直のフィルタ処理、アパチャー補正処理及びガンマ処理等を静止画撮影用モードで実行し、その結果のＹＵＶデータをＪＰＥＧ処理部２４に転送する。ＪＰＥＧ処理部２４は、信号処理部２２からのＹＵＶデータをＪＰＥＧデータに変換してＤＲＡＭ２０に書き戻す。ＤＲＡＭ２０からのＲＡＷデータの読み出しからＪＰＥＧデータをＤＲＡＭ２０に書き戻すまでの処理が、現像処理になる。
【００３８】
現像処理の途中の信号処理部２２からのＹＵＶデータは、リサイズ部３２にも供給され、レビュー画像表示のためにＶＧＡサイズ程度にリサイズされてＤＲＡＭ２０に書き戻される。現像処理の終了後に、撮影確認のレビュー画像表示のために、ＶＧＡサイズのＹＵＶデータが表示部３０に転送され、レビュー画像としてＴＶ又はカメラ１０の液晶画面上に表示される。
【００３９】
次に、図２に示すフローチャートを参照して、動画中の静止画撮影の動作を説明する。
【００４０】
動画記録動作に従って動画が記録されている状態にある（Ｓ１０）。レリーズスイッチのＳＷ１がオンされたか否かを判断する（Ｓ１１）。ＳＷ１がオンにならなければ、通常の動画記録動作が続けられる。ただし、動画記録は、図示しない別の動画記録ボタンの操作で開始又は終了する。ＳＷ１がオンになると（Ｓ１１）、動画記録しながら同時に静止画用の撮影準備の測距（ＡＦ）と測光（ＡＥ）が行われる（Ｓ１２）。再び、ＳＷ１がオンか否かを判断する（Ｓ１３）。ＳＷ１のオンが解除された場合には（Ｓ１３）、静止画の撮影準備を終了し、動画記録状態を続行する（Ｓ１０）。
【００４１】
ＳＷ１がオンのままの場合（Ｓ１３）、ＳＷ２がオンか否かを判断する（Ｓ１４）。すなわち、ＳＷ２がオンされずにＳＷ１がオンのままだと、撮影準備の測距（ＡＦ）と測光（ＡＥ）が係属される。
【００４２】
ＳＷ２がオンになると（Ｓ１４）、静止画撮影動作（Ｓ１５）に移行する。図３は、静止画撮影動作（Ｓ１５）の詳細なフローチャートを示す。動画記録中に静止画撮影を行うためには、撮像素子１６での動画取り込みを中断しなければならない。即ち、撮像素子１６の駆動モードを静止画用に切り替えるので、撮像素子１６の出力から動画フレームを生成できない。本実施例では、図３に示すように、欠落した動画フレームの代わりに代替フレームを挿入する。
【００４３】
ステップＳ１４から移行し開始する（Ｓ２０）。静止画撮影により中断される動画期間の動画フレームの第１の代替フレームとしてブラックアウト画像を挿入する（Ｓ２１）。ブラックアウト画像とは、無画像の真黒なＪＰＥＧデータであり、黒画像がＪＰＥＧ圧縮されているので、非常に小さいサイズの画像データになる。このブラックアウト画像データは、図示していないＲＯＭに格納されており、このＲＯＭから読み出されて、第１の代替フレームとして動画ファイル（ＡＶＩデータ）に挿入される。第１の代替フレームの長さ（期間）は、カメラグリーンモード（ＡＵＴＯモード）の最長露光時間と等しく、約１／８秒（１２５ｍＳｅｃ）程度である。
【００４４】
図示しないＲＯＭｋら擬似シャッタ音データを読み出して、動画ファイルの音声データに挿入する（Ｓ２２）。この擬似シャッタ音データの時間長は、先のブラックアウト画像データの時間長とほぼ同じ時間にする。マイク３８から録音される音声データを擬似シャッタ音データに急に置き換えると、音データの急な切り替わりで高周波成分が発生し、エイリアシングによりノイズ音データが発生する。音声処理部３６は、マイク３８からの音声を所定の時定数で徐々にミュートし、完全無音の後に擬似シャッタ音データを挿入する。これにより、エイリアシングによる高周波ノイズを発生させずに高品位の擬似シャッタ音を音声データに挿入する事ができる。
【００４５】
静止画の現像処理の完了を待ち（Ｓ２３）、現像が完了したら、ＶＧＡサイズのレビュー画像から第２の代替フレームデータを生成する。第１の代替フレームであるブラックアウト画像データに続けて、第２の代替フレームを、中断された動画記録の動画フレームとして動画記録に挿入する（Ｓ２４）。第２の代替フレーム期間に対して、マイク３８からの音声が、音声処理部３６によりＷＡＶＥデータに変換されて、動画ファイルに挿入される。
【００４６】
動画記録の再開を準備する（Ｓ２５）。撮像素子１６の読み出しを動画用に切り換え、信号処理部２２、リサイズ部３２及びＪＰＥＧ処理部２４等の設定を動画用に切り換える。また、データのパスも同様に動画用に切り替える。動画記録が可能になったら、動画記録を再開する（Ｓ１７）。
【００４７】
図３に示す処理を経て記録された動画ファイルを再生すると、静止画撮影で中断される期間では、先ず第１の代替フレームのブラックアウト画像が静止画の取り込みと現像に要する期間、表示され、第２の代替フレームが表示される。そして、第１の代替フレームの表示と共に擬似シャッタ音が再生される。第２の代替フレームは、いわばストップモーション画像となり、この期間には、外部から取り込まれて録音された音が再生される。
【００４８】
図４は、動画記録中の静止画撮影シーケンスの時間変化を示す。図４を参照して、動画記録と静止画記録の時間的関係を説明する。
【００４９】
図４（ａ）は、撮影時のカメラの動作状態の遷移シーケンスを示す。図４（ｂ）は、撮影時のスルー画像を表示部へ表示する画像の遷移シーケンスを示す。また、図４（ｃ）は、動画ファイル（ＡＶＩデータ形式）を生成するシーケンスを示す。すなわち、図４（ｃ）は、動画ファイルからの再生画像のシーケンスを示す。なお、生成した動画ファイルおよび静止画ファイルの記録媒体２８への書きこみに関しては、後述する。
【００５０】
図４において、図の左端からＳＷ１オンまでの期間は、動画記録状態を示す。図４（ａ）のＳ３０は動画記録の状態を示し、図４（ｂ）のＳ４０は動画記録のスルー画像を表示部３０により表示する状態を示し、図４（ｃ）のＳ５０は、動画像と音声データから動画ファイルを生成する状態を示す。ＳＷ１オンからＳＷ２オンまでの期間で、図４（ａ）のＳ３１は、動画記録も行いながら静止画用の撮影準備の測距と測光を行う状態を示し、図４（ｂ）のＳ４１は、その静止画用の撮影準備の測距と測光を行う様子を表示部３０により表示することを示し、図４（ｃ）のＳ５１は、その静止画用の撮影準備の測距と測光を行う様子の動画ファイルを生成することを示す。ＳＷ２オンまでの期間は、図４（ａ）〜（ｃ）のタイミングが揃っているが、ＳＷ２オン以降は揃っていないので、個別に説明する。
【００５１】
ＳＷ２オンの後、図４（ａ）のＳ３２は、撮像素子１６を動画用読み出しモードから静止画用の露光モードに切り替えることを示し、その後のＳ３３は、静止画状態の露光期間となることを示す。Ｓ３４は、撮像素子１６から静止画像用の全画素の読み出し期間を示しており、３００ｍｓ程度である。Ｓ３５は、静止画像の現像処理の期間を示し、現像処理の内容は、上述した通り、ＤＲＡＭ２０のＲＡＷデータの読み出しからＪＰＥＧデータをＤＲＡＭ２０に書き戻すまである。Ｓ３６はレビュー画像を生成する期間を示し、この期間には、信号処理部２２からのＹＵＶデータをリサイズ部３２でＶＧＡサイズにリサイズし、レビュー画像としてＤＲＡＭ２０に書き戻す処理が実行される。
【００５２】
Ｓ３７は、Ｓ３６で生成したレビュー画像から、動画ファイルにはめ込む第２の代替フレームデータを作成する期間を示す。具体的には、Ｓ３７では、ＶＧＡサイズのＹＵＶデータをＪＰＥＧ処理部２４でＪＰＥＧデータに圧縮処理し、更に欠落して不足する動画フレーム枚数分をコピーし、そのときの音声データと合わせて動画ファイルを生成する。
【００５３】
Ｓ３２からＳ３６までの期間に対応して、図４（ｂ）では、ブラックアウト画像（無画像）になる（Ｓ４２）。即ち、静止画の撮影処理中は、カメラ１０が静止画像の取り込みと現像処理を行っていることを明確にユーザに伝えるために、ＥＶＦ（電子ビューファインダ）のスルー画像とは異なるブラックアウト画像を表示する。図４（ｂ）のＳ４３は、Ｓ３７６で生成されたレビュー画像を表示部３０により表示する期間を示す。
【００５４】
図４（ｃ）のＳ５２は、撮像素子１６のモード切り替え期間（Ｓ３２）と露光期間（Ｓ３３）を合わせた期間に対応しており、この期間に、動画ファイルにブラックアウト画像が挿入される。上述したように、この期間Ｓ５２に期間には、短いミュートの後に擬似シャッタ音が挿入される。
【００５５】
図４（ｃ）のＳ５３は、Ｓ３７で生成したレビュー画像から生成した第２の代替フレームを動画フレームとして動画に挿入する期間を示す。第２の代替フレームは、いわば、動画ファイル上のストップモーション画像になる。この期間Ｓ５３はまた、ブラックアウトの代替フレーム期間の直後から動画に戻るまでの期間でもある。
【００５６】
静止画撮影終了後に、図４（ａ）のＳ３８は動画記録に戻ることを示し、図４（ｂ）のＳ４４は、再度動画記録のスルー画が表示部３０により表示されることを示し、図４（ｃ）のＳ５４は、通常の動画像の動画ファイル生成が再開されることを示す。  以上の処理と並行して、ＤＲＡＭ２０上の動画バッファに記憶されている動画ファイル及びＤＲＡＭ２０上の静止画バッファに記憶されている静止画ファイルが記録媒体２８に書き込まれる。
【００５７】
本実施例は、記録処理に関して動画データを優先して記録媒体２８に書込む動画優先書込みモードと、静止画データを優先して記録媒体２８に書込む静止画優先書込みモードの２通りの記録方法を持つ。
【００５８】
図５〜図８を参照して、動画優先書込みと静止画優先書込みの２通りの書込み方法を説明する。図５は動画優先書込みのフローチャート、図６は静止画優先の書込みのフローチャート、図７は図５に対応する動画優先書込みのシーケンス、図８は図６に対応する静止画優先書込みのシーケンスをそれぞれ示す。なお、動画優先書込みと静止画優先書込みのどちらの書込み方法においても、通常の動画のみの撮影時、つまりＤＲＡＭ２０上の静止画バッファに静止画ファイルが記憶されていない状態での挙動は同様であり、次々にＤＲＡＭ２０上の動画バッファに記憶されてくる動画ファイルを順次、記録媒体２８に書き込む。動画撮影中に静止画を撮影し、ＤＲＡＭ２０上の静止画バッファに静止画ファイルが記憶されたときの挙動が異なる。
【００５９】
先ず、図５及び図７を参照して、動画優先書込みモードの動作を説明する。動画優先書込みモードでは、動画撮影中に静止画を撮影し、ＤＲＡＭ２０上の静止画バッファに静止画ファイルが記憶されたら、ＤＲＡＭ２０上の動画バッファの残容量が一定以上であるか否かを判定する（Ｓ６０）。動画バッファの残容量が一定以上であるならば（Ｓ６０）、静止画バッファに記憶されている静止画ファイルを記録媒体２８に一定サイズ、書き込む（Ｓ６１）。再び、ＤＲＡＭ２０上の動画バッファの残容量を判定し、残容量が一定以下になるかＤＲＡＭ２０上の静止画バッファに記憶されている静止画ファイルが全て記録媒体２８に書込みが終わるまで、繰り返す。
【００６０】
一方、ＤＲＡＭ２０上の静止画バッファに記憶されている静止画ファイルの書込みが終わる前にＤＲＡＭ２０上の動画バッファの残容量が一定以下になったならば（Ｓ６０）、いったん静止画ファイルの書込みを中断する。そして、動画バッファの残容量が一定以上になるまでは、動画バッファに記憶されている動画ファイルを記録媒体２８に書き込む（Ｓ６２）。動画バッファの残容量が一定以上になったら（Ｓ６０）、静止画バッファに記憶されている静止画ファイルの書込みを再開する（Ｓ６１）。
【００６１】
動画バッファの残容量が一定以上でないならば（Ｓ６０）、静止画バッファに静止画ファイルが記憶されていても、動画バッファに記憶されている動画ファイルの書込みを行う（Ｓ６２）。動画バッファの残容量が一定以上になったら（Ｓ６０）、静止画バッファに記憶されている静止画ファイルの記録媒体２８への書込みを開始する（Ｓ６１）。
【００６２】
このようにして、動画優先書き込みモードでは、ＤＲＡＭ２０上の動画バッファの残容量が少なくなると、ＤＲＡＭ２０上の静止画バッファに静止画ファイルが記憶されていても、ＤＲＡＭ２０上の動画バッファの動画ファイルを優先的に記録媒体２８へ書き込む。これにより、ＤＲＡＭ２０上の静止画バッファがいっぱいになってしまい静止画撮影ができない期間が生じる可能性があるが、その代わりにＤＲＡＭ２０上の動画バッファがいっぱいになって動画撮影が停止してしまうのを防ぐことができる。
【００６３】
図６及び図８を参照して、静止画優先書込みモードの動作を説明する。静止画優先書込みモードでは、動画撮影中に静止画を撮影し、ＤＲＡＭ２０上の静止画バッファに静止画ファイルが記憶されたら、一旦、ＤＲＡＭ２０上の動画バッファに記憶されている動画ファイルの記録媒体２８への書込みを中断する。ＤＲＡＭ２０上の静止画バッファの空きの有無を判定する（Ｓ７０）。静止画バッファに空きがなかったら（Ｓ７０）、静止画バッファが空になるまで、全ての静止画ファイルを記録媒体２８に書き込む（Ｓ７１）。ＤＲＡＭ２０上の静止画バッファが空になったら（Ｓ７０）、ＤＲＡＭ２０上の動画バッファに記憶されている動画ファイルの記録媒体２８への書込みを再開する（Ｓ７２）。
【００６４】
このようにして、静止画優先書込みモードでは、ＤＲＡＭ２０上の静止画バッファの静止画ファイルがある限り静止画ファイルの書き込みを続けるので、静止画を続けて何枚も撮影したり、記録媒体２８への書き込み速度が遅い場合などには、ＤＲＡＭ２０上の動画バッファがいっぱいになって動画撮影が停止してしまう可能性があるが、常に静止画撮影は可能となる。
【００６５】
静止画優先書込みモードと動画優先書込みモードは、画面上に表示されるユーザ設定メニュー、又は図示しない設定ボタンにより、設定可能である。また、使用される記録媒体２８の書込み速度に応じて自動設定してもよい。
【００６６】
図９は、設定メニュー又は設定ボタンにより書込みモードを設定している場合の書込みモード切替えのフローチャートを示す。ユーザが不図示の動画ボタンを押し、動画撮影開始が指示されると、優先書込みモードの設定を確認する（Ｓ８０）。書込み優先設定が動画優先ならば（Ｓ８０）、動画優先で記録媒体２８への書込みを実行する（Ｓ８１）。書込み優先設定が静止画優先ならば（Ｓ８０）、静止画優先で記録媒体２８への書込みを実行する（Ｓ８２）。
【００６７】
記録媒体２８への書き込み方法をユーザにより選択可能とするようにしたので、ユーザの意図を反映することが可能となり、動画撮影中であってもより利便性の高い静止画撮影ができる。
【００６８】
図１０は、モードダイアルで静止画優先書込みモード又は動画優先書込みモードを設定する場合の書込みモード切替えのフローチャートを示す。ユーザが不図示の動画ボタンを押し、動画撮影開始が指示されると、モードダイアルによる優先書込みモードの設定を確認する（Ｓ９０）。動画優先書込みモードが設定されているならば（Ｓ９０）、動画優先で記録媒体２８への書込みを実行する（Ｓ９１）。静止画優先書込みモードが設定されているならば（Ｓ９０）、静止画優先で記録媒体２８への書込みを実行する（Ｓ９２）。
【００６９】
動画優先書込みモードと静止画優先書込みモードの選択を、記録媒体２８への書込み速度、撮影する静止画サイズ、撮影する動画サイズ、及び撮影する動画のフレームレートのいずれかひとつまたは複数の組み合わせで判定するようにしてもよい。図１１は、そのような優先書込み判定手段を設けた場合の、優先書込みモード切替えのフローチャートを示す。ユーザが不図示の動画ボタンを押し、動画撮影開始が指示されると、優先書込み判定手段が、静止画優先か動画優先かを判定する（Ｓ１００）。動画優先と判定した場合（Ｓ１００）、動画優先で記録媒体２８への書込みを実行する（Ｓ１０１）。静止画優先と判定した場合（Ｓ１００）、静止画優先で記録媒体２８への書込みを実行する（Ｓ１０２）。
【００７０】
図１２は、図１１よりも単純に、記録媒体２８への書込み速度で静止画優先か動画優先かを決定するようにした優先書込みモード切替えのフローチャートを示す。記録媒体２８への書込み速度が所定速度未満ならば（Ｓ１１０）、動画優先で記録媒体２８への書込みを実行する（Ｓ１１１）。記録媒体２８への書込み速度が所定速度以上ならば（Ｓ１１０）、静止画優先で記録媒体２８への書込みを実行する（Ｓ１１２）。
【００７１】
図１２に示す処理は、書込み速度が遅い記録媒体２８を使用したり、撮影する静止画のサイズが大きい場合のように、動画撮影中に静止画撮影を行うと動画用メモリ領域がいっぱいになって、動画撮影が停止してしまう可能性が高いような状況に有効である。
【００７２】
記録媒体２８への書込み方法を記録媒体２８への書き込み速度等に応じて切り替えるようにすることで、動画撮影が停止してしまうことを防ぐことができ、動画撮影中に静止画撮影できるカメラの性能と操作性を高めることができる。
【図面の簡単な説明】
【００７３】
【図１】本発明の一実施例であるカメラの概略構成ブロック図である。
【図２】本実施例の動画記録中の静止画撮影のフローチャートである。
【図３】本実施例の動画記録中の静止画撮影動作のフローチャートである。
【図４】本実施例の動画記録中の静止画撮影のシーケンスである。
【図５】本実施例の動画優先書込みモードのフローチャートである。
【図６】本実施例の静止画優先書込みモードのフローチャートである。
【図７】本実施例の動画優先書込みモードのシーケンスである。
【図８】本実施例の静止画優先記書込みモードのシーケンスである。
【図９】本実施例の動画優先書込みモードと静止画優先書込みモードの切り替えの第１のフローチャートである。
【図１０】本実施例の動画優先書込みモードと静止画優先書込みモードの切り替えの第２のフローチャートである。
【図１１】本実施例の動画優先書込みモードと静止画優先書込みモードの切り替えの第３のフローチャートである。
【図１２】本実施例の動画優先書込みモードと静止画優先書込みモードの切り替えの第４のフローチャートである。
【符号の説明】
【００７４】
１０  カメラ
１２  撮影レンズ
１４  露出制御機構（絞り、シャッタ）
１６  撮像素子
１８  Ａ／Ｄ変換器
２０  ＤＲＡＭ
２２  信号処理部（信号処理手段）
２４  ＪＰＥＧ処理部（ＪＰＥＧ処理手段）
２６  インターフェース部
２８  記録媒体
３０  表示部（表示手段）
３２  リサイズ部（リサイズ手段）
３４  ＣＰＵ
３６  音声処理部（音声処理手段）
３８  マイク
４０  スピーカ
【図１】
2006310907.tif 000003
【図２】
2006310907.tif 000004
【図３】
2006310907.tif 000005
【図４】
2006310907.tif 000006
【図５】
2006310907.tif 000007
【図６】
2006310907.tif 000008
【図７】
2006310907.tif 000009
【図８】
2006310907.tif 000010
【図９】
2006310907.tif 000011
【図１０】
2006310907.tif 000012
【図１１】
2006310907.tif 000013
【図１２】
2006310907.tif 000014