(57)【要約】【課題】  動画記録中に静止画を撮影した場合の動画の再生において、静止画が撮影されたことを積極的に知らしめ、違和感の発生しにくい動画記録と静止画記録を行う技術を提供する。【解決手段】  動画像記録中に、レリーズスイッチが全押しされスイッチＳＷ２がＯＮになると、静止画の撮影を行う。この静止画撮影処理の期間を第１の期間、第２の期間に分割し、第１の期間ではブラックアウト画像を生成し、それを第１の代替えフレーム期間の動画像として記録する（Ｓ４３２）。そして得られた静止画の画像を、第２の期間における第２の代替えフレーム期間の動画像として記録する。【選択図】  図４
2006345485.tif 000002
【特許請求の範囲】
【請求項１】
撮像手段を有し、当該撮像手段で撮像して得られた画像データを記録媒体に記録する撮像装置であって、
前記撮像手段で連続撮像することで得られる動画像を動画像データファイルとして前記記録媒体に記録する動画撮影動作と、前記撮像手段で撮像することで得られる静止画を静止画データファイルとして前記記録媒体に記録する静止画撮影動作とを制御する撮影動作制御手段と、
前記動画像撮影動作中に、静止画の撮影指示があった場合、前記静止画撮影動作を行う期間を、第１の期間、及び、当該第１の期間に後続する第２の期間に分割し、第１、第２の期間に対して代替え画像を挿入した動画像データファイルを生成する生成手段とを備え、
前記生成手段は、
前記第１の期間では、所定の代替画像を挿入し、
前記第２の期間では、前記静止画の撮影指示を受けて撮影した静止画に相当する画像を挿入する
ことを特徴とする撮像装置。
【請求項２】
更に、音声入力手段を備え、
前記動画撮影動作は、前記音声入力手段で得られた音声情報と共に、動画像を前記記憶媒体に記録する動作を含むことを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記生成手段は、
前記第１の期間内に、擬似的なシャッター音情報を挿入し、
前記第２の期間では、前記音声入力手段で入力した音声情報を挿入することを特徴とする請求項２に記載の撮像装置。
【請求項４】
前記第１の期間における前記擬似的なシャッター音情報を挿入する期間では、前記音声入力手段を停止し、無音検出状態にすることを特徴とする請求項３に記載の撮像装置。
【請求項５】
前記生成手段は、前記第２の期間において、撮像して得られた静止画データを、動画像として記録される解像度の画像までリサイズして記録することを特徴とする請求項１に記載の撮像装置。
【請求項６】
前記第１の期間は、固定期間であることを特徴とする請求項１に記載の撮像装置。
【請求項７】
前記第１の期間は、少なくとも前記撮像手段による静止画撮影の際のシャッターが開いている露光期間を含むことを特徴とする請求項６に記載の撮像装置。
【請求項８】
前記第２の期間は、少なくとも前記撮像素子から静止画用の画像データを読出し、現像処理が完了するまでの期間を含むことを特徴とする請求項１に記載の撮像装置。
【請求項９】
撮像画像を表示するための表示手段と、
前記静止画を撮像した後に、当該静止画撮影で得られた画像データに基づいて、前記表示手段に表示するためのレビュー画像を生成する手段を備え、
前記第２の期間で挿入する画像データとして、前記レビュー画像を用いることを特徴とする請求項１に記載の撮像装置。
【請求項１０】
前記第１の期間で挿入される代替画像はブラックアウト画像であることを特徴とする請求項１に記載の撮像装置。
【請求項１１】
撮像手段を有し、当該撮像手段で撮像して得られた静止画を記録媒体に記録する撮像装置の制御方法であって、
前記撮像手段で連続撮像することで得られる動画像を動画像データファイルとして前記記録媒体に記録する動画撮影動作と、前記撮像手段で撮像することで得られる静止画を静止画データファイルとして前記記録媒体に記録する静止画撮影動作とを制御する撮影動作制御工程と、  前記動画像撮影動作中に、静止画の撮影指示があった場合、前記静止画撮影動作を行う期間を、第１の期間、及び、当該第１の期間に後続する第２の期間に分割し、当該第１、第２の期間に対して代替え画像を挿入した動画像データファイルを生成する生成工程と、
前記生成工程は、
前記第１の期間では、所定の代替画像を挿入し、
前記第２の期間では、前記静止画の撮影指示を受けて撮影した静止画に相当する画像を挿入する
ことを特徴とする撮像装置の制御方法。
【請求項１２】
撮像手段を有し、当該撮像手段で撮像して得られた画像データを記録媒体に記録する撮像装置であって、
前記撮像手段で撮像中の画像を表示する表示手段と、
前記撮像手段で連続撮像することで得られる動画像を動画像データファイルとして前記記録媒体に記録する動画撮影動作と、前記撮像手段で撮像することで得られる静止画を静止画データファイルとして前記記録媒体に記録する静止画撮影動作とを制御する撮影動作制御手段と、
前記動画像撮影動作中に静止画の撮影指示があった場合、
前記静止画撮影動作期間において、（ａ）前記撮影指示時から前記撮像手段から得られた画像データの現像処理が完了するまでの期間では、予め設定された代替表示画像を前記表示手段に表示し、（ｂ）現像処理が完了してから、動画像撮影動作を再開するまでの期間では、得られた静止画データを前記表示手段に表示する表示制御手段と、
前記動画像撮影動作中に静止画の撮影指示があった場合、（ａ）前記撮影指示時から前記静止画撮影のための露光期間の経過時までは、予め設定された代替画像データを、その期間に相当する動画像データとして前記動画像データファイルに挿入し、（ｂ）前記露光期間後から前記動画像撮影動作を再開するまでの期間に相当する動画像データとして前記動画像データファイルに挿入することで、前記動画像データファイルを生成する生成手段と
を備えることを特徴とする撮像装置。
【請求項１３】
更に、音声入力手段から音響データを入力する入力工程を備え、
前記動画撮影動作は、前記音声入力手段で得られた音声情報と共に、動画像を前記記憶媒体に記録する動作を含むことを特徴とする請求項１２に記載の撮像装置。
【請求項１４】
前記生成手段は、
前記代替画像データを動画像として前記記憶媒体に格納する際、擬似的なシャッター音データを前記代替画像データに対応する音響データとして挿入し、
前記静止画像データを動画像として前記記憶媒体に格納する際、前記露光期間後から前記動画像記録を再開するまでの期間までの間に前記音声入力手段より入力された音響データを挿入する
ことを特徴とする請求項１３に記載の撮像装置。
【請求項１５】
前記擬似的なシャッター音データの記憶する期間では、前記音声入力手段を停止し、無音検出状態にすることを特徴とする請求項１４に記載の撮像装置。
【請求項１６】
前記生成手段は、撮像して得られた静止画データを動画像として前記記憶媒体に記録する際、動画像として記録される解像度の画像までリサイズすることを特徴とする請求項１２に記載の撮像装置。
【請求項１７】
前記代替画像は、ブラックアウト画像であることを特徴とする請求項１２に記載の撮像装置。
【請求項１８】
撮像手段と、該撮像手段で撮像中の画像を表示する表示手段とを有し、前記撮像手段で撮像して得られた画像データを記録媒体に記録する撮像装置の制御方法であって、
前記撮像手段で連続撮像することで得られる動画像を動画像データファイルとして前記記録媒体に記録する動画撮影動作と、前記撮像手段で撮像することで得られる静止画を静止画データファイルとして前記記録媒体に記録する静止画撮影動作とを制御する撮影動作制御工程と、  前記動画像撮影動作中に静止画の撮影指示があった場合、
前記静止画撮影動作期間において、（ａ）前記撮影指示時から前記撮像手段から得られた画像データの現像処理が完了するまでの期間では、予め設定された代替表示画像を前記表示手段に表示し、（ｂ）現像処理が完了してから、動画像撮影動作を再開するまでの期間では、得られた静止画データを前記表示手段に表示する表示制御工程と、
前記動画像撮影動作中に静止画の撮影指示があった場合、（ａ）前記撮影指示時から前記静止画撮影のための露光期間の経過時までは、予め設定された代替画像データを、その期間に相当する動画像データとして前記動画像データファイルに挿入し、（ｂ）前記露光期間後から前記動画像撮影動作を再開するまでの期間に相当する動画像データとして前記動画像データファイルに挿入することで、前記動画像データファイルを生成する生成工程と、
を備えることを特徴とする撮像装置の制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は撮像装置及びその制御方法に関するものである。
【背景技術】
【０００２】
従来から、ＣＣＤ等の撮像素子で撮像した画像信号をデジタル信号に変換し、そのデジタル信号を輝度色差のデジタル映像信号に処理した後、ＪＰＥＧなどの圧縮処理を施して、記録メディアへ記録するデジタルカメラが開発されている。また、デジタルカメラにおける撮像素子は高解像度化が進み、数百万画素、場合によっては一千万画素を越えるものも出現している。
【０００３】
その一方で、撮像素子の水平、垂直ラインなどを読み飛ばして高速に読み出して動画像として記録する機能を有するものも増えている。すなわち、昨今のデジタルカメラでは、先に述べた静止画撮影を行う静止画撮影モードと、動画画撮影を行う動画撮影モードと設けて、ユーザーの操作によって両方の撮影モードを切り替える仕様となってきている。
【０００４】
近年では、動画記録中に静止画の撮影を行うことも可能になってきている（特許文献１）。この文献に係る技術では、動画記録中に静止画撮影を行った場合に、静止画撮影により中断した動画撮影における動画圧縮データファイルが、静止画を挟んで２つに分割される不具合を解消する方法について記載されている。具体的には、静止画撮影期間の直前の１フレームを代替フレームとし、その静止画撮影する期間だけその代替フレームを連続させて動画ファイルに格納することで、動画の分断しないようにするものである。更に、この文献は静止画撮影が完了し、撮像手段による動画撮影処理を再開するための開始タイミングを、動画撮影処理が停止される前の動画撮影処理における動画フレーム撮影周期に同期させる技術も開示している。
【０００５】
また、欠落した動画フレームに代わる代替フレームに特殊画像データを用いたり、無画像画面を用いたりしている技術も知られている（特許文献２）。
【特許文献１】特開２００４−２０１２８２号公報
【特許文献２】特開２００３−８９４８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、前述したような従来技術では、無画像画面（ブラックアウト画像）や、動画の直前・直後あるいは静止画像からの代替えフレーム（ストップモーション画像）の表示については、動画表示が途切れないように代替えフレームをはめ込むだけである。実際に動画撮影しているときの動きのある動画であるのに対し、静止画撮影期間では違和感のある表示になってしまう。つまり撮影した動画を再生したときに、動画中に静止画撮影した期間は、通常の動画表示とは異なるぎこちない動画が表示され、ユーザーに違和感を生じさせてしまう、という問題があった。
【０００７】
本発明はかかる点を課題にするものであり、動画記録中に静止画を撮影した場合における動画の再生において、むしろ静止画が撮影されたことを積極的に知らしめ、違和感の発生しにくい動画記録と静止画記録を行う技術を提供しようとするものである。
【課題を解決するための手段】
【０００８】
このため、本発明の撮像装置は以下の構成を備える。すなわち、
撮像手段を有し、当該撮像手段で撮像して得られた画像データを記録媒体に記録する撮像装置であって、
前記撮像手段で連続撮像することで得られる動画像を動画像データファイルとして前記記録媒体に記録する動画撮影動作と、前記撮像手段で撮像することで得られる静止画を静止画データファイルとして前記記録媒体に記録する静止画撮影動作とを制御する撮影動作制御手段と、
前記動画像撮影動作中に、静止画の撮影指示があった場合、前記静止画撮影動作を行う期間を、第１の期間、及び、当該第１の期間に後続する第２の期間に分割し、第１、第２の期間に対して代替え画像を挿入した動画像データファイルを生成する生成手段とを備え、
前記生成手段は、
前記第１の期間では、所定の代替画像を挿入し、
前記第２の期間では、前記静止画の撮影指示を受けて撮影した静止画に相当する画像を挿入する
ことを特徴とする。
【発明の効果】
【０００９】
本発明によれば、動画再生したときに、動画記録中に静止画を撮影した時間位置を、ユーザへ明確に伝えることができ、同時に、動画を見ているユーザに違和感を与えることなる動画記録時の状況を克明に伝えることができる。
【発明を実施するための最良の形態】
【００１０】
以下、添付図面に従って本発明に係る実施形態を詳細に説明する。
【００１１】
図１は、実施形態における撮像装置としてのデジタルカメラ１００のブロック構成図である。
【００１２】
図示において、６は撮影レンズであり、１枚又は複数枚のレンズで構成される。８は絞りやシャッター等で構成され、被写体の輝度により、露出を調整する露出制御部である。１０は数百万画素程度の画素数のＣＣＤセンサーやＣＭＯＳセンサーなどの撮像手段としての撮像素子であり、撮像して得た各色成分のアナログ画像信号を出力する。１２は撮像素子１０からのアナログ画像信号をデジタル信号に変換するためのＡ／Ｄ変換器である。
【００１３】
１４はＤＲＡＭであり、Ａ／Ｄ変換器１２からのデジタル画像信号を一時的に蓄えたり、後述する信号処理後の画像データやＪＰＥＧ圧縮後のＪＰＥＧデータなどを、一時的に蓄えるバッファー機能を有する。通常は、ＤＲＡＭとの間にメモリーコントローラを介しデータの書き込みや読み出しを行うが、ここでは示していない。１６はＡ／Ｄ変換器１２で得られたデジタル画像データから、輝度信号と色差信号へ処理するための信号処理部で、デジタルカメラで一般的な記録フォーマットのＪＰＥＧデータを生成する前段階のＹＵＶデータを生成する。１８は信号処理部１６からのＹＵＶデータをＪＰＥＧ形式に圧縮したり、ＪＰＥＧ形式のデータをＹＵＶデータに伸張するためのＪＰＥＧ処理部である。
【００１４】
２０はＪＰＥＧ処理されたデータをＣＦやＳＤカードなどの記録メディアへ書き込んだり、読み出したりするためも記録媒体インターフェイスである。２１は、上述したＣＦやＳＤなどの脱着可能な記録メディアである。なお、ランダムアクセス可能な記録メディアであれば、その種類は問わない。例えば、光ディスク（ＤＶＤ）でも構わない。２２はカラー液晶表示器等で構成される表示部であり、ビューワー表示したり、撮影した画像をレビュー表示したり、伸張した画像を再生表示するために用いる。なお、ＴＶ等の外部表示装置に映像信号を出力する端子も備えている。２４は、信号処理部１６のＹＵＶ出力を任意のサイズにリサイズするリサイズ部である。
【００１５】
２６は、先の述べた各処理部やデータフローなどを制御するためのＣＰＵである。２７は、ＣＰＵ２６の処理手順に係るプログラム（ファームウェア）や各種情報を記憶しているＲＯＭである。詳細は後述するが、このＲＯＭ２７には、既にＪＰＰＥＧ符号化されたブラックアウト画像データ、及び、擬似シャッター音のｗａｖｅ形式のデータが予め格納されている。各処理部はＣＰＵ２６のバス上に繋がっている。又、図示しないが各デバイスとＤＲＡＭ１４間には、ＣＰＵとのＲｅａｄ／Ｗｒｉｔｅを解さないＤＭＡ転送を行うためのＤＭＡＣを備えている。更に、Ａ／Ｄ変換器１２から信号処理部１６と、信号処理部１６からＪＰＥＧ処理部１８やリサイズ部２４などへは、図示していないがＣＰＵやＤＭＡとは別に、ダイレクトにデータを送受するパスを設けている。
【００１６】
２８は音声の録音や再生の処理を行うための音声処理部であり、３０は録音する時に音声を入力するためのマイク、３２は音声を再生するためのスピーカーである。音声処理部２８は、音声のＡ／Ｄ変換とＤ／Ａ変換も行って、音声の録音と再生を行う。
【００１７】
また、２３は静止画記録を行う際に利用するレリーズスイッチ２３ａ、動画記録のＯＮ／ＯＦＦを行うための動画記録スイッチ２３ｂをはじめ、各種ボタンやダイヤルスイッチを含む操作部である。
【００１８】
以上実施形態におけるデジタルカメラの構成について説明した。次に、実施形態における動画撮影動作について説明する。
【００１９】
撮影レンズ６を通過した光は、絞りやシャッターの露出制御部８を通過し露出制御されて、撮像素子１０に結像する。動画撮影時には、メカ機構のシャッターは開き、絞りによって露出を制御する。撮像素子１０によって被写体像は光電変換され、アナログ信号としてＡ／Ｄ変換器１２に送られる。Ａ／Ｄ変換器１２では、アナログ画像信号をデジタルの画像データに変換して、システムのバスを介して信号処理部１６に転送される。
【００２０】
動画撮影時には撮像素子１０からは全画素を読み出しでなく、水平や垂直に間引かれた（あるいは加算されて重畳した）画素を、記録するフレームレートに合わせ読み出す。リサイズ部２４の負荷を減らすためである。信号処理部１６では、水平垂直のフィルタ処理やアパチャー補正処理やガンマ処理などが動画撮影用のモードで処理し、リサイズ部２４に転送する。リサイズ部２４では、ＶＧＡ（水平６４０画素、垂直４８０ライン）のサイズにリサイズして、ＤＲＡＭ１４に転送する。ＤＲＡＭ１４上のＶＧＡ画像データは、表示部２２に転送され、ＴＶやカメラに搭載された液晶上にスルー画像として表示する。動画撮影時のスタンバイ状態とは、この表示処理までの状態を言う。
【００２１】
この状態で、操作部２３に設けられた動画記録スイッチ２３ｂが押下された場合には、動画記録が開始する。すなわち、ＤＲＡＭ１４上のＶＧＡ画像データをＪＰＥＧ処理部でＪＰＥＧデータに変換すると同時に、マイク３０で取り込んだ音声を音声処理部２８にてｗａｖｅ形式の音声データに変換する。そしてこれらの画像ＪＰＥＧデータと音声ＷＡＶＥデータを用いて、ＣＰＵがヘッダーなどを付加してＡＶＩデータ形式で動画ファイルを生成し、記録媒体インターフェイス２０を介して、メディア２１に動画ファイルを記録する。この動画記録処理は、動画記録スイッチ２３ｂが再び押下されるまで実行される。以下、動画撮影時のスタンバイ状態と動画記録処理を実行している状態の両方を満たす状態を動画撮影動作の状態とする。
【００２２】
なお、ＡＶＩファイルのデータ構造は、ファイル先頭のヘッダーで映像と音声データの配置を管理し、ファイルを構成する。例えば、ヘッダーに続き音声データ（４４．１ＫＨｚサンプリング、１６ｂｉｔステレオ）を１秒間の約１７２ｋＢｙｔｅを置き、音声データに続いて映像の１枚１枚のＪＰＥＧデータを３０ｆｐｓ（Ｆｒａｍｅ／Ｓｅｃ）なら１秒間の３０フレームを配置する。そして、音声データと映像データを交互に１秒間置きに配置する。動画ファイルの作成方法は、先述の処理で静止した画像ＪＰＥＧデータをバッファーするための画像バッファー領域と、音声データをバッファーするための音声バッファー領域をＤＲＡＭ１４で確保して、その領域に生成したそれぞれの映像データと音声データを溜めこむ。そして１秒単位に、映像データと音声データをＡＶＩ形式のデータにまとめてＤＲＡＭ１４上のＡＶＩバッファー領域に書きこむ。この場合、音声データはＷＡＶＥ形式なので１秒間のデータサイズは固定であるが、映像データはＪＰＥＧなのでサイズが不定（可変長）になる。そこで、先の映像バッファーはＡＶＩバッファーの映像領域と兼用してＤＲＡＭを削減する場合には、ＡＶＩバッファー領域上の音声データ領域を空けながらＪＰＥＧデータを書きこんでいく事が可能である。ＡＶＩバッファー領域に溜めこんだデータは、順次メディア２１へファイルとして書き込んでいく。
【００２３】
動画用のＡＶＩデータを再生する時には、メディア２１上のＡＶＩファイルから音声データと映像データを読み込み、ＤＲＡＭ１４上の再生バッファー領域に置き、音声と映像を次のように別々に処理して再生する。
【００２４】
先ず、音声はＤＲＡＭ１４上の音声バッファーから音声処理部２８へＣＰＵ２６がデータを転送する。音声処理部２８は、内部にてＤ／Ａ変換とゲイン調整などを行いスピーカー３２へアナログ音声信号を送って動画の音声を再生する。
【００２５】
一方、映像データは、ＤＲＡＭ１４上の映像バッファーから１フレームずつＤＭＡ転送でＪＰＥＧ処理部１８へ転送しＪＰＥＧデータをＹＵＶデータに伸張する。伸張されたＹＵＶデータは、ＪＰＥＧ処理部１８の出力をリサイズ部２４へ入力し、ＴＶや液晶に表示するためのＶＲＡＭサイズ（７２０画素ｘ４８０ライン）にリサイズされ、ＤＲＡＭ１４のＶＲＡＭ領域へ書き出す。ＴＶや液晶の表示へはＤＲＡＭ１４のＶＲＡＭデータを表示部２２へＤＭＡ転送し、液晶やＴＶへ表示するための処理を施して表示する。
【００２６】
次に本実施形態における静止画撮影動作について説明する。
【００２７】
静止画撮影の待機状態では、上述した動画のスタンバイ状態とほぼ同じ処理が施され、撮像素子１０で撮像した画像のスルー画像が表示部２２に表示されている。操作部２３に設けられたレリーズスイッチ２３ａは、２段階形式のスイッチで構成され、半押し状態をスイッチＳＷ１がＯＮ、全押しした状態ではスイッチＳＷ２がＯＮとなるようになっている。そのスイッチＳＷ１がＯＮで撮影準備状態になり、スイッチＳＷ２がＯＮで静止画撮影動作状態になる。
【００２８】
更に詳しく説明すると、スイッチＳＷ１がＯＮの撮影準備状態では、静止画撮影に必要な自動測距（ＡＦ）や自動測光（ＡＥ）が行われる。スイッチＳＷ２がＯＮされ準備状態から静止画撮影動作に切り替わると、シャッターを閉じてから撮像素子１０の読み出しを止めて、露光のモードに変更する。そして撮影準備段階で被写体の輝度から予め算出した露出設定に従って絞りを設定し、センサーの余分電化の吐き捨て後に算出したシャッタースピードでシャッターを開閉する。シャッターが完全に閉じきってから撮像素子１０を露光モードから読み出しモードに切り換えて、複数フィールドに分けて全画素のデータを読み出す。その読み出した信号をＡ／Ｄ変換器１２でデジタル信号に変換し、バスを介してＤＲＡＭ１４へＡ／Ｄ変換器１２からのＲＡＷデータを転送する。撮像素子１０からの読み出しが終了したら現像処理を開始する。この現像処理とは、まずＤＲＡＭ１４から先ほどのＲＡＷデータをリードして信号処理部１６に転送する。信号処理部１６では、水平垂直のフィルタ処理やアパチャー補正処理やガンマ処理などを静止画撮影用のモードで処理し、ＪＰＥＧ処理部１８へ転送する。ＪＰＥＧ処理部１８は、ＹＵＶデータをＪＰＥＧデータに変換してＤＲＡＭ１４へ書き戻す。以上のＤＲＡＭ１４からのＲＡＷデータリードからＪＰＥＧデータをＤＲＡＭ１４へ書き戻すまでが現像処理になる。また、この後、生成された静止画画像データ（ＪＰＥＧ画像データ）は、メディア２１に静止画ファイルとして書き込まれる。また、現像処理の途中の信号処理部１６からのＹＵＶデータはリサイズ部２４へも転送される。リサイズ部２４はレビュー画像表示のためにＶＧＡサイズ程度にリサイスして、ＤＲＡＭ１４へ書き戻す。そこで先の現像処理が終了したら、撮影確認のレビュー画像表示のために、ＶＧＡサイズのＹＵＶデータを表示部２３に転送して、ＴＶやカメラ上の液晶画面に表示することで、レビュー画像を表示している。
【００２９】
以上、実施形態における動画撮影動作及び静止画撮影動作について説明したが、実施形態では動画記録中においても、静止画の撮影を行うことを許容する。すなわち、動画記録処理を継続させながら、静止画撮影動作による静止画撮影処理と静止画記録処理とを実行させることを可能とする。以下、この動画記録中における静止画撮影する場合のＣＰＵ２６の処理を、図２のフローチャートに従って説明する。
【００３０】
図２のステップＳ２００は、先述した動画撮影動作に従って動画が撮影及び記録されている状態を示す。すなわち、操作部２３における動画記録ボタン２３ｂを押下して、メディア２１に動画であるＡＶＩファイルを構築中のものである。
【００３１】
ステップＳ２０２では、この動画記録中に、先述のレリーズスイッチ２３ａの半押し検出用のスイッチＳＷ１がＯＮであるか否か監視及び判断を行っている。スイッチＳＷ１がＯＦＦである場合には、通常の動画記録動作継続する。
【００３２】
さて、レリーズスイッチが半押しされ、スイッチＳＷ１がＯＮになると、処理はステップＳ２０４へ移行し、動画記録しながら同時に静止画用の撮影準備のＡＦ（測距）とＡＥ（測光）が行われる。次いで、ステップＳ２０６にて、スイッチＳＷ１を監視し、それがＯＮの状態が保持されると、ＡＦとＡＥの動作が続けられるが、もしスイッチＳＷ１がＯＦＦになった場合には、静止画の撮影準備を終了する。ただし、ＣＰＵ２６は、その場合でも動画記録処理を継続する。
【００３３】
次にスイッチＳＷ１がＯＮの状態であり撮影準備が完了すると、処理はステップＳ２０８に移行して、レリーズスイッチの全押しか否か、すなわち、スイッチＳＷ２がＯＮであるか否かの監視及び判断をする。スイッチＳＷ２がＯＦＦであり、スイッチＳＷ１がＯＮ保持のままだと、再度ＡＦとＡＥが行われ続ける。また、スイッチＳＷ２がＯＮになったと判断した場合には、ステップＳ２１０へ移行し、静止画撮影動作を実行する。
【００３４】
ステップＳ２１０の静止画の撮影動作は前述の静止画撮影動作とほぼ同じである。異なる点は、動画記録中に静止画撮影を行うため、動画の記録を一時的に中断する事である。このときは撮像素子１０の駆動モードが切り替わり、動画像による動画フレームを生成できないから、その欠落した動画フレームの代わりに代替フレームを挿入する。その処理ついては、図３の静止画撮影動作を行った場合の動画ファイル生成フローを用いて詳しく説明する。
【００３５】
上記、静止画撮影動作が完了すると、ステップＳ２１２にて、中断していた動画撮影動作の準備を行ない、ステップＳ２１４で動画撮影動作状態に戻る。
【００３６】
図３の動画ファイル生成処理手順は、静止画撮影動作とほぼ並列に実行されるものであり、ステップＳ３００は、図２のステップＳ２０８でＹｅｓと判断されたことに応じて開始されることを示している。
【００３７】
先ず、ステップＳ３００で、ＣＰＵ２６は本処理を開始する。次いで、ＣＰＵ２６は、ステップＳ３０２に進み、静止画撮影するために動画像撮影動作を中断する期間の動画フレームの第１の代替えフレームとしてブラックアウト画像を挿入する。ブラックアウト画像とは、無画像の真黒なＪＰＥＧデータであり、黒画像がＪＰＥＧ圧縮されているので非常に小さいデータサイズの画像データになる。このブラックアウト画像は、ＲＯＭ２７に格納されているブラックアウト画像データ２７ａであり、既にＶＧＡサイズにまでリサイズされていて、ＪＰＥＧ符号化されているものである。このブラックアウト画像データ２７ａがＲＯＭ２７から読み出されて、第１の代替えフレームとして動画ファイル（ＡＶＩデータ）上に挿入される。その第１の代替フレームの長さ（期間）は、カメラグリーンモード（ＡＵＴＯモード）の最長露光時間と等しく、約１／８秒（１２５ｍＳｅｃ）程度である。動画像が３０フレーム／秒の撮像される場合、１／８秒間でのフレーム数は“４”であるので、ＲＯＭ２７のブラックアウト画像データ２７ａを４回、ＡＶＩファイルに挿入することになる。なお、ブラックアウト画像の代わりに、「静止画撮影」等のメッセージを有する画像としても構わない。
【００３８】
次にステップＳ３０４では、ＲＯＭ２７上に置かれた擬似シャッター音データ２７ｂを読み出して、動画ファイル（ＡＶＩデータ）の音声データに挿入すると共に、その擬似シャッター音データ２７ｂを音声処理部２８に出力し、スピーカー３２より再生させる。その擬似シャッター音データの時間長は、先のブラックアウト画像データの時間長とほぼ同じ時間にする。このとき、マイク３０から録音される音声データから擬似データを急に置き換えると、データの急な切り替わりで高周波成分が発生し、エイリアシングによりノイズ音データが発生する。そこで擬似データに置き換える期間（擬似シャッター音をスピーカ３２で再生する期間でもある）は、音声処理部２８にてその期間をまずミュート（無音）する。そのミュートされた音声データの上に擬似シャッター音を挿入するようにした。これにより、エイリアシングによる高周波ノイズを発生させずに高品位の擬似シャッター音を音声データに挿入する事ができる。
【００３９】
次にステップＳ３０６にて、先述した静止画撮影動作における静止画の現像処理の完了を待つ。現像が完了したらステップＳ３０８に進む。この後ＣＰＵ２６は、図２のステップＳ２１０内の処理として、現像済みの静止画をＪＰＥＧ処理部１８でＪＰＥＧ符号化し、符号化されたデータから１つの静止画ファイルを生成する。生成した静止画ファイルを動画像ファイルとは別に記録メディア２１に格納する。この処理と平行し、またはこの後、ＣＰＵ２６は、このステップＳ３０８において、上記現像済みの静止画から、ＶＧＡサイズのレビュー画像をリサイズ部２４で生成し、更に、そのリサイズ後の画像データをＪＰＥＧ処理部１８で符号化をする。この符号化されたＶＧＡサイズの画像が第２の代替えフレームデータである。そして、先の第１の代替えフレームのブラックアウト画像データに続けて、第２の代替えフレームデータを、現像処理期間の動画記録が中断された動画フレーム数分だけ補う。つまり、第２の代替えフレームデータを、適当な回数だけ繰り返しＡＶＩファイルに挿入する。第２の代替えフレーム期間中の音声データは、マイク３０からの音を音声処理部２８でＷＡＶＥデータにしてＡＶＩファイルに挿入する。
【００４０】
つまりこのＡＶＩファイルを再生すると、静止画撮影で中断される期間の内、第１の代替えフレームのブラックアウト期間は擬似シャッター音が鳴る。そして、第２の代替えフレームのストップモーション画像期間は、実際に静止画撮影された画像に相当するフレームが再生されると共に、その間に音声録音された音が再生されることになる。
【００４１】
次に、ステップＳ３１０にて図２のステップＳ２１２に戻り、動画撮影動作の再開の準備を行う。これは撮像素子１０の読み出しを動画用に切り換え、同時に信号処理部１６やリサイズ部２４やＪＰＥＧ処理部１８などの設定を動画用に切り換え、データのパスも切り替える動作になる。ステップＳ２１４で、最初の動画撮影動作状態にもどり動画記録のための撮影が連続して行われる。
【００４２】
図４は、動画記録中の静止画撮影のシーケンスを示している。同図に於いて（ａ）は、撮影時のカメラの動作状態の移り変わる様子（シーケンス）を示す。同図の（ｂ）は、撮影時のスルー画像を表示部２２へ表示する画像の移り変わる様子（シーケンス）を示している。又同図の（ｃ）は、生成された動画ファイル（ＡＶＩ形式）の記録状態を、実際の撮影及び記録時のシーケンスに対応づけて示している。言い換えるとすなわち動画ファイル（ＡＶＩ形式）を再生した時の液晶やＴＶモニターの画像表示の移り変わる様子（シーケンス）を示している事になる。更に同図（ｄ）は、作成したＡＶＩファイルをメディアへ書きこむタイミングを仮定して示している。後述するが、動画撮影動作及び静止画撮影動作のうち、メディアへの記録処理に関しては、同図（ａ）のタイミングと一致していない。
【００４３】
図４に於いて、図の左端からレリーズスイッチが有するスイッチＳＷ１がＯＮになるまでの期間は、動画撮影動作状態を示している。同図（ａ）の期間Ｓ４００では、動画撮影動作の状態を示し、同図（ｂ）の期間Ｓ４１８で動画像のスルー画像を表示部２２へ表示し、同図（ｃ）での期間Ｓ４２８で動画像と音声データを動画ファイルとして記録する事を示している。
【００４４】
次のスイッチＳＷ１がＯＮになり、スイッチＳＷ２がＯＮになるまでの同図（ａ）の期間Ｓ４０２では、動画撮影及び記録も行いながら静止画用の撮影準備のＡＥとＡＦを行う状態を示している。同図（ｂ）での期間Ｓ４２０では、その静止画用の撮影準備のＡＥとＡＦを行う様子を表示部２２へ表示し、同図（ｃ）での期間Ｓ４３０でその静止画用の撮影準備のＡＥとＡＦを行う様子を動画ファイルに記録している。
【００４５】
スイッチＳＷ２がＯＮになるまで期間は、同図の（ａ）と（ｂ）と（ｃ）のタイミングが揃っているが、スイッチＳＷ２がＯＮになった以降は揃っていない。以下に、そのシーケンスについて説明する。
【００４６】
同図（ａ）の期間Ｓ４０４は、スイッチＳＷ２がＯＮになった直後の撮像素子１０のモード切替え状態を示し、動画用の読み出しモードから静止画の露光のモードに切替えている。次の期間Ｓ４０６は、静止画状態の露光期間を示しており、例えば本実施形態における露光時間は１／２０００秒から１／８秒までを可変に被写体像の露出を制御する。次の期間Ｓ４０８は、撮像素子１０から静止画像用の全画素を複数フィールドで読み出す読み出し期間を示しており、例えば３００ｍＳｅｃ程度の時間を要する。次の期間Ｓ４１０は静止画像の現像処理の期間を示し、現像処理の内容は先述のＤＲＡＭ１４のＲＡＷデータの読み出しから処理後のＪＰＥＧデータをＤＲＡＭ１４へ書き戻す処理になる。次の期間Ｓ４１２はレビュー画像を生成する期間を示し、先述した内容の信号処理部１６からのＹＵＶデータをリサイズ部２４でＶＧＡサイズにリサイズし、レビュー画像としてＤＲＡＭ１４に書き戻す処理になる。この期間Ｓ４０４からＳ４１２までの期間では、同図（ｂ）に示すように、ブラックアウト（無画像）表示を表示部２２に表示する。これは静止画の撮影処理中は、カメラが静止画像の取り込みと現状処理を行っていることを明確にユーザーに伝えるためであり、ＥＶＦのスルー画像表示と異なる無表示画像を表示しており、通常の静止画撮影動作と同様の表示になる。
【００４７】
期間Ｓ４１４は、期間Ｓ４１２で生成したレビュー画像から、動画ファイルにはめ込む第２の代替えフレームデータの作成をする期間を示し、ＶＧＡサイズのＹＵＶデータをＪＰＥＧ処理部１８でＪＰＥＧデータに圧縮処理し、更に欠落して不足する動画フレーム枚数分コピーし、そのときの音声データと合わせて動画ファイルを生成している。
【００４８】
同図（ｂ）の期間Ｓ４２４は、上記の期間Ｓ４１４の期間に前記レビュー画像を表示部２２へ表示する期間を示している。
【００４９】
同図（ｃ）の期間Ｓ４３２は、動画ファイル上で静止画撮影する際の期間Ｓ４０４の撮像素子１０のモード切り替え期間と期間Ｓ４０６の露光期間を合わせた期間を、無表示画像のブラックアウト画像での代替えフレームで補った期間を示している。先述したように露光時間は被写体の輝度レベルにより可変であるが、このブラックアウトしている期間Ｓ４３２の期間は固定にするように代替えフレームを挿入する。
【００５０】
この固定期間は、実施形態では露光時間の最長時間（５０＋１２５＝１７５ｍＳｅｃ）にした。この１７５ｍＳｅｃ程度の時間は、動画を再生した際にユーザーが無表示画像を認識するのに適した時間になる。例えば３０ｆｐｓ（フレーム／Ｓｅｃ）のＡＶＩ動画では、１フレームが約３３ｍＳｅｃになり、フレーム数で４〜６枚程度になる。３枚以下の無表示画像では動画像の変化が速過ぎて、ユーザーがシャッターを閉じた事を認識するには適さない。又７枚以上の２００ｍＳｅｃ以上の無表示画像期間が続くと、動画を無意味に中断させてしまう感じを与えてしまう。従って動画フレームにシャッター閉じをイメージさせるためのブラックアウトによる代替えフレーム期間は、１００〜２００ｍＳｅｃ程度の時間で常に固定にしている。
【００５１】
更に、この期間Ｓ４３２に合わせて擬似シャッター音もはめ込んでいる。擬似シャッター音の長さも２００ｍＳｅｃ弱が小気味良いシャッター音として適しており、ちょうど先のブラックアウトの代替えフレーム期間に割り当てている。又擬似シャッター音の挿入方法については先述したように、ブラックアウトの期間の音声を音声処理部２８にてミュートしおき、そのミュート個所に擬似シャッター音を重畳している。これにより、録音音声と擬似音の急激なデータ変化により生じるノイズを発生させずに済む。そのミュートの際にも、録音データを急激に無音に切り替えるのでなく、所定の時定数で徐々に音声ゲインを下げながら無音にしている。
【００５２】
次に同図（ｃ）の期間Ｓ４３４は、先述の期間Ｓ４１４で生成した静止画のレビュー画像から代替えフレームデータを用いて欠落した動画フレームにはめ込む期間を示しており、動画ファイル上のストップモーションと称している。この期間は、ブラックアウトの代替えフレーム期間の直後から動画に戻るまでの期間になる。
【００５３】
また、静止画撮影終了後では、次の通りである。先ず、同図（ａ）の期間Ｓ４１６では再度動画撮影動作に戻る状態を示し、同図（ｂ）の期間Ｓ４２６で再度動画像のスルー画を表示部２２への表示を示し、同図（ｃ）の期間Ｓ４３６で動画ファイル上も動画像が記録されている状態であることを示している。
【００５４】
通常、静止画像を撮影する時の実際のシャッター動作は「閉じ→開き→閉じ」の動作になるが、その静止画撮影動作を動画ファイル上でイメージさせるには、「動画→シャッター閉じ→静止画像のストップモーション画像表示→シャッター閉じ→動画」の動作になる。しかし動画撮影動作中では、ユーザーがストップモーションによる静止画像を認識したら、すぐに動画に戻す方が動画記録に適しており、先のストップモーション画像表示後のシャッター閉じを省き「動画→シャッター閉じ→静止画像のストップモーション画像表示→動画」のシーケンスが最適である。このシャッター閉じは、先述したようにブラックアウト画像を代替えフレームとしてはめ込んでいるが、ストップモーション画像についての表示期間も所定の固定時間での表示が望ましい。更にストップモーションの表示期間は、撮影した画像の確認を行う事になるから先のブラックアウト表示期間より長くする必要がある。しかし長すぎると動画撮影動作を阻害する事になるので、第２の所定時間以内がよく、その第２の所定時間は静止画処理の期間で動画を再開するまでの期間を当てはめるのが、カメラ動作的にも望ましい。すなわち、動画撮影動作に戻るまでの中断する期間の内で、ブラックアウト画像の代替えフレーム以外を静止画のストップモーション画像で代替えすることになる。
【００５５】
本実施形態では、上記の結果、動画記録中に静止画撮影した場合における、その静止画を約８００ｍＳｅｃ程度の期間、ストップモーション画像として表示した。
【００５６】
更に本実施形態の動画記録中の静止画撮影の動作について、撮影時の表示と動画ファイル再生時の表示に違いについて説明する。
【００５７】
先述したように期間Ｓ４０６の露光時間は、被写体の輝度により可変であり、そのため図４のシーケンスより短い場合がある。その際には撮像素子１０からの読み出し開始時間が前倒しされ、結果的に期間Ｓ４２２のブラックアウト（撮影時の無画像）表示期間が短くなる。しかしながら先述しているように動画ファイルのブラックアウトＳ４３２の期間は固定で、期間Ｓ４３４のストップモーション画像の表示期間も固定である。従ってこの場合には露光時間が短くなった分だけ、撮影時のレビュー表示の期間Ｓ４２４の期間が長くなる。また期間Ｓ４１０の現像時間は、カメラの記録モードにより時間が可変になる。その記録モードとは、例えば５００万画素の記録サイズは水平２５９２×垂直１９４４になり、４００万画素の記録サイズは水平２２７２×垂直１７０４になり、３００万画素の記録サイズは水平２０４８×垂直１５３６になる事から、記録サイズを変えたときのそれぞれのモードを意味する。記録サイズが変わると処理するデータサイズが変わることから、現像処理時間も可変になる。この現像処理期間Ｓ４１０の時間が変った場合も、露光時間が変るのと同様に、撮影時のブラックアウトを表示する期間Ｓ４２２とレビュー表示する期間Ｓ４２４の時間が変るが、動画ファイル上のブラックアウト期間Ｓ４３２とストップモーション期間Ｓ４３４は変らないで固定にする。すなわち、このブラックアウト期間開始時からの第１の代替えフレーム数と第２の代替えフレーム（レビュー画像を用いたストップモーション画像）数を常に固定にできる。したがって、ＣＰＵ２６による図３の生成処理のための演算を簡単にでき、更に動画再生時に静止画撮影の様子を常に固定した表現で、ユーザーに分かりやすく伝える事が可能になる。
【００５８】
次に、図４（ｄ）を用いてのメディアへの記録について説明する。
【００５９】
先に述べたように動画のＡＶＩファイルは、音声データと映像データを１秒毎に配置した形式のデータ構造になっており、前述のＡＶＩバッファー領域のＡＶＩデータをファイルにしてメディアへ書き出すことでＡＶＩファイルをメディア上に生成する。図４（ｄ）の期間Ｓ４４０はその動画撮影により生成したＡＶＩデータをメディアに書き出す期間を示す。同図（ｄ）の期間Ｓ４４２はスイッチＳＷ１がＯＮになったタイミング後の動画記録期間を示し、Ｓ４４０と同様にこの期間でも動画のＡＶＩファイルの記録はそのまま続ける。この期間は、スイッチＳＷ２がＯＮになったタイミング、すなわち、センサーからの動画読み出しが中断され動画のＡＶＩデータ生成も中断されるタイミングでは終了しない。このタイミング時にはＤＲＡＭ１４上のＡＶＩバッファー領域にはまだＡＶＩデータは残っているため、そのＡＶＩバッファーに残ったデータ分は、メディアへ書き出し続けるためである。ＡＶＩバッファー領域のデータがすべてメディアへ書き出された時が、同図（ｄ）の期間Ｓ４４２から期間Ｓ４４４へ移り変わるタイミングである。
【００６０】
同図（ｄ）の期間Ｓ４４４では、前述した期間Ｓ４３２のブラックアウト期間に相当するブラックアウトデータをメディアへ書き出すタイミングを示している。ブラックアウト表示用のＡＶＩデータは、スイッチＳＷ２がＯＮになったタイミングから即時に生成されるため、ＡＶＩバッファー領域に残ったＡＶＩデータを書き出した直後に書き出せる。更に、メディアの書きこみスピードが十二分に速く、ＡＶＩファイル生成をするとほぼ同時にメディアへの書き出しを行える場合には、ＡＶＩバッファーにデータが溜まらないので、先の期間Ｓ４４４のブラックアウトのＡＶＩデータの書き込みがスイッチＳＷ２がＯＮになった直後から行える。このブラックアウトのＡＶＩデータはデータ容量も小さいので比較的短時間で書きこむ事になる。メディアへの書き込みスピードは使用するメディアによって個々に異なるが、その書き込みスピードが速い場合には、期間Ｓ４４４でブラックアウトのＡＶＩデータが書き込み後から、次の期間Ｓ４４６への間にメディアへ書き込むデータがなく、書き込みが発生しない時間が生じる。次の期間Ｓ４４６は、静止画撮影したＪＰＥＧデータファイル（記録モードに応じた現像処理の結果得られた全画素で構成される静止画ファイル）をメディアへ書き出すタイミングを示す。静止画ＪＰＥＧデータは、先述の期間Ｓ４１０のタイミングで生成しているので、メディアへの書き出しはそのタイミング以降になる。その期間Ｓ４４６の静止画ＪＰＥＧデータの書き出しの直後に期間Ｓ４４８で、静止画撮影後のレビュー画像から作成したＡＶＩデータをメディアへ書き出すタイミングを示す。この期間Ｓ４４８のレビュー画像ＡＶＩは、先の期間Ｓ４３４の第２の代替フレーム期間分を記録している。そして期間Ｓ４４８のレビュー画像のＡＶＩデータを書き込み終えたら、先の期間Ｓ４１６で生成している動画のＡＶＩデータがＡＶＩバッファー上に溜めて込まれており、その動画のＡＶＩデータを期間Ｓ４５０のタイミングでメディアへ書き出すのである。以上が動画記録中に静止画撮影を行った場合のメディアへのデータ書き込みのシーケンスになる。このように記録したＡＶＩデータは、前述したように再生すると、動画記録中に静止画撮影した状況をユーザーに分りやすく表示する事ができる。
【００６１】
以上説明したように、実施形態によれば、動画再生したときに動画記録中の静止画撮影した時間位置と、その撮影された静止画をユーザーへ明確に伝えることができ、同時に動画を見ているユーザーに違和感を与えることなく、動画記録時の状況を克明に伝える事ができる。
【００６２】
なお、レリーズスイッチが半押し、すなわち、スイッチＳＷ１がＯＮで、スイッチＳＷ２がＯＦＦの状態のとき、撮像中の動画中の隅にレリーズスイッチのボタンのマークを合成しても良い。この場合、動画再生中に、静止画撮影によりブラックアウト画像が表示する直前で、静止画撮影しようとしていることを、ユーザに知らせることが可能になる。
【００６３】
＜他の実施形態＞
前述した実施形態では、動画記録中に静止画撮影した際に、静止画撮影動作により中断する動画撮影動作に対応する動画フレームをブラックアウト画像と静止画からのストップモーション画像で代替えフレームを生成しはめ込んだ。また、このとき、音声は、ブラックアウト画像の期間は擬似シャッター音を埋め込むが、ストップモーション画像には録音した音声を実時間で割り当てている。すなわち、図４上の期間Ｓ４０６の露光時間が１２５ｍＳｅｃ以下の場合についての実施の形態で、この場合には記録時の音声の実時間は連続している事になる。
【００６４】
この他の実施形態について、ここでは露光時間が１／８秒＝１２５ｍＳｅｃより長い長秒時露光の静止画撮影を行う場合について説明する。例えば非常に長い長秒時の静止画撮影を動画記録中に行った場合、動画を中断する時間も長くなるが、動画ファイルを再生した場合には、その中断した期間に見合わせて、代替えフレームを挿入するよりも、ブラックアウトの期間とストップモーション画像の期間を、先の実施形態で記載したような短秒時露光と同様に、固定した時間で再生するのが望ましい。その場合には、記録の実時間と再生の時間とは異なるため、捨てる（動画ファイルに記録しない）動画フレームと音声データが発生する。動画フレーム上の映像データとしては、露光時間のブラックアウト期間が撮影の時の実時間と異なる。すなわちブラックアウト期間の動画を捨てる事になる。音声データも、捨てる動画期間に合わせて捨てる事になので、擬似シャッター音直後の音声を露光時間に合わせて捨てる事になる。動画ファイル上の期間Ｓ４３４のストップモーション画像からは音声データも記録再生できる事から、この期間Ｓ４３４のストップモーション期間以降から再び動画に戻る期間についての音声データは連続する。これにより、動画記録中に長秒時の静止画撮影を行った場合に於いて、静止画撮影は露光時間の制限がない撮影動作が可能になると同時に、動画ファイルは、静止画撮影で中断される動画フレームを無駄な代替えフレームを挿入しなくて済む事から動画ファイルのデータを無駄に増大させずに済む。
【００６５】
更に又、ユーザーによっては、静止画の長秒時撮影の際に、動画フレームは代替えフレームで置き換えても、音声は捨てずにすべて録音したいという要求も考えられる。その場合には、録音は実時間に合わせてデータを捨てずに全時間を録音し、動画を中断した期間はストップモーション画像表示期間を引き延ばす。ブラックアウト期間は２００ｍＳｅｃ程度で常に固定にしても良い。これにより動画記録中の長秒時静止画撮影の際に、動画ファイルの映像は長時間中断され、ストップモーション期間は長くなるが、音声は隙間なく録音することが可能になる。動画を再生した際も、ストップモーション画像の表示期間が長くなるが、音声はその場の様子を再生するので、長秒時の静止画撮影をした事が分かると同時に、撮影の様子を音声で克明に伝える事が可能になる。
【００６６】
更に又、前述のブラックアウト期間が無映像表示でなく、シャッター閉じをイメージできる別の画像表示を行う方法もある。例えば、メカシャッターが段々と閉じる状態を表現するような画像データをＡＶＩデータの第一の代替え画像に使用したり、ブラックの変りに一面にブルーの表示をする。
【００６７】
なお、実施形態では、動画像データファイルがＡＶＩ形式であるものとして説明したが、他の形式、例えばＭＰＥＧ等でも構わない。
【００６８】
以上説明したように本実施形態によれば、動画再生したときに動画記録中の静止画撮影した時間位置を、ユーザーへ明確に伝えることができ、同時に動画を見ているユーザーに違和感を与えることなく、動画記録時の状況を克明に伝える事ができる。
【００６９】
また、実施形態によれば、動画像としてはめ込むブラックアウト画像フレーム数を、静止画撮影のシャッターを開いている時間（露光時間）に合わせることで、動画再生時に、動画中に静止画撮影している様子を忠実に再現する事ができる。
【００７０】
また、実施形態によれば、静止画撮影のシャッターを開いている露光時間は、第１の所定時間以内に制限することで、動画ファイルの中断時間をユーザーが違和感を感じない時間内に制限することができる。
【００７１】
また、実施形態によれば、長時間露光によって静止画を撮影した場合であっても、ブラックアウトの画像データで表わされる期間を通常の短時間露光と同様にすることで、動画再生時に常に同じ状況で、静止画撮影の状況を再生でき、ユーザーに違和感を与えない動画ファイル再生中の静止画撮影状況の再生になる。
【００７２】
また、実施形態によれば、ブラックアウト画像を挿入する期間を、動画フレームのサンプリング周期の整数倍の長さになることで、実際の動画像のシーケンスに対する時間的なズレを無くすことが可能になる。
【００７３】
また、実施形態によれば、ブラックアウト画像の次に、実際に撮影した静止画のフレームを動画像フレームとして格納し、尚且つ、その静止画フレームの挿入期間を、撮像素子の読み出し期間と静止画の現像期間とを合わせた期間の合算した期間とする。この結果、動画再生時には、あたかも静止画撮影後のレビュー表示を行っている様子を克明に伝える事ができ、ユーザーが動画記録中の静止画撮影を行った時のその静止画をストップモーション画像で克明に伝えることが可能となる。
【００７４】
また、実施形態によれば、挿入する静止画のフレームは、実際に静止画を撮像した際に得られた画像からリサイズした画像を用いるので、動画像再生時にストップモーションとして表示された画像と、撮像素子１０の全画素を用いた画像とを一致させることが可能になる。
【００７５】
また、実施形態によれば、動画像ファイルの一部として挿入する静止画の期間を、撮像素子からの読み出し時間と静止画処理手段で静止画像を現像する時間とを合わせた期間とする事で、動画ファイル上にはめ込まれるストップモーション画像の期間を一定にでき、且つ、動画を再生した時に、動画中に静止画撮影した静止画像をユーザーの十分認識できる時間を確保でき、ユーザーにその静止画像を克明に伝えることが可能になる。
【００７６】
また、実施形態によれば、動画撮影時に、撮像素子からのスルー画像を表示部２２に表示し、且つ、動画撮影中に静止画撮影を介して、その静止画が得られるまでの期間ではブラックアウト画像を表示部２２に表示し、静止画が得られ、その静止画の記録完了するまでの期間では静止画のレビュー画像を表示部２２に表示する。これにより、動画記録中の静止画撮影時の表示も通常の静止画撮影時の表示と同じにでき、ユーザーに違和感を与えない動画中静止画撮影が行なえる。
【００７７】
また、実施形態によれば、動画記録中の静止画撮影時の表示部２２に表示されるブラックアウト画像の表示期間は、静止画処理に依存するが、動画再生時のブラックアウト期間は、あたかもシャッターを閉じたことをイメージさせる時間にすることができ、違和感の無い再生ができるようになる。
【００７８】
また、実施形態によれば、動画再生時に静止画撮影した際に、ブラックアウトと同時に擬似シャッター音を発生することで、ユーザーはより確実に静止画を撮影したことが認識できできるようになる。
【００７９】
また、実施形態によれば、動画像として記録するブラックアウト画像の時間を、擬似シャッター音の時間に合わせることで、ブラックアウトと静止画撮影とを同期させることができる。
【００８０】
また、実施形態によれば、動画中の静止画撮影の露光時間が、動画ファイルに挿入する無信号画像（ブラックアウト）で生成する第１の代替えフレーム期間より長い場合でも、動画ファイルを無駄な代替えフレームを挿入することなく、動画ファイルのサイズが大きくなることを抑制できる。
【図面の簡単な説明】
【００８１】
【図１】実施形態におけるデジタルカメラのブロック構成図である。
【図２】実施形態における動画像記録中に静止画撮影した場合の処理手順を示すフローチャートである。
【図３】図２におけるステップＳ２１０の静止画撮影動作を行った場合の動画ファイル生成処理手順を示すフローチャートである。
【図４】実施形態における動画像記録中の静止画撮影した場合のシーケンス示す図である。
【図１】
2006345485.tif 000003
【図２】
2006345485.tif 000004
【図３】
2006345485.tif 000005
【図４】
2006345485.tif 000006