(57)【要約】  本発明は、静止画とともに、その前後の動画を撮影して記録することができるようにする記録装置および方法、再生装置および方法、並びにプログラムに関する。ステップＳ１で、動画付き静止画撮影モードが設定されると、動画の一時記憶が開始され、ステップＳ２で、シャッタが押下されたとき、ステップＳ３で、撮影された静止画が記録されるとともに、ステップＳ１で記憶された静止画前の動画と、撮影された静止画が変換された動画、およびシャッタ押下後に撮影された動画から、１つの動画が生成されて記録される。従って高精細の静止画とともに、静止画前後の動画が記録される。【特許請求の範囲】
【請求項１】
動画付き静止画撮影モードの設定を行う設定手段と、
前記動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、
前記動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、
前記静止画撮影手段による撮影の結果得られた静止画、および前記動画撮影手段による撮影の結果得られた動画に基づいて、１つの付随動画を生成する生成手段と、
前記静止画撮影手段による撮影の結果得られた前記静止画、および前記生成手段により生成された前記付随動画を記録する記録手段と
を備えることを特徴とする記録装置。
【請求項２】
前記生成手段は、前記静止画撮影手段による撮影の結果得られた静止画を動画に変換して得た第１の動画、前記静止画撮影手段による静止画撮影前に前記動画撮影手段により撮影された第２の動画、および前記静止画撮影手段による静止画撮影後に前記動画撮影手段により撮影された第３の動画に基づいて、前記付随動画を生成する
ことを特徴とする請求項１に記載の記録装置。
【請求項３】
前記生成手段は、前記静止画撮影手段による撮影の結果得られた静止画を動画に変換して得た第１の動画、および前記静止画撮影手段による静止画撮影前に前記動画撮影手段により撮影された第２の動画に基づいて、前記付随動画を生成する
ことを特徴とする請求項１に記載の記録装置。
【請求項４】
前記生成手段は、前記静止画撮影手段による撮影の結果得られた静止画を動画に変換して得た第１の動画、および前記静止画撮影手段による静止画撮影後に前記動画撮影手段により撮影された第３の動画に基づいて、前記付随動画を生成する
ことを特徴とする請求項１に記載の記録装置。
【請求項５】
前記動画撮影手段は、前記動画付き静止画撮影モードが設定された時、動画の撮影を開始する
ことを特徴とする請求項１に記載の記録装置。
【請求項６】
前記動画撮影手段は、前記記録装置の電源がオンされた時、動画の撮影を開始する
ことを特徴とする請求項１に記載の記録装置。
【請求項７】
前記動画撮影手段は、記録媒体が挿入された時、動画の撮影を開始する
ことを特徴とする請求項１に記載の記録装置。
【請求項８】
前記生成手段は、前記静止画撮影手段による撮影の結果得られた静止画が変換されて得られた前記第１の動画にエフェクト効果を付加する
ことを特徴とする請求項２に記載の記録装置。
【請求項９】
前記生成手段は、前記静止画撮影手段による撮影の結果得られた静止画が変換されて得られた前記第１の動画のフレームの前若しくは後、または前後にダミーフレームを設ける  ことを特徴とする請求項８に記載の記録装置。
【請求項１０】
前記生成手段は、前記静止画撮影手段による撮影の結果得られた静止画が変換されて得られた前記第１の動画が再生されるタイミングに対応して出力されるシャッタ音を、前記第１の動画に挿入する
ことを特徴とする請求項８に記載の記録装置。
【請求項１１】
前記動画撮影手段による動画の撮影中の音声の音声データを取得する第１の音声取得手段と、
前記静止画撮影手段による静止画の撮影中の音声の音声データを取得する第２の音声手段と
さらに備え、
前記生成手段は、前記付随動画を生成するのに利用する前記動画に対応する前記第１の音声取得手段により取得された音声、および前記付随動画を生成するのに利用する前記静止画に対応する前記第２の音声取得手段により取得された前記音声データの全部または一部を多重化して、前記付随動画を生成する、
ことを特徴とする制球項１に記載の記録装置。
【請求項１２】
前記生成手段は、再生側の動画のフレームレートが固定である場合、そのフレームレートが維持できる数のダミーフレームを、前記静止画撮影手段による撮影の結果得られた静止画が変換されて得られた前記第１の動画のフレームの前若しくは後、または前後に設ける
ことを特徴とする請求項９に記載の記録装置。
【請求項１３】
前記生成手段は、再生側の動画のフレームレートが可変である場合、任意の数のダミーフレームを、前記静止画撮影手段による撮影の結果得られた静止画が変換されて得られた前記第１の動画のフレームの前若しくは後、または前後に設ける
ことを特徴とする請求項９に記載の記録装置。
【請求項１４】
前記生成手段は、前記動画撮影手段により撮影された動画の中から所定の動画を抽出し、抽出した動画と、前記静止画撮影手段による撮影の結果得られた静止画が変換されて得られた動画から、前記付随動画を生成する
ことを特徴とする請求項１に記載の記録装置。
【請求項１５】
前記動画撮影手段により撮影された動画が、フレーム間圧縮を用いて構成されている場合、前記生成手段は、フレーム内圧縮のみを用いたフレーム、またはフレーム間圧縮の元となるフレームを先頭とする動画を抽出する
ことを特徴とする請求項１４に記載の記録装置。
【請求項１６】
前記記録手段は、前記静止画撮影手段による撮影の結果得られた静止画と、前記生成手段により生成された付随動画を、同じファイル名で記録する
ことを特徴とする請求項１に記載の記録装置。
【請求項１７】
前記記録手段による記録中に、記録されている画像に応じたＵＩ画像を表示する表示制御手段
をさらに備えることを特徴とする請求項１に記載の記録装置。
【請求項１８】
動画付き静止画撮影モードの設定を行う設定ステップと、
前記動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影ステップと、
前記動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影ステップと、
前記静止画撮影ステップの処理での撮影の結果得られた静止画、および前記動画撮影ステップの処理での撮影の結果得られた動画に基づいて、１つの付随動画を生成する生成ステップと、
前記静止画撮影ステップの処理での撮影の結果得られた前記静止画、および前記生成ステップの処理で生成された前記付随動画を記録する記録ステップと
を含むことを特徴とする記録方法。
【請求項１９】
画像を記録する記録装置を制御するプロセッサに実行させるプログラムであって、
動画付き静止画撮影モードの設定を行う設定ステップと、
前記動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影ステップと、
前記動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影ステップと、
前記静止画撮影ステップの処理での撮影の結果得られた静止画、および前記動画撮影ステップの処理での撮影の結果得られた動画に基づいて、１つの付随動画を生成する生成ステップと、
前記静止画撮影ステップの処理での撮影の結果得られた前記静止画、および前記生成ステップの処理で生成された前記付随動画を記録する記録ステップと
を含むことを特徴とするプログラム。
【請求項２０】
動画付き静止画撮影モードの設定を行う設定手段と、
前記動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、
前記動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、
前記静止画撮影手段による撮影の結果得られた静止画、前記静止画撮影手段による静止画撮影前に前記動画撮影手段により撮影された動画、および前記静止画撮影手段による静止画撮影後に前記動画撮影手段により撮影された動画を、異なるファイルとして記録する記録手段と
を備えることを特徴とする記録装置。
【請求項２１】
動画付き静止画撮影モードの設定を行う設定ステップと、
前記動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影ステップと、
前記動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影ステップと、
前記静止画撮影ステップの処理での撮影の結果得られた静止画、前記静止画撮影ステップの処理での静止画撮影前に前記動画撮影ステップの処理で撮影された動画、および前記静止画撮影ステップの処理での静止画撮影後に前記動画撮影ステップの処理で撮影された動画を、異なるファイルとして記録する記録ステップと
を含むことを特徴とする記録方法。
【請求項２２】
画像を記録する記録装置を制御するプロセッサに実行させるプログラムであって、
動画付き静止画撮影モードの設定を行う設定ステップと、
前記動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影ステップと、
前記動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影ステップと、
前記静止画撮影ステップの処理での撮影の結果得られた静止画、前記静止画撮影ステップの処理での静止画撮影前に前記動画撮影ステップの処理で撮影された動画、および前記静止画撮影ステップの処理での静止画撮影後に前記動画撮影ステップの処理で撮影された動画を、異なるファイルとして記録する記録ステップと
を含むことを特徴とするプログラム。
【請求項２３】
動画付き静止画撮影モードの設定を行う設定手段と、
前記動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、
前記動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、
前記静止画撮影手段による撮影の結果得られた静止画、および前記動画撮影手段による撮影の結果得られた動画に基づいて、１つの付随動画を生成する生成手段と、
前記静止画撮影手段による撮影の結果得られた静止画、および前記生成手段により生成された前記付随動画を記録する記録手段と
を備えることを特徴とする記録装置によって記録された画像を再生する再生装置において、
前記動画付き静止画撮影モードで撮影された静止画の再生が要求されたとき、前記記録装置の前記記録手段に記録された前記静止画撮影手段による撮影の結果得られた静止画を再生する第１の再生手段と、
前記動画付き静止画撮影モードで撮影された動画の再生が要求されたとき、前記記録装置の記録手段に記録された前記生成手段により生成された付随動画を再生する第２の再生手段と
を備えることを特徴とする再生装置。
【請求項２４】
前記記録装置の前記記録手段により、前記静止画撮影手段による撮影の結果得られた前記静止画と、前記生成手段により生成された前記付随動画とが、同じファイル名で記録されている場合、前記第２の再生手段は、前記第１の再生手段により再生された前記静止画と同じファイル名の動画を再生する
ことを特徴とする請求項２３に記載の再生装置。
【請求項２５】
前記動画付き静止画撮影設定モードで記録された画像のサムネイル画像を表示する表示制御手段をさらに備え、
前記表示制御手段は、前記サムネイル画像に、前記動画付き撮影設定モードで撮影されたことを示す表示を付加する
ことを特徴とする請求項２４に記載の再生装置。
【請求項２６】
動画付き静止画撮影モードの設定を行う設定手段と、
前記動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、
前記動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、
前記静止画撮影手段による撮影の結果得られた静止画、および前記動画撮影手段による撮影の結果得られた動画に基づいて、１つの付随動画を生成する生成手段と、
前記静止画撮影手段による撮影の結果得られた静止画、および前記生成手段により生成された前記付随動画を記録する記録手段と
を備えることを特徴とする記録装置によって記録された画像を再生する再生方法において、
前記動画付き静止画撮影モードで撮影された静止画の再生が要求されたとき、前記記録装置の前記記録手段に記録された前記静止画撮影手段による撮影の結果得られた静止画を再生する第１の再生ステップと、
前記動画付き静止画撮影モードで撮影された動画の再生が要求されたとき、前記記録装置の記録手段に記録された前記生成手段により生成された付随動画を再生する第２の再生ステップと
を含むことを特徴とする再生方法。
【請求項２７】
動画付き静止画撮影モードの設定を行う設定手段と、
前記動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、
前記動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、
前記静止画撮影手段による撮影の結果得られた静止画、および前記動画撮影手段による撮影の結果得られた動画に基づいて、１つの付随動画を生成する生成手段と、
前記静止画撮影手段による撮影の結果得られた静止画、および前記生成手段により生成された前記付随動画を記録する記録手段と
を備えることを特徴とする記録装置によって記録された画像を再生する再生装置を制御するプロセッサに実行させるプログラムであって、
前記動画付き静止画撮影モードで撮影された静止画の再生が要求されたとき、前記記録装置の前記記録手段に記録された前記静止画撮影手段による撮影の結果得られた静止画を再生する第１の再生ステップと、
前記動画付き静止画撮影モードで撮影された動画の再生が要求されたとき、前記記録装置の記録手段に記録された前記生成手段により生成された付随動画を再生する第２の再生ステップと
を含むことを特徴とするプログラム。
【請求項２８】
動画付き静止画撮影モードの設定を行う設定手段と、
前記動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、
前記動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、
前記静止画撮影手段による撮影の結果得られた静止画、前記静止画撮影手段による静止画撮影前に前記動画撮影手段により撮影された動画、および前記静止画撮影手段による静止画撮影後に前記動画撮影手段により撮影された動画を、異なるファイルとして記録する記録手段と
を備えることを特徴とする記録装置によって記録された画像を再生する再生装置において、
前記動画付き静止画撮影モードで撮影された静止画の再生が要求されたとき、前記記録装置の前記記録手段に記録された前記静止画撮影手段による撮影の結果得られた静止画を再生する第１の再生手段と、
前記動画付き静止画撮影モードで撮影された動画の再生が要求されたとき、前記静止画撮影手段による撮影の結果得られた静止画、前記動画撮影手段による撮影の結果得られた動画に基づいて、１つの付随動画を生成するとともに、前記付随動画を再生する第２の再生手段と
を備えることを特徴とする再生装置。
【請求項２９】
動画付き静止画撮影モードの設定を行う設定手段と、
前記動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、
前記動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、
前記静止画撮影手段による撮影の結果得られた静止画、前記静止画撮影手段による静止画撮影前に前記動画撮影手段により撮影された動画、および前記静止画撮影手段による静止画撮影後に前記動画撮影手段により撮影された動画を、異なるファイルとして記録する記録手段と
を備えることを特徴とする記録装置によって記録された画像を再生する再生方法において、
前記動画付き静止画撮影モードで撮影された静止画の再生が要求されたとき、前記記録装置の前記記録手段に記録された前記静止画撮影手段による撮影の結果得られた静止画を再生する第１の再生ステップと、
前記動画付き静止画撮影モードで撮影された動画の再生が要求されたとき、前記静止画撮影手段による撮影の結果得られた静止画、前記動画撮影手段による撮影の結果得られた動画に基づいて、１つの付随動画を生成するとともに、前記付随動画を再生する第２の再生ステップと
を含むことを特徴とする再生方法。
【請求項３０】
動画付き静止画撮影モードの設定を行う設定手段と、
前記動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、
前記動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、
前記静止画撮影手段による撮影の結果得られた静止画、前記静止画撮影手段による静止画撮影前に前記動画撮影手段により撮影された動画、および前記静止画撮影手段による静止画撮影後に前記動画撮影手段により撮影された動画を、異なるファイルとして記録する記録手段と
を備えることを特徴とする記録装置によって記録された画像を再生する再生装置を制御するプロセッサに実行させるプログラムにおいて、
前記動画付き静止画撮影モードで撮影された静止画の再生が要求されたとき、前記記録装置の前記記録手段に記録された前記静止画撮影手段による撮影の結果得られた静止画を再生する第１の再生ステップと、
前記動画付き静止画撮影モードで撮影された動画の再生が要求されたとき、前記静止画撮影手段による撮影の結果得られた静止画、前記動画撮影手段による撮影の結果得られた動画に基づいて、１つの付随動画を生成するとともに、前記付随動画を再生する第２の再生ステップと
を含むことを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、記録装置および方法、再生装置および方法、並びにプログラムに関し、特に、静止画とともに、その前後の動画を撮影し、またはその撮影の結果得られた画像を再生するのに適した記録装置および方法、再生装置および方法、並びにプログラムに関する。
【背景技術】
【０００２】
デジタルカメラは、撮影した画像をデジタルデータとして保持することができ、手軽に使える撮影機器として普及している。また近年、高性能CPUの登場により、デジタルカメラで静止画のみならず動画が撮影できるようになっている。【０００３】
こうした、動画も撮影できるデジタルカメラを用いることにより、静止画と、その前後の動画を撮影できるデジタルカメラが考案されている（特許文献１参照）。
【特許文献１】特開2003-92724号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、静止画とその前後の動画を撮影する場合、従来においては、実際は動画の撮影しか行われておらず、静止画としての画像は、動画として撮影された１枚の画像データから生成されるようになっている。すなわち従来において静止画とその前後の動画を撮影する場合、静止画本来の高精細な画像を記録したり、再生することはできなかった。【０００５】
本発明はこのような状況に鑑みてなされたものであり、高精細な静止画を再生できるように、静止画とその前後の動画を撮影することができるようにするものである。
【課題を解決するための手段】
【０００６】
本発明の第１の記録装置は、動画付き静止画撮影モードの設定を行う設定手段と、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、静止画撮影手段による撮影の結果得られた静止画、および動画撮影手段による撮影の結果得られた動画に基づいて、１つの付随動画を生成する生成手段と、静止画撮影手段による撮影の結果得られた静止画、および生成手段により生成された付随動画を記録する記録手段とを備えることを特徴とする。【０００７】
生成手段は、静止画撮影手段による撮影の結果得られた静止画を動画に変換して得た第１の動画、静止画撮影手段による静止画撮影前に動画撮影手段により撮影された第２の動画、および静止画撮影手段による静止画撮影後に動画撮影手段により撮影された第３の動画に基づいて、付随動画を生成することができる。【０００８】
生成手段は、静止画撮影手段による撮影の結果得られた静止画を動画に変換して得た第１の動画、および静止画撮影手段による静止画撮影前に動画撮影手段により撮影された第２の動画に基づいて、付随動画を生成することができる。【０００９】
生成手段は、静止画撮影手段による撮影の結果得られた静止画を動画に変換して得た第１の動画、および静止画撮影手段による静止画撮影後に動画撮影手段により撮影された第３の動画に基づいて、付随動画を生成することができる。【００１０】
動画撮影手段は、動画付き静止画撮影モードが設定された時、動画の撮影を開始することができる。【００１１】
動画撮影手段は、記録装置の電源がオンされた時、動画の撮影を開始することができる。【００１２】
動画撮影手段は、記録媒体が挿入された時、動画の撮影を開始することができる。【００１３】
生成手段は、静止画撮影手段による撮影の結果得られた静止画が変換されて得られた第１の動画にエフェクト効果を付加することができる。【００１４】
生成手段は、静止画撮影手段による撮影の結果得られた静止画が変換されて得られた第１の動画のフレームの前若しくは後、または前後にダミーフレームを設けることができる。【００１５】
生成手段は、静止画撮影手段による撮影の結果得られた静止画が変換されて得られた第１の動画が再生されるタイミングに対応して出力されるシャッタ音を、第１の動画に挿入することができる。【００１６】
動画撮影手段による動画の撮影中の音声の音声データを取得する第１の音声取得手段と、静止画撮影手段による静止画の撮影中の音声の音声データを取得する第２の音声手段とさらに設け、生成手段は、付随動画を生成するのに利用する動画に対応する第１の音声取得手段により取得された音声、および付随動画を生成するのに利用する静止画に対応する第２の音声取得手段により取得された音声データの全部または一部を多重化して、付随動画を生成することができる。
【００１７】
生成手段は、再生側の動画のフレームレートが固定である場合、そのフレームレートが維持できる数のダミーフレームを、静止画撮影手段による撮影の結果得られた静止画が変換されて得られた第１の動画のフレームの前若しくは後、または前後に設けることができる。【００１８】
生成手段は、再生側の動画のフレームレートが可変である場合、任意の数のダミーフレームを、静止画撮影手段による撮影の結果得られた静止画が変換されて得られた第１の動画のフレームの前若しくは後、または前後に設けることができる。【００１９】
生成手段は、動画撮影手段により撮影された動画の中から所定の動画を抽出し、抽出した動画と、静止画撮影手段による撮影の結果得られた静止画が変換されて得られた動画から、付随動画を生成することができる。【００２０】
動画撮影手段により撮影された動画が、フレーム間圧縮を用いて構成されている場合、生成手段は、フレーム内圧縮のみを用いたフレーム、またはフレーム間圧縮の元となるフレームを先頭とする動画を抽出することができる。【００２１】
記録手段は、静止画撮影手段による撮影の結果得られた静止画と、生成手段により生成された付随動画を、同じファイル名で記録することができる。【００２２】
記録手段による記録中に、記録されている画像に応じたＵＩ画像を表示する表示制御手段をさらに設けることができる。【００２３】
本発明の第１の記録方法は、動画付き静止画撮影モードの設定を行う設定ステップと、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影ステップと、動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影ステップと、静止画撮影ステップの処理での撮影の結果得られた静止画、および動画撮影ステップの処理での撮影の結果得られた動画に基づいて、１つの付随動画を生成する生成ステップと、静止画撮影ステップの処理での撮影の結果得られた静止画、および生成ステップの処理で生成された付随動画を記録する記録ステップとを含むことを特徴とする。【００２４】
本発明の第１のプログラムは、動画付き静止画撮影モードの設定を行う設定ステップと、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影ステップと、動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影ステップと、静止画撮影ステップの処理での撮影の結果得られた静止画、および動画撮影ステップの処理での撮影の結果得られた動画に基づいて、１つの付随動画を生成する生成ステップと、静止画撮影ステップの処理での撮影の結果得られた静止画、および生成ステップの処理で生成された付随動画を記録する記録ステップとを含むことを特徴とする。【００２５】
本発明の第１の記録装置および方法、並びにプログラムにおいては、動画付き静止画撮影モードが設定され、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画が撮影され、動画付き静止画撮影モードの設定中に、動画が撮影され、撮影された静止画、および撮影された動画に基づいて、１つの付随動画が生成され、撮影された静止画、および生成された付随動画が記録される。【００２６】
本発明の第２の記録装置は、動画付き静止画撮影モードの設定を行う設定手段と、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、静止画撮影手段による撮影の結果得られた静止画、静止画撮影手段による静止画撮影前に動画撮影手段により撮影された動画、および静止画撮影手段による静止画撮影後に動画撮影手段により撮影された動画を、異なるファイルとして記録する記録手段とを備えることを特徴とする。【００２７】
本発明の第２の記録方法は、動画付き静止画撮影モードの設定を行う設定ステップと、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影ステップと、動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影ステップと、静止画撮影ステップの処理での撮影の結果得られた静止画、静止画撮影ステップの処理での静止画撮影前に動画撮影ステップの処理で撮影された動画、および静止画撮影ステップの処理での静止画撮影後に動画撮影ステップの処理で撮影された動画を、異なるファイルとして記録する記録ステップとを含むことを特徴とする。【００２８】
本発明の第２のプログラムは、動画付き静止画撮影モードの設定を行う設定ステップと、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影ステップと、動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影ステップと、静止画撮影ステップの処理での撮影の結果得られた静止画、静止画撮影ステップの処理での静止画撮影前に動画撮影ステップの処理で撮影された動画、および静止画撮影ステップの処理での静止画撮影後に動画撮影ステップの処理で撮影された動画を、異なるファイルとして記録する記録ステップとを含むことを特徴とする。【００２９】
本発明の第２の記録装置および方法、並びにプログラムにおいては、動画付き静止画撮影モードが設定され、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画が撮影され、動画付き静止画撮影モードの設定中に、動画が撮影され、撮影のされた静止画、静止画撮影前に撮影された動画、および静止画撮影後に撮影された動画が、異なるファイルとして記録される。【００３０】
本発明の、動画付き静止画撮影モードの設定を行う設定手段と、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、静止画撮影手段による撮影の結果得られた静止画、および動画撮影手段による撮影の結果得られた動画に基づいて、１つの付随動画を生成する生成手段と、静止画撮影手段による撮影の結果得られた静止画、および生成手段により生成された付随動画を記録する記録手段とを備えることを特徴とする記録装置によって記録された画像を再生する第１の再生装置は、動画付き静止画撮影モードで撮影された静止画の再生が要求されたとき、記録装置の記録手段に記録された静止画撮影手段による撮影の結果得られた静止画を再生する第１の再生手段と、動画付き静止画撮影モードで撮影された動画の再生が要求されたとき、記録装置の記録手段に記録された生成手段により生成された付随動画を再生する第２の再生手段とを備えることを特徴とする。【００３１】
記録装置の記録手段により、静止画撮影手段による撮影の結果得られた静止画と、生成手段により生成された付随動画とが、同じファイル名で記録されている場合、第２の再生手段は、第１の再生手段により再生された静止画と同じファイル名の動画を再生することができる。【００３２】
動画付き静止画撮影設定モードで記録された画像のサムネイル画像を表示する表示制御手段をさらに設け、表示制御手段には、サムネイル画像に、動画付き撮影設定モードで撮影されたことを示す表示を付加させることができる。【００３３】
本発明の、動画付き静止画撮影モードの設定を行う設定手段と、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、静止画撮影手段による撮影の結果得られた静止画、および動画撮影手段による撮影の結果得られた動画に基づいて、１つの付随動画を生成する生成手段と、静止画撮影手段による撮影の結果得られた静止画、および生成手段により生成された付随動画を記録する記録手段とを備えることを特徴とする記録装置によって記録された画像を再生する第１の再生方法は、動画付き静止画撮影モードで撮影された静止画の再生が要求されたとき、記録装置の記録手段に記録された静止画撮影手段による撮影の結果得られた静止画を再生する第１の再生ステップと、動画付き静止画撮影モードで撮影された動画の再生が要求されたとき、記録装置の記録手段に記録された生成手段により生成された付随動画を再生する第２の再生ステップとを含むことを特徴とする。【００３４】
本発明の、動画付き静止画撮影モードの設定を行う設定手段と、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、静止画撮影手段による撮影の結果得られた静止画、および動画撮影手段による撮影の結果得られた動画に基づいて、１つの付随動画を生成する生成手段と、静止画撮影手段による撮影の結果得られた静止画、および生成手段により生成された付随動画を記録する記録手段とを備えることを特徴とする記録装置によって記録された画像を再生する再生装置を制御するプロセッサに実行させる第１のプログラムは、動画付き静止画撮影モードで撮影された静止画の再生が要求されたとき、記録装置の記録手段に記録された静止画撮影手段による撮影の結果得られた静止画を再生する第１の再生ステップと、動画付き静止画撮影モードで撮影された動画の再生が要求されたとき、記録装置の記録手段に記録された生成手段により生成された付随動画を再生する第２の再生ステップとを含むことを特徴とする。【００３５】
本発明の、動画付き静止画撮影モードの設定を行う設定手段と、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、静止画撮影手段による撮影の結果得られた静止画、および動画撮影手段による撮影の結果得られた動画に基づいて、１つの付随動画を生成する生成手段と、静止画撮影手段による撮影の結果得られた静止画、および生成手段により生成された付随動画を記録する記録手段とを備えることを特徴とする記録装置によって記録された画像を再生する第１の再生装置および方法、並びにプログラムにおいて、動画付き静止画撮影モードで撮影された静止画の再生が要求されたとき、記録装置の記録手段に記録された静止画撮影手段による撮影の結果得られた静止画が再生され、動画付き静止画撮影モードで撮影された動画の再生が要求されたとき、記録装置の記録手段に記録された生成手段により生成された付随動画が再生される。【００３６】
本発明の、動画付き静止画撮影モードの設定を行う設定手段と、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、静止画撮影手段による撮影の結果得られた静止画、静止画撮影手段による静止画撮影前に動画撮影手段により撮影された動画、および静止画撮影手段による静止画撮影後に動画撮影手段により撮影された動画を、異なるファイルとして記録する記録手段とを備えることを特徴とする記録装置によって記録された画像を再生する第２の再生装置は、動画付き静止画撮影モードで撮影された静止画の再生が要求されたとき、記録装置の記録手段に記録された静止画撮影手段による撮影の結果得られた静止画を再生する第１の再生手段と、動画付き静止画撮影モードで撮影された動画の再生が要求されたとき、静止画撮影手段による撮影の結果得られた静止画、動画撮影手段による撮影の結果得られた動画に基づいて、１つの付随動画を生成するとともに、付随動画を再生する第２の再生手段とを備えることを特徴とする。【００３７】
本発明の、動画付き静止画撮影モードの設定を行う設定手段と、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、静止画撮影手段による撮影の結果得られた静止画、静止画撮影手段による静止画撮影前に動画撮影手段により撮影された動画、および静止画撮影手段による静止画撮影後に動画撮影手段により撮影された動画を、異なるファイルとして記録する記録手段とを備えることを特徴とする記録装置によって記録された画像を再生する第２の再生方法は、動画付き静止画撮影モードで撮影された静止画の再生が要求されたとき、記録装置の記録手段に記録された静止画撮影手段による撮影の結果得られた静止画を再生する第１の再生ステップと、動画付き静止画撮影モードで撮影された動画の再生が要求されたとき、静止画撮影手段による撮影の結果得られた静止画、動画撮影手段による撮影の結果得られた動画に基づいて、１つの付随動画を生成するとともに、付随動画を再生する第２の再生ステップとを含むことを特徴とする。【００３８】
本発明の、動画付き静止画撮影モードの設定を行う設定手段と、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、静止画撮影手段による撮影の結果得られた静止画、静止画撮影手段による静止画撮影前に動画撮影手段により撮影された動画、および静止画撮影手段による静止画撮影後に動画撮影手段により撮影された動画を、異なるファイルとして記録する記録手段とを備えることを特徴とする記録装置によって記録された画像を再生する再生装置を制御するプロセッサに実行させるプログラムは、動画付き静止画撮影モードで撮影された静止画の再生が要求されたとき、記録装置の記録手段に記録された静止画撮影手段による撮影の結果得られた静止画を再生する第１の再生ステップと、動画付き静止画撮影モードで撮影された動画の再生が要求されたとき、静止画撮影手段による撮影の結果得られた静止画、動画撮影手段による撮影の結果得られた動画に基づいて、１つの付随動画を生成するとともに、付随動画を再生する第２の再生ステップとを含むことを特徴とする。【００３９】
本発明の、動画付き静止画撮影モードの設定を行う設定手段と、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、静止画撮影手段による撮影の結果得られた静止画、静止画撮影手段による静止画撮影前に動画撮影手段により撮影された動画、および静止画撮影手段による静止画撮影後に動画撮影手段により撮影された動画を、異なるファイルとして記録する記録手段とを備えることを特徴とする記録装置によって記録された画像を再生する第２の再生装置および方法、並びにプログラムにおいては、動画付き静止画撮影モードで撮影された静止画の再生が要求されたとき、記録装置の記録手段に記録された静止画撮影手段による撮影の結果得られた静止画が再生され、動画付き静止画撮影モードで撮影された動画の再生が要求されたとき、静止画撮影手段による撮影の結果得られた静止画、動画撮影手段による撮影の結果得られた動画に基づいて、１つの付随動画が生成されるとともに、付随動画が再生される。
【発明の効果】
【００４０】
第１の本発明によれば、高精細な静止画を再生できるように、静止画とその前後のうち少なくともいずれか一方の動画を撮影して記録することができる。
第２の本発明によれば、高精細な静止画を再生できるように記録された静止画とその前後の動画を再生することができる。
【図面の簡単な説明】
【００４１】
【図１】本発明を提供したデジタルカメラの構成例を示すブロック図である。
【図２】図１のデジタルカメラの機能的構成例を示すブロック図である。
【図３】動画付き静止画撮影モード時の動作を説明するフローチャートである。
【図４】図３のステップＳ１の動画一時記憶処理の詳細を説明するフローチャートである。
【図５】図３のステップＳ３の記録処理の詳細を説明するフローチャートである。
【図６】図５のステップＳ８１の記録処理の詳細を説明するフローチャートである。
【図７】ファイルリストの例を示す図である。
【図８】ファイルリストの他の例を示す図である。
【図９】動画付き静止画撮影モードで記録される静止画および付随動画を説明する図である。
【図１０】動画付き静止画撮影モードで記録される静止画および付随動画を説明する他の図である。
【図１１】動画付き静止画撮影モードによる記録時の表示制御処理を説明するフローチャートである。
【図１２】動画付き静止画撮影モードで記録中の表示例を示す図である。
【図１３】動画付き静止画撮影モードで記録中の他の表示例を示す図である。
【図１４】動画付き静止画撮影モードで記録中の他の表示例を示す図である。
【図１５】動画付き静止画撮影モードで記録中の他の表示例を示す図である。
【図１６】動画付き静止画撮影モードで記録中の他の表示例を示す図である。
【図１７】ファイルリスト作成処理を説明するフローチャートである。
【図１８】図１の記録媒体１５に記録されているファイル構成を示す図である。
【図１９】サムネイル表示処理を説明するフローチャートである。
【図２０】サムネイルの表示例を示す図である。
【図２１】動画付き静止画撮影モードで撮影された画像を再生する処理を説明するフローチャートである。
【図２２】動画付き静止画撮影モードで撮影された画像が再生されているとき表示される画像の例を示す図である。
【図２３】動画付き静止画撮影モードで撮影された画像が再生されているとき表示される画像の他の例を示す図である。
【図２４】動画付き静止画撮影モードで撮影された画像が再生されているとき表示される画像の例を示す図である。
【図２５】動画付き静止画撮影モードで撮影された画像が再生されているとき表示される画像の他の例を示す図である。
【図２６】動画付き静止画撮影モードで撮影された画像が再生されているとき表示される画像の他の例を示す図である。
【図２７】図３のステップＳ３の記録処理の詳細を説明する他のフローチャートである。
【符号の説明】
【００４２】
１  デジタルカメラ，  １１  CPU，  １２  ROM，  １３  RAM，  １４  ドライブ，  １５  記録媒体，  ２１  カメラ部，  ２２  画像処理部，  ２３  静止画コーディック部，  ２４  動画コーディック部，  ２５  表示制御部，  ２６  表示部，  ３０  マイクロフォン，  ３１  音声信号処理部，  ３２  音声コーディック部，  ５１  画像データ入力部，  ５２  カメラ制御部，  ５３  静止画処理部，  ５４  静止画記憶部，  ５５  動画処理部，  ５６  動画記憶部，  ５７  ファイル管理部，  ７１  音声入力部
【発明を実施するための最良の形態】
【００４３】
以下に本発明の実施の形態を説明するが、本明細書に記載の発明と、発明の実施の形態との対応関係を例示すると、次のようになる。この記載は、本明細書に記載されている発明をサポートする実施の形態が本明細書に記載されていることを確認するためのものである。従って、発明の実施の形態中には記載されているが、発明に対応するものとして、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その発明に対応するものではないことを意味するものではない。逆に、実施の形態が発明に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その発明以外の発明には対応しないものであることを意味するものでもない。【００４４】
さらに、この記載は、本明細書に記載されている発明の全てを意味するものではない。
換言すれば、この記載は、本明細書に記載されている発明であって、この出願では請求されていない発明の存在、すなわち、将来、分割出願されたり、補正により出現、追加される発明の存在を否定するものではない。【００４５】
本発明の第１の記録装置は、動画付き静止画撮影モードの設定を行う設定手段（例えば、図１の設定スイッチ２８）と、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段（例えば、図２の中央制御部６２、カメラ制御部５２、および静止画処理部５３）と、動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段（例えば、図２の中央制御部６２、カメラ制御部５２、および動画処理部５５）と、静止画撮影手段による撮影の結果得られた静止画、および動画撮影手段による撮影の結果得られた動画に基づいて、１つの付随動画を生成する生成手段（例えば、図２の動画処理部５５）と、静止画撮影手段による撮影の結果得られた静止画、および生成手段により生成された付随動画を記録する記録手段（例えば、図２のファイル管理部５７および記録媒体１５）とを備えることを特徴とする。【００４６】
生成手段は、静止画撮影手段による撮影の結果得られた静止画を動画に変換して得た第１の動画（例えば、図９の静止画対応動画Ｍc）、静止画撮影手段による静止画撮影前に動画撮影手段により撮影された第２の動画（例えば、図９のプレ動画Ｍaa）、および静止画撮影手段による静止画撮影後に動画撮影手段により撮影された第３の動画（例えば、図９のポスト動画Ｍbb）に基づいて、付随動画を生成することができる。【００４７】
生成手段は、静止画撮影手段による撮影の結果得られた静止画を動画に変換して得た第１の動画（例えば、図９の静止画対応動画Ｍc）、および静止画撮影手段による静止画撮影前に動画撮影手段により撮影された第２の動画（例えば、図９のプレ動画Ｍaa）に基づいて、付随動画を生成することができる。【００４８】
生成手段は、静止画撮影手段による撮影の結果得られた静止画を動画に変換して得た第１の動画（例えば、図９の静止画対応動画Ｍc）、および静止画撮影手段による静止画撮影後に動画撮影手段により撮影された第３の動画（例えば、図９のポスト動画Ｍbb）に基づいて、付随動画を生成することができる。【００４９】
生成手段は、静止画撮影手段による撮影の結果得られた静止画が変換されて得られた第１の動画にエフェクト効果（例えば、図９の枠Ｅa）を付加することができる。【００５０】
生成手段は、静止画撮影手段による撮影の結果得られた静止画が変換されて得られた第１の動画のフレームの前若しくは後、または前後にダミーフレーム（例えば、図９のＤのダミーフレーム）を設けることができる。【００５１】
生成手段は、静止画撮影手段による撮影の結果得られた静止画が変換されて得られた第１の動画が再生されるタイミングに対応して出力されるシャッタ音（例えば、図２５に示すシャッタ音）を、第１の動画に挿入することができる。【００５２】
動画撮影手段による動画の撮影中の音声の音声データを取得する第１の音声取得手段（例えば、図２の音声入力部７１および動画処理部５５）と、静止画撮影手段による静止画の撮影中の音声の音声データを取得する第２の音声手段（例えば、図２の音声入力部７１および動画処理部５５）とさらに設け、生成手段は、付随動画を生成するのに利用する動画に対応する第１の音声取得手段により取得された音声、および付随動画を生成するのに利用する静止画に対応する第２の音声取得手段により取得された音声データの全部または一部を多重化して、付随動画を生成することができる（例えば、図２６）。【００５３】
生成手段は、再生側の動画のフレームレートが固定である場合、そのフレームレートが維持できる数のダミーフレーム（例えば、図１０のＤのダミーフレーム）を、静止画撮影手段による撮影の結果得られた静止画が変換されて得られた第１の動画のフレームの前若しくは後、または前後に設けることができる。【００５４】
生成手段は、再生側の動画のフレームレートが可変である場合、任意の数のダミーフレーム（例えば、図９のＤのダミーフレーム）を、静止画撮影手段による撮影の結果得られた静止画が変換されて得られた第１の動画のフレームの前若しくは後、または前後に設けることができる。【００５５】
生成手段は、動画撮影手段により撮影された動画（例えば、図９のＡのフレームＭa１乃至Ｍa１７）の中から所定の動画（例えば、図９のＥのフレームＭa４乃至フレームＭa１７）を抽出し、抽出した動画と、静止画撮影手段による撮影の結果得られた静止画が変換されて得られた動画から、付随動画を生成することができる。【００５６】
動画撮影手段により撮影された動画が、フレーム間圧縮を用いて構成されている場合、生成手段は、フレーム内圧縮のみを用いたフレーム、またはフレーム間圧縮の元となるフレーム（例えば、ｉピクチャ）を先頭とする動画を抽出することができる。【００５７】
記録手段は、静止画撮影手段による撮影の結果得られた静止画と、生成手段により生成された付随動画を、同じファイル名（例えば、図１８に示すDSC0002）で記録することができる。【００５８】
記録手段による記録中に、記録されている画像に応じたＵＩ画像（例えば、図１２乃至図１６に示す画像）を表示する表示制御手段をさらに設けることができる。【００５９】
本発明の第１の記録方法は、動画付き静止画撮影モードの設定を行う設定ステップ（例えば、図２の制御信号入力部６１および中央制御部６２の処理）と、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影ステップ（例えば、図５のステップＳ４３，Ｓ５２，Ｓ６１，Ｓ８１）と、動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影ステップ（例えば、図３のステップＳ１、図５のステップＳ４４，Ｓ５３，Ｓ５４，Ｓ７４）と、静止画撮影ステップの処理での撮影の結果得られた静止画、および動画撮影ステップの処理での撮影の結果得られた動画に基づいて、１つの付随動画を生成する生成ステップ（例えば、図５のステップＳ７２乃至ステップＳ７５）と、静止画撮影ステップの処理での撮影の結果得られた静止画、および生成ステップの処理で生成された付随動画を記録する記録ステップ（例えば、図５のステップＳ８３）とを含むことを特徴とする。【００６０】
本発明の第２の記録装置は、動画付き静止画撮影モードの設定を行う設定手段（例えば、図１の設定スイッチ２８）と、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段（例えば、図２の中央制御部６２、カメラ制御部５２、および静止画処理部５３）と、動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段（例えば、図２の中央制御部６２、カメラ制御部５２、および動画処理部５５）と、静止画撮影手段による撮影の結果得られた静止画、静止画撮影手段による静止画撮影前に動画撮影手段により撮影された動画、および静止画撮影手段による静止画撮影後に動画撮影手段により撮影された動画を、異なるファイルとして記録する記録手段（例えば、図２のファイル管理部５７および記録媒体１５）とを備えることを特徴とする。【００６１】
本発明の、動画付き静止画撮影モードの設定を行う設定手段と、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、静止画撮影手段による撮影の結果得られた静止画、および動画撮影手段による撮影の結果得られた動画に基づいて、１つの付随動画を生成する生成手段と、静止画撮影手段による撮影の結果得られた静止画、および生成手段により生成された付随動画を記録する記録手段とを備えることを特徴とする記録装置によって記録された画像を再生する第１の再生装置は、動画付き静止画撮影モードで撮影された静止画の再生が要求されたとき、記録装置の記録手段に記録された静止画撮影手段による撮影の結果得られた静止画を再生する第１の再生手段（例えば、図２の中央制御部６２および静止画処理部５３）と、動画付き静止画撮影モードで撮影された動画の再生が要求されたとき、記録装置の記録手段に記録された生成手段により生成された付随動画を再生する第２の再生手段（例えば、図２の中央制御部６２および動画処理部５５）とを備えることを特徴とする。【００６２】
動画付き静止画撮影設定モードで記録された画像のサムネイル画像を表示する表示制御手段をさらに設け、表示制御手段には、サムネイル画像に、動画付き撮影設定モードで撮影されたことを示す表示を付加させることができる（例えば、図２０に示すアイコンＱHR）。【００６３】
本発明の、動画付き静止画撮影モードの設定を行う設定手段と、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、静止画撮影手段による撮影の結果得られた静止画、および動画撮影手段による撮影の結果得られた動画に基づいて、１つの付随動画を生成する生成手段と、静止画撮影手段による撮影の結果得られた静止画、および生成手段により生成された付随動画を記録する記録手段とを備えることを特徴とする記録装置によって記録された画像を再生する第１の再生方法は、動画付き静止画撮影モードで撮影された静止画の再生が要求されたとき、記録装置の記録手段に記録された静止画撮影手段による撮影の結果得られた静止画を再生する第１の再生ステップ（例えば、図２１のステップＳ１４２，１５１，Ｓ１７２，Ｓ１５２，Ｓ１４３，Ｓ１３１と、動画付き静止画撮影モードで撮影された動画の再生が要求されたとき、記録装置の記録手段に記録された生成手段により生成された付随動画を再生する第２の再生ステップ（例えば、図２１のステップＳ１４５，Ｓ１６１，Ｓ１７３，Ｓ１７４，Ｓ１６２，１４６，Ｓ１３２）とを含むことを特徴とする。【００６４】
本発明の、動画付き静止画撮影モードの設定を行う設定手段と、動画付き静止画撮影モードの設定中に、静止画撮影要求があったとき、静止画の撮影を行う静止画撮影手段と、動画付き静止画撮影モードの設定中に、動画の撮影を行う動画撮影手段と、静止画撮影手段による撮影の結果得られた静止画、静止画撮影手段による静止画撮影前に動画撮影手段により撮影された動画、および静止画撮影手段による静止画撮影後に動画撮影手段により撮影された動画を、異なるファイルとして記録する記録手段とを備えることを特徴とする記録装置によって記録された画像を再生する第２の再生装置は、動画付き静止画撮影モードで撮影された静止画の再生が要求されたとき、記録装置の記録手段に記録された静止画撮影手段による撮影の結果得られた静止画を再生する第１の再生手段（例えば、図２の中央制御部６２および静止画処理部５３）と、動画付き静止画撮影モードで撮影された動画の再生が要求されたとき、静止画撮影手段による撮影の結果得られた静止画、動画撮影手段による撮影の結果得られた動画に基づいて、１つの付随動画を生成するとともに、付随動画を再生する第２の再生手段（例えば、図２の中央制御部６２および動画処理部５５）とを備えることを特徴とする。【００６５】
図１は、本発明を適用したデジタルカメラ１の構成例を示している。このデジタルカメラ１は、静止画および動画を通常に撮影することができるとともに（静止画撮影モードと動画撮影モードを有しているとともに）、静止画とともにその前後の所定時間分の動画を自動的に撮影することもできる（動画付き静止画撮影モードを有している）。またデジタルカメラ１は、各モードで撮影した画像を再生することができる。【００６６】
CPU（Central Processing Unit）１１は、ROM（Read Only Memory）１２に記録されているプログラムに従って各種の処理を実行する。RAM１３にはまた、CPU１１が各種の処理を実行する上において必要なデータなども適宜記憶される。【００６７】
ドライブ１４は、磁気ディスク、光ディスク、光磁気ディスク、ハードディスク、或いは半導体メモリなどよりなる記録媒体１５に、CPU１１から供給された画像データ等を記録したり、記録媒体１５に記録されている画像データを読み出してCPU１１に供給する。【００６８】
またドライブ１４は、記録媒体１５がリムーバブルであり記録媒体１５にデジタルカメラ１で動作するプログラムが格納されている場合、記録媒体１５からそれを読み出し、CPU１１が、それを実行するようにすることもできる。【００６９】
カメラ部２１は、レンズ、CCD（Charged Coupled Device）などから構成されており、撮像の結果得られた画像データ（10ビットのデジタル信号）を画像処理部２２に供給する。【００７０】
画像処理部２２は、カメラ部２１から供給された画像データに対してガンマ変換、色空間変換、ホワイトバランス等の画像処理を行い、その結果得られた画像データ（YUV(4:2:2)またはYUV(4:2:0)フォーマットのデジタル信号）を、CPU１１に供給する。【００７１】
静止画コーディック部２３は、CPU１１から供給された、画像処理部２２により処理された画像データ（YUVフォーマットのデジタル画像データ）に対してJPEG（Joint Photographic Experts Group）圧縮処理を施し、その結果得られた画像データ（静止画の画像データ）をCPU１１に戻す。静止画コーディック部２３はまた、CPU１１から供給された、例えば記録媒体１５に格納されていたJPEG圧縮画像データに対してJPEG伸張処理を行い、その結果得られた静止画の画像データ（YUVフォーマットのデジタル画像データ）をCPU１１に戻す。【００７２】
動画コーディック部２４は、CPU１１から供給された、画像処理部２２により処理された動画データ（YUVデジタル画像データ）に対してMPEG（Moving Picture Experts Group）圧縮処理を施し、その結果得られた動画の画像データをCPU１１に戻す。動画コーディック部２４はまた、CPU１１から供給された、例えば記録媒体１５に格納されていたMPEG圧縮画像データに対してMPEG伸張処理を行い、その結果得られた動画の画像データ（YUVフォーマットのデジタル画像データ）をCPU１１に戻す。【００７３】
表示制御部２５は、CPU１１から供給された画像データ（YUVデジタル画像データ）を、RGB信号に変換して、LCD（Liquid Crystal Display）等から構成されている表示部２６に供給して表示させる。【００７４】
シャッタスイッチ２７は、静止画撮影の際にユーザにより操作されるスイッチである。【００７５】
動画付き静止画撮影モード設定スイッチ２８は、動画付き静止画撮影モードを設定する際にユーザにより操作されるスイッチである。なおこの例では、動画付き静止画撮影モード設定スイッチ２８によって動画付き静止画撮影モードが設定されるが、メニュー画面等のＧＵＩ（Graphical User Interface）によって、動画付き静止画撮影モードの設定を行うようにしてもよい。【００７６】
操作ボタン群２９は、例えば十字キー、決定ボタンなどの、ユーザがデジタルカメラ１を操作する上で必要なボタン群である。なお通常の静止画を撮影するための静止画撮影モードまたは通常の動画を撮影するための動画撮影モードは、この操作ボタン群２９の所定のボタンが操作されて設定される。【００７７】
マイクロフォン３０は、集音した結果得られた音声信号を音声信号処理部３１に供給する。【００７８】
音声処理部３１は、マイクロフォン３０から入力された音声信号に対して所定の音声処理を施し、その結果得られた音声データをCPU１１に供給する。【００７９】
音声コーディック部３２は、CPU１１から供給された、音声信号処理部３１により処理された音声データに対してMPEGオーディオ圧縮処理を施し、その結果得られた音声データをCPU１１に戻す。音声コーディック部３２はまた、CPU１１から供給された、例えば記録媒体１５に記録されていたMPEG圧縮音声データに対してMPEG伸張処理を行い、その結果得られた音声データをCPU１１に戻す。【００８０】
出力制御部３３は、CPU１１から供給された音声データを、スピーカ３４を介して出力する。【００８１】
図２は、デジタルカメラ１の機能的構成例を示す。【００８２】
画像データ入力部５１は、カメラ部２１（図１）で取り込まれた画像データを入力し、入力した画像データをカメラ制御部５２に供給する。【００８３】
カメラ制御部５２は、中央制御部６２の制御に従って、画像データ入力部５１から供給された画像データから、静止画用の画像データ（例えば2592×1944ドット）を生成して静止画処理部５３に供給したり、動画用の画像データ（320×240ドット）を生成して動画処理部５５に供給する。【００８４】
静止画処理部５３は、中央制御部６２の制御に従い、カメラ制御部５２から供給された静止画の画像データに対するJPEG圧縮処理を静止画コーディック部２３に要求し、静止画コーディック部２３から供給されたJPEG圧縮処理の結果得られた静止画の画像データをファイル管理部５７に供給する。【００８５】
なお静止画処理部５３は、動画付き静止画撮影モードで撮影された静止画を記録するとき、JPEG圧縮処理で圧縮した画像データを、RAM１３（図１）で構成されている静止画記憶部５４に一時的に記憶する。【００８６】
静止画処理部５３はまた、中央制御部６２の制御に従い、ファイル管理部５７から供給された、記録媒体１５に記録されていたJPEG圧縮画像データに対するJPEG伸張処理を静止画コーディック部２３に要求し、静止画コーディック部２３から供給されたJPEG伸張処理の結果得られた画像データを中央制御部６２に供給する。【００８７】
動画処理部５５は、中央制御部６２の制御に従い、カメラ制御部５２から供給された動画の画像データに対するMPEG圧縮処理を動画コーディック部２４に要求し、動画コーディック部２４から供給されたMPEG圧縮処理の結果得られた画像データを、ファイル管理部５７に供給する。動画像処理部５５はその際、音声入力部７１から供給された動画に対応する音声データに対するMPEG圧縮処理を音声コーディック部３２に要求し、音声コーディック部３２から供給されたMPEG圧縮処理の結果得られた音声データを、ファイル管理部５７に供給する。【００８８】
なお動画処理部５５は、動画付き静止画撮影モードで撮影された動画を記録するとき、カメラ制御部５２から供給された画像データおよび音声入力部７１から供給された音声データを、RAM１３で構成されている動画記憶部５６に記憶するとともに、そこに記憶した動画データ等を利用して後述する動画（付随動画）を生成する。【００８９】
動画処理部５５はまた、中央制御部６２の制御に従い、ファイル管理部５７から供給された、記録媒体１５に格納されているMPEG圧縮画像データに対するMPEG伸張処理を動画コーディック部２４に要求し、動画コーディック部２４から供給されたMPEG伸張処理の結果得られた動画の画像データを、中央制御部６２に供給する。動画処理部５５はその際、ファイル管理部５７から供給された、記録媒体１５に記録されているMPEG圧縮音声データに対するMPEG伸張処理を音声コーディック部３２に要求し、音声オーディック部３２から供給されたMPEG伸張処理の結果得られた音声データを、中央制御部６２に供給する。【００９０】
ファイル管理部５７は、静止画処理部５３および動画処理部５５から供給された画像データ等を記録媒体１５に記録する。ファイル管理部５７はまた、静止画処理部５３および動画処理部５５からの要求に応じて、記録媒体１５に記録されている画像データ等を静止画処理部５３または動画処理部５５に供給する。【００９１】
制御信号入力部６１は、シャッタスイッチ２７乃至操作ボタン群２９に対するユーザの操作に応じた信号を入力し、中央制御部６２に供給する。【００９２】
中央制御部６２は、制御信号入力部６１から入力された信号に応じてカメラ制御部５２、静止画処理部５３、および動画処理部５５を制御し、通常の静止画撮影モードや動画撮影モードによる静止画または動画の撮影およびその画像の再生、並びに動画付き静止画撮影モードによる撮影およびその画像の再生等を行わせる。【００９３】
次に、動画付き静止画撮影モード設定スイッチ２８が操作されて、動画付き静止画撮影モードが設定された場合のデジタルカメラ１の動作を、図３のフローチャートを参照して説明する。【００９４】
ステップＳ１において、動画一時記憶処理が開始される。ここでの処理の詳細は、図４に示されている。【００９５】
すなわちステップＳ１１において、デジタルカメラ１の中央制御部６２は、制御信号入力部６１からの動画付き静止画撮影モード設定スイッチ２８が操作され、動画付き静止画撮影モードが設定された旨を表す信号を受信すると、ステップＳ１２において、カメラ制御部５２の動作モードを、動画記録モードにする指令を、カメラ制御部５２に通知する。【００９６】
カメラ制御部５２は、ステップＳ２１において、自分の動作モードを動画記録モードに設定し、その設定が完了したとき、その旨を中央制御部６２に通知する。カメラ制御部５２は、動作モードが動画記録モードに設定されているとき、画像データ入力部５１から供給された画像データから動画の画像データ（320×240ドット）を生成して、要求に応じて、動画処理部５５に供給する処理を行う。【００９７】
カメラ制御部５２から動画記録モード設定完了の通知を受けると、中央制御部６２は、ステップＳ１３において、動画の一時記憶指令を、動画処理部５５に出力する。【００９８】
動画処理部５５は、ステップＳ３１において、動画一時記憶処理を開始する。【００９９】
具体的には、動画処理部５５は、カメラ制御部５２（動画記録モードのカメラ制御部５２）に対して動画の画像データの供給を要求するとともに、その要求に応じてカメラ制御部５２から供給される動画データ（ステップＳ２２）に対して、MPEG圧縮処理を開始し、その結果得られた画像データの動画記憶部５６への記憶を開始する。なお動画記憶部５６は、例えばラインバッファとなっており、バッファがいっぱいになったとき、古いフレームの画像データが削除されて、新しいフレームの画像データが記憶されるようになされている。【０１００】
動画処理部５５はまた、その際、音声入力部７１から供給される音声信号（記憶される動画に対応する音声の音声信号）に対して、MPEG圧縮処理を開始し、その結果得られた音声データの動画記憶部５６への記憶を開始する。【０１０１】
このようにして動画の一時記憶が開始されると、処理は、図３のステップＳ２に進む。
なおこの例の場合、動画付き静止画撮影モードが設定されたときに、動画の一時記憶が開始されるようにしたが、デジタルカメラ１の電源がオンされたときに開始されるようにしたり、記録媒体１５が装着されたときに開始されるようにすることもできる。【０１０２】
ステップＳ２において、シャッタスイッチ２７が操作されたか否かが判定され、操作されたと判定した場合（ユーザがシャッタスイッチ２７を押したとき）、ステップＳ３に進む。【０１０３】
ステップＳ３において、記録処理が行われる。ここでの処理の詳細は、図５のフローチャートに示されている。【０１０４】
動画一時記憶の最中に（図３のステップＳ１または後述するステップＳ７４で開始された動画一時記憶の最中に）、シャッタスイッチ２７が操作されると中央制御部６２は、ステップＳ４１において、その動画の一時記憶の停止指令を、動画処理部５５に出力する。
動画処理部５５は、ステップＳ７１において、動画一時記憶を停止し（動画と音声の記憶を停止し）、停止した旨を中央制御部６２に通知する。【０１０５】
動画一時記憶が停止されると中央制御部６２は、ステップＳ４２において、カメラ制御部５２の動作モードを静止画記録モードにする指令を、カメラ制御部５２に出力する。【０１０６】
カメラ制御部５２は、ステップＳ５１において、動作モードを静止画記録モードに設定し、その設定が完了したとき、その旨を中央制御部６２に通知する。カメラ制御部５２は、動作モードが静止画記録モードに設定されているとき、画像データ入力部５１から供給された画像データから静止画の画像データ（2592×1944ドット）を生成して、要求に応じて、静止画処理部５３に供給する処理を行う。【０１０７】
カメラ制御部５２から静止画記録モード設定完了が通知されると、中央制御部６２は、ステップＳ４３において、静止画記録指令を、静止画処理部５３に対して出力する。【０１０８】
静止画処理部５３は、ステップＳ６１において、静止画記録処理を行う。具体的には、静止画処理部５３は、カメラ制御部５２（静止画記録モードのカメラ制御部５２）に対して静止画の画像データの供給を要求するとともに、その要求に応じてカメラ制御部５２から供給された静止画の画像データ（ステップＳ５２）（シャッタスイッチ２７が押下された時点で撮像された１フレームの画像データ）に対して、JPEG圧縮処理を行い、その結果得られた画像データを静止画記憶部５４に記憶する。【０１０９】
静止画処理部５３はまた、カメラ制御部５２から供給された静止画の画像データに対して縮小処理を施してJPEG圧縮処理を施し、サムネイル画像を生成する。【０１１０】
静止画処理部５３は、静止画記憶部５４に記憶した画像データに、サムネイル画像を包含させて、ファイル管理部５７に供給する。【０１１１】
ファイル管理部５７は、静止画処理部５３から画像データが供給されると、ステップＳ８１において、その画像データを記録媒体１５に記録する。ここでの詳細な処理は、図６のフローチャートに示されている。【０１１２】
すなわちステップＳ９１において、ファイル管理部５７は、管理している、例えば図７に示すようなファイルリストを参照して、そこに設定されているファイル番号の中で、最も大きな番号に１を加算し、その結果得られた値を、画像データのファイル番号とする（ファイルリストで使用されていない番号をここで記録する画像データのファイル番号とする）。【０１１３】
図７の例では、番号２が最も大きな番号なので、それに１が加算された番号３がここで記録される画像データのファイル番号となる。【０１１４】
なおファイルリストの詳細については後述する。【０１１５】
次にステップＳ９２において、ファイル管理部５７は、ステップＳ９１で決定したファイル番号を含むファイル名に静止画用の拡張子を付けて、静止画処理部５３から供給された画像データを、所定のフォルダに格納し記録媒体１５に記録する。【０１１６】
例えばファイル名はDSC×××××の形態を有しており、ファイル名の中の“×××××”部分にファイル番号が組み込まれるようになされている。すなわち図７の例では、ファイル番号は３（00003）であるので、ファイル名は、DSC00003となり、それに静止画用の拡張子であるJPGが付されて記録される（DSC00003.JPG）【０１１７】
そしてファイル管理部５７は、ステップＳ９３において、ファイルリストに、ファイル名で使用したファイル番号、動画付き静止画撮影モードで撮影されたものであることを示す情報（Hybrid REC）を、それぞれ「ファイル番号」および「ファイルタイプ」の欄に追加する。すなわち図７のファイルリストは、図８に示すように、ファイル番号３と、その情報（Hybrid REC）が追加されて更新される。【０１１８】
このように静止画の画像データが記録されると、図５のステップＳ８２に進み、ファイル管理部５７は、静止画の画像データの記録が完了した旨を、静止画処理部５３およびカメラ制御部５２を介して中央制御部６２に通知する。【０１１９】
静止画の画像データの記録が完了すると、中央制御部６２は、ステップＳ４４において、動画記録モード設定指令を、カメラ制御部５２に出力する。【０１２０】
カメラ制御部５２は、ステップＳ５３において、図４のステップＳ２１における場合と同様に、動作モードを動画記録モードに設定し、その設定が完了したとき、その旨を中央制御部６２に通知する。【０１２１】
カメラ制御部５２の動作モードが動画記録モードに設定されると、中央制御部６２は、ステップＳ４５において、動画付き静止画撮影モードで撮影される動画（以下、付随動画と称する）を記録する指令を、動画処理部５５に対して出力する。【０１２２】
この指令を受けると動画処理部５５は、ステップＳ７２において、プレ動画Ｍaaを作成する。【０１２３】
具体的には、動画処理部５５は、ステップＳ７１で停止されるまで行われていた動画一時記憶により動画記憶部５６に記憶されている動画の画像データから、所定の画像データをプレ動画Ｍaaの画像データとして抽出する。【０１２４】
例えば、図９のＡに示すように、動画記憶部５６に、動画のフレームＭa１からフレームＭa１７（シャッタスイッチ２７が操作される直前に撮影された動画のフレーム）が記憶されているものとすると、フレームＭa１７から所定の時間分遡ったフレームＭa４乃至フレームＭa１７が、プレ動画Ｍaaの画像データとして抽出される。なおフレームＳは、動画付き静止画撮影モードで撮影された静止画（ステップＳ６１で圧縮された静止画）を表している。【０１２５】
動画処理部５５はまた、ステップＳ７１で停止されるまで行われていた動画一時記憶により動画記憶部５６に記憶されている音声データから、プレ動画Ｍaaとして抽出された動画に対応する音声データを抽出する。【０１２６】
次に図５に戻り動画処理部５５は、ステップＳ７３において、撮影された静止画に対応する動画（以下、静止画対応動画と称する）Ｍcを生成する。【０１２７】
具体的には、動画処理部５５は、中央制御部６２を介して静止画処理部５３に、ステップＳ６１で記憶した静止画の画像データ（図９のＡの例の場合、フレームＳの画像データ）の供給を要求し、中央制御部６２を介して供給された静止画処理部５３からの静止画の画像データを、動画の画像データに変換し、図９のＢに示すような静止画対応動画Ｍcの画像データを生成する。すなわち2592×1944ドットの静止画の画像データが、320×240ドットの画像データに変換される。【０１２８】
このとき、図９のＣに示すように、例えば枠Ｅａなどのエフェクト効果を付して（枠Ｅaに囲まれて静止画が表示されるように）、静止画対応動画Ｍcを生成することができる。【０１２９】
また図９のＤに示すように、黒色の画像データからなるダミーフレームを、静止画から得られた動画のフレームの前後に設けて（静止画の前後で黒色背景の画面が表示されるように）、静止画対応動画Ｍcを生成することもできる。なお図９のＤの例ではこのダミーフレームは、静止画から得られた動画のフレームの前後に設けられているが、前方のみ、または後方のみに設けるようにすることもできる。【０１３０】
なおこの他
・動画から静止画、若しくは静止画から動画へのフェードインまたはフェードアウトする
・動画から静止画、若しくは静止画から動画へのワイプ処理をする
・動画から静止画、若しくは静止画から動画へのミックス処理をする
・静止画をセピア、ネガポジ、モノトーンにする
・静止画を右上からアニメーションイン、右上へアニメーションアウトする
・静止画を小さい状態からフル画面へ拡大するアニメーションにする
のようなエフェクト効果を付すこともできる。【０１３１】
図５に戻り、ステップＳ７４において、動画処理部５５は、ポスト動画Ｍbbを作成する。【０１３２】
具体的には、動画処理部５５は、カメラ制御部５２（動画記録モードになっているカメラ制御部５２）に対して、動画の画像データの供給を要求し、カメラ制御部５２から供給された動画の画像データ（ステップＳ５４）を、MPEG圧縮処理を施して圧縮し、動画記憶部５６への一時記憶を開始する。すなわちシャッタスイッチ２７が押された後の風景が動画として記憶される。なおこの記憶を開始する際には、動画記憶部５６の記憶内容は初期化される（それまで記憶されていた画像データは消去される）。【０１３３】
動画処理部５５はまた、音声入力部７１から供給される音声信号（記録される動画に対応する音声データ）の動画記憶部５６への記憶を開始する。【０１３４】
そして動画処理部５５は、一定の時間が経過した後、そのとき動画記憶部５６に記憶されている動画からポスト動画Ｍbbを生成する。【０１３５】
具体的には、動画記憶部５６に記憶されている動画の画像データから所定の動画データが、ポスト動画Ｍbbの画像データとして抽出される。【０１３６】
例えば、図９のＡに示すフレームＭb１以降の画像データが動画記憶部５６に記憶されている場合、フレームＭb１乃至フレームＭb８が、ポスト動画Ｍbbの画像データとして抽出される。【０１３７】
動画処理部５５はまた、動画記憶部５６に記憶されている音声データから、ポスト動画Ｍbbとして抽出された動画に対応する音声データを抽出する。【０１３８】
なおステップＳ７２およびステップＳ７４では、動画記憶部５６に記録されている動画の画像データから所定の画像データを抽出することで、プレ動画Ｍaaおよびポスト動画Ｍbbを生成したが、その際、動画のフレームがＩ，Ｂ，Ｐピクチャを構成している場合、単独で再生可能なＩピクチャを先頭とする画像データを抽出するようにすることもできる。【０１３９】
次に動画処理部５５は、ステップＳ７５において、動画付き静止画の動画（付随動画）を生成する。【０１４０】
具体的には、図９のＥに示すように、ステップＳ７２で生成されたプレ動画Ｍaa、ステップＳ７３で生成された静止画対応動画Ｍc、およびステップＳ７４で生成されたポスト動画Ｍbbが時系列順に配置されて、１つの動画が生成される。【０１４１】
そして生成された１つの動画と、抽出されたプレ動画Ｍaaおよびポスト動画Ｍbbに対応する音声データ（ステップＳ７２およびステップＳ７４）が多重化されて、付随動画が生成される。【０１４２】
なお図９のＤ，Ｅの例では、再生側のフレームレートが可変フレームレートである場合を示しているが、固定フレームレートである場合、図１０のＤおよび図１０のＥに示すように、フレームレートが一定になるだけのダミーフレームを設けて、付随動画を生成することができる。図１０のＡ乃至図１０のＣは、図９のＡ乃至図９のＣと同じフレーム配列を示している。【０１４３】
動画処理部５５は、生成した付随動画を、ファイル管理部５７に供給する。【０１４４】
ファイル管理部５７は、動画処理部５５から付随動画が供給されると、ステップＳ８３において、それを記録媒体１５に記録する。【０１４５】
具体的にはファイル管理部５７は、図６のステップＳ９２で付けた、静止画のファイル名と同じ名前に、動画用の拡張子（MP4）を付けて、付随動画を、静止画の画像データと同じフォルダに記録する。【０１４６】
付随動画の記録が完了するとファイル管理部５７は、その旨を、動画処理部５５およびカメラ制御部５２を介して中央制御部６２に通知する。【０１４７】
このように記録処理が行われると、処理は、図３のステップＳ２に戻り、それ以降の処理が行われる。すなわち再度シャッタスイッチ２７が操作されれば、動画付き静止画撮影モードでの撮影が行われ、静止画および付随動画が記録される。【０１４８】
ステップＳ２で、シャッタスイッチ２７が操作されていないと判定されたとき、ステップＳ４に進み、動画付き静止画撮影モードの設定が解除されたか否かが判定され、解除されていないと判定された場合、ステップＳ２に戻り、それ以降の処理が行われる。一方、解除されたと判定された場合（例えば、動画付き静止画撮影モード設定スイッチ２８が解除するように操作されたとき）、ステップＳ５に進み、ユーザの設定に応じた動作が行われる。例えばその後、撮影モードが静止画撮影モードに切り替わったときは、通常の静止画撮影が行われ、動画撮影モードに切り替わったときは、通常の動画撮影が行われる。【０１４９】
以上のようにして動画付き静止画撮影モードにおける撮影が行われる。【０１５０】
なお以上においては、動画付き静止画撮影モードについて、記録処理を中心に説明したが、その記録時には、次に説明する図１１のフローチャートに示す処理に従う、ＵＩ（user interface）画像の表示制御処理が行われる。【０１５１】
すなわちステップＳ１０１において、デジタルカメラ１の中央制御部６２は、制御信号入力部６１からの動画付き静止画撮影モード設定スイッチ２８が操作され、動画付き静止画撮影モードが設定された旨を表す信号を受信すると（図３のステップＳ１、図４のステップＳ１１）、ステップＳ１０２において、図１２に示すように、カメラ制御部５２から供給される、いま現在撮影されている画像を表示部２６に連続的に表示するとともに（電子ビューファインダによるモニタ処理を行うとともに）、その画像に、動画付き静止画撮影モードが設定されている旨を表すアイコンＱHRを表示する。【０１５２】
次にステップＳ１０３において、シャッタスイッチ２７が操作されると（図３のステップＳ２、図５のステップＳ４１）、ステップＳ１０４において、中央制御部６２は、シャッタスイッチ２７が完全に切られたとき、キャプチャ中であることを示すために、表示部２６の表示画像を、図１３に示すように、黒色背景に“記録中”の文字が付された画面に切り替える。【０１５３】
そしてステップＳ１０５において、静止画の記録が開始されると（図５のステップＳ４３）、中央制御部６２は、ステップＳ１０６において、図１４に示すように、撮影された静止画を表示するとともに、その記録中であることを示すために、“記録中”の文字を表示する。【０１５４】
そしてステップＳ１０７において、付随動画の生成記録が開始されると（図５のステップＳ４５）、中央制御部６２は、ステップＳ１０８において、図１５に示すように、図１４の画面から“記録中”の表示を消去し、付随動画の生成記録中であることを表すマークＰ２を表示する。【０１５５】
そしてステップＳ１０９において、付随動画の生成記録が完了すると（ファイル管理部５７からその旨の通知（図５のステップＳ８４）を受けると）、ステップＳ１１０において、中央制御部６２は、図１６に示すように、図１５の画面からマークＰ２を消去する。【０１５６】
以上のように動画付き静止画撮影モードの撮影中に、所定のＵＩ画像を表示するようにしたので、ユーザは、現在どのような処理が行われているかを容易に把握することができる。【０１５７】
次に、ファイルリスト（図７）を生成する場合のファイル管理部５７の動作を、図１７のフローチャートを参照して説明する。【０１５８】
例えば、電源オン時のデジタルカメラ１に記録媒体１５が装着されると、ステップＳ１２１において、ファイル管理部５７は、装着された記録媒体１５に存在するファイル名を全て読み出し、ファイル名を構成するファイル番号を抜き出す。なお同じファイル名のファイルが複数（２個）ある場合は、ファイル番号が１個抜き出される。【０１５９】
例えば、図１８に示すように、記録媒体１５に、DSC00001．JPG、DSC00002．JPG、DSC00002．MP4のファイルが記録されている場合、DSC00001のファイル名からファイル番号１が、DSC00002のファイル名からファイル番号２（DSC00002．JPGとDSC00002．MP4のファイル名はDSC00002で同じであるので、１つファイル番号２）がそれぞれ抜き出される。【０１６０】
図１７に戻りステップＳ１２２において、ファイル管理部５７は、ファイルタイプをファイル番号毎に決定する。【０１６１】
同じファイル名が１個である場合、そのファイルに付された拡張子に従ってファイルタイプが決定される。例えば図１８の例の場合、DSC00001のファイル名を有するファイルは１個であるので、それに付されている拡張子（JPG）に従って、そのファイルは、通常の静止画撮影モードで撮影された静止画のファイルであるとされる。【０１６２】
一方同じファイル名が２個ある場合、この例の場合、それらは同じ名前に拡張子がJPGとMP4が付されたファイルであり、動画付き静止画撮影モードで撮影されたものであるので、動画付き静止画撮影モードで撮影された画像のファイルであるとされる。【０１６３】
次に、ステップＳ１２３において、ファイル管理部５７は、ファイル番号（ステップＳ１２１）とファイルタイプ（ステップＳ１２２）を、ファイルリストに設定する。【０１６４】
その結果、図１８の例では、図７に示すように、ファイル番号１と、静止画撮影モードで撮影された静止画のファイルであることを示す情報（JPEG）、およびファイル番号２と、動画付き静止画撮影モードで撮影された画像のファイルであることを示す情報（Hybrid REC）とがそれぞれ設定されたファイルリストが生成される。【０１６５】
以上のようにしてファイルリストが生成される。【０１６６】
次に動画付き静止画撮影モードで撮影された画像を再生する処理についてするが、はじめに再生する画像を選択するのに利用されるサムネイルの表示処理について、図１９のフローチャートを参照して説明する。【０１６７】
サムネイル表示を要求する操作が操作ボタン群２９に対して行われ、その旨が制御信号入力部６１を介して入力されると、ステップＳ１３１において、中央制御部６２は、ファイル管理部５７からファイルリストを取得し、ステップＳ１３２において、そこに設定されているファイル番号とファイルタイプの１組みを読み出す。【０１６８】
次に、ステップＳ１３３において、中央制御部６２は、読み出したファイルリストに応じたアイコンを決定する。【０１６９】
次にステップＳ１３４において、中央制御部６２は、ファイル管理部５７からそのファイル番号を含むファイル名のサムネイル画像を取得し、それにステップＳ１３３で決定したアイコンを付して、表示部２６に表示させる。【０１７０】
ステップＳ１３５において、中央制御部６２は、ファイルリストからすべてのファイル番号を読み出したか否かを判定し、また読み出していないファイル番号があると判定した場合、ステップＳ１３２に戻り、それ以降の処理を行う。一方すべてのファイル番号を読み出したと判定した場合、中央制御部６２は、処理を終了する。【０１７１】
図２０は、このようにして表示されたサムネイル画像の例を示している。動画付き静止画撮影モードで撮影された画像のサムネイル画像にはアイコンＱHRが付され、通常の静止画撮影モードで撮影された画像のサムネイル画像にはアイコンＱsが付されている。【０１７２】
次に、動画付き静止画撮影モードで撮影された画像を再生する場合のデジタルカメラ１の動作を、図２１のフローチャートを参照して説明する。【０１７３】
例えば上述したように表示された、アイコンＱHRが付されたサムネイル画像が選択されて、その再生が要求されると、ステップＳ１４１において、中央制御部６２は、制御信号入力部６１から供給されたその旨を表す信号を受信し、ステップＳ１４２において、動画付き静止画撮影モードで撮影された静止画についての静止画再生指令を、静止画処理部５３に対して出力する。【０１７４】
静止画処理部５３は、ステップＳ１５１において、動画付き静止画撮影モードで撮影された静止画のファイルの読み出しをファイル管理部５７に要求する。【０１７５】
ファイル管理部５７は、ステップＳ１７１は、動画付き静止画撮影モードで撮影された静止画のファイル（図５のステップＳ８１で記録された静止画の画像データ）を記録媒体１５から検索し、ステップＳ１７２において、そのファイル（静止画の画像データ）を静止画処理部５３に供給する。【０１７６】
静止画処理部５３は、ステップＳ１５２において、ファイル管理部５７から供給された静止画の画像データに対してJPEG伸張処理を施し、その結果得られた画像データを中央制御部６２に供給する。【０１７７】
中央制御部６２は、ステップＳ１４３において、静止画処理部５３から供給された伸張された静止画の画像データを、表示部２６に供給し表示を指令する。その結果、ステップＳ１３１において、表示部２６には、選択された動画付き静止画撮影モードで撮影された静止画が表示させる。【０１７８】
図２２は、このとき表示部２６に表示される動画付き静止画撮影モードで撮影された静止画の表示例が示されている。この静止画は、通常の静止画撮影モードで撮影された静止画と同様の画素数を有する、高精細な画像である。【０１７９】
この例の場合、この静止画の表示中に、付随動画を再生するときに操作するボタンＢ１が表示される。【０１８０】
動画付き静止画撮影モードで撮影された静止画が、図２２に示すように表示部２６に表示された後、動画付き静止画撮影モードで撮影された動画（付随動画）の再生が要求され（例えば図２２のボタンＢ１が操作され）、ステップＳ１４４において、中央制御部６２がその要求があった旨を表す信号を、制御信号入力部６１から受信すると、ステップＳ１４５において、付随動画再生指令を動画処理部５５に対して出力する。【０１８１】
動画処理部５５は、ステップＳ１６１にいて、付随動画のファイルの読み出しを、ファイル管理部５７に要求する。【０１８２】
ファイル管理部５７は、ステップＳ１７３において、ステップＳ１７１で検索した静止画のファイルのファイル名と同じで、動画の拡張子が付されたファイル（図５のステップＳ８３で記録された付随動画）を記録媒体１５から検索し、ステップＳ１７４において、そのファイルを動画処理部５５に供給する。【０１８３】
動画処理部５５は、ステップＳ１６２において、ファイル管理部５７から供給されたファイルの画像データおよび音声データに対してMPEG伸張処理を施し、その結果得られた画像データおよび音声データを中央制御部６２に供給する。【０１８４】
中央制御部６２は、ステップＳ１４６において、動画処理部５５から供給された伸張された動画の画像データを表示部２６に供給して表示させるとともに、音声データを、スピーカ３４を介して出力する。その結果、ステップＳ１３２において、表示部２６に、動画付き静止画の付随動画が再生されて表示される。【０１８５】
例えば図９のＥに示すように付随動画が生成された場合、図２３に示すように、プレ動画Ｍaa（シャッタスイッチ２７が操作される前の風景）、静止画対応動画Ｍc（ダミーフレーム、シャッタスイッチ２７が操作されたときに撮像された静止画から生成された動画、ダミーフレーム）、およびポスト動画Ｍbb（シャッタスイッチ２７が操作された後の風景）が順に表示される。【０１８６】
音声は、プレ動画Ｍaaおよびポスト動画Ｍbbの表示中は、録音されたその動画に対応する音声（図５のステップＳ７２およびステップＳ７４）が出力され、静止画対応動画Ｍcの表示中は、無音となる。【０１８７】
なおこの例の場合、動画付き静止画の付随動画が表示されている間は、図２４に示すように、その動画の再生を停止するときに操作するボタンＢ２を表示することもできる。付随動画の再生が終了した後は、静止画表示に戻る。【０１８８】
以上のようにして動画付き静止画撮影モードで撮影された画像が再生される。【０１８９】
以上においては、記録時にプレ動画Ｍaa、静止画対応動画Ｍc、およびポスト動画Ｍbbから付随動画を生成して記録し、再生時は、通常の動画処理により付随動画を再生するようにした。【０１９０】
しかしながら再生処理の性能によっては、記録時に静止画対応動画Ｍcや付随動画を生成せずに、プレ動画Ｍaaおよびポスト動画Ｍbb、並びに静止画Ｓをそれぞれ別途に記録しておき、再生時に、静止画対応動画Ｍcを生成して、プレ動画Ｍaa、静止画対応動画Ｍc、そしてポスト動画Ｍbbの順に再生することもできる。【０１９１】
なおこの場合、プレ動画Ｍaaおよびポスト動画Ｍbb、並びに静止画Ｓを、以下に示すように、最初の４文字が異なるファイル名で、同一のディレクトリに記録しておくことができる。すなわち再生側は、最初の４文字で、プレ動画Ｍaa、ポスト動画Ｍbb、および静止画Ｓを識別するとともに、それ以降の文字列（数列）（00001）で、それらが関連している画像であることを把握する。
プレ動画Ｍaaのファイル名：PRE00001.MP4
ポスト動画Ｍbbのファイル名：PST00001.MP4
静止画Ｓのファイル名：DSC00001.JPG【０１９２】
また、以下に示すように、ファイル名を同じにして拡張子を異なるようにして、同一のディレクトリに記録することもできる。この場合再生側は、ファイル名で関連性を把握し、拡張子で、画像の種類を識別する。
プレ動画Ｍaaのファイル名：DSC00001.PRE
ポスト動画Ｍbbのファイル名：DSC00001.PST
静止画Ｓのファイル名：DSC00001.JPG【０１９３】
また静止画対応動画Ｍcをさらに記録しておき、再生時において、静止画対応動画Ｍcを直接再生するか、または静止画対応動画Ｍcを生成してから再生することもできる。この場合、静止画対応動画Ｍcは、ファイル名の最初の４文字を変える場合は、例えば、DSC00001.MP4（静止画Ｓのファイル名：DSC00001.JPGとファイル名は同じであるが識別子が異なるので識別可能）、拡張子を変える場合は、DSC00001.PICのファイルとして記録される。【０１９４】
このようにプレ動画Ｍaa、静止画Ｓ、ポスト動画Ｍbbを異なるファイルで記録した場合、例えばプレ動画Ｍaaのみ、ポスト動画Ｍbbのみの削除などが容易に行うことができる。
また静止画対応動画Ｍcがない分、全体のファイルサイズを小さくすることができ、さらに高い画質の静止画を再生することができる。【０１９５】
なお付随動画を生成して記憶しておく場合、その再生は一般的な再生処理で行うことができるので、汎用のアプリケーションで実行することができる。すなわち再生側に、特殊な再生用のアプリケーションを用意しておく必要がない。【０１９６】
また本発明と取り扱われる動画は、所定のフォーマットに限定されるものではなく、MPEG４以外にも、MPEG２やMPEG４−ＡＶＣとすることもできる。【０１９７】
また以上においては、静止画撮影前のみ、静止画撮影後のみ、静止画撮影前後のいずれかをメニュー画面等で設定可能である。【０１９８】
また以上においては、デジタルカメラを例として説明したが、本発明は、デジタルカメラに限定されるものではなく、携帯電話、PDA（Personal Digital Assistant）等も含む記録機能および再生機能を有する機器に適用することができる。【０１９９】
図２３の例では、プレ動画Ｍaaおよびポスト動画Ｍbbの表示中は、録音されたその動画に対応する音声が出力され、静止画対応動画Ｍcの表示中は、無音とされたが、図２５に示すように、静止画対応動画Ｍcが表示される所定のタイミングにおいて、ここで表示される静止画が、シャッタスイッチ２７が操作されたときに撮像された静止画であることを表すために、シャッタ音が出力されるようにすることもできる。なおシャッタ音は、記録時にダミーフレームと同様に静止画対応動画Ｍｃに挿入されるようにしても良い。【０２００】
また図２６に示すように、静止画撮影時に音声も記録しておき、静止画対応動画Ｍcの表示中の所定のタイミングから（図２６の例では、ポスト動画Ｍbb再生１秒前から）、録音音声（抽出音声）が出力されるようにすることもできる。【０２０１】
このように音声を出力することで、静止画対応動画Ｍcからポスト動画Ｍbbへの移り変わりの連続性を向上させることができる。【０２０２】
図２６に示すように音声が出力されるようにする場合の記録処理（図３のステップＳ３）を、図２７のフローチャートを参照して説明する。【０２０３】
動画一時記憶の最中に、シャッタスイッチ２７が操作されると中央制御部６２は、ステップＳ２０１において、その動画の一時記憶の停止指令を、動画処理部５５に出力する（図５のステップＳ４１と同じ処理）。動画処理部５５は、ステップＳ２３１において、動画一時記憶を停止し（動画と音声の記憶を停止し）、停止した旨を中央制御部６２に通知する（図５のステップＳ７１と同じ処理）。【０２０４】
動画一時記憶が停止されると中央制御部６２は、ステップＳ２０２において、カメラ制御部５２の動作モードを静止画記録モードにする指令を、カメラ制御部５２に出力する（図５のステップＳ４２と同じ処理）。【０２０５】
カメラ制御部５２は、ステップＳ２１１において、動作モードを静止画記録モードに設定し、その設定が完了したとき、その旨を中央制御部６２に通知する（図５のステップＳ５１と同じ処理）。カメラ制御部５２は、動作モードが静止画記録モードに設定されているとき、画像データ入力部５１から供給された画像データから静止画の画像データ（2592×1944ドット）を生成して、要求に応じて、静止画処理部５３に供給する処理を行う。【０２０６】
カメラ制御部５２から静止画記録モード設定完了が通知されると、中央制御部６２は、ステップＳ２０３において、動画の一時記憶指令を、動画処理部５５に出力する。【０２０７】
動画処理部５５は、ステップＳ２３２において、音声記憶処理を開始し、その旨を、中央制御部６２に通知する。【０２０８】
いまの場合、カメラ制御部５２の動作モードは、ステップＳ２１１の処理により静止画記録モードに設定され、動画処理部５５は、カメラ制御部５２から動画データを取得することができないので、音声入力部７１から供給される音声データのみを記憶することになる。すなわちここで静止画撮影中の音声記録が開始される。【０２０９】
ステップＳ２０４において、中央制御部６２は、静止画記録指令を、静止画処理部５３に対して出力する（図５のステップＳ４３と同じ処理）。【０２１０】
静止画処理部５３は、ステップＳ２２１において、静止画記録処理を行い、その結果得られた画像データをファイル管理部５７に供給する（図５のステップＳ６１と同じ処理）。【０２１１】
ファイル管理部５７は、静止画処理部５３から画像データが供給されると、ステップＳ２４１において、その画像データを記録媒体１５に記録する（図５のステップＳ８１と同じ処理）。【０２１２】
静止画の画像データが記録されると、ステップＳ２４２に進み、ファイル管理部５７は、静止画の画像データの記録が完了した旨を、静止画処理部５３およびカメラ制御部５２を介して中央制御部６２に通知する（図５のステップＳ８２と同じ処理）。【０２１３】
静止画の画像データの記録が完了すると、中央制御部６２は、ステップＳ２０５において、ステップＳ２０３の指令で開始された動画の一時記憶の停止指令を、動画処理部５５に出力する。【０２１４】
ステップＳ２３３において、動画処理部５５は、ステップＳ２３２で開始した音声記憶を停止し、停止した旨を中央制御部６２に通知する。【０２１５】
上述したようにカメラ制御部５２の動作モードが静止画記録モードである場合、動画処理部５５は、動画一時記憶指令を受けても、動画を記憶せずに、音声のみを記憶しているので、ここでその音声記憶が停止される。【０２１６】
次にステップＳ２０６において、中央制御部６２は、動画記録モード設定指令を、カメラ制御部５２に出力する（図５のステップＳ４４と同じ処理）。【０２１７】
カメラ制御部５２は、ステップＳ２１３において、動作モードを動画記録モードに設定し、その設定が完了したとき、その旨を中央制御部６２に通知する（図５のステップＳ５３と同じ処理）。【０２１８】
カメラ制御部５２の動作モードが動画記録モードに設定されると、中央制御部６２は、ステップＳ２０７において、動画付き静止画撮影モードで撮影される動画を記録する指令を、動画処理部５５に対して出力する（図５のステップＳ４５と同じ処理）。【０２１９】
この指令を受けると動画処理部５５は、ステップＳ２３４において、プレ動画Ｍaaとしての動画とそれに対応する音声を抽出する（図５のステップＳ７２と同じ処理）。【０２２０】
次に動画処理部５５は、ステップＳ２３５において、静止画対応動画Ｍcを生成する。このとき動画処理部５５は、静止画録画中に記憶された音声データ（ステップＳ２３２で開始されてからステップＳ２３３で停止されるまでに記憶された音声データ）から、所定の音声データ（図２６の例の場合、ポスト動画Ｍbb再生１秒前からの音声データ）を抽出する。【０２２１】
ステップＳ２３６において、動画処理部５５は、ポスト動画Ｍbbとしての動画およびそれに対応する音声を抽出する（図５のステップＳ７４と同じ処理）。【０２２２】
次に動画処理部５５は、ステップＳ２３７において、プレ動画Ｍaa、ステップＳ７３で生成された静止画対応動画Ｍc、およびステップＳ７４で生成されたポスト動画Ｍbbが時系列順に配置された、１つの動画を生成するとともに、プレ動画Ｍaaとポスト動画Ｍbbに対応する音声データおよびステップＳ２３５で抽出した音声データを多重化して、付随動画を生成し、ファイル管理部５７に供給する。【０２２３】
ファイル管理部５７は、動画処理部５５から付随動画が供給されると、ステップＳ２４３において、それを記録媒体１５に記録する（図５のステップＳ８３と同じ処理）。【０２２４】
付随動画の記録が完了するとファイル管理部５７は、その旨を、動画処理部５５およびカメラ制御部５２を介して中央制御部６２に通知する（図５のステップＳ８４と同じ処理）。【０２２５】
なお、図２６の例では、静止画録画中に記録された音声データから、所定の音声データを抽出したが、静止画録画中に記録された音声データを全て用いても良い。【０２２６】
一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、ネットワークや記録媒体からインストールされる。【０２２７】
この記録媒体１５は、装置本体とは別に、ユーザにプログラムを供給するために配布される、プログラムが記憶されている磁気ディスク（フロッピディスクを含む）、光ディスク（ＣＤ-ＲＯＭ（Compact Disk-Read Only Memory），ＤＶＤ（Digital Versatile Disk）を含む）、光磁気ディスク（ＭＤ（Mini-Disk）（商標）を含む）、もしくは半導体メモリなどよりなるパッケージメディアにより構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに供給される、プログラムが記憶されているＲＯＭ１２や、ハードディスクなどで構成される。【０２２８】
また、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。【０２２９】
なお、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
【図１】
2006028172.tif 000002
【図２】
2006028172.tif 000003
【図３】
2006028172.tif 000004
【図４】
2006028172.tif 000005
【図５】
2006028172.tif 000006
【図６】
2006028172.tif 000007
【図７】
2006028172.tif 000008
【図８】
2006028172.tif 000009
【図９】
2006028172.tif 000010
【図１０】
2006028172.tif 000011
【図１１】
2006028172.tif 000012
【図１２】
2006028172.tif 000013
【図１３】
2006028172.tif 000014
【図１４】
2006028172.tif 000015
【図１５】
2006028172.tif 000016
【図１６】
2006028172.tif 000017
【図１７】
2006028172.tif 000018
【図１８】
2006028172.tif 000019
【図１９】
2006028172.tif 000020
【図２０】
2006028172.tif 000021
【図２１】
2006028172.tif 000022
【図２２】
2006028172.tif 000023
【図２３】
2006028172.tif 000024
【図２４】
2006028172.tif 000025
【図２５】
2006028172.tif 000026
【図２６】
2006028172.tif 000027
【図２７】
2006028172.tif 000028
【国際調査報告】
2006028172.tif 000029
2006028172.tif 000030
2006028172.tif 000031
2006028172.tif 000032
2006028172.tif 000033
2006028172.tif 000034