(57)【要約】【課題】一連の動画撮影中に、現在撮影している一連の動画に対するそれまでの撮影内容を確認することができる撮像装置及びそのプログラムを提供する。【解決手段】動画撮影モード中に動画撮影が開始すると、静止画撮影処理を行ってから（Ｓ３）、動画撮影記録処理及び該処理により得られた動画データの表示処理を開始させるとともに、ステップＳ３で得られた静止画データを表示させる処理を開始する（Ｓ４）。次いで、シャッタボタンが押下されたか否かを判断し（Ｓ５）、シャッタボタンが押下されると、静止画撮影処理を行い（Ｓ６）、該新たに撮影された静止画データを、動画撮影記録処理により得られた動画データ及び既に表示されている静止画データに加えて表示させる処理を開始させる。つまり、動画撮影中に静止画撮影が行なわれる度に表示される静止画が増えていく。【選択図】  図２
2007325152.tif 000002
【特許請求の範囲】
【請求項１】
被写体を撮像する撮像手段と、
前記撮像手段による動画の撮影を行なう動画撮影制御手段と、
所定のタイミングを指示する指示手段と、
前記動画撮影制御手段による一連の動画撮影中に、動画撮影されたフレームデータを順次表示手段の第一表示領域に動画表示させていくとともに、前記指示手段によりタイミングが指示される度に、該タイミングで前記撮像手段により得られた画像データに基づく静止画を追加して前記表示手段の第二表示領域に継続表示させていく第１の表示制御手段と、
を備えたことを特徴とする撮像装置。
【請求項２】
前記指示手段によりタイミングが指示されたときに、前記撮像手段により被写体の静止画の撮影を行なう静止画撮影制御手段を備え、
前記第１の表示制御手段は、
前記静止画撮影制御手段により撮影された静止画データに基づく静止画を前記表示手段の第二表示領域に継続表示させることを特徴とする請求項１記載の撮像装置。
【請求項３】
前記動画撮影制御手段は、
前記指示手段によりタイミングが指示されたときに動画撮影を一時中断し、前記静止画撮影制御手段による静止画の撮影が終了すると前記動画撮影を再開することを特徴とする請求項２記載の撮像装置
【請求項４】
前記指示手段によりタイミングが指示されたときに、前記動画撮影制御手段により動画撮影されたフレームデータから、そのときに撮影されたフレームデータを抽出するフレームデータ抽出手段を備え、
前記第１の表示制御手段は、
前記フレームデータ抽出手段により抽出されたフレームデータに基づく静止画を前記表示手段の第二表示領域に継続表示させることを特徴とする請求項１記載の撮像装置。
【請求項５】
前記指示手段は、
ユーザによって任意に指定されたタイミングを指示することを特徴とする請求項１乃至４の何れかに記載の撮像装置。
【請求項６】
前記指示手段は、
予め定められたタイミング、又は、所定時間間隔毎にタイミングを指示することを特徴とする請求項１乃至４の何れかに記載の撮像装置。
【請求項７】
前記動画撮影制御手段により得られた動画データを記録手段に記録する記録制御手段を備えたことを特徴とする請求項１乃至６の何れかに記載の撮像装置。
【請求項８】
前記記録制御手段は、
前記指示手段により指示されたタイミングで前記撮像手段により得られた画像データを、前記動画撮影制御手段により得られた動画データに関連付けて記録することを特徴とする請求項７記載の撮像装置。
【請求項９】
前記記録手段に記録されている動画データのうち、任意の動画データを選択するための選択手段と、
前記選択手段により選択された動画データを前記表示手段の第三表示領域に再生表示させるとともに、該動画データの撮影中に前記指示手段により指示されたタイミングで前記撮像手段により撮像された画像データを静止画として前記表示手段の第四表示領域に再生表示させる第２の表示制御手段と、
前記第２の表示制御手段により前記表示手段の第四表示領域に再生表示された静止画のうち、任意の静止画を指定するための指定手段と、を備え
前記第２の表示制御手段は、
前記指定手段により前記表示手段の第四表示領域に再生表示中のいずれかの静止画が指定された場合は、該指定された静止画に対応するフレームから、前記選択手段により選択された動画データを前記表示手段の第三表示領域に再生表示させることを特徴とする請求項７又は８記載の撮像装置。
【請求項１０】
前記記録手段に記録されている動画データのうち、任意の動画データを選択するための選択手段と、
前記選択手段により選択された動画データを前記表示手段の第三表示領域に再生表示させるとともに、該動画データの撮影中に前記指示手段により指示されたタイミングで前記撮像手段により撮像された画像データを静止画として前記表示手段の第四表示領域に再生表示させる第２の表示制御手段と、
編集ポイントとして、前記第２の表示制御手段により前記表示手段の第四表示領域に再生表示された静止画のうち任意の静止画を指定する指定手段と、
前記指定手段により指定された編集ポイントに基づいて、前記選択手段により選択された動画データを編集する動画編集手段と、
を備えたことを特徴とする請求項７又は８記載の撮像装置。
【請求項１１】
前記動画編集手段は、
前記選択手段により選択された動画データのうち、前記指定手段により指定された編集ポイントとなる静止画に対応するフレームデータより前、又は以後の動画データを削除することにより、前記選択手段により選択された動画データを編集することを特徴とする請求項１０記載の撮像装置。
【請求項１２】
前記指定手段は、
編集ポイントとして２つの静止画を指定し、
前記動画編集手段は、
前記選択手段により選択された動画データのうち、前記指定手段により指定された編集ポイントとなる２つの静止画に対応するフレームデータ間の動画データを削除、又は、編集ポイントとなる２つの静止画に対応するフレームデータ間以外の動画データを削除することにより、前記選択手段により選択された動画データを編集することを特徴とする請求項１０記載の撮像装置。
【請求項１３】
被写体を撮像する撮像処理と、
前記撮像処理による動画の撮影を行なう動画撮影処理と、
所定のタイミングを指示する指示処理と、
前記動画撮影処理による一連の動画撮影中に、動画撮影されたフレームデータを順次表示手段の第一表示領域に動画表示させていくとともに、前記指示処理によりタイミングが指示される度に、該タイミングで前記撮像処理により得られた画像データに基づく静止画を追加して前記表示手段の第二表示領域に継続表示させていく表示処理と、
を含み、上記各処理をコンピュータで実行させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置及びそのプログラムに係り、詳しくは、動画撮影機能を有する撮像装置及びそのプログラムに関する。
【背景技術】
【０００２】
近年、動画撮影の機能が向上し、動画撮影中に静止画撮影を行なうことができる動画撮影機能も登場した。また、それに伴い種々の機能を有するデジタルカメラが登場した。例えば、動画と静止画を時分割で処理することにより、インターレースＣＣＤを用いた撮像装置で、動画撮影中にＣＣＤ出力画素を全て使った静止画撮影を可能にしたカメラがある（特許文献１）。
【０００３】
【特許文献１】公開特許公報  特開２００５−３１１５７２
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来の動画撮影は、以下のような問題があった。
例えば、一連の動画撮影中に、それまでどのような動画を撮影してきているかを確認することはできず、これを確認する場合には、一旦動画撮影を中止しなければならないという問題があった。
【０００５】
そこで本発明は、かかる従来の問題点に鑑みてなされたものであり、一連の動画撮影中に、現在撮影している一連の動画に対するそれまでの撮影内容を確認することができる撮像装置及びそのプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記目的達成のため、請求項１記載の発明による撮像装置は、被写体を撮像する撮像手段と、
前記撮像手段による動画の撮影を行なう動画撮影制御手段と、
所定のタイミングを指示する指示手段と、
前記動画撮影制御手段による一連の動画撮影中に、動画撮影されたフレームデータを順次表示手段の第一表示領域に動画表示させていくとともに、前記指示手段によりタイミングが指示される度に、該タイミングで前記撮像手段により得られた画像データに基づく静止画を追加して前記表示手段の第二表示領域に継続表示させていく第１の表示制御手段と、
を備えたことを特徴とする。
【０００７】
また、例えば、請求項２に記載されているように、前記指示手段によりタイミングが指示されたときに、前記撮像手段により被写体の静止画の撮影を行なう静止画撮影制御手段を備え、
前記第１の表示制御手段は、
前記静止画撮影制御手段により撮影された静止画データに基づく静止画を前記表示手段の第二表示領域に継続表示させるようにしてもよい。
【０００８】
また、例えば、請求項３に記載されているように、前記動画撮影制御手段は、
前記指示手段によりタイミングが指示されたときに動画撮影を一時中断し、前記静止画撮影制御手段による静止画の撮影が終了すると前記動画撮影を再開するようにしてもよい。
【０００９】
また、例えば、請求項４に記載されているように、前記指示手段によりタイミングが指示されたときに、前記動画撮影制御手段により動画撮影されたフレームデータから、そのときに撮影されたフレームデータを抽出するフレームデータ抽出手段を備え、
前記第１の表示制御手段は、
前記フレームデータ抽出手段により抽出されたフレームデータに基づく静止画を前記表示手段の第二表示領域に継続表示させるようにしてもよい。
【００１０】
また、例えば、請求項５に記載されているように、前記指示手段は、
ユーザによって任意に指定されたタイミングを指示するようにしてもよい。
【００１１】
また、例えば、請求項６に記載されているように、前記指示手段は、
予め定められたタイミング、又は、所定時間間隔毎にタイミングを指示するようにしてもよい。
【００１２】
また、例えば、請求項７に記載されているように、前記動画撮影制御手段により得られた動画データを記録手段に記録する記録制御手段を備えるようにしてもよい。
【００１３】
また、例えば、請求項８に記載されているように、前記記録制御手段は、
前記指示手段により指示されたタイミングで前記撮像手段により得られた画像データを、前記動画撮影制御手段により得られた動画データに関連付けて記録するようにしてもよい。
【００１４】
また、例えば、請求項９に記載されているように、前記記録手段に記録されている動画データのうち、任意の動画データを選択するための選択手段と、
前記選択手段により選択された動画データを前記表示手段の第三表示領域に再生表示させるとともに、該動画データの撮影中に前記指示手段により指示されたタイミングで前記撮像手段により撮像された画像データを静止画として前記表示手段の第四表示領域に再生表示させる第２の表示制御手段と、
前記第２の表示制御手段により前記表示手段の第四表示領域に再生表示された静止画のうち、任意の静止画を指定するための指定手段と、を備え
前記第２の表示制御手段は、
前記指定手段により前記表示手段の第四表示領域に再生表示中のいずれかの静止画が指定された場合は、該指定された静止画に対応するフレームから、前記選択手段により選択された動画データを前記表示手段の第三表示領域に再生表示させるようにしてもよい。
【００１５】
また、例えば、請求項１０に記載されているように、前記記録手段に記録されている動画データのうち、任意の動画データを選択するための選択手段と、
前記選択手段により選択された動画データを前記表示手段の第三表示領域に再生表示させるとともに、該動画データの撮影中に前記指示手段により指示されたタイミングで前記撮像手段により撮像された画像データを静止画として前記表示手段の第四表示領域に再生表示させる第２の表示制御手段と、
編集ポイントとして、前記第２の表示制御手段により前記表示手段の第四表示領域に再生表示された静止画のうち任意の静止画を指定する指定手段と、
前記指定手段により指定された編集ポイントに基づいて、前記選択手段により選択された動画データを編集する動画編集手段と、
を備えるようにしてもよい。
【００１６】
また、例えば、請求項１１に記載されているように、前記動画編集手段は、
前記選択手段により選択された動画データのうち、前記指定手段により指定された編集ポイントとなる静止画に対応するフレームデータより前、又は以後の動画データを削除することにより、前記選択手段により選択された動画データを編集するようにしてもよい。
【００１７】
また、例えば、請求項１２に記載されているように、前記指定手段は、
編集ポイントとして２つの静止画を指定し、
前記動画編集手段は、
前記選択手段により選択された動画データのうち、前記指定手段により指定された編集ポイントとなる２つの静止画に対応するフレームデータ間の動画データを削除、又は、編集ポイントとなる２つの静止画に対応するフレームデータ間以外の動画データを削除することにより、前記選択手段により選択された動画データを編集するようにしてもよい。
【００１８】
上記目的達成のため、請求項１３記載の発明によるプログラムは、被写体を撮像する撮像処理と、
前記撮像処理による動画の撮影を行なう動画撮影処理と、
所定のタイミングを指示する指示処理と、
前記動画撮影処理による一連の動画撮影中に、動画撮影されたフレームデータを順次表示手段の第一表示領域に動画表示させていくとともに、前記指示処理によりタイミングが指示される度に、該タイミングで前記撮像処理により得られた画像データに基づく静止画を追加して前記表示手段の第二表示領域に継続表示させていく表示処理と、
を含み、上記各処理をコンピュータで実行させることを特徴とする。
【発明の効果】
【００１９】
本発明によれば、一連の動画撮影において、動画撮影中に順次撮影されたフレームを表示させていくとともに、指示されたタイミングで撮像された画像データを静止画として表示させるので、一連の動画撮影中に、それまでどのような動画を撮影してきているかを簡単に確認することができる。
【発明を実施するための最良の形態】
【００２０】
以下、本実施の形態について、本発明の撮像装置をデジタルカメラに適用した一例として図面を参照して詳細に説明する。
[第１の実施の形態]
【００２１】
Ａ．デジタルカメラの構成
図１は、本発明の動画処理装置を実現するデジタルカメラ１の電気的な概略構成を示すブロック図である。
デジタルカメラ１は、撮影レンズ２、レンズ駆動ブロック３、絞り４、ＣＣＤ５、ドライバ６、ＴＧ（timing generator）７、ユニット回路８、画像生成部９、ＣＰＵ１０、キー入力部１１、メモリ１２、ＤＲＡＭ１３、フラッシュメモリ１４、画像表示部１５、バス１６を備えている。
【００２２】
撮影レンズ２は、複数のレンズ群から構成されるフォーカスレンズ２ａ、ズームレンズ２ｂ等を含む。そして、撮影レンズ２にはレンズ駆動ブロック３が接続されている。レンズ駆動ブロック３は、フォーカスレンズ２ａ、ズームレンズ２ｂをそれぞれ光軸方向に駆動させるフォーカスモータ、ズームモータと、ＣＰＵ９から送られてくる制御信号にしたがって、フォーカスモータ、ズームモータを駆動させるフォーカスモータドライバ、ズームモータドライバから構成されている（図示略）。
【００２３】
絞り４は、図示しない駆動回路を含み、駆動回路はＣＰＵ１０から送られてくる制御信号にしたがって絞り４を動作させる。
絞りとは、撮影レンズ２から入ってくる光の量を制御する機構のことをいう。
【００２４】
ＣＣＤ５は、ドライバ６によって駆動され、一定周期毎に被写体像のＲＧＢ値の各色の光の強さを光電変換して撮像信号としてユニット回路８に出力する。このドライバ６、ユニット回路８の動作タイミングはＴＧ７を介してＣＰＵ１０により制御される。なお、ＣＣＤ５はベイヤー配列の色フィルターを有しており、電子シャッタとしての機能も有する。この電子シャッタのシャッタ速度は、ドライバ６、ＴＧ７を介してＣＰＵ１０によって制御される。
【００２５】
ユニット回路８には、ＴＧ７が接続されており、ＣＣＤ５から出力される撮像信号を相関二重サンプリングして保持するＣＤＳ（Correlated Double Sampling）回路、そのサンプリング後の撮像信号の自動利得調整を行なうＡＧＣ（Automatic Gain Control）回路、その自動利得調整後のアナログの撮像信号をデジタル信号に変換するＡ／Ｄ変換器から構成されており、ＣＣＤ５から出力された撮像信号はユニット回路８を経てデジタル信号として画像生成部９に送られる。
【００２６】
画像生成部９は、ユニット回路８から送られてきた画像データに対してγ補正処理、ホワイトバランス処理などの処理を施すとともに、輝度色差信号（ＹＵＶデータ）を生成し、該生成された輝度色差信号の画像データはＣＰＵ１０に送られる。つまり、画像生成部９は、ＣＣＤ５から出力された画像データに対して画像処理を施す。
【００２７】
ＣＰＵ１０は、画像生成部９から送られてきた画像データの圧縮・伸張（例えば、ＪＰＥＧ形式、ＭＰＥＧ形式の圧縮・伸張）処理や、ＡＦ処理、ＡＥ処理を行う機能を有するとともに、デジタルカメラ１の各部を制御するワンチップマイコンである。
特に、ＣＰＵ１０は、動画撮影処理、動画撮影中に静止画撮影処理を行う機能を有するとともに、動画撮影により撮影された動画を画像表示部１４に表示させるとともに、動画撮影中に得られた静止画も一緒に表示させる機能を有する。また、動画再生、編集時においても、動画を表示させるとともに、該動画と関連付けられている静止画も一緒に表示させる。
【００２８】
キー入力部１１は、シャッタボタン、録画ボタン、モードキー、セットキー、十字キー等の複数の操作キーを含み、ユーザのキー操作に応じた操作信号をＣＰＵ１０に出力する。
メモリ１２には、ＣＰＵ１０が本発明を実施するために必要な制御プログラム、及び必要なデータが記録されており、ＣＰＵ１０は、該プログラムに従い動作する。
【００２９】
ＤＲＡＭ１３は、ＣＣＤ５によって撮像された後、ＣＰＵ１０に送られてきた画像データを一時記憶するバッファメモリとして使用されるとともに、ＣＰＵ１０のワーキングメモリとして使用される。
フラッシュメモリ１４は、圧縮された画像データを保存する記録媒体である。
【００３０】
画像表示部１５は、カラーＬＣＤとその駆動回路を含み、撮影待機状態にあるときには、ＣＣＤ５によって撮像された被写体をスルー画像として表示し、動画撮影中のときもＣＣＤ５によって撮像された被写体の動画を表示させる。また、動画撮影中に静止画撮影処理が行なわれた場合は、動画とともに撮影された静止画を表示させる。
【００３１】
Ｂ．デジタルカメラ１の動作
実施の形態におけるデジタルカメラ１の動作を図２のフローチャートに従って説明する。
【００３２】
ユーザのモードキーの操作により動画撮影モードに設定されると、ＣＰＵ１０は、ＣＣＤ５による撮像を開始させ、該撮像され画像生成部９によって生成された輝度色差信号の画像データを画像表示部１５に表示されるという、いわゆるスルー画像表示を開始させる（ステップＳ１）。
次いで、ＣＰＵ１０は、動画撮影が開始されたか否かの判断を行う（ステップＳ２）。この判断は、録画ボタン押下に対応する操作信号がキー入力部１１から送られてきたか否かにより判断する。
【００３３】
ステップＳ２で、動画撮影が開始されたと判断すると、ＣＰＵ１０は、静止画撮影処理を行う（ステップＳ３）。つまり、ＣＣＤ４に比較的長い出力タイミングで１画面中の偶数ラインの画素信号と、奇数ラインの画素信号を順に出力させて、全画素分の画像データを読出し、画像生成部８によって生成された輝度色差信号の画像データ（静止画像データ）をバッファメモリ（ＤＲＡＭ１３）に記憶する。
【００３４】
次いで、ＣＰＵ１０は、動画撮影記録処理及び表示処理を開始する（ステップＳ４）。つまり、所定のフレームレートで順次撮像されたフレームデータを圧縮してフラッシュメモリ１４に記録するとともに、該撮像されたフレームデータ（記録されたフレームデータ）を画像表示部１５に表示させる処理（撮影された動画の表示処理）を開始する。
【００３５】
このとき、画像表示部１５は、動画を表示する領域（第一表示領域）と複数の静止画を表示させる領域（第二表示領域）とに分け、動画を表示する領域に動画撮影記録処理により得られた動画を表示させるとともに、静止画を表示させる領域にステップＳ３で撮影された静止画も一緒に表示させる処理を開始する。この表示させる静止画は、静止画撮影処理により得られた静止画データを表示させるようにしてもよいし、該静止画データに基づいて生成されたサムネイル画像データを表示させるようにしてもよい。このサムネイル画像データとは、撮影された静止画データの画像サイズを縮小した画像データのことであり、データ量も小さくなる。この生成されたサムネイル画像データもバッファメモリに記憶され、また、生成の元となった静止画データと関連付けて記録されるようにしてもよい。
【００３６】
図３（ａ）は、動画撮影記録処理・表示処理開始後の画像表示部１５の画面の様子を示す図である。
図３（ａ）の領域２０は、つまり、大きい画像が表示されている部分は、動画を表示する領域（第一表示領域）であり、Ｌ字型の領域２１は、複数の静止画を表示させる領域（第二表示領域）である。
図３（ａ）を見ると、この領域２０に現在の動画撮影記録処理により得られた動画が表示され、領域２１の上に動画撮影開始直後に撮影された静止画が表示されているのがわかる。
【００３７】
次いで、ＣＰＵ１０は、シャッタボタンが押下されたか否かを判断する（ステップＳ５）。この判断は、シャッタボタン押下に対応する操作信号がキー入力部１１から送られてきたか否かにより判断する。
ステップＳ５で、シャッタボタンが押下されたと判断すると、ＣＰＵ１０は、静止画撮影処理を行う（ステップＳ６）。このときの静止画撮影処理は、動画撮影記録処理を継続させながら行なう。なお、静止画撮影処理を行う場合は、動画撮影記録処理を一時中断し、静止画撮影処理が終了すると、動画撮影記録処理を再開させるようにしてもよい。
【００３８】
次いで、ＣＰＵ１０は、該撮影された静止画の追加表示を開始させて（ステップＳ７）、ステップＳ８に進む。この追加表示とは、既に表示されている静止画に加えて新たに撮影された静止画も追加して表示させていくということである。
新たに静止画撮影がされた場合は、動画撮影記録処理により撮影されている動画に加えて既に静止画撮影処理により得られた静止画も表示されており、新たに静止画撮影処理が行なわれると、動画及び既に表示されている静止画に追加して新たに得られた静止画が表示されることになる。この表示させる静止画は、静止画撮影処理により得られた静止画データを表示させるようにしてもよいし、該静止画データに基づいて生成されたサムネイル画像データを表示させるようにしてもよい。この撮影された静止画が動画の内容のインデックスとしての機能を有する。
【００３９】
図３（ｂ）は、このときの画像表示部１５に表示される画面の様子を示すものである。
図３（ｂ）を見るとわかるように、２枚目に撮影された静止画は、現在の動画撮影記録処理により得られる動画が表示される領域の周りで、且つ、１枚目に撮影された静止画の下に表示される。そして、３枚目の静止画撮影処理が行なわれると、２枚目の静止画の下に該得られた３枚目の静止画が表示される。
【００４０】
このように、動画撮影中に静止画撮影が行なわれると、動画撮影記録処理により得られる動画が表示される領域の周りで、且つ、Ｌ字型となるように順々に撮影された静止画が表示されることになり、表示される静止画が増えていく。つまり、動画撮影中に静止画撮影が行なわれると、撮影により得られた動画及び表示されている静止画（過去に撮影された静止画）に加えて、新たに撮影された静止画が表示されていく。
これにより、静止画撮影が行なわれた順番、及び、現在の動画撮影記録処理により撮影している動画の内容が時系列的に分かる。
【００４１】
なお、本実施の形態においては、動画撮影中に行なわれた静止画の表示はＬ字形に順々に表示させるようにしたが、他の態様で表示させてもよい（例えば、逆Ｌ字型や表示されている動画を囲むような□形でもよい）。また、画像表示部１５を、動画を表示する領域と静止画を表示する領域とに分け、動画を表示する領域に動画撮影記録処理により得られた動画を表示し、静止画を表示する領域に、静止画撮影処理により得られた静止画を順々に表示させるようにしたが、動画撮影記録処理により得られた動画を画像表示部１５の全面に表示させ、静止画撮影処理により得られた静止画を該表示されている動画の上に重ねて小さく表示させるようにしてもよい。要は、現在撮影している動画が分かり、また撮影された静止画の撮影順番及び該静止画を見ることにより現在の動画撮影中の動画の過去の内容が分かる態様であればよい。
【００４２】
一方、ステップＳ５で、シャッタボタンが押下されていないと判断すると、そのままステップＳ８に進む。
ステップＳ８に進むと、ＣＰＵ１０は、動画撮影を終了するか否かの判断を行なう。この判断は、録画ボタン押下に対応する操作信号がキー入力部１１から送られてきたか否かにより判断する。つまり、動画撮影は、録画ボタンの押下により開始され、再び録画ボタンが押下されると動画撮影が終了することになる。
【００４３】
ステップＳ８で、動画撮影を終了しないと判断するとステップＳ５に戻り、動画撮影を終了すると判断すると、該動画撮影記録処理により記録されたフレームデータに基づいて動画ファイルを生成するともに、バッファメモリに記憶されている各静止画データに基づいてそれぞれ静止画ファイルを生成してフラッシュメモリ１４に記録する（ステップＳ９）。
また、この生成された動画ファイルと静止画ファイルとは関連付けられて記録される。この動画ファイル、静止画ファイルの中には、動画のサムネイル画像、静止画のサムネイル画像も記録されており、また、静止画ファイルの中には動画のどの位置やタイミングで撮影された静止画であるかを示す情報も記録されている。
【００４４】
次いで、ＣＰＵ１０は、動画撮影モードを終了させるか否かを判断する（ステップＳ１０）。この判断は、ユーザのモードキーの操作により再生モード等の他のモードに設定された場合や、デジタルカメラ１の電源がｏｆｆされた場合に動画撮影モードを終了させると判断する。
ステップＳ１０で、動画撮影モードを終了させないと判断すると、ステップＳ１に戻る。
【００４５】
なお、次の一連の動画撮影が行なわれると（一連の動画撮影が終了し、新たに一連の動画撮影が行なわれると）、前回の一連の動画撮影で撮影した静止画データはリセットされ、今回の一連の動画撮影中に撮影された静止画が新たに動画とともに表示されていくことになる。つまり、一連の動画撮影を新たに行なう場合には、前回の動画撮影中に撮影された静止画は表示されず、該新たな動画撮影中に撮影された静止画が動画とともに表示されていくことになる。
【００４６】
Ｃ．以上のように、第１の実施の形態においては、動画撮影中に静止画撮影された静止画を撮影している動画とともに表示させるので、撮影した静止画の内容及び静止画撮影した枚数が簡単に分かるとともに、現在撮影している動画の過去の内容も分かり、例えば、長時間動画撮影を行なっている場合でも、どのような動画を撮影してきているかを簡単に認識することができる。
また、動画撮影中に静止画撮影がされると、動画とともに、撮影された静止画を順々に表示させていくので、ユーザの興趣を高めることができる。
【００４７】
［変形例１］
Ｄ．なお、第１の実施の形態は、以下のような変形例も可能である。
【００４８】
（１）ステップＳ２で動画撮影を開始すると判断すると、静止画撮影処理を行ってから（ステップＳ３）、動画撮影記録処理及び表示処理を開始する（ステップＳ４）ようにしたが、動画撮影を開始すると判断すると、静止画撮影処理を行わずに、そのままステップＳ４に進むようにしてもよい。
【００４９】
（２）また、動画撮影記録処理中にシャッタボタンが押下された場合に（ステップＳ５でＹ）、静止画撮影処理を行なう（ステップＳ６）ようにしたが、所定時間間隔で自動的に静止画撮影処理を行うようにしてもよい。この場合、ステップＳ５で静止画撮影処理を行ってから所定時間が経過したか否かを判断し、所定時間が経過した場合はステップＳ６に進み、所定時間が経過していない場合はステップＳ８に進むようにする。この所定時間は予め設定されていてもよいし、ユーザが任意に設定できるようにしてもよい。つまり、予め定められたタイミングで自動的に静止画撮影を行なう。
【００５０】
（３）また、ステップＳ３、ステップＳ６では静止画撮影処理を行うようにしたが、静止画撮影処理を行わずに、ステップＳ３、ステップＳ６においては、ステップＳ２で動画撮影が開始されたタイミング、ステップＳ５でシャッタボタンが押下されたタイミングでＣＣＤ５により撮像されたフレームデータを抽出し、該抽出したフレームデータに基づいて、静止画データやサムネイル画像を生成するようにしてもよい。この場合、ステップＳ４、ステップＳ７で該生成された静止画データやサムネイル画像を表示させ、ステップＳ９では、該生成された静止画データやサムネイル画像を記録させる。
【００５１】
（４）また、動画ファイルと静止画ファイルとを関連付けて記録するようにしたが、関連付けて記録しないようにしてもよい。また、静止画撮影処理により得られた静止画像データを記録しないようにしてもよい。
【００５２】
（５）また、静止画撮影により得られた静止画データを全て記録するようにしたが、ユーザによって選択された静止画データのみを記録するようにしてもよい。
【００５３】
（６）また、上記（１）乃至（５）を任意に組み合わせるような態様であってもよい。
【００５４】
［第２の実施の形態］
次に、第２の実施の形態について説明する。
第２の実施の形態においては、動画再生時に動画と静止画とを表示させ、静止画データが選択されると、該選択された静止画に対応する位置から動画を再生させるというものである。
【００５５】
Ｅ.デジタルカメラ１の動作
第２の実施の形態も、図１に示したものと同様の構成を有するデジタルカメラ１を用いることにより本発明の撮像装置を実現する。
以下、第２の実施の形態のデジタルカメラ１の動作を図４のフローチャートにしたがって説明する。
【００５６】
ユーザのモードキーの操作により動画再生モードに設定されると、ＣＰＵ１０は、フラッシュメモリ１４に記録されている動画ファイル（ファイル名や動画のサムネイル画像、動画の最初のフレーム画像など）を画像表示部１５に一覧表示させる（ステップＳ３１）。
【００５７】
次いで、ＣＰＵ１０は、該一覧表示された動画ファイルの中からユーザによって再生させる動画ファイルが決定されたか否かを判断する（ステップＳ３２）。
このとき、ユーザは一覧表示された動画ファイルを見ながら十字キーを操作することにより、再生したい動画ファイルを選択して、ＳＥＴキーの操作を行なうことにより再生させる動画ファイルの決定を行なうことができ、ＣＰＵ１０は、ＳＥＴキーの操作に対応する操作信号がキー入力部１１から送られてきたか否かにより判断する。
【００５８】
ステップＳ３２で、再生させる動画ファイルが決定されていないと判断すると決定されるまでステップＳ３２に留まり、再生させる動画ファイルが決定されたと判断すると、決定された動画ファイルの動画データを再生表示させるともに（最初のフレームから順々に表示させるとともに）、該動画ファイルに関連付けられている静止画ファイルの静止画データ又はサムネイル画像を読み出して表示させる（ステップＳ３３）。この動画ファイルに関連付けられている静止画ファイルは、第１の実施の形態で説明したように、動画撮影中に静止画撮影が行なわれた静止画の静止画ファイルである。
【００５９】
この動画の再生は、第１の実施の形態において説明したように、画像表示部１５を動画を表示させる領域２０（第三表示領域）と静止画を表示させる領域２１（第四表示領域）とに分け、該決定された動画ファイルの動画を領域２０に表示させ、該動画ファイルに関連付けられて記録された静止画ファイルの静止画（静止画データ又はサムネイル画像）を領域２１に表示させる。このとき、表示させる静止画の順番は、撮影順に表示させる。
【００６０】
図５（ａ）は、そのときの画像表示部１５に表示される画面の様子を示すものである。
領域２０には該決定された動画ファイルの動画が再生表示され、領域２１には該決定された動画ファイルと関連付けられて記録されている静止画ファイルの静止画が撮影順に表示されている。つまり、左上の画像が最初に撮影された静止画であり、右下の画像が最後に撮影された静止画である。
【００６１】
また、最初に撮影された静止画が太枠で選択されており、この太枠はどの位置から動画データが再生表示されたかを示すものである。従って、現在は動画データが最初のフレームから順々に表示されているので、最初に撮影された静止画が太枠で選択されている。
【００６２】
なお、再生させる動画ファイルが決定されると、該決定された動画ファイルの動画を再生表示させるようにしたが、再生表示させることなく、動画の最初のフレームや動画のサムネイル画像を表示させるようにしてもよい。
【００６３】
次いで、ＣＰＵ１０は、ユーザによって静止画の選択が行なわれたか否かを判断する（ステップＳ３４）。この判断は、ＳＥＴキーの操作に対応する操作信号がキー入力部１１から送られてきたか否かにより判断する。
【００６４】
このとき、ユーザは十字キーの操作を行なうことにより、静止画を仮選択することができ、ＳＥＴキーの操作を行なうことにより、仮選択された静止画を選択することができる。仮選択の時は、仮選択された静止画であることをユーザに認識させるため、仮選択された静止画は他の静止画と差別表示される。
後述するが、この静止画が選択されると該選択された静止画に対応する位置のフレームデータから動画データの再生表示が行われるので、動画データの再生表示を途中から開始させたいときに、ユーザは、その開始箇所に対応する静止画を選択すれば、所望の開始箇所から動画を再生表示することができる。
【００６５】
ステップＳ３４で、静止画が選択されたと判断すると、ＣＰＵ１０は、該選択された静止画に対応する位置から動画データを再生表示させて（ステップＳ３５）、ステップＳ３６に進む。つまり、ステップＳ３２で決定された動画データのうち、該選択された静止画が撮影された以後に撮影された動画を再生表示させることになる。例えば、該選択された静止画に対応する位置が動画データの２０フレーム目とすると、２０フレーム目から再生表示させることになる。
【００６６】
図５（ｂ）は、そのときの画像表示部１５に表示される画面の様子を示すものであり、図を見ると、４枚目の静止画が選択されており、該４枚目の静止画に対応する位置のフレームから動画が再生表示されているのがわかる。
一方、ステップＳ３４で、静止画が選択されていないと判断するとそのままステップＳ３６に進む。
【００６７】
ステップＳ３６に進むと、ＣＰＵ１０は、動画の再生を終了するか否かを判断する。この判断は、動画データを最後まで表示させた場合や、再生を中止する旨の操作信号がキー入力部１１から送られてきた場合には、動画の再生を終了すると判断する。
【００６８】
ステップＳ３６で、動画の再生を終了しないと判断すると、ステップＳ３４に戻り、動画の再生を終了すると判断すると、ＣＰＵ１０は動画再生を終了し（ステップＳ３７）、動画再生モードを終了させるか否かを判断する（ステップＳ３８）。この判断は、ユーザのモードキーの操作により撮影モード等の他のモードに設定された場合や、デジタルカメラ１の電源がｏｆｆされた場合に動画撮影モードを終了させると判断する。
ステップＳ３８で、動画再生モードを終了させないと判断すると、ステップＳ１１に戻る。
【００６９】
Ｆ．以上のように、第２の実施の形態においては、動画撮影中に静止画撮影が行なわれた動画データを再生表示させる場合は、該動画データを表示させるとともに、動画撮影中に静止画撮影された静止画も表示させ、静止画が選択されると、該静止画に対応するフレームデータから該動画データを再生表示させるので、ユーザは簡単に再生させたい場面から動画データを再生させることができる。
【００７０】
［変形例２］
Ｇ．なお、第２の実施の形態は、以下のような変形例も可能である。
【００７１】
（１）ステップＳ３３で、該決定された動画ファイルに関連付けられている静止画ファイルの静止画データ又はサムネイル画像を読み出して表示させるようにしたが、該決定された動画ファイルに関連付けられている静止画ファイルの静止画の替わりに、該決定された動画ファイルのフレームデータを抽出し、該抽出したフレームデータに基づいて静止画として表示させるようにしてもよい。
この場合は、該決定された動画ファイルの全フレームのうち、所定フレーム間隔おきのフレームデータを静止画として表示させる。
例えば、動画データが３５０フレームからなる場合には、１枚目のフレーム、５１枚目のフレーム、１０１枚目のフレーム、１５１枚目のフレーム、２０１枚目のフレーム、２５１枚目、３０１枚目のフレームを静止画として表示させるようにする。
また、この所定フレーム間隔は、予め決まったフレーム間隔であってもよいし、動画データの全フレーム数に応じて（例えば、表示させる静止画が全て等間隔になるように）定められるようにしてもよい。
【００７２】
（２）また、ステップＳ３３で、該決定された動画ファイルに関連付けられている静止画ファイルの静止画データ又はサムネイル画像を読み出して表示させるようにしたが、動画ファイルに関連付けられて記録されている静止画ファイルの静止画を表示させずに、動画撮影中に静止画撮影が行なわれたタイミング（時期）を動画ファイルに記録させておき、静止画撮影が行なわれたタイミングに対応する動画データのフレームデータを抽出し、該抽出したフレームデータを静止画として表示させるようにしてもよい。
上記（１）及び（２）の場合には、動画ファイルに静止画ファイルを関連付けて記録させる必要がなくなる。
【００７３】
［第３の実施の形態］
次に、第３の実施の形態について説明する。
第３の実施の形態においては、編集モード時において、動画と静止画を表示させ、静止画が選択されると該静止画に対応する動画のフレームデータの位置を編集ポイントとして編集を行なうというものである。
【００７４】
Ｈ.デジタルカメラ１の動作
第２の実施の形態も、図１に示したものと同様の構成を有するデジタルカメラ１を用いることにより本発明の撮像装置を実現する。
以下、第２の実施の形態のデジタルカメラ１の動作を図６のフローチャートにしたがって説明する。
【００７５】
ユーザのモードキーの操作により動画編集モードに設定されると、ＣＰＵ１０は、フラッシュメモリ１４に記録されている動画ファイル（ファイル名や動画のサムネイル画像、動画の最初のフレーム画像など）を画像表示部１５に一覧表示させる（ステップＳ５１）。
【００７６】
次いで、ＣＰＵ１０は、該一覧表示された動画ファイルの中からユーザによって再生させる動画ファイルが決定されたか否かを判断する（ステップＳ５２）。
このとき、ユーザは一覧表示された動画ファイルを見ながら十字キーを操作することにより、編集したい動画ファイルを選択して、ＳＥＴキーの操作を行なうことにより編集させる動画ファイルの決定を行なうことができ、ＣＰＵ１０は、ＳＥＴキーの操作に対応する操作信号がキー入力部１１から送られてきたか否かにより判断する。
【００７７】
ステップＳ５２で、編集させる動画ファイルが決定されていないと判断すると決定されるまでステップＳ５２に留まり、編集させる動画ファイルが決定されたと判断すると、図５（ａ）に示すように、決定された動画ファイルの動画を領域２０に表示させるともに（最初のフレームデータや動画のサムネイル画像を表示させるとともに）、該動画ファイルに関連付けられている静止画ファイルの静止画データ又はサムネイル画像を読み出して領域２１に表示させる（ステップＳ５３）。このときは、最初の静止画が選択されている状態となっており、該選択された静止画であることをユーザに対して認識されるため、選択されている静止画、つまり、最初の静止画が太枠で囲まれている。
【００７８】
次いで、ＣＰＵ１０は、静止画がユーザによって選択されたか否かを判断する（ステップＳ５４）。この判断は、十字キーの操作に対応する操作信号がＣＰＵ１０に送られてきたか否かにより判断する。
【００７９】
ステップＳ５４で、静止画の選択が行なわれていないと判断するとそのままステップＳ５６に進み、静止画の選択が行なわれたと判断すると、該選択操作にしたがって選択された静止画を差別表示、つまり、太枠で囲んで（ステップＳ５５）、ステップＳ５６に進む。
つまり、ユーザは、十字キーの操作をすることにより表示されている静止画の中から任意の静止画を選択することができる。例えば、最初の静止画が選択されている状態で、十字キーの「↓」を１回操作すると、選択される静止画は２枚目の静止画が選択され、該選択された２枚目の静止画が太枠で囲まれることになる。
【００８０】
ステップＳ５６に進むと、ＣＰＵ１０は、該選択されている静止画を編集ポイントとして決定するか否かの判断を行う。
この判断は、ＳＥＴキーの操作に対応する操作信号がキー入力部１１から送られてきたか否かにより判断し、ユーザは、該選択した静止画を編集ポイントにしたいと思う場合はＳＥＴキーの操作を行なう。
【００８１】
ステップＳ５６で、該選択されている静止画を編集ポイントとして決定しないと判断するとステップＳ５４に戻り、該選択している静止画を編集ポイントとして決定すると判断すると、削除方向の指定が行なわれたか否かを判断する（ステップＳ５７）。
【００８２】
このとき、ＣＰＵ１０は、削除方向を指定させるための画面を画像表示部１５に表示させる。図７（ａ）は、そのときの様子を示す図である。
削除方向として、前方削除と後方削除との２通りあり、図を見ると、前方削除か後方削除かを選択させるための画面が表示されているのがわかる。この前方削除とは、編集ポイントとして決定された静止画に対応する動画フレームより前のフレームを全て削除すること意味し、後方削除は、編集ポイントとして決定された静止画に対応する動画フレーム以後のフレームを全て削除することを意味している。
【００８３】
また、例えば、前方削除か後方削除かを選択させる画面の表示時には、最初に前方削除が選択されるように表示させておき、十字キーを操作する毎に、後方削除、そして、再び前方削除といったように、前方削除または後方削除が選択されるように表示する。これにより、前方削除、後方削除のどちらかの削除方向を選択することができる。また、現在選択されている削除方向をユーザに認識させるため選択されている削除方向は網がかって表示される。なお、選択されていることを認識させる方法であればどの態様でもよい。
そして、ユーザは削除方向を十字キーの操作を行なうことにより選択することができ、選択した削除方向でＯＫと思う場合はＳＥＴキーの操作を行なうことにより削除方向を決定することでき、ＣＰＵ１０は、ＳＥＴキーの操作に対応する操作信号が送られてくると選択されている削除方向を決定する。
【００８４】
ステップＳ５７で、削除方向の決定が行なわれたと判断すると、ＣＰＵ１０は、該決定に従って、ステップＳ５２で決定した動画ファイルの動画の編集を実行する（ステップＳ５８）。つまり、ステップＳ５６で決定した編集ポイントとなる静止画に対応する動画のフレームデータを基準に、決定された削除方向が前方削除である場合は、該フレームデータより前のフレームデータを全て削除し、決定された削除方向が後方削除である場合は、該フレームデータ以後のフレームデータを全て削除する。ここでは、削除方向として前方削除を選択して決定したものとする。
【００８５】
次いで、ＣＰＵ１０は、編集後の動画データに基づいて新たに動画ファイルを生成し、該生成した動画データをフラッシュメモリ１４に記録して、編集後の動画ファイルの動画及び該動画ファイルに関連付けられて記録されている静止画ファイルの静止画を表示させる（ステップＳ５９）。
このとき、編集後の動画ファイル（生成された動画ファイル）には、編集により残った動画のフレームに対応する静止画の静止画ファイルのみが関連付けられて記録させる。
【００８６】
図７（ｂ）は、編集後に表示される動画及び静止画の様子を示す図である。
図７の（ａ）と（ｂ）とを見比べると、編集ポイントとして決定された静止画が最初の静止画となっているのが分かり、該決定された静止画より前の静止画が表示されていないのが分かる。これは、編集後の動画ファイルには、編集により削除されたフレームに対応する静止画の静止画ファイルが関連付けられて記録されないからである。
なお、上述では、生成した動画ファイルを新たに記録するようにしたが、ステップ５２で決定された動画ファイル（編集の元となった動画ファイル）の上に上書きして記録するようにしてもよい。つまり、該決定された動画ファイルは消去されることになる。
【００８７】
次いで、ＣＰＵ１０は、動画編集モードを終了させるか否かを判断する（ステップＳ６０）。この判断は、ユーザのモードキーの操作により撮影モード等の他のモードに設定された場合や、デジタルカメラ１の電源がｏｆｆされた場合に動画撮影モードを終了させると判断する。
ステップＳ６０で、動画再生モードを終了させないと判断すると、ステップＳ５１に戻る。
【００８８】
Ｉ．以上のように、第３の実施の形態においては、動画撮影中に静止画撮影が行なわれた動画データを編集する場合は、該動画データを表示させるとともに、動画撮影中に静止画撮影された静止画も表示させ、選択決定された静止画を編集ポイントにするので、簡単に動画データの編集を行なうことができる。
【００８９】
［変形例３］
Ｊ．なお、第３の実施の形態は、以下のような変形例も可能である。
【００９０】
（１）上記［変形例２］で説明した態様を第３の実施の形態の変形例として援用するようにしてもよい。
簡単に説明すると、ステップＳ５３で、該決定された動画ファイルに関連付けられている静止画ファイルの静止画データ又はサムネイル画像を読み出して表示させるようにしたが、該決定された動画ファイルに関連付けられている静止画ファイルの静止画の替わりに、動画データのフレームデータを抽出し、該抽出したフレームデータを静止画として表示させるようにしてもよい。つまり、所定フレーム間隔おきのフレームや、静止画撮影が行なわれたタイミングに対応するフレームを静止画として表示させる。
【００９１】
（２）また、編集ポイントとなる静止画を１つ選択し、該選択した静止画に対応するフレームを基準に、ステップＳ５７で決定された削除方向に基づいてフレームを削除するようにしたが、編集ポイントとなる静止画を２つ決定することができるようにしてもよい。つまり、編集ポイントを２つ指定することができるようにしてもよい。
この場合は、編集ポイントとして指定された２つの静止画に対応するフレーム間の動画データを削除するようにしてもよいし、編集ポイントとして指定された２つの静止画に対応するフレーム間の動画データを残す（フレーム間の動画データ以外の動画データを削除する）ようにしてもよい。
【００９２】
上記各実施の形態におけるデジタルカメラ１は、上記の実施の形態に限定されるものではなく、カメラ付き携帯電話、カメラ付きＰＤＡ、カメラ付きパソコン、デジタルビデオカメラ等でもよく、被写体の動画及び静止画を撮影することができる機能若しくは動画データを処理することができる機能を備えた機器であればよい。
【図面の簡単な説明】
【００９３】
【図１】本発明の実施の形態のデジタルカメラのブロック図である。
【図２】第１の実施の形態のデジタルカメラ１の動作を示すフローチャートである。
【図３】第１の実施の形態において、画像表示部１５に表示される画面の様子を示す図である。
【図４】第２の実施の形態のデジタルカメラ１の動作を示すフローチャートである。
【図５】第２の実施の形態において、画像表示部１５に表示される画面の様子を示す図である。
【図６】第３の実施の形態のデジタルカメラ１の動作を示すフローチャートである。
【図７】第３の実施の形態において、画像表示部１５に表示される画面の様子を示す図である。
【符号の説明】
【００９４】
１      デジタルカメラ
２      撮影レンズ
３      レンズ駆動ブロック
４      絞り
５      ＣＣＤ
６      ドライバ
７      ＴＧ
８      ユニット回路
９      画像生成部
１０    ＣＰＵ
１１    キー入力部
１２    メモリ
１３    ＤＲＡＭ
１４    フラッシュメモリ
１５    画像表示部
１６    バス
【図１】
2007325152.tif 000003
【図２】
2007325152.tif 000004
【図３】
2007325152.tif 000005
【図４】
2007325152.tif 000006
【図５】
2007325152.tif 000007
【図６】
2007325152.tif 000008
【図７】
2007325152.tif 000009