(57)【要約】      （修正有）【課題】動画を撮影中に静止画撮影を行う際、動画と静止画を一つの画面の中で区別して表示すると共に静止画撮影で変った動画像の画角やフレーミングを静止画像撮影前の動画撮影時の画角と一致させ得る撮像装置、動画撮影中の静止画撮影方法、及びプログラムの提供。【解決手段】動画撮影中（ａ）に、シャッターを半押しすると、静止画プレビュー画像７１が表示される（ｂ）。望遠側にズーム操作するとズームされた高画質の静止画７２が低画質の動画像６２に上書き表示される（ｃ）、（ｄ）。静止画撮影開始時に直前のズーム位置データと１フレーム分の動画像データを記憶しておき。静止画撮影が終了すると、それを取り出して静止画撮影直前のズーム位置を回復して、更に静止画撮影直前の静止画部分画像（半透過画像）６５を生成して動画７３上に表示し（ｅ）、デジタルムービーカメラの姿勢を微調整可能として（ｆ）動画撮影を違和感なく継続できる（ｇ）。【選択図】図３
2006129426.tif 000002
【特許請求の範囲】
【請求項１】
被写体を撮影してその画像データを生成し、記録する撮像装置において、
動画撮影開始指示により順次取り込まれる被写体像を動画像データに変換してワークメモリに順次記憶する動画像処理手段と、
静止画撮影指示により取り込まれる被写体像を静止画像データに変換してワークメモリに記憶する静止画像処理手段と、
動画ズームを指示する動画ズーム指示手段と、
前記動画ズーム指示手段の指示内容により、望遠側ズーム処理又はワイド側ズーム処理を行う動画ズーム処理手段と、
動画撮影中に静止画撮影指示があると、その時点の動画の画角情報を前記動画ズーム処理手段から取得して動画情報保持メモリに記憶する画角情報記憶手段と、
前記動画像処理手段に動画撮影中に取り込まれる被写体像を静止画像とは異なる画質の動画像データに変換させてワークメモリに記憶させる動画像取得手段及び静止画像処理手段に静止画撮影指示により取り込まれる被写体像を動画像とは異なる画質の静止画像データに変換させてワークメモリに記憶させる静止画像取得手段と、
前記動画像取得手段により取得された動画像データと前記静止画像取得手段により取得される静止画像データを画面内で区別可能に表示させる表示制御手段と、
静止画撮影後に、前記動画情報保持メモリに記憶されている画角情報を取り出して動画ズーム処理手段に与えて静止画撮影指示時点の画角を再現させる画角再現手段と、
を備えたことを特徴とする撮像装置。
【請求項２】
静止画ズームを指示する静止画ズーム指示手段と、
前記静止画ズーム指示手段の指示内容により、望遠側ズーム処理又はワイド側ズーム処理を行う静止画ズーム処理手段と、
を備え、
前記表示制御手段は、前記静止画ズーム指示手段による望遠側へのズーム指示があった場合には、前記動画像取得手段により取得される動画像データに前記静止画像取得手段により取得された静止画像データを上書きさせて画像表示させ、前記静止画ズーム指示手段によるワイド側へのズーム指示があった場合には、前記静止画像取得手段により取得される静止画像データに前記動画像取得手段により取得された動画像データを上書きさせて画像表示させる、ことを特徴とする請求項１記載の撮像装置。
【請求項３】
更に、前記静止画撮影指示の時点に前記動画像処理手段によって取り込まれた１フレーム分の動画データを取得して前記動画情報保持メモリに記憶する動画データ保持手段と、静止画撮影が終了すると、前記動画情報保持メモリに記憶されている動画データを取り出して画面のサイズより小さなサイズに切出した静止画像データを生成する静止画データ生成手段と、を備え、前記表示制御手段は、前記動画像取得手段により取得された動画像データと前記静止画データ生成手段により生成された静止画像データを画面内で区別可能に画像表示させる手段を含む、ことを特徴とする請求項１または２に記載の撮像装置。
【請求項４】
前記静止画像データ生成手段は、前記動画情報保持メモリから取り出した１フレーム分の動画データを半透過の静止画像データに変換させる手段を含むことを特徴とする請求項３に記載の撮像装置。
【請求項５】
画像データを保存記録する保存メモリを備え、
静止画記録指示があるとワークメモリに記憶された動画像データを取り出して前記保存メモリに記録し、前記動画撮影終了指示があると、前記ワークメモリに記憶された動画像データを取り出して前記保存メモリに記録する記憶制御手段を備えたことを特徴とする請求項１記載の撮像装置。
【請求項６】
画像データを保存記録する保存メモリを備え、動画撮影終了指示があると、前記ワークメモリに記憶された動画像データ及び静止画像データを取り出して保存メモリに記録する記憶制御手段を備えたことを特徴とする請求項１記載の撮像装置。
【請求項７】
前記記憶制御手段は、保存記録の際、静止画像データを動画像データのコマに対応付けて記録することを特徴とする請求項６記載の撮像装置。
【請求項８】
前記記憶制御手段は、動画撮影中に静止画撮影指示があった場合には、静止画撮影期間に前記ワークメモリに記憶された動画像データの前記保存メモリへの記録を禁止する手段を含むことを特徴とする請求項５または６に記載の撮像装置。
【請求項９】
前記記憶制御手段は動画撮影中に静止画撮影を行った場合に該静止画撮影期間内にワークメモリに記憶された動画像データも保存メモリに記録することを特徴とする請求項５または６に記載の撮像装置。
【請求項１０】
前記動画ズーム処理手段及び前記静止画ズーム処理手段は、ズームレンズを指示された方向に移動させる光学ズーム手段であることを特徴とする請求項２記載の撮像装置。
【請求項１１】
前記動画ズーム処理手段及び前記静止画ズーム処理手段は、撮影指示により取り込まれる被写体像を電子的にズーム処理する電子ズーム手段であることを特徴とする請求項２記載の撮像装置。
【請求項１２】
前記動画ズーム処理手段はズームレンズを指示された方向に移動させる光学ズーム手段であり、前記静止画ズーム処理手段は撮影指示により取り込まれる被写体像を電子的にズーム処理する電子ズーム手段であること、を特徴とする請求項２記載の撮像装置。
【請求項１３】
前記動画像取得手段は、前記動画像処理手段に動画撮影中に取り込まれる被写体像を相対的に低画質の動画像データに変換させることにより静止画像とは異なる画質の動画像データを得る手段を含み、
前記静止画像取得手段は、前記静止画像処理手段に前記静止画撮影指示により取り込まれる被写体像を相対的に高画質の静止画像データに変換させることにより動画像とは異なる画質の静止画像データを得る手段と、を含むことを特徴とする請求項１乃至４のいずれか１項に記載の撮像装置。
【請求項１４】
前記動画像取得手段は、前記動画像処理手段に動画撮影中に取り込まれる被写体像を半透過動画像データに変換させる手段を含むことを特徴とする請求項１３に記載の撮像装置。
【請求項１５】
被写体を撮影してその画像データを生成し、記録する撮像装置における動画撮影時の静止画表示方法であって、
動画撮影開始指示により順次取り込まれる被写体像を動画像データに変換してワークメモリに順次記憶し、動画撮影中に静止画撮影指示があると、動画撮影中に取り込まれる被写体像を静止画像とは異なる画質の動画像データに変換すると共に、前記静止画撮影指示により取り込まれる被写体像を動画像とは異なる画質の静止画像データに変換してワークメモリに記憶し、前記動画像データに前記静止画像データを上書きして表示させ、
動画ズーム指示があるとその指示内容により、望遠側ズーム処理又はワイド側ズーム処理を行い、ズームの結果得た静止画像データと前記動画像データを区別して表示させ、
動画撮影中に静止画撮影指示があると、その時点の前記動画の画角情報を取得してワークメモリに記憶し、静止画撮影後に、ワークメモリに記憶されている画角情報を取り出して静止画撮影指示時点の画角を再現する、
ことを特徴とする動画撮影時の静止画表示方法。
【請求項１６】
望遠側へのズーム指示があった場合には動画像データに静止画像データを上書きさせて画像表示させ、ワイド側へのズーム指示があった場合には静止画像データに動画像データを上書きさせて画像表示させる、ことを特徴とする請求項１５に記載の動画撮影時の静止画表示方法。
【請求項１７】
前記静止画撮影指示があると、更に、前記静止画撮影指示の時点に取り込まれた１フレーム分の動画データを取得してワークメモリに記憶し、
静止画撮影が終了すると、ワークメモリに記憶されている動画データを取り出して画面のサイズより小さなサイズに切出した静止画像データを生成し、静止画撮影終了後に表示される動画と前記静止画データ生成手段により生成された静止画像データを元にした静止画像を画面内で区別可能に表示させる、
ことを特徴とする請求項１５または１６に記載の動画撮影時の静止画表示方法。
【請求項１８】
前記静止画像データは、前記ワークメモリから取り出した動画データを半透過動画像データに変換させる、ことを特徴とする請求項１５または１６に記載の動画撮影時の静止画表示方法。
【請求項１９】
前記静止画像とは異なる画質の動画像データは相対的に低画質の動画像データであり、前記動画像とは異なる画質の静止画像データは相対的に高画質の静止画像データであることを特徴とする請求項１５または１６に記載の動画撮影時の静止画表示方法。
【請求項２０】
前記静止画像とは異なる画質の動画像データは半透過動画像データであることを特徴とする請求項１５または１６に記載の動画撮影時の静止画表示方法。
【請求項２１】
請求項１５乃至２０のいずれか１項に記載の動画撮影時の静止画表示方法を撮像装置のコンピュータに実行させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、デジタルムービーカメラ等の撮像装置で動画を撮影している途中に静止画撮影を行う際や静止画撮影後の動画と静止画の表示／撮影技術に関する。
【背景技術】
【０００２】
近年、通常の静止画撮影機能に加え動画撮影機能を備えたデジタルムービーカメラが市販されている。このようなデジタルムービーカメラにおいて、動画撮影中に動画撮影を停止することなく、静止画の撮影もできるカメラが提案されている。また、さらに静止画像や動画像と音声とを同時に録音する音声録音機能を備えたものがある。
【０００３】
このようなデジタルムービーカメラでは、通常、撮影モードとして静止画撮影を行う静止画撮影モードと、動画撮影を行う動画撮影モードを設け、キー操作等のユーザ操作によってモード遷移を行う仕様になっている。
【０００４】
また、デジタルムービーカメラにおいて、動画撮影中に静止画撮影を行いたい場合があるが、下記特許文献１乃至特許文献４には、デジタルムービーカメラにおいて動画撮影中に静止画撮影を行う方法が開示されている。
【０００５】
特許文献１に開示の方法は、動画撮影中に静止画の撮影操作に応じて、動画フレーム周期で動画フレームを撮像してバッファメモリに記憶する動作を行いながら、次の動画フレームを記録する間に静止画を撮像して記録する。つまり動画撮影処理と静止画撮影処理とを並行して行うものである。また、下記特許文献４には、デジタルムービーカメラにおいて、動画像を撮影している途中、撮影を中断することなく、画質を変更する方法が開示されている。
【０００６】
特許文献２に開示の方法は、動画撮影中に静止画の撮影操作があったとき、動画フレームの撮像及び記憶動作をいったん中断し、その間に静止画を撮影して記録した後、動画フレームの撮像及び記憶を再開する。つまり静止画撮影を割り込み処理によって行い、動画撮影が終了した時点では、静止画撮影中に記録できなかった中断期間の動画フレームに対応する補間用のフレームを別途生成して記憶しておき、動画再生時には、中断期間に補間用のフレームを表示させることにより、結果として動画撮影中の静止画撮影を可能とするものである。
【０００７】
特許文献３に開示の方法は、動画撮影と静止画撮影のできるカメラにおいて、ファインダ上に動画と静止画を重ねてワクで区別して表示するものである。
【０００８】
特許文献４に開示の方法は、動画像を撮像する機能を備え、撮像された画像を圧縮して記録するデジタルムービーカメラにおいて、動画像撮影中において、画像の圧縮率を変更させるための指令を入力するための入力部、および動画像撮影中において、入力部からの指令に基づいて、画像の圧縮率を変更させるものである。ビットレートは、予めビットレートが登録されたビットレートレジスタから初期値として与えられるか、録画ボタン等の押圧によって変動値として入力されるように構成され、押圧時間が長いほど動画の画質が高くなるというものである。
【０００９】
【特許文献１】特開平１１−５５６１７号公報（「００１０」及び「００１１」段落、図２参照）
【特許文献２】特開２００１−１１１９３４号公報（「００２９」〜「００３２」段落、図１、図４参照）
【特許文献３】特開２００３−２５９１６１号公報（「００１０」〜「００１７」段落、図２，図４参照）
【特許文献４】特開２０００−２７０２５１号公報（「００２０」〜「００３９」段落、図３参照）
【発明の開示】
【発明が解決しようとする課題】
【００１０】
しかしながら、特許文献１または２に記載の技術では、動画を撮影中に静止画を撮影することができるが、撮影時の構図を確認する工夫には特に言及していない。  
また、特許文献３に記載の技術では、撮影者が静止画と動画それぞれ撮像可能なエリア（構図）差を常時モニタリングしながら撮影できるので、高精細静止画を撮った後、標準動画撮影に切り替えた時のエリア（構図）縮小の違和感を軽減できる。−方、動画撮影を行った後、高精細静止画撮影に切り替えた時に生じるエリア（構図）拡大の違和感を軽減できるというものであるが、動画と静止画で画角を変えること、ズームアップすることは想定されていないという課題があった。  
例えば、子供の演奏会の撮影では子供の出演している演奏の全体を動画撮影しつつも、自分の子供をズームアップしてきれいな画像で撮影したい場合や、運動会のリレー競技を動画撮影している際、ある撮影チャンスで子供を異なった構図で静止画撮影したい、といった場合がある。  
このように、動画撮影とは異なる構図で静止画を撮影する場合には静止画の画角やフレーミングを変えて撮影したくなる場合が多い。このような場合に、静止画撮影前に実行されていた動画撮影処理で得た動画の画角やフレーミングと、静止画撮影後に再開された動画撮影時の画角やフレーミングが異なることが多いが、ユーザがカメラの画角やフレーミングを変えて静止画撮影前に実行されていた動画撮影時の画角やフレーミングを再現することが困難であるため、記録された動画の画角やフレーミングにずれが生じ、動画再生時に静止画撮影前の動画と静止画撮影直後の動画との間で違和感を感ずることとなる。
【００１１】
また、特許文献４に記載の技術では、動画撮影中に動画の画質を変更することはできるが、動画撮影中に撮影する静止画の画質変更については想定されていない点と、ビットレートは初期値以外は手動により設定することは想定されておらず、また、動画撮影中に静止画を撮影して表示する際に自動的に画質を切り替える点についても開示されていないといった課題があった。
【００１２】
本発明は、上記課題を解決するためになされたものであり、動画を撮影している途中に静止画撮影を行う際、動画と静止画を一つの画面の中で区別して表示すると共に静止画撮影で変った動画像の画角やフレーミングを静止画像撮影前の動画撮影時の画角と一致させ得る撮像装置、動画撮影中の静止画撮影方法、及びプログラムの提供を目的とする。
【課題を解決するための手段】
【００１３】
上記課題を解決するために、請求項１に記載の発明では、被写体を撮影してその画像データを生成し、記録する撮像装置において、動画撮影開始指示により順次取り込まれる被写体像を動画像データに変換してワークメモリに順次記憶する動画像処理手段と、静止画撮影指示により取り込まれる被写体像を静止画像データに変換してワークメモリに記憶する静止画像処理手段と、動画ズームを指示する動画ズーム指示手段と、動画ズーム指示手段の指示内容により、望遠側ズーム処理又はワイド側ズーム処理を行う動画ズーム処理手段と、動画撮影中に静止画撮影指示があると、その時点の動画の画角情報を動画ズーム処理手段から取得して動画情報保持メモリに記憶する画角情報記憶手段と、動画像処理手段に動画撮影中に取り込まれる被写体像を静止画像とは異なる画質の動画像データに変換させてワークメモリに記憶させる動画像取得手段及び静止画像処理手段に静止画撮影指示により取り込まれる被写体像を動画像とは異なる画質の静止画像データに変換させてワークメモリに記憶させる静止画像取得手段と、動画像取得手段により取得された動画像データと静止画像取得手段により取得される静止画像データを画面内で区別可能に表示させる表示制御手段と、静止画撮影後に、動画情報保持メモリに記憶されている画角情報を取り出して動画ズーム処理手段に与えて静止画撮影指示時点の画角を再現させる画角再現手段と、を備えたことを特徴とする撮像装置を提供する。  
これにより、動画撮影中に動画とは異なる構図の静止画撮影を行うことができる。また、撮影時に静止画の画質を動画とは異なる画質の画像として動画表示するので、同一画面上に表示される動画像と静止画像を区別しやすくなり、表示する静止画の構図がわかりやすい。また、静止画撮影後にその静止画撮影開始時点の画角に戻すので静止画撮影開始時点のフレームと略同じ撮影アングルで動画撮影できるのでスムースな動画継続が可能となる。
【００１４】
また、請求項２に記載の発明では、静止画ズームを指示する静止画ズーム指示手段と、静止画ズーム指示手段の指示内容により、望遠側ズーム処理又はワイド側ズーム処理を行う静止画ズーム処理手段と、を備え、表示制御手段は、静止画ズーム指示手段による望遠側へのズーム指示があった場合には、動画像取得手段により取得される動画像データに静止画像取得手段により取得された静止画像データを上書きさせて画像表示させ、静止画ズーム指示手段によるワイド側へのズーム指示があった場合には、静止画像取得手段により取得される静止画像データに動画像取得手段により取得された動画像データを上書きさせて画像表示させる、ことを特徴とする請求項１記載の撮像装置を提供する。  
これにより、望遠側にズームした場合には、静止画像の表示サイズが動画像より小さくなるので、例えば、画面一杯分に表示される動画像上に画面中央にズームアップされる異なる画質の静止画像を表示できることから、動画とは異なる構図で動画と同一画面上に表示される静止画を動画と区別でき、分かりやすい。また、ワイド側にズームした場合、つまり、動画像より静止画像のほうが大きいようにズームした場合は、例えば、動画像の表示サイズが静止画像より小さくなるので画面一杯に表示された静止画像に異なる画質の動画像を画面中央で表示できることから、動画とは異なる構図で動画と同一画面上に表示される静止画を動画と区別でき、分かりやすい。
【００１５】
また、請求項３に記載の発明では、更に、静止画撮影指示の時点に動画像処理手段によって取り込まれた１フレーム分の動画データを取得して動画情報保持メモリに記憶する動画データ保持手段と、静止画撮影が終了すると、動画情報保持メモリに記憶されている動画データを取り出して画面のサイズより小さなサイズに切出した静止画像データを生成する静止画データ生成手段と、を備え、表示制御手段は、動画像取得手段により取得された動画像データと静止画データ生成手段により生成された静止画像データを画面内で区別可能に画像表示させる手段を含む、ことを特徴とする請求項１または２に記載の撮像装置を提供する。  
これにより、静止画撮影後の動画にその静止画撮影開始時点に取り込まれた動画像から生成した静止画像を区別可能に表示するので、撮像装置の姿勢を微調整することにより撮影アングルを動画撮影停止直前の撮影アングルに合わせやすいのでよりスムースな動画継続が可能となる。
【００１６】
また、請求項４に記載の発明では、静止画像データ生成手段は、動画情報保持メモリから取り出した１フレーム分の動画データを半透過の静止画像データに変換させる手段を含むことを特徴とする請求項３に記載の撮像装置を提供する。  
これにより、静止画撮影後の動画にその静止画撮影開始時点に取り込まれた動画像から生成した静止画像を半透過静止画像として表示できるので、動画と生成された静止画の比較がしやすいので撮像装置の姿勢の調整が容易になる。
【００１７】
また、請求項５に記載の発明では、画像データを保存記録する保存メモリを備え、静止画記録指示があるとワークメモリに記憶された動画像データを取り出して保存メモリに記録し、動画撮影終了指示があると、ワークメモリに記憶された動画像データを取り出して保存メモリに記録する記憶制御手段を備えたことを特徴とする請求項１記載の撮像装置を提供する。  
これにより、個々のシャッターチャンスで撮影した静止画像を撮影のたびごとに記録できることからワークメモリの静止画記憶領域が１フレーム分で済み、ワークメモリの記憶領域を動画記憶用に用いることができる。
【００１８】
また、請求項６に記載の発明では、画像データを保存記録する保存メモリを備え、動画撮影終了指示があると、ワークメモリに記憶された動画像データ及び静止画像データを取り出して保存メモリに記録する記憶制御手段を備えたことを特徴とする請求項１記載の撮像装置を提供する。  
これにより、個々のシャッターチャンスで撮影した静止画像をワークメモリにそれぞれ記憶しておき動画撮影終了時に動画と各静止画像を記録することから、撮影中は画像の記録が行われないので、撮影中は画像記録処理の必要がないのでその分撮影処理速度が早くなる。また、画像の記録制御が簡単になる。
【００１９】
また、請求項７に記載の発明では、記憶制御手段は、保存記録の際、静止画像データを動画像データのコマに対応付けて記録することを特徴とする請求項６記載の撮像装置を提供する。  
これにより、撮影した動画と動画撮影中に撮影した静止画像を対応付けて保存記録することができるので、例えば、再生時に再生した動画像と静止画像を撮影時のように区別して同一画面上に表示することができる。また、再生時に動画と静止画を別々に再生表示することもできる。
【００２０】
また、請求項８に記載の発明では、記憶制御手段は、動画撮影中に静止画撮影指示があった場合には、静止画撮影期間にワークメモリに記憶された動画像データの保存メモリへの記録を禁止する手段を含むことを特徴とする請求項５または６に記載の撮像装置を提供する。  これにより、動画再生時には静止画撮影期間に画角が変化したり画像の位置がずれた動画が再生されないので編集の手間がからない。また、再生画像を見ていても違和感を生じない。
【００２１】
また、請求項９に記載の発明では、記憶制御手段は動画撮影中に静止画撮影を行った場合に該静止画撮影期間内にワークメモリに記憶された動画像データも保存メモリに記録することを特徴とする請求項５または６に記載の撮像装置を提供する。  
これにより、動画再生時には静止画撮影期間に画角が変化したり画像の位置がずれた動画が再生される可能性があるが、画角の変化や画像の位置のずれが無視できるほどの場合には請求項７に記載の発明のように静止画撮影期間内の動画保存を禁止してその期間内の動画が再生できない場合よりは動画の時間的連続性を維持できるので、ストーリー性を失うことがない。また、画角の変化や画像の位置のずれが大きくて編集の手間がかかる場合もあるにしても、画像の変化の意外性をストーリーにできるといったように、静止画撮影期間内の動画保存を禁止してその期間内の動画が再生できない場合よりは画像再生時の自由度が高い。
【００２２】
また、請求項１０に記載の発明では、動画ズーム処理手段及び静止画ズーム処理手段は、ズームレンズを指示された方向に移動させる光学ズーム手段であることを特徴とする請求項１記載の撮像装置を提供する。  
これにより、動画ズーム時および静止画ズーム時に明瞭な画像を得ることができる。
【００２３】
また、請求項１１に記載の発明では、動画ズーム処理手段及び静止画ズーム処理手段は、撮影指示により取り込まれる被写体像を電子的にズーム処理する電子ズーム手段であることを特徴とする請求項１に記載の撮像装置を提供する。  
これにより、光学ズームの際のようにズームレンズの移動時間を考慮しなくてもよいので、動画の連続性を保ったまま動画と静止画を撮影できる。
【００２４】
また、請求項１２に記載の発明では、動画ズーム処理手段はズームレンズを指示された方向に移動させる光学ズーム手段であり、静止画ズーム処理手段は撮影指示により取り込まれる被写体像を電子的にズーム処理する電子ズーム手段であること、を特徴とする請求項１記載の撮像装置を提供する。  
これにより、動画ズームは光学ズームで明瞭な画像を得ることができ、静止画ズームの際はズームレンズの移動時間を考慮しなくてもよいので、動画の連続性を保ったまま動画と静止画を撮影できる。また、静止画は動画より高画質なので、電子ズームによる画質の低下を防止できる。
【００２５】
また、請求項１３に記載の発明では、動画像取得手段は、動画像処理手段に動画撮影中に取り込まれる被写体像を相対的に低画質の動画像データに変換させることにより静止画像とは異なる画質の動画像データを得る手段を含み、静止画像取得手段は、静止画像処理手段に静止画撮影指示により取り込まれる被写体像を相対的に高画質の静止画像データに変換させることにより動画像とは異なる画質の静止画像データを得る手段と、を含むことを特徴とする請求項１乃至４のいずれか１項に記載の撮像装置を提供する。  
これにより、動画撮影時に、静止画を撮影した際に表示される静止画の画質を動画より高画質（＝高解像度）の画像として表示するので、動画像と静止画像を区別しやすくなり、動画と共に表示する静止画の構図がわかりやすい。
【００２６】
また、請求項１４に記載の発明では、動画像取得手段は、動画像処理手段に動画撮影中に取り込まれる被写体像を半透過動画像データに変換させる手段を含むことを特徴とする請求項１３に記載の撮像装置を提供する。  
これにより、静止画を撮影した際に表示される動画の画質を静止画より低画質の画像として表示するので、動画像と静止画像を区別しやすくなり、動画と共に表示する静止画の構図がわかりやすい。
【００２７】
また、請求項１５に記載の発明では、被写体を撮影してその画像データを生成し、記録する撮像装置における動画撮影時の静止画表示方法であって、動画撮影開始指示により順次取り込まれる被写体像を動画像データに変換してワークメモリに順次記憶し、動画撮影中に静止画撮影指示があると、動画撮影中に取り込まれる被写体像を静止画像とは異なる画質の動画像データに変換すると共に、静止画撮影指示により取り込まれる被写体像を動画像とは異なる画質の静止画像データに変換してワークメモリに記憶し、動画像データに静止画像データを上書きして表示させ、動画ズーム指示があるとその指示内容により、望遠側ズーム処理又はワイド側ズーム処理を行い、ズームの結果得た静止画像データと動画像データを区別して表示させ、動画撮影中に静止画撮影指示があると、その時点の動画の画角情報を取得してワークメモリに記憶し、静止画撮影後に、ワークメモリに記憶されている画角情報を取り出して静止画撮影指示時点の画角を再現する、ことを特徴とする動画撮影時の静止画表示方法を提供する。  
これにより、動画撮影中に動画とは異なる構図の静止画撮影を行うことができる。また、撮影時に静止画の画質を動画とは異なる画質の画像として動画表示するので、同一画面上に表示される動画像と静止画像を区別しやすくなり、表示する静止画の構図がわかりやすい。また、静止画撮影後にその静止画撮影開始時点の画角に戻すので静止画撮影開始時点のフレームと略同じ撮影アングルで動画撮影できるのでスムースな動画継続が可能となる。
【００２８】
また、請求項１６に記載の発明では、望遠側へのズーム指示があった場合には動画像データに静止画像データを上書きさせて画像表示させ、ワイド側へのズーム指示があった場合には静止画像データに動画像データを上書きさせて画像表示させる、ことを特徴とする請求項１５に記載の動画撮影時の静止画表示方法を提供する。  
これにより、望遠側にズームした場合には、静止画像の表示サイズが動画像より小さくなるので、動画像上に異なる画質の静止画像を表示できることから、動画とは異なる構図で動画と同一画面上に表示される静止画を動画と区別でき、分かりやすい。また、ワイド側にズームした場合、つまり、動画像より静止画像のほうが大きいようにズームした場合は、例えば、動画像の表示サイズが静止画像より小さくなるので静止画像上に異なる画質の動画像を画面中央で表示できることから、動画とは異なる構図で動画と同一画面上に表示される静止画を動画と区別でき、分かりやすい。
【００２９】
また、請求項１７に記載の発明では、静止画撮影指示があると、更に、静止画撮影指示の時点に取り込まれた１フレーム分の動画データを取得してワークメモリに記憶し、静止画撮影が終了すると、ワークメモリに記憶されている動画データを取り出して画面のサイズより小さなサイズに切出した静止画像データを生成し、静止画撮影終了後に表示される動画と静止画データ生成手段により生成された静止画像データを元にした静止画像を画面内で区別可能に表示させる、ことを特徴とする請求項１５または１６に記載の動画撮影時の静止画表示方法を提供する。  
これにより、静止画撮影後の動画にその静止画撮影開始時点に取り込まれた動画像から生成した静止画像を半透過静止画像として表示できるので、動画と生成された静止画の比較がしやすいので撮像装置の姿勢の調整が容易になる。
【００３０】
また、請求項１８に記載の発明では、静止画像データは、ワークメモリから取り出した動画データを半透過動画像データに変換させる、ことを特徴とする請求項１５または１６に記載の動画撮影時の静止画表示方法を提供する。  
これにより、静止画撮影後の動画にその静止画撮影開始時点に取り込まれた動画像から生成した静止画像を半透過静止画像として表示できるので、動画と生成された静止画の比較がしやすいので撮像装置の姿勢の調整が容易になる。
【００３１】
また、請求項１９に記載の発明では、静止画像とは異なる画質の動画像データは相対的に低画質の動画像データであり、動画像とは異なる画質の静止画像データは相対的に高画質の静止画像データであることを特徴とする請求項１５または１６に記載の動画撮影時の静止画表示方法を提供する。  
これにより、動画撮影時に、静止画を撮影した際に表示される静止画の画質を動画より高画質の画像として表示するので、動画像と静止画像を区別しやすくなり、動画と共に表示する静止画の構図がわかりやすい。
【００３２】
また、請求項２０に記載の発明では、静止画像とは異なる画質の動画像データは半透過動画像データであることを特徴とする請求項１５または１６に記載の動画撮影時の静止画表示方法を提供する。  
これにより、静止画を撮影した際に表示される動画の画質を静止画より低画質の画像として表示するので、動画像と静止画像を区別しやすくなり、動画と共に表示する静止画の構図がわかりやすい。
【００３３】
また、請求項２１に記載の発明では、請求項１５乃至２０のいずれか１項に記載の動画撮影時の静止画表示方法を撮像装置のコンピュータに実行させることを特徴とするプログラムを提供する。  
これにより、撮像装置は、撮影者による静止画撮影指示により、動画撮影中に動画とは異なる構図の静止画撮影を行うことができる。また、静止画撮影時に静止画の画質を動画とは異なる画質の画像として動画表示するので、同一画面上に表示される動画像と静止画像を区別しやすくなり、表示する静止画の構図がわかりやすい。また、静止画撮影後にその静止画撮影開始時点の画角に戻すので静止画撮影開始時点のフレームと略同じ撮影アングルで動画撮影でき、スムースな動画継続が可能となる。
【発明の効果】
【００３４】
本発明により、動画撮影中に動画構図とは異なる構図の静止画を同時に撮影し、同一画面上に区別して表示することができる。また、静止画撮影時点の画角情報等を記憶しておき、静止画撮影終了後に記録してあったその画角情報等を用いることにより静止画撮影中に動画ズームを行なって動画の画角を変えたり、静止画撮影時に構図や位置を変えても自動的に動画を静止画撮影開始直前の画角に戻したり、簡単に画像位置の微調整ができるので静止画撮影前の動画と静止画撮影終了直後に撮影再開により表示される動画との間で違和感を生じない。
【発明を実施するための最良の形態】
【００３５】
図１は本発明のデジタルムービーカメラの外観を示す斜視図であり、図１（ａ）は斜視図であり、図１（ｂ）は操作ボタン（キー）の配置例を示す図である。  
図１（ａ）で符号１０はデジタルムービーカメラ１００の本体部、符号１はレンズ鏡筒部、符号５はホルダ、符号１５は音声入力用のマイクロフォン、符号１１１は撮影レンズを示す。レンズ鏡筒部１は、光学ズーム機能付きの撮影レンズ群等の光学系などを収めたものであり、レンズ鏡筒部１の後端に配置された撮像素子の受光面に被写体の像を結像させるものである。
【００３６】
カメラ本体部１０の上面には操作ボタン、例えば、図１（ｂ）に示すような動画用ズームキー３１、静止画用ズームキー３２、動画・録画開始／停止ボタン３３、静止画撮影用のシャッターボタン３４、動画撮影終了ボタン３５、カーソル３６、及びその他図示しない各種機能ボタン等が配設されている。なお、図示の例では、ズームキー３１、３２はワイド側ズームを指示するＷボタンと望遠側ズームを指示するＴボタンからなっている。また、静止画撮影用シャッターボタン３４は半押しと全押しの２段押し構成をなし、半押し操作でデジタルムービーカメラ１００は露出等の設定およびＡＦ（オートフォーカス（自動合焦））処理を行い、全押し操作で画像をキャプチャ（記録）するものとする。
【００３７】
また、カメラ本体部１０の右側面（図１（ａ）では裏面）には図示されていないが本体部１０の前側部の辺と蝶番部材で扉状に開閉可能に接続され、且つ電気的にも接続された液晶表示画面が設けられており、本体部１０に対し閉状態では液晶表示画面を内側にして背部に密着して本体部１０と一体となり、開状態では本体部１０に対して約９０°の角度まで開くことができる。従って、撮影者は、撮影時に表示される動画や動画撮影中に撮影された静止画のプレビュー画像や動画とは異なる構図の静止画を見たり、再生時に表示される再生画像を見ることができる。  
また、本体部の背部又は底部には電源電池を収納する電池収納部や外部機器とのデータ授受のための端子部（例えば、ＵＳＢ端子部）や電池充電用端子や三脚固定用のネジ穴等（図示せず）が設けられている。
【００３８】
図２はデジタルムービーカメラ１００の撮影操作及び動画撮影中に撮影する静止画像の表示例の説明図であり、図２（ａ）は動画撮影中に表示される動画像の例、図２（ｂ）は動画撮影中に静止画撮影を行った場合に表示される静止画プレビュー画像の例、図２（ｃ）は静止画ズーム操作（望遠側ズーム）時に表示される静止画像の例、図２（ｃ’）は静止画ズーム操作（ワイド側ズーム）時に表示される静止画像の例、図２（ｄ）は移動操作によって移動した静止画像の例、図２（ｅ）は静止画ズームアップ操作によりズームアップされた静止画像の例、図２（ｆ）は移動操作によって移動した静止画像の例を示す。  
また、図２（ｃ）、（ｄ）、（ｅ）の右上に示した静止画用ズームキー３２のＷボタン又はＴボタンに付けた○印は、印が付けられたボタンが押されたことを意味し、図２（ｄ）及び図２（ｆ）の右上に示したカーソル３６に付けた丸印は、丸印が付けられた方向が選択されたことを意味する。また、符号６０は動画撮影中を示すアイコン、符号７０は静止画撮影モードを示すアイコンを意味する。以下、図１及び図２を基に動画撮影中に静止画撮影操作を行った場合の表示例について説明する。
【００３９】
撮影者があるシーン（この例では、室内で行われている子供の誕生会）で、デジタルムービーカメラ１００の動画・録画開始／停止ボタン３３を押すと動画撮影が開始され、画角内の被写体像が取り込まれ動画像６１が表示される。また、この際、動画表示を意味するアイコン６０が表示される（図２（ａ））。
【００４０】
次に、撮影者がシャッターボタン３４を半押し操作すると、静止画プレビュー画像（撮影中の動画と同じ構図の高画質（＝高解像度）の静止画）７１が画面一杯の動画上に同じ大きさで表示される。また、この際、静止画撮影モードを意味するアイコン７０が表示される（図２（ｂ））。
【００４１】
ここで、撮影者が静止画用ズームキー３２のＴボタンを押すとズームレンズが望遠側に移動し、撮影中の動画映像が低画質（＝低解像度）の動画像６２として画面一杯に動画表示され、ズームアップされた高画質の静止画７２が動画像６２上に表示される（図２（ｃ））。なお、撮影者が静止画用ズームキー３２のＷボタンを押すとズームレンズがワイド側に移動し、ワイド側にズームされた高画質の静止画７３が画面一杯に表示され、撮影中の動画像が低画質の画像６３として静止画７３上に表示される（図２（ｃ’））。
【００４２】
また、上記図２（ｃ）で撮影者がカーソル３６を操作すると静止画撮影範囲を移動させることができる（図示の例は、静止画の撮影範囲を左下の子供２人に合わせるためカーソル３６を下方向に移動操作した例である）。これにより、撮影中の動画６４の構図はそのままで、静止画７４の撮影範囲を所望の構図に変更することができる（図２（ｄ））。
【００４３】
更に、撮影者が静止画用ズームキー３２のＴボタンを押して動画６４のズームアップ操作を行ってズームアップされた静止画７５を得たり（図２（ｅ））、カーソル３６を操作して静止画撮影範囲を移動させて構図の微調整を行い、静止画７６を得ることができる（図２（ｆ））。
【００４４】
上述のようにして所望の構図の静止画を表示した後、撮影者はシャッターボタン３４を全押して静止画をフラッシュメモリ等の保存メモリに記録する。また、動画・録画終了ボタン３５を押して動画撮影を終了させ、撮影済みの動画をフラッシュメモリ等の保存メモリに記録することもできる。
【００４５】
上記図２に示したシーンは、三脚で長時間動画撮影したい幼稚園のお遊戯会やバレーやピアノの発表会、図２に示したような誕生会、或いは子供のサッカーの試合が好適である。従って、基本的には動画はそのまま撮りっぱなしで、注目する構図のみズームアップして静止画撮影する場合であり、更に、この場合、デジタルムービーカメラ１００を三脚に固定して用いることにより、安定した構図の画像を得ることができる。
【００４６】
一方、運動会や観光地に行ったような場合は撮影時に頻繁にズームを変える場合が多い。図３はデジタルムービーカメラ１００で動画撮影中にズーム操作して撮影する静止画像の表示例の説明図であり、図３（ａ）は動画撮影中に表示される動画像の例、図３（ｂ）は動画撮影中にシャッターボタン３４を半押し操作した場合に画面いっぱいに表示される静止画プレビュー画像の例、図３（ｃ）は静止画ズーム操作（望遠側ズーム）時に表示される静止画像の例、図３（ｄ）は静止画ズームアップ操作により画面いっぱいにズームアップされた例静止画像の例、図３（ｅ）は本発明のズーム復帰方法によりズーム位置を復帰させた場合の動画と静止画撮影処理開始時点の画像の位置のずれの説明図、図３（ｆ）は図３（ｅ）の状態から動画と静止画撮影処理開始時点の静止画を一致させるようにして画像の位置を一致させた例、図３（ｇ）は静止画撮影処理開始直前の動画の画角に一致させた動画を示す。なお、図３における静止画用ズームキー３２のＷボタン又はＴボタンやカーソル３６につけた○印の意味や符号６０、７０の意味は上述した図２の場合と同様である。
【００４７】
以下、図１及び図３を基に動画撮影中に静止画撮影操作等を行った場合の表示例について説明する。  
撮影者があるシーン（この例では、図２の場合と同様に室内で行われている子供の誕生会を例としている）で、デジタルムービーカメラ１００の動画・録画開始／停止ボタン３３を押すと動画撮影が開始され、画角内の被写体像が取り込まれ動画像６１が表示される。また、この際、動画表示を意味するアイコン６０が表示される（図３（ａ））。
【００４８】
次に、撮影者が静止画撮影シャッターボタン３４を押すと、静止画プレビュー画像（撮影中の動画と同じ高画質の静止画７１が画面いっぱいに表示される。また、この際、静止画撮影モードを意味するアイコン７０が表示される（図３（ｂ））。
【００４９】
ここで、撮影者が静止画用ズームキー３２のＴボタンを押すとズームレンズが望遠側に移動し、撮影中の動画映像が低画質（＝低解像度）の動画像６２として画面一杯に動画表示され、ズームアップされた高画質の静止画７２が動画像６２上に表示される（図３（ｃ））。なお、撮影者が静止画用ズームキー３２のＷボタンを押すとズームレンズがワイド側に移動し、ワイド側にズームされた高画質の静止画７３が表示され、撮影中の動画像が低画質の画像６３として図２（ｃ‘）に示したように）画面一杯に表示される。
【００５０】
ここで、上記図３（ｃ）で撮影者が静止画用ズームキー３２のＴボタンを押し続けるとズームアップされ高画質の静止画が画面いっぱいに表示され、低画質の動画を覆うので動画の取り込み行なわれているが動画像は静止画の背後に隠れて見えなくなる（図３（ｄ））。
【００５１】
静止画撮影後に、後述するように静止画撮影直前のズーム位置を回復して静止画撮影開始時点（若しくは直前）の静止画（半透過画像）６５を生成して動画７３上に表示するが、運動会や観光地に行ったような場合は動画撮影で頻繁にズームを変えたりするほか、静止画撮影時にも所望の構図を得るため静止画や動画をズームしたり、カメラを少し動かしたりする場合が多いので、このような場合は静止画部分６５と動画部分７３がずれて違和感を生ずることになる（図３（ｅ））。
【００５２】
そこで、撮影者は、動画部分７３と静止画撮影処理開始時点（若しくは直前）の静止画部分６５の位置を一致させるようにデジタルムービーカメラ１００の姿勢を微調整することにより（図３（ｆ））、静止画撮影処理開始時点（若しくは直前）の動画の画角や位置に略一致させた動画撮影を継続できる（図３（ｇ））。
【００５３】
上記図３に示した方法によれば、静止画撮影開始時にはその時点（若しくは直前）の動画のズーム位置と動画データの一部を記憶しておき、静止画撮影時にズーム位置を復帰させると共に記憶していた動画デーから生成した静止画との画像位置を比較可能とし、画像位置が異なる場合には微調整できるので、運動会や観光地に行ったような場合のように撮影時に頻繁にズーム等を変えても、静止画撮影後に表示される動画には違和感が生じない。
【００５４】
図４は、デジタルムービーカメラ１００の概念的な機能ブロック図である。このブロック図では、図４（ａ）に示すように、便宜的に、撮像部１１、静止画像処理部１２、動画映像処理部１３、画質設定部１４、マイクロフォン（音声入力装置）１５、音声処理部１６、ストリーミング部１７、制御部２０、操作部３０、表示部４０、表示制御部４１、音声出力部４３、及び画像記憶部４５などの各機能ブロックに分けられている。
【００５５】
撮像部１１は、図４（ｂ）に示すように、光学系駆動モータ１１−１、光学ズーム機能付きの撮影レンズ群１１−２、ＣＣＤ或いはＣＭＯＳ等の撮像素子１１−３、タイミング発生器（ＴＧ）１１−４、垂直ドライバ１１−５、サンプルホールド回路（Ｓ／Ｈ）１１−６、Ａ／Ｄ変換器１１−７、及びメカニカルシャッター機構などを含む。なお、撮像素子１１−３は、タイミング発生器１１−４、垂直ドライバ１１−５、サンプルホールド回路１１−６及びＡ／Ｄ変換器１１−７などの付帯回路により、制御部２０からの制御信号に基づいてシャッター速度や露出値などを可変的に設定するとともに、前段のレンズ群１１−２を介して結像した画像を設定値に対応した電気信号に変換し、その電気信号をＡ／Ｄ変換器１１−７でデジタル信号に変換して一定の周期で静止画像処理部１２及び／又は動画映像処理部１３に出力する。
【００５６】
静止画像処理部１２は、図４（ｃ）に示すように、カラープロセス回路１２−１、画像符号化部１２−２、及びＤＭＡコントローラ１２−３等の回路からなり、カラープロセス回路１２−１で撮像部１１から入力されたデジタル信号を受けてＣＣＤ１１−３の画素に対応したベイヤーベースの形で一旦保持し、それを保管してＲＧＢデータを作成し、輝度成分（Ｙ）と色成分（Ｃｒ、Ｃｂ）の信号成分に分離し、制御部２０からの制御信号に基づいてその信号成分にホワイトバランス補正を施した後、画像符号化部１２−２（図６参照）で画像符号化処理を行って画質設定部１４により設定されたビットレート（高画質（＝高解像度）用のビットレート又は低画質（＝低解像度）用のビットレート）の画質の静止画像データとした後、ＤＭＡ（ Direct Memory Access）コントローラ１２−３によりその画像データをワークメモリ２０−４に転送し、一時的に記憶する。また、シャッター操作がされるとその時点の画像データを表示部４０に送ってプレビュー画像として静止画表示させる。
【００５７】
また、静止画像処理部１２は図示しないが保存記録の際にはワークメモリ２０−４（図５）に書き込まれている画像データを読み出して、ＪＰＥＧ圧縮処理を施して画像記憶部（保存メモリ）４５に保存記録し、再生時には画像記憶部４５に保存記録されていた圧縮画像データに伸張処理を施して画像データを再生する圧縮伸張部を備えている。
【００５８】
また、上記圧縮伸張部は複数の圧縮率に対応しており、圧縮率に対応させて記憶するモードには圧縮率の低い高解像度（一般に、高精密、ファイン、ノーマルなどと呼ばれる）に対応するモードと圧縮率の高い低解像度（一般にエコノミーなどと呼ばれる）に対応するモードがある。また、高画素数から低画素数にも対応している。例えば、ＳＸＧＡ、ＸＧＡ、ＳＶＧＡ、ＶＧＡ等と呼ばれる画像サイズがある。
【００５９】
動画映像処理部１３は、図４（ｄ）に示すように、カラープロセス回路１３−１、画像符号化部１３−２、及びＤＭＡコントローラ１３−３等の回路からなり、カラープロセス回路１３−１で撮像部１７から入力されたデジタル信号を輝度成分（Ｙ）と色成分（Ｃｒ、Ｃｂ）の信号成分に分離し、制御部２０からの制御信号に基づいてホワイトバランス補正を施した後、画像符号化部１３−２（図６参照）で画像符号化処理を行って画質設定部１４により設定されたビットレート（高画質（＝高解像度）用のビットレート又は低画質（＝低解像度）用のビットレート）の画質の動画像データとした後、ＤＭＡコントローラ１３−３によりその動画像データをストリーミング部１７に出力する。また、動画映像処理部１３は図示しないが保存記録の際にはワークメモリ２０−４に書き込まれている画像データを読み出して、動画圧縮処理を施して画像記憶部４５に保存記録し、再生時には画像記憶部４５に保存記録されていた圧縮画像データに伸張処理を施して画像データを再生する圧縮伸張部を備えている。
【００６０】
また、上記圧縮伸張部は複数の圧縮率に対応しており、圧縮率に対応させて記憶するモードは圧縮率の低い高解像度に対応するモードと圧縮率の高い低解像度に対応するモードがある。なお、圧縮伸縮部は静止画像処理部１２の画像符号化部１２−２および動画映像処理部１３の画像符号化部１３−２として用いることもできる。
【００６１】
画質設定部１４は、制御部２０からのビットレート設定変更指示があると、静止画像処理部１２の画像符号化部１２−２に高画質（＝高解像度）用のビットレート又は低画質（＝低解像度）用のビットレートを設定する。また、同様に、制御部２０からのビットレート設定変更指示により、動画映像処理部１３の画像符号化部１３−２に低画質用のビットレート又は高画質用のビットレートを設定する。
【００６２】
マイクロフォン（音響入力装置）１５は音声を入力して電気信号に変換して音声処理部１６に出力する。音声処理部１６は図示しないが音声ＩＣ及び音声符号化部を含みマイクロフォン１５からの電気信号（アナログ音声信号）をデジタル信号（デジタルデータ）に変換し、逐次ストリーミング部１７に出力する。
【００６３】
ストリーミング部１７は、動画映像処理部１３から送られる動画像データと音声処理部１６から送られる音声データを受信しながら同時にその動画像データを表示制御部４１に送って表示部４０で再生表示させると共に音声データを音声出力部４３に送って再生出力させる。また、ＣＰＵ２０−１の制御により動画像データをワークメモリ２０−４に一時的に記憶する。
【００６４】
静止画像処理部１２は本発明の静止画像処理手段に相当し、動画映像処理部１３及びストリーミング部１７は本発明の動画像処理手段に相当する。また、静止画像処理部１２及び画質設定部１４は本発明の静止画像取得手段に相当し、動画映像処理部１３、画質設定部１４及びストリーミング部１７は本発明の動画像取得手段に相当する。
【００６５】
制御部２０は、図５にそのブロック図を示すように、ＣＰＵ（ Central Processing Unit）２０−１を備えると共に、このＣＰＵ２０−１に、バス２０−２を介して、プログラムメモリ（例えば、ＲＯＭ）２０−３、ワークメモリ（例えば、ＤＲＡＭ）２０−４、データメモリ（例えば、ＲＡＭ）２０−５、タイマ２０−６、入力部２０−７、及び出力部２０−８などを接続して構成されている。  
【００６６】
ＣＰＵ２０−１はプログラムメモリ２０−３に格納された所定の制御プログラムを実行することにより、入力部２０−７からのデータの取り込み、例えば、静止画像処理部１２からの静止画像データ、ストリーミング部１７からの動画像データ及び音声データ、操作部３０からの各種キーの状態信号、画像記憶部４５からの圧縮画像データなどの取り込みや、出力部２０−８へのデータの書き出し、撮像部１１へのシャッター速度や露出設定値の制御信号、静止画像処理部１２及び／又は動画映像処理部１３へのホワイトバランス補正制御信号、表示制御部４１への表示用信号、画質設定部１４へのビットレート設定変更指示、画像記憶部４５への記録用画像データ（圧縮画像データ）等の書き出しを行う。  
また、メニュー処理を実行したときには、そのメニュー処理で選択された各種設定値をワークメモリ２０−４に不揮発的（電源をオフにしても情報を失わないこと）に書き込むなどして、デジタルムービーカメラ１００の全体動作を制御する。
【００６７】
操作部３０は、カメラ本体部１０に設けられた各種操作部ボタン、つまり、図１（ｂ）に示したような動画用ズームキー３１、静止画用ズームキー３２、動画・録画開始／停止ボタン３３、静止画撮影用シャッターボタン３４、動画画撮影終了ボタン３５、カーソル３６、及びその他各種機能ボタン等の操作に対応した状態信号を制御部２０に送出する。
【００６８】
表示制御部４１は、制御部２０から出力されたスルー画像（撮影待機画像）やプレビュー画像、静止画像、動画像又は各種設定画面などの表示信号を表示部４０の表示形式に変換して当該表示部４０に出力し、表示部４０の液晶表示画面に表示させるもので、表示制御部４１及び表示部４０は一体として表示手段を構成する。音声出力部４３はスピーカー等の音声再生装置からなり、受け取った音声信号を再生して外部に出力する。
【００６９】
画像記憶部４５は保存メモリに相当し、撮影画像（キャプチャ画像ともいう）を不揮発的に記録するための記録媒体で構成されており、たとえば、フラッシュメモリ等の半導体記憶デバイスや磁気メモリデバイスなどをその記録媒体に用いることができる。なお、画像記憶部４５は、例えば、メモリカードのような取り外し可能なメモリであって、電子カメラに実装するように構成されていてもよい。
【００７０】
図６は図４（ｃ）、（ｄ）に示した画像符号化部の構成例を示すブロック図であり、画像符号化部１２−２（１３−２）は、特許文献４（特開２０００−２７０２５１号公報）記載の図３から圧縮率変更指令入力部（録画ボタン、押圧センサビットレート変換部、ビットレート値変換部）と、入力フィルタ部を除いて構成、つまり、符号量制御部１２１３−１、ＤＣＴ部１２１３−２、量子化部１２１４−３、可変長符号部１２１３−４、および動き補償部１２１３−５を備えたような構成をなす。
【００７１】
符号量制御部１２１３−１は画質設定部１４によって設定されたビットレート値に応じて量子化幅に関するパラメータを決定する。ＤＣＴ部１２１３−３は、カラープロセス回路１２−１（またはカラープロセス回路１３−１）からの画像データに対して２次元離散コサイン変換処理を行って、画像を離散的な空間周波数成分（ＤＣＴ係数）に展開する。ＤＣＴ部１２１３−３によって得られたＤＣＴ係数は量子化部１２１３−４に与えられる。量子化部１２１３−４は、ＤＣＴ係数を量子化する。２次元離散コサイン変換（ＤＣＴ）後のデータは、低周波成分に偏ることが知られており、量子化により高周波成分の有意のデータ（０以外のデータ）が少なくなり、データの圧縮が行われる。量子化部１２１３−４によって得られた量子化されたＤＣＴ係数値は、可変長符号化部１２１３−６に与えられる。可変長符号化部１２１３−６は、データの出現頻度に基づいたエントロピー符号化を行う。可変長符号化部１２１３−６によって得られた符号化データは、ＤＭＡコントローラ１２−３（またはＤＭＡコントローラ３−３）に出力される。動き補償部１２１３−５は、量子化部４によって得られた量子化されたＤＣＴ係数を量子化前のＤＣＴ係数に戻すための逆量子化を行って元の画像データを復元させる。
【００７２】
図７は、録音と録音の並行動作による音声データと画像データの遷移の説明図である。図７に示すように、音声の録音と撮像部１１、動画映像処理部による動画撮影動作は並行して行われ、静止画撮影が開始されても録音動作は継続され、動画撮影が再開されたあとも続行される。入力音声はマイクロフォン１５、音声処理部１６を介して制御部５０に送出された音声信号はワークメモリ２０−４に取り込まれ、記録時に、音声圧縮処理を施された後、圧縮された動画像ファイルと共に動画ファイル（動画データ＋音声データ）として画像記録部４５に記録保存される。
【００７３】
図８は画像記録部に記録される動画ファイル及び静止画ファイルの模式図である。動画ファイル１４０はファイルサイズ、フレーム数、音声データサイズなどの情報を含むヘッダ部１４１と、音声や画像の実データを含むデータ部１４２、及びランダムアクセスを容易にするためのインデックス部１４３からなる。データ部１４２において、静止画撮影モード中は、音声のみ取り込む。動画像はモード切り替えキー８の押し下げ時点（若しくは直前）に取り込まれた動画データを繰り返し記録する。また、この間に撮影された静止画データ１４０−１、１４０−２は静止画ファイル１４５、１４６として記録される。
【００７４】
図９はワークメモリの領域使用状態の説明図であり、図９（ａ）は動画撮影待機中のワークメモリ２０−４の状態、図９（ｂ）は動画撮影中のワークメモリ２０−４の状態、図
（ｃ）は動画／静止画切り替え中のワークメモリ２０−４の状態、図９（ｄ）は静止画撮影中のワークメモリ２０−４の状態を示す。
【００７５】
ここで、動画撮影待機中とはデジタルムービーカメラ１００を起動した直後でのスルー表示状態をいい、動画撮影待機中はワークメモリ２０−４には、図９（ａ）に示すように、音声用バッファ２０−４１及びスルー表示用バッファ２０−４２が確保され、音声用バッファ２０−４１には撮影待機中に取り込まれる音声データが記憶され、スルー表示用バッファ２０−４２には撮影待機中に取り込まれる被写体画像データ（動画データ）が記憶される。
【００７６】
動画撮影中にはワークエリア２０−４には、図９（ｂ）に示すように、更に、動画用バッファ２０−４３が確保され、音声用バッファ２０−４１には動画撮影中に取り込まれる音声データが記憶され、スルー表示用バッファ２０−４２には動画撮影中に取り込まれる被写体画像データが記憶され、動画用バッファ２０−４３には動画撮影により取り込まれる動画像データが記憶される。
【００７７】
また、動画／静止画切り替え中には、図９（ｃ）に示すように、音声用バッファ２０−４１、スルー表示用バッファ２０−４２、動画用バッファ２０−４３のほか、データ退避エリア２０−４６が確保され、音声用バッファ２０−４１には動画／静止画切り替え中に取り込まれる音声データが記憶され、スルー表示用バッファ２０−４２には動画／静止画切り替え中に取り込まれる被写体画像データが記憶され、動画用バッファ２０−４３には動画／静止画切り替え中に取り込まれる動画像データが記憶され、データ退避エリア２０−４には静止画撮影開始時点（若しくは直前）のズーム位置データおよびその時点で取り込まれた１フレーム分の動画データが記憶される。
【００７８】
静止画撮影中にはワークエリア２０−４には、図９（ｄ）に示すように、音声用バッファ２０−４１及びスルー表示用バッファ２０−４２、動画用バッファ２０−４、及びデータ退避エリア２０−４６のほか、静止画用バッファ２０−４５が確保され、音声用バッファ２０−４１には静止画撮影中に取り込まれる音声データが記憶され、スルー表示用バッファ２０−４２には静止画撮影中に取り込まれる画像データが記憶され、動画用バッファ２０−４３には静止画撮影中に取り込まれる動画像データが記憶され、静止画用バッファ２０−４５には静止画撮影により取り込まれる静止画像データが記憶され、スルー画像退避エリア２０−４６には静止画撮影開始直前のズーム位置データおよびその時点で取り込まれた１フレーム分の動画データが記憶される。  
なお、一連のどの動作においてもスルー表示は続いているので、スルー表示用バッファ２０−４６は常に使用されている。
【００７９】
図１０はデジタルムービーカメラ１００の動作例を示すフローチャートであり、このフローチャートはデジタルムービーカメラ１００に本願発明の動画撮影時の静止画表示機能を実現させるためのプログラムを説明するためのものである。  
以下に示す処理は基本的に制御部２２が予めプログラムメモリ２０−３に記憶されたプログラムに従って実行する例で説明するが、全ての機能をプログラムメモリに格納する必要はなく、必要に応じて、その一部若しくは全部をネットワークを介して受信して実現するようにしてもよい。以下、図１〜図１０に基いて説明する。
【００８０】
図１０で、撮影者がデジタルムービーカメラ１００の主電源（図示せず）をオンにした後、動画撮影を行う場合には撮影者はデジタルムービーカメラ１００の上面に設けられている動画・録画開始／停止ボタン３３を押すので、ＣＰＵ２０−１は操作部３０から送られてくる状態信号を調べ、動画・録画開始／停止ボタン３３が押された場合にはステップＳ２に進み、そうでない場合はキー操作を待つ（ステップＳ１）。
【００８１】
動画・録画開始／停止ボタン３３が押されるか、ステップＳ１２からの遷移があると、デジタルムービーカメラ１００の画角内の被写体像が撮像部１１で電気信号に変換されて取り込まれ、動画映像処理部１３で前述したような信号処理により動画像データが所定の周期でストリーミング部１７に出力される。また、音声入力がある場合はマイクロフォン１５及び音声処理部１６からの音声データがストリーミング部１７に出力される（ステップＳ２）。
【００８２】
ストリーミング部１７は動画映像処理部１３から送られる動画像データと音声処理部１６から送られる音声データを受信しながらその動画像データを制御部２０を介して表示制御部４１に送ると共に音声データを音声出力部４３に送る。また、動画像データをワークメモリ２０−４に記憶させる。つまり、上記ステップＳ２と本ステップにより、動画データが所定時間間隔でワークメモリ２０−４の動画用バッファ２０−４３に連続したコマ画像として記憶されることとなる。また、この動作は下記ステップＳ１２の静止画撮影処理中も行われる（ステップＳ３）。
【００８３】
表示制御部４１では受け取った動画像データを表示部４０の表示形式に変換して図２（ａ）や図３（ａ）の例に示すように表示部４０の液晶モニタ画面に表示させる。なお、図２おび図３の例では、画面の所定の位置に動画撮影中を意味するアイコン（図示の例では、アイコン６０）を表示させている。また、音声出力部４３は受け取った音声信号を再生して外部に出力する（ステップＳ４）。
【００８４】
動画のズームを行う場合には、撮影者はデジタルムービーカメラ１００の上面に設けられている動画用ズームキー３１のＷボタン又はＴボタンを操作するので、ＣＰＵ２０−１は操作部３０から送られてくる状態信号を調べ、動画用ズームキー３１のＷボタン又はＴボタンが押された場合にはステップＳ６に進み、そうでない場合はステップＳ７に進む（ステップＳ５）。
【００８５】
ズームキー３１が操作された場合には、ＣＰＵ２０−１は操作されたズームボタンに応じて光学系駆動モータ１１−１の駆動制御部（図示せず）にワイド側或いは望遠側にズームレンズを移動させるための駆動信号を送出しズームレンズを移動させる（ステップＳ６）。
【００８６】
動画撮影中に静止画撮影を行う場合には、撮影者はデジタルムービーカメラ１００の上面に設けられている静止画撮影用のシャッターボタン３４（以下、単に「シャッターボタン３４」と記す）を押すので、ＣＰＵ２０−１は操作部３０から送られてくる状態信号を調べ、シャッターボタン３４が半押しされた場合にはステップＳ８に進み、そうでない場合はステップＳ１３に進む（ステップＳ７）。
【００８７】
シャッターボタン３４が半押しされた場合は、ＣＰＵ２０−１はその時点のズーム位置データおよびその時点出取り込まれた１フレーム分の動画データ（＝静止画データ）をワークメモリのデータ退避エリア２０−４６に記憶し（ステップＳ８）、画質設定部１４に静止画像処理部１２用のビットレート設定変更指示信号及び動画映像処理部１３用のビットレート設定変更指示信号を送って、画質設定部１４に静止画像処理部１２の画像符号化部１２−２に対し高画質（＝高解像度）用のビットレートを設定させ、動画映像処理部１３の画像符号化部１３−２に対し低画質（＝低解像度）用のビットレートを設定させる。以後、ステップＳ４で表示される動画はステップＳ１９で画質設定が初期化されるまで、画質設定部１４により設定された低画質のビットレートに基づいて画像符号化部１３−２で画像符号化処理を行った低画質の動画が表示されることとなる（ステップＳ９）。
【００８８】
次に、静止画像処理部１２は撮像部１１から入力されたデジタル信号を受けてＣＣＤ１１−３の画素に対応したベイヤーベースの形で一旦保持し、それを保管してＲＧＢデータを作成し、輝度成分（Ｙ）と色成分（Ｃｒ、Ｃｂ）の信号成分に分離し、制御部２０からの制御信号に基づいてその信号成分にホワイトバランス補正を施した後、上記ステップＳ８で画質設定部１４により設定された高画質のビットレートに基づいて画像符号化部１２−２で画像符号化処理を行って高画質の画像データとした後、ＤＭＡコントローラ１２−３によりその画像データをワークメモリ２０−４に転送して一時的に記憶させる（ステップＳ１０）。
【００８９】
ＣＰＵ２０−１は、更に、その画像データを表示制御部４１に送り、図２（ｂ）や図３（ｂ）に示すようなプレビュー画像７１の表示を開始させてからステップＳ１１に進む。図２（ｂ）や図３（ｂ）に示した例ではプレビュー画像７１として画面いっぱいに（高画質の）静止画７１を表示しているがこれに限定されない。なお、図２および図３の例では、画面の所定の位置に静止画撮影モードを意味するアイコン（図示の例では、アイコン７０）を表示させている（ステップＳ１１）。
【００９０】
ＣＰＵ２０−１は図１１に示すような静止画撮影処理を実行制御し、図１１の静止画撮影処理が終わるとステップＳ２に戻る（ステップＳ１２）。
【００９１】
動画撮影を終了させる場合には、撮影者はデジタルムービーカメラ１００の上面に設けられている動画撮影終了ボタン３５を押すので、ＣＰＵ２０−１は操作部３０から送られてくる状態信号を調べ、動画撮影終了ボタン３５押された場合にはステップＳ１４に進み、そうでない場合はステップＳ２に戻る（ステップＳ１３）。
【００９２】
動画撮影終了ボタン３５が押された場合には、ワークメモリ２０−４から動画データおよび音声データを取り出し、動画映像信号処理部１３および音声出力部４３に送って圧縮処理を施させてから、圧縮された音声データと圧縮画像ファイルを関連付けて画像記憶部４５に記録させ（ステップＳ１４）、更に、画質設定部１４に静止画像処理部１２用のビットレート設定変更指示信号及び動画映像処理部１３用のビットレート設定変更指示信号を送り、画質設定部１４に静止画像処理部１２及び動画映像処理部１３のビットレートを元に戻すようにさせて初期設定されていた画質に戻し、更に、図１１のステップＳ１２−４で静止画像の見かけ上の画角を変更した場合は、中心点の座標を初期値に戻し、動画撮影動作を終了する（ステップＳ１５）。
【００９３】
図１１は、図１０のフローチャートにおける静止画撮影処理の詳細なフローチャートである。以下、図１〜図１１に基づいて説明する。  
図１０のステップＳ１１での静止画像のプレビュー表示開始後（図２（ｂ）、図３（ｂ）参照）、静止画のズームを行う場合には撮影者はデジタルムービーカメラ１００の上面に設けられている静止画用ズームキー３２のＷボタン又はＴボタンを操作し、静止画の撮影範囲を変更する場合にはカーソル３６を操作し、静止画を記録する場合にはシャッターボタン３４を全押しするので、ＣＰＵ２０−１は操作部３０から送られてくる状態信号を調べ、静止画用ズームキー３２のＴボタンが押された場合にはステップＳ１２−２に進み、Ｗボタンが押された場合にはステップＳ１２−３に進む。また、カーソル３６が操作された場合にはステップＳ１２−４に進み、動画用ズームキー３１のＷボタン又はＴボタンが押された場合にはステップＳ１２−５に進み、いずれのキーも押されなかった場合はステップＳ１２−５に進む（ステップＳ１２−１）。
【００９４】
静止画用ズームキー３２のＴボタンが押された場合には、ＣＰＵ２０−１は光学系駆動モータ１１−１の駆動制御部（図示せず）に望遠側にズームレンズを移動させるための駆動信号を送出しズームレンズを移動させ、ステップＳ１２−１に戻る。ズームレンズの望遠側への移動により静止画７２の表示サイズが動画像６２より小さくなるので、表示バッファ（図示せず）に書き込まれているストリーミング部１７からの画面一杯分の動画像データに図１０のステップＳ１０での静止画像処理部１２からの出力を上書きさせる。これにより、図２（ｃ）や図３（ｃ）の例に示したように画面一杯に表示されている低画質の動画像６２上に高画質の静止画７２が画面中央にズームアップされて表示される（ステップＳ１２−２）。
【００９５】
また、静止画用ズームキー３２のＷボタンが押された場合、つまり、動画像より静止画像のほうが大きいようにズームした場合は、ＣＰＵ２０−１は光学系駆動モータ１１−１の駆動制御部にワイド側にズームレンズを移動させるための駆動信号を送出しズームレンズを移動させ、ステップＳ１２−１に戻る。ズームレンズのワイド側への移動により静止画７３の表示サイズが動画像６２より大きくなるので、図１０のステップＳ１０での静止画像処理部１２からの出力を表示バッファ（図示せず）に画面一杯分として書き込ませ、ストリーミング部１７からの動画像データを上書きさせる。これにより、図２（ｃ’）の例に示したように画面一杯に表示された高画質の静止画７３上に低画質の動画像６３が画面中央に表示される（ステップＳ１２−３）。
【００９６】
カーソル３６が押された場合は、ＣＰＵ２０−１は静止画像の画角をカーソル３６の操作により指示された方向に静止画像の表示範囲の中心点を移動したかのように中心点の座標変換を行って静止画像の見かけ上の画角を変更し、静止画像処理部１２は画角変更後、撮像部１１から入力されたデジタル信号を基にＲＧＢデータを作成し、輝度成分（Ｙ）と色成分（Ｃｒ、Ｃｂ）の信号成分に分離し、ホワイトバランス補正を施した後、画像符号化部１２−２で画像符号化処理を行って画質設定部１４より設定された高画質の画像データとした後、ＤＭＡコントローラ１２−３によりその画像データをワークメモリ２０−４に転送して一時的に記憶（ステップＳ１２で得た静止画像データに上書き記憶）させると共に、その静止画像データを表示制御部４１に送り、表示バッファ（図示せず）に書込まれているストリーミング部１７からの画面一杯分の動画像データにその静止画像データを上書きさせステップＳ１２−１に戻る。これにより、図２（ｄ）の例に示したように移動後の静止画７４が動画像６４上に表示される。つまり、静止画像の撮影範囲を移動させ動画の構図と異なるようにできる（ステップＳ１２−４）。
【００９７】
動画用ズームキー３１が操作された場合には、ＣＰＵ２０−１は操作されたズームボタン（ＷボタンまたはＴボタン）に応じて光学系駆動モータ１１−１の駆動制御部（図示せず）にワイド側或いは望遠側にズームレンズを移動させるための駆動信号を送出しズームレンズを移動させる。この場合、図１０のステップＳ２、Ｓ３で説明したように動画データのワークメモリ２０−４への取り込みは図１０のステップＳ７でシャッターボタン３４が半押しされたあとも所定時間間隔で行われるのでズームされた画像データがワークメモリ２０−４に記憶されることになる（ステップ１２−５）。
【００９８】
図１１のステップＳ１１でシャッターボタン３４が半押しされたあと、他のキーが押されていない場合には、ＣＰＵ２０−１はＡＦ処理を開始すると共に、シャッターボタン８の半押し時に取り込んだ画像データに基づく本撮影用のＡＥ処理及び自動ホワイトバランス（ＡＷＢ）処理を開始し、ステップＳ１２−７に進む。なお、この間も動画および静止画プレビュー画像を表示する（ステップＳ１２−６）。
【００９９】
ＣＰＵ２０−１は操作部３０から送られてくる状態信号を調べ、シャッターボタン３４が全押しされた場合にはステップＳ１２−８に進み、そうでない場合はシャッターボタン３４の全押しを待つ。なお、シャッターボタン３４が全押しされない場合にはステップＳ１２−１に戻るようにしてもよい（ステップＳ１２−７）。
【０１００】
シャッターボタン３４が全押しされた場合は、ＣＰＵ２０−１はその時点で直ちにＣＣＤ１３からのＤＲＡＭ２１への経路を停止してスルー画像取得時とは異なる本撮影時のＣＣＤ駆動方式への切換えを実行して取込んだ画像データに画像圧縮処理を施した後、この圧縮画像データ（画像ファイル）を記録して１フレーム分の画像の撮影を終了しステップＳ１２−９に進む（ステップＳ１２−８）。
【０１０１】
次に、ＣＰＵ２０−１は画質設定部１４に静止画像処理部１２用のビットレート設定変更指示信号及び動画映像処理部１３用のビットレート設定変更指示信号を送り、画質設定部１４に静止画像処理部１２及び動画映像処理部１３のビューレットを元に戻すようにさせて初期設定されていた画質に戻し、更に、上記ステップＳ１２−４で静止画像の撮影範囲を移動させ動画の構図と異なるようにして静止画像の見かけ上の画角を変更した場合は、中心点の座標を初期値に戻し、静止画撮影モードを終了（例えば、図２および図３のアイコン７０を消去）してステップＳ１２−１０に進む。なお、このステップではワークメモリ２０−４に記憶されている静止画像データは消去しない（ステップＳ１２−９）
【０１０２】
また、ＣＰＵ２０−１は図１１のステップＳ８でワークメモリ２０−４のデータ退避エリア２０−４６に記憶していた１フレーム分の動画データ（＝静止画データ）を取り出してその中央部分を所定の大きさ（実施例では、縦横とも画面の１／３）の矩形となるように切出して、半透過の部分静止画像６５（図３（ｅ）、（ｆ）参照）を生成する（Ｓ１２−１０）。
【０１０３】
次に、ＣＰＵ２０−１は図１１のステップＳ８でワークメモリ２０−４のデータ退避エリア２０−４６に記憶していた動画ズーム位置データを取り出し、そのズーム位置データを基にズームレンズ制御信号を生成してズームモータードライバ（図示せず）に送り、ズームモータ１１を駆動させてズームレンズをワイド側又は望遠側に移動させて、ズームレンズの位置を図１１のステップＳ７でのシャッターボタン半押し直前の位置（つまり、静止画撮影開始直前の位置）に復帰させる（ステップＳ１２−１１）。
【０１０４】
ＣＰＵ２０−１は上記ステップＳ１２−１０で生成した部分静止画像データを表示バッファ（図示せず）の動画像データに上書きさせる。これにより、図３（ｅ）や図３（ｆ）の例に示したような低画質の部分静止画６５が動画像７２が表示されている画面の中央部分に表示される（ステップＳ１２−１２）。
【０１０５】
上記図１０、図１１のフローチャートの動作により、動画撮影中に動画とは異なる構図の静止画撮影を行うことができる。また、撮影時に、静止画の画質を動画より高画質の画像として表示するので、動画と共に表示する静止画の構図がわかりやすい。更に、静止画撮影時点の動画ズーム位置およびその時点の１フレーム分の動画データ（＝静止画データ）を記憶し、静止画撮影後にズーム位置を復帰させて記憶していた動画データから生成した半透過の部分静止画を動画上に表示するので、静止画撮影開始から静止画撮影までの間に動画ズームや静止画ズームにより生じた画角や画像位置の変化が一目でわかることから、撮影者はカメラの姿勢等を微調整し画角や画像位置を静止画撮影前の状態にほぼ戻すことができ、動画の連続性に違和感を生じない。
また、動画撮影終了ボタン３５が押されると静止画撮影中にワークメモリに記憶した動画（複数）も記録されるので、動画再生時には、静止画撮影期間に画角が変化したり画像の位置がずれた動画が再生される可能性があるが、画角の変化や画像の位置のずれが無視できるほどの場合には動画の時間的連続性を維持できるので、ストーリー性を失うことがない。また、画角の変化や画像の位置のずれが大きくて編集の手間がかかる場合もあるにしても、画像の変化の意外性をストーリーにできるといったように、静止画撮影期間内の動画保存を禁止してその期間内の動画が再生できない場合よりは画像再生時の自由度が高い。
【０１０６】
＜変形例１＞  
なお、図１１のフローチャートのステップＳ１２−１０では半透過の部分画像を生成するようにしたが、表示されている動画とは一目で区別できればよく、表示されている動画より低画質の画像または表示されている動画より高画質の画像でもよい。
【０１０７】
＜変形例２＞  
また、上記各実施例の説明では光学ズームを行うものとして説明したが、動画、静止画を共にデジタルズーム、つまり、電子的にズーム処理するようにしてもよい。このようにする場合には上記図１０のフローチャートのステップＳ５で動画のデジタルズームを行い、図１１のステップＳ１２−２でデジタルズームによる静止画の望遠側ズーム処理を行い、ステップＳ１２−３でデジタルズームによるワイド側ズーム処理を行うように構成すればよい。このようにするとズームの際のズームレンズの移動時間を考慮しなくてもよいので、動画の連続性を保ったまま動画と静止画を撮影できる。
【０１０８】
＜変形例３＞  
また、動画は光学ズームによるズーム処理を行い、静止画はデジタルズームによるズーム処理を行うようにしてもよい。このようにする場合には上記図１０のフローチャートのステップＳ６で光学ズームを行い、図１１のステップＳ１２−２でデジタルズームにより静止画の望遠側ズーム処理を行い、ステップＳ１２−３でデジタルズームによりワイド側ズーム処理を行うように構成すればよい。また、このようにすれば、動画撮影は光学ズームで明瞭な画像を得ることができ、静止画ズームの際はズームレンズの移動時間を考慮しなくてもよいので、動画の連続性を保ったまま動画と静止画を撮影できる。また、静止画は動画より高画質なので、画質の低下を防止できる。
【０１０９】
＜変形例４＞  
また、上記各実施例の説明では動画撮影中に静止画撮影の際、動画は低画質の画像、静止画は高画質の画像として表示するようにし、静止画撮影後の動画スルー表示では静止画を半透過画像として表示するようにしたが、これに限定されない、例えば、動画映像処理部１３を半透過画像生成可能に構成し、ＣＰＵ２０−１から画質変更指示があると、画質設定部１４は動画映像処理部１３の画像符号化部１３−２（図２（ｃ））に半透過画像生成指示を送出して半透過動画像データを出力するようにして動画を半透過画像とするようにしてもよい。このようにしても動画と共に表示する静止画の構図をわかりやすくできる。なお、この場合、静止画撮影後の動画スルー表示では静止画は高画質の画像として見やすくすることが撮影者が静止画の構図を決定する上で望ましい。
【０１１０】
＜変形例５＞  
また、上記図１０、図１１のフローチャートでは、シャッターボタン３４が全押しされると静止画を画像記録部４５に記録し（図１１のステップＳ１２−７、Ｓ１２−）、動画撮影終了ボタン３５が押されて動画撮影を終了する際に、動画を画像記憶部４５に記録させるようにした（図１０のステップＳ１３〜Ｓ１５）が、図１１のステップＳ１２−７でシャッターボタン３４が押された場合にはステップＳ１２−８で撮影した静止画をワークメモリ２０−４の静止画用バッファ２０−４５に記憶するようにし、図１０のステップＳ１３で動画撮影終了ボタン３５が押された際にはステップステップＳ１４でワークメモリ２０―４から動画と静止画を取り出して画像記憶部４５に記録させるように構成してもよい。
【０１１１】
＜変形例６＞  
また、上記図１０のフローチャートでは、静止画撮影中でも撮像部１１、動画映像処理部１３、ストリーミング部１７を介して取り込まれる動画はワークメモリ２０−４に記憶され取り込まれ、図１０のステップＳ１３で動画撮影終了ボタン３５が押されるとワークメモリ２０−４から順次取り出されて画像記録部４５に記録されるように構成したが、図１０のフローチャートのステップＳ１３とＳ１４の間に、静止画撮影中にワークメモリ２０−４に記憶された動画データの記録を禁止する手段を設けて、静止画撮影中にワークメモリ２０−４に記憶された動画データは記録しないように構成してもよい。このためには、図１０のフローチャートのステップＳ３で、例えば、静止画撮影フラグ（初期値＝オフ）がオンの場合には動画データに特定のマーク等の識別情報を付加するようにし、ステップＳ７でシャッターボタン３４が半押しされた場合には静止画撮影フラグをオンとし、図１１のステップＳ１２−７でシャッターボタン３４が全押しされた場合は静止画撮影フラグをオフにするようにし、図１０のフローチャートのステップＳ１３とＳ１４の間で動画データに特定のマーク等の識別情報が付加されているか否かを調べ、付加されている場合はその動画データを記録しないように構成すればよい。  
このように構成することにより、動画再生時には静止画撮影期間に画角が変化したり画像の位置がずれた動画が再生されないので編集の手間がからない。また、再生画像を見ていても違和感を生じない
【０１１２】
＜変形例７＞  
また、上記図１０で動画データの保存記録を行う場合に更に、ステップＳ１４と１５の間に「ワークメモリ２０−４から静止画像データ（複数枚数分の場合あり）を取り出し、（それぞれ）静止画像信号処理部１２に送ってＪＰＥＧ圧縮処理を施させてから上記ステップＳ１４で記録された動画のコマに対応付けて画像記憶部４５に記録する」ようにしてもよい。このように構成することにより、撮影した動画と動画撮影中に撮影した静止画像を対応付けて保存記録することができるので、例えば、再生時に再生した動画像と静止画像を撮影時のように区別して同一画面上に表示することができる。
【０１１３】
＜変形例８＞  
また、上記実施の形態では、１つの撮像素子で動画も静止画も撮影するものを例にとって説明したが、動画用の撮像素子と静止画用の撮像素子を別々に設けてもよい。また、１つの撮像素子で動画と静止画を並列処理する方法については詳細に説明していないが、上記特許文献１ないし３に記載されている技術、若しくは本件出願人が出願した特願２００３−３５７１３２号に記載されている動画と静止画を並列処理する技術を適宜採用することができる。
【０１１４】
また、上記実施の形態では静止画が高画質、動画が低画質となっているが、ビデオスルーで（動画撮影中）に静止画の構図を決めるために、動画は中央部に高画質で表示し、静止画は全体に低画質（半透過）で表示し、静止画の構図を決めてからシャッターを押すようにしてもよい。
【０１１５】
以上、本発明の一実施例について説明したが本発明は上記実施例に限定されるものではなく、種々の変形実施が可能であることはいうまでもない。例えば、撮像装置という用語は、デジタルムービーカメラの他、電子スチルカメラ、カメラ付き携帯電話や撮像部を有する情報機器などにも適用し得るものである。
【図面の簡単な説明】
【０１１６】
【図１】本発明のデジタルムービーカメラの外観を示す斜視図である。
【図２】デジタルムービーカメラの撮影操作及び動画撮影中に撮影する静止画像の表示例の説明図である。
【図３】デジタルムービーカメラの撮影操作及び動画撮影中に撮影する静止画像の他の表示例の説明図である。
【図４】デジタルムービーカメラの概念的な機能ブロック図である。
【図５】デジタルムービーカメラの制御部の構成例を示すブロック図である。
【図６】図４（ｃ）、（ｄ）に示した画像符号化部の構成例を示すブロック図である。
【図７】録音と録音の並行動作による音声データと画像データの遷移の説明図である。
【図８】画像記録部に記録される動画ファイル及び静止画ファイルの模式図である。
【図９】ワークメモリの領域使用状態の説明図である。
【図１０】デジタルムービーカメラの動作例を示すフローチャートである。
【図１１】図１０のフローチャートにおける静止画撮影処理の詳細なフローチャートである。
【符号の説明】
【０１１７】
１１  撮像部（光学ズーム手段）
１２  静止画像処理部（静止画像処理手段、静止画像取得手段、電子ズーム手段）
１３  動画映像処理部（動画像処理手段、動画像取得手段、電子ズーム手段）
１４  画質設定部（静止画像取得手段、動画像取得手、異なる画質の静止画像データを得る手段）
１５  マイクロフォン
１６  音声処理部
１７  ストリーミング部（動画像取得手段、動画像処理手段）
２０  制御部（表示制御手段）
３０  操作部
３１  動画用ズームキー（動画ズーム指示手段）
３２  静止画用ズームキー（静止画ズーム指示手段）
３３  動画・録画開始／停止ボタン
３４  シャッターボタン（静止画撮影指示手段）
３５  動画撮影終了ボタン（動画撮影終了指示手段）
３６  カーソル（撮影範囲変更指示手段）
４０  表示部（表示手段）
４１  表示制御部（表示手段）
４３  音声出力部
４５  画像記憶部（保存メモリ）
１００  デジタルムービーカメラ
【図１】
2006129426.tif 000003
【図２】
2006129426.tif 000004
【図３】
2006129426.tif 000005
【図４】
2006129426.tif 000006
【図５】
2006129426.tif 000007
【図６】
2006129426.tif 000008
【図７】
2006129426.tif 000009
【図８】
2006129426.tif 000010
【図９】
2006129426.tif 000011
【図１０】
2006129426.tif 000012
【図１１】
2006129426.tif 000013