(57)【要約】【課題】  従来、多板式による高画質の動画撮影とファイル容量の削減を両立できなかった。【解決手段】  本発明では、複数の色成分に分解された被写体光を各色成分毎に撮像する複数の撮像部と、複数の撮像部が撮像した各色成分に対応する複数の画像間で互いに重複しない画素位置から信号を読み出して予め設定された色配列の画像を生成し、色配列の画像に色配列特有の画像処理を施してカラー動画を生成する間引画像生成部と、複数の撮像部が撮像した画像を各色成分毎に全画素読み出しを行い、全画素読み出しした各色成分毎の画像からカラー動画を生成する全画素画像生成部と、予め設定された条件に応じて、間引画像生成部または全画素画像生成部が生成するいずれかのカラー動画を選択する切替部と、切替部が選択したカラー動画を記憶媒体に記録する記録部とを有することを特徴とする。【選択図】図１
2012147150.tif 000002
【特許請求の範囲】
【請求項１】
複数の色成分に分解された被写体光を各色成分毎に同じ画素配置の画像を撮像する複数の撮像部と、
前記複数の撮像部が撮像した前記各色成分に対応する複数の画像間で互いに重複しない画素位置から信号を読み出して予め設定された色配列の画像を生成し、前記色配列の画像に前記色配列特有の画像処理を施してカラー動画を生成する間引画像生成部と、
前記複数の撮像部が撮像した画像を前記各色成分毎に全画素読み出しを行い、前記全画素読み出しした前記各色成分毎の画像からカラー動画を生成する全画素画像生成部と、
予め設定された条件に応じて、前記間引画像生成部または前記全画素画像生成部が生成するいずれかのカラー動画を選択する切替部と、
前記切替部が選択したカラー動画を記憶媒体に記録する記録部と
を有することを特徴とする撮像装置。
【請求項２】
請求項１に記載の撮像装置において、
動画撮影の開始を指示する撮影開始指示部材と、
予め設定された時間を計る計時部と
を更に設け、
前記切替部は、前記撮影開始指示部材による動画撮影の開始指示から前記計時部で予め設定された時間が経過するまでの期間に亘って、前記全画素画像生成部が生成するカラー動画を選択する
ことを特徴とする撮像装置。
【請求項３】
請求項１に記載の撮像装置において、
動画撮影の開始を指示する撮影開始指示部材と、
高画質撮影への切り替えを指示する高画質撮影指示部材と
を更に設け、
前記切替部は、前記撮影開始指示部材による動画撮影の開始指示後に、前記高画質撮影指示部材により高画質撮影への切り替えを指示された場合に、前記全画素画像生成部が生成するカラー動画を選択する
ことを特徴とする撮像装置。
【請求項４】
請求項３に記載の撮像装置において、
予め設定された時間を計る計時部を更に設け、
前記切替部は、前記高画質撮影指示部材による高画質撮影への切り替え指示から前記計時部で予め設定された時間が経過するまでの期間に亘って、前記全画素画像生成部が生成するカラー動画を選択する
ことを特徴とする撮像装置。
【請求項５】
請求項２または４に記載の撮像装置において、
前記切替部に対して前記全画素画像生成部への切り替え時間を延長する指示を与える時間延長指示部材を更に設け、
前記計時部は、前記時間延長指示部材により時間延長指示が与えられた場合に前記予め設定された時間を延長する
ことを特徴とする撮像装置。
【請求項６】
請求項１に記載の撮像装置において、
動画撮影の開始を指示する撮影開始指示部材と、
前記撮像部が撮像する画像に予め設定された特定被写体の有無を検出する被写体検出部と
を更に設け、
前記切替部は、前記撮影開始指示部材による動画撮影の開始指示後に、前記被写体検出部が前記特定被写体を検出した場合に、前記特定被写体が非検出になるまで前記全画素画像生成部が生成するカラー動画を選択する
ことを特徴とする撮像装置。
【請求項７】
請求項２または４に記載の撮像装置において、
前記撮像部が撮像する画像に予め設定された特定被写体の有無を検出する被写体検出部を更に設け、
前記計時部は、前記予め設定された時間が経過した時点で前記被写体検出部が前記特定被写体を検出している場合、前記予め設定された時間を延長する
ことを特徴とする撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、カラー動画を撮像する撮像装置に関する。
【背景技術】
【０００２】
一般的な撮像装置では、被写体光をＲＧＢの３つの色成分に分解してカラー画像を撮像する。また、撮像素子の構成には、１つの撮像素子にＲＧＢの各色成分に対応する画素を有する単板式と、３つの撮像素子でＲＧＢの各色成分毎に撮像する多板式とがあり、例えば、多板式の撮像素子で動画と静止画を撮影する撮像装置が考えられている（例えば特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平０９−２６１５３５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところが、多板式の撮像素子で撮影される画像は高画質であるが、動画撮影を行う場合は動画のファイル容量が単板式の撮像装置に比べて大きくなるという問題がある。
【０００５】
本発明の目的は、多板式による高画質の動画撮影とファイル容量の削減を両立できる撮像装置を提供することである。
【課題を解決するための手段】
【０００６】
本発明に係る撮像装置は、複数の色成分に分解された被写体光を各色成分毎に同じ画素配置の画像を撮像する複数の撮像部と、前記複数の撮像部が撮像した前記各色成分に対応する複数の画像間で互いに重複しない画素位置から信号を読み出して予め設定された色配列の画像を生成し、前記色配列の画像に前記色配列特有の画像処理を施してカラー動画を生成する間引画像生成部と、前記複数の撮像部が撮像した画像を前記各色成分毎に全画素読み出しを行い、前記全画素読み出しした前記各色成分毎の画像からカラー動画を生成する全画素画像生成部と、予め設定された条件に応じて、前記間引画像生成部または前記全画素画像生成部が生成するいずれかのカラー動画を選択する切替部と、前記切替部が選択したカラー動画を記憶媒体に記録する記録部とを有することを特徴とする。
【発明の効果】
【０００７】
本発明に係る撮像装置は、多板式による高画質の動画撮影とファイル容量の削減を両立することができる。
【図面の簡単な説明】
【０００８】
【図１】電子カメラ１０１の構成例を示す図である。
【図２】全画素読み出しの例を示す図である。
【図３】間引き読み出しの例を示す図である。
【図４】ベイヤー配列と色補間処理の例を示す図である。
【図５】応用例１における撮影時の処理を示すフローチャートである。
【図６】応用例２における撮影の様子を視覚的に示した図である。
【図７】応用例２における撮影時の処理を示すフローチャートである。
【図８】電子カメラ１０１ａの構成例を示す図である。
【図９】応用例３における撮影時の処理を示すフローチャートである。
【図１０】応用例４における撮影時の処理を示すフローチャートである。
【図１１】応用例４における撮影の様子を視覚的に示した図である。
【図１２】電子カメラ１０１ｂの構成例を示す図である。
【図１３】応用例５における撮影時の処理を示すフローチャートである。
【図１４】応用例５および応用例６における撮影の様子を視覚的に示した図である。
【図１５】応用例６における撮影時の処理を示すフローチャートである。
【発明を実施するための形態】
【０００９】
以下、本発明に係る撮像装置の実施形態について図面を用いて詳しく説明する。ここでは、本発明に係る撮像装置を電子カメラ１０１に適用する例について説明するが、カメラ付携帯電話，ビデオカメラおよびカメラ付ゲーム機などの撮像機能を有する装置であれば同様に適用可能である。
【００１０】
［電子カメラ１０１の一例］
図１は、電子カメラ１０１の一例を示すブロック図である。図１において、電子カメラ１０１は、レンズ１０２と、メカニカルシャッタ１０３と、分光部１０４と、撮像素子１０５と、ＴＧ（タイミングジェネレータ）１０６と、バッファ１０７と、信号処理部１０８と、制御部１０９と、表示部１１０と、メモリカード１１１ａを装着するためのメモリカードＩＦ１１１と、操作部１１２と、計時部１１３と、メモリ１１４とで構成される。
【００１１】
レンズ１０２は、入射する被写体光をメカニカルシャッタ１０３および分光部１０４を介して撮像素子１０５の受光面に結像する。
【００１２】
メカニカルシャッタ１０３は、制御部１０９の指令に応じたシャッタ速度で開閉される。尚、撮影構図を確認するために表示部１１０に被写体画像を表示するスルー画像の撮影時や、動画撮影時はメカニカルシャッタ１０３は開放状態になり、撮像素子１０５はＴＧ１０６から出力される撮影タイミングに従って電子シャッタで撮影される。
【００１３】
分光部１０４は、例えばダイクロイックミラーやダイクロイックプリズムなどの分光部材が用いられる。そして、レンズ１０２およびメカニカルシャッタ１０３を介して入射する被写体光は、分光部１０４でＲ（赤色）、Ｇ（緑色）およびＢ（青色）の３つの色成分に分光され、Ｒ成分の光はＲ用撮像素子１０５ａに、Ｇ成分の光はＧ用撮像素子１０５ｂに、Ｂ成分の光はＢ用撮像素子１０５ｃにそれぞれ入射される。
【００１４】
撮像素子１０５は、ＲＧＢの３色に対応するＲ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子を有する。これらの固体撮像素子の受光面には、複数の画素が行列状に配置され、各画素で光電変換された信号がＴＧ１０６のタイミングに応じてバッファ１０７に読み出される。尚、本実施形態では、これらの固体撮像素子として、指定した画素位置から信号を読み出すことが可能なＣＭＯＳセンサを用いる。また、図１に示した撮像素子１０５は、各画素から読み出された画像信号をデジタルの画像データにＡ／Ｄ変換して出力し、バッファ１０７に直接記憶するようになっている。尚、撮像素子１０５がアナログの画像信号を出力する場合は、撮像素子１０５とバッファ１０７との間にＡ／Ｄ変換やゲイン調整を行うＡＦＥ（アナログフロントエンド）回路を設ける。
【００１５】
ＴＧ１０６は、制御部１０９の指令に応じて撮像素子１０５に各画素から画像信号を読み出すためのタイミング信号を出力する。ここで、ＴＧ１０６は、Ｒ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子間で異なる位置の画素から信号を読み出すためのタイミング信号を出力する。例えばＴＧ１０６は、制御部１０９の指令に応じて、奇数行や偶数行の指定、さらに１行置きや１列置きなど間引き行数や間引き列数の指定を行うためのタイミング信号を出力する。
【００１６】
バッファ１０７は、例えば揮発性の高速メモリが用いられ、撮像素子１０５から読み出される画像データが一時的に記憶される。ここで、バッファ１０７は、説明が理解し易いように、Ｒ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子にそれぞれ対応するＲバッファ１０７ａ，Ｇバッファ１０７ｂおよびＢバッファ１０７ｃの３つの記憶領域を有するものとしたが、撮像素子１０５から間引いて読み出されたＲ画像データ、Ｇ画像データおよびＢ画像データを組み合わせて１画面分の画像データを作成しながら記憶するようにしてもよい。尚、バッファ１０７は信号処理部１０８が画像処理を行うための処理用バッファや表示部１１０に表示する画像を一時的に保持するための表示用バッファとしても用いられる。
【００１７】
信号処理部１０８は、バッファ１０７に取り込まれた画像データに対して制御部１０９から指示された所定の画像処理を行う。ここで、所定の画像処理とは、例えばホワイトバランス処理やガンマ補正処理あるいは画像圧縮処理などである。また、画像圧縮処理は、静止画撮影の場合は例えばＪＰＥＧ規格などによる画像圧縮を行い、動画撮影の場合は例えばＭｏｔｉｏｎ−ＪＰＥＧ規格やＭＰＥＧ規格などによる画像圧縮を行う。
【００１８】
制御部１０９は、例えば内部に予め記憶されているプログラムコードに従って動作するＣＰＵを有し、操作部１１２に設けられた各種の操作ボタンの操作に応じて電子カメラ１０１全体の動作を制御する。例えば制御部１０９は、メカニカルシャッタ１０３の開閉制御、ＴＧ１０６に対する撮像素子１０５の読み出し画素の指定、信号処理部１０８への画像処理内容の指示、バッファ１０７への画像データの読み書き、表示部１１０への画像やメニュー画面の表示、メモリカードＩＦ１１１に装着されているメモリカード１１１ａへの画像データの読み書き、操作部１１２の各操作ボタンの操作内容の入力などの処理を行う。特に、本実施形態に係る電子カメラ１０１では、制御部１０９は、間引き読み出し部１５１と、全画素読み出し部１５２と、撮影モード切替部１５３と、記録処理部１５４とを有する。
【００１９】
ここで、間引き読み出し部１５１は、撮像素子１０５の予め決められた間引き画素を除く画素から信号を読み出す処理を行う。全画素読み出し部１５２は、撮像素子１０５から画素を間引かずに全画素から信号を読み出す処理を行う。撮影モード切替部１５３は、後述する各条件に応じて全画素読み出し部１５２または間引き読み出し部１５１を選択する処理を行う。記録処理部１５４は、全画素読み出し部１５２または間引き読み出し部１５１により読み出され、信号処理部１０８で所定の画像処理（ホワイトバランス処理、ガンマ補正処理、エッジ強調処理など）が施された静止画または動画の画像ファイルをメモリカードＩＦ１１１を介してメモリカード１１１ａに記録する処理を行う。
【００２０】
表示部１１０は、例えば液晶モニタが用いられ、制御部１０９が出力するメニュー画面や撮影画像を表示する。
【００２１】
メモリカードＩＦ１１１は、電子カメラ１０１に脱着可能なメモリカード１１１ａに撮影された画像データを記録するためのインターフェースである。例えば制御部１０９の記録処理部１５４は、撮影した静止画や動画をメモリカードＩＦ１１１を介してメモリカード１１１ａに保存する。
【００２２】
操作部１１２は、電源ボタン１１２ａ、レリーズボタン１１２ｂ、動画ボタン１１２ｃ、モード選択ダイヤル１１２ｄ、メニューボタン１１２ｅ、セレクターボタン１１２ｆなどの操作部材を有する。撮影者は、これらの操作部材を用いて電子カメラ１０１を操作し、操作部材による操作情報（オンオフや選択項目など）は制御部１０９に出力される。そして、制御部１０９は、操作部１１２から入力する操作情報に応じて、電子カメラ１０１の動作を制御する。例えば、制御部１０９は、電源ボタン１１２ａが押下されると、電子カメラ１０１の電源を投入し、表示部１１０にスルー画像を表示して撮影できる状態にする。さらに、制御部１０９は、レリーズボタン１１２ｂが押下されると静止画撮影を行い、動画ボタン１１２ｃが押下されると動画撮影を開始する。そして、制御部１０９は、動画撮影中に再び動画ボタン１１２ｃが押下されると動画撮影を終了する。モード選択ダイヤル１１２ｄは、撮影者が撮影モードを選択するためのダイヤルで、例えば静止画撮影の場合は、オート撮影モード、シャッタ優先撮影モード、絞り優先撮影モード、或いはスポーツシーンや風景シーンなどのシーン選択などを行うことができる。メニューボタン１１２ｅは、画質、画像サイズ、感度、フォーカスモードなどを設定するためのメニュー画面を表示部１１０に表示するボタンで、メニュー画面に表示された項目をセレクターボタン１１２ｆで選択して各項目の設定を行うことができる。特に本実施形態に係る電子カメラ１０１では、動画ボタン１１２ｃが押下された場合に全画素読み出しによる高画質の動画撮影を行う時間（例えば３秒、５秒、１０秒など）を予め設定しておく。
【００２３】
計時部１１３は、予め設定された時間（設定時間）をカウントするタイマーである。例えば計時部１１３は、制御部１０９の指令によって起動され、時間経過をモニタして設定時間の経過時に制御部１０９に知らせる。
【００２４】
メモリ１１４は、電子カメラ１０１が動作に必要なパラメータなどを記憶するための不揮発性のメモリである。メモリ１１４に記憶されるパラメータは、例えば画質、解像度、感度、或いは計時部１１３の設定時間（３秒、５秒、１０秒など）を保持している。
【００２５】
以上が本実施形態に係る電子カメラ１０１の基本構成である。
【００２６】
ここで、一般な動画撮影では、被写体の動きが滑らかになるように、ある程度以上のフレームレート（例えば３０フレーム／秒以上）が必要である。ところが、本実施形態に係る電子カメラ１０１のように、ＲＧＢ３色に対応する３板式の撮像素子１０５を有する場合、各色の撮像素子１０５から全画素読み出しすると、動画のファイル容量が大きくなるという問題が生じる。例えば、撮像素子が３つあるので単純計算で３倍の容量になる。
【００２７】
そこで、本実施形態に係る電子カメラ１０１は、必要な部分だけを全画素読み出しにより撮影できるようになっている。例えば、動画ボタン１１２ｃを押下されると、制御部１０９の撮影モード切替部１５３は全画素読み出し部１５２を選択し、予め設定した時間（例えば５秒間）だけ全画素読み出しにより動画撮影を行う。そして、設定時間が経過すると動画撮影を自動的に終了する。或いは、設定時間が経過後は、間引き読み出しにより動画撮影を継続する。これにより、動画ファイルの容量を大幅に削減することができる。
【００２８】
［間引き読み出し方式と全画素読み出し方式］
先ず、本実施形態に係る電子カメラ１０１の基本となる間引き読み出しの技術について説明する。尚、間引き読み出し処理は、先に説明したように、制御部１０９の間引き読み出し部１５１が行う。
【００２９】
間引き読み出し部１５１は、ＲＧＢ３色に対応する３板式の撮像素子１０５から画像データを読み出す時に、各色成分に対応するＲ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子の互いに重複しない位置の画素から画像データを読み出して予め設定された色配列の画像を生成する。この画像は、本実施形態ではベイヤー配列の画像である。特に、生成された画像には１画面の全画素位置にＲＧＢのいずれかの画像データが撮像素子１０５から読み出されているので、色成分は異なるが全画素位置に対応する画像情報の欠落を防ぐことができる。これに対して、従来技術のように、同じ画素位置の画像データを間引いて読み出した場合は、共に間引かれた画素位置の画像情報が欠落してしまうという問題がある。このため、本実施形態に係る電子カメラ１０１のように全画素位置の画像情報が保持される場合に比べて補間処理を行った時の輝度モアレが生じ易くなる。また、間引かれた画素位置の画像情報が欠落するため、ジャギーや解像感も劣化する。
【００３０】
さらに、本実施形態に係る電子カメラ１０１は、ベイヤー配列になるようにＲ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子の互いに重複しない画素位置からそれぞれの画像データを読み出すので、単板式のカメラで確立されたベイヤー配列専用の色補間処理などの優れた画像処理技術を適用でき、この点においてもジャギーの軽減や解像感の向上を図ることができる。
【００３１】
図２は、撮像素子１０５から全画素読み出しされる画素位置の一例を示す図である。尚、全画素読み出しは、先に説明したように、制御部１０９の全画素読み出し部１５２が行う。また、図２（ａ）から図２（ｃ）では、説明がわかり易いように、ｘ方向に４画素、ｙ方向に４画素の１画面が１６画素で構成される例を示しているが、実際のカメラに搭載されている撮像素子１０５は、例えば１０００画素×１０００画素など百万画素程度の画素数を有する。
【００３２】
図２（ａ）において、Ｐｒ（ｘ，ｙ）はＲ用撮像素子１０５ａの１画面の画素座標を示し、Ｐｒ（１，１）からＰｒ（４，４）までの１６画素を有する。同様に、図２（ｂ）において、Ｐｇ（ｘ，ｙ）はＧ用撮像素子１０５ｂの１画面の画素座標を示し、Ｐｇ（１，１）からＰｇ（４，４）までの１６画素を有する。また、図２（ｃ）において、Ｐｂ（ｘ，ｙ）はＢ用撮像素子１０５ｃの１画面の画素座標を示し、Ｐｂ（１，１）からＰｂ（４，４）までの１６画素を有する。そして、Ｒ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子の全画素から読み出された画像データは、それぞれＲバッファ１０７ａ、Ｇバッファ１０７ｂおよびＢバッファ１０７ｃに取り込まれる。
【００３３】
図３は、撮像素子１０５から間引き読み出しされる画素位置の一例を示す図である。ここで、制御部１０９の間引き読み出し部１５１は、Ｒ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子の全画素から所定の画素位置の画像データを間引いて読み出すようにＴＧ１０６に指令する。尚、図２と同様に、図３の各図において、Ｒ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子は、ｘ方向に４画素、ｙ方向に４画素の１画面が１６画素を有する。図３（ａ）はＲ用撮像素子１０５ａから間引き読み出しされてＲバッファ１０７ａに取り込まれる画素Ｐｒ（ｘ，ｙ）の一例を示している。尚、図３の各図において、×印の画素位置の画像データは読み出されないことを示す。
【００３４】
図３（ａ）において、Ｒ用撮像素子１０５ａから読み出される画素は奇数行且つ奇数列の画素で、画素Ｐｒ（１，１）、画素Ｐｒ（１，３）、画素Ｐｒ（３，１）、画素Ｐｒ（３，３）の４つの画素である。同様に、図３（ｂ）において、Ｇ用撮像素子１０５ｂから読み出される画素は奇数行且つ偶数列および偶数行且つ奇数列の千鳥状の画素で、画素Ｐｇ（１，２）、画素Ｐｇ（１，４）、画素Ｐｇ（２，１）、画素Ｐｇ（２，３）、画素Ｐｇ（３，２）、画素Ｐｇ（３，４）、画素Ｐｇ（４，１）、画素Ｐｇ（４，３）の８つの画素である。また、図３（ｃ）において、Ｂ用撮像素子１０５ｃから読み出される画素は偶数行且つ偶数列の画素で、画素Ｐｂ（２，２）、画素Ｐｂ（２，４）、画素Ｐｂ（４，２）、画素Ｐｂ（４，４）の４つの画素である。
【００３５】
そして、図３（ａ）のＲ画素、図３（ｂ）のＧ画素および図３（ｃ）のＢ画素を組み合わせると、図４（ａ）に示すようなベイヤー配列の画像データＰｂａｙｅｒ（ｘ，ｙ）が得られる。図４（ａ）の例では、１画面がＰｂａｙｅｒ（１，１）からＰｂａｙｅｒ（４，４）の１６画素のベイヤー配列の画像データＰｂａｙｅｒ（ｘ，ｙ）である。ここで、ベイヤー配列の画像データＰｂａｙｅｒ（ｘ，ｙ）はバッファ１０７に作成される。
【００３６】
そして、信号処理部１０８は、バッファ１０７に作成されたベイヤー配列の画像データＰｂａｙｅｒ（ｘ，ｙ）に対して、単板式の固体撮像素子で用いられるベイヤー配列用の色補間処理を適用して各画素にＲＧＢ３色の色成分を有する画像データＰｒｇｂ（ｘ，ｙ）を作成する。ここで、ベイヤー配列用の色補間処理は単板式の電子カメラで広く用いられ、高画質化のための様々な技術が用いられた高精度の補間技術が使われている。特に本実施形態では、独自の色配列による間引き処理を行わずに、ベイヤー配列のような既存の色配列になるように間引き処理を行うので、広く利用されている高精度な補間技術を適用できるという利点がある。
【００３７】
このようにして、動画１フレーム分の画像データＰｒｇｂ（ｘ，ｙ）が得られる。尚、動画撮影モードでは、上述のような処理を所定のフレームレート（例えば３０フレーム／秒）で繰り返し行う。また、動画圧縮処理を行う場合、信号処理部１０８は、例えばフレーム間で動きベクトルを求めるなどの圧縮処理を行って圧縮後の動画データを制御部１０９に出力する。そして、制御部１０９は信号処理部１０８から入力する動画データをメモリカードＩＦ１１１を介してメモリカード１１１ａに記録する。
【００３８】
尚、全画素読み出しの場合は、図２に示したように、Ｒ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子から読み出された全画素の画像データを有するので、ベイヤー配列のように色補間処理を行う必要がなく、図４（ｂ）に示すような各画素にＲＧＢ３色の色成分を有する高品質の画像データＰｒｇｂ（ｘ，ｙ）が得られる。
【００３９】
以下、制御部１０９の撮影モード切替部１５３により、予め設定された条件に応じて間引き読み出し方式または全画素読み出し方式を選択し、動画撮影を行う場合の実施形態について説明する。
【００４０】
（応用例１）
電子カメラ１０１の応用例１として、動画ボタン１１２ｃを押下後、自動的に計時部１１３に予め設定された時間だけ全画素読み出しによる動画撮影を行う場合の例について説明する。図５は、応用例１における動画撮影時の制御部１０９の処理を示すフローチャートである。また、図６（ａ）は、図５のフローチャートに従って撮影する動画の様子を視覚的に示した説明図である。
【００４１】
（ステップＳ１０１）撮影者が電子カメラ１０１の電源ボタン１１２ａを押下すると、制御部１０９は、電子カメラ１０１を撮影可能な状態に起動する。
【００４２】
（ステップＳ１０２）電子カメラ１０１が起動されると、撮像素子１０５で撮影されるスルー画像が表示部１１０に表示され、撮影者は撮影構図を確認することができる（図６（ａ）のタイミングＴ１以前のスルー画像表示の状態）。尚、スルー画像の撮影は、制御部１０９がメカニカルシャッタ１０３を開放状態にして、ＴＧ１０６にスルー画像用の低解像度の画像を読み出すよう指令し、バッファ１０７に読み出された各色の画像に対して信号処理部１０８でホワイトバランス処理などを行った後、制御部１０９から表示部１１０に表示される。
【００４３】
（ステップＳ１０３）制御部１０９は、操作部１１２の動画ボタン１１２ｃが押下されたか否かを判別する。そして、動画ボタン１１２ｃが押下されるまでステップＳ１０３で待機し、動画ボタン１１２ｃが押下されると次のステップに進む。
【００４４】
（ステップＳ１０４）制御部１０９は、メモリ１１４に記憶されている設定時間を読み出して計時部１１３に設定し、計時部１１３を起動する（タイマー起動）。例えば、設定時間が５秒の場合は、計時部１１３は５秒間のタイマーとして動作する。
【００４５】
（ステップＳ１０５）制御部１０９の撮影モード切替部１５３は全画素読み出し部１５２を選択し、全画素読み出し部１５２は、ＴＧ１０６に指令して、撮像素子１０５から全画素読み出しして動画撮影を開始する（図６（ａ）のタイミングＴ１）。
【００４６】
具体的には、図２で説明したように、Ｒ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子からバッファ１０７のＲバッファ１０７ａ、Ｇバッファ１０７ｂおよびＢバッファ１０７ｃにそれぞれ画像データが読み出される。そして、バッファ１０７に読み出された全画素の画像データから、図４（ｂ）に示すような各画素にＲＧＢ３色の色成分を有する画像データＰｒｇｂ（ｘ，ｙ）が作成される。このようにして、制御部１０９は、全画素読み出しで作成された画像データＰｒｇｂ（ｘ，ｙ）を所定のフレームレート（例えば３０フレーム／秒）で作成し、バッファ１０７に一時的に記憶する。
【００４７】
（ステップＳ１０６）制御部１０９は、バッファ１０７に作成された画像データＰｒｇｂ（ｘ，ｙ）に対して、信号処理部１０８に所定の画像処理を行うよう指令する。例えば、信号処理部１０８は、画像データＰｒｇｂ（ｘ，ｙ）に対して、ホワイトバランス処理やガンマ補正処理を行う。さらに、信号処理部１０８は、例えばＭｏｔｉｏｎ−ＪＰＥＧ規格やＭＰＥＧ規格などによる動画用の画像圧縮処理を行う。
【００４８】
（ステップＳ１０７）制御部１０９の記録処理部１５４は、動画用の画像圧縮処理が行われた動画データをメモリカードＩＦ１１１を介してメモリカード１１１ａに記録する。ここで、ステップＳ１０５からステップＳ１０７までの処理は、ステップＳ１０８で設定時間が経過するまで、１フレーム毎に繰り返し行われるが、メモリカード１１１ａに記録される動画データは、１フレーム毎に記録される必要はない。例えば、使用する動画用の画像圧縮処理がＭｏｔｉｏｎ−ＪＰＥＧ規格である場合は１フレーム毎に圧縮処理が完結するので１フレーム毎に動画データの記録が可能であるが、ＭＰＥＧ規格などフレーム間の動き検出を行う圧縮処理の場合は複数のフレーム単位で画像圧縮された動画データが記録されるので、この場合はステップＳ１０５からステップＳ１０７までの処理は平行して実行される。
【００４９】
（ステップＳ１０８）制御部１０９は、計時部１１３に設定された時間が経過したか否かを判別する。そして、設定時間が経過していない場合はステップＳ１０５に戻って動画撮影を継続し、設定時間が経過した場合は次のステップに進む（図６（ａ）のタイミングＴ２）。
【００５０】
（ステップＳ１０９）制御部１０９は、一連の動画撮影を終了する。具体的には、制御部１０９の記録処理部１５４は、撮影された動画データに自動生成されるファイル名を付加して、メモリカードＩＦ１１１を介してメモリカード１１１ａに動画ファイルとして保存する。
【００５１】
このようにして、動画ボタン１１２ｃが押下後の一定時間（図６（ａ）のタイミングＴ１からＴ２の期間）だけ全画素読み出しによる高品質な動画を自動的に撮影することができる。これにより、無駄に長時間に亘る動画撮影が行われないので、メモリカード１１１ａに記憶される動画のファイル容量が大きくならないようにすることができる。また、必要なシーンだけ撮影されているので、鑑賞する場合に長時間に亘るつまらない動画が再生されることがなくなり、鑑賞者は飽きることなく全画素読み出しによる高品質な動画を鑑賞することができる。
【００５２】
（応用例２）
電子カメラ１０１の応用例２として、動画ボタン１１２ｃを押下後、自動的に計時部１１３に予め設定された時間だけ全画素読み出しによる動画撮影を行い、一定時間の全画素読み出しによる動画撮影が終了後は間引き読み出しによる動画撮影を行う場合の例について説明する。図７は、応用例２における動画撮影時の制御部１０９の処理を示すフローチャートである。また、図６（ｂ）は、図７のフローチャートに従って撮影する動画の様子を視覚的に示した説明図である。尚、先に説明した図５のフローチャートと同じ符号のステップは同じ処理を示す。
【００５３】
図７において、ステップＳ１０１からステップＳ１０８までの処理は図５と同じである。そして、ステップＳ１０８で設定時間が経過後、以下の各ステップが実行される。
【００５４】
（ステップＳ２０１）制御部１０９の撮影モード切替部１５３は間引き読み出し部１５１を選択し、間引き読み出し部１５１は、ＴＧ１０６に指令して、撮像素子１０５から間引き読み出しして動画撮影を継続する（図６（ｂ）のタイミングＴ２）。
【００５５】
具体的には、図３で説明したように、制御部１０９は予め設定された間引き画素位置から画像データを読み出すようにＴＧ１０６に指令する。そして、撮像素子１０５から間引き読み出しされる１フレーム分の画像データがバッファ１０７のＲバッファ１０７ａ、Ｇバッファ１０７ｂ、Ｂバッファ１０７ｃにそれぞれ読み出される。そして、バッファ１０７に読み出された間引き画素の画像データから、図４（ａ）に示すようなベイヤー配列の画像データＰｂａｙｅｒ（ｘ，ｙ）を作成する。
【００５６】
（ステップＳ２０２）制御部１０９は、ベイヤー配列の画像データＰｂａｙｅｒ（ｘ，ｙ）に対して、ベイヤー配列用の色補間処理を行うように信号処理部１０８に指令する。制御部１０９から指令を受けた信号処理部１０８は、ベイヤー配列の画像データＰｂａｙｅｒ（ｘ，ｙ）に対してベイヤー配列用の色補間処理を施して各画素にＲＧＢ３色の色成分を有する図４（ｂ）に示すような画像データＰｒｇｂ（ｘ，ｙ）を作成する。このようにして、制御部１０９は、所定のフレームレート（例えば３０フレーム／秒）で、間引き読み出しされたデータから画像データＰｒｇｂ（ｘ，ｙ）を作成し、バッファ１０７に一時的に記憶する。
【００５７】
（ステップＳ２０３）ステップＳ１０６と同様に、制御部１０９は、バッファ１０７に作成された画像データＰｒｇｂ（ｘ，ｙ）に対して、信号処理部１０８に所定の画像処理を行わせる。
【００５８】
（ステップＳ２０４）ステップＳ１０７と同様に、制御部１０９は、動画用の画像圧縮処理が行われた動画データをメモリカードＩＦ１１１を介してメモリカード１１１ａに記録する。ここで、ステップＳ２０１からステップＳ２０４までの処理は、先のステップＳ１０５からステップＳ１０７までの処理と同様に、動画圧縮方法に応じて、平行して実行される。
【００５９】
動画ボタン１１２ｃが再び押下されると（図６（ｂ）のタイミングＴ３）、次のステップＳ１０９に進み、制御部１０９は一連の動画撮影を終了し、記録処理部１５４は、撮影された動画データに自動生成されるファイル名を付加して、メモリカードＩＦ１１１を介してメモリカード１１１ａに動画ファイルとして保存する。
【００６０】
このようにして、動画ボタン１１２ｃが押下後の一定時間（図６（ｂ）のタイミングＴ１からＴ２の期間）だけ全画素読み出しによる高品質な動画を自動的に撮影し、一定時間経過後は、間引き読み出しによる動画撮影を行うことができる。これにより、無駄に長時間に亘って全画素読み出しによる動画撮影が行われないので、ファイル容量を抑えることができる。また、必要なシーンだけ高品質な画像で撮影することができ、且つ、その後の撮影も継続して行われるので、シーンの後半が撮影切れになることもない。
【００６１】
（応用例３）
先に説明した応用例１および応用例２は、動画ボタン１１２ｃを押下後、自動的に計時部１１３に予め設定された時間だけ全画素読み出しによる動画撮影を行うようになっていたが、応用例３では、動画ボタン１１２ｃとは別に全画素読み出しを行うためのボタンを設けて、間引き読み出しで動画撮影中に撮影者が任意のタイミングで全画素読み出しに切り替え、設定時間だけ全画素読み出しによる動画撮影を行うことができる。
【００６２】
図８は、応用例３（応用例４を含む）における電子カメラ１０１ａの構成を示すブロック図である。尚、図８において、図１と同符号のブロックは同じものを示す。図１の電子カメラ１０１との違いは、操作部１１２に高画質撮影ボタン１１２ｇを設けていることである。
【００６３】
図９は、応用例３における動画撮影時の制御部１０９の処理を示すフローチャートである。また、図６（ｃ）は、図９のフローチャートによる撮影の様子を視覚的に示した説明図である。尚、先に説明した図５のフローチャートと同じ符号のステップは同じ処理を示す。
【００６４】
図９において、ステップＳ１０１からステップＳ１０３までの処理は図５と同じである。そして、ステップＳ１０３で動画ボタン１１２ｃが押下された後、以下のステップが実行される。
【００６５】
（ステップＳ３０１）図７のステップＳ２０１と同様に、制御部１０９の撮影モード切替部１５３は間引き読み出し部１５１を選択し、間引き読み出し部１５１は、ＴＧ１０６に指令して、撮像素子１０５から間引き読み出しして動画撮影を開始する（図６（ｃ）のタイミングＴ０）。
【００６６】
（ステップＳ３０２）図７のステップＳ２０２と同様に、制御部１０９は、ベイヤー配列の画像データＰｂａｙｅｒ（ｘ，ｙ）に対して、ベイヤー配列用の色補間処理を行うように信号処理部１０８に指令し、信号処理部１０８は、ベイヤー配列の画像データＰｂａｙｅｒ（ｘ，ｙ）に対してベイヤー配列用の色補間処理を施して各画素にＲＧＢ３色の色成分を有する図４（ｂ）に示すような画像データＰｒｇｂ（ｘ，ｙ）を作成する。このようにして、制御部１０９は、所定のフレームレート（例えば３０フレーム／秒）で、間引き読み出しされたデータから画像データＰｒｇｂ（ｘ，ｙ）を作成し、バッファ１０７に一時的に記憶する。
【００６７】
（ステップＳ３０３）図７のステップＳ２０３と同様に、制御部１０９は、バッファ１０７に作成された画像データＰｒｇｂ（ｘ，ｙ）に対して、信号処理部１０８に所定の画像処理を行わせる。
【００６８】
（ステップＳ３０４）図７のステップＳ２０４と同様に、制御部１０９は、動画用の画像圧縮処理が行われた動画データをメモリカードＩＦ１１１を介してメモリカード１１１ａに記録する。ここで、ステップＳ３０１からステップＳ３０４までの処理は、図７のステップＳ２０１からステップＳ２０４までの処理と同様に、動画圧縮方法に応じて、平行して実行される。
【００６９】
（ステップＳ３０５）制御部１０９は、操作部１１２の高画質撮影ボタン１１２ｇが押下されたか否かを判別する。そして、高画質撮影ボタン１１２ｇが押下された場合はステップＳ３０７に進み、高画質撮影ボタン１１２ｇが押下されていない場合はステップＳ３０６に進む。
【００７０】
（ステップＳ３０６）制御部１０９は、操作部１１２の動画ボタン１１２ｃが押下されたか否かを判別する。そして、動画ボタン１１２ｃが押下された場合はステップＳ３１２に進み、動画ボタン１１２ｃが押下されていない場合はステップＳ３０１に戻って間引き読み出しによる動画撮影を継続する。
【００７１】
（ステップＳ３０７）制御部１０９は、図５のステップＳ１０４と同様に、メモリ１１４に記憶されている設定時間を読み出して計時部１１３に設定し、計時部１１３を起動する（タイマー起動）。
【００７２】
（ステップＳ３０８）図７のステップＳ１０５と同様に、制御部１０９の撮影モード切替部１５３は全画素読み出し部１５２を選択し、全画素読み出し部１５２は、ＴＧ１０６に指令して、撮像素子１０５から全画素読み出しして動画撮影を開始する（図６（ｃ）のタイミングＴ１）。
【００７３】
（ステップＳ３０９）図７のステップＳ１０６と同様に、制御部１０９は、バッファ１０７に作成された画像データＰｒｇｂ（ｘ，ｙ）に対して、信号処理部１０８に所定の画像処理を行うよう指令する。
【００７４】
（ステップＳ３１０）図７のステップＳ１０７と同様に、制御部１０９は、動画用の画像圧縮処理が行われた動画データをメモリカードＩＦ１１１を介してメモリカード１１１ａに記録する。ここで、ステップＳ３０８からステップＳ３１０までの処理は、先のステップＳ１０５からステップＳ１０７までの処理と同様に、動画圧縮方法に応じて、平行して実行される。
【００７５】
（ステップＳ３１１）図７のステップＳ１０８と同様に、制御部１０９は、計時部１１３に設定された時間が経過したか否かを判別する。そして、設定時間が経過していない場合はステップＳ３０８に戻って動画撮影を継続し、設定時間が経過した場合はステップＳ３０１に戻って、間引き読み出しによる動画撮影を行う（図６（ｃ）のタイミングＴ２）。
【００７６】
（ステップＳ３１２）制御部１０９は、一連の動画撮影を終了する。具体的には、制御部１０９の記録処理部１５４は、撮影された動画データに自動生成されるファイル名を付加して、メモリカードＩＦ１１１を介してメモリカード１１１ａに動画ファイルとして保存する。
【００７７】
このようにして、動画ボタン１１２ｃが押下後に間引き読み出しによる動画撮影を開始し（図６（ｃ）のタイミングＴ０）、タイミングＴ１で高画質撮影ボタン１１２ｇが押下されるまで間引き読み出しによる動画撮影を行う。そして、タイミングＴ１で高画質撮影ボタン１１２ｇが押下されると、全画素読み出しによる動画撮影を開始する。そして、設定時間（図６（ｃ）のタイミングＴ１からＴ２の期間）だけ全画素読み出しによる高品質な動画を自動的に撮影する。さらに、設定時間の経過後は、間引き読み出しにより動画撮影を継続して行うことができる。また、間引き読み出しによる動画撮影中に、撮影者が高画質撮影ボタン１１２ｇを押下することにより、自由なタイミングで必要なシーンだけを撮影することができる。これにより、無駄に長時間の動画撮影が行われないので、ファイル容量が大きくならないようにすることができ、鑑賞する場合に長時間に亘るつまらない動画が再生されることがなくなり、鑑賞者は飽きることなく全画素読み出しによる高品質な動画を鑑賞することができる。
【００７８】
（応用例４）
次に、電子カメラ１０１の応用例４の電子カメラ１０１ａについて説明する。電子カメラ１０１ａの基本構成は図８と同じであるが、操作部１１２の高画質撮影ボタン１１２ｇを計時部１１３がカウントする時間の延長を指示するための延長ボタン１１２ｇとして動作する。
【００７９】
電子カメラ１０１の応用例４は、動画ボタン１１２ｃを押下後、自動的に計時部１１３に予め設定された時間だけ全画素読み出しによる動画撮影を行い、設定時間が経過後に動画撮影を終了する動作は応用例２と同様であるが、設定時間が経過する前に延長ボタン１１２ｇを押下することにより、計時部１１３がカウントする時間を延長することができる。
【００８０】
図１０は、応用例４における動画撮影時の制御部１０９の処理を示すフローチャートである。また、図１１は、図１０のフローチャートによる撮影の様子を視覚的に示した説明図である。尚、先に説明した図５のフローチャートと同じ符号のステップは同じ処理を示す。
【００８１】
図１０において、ステップＳ１０１からステップＳ１０７までの処理は図５と同じであるが、ステップＳ１０７とステップＳ１０８との間で以下に示すステップＳ４０１からステップＳ４０４までの処理が実行される。
【００８２】
（ステップＳ４０１）制御部１０９は、全画素読み出しによる動画の撮影中に、計時部１１３に設定された時間が終了間際（例えば２秒前など）であるか否かを判別する。終了間際の場合は次のステップＳ４０２に進み、終了間際ではない場合はステップＳ４０３に進む。
【００８３】
（ステップＳ４０２）制御部１０９は、表示部１１０に終了メッセージを表示する。例えば図１１において、計時部１１３が設定時間をカウントし終えるタイミングＴ２の少し前のタイミングＴ１２で、電子カメラ１０１ａの表示部１１０に「まもなく高画質撮影を終了します」というメッセージを表示する。或いは、ＬＥＤ６０１を点滅させるようにしてもよい。
【００８４】
（ステップＳ４０３）制御部１０９は、全画素読み出しによる動画の撮影中に、計時部１１３に設定された時間が経過するタイミング（図１１のタイミングＴ２）の前で、延長ボタン１１２ｇが押下されたか否かを判別する。延長ボタン１１２ｇが押下された場合は次のステップＳ４０４に進み、延長ボタン１１２ｇが押下されていない場合はステップＳ１０８に進む。
【００８５】
（ステップＳ４０４）制御部１０９は、計時部１１３がカウントしている時間を予め設定された時間（例えば３秒間）だけ延長する。尚、この延長時間についても、先のタイマーの設定時間と同様にメモリ１１４に予め記憶されている。図１１において、本来は計時部１１３が予め設定された時間が経過するタイミングＴ２で全画素読み出しによる動画撮影を終了するが、ここではタイミングＴ２に延長時間を加えたタイミングＴ４まで全画素読み出しによる動画撮影が延長される。
【００８６】
尚、延長ボタン１１２ｇが押下されない場合は、ステップＳ１０７の次にステップＳ１０８が実行されるので、図５のフローチャートと同様に、設定時間が経過後に自動的に動画撮影を終了する。そして、次のステップＳ１０９において、制御部１０９は一連の動画撮影を終了し、記録処理部１５４は、撮影された動画データに自動生成されるファイル名を付加して、メモリカードＩＦ１１１を介してメモリカード１１１ａに動画ファイルとして保存する。
【００８７】
このようにして、動画ボタン１１２ｃが押下後の一定時間（図１１のタイミングＴ１からＴ２の期間）が終了する前に延長ボタン１１２ｇを押下して全画素読み出しによる動画撮影する時間を延長することができる。これにより、全画素読み出しによる高品質な動画撮影を予め設定された固定時間だけ行うのではなく、重要なシーンの途中で全画素読み出しによる動画撮影が終了しそうな場合に、延長ボタン１１２ｇを押下することにより、撮影時間を延長して全画素読み出しによる動画撮影を行うことができる。このように、無駄に長時間に亘って全画素読み出しによる動画撮影が行われないので、ファイル容量を抑えることができる。また、撮影したいシーンだけ高品質な画像で撮影することができ、且つ、必要に応じて撮影を延長することもできるので、シーンの後半が撮影切れになることもない。
【００８８】
特に、メッセージ表示などにより撮影者に高画質撮影の終了が近づいていることを警告するので、撮影者は撮影時間の延長が必要であるか否かを判断することができ、撮影時間の延長が必要な場合は、延長ボタン１１２ｇを押下するだけで予め決められた時間だけ撮影を延長することができる。尚、延長ボタン１１２ｇを押下後に再び撮影時間の終了が近づいているメッセージを表示するようにしてもよく、撮影者は複数回の撮影時間の延長を行うことができる。特に、撮影時間を延長した場合でも、延長した時間が経過後に自動的に動画撮影を終了するので、無駄に長時間に亘って全画素読み出しによる動画撮影が行われず、ファイル容量を抑えることができる。
【００８９】
（応用例５）
次に、電子カメラ１０１の応用例５として、電子カメラ１０１ｂについて図１２を用いて説明する。電子カメラ１０１ｂの基本構成は図８と同じであるが、制御部１０９ｂには顔認識部１５５が追加されている。
【００９０】
顔認識部１５５は、撮像素子１０５で撮影された画像に予め設定された特定の顔が含まれているか否かを判別する。尚、特定の顔を検出するために、顔の特徴量をメモリ１１４に予め登録しておく。顔の特徴量の登録は、例えば設定メニューの中に顔の登録メニューを設け、登録メニューの中で登録したい人物の顔を撮影するか、或いは登録したい人物の顔が撮影された画像を選択し、撮影された画像または選択された画像の中にある顔の特徴量（顔の輪郭、目、鼻、唇などの配置や形状など）を抽出し、メモリ１１４に登録する。登録メニューは、例えばメニューボタン１１２ｅを押下して表示部１１０に表示されるメニュー項目の中からセレクターボタン１１２ｆで選択する。
【００９１】
電子カメラ１０１の応用例５は、動画ボタン１１２ｃを押下後、自動的に計時部１１３に予め設定された時間だけ全画素読み出しによる動画撮影を行い、動画撮影中に登録された特定の顔を検出した場合は、設定時間の経過に拘らず、全画素読み出しによる動画撮影を継続する。そして、特定の顔が非検出になった時に設定時間が経過していれば動画撮影を終了し、特定の顔が非検出になった時に設定時間が残っていれば、残りの設定時間が経過するまで動画撮影を行う。
【００９２】
図１３は、応用例５における本変形例における動画撮影時の制御部１０９ｂの処理を示すフローチャートである。尚、先に説明した図５のフローチャートと同じ符号のステップは同じ処理を示す。
【００９３】
図１３において、ステップＳ１０１からステップＳ１０７までの処理は図５と同じであるが、ステップＳ１０７とステップＳ１０８との間に、次に示すステップＳ６０１が実行される。
【００９４】
（ステップＳ６０１）制御部１０９の顔認識部１５５は、全画素読み出しによる動画の撮影中の画像の中に、メモリ１１４に予め記憶された特定の顔があるか否かを判別する。特定の顔がある場合はステップＳ１０５に戻って全画素読み出しによる動画撮影を継続する。逆に、特定の顔が無い場合は、次のステップＳ１０８に進む。
【００９５】
ステップＳ１０８は、図５のステップＳ１０８と同様の処理を行い、計時部１１３で設定時間が経過したか否かを判別する。そして、設定時間が経過していない場合はステップＳ１０５に戻って動画撮影を継続し、設定時間が経過した場合は次のステップＳ１０９に進み、制御部１０９ｂは一連の動画撮影を終了し、記録処理部１５４は、撮影された動画データに自動生成されるファイル名を付加して、メモリカードＩＦ１１１を介してメモリカード１１１ａに動画ファイルとして保存する。
【００９６】
図１４（ａ）は、図１３のフローチャートによる撮影の様子を視覚的に示した説明図である。例えば、タイミングＴ１で動画ボタン１１２ｃが押下されると、全画素読み出しによる動画撮影を開始する。そして、設定時間が経過するタイミングＴ２より前に、顔認識部１５５が特定の顔の検出を行うと、設定時間のタイミングＴ２になっても動画撮影を終了せずに特定の顔が非検出になるタイミングＴ５まで延長される。
【００９７】
このようにして、動画ボタン１１２ｃを押下後、撮影者が撮影したい特定の人物の顔が動画撮影されている場合は、設定時間が経過後（タイミングＴ２後）でも動画撮影を強制的に終了することなく、特定の顔が非検出になるまで動画撮影を延長することができる。これにより、撮影者が撮影したい人物が撮影されている途中で撮影が終了してしまうという問題を防止することができる。しかも、特定の顔が検出されていない場合は、図５の場合と同様に、設定時間が経過後に自動的に全画素読み出しによる動画撮影を終了することができる。このように、無駄に長時間に亘って全画素読み出しによる動画撮影が行われないので、ファイル容量を抑えることができる。また、撮影したい被写体を自動的に録画時間を延長して高品質な画像で撮影することができるので、シーンの途中で撮影が終了してしまうことがない。
【００９８】
尚、上記の例では、特定の顔を認識するようにしたが、特定の自動車や電車などの乗り物、或いは鳥や犬などの動物でも構わず、特徴量やテンプレートなどによって認識できる物であれば同様に適用可能である。
【００９９】
（応用例６）
次に、電子カメラ１０１の応用例６について説明する。応用例６は、応用例５の電子カメラ１０１ｂの顔認識部１５５を利用する。そして、応用例６では、顔認識部１５５が予め登録した特定の顔を検出すると全画素読み出しによる動画撮影を開始し、特定の顔が非検出になるまで全画素読み出しによる動画撮影を継続する。
【０１００】
図１５は、本変形例における動画撮影時の制御部１０９ｂの処理を示すフローチャートである。尚、先に説明した図５のフローチャートと同じ符号のステップは同じ処理を示す。
【０１０１】
図１５において、ステップＳ１０１からステップＳ１０３までの処理は図５と同じである。そして、ステップＳ１０３で動画ボタン１１２ｃを押下後、次の各ステップが実行される。
【０１０２】
（ステップＳ７０１）図７のステップＳ２０１および図９のステップＳ３０１と同様に、制御部１０９の撮影モード切替部１５３は間引き読み出し部１５１を選択し、間引き読み出し部１５１は、ＴＧ１０６に指令して、撮像素子１０５から間引き読み出しして動画撮影を開始する（図１４（ｂ）のタイミングＴ０）。
【０１０３】
（ステップＳ７０２）図７のステップＳ２０２および図９のステップＳ３０２と同様にベイヤー配列用の色補間処理を実行する。
【０１０４】
（ステップＳ７０３）図７のステップＳ２０３および図９のステップＳ３０３と同様に、信号処理部１０８は色補間後の画像データに対して所定の画像処理を行う。
【０１０５】
（ステップＳ７０４）図７のステップＳ２０４および図９のステップＳ３０４と同様に、制御部１０９は、動画用の画像圧縮処理が行われた動画データをメモリカードＩＦ１１１を介してメモリカード１１１ａに記録する。
【０１０６】
（ステップＳ７０５）制御部１０９は、操作部１１２の動画ボタン１１２ｃが押下されたか否かを判別する。そして、動画ボタン１１２ｃが押下された場合はステップＳ７１１に進んで動画撮影を終了し、動画ボタン１１２ｃが押下されていない場合は次のステップに進む。
【０１０７】
（ステップＳ７０６）制御部１０９の顔認識部１５５は、全画素読み出しによる動画撮影中の画像の中に、メモリ１１４に予め記憶された特定の顔があるか否かを判別する。特定の顔がある場合はステップＳ７０８に進み、特定の顔が無い場合はステップＳ７０１に戻って間引き読み出しによる動画撮影を継続する。
【０１０８】
（ステップＳ７０７）図７のステップＳ１０５および図９のステップＳ３０８と同様に、制御部１０９の撮影モード切替部１５３は全画素読み出し部１５２を選択し、全画素読み出し部１５２は、ＴＧ１０６に指令して、撮像素子１０５から全画素読み出しして動画撮影を開始する（図１４（ｂ）のタイミングＴ１）。
【０１０９】
（ステップＳ７０８）図７のステップＳ１０６および図９のステップＳ３０９と同様に、信号処理部１０８は全画素読み出しされた画像データに対して所定の画像処理を行う。
【０１１０】
（ステップＳ７０９）図７のステップＳ１０７および図９のステップＳ３１０と同様に、制御部１０９は、動画用の画像圧縮処理が行われた動画データをメモリカードＩＦ１１１を介してメモリカード１１１ａに記録する。
【０１１１】
（ステップＳ７１０）制御部１０９は、操作部１１２の動画ボタン１１２ｃが押下されたか否かを判別する。そして、動画ボタン１１２ｃが押下された場合はステップＳ７１１に進んで動画撮影を終了し、動画ボタン１１２ｃが押下されていない場合はステップＳ７０６に戻って全画素読み出しによる動画撮影を継続する。
【０１１２】
（ステップＳ７１１）図７のステップＳ１０９および図９のステップＳ３１２と同様に、制御部１０９は、一連の動画撮影を終了する。
【０１１３】
このようにして、動画ボタン１１２ｃを押下後、撮影者が撮影したい特定の人物の顔を検出するまでは間引き読み出しによる動画撮影を行い、特定の顔を検出した場合に全画素読み出しによる動画撮影に自動的に切り替える。そして、特定の顔が非検出になると、再び、間引き読み出しによる動画撮影に自動的に切り替えて撮影を継続する。これにより、撮影者が撮影したい人物が撮影画面に入ると全画素読み出しによる高品質な動画撮影を行い、撮影したい人物が撮影画面に入っていない場合は間引き読み出しによる動画撮影を行うので、ファイル容量を抑えることができる。さらに、撮影したい被写体だけを自動的に高品質の全画素読み出しにより動画撮影することができる。
【０１１４】
以上、複数の実施形態を例に挙げて説明してきたように、本発明に係る多板式撮像素子を有する撮像装置は、予め設定された条件に応じて全画素読み出しによる高画質の動画を撮影するので、保存ファイルのデータ容量が非常に大きくなるという問題を解消することができる。また、必要なシーンだけでなく前後する無用なシーンを長時間に亘って撮影された動画を後で再生する場合、鑑賞者は長時間拘束されるので苦痛であったが、本発明に係る撮像装置では、必要なシーンだけを高画質の動画で撮影して保存するので録画時間が短くなり、ファイル容量を少なくすることができる。さらに、鑑賞する時間も短くなるので、鑑賞者も飽きることなく必要なシーンだけを高画質の動画で楽しむことができ、撮影はしたけれども一回も再生しなかったということが少なくなる。
【０１１５】
以上、本発明に係る撮像装置について、各実施形態で例を挙げて説明してきたが、その精神またはその主要な特徴から逸脱することなく他の多様な形で実施することができる。そのため、上述した実施形態はあらゆる点で単なる例示に過ぎず、限定的に解釈してはならない。本発明は、特許請求の範囲によって示されるものであって、本発明は明細書本文にはなんら拘束されない。さらに、特許請求の範囲の均等範囲に属する変形や変更は、全て本発明の範囲内である。
【符号の説明】
【０１１６】
１０１・・・電子カメラ；１０２・・・レンズ；１０３・・・メカニカルシャッタ；１０４・・・分光部；１０５・・・撮像素子；１０５ａ・・・Ｒ用撮像素子；１０５ｂ・・・Ｇ用撮像素子；１０５ｃ・・・Ｂ用撮像素子；１０６・・・ＴＧ；１０７・・・バッファ；１０７ａ・・・Ｒバッファ；１０７ｂ・・・Ｇバッファ；１０７ｃ・・・Ｂバッファ；１０８・・・信号処理部；１０９・・・制御部；１１０・・・表示部；１１１・・・メモリカードＩＦ；１１１ａ・・・メモリカード；１１２・・・操作部；１１２ａ・・・電源ボタン；１１２ｂ・・・レリーズボタン；１１２ｃ・・・動画ボタン；１１２ｅ・・・メニューボタン；１１２ｄ・・・モード選択ダイヤル；１１２ｆ・・・セレクターボタン；１１２ｇ・・・高画質撮影ボタン（ｏｒ延長ボタン）；１５１・・・間引き読み出し部；１５２・・・全画素読み出し部；１５３・・・撮影モード切替部；１５４・・・記録処理部；１５５・・・顔認識部
【図１】
2012147150.tif 000003
【図２】
2012147150.tif 000004
【図３】
2012147150.tif 000005
【図４】
2012147150.tif 000006
【図５】
2012147150.tif 000007
【図６】
2012147150.tif 000008
【図７】
2012147150.tif 000009
【図８】
2012147150.tif 000010
【図９】
2012147150.tif 000011
【図１０】
2012147150.tif 000012
【図１１】
2012147150.tif 000013
【図１２】
2012147150.tif 000014
【図１３】
2012147150.tif 000015
【図１４】
2012147150.tif 000016
【図１５】
2012147150.tif 000017