(57)【特許請求の範囲】
【請求項１】
撮像手段により逐次撮像される被写体の動画像を１つの連続した動画像データとして逐次記録する動画記録手段と、
この動画記録手段による１つの連続した動画像データの撮像および記録中に、前記撮像手段により撮像される被写体の状態変化に合わせて、当該被写体の撮像条件を調整する調整手段と、
前記動画記録手段による１つの連続した動画像データの撮像および記録中に、動画像を記録する際のフレームレートを切り替える切替手段と、
この切替手段により前記動画像を記録する際のフレームレートが第１記録フレームレートから前記第１記録フレームレートよりも高速の第２記録フレームレートに切り替えられた場合には、この第２記録フレームレートでの記録中における前記調整手段による撮像条件の調整を制限する調整制御手段と、
を備えたことを特徴とする撮像装置。
【請求項２】
前記調整制御手段は、更に、
前記第１記録フレームレートから前記第２記録フレームレートに切り替えられた際に、この切り替え以前に調整された撮像条件を保持するように前記調整手段による撮像条件の調整を制限するか、或いは、この切り替え以前と比較して撮像条件がより緩やかに変化するように前記調整手段による撮像条件の調整を制限することを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記動画記録手段により記録された動画像データを、記録時のフレームレートと同じフレームレートで再生する再生手段と、
前記切替手段により一時的に記録時のフレームレートが切り替えられた形で記録された動画像データを前記再生手段により再生する場合、当該一時的に記録時のフレームレートが切り替えられた部分を再生するときの再生時のフレームレートを、記録時のフレームレートとは異なるフレームレートで再生させる再生制御手段と、を更に備えることを特徴とする請求項２に記載の撮像装置。
【請求項４】
前記再生制御手段は、更に、
前記動画記録手段により記録された１つの動画像データの全体を連続的に再生する場合に、前記第２記録フレームレートで記録した部分が自動的にスローモーションで再生されるように、前記第１記録フレームレートで記録された部分と前記第２記録フレームレートで記録された部分の再生時のフレームレートを変えることなく該動画像データの全体を前記第１記録フレームレートと同じフレームレートで連続的に再生させることを特徴とする請求項３に記載の撮像装置。
【請求項５】
前記撮像手段による被写体の動画像の撮像により生成された複数のフレーム画像に基づいて、被写体の状態を検出する状態検出手段を更に備え、
前記状態検出手段は、
前記第２記録フレームレートでの動画像の撮像の際に、当該第２記録フレームレートに対応する間隔よりも長い所定間隔を空けて撮像された各フレーム画像について、被写体の状態を検出することを特徴とする請求項２〜４の何れか一項に記載の撮像装置。
【請求項６】
装置本体に生じる動きの大きさを検出する動き検出手段を更に備え、
前記調整制御手段は、
前記第２記録フレームレートでの動画像の記録の際に、前記動き検出手段により検出された動きの大きさが所定値よりも大きい場合に、前記第２記録フレームレートに対応する間隔よりも長い所定間隔を空けて撮像された各フレーム画像より検出される被写体の状態に基づいて、動画像における当該被写体の記録状態が緩やかに変化するように、前記調整手段による制限された撮像条件の調整を行うことを特徴とする請求項５に記載の撮像装置。
【請求項７】
前記調整制御手段は、更に、
前記第２記録フレームレートでの動画像の記録の際に、当該第２記録フレームレートに対応する間隔よりも長い所定間隔を空けて撮像された２つのフレーム画像の各々について、前記状態検出手段により被写体の状態を検出し、これら２つのフレーム画像のうちの先のフレーム画像から検出された被写体の状態に対応して調整される撮像条件から、後のフレーム画像から検出された被写体の状態に対応して調整される撮像条件へと徐々に変化するように前記調整手段による制限された撮像条件の調整を行うことを特徴とする請求項６に記載の撮像装置。
【請求項８】
前記状態検出手段は、更に、
前記第１記録フレームレートでの動画像の記録の際に、当該第１記録フレームレートに応じた周期で撮像された各フレーム画像について、被写体の状態を逐次検出し、
前記調整制御手段は、更に、
前記状態検出手段により逐次検出された被写体の状態に従って、被写体の撮像条件を前記調整手段により逐次調整させることを特徴とする請求項６に記載の撮像装置。
【請求項９】
前記調整制御手段は、更に、
前記切替手段により前記第２記録フレームレートから前記第１記録フレームレートに切り替えられた場合に、当該第１記録フレームレートに応じた周期で撮像された各フレーム画像について、被写体の撮像条件を当該被写体の記録状態が緩やかに変化するように前記調整手段による撮像条件の調整を制限することを特徴とする請求項１〜４の何れか一項に記載の撮像装置。
【請求項１０】
装置本体に生じる動きの大きさを検出する動き検出手段と、
この動き検出手段により検出された動きの大きさが所定値以下の場合に、前記撮像手段により前記第２記録フレームレートに応じた周期で動画像を撮像させる一方で、前記検出手段により検出された動きの大きさが所定値よりも大きい場合に、前記撮像手段により前記第１記録フレームレートに応じた周期で動画像を撮像させる撮像制御手段と、を更に備えることを特徴とする請求項１〜４の何れか一項に記載の撮像装置。
【請求項１１】
前記切替手段は、更に、
ユーザによる所定操作に基づいて入力された記録フレームレートの切替指示に従って、前記動画像を記録する際のフレームレートを前記第１記録フレームレートと前記第２記録フレームレートとで切り替えることを特徴とする請求項１〜４の何れか一項に記載の撮像装置。
【請求項１２】
前記切替手段は、更に、
前記撮像手段により撮像される被写体の状態変化に基づいて、前記動画像を記録する際のフレームレートを前記第１記録フレームレートと前記第２記録フレームレートとで切り替えることを特徴とする請求項１〜４の何れか一項に記載の撮像装置。
【請求項１３】
前記撮像条件は、前記撮像手段により被写体を撮像する際の露出調整条件及びホワイトバランス調整条件のうち、少なくとも一方を含むことを特徴とする請求項１〜４の何れか一項に記載の撮像装置。
【請求項１４】
前記撮像手段により撮像された動画像から特定の被写体を検出する被写体検出手段を更に備え、
前記調整手段は、前記被写体検出手段により検出された特定の被写体を基準として、前記露出調整条件及び前記ホワイトバランス調整条件のうち、少なくとも一方を調整することを特徴とする請求項１３に記載の撮像装置。
【請求項１５】
撮像手段を備える撮像装置を用いた撮像処理方法であって、
前記撮像手段により逐次撮像される被写体の動画像を１つの連続した動画像データとして逐次記録する処理と、
前記１つの連続した動画像データの撮像および記録中に、前記撮像手段により撮像される被写体の状態変化に合わせて、当該被写体の撮像条件を調整する処理と、
前記１つの連続した動画像データの撮像および記録中に、動画像を記録する際のフレームレートを切り替える処理と、
前記動画像を記録する際のフレームレートが第１記録フレームレートから前記第１記録フレームレートよりも高速の第２記録フレームレートに切り替えられた場合には、この第２記録フレームレートでの記録中における前記撮像条件の調整を制限する処理と、
を含むことを特徴とする撮像処理方法。
【請求項１６】
撮像手段を備える撮像装置のコンピュータを、
前記撮像手段により逐次撮像される被写体の動画像を１つの連続した動画像データとして逐次記録させる動画記録手段、
この動画記録手段による１つの連続した動画像データの撮像および記録中に、前記撮像手段により撮像される被写体の状態変化に合わせて、当該被写体の撮像条件を調整する調整手段、
前記動画記録手段による１つの連続した動画像データの撮像および記録中に、動画像を記録する際のフレームレートを切り替える切替手段、
この切替手段により前記動画像を記録する際のフレームレートが第１記録フレームレートから前記第１記録フレームレートよりも高速の第２記録フレームレートに切り替えられた場合には、この第２記録フレームレートでの記録中における前記調整手段による撮像条件の調整を制限する調整制御手段、
として機能させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置、撮像処理方法及びプログラムに関する。
【背景技術】
【０００２】
従来、動画撮像の途中で、撮像フレームレートを変更することでスローモーションやハイスピードモーションで再生可能な動画像データを得ることができる撮像装置が知られている（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−１３６７５４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、一般的に、動画撮影中には、常に被写体の状態に適した露出やホワイトバランスが維持されるように、撮像条件を被写体の状態変化に追従するように調整している。そのため、例えば、動きの速い主要被写体をスローモーション再生して確認するつもりで撮像フレームレートを高速にした場合においても、露出やホワイトバランスなどの撮像条件は被写体の状態に追従するように調整されるので、この動画像データを再生したときに、主要被写体の詳細な動きをスローモーションで確認することは可能であっても、主要被写体の明るさや色合いの確認を適正に行うことができないといった問題がある。
【０００５】
本発明は、このような問題に鑑みてなされたものであり、主要被写体の状態の確認を適正に行うことが可能な動画像データを得ることができる撮像装置、撮像処理方法及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するため、本発明の撮像装置は、撮像手段により逐次撮像される被写体の動画像を１つの連続した動画像データとして逐次記録する動画記録手段と、この動画記録手段による１つの連続した動画像データの撮像および記録中に、前記撮像手段により撮像される被写体の状態変化に合わせて、当該被写体の撮像条件を調整する調整手段と、前記動画記録手段による１つの連続した動画像データの撮像および記録中に、動画像を記録する際のフレームレートを切り替える切替手段と、この切替手段により前記動画像を記録する際のフレームレートが第１記録フレームレートから前記第１記録フレームレートよりも高速の第２記録フレームレートに切り替えられた場合には、この第２記録フレームレートでの記録中における前記調整手段による撮像条件の調整を制限する調整制御手段と、を備えたことを特徴としている。
【０００７】
上記課題を解決するため、本発明の撮像処理方法は、撮像手段を備える撮像装置を用いた撮像処理方法であって、前記撮像手段により逐次撮像される被写体の動画像を１つの連続した動画像データとして逐次記録する処理と、前記１つの連続した動画像データの撮像および記録中に、前記撮像手段により撮像される被写体の状態変化に合わせて、当該被写体の撮像条件を調整する処理と、前記１つの連続した動画像データの撮像および記録中に、動画像を記録する際のフレームレートを切り替える処理と、前記動画像を記録する際のフレームレートが第１記録フレームレートから前記第１記録フレームレートよりも高速の第２記録フレームレートに切り替えられた場合には、この第２記録フレームレートでの記録中における前記撮像条件の調整を制限する処理と、を含むことを特徴としている。
【０００８】
上記課題を解決するため、本発明のプログラムは、撮像手段を備える撮像装置のコンピュータを、前記撮像手段により逐次撮像される被写体の動画像を１つの連続した動画像データとして逐次記録させる動画記録手段、この動画記録手段による１つの連続した動画像データの撮像および記録中に、前記撮像手段により撮像される被写体の状態変化に合わせて、当該被写体の撮像条件を調整する調整手段、前記動画記録手段による１つの連続した動画像データの撮像および記録中に、動画像を記録する際のフレームレートを切り替える切替手段、この切替手段により前記動画像を記録する際のフレームレートが第１記録フレームレートから前記第１記録フレームレートよりも高速の第２記録フレームレートに切り替えられた場合には、この第２記録フレームレートでの記録中における前記調整手段による撮像条件の調整を制限する調整制御手段、として機能させることを特徴としている。
【発明の効果】
【０００９】
本発明によれば、主要被写体の状態の確認を適正に行うことが可能な動画像データを得ることができる。
【図面の簡単な説明】
【００１０】
【図１】本発明を適用した実施形態１の撮像装置の概略構成を示すブロック図である。
【図２】図１の撮像装置による撮像処理に係る動作の一例を示すフローチャートである。
【図３】図２の撮像処理を説明するための図である。
【図４】本発明を適用した実施形態２の撮像装置の概略構成を示すブロック図である。
【図５】図４の撮像装置による撮像処理に係る動作の一例を示すフローチャートである。
【図６】図５の撮像処理を説明するための図である。
【図７】本発明を適用した実施形態３の撮像装置の概略構成を示すブロック図である。
【図８】図７の撮像装置による撮像処理に係る動作の一例を示すフローチャートである。
【図９】図８の撮像処理を説明するための図である。
【発明を実施するための形態】
【００１１】
以下に、本発明について、図面を用いて具体的な態様を説明する。ただし、発明の範囲は、図示例に限定されない。
【００１２】
［実施形態１］
図１は、本発明を適用した実施形態１の撮像装置１００の概略構成を示すブロック図である。
実施形態１の撮像装置１００は、被写体の動画像を１つの連続した動画像データとして記録中に、撮像される被写体の状態変化に合わせて当該被写体の撮像条件を調整し、動画像データの記録中に、動画像を記録する際のフレームレートが第１記録フレームレートから第１記録フレームレートよりも高速の第２記録フレームレートに切り替えられた場合には、この第２記録フレームレートでの記録中における撮像条件の調整を制限する。
具体的には、図１に示すように、撮像装置１００は、レンズ部１、電子撮像部２、ユニット回路部３、画像生成部４、被写体検出部５、撮像制御部６、画像処理部７、表示制御部８、表示部９、記録媒体制御部１０、操作入力部１１、バッファメモリ１２、プログラ
ムメモリ１３、中央制御部１４等を備えている。
また、画像生成部４、被写体検出部５、撮像制御部６、画像処理部７、表示制御部８、記録媒体制御部１０、バッファメモリ１２、プログラムメモリ１３、中央制御部１４は、バスライン１５を介して接続されている。
【００１３】
レンズ部１は、例えば、図示は省略するが、ズームレンズ、フォーカスレンズ、絞り等を有し、これらレンズを通過した被写体の光学像を結像する。
【００１４】
電子撮像部２は、レンズ部１の光軸上に配置されている。また、電子撮像部２は、例えば、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal-oxide Semiconductor）等のイメージセンサから構成され、レンズ部１の各種レンズを通過した光学像を撮像フレームレートに応じた所定の周期毎に二次元の画像信号（ＲＧＢ画像データ）に変換して、ユニット回路部３に出力する。
【００１５】
ユニット回路部３は、例えば、図示は省略するが、ＣＤＳ（Correlated Double Sampling：相関二重サンプリング回路）、ＡＧＣ（Auto Gain Control：ゲイン調整アンプ）、ＡＤＣ（Analog to Digital Converter：アナログ／デジタル変換器）等を具備している。このユニット回路部３は、電子撮像部２から出力されて入力される被写体の光学像に応じたアナログの画像信号を記録フレームレートに応じた所定の周期毎にＣＤＳにより保持し、当該画像信号をＡＧＣにより増幅した後、増幅された画像信号をＡＤＣによりデジタルの画像信号に変換する。そして、ユニット回路部３は、デジタルの画像信号を画像生成部４に送信する。
【００１６】
このように、レンズ部１、電子撮像部２及びユニット回路部３は、被写体を撮像する撮像手段を構成している。
【００１７】
画像生成部４は、ユニット回路部３から送られてきたデジタルの画像信号からデジタル値の輝度信号Ｙ及び色差信号Ｃｂ，Ｃｒ（ＹＵＶデータ）を生成する。
具体的には、画像生成部４は、所定の周期毎にユニット回路部３から送られてきた各フレーム画像ｆのデジタルの画像データに対して、カラープロセス回路（図示略）で画素補間処理及びγ補正処理を含むカラープロセス処理をそれぞれ行った後、デジタル値の輝度信号Ｙ及び色差信号Ｃｂ，Ｃｒ（ＹＵＶデータ）を生成する。
ここで、撮像装置１００が、動画像を撮像して動画像データとして記録する処理を行う際のフレームレートには、電子撮像部２が動画像を撮像するフレームレートを示す撮像フレームレート、撮像条件調整部６ｃが撮像条件を調整するフレームレートを示す調整フレームレート、および画像生成部が各フレームの画像を生成して動画像データとして記録媒体Ｍに記録するフレームレートを示す記録フレームレートなどがあるが、実施形態１においては、撮像フレームレートを１２０ｆｐｓや２４０ｆｐｓ等の高速のフレームレートに固定し、調整に用いるフレームや記録に用いるフレームを間引くことで、調整フレームレートや記録フレームレートを変化させるものとする。
このような動作を行うことで、調整フレームレートや記録フレームレートを切り替える際のフレームのずれなどが発生せず、容易に素早く調整フレームレートや記録フレームレートの切り替えを行うことが可能となる。しかしながら、撮像フレームレートを固定して調整フレームレートや記録フレームレートを変化させるのではなく、撮像フレームレートそのものを変化させることによってフレームを間引くことなく調整フレームレートや記録フレームレートを変化させるようにしてもよい。
【００１８】
上記記録フレームレートは、通常の動画撮影に対応するフレームレートと、当該通常の動画撮影よりも高速の動画撮影に対応するフレームレートがある。例えば、通常動画撮影に対応する記録フレームレートは、３０ｆｐｓや６０ｆｐｓ等であり、高速動画撮影に対
応する記録フレームレートは、１２０ｆｐｓや２４０ｆｐｓ等であるが、一例であってこれらに限られるものではなく、適宜任意に変更可能である。
そして、画像生成部４は、生成された輝度色差信号の画像データを、被写体検出部５、撮像制御部６及び画像処理部７に出力する。
【００１９】
被写体検出部５は、画像生成部４から出力された各フレーム画像ｆの輝度色差信号の画像データから特定の被写体を検出する。
即ち、被写体検出部５は、各フレーム画像ｆの画像データ（ＹＵＶデータ）を取得して、当該画像データに対して、例えば、顔検出処理、エッジ検出処理、特徴抽出処理等の各種画像処理を行って特定の被写体が含まれる領域（例えば、顔領域等）を検出する。具体的には、被写体検出部５は、例えば、顔検出処理、エッジ検出処理、特徴抽出処理等の各種画像処理によって特定の被写体の候補となる候補領域を抽出し、抽出された候補領域の中で所定の識別条件を満たすものを特定の被写体として検出する。
なお、所定の識別条件としては、例えば、「ヒトの顔」や「動物」などの形状を基準とするものや、画角全体の画像に対する割合（例えば、半分以上であるか）などの大きさを基準とするものや、明度や彩度が高く鮮やかな（派手な）色合いであるか否かや肌色であるか否かなどの色調を基準とするもの等が挙げられる。
また、顔検出処理やエッジ検出処理や特徴抽出処理は、公知の技術であるので、ここでは詳細な説明を省略する。
このように、被写体検出部５は、撮像手段としてのレンズ部１、電子撮像部２及びユニット回路部３により撮像された動画像から特定の被写体を検出する被写体検出手段を構成している。
【００２０】
撮像制御部６は、レンズ部１、電子撮像部２、ユニット回路部３等の動作を制御する。
即ち、撮像制御部６は、例えば、モータ等の駆動源と、この駆動源を駆動するドライバ等（何れも図示略）を備え、レンズ部１のズームレンズやフォーカスレンズを光軸方向に駆動させる。また、撮像制御部６は、例えば、レンズ部１の絞りの拡径や縮径を行う絞り駆動部（図示略）を備え、撮像条件調整部６ｃ（後述）により調整された露出調整条件に応じて絞りの拡径や縮径を行う。
【００２１】
また、撮像制御部６は、例えば、ＴＧ(Timing Generator)、電子撮像部２を駆動するドライバ等（何れも図示略）を備え、撮像フレームレートや撮像条件調整部６ｃにより調整された撮像条件（例えば、露光時間等）に従ってＴＧ及びドライバを介して電子撮像部２の動作タイミングを制御する。また、撮像制御部６は、記録フレームレートに従ってユニット回路部３の動作タイミングを制御する。
即ち、撮像制御部６は、電子撮像部２を撮像フレームレートや撮像条件（例えば、露光時間等）に従った所定のタイミングで動作させて被写体の光学像をアナログの画像信号に変換させ、ユニット回路部３を所定の記録フレームレート（例えば、通常動画撮影に対応する第１記録フレームレート等）に従った所定のタイミングで動作させて、電子撮像部２から出力されて入力される被写体の光学像に応じたアナログの画像信号をデジタルの画像信号（フレーム画像ｆ）に変換させる。つまり、撮像制御部６は、電子撮像部２及びユニット回路部３を制御して、複数のフレーム画像ｆ、…からなる被写体の動画像を第１記録フレームレートに応じた周期で撮像させる。
このとき、ユーザによる操作入力部１１の所定操作に基づいて記録フレームレートの切替指示が入力されると、撮像制御部６は、第１記録フレームレート設定部６ａ（後述）により切替えて設定された記録フレームレート（例えば、高速動画撮影に対応する第２記録フレームレート等）に応じた所定の周期毎に、電子撮像部２から出力されて入力される被写体の光学像に応じたアナログの画像信号をユニット回路部３によりデジタルの画像信号（フレーム画像ｆ）に変換させる。
【００２２】
また、撮像制御部６は、第１記録フレームレート設定部６ａと、状態検出部６ｂと、撮像条件調整部６ｃを具備している。
【００２３】
第１記録フレームレート設定部６ａは、記録フレームレートを設定する。
即ち、第１記録フレームレート設定部６ａは、ユニット回路部３の駆動周期に係る記録フレームレートをユーザによる操作入力部１１の所定操作に基づいて設定する。具体的には、通常動画撮影及び高速動画撮影の各々に対応する記録フレームレートのうち、ユーザによる操作入力部１１の選択決定用ボタン１１ｂの所定操作に基づいて指定された記録フレームレートの設定信号を中央制御部１４に出力する。中央制御部１４は、操作入力部１１から出力され入力された設定信号を撮像制御部６に出力し、撮像制御部６の第１記録フレームレート設定部６ａは、入力された設定信号に応じた記録フレームレートを設定する。つまり、１つの連続した動画像データの記録中に、ユーザによって選択決定用ボタン１１ｂが所定操作されることで、第１記録フレームレート設定部６ａは、記録フレームレートを通常動画撮影に対応する記録フレームレートと高速動画撮影に対応する記録フレームレートとで切り替えて設定する。
このように、撮像フレームレート設定部６ａは、被写体の動画像データの記録中に、動画像を記録する際のフレームレートを切り替える切替手段を構成している。
【００２４】
状態検出部６ｂは、状態検出手段として、被写体の撮像により生成された動画像を構成する複数のフレーム画像ｆ、…に基づいて、被写体の状態を検出する。即ち、状態検出部６ｂは、画像生成部４から出力された各フレーム画像ｆの輝度色差信号の画像データ（ＹＵＶデータ）に基づいて、各フレーム画像ｆの明るさや色合いを検出する。
具体的には、例えば、フレーム画像ｆの明るさを検出する場合、状態検出部６ｂは、所定の測光方法（例えば、中央重点測光方法、スポット測光方法、平均測光方法、多分割測光方法等）に応じて各フレーム画像ｆの輝度信号（Ｙ）に基づいて当該フレーム画像ｆの明るさを検出する。また、例えば、フレーム画像ｆの色合いを検出する場合、状態検出部６ｂは、各フレーム画像ｆのＹＵＶデータをＨＳＶ色空間の画像データに変換した後、彩度Ｓ及び明度Ｖのヒストグラムから光源（例えば、太陽光、蛍光灯、晴天、曇天等）の色温度に応じたグレー画素推定条件を算出する。そして、状態検出部６ｂは、グレー画素推定条件に基づいて各フレーム画像ｆに含まれるグレー成分を推定する。
このとき、状態検出部６ｂは、各フレーム画像ｆから被写体検出部５により検出された特定の被写体（例えば、人の顔領域等）を基準として各フレーム画像ｆの明るさや色合いの検出を行っても良い。
なお、中央重点測光方法とは、フレーム画像ｆの中央部に重点をおいて測光する測光方法であり、スポット測光方法とは、フレーム画像ｆの所定領域に限定して測光する測光方法であり、平均測光方法とは、フレーム画像ｆ全面で測光してその平均値をとる測光方法であり、多分割測光方法とは、フレーム画像ｆを複数の領域に分けてそれぞれ独立して測光する測光方法である。
【００２５】
撮像条件調整部６ｃは、調整手段として、撮像されている被写体の状態変化に合わせて、撮像制御部６により設定される当該被写体の撮像条件を調整する。即ち、撮像条件調整部６ｃは、状態検出部６ｂにより検出された被写体の状態を基準として、例えば、撮像制御部６による自動露出調整処理（ＡＥ）や自動ホワイトバランス調整処理（ＡＷＢ）に係る露出調整条件やホワイトバランス調整条件を調整する。
具体的には、例えば、自動露出調整処理（ＡＥ）に係る露出調整条件を調整する場合、撮像条件調整部６ｃは、状態検出部６ｂにより検出された被写体の明るさを基準として、所定のプログラム線図に基づいて、レンズ部１の絞りの絞り値、電子撮像部２のシャッター速度やユニット回路のＡＧＣの信号増幅率（ＩＳＯ感度）等を調整する。また、例えば、自動ホワイトバランス調整処理（ＡＷＢ）に係るホワイトバランス調整条件を調整する場合、撮像条件調整部６ｃは、状態検出部６ｂにより検出された被写体のグレー成分の色
（色合い）を基準として、フレーム画像ｆの各画素のＲＧＢの各色成分のゲイン量を調整する。
ここで、撮像条件調整部６ｃは、被写体検出部５により検出された特定の被写体（例えば、人の顔領域等）を基準として、露出調整条件及びホワイトバランス調整条件の少なくとも一方を調整しても良い。即ち、撮像条件調整部６ｃは、例えば、被写体検出部５により検出された人の顔領域の明るさを基準として露出調整条件を調整しても良いし、顔領域の色合いを基準としてホワイトバランス調整条件を調整しても良い。
このように、撮像条件調整部６ｃは、被写体の動画像データの記録中に、被写体の状態変化に合わせて、当該被写体の撮像条件を調整する調整手段を構成している。
【００２６】
また、撮像制御部６は、記録フレームレートに応じて撮像条件調整部６ｃによる撮像条件の調整を制限する。具体的には、撮像制御部６は、通常動画撮影に対応する記録フレームレート（第１記録フレームレート）で動画像を記録する際に、被写体の撮像条件を被写体の状態変化に追従させるように撮像条件調整部６ｃにより逐次調整させる。即ち、撮像制御部６は、通常動画撮影に対応する記録フレームレートに応じた周期で撮像される各フレーム画像ｆ（例えば、フレーム画像ｆ１等）に対して、撮像条件調整部６ｃにより露出調整条件やホワイトバランス調整条件等の被写体の撮像条件を被写体の状態変化に追従させるように逐次調整させる。
また、撮像制御部６は、記録フレームレートが通常動画撮影に対応する記録フレームレート（第１記録フレームレート）から高速動画撮影に対応する記録フレームレート（第２記録フレームレート）に切り替えられると、当該記録フレームレートの切り替え以前に調整された所定の撮像条件を保持するように撮像条件調整部６ｃによる調整を制限する。即ち、通常動画撮影に対応する記録フレームレート（第１記録フレームレート）で動画像を記録中に、ユーザによる操作入力部１１の所定操作に基づいて第１記録フレームレート設定部６ａにより記録フレームレートが高速動画撮影に対応する記録フレームレート（第２記録フレームレート）に切り替えられると、撮像制御部６は、記録フレームレートが切り替えられる前に通常動画撮影に対応する記録フレームレートに応じた周期で撮像されたフレーム画像ｆに対して撮像条件調整部６ｃにより調整された露出調整条件やホワイトバランス調整条件等の被写体の撮像条件を保持させる。
このように、撮像制御部６は、第１記録フレームレート設定部６ａにより動画像を記録する際のフレームレートが第１記録フレームレート（例えば、通常動画撮影に対応する記録フレームレート）から第１記録フレームレートよりも高速の第２記録フレームレート（例えば、高速動画撮影に対応する記録フレームレート）に切り替えられた場合には、この第２記録フレームレートでの記録中における撮像条件調整部６ｃによる撮像条件の調整を制限する調整制御手段を構成している。
【００２７】
また、撮像制御部６は、高速動画撮影に対応する記録フレームレート（第２記録フレームレート）で動画像を記録中に、ユーザによる操作入力部１１の所定操作に基づいて記録フレームレートが通常動画撮影に対応する記録フレームレート（第１記録フレームレート）に切り替えられると、当該通常動画撮影に対応する記録フレームレートで撮像された各フレーム画像ｆ（例えば、フレーム画像ｆ３等）について、フレームレートの切り替え以前と比較して被写体の記録状態が緩やかに変化するように撮像条件調整部６ｃによる調整を制限させても良い。
即ち、高速動画撮影に対応する記録フレームレートでの動画像の記録中は、被写体の撮像条件が所定の撮像条件に保持されているため、通常動画撮影に対応する記録フレームレートに切り替えられた直後、撮像されたフレーム画像ｆについて被写体の状態変化に被写体の撮像条件を直ちに追従させるように逐次調整すると、被写体の記録状態が急峻に変化してしまう。そこで、撮像制御部６は、撮像条件調整部６ｃにより露出調整条件やホワイトバランス調整条件等の被写体の撮像条件を被写体の状態変化に直ちに追従させるように調整させるのではなく、通常動画撮影に対応する記録フレームレートに切り替えられてか
らしばらくの間は、被写体の撮像条件を当該被写体の記録状態が緩やかに変化するように撮像条件調整部６ｃにより調整させる。
これにより、高速動画撮影に対応する記録フレームレートで動画像を記録中に、記録フレームレートが通常動画撮影に対応する記録フレームレートに切り替えられても、被写体の記録状態が急峻に変化することを防止することができる。
【００２８】
画像処理部７は、画像生成部４により生成された画像データ（ＹＵＶデータ）を所定の符号化方式（例えば、Ｍｏｔｉｏｎ−ＪＰＥＧ方式等）により圧縮・符号化する符号化部（図示略）や、記録媒体制御部１０から読み出された符号化された画像データを当該符号化方式に対応する復号化方式で復号化する復号化部等（何れも図示略）を具備している。
【００２９】
表示制御部８は、バッファメモリ１２に一時的に記憶されている表示用の画像データを読み出して表示部９に表示させる制御を行う。
具体的には、表示制御部８は、ＶＲＡＭ（Video Random Access Memory）、ＶＲＡＭコントローラ、デジタルビデオエンコーダなどを備えている。そして、デジタルビデオエンコーダは、バッファメモリ１２から読み出されてＶＲＡＭ（図示略）に記憶されている動画像を構成する複数のフレーム画像ｆ、…の輝度信号Ｙ及び色差信号Ｃｂ，Ｃｒを、ＶＲＡＭコントローラを介してＶＲＡＭから所定の再生フレームレートで読み出して、これらのデータを元にビデオ信号を発生して表示部９に出力する。
ここで、所定の再生フレームレートとは、動画像データを記録したときの記録フレームレートと同じフレームレートであり、再生手段としての表示部９は、例えば、通常の動画撮影に対応する３０ｆｐｓの記録フレームレートで記録された動画像データの再生であれば、３０ｆｐｓの再生フレームレートで再生を行い、また、６０ｆｐｓの記録フレームレートで記録された動画像データの再生であれば、６０ｆｐｓの再生フレームレートで再生を行う。これにより、如何なる再生フレームレートであっても実時間と同じスピードで再生することができるが、フレームレート数がより高い方（例えば、６０ｆｐｓ）がより滑らかに（よりちらつきの少ない映像で）再生することが可能である。
【００３０】
以下に説明するように、記録フレームレートが途中で切り替えられた動画像データの場合には、記録開始時に設定された記録フレームレートが当該動画像データの記録フレームレート属性として付加されている。
この動画像データを再生する場合には、記録フレームレート属性として付加されている記録フレームレートを再生開始時に読み出して、再生開始から再生終了までの間、この読み出された記録フレームレートに固定して再生を続ける。
このように、再生フレームレートを固定して再生を行う場合、入力される動画像データの記録フレームレートの変化に応じて動画像の見た目の再生速度が可変する。例えば、表示制御部８は、通常動画撮影に対応する記録フレームレート（例えば、３０ｆｐｓ）に応じた周期で撮像された複数のフレーム画像ｆ、…からなる動画像データを所定の再生フレームレート（例えば、３０ｆｐｓ）で再生すると、各フレーム画像ｆの撮像間隔と再生間隔が一致して見た目上は通常の再生速度となる。また、例えば、表示制御部８は、記録フレームレートが途中で切り替えられて、高速動画撮影に対応する記録フレームレート（例えば、２４０ｆｐｓ）に応じた周期で撮像された複数のフレーム画像ｆ、…からなる動画像データを所定の再生フレームレート（例えば、３０ｆｐｓ）で再生すると、各フレーム画像ｆの撮像間隔が再生間隔よりも短くなり見た目上はスローモーションの再生速度となる。即ち、表示制御部８は、第１記録フレームレートで記録された部分と第２記録フレームレートで記録された部分の再生時のフレームレートを変えることなく該動画像データの全体を第１記録フレームレートと同じフレームレートで連続的に再生させることで、第２記録フレームレートで記録した部分を自動的にスローモーションで再生させる。
このように、表示制御部８は、第１記録フレームレート設定部６ａにより一時的に記録時のフレームレート（例えば、２４０ｆｐｓ）が切り替えられた形で記録された動画像デ
ータを表示部９に再生表示する場合、当該一時的に記録時のフレームレートが切り替えられた部分を再生するときの再生時のフレームレートを、記録時のフレームレート（例えば、２４０ｆｐｓ）とは異なるフレームレート（例えば、３０ｆｐｓ）で再生させる再生制御手段を構成している。
【００３１】
なお、実施形態１においては、記録時のフレームレートが部分的に切り替えられた形で記録された動画像データの再生時に、当該部分を自動的にスローモーション再生できるように再生時のフレームレートを固定したが、記録時のフレームレートの変化に合わせて再生時のフレームレートを実時間に対応させるように変化させながら再生する再生方法を選択することも可能である。この場合には、部分的にスローモーション再生する代わりに、部分的に滑らかな再生を行うことが可能となる。
また、これら２つの再生方法を再生モードの選択によりユーザが任意に選択できるようにしてもよい。
【００３２】
表示部９は、例えば、液晶表示パネルであり、表示制御部８からのビデオ信号に基づいて電子撮像部２により撮像された画像などを表示画面に表示する。具体的には、表示部９は、静止画撮像モードや動画撮像モードにて、電子撮像部２及び撮像制御部６による被写体の撮像により生成された複数のフレーム画像ｆ、…を所定のフレームレートで逐次更新しながらライブビュー画像を表示する。また、表示部９は、動画として記録中の複数のフレーム画像ｆ、…を表示したり、静止画として記録される画像（レックビュー画像）を表示する。
【００３３】
記録媒体制御部１０は、記録媒体Ｍが着脱自在に構成され、装着された記録媒体Ｍからのデータの読み出しや記録媒体Ｍに対するデータの書き込みを制御する。
具体的には、記録媒体制御部１０は、画像処理部７の符号化部（図示略）により所定の圧縮形式（例えば、Ｍｏｔｉｏｎ−ＪＰＥＧ形式等）で符号化された記録用の画像データ、即ち、レンズ部１、電子撮像部２及びユニット回路部３により逐次撮像される複数のフレーム画像から構成される被写体の動画像を１つの連続した動画像データとして記録媒体（動画記録手段）Ｍに記録させる。
なお、記録媒体Ｍは、例えば、不揮発性メモリ（フラッシュメモリ）等により構成されるが、一例であってこれに限られるものではなく、適宜任意に変更可能である。
【００３４】
操作入力部１１は、当該撮像装置１００の所定操作を行うためのものである。具体的には、操作入力部１１は、被写体の撮影指示に係り、半押し及び全押し操作可能なシャッタボタン１１ａ、撮像モードや機能等の選択指示に係る選択決定用ボタン１１ｂ、ズーム量の調整指示に係るズームボタン（図示略）等を備え、これらのボタンの操作に応じて所定の操作信号を中央制御部１４に出力する。
【００３５】
バッファメモリ１２は、画像データ等を一時保存するバッファであるとともに、中央制御部１４のワーキングメモリ等としても使用される。
プログラムメモリ１３には、当該撮像装置１００の機能に係る各種プログラムやデータが格納されている。
【００３６】
中央制御部１４は、撮像装置１００の各部を制御する。具体的には、中央制御部１４は、撮像装置１００の各部を制御するＣＰＵ（図示略）を具備し、各種処理プログラム（図示略）に従って各種の制御動作を行う。
【００３７】
次に、撮像装置１００による撮像処理について、図２及び図３を参照して説明する。
図２は、撮像処理に係る動作の一例を示すフローチャートである。また、図３は、撮像処理を説明するための図である。
なお、以下の撮像処理は、ユーザによる操作入力部１１の選択決定用ボタン１１ｂの所定操作に基づいて、複数の撮像モードの中から動画像の撮像モードが選択指示された場合に実行される。また、撮像処理は、動画像の撮像指示が入力されると開始され、動画像の撮像の終了指示が入力されるまで、各ステップの処理を繰り返し実行する。
【００３８】
図２に示すように、先ず、撮像制御部６は、電子撮像部２を所定の撮像フレームレート（例えば、２４０ｆｐｓ等）で駆動させて、レンズ部１により結像された被写体の光学像を二次元の画像信号（ＲＧＢ画像データ）に変換させることでフレーム画像ｆの取り込みを行う（ステップＳ１）。
次に、撮像制御部６は、記録フレームレートに応じて処理を分岐させる（ステップＳ２）。具体的には、撮像制御部６は、記録フレームレートが通常動画撮影に対応する記録フレームレート（例えば、３０ｆｐｓ等）である場合には（ステップＳ２；通常動画撮影フレームレート）、処理をステップＳ３に移行させる一方で、記録フレームレートが高速動画撮影に対応する記録フレームレート（例えば、２４０ｆｐｓ等）である場合には（ステップＳ２；高速動画撮影フレームレート）、処理をステップＳ８に移行させる。
【００３９】
＜通常動画撮影フレームレート＞
ステップＳ２にて、通常動画撮影に対応する記録フレームレート（例えば、３０ｆｐｓ等）である場合（ステップＳ２；通常動画撮影フレームレート）、撮像制御部６は、当該通常動画撮影の記録フレームレートに応じて処理対象となるフレーム画像ｆ（例えば、フレーム画像ｆ１等；図３参照）を、所定の撮像フレームレート（例えば、２４０ｆｐｓ等）で次々と取り込まれるフレーム画像ｆの中から間引いて（この例の場合は、８枚に１枚の割合で選択して）特定する（ステップＳ３）。即ち、間引かれたフレーム画像ｆについては以下のステップＳ４からステップＳ７までの処理を実行せずにスキップし、間引かれなかった（処理対象として選択された）フレーム画像ｆについて以下のステップＳ４からステップＳ７までの処理を実行する。この間引き処理を行うことで、撮像制御部６は、電子撮像部２から出力されるアナログの画像信号をユニット回路部３により通常動画撮影の記録フレームレートに応じた所定の周期毎にデジタルの画像信号に変換させる。そして、画像生成部４は、ユニット回路部３から送られてきた処理対象のフレーム画像ｆに係るデジタルの画像信号から、デジタル値の輝度信号Ｙ及び色差信号Ｃｂ，Ｃｒ（ＹＵＶデータ）を生成する。
【００４０】
続けて、撮像制御部６の状態検出部６ｂは、画像生成部４から出力されて入力された処理対象のフレーム画像ｆの輝度色差信号の画像データ（ＹＵＶデータ）に基づいて、被写体の状態を検出する（ステップＳ４）。具体的には、状態検出部６ｂは、撮像制御部６による自動露出調整処理（ＡＥ）に用いられる処理対象のフレーム画像ｆの明るさを所定の測光方法に応じて検出したり、自動ホワイトバランス調整処理（ＡＷＢ）に用いられる処理対象のフレーム画像ｆの色合い（グレー成分）を所定の光源（例えば、太陽光等）の色温度に応じたグレー画素推定条件に基づいて検出する。
次に、被写体検出部５は、画像生成部４から出力されて入力された各フレーム画像ｆの画像データ（ＹＵＶデータ）に対して、例えば、顔検出処理、エッジ検出処理、特徴抽出処理等の各種画像処理を行って特定の被写体が含まれる領域（例えば、顔領域等）を検出する（ステップＳ５）。
【００４１】
なお、ステップＳ４における被写体の状態の検出は、当該処理対象のフレーム画像ｆよりも前に保存されるフレーム画像ｆから検出された特定の被写体（例えば、顔領域等）を基準として行っても良い。
また、ステップＳ４の被写体の状態の検出処理とステップＳ５の特定の被写体の検出処理は、処理順序を入れ替えても良く、この場合には、一の処理対象のフレーム画像ｆから検出された特定の被写体を基準として当該一の処理対象のフレーム画像ｆの明るさや色合
い等を検出しても良い。
【００４２】
次に、撮像制御部６の撮像条件調整部６ｃは、状態検出部６ｂにより検出された被写体の状態を基準として、撮像制御部６により設定される当該被写体の撮像条件を調整して、所定の格納領域に格納されている撮像条件の内容を更新する（ステップＳ６）。具体的には、撮像条件調整部６ｃは、状態検出部６ｂにより検出された被写体の状態を基準として、撮像制御部６による自動露出調整処理（ＡＥ）や自動ホワイトバランス調整処理（ＡＷＢ）に係る露出調整条件やホワイトバランス調整条件を調整する。そして、撮像条件調整部６ｃは、調整後の露出調整条件やホワイトバランス調整条件で、所定の格納領域に格納されている撮像条件の内容を更新する。
これにより、当該処理対象のフレーム画像ｆよりも後に保存されるフレーム画像ｆは、更新後の撮像条件が反映された状態で撮像されたフレーム画像ｆとなる。
【００４３】
次に、中央制御部１４は、画像生成部４により生成された当該処理対象のフレーム画像ｆを記録フレーム画像ｆとして、当該フレーム画像ｆのＹＵＶデータをバッファメモリ１２に保存させる（ステップＳ７）。つまり、通常動画撮影フレームレートの場合、２４０ｆｐｓで次々と取り込まれるフレーム画像ｆの中から８枚に１枚の割合で選択されたフレーム画像ｆが、３０ｆｐｓの記録フレームレートでバッファメモリ１２に保存されることになる。
【００４４】
＜高速動画撮影フレームレート＞
一方、ステップＳ２にて、高速動画撮影に対応する記録フレームレート（例えば、２４０ｆｐｓ等）である場合（ステップＳ２；高速動画撮影フレームレート）、撮像制御部６は、記録フレームが当該高速動画撮影に対応する記録フレームレートに切り替えられる以前の所定の撮像条件を保持するように撮像条件調整部６ｃにより調整させる（ステップＳ８）。具体的には、撮像制御部６は、記録フレームレートが高速動画撮影に対応する記録フレームレートに切り替えられる前に通常動画撮影に対応する記録フレームレートに応じた周期で撮像されたフレーム画像ｆに対して撮像条件調整部６ｃにより逐次調整されて、所定の格納領域に格納されている露出調整条件やホワイトバランス調整条件等の被写体の撮像条件を保持する。
その後、中央制御部１４は、処理をステップＳ７に移行して、高速動画撮影に対応する記録フレームレートに応じた周期で撮像されて画像生成部４により生成されたフレーム画像ｆ（例えば、フレーム画像ｆ２等；図３参照）を記録フレーム画像ｆとして、当該フレーム画像ｆのＹＵＶデータをバッファメモリ１２に保存させる（ステップＳ７）。つまり、高速動画撮影フレームレートの場合、２４０ｆｐｓで次々と取り込まれるフレーム画像ｆを間引くことなく、そのまま２４０ｆｐｓの記録フレームレートでバッファメモリ１２に保存されることになる。
上記の各処理は、動画像の撮像の終了指示が入力されるまで、繰り返し実行される。
そして、動画像の撮像の終了指示が入力されると、記録媒体制御部１０は、バッファメモリ１２に保存された動画像データに対して、当該動画像データの記録開始時に設定された記録フレームレート（この例の場合には３０ｆｐｓ）を記録フレームレート属性として付加して記録媒体Ｍに保存する。
【００４５】
以上のように、実施形態１の撮像装置１００によれば、動画撮影全体を通しては、常に被写体の状態に適した露出やホワイトバランスが維持されるように、撮像条件を被写体の状態変化に追従するように調整しながら撮影記録を行い、この動画撮影中に部分的に通常のフレームレート（第１記録フレームレート）からより高速なフレームレート（第２記録フレームレート）に切り替えられた場合には、撮像条件の変化を制限するように撮影記録を行って動画像データを記録する。従って、当該動画像データ全体を一定の再生速度で再生したときに、動画撮影全体を通しては常に被写体の状況に合った適切な露出やホワイト
バランスに調整された映像を見ることができ、かつ、決定的瞬間などをユーザの指示操作を必要とせずに自動的にスローモーション再生して主要被写体の詳細な動きを確認することができ、かつ、このスローモーション再生中における主要被写体の明るさや色合いの確認までもを適正に行うことが可能となる。
即ち、例えば、フレーム画像ｆ全面の明るさを考慮する測光方法で撮像装置１００をパーンさせながら撮像する場合など、主要被写体の状態は変化しないにも拘わらず背景が変化することにより主要被写体の明るさや色合いが変動することを防ぐことができ、その後、動画像を所定の再生フレームレートで再生した際に当該主要被写体の明るさや色合いの確認を適正に行うことができる。また、主要被写体の明るさを基準とする測光方法で回転する主要被写体を撮像する場合など、当該主要被写体の回転によって変化する光の反射度合いに応じて被写体の撮像条件を変動させないため、その後、動画像を所定の再生フレームレートで再生した際に当該主要被写体の光の反射度合いの確認を適正に行うことができる。
【００４６】
なお、上記実施形態１では、記録フレームレートが高速動画撮影に対応する記録フレームレートに切り替えられ場合には、被写体の状態の検出処理（ステップＳ４）や特定の被写体の検出処理（ステップＳ５）を行わないようにしたが、これに限られるものではなく、被写体の状態の検出処理や特定の被写体の検出処理を行うものの、撮像条件を反映させないようにしても良い。この場合には、例えば、動画像を構成する複数のフレーム画像ｆ、…の中で、被写体の状態の検出処理や特定の被写体の検出処理の実行に必要な時間を考慮した所定間隔毎にフレーム画像ｆを処理対象として特定しても良い。
【００４７】
また、記録フレームレートが高速動画撮影に対応する記録フレームレートに切り替えられた際に、フレームレートの切り替え以前の所定の撮像条件を保持するようしたが、これに限られるものではなく、被写体の撮像条件を当該被写体の記録状態が緩やかに変化するように撮像条件調整部６ｃにより調整させるようにしても良い。
即ち、例えば、動画像を構成する複数のフレーム画像ｆ、…の中で、高速動画撮影に対応する記録フレームレートに応じた間隔よりも長い所定間隔毎に撮像されたフレーム画像ｆを処理対象として、被写体の状態の検出処理や特定の被写体の検出処理を実行して、撮像条件調整部６ｃは、状態検出部６ｂにより所定間隔毎に検出された被写体の状態や被写体検出部５により検出された特定の被写体（例えば、人の顔領域等）を基準として、例えば、露出調整条件やホワイトバランス調整条件等の被写体の撮像条件を調整する。このとき、撮像制御部６は、撮像条件調整部６ｃにより露出調整条件やホワイトバランス調整条件等の被写体の撮像条件を被写体の状態変化に追従させるように調整させるのではなく、被写体の撮像条件を当該被写体の記録状態が緩やかに変化するように撮像条件調整部６ｃにより調整させる。具体的には、例えば、撮像制御部６は、所定間隔を空けて撮像された２つのフレーム画像ｆ、ｆ間の少なくとも一のフレーム画像ｆの各々について、先のフレーム画像ｆから検出された被写体の状態に対応して撮像条件調整部６ｃにより調整される撮像条件から、後のフレーム画像ｆから検出された被写体の状態に対応して撮像条件調整部６ｃにより調整される撮像条件へと徐々に変化するように撮像条件を調整させる。また、例えば、撮像制御部６は、所定間隔を空けて撮像された２つのフレーム画像ｆ、ｆについて、後のフレーム画像ｆに基づいて撮像条件調整部６ｃにより調整される撮像条件が、先のフレーム画像ｆに基づいて撮像条件調整部６ｃにより調整される撮像条件に対して所定の割合以上大きく変化する場合には、後のフレーム画像ｆに基づいて撮像条件調整部６ｃにより調整される撮像条件の変化が所定の割合小さくなるように制御する。
これにより、高速動画撮影に対応する記録フレームレートで記録された動画像の記録状態が急峻に変化することを防止して、主要被写体の状態の確認を適正に行うことができる。
【００４８】
［実施形態２］
図４は、本発明を適用した実施形態２の撮像装置２００の概略構成を示すブロック図である。
なお、実施形態２の撮像装置２００は、以下に詳細に説明する以外の点で上記実施形態１の撮像装置１００と略同様の構成をなし、詳細な説明は省略する。
【００４９】
実施形態２の撮像装置２００は、高速動画撮影に対応する記録フレームレートでの動画像の記録の際に、当該装置本体に生じる撮影方向を変化させる動きの大きさが所定値よりも大きい場合に、被写体の撮像条件を動画像における当該被写体の記録状態が緩やかに変化するように調整する。
【００５０】
具体的には、図４に示すように、撮像装置２００は、レンズ部１、電子撮像部２、ユニット回路部３、画像生成部４、状態検出部６ｂ、撮像制御部６、画像処理部７、表示制御部８、表示部９、記録媒体制御部１０、操作入力部１１、バッファメモリ１２、プログラムメモリ１３、中央制御部１４に加えて、動き検出部１６を備えている。
【００５１】
動き検出部１６は、動き検出手段として、当該撮像装置２００本体に生じる動きの大きさを検出する。
即ち、動き検出部１６は、例えば、加速度検出センサや角速度検出センサなどの動き検出センサ（図示略）を具備し、この動き検出センサからの出力信号に基づいて、当該装置本体に生じる撮影方向を変化させる動き（揺れ）の大きさ等の動き情報を特定する。
なお、動き検出部１６は、動き検出センサからの出力信号に基づいて、動きの大きさに代えて動きの速度を検出しても良い。
【００５２】
撮像制御部６は、高速動画撮影に対応する記録フレームレート（例えば、２４０ｆｐｓ等）での動画像の記録の際に、動き検出部１６により検出された当該装置本体に生じる動きの大きさが所定の閾値よりも大きいか否かを判定する。ここで、当該装置本体に生じる動きの大きさが所定の閾値よりも大きいと判定されると、撮像制御部６の状態検出部６ｂは、動画像を構成する複数のフレーム画像ｆ、…の中で、高速動画撮影に対応する記録フレームレートに応じた間隔（例えば、１／２４０秒等）よりも長い所定間隔毎に撮像されたフレーム画像ｆ（例えば、フレーム画像ｆ２等；図６参照）を処理対象として、被写体の状態の検出処理を行う。
このとき、被写体検出部５は、高速動画撮影に対応する記録フレームレートに応じた間隔よりも長い所定間隔毎に撮像されたフレーム画像ｆを処理対象として、特定の被写体の検出処理を行っても良い。
【００５３】
また、撮像制御部６は、高速動画撮影に対応する記録フレームレートでの動画像の記録の際に、動き検出部１６により検出された当該装置本体に生じる動きの大きさが所定の閾値よりも大きいと判定すると、高速動画撮影に対応する記録フレームレートに応じた間隔よりも長い所定間隔を空けて撮像された各フレーム画像ｆについて、被写体の撮像条件を被写体の状態変化に追従させるように調整させるのではなく、被写体の撮像条件を動画像における当該被写体の記録状態が緩やかに変化するように撮像条件調整部６ｃにより調整させる。
即ち、撮像制御部６の撮像条件調整部６ｃは、高速動画撮影に対応する記録フレームレートに応じた間隔よりも長い所定間隔毎に撮像された各フレーム画像ｆに対して、状態検出部６ｂにより所定間隔毎に検出された被写体の状態を基準として、例えば、露出調整条件やホワイトバランス調整条件等の被写体の撮像条件を調整する。このとき、撮像制御部６は、所定間隔を空けて撮像された２つのフレーム画像ｆ、ｆ間の少なくとも一のフレーム画像ｆの各々について、先のフレーム画像ｆから検出された被写体の状態に対応して撮像条件調整部６ｃにより調整される撮像条件から、後のフレーム画像ｆから検出された被写体の状態に対応して撮像条件調整部６ｃにより調整される撮像条件へと徐々に変化する
ように撮像条件を調整させる。
なお、撮像制御部６は、例えば、所定間隔を空けて撮像された２つのフレーム画像ｆ、ｆについて、後のフレーム画像ｆに基づいて撮像条件調整部６ｃにより調整される撮像条件が、先のフレーム画像ｆに基づいて撮像条件調整部６ｃにより調整される撮像条件に対して所定の割合以上大きく変化する場合には、後のフレーム画像ｆに基づいて撮像条件調整部６ｃにより調整される撮像条件の変化が所定の割合小さくなるように制御しても良い。
【００５４】
次に、撮像装置２００による撮像処理について、図５及び図６を参照して説明する。
図５は、撮像処理に係る動作の一例を示すフローチャートである。また、図６は、撮像処理を説明するための図である。
なお、以下の実施形態２の撮像処理は、装置本体に生じる動きの大きさの判定処理を行う以外の点は、上記実施形態１の撮像処理と略同様であり、その詳細な説明は省略する。
【００５５】
図５に示すように、先ず、撮像制御部６は、上記実施形態１の撮像処理と同様に、電子撮像部２を所定の撮像フレームレート（例えば、２４０ｆｐｓ等）で駆動させて、レンズ部１により結像された被写体の光学像を二次元の画像信号（ＲＧＢ画像データ）に変換させることでフレーム画像ｆの取り込みを行う（ステップＳ１）。
次に、撮像制御部６は、上記実施形態１の撮像処理と同様に、記録フレームレートに応じて処理を分岐させる（ステップＳ２）。
【００５６】
＜通常動画撮影フレームレート＞
ステップＳ２にて、通常動画撮影に対応する記録フレームレート（例えば、３０ｆｐｓ等）である場合（ステップＳ２；通常動画撮影フレームレート）、上記実施形態１の撮像処理と同様に、ステップＳ３〜Ｓ７の処理が行われる。
即ち、撮像制御部６は、当該通常動画撮影の記録フレームレートに応じて処理対象となるフレーム画像ｆ（例えば、フレーム画像ｆ１等；図６参照）を、所定の撮像フレームレート（例えば、２４０ｆｐｓ等）で次々と取り込まれるフレーム画像ｆの中から間引いて（この例の場合は、８枚に１枚の割合で選択して）特定する（ステップＳ３）。続けて、撮像制御部６の状態検出部６ｂは、画像生成部４から出力されて入力された処理対象のフレーム画像ｆの輝度色差信号の画像データ（ＹＵＶデータ）に基づいて、被写体の状態を検出する（ステップＳ４）。次に、被写体検出部５は、通常動画撮影の記録フレームレートに応じた所定の周期毎に画像生成部４から出力されて入力された各フレーム画像ｆの画像データ（ＹＵＶデータ）に対して各種画像処理を行って特定の被写体が含まれる領域（例えば、顔領域等）を検出する（ステップＳ５）。
続けて、撮像制御部６の撮像条件調整部６ｃは、状態検出部６ｂにより検出された被写体の状態を基準として、撮像制御部６により設定される当該被写体の撮像条件を調整して、所定の格納領域に格納されている撮像条件の内容を更新する（ステップＳ６）。
次に、中央制御部１４は、画像生成部４により通常動画撮影の記録フレームレートに応じた所定の周期毎に生成された当該処理対象のフレーム画像ｆを記録フレーム画像ｆとして、当該フレーム画像ｆのＹＵＶデータをバッファメモリ１２に保存させる（ステップＳ７）。
【００５７】
＜高速動画撮影フレームレート＞
一方、ステップＳ２にて、高速動画撮影に対応する記録フレームレート（例えば、２４０ｆｐｓ等）である場合（ステップＳ２；高速動画撮影フレームレート）、撮像制御部６は、動き検出部１６により検出された当該装置本体に生じる動きの大きさが所定の閾値よりも大きいか否かを判定する（ステップＳ２１）。即ち、撮像制御部６は、例えば、当該撮像装置１００本体の所定方向へのパーン動作等によって、当該装置本体に所定の閾値よりも大きい動きが生じているか、或いは、所定状態で固定されているかを判定する。
【００５８】
ステップＳ２１にて、当該装置本体に生じる動きの大きさが所定の閾値よりも大きくないと判定されると（ステップＳ２１；ＮＯ）、上記実施形態１の撮像処理と同様に、撮像制御部６は、記録フレームレートが当該高速動画撮影に対応する記録フレームレートに切り替えられる以前の所定の撮像条件を保持するように撮像条件調整部６ｃにより調整させる（ステップＳ８）。
その後、中央制御部１４は、処理をステップＳ７に移行して、高速動画撮影に対応する記録フレームレートに応じた所定の周期で撮像されて画像生成部４により生成されたフレーム画像ｆを記録フレーム画像ｆとして、当該フレーム画像ｆのＹＵＶデータをバッファメモリ１２に保存させる（ステップＳ７）。
【００５９】
一方、ステップＳ２１にて、当該装置本体に生じる動きの大きさが所定の閾値よりも大きいと判定されると（ステップＳ２１；ＹＥＳ）、撮像制御部６は、処理をステップＳ３に移行して、所定の撮像フレームレート（例えば、２４０ｆｐｓ等）で次々と取り込まれるフレーム画像ｆの中から、処理対象となるフレーム画像ｆを所定条件で間引いてこの例の場合は、８枚に１枚の割合で選択して）特定する（ステップＳ３）。即ち、撮像制御部６は、所定の撮像フレームレート（例えば、２４０ｆｐｓ等）で次々と取り込まれるフレーム画像ｆの中で、高速動画撮影に対応する記録フレームレートに対応する間隔よりも長い所定間隔毎に撮像されたフレーム画像ｆを処理対象として特定する。
続けて、撮像制御部６の状態検出部６ｂは、上記実施形態１の撮像処理と同様に、画像生成部４から出力されて入力された処理対象のフレーム画像ｆの輝度色差信号の画像データ（ＹＵＶデータ）に基づいて、被写体の状態を検出した後（ステップＳ４）、被写体検出部５は、画像生成部４から出力されて入力された各フレーム画像ｆの画像データ（ＹＵＶデータ）に対して各種画像処理を行って特定の被写体が含まれる領域（例えば、顔領域等）を検出する（ステップＳ５）。
【００６０】
続けて、撮像制御部６の撮像条件調整部６ｃは、状態検出部６ｂにより検出された被写体の状態を基準として、撮像制御部６により設定される当該被写体の撮像条件を調整して、所定の格納領域に格納されている撮像条件の内容を更新する（ステップＳ６）。
このとき、撮像制御部６は、高速動画撮影に対応する記録フレームレートに応じた間隔よりも長い所定間隔を空けて撮像された各フレーム画像ｆについて、被写体の撮像条件を動画像における当該被写体の記録状態が緩やかに変化するように撮像条件調整部６ｃにより調整させる。具体的には、撮像制御部６は、所定間隔を空けて撮像された２つのフレーム画像ｆ、ｆ間の少なくとも一のフレーム画像ｆの各々については、先のフレーム画像ｆから検出された被写体の状態に対応して撮像条件調整部６ｃにより調整される撮像条件から、後のフレーム画像ｆから検出された被写体の状態に対応して撮像条件調整部６ｃにより調整される撮像条件へと徐々に変化するように撮像条件を調整させる。
【００６１】
その後、中央制御部１４は、上記と同様に、処理をステップＳ７に移行して、高速動画撮影に対応する記録フレームレートに応じた周期で撮像されて画像生成部４により生成されたフレーム画像ｆを記録フレーム画像ｆとして、当該フレーム画像ｆのＹＵＶデータをバッファメモリ１２に保存させる（ステップＳ７）。
上記の各処理は、動画像の撮像の終了指示が入力されるまで、繰り返し実行される。
【００６２】
以上のように、実施形態２の撮像装置２００によれば、高速動画撮影に対応する第２記録フレームレートでの動画像の記録の際に、装置本体に生じる動きの大きさが所定の閾値よりも大きい場合に、第２記録フレームレートに対応する間隔よりも長い所定間隔を空けて撮像された各フレーム画像ｆについて、被写体の撮像条件を動画像における当該被写体の記録状態が緩やかに変化するように調整するので、当該装置本体の動きが大きい場合には、背景の変化に応じた被写体の状態変化を考慮して被写体の撮像条件を調整することが
できる。つまり、主要被写体の明るさや色合いの確認のために当該装置本体を動かさないようにして撮像する場合には、被写体の撮像条件の変動に応じて被写体の記録状態が変化することを防止することができる。つまり、決定的瞬間などのスローモーション再生中における主要被写体の明るさや色合いの確認を適正に行うことができる。
その一方で、例えば、撮像装置２００をパーンさせながら撮像する場合などの当該装置本体の動きが大きい場合には、主要被写体の明るさや色合いの確認が主とした目的とならないため、変化する背景における被写体の状態変化を考慮して被写体の撮像条件を調整することができる。つまり、動画像データを再生した際に、被写体の状況に合った適切な露出やホワイトバランスに調整された映像を見ることができる。
このとき、被写体の記録状態が緩やかに変化するように、即ち、第２記録フレームレートに対応する間隔よりも長い所定間隔を空けて撮像された２つのフレーム画像ｆ、ｆ間の少なくとも一のフレーム画像ｆの各々について、先のフレーム画像ｆから検出された被写体の状態に対応して調整される撮像条件から、後のフレーム画像ｆから検出された被写体の状態に対応して調整される撮像条件へと徐々に変化するように被写体の撮像条件を調整することで、高速動画撮影に対応する記録フレームレートで動画像の記録中に、主要被写体の明るさや色合いなどの被写体の記録状態が急峻に変化することを防止することができる。従って、その後、動画像を所定の再生フレームレートで再生した際に、主要被写体の明るさや色合いなどの被写体の記録状態が急峻には変化しないものの、背景の変化に応じた被写体の状態変化を考慮して当該主要被写体の明るさや色合いの確認を適正に行うことができる。
【００６３】
なお、上記実施形態２にあっては、例えば、撮像装置２００本体が三脚などに固定されて、当該装置本体に生じる動きの大きさが所定の閾値よりも大きくない場合、状態検出部６ｂは、撮像制御部６による自動ホワイトバランス調整処理（ＡＷＢ）に用いられる処理対象のフレーム画像ｆのグレー成分（色合い）の検出を行わず、撮像条件調整部６ｃは、自動ホワイトバランス調整処理（ＡＷＢ）に係るホワイトバランス調整条件の調整を行わないようにしても良い。つまり、例えば、当該装置本体が三脚などに固定されている場合には、光源は変化しないと推定して、自動ホワイトバランス調整処理（ＡＷＢ）に係る各種処理を省くことで、撮像処理の高速化及び消費エネルギーの削減を図ることができる。
【００６４】
［実施形態３］
図７は、本発明を適用した実施形態３の撮像装置３００の概略構成を示すブロック図である。
なお、実施形態３の撮像装置３００は、以下に詳細に説明する以外の点で上記実施形態２の撮像装置２００と略同様の構成をなし、詳細な説明は省略する。
【００６５】
実施形態３の撮像装置３００は、動画像の撮影記録時において、フレームレートを自動的に切り替える所定の動画動作モードが設定されている場合、当該装置本体に生じる動きの大きさが所定の閾値よりも大きい間は、通常動画撮影に対応する第１記録フレームレートに応じた所定の周期で動画像を撮像させ、当該装置本体に生じる動きの大きさが所定の閾値以下になった場合に、自動的に高速動画撮影に対応する第２記録フレームレートに切り替えて動画像を撮像させる。
【００６６】
具体的には、図７に示すように、撮像装置３００の撮像制御部６は、第２記録フレームレート設定部６ｄを具備している。
【００６７】
第２記録フレームレート設定部６ｄは、当該装置本体に生じる動きの大きさに応じて、記録フレームレートを切り替えて設定する。
即ち、第２記録フレームレート設定部６ｄは、動き検出部１６により検出された当該装置本体に生じる動きの大きさが所定の閾値よりも大きいか否かを判定する。そして、第２
記録フレームレート設定部６ｄは、当該装置本体に生じる動きの大きさが所定の閾値よりも大きいと判定されると、記録フレームレートを通常動画撮影に対応する記録フレームレート（第１記録フレームレート）に設定する一方で、当該装置本体に生じる動きの大きさが所定の閾値よりも大きくないと判定すると、記録フレームレートを高速動画撮影に対応する記録フレームレート（第２記録フレームレート）に設定する。
【００６８】
撮像制御部６は、撮像制御部６は、ユニット回路部３を第２記録フレームレート設定部６ｄにより切替えて設定された記録フレームレート（例えば、高速動画撮影に対応する第２記録フレームレート等）に従った所定のタイミングで動作させて、電子撮像部２から出力されて入力される被写体の光学像に応じたアナログの画像信号をデジタルの画像信号（フレーム画像ｆ）に変換させる。
【００６９】
次に、撮像装置３００による撮像処理について、図８及び図９を参照して説明する。
図８は、撮像処理に係る動作の一例を示すフローチャートである。また、図９は、撮像処理を説明するための図である。
なお、以下の実施形態３の撮像処理は、装置本体に生じる動きの大きさの大きさに応じて、記録フレームレートを切り替えて設定する以外の点は、上記実施形態１の撮像処理と略同様であり、その詳細な説明は省略する。
【００７０】
図８に示すように、先ず、撮像制御部６は、上記実施形態１の撮像処理と同様に、電子撮像部２を所定の撮像フレームレート（例えば、２４０ｆｐｓ等）で駆動させて、レンズ部１により結像された被写体の光学像を二次元の画像信号（ＲＧＢ画像データ）に変換させることでフレーム画像ｆの取り込みを行う（ステップＳ１）。
次に、第２記録フレームレート設定部６ｄは、動き検出部１６により検出された当該装置本体に生じる動きの大きさが所定の閾値よりも大きいか否かを判定する（ステップＳ３１）。即ち、第２記録フレームレート設定部６ｄは、例えば、当該撮像装置１００本体の所定方向へのパーン動作等によって、当該装置本体に所定の閾値よりも大きい動きが生じているか否かを判定する。
【００７１】
ステップＳ３１にて、第２記録フレームレート設定部６ｄは、当該装置本体に生じる動きの大きさが所定の閾値よりも大きいと判定すると（ステップＳ３１；ＹＥＳ）、記録フレームレートを通常動画撮影に対応する記録フレームレートに設定する（ステップＳ３２）。
その後、上記実施形態１の撮像処理と同様に、ステップＳ３〜Ｓ７の処理が行われる。
即ち、撮像制御部６は、当該通常動画撮影の記録フレームレートに応じて処理対象となるフレーム画像ｆ（例えば、フレーム画像ｆ１等；図９参照）を、所定の撮像フレームレート（例えば、２４０ｆｐｓ等）で次々と取り込まれるフレーム画像ｆの中から間引いて（この例の場合は、８枚に１枚の割合で選択して）特定する（ステップＳ３）。続けて、撮像制御部６の状態検出部６ｂは、画像生成部４から出力されて入力された処理対象のフレーム画像ｆの輝度色差信号の画像データ（ＹＵＶデータ）に基づいて、被写体の状態を検出する（ステップＳ４）。次に、被写体検出部５は、通常動画撮影の記録フレームレートに応じた所定の周期毎に画像生成部４から出力されて入力された各フレーム画像ｆの画像データ（ＹＵＶデータ）に対して各種画像処理を行って特定の被写体が含まれる領域（例えば、顔領域等）を検出する（ステップＳ５）。
続けて、撮像制御部６の撮像条件調整部６ｃは、状態検出部６ｂにより検出された被写体の状態を基準として、撮像制御部６により設定される当該被写体の撮像条件を調整して、所定の格納領域に格納されている撮像条件の内容を更新する（ステップＳ６）。
次に、中央制御部１４は、画像生成部４により通常動画撮影の記録フレームレートに応じた所定の周期毎に生成された当該処理対象のフレーム画像ｆを記録フレーム画像ｆとして、当該フレーム画像ｆのＹＵＶデータをバッファメモリ１２に保存させる（ステップＳ
７）。
【００７２】
一方、ステップＳ３１にて、第２記録フレームレート設定部６ｄは、当該装置本体に生じる動きの大きさが所定の閾値よりも大きくないと判定すると（ステップＳ３１；ＮＯ）、記録フレームレートを高速動画撮影に対応する記録フレームレートに設定する（ステップＳ３３）。
次に、撮像制御部６は、上記実施形態１の撮像処理と同様に、記録フレームレートが当該高速動画撮影に対応する記録フレームレートに切り替えられる以前の所定の撮像条件を保持するように撮像条件調整部６ｃにより調整させる（ステップＳ８）。
その後、中央制御部１４は、処理をステップＳ７に移行して、高速動画撮影に対応する記録フレームレートに応じた所定の周期で撮像されて画像生成部４により生成されたフレーム画像ｆ（例えば、フレーム画像ｆ２等；図９参照）を記録フレーム画像ｆとして、当該フレーム画像ｆのＹＵＶデータをバッファメモリ１２に保存させる（ステップＳ７）。
上記の各処理は、動画像の撮像の終了指示が入力されるまで、繰り返し実行される。
【００７３】
以上のように、実施形態３の撮像装置３００によれば、装置本体に生じる動きの大きさが所定の閾値以下の場合に、高速動画撮影に対応する第２記録フレームレートに応じた所定の周期で動画像を撮像させる一方で、動きの大きさが所定の閾値よりも大きい場合に、通常動画撮影に対応する第１記録フレームレートに応じた所定の周期で動画像を撮像させるので、装置本体に生じる動きの大きさに応じて記録フレームレートを自動的に切り替えて設定することができる。
即ち、記録フレームレートを切り替えるためにユーザによる操作入力部１１の所定操作を必要とすると、当該ユーザによる所定操作に基づいて当該装置本体が動いてしまい、ぶれた画像が撮像されてしまう。そこで、装置本体に生じる動きの大きさに応じて記録フレームレートを自動的に切り替えて設定することで、記録フレームレートを切り替えるためのユーザによる操作入力部１１の所定操作が不要となって、ぶれた画像が撮像されてしまうことを防止することができ、動画像データを再生した際に主要被写体の状態の確認を適正に行うことができる。
【００７４】
なお、本発明は、上記実施形態に限定されることなく、本発明の趣旨を逸脱しない範囲において、種々の改良並びに設計の変更を行っても良い。
例えば、上記実施形態１〜３にあっては、撮像制御部６は、撮像される被写体の状態変化に基づいて、記録フレームレートを通常動画撮影に対応する第１記録フレームレートと高速動画撮影に対応する第２記録フレームレートとで切り替えて設定するようにしても良い。即ち、記録フレームレートを切り替えるためにユーザによる操作入力部１１の所定操作を必要とすると、当該ユーザによる所定操作に基づいて当該装置本体が動いてしまい、ぶれた画像が撮像されてしまう。そこで、例えば、撮像される被写体の状態変化が相対的に大きい場合には、記録フレームレートを高速動画撮影に対応する第２記録フレームレートに自動的に切り替えるようにすることで、その後の動画像の再生にて各フレーム画像ｆの撮像間隔が再生間隔よりも短くなり見た目上はスローモーションで再生することができ、主要被写体の状態の確認を適正に行うことができる。
【００７５】
また、上記実施形態１〜３にあっては、状態検出部６ｂと撮像条件調整部６ｃとを分けた構成としたが、これらを一体として構成しても良い。即ち、被写体の状態を検出する状態検出部６ｂの具備する機能を撮像条件調整部６ｃに具備させるようにしても良い。
【００７６】
さらに、撮像装置１００、２００、３００の構成は、上記実施形態に例示したものは一例であり、これに限られるものではなく、少なくとも撮像手段、撮像制御手段、再生制御手段、調整手段、調整制御手段を備える構成であれば適宜任意に変更することができる。
【００７７】
加えて、上記実施形態にあっては、動画記録手段、調整手段、切替手段、調整制御手段としての機能を、中央制御部１４の制御下にて、記録媒体Ｍ、撮像条件調整部６ｃ、第１記録フレームレート設定部６ａ、撮像制御部６が駆動することにより実現される構成としたが、これに限られるものではなく、中央制御部１４のＣＰＵによって所定のプログラム等が実行されることにより実現される構成としても良い。
即ち、プログラムを記憶するプログラムメモリ１３に、動画記録処理ルーチン、調整処理ルーチン、切替処理ルーチン、調整制御処理ルーチンを含むプログラムを記憶しておく。そして、動画記録処理ルーチンにより中央制御部１４のＣＰＵを、撮像手段により逐次撮像される被写体の動画像を１つの連続した動画像データとして記録させる動画記録手段として機能させるようにしても良い。また、調整処理ルーチンにより中央制御部１４のＣＰＵを、動画記録手段による１つの連続した動画像データの記録中に、撮像手段により撮像される被写体の状態変化に合わせて、当該被写体の撮像条件を調整する調整手段として機能させるようにしても良い。また、切替処理ルーチンにより中央制御部１４のＣＰＵを、動画記録手段による１つの連続した動画像データの記録中に、動画像を記録する際のフレームレートを切り替える切替手段として機能させるようにしても良い。また、調整制御処理ルーチンにより中央制御部１４のＣＰＵを、切替手段により動画像を記録する際のフレームレートが第１記録フレームレートから当該第１記録フレームレートよりも高速の第２記録フレームレートに切り替えられた場合には、この第２記録フレームレートでの記録中における調整手段による撮像条件の調整を制限する調整制御手段として機能させるようにしても良い。
【００７８】
同様に、再生手段、再生制御手段、動き検出手段、状態検出手段、撮像制御手段、被写体検出手段についても、中央制御部１４のＣＰＵによって所定のプログラム等が実行されることにより実現される構成としても良い。
【００７９】
さらに、上記の各処理を実行するためのプログラムを格納したコンピュータ読み取り可能な媒体として、ＲＯＭやハードディスク等の他、フラッシュメモリ等の不揮発性メモリ、ＣＤ−ＲＯＭ等の可搬型記録媒体を適用することも可能である。また、プログラムのデータを所定の通信回線を介して提供する媒体としては、キャリアウェーブ（搬送波）も適用される。
【００８０】
加えて、今回開示された実施形態は、全ての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内での全ての変更が含まれることが意図される。
以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。
【００８１】
即ち、本発明の撮像装置は、撮像手段により逐次撮像される被写体の動画像を１つの連続した動画像データとして記録する動画記録手段と、この動画記録手段による１つの連続した動画像データの記録中に、前記撮像手段により撮像される被写体の状態変化に合わせて、当該被写体の撮像条件を調整する調整手段と、前記動画記録手段による１つの連続した動画像データの記録中に、動画像を記録する際のフレームレートを切り替える切替手段と、この切替手段により前記動画像を記録する際のフレームレートが第１記録フレームレートから前記第１記録フレームレートよりも高速の第２記録フレームレートに切り替えられた場合には、この第２記録フレームレートでの記録中における前記調整手段による撮像条件の調整を制限する調整制御手段と、を備えても良い。
【００８２】
また、前記調整制御手段は、更に、前記第１記録フレームレートから前記第２記録フレームレートに切り替えられた際に、この切り替え以前に調整された撮像条件を保持するように前記調整手段による撮像条件の調整を制限するか、或いは、この切り替え以前と比較
して撮像条件がより緩やかに変化するように前記調整手段による撮像条件の調整を制限しても良い。
【００８３】
また、前記動画記録手段により記録された動画像データを、記録時のフレームレートと同じフレームレートで再生する再生手段と、前記切替手段により一時的に記録時のフレームレートが切り替えられた形で記録された動画像データを前記再生手段により再生する場合、当該一時的に記録時のフレームレートが切り替えられた部分を再生するときの再生時のフレームレートを、記録時のフレームレートとは異なるフレームレートで再生させる再生制御手段と、を更に備えても良い。
【００８４】
また、前記再生制御手段は、更に、前記動画記録手段により記録された１つの動画像データの全体を連続的に再生する場合に、前記第２記録フレームレートで記録した部分が自動的にスローモーションで再生されるように、前記第１記録フレームレートで記録された部分と前記第２記録フレームレートで記録された部分の再生時のフレームレートを変えることなく該動画像データの全体を前記第１記録フレームレートと同じフレームレートで連続的に再生させても良い。
【００８５】
また、装置本体に生じる動きの大きさを検出する動き検出手段を更に備え、前記調整制御手段は、前記第２記録フレームレートでの動画像の記録の際に、前記動き検出手段により検出された動きの大きさが所定値よりも大きい場合に、前記第２記録フレームレートに対応する間隔よりも長い所定間隔を空けて撮像された各フレーム画像について、被写体の撮像条件を動画像における当該被写体の記録状態が緩やかに変化するように前記調整手段による撮像条件の調整を制限しても良い。
【００８６】
また、前記撮像手段による被写体の動画像の撮像により生成された複数のフレーム画像に基づいて、被写体の状態を検出する状態検出手段を更に備え、前記状態検出手段は、前記第２記録フレームレートでの動画像の撮像の際に、当該第２記録フレームレートに対応する間隔よりも長い所定間隔を空けて撮像された各フレーム画像について、被写体の状態を検出しても良い。
【００８７】
また、前記調整制御手段は、更に、前記第２記録フレームレートでの動画像の記録の際に、当該第２記録フレームレートに対応する間隔よりも長い所定間隔を空けて撮像された２つのフレーム画像間の少なくとも一のフレーム画像の各々について、前記状態検出手段により２つのフレーム画像のうちの先のフレーム画像から検出された被写体の状態に対応して調整される撮像条件から、後のフレーム画像から検出された被写体の状態に対応して調整される撮像条件へと徐々に変化するように前記調整手段による撮像条件の調整を制限しても良い。
【００８８】
また、前記状態検出手段は、更に、前記第１記録フレームレートでの動画像の記録の際に、当該第１記録フレームレートに応じた周期で撮像された各フレーム画像について、被写体の状態を逐次検出し、前記調整制御手段は、更に、前記状態検出手段により逐次検出された被写体の状態に従って、被写体の撮像条件を前記調整手段により逐次調整させても良い。
【００８９】
また、前記調整制御手段は、更に、前記切替手段により前記第２記録フレームレートから前記第１記録フレームレートに切り替えられた場合に、当該第１記録フレームレートに応じた周期で撮像された各フレーム画像について、被写体の撮像条件を当該被写体の記録状態が緩やかに変化するように前記調整手段による撮像条件の調整を制限しても良い。
【００９０】
また、装置本体に生じる動きの大きさを検出する動き検出手段と、この動き検出手段に
より検出された動きの大きさが所定値以下の場合に、前記撮像手段により前記第２記録フレームレートに応じた周期で動画像を撮像させる一方で、前記検出手段により検出された動きの大きさが所定値よりも大きい場合に、前記撮像手段により前記第１記録フレームレートに応じた周期で動画像を撮像させる撮像制御手段と、を更に備えても良い。
【００９１】
また、前記切替手段は、更に、ユーザによる所定操作に基づいて入力された記録フレームレートの切替指示に従って、前記動画像を記録する際のフレームレートを前記第１記録フレームレートと前記第２記録フレームレートとで切り替えても良い。
【００９２】
また、前記切替手段は、更に、前記撮像手段により撮像される被写体の状態変化に基づいて、前記動画像を記録する際のフレームレートを前記第１記録フレームレートと前記第２記録フレームレートとで切り替えても良い。
【００９３】
また、前記撮像条件は、前記撮像手段により被写体を撮像する際の露出調整条件及びホワイトバランス調整条件のうち、少なくとも一方を含んでも良い。
【００９４】
また、前記撮像手段により撮像された動画像から特定の被写体を検出する被写体検出手段を更に備え、前記調整手段は、前記被写体検出手段により検出された特定の被写体を基準として、前記露出調整条件及び前記ホワイトバランス調整条件のうち、少なくとも一方を調整しても良い。
【００９５】
また、本発明の撮像処理方法は、撮像手段を備える撮像装置を用いた撮像処理方法であって、前記撮像手段により逐次撮像される被写体の動画像を１つの連続した動画像データとして記録する処理と、前記１つの連続した動画像データの記録中に、前記撮像手段により撮像される被写体の状態変化に合わせて、当該被写体の撮像条件を調整する処理と、前記１つの連続した動画像データの記録中に、動画像を記録する際のフレームレートを切り替える処理と、前記動画像を記録する際のフレームレートが第１記録フレームレートから前記第１記録フレームレートよりも高速の第２記録フレームレートに切り替えられた場合には、この第２記録フレームレートでの記録中における前記撮像条件の調整を制限する処理と、を含む構成を採っている。
【００９６】
また、本発明のプログラムは、撮像手段を備える撮像装置のコンピュータを、前記撮像手段により逐次撮像される被写体の動画像を１つの連続した動画像データとして記録させる動画記録手段、この動画記録手段による１つの連続した動画像データの記録中に、前記撮像手段により撮像される被写体の状態変化に合わせて、当該被写体の撮像条件を調整する調整手段、前記動画記録手段による１つの連続した動画像データの記録中に、動画像を記録する際のフレームレートを切り替える切替手段、この切替手段により前記動画像を記録する際のフレームレートが第１記録フレームレートから前記第１記録フレームレートよりも高速の第２記録フレームレートに切り替えられた場合には、この第２記録フレームレートでの記録中における前記調整手段による撮像条件の調整を制限する調整制御手段、として機能させる構成を採っている。
【符号の説明】
【００９７】
１００、２００、３００  撮像装置
１      レンズ部
２      電子撮像部
５      被写体検出部
６      撮像制御部
６ａ    第１記録フレームレート設定部
６ｂ    状態検出部
６ｃ    撮像条件調整部
６ｄ    第２記録フレームレート設定部
８      表示制御部
９      表示部
１１    操作入力部
１４    中央制御部
１６    動き検出部
【図１】
0005234119.tif 000002
【図２】
0005234119.tif 000003
【図３】
0005234119.tif 000004
【図４】
0005234119.tif 000005
【図５】
0005234119.tif 000006
【図６】
0005234119.tif 000007
【図７】
0005234119.tif 000008
【図８】
0005234119.tif 000009
【図９】
0005234119.tif 000010