(57)【要約】【課題】ＨＦＲフレーム及びＮＦＲフレームで構成される疑似的なＮＦＲ動画像におけるノイズの発生を低減することができる撮像装置を提供する。【解決手段】撮像装置１００は、ＣＭＯＳセンサ１０１からＮＦＲでフレームを取得している間にＨＦＲに切り替えられた場合、ＨＦＲ加算フレームで構成される動画像を表示部１０９に表示し、ＨＦＲ加算フレームを記録メディア１１１に記録する。【選択図】図２
2020053944.tif 000002
【特許請求の範囲】
【請求項１】
撮像素子を備え、撮影した被写体の動画像を構成する複数の画像を前記撮像素子から取得する撮像装置であって、
前記撮像素子から取得した複数の画像を記録する記録手段と、
前記複数の画像で構成される動画像を表示する表示手段とを備え、
前記撮像素子から第１のフレームレートで画像を取得している間に前記第１のフレームレートより高速な第２のフレームレートに切り替えられた場合、前記表示手段は、前記第２のフレームレートで取得した画像を加算した加算画像で構成される動画像を表示し、前記記録手段は、前記加算画像を記録することを特徴とする撮像装置。
【請求項２】
前記第２のフレームレートで取得した画像を保持する保持手段を更に備え、
前記記録手段は、前記加算画像の記録を完了後に前記保持手段に保持された前記第２のフレームレートで取得した画像を記録することを特徴とする請求項１記載の撮像装置。
【請求項３】
前記加算画像の蓄積時間は、前記第１のフレームレートで取得した画像の蓄積時間と略一致するように制御されることを特徴とする請求項１又は２記載の撮像装置。
【請求項４】
前記加算画像の加算数に応じて前記第１のフレームレートで取得した画像の蓄積時間、及び前記第１のフレームレートで取得した画像に対するゲイン値を制御することを特徴とする請求項１乃至３のいずれか１項に記載の撮像装置。
【請求項５】
前記第１のフレームレートで取得した画像の蓄積時間は、前記加算画像の加算数が予め定められた前記加算数の上限値を超えないように調整されることを特徴とする請求項４記載の撮像装置。
【請求項６】
撮像素子を備え、撮影した被写体の動画像を構成する複数の画像を前記撮像素子から取得する撮像装置による撮像方法であって、
前記撮像素子から取得した複数の画像を記録する記録ステップと、
前記複数の画像で構成される動画像を表示する表示ステップとを有し、
前記撮像素子から第１のフレームレートで画像を取得している間に前記第１のフレームレートより高速な第２のフレームレートに切り替えられた場合、前記表示ステップは、前記第２のフレームレートで取得した画像を加算した加算画像で構成される動画像を表示し、前記記録ステップは、前記加算画像を記録することを特徴とする撮像方法。
【請求項７】
撮像素子を備え、撮影した被写体の動画像を構成する複数の画像を前記撮像素子から取得する撮像装置による撮像方法をコンピュータに実行させるプログラムであって、
前記撮像方法は、
前記撮像素子から取得した複数の画像を記録する記録ステップと、
前記複数の画像で構成される動画像を表示する表示ステップとを有し、
前記撮像素子から第１のフレームレートで画像を取得している間に前記第１のフレームレートより高速な第２のフレームレートに切り替えられた場合、前記表示ステップは、前記第２のフレームレートで取得した画像を加算した加算画像で構成される動画像を表示し、前記記録ステップは、前記加算画像を記録することを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置、撮像方法、及びプログラムに関する。
【背景技術】
【０００２】
動画撮影を行う撮像装置が知られている。撮像装置は、当該撮像装置のＣＭＯＳセンサが読み出した画像である複数のフレームで構成される動画像を撮像装置の記録デバイスに記録し、また、当該動画像を表示する。ＣＭＯＳセンサは、フレームの読み出し処理を比較的高速に実施可能であるが、読み出したフレームに施す所定の信号処理を読み出し処理程高速に実施することができない。これに対し、例えば、ＣＭＯＳセンサは、高速で読み出したフレームに対して所定の信号処理を施すことなく、当該フレームをＣＭＯＳセンサに積層されたＤＲＡＭに転送する（例えば、非特許文献１参照）。これにより、例えば、動画撮影中に、ノーマルフレームレート（以下、「ＮＦＲ」という。）からＮＦＲより高速なハイフレームレート（以下、「ＨＦＲ」という。）に切り替えられた際に、ＮＦＲで読み出されたフレーム（以下、「ＮＦＲフレーム」）とＨＦＲで読み出されたフレーム（以下、「ＨＦＲフレーム」）で構成されるフレームレート混載動画像を表示することができる。
【０００３】
フレームレート混載動画像では、例えば、当該フレームレート混載動画像におけるＨＦＲ読み出し期間に対応する所定の期間がスローモーションで表示される。また、フレームレート混載動画像は、ＮＦＲフレームとＨＦＲ読み出し期間に読み出された複数のＨＦＲフレームのうちの一のＨＦＲフレームとを用いて、ＨＦＲ読み出し期間もスローモーションで表示されずに、まるでＮＦＲフレームのみで構成されたような疑似的なＮＦＲ動画像として表示される。疑似的なＮＦＲ動画像の表示において、例えば、一のＨＦＲフレームの蓄積時間がＮＦＲフレームの蓄積時間より短い場合には、それを補うためのゲイン補正を一のＨＦＲフレームに対して行うことが考えられる。
【先行技術文献】
【非特許文献】
【０００４】
【非特許文献１】ＩＳＳＣＣ２０１７／ＳＥＳＳＩＯＮ４／ＩＭＡＧＥＲＳ／４．６
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上述したように、一のＨＦＲフレームに対してゲイン補正を行うと、ゲイン補正の実施に起因してＨＦＲフレームにノイズが発生し、その結果、ＨＦＲフレームの部分に違和感のある動画像が表示されてしまうという問題が生じる。
【０００６】
本発明の目的は、ＨＦＲフレーム及びＮＦＲフレームで構成される疑似的なＮＦＲ動画像におけるノイズの発生を低減することができる撮像装置、撮像方法、及びプログラムを提供することにある。
【課題を解決するための手段】
【０００７】
上記目的を達成するために、本発明の撮像装置は、撮像素子を備え、撮影した被写体の動画像を構成する複数の画像を前記撮像素子から取得する撮像装置であって、前記撮像素子から取得した複数の画像を記録する記録手段と、前記複数の画像で構成される動画像を表示する表示手段とを備え、前記撮像素子から第１のフレームレートで画像を取得している間に前記第１のフレームレートより高速な第２のフレームレートに切り替えられた場合、前記表示手段は、前記第２のフレームレートで取得した画像を加算した加算画像で構成される動画像を表示し、前記記録手段は、前記加算画像を記録することを特徴とする。
【発明の効果】
【０００８】
本発明によれば、ＨＦＲフレーム及びＮＦＲフレームで構成される疑似的なＮＦＲ動画像におけるノイズの発生を低減することができる。
【図面の簡単な説明】
【０００９】
【図１】本発明の実施の形態に係る撮像装置の構成を概略的に示すブロック図である。
【図２】図１のＣＭＯＳセンサにおいてフレームレートが切り替えられた際の読み出し動作を説明するための図である。
【図３】図１のＣＭＯＳセンサにおいてフレームレートが切り替えられた際のフレームの表示及び記録のタイミングを説明するための図である。
【図４】図３の期間Ｔ３０１〜Ｔ３０２におけるＣＭＯＳセンサの動作を説明するための図である。
【図５】図３の期間Ｔ３０２〜Ｔ３０３におけるＣＭＯＳセンサの動作を説明するための図である。
【図６】図３の期間Ｔ３０３〜Ｔ３０４におけるＣＭＯＳセンサの動作を説明するための図である。
【図７】図３の期間Ｔ３０４〜Ｔ３０５におけるＣＭＯＳセンサの動作を説明するための図である。
【図８】図１の撮像装置によるＮＦＲ蓄積時間及びＮＦＲゲイン値の制御について説明するための図である。
【図９】図１の撮像装置によるＮＦＲ蓄積時間及びＮＦＲゲイン値の制御について説明するための図である。
【図１０】図１の撮像装置によって実行される動画撮影処理の手順を示すフローチャートである。
【発明を実施するための形態】
【００１０】
以下、本発明の実施の形態について図面を参照しながら詳述する。
【００１１】
図１は、本発明の実施の形態に係る撮像装置１００の構成を概略的に示すブロック図である。撮像装置１００は、動画撮影機能及び撮影した動画像を表示する表示機能を備える装置、例えば、カメラ、スマートフォン、タブレット端末、及びＰＣである。撮像装置１００は、動画撮影中にフレームレートがＮＦＲからＨＦＲに切り替えられると、ＨＦＲ読み出し期間のみスローモーションとなる動画像を撮影可能である。撮像装置１００は、ＣＭＯＳセンサ１０１（撮像素子）、表示部１０９、及び記録メディア１１１を備える。
【００１２】
ＣＭＯＳセンサ１０１は、表示部１０９及び記録メディア１１１と接続されている。また、ＣＭＯＳセンサ１０１は、複数の画素が配列された画素部１０２、信号処理回路部１０３、及びＤＲＡＭ１０７を備える。信号処理回路部１０３は、ＡＤ変換部１０４、信号処理部１０５、表示出力制御部１０８、及び記録出力制御部１１０を備える。
【００１３】
ＣＭＯＳセンサ１０１では、画素部１０２の各画素からフレームを構成するための信号が出力される。各画素から出力された信号は、信号処理回路部１０３のＡＤ変換部１０４によってＡＤ変換される。ＡＤ変換された信号は、信号処理部１０５に出力される。信号処理部１０５は、フレームメモリ１０６を備える。信号処理部１０５は、受信した信号に対し、フレームメモリ１０６を用いた後述するフレーム加算処理等の信号処理を施し、信号処理済みの信号を表示出力制御部１０８や記録出力制御部１１０に出力する。また、信号処理部１０５は、受信した信号を必要に応じてＤＲＡＭ１０７に転送する。表示出力制御部１０８は、受信した信号を表示部１０９に出力することで、画素部１０２で読み出したフレームで構成される動画像を表示部１０９に表示させる。記録出力制御部１１０は、受信した信号を記録メディア１１１へ出力することで、画素部１０２で読み出したフレームで構成される動画像を記録メディア１１１に保存する。
【００１４】
なお、上述した各モジュールの処理能力として、画素部１０２、ＡＤ変換部１０４、及びＤＲＡＭ１０７は、各種処理をＨＦＲ以上で実施可能であり、表示出力制御部１０８及び記録出力制御部１１０は、各種処理をＮＦＲ以上ＨＦＲ未満で実施可能である。また、信号処理部１０５は、上記信号処理を伴わない処理をＨＦＲ以上で実施可能であり、信号処理を伴う処理をＮＦＲ以上ＨＦＲ未満で実施可能である。
【００１５】
図２は、図１のＣＭＯＳセンサ１０１においてフレームレートが切り替えられた際の読み出し動作を説明するための図である。図２において、「Ｒｅｓｓｔ」及び「Ｒｅａｄ」で囲われたブロックが１フレームを示し、当該ブロックの横幅が蓄積時間となる。
【００１６】
図２において、期間Ｔ１では、ＣＭＯＳセンサ１０１がＮＦＲで動作し、センサ動作によって読み出されたＮＦＲフレームが１フレーム遅れで表示部１０９に表示され、また、記録メディア１１１に記録される。期間Ｔ２では、ＣＭＯＳセンサ１０１は、ＨＦＲで動作し、蓄積時間の短い複数のＨＦＲフレームを高速で読み出す。一方、表示部１０９では、ＣＭＯＳセンサ１０１によって読み出された複数のＨＦＲフレームが、ＮＦＲにおける１フレームと同じ蓄積時間となるようにフレーム加算されたＨＦＲ加算フレーム（加算画像）が表示される。また、記録メディア１１１には、当該ＨＦＲ加算フレームとフレーム加算される前の複数のＨＦＲフレームとの両方が記録される。
【００１７】
図３は、図１のＣＭＯＳセンサ１０１においてフレームレートが切り替えられた際のフレームの表示及び記録のタイミングを説明するための図である。
【００１８】
図３において、期間Ｔ３０１〜Ｔ３０２では、画素部１０２の各画素からＮＦＲで出力された信号であってＮＦＲフレームを構成するための信号（以下、「ＮＦＲ信号」という。）が、図４に示すように、ＡＤ変換部１０４でＡＤ変換される。ＡＤ変換されたＮＦＲ信号は、信号処理部１０５に出力される。信号処理部１０５は、受信したＮＦＲ信号に信号処理を施す。信号処理部１０５は、信号処理済みのＮＦＲ信号を表示出力制御部１０８を介して表示部１０９に出力する。また、信号処理部１０５は、信号処理済みのＮＦＲ信号を記録出力制御部１１０を介して記録メディア１１１に出力する。
【００１９】
期間Ｔ３０２〜Ｔ３０３では、画素部１０２の各画素からＨＦＲで出力された信号であってＨＦＲフレームを構成するための信号（以下、「ＨＦＲ信号」という。）が、ＡＤ変換部１０４でＡＤ変換される。ＡＤ変換されたＨＦＲ信号は、信号処理部１０５に出力される。信号処理部１０５は、受信したＨＦＲ信号を、図５の破線Ａのように、ＤＲＡＭ１０７へ転送する。また、信号処理部１０５は、これと並列で、受信したＨＦＲ信号に対してフレーム加算処理を施す。本実施の形態では、フレーム加算処理済みのＨＦＲ信号に基づいて上述したＨＦＲ加算フレームを構成することができる。信号処理部１０５は、フレーム加算処理済みのＨＦＲ信号を表示出力制御部１０８を介して表示部１０９に出力する。また、信号処理部１０５は、当該フレーム加算処理済みのＨＦＲ信号を記録出力制御部１１０を介して記録メディア１１１に出力する。これにより、ＨＦＲ読み出し期間である期間Ｔ３０２〜Ｔ３０３において、ＨＦＲで読み出されたにも関わらず、ＮＦＲで読み出されたフレームとして使用可能なＨＦＲ加算フレームを記録メディア１１１に保存することができる。例えば、撮像装置１００は、ＮＦＲフレーム及びＨＦＲ加算フレームを用いて、ＨＦＲ読み出し期間もスローモーションで表示されずに、まるでＮＦＲフレームのみで構成されたような疑似的なＮＦＲ動画像を表示部１０９に表示する。
【００２０】
期間Ｔ３０３〜Ｔ３０４では、画素部１０２の各画素から出力されたＮＦＲ信号が、ＡＤ変換部１０４でＡＤ変換され、ＡＤ変換されたＮＦＲ信号が信号処理部１０５に出力される。信号処理部１０５は、受信したＮＦＲ信号に対して信号処理を施す。信号処理部１０５は、信号処理済みのＮＦＲ信号を表示出力制御部１０８を介して表示部１０９へ出力する。また、信号処理部１０５は、当該信号処理済みのＮＦＲ信号を、図６の破線Ａに示すように、ＤＲＡＭ１０７へ出力する。この処理と並行で、信号処理部１０５は、期間Ｔ３０２〜Ｔ３０３でＤＲＡＭ１０７に記録されたＨＦＲ信号をＤＲＡＭ１０７から取得する（例えば、図６の破線Ｂを参照。）。信号処理部１０５は、受信したＨＦＲ信号に対してノイズリダクション等の信号処理を施す。信号処理部１０５は、信号処理済みのＨＦＲ信号を記録出力制御部１１０を介して記録メディア１１１に出力する。これにより、期間Ｔ３０２〜Ｔ３０３に画素部１０２から出力されたＨＦＲ信号を記録メディア１１１に記録しながら、期間Ｔ３０３〜Ｔ３０４に画素部１０２から出力されたＮＦＲ信号に基づいてデータ欠損が無い動画像を表示部１０９に表示し続けることができる。
【００２１】
期間Ｔ３０４〜Ｔ３０５では、画素部１０２の各画素から出力されたＮＦＲ信号が、ＡＤ変換部１０４でＡＤ変換され、ＡＤ変換されたＮＦＲ信号が信号処理部１０５に出力される。信号処理部１０５は、受信したＮＦＲ信号に対し、ノイズリダクション等の信号処理を施す。信号処理部１０５は、信号処理済みのＮＦＲ信号を、図７の破線Ａに示すように、ＤＲＡＭ１０７へ出力する。また、信号処理部１０５は、当該信号処理済みのＮＦＲ信号を表示出力制御部１０８を介して表示部１０９へ出力する。ＤＲＡＭ１０７は、期間Ｔ３０３〜Ｔ３０４に記録した信号処理済みのＮＦＲ信号を、図７の破線Ｂに示すように、記録出力制御部１１０を介して記録メディア１１１に出力する。このときのＤＲＡＭ１０７からの出力レートは記録出力制御部１１０の処理速度によって決定される。期間Ｔ３０５〜Ｔ３０６では、期間Ｔ３０１〜Ｔ３０２と同様の処理が行われる。
【００２２】
このようにして本実施の形態では、ＣＭＯＳセンサ１０１からＮＦＲでフレームを取得している間にＨＦＲに切り替えられた場合、ＨＦＲ加算フレームで構成される動画像が表示部１０９に表示され、ＨＦＲ加算フレームが記録メディア１１１に記録される。これにより、ＨＦＲフレーム及びＮＦＲフレームで構成される疑似的なＮＦＲ動画像において、ノイズの発生要因となるゲイン補正をＨＦＲフレームに施す必要をなくすことができる。その結果、ＨＦＲフレーム及びＮＦＲフレームで構成される疑似的なＮＦＲ動画像におけるノイズの発生を低減することができる。
【００２３】
また、上述した実施の形態では、記録メディア１１１は、ＨＦＲ加算フレームの記録を完了後に当該ＨＦＲ加算フレームの元であるＨＦＲフレームを記録する（例えば、期間Ｔ３０３〜Ｔ３０４を参照。）。これにより、ノイズの発生が低減された疑似的なＮＦＲ動画像の他に、ＨＦＲ読み出し期間に対応する所定の期間がスローモーションで表示される動画像を表示部１０９に表示することができる。
【００２４】
さらに、上述した実施の形態では、ＨＦＲ加算フレームの蓄積時間は、ＮＦＲフレームの蓄積時間と略一致するように制御される。これにより、ゲイン補正を行うことなく、ＨＦＲフレームの蓄積時間の不足分を補うことができ、もって、違和感のない動画像を表示部１０９に表示することができる。
【００２５】
以上、本発明について、上述した実施の形態を用いて説明したが、本発明は上述した実施の形態に限定されるものではない。例えば、ＨＦＲ加算フレームの加算数に応じてＮＦＲフレームの蓄積時間、及びＮＦＲフレームに対するゲイン値が制御されても良い。
【００２６】
上述した実施の形態では、ＣＭＯＳセンサ１０１からＮＦＲでフレームを取得している間にＨＦＲに切り替えられた場合、表示用として生成されたＨＦＲ加算フレームを記録メディア１１１に記録することで、例えば、非特許文献１の撮像装置（例えば、図８のＡを参照。）と比べて、ＨＦＲフレーム及びＮＦＲフレームで構成される疑似的なＮＦＲ動画像におけるノイズの発生を低減することができる（例えば、図８のＢを参照。）。しかし、ゲイン補正が行われないＮＦＲフレームに対し、ＨＦＲ加算フレームでは、ゲイン補正程では無いがフレーム加算処理による蓄積時間の不足分の補正が行われるため、フレーム加算の加算数に応じて若干ノイズが発生してしまう。これにより、図８のＢに示すように、ＮＦＲフレームとＨＦＲ加算フレームとでノイズ感に差が生じ、このノイズ感の差に起因して違和感のある動画像となってしまう。
【００２７】
これに対し、本実施の形態では、ＨＦＲ加算フレームの加算数に応じてＮＦＲフレームの蓄積時間及びＮＦＲフレームに対するゲイン値が制御される。
【００２８】
以下では、フレーム加算数をＮとし、ＮＦＲ蓄積時間をＴｖｎとし、ＨＦＲ蓄積時間をＴｖｈとし、ＮＦＲのフレームレート数をｆｐｓｎとし、ＨＦＲのフレームレート数をｆｐｓｈとし、ＮＦＲゲイン値をＧｎとし、ＨＦＲゲイン値をＧｈとする。ノイズ感を統一するためには、フレーム加算によるノイズの増加を√Ｎとして下記式（１）が成り立つ。
【００２９】
【数１】
2020053944.tif 000003
加えて、露光条件を同じとすると、下記式（２）が成り立つ。
【００３０】
【数２】
2020053944.tif 000004
これら式（１）、（２）より下記式（３）が導出される。
【００３１】
【数３】
2020053944.tif 000005
ここで、フレーム加算数Ｎの上限値Ｎｍａｘは、ＮＦＲとＨＦＲのフレームレート数の比によって決定されるので、下記式（４）となる。
【００３２】
【数４】
2020053944.tif 000006
また、ＮＦＲの蓄積時間Ｔｖｎは、式（３）、（４）より求められる下記式（５）によって規定される。
【００３３】
【数５】
2020053944.tif 000007
【００３４】
例えば、撮像装置１００は、図８のＣに示すように、ＮＦＲゲイン値Ｇｎを「１」から「４」に制御することで、ＮＦＲフレームのノイズ感をＨＦＲ加算フレームのノイズ感と一致するように調整する。また、撮像装置１００は、ＮＦＲゲイン値Ｇｎの制御に伴うＮＦＲフレームの変動分を、ＮＦＲ蓄積時間Ｔｖｎを減らす、つまり、１／Ｔｖｎを増やすことで元の値に補正する。なお、ＮＦＲ蓄積時間Ｔｖｎは、フレーム加算数Ｎが上限Ｎｍａｘを超えない範囲で調整される。このようにして、互いのノイズ感を一致させて、違和感のない動画像を生成することができる。
【００３５】
また、撮影対象となる被写体の露光量が変化した場合も、撮像装置１００は、式（１）〜（５）に従って、ＮＦＲ蓄積時間Ｔｖｎ及びＮＦＲゲイン値Ｇｎを調整して、ＮＦＲフレームとＨＦＲ加算フレームとのノイズ感を一致させるように制御する。例えば、撮像装置１００は、図８のＣより被写体の露光量が減少すると、ＨＦＲゲイン値Ｇｈを増やして補正処理を行う。このときのＨＦＲ加算フレームのノイズ感とＮＦＲフレームのノイズ感が一致するようにＮＦＲ蓄積時間Ｔｖｎ及びＮＦＲゲイン値Ｇｎを制御する（例えば、図９の「露光量‐１段」を参照）。
【００３６】
図１０は、図１の撮像装置１００によって実行される動画撮影処理の手順を示すフローチャートである。図１０の処理は、ユーザによる動画撮影の開始指示を受け付けた際に実行される。
【００３７】
図１０において、撮像装置１００は、ＮＦＲ及びＨＦＲを混在した動画撮影モードであるＳＨＦＲモードがユーザに選択されたか否かを判別する（ステップＳ１００１）。
【００３８】
ステップＳ１００１の判別の結果、ＳＨＦＲモードが選択されないとき、撮像装置１００は、選択された他のモードによる動画撮影を行う。
【００３９】
ステップＳ１００１の判別の結果、ＳＨＦＲモードが選択されたとき、撮像装置１００は、ＮＦＲ蓄積時間Ｔｖｎを、式（５）を満たすように制限する。具体的に、撮像装置１００は、ＮＦＲ蓄積時間Ｔｖｎの上限値として下記式（６）を設定する（ステップＳ１００２）。
【００４０】
【数６】
2020053944.tif 000008
【００４１】
次いで、撮像装置１００は、撮影終了を指示するためのスイッチＳＷ＿Ｅ（不図示）のオン操作を受け付けたか否かを判別する（ステップＳ１００３）。
【００４２】
ステップＳ１００３の判別の結果、スイッチＳＷ＿Ｅのオン操作を受け付けたとき、撮像装置１００は、動画撮影を終了する。ステップＳ１００３の判別の結果、スイッチＳＷ＿Ｅのオン操作を受け付けないとき、撮像装置１００は、ＨＦＲへの遷移を指示するためのスイッチＳＷ＿Ｈ（不図示）のオン操作を受け付けたか否かを判別する（ステップＳ１００４）。
【００４３】
ステップＳ１００４の判別の結果、スイッチＳＷ＿Ｈのオン操作を受け付けないとき、撮像装置１００は、ステップＳ１００３の処理に戻る。ステップＳ１００４の判別の結果、スイッチＳＷ＿Ｈのオン操作を受け付けたとき、撮像装置１００は、ＤＲＡＭ１０７の利用可否を判別する（ステップＳ１００５）。
【００４４】
ステップＳ１００５の判別の結果、ＤＲＡＭ１０７を利用不可能であるとき、撮像装置１００は、画素部１０２から取得したＨＦＲフレームをＤＲＡＭ１０７に保持できないため、ステップＳ１００３の処理に戻る。ステップＳ１００５の判別の結果、ＤＲＡＭ１０７を利用可能であるとき、撮像装置１００は、ＨＦＲ蓄積時間ＴｖｈをＨＦＲにおいて動作可能な１／ｆｐｓｈ以下に制限する。具体的に、撮像装置１００は、ＨＦＲ蓄積時間Ｔｖｈの上限値として１／ｆｐｓｈを設定する（ステップＳ１００６）。次いで、撮像装置１００は、ＮＦＲ蓄積時間Ｔｖｎが１／ｆｐｓｈ以上であるか否かを判別する（ステップＳ１００７）。
【００４５】
ステップＳ１００７の判別の結果、ＮＦＲの蓄積時間Ｔｖｎが１／ｆｐｓｈ未満であるとき、撮像装置１００は、ＨＦＲの撮影条件をＮＦＲの撮影条件に合わせて設定する。具体的に、撮像装置１００は、ＨＦＲ蓄積時間ＴｖｈをＮＦＲ蓄積時間Ｔｖｎと同じ値に設定し、また、ＨＦＲゲイン値ＧｈをＮＦＲゲイン値Ｇｎと同じ値に設定する（ステップＳ１００８）。次いで、撮像装置１００は、後述するステップＳ１０１３以降の処理を行う。
【００４６】
ステップＳ１００７の判別の結果、ＮＦＲ蓄積時間Ｔｖｎが１／ｆｐｓｈ以上であるとき、撮像装置１００は、ＨＦＲ蓄積時間Ｔｖｈに１／ｆｐｓｈを設定する（ステップＳ１００９）。次いで、撮像装置１００は、式（３）で算出されたＮがＮｍａｘを超えているか否かを判別する（ステップＳ１０１０）。
【００４７】
ステップＳ１０１０の判別の結果、ＮがＮｍａｘを超えていないとき、撮像装置１００は、式（１）のＮに式（３）で算出された値を代入して、ＨＦＲゲイン値Ｇｈを算出する（ステップＳ１０１１）。次いで、撮像装置１００は、後述するステップＳ１０１３以降の処理を行う。
【００４８】
ステップＳ１０１０の判別の結果、ＮがＮｍａｘを超えているとき、撮像装置１００は、式（１）のＮにＮｍａｘを代入して、ＨＦＲゲイン値Ｇｈを算出する（ステップＳ１０１２）。次いで、撮像装置１００は、スイッチＳＷ＿Ｈのオフ操作を受け付けたか否かを判別する（ステップＳ１０１３）。
【００４９】
ステップＳ１０１３の判別の結果、スイッチＳＷ＿Ｈのオフ操作を受け付けたとき、撮像装置１００は、ＨＦＲによる動画撮影を終了し（ステップＳ１０１４）、ステップＳ１００３の処理に戻る。ステップＳ１０１３の判別の結果、スイッチＳＷ＿Ｈのオフ操作を受け付けないとき、撮像装置１００は、ＤＲＡＭ１０７の空き領域の有無を判別する（ステップＳ１０１５）。
【００５０】
ステップＳ１０１５の判別の結果、ＤＲＡＭ１０７に空き領域があるとき、撮像装置１００は、ステップＳ１０１３の処理に戻る。ステップＳ１０１５の判別の結果、ＤＲＡＭ１０７に空き領域がないとき、撮像装置１００は、ステップＳ１０１４以降の処理を行う。
【００５１】
本発明は、上述の実施の形態の１以上の機能を実現するプログラムをネットワーク又は記憶媒体を介してシステム又は装置に供給し、該システム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読み出して実行する処理でも実現可能である。また、本発明は、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
【符号の説明】
【００５２】
１００  撮像装置
１０１  ＣＭＯＳセンサ
１０７  ＤＲＡＭ
１０９  表示部
１１１  記録メディア
Ｎ  フレーム加算数
Ｔｖｎ  ＮＦＲ蓄積時間
Ｔｖｈ  ＨＦＲ蓄積時間
Ｇｎ  ＮＦＲゲイン値
Ｎｍａｘ  フレーム加算数の上限値
【図１】
2020053944.tif 000009
【図２】
2020053944.tif 000010
【図３】
2020053944.tif 000011
【図４】
2020053944.tif 000012
【図５】
2020053944.tif 000013
【図６】
2020053944.tif 000014
【図７】
2020053944.tif 000015
【図８】
2020053944.tif 000016
【図９】
2020053944.tif 000017
【図１０】
2020053944.tif 000018