(57)【要約】      （修正有）【課題】動画の連続性を保ちながら、高画質な静止画撮影を実施する撮像装置を提供する。【解決手段】撮像装置は、複数の画素を複数の領域で分割し、其々異なる露光時間で画素信号が生成可能な、撮像素子０１０３と、撮像素子を複数の駆動方式で駆動して画素信号を読み出す事が可能な撮像駆動部０１０４と、撮像素子から読み出した画素信号を受けて、動画と静止画に利用可能な画像信号を生成する撮像処理部と、第一の露光時間で、撮像素子の特定の領域から画素信号を読み出す事が可能な第一の駆動モードと、第一の露光時間で読み出した特定領域の画素信号と、第二の露光時間で他領域の画素信号を読み出す事が可能な第二の駆動モードを有し、第二の駆動モードにおいて、第一の露光時間で読み出した画素信号と、第二の露光時間で読み出した画素信号を合成して、静止画用の画素信号を生成する静止画画像生成部を有する。【選択図】図１
2020141346.tif 000002
【特許請求の範囲】
【請求項１】
複数の画素を複数の領域で分割し、其々異なる露光時間で画素信号が生成可能な、撮像素子と、前記撮像素子を複数の駆動方式で駆動して画素信号を読み出す事が可能な撮像駆動部と、前記撮像素子から読み出した画素信号を受けて、動画と静止画に利用可能な画像信号を生成する撮像処理部と、第一の露光時間で、前記撮像素子の特定の領域から画素信号を読み出す事が可能な第一の駆動モードと、前記第一の露光時間で読み出した特定領域の画素信号と共に、第二の露光時間で他領域の画素信号を読み出す事が可能な第二の駆動モードを有し、前記第二の駆動モードにおいて、前記第一の露光時間で読み出した画素信号と、前記第二の露光時間で読み出した画素信号を合成して、静止画用の画素信号を生成する静止画画像生成部を有することを特徴とする撮像装置。
【請求項２】
静止画画像生成部は、第二の露光時間で読み出した画素信号を使用して、第一の露光時間で読み出した画素信号位置における、第二の露光時間で読み出した画素信号に相当する補間画素信号を生成する補間画素生成部を有することを特徴とする請求項１に記載の撮像装置。
【請求項３】
静止画画像生成部は、前記第一の露光時間と第二の露光時間の差に基づいて、前記補間画素生成部で生成した補間画素信号と、第一の露光時間で読み出した画素信号と、を切り替えることを特徴とする請求項２に記載の撮像装置。
【請求項４】
静止画画像生成部は、前記第一の露光時間と第二の露光時間の差が所定の閾値より大きい場合に、前記補間画素生成部で生成した補間画素信号を選択することを特徴とする請求項３に記載の撮像装置。
【請求項５】
前記閾値は、被写体、ないしは、撮像装置の動き量に基づいて決定されることを特徴とする請求項４に記載の撮像装置。
【請求項６】
静止画画像生成部は、前記第一の露光時間と第二の露光時間の差に基づいて合成比率を算出し、前記補間画素生成部で生成した補間画素信号と、第一の露光時間で読み出した画素信号と、を合成することを特徴とする請求項２に記載の撮像装置。
【請求項７】
静止画画像生成部は、前記第一の露光時間と第二の露光時間の差が大きくなるほど、前記補間画素生成部で生成した補間画素信号の比率を大きくすることを特徴とする請求項６に記載の撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置およびその制御方法に関し、特に、動画中に静止画撮影した際に、静止画撮影における撮像素子の駆動、ならびに、静止画生成方法を制御することで、記録される動画の連続性を保つ撮像装置に関する。
【背景技術】
【０００２】
撮像装置には、動画撮影中に静止画撮影を行う機能が搭載されている。撮像装置が撮像センサをただ１つだけ有する場合において、動画撮影中に静止画撮影を行うと、撮像センサが静止画を撮像している間は、動画を撮像することが出来ないため、静止画撮像期間中の動画用画像が間欠してしまい、その結果、記録される動画に違和感を与えてしまう。
【０００３】
これに対し、動画の連続性が失われないように、画素信号を動画用と静止画用に分割し、かつ、複数の駆動方式と露光時間で制御することが可能な撮像素子を用いることで、静止画撮影が指示された場合も、まず、動画用画素を先に読み出して動画像を生成し、その後に、動画用画素と静止画用画素を並べ替えて、１枚の静止画像を生成することで、動画の連続性を保つ手法が開示されている（特許文献１）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１４−２３６２５１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上記の特許文献１に開示された従来技術においては、静止画用画素と動画用画素の露光時間の違いについて考慮がなされていない。動画用の画素と、静止画用の画素で露光時間が異なる場合、被写体の動きに基づく、被写体のぶれ量が動画用の画素と静止画用の画素で異なってしまう。結果、生成される静止画において、被写体のぶれ量の差に基づく画質劣化が顕著となる。
【０００６】
本発明は、上記の問題点に鑑み、静止画像の露光時間に応じて、動画用の画素に対し、その周辺の静止画の画素から生成した画素と比率付け合成することで、動画の連続性を保ちながら、高画質な静止画撮影を実施することを目的とする。
【課題を解決するための手段】
【０００７】
上記の目的を達成するために、本発明に係る撮像装置は、
複数の画素を複数の領域で分割し、其々異なる露光時間で画素信号が生成可能な、撮像素子と、前記撮像素子を複数の駆動方式で駆動して画素信号を読み出す事が可能な撮像駆動部と、前記撮像素子から読み出した画素信号を受けて、動画と静止画に利用可能な画像信号を生成する撮像処理部と、第一の露光時間で、前記撮像素子の特定の領域から画素信号を読み出す事が可能な第一の駆動モードと、前記第一の露光時間で読み出した特定領域の画素信号と、第二の露光時間で他領域の画素信号を読み出す事が可能な第二の駆動モードを有し、前記第二の駆動モードにおいて、前記第一の露光時間で読み出した画素信号と、前記第二の露光時間で読み出した画素信号を合成して、静止画用の画素信号を生成する静止画画像生成部を有することを特徴とする。
【発明の効果】
【０００８】
本発明に係る撮像装置によれば、動画の連続性を保ちながら、高画質な静止画撮影を実施する。
【図面の簡単な説明】
【０００９】
【図１】本発明における撮像装置のブロック図
【図２】本発明における撮像素子の画素構成
【図３】本発明における静止画撮影時の画素並べ替え処理
【図４】本発明における動画撮影中に静止画撮影が指示された場合のタイミングチャート
【図５】本発明における画素調整手段のブロック図
【図６】本発明における画素調整手段の処理フロー
【図７】本発明における補間画素生成手段の参照画素範囲
【図８】本発明における画素調整手段の別構成事例
【発明を実施するための形態】
【００１０】
以下、本発明を実施するための形態について、図面を参照しながら説明する。
【実施例１】
【００１１】
図１は、本発明に係る撮像装置であるデジタルカメラのブロック図である。
【００１２】
図１において、光学系０１０１はレンズおよび絞りなどを備えており、撮影の際、光学系駆動手段０１０２でフォーカス調節および露出調節を行い、撮像素子０１０３に光学像を結像する。撮像素子０１０３は、光学像を電気信号に変換する光電変換機能を有し、ＣＣＤやＣＭＯＳセンサ等で構成される。撮像素子０１０３は、撮影の際、撮像素子駆動手段０１０４にて、画素並べ替え手段０１０５、および動画用画像処理手段０１０８で使用する先読み画素の読み出し、並びに、画素並び替え手段０１０５で使用する後読み画素の読み出し、の制御が行われる。
【００１３】
画素並び替え手段０１０５は、撮像素子０１０３から出力される先読み画素群と後読み画素群を、元のラスタスキャンの画素構成に戻して、メモリ０１１３へ書き込む。画素調整手段０１０６は、メモリ０１１１に配置されたラスタスキャンの画素構成となった画像（以降、静止画画像と呼称する）に対し、先読み画素群と後読み画素群の露出調整、ならびに、先読み画素群に対する調整処理を行う。静止画用画像処理手段０１０７は、画素調整手段０１０６で処理された静止画画像に対し、ノイズリダクションや現像処理等の、各種画像処理を実施し、処理画像をメモリ０１１１に書き戻す。以降、静止画用画像処理が為された静止画画像は、メモリ０１１１を介して、記録手段０１１０に渡される。
【００１４】
動画用画像処理手段０１０８は、撮像素子０１０３から出力される先読み画素群に対し、ノイズリダクションや現像処理、水平リサイズ処理等の、各種画像処理を実施し、処理画像をメモリ０１１１に書く。以降、動画用画像処理が為された先読み画素群は、メモリ０１１１を介して、表示手段０１０９ならびに記録手段０１１０に渡される。尚、静止画用画像処理手段０１０７と、動画用画像処理手段０１０８の違いとしては、動画用画像処理手段０１０８は、静止画よりも、１フレームあたりの処理時間が短くする（例えば、フレームレートが６０Ｐの場合、約１６ミリ秒で処理する）必要があるため、静止画用画像処理手段０１０７に対し、高速化を考慮した回路構成となる。尚、静止画用画像処理手段０１０７と動画用画像処理手段０１０８を統合し、動画画像（先読み画素群）の処理時間外に静止画処理を行う時分割処理構成としても良い。
【００１５】
表示手段０１０９は、例えば、ＬＣＤ（Liquid Crystal Display）やＥＶＦなどであり、表示部１０２からの画像の表示を行う。記録手段０１１０は、不図示の不揮発性メモリ制御部と不揮発性メモリから構成される。不揮発性メモリ制御部は、ＣＰＵ０１１２からの指示に応じて、不揮発性メモリにデータを書き込んだり、不揮発性メモリからデータを読み出したりする。
【００１６】
メモリ０１１１は、不図示のデータ転送を行う複数のDirect Memory Accessコントローラ、システムバス、データバス、メモリ制御部、およびＤＲＡＭなどで構成されるメモリ本体で構成され、ＣＰＵ０１１２或いはDirect Memory Accessコントローラからの指示に応じて、メモリ本体にデータの書き込み、メモリからデータの読み込みを行う。また、メモリ本体は、所定枚数の静止画像や所定時間の動画像、音声等のデータやＣＰＵ０１１２の動作用の定数、プログラム等を格納するのに十分な記憶容量を備える記憶装置である。また、メモリは、複数のメモリから構成されることも可能である。ＣＰＵ０１１２は、撮像処理装置全体の制御を司るマイクロコンピュータ等で構成され、各機能ブロックに対して動作指示を行い、各種の制御処理を実行する。
【００１７】
次に、撮像素子０１０３の読み出し制御と、画素並び替え手段０１０５の並び替え処理について説明する。
【００１８】
尚、撮像素子０１０３の具体的な駆動制御については、例えば、先行文献１で示される構成、並びに駆動制御が考えられる。ここでは、本発明における画素の読み出し順序について、説明する。
【００１９】
図２は、画素の読み出し順序の詳細を説明したものである。
【００２０】
０２０１は撮像素子０１０３を構成する画素を示しており、灰色で示される画素行０２０２は、先読み画素、白色で示される画素行０２０３は、後読み画素を示す。先読み画素と後読み画素は各々異なる蓄積時間で画素信号を読み出すことが可能である。本発明の実施形態としては、先読み画素は、行単位となっており、４行周期で先読み行が存在する。（行番号００００、０００４、０００８、００１２．．．）撮像素子０１０３は、所定の駆動に従って、先読み行０２０２を読み出し、先読み行０２０２を全て読み出し終わった後に、後読み行０２０３を読み出す。尚、以降、先読み行０２０２で構成された画像を先読み画像、後読み行０２０３で構成された画像を後読み画像、と呼称する。
【００２１】
画素並び替え手段０１０５は、メモリ０１１１に先読み画像や後読み画像を書き込む際、メモリの書き込みアドレスに対して、オフセットを付与して、書き込む制御を行う。図３は、画素並び替え手段０１０５が先読み画像、後読み画像、其々に対して、メモリアドレスのオフセットの考え方を示したものである。先読み画像のオフセットの考え方としては、まず行番号００００の先読み画素群については、開始アドレスから順に書き込んでいく。
【００２２】
続いて、行番号０００４の先読み画素群については、００００の書き込み終了アドレスに対して、行番号０００１、０００２、０００３の３行分の書き込み領域をオフセットｏｆｆｓｅｔ１として加算したアドレスを行番号０００４の書き込み開始アドレスとして書き込みを開始する。
【００２３】
続いて、行番号０００８の先読み画素群については、０００４の書き込み終了アドレスに対して、オフセットｏｆｆｓｅｔ１を加算したアドレスを行番号０００８の書き込み開始アドレスとして書き込みを開始する。この手順が、先読み画像の入力が終わるまで実施される。
【００２４】
後読み画像のオフセットの考え方としては、まず行番号０００１の後読み画素群については、開始アドレスに対し、既に書き込み済みの行番号００００の領域をオフセットｏｆｆｓｅｔ２として加算したアドレスを開始アドレスとして、順に書き込んでいく。
【００２５】
続いて、行番号０００２、０００３の後読み画素群も連続して書き込んでいく。行番号０００５の後読み画素群については、行番号０００３の書き込み終了アドレスに対し、オフセットｏｆｆｓｅｔ２を加算したアドレスを開始アドレスとして、順に書き込んでいく。
【００２６】
続いて、行番号０００６、０００７の後読み画素群も連続して書き込んでいく。この手順が、後読み画像の入力が終わるまで実施され、全て完了すると、メモリ０１１１上には、ラスタスキャン順に本線画像が配置されることとなる。
【００２７】
尚、画素並び替えの手法としては、画素並び替え手段０１０５内に、先読み画像をため込むバッファ（ＳＲＡＭ）を有する構成として、回路内で直接並び替え処理を行う手法としてもよい。また、メモリ０１１１への書き込みでは並び替えをせず、メモリ０１１１から、本線画像を読み出す際に、オフセットを付けて読み出すことで、ラスタスキャン順に読み出す手法をとってもよい。
【００２８】
次に、動画中における静止画撮影のタイミングについて、図３のタイミングチャートを用いて説明する。
【００２９】
図３は、縦方向にタイミング信号あるいは画像出力タイミングであり、横方法は時間を示している。
【００３０】
次に縦方向の項目を説明する。
【００３１】
撮像Ｖ同期は、撮像素子０１０３から動画、すなわち先読み画像の読み出しタイミングで、撮像の垂直同期信号のタイミングを示しており、例えば１秒間に６０フレームの画像が出力されるタイミング信号となる。静止画同期は、撮像素子０１０３から静止画の読み出しタイミングを示す。また、タイミング４００は、ユーザによるシャッタボタン押下のタイミングであり、レリーズタイムＴ０後に、静止画同期信号が発生している。
【００３２】
センサ出力画像は、撮像素子０１０３からの画像読み出し開始と終了のタイミング及びセンサ切り替え時間を示し、動画を動画１から動画５に示し、静止画を静止画１に示し、格子枠４０１は動画から静止画への撮像素子０１０３の切り替え時間、格子枠４０２は静止画から動画への撮像素子０１０３の切り替え時間となる。また、静止画撮影においては、センサ出力画像は、前述の通り、先読み画像、後読み画像の順でデータが読み出される。先読み画像は動画２（４０３）、後読み画像が静止画１（４０４）として図示される。また、先読み画像は、動画１，３、４、５と同様の露光時間で読み出され、後読み画像のみ、静止画の露光時間で読み出される。センサ画像動画と静止画の時間が異なるのは、画素数が異なること、露光時間が異なることを示している。また、静止画撮影指示（タイミング４００）がない場合、動画２は、本来、４０５のタイミングで撮像されるが、撮像素子０１０３の静止画撮像とタイミングが重なるため、４０５のタイミングでは、読み出すことは出来ない。
【００３３】
動画用画像処理は、動画用画像処理手段０１０８の画像処理の開始と終了のタイミングを示す。動画１、２、３、４、５は、撮像素子０１０３から読み出したセンサ出力画像を、動画用画像処理手段０１０８へ入力し、処理された動画を、メモリ０１１１に記録されるまでのタイミングを示している。また、動画１、２、３、４、５は、撮像素子０１０３からのセンサ出力画像を一旦メモリ０１１１に記録し、撮像素子０１０３が書き込んだセンサ出力画像のみを動画用画像処理手段０１０８で処理するよう、メモリ０１１１を読み出し制御することで、動画用画像処理手段０１０８が、センサ出力画像がメモリ０１１１へ書き込まれる前に、読み出すことがないようにしてもよい。
【００３４】
静止画用画像処理は、画素調整手段０１０６、及び、静止画用画像処理手段０１０７の画像処理の開始と終了のタイミングを示す。撮像素子０１０３から読み出したセンサ出力画像、すなわち先読み画像（動画２）と後読み画像（静止画１）は、前述の画素並べ替え手段０１０５でラスタスキャン順に並べ替えられ、静止画として、メモリ０１１１に記録される。記録された静止画は、メモリ０１１１から読み出され、画素調整手段０１０６、静止画用画像処理手段０１０７の順で処理がなされ、画像処理部１０１へデータ転送部１０５を介して読み出し、記録画像処理部１０１が処理した画像を、再びメモリ０１１１に記録されるまでのタイミングを示している。
【００３５】
静止画１においては、撮像素子０１０３からのセンサ出力画像一面を、メモリ０１１１に記録してから、画素調整手段０１０６および、静止画用画像処理手段０１０８で処理を行うことを示している。表示Ｖ同期は、表示手段０１０９へ表示を開始する表示の垂直同期信号のタイミングを示しており、例えば１秒間に６０フレームの画像を表示するタイミング信号となる。なお、表示Ｖ同期は、撮像Ｖ同期から一定期間遅れて、発生することになる。
【００３６】
表示は、動画用画像処理手段０１０８で処理した動画を表示手段０１０９へ表示するタイミングを示す。動画１、３、４、５に対し、静止画撮像タイミングで撮像された動画２については、撮像Ｖ同期に対し、撮像タイミングがずれてしまうが、動画２のフレームを消失することなく、表示および記録に使用することが可能となるため、動画中に静止画撮影が指示されたとしても、滑らかな動画撮影を実現出来る。
【００３７】
次に、画素調整手段０１０６における、画素調整処理の詳細について、説明する。
【００３８】
図５は画素調整手段０１０６の構成を示す。
【００３９】
先読み画素判定手段０５０１は、撮像素子駆動情報に基づき、処理対象の画素信号が、先読み画像（動画と静止画両方で使用する画素信号）か、後読み画像（静止画のみで使用する画素信号）かを判定する。補間画素切替手段０５０２は、先読み画素信号に対し、補間画素生成手段０５０３で生成された補間信号か、露出調整手段０５０４で生成された調整信号の、どちらを使用するかを、後述する条件に基づいて決定する。
【００４０】
補間画素生成手段０５０３は、先読み画素信号の周辺の後読み画素信号を参照して、先読み画素信号に相当する位置の画素信号を補間生成する。露出調整手段０５０４は、動画の露出条件で読み出された、先読み画素信号に対し、静止画の露出条件に合わせるよう、既知の手法で、露出調整（ゲイン調整）を行う。遅延調整手段０５０５は、後読み画素信号が、適切なタイミングで出力されるように、タイミング調整するものであり、フリップフロップやＳＲＡＭで構成される。セレクタ０５０６は、補間画素切替手段０５０２の判定結果に基づいて、補間画素生成手段０５０３出力か、露出調整手段０５０４出力か、何れか一方を選択する。
【００４１】
セレクタ０５０７は、先読み画素判定手段０５０１の判定結果に基づいて、セレクタ０５０６出力（先読み画素信号）か、遅延調整手段０５０５出力（後読み画素信号）か、何れか一方を選択する。
【００４２】
図６は図５の構成で示される、画素調整処理の処理フロー図である。
【００４３】
静止画撮像指示（例えば、シャッターが押されたこと）により、最初の静止画同期信号を検出してから、本処理フローに入る。以下、図６の処理フロー図を説明する。
【００４４】
ステップ６００は、静止画画素信号が入力される前までに、ＣＰＵ０１１２にて、撮像素子０１０３の駆動情報に基づいて、先読み画素信号位置を取得し、先読み画素判定手段０５０１に入力する。例えば、図２の事例においては、行番号０００を開始位置として、４行周期で先読み画素信号が入力されるため、先読み画素判定手段０５０１は４行周期で、先読み画素判定信号を有効にする。
【００４５】
ステップ６０１は、同様に、静止画画素信号が入力される前までに、ＣＰＵ０１１２にて、撮像素子０１０３の駆動情報に基づいて、先読み画素信号の露光時間Ｎｖと後読み画素信号の露光時間Ｎｓを取得し、その差分絶対値Ｎｄを取得する。尚、Ｎｖは動画の露光時間そのものであり、Ｎｓは静止画の露光時間そのものである。
【００４６】
ステップ６０２は、撮像素子０１０３にて静止画撮像を行われ、静止画画素信号が画素調整手段０１０６に入力される。
【００４７】
ステップ６０３は、先読み画素判定手段０５０１が、ステップ６００にて入力された先読み画素信号位置に基づいて、現在入力された静止画画素信号が先読み画素信号か後読み画素信号かを判定し、先読み画素信号であればステップ６０４、後読み画素信号であればステップ６０７に進む。尚、本処理は、図５におけるセレクタ０５０７の処理に該当する。
【００４８】
ステップ６０４は、補間画素切替手段０５０２が、ステップ６０１にて求めた、先読み画素信号の露光時間と後読み画素信号の露光時間の差分絶対値Ｎｄを閾値Ｎｎと比較し、Ｎｎより大きい場合はステップ６０５へ、小さい場合はステップ６０６へ進む。尚、本処理は、図５におけるセレクタ０５０６の処理に該当する。閾値Ｎｎは、例えば、動きベクトルやジャイロセンサより求められる、被写体ないしは撮像装置の動き量を求め、撮像素子０１０３の画素ピッチと合わせて既知の手法で求められる、被写体ないしは静止画全体に対し、蓄積ブレが生じる露光時間Ｎｂに相当する。前述の説明の通り、ステップ６０４においては、静止画１フレームに対して一律の切替判定を実施してもよいし、予め被写体領域を検出しておき、被写体に応じて閾値Ｎｎを求めて、切替判定を実施してもよい。さらに、周辺の画素信号を参照し、エッジ方向や被写体の移動方向も加味して、例えば、エッジ方向と被写体の移動方向が一致していれば、ステップ６０６に進むなどの、追加の切替判定を実施してもよい。
【００４９】
ステップ６０５は、補間画素生成手段０５０３において、先読み画素の周辺の後読み画素を参照して、補間画素を生成する。図７は、着目画素０７０１が先読み画素の場合における事例を示す。０７０２−１〜０７０２−６は、補間に使用する周辺の後読み画素を示しており、本実施形態では、静止画画素信号がべイヤー構造であることを前提として、同色画素信号のみを参照する。ライン０７０３は、先読み画素信号であることを示しており、補間画素として使用しない。補間画素生成方法としては、単純な０７０２−１〜０７０２−２の平均値やフィルタ演算結果、メディアン値でもよいし、既知のエッジ判定結果に基づいた、適応的な補間演算結果を使用する、でもよい。ステップ０６０７は、先読み画素に対し、後読み画素と同露出となるように、ゲインを重畳する。ゲイン値Ｇは先読み画素の露出Ｅｖと後読み画素の露出Ｅｓに基づいて、（式１）で算出される。
【００５０】
【数１】
2020141346.tif 000003
【００５１】
また、被写体が横線エッジであるかを判定し、横線エッジであれば、ライン０７０３の画素のみを参照して、フィルタ演算処理などで、着目画素０７０１のノイズ成分を、後読み画素信号相当のノイズ成分相当に調整する、処理を実施してもよい。ステップ６０６は、静止画画素信号がすべて処理されるまで、ステップ６０２からステップ０６０７の処理が続けされることを示す。
【００５２】
以上説明した処理フローにより、動画（先読み画素）と静止画（後読み画素）で露光時間に差異があったとしても、先読み画素を、後読み画素で適応的に補間することで、好適な静止画を生成することが可能となる。また、画素調整手段０１０６は、図８で示すように、補間画素切替手段０５０２を補間画素合成比率算出手段０８０２へ、かつ、セレクタ０５０６を補間画素合成手段０８０６に変更し、先読み画素信号の露光時間と後読み画素信号の露光時間の差分絶対値Ｎｄと閾値Ｎｎの差分絶対値Ｎｄｄを合成比率とし、Ｎｄｄの値が大きいほど、補間画素生成手段０５０３による後読み画素信号に基づく補間画素の比率を大きくする、構成としてもよい。
【００５３】
以上説明したように、本発明の第１の実施例によれば、動画撮影中に静止画撮影が指示された場合においても、滑らかな動画撮影を保ちつつ静止画撮影することが可能となる。
以上、本発明を第１の実施例に基づき具体的に説明したが、本発明は、前記実施例に限定されるものではなく、その要旨を逸脱しない範囲において種々の変更が可能であることは言うまでもない。
【符号の説明】
【００５４】
０１０１  光学系，０１０２  光学系駆動手段、０１０３  撮像素子、
０１０４  撮像素子駆動手段、０１０５  画素並べ替え手段、
０１０８  動画用画像処理手段
【図１】
2020141346.tif 000004
【図２】
2020141346.tif 000005
【図３】
2020141346.tif 000006
【図４】
2020141346.tif 000007
【図５】
2020141346.tif 000008
【図６】
2020141346.tif 000009
【図７】
2020141346.tif 000010
【図８】
2020141346.tif 000011