(57)【特許請求の範囲】
【請求項１】
第１の画像処理エンジンと、前記第１の画像処理エンジンよりも画像処理の処理負荷が低減された第２の画像処理エンジンを有する画像処理エンジンを複数備え、
撮像によって得られた画像信号の現像を行い、記録媒体に記録される記録用画像と表示手段に表示される表示用画像を出力する画像処理装置であって、
第１の記録モードと第２の記録モードを設定可能な設定手段と、
前記設定手段により前記第１の記録モードが設定された場合は、
前記複数の画像処理エンジンの夫々が有する第２の画像処理エンジンを並行動作させて前記記録用画像を出力するとともに、前記第１の画像処理エンジンを動作させて前記表示用画像を出力し、
前記設定手段により前記第２の記録モードが設定された場合は、
前記複数の画像処理エンジンの夫々が有する第１の画像処理エンジンを並行動作させて前記記録用画像を出力するとともに、前記第２の画像処理エンジンを動作させて前記表示用画像を出力するように制御する制御手段とを備えることを特徴とする画像処理装置。
【請求項２】
前記設定手段により前記第１の記録モードが設定された場合は、前記第１の画像処理エンジンに前記画像信号を縮小して供給し、前記設定手段により前記第２の記録モードが設定された場合は、前記第２の画像処理エンジンに前記画像信号を縮小して供給する縮小手段を備えることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記第１の記録モードは現像処理の応答性を優先したモードであり、
前記第２の記録モードは現像処理により得られる前記記録用画像の画質を優先したモードであることを特徴とする請求項１または２に記載の画像処理装置。
【請求項４】
第１の画像処理エンジンと、前記第１の画像処理エンジンよりも画像処理の処理負荷が低減された第２の画像処理エンジンを有する画像処理エンジンを複数備え、
撮像によって得られた画像信号の現像を行い、記録媒体に記録される記録用画像と表示手段に表示される表示用画像を出力する画像処理装置の制御方法であって、
第１の記録モードと第２の記録モードを設定可能な設定手段により前記第１の記録モードが設定された場合に、前記複数の画像処理エンジンの夫々が有する第２の画像処理エンジンを並行動作させて前記記録用画像を出力するとともに、前記第１の画像処理エンジンを動作させて前記表示用画像を出力し、
前記設定手段により前記第２の記録モードが設定された場合に、前記複数の画像処理エンジンの夫々が有する第１の画像処理エンジンを並行動作させて前記記録用画像を出力するとともに、前記第２の画像処理エンジンを動作させて前記表示用画像を出力することを特徴とする画像処理装置の制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置及びその制御処理方法に関する。
【背景技術】
【０００２】
静止画撮影を目的としたデジタルカメラにおいても、動画撮影機能を搭載していることが一般的となっている。また、このような静止画撮影用のデジタルカメラに搭載された動画撮影機能に、上述したようなログの機能を持たせることが検討されている。このような構成によれば、高画質な静止画撮影が可能なデジタルカメラをデジタルシネマの撮影が可能なデジタルシネマカメラとして利用することが可能になる。
【０００３】
デジタルシネマへの対応において、重要なことの一つは、４０９６画素×２１６０画素という画素数（以下、４ｋ２ｋという）での記録が要求されることである。このような画素数において画像記録を行なったり表示出力を行なったりしようとすると、静止画撮影に最適化されたデジタルカメラではシステムリソースの不足が課題となる。特許文献１には、現像処理のスピードを向上するために、撮像装置に現像処理のための複数のエンジンを設けた構成が記載されている。特許文献１によれば、連射撮影により入力される画像信号を待機中のエンジンを選択して処理させることで、ワークメモリやバッファメモリの増加を抑えながら処理スピードを向上させている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特許第４２５０５１１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１は、あくまで静止画の連射撮影における現像処理の高速化を達成する構成が記載されているのみであり、動画のフレームに対応した現像処理や、動画の記録と表示を同時に行うための構成については何等示唆されていない。したがって、４ｋ２ｋでの動画記録と撮影中の動画の表示を同時に行うという要求に適したものではない。
【０００６】
本発明は上記の課題に鑑みてなされたものであり、限られたシステムリソースを用いて、たとえば４ｋ２ｋのような画素数の大きい動画について記録と表示を同時に実行可能とすることを目的とする。
【課題を解決するための手段】
【０００７】
上記の目的を達成するための本発明の一態様による画像処理装置は以下の構成を備える。すなわち、
第１の画像処理エンジンと、前記第１の画像処理エンジンよりも画像処理の処理負荷が低減された第２の画像処理エンジンを有する画像処理エンジンを複数備え、
撮像によって得られた画像信号の現像を行い、記録媒体に記録される記録用画像と表示手段に表示される表示用画像を出力する画像処理装置であって、
第１の記録モードと第２の記録モードを設定可能な設定手段と、
前記設定手段により前記第１の記録モードが設定された場合は、
前記複数の画像処理エンジンの夫々が有する第２の画像処理エンジンを並行動作させて前記記録用画像を出力するとともに、前記第１の画像処理エンジンを動作させて前記表示用画像を出力し、
前記設定手段により前記第２の記録モードが設定された場合は、
前記複数の画像処理エンジンの夫々が有する第１の画像処理エンジンを並行動作させて前記記録用画像を出力するとともに、前記第２の画像処理エンジンを動作させて前記表示用画像を出力するように制御する制御手段とを備える。
【発明の効果】
【０００８】
本発明によれば、限られたシステムリソースを用いて、たとえば４ｋ２ｋのような画素数の大きい動画について記録と表示を同時に実行することが可能となる。
【図面の簡単な説明】
【０００９】
【図１】実施形態によるデジタルカメラの構成例を示すブロック図。
【図２】撮像部、エンジン、記録部、表示部の詳細を示すブロック図。
【図３】画像処理エンジンＡのノイズ除去部の構成例を示すブロック図。
【図４】４ｋ２ｋ動画撮影時の動作を説明する図。
【図５】４ｋ２ｋ動画撮影時の動作を説明する図。
【発明を実施するための形態】
【００１０】
以下、添付の図面を参照して本発明の好適な実施形態について説明する。
【００１１】
図１は、実施形態によるデジタルカメラ１００における、撮像、現像、出力に関わる構成例を示すブロック図である。コントローラ１３０は不図示のＣＰＵ、ＲＯＭやＲＡＭ等のメモリを有し、以下に説明する各部を制御したり、各部の機能の一部もしくは全てを実現したりする。すなわち、以下に説明する構成は、ハードウェアにより、ソフトウェアにより、あるいはハードウェアとソフトウェアの協働により実現される。
【００１２】
撮像部１０１は、撮影光学系および撮像素子を含み、撮像素子の撮像面に結像された光学像を電気信号に変換し、取得された電気信号をデジタル信号に変換して出力する。撮像部１０１の構成を図２（ａ）に示す。図２（ａ）において、撮影画面範囲内の被写体像は撮影光学系２０１を介して撮像素子としてのＣＭＯＳ２０２の撮像面上に結像する。なお、撮像素子はＣＭＯＳに限られるものではなく、ＣＣＤ等の他の素子であってもよいことは言うまでもない。ＣＤＳ／ＡＧＣ回路２０３は、ＣＭＯＳ２０２から得られた電気信号に相関二重サンプリング／ゲイン調整を行なう。ＡＤ変換器２０４は、ＣＤＳ／ＡＧＣ回路２０３から出力される信号をデジタル変換し、画像信号として出力する。また、撮影光学系２０１は、絞りおよびフォーカスのための駆動機構２０６を有し、ＡＥ／ＡＦ部２０５はコントローラ１３０からの指示により駆動機構２０６の駆動を制御する。このようなＡＥ／ＡＦ部２０５、駆動機構２０６により、自動焦点機能や自動露出機能が実現される。
【００１３】
図１に戻り、ＷＢ回路１０２は、撮像部１０１（ＡＤ変換器２０４）から出力された画像信号に対してホワイトバランス調整を行なう。ＷＢ回路１０２においてホワイトバランスが調整された画像信号はセレクタ１０３に供給される。セレクタ１０３では、コントローラ１３０の制御の下、ユーザの指示により選択された動作モードに応じて、入力された画像信号の経路を切り替える。セレクタ１０３の詳しい動作については後述する。
【００１４】
本実施形態のデジタルカメラ１００では、現像処理のためのエンジンとして第１エンジン１０６と第２エンジン１０７の２つのエンジンを含む、所謂ツインエンジンを形成している。第１エンジン１０６と第２エンジン１０７は同様の構成を有し、ともに、２つの異なるタイプの画像処理エンジン、すなわち第１の画像処理エンジンとしての画像処理エンジンＡ１２１と第２の画像処理エンジンとしての画像処理エンジンＢ１２２を有している。ここで、画像処理エンジンＡ１２１は静止画撮影のための高画質な画像を生成するために最適化された画像処理エンジンである。他方、画像処理エンジンＢ１２２は、生成される画質の面では画像処理エンジンＡ１２１に及ばないものの、画像処理エンジンＡ１２１よりも低負荷なエンジンである。
【００１５】
縮小部１０４は、セレクタ１０３から提供された画像信号に縮小処理を施して、第２エンジン１０７の画像処理エンジンＡ１２１に縮小された画像を提供する。同様に、縮小部１０５は、セレクタ１０３から提供された画像信号に縮小処理を施して、第２エンジン１０７の画像処理エンジンＢ１２２に縮小された画像を提供する。縮小部１０４は高画質な画像処理エンジンＡ１２１に接続している為、高画質なリサイズ処理（例えば多タップ処理や高精度画素補間機能を所持するリサイズ処理）が可能となっている。また、縮小部１０５は高速処理を前提にしている為、単純なリサイズ処理（例えば間引き処理）を備えている。コントローラ１３０は縮小部１０４，１０５に対して、縮小の実行／非実行を指示する。縮小の非実行が指示された場合、縮小部１０４，１０５は入力され画像信号をスルーして、そのまま画像処理エンジンに供給する。図３においては縮小部１０４、１０５は第２エンジン１０７にのみ接続されていてもよいし、第１エンジン１０６と第２エンジン１０７の両方に接続されていても良い。
【００１６】
図２（ｂ）は、画像処理エンジンＡ１２１、画像処理エンジンＢ１２２の詳細な機能構成を示す図である。ノイズ除去部２１１は、ホワイトバランス調整がされた画像信号に対してノイズ除去を行なう。なお、画像処理エンジンＡ１２１のノイズ除去部２１１は、静止画に適応したノイズ除去を提供する。より具体的には、たとえば、図３に示すように、ノイズ除去部２１１は、ＷＢ回路１０２より入力された画像からＤＳ（ダウンサンプリング）部３０６〜３０９によって複数解像度の縮小画像を生成する。そして、各縮小画像について、フィルタ３０１〜３０５が縮小量に応じた折り返しにより生じる偽色を除去するためのフィルタリング処理を、ＮＲ３１１〜３１５がノイズ除去を実行する。ノイズ除去部２１１では、このような階層的なノイズ除去処理が実行される。なお、図３に示すようなノイズ除去部２１１は、複数解像度の縮小画像を生成してノイズ除去を行なうため、高精度に除去され、高画質になるが、メモリへの画像の保持や読出しが多発し、処理負荷が大きい。これに対して、画像処理エンジンＢ１２２のノイズ除去部２１１は、たとえば、１階層のみのノイズ除去（図３ののＮＲ３１１における平均値処理）を行なうものであり、画像処理エンジンＡ１２１よりも処理負荷が軽減されている。
【００１７】
ノイズ除去部２１１から出力された画像信号は、色処理部と輝度処理部に分配される。色処理部では、まず、第１マトリクス２１２が、ノイズ除去部２１１から出力された画像信号（ＲＧＢ）を、ＹＵＶ信号に変換する。この際、第１マトリクス２１２は、撮像素子（ＣＭＯＳ２０２）の固有の分光特性に起因したばらつきを吸収するとともに、所望する絵作りに応じた画像となるようにマトリクス変換を行なう。色抑圧部２１３は、飽和時のホワイトバランスを維持するために高輝度部分の色値のゲインを調整（抑圧）する。
【００１８】
第２マトリクス２１４は、色抑圧部２１３により処理されたＵＶ信号を含むＹＵＶ信号を、γ処理のためにＲＧＢ信号に変換する。Ｃγ処理部２１５は、第２マトリクス２１４により得られた画像信号（ＲＧＢ信号）に対してγ処理を施す。そして、第３マトリクス２１６は、Ｃγ処理部２１５の出力（ＲＧＢ信号）を再びＹＵＶ信号に変換する。ニー補正部２１７は、第３マトリクス２１６から出力されたＹＵＶ信号のうちのＵＶ信号を入力し、高彩度における色空間の圧縮を行なって、画像信号を目標とする色空間に収める。
【００１９】
他方、ノイズ除去部２１１から出力された画像信号（ＲＧＢ）のうちのＧ成分は輝度処理部に入力される。輝度処理部では、まず、適応処理部２２１が帯域を維持するためにＧ信号に適応化処理を施してＹ信号を生成する。Ｙγ処理部２２２は、適応処理部２２１により生成されたＹ信号にγ処理を施す。また、適応処理部２２１の出力はシャープネス部２２３にも供給され、シャープネス部２２３は、入力されたＹ信号からシャープネス量を検出し、これをＹγ処理部２２２の出力に足し込む。
【００２０】
ニー補正部２１７の出力信号（Ｕ，Ｖ）と輝度処理部から得られる信号（Ｙ）は、第１ルックアップテーブル（以下、第１ＬＵＴ２１８）に供給され、画像処理エンジンからの最終的なＹＵＶ信号が生成され、出力される。
【００２１】
図１に戻り、第１エンジン１０６と第２エンジン１０７のそれぞれの画像処理エンジンＡ１２１と画像処理エンジンＢ１２２から出力されたＹＵＶ信号は、それぞれセレクタ１０８に供給される。セレクタ１０８は、コントローラ１３０の制御の下、各画像処理エンジンから供給されたＹＵＶ信号の経路を制御し、ＹＵＶ信号を記録部１０９あるいは表示部１１０に供給する。なお、セレクタ１０８の動作の詳細については後述する。
【００２２】
記録部１０９と表示部１１０の詳細構成について、図２（ｃ）を参照して説明する。記録部１０９において、巡回ＮＲ部２３１は、入力されたＹＵＶ信号のフレーム間の相関性を利用してノイズ除去を行なう。なお、巡回ＮＲ部２３１は、動画記録時にのみ動作するようにコントローラ１３０により制御される。すなわち、静止画記録時には、巡回ＮＲ部２３１はスルー動作となる。
【００２３】
リサイズ部２３２は、記録される画像データの形式に応じてリサイズを行なう。例えば、デジタルシネマ撮影等で画像処理エンジンが４ｋ２ｋの画素数で画像を生成する場合、これをフルハイビジョンの画素数（１９２０×１０８０画素）で記録する場合には、リサイズ部２３２が巡回ＮＲ部２３１からの出力に対してリサイズを実行する。リサイズが不要であれば、コントローラ１３０の制御下、リサイズ部２３２は画像信号をスルーする。マトリクス部２３３は、リサイズ部２３２から出力された画像信号について最終的な画像調整を行なう。圧縮部２３４はマトリクス部２３３から出力された画像信号（画像データ）に圧縮処理を施して、記録ファイル２３５を出力する。記録ファイル２３５は、メモリカード（不図示）等の記録媒体に記録される。
【００２４】
表示部１１０では、ＨＤＭＩ出力２４３およびＬＣＤ出力２４６を生成する。セレクタ１０８より提供された画像信号はそれぞれリサイズ部２４１，２４４に供給される。リサイズ部２４１は、供給された画像信号をＨＤＭＩの解像度（例えば１９２０×１０８０画素）にリサイズする。マトリクス部２４２は、リサイズ部２４１でリサイズされた画像信号に対して最終的な画像調整を行ない、ＨＤＭＩ出力２４３を得る。同様に、リサイズ部２４４は、供給された画像信号をＬＣＤ（本例では、デジタルカメラ１００の背面に設けられた液用表示器とする）の解像度（例えば、７２０×３８０画素）にリサイズする。マトリクス部２４５は、リサイズ部２４４でリサイズされた画像信号に対して最終的な画像調整を行ない、ＬＣＤ出力２４６を得る。
【００２５】
次に、図４を参照して、セレクタ１０３，１０８の動作について説明する。なお、以下では、撮影モードとして４ｋ２ｋによる動画撮影が選択された場合を説明する。また、その際に、デジタルシネマ対応のためのログ変換の実行が指定された場合は、画像信号にネガフィルムの露光量特性に対応したログ変換処理が施される。なお、４ｋ２ｋによる動画撮影では、４ｋ２ｋの解像度（画素数）を有するフレームが２４ｆｐｓのフレーム速度で生成（現像）され、メモリに記録される。また、本実施形態では、４ｋ２ｋによる動画撮影において、更に第１の記録モードとしての「応答速度優先モード」と第２の記録モードとしての「記録画質優先モード」のいずれかを、ユーザの指示により選択できるものとする。
【００２６】
図４（ａ）は、「４ｋ２ｋによる動画撮影」、且つ、「応答速度優先モード」が指示された場合のセレクタ１０３，１０８における画像信号の経路設定動作および現像処理に用いる画像処理エンジンの選択を説明する図である。なお、セレクタ１０３，１０８の動作等は、コントローラ１３０が制御する。図４の（ａ）に示すように、撮像部１０１から出力され、ＷＢ回路１０２を経た画像信号は、セレクタ１０３へ供給される。４ｋ２ｋによる動画撮影で応答速度優先モードが指定されている場合、セレクタ１０３は、第１エンジン１０６および第２エンジン１０７のそれぞれの画像処理エンジンＢ１２２へ画像信号を供給し、縮小部１０４へ画像信号を供給するように経路を選択する。なお、この際、縮小部１０５はスルー動作を行なうことになる。ここで、本実施形態では、４ｋ２ｋの解像度のフレームを２４ｆｐｓで生成するために、２つの画像処理エンジンＢ１２２を並行動作させて順次にフレームを生成する。そのために、セレクタ１０３は、撮像部１０１から連続して入力されるフレームの経路を１フレームごとに交互に切り替える。例えば、セレクタ１０３は、奇数番目のフレームを第１エンジン１０６の画像処理エンジンＢ１２２に、偶数番目のフレームを第２エンジン１０７の画像処理エンジンＢ１２２に供給する。２つの画像処理エンジンＢ１２２は、それぞれ１２ｆｐｓで動画フレームを生成し、セレクタ１０８はこれら動画フレームを順次に記録部１０９に供給することで、２４ｆｐｓの動画像が記録される。なお、フレームの経路の切り換えは、エンジンの並行動作が達成されていれば良いので、１フレームごとに交互に切り替える手法に限定されない。例えば、別途フレームバッファの存在が前提となるが２以上のフレームでの切り換えでも良いし、セレクタ１０３が空きのあるエンジンを検知して順次フレームを入力させる手法でも良い。
【００２７】
他方、４ｋ２ｋの画像記録と同時に表示のための画像信号を出力するために、セレクタ１０３はＷＢ回路１０２から供給された画像信号を縮小部１０４へ送る。ここで、コントローラ１３０は、縮小部１０４の縮小率を所望の値に設定し縮小部１０４を動作させる。この結果、縮小部１０４からは、所望の画像サイズ（例えば１９２０×１０８０画素）の縮小画像信号（縮小されたフレーム）が出力され、第１エンジン１０６の画像処理エンジンＡ１２１に供給される。なお、記録画像と表示画像のアスペクトが違う場合は必要に応じてトリミング処理が行われる。画像処理エンジンＡ１２１は、静止画撮影に最適化された画像処理エンジンであり、高負荷な処理を行なうが、縮小された画像を処理するので処理負荷が軽減され、表示遅延の発生を回避できる。こうして、第１エンジン１０６の画像処理エンジンＡ１２１から２４ｆｐｓの画像信号が出力される。セレクタ１０８は第１エンジン１０６の画像処理エンジンＡ１２１からの画像信号を表示部１１０に供給する。
【００２８】
第２エンジン１０７の画像処理エンジンＡ１２１から出力されるフレームの大きさは１９２０×１０８０画素となっているため、表示部１１０のリサイズ部２４１はスルー動作となる。第２エンジン１０７の画像処理エンジンＡ１２１からの画像信号は、マトリクス部２４２により調整された後、ＨＤＭＩ出力２４３となる。また、リサイズ部２４４は、第２エンジン１０７の画像処理エンジンＡ１２１からの画像信号をたとえば解像度が７２０×３８０画素の画像へ変換する。マトリクス部２４５は、この７２０×３８０画素の画像に調整を加えて、ＬＣＤ出力２４６を得る。ＬＣＤ出力２４６は例えばデジタルカメラの背面の液晶パネルに表示される。
【００２９】
なお、上記動作において、コントローラ１３０は、画像処理エンジンＢ１２２に対してはその最大性能を発揮するようなパラメータを設定する。また、第２エンジン１０７の画像処理エンジンＡ１２１に対しては、画像処理エンジンＢ１２２の出力と同等の画質となるようにパラメータを設定する。例えば、ノイズ除去部２１１とシャープネス部２２３に設定されるパラメータにより、画像処理エンジンＡが出力する画質を画像処理エンジンＢが出力する画像の画質と合わせる。更に具体的には、ノイズ除去部２１１の階層処理（図３）を１階層のみとする。このようなパラメータ設定により、記録画像とＨＤＭＩやＬＣＤで出力される画像の見えを一致させることができる。更に、コントローラ１３０は、第２エンジン１０７の画像処理エンジンＡ１２１のシャープネス部２２３に、縮小画像の処理に適したパラメータを設定するようにしてもよい。
【００３０】
図４（ｂ）は、デジタルカメラ１００に静止画記録モードが設定された場合の、セレクタ１０３，１０８による画像信号の経路設定、現像処理に用いる画像処理エンジンの選択を説明する図である。静止画記録モードでは、セレクタ１０３は、ＷＢ回路１０２からの画像信号を第１エンジン１０６の画像処理エンジンＡ１２１及び第２エンジン１０７の画像処理エンジンＡ１２１の一方に供給する。１枚撮影時において、セレクタ１０３は、第１エンジン１０６に優先させて画像信号を供給すれば良いが、連続撮影時は、静止画フレーム単位で、空きの有るエンジンに対して順次振り分ければよい。画像処理エンジンＡ１２１は、画像信号を処理して静止画記録のための画像を生成する。また、デジタルカメラ１００の液晶画面等への画像表示のために、各エンジンは、現像後の静止画像を縮小処理して出力する。セレクタ１０８が生成された表示用画像を表示部１１０に出力することにより、液晶画面への静止画表示等が行なわれる。
【００３１】
図５は、「４ｋ２ｋによる動画撮影」、且つ、「記録画質優先モード」が指示された場合のセレクタ１０３，１０８における画像信号の経路設定動作および現像処理に用いる画像処理エンジンの選択を説明する図である。図５に示すように、撮像部１０１から出力され、ＷＢ回路１０２を経た画像信号は、セレクタ１０３へ供給される。４ｋ２ｋによる動画撮影で記録画質優先モードが指定されている場合、セレクタ１０３は、第１エンジン１０６および第２エンジン１０７の画像処理エンジンＡ１２１へ画像信号を供給するとともに、縮小部１０５へ画像信号を供給するように経路を選択する。ここで、本実施形態では、４ｋ２ｋの解像度のフレームを２４ｆｐｓで生成するために、２つの画像処理エンジンＡ１２１を並行動作させ順次にフレームを生成する。そのために、セレクタ１０３は、ＣＭＯＳ２０２からの画像信号の経路を１フレームごとに切り替える。２つの画像処理エンジンＡ１２１は、それぞれ１２ｆｐｓでフレームを生成し、セレクタ１０８はこれらフレームを順次に記録部１０９に供給することで、２４ｆｐｓの画像信号が記録される。
【００３２】
他方、４ｋ２ｋの画像記録と同時に表示のための画像信号を出力するために、セレクタ１０３はＷＢ回路１０２から供給された画像信号を縮小部１０５へ送る。図４（ａ）の場合と同様に、縮小部１０５からは１９２０×１０８０画素の縮小画像信号が出力され、第２エンジン１０７の画像処理エンジンＢ１２２に供給される。この画像処理エンジンＢ１２２は、画像処理エンジンＡ１２１に比べて低処理負荷の画像処理エンジンであり、縮小された画像を処理するため、処理負荷が更に軽減される。その結果、２つの画像処理エンジンＡ１２１のそれぞれで１２ｆｐｓでフレームを処理しても、現像処理全体としての処理量は、図４（ａ）の構成で処理をした場合に比べて、それほど増加しない。セレクタ１０８は、画像処理エンジンＢ１２２で生成された画像信号を表示部１１０に供給する。表示部１１０における処理は図４（ａ）について上述したとおりである。
【００３３】
「記録画質優先モード」では、画像処理エンジンＡを用いて生成された画像が記録されるので、非常に高画質な動画を記録できる。但し、高画質処理の動画を処理する為、システムによっては処理がかかり遅延が発生してしまう可能性がある。さらに、表示部１１０から出力される画像の画質は、縮小画像を画像処理エンジンＢで処理しているために低下してしまい、記録画像の画質と表示された画像との差が大きくなる恐れがある。
【００３４】
また、表示画質劣化が懸念される場合は次のように動作するようにしてもよい。すなわち、縮小部１０５での縮小をとりやめ、第１エンジン１０６の画像処理エンジンＢ１２２で１２ｆｐｓの現像処理を行い、第２エンジン１０７の画像処理エンジンＢ１２２で１２ｆｐｓの現像処理を行い交互に現像して２４ｆｐｓの表示画像を作成しても良い。但し、その場合は表示遅延はさらに大きくなる懸念がある。
【００３５】
また、「応答速度優先モード」のみを実行するのであれば、第１エンジン１０６の画像処理エンジンＡは省略可能である。その場合、静止画撮影時には、第１エンジン１０６の画像処理エンジンＡが用いられ、縮小部１０４はスルー動作に設定される。同様に、「記録画質優先モード」のみを実行する構成とする場合は、第１エンジン１０６にいて画像処理エンジンＢは省略可能である。  また、上記実施形態では、４ｋ２ｋ動画について説明をしたが、ＱＦＤＨ（Quad Full High Definition）サイズの３８４０画素×２１６０画素という画素数のデジタルシネマ場合でも同様である。
【００３６】
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
【図１】
0005956813.tif 000002
【図２】
0005956813.tif 000003
【図３】
0005956813.tif 000004
【図４】
0005956813.tif 000005
【図５】
0005956813.tif 000006