"光学系から入射した光を電気信号に変換して撮像信号として出力する撮像素子と、画像の一部を切り出して拡大するデジタルズームの倍率を設定する倍率設定手段と、画像の一部を切り出して拡大処理、または画像の全部もしくは一部を切り出して縮小処理を行う変倍手段と、前記撮像素子により撮像した1画像、または前記変倍手段による拡大/縮小後の画像について、等倍にて解像感を上げる等倍超解像処理、または拡大して解像感を上げる拡大超解像処理を行う超解像手段と、を備え、前記倍率設定手段によるデジタルズームの設定倍率に応じて、前記変倍手段による前記拡大処理または前記縮小処理と、前記超解像手段による前記等倍超解像処理または前記拡大超解像処理との実行順を変えることを特徴とする撮像装置。光学系から入射した光を電気信号に変換して撮像信号として出力する撮像素子と、画像の一部を切り出して拡大するデジタルズームの倍率を設定する倍率設定手段と、画像の一部を切り出して拡大処理、または画像の全部もしくは一部を切り出して縮小処理を行う変倍手段と、前記撮像素子により撮像した1画像、または前記変倍手段による拡大/縮小後の画像について、等倍にて解像感を上げる等倍超解像処理、または拡大して解像感を上げる拡大超解像処理を行う超解像手段と、を備え、前記倍率設定手段によるデジタルズームの設定倍率に応じて、前記変倍手段による前記拡大処理または前記縮小処理と、前記超解像手段による前記等倍超解像処理または前記拡大超解像処理と、における変倍倍率を変えることを特徴とする撮像装置。前記超解像手段による画像サイズの変化が、前記変倍手段による画像サイズの変化よりも大きくなるような、前記変倍手段による前記拡大処理または前記縮小処理と、前記超解像手段による前記等倍超解像処理または前記拡大超解像処理と、における変倍倍率の組み合わせを設定することを特徴とする請求項1または2に記載の撮像装置。元画像に対し前記等倍超解像処理を実行した画像について、前記拡大処理を実行することを特徴とする請求項1から3までのいずれかに記載の撮像装置。元画像に対し前記縮小処理を実行した画像について、前記拡大超解像処理を実行することを特徴とする請求項1から3までのいずれかに記載の撮像装置。元画像に対し前記拡大超解像処理を実行した画像について、前記拡大処理を実行することを特徴とする請求項1から3までのいずれかに記載の撮像装置。前記変倍手段および前記超解像手段による処理中の画像サイズが、元画像および出力画像の画像サイズ以下であることを特徴とする請求項1から6までのいずれかに記載の撮像装置。光学系から入射した光を電気信号に変換して撮像信号として出力する撮像処理と、画像の一部を切り出して拡大するデジタルズームの倍率を設定する倍率設定処理と、画像の一部を切り出して拡大処理、または画像の全部もしくは一部を切り出して縮小処理を行う変倍処理と、前記撮像処理により撮像した1画像、または前記変倍処理による拡大/縮小後の画像について、等倍にて解像感を上げる等倍超解像処理、または拡大して解像感を上げる拡大超解像処理を行う超解像処理と、を行い、かつ、前記倍率設定処理で設定されたデジタルズームの設定倍率に応じて、前記拡大処理または前記縮小処理と、前記等倍超解像処理または前記拡大超解像処理との実行順を変えるようにしたことを特徴とする撮像方法。しかしながら、設定されるすべてのデジタルズーム倍率に対して、同一の処理手順で変倍処理と超解像処理とを実行するようにすると、画質向上の効果が弱くなる場合があるという問題があった。例えば、上記特許文献1に記載の技術のように、すべての電子ズーム倍率時に、超解像合成画像を拡大するようにすると、設定される倍率によっては、画質の劣化が大きくなることが考えられ、更なる検討の余地があった。そこで本発明は、設定されるデジタルズーム倍率に応じて、変倍処理と超解像処理との実行順を変えることにより、デジタルズームによる画像劣化を低減することができる撮像装置および撮像方法を提供することを目的とする。かかる目的を達成するため、請求項1に記載の撮像装置は、光学系から入射した光を電気信号に変換して撮像信号として出力する撮像素子と、画像の一部を切り出して拡大するデジタルズームの倍率を設定する倍率設定手段と、画像の一部を切り出して拡大処理、または画像の全部もしくは一部を切り出して縮小処理を行う変倍手段と、撮像素子により撮像した1画像、または変倍手段による拡大/縮小後の画像について、等倍にて解像感を上げる等倍超解像処理、または拡大して解像感を上げる拡大超解像処理を行う超解像手段と、を備え、倍率設定手段によるデジタルズームの設定倍率に応じて、変倍手段による拡大処理または縮小処理と、超解像手段による等倍超解像処理または拡大超解像処理との実行順を変えるものである。また、請求項2に記載の撮像装置は、光学系から入射した光を電気信号に変換して撮像信号として出力する撮像素子と、画像の一部を切り出して拡大するデジタルズームの倍率を設定する倍率設定手段と、画像の一部を切り出して拡大処理、または画像の全部もしくは一部を切り出して縮小処理を行う変倍手段と、撮像素子により撮像した1画像、または変倍手段による拡大/縮小後の画像について、等倍にて解像感を上げる等倍超解像処理、または拡大して解像感を上げる拡大超解像処理を行う超解像手段と、を備え、倍率設定手段によるデジタルズームの設定倍率に応じて、変倍手段による拡大処理または縮小処理と、超解像手段による等倍超解像処理または拡大超解像処理と、における変倍倍率を変えるものである。また、請求項3に記載の発明は、請求項1または2に記載の撮像装置において、超解像手段による画像サイズの変化が、変倍手段による画像サイズの変化よりも大きくなるような、変倍手段による拡大処理または縮小処理と、超解像手段による等倍超解像処理または拡大超解像処理と、における変倍倍率の組み合わせを設定するものである。また、請求項4に記載の発明は、請求項1から3までのいずれかに記載の撮像装置において、元画像に対し等倍超解像処理を実行した画像について、拡大処理を実行するものである。また、請求項5に記載の発明は、請求項1から3までのいずれかに記載の撮像装置において、元画像に対し縮小処理を実行した画像について、拡大超解像処理を実行するものである。また、請求項6に記載の発明は、請求項1から3までのいずれかに記載の撮像装置において、元画像に対し拡大超解像処理を実行した画像について、拡大処理を実行するものである。また、請求項7に記載の発明は、請求項1から6までのいずれかに記載の撮像装置において、変倍手段および超解像手段による処理中の画像サイズが、元画像および出力画像の画像サイズ以下であるものである。また、請求項8に記載の撮像方法は、光学系から入射した光を電気信号に変換して撮像信号として出力する撮像処理と、画像の一部を切り出して拡大するデジタルズームの倍率を設定する倍率設定処理と、画像の一部を拡大処理、または縮小処理を行う変倍処理と、撮像処理により撮像した1画像、または変倍処理による拡大/縮小後の画像について、等倍にて解像感を上げる等倍超解像処理、または拡大して解像感を上げる拡大超解像処理を行う超解像処理と、を行い、かつ、倍率設定処理で設定されたデジタルズームの設定倍率に応じて、拡大処理または縮小処理と、等倍超解像処理または拡大超解像処理との実行順を変えるようにしている。本発明によれば、デジタルズームによる画像劣化を低減することができる。できる。以下、本発明に係る構成を図1から図8に示す実施の形態に基づいて詳細に説明する。本実施形態に係る撮像装置デジタルカメラは、光学系から入射した光を電気信号に変換して撮像信号として出力する撮像素子CCD121と、画像の一部を切り出して拡大するデジタルズームの倍率を設定する倍率設定手段デジタルズーム倍率設定手段101と、画像の一部を切り出して拡大処理、または画像の全部もしくは一部を切り出して縮小処理を行う変倍手段画像切り出し手段102、画像変倍手段103と、撮像素子により撮像した1画像、または変倍手段による拡大/縮小後の画像について、等倍にて解像感を上げる等倍超解像処理、または拡大して解像感を上げる拡大超解像処理を行う超解像手段超解像手段104と、を備え、倍率設定手段によるデジタルズームの設定倍率に応じて、変倍手段による拡大処理または縮小処理と、超解像手段による等倍超解像処理または拡大超解像処理との実行順を変えるものである。したがって、超解像処理と変倍処理との処理手順を、設定されるデジタルズーム倍率によって最適化することによって、超解像デジタルズーム時の画像劣化を低減することができる。撮像装置の構成本実施形態では、撮像装置の一例としてデジタルスチルカメラを例に説明する。図1はデジタルカメラの外観図を示し、aはカメラ上面図、bはカメラ正面図、cはカメラ裏面図を示している。なお、撮像装置はデジタルスチルカメラに限られるものではなく、電子ズーム機能を備えた撮像装置であれば良い。図1aに示すように、デジタルカメラは、上面に、サブLCD1と、レリーズシャッター2SW1と、モードダイヤル4SW2とを有する。また、図1bに示すように、デジタルカメラは、正面に、ストロボ発光部3と、測距ユニット5と、リモコン受光部6と、レンズユニット7と、光学ファインダ正面11とを有する。また、メモリカードスロットル23は、SDカード等のメモリカード34を挿入するスロットルを示し、カメラ側面に設けられる。また、図1cに示すように、デジタルカメラは、裏面に、AFLEDオートフォーカスLED8と、ストロボLED9と、LCDモニタ表示手段10と、光学ファインダ裏面11と、ズームボタンズームレバーTELE12SW4と、電源スイッチ13SW13と、ズームボタンズームレバーWIDE14SW3と、セルフタイマ/削除スイッチ15SW6とを有する。さらに、メニュースイッチ16SW5と、OKスイッチ17SW12と、左/画像確認スイッチ18SW11と、下/マクロスイッチ19SW10と、上/ストロボスイッチ20SW7と、右スイッチ21SW8と、画像を表示するディスプレイスイッチ22SW9とを有する。デジタルズーム機能を用いた撮影動作では、撮影モードモニタリングモードと再生モードを切り替え可能なモードダイヤル4を操作して撮影モードに設定し、電源スイッチ13によりデジタルカメラを起動させると、レンズユニット7がズームワイド位置に設定されて、LCDモニタ10には電子ファインダ機能であるライブビュー映像が表示される。この起動状態から、ズームボタンTELE12を押下することにより、レンズユニット7は望遠側テレ側へ移動し、ズームWIDE14を押下することにより、レンズユニット7は広角側ワイド側に移動して、デジタルズーム機能が実現される。図2は図1に示したデジタルカメラの制御系の機能ブロック図を示している。以下、デジタルカメラ内部のシステム構成について説明する。図2に示すように、このデジタルカメラ内には、レンズユニット7に設置した撮影レンズ系を通して入射される被写体画像が受光面上に結像する固体撮像素子としてのCCD121、CCD121から出力される電気信号をデジタル信号に処理するフロントエンドICF/E120、フロントエンドICF/E120から出力されるデジタル信号を処理する信号処理IC110、データを一時的に格納するSDRAM33、制御プログラム等が記憶されたROM30、モータドライバ32等が設けられている。レンズユニット7は、ズームレンズ、フォーカスレンズおよびメカニカルシャッタ等からなり、モータドライバ32によって駆動される。モータドライバ32は、信号処理IC110の内部に含まれるマイクロコンピュータCPU、制御部111によって制御される。CCD121は、光学画像を光電変換するための固体撮像素子であって、CCDを構成する複数の画素上に色分解フィルタとしてのRGB原色フィルタが配置されており、RGB3原色に対応した電気信号が出力される。フロントエンドICF/E120は、CCD出力電気信号アナログ画像データについてサンプリングホールド相関二重サンプリングを行うCDS122、このサンプリングされたデータのゲインを調整するAGCAutoGainControl123、デジタル信号変換を行うA/D変換機A/D124、及びCCDI/F112より垂直同期信号VD、水平同期信号HDを供給されCCD121とF/E120との駆動タイミング信号を発生するTGタイミングジェネレータ:制御信号発生器125を有する。発振器クロックジェネレータは、CPU111を含む信号処理IC110のシステムクロックとTG125等にクロックを供給している。TG125は発振器のクロックを受けて、ピクセル同期をするためのピクセルクロックを信号処理IC110内のCCDI/F112に供給する。F/E120から信号処理IC110に入力されたデジタル信号は、CCDI/F112を介して、メモリコントローラ115によりSDRAM33にRGBデータRAW-RGBとして一時保管される。信号処理IC110は、システム制御を行うCPU111、CCDI/F112、リサイズ処理部113、メモリコントローラ115、表示出力制御部116、圧縮伸張部117、メディアI/F部118、YUV変換部119等から構成されている。CCDI/F112は、垂直同期信号VD、水平同期信号HDの出力を行い、その同期信号に合わせてA/D124から入力されるデジタルRGB信号を取り込んで、メモリコントローラ115経由でSDRAM33にRGBデータの書き込みを行う。表示出力制御部116はSDRAM33に書き込まれた表示用データを表示部に送り、撮影した画像の表示を行う。表示出力制御部116は、デジタルカメラが内蔵しているLCDモニタ10に表示することも、TVビデオ信号として出力して外部装置に表示することも可能である。ここでいう、表示用データとは、自然画像のYCbCrと、撮影モードアイコンなどを表示するOSDオンスクリーンディスプレイデータであり、いずれもSDRAM33上に置かれたデータをメモリコントローラ115が読み出して表示出力制御部116に送り、表示出力制御部116で合成したデータをビデオデータとして出力する。圧縮伸張部117は、記録時はSDRAM33に書き込まれたYCbCrデータを圧縮してJPEG符号化されたデータを出力し、再生時は読み出したJPEG符号化データをYCbCrデータに伸張して出力する。メディアI/F118は、CPU111の指示により、メモリカード34内のデータをSDRAM33に読み出したり、SDRAM33上のデータをメモリカード34に書き込んだりする。YUV変換部119は、CPU111から設定された画像現像処理パラメータに基づき、SDRAM33に一時保管されたRGBデータを輝度Yと色差CbCrデータYUVデータに変換処理し、SDRAM33へ書き戻す。リサイズ処理部113は、YUVデータを読み出して、記録するために必要なサイズへのサイズ変換、サムネイル画像へのサイズ変換、表示に適したサイズへのサイズ変換などを行う。また、全体の動作を制御する制御部であるCPU111は、起動時にROM30に格納されたカメラの制御を行う制御プログラムおよび制御データを、例えばSDRAM33にロードし、そのプログラムコードに基づいて全体の動作を制御する。CPU111は、操作部31のボタンキー等による指示、あるいは図示しないリモコン等の外部動作指示、あるいはパーソナルコンピュータ等の外部端末からの通信による通信動作指示に従い、撮像動作制御、画像現像処理パラメータの設定、メモリコントロール、表示制御等を行う。操作部31は、撮影者がデジタルカメラの動作指示を行うためのものであり、撮影者の操作によって所定の動作指示信号が制御部に入力される。例えば、図1に示すように、撮影を指示する2段半押し、全押しレリーズシャッター2、光学ズームおよび電子ズーム倍率を設定するズームボタン1214等の各種ボタンキーを備えている。操作部31よりデジタルカメラの電源キーがオンされたことを検出すると、CPU111は各ブロックに所定の設定を行う。この設定により、レンズユニット7を介してCCD121で受光した画像は、デジタル映像信号に変換されて信号処理IC110に入力される。信号処理IC110へ入力されたデジタル信号はCCDI/F112に入力される。CCDI/F112では光電変換されたアナログ信号に黒レベル調整等の処理が行われて、SDRAM33に一旦保存される。このSDRAM33に保存されたRAW-RGB画像データは、YUV変換部119に読み出されて、ガンマ変換処理、ホワイトバランス処理、エッジエンハンス処理、YUV変換処理が行われYUV画像データとしてSDRAM33へ書き戻される。YUV画像データは表示出力制御部116に読み出され、例えば出力先がNTSCシステムのTVであれば、リサイズ処理部113により、そのシステムに合わせた水平垂直の変倍処理が施され、TVに出力される。この処理がVD毎に行われることで、スチル撮影前の確認用の表示であるモニタリングが行われる。撮像装置の動作次に、デジタルカメラのモニタリング動作および静止画撮影動作について説明する。このデジタルカメラは、静止画撮影モード時には、以下に説明するようなモニタリング動作を実行しながら静止画撮影動作が行われる。先ず、撮影者が電源スイッチ13をONにし、モードダイヤル4を撮影モード静止画撮影モードに設定することで、デジタルカメラが記録モードで起動する。これをCPU111が検知すると、CPU111はモータドライバ32に制御信号を出力して、レンズユニット7を撮影可能位置に移動させ、かつ、CCD121、F/E120、信号処理IC110、SDRAM33、ROM30、LCDモニタ10等を起動させる。そして、レンズユニット7の撮影レンズ系を被写体に向けることにより、撮影レンズ系を通して入射される被写体画像がCCD121の各画素の受光面上に結像する。そして、CCD121から出力される被写体画像に応じた電気信号アナログRGB画像信号は、CDS122、AGC123を介してA/D124に入力され、A/D124により12ビットのRAW-RGBデータに変換する。このRAW-RGBデータは、信号処理IC110のCCDI/F112に取り込まれてメモリコントローラ115を介してSDRAM33に保存される。そして、SDRAM33から読み出されたRAW-RGBデータは、YUV変換部119に入力されて表示可能な形式であるYUVデータに変換された後に、メモリコントローラ115を介してSDRAM33にYUVデータが保存される。そして、SDRAM33からメモリコントローラ115を介して読み出したYUVデータは、表示出力制御部116を介してLCDモニタ10へ送られ、撮影画像動画が表示される。LCDモニタ10に撮影画像を表示しているモニタリング時においては、CCDI/F112による画素数の間引き処理により1/30秒の時間で1フレームを読み出している。なお、このモニタリング動作時は、電子ファインダとして機能するLCDモニタ10に撮影画像動画が表示されているだけで、まだレリーズボタン2が押圧半押も含む操作されていない状態である。この撮影画像のLCDモニタ10への表示によって、静止画を撮影するための構図の確認等をすることができる。なお、表示出力制御部116からTVビデオ信号として出力して、ビデオケーブルを介して外部のTVテレビに撮影画像動画を表示することもできる。そして、信号処理IC110のCCDI/F112は、取り込まれたRAW-RGBデータより、AF自動合焦評価値、AE自動露出評価値、AWBオートホワイトバランス評価値を算出する。AF評価値は、例えば高周波成分抽出フィルタの出力積分値や、近接画素の輝度差の積分値によって算出される。合焦状態にあるときは、被写体のエッジ部分がはっきりとしているため、高周波成分が一番高くなる。これを利用して、AF動作時合焦検出動作時には、撮影レンズ系内の各フォーカスレンズ位置におけるAF評価値を取得して、その極大になる点を合焦検出位置としてAF動作が実行される。AE評価値とAWB評価値は、RAW-RGBデータにおけるRGB値のそれぞれの積分値から算出される。例えば、CCD121の全画素の受光面に対応した画面を256エリアブロックに等分割水平16分割、垂直16分割し、それぞれのエリアブロックのRGB積算を算出する。そして、制御部は、算出されたRGB積算値を読み出し、AE処理では、画面のそれぞれのエリアブロックの輝度を算出して、輝度分布から適正な露光量を決定する。決定した露光量に基づいて、露光条件CCD121の電子シャッタ回数、絞りユニットの絞り値、NDフィルタの出し入れ等を設定する。また、AWB処理では、RGBの分布から被写体の光源の色に合わせたAWBの制御値を決定する。このAWB処理により、YUV変換部119でYUVデータに変換処理するときのホワイトバランスを合わせる。なお、AE処理とAWB処理は、モニタリング時には連続的に行われている。そして、モニタリング動作時に、レリーズボタンが押圧半押しから全押し操作される静止画撮影動作が開始されると、合焦位置検出動作であるAF動作と静止画記録処理が行われる。即ち、レリーズボタンが押圧半押しから全押し操作されると、制御部からモータドライバ32への駆動指令により撮影レンズ系のフォーカスレンズが移動し、例えば、いわゆる山登りAFと称されるコントラスト評価方式のAF動作が実行される。AF合焦対象範囲が無限から至近までの全領域であった場合、撮影レンズ系のフォーカスレンズは、至近から無限、又は無限から至近までの間の各フォーカス位置に移動し、CCDI/F112で算出されている各フォーカス位置におけるAF評価値を制御部が読み出す。そして、各フォーカス位置のAF評価値が極大になる点を合焦位置としてフォーカスレンズを合焦位置に移動させ、合焦させる。そして、AE処理が行われ、露光完了時点で、制御部からモータドライバ32への駆動指令によりメカシャッタユニットが閉じられ、CCD121から静止画用のアナログRGB画像信号が出力される。そして、モニタリング時と同様に、F/E120のA/D124によりRAW-RGBデータに変換される。そして、このRAW-RGBデータは、信号処理IC110のCCDI/F112に取り込まれ、YUV変換部119でYUVデータに変換されて、メモリコントローラ115を介してSDRAM33に保存される。そして、このYUVデータはSDRAM33から読み出されて、リサイズ処理部113で記録画素数に対応するサイズに変換され、圧縮伸張部117でJPEG形式等の画像データへと圧縮される。圧縮されたJPEG形式等の画像データは、SDRAM33に書き戻された後にメモリコントローラ115を介してSDRAM33から読み出され、メディアI/F118を介してメモリカード34に保存される。撮像装置の制御図3は、超解像デジタルズーム処理に係るCPU111の制御ブロックの説明図である。デジタルズーム倍率設定手段101は、ズームボタン12,14の入力から設定するズーム倍率を検出して、設定されたズーム倍率を反映させる処理を行う。また、画像切り出し手段102は、デジタルズーム倍率設定手段101で設定されたズーム倍率に応じて、元画像の切りだし処理を行う。画像変倍手段103は、画像切り出し手段102と協働して、線形補間法や、バイリニア法等の、公知のアルゴリズムにより、所望の倍率に画像を拡大/縮小する変倍処理以下、通常の変倍処理、通常の拡大/縮小処理ともいうを行う。画像変倍手段103で用いるアルゴリズムは特に限られるものではないが、上記の方法等により、拡大処理を行うと画像の解像度は劣化することとなる。超解像手段104は、画像のボケやエッジの荒さを改善し、解像度を変えることなく解像感を向上させる超解像処理を実行する。なお、超解像処理には、1枚の入力画像から超解像処理を行うものと、複数枚連続撮影される入力画像を用いて超解像処理を行うものが知られているが、本実施形態の超解像手段104は、1枚の入力画像から超解像処理を実行するものである。なお、1枚の入力画像から超解像処理を実行して、解像感を向上させることが可能なものであれば、その具体的な処理内容アルゴリズムは、特に限られるものではなく、公知、または新規のアルゴリズムを用いることができる。また、本実施形態の超解像手段104は、画像サイズについて拡大処理をしながら解像感を、維持または向上させる処理を実行することもできる。例えば、1.0倍、1.25倍、1.5倍、1.75倍、2倍のように、n/4倍n=4~8の整数の拡大処理をしながら解像感を維持または向上させる処理を行うことができる。ここで、同一画像に対して、超解像手段104により所定倍の拡大処理をしながら超解像処理を実行したものと、画像変倍手段103により所定倍の拡大処理をした場合では、倍率が同じ場合、超解像処理を行った方が劣化の少ない画像を生成可能である。図4Aは等倍超解像処理、図4Bは2倍超解像処理の説明図である。本実施形態では、超解像手段104が、入力画像に対して、画像サイズを変更せずに、解像感を高める処理等倍超解像処理というと、入力画像に対して、画像サイズを2倍に拡大し、かつ、解像感を高める処理2倍超解像処理というと、の2種類の超解像処理を実行する例について説明するが、超解像手段104が超解像処理と同時に実行可能な拡大処理の倍率、および実行可能な倍率数はこれに限られるものではなく、その他の拡大倍率と超解像処理とを同時に実行可能なものであっても良い。ここで、デジタルカメラに要求されるデジタルズーム倍率は、例えば、1.0倍から0.2倍単位等といった細かい倍率が要求される。このため、超解像手段104による拡大処理を含む超解像処理のみでは、上記要求を満たすことができない。一方、画像変倍手段103による変倍処理では、上述のように解像度が劣化するため、画像変倍処理103による変倍処理をむやみに行うことは画像劣化につながり好ましくない。そこで、本実施形態に係る撮像装置は、拡大処理を含む超解像処理と、通常の変倍処理との組み合わせを、以下に詳述する所定の規則に則って実行する処理以下、超解像デジタルズーム処理と呼ぶを行うことにより、画像劣化を最小限に抑えたデジタルズームによる拡大処理を実現するものである。図5は、超解像デジタルズーム処理の概要を示すフローチャートである。先ず、超解像デジタルズーム処理を施す元画像について、デジタルズーム倍率設定手段101で、撮影時に設定されているデジタルズーム倍率を取得するS1。さらに、取得したデジタルズーム倍率に応じて、画像切り出し手段102、画像変倍手段103および超解像手段104により、画像劣化が少ない処理手順で超解像デジタルズーム処理を行うものであるS2。以下、超解像デジタルズーム処理の詳細について、図6および図7を参照して説明する。図6は、デジタルズーム倍率に応じた、超解像デジタルズーム処理の切り替えの基準となるデジタルズーム倍率毎の視野領域と、元画像に対する出力画像の面積割合を示す説明図である。本実施形態では、デジタルズーム倍率は0.2倍刻みで設定されるものとし、図6では、1.0倍から2.0倍までの各デジタルズーム倍率の出力画像領域を各デジタルズーム倍率時の視野領域として右上欄に示し、併せて、各デジタルズーム倍率適用時の元画像に対する面積割合を元画像に対する面積割合として左上欄に示している。画像変倍手段103による変倍処理と、超解像手段104による超解像処理との実行順序については、上述のように、同一画像に対して、超解像手段104により所定倍の拡大処理をして超解像処理を実行したものと、画像変倍手段103により所定倍の拡大処理をした場合では、超解像処理を行った方が劣化の少ない画像を生成可能であるため、画像の面積変化が小さくなる超解像倍率を適用すること、すなわち、超解像処理による画像サイズの変化元画像に対する面積割合変倍倍率が、変倍処理による画像サイズの変化元画像に対する面積割合変倍倍率よりも大きくなるように2つの処理を組み合わせて実行することが好ましい。例えば、目的とするデジタルズーム倍率付近まで、等倍超解像、または2倍超解像で近づけ、その後の微調整について通常の変倍処理を行うことにより、画像の劣化を少なくすることができる。図6に示す例において、元画像に対する面積割合を見ると、デジタルズーム倍率が1.0倍から1.33倍までは等倍超解像面積面積割合100に近く、デジタルズーム倍率が1.34倍から2.0倍までは、2倍超解像面積面積割合50に近いといえるため、面積割合75のラインすなわち、デジタルズーム倍率が1.33倍の時を基準として、処理手順を変化させればよいこととなる。以下、図7を参照して、詳説する。図7は、各デジタルズーム倍率に応じた超解像デジタルズーム処理の説明図である。図7Aに示すように、倍率が1.0~1.33倍のデジタルズーム時デジタルズーム倍率1.2倍には、先ず、等倍超解像処理を実行した後、当該等倍超解像処理後の画像について、所望の倍率となるように、通常の変倍処理画像の切り出しと拡大処理を行うことが好ましい。1.0~1.33倍のデジタルズーム時には、上記処理順による超解像デジタルズーム処理を行うことにより、画像劣化を抑制することができる。なお、1.0倍のデジタルズーム時には、等倍超解像処理のみ行えばよいのは勿論である。また、図7Bに示すように、倍率が1.34~1.99倍のデジタルズーム時デジタルズーム倍率1.4倍、1.6倍、1.8倍には、先ず、元画像について通常の変倍処理切り出しと縮小処理を行って、その処理後の画像サイズが、最終的な出力画像サイズの半分の大きさになるようにする。そして、該通常の変倍処理後の画像について、2倍超解像処理を実行することが好ましい。1.34~1.99倍のデジタルズーム時には、上記処理順による超解像デジタルズーム処理を行うことにより、画像劣化を抑制することができる。また、図7Cに示すように、2.0倍以上のデジタルズーム時には、元画像に対し、2倍超解像処理を実行した後、当該2倍超解像処理後の画像について、所望の倍率となるように、通常の変倍処理拡大処理を行うことが好ましい。2.0倍以上のデジタルズーム時には、上記処理順による超解像デジタルズーム処理を行うことにより、画像劣化を抑制することができる。なお、2.0倍のデジタルズーム時には、2倍超解像処理のみ行えばよいのは勿論である。ここで、図8に示すように、例えば、倍率が1.34~1.99倍のデジタルズーム時に、2倍超解像処理を実行した後、当該2倍超解像処理後の画像について、変倍処理縮小処理を行うようにすると、2倍超解像処理後の画像サイズ処理途中における画像サイズが、元画像および出力画像よりも大きいデータサイズとなるため、余分なメモリ領域を確保しなければならない。したがって、1.34~1.99倍デジタルズーム時には、上述の図7Bに示したように、通常の変倍処理を実行した後に、2倍超解像処理の順に実行することが好ましい。すなわち、超解像デジタルズーム処理においては、処理途中の画像サイズが、元画像および出力画像よりも大きいデータサイズとならないように、超解像処理と通常の拡大処理との順番を決定することが好ましい。これにより、必要なメモリサイズをそのままのサイズで処理を実行することができる。一方で、図7Aおよび図7Cに示した1.0~1.33倍の超解像デジタルズームと、2.0倍以上の超解像デジタルズームの場合では、拡大/縮小処理と超解像処理の手順に関しては、理論上は、逆に実行するようにしても同様の効果が得られる。しかしながら、超解像処理のアルゴリズムや、撮像装置のハードウェア、ミドルウェア等の制約、性能に応じて、出力画像の画質に差異が生じる場合がある。この場合は、各ハードウェア等に応じて、出力画像がより良い画質を得ることができる最適な順番を設定するようにすれば良い。本実施形態では、超解像処理を1倍と2倍で実行する例について説明したが、本発明は、拡大において解像感の劣化が少ない超解像処理と、通常の拡大/縮小処理との組み合わせで拡大処理をする際に、解像感の劣化をできるだけ小さく抑えるために、超解像処理で目的倍率に近づけ、通常の拡大/縮小処理で微調整を行う処理を行うものであれば良く、超解像処理の倍率、その処理順序等は、上記の例に限られるものではない。尚、上述の実施形態は本発明の好適な実施の例ではあるがこれに限定されるものではなく、本発明の要旨を逸脱しない範囲において種々変形実施可能である。"