(57)【要約】【構成】分配器７０ａ〜７０ｄ、Ｒ，ＧおよびＢのいずれか１つを各々が有する複数の元画素がベイヤ態様で配列された元画像を取り込む。色分離系ＣＳ１およびＣＳ２は、取り込まれた生画像に色補間処理を施して、２つの色を各々が有する複数の補間画素によって形成された補間画像を作成する。ズーム系ＶＳ１およびＶＳ２は、色分離系ＣＳ１およびＣＳ２によって作成された補間画像にズーム処理を施して、Ｒ，ＧおよびＢのいずれか１つを各々が有する複数のズーム画素がベイヤ態様で配列されたズーム画像を作成する。【効果】回路規模を抑えつつズーム画像の品質を改善することができる。【選択図】図７
2010171548.tif 000002
【特許請求の範囲】
【請求項１】
Ｍ個（Ｍ：３以上の整数）の色のいずれか１つを各々が有する複数の元画素が既定態様で配列された元画像を取り込む取り込み手段、
前記取り込み手段によって取り込まれた元画像に色補間処理を施してＮ個（Ｎ：２以上でかつＭ未満の整数）の色を各々が有する複数の補間画素によって形成された補間画像を作成する補間画像作成手段、および
前記補間画像作成手段によって作成された補間画像にズーム処理を施して前記Ｍ個の色のいずれか１つを各々が有する複数のズーム画素が前記既定態様で配列されたズーム画像を作成するズーム画像作成手段を備える、画像処理装置。
【請求項２】
前記既定態様の配列は第１色の元画素を間欠的に有する第１元画素列と第２色の元画素を間欠的に有する第２画素列とが既定順序で割り当てられた第１部分配列を含み、
前記補間画像作成手段は第１色の補間画素を連続的に有する第１補間画素列と第２色の画素を連続的に有する第２補間画素列とが前記既定順序で割り当てられた第１補間画像を前記第１色の元画素と前記第２色の元画素とに基づいて作成する第１補間画像作成手段を含む、請求項１記載の画像処理装置。
【請求項３】
前記ズーム画像作成手段は前記第１補間画像作成手段によって作成された第１補間画像に基づいて前記第１部分配列を有する第１ズーム画像を作成する第１ズーム画像作成手段を含む、請求項２記載の画像処理装置。
【請求項４】
前記既定態様の配列は第３色の元画素が列方向および行方向において間欠的に有する第２部分配列を含み、
前記補間画像作成手段は前記第３色の補間画素が前記列方向および前記行方向に連続的に割り当てられた第２補間画像を前記第３色の元画素に基づいて作成する第２補間画像作成手段をさらに含む、請求項２または３記載の画像処理装置。
【請求項５】
前記ズーム画像作成手段は前記第２補間画像作成手段によって作成された第２補間画像に基づいて前記第２部分配列を有する第２ズーム画像を作成する第２ズーム画像作成手段を含む、請求項４記載の画像処理装置。
【請求項６】
前記第１元画素列および前記第２元画素列の各々は垂直方向に延びる列に相当し、
前記取り込み手段は水平方向に連続するＰ個（Ｐ：２以上の整数）の元画素を同時に取り込み、
前記ズーム画像作成手段は前記水平方向に連続するＰ個の補間画素に並列的に水平ズーム処理を施す水平ズーム処理手段を含む、請求項２ないし５のいずれかに記載の画像処理装置。
【請求項７】
被写界を捉える撮像面を有して前記元画像を繰り返し出力する撮像手段をさらに備える、請求項１ないし６のいずれかに記載の画像処理装置。
【請求項８】
前記Ｍ個の色は３原色に相当し、
前記既定態様の配列はベイヤ配列に相当する、請求項１ないし７のいずれかに記載の画像処理装置。
【請求項９】
前記ズーム画像作成手段によって作成されたズーム画像を各画素が前記Ｍ個の色の全てを有する画像に変換する変換手段をさらに備える、請求項１ないし８のいずれかに記載の画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、画像処理装置に関し、特に、複数色のいずれか１つを各々が有する複数の画素が既定態様で配列された元画像に基づいて所望のズーム倍率を有するズーム画像を作成する、画像処理装置に関する。
【背景技術】
【０００２】
この種の装置の一例が、特許文献１に開示されている。この背景技術によれば、ズームキーによって指示された電子ズーム倍率に対応する変倍パラメータが、ＲＡＷデータ用変倍回路に設定される。ＲＡＷデータ用変倍回路は、Ａ／Ｄ変換器から出力されたＲＡＷデータに変倍パラメータに従う変倍処理（ズーム処理）を施す。変倍処理を施されたＲＡＷデータは、圧縮状態で記録媒体に記録される。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−１６６５５１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、変倍処理を施されるデータはＲＡＷデータであるため、複数の画素の各々はＲ(Red)，Ｇ(Green)およびＢ(Blue)のいずれか１つの色情報しか有しない。また、ＲＡＷデータは原色ベイヤ配列に対応しているため、隣接する２つの画素の色は垂直方向および水平方向のいずれにおいても互いに異なる。さらに、変倍処理は、このような画素の色情報に重み付け加算を施す処理である。したがって、背景技術では、変倍処理を施されたＲＡＷデータの品質が劣化するおそれがある。
【０００５】
それゆえに、この発明の主たる目的は、ズーム処理を施された画像の品質を改善することができる、画像処理装置を提供することである。
【課題を解決するための手段】
【０００６】
この発明に従う画像処理装置(10：実施例で相当する参照符号。以下同じ)は、Ｍ個（Ｍ：３以上の整数）の色のいずれか１つを各々が有する複数の元画素が既定態様で配列された元画像を取り込む取り込み手段(70a~70d)、取り込み手段によって取り込まれた元画像に色補間処理を施してＮ個（Ｎ：２以上でかつＭ未満の整数）の色を各々が有する複数の補間画素によって形成された補間画像を作成する補間画像作成手段(CS1, CS2)、および補間画像作成手段によって作成された補間画像にズーム処理を施してＭ個の色のいずれか１つを各々が有する複数のズーム画素が既定態様で配列されたズーム画像を作成するズーム画像作成手段(VS1, VS2)を備える。
【０００７】
取り込み手段は、Ｍ個（Ｍ：３以上の整数）の色のいずれか１つを各々が有する複数の元画素が既定態様で配列された元画像を取り込む。補間画像作成手段は、取り込み手段によって取り込まれた元画像に色補間処理を施して、Ｎ個（Ｎ：２以上でかつＭ未満の整数）の色を各々が有する複数の補間画素によって形成された補間画像を作成する。ズーム画像作成手段は、補間画像作成手段によって作成された補間画像にズーム処理を施して、Ｍ個の色のいずれか１つを各々が有する複数のズーム画素が既定態様で配列されたズーム画像を作成する。
【０００８】
補間画像は元画像に対する色補間処理によって作成されるため、補間画像は元画像よりも多くの色情報を有する。ズーム画像は、このような補間画像に対するズーム処理によって作成される。これによって、ズーム画像の品質が改善される。
【０００９】
また、ズーム画像は元画像と同じ色配列を有し、補間画像を形成する各画素は一部の色を有する。補間画像は元画像に対する色補間処理によって作成され、ズーム画像は補間画像に対するズーム処理によって作成される。これによって、回路規模を抑制することができる。
【００１０】
好ましくは、既定態様の配列は第１色(R)の元画素を間欠的に有する第１元画素列と第２色(B)の元画素を間欠的に有する第２画素列とが既定順序で割り当てられた第１部分配列を含み、補間画像作成手段は第１色の補間画素を連続的に有する第１補間画素列と第２色の画素を連続的に有する第２補間画素列とが既定順序で割り当てられた第１補間画像を第１色の元画素と第２色の元画素とに基づいて作成する第１補間画像作成手段(CS1)を含む。
【００１１】
或る局面では、ズーム画像作成手段は第１補間画像作成手段によって作成された第１補間画像に基づいて第１部分配列を有する第１ズーム画像を作成する第１ズーム画像作成手段(VS1)を含む。
【００１２】
他の局面では、既定態様の配列は第３色(G)の元画素が列方向および行方向において間欠的に有する第２部分配列を含み、補間画像作成手段は第３色の補間画素が列方向および行方向に連続的に割り当てられた第２補間画像を第３色の元画素に基づいて作成する第２補間画像作成手段(CS2)をさらに含む。
【００１３】
或る実施例では、ズーム画像作成手段は第２補間画像作成手段によって作成された第２補間画像に基づいて第２部分配列を有する第２ズーム画像を作成する第２ズーム画像作成手段(VS2)を含む。
【００１４】
その他の局面では、第１元画素列および第２元画素列の各々は垂直方向に延びる列に相当し、取り込み手段は水平方向に連続するＰ個（Ｐ：２以上の整数）の元画素を同時に取り込み、ズーム画像作成手段は水平方向に連続するＰ個の補間画素に並列的に水平ズーム処理を施す水平ズーム処理手段(76, 104a, 104b)を含む。
【００１５】
好ましくは、被写界を捉える撮像面を有して元画像を繰り返し出力する撮像手段(18)がさらに備えられる。
【００１６】
好ましくは、Ｍ個の色は３原色に相当し、既定態様の配列はベイヤ配列に相当する。
【００１７】
好ましくは、ズーム画像作成手段によって作成されたズーム画像を各画素がＭ個の色の全てを有する画像に変換する変換手段(44)がさらに備えられる。
【発明の効果】
【００１８】
この発明によれば、補間画像は元画像に対する色補間処理によって作成されるため、補間画像は元画像よりも多くの色情報を有する。ズーム画像は、このような補間画像に対するズーム処理によって作成される。これによって、ズーム画像の品質が改善される。また、ズーム画像は元画像と同じ色配列を有し、補間画像を形成する各画素は一部の色を有する。補間画像は元画像に対する色補間処理によって作成され、ズーム画像は補間画像に対するズーム処理によって作成される。これによって、回路規模を抑制することができる。
【００１９】
この発明の上述の目的，その他の目的，特徴および利点は、図面を参照して行う以下の実施例の詳細な説明から一層明らかとなろう。
【図面の簡単な説明】
【００２０】
【図１】この発明の一実施例の構成を示すブロック図である。
【図２】図１実施例に適用される色フィルタの構成の一例を示すブロック図である。
【図３】（Ａ）はイメージセンサから出力される画像の解像度の一例を示す図解図であり、（Ｂ）はＥＩＳ／ＡＦ評価画像の解像度の一例を示す図解図であり、（Ｃ）はＡＥ／ＡＷＢ評価画像の解像度の一例を示す図解図である。
【図４】ズーム処理のための設定倍率と表示画像の倍率との関係の一例を示すグラフである。
【図５】図１実施例に適用されるイメージセンサの構成の一例を示すブロック図である。
【図６】図１実施例に適用される前処理回路の構成の一例を示すブロック図である。
【図７】図６実施例に適用されるズーム回路の構成の一例を示すブロック図である。
【図８】（Ａ）は入力画素の切り出しパターンの一例を示す図解図であり、（Ｂ）は入力画素の切り出しパターンの他の一例を示す図解図であり、（Ｃ）は入力画素の切り出しパターンのその他の一例を示す図解図であり、（Ｄ）は入力画素の切り出しパターンのさらにその他の一例を示す図解図であり、（Ｅ）はＧ画素に対する色分離処理の一例を示す図解図であり、（Ｆ）はＧ画素に対する色分離処理の一例を示す図解図であり、（Ｇ）はＧ画素に対する色分離処理のその他の一例を示す図解図であり、（Ｈ）はＧ画素に対する色分離処理のさらにその他の一例を示す図解図であり、（Ｉ）は色分離によって作成された補間Ｇ画素の一例を示す図解図であり、（Ｊ）は色分離によって作成された補間Ｇ画素の他の一例を示す図解図であり、（Ｋ）は色分離によって作成された補間Ｇ画素のその他の一例を示す図解図であり、（Ｌ）は色分離によって作成された補間Ｇ画素のさらのその他の一例を示す図解図である。
【図９】（Ａ）は入力画素の切り出しパターンの一例を示す図解図であり、（Ｂ）は入力画素の切り出しパターンの他の一例を示す図解図であり、（Ｃ）は入力画素の切り出しパターンのその他の一例を示す図解図であり、（Ｄ）は入力画素の切り出しパターンのさらにその他の一例を示す図解図であり、（Ｅ）はＧ画素に対する色分離処理の一例を示す図解図であり、（Ｆ）はＧ画素に対する色分離処理の一例を示す図解図であり、（Ｇ）はＧ画素に対する色分離処理のその他の一例を示す図解図であり、（Ｈ）はＧ画素に対する色分離処理のさらにその他の一例を示す図解図であり、（Ｉ）は色分離によって作成された補間Ｇ画素の一例を示す図解図であり、（Ｊ）は色分離によって作成された補間Ｇ画素の他の一例を示す図解図であり、（Ｋ）は色分離によって作成された補間Ｇ画素のその他の一例を示す図解図であり、（Ｌ）は色分離によって作成された補間Ｇ画素のさらのその他の一例を示す図解図である。
【図１０】（Ａ）は補間Ｇ画素の一部を示す図解図であり、（Ｂ）はＨズームＧ画素の一部を示す図解図であり、（Ｃ）はチャネルＣＨ１およびＣＨ２に対応するＨＶズームＧ画素の一部を示す図解図であり、（Ｄ）はチャネルＣＨ３およびＣＨ４に対応するＨＶズームＧ画素の一部を示す図解図である。
【図１１】（Ａ）は入力画素の切り出しパターンの一例を示す図解図であり、（Ｂ）は入力画素の切り出しパターンの他の一例を示す図解図であり、（Ｃ）は入力画素の切り出しパターンのその他の一例を示す図解図であり、（Ｄ）は入力画素の切り出しパターンのさらにその他の一例を示す図解図であり、（Ｅ）はＲ画素に対する色分離処理の一例を示す図解図であり、（Ｆ）はＢ画素に対する色分離処理の一例を示す図解図であり、（Ｇ）はＲ画素に対する色分離処理の他の一例を示す図解図であり、（Ｈ）はＢ画素に対する色分離処理の他の一例を示す図解図であり、（Ｉ）は色分離によって作成された補間Ｒ画素の一例を示す図解図であり、（Ｊ）は色分離によって作成された補間Ｂ画素の一例を示す図解図であり、（Ｋ）は色分離によって作成された補間Ｒ画素の他の一例を示す図解図であり、（Ｌ）は色分離によって作成された補間Ｂ画素の他の一例を示す図解図である。
【図１２】（Ａ）は入力画素の切り出しパターンの一例を示す図解図であり、（Ｂ）は入力画素の切り出しパターンの他の一例を示す図解図であり、（Ｃ）は入力画素の切り出しパターンのその他の一例を示す図解図であり、（Ｄ）は入力画素の切り出しパターンのさらにその他の一例を示す図解図であり、（Ｅ）はＲ画素に対する色分離処理の一例を示す図解図であり、（Ｆ）はＢ画素に対する色分離処理の一例を示す図解図であり、（Ｇ）はＲ画素に対する色分離処理の他の一例を示す図解図であり、（Ｈ）はＢ画素に対する色分離処理の他の一例を示す図解図であり、（Ｉ）は色分離によって作成された補間Ｒ画素の一例を示す図解図であり、（Ｊ）は色分離によって作成された補間Ｂ画素の一例を示す図解図であり、（Ｋ）は色分離によって作成された補間Ｒ画素の他の一例を示す図解図であり、（Ｌ）は色分離によって作成された補間Ｂ画素の他の一例を示す図解図である。
【図１３】（Ａ）は補間Ｒ画素および補間Ｂ画素の一部を示す図解図であり、（Ｂ）は補間Ｒ画素および補間Ｂ画素の他の一部を示す図解図であり、（Ｃ）はＨズームＲ画素およびＨズームＢ画素の一部を示す図解図であり、（Ｄ）はＨズームＲ画素およびＨズームＢ画素の他の一部を示す図解図である。
【図１４】（Ａ）はチャネルＣＨ１およびＣＨ２に対応するＨＶズームＲ画素およびＨＶズームＢ画素の一部を示す図解図であり、（Ｂ）はチャネルＣＨ３およびＣＨ４に対応するＨＶズームＲ画素およびＨＶズームＢ画素の一部を示す図解図である。
【図１５】（Ａ）はチャネルＣＨ１〜ＣＨ４に対応するＨＶズームＧ画素の一部を示す図解図であり、（Ｂ）はチャネルＣＨ１〜ＣＨ４に対応するＨＶズームＲ画素およびＨＶズームＢ画素の一部を示す図解図であり、（Ｃ）はズーム処理を施されたＲＡＷデータの一部を示す図解図である。
【発明を実施するための形態】
【００２１】
図１を参照して、この実施例のディジタルカメラ１０は、ドライバ２０ａ，２０ｂおよび２０ｃによってそれぞれ駆動されるズームレンズ１２，フォーカスレンズ１４および絞りユニット１６を含む。被写界の光学像は、これらの部材を通してＣＭＯＳ型のイメージセンサ１８の撮像面に照射される。撮像面は、水平３０７２画素×垂直１７２８画素に相当する有効画素エリアを有し、かつ図２に示す原色ベイヤ配列の色フィルタ１８ｆによって覆われる。各画素で生成される電荷は、Ｒ(Red)，Ｇ(Green)およびＢ(Blue)のいずれか１つの色情報を有する。
【００２２】
電源が投入されると、ＣＰＵ３６は、スルー画像処理を実行するべく、対応する命令をドライバ２０ｄに与える。ドライバ２０ｄは、ＳＧ(Signal Generator)２２から１／３０秒毎に発生する垂直同期信号Ｖｓｙｎｃに応答して撮像面を露光し、これによって生成された電荷を撮像面から読み出す。イメージセンサ１８は４つのチャネルＣＨ１〜ＣＨ４を有し、読み出された電荷に基づく生画像データ（元画像データ）はチャネルＣＨ１〜ＣＨ４から分散的（並列的）に出力される。
【００２３】
出力された生画像データは、図３（Ａ）に示すように水平３０７２画素×垂直１７２８画素の解像度を有する。また、図２から分かるように、出力される生画像データは、奇数番目の水平ラインに交互に配置されたＧ画素およびＢ画素と、偶数番目の水平ラインに交互に配置されたＲ画素およびＧ画素とを有する。
【００２４】
前処理回路２４は、イメージセンサ１８から出力された４チャネルの生画像データに並列的な４系統の前処理をそれぞれ施す。各系統の前処理はノイズ除去，縮小ズームおよびエッジ調整によって構成され、このような前処理を経た生画像データ（ズーム画像データ）はメモリ制御回路４０を通してＳＤＲＡＭ４２の生画像エリア４２ａに書き込まれる。
【００２５】
なお、前処理回路２４における縮小ズームは、ズーム回路２４ｚによって実行される。以下では、ズーム回路２４ｚによって実行される縮小ズームを“ＲＡＷズーム”と定義する。
【００２６】
前処理回路２２によってノイズ除去を施された生画像データ（解像度：水平３０７２画素×垂直１７２８画素）はまた、評価画像作成回路２６および２８に与えられる。評価画像作成回路２６は、与えられた生画像データに垂直２画素の加算処理および水平２画素の加算処理を施して、ＥＩＳ／ＡＦ評価画像データを作成する。一方、評価画像作成回路２８は、与えられた生画像データに水平４画素の加算処理を施して、ＡＥ／ＡＷＢ評価画像データを作成する。
【００２７】
ＥＩＳ／ＡＦ評価画像データは、図３（Ｂ）に示すように水平１５３６画素×垂直８６４画素の解像度を有する。ＡＥ／ＡＷＢ評価画像データは、図３（Ｃ）に示すように水平７６８画素×垂直１７２８画素の解像度を有する。ＥＩＳ／ＡＦ評価画像データは動き検出回路３０およびＡＦ評価回路３２に与えられ、ＡＥ／ＡＷＢ評価画像データはＡＥ／ＡＷＢ評価回路３４に与えられる。
【００２８】
図３（Ａ）および図３（Ｂ）を参照して、撮像面には１つの抽出エリアＥＸと９つの動き検出エリアＭＤ１〜ＭＤと９が割り当てられる。抽出エリアＥＸは水平１９２０画素×垂直１０８０画素に相当するサイズを有する。また、動き検出エリアＭＤ１〜ＭＤ３は撮像面の上段に水平方向に並び、動き検出エリアＭＤ４〜ＭＤ６は撮像面の中段に水平方向に並び、動き検出エリアＭＤ７〜ＭＤ９は撮像面の下段に水平方向に並ぶ。
【００２９】
動き検出回路３０は、動き検出エリアＭＤ１〜ＭＤ９の各々における被写界の動きを表す部分動きベクトルをＥＩＳ／ＡＦ評価画像データに基づいて検出し、検出された部分動きベクトルを合成して全体動きベクトルを作成する。部分動きベクトルの検出処理および全体動きベクトルの作成処理のいずれも、垂直同期信号Ｖｓｙｎｃが発生する毎に実行される。
【００３０】
ＣＰＵ３６は、光軸に直交する方向における撮像面の動きが手振れおよびパン／チルト動作のいずれに起因するかを動き検出回路３０から出力された全体動きベクトルに基づいて判別し、撮像面の動きが手振れに起因するときに全体動きベクトルに沿って抽出エリアＥＸを移動させる。抽出エリアＥＸの位置は、手振れに起因する撮像面の動きが補償（相殺）されるように変更される。なお、後述するフォーカスエリアＦＡおよび測光／白バランスエリアＥＷＡは、抽出エリアＥＸの移動に併せて移動される。
【００３１】
後処理回路４４は、生画像エリア４２ａに格納された生画像データのうち抽出エリアＥＸに属する部分生画像データをメモリ制御回路４０を通して読み出し、読み出された部分生画像データに色分離，白バランス調整，ＹＵＶ変換，拡大ズームなどの後処理を施す。部分生画像データは垂直同期信号Ｖｓｙｎｃに応答して生画像エリア４２ａから読み出され、後処理もまた垂直同期信号Ｖｓｙｎｃに応答して実行される。こうして生成されたＹＵＶ形式の画像データは、動画出力端Ｍ＿ＯＵＴから出力され、メモリ制御回路４０を通してＳＤＲＡＭ４２の動画像エリア４２ｂに書き込まれる。
【００３２】
なお、後処理回路４４において色分離処理を施された画像データを形成する複数の画素の各々は、Ｒ，ＧおよびＢの全ての色情報を有する。このような画像データの形式がＹＵＶ変換によってＹＵＶ形式に変換され、さらに拡大ズームを施される。また、後処理回路４４における拡大ズームは、ズーム回路４４ｚによって実行される。以下では、後処理回路４４によって実行される拡大ズームを“ＹＵＶズーム”と定義する。
【００３３】
ＬＣＤドライバ４６は、動画像エリア４２ｂに格納された画像データを繰り返し読み出し、読み出された画像データに基づいてＬＣＤモニタ４８を駆動する。この結果、被写界を表すリアルタイム動画像（スルー画像）がモニタ画面に表示される。
【００３４】
ＡＥ／ＡＷＢ評価回路３４は、評価画像作成回路２８から出力されたＡＥ／ＡＷＢ評価画像データのうち図３（Ｃ）に示す測光／白バランスエリアＥＷＡに属する一部のＡＥ／ＡＷＢ評価画像データを垂直同期信号Ｖｓｙｎｃが発生する毎に積分し、積分値つまりＡＥ／ＡＷＢ評価値を出力する。ＣＰＵ３６は、ＡＥ／ＡＷＢ評価回路３４から出力されたＡＥ／ＡＷＢ評価値に基づいて適正ＥＶ値と適正白バランス調整ゲインとを算出するべく、ＡＥ／ＡＷＢ処理を実行する。算出された適正ＥＶ値を定義する絞り量および露光時間はドライバ２０ｃおよび２０ｄにそれぞれ設定され、算出された適正白バランス調整ゲインは後処理回路４４に設定される。この結果、ＬＣＤモニタ４８から出力される動画像の明るさおよび白バランスが適度に調整される。
【００３５】
ＡＦ評価回路３２は、評価画像作成回路２６から出力されたＥＩＳ／ＡＦ評価画像データのうち図３（Ｂ）に示すフォーカスエリアＦＡに属する一部のＥＩＳ／ＡＦ評価画像データを抽出し、抽出されたＥＩＳ／ＡＦ評価画像データの高周波成分を垂直同期信号Ｖｓｙｎｃに応答して積分する。算出された積分値つまりＡＦ評価値は、コンティニュアスＡＦ処理のためにＣＰＵ３６に与えられる。ＣＰＵ３６は、与えられたＡＦ評価値を参照して、いわゆる山登り処理によって合焦点を継続的に探索する。フォーカスレンズ１４は、発見された合焦点に配置される。
【００３６】
キー入力装置３８上のズームボタン３８ｚが操作されると、ＣＰＵ３６は、現時点の表示倍率よりも所望の方向に既定量（＝微少量）だけ異なる表示倍率を目標表示倍率として設定し、設定された目標表示倍率に対応する光学ズーム倍率，ＲＡＷズーム倍率およびＹＵＶズーム倍率を図４に示すグラフを参照して算出する。なお、図４に示すグラフに相当するデータは、グラフデータＧＲＤとしてフラッシュメモリ５４に保存される。
【００３７】
図４によれば、光学ズーム倍率は、ズームレンズ１２がワイド端に位置するときに“１．０”を示し、ズームレンズ１２がテレ端に位置するときに“１０．０”を示す。光学ズーム倍率はまた、ズームレンズ１２がワイド端からテレ端に移動するにつれて線形に増大し、表示倍率が“１６”を上回る範囲において“１０．０”を維持する。ＹＵＶズーム倍率は、表示倍率が“１６”以下の範囲において“１．０”を維持し、表示倍率が“１６”を上回る範囲において“１０．０”まで線形に増大する。
【００３８】
ＲＡＷズーム倍率は、表示倍率＝１．０（ズームレンズ１２＝ワイド端）に対応して“０．６２５”を示し、表示倍率＝１６（ズームレンズ１２＝テレ端）に対応して“１．０”を示す。ＲＡＷズーム倍率はまた、表示倍率が“１．０”から“１６”に向かうにつれて線形に増大し、表示倍率が“１６”を上回る範囲において“１．０”を維持する。
【００３９】
ＣＰＵ３６は続いて、ズーム処理を実行するべく、算出された光学ズーム倍率，ＲＡＷズーム倍率およびＹＵＶズーム倍率をドライバ２０ａ，ズーム回路２４ｚおよびズーム回路４４ｚにそれぞれ設定する。これによって、目標表示倍率を有するスルー画像がＬＣＤモニタ４８から出力される。
【００４０】
ＣＰＵ３６はその後、ズーム回路２４ｚに設定されたＲＡＷズーム倍率に適合するように、動き検出エリアＭＤ１〜ＭＤ９，フォーカスエリアＦＡおよび測光／白バランスエリアＥＷＡの設定を変更する。この結果、手振れ補正処理，コンティニュアスＡＦ処理およびＡＥ／ＡＷＢ処理の精度が向上する。
【００４１】
キー入力装置３８上のムービボタン３８ｍが操作されると、ＣＰＵ３６は、動画記録処理を開始するべくＩ／Ｆ５０に記録開始命令を与える。Ｉ／Ｆ５０は、記録媒体５２内に動画ファイルを作成し、動画像エリア４２ｂに格納された画像データを周期的に読み出し、そして読み出された画像データを記録媒体５２内の動画ファイルに書き込む。ムービボタン３８ｍが再度操作されると、記録停止命令がＩ／Ｆ５０に与えられる。Ｉ／Ｆ５０は、動画像エリア４２ｂからの画像データの読み出しを終了し、書き込み先の動画ファイルをクローズする。これによって、動画ファイルが完成する。
【００４２】
動画記録処理が実行されている途中でキー入力装置３８上のシャッタボタン３８ｓが操作されると、ＣＰＵ３６は、並列静止画記録処理を実行するべく、静止画抽出命令を後処理回路４４に与え、静止画記録命令をＩ／Ｆ５０に与える。後処理回路４４は、シャッタボタン３８ｓが操作された時点の被写界像を表す１フレームの画像データを静止画出力端Ｓ＿ＯＵＴから出力する。出力された画像データは、メモリ制御回路４０を通してＳＤＲＡＭ４２の静止画像エリア４２ｂに書き込まれる。Ｉ／Ｆ５０は、静止画像エリア４２ｃに格納された画像データをメモリ制御回路４０を通して読み出し、読み出された画像データを収めた静止画ファイルを記録媒体５２内に作成する。
【００４３】
一方、動画記録処理が中断されている状態でシャッタボタン３８ｓが操作されると、ＣＰＵ３６は、単独静止画記録処理を実行するべく、いずれも“１．０”を示すＲＡＷズーム倍率およびＹＵＶズーム倍率をズーム回路２４ｚおよび４４ｚに設定し、かつ静止画処理命令および静止画記録命令を前処理回路２４，後処理回路４４およびＩ／Ｆ５０にそれぞれ与える。
【００４４】
これによって、水平３０７２画素×１７２８画素の解像度を有する１フレームの生画像データが前処理回路２４から出力され、ＳＤＲＡＭ４２の生画像エリア４２ａに書き込まれる。
【００４５】
後処理回路４４は、同じ解像度を有する生画像データを生画像エリア４２ａから読み出し、読み出された生画像データに基づくＹＵＶ形式の画像データを静止画出力端Ｓ＿ＯＵＴから出力する。出力された画像データは、メモリ制御回路４０を通してＳＤＲＡＭ４２の静止画像エリア４２ｃに書き込まれる。
【００４６】
Ｉ／Ｆ５０は、静止画像エリア４２ｃに格納された画像データをメモリ制御回路４０を通して読み出し、読み出された画像データを収めた静止画ファイルを記録媒体５２内に作成する。記録が完了すると、上述のスルー画像処理が再開される。
【００４７】
イメージセンサ１８は、図５に示すように構成される。被写界像を表す電荷は、マトリクス状に配置された複数の受光素子５６，５６，…によって生成される。各々の受光素子５６が、上述した画素に相当する。垂直方向に並ぶ受光素子５６，５６，…の各々は、Ａ／Ｄ変換器５８および行選択スイッチ６０を介して共通のＣＤＳ回路６２に接続される。受光素子５６で生成された電荷は、Ａ／Ｄ変換器５８によって１２ビットのディジタルデータに変換される。垂直走査回路６６は、行選択スイッチ６０，６０，…をオン／オフする動作をラスタ走査態様で１画素ずつ実行する。オン状態の行選択スイッチ６０を経た画素データに含まれるノイズは、ＣＤＳ回路６２によって除去される。
【００４８】
列選択スイッチ６４１は４Ｎ＋１列目（Ｎ：０，１，２，３，…）のＣＤＳ回路６２に割り当てられ、列選択スイッチ６４２は４Ｎ＋２列目のＣＤＳ回路６２に割り当てられ、列選択スイッチ６４３は４Ｎ＋３列目のＣＤＳ回路６２に割り当てられ、そして列選択スイッチ６４４は４Ｎ＋４列目のＣＤＳ回路６２に割り当てられる。
【００４９】
水平走査回路６８は、４Ｎ＋１列目の行選択スイッチ６０がオンされるタイミングで列選択スイッチ６４１をオンし、４Ｎ＋２列目の行選択スイッチ６０がオンされるタイミングで列選択スイッチ６４２をオンし、４Ｎ＋３列目の行選択スイッチ６０がオンされるタイミングで列選択スイッチ６４３をオンし、そして４Ｎ＋４列目の行選択スイッチ６０がオンされるタイミングで列選択スイッチ６４４をオンする。
【００５０】
この結果、４Ｎ＋１列目の受光素子５６で生成された電荷に基づく部分生画像データがチャネルＣＨ１から出力され、４Ｎ＋２列目の受光素子５６で生成された電荷に基づく部分生画像データがチャネルＣＨ２から出力される。また、４Ｎ＋３列目の受光素子５６で生成された電荷に基づく部分生画像データがチャネルＣＨ３から出力され、４Ｎ＋４列目の受光素子５６で生成された電荷に基づく部分生画像データがチャネルＣＨ４から出力される。
【００５１】
前処理回路２４は、図６に示すように構成される。チャネルＣＨ１の部分生画像データはＬＰＦ２４ｆ１を経てズーム回路２４ｚに与えられ、チャネルＣＨ２の部分生画像データはＬＰＦ２４ｆ２を経てズーム回路２４ｚに与えられる。また、チャネルＣＨ３の部分生画像データはＬＰＦ２４ｆ３を経てズーム回路２４ｚに与えられ、チャネルＣＨ４の部分生画像データはＬＰＦ２４ｆ４を経てズーム回路２４ｚに与えられる。
【００５２】
ＬＰＦ２４ｆ１〜２４ｆ４から出力された４チャネルの部分生画像データはまた、評価画像作成回路２６および２８に向けて出力される。また、ズーム回路２４ｚは、与えられた生画像データつまり元画像データに縮小ズームを施し、縮小されたサイズを有する生画像データつまりズーム画像データを出力する。
【００５３】
ズーム回路２４ｚから出力された生画像データのうち、チャネルＣＨ１に対応する部分生画像データはエッジ調整回路２４ｅ１に与えられ、チャネルＣＨ２に対応する部分生画像データはエッジ調整回路２４ｅ２に与えられる。また、チャネルＣＨ３に対応する部分生画像データはエッジ調整回路２４ｅ３に与えられ、チャネルＣＨ４に対応する部分生画像データはエッジ調整回路２４ｅ４に与えられる。
【００５４】
エッジ調整回路２４ｅ１〜２４ｅ４によってエッジ調整を施された生画像データはその後、ＳＲＡＭ２４ｍに書き込まれる。コントローラ２４ｃは、ＳＲＡＭ２４ｍに格納されたデータ量が閾値に達する毎に書き込み要求をメモリ制御回路４０に向けて発行し、発行先から承認信号が返送されたときに既定量の生画像データをメモリ制御回路４０に向けて出力する。
【００５５】
ズーム回路２４ｚは、図７に示すように構成される。チャネルＣＨ１の生画像データは分配器７０ａに与えられ、チャネルＣＨ２の生画像データは分配器７０ｂに与えられる。また、チャネルＣＨ３の生画像データは分配器７０ｃに与えられ、チャネルＣＨ４の生画像データは分配器７０ｄに与えられる。
【００５６】
イメージセンサ１８が上述の要領で駆動されることから、チャネルＣＨ１〜ＣＨ４を介して得られる生画像データは、図８（Ａ）〜図８（Ｄ），図９（Ａ）〜図９（Ｄ）に示す画素パターンを有する。つまり、チャネルＣＨ１およびＣＨ３の各々の生画像データは、奇数番目の水平ラインに対応してＢ画素を有し、偶数番目の水平ラインに対応してＧ画素を有する。また、チャネルＣＨ２およびＣＨ４の各々の生画像データは、奇数番目の水平ラインに対応してＧ画素を有し、偶数番目の水平ラインに対応してＲ画素を有する。
【００５７】
分配器７０ａおよび７０ｃの各々は、色分離系ＣＳ２を構成する色分離回路７４およびＳＲＡＭ７２にＧ画素を与え、色分離系ＣＳ１を構成するセレクタ９２にＢ画素を与える。また、分配器７０ｂおよび７０ｄの各々は、色分離回路７４およびＳＲＡＭ７２にＧ画素を与え、セレクタ９２にＲ画素を与える。
【００５８】
色分離回路７４は、分配器７０ａ〜７０ｄから直接的に入力される２つのＧ画素とＳＲＡＭ７２から読み出される２つのＧ画素、或いはＳＲＡＭ７２から読み出される４つのＧ画素に線形の色補間処理を施し、これによって作成された補間Ｇ画素をズーム系ＶＳ２を構成する水平ズーム回路７６に向けて出力する。
【００５９】
図８（Ａ）に示す画素パターンに注目するときは、図８（Ｅ）に示す８つのＧ画素のうち太線で囲った４つのＧ画素が色補間処理の対象となり、図８（Ｉ）に示す位置に補間Ｇ画素が作成される。図８（Ｂ）に示す画素パターンに注目するときは、図８（Ｆ）に示す８つのＧ画素のうち太線で囲った４つのＧ画素が色補間処理の対象となり、図８（Ｊ）に示す位置に補間Ｇ画素が作成される。
【００６０】
また、図８（Ｃ）に示す画素パターンに注目するときは、図８（Ｇ）に示す８つのＧ画素のうち太線で囲った４つのＧ画素が色補間処理の対象となり、図８（Ｋ）に示す位置に補間Ｇ画素が作成される。図８（Ｄ）に示す画素パターンに注目するときは、図８（Ｈ）に示す８つのＧ画素のうち太線で囲った４つのＧ画素が色補間処理の対象となり、図８（Ｌ）に示す位置に補間Ｇ画素が作成される。
【００６１】
さらに、図９（Ａ）に示す画素パターンに注目するときは、図９（Ｅ）に示す８つのＧ画素のうち太線で囲った４つのＧ画素が色補間処理の対象となり、図９（Ｉ）に示す位置に補間Ｇ画素が作成される。図９（Ｂ）に示す画素パターンに注目するときは、図９（Ｆ）に示す８つのＧ画素のうち太線で囲った４つのＧ画素が色補間処理の対象となり、図９（Ｊ）に示す位置に補間Ｇ画素が作成される。
【００６２】
また、図９（Ｃ）に示す画素パターンに注目するときは、図９（Ｇ）に示す８つのＧ画素のうち太線で囲った４つのＧ画素が色補間処理の対象となり、図９（Ｋ）に示す位置に補間Ｇ画素が作成される。図９（Ｄ）に示す画素パターンに注目するときは、図９（Ｈ）に示す８つのＧ画素のうち太線で囲った４つのＧ画素が色補間処理の対象となり、図９（Ｌ）に示す位置に補間Ｇ画素が作成される。
【００６３】
水平ズーム回路７６は、色分離回路７４から連続的に出力される補間Ｇ画素つまりＧの色情報を有する補間画像データに、ＣＰＵ３６によって設定されたＲＡＷズーム倍率に従う水平ズーム処理（水平方向の線形補間処理）を施す。水平ズーム処理を施された補間Ｇ画素を“ＨズームＧ画素”と定義すると、設定されたＲＡＷズーム倍率が０．７５倍であるとき、ＨズームＧ画素は、図１０（Ａ）に示す補間Ｇ画素に基づいて図１０（Ｂ）に示す要領で作成される。水平ズーム回路７６は、出力側のチャネルＣＨ１〜ＣＨ４に対応して４並列で水平ズーム処理を実行し、水平方向に並ぶ４つのＨズームＧ画素を同時に出力する。
【００６４】
同時に出力された４つのＨズームＧ画素は、分配器８０に与えられる。分配器８０は、チャネルＣＨ１およびＣＨ３に対応するＨズームＧ画素をＳＲＡＭ８２ａに書き込み、チャネルＣＨ２およびＣＨ４に対応するＨズームＧ画素をＳＲＡＭ８２ｂに書き込む。
【００６５】
セレクタ８４は、垂直ズーム回路８８ａおよび８８ｂが偶数番目の水平ラインに注目するとき、出力側のチャネルＣＨ１に対応する３つのＨズームＧ画素と出力側のチャネルＣＨ３に対応する３つのＨズームＧ画素をＳＲＡＭ８２ａから読み出す。このうち、チャネルＣＨ１に対応する３つのＨズームＧ画素は分配器８６ｂ〜８６ｄを経て垂直ズーム回路８８ａに入力され、チャネルＣＨ３に対応する３つのＨズームＧ画素は分配器８６ｂ〜８６ｄを経て垂直ズーム回路８８ｂに入力される。
【００６６】
セレクタ８４はまた、垂直ズーム回路８８ａおよび８８ｂが奇数番目の水平ラインに注目するとき、チャネルＣＨ２に対応する３つのＨズームＧ画素とチャネルＣＨ４に対応する３つのＨズームＧ画素をＳＲＡＭ８２ｂから読み出す。チャネルＣＨ２に対応する３つのＨズームＧ画素は分配器８６ｂ〜８６ｄを経て垂直ズーム回路８８ａに入力され、チャネルＣＨ４に対応する３つのＨズームＧ画素は分配器８６ｂ〜８６ｄを経て垂直ズーム回路８８ｂに入力される。
【００６７】
水平ズーム回路７６から同時に出力された４つのＨズームＧ画素はまた、分配器８６ａに与えられる。分配器８６ａは、垂直ズーム回路８８ａおよび８８ｂが偶数番目の水平ラインに注目するとき、チャネルＣＨ１に対応する１つのＨズームＧ画素を垂直ズーム回路８８ａに入力し、チャネルＣＨ３に対応する１つのＨズームＧ画素を垂直ズーム回路８８ｂに入力する。分配器８６ａはまた、垂直ズーム回路８８ａおよび８８ｂが奇数番目の水平ラインに注目するとき、チャネルＣＨ２に対応する１つのＨズームＧ画素を垂直ズーム回路８８ａに入力し、チャネルＣＨ４に対応する１つのＨズームＧ画素を垂直ズーム回路８８ｂに入力する。
【００６８】
垂直ズーム回路８８ａは、注目するラインが偶数番目の水平ラインであるとき、出力側のチャネルＣＨ１に対応する４つのＨズームＧ画素に、ＣＰＵ３６によって設定されたＲＡＷズーム倍率に従う垂直ズーム処理（垂直方向の線形補間処理）を施す。垂直ズーム回路８８ａはまた、注目するラインが奇数番目の水平ラインであるとき、出力側のチャネルＣＨ２に対応する４つのＨズームＧ画素に同様の垂直ズーム処理を施す。垂直ズーム回路８８ａからは、垂直ズーム処理の対象となった４つのＨズームＧ画素に基づく１つのＨＶズームＧ画素が出力される。
【００６９】
垂直ズーム回路８８ｂも、注目するラインが偶数番目の水平ラインであるとき、出力側のチャネルＣＨ３に対応する４つのＨズームＧ画素に、ＣＰＵ３６によって設定されたＲＡＷズーム倍率に従う垂直ズーム処理を施す。垂直ズーム回路８８ｂはまた、注目するラインが奇数番目の水平ラインであるとき、出力側のチャネルＣＨ４に対応する４つのＨズームＧ画素に同様の垂直ズーム処理を施す。垂直ズーム回路８８ｂからも、垂直ズーム処理の対象となった４つのＨズームＧ画素に基づく１つのＨＶズームＧ画素が出力される。
【００７０】
したがって、設定されたズーム倍率が０．７５倍であるとき、垂直ズーム回路８８ａでは、図１０（Ｂ）に示す水平ズームＧ画素に基づいて、図１０（Ｃ）に示すＨＶズームＧ画素が作成される。また、垂直ズーム回路８８ｂでは、図１０（Ｂ）に示す水平ズームＧ画素に基づいて、図１０（Ｄ）に示すＨＶズームＧ画素が作成される。Ｇの色情報を有するズーム画像データは、こうして作成されたＨＶズーム画素によって形成される。
【００７１】
図１１（Ａ）〜図１１（Ｄ）および図１２（Ａ）〜図１２（Ｄ）を参照して、Ｒ画素は偶数番目の水平ラインにおいてチャネルＣＨ２およびＣＨ４から検出され、Ｂ画素は奇数番目の水平ラインにおいてチャネルＣＨ１およびＣＨ３から検出される。セレクタ９２は、偶数番目の水平ラインから検出された２つのＲ画素をセレクタ９４の一方入力端およびＳＲＡＭ９６に与え、奇数番目の水平ラインから検出された２つのＢ画素をセレクタ９４の他方入力端およびＳＲＡＭ９８に与える。
【００７２】
セレクタ９４は、２つのＲ画素がセレクタ９２から出力されるとき一方入力端を選択し、２つのＢ画素がセレクタ９２から出力されるとき他方入力端を選択する。セレクタ１００は、Ｒ画素の色補間処理に対応してＳＲＡＭ９６からＲ画素を読み出し、Ｂ画素の色補間処理に対応してＳＲＡＭ９８からＢ画素を読み出す。
【００７３】
色分離回路１０２は、セレクタ９４から入力される２つのＲ画素とセレクタ１００から入力される１つのＲ画素、或いはセレクタ１００から入力される３つのＲ画素に線形の色補間処理を施し、補間Ｒ画素を作成する。色分離回路１０２はまた、セレクタ９４から入力される２つのＢ画素とセレクタ１００から入力される１つのＢ画素、或いはセレクタ１００から入力される３つのＢ画素に線形の色補間処理を施し、補間Ｂ画素を作成する。
【００７４】
ここで、補間Ｒ画素を作成するための色補間処理および補間Ｂ画素を作成するための色補間処理は、水平方向において交互に実行される。この実施例では、補間Ｒ画素は、図１１（Ａ），図１１（Ｃ），図１２（Ａ）および図１２（Ｃ）に示す画素パターンに対応して作成される。一方、補間Ｂ画素は、図１１（Ｂ），図１１（Ｄ），図１２（Ｂ）および図１２（Ｄ）に示す画素パターンに対応して作成される。
【００７５】
具体的に説明すると、図１１（Ａ）に示す画素パターンについては、図１１（Ｅ）に示す４つのＲ画素のうち太線で囲った３つのＲ画素が色補間処理の対象となり、図１１（Ｉ）に示す位置に補間Ｒ画素が作成される。図１１（Ｂ）に示す画素パターンについては、図１１（Ｆ）に示す４つのＢ画素のうち太線で囲った３つのＢ画素が色補間処理の対象となり、図１１（Ｊ）に示す位置に補間Ｂ画素が作成される。
【００７６】
また、図１１（Ｃ）に示す画素パターンについては、図１１（Ｇ）に示す４つのＲ画素のうち太線で囲った３つのＲ画素が色補間処理の対象となり、図１１（Ｋ）に示す位置に補間Ｒ画素が作成される。図１１（Ｄ）に示す画素パターンについては、図１１（Ｈ）に示す４つのＢ画素のうち太線で囲った３つのＢ画素が色補間処理の対象となり、図１１（Ｌ）に示す位置に補間Ｂ画素が作成される。
【００７７】
さらに、図１２（Ａ）に示す画素パターンについては、図１２（Ｅ）に示す４つのＲ画素のうち太線で囲った３つのＲ画素が色補間処理の対象となり、図１２（Ｉ）に示す位置に補間Ｒ画素が作成される。図１２（Ｂ）に示す画素パターンについては、図１２（Ｆ）に示す４つのＢ画素のうち太線で囲った３つのＢ画素が色補間処理の対象となり、図１２（Ｊ）に示す位置に補間Ｂ画素が作成される。
【００７８】
図１２（Ｃ）に示す画素パターンについては、図１２（Ｇ）に示す４つのＲ画素のうち太線で囲った３つのＲ画素が色補間処理の対象となり、図１２（Ｋ）に示す位置に補間Ｒ画素が作成される。図１２（Ｄ）に示す画素パターンについては、図１２（Ｈ）に示す４つのＢ画素のうち太線で囲った３つのＢ画素が色補間処理の対象となり、図１２（Ｌ）に示す位置に補間Ｂ画素が作成される。
【００７９】
Ｒの色情報を有する補間画像データは、こうして作成された補間Ｒ画素によって形成される。同様に、Ｂの色情報を有する補間画像データは、こうして作成された補間Ｂ画素によって形成される。
【００８０】
奇数番目の水平ラインに対応する補間Ｒ画素および補間Ｂ画素は、ズーム系ＶＳ１を構成する水平ズーム＆水平間引き回路１０４ａに与えられる（図１３（Ａ）参照）。一方、偶数番目の水平ラインに対応する補間Ｒ画素および補間Ｂ画素は、水平ズーム＆水平間引き回路１０４ｂに与えられる（図１３（Ｂ）参照）。
【００８１】
水平ズーム＆間引き回路１０４ａは、図１３（Ａ）に示す補間Ｒ画素および補間Ｂ画素にＣＰＵ３６によって設定されたＲＡＷズーム倍率に従う水平ズーム処理と１／２間引き処理とを施す。水平ズーム＆間引き回路１０４ｂも、図１３（Ｂ）に示す補間Ｒ画素および補間Ｂ画素に同様の水平ズーム処理と１／２間引き処理を施す。以下では、水平ズーム処理および１／２間引き処理を施されたＲ画素およびＢ画素をそれぞれ“ＨズームＲ画素”および“ＨズームＢ画素”と定義する。
【００８２】
したがって、設定されたズーム倍率が０．７５倍であれば、図１３（Ｃ）に示すＨズームＲ画素およびＨズームＢ画素が水平ズーム＆間引き回路１０４ａから出力され、図１３（Ｄ）に示すＨズームＲ画素およびＨズームＢ画素が水平ズーム＆間引き回路１０４ｂから出力される。
【００８３】
ここで、水平ズーム＆間引き回路１０４ａおよび１０４ｂの各々は、チャネルＣＨ１〜ＣＨ４に対応して４並列で水平ズーム処理および１／２間引き処理を実行し、水平方向に並ぶ４つのＨズームＲ画素／ＨズームＢ画素を同時に出力する。
【００８４】
水平ズーム＆間引き回路１０４ａから同時に出力された４つのＨズームＲ画素／ＨズームＢ画素は、セレクタ１０６の一方入力端に与えられる。また、水平ズーム＆間引き回路１０４ｂから同時に出力された４つのＨズームＲ画素／ＨズームＢ画素は、セレクタ１０６の他方入力端に与えられる。セレクタ１０６は、チャネルＣＨ１およびＣＨ３に対応するＨズームＢ画素をＳＲＡＭ１０８ａに書き込み、チャネルＣＨ２およびＣＨ４に対応するＨズームＲ画素をＳＲＡＭ１０８ｂに書き込む。
【００８５】
セレクタ１１０は、垂直ズーム回路１１４ａおよび１１４ｂが偶数番目の水平ラインに注目するとき、出力側のチャネルＣＨ２に対応する２つのＨズームＲ画素と出力側のチャネルＣＨ４に対応する２つのＨズームＲ画素とをＳＲＡＭ１０８ｂから読み出す。このうち、チャネルＣＨ２に対応する２つのＨズームＲ画素は分配器１１２ｃ〜１１２ｄを経て垂直ズーム回路１１４ａに入力され、チャネルＣＨ４に対応する２つのＨズームＲ画素は分配器１１２ｃ〜１１２ｄを経て垂直ズーム回路１１４ｂに入力される。
【００８６】
セレクタ１１０はまた、垂直ズーム回路１１４ａおよび１１４ｂが奇数番目の水平ラインに注目するとき、チャネルＣＨ１に対応する２つのＨズームＢ画素とチャネルＣＨ３に対応する２つのＨズームＢ画素とをＳＲＡＭ１０８ａから読み出す。チャネルＣＨ１に対応する２つのＨズームＢ画素は分配器１１２ｃ〜１１２ｄを経て垂直ズーム回路１１４ａに入力され、チャネルＣＨ３に対応する２つのＨズームＢ画素は分配器１１２ｃ〜１１２ｄを経て垂直ズーム回路１１４ｂに入力される。
【００８７】
水平ズーム＆間引き回路１０４ａから同時に出力された４つのＨズームＲ画素／ＨズームＢ画素はまた、分配器１１２ａに与えられる。同様に、水平ズーム＆間引き回路１０４ｂから同時に出力された４つのＨズームＲ画素／ＨズームＢ画素は、分配器１１２ｂにも与えられる。
【００８８】
分配器１１２ａおよび１１２ｂの各々は、垂直ズーム回路１１４ａおよび１１４ｂが偶数番目の水平ラインに注目するとき、チャネルＣＨ２に対応する１つのＨズームＲ画素を垂直ズーム回路１１４ａに入力し、チャネルＣＨ４に対応する１つのＨズームＲ画素を垂直ズーム回路１１４ｂに入力する。分配器１１２ａおよび１１２ｂの各々はまた、垂直ズーム回路１１４ａおよび１１４ｂが奇数番目の水平ラインに注目するとき、チャネルＣＨ１に対応する１つのＨズームＢ画素を垂直ズーム回路１１４ａに入力し、チャネルＣＨ３に対応する１つのＨズームＢ画素を垂直ズーム回路１１４ｂに入力する。
【００８９】
垂直ズーム回路１１４ａは、注目するラインが偶数番目の水平ラインであるとき、チャネルＣＨ２に対応する４つのＨズームＲ画素に、ＣＰＵ３６によって設定されたＲＡＷズーム倍率に従う垂直ズーム処理（垂直方向の線形補間処理）を施す。垂直ズーム回路１１４ａはまた、注目するラインが奇数番目の水平ラインであるとき、チャネルＣＨ１に対応する４つのＨズームＢ画素に同様の垂直ズーム処理を施す。垂直ズーム回路１１４ａからは、垂直ズーム処理の対象となった４つのＨズームＲ画素に基づく１つのＨＶズームＲ画素、或いは垂直ズーム処理の対象となった４つのＨズームＢ画素に基づく１つのＨＶズームＢ画素が出力される。
【００９０】
垂直ズーム回路１１４ｂも、注目するラインが偶数番目の水平ラインであるとき、チャネルＣＨ４に対応する４つのＨズームＲ画素に、ＣＰＵ３６によって設定されたＲＡＷズーム倍率に従う垂直ズーム処理を施す。垂直ズーム回路１１４ｂはまた、注目するラインが奇数番目の水平ラインであるとき、チャネルＣＨ３に対応する４つのＨズームＢ画素に同様の垂直ズーム処理を施す。垂直ズーム回路１１４ｂからも、垂直ズーム処理の対象となった４つのＨズームＲ画素に基づく１つのＨＶズームＲ画素、或いは垂直ズーム処理の対象となった４つのＨズームＢ画素に基づく１つのＨＶズームＢ画素が出力される。
【００９１】
したがって、設定されたズーム倍率が０．７５倍であるとき、垂直ズーム回路１１４ａでは、図１３（Ｃ）および図１３（Ｄ）に示すＨズームＲ画素およびＶズームＢ画素に基づいて、図１４（Ａ）に示すＨＶズームＲ画素およびＨＶズームＢ画素が作成される。また、垂直ズーム回路１１４ｂでは、図１３（Ｃ）および図１３（Ｄ）に示すＨズームＲ画素およびＶズームＢ画素に基づいて、図１４（Ｂ）に示すＨＶズームＲ画素およびＨＶズームＢ画素が作成される。Ｒの色情報を有するズーム画像データは、こうして作成されたＨＶズームＲ画素によって形成される。同様に、Ｂの色情報を有するズーム画像データは、こうして作成されたＨＶズームＢ画素によって形成される。
【００９２】
垂直ズーム回路８８ａおよび８８ｂからセレクタ９０へは、図１５（Ａ）に示すＨＶズームＧ画素が与えられる。また、垂直ズーム回路１１６ａおよび１１６ｂからセレクタ９０へは、図１５（Ｂ）に示すＨＶズームＲ画素およびＨＶズームＢ画素が与えられる。セレクタ９０は、与えられたＨＶズームＧ画素，ＨＶズームＲ画素およびＨＶズームＢ画素をチャネル毎に選別する。この結果、図１５（Ｃ）に示す画素パターンを有するＲＡＷデータつまりズーム画像データが得られる。
【００９３】
以上の説明から分かるように、分配器７０ａ〜７０ｄは、Ｒ，ＧおよびＢのいずれか１つを各々が有する複数の元画素がベイヤ態様（既定態様）で配列された元画像を取り込む。色分離系ＣＳ１およびＣＳ２は、取り込まれた生画像に色補間処理を施して、２つの色を各々が有する複数の補間画素によって形成された補間画像を作成する。ズーム系ＶＳ１およびＶＳ２は、色分離系ＣＳ１およびＣＳ２によって作成された補間画像にズーム処理を施して、Ｒ，ＧおよびＢのいずれか１つを各々が有する複数のズーム画素がベイヤ態様で配列されたズーム画像を作成する。
【００９４】
補間画像は元画像に対する色補間処理によって作成されるため、補間画像は元画像よりも多くの色情報を有する。ズーム画像は、このような補間画像に対するズーム処理によって作成される。これによって、ズーム画像の品質が改善される。
【００９５】
また、ズーム画像は元画像と同じ色配列を有し、補間画像を形成する各画素は一部の色を有する。補間画像は元画像に対する色補間処理によって作成され、ズーム画像は補間画像に対するズーム処理によって作成される。これによって、回路規模を抑制することができる。
【００９６】
なお、この実施例では、Ｒ，ＧまたはＢを各々が有する複数の画素がベイヤ態様で配列された画像を元画像として想定している。しかし、Ｒ，ＧおよびＢにＥ（エメラルド）を加えた４色（或いはこれらと異なる３つ以上の色）を各画素の色として採用してもよく、さらにベイヤ態様と異なる配列を色配列として採用してもよい。
【００９７】
また、この実施例では、色分離系ＣＳ１およびＣＳ２の色補間処理によって、ＧおよびＲの２色またはＧおよびＢの２色を補間画像データを形成する各画素に割り当てるようにしている。しかし、色補間処理によって各画素に割り当てる色の数は、２以上でかつ元画像が採用する色の数を下回る範囲で適宜変更してもよい。同様に、色補間処理によって各画素に割り当てる色の種別も、元画像が採用する色の種別に応じて適宜変更してもよい。
【００９８】
さらに、この実施例では、イメージセンサに４つの出力チャネルを設け、水平方向に並ぶ４画素を同時に出力するようにしている。しかし、同時に出力される水平画素の数は、“２”以上である限り、“４”と異なってもよい。
【００９９】
また、この実施例では、奇数番目の水平ラインに対応する補間Ｒ画素および補間Ｂ画素を水平ズーム＆水平間引き回路１０４ａに与える一方、偶数番目の水平ラインに対応する補間Ｒ画素および補間Ｂ画素を水平ズーム＆水平間引き回路１０４ｂに与えるようにしている。しかし、これに代えて、補間Ｒ画素を水平ズーム＆水平間引き回路１０４ａに与える一方、補間Ｂ画素を水平ズーム＆水平間引き回路１０４ｂに与えるようにしてもよい。ただし、この場合は、水平ズーム＆水平間引き回路１０４ａおよび１０４ｂの後段の構成を併せて変更する必要がある。
【符号の説明】
【０１００】
１０  …ディジタルカメラ
１６  …イメージセンサ
２４  …前処理回路
３０  …動き検出回路
３２  …ＡＦ評価回路
３４  …ＡＥ／ＡＷＢ評価回路
３６  …ＣＰＵ
【図１】
2010171548.tif 000003
【図２】
2010171548.tif 000004
【図３】
2010171548.tif 000005
【図４】
2010171548.tif 000006
【図５】
2010171548.tif 000007
【図６】
2010171548.tif 000008
【図７】
2010171548.tif 000009
【図８】
2010171548.tif 000010
【図９】
2010171548.tif 000011
【図１０】
2010171548.tif 000012
【図１１】
2010171548.tif 000013
【図１２】
2010171548.tif 000014
【図１３】
2010171548.tif 000015
【図１４】
2010171548.tif 000016
【図１５】
2010171548.tif 000017