【手続補正書】
【提出日】平成24年7月3日(2012.7.3)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】００３０
【補正方法】変更
【補正の内容】
【００３０】
【図１】一般的なカラーフィルタで用いられる色配列としてのベイヤ配列と、本発明において適用するＲＧＢＷ配列の例について説明する図である。
【図２】本発明の一実施例における処理であるＲＧＢＷ配列からＲＧＢ配列への変換処理として行われるリモザイク処理について説明する図である。
【図３】本発明の一実施例に係る撮像装置の構成例について説明する図である。
【図４】本発明の一実施例に係る撮像装置の構成例について説明する図である。
【図５】エッジ検出部の実行するＷ画素を用いたエッジ方向とエッジ強度の判定方法について説明する図である。
【図６】エッジ検出部の実行するＷ画素を用いたエッジ方向とエッジ強度の判定方法について説明する図である。
【図７】エッジ検出部の実行するＷ画素を用いたエッジ方向とエッジ強度の判定方法について説明する図である。
【図８】エッジ情報の一例としての平坦度（ｗｅｉｇｈｔＦｌａｔ）情報について説明する図である。
【図９】ぼけ補正処理部の実行する処理であり、中心画素がＷ画素でない場合に周辺のＷ信号から中心のＷ信号を補間する方法について図である。
【図１０】Ｗ信号の低周波成分ｍＷを算出するフィルタ構成とｍＷ算出処理例について説明する図である。
【図１１】Ｇ信号の低周波成分ｍＧを算出するフィルタ構成とｍＧ算出処理例について説明する図である。
【図１２】ｍＷとｍＧの比率が画像内の局所領域において保たれると仮定した場合のぼけ補正Ｗ信号（Ｗｄ）からぼけ補正ありＧ信号（Ｇｄ）を算出する処理について説明する図である。
【図１３】ノイズ除去Ｗ信号（Ｗｎ）を算出するフィルタ構成とＷｎ算出処理例について説明する図である。
【図１４】Ｗ信号の低周波成分ｍＷを算出するフィルタ構成とｍＷ算出処理例について説明する図である。
【図１５】Ｒ信号の低周波成分ｍＲ、Ｂ信号の低周波成分ｍＢを算出するフィルタ構成とｍＲ，ｍＢ算出処理例について説明する図である。
【図１６】ｍＷとｍＲまたはｍＢの比率が画像内の局所領域において保たれると仮定した場合のぼけ補正Ｗ信号（Ｗｄ）からぼけ補正ありＲ信号（Ｒｄ）、ぼけ補正ありＢ信号（Ｂｄ）を算出する処理について説明する図である。
【図１７】ノイズ除去Ｗ信号（Ｗｎ）を算出するフィルタ構成とＷｎ算出処理例について説明する図である。
【図１８】Ｒ信号の低周波成分ｍＲを算出するフィルタ構成とｍＲ算出処理例について説明する図である。
【図１９】Ｂ信号の低周波成分ｍＢを算出するフィルタ構成とｍＢ算出処理例について説明する図である。
【図２０】本発明の一実施例に係る撮像装置の構成例について説明する図である。
【図２１】本発明の一実施例に係る撮像装置の構成例について説明する図である。
【図２２】図２１に示すＷ位置ＲＧＢ補間パラメータ算出部７１１の処理について説明する図である。
【図２３】図２１に示すＷ位置ＲＧＢ補間パラメータ算出部７１１の処理について説明する図である。
【図２４】図２１に示すＧ位置ＲＧＢ補間パラメータ算出部７１２の処理について説明する図である。
【図２５】図２１に示すＲ位置ＲＧＢ補間パラメータ算出部７１３の処理について説明する図である。
【図２６】図２１に示すＢ位置ＲＧＢ補間パラメータ算出部７１４の処理について説明する図である。
【図２７】ＲＧＢＷ配列信号のデモザイク処理のメリットについて説明する図である。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００３７
【補正方法】変更
【補正の内容】
【００３７】
［２．撮像装置および画像処理装置の構成例および処理例について］
図３、図４を参照して、本発明の一実施例に係る撮像装置および画像処理装置の構成例及び処理例について説明する。
図３は、本発明の一実施例に係る撮像装置１００の構成例を示す図である。撮像装置１００は、光学レンズ１０５、撮像素子（イメージセンサ）１１０、信号処理部１２０、メモリ１３０、制御部１４０を有する。なお、撮像装置は画像処理装置の一態様である。画像処理装置には、例えばＰＣなどの装置も含まれる。ＰＣ等の画像処理装置は、図３に示す撮像装置１００の光学レンズ１０５、撮像素子１１０を持たず、その他の構成要素から構成され、撮像素子１１０の取得データの入力部、または記憶部を持つ構成となる。具体的には撮像装置１００は、スチルカメラ、ビデオカメラなどであり、画像処理装置１００にはＰＣなど画像処理の可能な情報処理装置が含まれる。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００６０
【補正方法】変更
【補正の内容】
【００６０】
ＲＧＢ信号処理部２５０は、一般的なカメラや画像処理装置が持つＲＧＢ配列（ベイヤ配列）信号に対する信号処理部と同様である。ＲＧＢ信号処理部２５０は、加重加算処理部２１５から出力されるＲＧＢ配列（ベイヤ配列）１８２に対する信号処理を実行してカラー画像１８３（図３参照）を生成する。ＲＧＢ信号処理部２５０は、具体的には、例えばホワイトバランス調整処理、デモザイク処理、シェーディング処理、ＲＧＢカラーマトリクス処理、γ補正処理などを実行してカラー画像１８３を生成する。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０２０３
【補正方法】変更
【補正の内容】
【０２０３】
この平滑化フィルタ５８２を適用して、低周波成分ｍＢを算出する。ｍＢ算出処理に際しては、７×７画素の入力信号５９１の中央の５×５画素領域５９３中のＢ画素位置の画素値に、平滑化フィルタ５８２の対応画素位置のフィルタ係数を乗算して、各乗算結果の加算値をＢ信号の低周波成分ｍＢとして算出する。なお、図１９に示す平滑化フィルタ５８２のフィルタ係数設定例は一例であり、この他のフィルタ係数を設定したフィルタを適用してもよい。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】０２１６
【補正方法】変更
【補正の内容】
【０２１６】
加重加算処理部２１５の生成したＧｒ，Ｒｒ，Ｂｒから構成されるＲＧＢ配列（ベイヤ配列）１８２は、図３、図４に示すようにＲＧＢ信号処理部２５０に提供される。ＲＧＢ信号処理部２５０は、一般的なカメラや画像処理装置が持つＲＧＢ配列（ベイヤ配列）信号に対する信号処理部と同様である。ＲＧＢ信号処理部２５０は、加重加算処理部２１５から出力されるＲＧＢ配列（ベイヤ配列）１８２に対する信号処理を実行してカラー画像１８３（図３参照）を生成する。ＲＧＢ信号処理部２５０は、具体的には、例えばホワイトバランス調整処理、デモザイク処理、シェーディング処理、ＲＧＢカラーマトリクス処理、γ補正処理などを実行してカラー画像１８３を生成する。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】０２１７
【補正方法】変更
【補正の内容】
【０２１７】
なお、上述した実施例では、図１（ｂ）に示すＲＧＢＷ配列に対する処理例として説明したが、このカラー配列に限らず、色信号に比べて高いサンプリングレートを持つＷ画素を含む様々なカラー配列をＷ画素を含まない色信号配列への変換処理に適用可能である。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】０２３３
【補正方法】変更
【補正の内容】
【０２３３】
なお、ｍＷは、先に図１０を参照して説明したと同様のＷ信号の低周波成分である。
Ｗｎは、先に図１３を参照して説明したと同様のＷ信号のノイズ除去ホワイト（Ｗ）信号である。
また、演算コスト削減のため、ラインメモリ７０１から入力するＷ信号をそのまま利用する構成でも良い。
ｍＲは、Ｒ信号の低周波成分、
ｍＧは、Ｇ信号の低周波成分、
ｍＢは、Ｂ信号の低周波成分、
である。