【手続補正書】
【提出日】平成20年2月6日(2008.2.6)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
画像信号処理装置であり、
特定の光波長領域に対応する可視光信号を取得する特定波長領域信号取得素子と、可視光および不可視光成分を含む光信号を取得する広波長領域信号取得素子によって構成される素子配列を持つ単板式撮像素子によって取得される信号から、前記広波長領域信号取得素子の取得信号であるモザイク画像を入力し、広波長領域信号に対応する広波長領域信号デモザイク画像を輝度信号として生成する輝度信号生成部と、
前記特定波長領域信号取得素子の取得信号であるモザイク画像を入力し、可視光領域信号に対応する可視光領域信号デモザイク画像を生成し、該可視光領域信号デモザイク画像に基づく色差信号を生成する色差信号生成部と、
を有することを特徴とする画像信号処理装置。
【請求項２】
前記特定波長領域信号取得素子は、色成分信号ＲＧＢを個別に取得するＲＧＢ素子であり、
前記広波長領域信号取得素子は、色成分信号ＲＧＢと赤外光成分を含むＡ信号を取得するＡ素子であり、
前記輝度信号生成部は、
前記Ａ信号を取得するＡ素子の取得信号であるＡモザイク画像を入力し、色成分信号ＲＧＢと赤外光成分を含むＡ信号デモザイク画像を輝度信号として生成する処理を実行する構成であり、
前記色差信号生成部は、
前記ＲＧＢ素子の取得信号であるＲＧＢモザイク画像を入力し、ＲＧＢデモザイク画像を生成し、該ＲＧＢデモザイク画像に基づく色差信号を生成する構成であることを特徴とする請求項１に記載の画像信号処理装置。
【請求項３】
前記色差信号生成部は、
前記ＲＧＢデモザイク画像に基づく色差信号、Ｒ−Ｙ、Ｂ−Ｙを生成する処理を実行する構成であることを特徴とする請求項２に記載の画像信号処理装置。
【請求項４】
画像信号処理装置であり、
特定の光波長領域に対応する可視光信号を取得する特定波長領域信号取得素子と、可視光および不可視光成分を含む光信号を取得する広波長領域信号取得素子によって構成される素子配列を持つ単板式撮像素子によって取得される信号から、前記広波長領域信号取得素子の取得信号であるモザイク画像を入力し、広波長領域信号に対応する広波長領域信号デモザイク画像から、可視光の色成分信号を抽出する第１色成分信号抽出部と、
前記特定波長領域信号取得素子の取得信号であるモザイク画像を入力し、可視光領域信号に対応する可視光領域信号デモザイク画像を生成し、該可視光領域信号デモザイク画像に基づいて色成分信号を抽出する第２色成分信号抽出部と、
前記第１色成分抽出部の抽出した色成分信号と、前記第２色成分抽出部の抽出した色成分信号との合成処理を実行する合成処理部と、
を有することを特徴とする画像信号処理装置。
【請求項５】
前記第１色成分信号抽出部は、
前記広波長領域信号取得素子の取得信号であるモザイク画像を入力し、広波長領域信号に対応する広波長領域信号デモザイク画像を生成する広波長領域信号デモザイク画像生成部と、
前記広波長領域信号デモザイク画像から高周波成分を抽出し、広波長領域信号高周波成分画像を生成する広波長領域信号高周波成分画像生成部と、
前記広波長領域信号高周波成分画像から、可視光の色成分信号を抽出する可視光色成分信号抽出部と、
を有する構成であることを特徴とする請求項４に記載の画像信号処理装置。
【請求項６】
前記特定波長領域信号取得素子は、色成分信号ＲＧＢを個別に取得するＲＧＢ素子であり、
前記広波長領域信号取得素子は、色成分信号ＲＧＢと赤外光成分を含むＡ信号を取得するＡ素子であり、
前記第１色成分信号抽出部は、
前記Ａ素子の取得信号であるモザイク画像を入力し、Ａ信号デモザイク画像から、可視光の色成分信号ＲＧＢを抽出する処理を実行する構成であり、
前記第２色成分信号抽出部は、
前記ＲＧＢ素子の取得信号であるＲＧＢモザイク画像を入力し、ＲＧＢデモザイク画像を生成し、該ＲＧＢデモザイク画像に基づいて色成分信号ＲＧＢを抽出する構成であり、
前記合成処理部は、
前記第１色成分抽出部の抽出した色成分信号ＲＧＢと、前記第２色成分抽出部の抽出した色成分信号ＲＧＢとの合成処理を実行する構成であることを特徴とする請求項４に記載の画像信号処理装置。
【請求項７】
撮像素子であり、
特定の光波長領域に対応する可視光信号を取得する特定波長領域信号取得素子と、
可視光および不可視光成分を含む光信号を取得する広波長領域信号取得素子と、
によって構成される素子配列を持つ撮像素子。
【請求項８】
前記特定波長領域信号取得素子は、
色成分信号ＲＧＢを個別に取得するＲＧＢ素子であり、
前記広波長領域信号取得素子は、
色成分信号ＲＧＢと赤外光成分を含むＡ信号を取得するＡ素子であることを特長とする請求項７に記載の撮像素子。
【請求項９】
前記撮像素子において、
前記広波長領域信号取得素子は、市松状に配置されている構成であることを特徴とする請求項７に記載の撮像素子。
【請求項１０】
撮像装置であり、
特定の光波長領域に対応する可視光信号を取得する特定波長領域信号取得素子と、可視光および不可視光成分を含む光信号を取得する広波長領域信号取得素子によって構成される素子配列を持つ単板式撮像素子と、
前記単板式撮像素子によって取得される信号から、前記広波長領域信号取得素子の取得信号であるモザイク画像を入力し、広波長領域信号に対応する広波長領域信号デモザイク画像を輝度信号として生成する輝度信号生成部と、
前記特定波長領域信号取得素子の取得信号であるモザイク画像を入力し、可視光領域信号に対応する可視光領域信号デモザイク画像を生成し、該可視光領域信号デモザイク画像に基づく色差信号を生成する色差信号生成部と、
を有することを特徴とする撮像装置。
【請求項１１】
前記特定波長領域信号取得素子は、色成分信号ＲＧＢを個別に取得するＲＧＢ素子であり、
前記広波長領域信号取得素子は、色成分信号ＲＧＢと赤外光成分を含むＡ信号を取得するＡ素子であり、
前記輝度信号生成部は、
前記Ａ信号を取得するＡ素子の取得信号であるＡモザイク画像を入力し、色成分信号ＲＧＢと赤外光成分を含むＡ信号デモザイク画像を輝度信号として生成する処理を実行する構成であり、
前記色差信号生成部は、
前記ＲＧＢ素子の取得信号であるＲＧＢモザイク画像を入力し、ＲＧＢデモザイク画像を生成し、該ＲＧＢデモザイク画像に基づく色差信号を生成する構成であることを特徴とする請求項１０に記載の撮像装置。
【請求項１２】
前記色差信号生成部は、
前記ＲＧＢデモザイク画像に基づく色差信号、Ｒ−Ｙ、Ｂ−Ｙを生成する処理を実行する構成であることを特徴とする請求項１１に記載の撮像装置。
【請求項１３】
撮像装置であり、
特定の光波長領域に対応する可視光信号を取得する特定波長領域信号取得素子と、可視光および不可視光成分を含む光信号を取得する広波長領域信号取得素子によって構成される素子配列を持つ単板式撮像素子と、
前記単板式撮像素子によって取得される信号から、前記広波長領域信号取得素子の取得信号であるモザイク画像を入力し、広波長領域信号に対応する広波長領域信号デモザイク画像から、可視光の色成分信号を抽出する第１色成分信号抽出部と、
前記特定波長領域信号取得素子の取得信号であるモザイク画像を入力し、可視光領域信号に対応する可視光領域信号デモザイク画像を生成し、該可視光領域信号デモザイク画像に基づいて色成分信号を抽出する第２色成分信号抽出部と、
前記第１色成分抽出部の抽出した色成分信号と、前記第２色成分抽出部の抽出した色成分信号との合成処理を実行する合成処理部と、
を有することを特徴とする撮像装置。
【請求項１４】
前記第１色成分信号抽出部は、
前記広波長領域信号取得素子の取得信号であるモザイク画像を入力し、広波長領域信号に対応する広波長領域信号デモザイク画像を生成する広波長領域信号デモザイク画像生成部と、
前記広波長領域信号デモザイク画像から高周波成分を抽出し、広波長領域信号高周波成分画像を生成する広波長領域信号高周波成分画像生成部と、
前記広波長領域信号高周波成分画像から、可視光の色成分信号を抽出する可視光色成分信号抽出部と、
を有する構成であることを特徴とする請求項１３に記載の撮像装置。
【請求項１５】
前記特定波長領域信号取得素子は、色成分信号ＲＧＢを個別に取得するＲＧＢ素子であり、
前記広波長領域信号取得素子は、色成分信号ＲＧＢと赤外光成分を含むＡ信号を取得するＡ素子であり、
前記第１色成分信号抽出部は、
前記Ａ素子の取得信号であるモザイク画像を入力し、Ａ信号デモザイク画像から、可視光の色成分信号ＲＧＢを抽出する処理を実行する構成であり、
前記第２色成分信号抽出部は、
前記ＲＧＢ素子の取得信号であるＲＧＢモザイク画像を入力し、ＲＧＢデモザイク画像を生成し、該ＲＧＢデモザイク画像に基づいて色成分信号ＲＧＢを抽出する構成であり、
前記合成処理部は、
前記第１色成分抽出部の抽出した色成分信号ＲＧＢと、前記第２色成分抽出部の抽出した色成分信号ＲＧＢとの合成処理を実行する構成であることを特徴とする請求項１３に記載の撮像装置。
【請求項１６】
画像信号処理方法であり、
特定の光波長領域に対応する可視光信号を取得する特定波長領域信号取得素子と、可視光および不可視光成分を含む光信号を取得する広波長領域信号取得素子によって構成される素子配列を持つ単板式撮像素子によって取得される信号から、前記広波長領域信号取得素子の取得信号であるモザイク画像を入力し、広波長領域信号に対応する広波長領域信号デモザイク画像を輝度信号として生成する輝度信号生成ステップと、
前記特定波長領域信号取得素子の取得信号であるモザイク画像を入力し、可視光領域信号に対応する可視光領域信号デモザイク画像を生成し、該可視光領域信号デモザイク画像に基づく色差信号を生成する色差信号生成ステップと、
を有することを特徴とする画像信号処理方法。
【請求項１７】
前記特定波長領域信号取得素子は、色成分信号ＲＧＢを個別に取得するＲＧＢ素子であり、
前記広波長領域信号取得素子は、色成分信号ＲＧＢと赤外光成分を含むＡ信号を取得するＡ素子であり、
前記輝度信号生成ステップは、
前記Ａ信号を取得するＡ素子の取得信号であるＡモザイク画像を入力し、色成分信号ＲＧＢと赤外光成分を含むＡ信号デモザイク画像を輝度信号として生成する処理を実行するステップであり、
前記色差信号生成ステップは、
前記ＲＧＢ素子の取得信号であるＲＧＢモザイク画像を入力し、ＲＧＢデモザイク画像を生成し、該ＲＧＢデモザイク画像に基づく色差信号を生成するステップであることを特徴とする請求項１６に記載の画像信号処理方法。
【請求項１８】
前記色差信号生成ステップは、
前記ＲＧＢデモザイク画像に基づく色差信号、Ｒ−Ｙ、Ｂ−Ｙを生成する処理を実行するステップであることを特徴とする請求項１７に記載の画像信号処理方法。
【請求項１９】
画像信号処理方法であり、
特定の光波長領域に対応する可視光信号を取得する特定波長領域信号取得素子と、可視光および不可視光成分を含む光信号を取得する広波長領域信号取得素子によって構成される素子配列を持つ単板式撮像素子によって取得される信号から、前記広波長領域信号取得素子の取得信号であるモザイク画像を入力し、広波長領域信号に対応する広波長領域信号デモザイク画像から、可視光の色成分信号を抽出する第１色成分信号抽出ステップと、
前記特定波長領域信号取得素子の取得信号であるモザイク画像を入力し、可視光領域信号に対応する可視光領域信号デモザイク画像を生成し、該可視光領域信号デモザイク画像に基づいて色成分信号を抽出する第２色成分信号抽出ステップと、
前記第１色成分抽出ステップにおいて抽出した色成分信号と、前記第２色成分抽出ステップにおいて抽出した色成分信号との合成処理を実行する合成処理ステップと、
を有することを特徴とする画像信号処理方法。
【請求項２０】
前記第１色成分信号抽出ステップは、
前記広波長領域信号取得素子の取得信号であるモザイク画像を入力し、広波長領域信号に対応する広波長領域信号デモザイク画像を生成する広波長領域信号デモザイク画像生成ステップと、
前記広波長領域信号デモザイク画像から高周波成分を抽出し、広波長領域信号高周波成分画像を生成する広波長領域信号高周波成分画像生成ステップと、
前記広波長領域信号高周波成分画像から、可視光の色成分信号を抽出する可視光色成分信号抽出ステップと、
を有する構成であることを特徴とする請求項１９記載の画像信号処理方法。
【請求項２１】
前記特定波長領域信号取得素子は、色成分信号ＲＧＢを個別に取得するＲＧＢ素子であり、
前記広波長領域信号取得素子は、色成分信号ＲＧＢと赤外光成分を含むＡ信号を取得するＡ素子であり、
前記第１色成分信号抽出ステップは、
前記Ａ素子の取得信号であるモザイク画像を入力し、Ａ信号デモザイク画像から、可視光の色成分信号ＲＧＢを抽出する処理を実行するステップであり、
前記第２色成分信号抽出ステップは、
前記ＲＧＢ素子の取得信号であるＲＧＢモザイク画像を入力し、ＲＧＢデモザイク画像を生成し、該ＲＧＢデモザイク画像に基づいて色成分信号ＲＧＢを抽出するステップであり、
前記合成処理ステップは、
前記第１色成分抽出ステップにおいて抽出した色成分信号ＲＧＢと、前記第２色成分抽出ステップにおいて抽出した色成分信号ＲＧＢとの合成処理を実行するステップであることを特徴とする請求項１９に記載の画像信号処理方法。
【請求項２２】
画像信号処理装置において画像信号処理を実行させるコンピュータ・プログラムであり、
特定の光波長領域に対応する可視光信号を取得する特定波長領域信号取得素子と、可視光および不可視光成分を含む光信号を取得する広波長領域信号取得素子によって構成される素子配列を持つ単板式撮像素子によって取得される信号から、前記広波長領域信号取得素子の取得信号であるモザイク画像を入力し、広波長領域信号に対応する広波長領域信号デモザイク画像を輝度信号として生成する輝度信号生成ステップと、
前記特定波長領域信号取得素子の取得信号であるモザイク画像を入力し、可視光領域信号に対応する可視光領域信号デモザイク画像を生成し、該可視光領域信号デモザイク画像に基づく色差信号を生成する色差信号生成ステップと、
を実行させることを特徴とするコンピュータ・プログラム。
【請求項２３】
画像信号処理装置において画像信号処理を実行させるコンピュータ・プログラムであり、
特定の光波長領域に対応する可視光信号を取得する特定波長領域信号取得素子と、可視光および不可視光成分を含む光信号を取得する広波長領域信号取得素子によって構成される素子配列を持つ単板式撮像素子によって取得される信号から、前記広波長領域信号取得素子の取得信号であるモザイク画像を入力し、広波長領域信号に対応する広波長領域信号デモザイク画像から、可視光の色成分信号を抽出する第１色成分信号抽出ステップと、
前記特定波長領域信号取得素子の取得信号であるモザイク画像を入力し、可視光領域信号に対応する可視光領域信号デモザイク画像を生成し、該可視光領域信号デモザイク画像に基づいて色成分信号を抽出する第２色成分信号抽出ステップと、
前記第１色成分抽出ステップにおいて抽出した色成分信号と、前記第２色成分抽出ステップにおいて抽出した色成分信号との合成処理を実行する合成処理ステップと、
を実行させることを特徴とするコンピュータ・プログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００２０
【補正方法】変更
【補正の内容】
【００２０】
さらに、本発明の画像信号処理装置の一実施態様において、前記特定波長領域信号取得素子は、色成分信号ＲＧＢを個別に取得するＲＧＢ素子であり、前記広波長領域信号取得素子は、色成分信号ＲＧＢと赤外光成分を含むＡ信号を取得するＡ素子であり、前記輝度信号生成部は、前記Ａ信号を取得するＡ素子の取得信号であるＡモザイク画像を入力し、色成分信号ＲＧＢと赤外光成分を含むＡ信号デモザイク画像を輝度信号として生成する処理を実行する構成であり、前記色差信号生成部は、前記ＲＧＢ素子の取得信号であるＲＧＢモザイク画像を入力し、ＲＧＢデモザイク画像を生成し、該ＲＧＢデモザイク画像に基づく色差信号を生成する構成であることを特徴とする。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００２４
【補正方法】変更
【補正の内容】
【００２４】
さらに、本発明の画像信号処理装置の一実施態様において、前記特定波長領域信号取得素子は、色成分信号ＲＧＢを個別に取得するＲＧＢ素子であり、前記広波長領域信号取得素子は、色成分信号ＲＧＢと赤外光成分を含むＡ信号を取得するＡ素子であり、前記第１色成分信号抽出部は、前記Ａ素子の取得信号であるモザイク画像を入力し、Ａ信号デモザイク画像から、可視光の色成分信号ＲＧＢを抽出する処理を実行する構成であり、前記第２色成分信号抽出部は、前記ＲＧＢ素子の取得信号であるＲＧＢモザイク画像を入力し、ＲＧＢデモザイク画像を生成し、該ＲＧＢデモザイク画像に基づいて色成分信号ＲＧＢを抽出する構成であり、前記合成処理部は、前記第１色成分抽出部の抽出した色成分信号ＲＧＢと、前記第２色成分抽出部の抽出した色成分信号ＲＧＢとの合成処理を実行する構成であることを特徴とする。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００２６
【補正方法】変更
【補正の内容】
【００２６】
さらに、本発明の撮像素子の一実施態様において、前記特定波長領域信号取得素子は、色成分信号ＲＧＢを個別に取得するＲＧＢ素子であり、前記広波長領域信号取得素子は、色成分信号ＲＧＢと赤外光成分を含むＡ信号を取得するＡ素子であることを特長とする。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００２９
【補正方法】変更
【補正の内容】
【００２９】
さらに、本発明の撮像装置の一実施態様において、前記特定波長領域信号取得素子は、色成分信号ＲＧＢを個別に取得するＲＧＢ素子であり、前記広波長領域信号取得素子は、色成分信号ＲＧＢと赤外光成分を含むＡ信号を取得するＡ素子であり、前記輝度信号生成部は、前記Ａ信号を取得するＡ素子の取得信号であるＡモザイク画像を入力し、色成分信号ＲＧＢと赤外光成分を含むＡ信号デモザイク画像を輝度信号として生成する処理を実行する構成であり、前記色差信号生成部は、前記ＲＧＢ素子の取得信号であるＲＧＢモザイク画像を入力し、ＲＧＢデモザイク画像を生成し、該ＲＧＢデモザイク画像に基づく色差信号を生成する構成であることを特徴とする。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００３３
【補正方法】変更
【補正の内容】
【００３３】
さらに、本発明の撮像装置の一実施態様において、前記特定波長領域信号取得素子は、色成分信号ＲＧＢを個別に取得するＲＧＢ素子であり、前記広波長領域信号取得素子は、色成分信号ＲＧＢと赤外光成分を含むＡ信号を取得するＡ素子であり、前記第１色成分信号抽出部は、前記Ａ素子の取得信号であるモザイク画像を入力し、Ａ信号デモザイク画像から、可視光の色成分信号ＲＧＢを抽出する処理を実行する構成であり、前記第２色成分信号抽出部は、前記ＲＧＢ素子の取得信号であるＲＧＢモザイク画像を入力し、ＲＧＢデモザイク画像を生成し、該ＲＧＢデモザイク画像に基づいて色成分信号ＲＧＢを抽出する構成であり、前記合成処理部は、前記第１色成分抽出部の抽出した色成分信号ＲＧＢと、前記第２色成分抽出部の抽出した色成分信号ＲＧＢとの合成処理を実行する構成であることを特徴とする。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００３５
【補正方法】変更
【補正の内容】
【００３５】
さらに、本発明の画像信号処理方法の一実施態様において、前記特定波長領域信号取得素子は、色成分信号ＲＧＢを個別に取得するＲＧＢ素子であり、前記広波長領域信号取得素子は、色成分信号ＲＧＢと赤外光成分を含むＡ信号を取得するＡ素子であり、前記輝度信号生成ステップは、前記Ａ信号を取得するＡ素子の取得信号であるＡモザイク画像を入力し、色成分信号ＲＧＢと赤外光成分を含むＡ信号デモザイク画像を輝度信号として生成する処理を実行するステップであり、前記色差信号生成ステップは、前記ＲＧＢ素子の取得信号であるＲＧＢモザイク画像を入力し、ＲＧＢデモザイク画像を生成し、該ＲＧＢデモザイク画像に基づく色差信号を生成するステップであることを特徴とする。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００３９
【補正方法】変更
【補正の内容】
【００３９】
さらに、本発明の画像信号処理方法の一実施態様において、前記特定波長領域信号取得素子は、色成分信号ＲＧＢを個別に取得するＲＧＢ素子であり、前記広波長領域信号取得素子は、色成分信号ＲＧＢと赤外光成分を含むＡ信号を取得するＡ素子であり、前記第１色成分信号抽出ステップは、前記Ａ素子の取得信号であるモザイク画像を入力し、Ａ信号デモザイク画像から、可視光の色成分信号ＲＧＢを抽出する処理を実行するステップであり、前記第２色成分信号抽出ステップは、前記ＲＧＢ素子の取得信号であるＲＧＢモザイク画像を入力し、ＲＧＢデモザイク画像を生成し、該ＲＧＢデモザイク画像に基づいて色成分信号ＲＧＢを抽出するステップであり、前記合成処理ステップは、前記第１色成分抽出ステップにおいて抽出した色成分信号ＲＧＢと、前記第２色成分抽出ステップにおいて抽出した色成分信号ＲＧＢとの合成処理を実行するステップであることを特徴とする。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００５２
【補正方法】変更
【補正の内容】
【００５２】
本発明の撮像装置において適用する撮像素子は、このような４種類のＲＧＢＡ対応の透過フィルタを持つ撮像素子であり、図４に示すように、色成分信号ＲＧＢを個別に取得するＲＧＢ素子と色成分信号ＲＧＢと赤外光成分を含むＡ信号を取得するＡ素子によって構成される色配列を持つ単板式撮像素子である。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００５３
【補正方法】変更
【補正の内容】
【００５３】
なお、ＲＧＢＡの配列は、図４に示す配列構成の他の設定も可能であり、例えば図６に示す配列としてもよい。図６に示す光学フィルタ配列は、図４に示す配列を４５度回転させた構成に相当する。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００６２
【補正方法】変更
【補正の内容】
【００６２】
この補間処理によって、例えば、図８（２）に示すようなデモザイク画像が得られる。デモザイク画像１５１が、図７に示すローパスフィルタ１１３，１１５における補間処理によって生成されるＲチャネルのデモザイク画像であり、デモザイク画像１５２が、図７に示すローパスフィルタ１１２における補間処理によって生成されるＧチャネルのデモザイク画像であり、デモザイク画像１５３が、図７に示すローパスフィルタ１１４，１１６における補間処理によって生成されるＢチャネルのデモザイク画像であり、デモザイク画像１５４が、図７に示すローパスフィルタ１１１における補間処理によって生成されるＡチャネルのデモザイク画像である。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００６４
【補正方法】変更
【補正の内容】
【００６４】
図７に示すローパスフィルタ１１１における補間処理によって生成される図８Ｂに示すデモザイク画像１５４は、Ａチャネル、すなわち、ＧＢＲ等の可視光領域の波長と、赤外光（ＩＲ）の波長領域を含む光の強度に対応する画素値が、各画素に設定されることになる。このデモザイク画像は、図７に示すように、ローパスフィルタ１１１からの出力として得られ、その信号は、
Ａ＝Ｙ＋ＩＲ
となり、先に図５を参照して説明したように、Ａ信号は、可視光領域から赤外光領域を含み、より広範囲の波長の光成分を含むデモザイク画像が出力される。
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】００７０
【補正方法】変更
【補正の内容】
【００７０】
図９に示す構成は、図４または図６に示すＲＧＢＡの配列を持つ撮像素子（ＣＣＤ）２０１によって取得される信号から、Ａ素子の取得信号であるモザイク画像を入力し、広波長領域信号に対応するＡデモザイク画像から、可視光の色成分信号を抽出する第１色成分信号抽出部と、ＲＧＢ素子の取得信号であるＲＧＢモザイク画像を入力し、可視光領域信号に対応するＲＧＢデモザイク画像を生成し、ＲＧＢデモザイク画像に基づいて色成分信号を抽出する第２色成分信号抽出部と、第１色成分抽出部の抽出した色成分信号と、第２色成分抽出部の抽出した色成分信号との合成処理を実行する合成処理部とによって構成される。
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】００７３
【補正方法】変更
【補正の内容】
【００７３】
図９の構成を適用した信号処理について説明する。まず、図４または図６に示すＲＧＢＡの配列を持つ撮像素子（ＣＣＤ）２０１において撮影された画像は、ＡＤ変換部２０２においてデジタルデータに変換される。ここで、生成される信号は、ＲＧＢＡ各々に対応する４つのモザイク画像となる。
【手続補正１５】
【補正対象書類名】明細書
【補正対象項目名】００７５
【補正方法】変更
【補正の内容】
【００７５】
ローパスフィルタ２１１〜２１６における補間処理によって、例えば、図８（２）に示すようなデモザイク画像が得られる。デモザイク画像１５１が、図９に示すローパスフィルタ２１３，２１５における補間処理によって生成されるＲチャネルのデモザイク画像であり、デモザイク画像１５２が、図９に示すローパスフィルタ２１２における補間処理によって生成されるＧチャネルのデモザイク画像であり、デモザイク画像１５３が、図９に示すローパスフィルタ２１４，２１６における補間処理によって生成されるＢチャネルのデモザイク画像であり、デモザイク画像１５４が、図９に示すローパスフィルタ２１１における補間処理によって生成されるＡチャネルのデモザイク画像に相当する。
【手続補正１６】
【補正対象書類名】明細書
【補正対象項目名】００７６
【補正方法】変更
【補正の内容】
【００７６】
図９に示すローパスフィルタ２１１における補間処理によって生成されるデータは、図８に示すデモザイク画像１５４であり、Ａチャネル、すなわち、ＧＢＲ等の可視光領域の波長と、赤外光（ＩＲ）の波長領域を含む光の強度に対応する画素値が、各画素に設定されたデモザイク画像である。
【手続補正１７】
【補正対象書類名】明細書
【補正対象項目名】００８１
【補正方法】変更
【補正の内容】
【００８１】
上記式において、
Ａｈｐｆ：Ａチャネル高周波成分抽出結果画像の画素値（入力）
Ｒｈｐｆ：Ａチャネル高周波成分抽出結果画像から抽出されるＲ信号（出力）
Ｇｈｐｆ：Ａチャネル高周波成分抽出結果画像から抽出されるＧ信号（出力）
Ｂｈｐｆ：Ａチャネル高周波成分抽出結果画像から抽出されるＢ信号（出力）
である。マトリクス演算部２２２は、Ａチャネル高周波成分抽出結果画像を構成する各画素の画素値［Ａｈｐｆ］に基づいて、ＲＧＢ各成分［Ｒｈｐｆ，Ｇｈｐｆ，Ｂｈｐｆ］を抽出する。