【手続補正書】
【提出日】平成21年2月19日(2009.2.19)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
色コーディング用の色フィルタを有する撮像手段により撮像された画像を処理する画像処理装置において、
画像信号を入力する手段と、
前記画像信号について、画素間の相関度合いを示す、少なくとも第１の相関値及び第２の相関値を算出する相関値算出手段と、
前記第１の相関値と前記第２の相関値とに基づいて、所望の画素を補間する際に使用する他の画素を特定する補間用画素特定手段と、
前記補間用画素特定手段により特定された画素から前記所望の画素を補間する補間手段と、
を具備することを特徴とする画像処理装置。
【請求項２】
前記相関値算出手段は、直交する２つのフィルタの出力に基づいて前記第１の相関値を算出するとともに、前記第１の相関値の算出の際とは異なる方向特性を持つ直交する２つのフィルタの出力に基づいて前記第２の相関値を算出する、
ことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記相関値算出手段は、前記第２の相関値の算出において、前記第１の相関値の算出に使用するフィルタとは所定の角度だけ方向特性がずれたフィルタを用いる、
ことを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記補間用画素特定手段は、前記第１の相関値と前記第２の相関値との相関関係を比較することにより、補間しようとする所望の画素回り３６０度の相関性に基づいて、所望の画素を補間する際に使用する他の画素を特定する、
ことを特徴とする請求項２に記載の画像処理装置。
【請求項５】
前記色コーディング用の色フィルタ上には、各画素が水平方向及び垂直方向で等間隔となるように正方格子状に配列された画素配列に対して、輝度成分を算出する際に主成分となる色成分が、他の色成分のそれぞれの周囲を囲むように配置されている、
ことを特徴とする請求項１に記載の画像処理装置。
【請求項６】
前記色コーディング用の色フィルタ上には、各画素が１行毎及び１列毎に画素ピッチの１／２ずつずれた斜め画素配列に対して、輝度成分を算出する際に主成分となる色成分が、他の色成分のそれぞれの周囲を囲むように配置されている、
ことを特徴とする請求項１に記載の画像処理装置。
【請求項７】
前記の斜め画素配列に対する色コーディングを補間処理によってベイヤー配列の色コーディングにする前段補間処理手段と、
前記ベイヤー配列の色コーディングに対して補間を用いたベイヤー補間処理を行なう後段補間処理手段と、
を有することを特徴とする請求項１に記載の画像処理装置。
【請求項８】
色コーディング用の色フィルタを有する撮像手段により撮像された画像を処理する画像処理装置において、
画像信号を入力する手段と、
前記画像信号について、画素間の相関度合いを示す、少なくとも第１の相関値及び第２の相関値を算出する相関値算出手段と、
前記相関値算出手段により算出した各相関値に関する信頼度を算出する信頼度算出手段と、
前記信頼度に応じた補間処理で所望の画素を補間する補間手段と、
を具備することを特徴とする画像処理装置。
【請求項９】
前記信頼度算出手段は、前記相関値算出手段により算出された各相関値の和に基づいて信頼度を算出する、
ことを特徴とする請求項８に記載の画像処理装置。
【請求項１０】
前記補間手段は、前記信頼度が所定の範囲外にあるときには、補間する前記所望の画素の周辺画素の情報の平均値を用いて補間を行なう、
ことを特徴とする請求項８に記載の画像処理装置。
【請求項１１】
前記補間手段は、前記信頼度が所定の範囲内に収まるときには、前記第１の相関値と前記第２の相関値とに基づいて、補間する前記所望の画素の周辺画素の中から補間に使用する画素を特定し、該特定された画素を用いて補間を行なう、
ことを特徴とする請求項８に記載の画像処理装置。
【請求項１２】
色コーディング用の色フィルタを有する撮像手段により撮像された画像を処理する画像処理方法において、
前記撮像手段による画像信号について、画素間の相関度合いを示す、少なくとも第１の相関値及び第２の相関値を算出する相関値算出ステップと、
前記第１の相関値と前記第２の相関値とに基づいて、所望の画素を補間する際に使用する他の画素を特定する補間用画素特定ステップと、
前記補間用画素特定ステップにおいて特定された画素から前記所望の画素を補間する補間ステップと、
を具備することを特徴とする画像処理方法。
【請求項１３】
色コーディング用の色フィルタを有する撮像手段により撮像された画像を処理する画像処理方法において、
前記撮像手段による画像信号について、画素間の相関度合いを示す、少なくとも第１の相関値及び第２の相関値を算出する相関値算出ステップと、
前記相関値算出ステップにおいて算出した各相関値に関する信頼度を算出する信頼度算出ステップと、
前記信頼度に応じた補間処理で所望の画素を補間する補間ステップと、
を具備することを特徴とする画像処理方法。
【請求項１４】
所定の色コーディングのフィルタを有する固体撮像装置上の補間対象の画素に関して、画像の相関度合いを示す複数の相関値を算出する相関値算出手段と、
前記相関値算出手段で算出された前記複数の相関値を、相関値を異なった方向に対して最低２パターン算出し、当該最低２パターンの相関値をさまざまな角度の直線に対してプロットして得た相関線と比較することによって補間すべき方向を判定する判定手段と、
前記判定手段によって判定された方向に存在する前記補間対象の画素の周辺画素の情報を基に当該補間対象の画素に対して補間処理を行なう補間手段と、
を具備することを特徴とする画像処理装置。
【請求項１５】
前記相関値算出手段は、前記複数の相関値のうちの相関の高い上位複数の平均値を算出し、
前記判定手段は、前記上位複数の平均値に基づいて補間すべき方向を判定する、
ことを特徴とする請求項１４記載の画像処理装置。
【請求項１６】
前記相関値算出手段は、第１の方向に対して第１のバンドパスフィルタによるフィルタリング処理を行なうことによって得られる第１のフィルタ出力と、前記第１の方向と直交する第２の方向に対して前記第１のバンドパスフィルタと同じフィルタ特性の第２のバンドパスフィルタによるフィルタリング処理を行なうことによって得られる第２のフィルタ出力との割合から前記複数の相関値を算出する、
ことを特徴とする請求項１４記載の画像処理装置。
【請求項１７】
前記異なった方向は４５度だけずれた方向であり、
前記判定手段は、前記異なった方向についての２つの相関値が前記相関線上にあるときは相関の信頼性が高いとみなし、当該２つの相関値が前記相関線上にないときは相関の信頼性が低いとみなす、
ことを特徴とする請求項１４に記載の画像処理装置。
【請求項１８】
前記補間手段は、前記判定手段が相関の信頼性が高いと判定したときは、当該判定手段によって判定された方向に存在する前記補間対象の画素の周辺画素の情報を用いて補間を行ない、前記判定手段が相関の信頼性が低いと判定したときは、前記周辺画素の情報の平均値を用いて補間を行なう、
ことを特徴とする請求項１７に記載の画像処理装置。
【請求項１９】
前記所定の色コーディングは、画素が１行毎及び１列毎に画素ピッチの１／２ずつずれた斜め画素配列に対して、輝度成分を作る上で主成分となる色成分が、他の色成分の各々の周囲を囲むように配置されており、
前記斜め画素配列に対する色コーディングを補間処理によってベイヤー配列の色コーディングにする前段補間処理手段と、
前記ベイヤー配列の色コーディングに対して補間を用いたベイヤー補間処理を行なう後段補間処理手段をさらに備え、
前記前段補間処理手段は、
補間対象の画素に関して、画像の相関度合いを示す複数の相関値を算出する相関値算出手段と、
前記相関値算出手段で算出された前記複数の相関値を、相関値を異なった方向に対して最低２パターン算出し、当該最低２パターンの相関値をさまざまな角度の直線に対してプロットして得た相関線と比較することによって補間すべき方向を判定する判定手段と、
前記判定手段によって判定された方向に存在する前記補間対象の画素の周辺画素の情報を基に当該補間対象の画素に対して補間処理を行なう補間手段を備える、
ことを特徴とする請求項１４に記載の画像処理装置。
【請求項２０】
所定の色コーディングのフィルタを有する固体撮像装置上の補間対象の画素に関して、画像の相関度合いを示す複数の相関値を算出する第１ステップと、
前記第１ステップで算出した前記複数の相関値を、相関値を異なった方向に対して最低２パターン算出し、当該最低２パターンの相関値を様々な角度の直線に対してプロットして得た相関線と比較することによって補間すべき方向を判定する第２ステップと、
前記第２ステップで判定した方向に存在する前記補間対象の画素の周辺画素の情報を基に当該補間対象の画素に対して補間処理を行なう第３ステップと
を具備することを特徴とする画像処理方法。