【手続補正書】
【提出日】平成19年8月1日(2007.8.1)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】特許請求の範囲
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】  ２次元配列された複数の画素の１画素につき１つの色成分が対応付けられ、各々の画素が２つのサブピクセルに分割されて成る撮像素子によって生成される画像データに対し、各々のサブピクセルに欠落する色成分の色情報に相当する補間値を決める処理を行う補間処理装置において、
各々の画素を構成する２つのサブピクセルから出力される色情報をひとまとめにした値を当該画素の色情報に相当する画素出力色情報とし、少なくとも２つの方向に対する補間対象サブピクセルの類似性の強弱を、該画素出力色情報を用いて判定する主要類似性判定手段と、
前記主要類似性判定手段によって判定された類似性の強弱に応じて、補間対象サブピクセルの補間値を算出する際に用いるサブピクセルの色情報を選択し、該色情報を用いて補間対象サブピクセルの補間値を算出する補間値算出手段と
を備えたことを特徴とする補間処理装置。
【請求項２】  請求項１に記載の補間処理装置において、
サブピクセルから出力される色情報をサブピクセル出力色情報とし、少なくとも２つの方向に対する補間対象サブピクセルの類似性の強弱を、該サブピクセル出力色情報を用いて判定する微細部類似性判定手段
を備え、
前記補間値算出手段は、
前記主要類似性判定手段と前記微細部類似性判定手段とによって判定された類似性の強弱に応じて、補間対象サブピクセルの補間値を算出する際に用いるサブピクセルの色情報を選択し、該色情報を用いて補間対象サブピクセルの補間値を算出する
ことを特徴とする補間処理装置。
【請求項３】  請求項２に記載の補間処理装置において、
前記主要類似性判定手段は、
補間対象サブピクセルが属する画素について対称な距離に位置する画素の画素出力色情報を用い、前記類似性の強弱を判定し、
前記微細部類似性判定手段は、
補間対象サブピクセルについて非対称な距離に位置するサブピクセルサブピクセル出力色情報を用い、前記類似性の強弱を判定する
ことを特徴とする補間処理装置。
【請求項４】  ２次元配列された複数の画素の１画素につき１つの色成分が対応付けられ、各々の画素が２つのサブピクセルに分割されて成る撮像素子によって生成される画像データに対し、各々のサブピクセルに欠落する色成分の色情報に相当する補間値を決める処理を行う補間処理装置において、
補間対象サブピクセルについて対称な距離に位置する色情報を用い、少なくとも２つの方向に対する補間対象サブピクセルの類似性の強弱を判定する主要類似性判定手段と、
補間対象サブピクセルについて非対称な距離に位置する色情報を用い、少なくとも２つの方向に対する補間対象サブピクセルの類似性の強弱を判定する微細部類似性判定手段と、
前記主要類似性判定手段と前記微細部類似性判定手段とによって判定された類似性の強弱に応じて、補間対象サブピクセルの補間値を算出する際に用いるサブピクセルの色情報を選択し、該色情報を用いて補間対象サブピクセルの補間値を算出する補間値算出手段と
を備えたことを特徴とする補間処理装置。
【請求項５】  請求項４に記載の補間処理装置において、
前記主要類似性判定手段は、
前記対象な距離に位置する色情報として、補間対象サブピクセルが属する画素について対象な距離に位置する画素を構成する２つのサブピクセルから出力される色情報をひとまとめにした値を用い、
前記微細部類似性判定手段は、
前記非対称な距離に位置する色情報として、補間対象サブピクセルについて非対称な距離に位置するサブピクセルから出力される色情報を用いる
ことを特徴とする補間処理装置。
【請求項６】  請求項４に記載の補間処理装置において、
前記主要類似性判定手段は、
前記対象な距離に位置する色情報として、補間対象サブピクセルについて対称な距離に位置するサブピクセルから出力される色情報を用い、
前記微細部類似性判定手段は、
前記非対称な距離に位置する色情報として、補間対象サブピクセルについて非対称な距離に位置するサブピクセルから出力される色情報を用いる
ことを特徴とする補間処理装置。
【請求項７】  請求項２ないし請求項６の何れか１項に記載の補間処理装置において、
前記微細部類似性判定手段は、
前記主要類似性判定手段による判定の結果として類似性の強い方向が不明であると判断された場合に、類似性の強弱を判定する
ことを特徴とする補間処理装置。
【請求項８】  請求項１ないし請求項７の何れか１項に記載の補間処理装置において、前記画像データが複数の色成分から成る表色系で示される場合、
前記主要類似性判定手段は、
補間対象サブピクセルにおける少なくとも２つの方向に対する類似度を、複数の色成分の色情報を用いて算出し、該類似度に基づき少なくとも２つの方向に対する補間対象サブピクセルの類似性の強弱を判定する
ことを特徴とする補間処理装置。
【請求項９】  請求項８に記載の補間処理装置において、前記画像データが、第１〜第３の色成分から成る表色系で示され、第１色成分が第２色成分および第３色成分に比べて空間周波数が高く、第１色成分が欠落するサブピクセルに第１色成分の色情報に相当する補間値を決める場合、
前記主要類似性判定手段は、
（１）前記第１色成分の色情報と前記第２色成分の色情報とを用いた類似度成分と、
（２）前記第１色成分の色情報と前記第３色成分の色情報とを用いた類似度成分と、
（３）前記第１色成分の色情報のみを用いた類似度成分と、
（４）前記第２色成分の色情報のみを用いた類似度成分と、
（５）前記第３色成分の色情報のみを用いた類似度成分と
の複数の類似度成分のうち、第１〜第３色成分の色情報が含まれる組み合わせを利用して、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度を算出する
ことを特徴とする補間処理装置。
【請求項１０】  請求項９に記載の補間処理装置において、
前記主要類似性判定手段は、
前記複数の類似度成分のうち、前記組み合わせに属する類似度成分を方向別に加重加算して、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度を算出する
ことを特徴とする補間処理装置。
【請求項１１】  請求項１ないし請求項７の何れか１項に記載の補間処理装置において、前記画像データが複数の色成分から成る表色系で示される場合、
前記主要類似性判定手段は、
補間対象サブピクセルの色情報とその近傍に存在する色情報とから選ばれる複数の色情報に基づき、
（１）異なる色成分の色情報を用いて算出される異色間類似度と、
（２）同じ色成分の色情報を用いて算出される同色間類似度と
の２種類の類似度を算出し、補間対象サブピクセルが属する局所的な領域における画像の特徴に応じて、どちらか一方の類似度に切り換える、もしくは、各類似度を加重加算するときの加重比率を切り換えることにより、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度を算出し、該類似度に基づき少なくとも１方向に対する補間対象サブピクセルの類似性の強弱を判定する
ことを特徴とする補間処理装置。
【請求項１２】  請求項１１に記載の補間処理装置において、
前記主要類似性判定手段は、
前記異色間類似度を前記同色間類似度よりも短い距離間隔で存在する色情報を用いて算出する
ことを特徴とする補間処理装置。
【請求項１３】  請求項１１または請求項１２に記載の補間処理装置において、前記画像データが、第１〜第３の色成分から成る表色系で示され、第１色成分が第２色成分および第３色成分に比べて空間周波数が高く、第１色成分が欠落するサブピクセルに第１色成分の色情報に相当する補間値を決める場合、
前記主要類似性判定手段は、
前記異色間類似度として、
（１）前記第１色成分の色情報と前記第２色成分の色情報とから成る異色間類似度成分と、
（２）前記第１色成分の色情報と前記第３色成分の色情報とから成る異色間類似度成分と
の少なくとも一方を含む類似度を算出し、
前記同色間類似度として、
（１）前記第１色成分の色情報のみから成る同色間類似度成分と、
（２）前記第２色成分の色情報のみから成る同色間類似度成分と、
（３）前記第３色成分の色情報のみから成る同色間類似度成分と
の少なくとも１つを含む類似度を算出する
ことを特徴とする補間処理装置。
【請求項１４】  請求項１１に記載の補間処理装置において、
前記主要類似性判定手段は、
補間対象サブピクセルが属する局所的な領域における画像の特徴として色彩に関する情報を用い、該色彩に関する情報を基準に、前記局所的な領域における画像が無彩色部であるか彩色部であるかを判別し、該局所的な領域における画像が無彩色部である場合には、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度として前記異色間類似度を選択する、または、該異色間類似度と前記同色間類似度とを加重加算する際の該異色間類似度の加重比率を該同色間類似度の加重比率よりも大きくし、該局所的な領域における画像が彩色部である場合には、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度として該同色間類似度を選択する、または、該異色間類似度と前記同色間類似度とを加重加算する際の該同色間類似度の加重比率を該異色間類似度の加重比率よりも大きくする
ことを特徴とする補間処理装置。
【請求項１５】  請求項１４に記載の補間処置装置において、
前記主要類似性判定手段は、
前記色彩に関する情報として前記異色間類似度を用いる
ことを特徴とする補間処理装置。
【請求項１６】  請求項１４または請求項１５に記載の補間処理装置において、
前記主要類似性判定手段は、
前記異色間類似度が、少なくとも一方向に対して強い類似性を示す場合、前記局所的な領域における画像が無彩色部であると判断し、その他の場合、該局所的な領域における画像が彩色部であると判断する
ことを特徴とする補間処理装置。
【請求項１７】  請求項８ないし請求項１６の何れか１項に記載の補間処理装置において、
前記主要類似性判定手段は、
補間対象サブピクセルにおける少なくとも２つの方向に対する類似度として、補間対象サブピクセルのみならず補間対象サブピクセルの周辺のサブピクセルに対して算出した少なくとも２つの方向に対する類似度を用いる
ことを特徴とする補間処理装置。
【請求項１８】  請求項８または請求項１１に記載の補間処理装置において、
前記主要類似性判定手段は、
各方向間の類似度の差異が所定の閾値よりも小さい場合、各方向の類似性が同程度であると判定する
ことを特徴とする補間処理装置。
【請求項１９】  請求項２ないし請求項７の何れか１項に記載の補間処理装置において、
前記微細部類似性判定手段は、
補間対象サブピクセルにおける少なくとも２つの方向に対する類似度を、１種類以上の色成分の色情報を用いて算出して、該類似度に基づき少なくとも２つの方向に対する補間対象サブピクセルの類似性の強弱を判定する
ことを特徴とする補間処理装置。
【請求項２０】  請求項１９に記載の補間処理装置において、１画素につき第１〜第ｎ（ｎ≧２）の色成分の何れか１つの色成分が対応付けられ、第１色成分よりも空間周波数が低い第２色成分が対応付けられた画素を構成するサブピクセルに第１色成分の補間値を補う場合、
前記微細部類似性判定手段は、
（１）第２色成分の色情報を出力するサブピクセルのうち、最短距離に位置するサブピクセル間の第２色成分の色情報の差異を示す類似度成分と、
（２）第１色成分の色情報を出力するサブピクセルのうち、最短距離に位置するサブピクセル間の第１色成分の色情報の差異を示す類似度成分と、
（３）第１色成分の色情報を出力するサブピクセルと第２色成分の色情報を出力するサブピクセルとのうち、最短距離に位置するサブピクセルの第１色成分と第２色成分との色情報の差異を示す類似度成分と
の少なくとも１つの類似度成分を用いて、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度を算出する
ことを特徴とする補間処理装置。
【請求項２１】  請求項２０に記載の補間処理装置において、
前記微細部類似性判定手段は、
前記各々の類似度成分を各方向について加重加算して、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度を算出する
ことを特徴とする補間処理装置。
【請求項２２】  請求項２０または請求項２１に記載の補間処理装置において、
前記微細部類似性判定手段は、
補間対象サブピクセルにおける各方向に対する類似度を算出する際に、前記各々の類似度成分をサブピクセル間の距離に応じて規格化して用いる
ことを特徴とする補間処理装置。
【請求項２３】  請求項２ないし請求項７の何れか１項に記載の補間処理装置において、前記画像データが複数の色成分から成る表色系で示される場合、
前記微細部類似性判定手段は、
補間対象サブピクセルの色情報とその近傍に存在する色情報とから選ばれる複数の色情報に基づき、
（１）異なる色成分の色情報を用いて算出される異色間類似度と、
（２）同じ色成分の色情報を用いて算出される同色間類似度と
の２種類の類似度を算出し、補間対象サブピクセルが属する局所的な領域における画像の特徴に応じて、どちらか一方の類似度に切り換える、もしくは、各類似度を加重加算するときの加重比率を切り換えることにより、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度を算出し、該類似度に基づき少なくとも１方向に対する補間対象サブピクセルの類似性の強弱を判定する
ことを特徴とする補間処理装置。
【請求項２４】  請求項２３に記載の補間処理装置において、
前記微細部類似性判定手段は、
前記異色間類似度を前記同色間類似度よりも短い距離間隔で存在する色情報を用いて算出する
ことを特徴とする補間処理装置。
【請求項２５】  請求項１９ないし請求項２４の何れか１項に記載の補間処理装置において、
前記微細部類似性判定手段は、
補間対象サブピクセルにおける少なくとも２つの方向に対する類似度として、補間対象サブピクセルのみならず補間対象サブピクセルの周辺のサブピクセルに対して算出した少なくとも２つの方向に対する類似度を用いる
ことを特徴とする補間処理装置。
【請求項２６】  請求項１９または請求項２３に記載の補間処理装置において、
前記微細部類似性判定手段は、
各方向間の類似度の差異が所定の閾値よりも小さい場合、各方向の類似性が同程度であると判定する
ことを特徴とする補間処理装置。
【請求項２７】  ２次元配列された複数の画素の１画素につき１つの色成分が対応付けられ、各々の画素が２つのサブピクセルに分割されて成る撮像素子によって生成される画像データに対し、各々のサブピクセルに欠落する色成分の色情報に相当する補間値を決める補間処理をコンピュータで実現するための補間処理プログラムを記録した記録媒体において、
各々の画素を構成する２つのサブピクセルから出力される色情報をひとまとめにした値を当該画素の色情報に相当する画素出力色情報とし、少なくとも２つの方向に対する補間対象サブピクセルの類似性の強弱を、該画素出力色情報を用いて判定する主要類似性判定手順と、
前記主要類似性判定手順によって判定された類似性の強弱に応じて、補間対象サブピクセルの補間値を算出する際に用いるサブピクセルの色情報を選択し、該色情報を用いて補間対象サブピクセルの補間値を算出する補間値算出手順と
をコンピュータに実行させることを特徴とする補間処理プログラムを記録した記録媒体。
【請求項２８】 ２次元配列された複数の画素の１画素につき１つの色成分が対応付けられ、各々の画素が２つのサブピクセルに分割されて成る撮像素子によって生成される画像データに対し、各々のサブピクセルに欠落する色成分の色情報に相当する補間値を決める補間処理をコンピュータで実現するための補間処理プログラムを記録した記録媒体において、
補間対象サブピクセルについて対称な距離に位置する色情報を用い、少なくとも２つの方向に対する補間対象サブピクセルの類似性の強弱を判定する主要類似性判定手順と、
補間対象サブピクセルについて非対称な距離に位置する色情報を用い、少なくとも２つの方向に対する補間対象サブピクセルの類似性の強弱を判定する微細部類似性判定手順と、
前記主要類似性判定手順と前記微細部類似性判定手順とによって判定された類似性の強弱に応じて、補間対象サブピクセルの補間値を算出する際に用いるサブピクセルの色情報を選択し、該色情報を用いて補間対象サブピクセルの補間値を算出する補間値算出手順と
をコンピュータに実行させることを特徴とする補間処理プログラムを記録した記録媒体。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００６
【補正方法】変更
【補正の内容】
【０００６】
そこで、第１ないし第２６の発明は、各々の画素が２つのサブピクセルに分割されて成る撮像素子によって生成される画像データに対して、サブピクセル単位で精度良く補間処理が行える補間処理装置を提供することを目的とし、第２７または第２８の発明は、このような画像データに対して、サブピクセル単位で精度良く補間処理が行える補間処理プログラムを記録した記録媒体を提供することを目的とする。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】変更
【補正の内容】
【０００７】
【課題を解決するための手段】
上述した課題を解決するために、第１の発明の補間処理装置は、２次元配列された複数の画素の１画素につき１つの色成分が対応付けられ、各々の画素が２つのサブピクセルに分割されて成る撮像素子によって生成される画像データに対し、各々のサブピクセルに欠落する色成分の色情報に相当する補間値を決める処理を行う補間処理装置において、各々の画素を構成する２つのサブピクセルから出力される色情報をひとまとめにした値を当該画素の色情報に相当する画素出力色情報とし、少なくとも２つの方向に対する補間対象サブピクセルの類似性の強弱を、該画素出力色情報を用いて判定する主要類似性判定手段と、前記主要類似性判定手段によって判定された類似性の強弱に応じて、補間対象サブピクセルの補間値を算出する際に用いるサブピクセルの色情報を選択し、該色情報を用いて補間対象サブピクセルの補間値を算出する補間値算出手段とを備えたことを特徴とする。
すなわち、第１の発明は、画素ピッチでの類似性の強弱の判定が可能である。なお、第１の発明では、類似性の強弱が判定される少なくとも２つの方向として、縦方向や横方向の他に、斜め方向を適用することが可能である。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
第２の発明は、第１の発明において、サブピクセルから出力される色情報をサブピクセル出力色情報とし、少なくとも２つの方向に対する補間対象サブピクセルの類似性の強弱を、該サブピクセル出力色情報を用いて判定する微細部類似性判定手段を備え、前記補間値算出手段は、前記主要類似性判定手段と前記微細部類似性判定手段とによって判定された類似性の強弱に応じて、補間対象サブピクセルの補間値を算出する際に用いるサブピクセルの色情報を選択し、該色情報を用いて補間対象サブピクセルの補間値を算出することを特徴とする。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
ところで、各々の画素が２つのサブピクセルに分割されて成る撮像素子によって生成される画像データでは画素ピッチでの類似性の強弱の判定によって類似性の強い方向を大まかに判断することが可能であるが、類似性の強い方向を詳細に判断するには、サブピクセルピッチでの類似性の強弱を判定することが望ましい。
第２の発明では、微細部類似性判定手段は、サブピクセル出力色情報を用いて補間対象サブピクセルの類似性の強弱を判定するので、サブピクセルピッチでの類似性の強弱の判定が可能である。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
第３の発明は、第２の発明において、前記主要類似性判定手段は、補間対象サブピクセルが属する画素について対称な距離に位置する画素の画素出力色情報を用い、前記類似性の強弱を判定し、前記微細部類似性判定手段は、補間対象サブピクセルについて非対称な距離に位置するサブピクセルサブピクセル出力色情報を用い、前記類似性の強弱を判定することを特徴とする。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
すなわち、第３の発明では、主要類似性判定手段は、補間対象サブピクセルが属する画素について対称な距離に位置する画素の画素出力色情報を用いて類似性の強弱を判定することによって、画素ピッチでの類似性の強弱の判定を実現できる。
ところで、各々の画素が２つのサブピクセルに分割されて成る撮像素子によって生成される画像データでは、例えば、各々の画素が縦方向の直線に沿って分割された場合、任意のサブピクセルを起点とする横方向の色成分の配列は非対称となる。第３の発明では、任意の方向について、色成分の配列が非対称であっても、微細部類似性判定手段は、補間対象サブピクセルについて非対称な距離に位置するサブピクセルのサブピクセル出力色情報を用いて類似性の強弱を判定することによって、サブピクセルピッチでの類似性の強弱の判定を実現できる。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正の内容】
【００１２】
第４の発明の補間処理装置は、２次元配列された複数の画素の１画素につき１つの色成分が対応付けられ、各々の画素が２つのサブピクセルに分割されて成る撮像素子によって生成される画像データに対し、各々のサブピクセルに欠落する色成分の色情報に相当する補間値を決める処理を行う補間処理装置において、補間対象サブピクセルについて対称な距離に位置する色情報を用い、少なくとも２つの方向に対する補間対象サブピクセルの類似性の強弱を判定する主要類似性判定手段と、補間対象サブピクセルについて非対称な距離に位置する色情報を用い、少なくとも２つの方向に対する補間対象サブピクセルの類似性の強弱を判定する微細部類似性判定手段と、前記主要類似性判定手段と前記微細部類似性判定手段とによって判定された類似性の強弱に応じて、補間対象サブピクセルの補間値を算出する際に用いるサブピクセルの色情報を選択し、該色情報を用いて補間対象サブピクセルの補間値を算出する補間値算出手段とを備えたことを特徴とする。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００１３
【補正方法】変更
【補正の内容】
【００１３】
第５の発明は、第４の発明において、前記主要類似性判定手段は、前記対象な距離に位置する色情報として、補間対象サブピクセルが属する画素について対象な距離に位置する画素を構成する２つのサブピクセルから出力される色情報をひとまとめにした値を用い、前記微細部類似性判定手段は、前記非対称な距離に位置する色情報として、補間対象サブピクセルについて非対称な距離に位置するサブピクセルから出力される色情報を用いることを特徴とする。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００１４
【補正方法】変更
【補正の内容】
【００１４】
第６の発明は、第４の発明において、前記主要類似性判定手段は、前記対象な距離に位置する色情報として、補間対象サブピクセルについて対称な距離に位置するサブピクセルから出力される色情報を用い、前記微細部類似性判定手段は、前記非対称な距離に位置する色情報として、補間対象サブピクセルについて非対称な距離に位置するサブピクセルから出力される色情報を用いることを特徴とする。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００１５
【補正方法】変更
【補正の内容】
【００１５】
第７の発明は、第２〜第６の発明のいずれかにおいて、前記微細部類似性判定手段は、前記主要類似性判定手段による判定の結果として類似性の強い方向が不明であると判断された場合に、類似性の強弱を判定することを特徴とする。
ところで、各々の画素が２つのサブピクセルに分割されて成る撮像素子によって生成される画像データでは、画素ピッチでの類似性の強弱の判定により類似性の強い方向が判断できない場合であっても、サブピクセルピッチでの類似性の強弱の判定により類似性の強い方向を判断することが可能である。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００１６
【補正方法】変更
【補正の内容】
【００１６】
第７の発明では、微細部類似性判定手段によるサブピクセルピッチでの類似性の強弱の判定によって、主要類似性判定手段による画素ピッチでの類似性の強弱の判定が補えるため、主要類似性判定手段による判定の結果として類似性の強い方向が不明であると判断された場合にのみ、微細部類似性判定手段によって類似性の強弱を判定しても、類似性の強弱の判定の精度が低下することがない。
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】００１７
【補正方法】変更
【補正の内容】
【００１７】
第８の発明は、第１〜第７の発明のいずれかにおいて、前記画像データが複数の色成分から成る表色系で示される場合、前記主要類似性判定手段は、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度を、複数の色成分の色情報を用いて算出し、該類似度に基づき少なくとも２つの方向に対する補間対象サブピクセルの類似性の強弱を判定することを特徴とする。
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】変更
【補正の内容】
【００１８】
第９の発明は、第８の発明において、前記画像データが、第１〜第３の色成分から成る表色系で示され、第１色成分が第２色成分および第３色成分に比べて空間周波数が高く、第１色成分が欠落するサブピクセルに第１色成分の色情報に相当する補間値を決める場合、前記主要類似性判定手段は、
（１）前記第１色成分の色情報と前記第２色成分の色情報とを用いた類似度成分と、
（２）前記第１色成分の色情報と前記第３色成分の色情報とを用いた類似度成分と、
（３）前記第１色成分の色情報のみを用いた類似度成分と、
（４）前記第２色成分の色情報のみを用いた類似度成分と、
（５）前記第３色成分の色情報のみを用いた類似度成分と
の複数の類似度成分のうち、第１〜第３色成分の色情報が含まれる組み合わせを利用して、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度を算出することを特徴とする。
【手続補正１５】
【補正対象書類名】明細書
【補正対象項目名】００１９
【補正方法】変更
【補正の内容】
【００１９】
第１０の発明は、第９の発明において、前記主要類似性判定手段は、前記複数の類似度成分のうち、前記組み合わせに属する類似度成分を方向別に加重加算して、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度を算出することを特徴とする。
【手続補正１６】
【補正対象書類名】明細書
【補正対象項目名】００２０
【補正方法】変更
【補正の内容】
【００２０】
第１１の発明は、第１ないし第７の発明において、前記画像データが複数の色成分から成る表色系で示される場合、前記主要類似性判定手段は、補間対象サブピクセルの色情報とその近傍に存在する色情報とから選ばれる複数の色情報に基づき、
（１）異なる色成分の色情報を用いて算出される異色間類似度と、
（２）同じ色成分の色情報を用いて算出される同色間類似度と
の２種類の類似度を算出し、補間対象サブピクセルが属する局所的な領域における画像の特徴に応じて、どちらか一方の類似度に切り換える、もしくは、各類似度を加重加算するときの加重比率を切り換えることにより、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度を算出し、該類似度に基づき少なくとも１方向に対する補間対象サブピクセルの類似性の強弱を判定することを特徴とする。
【手続補正１７】
【補正対象書類名】明細書
【補正対象項目名】００２１
【補正方法】変更
【補正の内容】
【００２１】
第１２の発明は、第１１の発明において、前記主要類似性判定手段は、前記異色間類似度を前記同色間類似度よりも短い距離間隔で存在する色情報を用いて算出することを特徴とする。
【手続補正１８】
【補正対象書類名】明細書
【補正対象項目名】００２２
【補正方法】変更
【補正の内容】
【００２２】
第１３の発明は、第１１または第１２の発明において、前記画像データが、第１〜第３の色成分から成る表色系で示され、第１色成分が第２色成分および第３色成分に比べて空間周波数が高く、第１色成分が欠落するサブピクセルに第１色成分の色情報に相当する補間値を決める場合、前記主要類似性判定手段は、前記異色間類似度として、
（１）前記第１色成分の色情報と前記第２色成分の色情報とから成る異色間類似度成分と、
（２）前記第１色成分の色情報と前記第３色成分の色情報とから成る異色間類似度成分と
の少なくとも一方を含む類似度を算出し、
前記同色間類似度として、
（１）前記第１色成分の色情報のみから成る同色間類似度成分と、
（２）前記第２色成分の色情報のみから成る同色間類似度成分と、
（３）前記第３色成分の色情報のみから成る同色間類似度成分と
の少なくとも１つを含む類似度を算出する
ことを特徴とする。
【手続補正１９】
【補正対象書類名】明細書
【補正対象項目名】００２３
【補正方法】変更
【補正の内容】
【００２３】
第１４の発明は、第１１の発明において、前記主要類似性判定手段は、補間対象サブピクセルが属する局所的な領域における画像の特徴として色彩に関する情報を用い、該色彩に関する情報を基準に、前記局所的な領域における画像が無彩色部であるか彩色部であるかを判別し、該局所的な領域における画像が無彩色部である場合には、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度として前記異色間類似度を選択する、または、該異色間類似度と前記同色間類似度とを加重加算する際の該異色間類似度の加重比率を該同色間類似度の加重比率よりも大きくし、該局所的な領域における画像が彩色部である場合には、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度として該同色間類似度を選択する、または、該異色間類似度と前記同色間類似度とを加重加算する際の該同色間類似度の加重比率を該異色間類似度の加重比率よりも大きくすることを特徴とする。
【手続補正２０】
【補正対象書類名】明細書
【補正対象項目名】００２４
【補正方法】変更
【補正の内容】
【００２４】
第１５の発明は、第１４の発明において、前記主要類似性判定手段は、前記色彩に関する情報として前記異色間類似度を用いることを特徴とする。
【手続補正２１】
【補正対象書類名】明細書
【補正対象項目名】００２５
【補正方法】変更
【補正の内容】
【００２５】
第１６の発明は、第１４または第１５の発明において、前記主要類似性判定手段は、前記異色間類似度が、少なくとも一方向に対して強い類似性を示す場合、前記局所的な領域における画像が無彩色部であると判断し、その他の場合、該局所的な領域における画像が彩色部であると判断することを特徴とする。
【手続補正２２】
【補正対象書類名】明細書
【補正対象項目名】００２６
【補正方法】変更
【補正の内容】
【００２６】
第１７の発明は、第８ないし１６の発明のいずれかにおいて、前記主要類似性判定手段は、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度として、補間対象サブピクセルのみならず補間対象サブピクセルの周辺のサブピクセルに対して算出した少なくとも２つの方向に対する類似度を用いることを特徴とする。
【手続補正２３】
【補正対象書類名】明細書
【補正対象項目名】００２７
【補正方法】変更
【補正の内容】
【００２７】
ところで、補間対象サブピクセルと周辺のサブピクセルとの間には、何らかの関連（例えば、色情報の変化の連続性等）がある場合が多い。
第１７の発明では、補間対象サブピクセルにおける類似度だけでなく、周辺のサブピクセルにおける類似度を合わせて用いることによって、画素ピッチでの類似性の強弱の判定に、補間対象サブピクセルと周辺のサブピクセルとの関連を反映されることができる。
【手続補正２４】
【補正対象書類名】明細書
【補正対象項目名】００２８
【補正方法】変更
【補正の内容】
【００２８】
第１８の発明は、第８または第１１の発明において、前記主要類似性判定手段は、各方向間の類似度の差異が所定の閾値よりも小さい場合、各方向の類似性が同程度であると判定することを特徴とする。
そのため、第１８の発明によれば、類似性を判定する際のノイズの影響を低減することができる。
【手続補正２５】
【補正対象書類名】明細書
【補正対象項目名】００２９
【補正方法】変更
【補正の内容】
【００２９】
第１９の発明は、第２ないし第７の発明のいずれかにおいて、前記微細部類似性判定手段は、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度を、１種類以上の色成分の色情報を用いて算出して、該類似度に基づき少なくとも２つの方向に対する補間対象サブピクセルの類似性の強弱を判定することを特徴とする。
【手続補正２６】
【補正対象書類名】明細書
【補正対象項目名】００３０
【補正方法】変更
【補正の内容】
【００３０】
すなわち、第１９の発明は、特定の１種類の色成分の色情報や複数種類の色成分の色情報を用いて算出された類似度によって、サブピクセルピッチでの類似性の強弱を判定する。
【手続補正２７】
【補正対象書類名】明細書
【補正対象項目名】００３１
【補正方法】変更
【補正の内容】
【００３１】
第２０の発明は、第１９の発明において、１画素につき第１〜第ｎ（ｎ≧２）の色成分の何れか１つの色成分が対応付けられ、第１色成分よりも空間周波数が低い第２色成分が対応付けられた画素を構成するサブピクセルに第１色成分の補間値を補う場合、前記微細部類似性判定手段は、
（１）第２色成分の色情報を出力するサブピクセルのうち、最短距離に位置するサブピクセル間の第２色成分の色情報の差異を示す類似度成分と、
（２）第１色成分の色情報を出力するサブピクセルのうち、最短距離に位置するサブピクセル間の第１色成分の色情報の差異を示す類似度成分と、
（３）第１色成分の色情報を出力するサブピクセルと第２色成分の色情報を出力するサブピクセルとのうち、最短距離に位置するサブピクセルの第１色成分と第２色成分との色情報の差異を示す類似度成分と
の少なくとも１つの類似度成分を用いて、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度を算出することを特徴とする。
【手続補正２８】
【補正対象書類名】明細書
【補正対象項目名】００３２
【補正方法】変更
【補正の内容】
【００３２】
すなわち、第２０の発明では、複数種類の類似度成分を用いることによって、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度に、複数種類の色成分の色情報を反映させることができる。
【手続補正２９】
【補正対象書類名】明細書
【補正対象項目名】００３３
【補正方法】変更
【補正の内容】
【００３３】
第２１の発明は、第２０の発明において、前記微細部類似性判定手段は、前記各々の類似度成分を各方向について加重加算して、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度を算出することを特徴とする。
すなわち、第２１の発明では、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度に、複数種類の色成分の色情報を的確に反映させることができる。
【手続補正３０】
【補正対象書類名】明細書
【補正対象項目名】００３４
【補正方法】変更
【補正の内容】
【００３４】
第２２の発明は、第２０または第２１の発明において、前記微細部類似性判定手段は、補間対象サブピクセルにおける各方向に対する類似度を算出する際に、前記各々の類似度成分をサブピクセル間の距離に応じて規格化して用いることを特徴とする。
【手続補正３１】
【補正対象書類名】明細書
【補正対象項目名】００３５
【補正方法】変更
【補正の内容】
【００３５】
ところで、各々の画素が２つのサブピクセルに分割されて成る撮像素子によって生成される画像データでは、「第２色成分の色情報を出力するサブピクセルの最短距離」と「第１色成分の色情報を出力するサブピクセルの最短距離」と「第１色成分の色情報を出力するサブピクセルと第２色成分の色情報を出力するサブピクセルとの最短距離」とが異なる場合が多い。このような最短距離の相違は、各々の類似度成分の値に影響を及ぼす。
【手続補正３２】
【補正対象書類名】明細書
【補正対象項目名】００３６
【補正方法】変更
【補正の内容】
【００３６】
第２２の発明では、各方向に対する類似度を算出する際に、各々の類似度成分をサブピクセル間の距離に応じて規格化して用いることによって、最短距離の相違に影響されることなく、適切な類似度を算出することができる。
【手続補正３３】
【補正対象書類名】明細書
【補正対象項目名】００３７
【補正方法】変更
【補正の内容】
【００３７】
第２３の発明は、第２ないし第７の発明の何れかにおいて、前記画像データが複数の色成分から成る表色系で示される場合、前記微細部類似性判定手段は、補間対象サブピクセルの色情報とその近傍に存在する色情報とから選ばれる複数の色情報に基づき、
（１）異なる色成分の色情報を用いて算出される異色間類似度と、
（２）同じ色成分の色情報を用いて算出される同色間類似度と
の２種類の類似度を算出し、補間対象サブピクセルが属する局所的な領域における画像の特徴に応じて、どちらか一方の類似度に切り換える、もしくは、各類似度を加重加算するときの加重比率を切り換えることにより、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度を算出し、該類似度に基づき少なくとも１方向に対する補間対象サブピクセルの類似性の強弱を判定することを特徴とする。
【手続補正３４】
【補正対象書類名】明細書
【補正対象項目名】００３８
【補正方法】変更
【補正の内容】
【００３８】
第２４の発明は、第２３の発明において、前記微細部類似性判定手段は、前記異色間類似度を前記同色間類似度よりも短い距離間隔で存在する色情報を用いて算出することを特徴とする。
【手続補正３５】
【補正対象書類名】明細書
【補正対象項目名】００３９
【補正方法】変更
【補正の内容】
【００３９】
第２５の発明は、第１９ないし第２４の発明の何れかにおいて、前記微細部類似性判定手段は、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度として、補間対象サブピクセルのみならず補間対象サブピクセルの周辺のサブピクセルに対して算出した少なくとも２つの方向に対する類似度を用いることを特徴とする。
第２５の発明では、補間対象サブピクセルにおける類似度だけでなく、周辺のサブピクセルにおける類似度を合わせて用いることによって、サブピクセルピッチでの類似性の強弱の判定に、補間対象サブピクセルと周辺のサブピクセルとの関連を反映させることができる。
【手続補正３６】
【補正対象書類名】明細書
【補正対象項目名】００４０
【補正方法】変更
【補正の内容】
【００４０】
第２６の発明は、第１９または第２３の発明において、前記微細部類似性判定手段は、各方向間の類似度の差異が所定の閾値よりも小さい場合、各方向の類似性が同程度であると判定することを特徴とする。
そのため、請求項２６に記載の発明によれば、類似性を判定する際のノイズの影響を低減することができる。
【手続補正３７】
【補正対象書類名】明細書
【補正対象項目名】００４１
【補正方法】変更
【補正の内容】
【００４１】
第２７の発明の記憶媒体は、２次元配列された複数の画素の１画素につき１つの色成分が対応付けられ、各々の画素が２つのサブピクセルに分割されて成る撮像素子によって生成される画像データに対し、各々のサブピクセルに欠落する色成分の色情報に相当する補間値を決める補間処理をコンピュータで実現するための補間処理プログラムを記録した記録媒体において、各々の画素を構成する２つのサブピクセルから出力される色情報をひとまとめにした値を当該画素の色情報に相当する画素出力色情報とし、少なくとも２つの方向に対する補間対象サブピクセルの類似性の強弱を、該画素出力色情報を用いて判定する主要類似性判定手順と、前記主要類似性判定手順によって判定された類似性の強弱に応じて、補間対象サブピクセルの補間値を算出する際に用いるサブピクセルの色情報を選択し、該色情報を用いて補間対象サブピクセルの補間値を算出する補間値算出手順とをコンピュータに実行させることを特徴とする。
【手続補正３８】
【補正対象書類名】明細書
【補正対象項目名】００４２
【補正方法】変更
【補正の内容】
【００４２】
また、第２８の発明の記録媒体は、２次元配列された複数の画素の１画素につき１つの色成分が対応付けられ、各々の画素が２つのサブピクセルに分割されて成る撮像素子によって生成される画像データに対し、各々のサブピクセルに欠落する色成分の色情報に相当する補間値を決める補間処理をコンピュータで実現するための補間処理プログラムを記録した記録媒体において、補間対象サブピクセルについて対称な距離に位置する色情報を用い、少なくとも２つの方向に対する補間対象サブピクセルの類似性の強弱を判定する主要類似性判定手順と、補間対象サブピクセルについて非対称な距離に位置する色情報を用い、少なくとも２つの方向に対する補間対象サブピクセルの類似性の強弱を判定する微細部類似性判定手順と、前記主要類似性判定手順と前記微細部類似性判定手順とによって判定された類似性の強弱に応じて、補間対象サブピクセルの補間値を算出する際に用いるサブピクセルの色情報を選択し、該色情報を用いて補間対象サブピクセルの補間値を算出する補間値算出手順とをコンピュータに実行させることを特徴とする。
【手続補正３９】
【補正対象書類名】明細書
【補正対象項目名】００４３
【補正方法】削除
【補正の内容】
【手続補正４０】
【補正対象書類名】明細書
【補正対象項目名】００４４
【補正方法】削除
【補正の内容】
【手続補正４１】
【補正対象書類名】明細書
【補正対象項目名】００４５
【補正方法】削除
【補正の内容】
【手続補正４２】
【補正対象書類名】明細書
【補正対象項目名】００４６
【補正方法】削除
【補正の内容】
【手続補正４３】
【補正対象書類名】明細書
【補正対象項目名】００４７
【補正方法】削除
【補正の内容】
【手続補正４４】
【補正対象書類名】明細書
【補正対象項目名】００４８
【補正方法】削除
【補正の内容】
【手続補正４５】
【補正対象書類名】明細書
【補正対象項目名】００４９
【補正方法】削除
【補正の内容】
【手続補正４６】
【補正対象書類名】明細書
【補正対象項目名】００５０
【補正方法】削除
【補正の内容】
【手続補正４７】
【補正対象書類名】明細書
【補正対象項目名】００５１
【補正方法】削除
【補正の内容】
【手続補正４８】
【補正対象書類名】明細書
【補正対象項目名】００５２
【補正方法】削除
【補正の内容】
【手続補正４９】
【補正対象書類名】明細書
【補正対象項目名】００５３
【補正方法】削除
【補正の内容】
【手続補正５０】
【補正対象書類名】明細書
【補正対象項目名】００５４
【補正方法】削除
【補正の内容】
【手続補正５１】
【補正対象書類名】明細書
【補正対象項目名】００５５
【補正方法】削除
【補正の内容】
【手続補正５２】
【補正対象書類名】明細書
【補正対象項目名】００５６
【補正方法】削除
【補正の内容】
【手続補正５３】
【補正対象書類名】明細書
【補正対象項目名】００５７
【補正方法】削除
【補正の内容】
【手続補正５４】
【補正対象書類名】明細書
【補正対象項目名】００５８
【補正方法】削除
【補正の内容】
【手続補正５５】
【補正対象書類名】明細書
【補正対象項目名】００５９
【補正方法】削除
【補正の内容】
【手続補正５６】
【補正対象書類名】明細書
【補正対象項目名】００６０
【補正方法】削除
【補正の内容】
【手続補正５７】
【補正対象書類名】明細書
【補正対象項目名】００６１
【補正方法】削除
【補正の内容】
【手続補正５８】
【補正対象書類名】明細書
【補正対象項目名】００６２
【補正方法】削除
【補正の内容】
【手続補正５９】
【補正対象書類名】明細書
【補正対象項目名】００６３
【補正方法】削除
【補正の内容】
【手続補正６０】
【補正対象書類名】明細書
【補正対象項目名】００６４
【補正方法】削除
【補正の内容】
【手続補正６１】
【補正対象書類名】明細書
【補正対象項目名】００６５
【補正方法】削除
【補正の内容】
【手続補正６２】
【補正対象書類名】明細書
【補正対象項目名】００６６
【補正方法】削除
【補正の内容】
【手続補正６３】
【補正対象書類名】明細書
【補正対象項目名】００６７
【補正方法】削除
【補正の内容】
【手続補正６４】
【補正対象書類名】明細書
【補正対象項目名】００６８
【補正方法】削除
【補正の内容】
【手続補正６５】
【補正対象書類名】明細書
【補正対象項目名】００６９
【補正方法】削除
【補正の内容】
【手続補正６６】
【補正対象書類名】明細書
【補正対象項目名】００７０
【補正方法】削除
【補正の内容】
【手続補正６７】
【補正対象書類名】明細書
【補正対象項目名】００７１
【補正方法】削除
【補正の内容】
【手続補正６８】
【補正対象書類名】明細書
【補正対象項目名】００７２
【補正方法】削除
【補正の内容】
【手続補正６９】
【補正対象書類名】明細書
【補正対象項目名】００７３
【補正方法】削除
【補正の内容】
【手続補正７０】
【補正対象書類名】明細書
【補正対象項目名】００７４
【補正方法】削除
【補正の内容】
【手続補正７１】
【補正対象書類名】明細書
【補正対象項目名】００７５
【補正方法】削除
【補正の内容】
【手続補正７２】
【補正対象書類名】明細書
【補正対象項目名】００７６
【補正方法】削除
【補正の内容】
【手続補正７３】
【補正対象書類名】明細書
【補正対象項目名】００７７
【補正方法】削除
【補正の内容】
【手続補正７４】
【補正対象書類名】明細書
【補正対象項目名】００７８
【補正方法】削除
【補正の内容】
【手続補正７５】
【補正対象書類名】明細書
【補正対象項目名】００７９
【補正方法】削除
【補正の内容】
【手続補正７６】
【補正対象書類名】明細書
【補正対象項目名】００８０
【補正方法】削除
【補正の内容】
【手続補正７７】
【補正対象書類名】明細書
【補正対象項目名】００８１
【補正方法】削除
【補正の内容】
【手続補正７８】
【補正対象書類名】明細書
【補正対象項目名】００８２
【補正方法】削除
【補正の内容】
【手続補正７９】
【補正対象書類名】明細書
【補正対象項目名】００８３
【補正方法】削除
【補正の内容】
【手続補正８０】
【補正対象書類名】明細書
【補正対象項目名】００８４
【補正方法】削除
【補正の内容】
【手続補正８１】
【補正対象書類名】明細書
【補正対象項目名】００８５
【補正方法】削除
【補正の内容】
【手続補正８２】
【補正対象書類名】明細書
【補正対象項目名】００８６
【補正方法】削除
【補正の内容】
【手続補正８３】
【補正対象書類名】明細書
【補正対象項目名】００８７
【補正方法】削除
【補正の内容】
【手続補正８４】
【補正対象書類名】明細書
【補正対象項目名】００８８
【補正方法】変更
【補正の内容】
【００８８】
【発明の実施の形態】
以下、以下、図面に基づいて、本発明の実施形態について詳細を説明する。
図１は、第１の実施形態ないし第６の実施形態に対応する電子カメラの機能ブロック図である。
【手続補正８５】
【補正対象書類名】明細書
【補正対象項目名】０２５９
【補正方法】変更
【補正の内容】
【０２５９】
【発明の効果】
上述したように第１、第２７の発明では、画素ピッチでの大まかな類似性の強弱の判定を正確に行うことが可能であり、第２、第３および第５の発明では、画素ピッチでの大まかな類似性の強弱の判定とサブピクセルピッチでの細かな類似性の強弱の判定とが可能である。また、第４ないし第６、第２８の発明では、補間対象サブピクセルについて対象な距離に位置する色情報だけでなく、非対称な距離に位置する色情報を用いて類似性の強弱を判定する。さらに、類似度に基づき類似性の強弱を判定すれば、類似性の強弱を的確に判定することができ、補間対象サブピクセルの補間値を精度良く算出することができる。
【手続補正８６】
【補正対象書類名】明細書
【補正対象項目名】０２６０
【補正方法】変更
【補正の内容】
【０２６０】
第７の発明では、主要類似性判定手段による判定の結果として類似性の強い方向が不明であると判断された場合にのみ、微細部類似性判定手段によって類似性の強弱を判定しても、類似性の強弱の判定の精度が低下することがなく、その上、主要類似性判定手段と微細部類似性判定手段とによる類似性の強弱の判定を全てのサブピクセルに対して行う場合と比べて、類似性の強弱を速やかに判定することができ、補間対象サブピクセルの補間値を速やかに算出することができる。
【手続補正８７】
【補正対象書類名】明細書
【補正対象項目名】０２６１
【補正方法】変更
【補正の内容】
【０２６１】
第８ないし第１０の発明では、複数の色成分の色情報を用いて、類似性の強弱を判定するため、色調が変化する画像（異なる色成分間で色情報の比率が変化する画像）であっても、類似性を的確に判定することができる。また、これらの発明では、複数の色成分の色情報として、補間対象サブピクセルの色情報やその近傍に存在する色情報を用い、類似性の強弱を判定することが可能であるため、空間周波数が高い画像であっても、類似性を的確に判定することができる。したがって、これらの発明によれば、補間処理を行うべき画像に「色調が変化する部分」や「空間周波数が高い部分」が混在する場合であっても、画像全体の調和を保ちつつ、精度良く補間処理を行うことができる。
【手続補正８８】
【補正対象書類名】明細書
【補正対象項目名】０２６２
【補正方法】変更
【補正の内容】
【０２６２】
第１１、第２３の発明は、補間対象サブピクセルが属する局所的な領域における画像の特徴に応じて、異色間類似度と同色間類似度とを使い分けたり、異色間類似度と同色間類似度とを加重加算する際の加重比率を変えるため、類似性の強弱の判定に適した類似度を算出することができると共に、複数の色情報を用いて異色間類似度および同色間類似度の算出することによって、類似度の算出精度を上げることができる。したがって、補間量を高い精度で算出することができる。
【手続補正８９】
【補正対象書類名】明細書
【補正対象項目名】０２６３
【補正方法】変更
【補正の内容】
【０２６３】
第１２、第２４の発明では、異色間類似度を同色間類似度よりも短い距離間隔で存在する色情報を用いて算出するので、異色間類似度に空間周波数が高い画像の類似性が反映される。すなわち、異色間類似度を用いて類似性の強弱を判定する際や、色彩に関する情報として異色間類似度を用いて補間対象サブピクセルが属する局所的な領域における画像の特徴を抽出する際に、高周波部分の解像能力が効果的に引き出すことができる。そのため、類似性の強弱の判定精度を上げることができ、補間量の精度が高められる。
【手続補正９０】
【補正対象書類名】明細書
【補正対象項目名】０２６４
【補正方法】変更
【補正の内容】
【０２６４】
第１３の発明は、異色間類似度および同色間類似度の算出に多くの色成分を用いた類似度成分を生成することにより、類似度を高い精度で算出することができ、補間量の精度が高められる。
第１４の発明は、色彩に関する情報を用いることによって、補間対象サブピクセルが属する局所的な領域における画像の特徴を抽出するので、異色間類似度と同色間類似度との使い分けや、異色間類似度と同色間類似度との加重比率の設定に際し、適切な指標に基づいて画像の特徴抽出が行える。そのため、類似性の強弱の判定に適した類似度を算出することができ、補間量の精度が高められる。
【手続補正９１】
【補正対象書類名】明細書
【補正対象項目名】０２６５
【補正方法】変更
【補正の内容】
【０２６５】
第１５、第１６の発明は、補間対象サブピクセルが属する局所的な領域における画像の特徴を抽出する際、色彩に関する情報として異色間類似度を用いるので、類似性の強弱の判定のために異色間類似度を算出してしまえば、色彩に関する情報を改めて求める必要がない。すなわち、補間処理全体を効率良く行うことができる。
【手続補正９２】
【補正対象書類名】明細書
【補正対象項目名】０２６６
【補正方法】変更
【補正の内容】
【０２６６】
第１７、第２５の発明では、補間対象サブピクセルと周辺のサブピクセルとの間で、類似性が強い方向の連続性を考慮しつつ、補間対象サブピクセルの類似度を算出することができ、第１８、第２６の発明では、ノイズなどによって発生する類似性の誤判定を低減することができる。すなわち、これらの発明では、類似性の強弱の判定精度を上げることができるので、補間量の精度が高められる。
【手続補正９３】
【補正対象書類名】明細書
【補正対象項目名】０２６７
【補正方法】変更
【補正の内容】
【０２６７】
第１９の発明では、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度に、特定の１種類の色成分の色情報や複数種類の色成分の色情報を反映させることができ、第２０の発明では、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度に、複数種類の色成分の色情報を反映させることができる。また、第２１の発明では、補間対象サブピクセルにおける少なくとも２つの方向に対する類似度に、複数種類の色成分の色情報を的確に反映させることができ、第２２の発明では、各々の類似度成分に対する最短距離の相違に影響されることなく、適切な類似度を算出することができる。したがって、これらの発明によれば、補間対象サブピクセルを含む局所領域の画像の特徴を反映しつつ、類似性の強弱を判定することができるため、画像全体の調和を崩すことなく補間値を算出することができる。
【手続補正９４】
【補正対象書類名】明細書
【補正対象項目名】０２６８
【補正方法】削除
【補正の内容】
【手続補正９５】
【補正対象書類名】明細書
【補正対象項目名】０２６９
【補正方法】削除
【補正の内容】
【手続補正９６】
【補正対象書類名】明細書
【補正対象項目名】０２７０
【補正方法】削除
【補正の内容】
【手続補正９７】
【補正対象書類名】明細書
【補正対象項目名】０２７１
【補正方法】削除
【補正の内容】
【手続補正９８】
【補正対象書類名】明細書
【補正対象項目名】０２７２
【補正方法】削除
【補正の内容】