(57)【要約】【課題】本発明は、中レベルの固定パターンノイズを良好に選別することを目的とする。【解決手段】本発明は、画像データから固定パターンノイズを除去する電子カメラであって、撮像部、ノイズ標本部、およびノイズ除去部を備える。撮像部は、被写体を撮像して複数の色成分から構成される画像データを生成する。ノイズ標本部は、遮光状態で撮像部からノイズ画像データを生成する。ノイズ除去部は、ノイズ画像データのノイズレベルを画素単位に閾値判定し、閾値以上の画素について固定パターンノイズのノイズ除去を実施し、閾値未満の画素について固定パターンノイズのノイズ除去を省略する。特に、このノイズ除去部は、この閾値を、色成分の種類に従って切り換える。すなわち、『輝度情報を多く含む色成分』および／または『撮像面上の分布密度の高い色成分』の閾値を、その他の色成分の閾値よりも低くする。【選択図】        図２
2004248006.tif 000002
【特許請求の範囲】
【請求項１】
画像データに対して固定パターンノイズのノイズ除去を実施する電子カメラであって、
被写体を撮像して複数の色成分から構成される前記画像データを生成する撮像部と、
前記被写体からの光を遮って前記撮像部を駆動し、ノイズ画像データを生成するノイズ標本部と、
前記ノイズ画像データのノイズレベルを画素単位に閾値判定し、前記ノイズレベルが閾値以上の画素について前記ノイズ除去を実施し、前記ノイズレベルが前記閾値未満の画素について前記ノイズ除去を省略するノイズ除去部とを備え、
前記ノイズ除去部は、前記閾値を前記色成分の種類に従って切り換え、『輝度情報を多く含む前記色成分』および／または『撮像面上の分布密度の高い前記色成分』の閾値を、その他の前記色成分の閾値よりも低くする
ことを特徴とする電子カメラ。
【請求項２】
画像データに対して固定パターンノイズのノイズ除去を実施する電子カメラであって、
被写体を撮像して前記画像データを生成する撮像部と、
前記被写体からの光を遮って前記撮像部を駆動し、ノイズ画像データを生成するノイズ標本部と、
前記ノイズ画像データのノイズレベルを画素単位に閾値判定し、前記ノイズレベルが閾値以上の画素について前記ノイズ除去を実施し、前記ノイズレベルが前記閾値未満の画素について前記ノイズ除去を省略するノイズ除去部とを備え、
前記ノイズ除去部は、前記画像データの電荷蓄積時間が長くなるほど、前記閾値を低く変更する
ことを特徴とする電子カメラ。
【請求項３】
画像データに対して固定パターンノイズのノイズ除去を実施する電子カメラであって、
被写体を撮像して前記画像データを生成する撮像部と、
前記被写体からの光を遮って前記撮像部を駆動し、ノイズ画像データを生成するノイズ標本部と、
前記ノイズ画像データのノイズレベルを画素単位に閾値判定し、前記ノイズレベルが閾値以上の画素について前記ノイズ除去を実施し、前記ノイズレベルが前記閾値未満の画素について前記ノイズ除去を省略するノイズ除去部と、
前記電子カメラの温度を検出する温度検出部とを備え、
前記ノイズ除去部は、前記温度が高いほど、前記閾値を低く変更する
ことを特徴とする電子カメラ。
【請求項４】
画像データに対して固定パターンノイズのノイズ除去を実施する電子カメラであって、
被写体を撮像して前記画像データを生成する撮像部と、
前記被写体からの光を遮って前記撮像部を駆動し、ノイズ画像データを生成するノイズ標本部と、
前記ノイズ画像データのノイズレベルを画素単位に閾値判定し、前記ノイズレベルが閾値以上の画素について前記ノイズ除去を実施し、前記ノイズレベルが前記閾値未満の画素について前記ノイズ除去を省略するノイズ除去部とを備え、
前記ノイズ除去部は、前記撮像部の撮像感度を情報取得し、前記撮像感度が高いほど、前記閾値を低く変更する
ことを特徴とする電子カメラ。
【請求項５】
画像データに対して固定パターンノイズのノイズ除去を実施するノイズ除去装置であって、
被写体を撮像部により撮像して生成した画像データ、および前記被写体からの光を遮って前記撮像部を駆動して生成したノイズ画像データを取り込む入力部と、
前記ノイズ画像データのノイズレベルを画素単位に閾値判定し、前記ノイズレベルが閾値以上の画素について前記ノイズ除去を実施し、前記ノイズレベルが前記閾値未満の画素について前記ノイズ除去を省略するノイズ除去部とを備え、
前記ノイズ除去部は、前記閾値を前記色成分の種類に従って切り換え、『輝度情報を多く含む前記色成分』および／または『撮像面上の分布密度の高い前記色成分』の閾値を、その他の前記色成分の閾値よりも低くする
ことを特徴とするノイズ除去装置。
【請求項６】
コンピュータを、請求項５に記載の前記入力部および前記ノイズ除去部として機能させるためのノイズ除去プログラム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、固定パターンノイズの除去機能を有する電子カメラ、ノイズ除去装置、およびノイズ除去プログラムに関する。
【０００２】
【従来の技術】
電子カメラにおいて長時間露光を行うと、撮像素子から発生する固定パターンノイズのレベルが大きくなり、画像信号に輝点状（白キズという）その他のノイズが顕著に発生する。
このような固定パターンノイズを除去する装置として、特許文献１の従来装置が知られている。この従来装置は、撮像素子を遮光状態において、ノイズ画像データを生成する。この従来装置では、このノイズ画像データを、閾値判定することにより、白キズの発生画素を検出する。このときの閾値は、白キズの選別に合わせた大レベルの値である。従来装置は、この『白キズ』の発生画素に限って、画像データからノイズ画像データを減算する。その結果、画像データに含まれる白キズを良好に除去することが可能になる。
【０００３】
【特許文献１】
特開２００１−９４８８２（図１０のＳ５０〜Ｓ５３）
【０００４】
【発明が解決しようとする課題】
通常、画像データには、白キズのような大レベルの他に、中レベルの固定パターンノイズも含まれる。この中レベルの固定パターンノイズを除去するためには、白キズの発生画素に限らず、画像データ全域について、上述した減算処理を実施する必要がある。
【０００５】
しかしながら、ノイズ画像データには、固定パターンノイズの他に、ランダム性のノイズも含まれる。この種のランダムノイズは、上述した減算処理による同相除去が不可能である。逆に、減算処理を行うことによって、ノイズ画像データ中のランダムノイズが画像データに逆相で重畳するため、画像データのＳ／Ｎを結果的に低下させてしまうという問題があった。
【０００６】
さらに、中レベルの固定パターンノイズを除去するため、画像データ全域について減算処理を実施した場合、処理時間が長くかかるという問題点もあった。
そこで、本発明者は、中レベルの固定パターンノイズを良好に選別する方法を検討した。従来例のような白キズの選別であれば、固定パターンノイズが支配的であるため、閾値一定の状態で容易に選別できる。しかしながら、中レベルの固定パターンノイズについては、中途半端なノイズレベルにあるため、常に一律の閾値では、十分かつ適切な選別が困難になる。
そこで、本発明は、従来困難であった、中レベルの固定パターンノイズを良好に選別するための技術を提供することを目的とする。
【０００７】
【課題を解決するための手段】
以下、本発明について説明する。
【０００８】
《請求項１》
請求項１に記載の発明は、画像データに対して固定パターンノイズのノイズ除去を実施する電子カメラであって、撮像部、ノイズ標本部、およびノイズ除去部を備える。この撮像部は、被写体を撮像して複数の色成分から構成される画像データを生成する。ノイズ標本部は、被写体からの光を遮って撮像部を駆動し、ノイズ画像データを生成する。ノイズ除去部は、ノイズ画像データのノイズレベルを画素単位に閾値判定する。ノイズレベルが閾値以上の画素について、ノイズ除去部は、固定パターンノイズのノイズ除去を実施する。一方、ノイズレベルが閾値未満の画素について、ノイズ除去部は、固定パターンノイズのノイズ除去を省略する。特に、このノイズ除去部は、ノイズレベル判定用の閾値を、色成分の種類に従って切り換える。すなわち、『輝度情報を多く含む色成分』および／または『撮像面上の分布密度の高い色成分』の閾値を、その他の色成分の閾値よりも低くする。
本来、固定パターンノイズは、入射光の色とは無関係に、撮像素子内で発生する。そのため、固定パターンノイズそれ自体に色はない。しかし、発生画素の担当する色成分に従って画素配列されることにより、固定パターンノイズには色の違いが現れる。特に、中レベルの固定パターンノイズは、白キズのようにノイズレベルが飽和していないため、はっきりとした色の違いが現れる。
この場合、発生時のノイズレベルが各色でたとえ同程度であっても、発生画素の色成分によって着色されるため、ノイズの目立ち方が異なる。
すなわち、輝度情報を多く含む色成分（原色表色系では、Ｇ、次にＲ）の画素からは、視覚感度が高いために明るく目立つ色ノイズが発生しやすい。
逆に、輝度情報の少ない色成分（原色表色系では、Ｂ）の画素からは、視覚感度が低いために暗く目立たない色ノイズが発生しやすい。
また、撮像面上の各色の分布密度によっても、固定パターンノイズの目立ち方が異なる。
すなわち、撮像面上で分布密度の高い色成分（ベイヤー配列では、Ｇ）の画素からは、その分布密度に比例した高い頻度でノイズが発生する。そのため、その色のノイズは目立ちやすい。
逆に、撮像面上で分布密度の低い色成分の画素からは、その分布密度に比例した低い頻度でノイズが発生する。そのため、その色のノイズは目立ちにくい。
そこで、本発明では、中レベルの固定パターンノイズが有する色が顕著に異なるという特徴に着目して、中レベルの固体パターンノイズを良好に選別することを考えた。すなわち、上記の構成では、『輝度情報を多く含む色成分』および／または『撮像面上の分布密度の高い色成分』の閾値を、その他色成分の閾値よりも低く切り換える。その結果、目立ちやすい色の固定パターンノイズを敏感に選別して、実用的なノイズ除去を実施することが可能になる。逆に、目立ちにくい色の固定パターンノイズについては選別を抑制し、実用的に効果の少ないノイズ除去を適切に省くことができる。
【０００９】
《請求項２》
請求項２に記載の発明は、画像データに対して固定パターンノイズのノイズ除去を実施する電子カメラであって、撮像部、ノイズ標本部、およびノイズ除去部を備える。この撮像部は、被写体を撮像して画像データを生成する。ノイズ標本部は、被写体からの光を遮って撮像部を駆動し、ノイズ画像データを生成する。ノイズ除去部は、ノイズ画像データのノイズレベルを画素単位に閾値判定する。ノイズレベルが閾値以上の画素について、ノイズ除去部は固定パターンノイズのノイズ除去を実施する。ノイズレベルが閾値未満の画素について、ノイズ除去部は、固定パターンノイズのノイズ除去を省略する。特に、ノイズ除去部は、画像データの電荷蓄積時間が長くなるほど、ノイズレベル判定用の閾値を低く変更する。
通常、固定パターンノイズは電荷蓄積時間に比例して増加する。一方、ランダムノイズは、電荷蓄積時間の平方根に比例して増加する。そのため、電荷蓄積時間が長くなるに従って、ノイズ全体に占める固定パターンノイズの割合は大きくなる。
特に、中レベルのノイズでは、固定パターンノイズおよびランダムノイズのレベル差が微妙であり、電荷蓄積時間によって両者の割合が簡単に逆転する。
そこで、上記の構成では、電荷蓄積時間が長いほど、閾値を低く変更する。その結果、電荷蓄積時間が長く固定パターンノイズが支配的な状況では、中レベルのノイズを固定パターンノイズとして敏感に選別する。したがって、中レベルの固定パターンノイズを見逃すことが少なくなり、画像データから固定パターンノイズを確実に除去することが可能になる。
一方、電荷蓄積時間が短いほど、閾値を高く変更する。その結果、電荷蓄積時間が短くてランダムノイズが支配的な状況では、固定パターンノイズの選別が抑制される。したがって、ノイズ除去（減算処理）によってランダムノイズが、画像データに重畳するといった不具合を改善することが可能になる。
【００１０】
《請求項３》
請求項３に記載の発明は、画像データに対して固定パターンノイズのノイズ除去を実施する電子カメラであって、撮像部、ノイズ標本部、ノイズ除去部、および温度検出部を備える。この撮像部は、被写体を撮像して画像データを生成する。ノイズ標本部は、被写体からの光を遮って撮像部を駆動し、ノイズ画像データを生成する。ノイズ除去部は、ノイズ画像データのノイズレベルを画素単位に閾値判定する。ノイズレベルが閾値以上の画素について、ノイズ除去部は、固定パターンノイズのノイズ除去を実施する。ノイズレベルが閾値未満の画素について、ノイズ除去部は、固定パターンノイズのノイズ除去を省略する。温度検出部は電子カメラの温度を検出する。特に、このノイズ除去部は、温度検出部が検出する温度が高いほど、ノイズレベル判定用の閾値を低く変更する。
通常、電子カメラ（特に撮像素子）の温度上昇に従って、ノイズ全体に占める固定パターンノイズの割合が大きくなる。特に、中レベルのノイズでは、固定パターンノイズおよびランダムノイズのレベル差が微妙であり、温度によって両者の割合が簡単に逆転する。
そこで、上記の構成では、温度が高い場合、閾値を低く変更する。その結果、温度が高くなって固定パターンノイズが支配的な状況では、中レベルのノイズを固定パターンノイズとして敏感に選別する。したがって、支配的な固定パターンノイズを見逃すことが少なくなり、画像データから固定パターンノイズを確実に除去することが可能になる。
一方、温度が低い場合、閾値を高く変更する。その結果、温度が低くて固定パターンノイズが少ない状況において、固定パターンノイズの選別が抑制される。したがって、ノイズ除去（減算処理）によって、ランダムノイズが画像データに重畳するといった不具合を改善することが可能になる。
【００１１】
《請求項４》
請求項４に記載の発明は、画像データに対して固定パターンノイズのノイズ除去を実施する電子カメラであって、撮像部、ノイズ標本部、およびノイズ除去部を備える。この撮像部は、被写体を撮像して画像データを生成する。ノイズ標本部は、被写体からの光を遮って撮像部を駆動し、ノイズ画像データを生成する。ノイズ除去部は、ノイズ画像データのノイズレベルを画素単位に閾値判定する。ノイズレベルが閾値以上の画素について、ノイズ除去部は、固定パターンノイズのノイズ除去を実施する。ノイズレベルが閾値未満の画素について、ノイズ除去部は、固定パターンノイズのノイズ除去を省略する。特に、このノイズ除去部は、撮像部の撮像感度を情報取得し、撮像感度が高いほど、閾値を低く変更する。
通常、撮像感度の高感度化に従って、固定パターンノイズのレベルが大きくなる。特に、中レベルのノイズでは、固定パターンノイズおよびランダムノイズのレベル差が微妙であり、両者の割合が簡単に逆転する。
そこで、上記の構成では、撮像感度が高い場合、閾値を低く変更する。その結果、撮像感度が高くなると、中レベルのノイズを固定パターンノイズとして敏感に選別する。したがって、固定パターンノイズを見逃すことが少なくなり、画像データから固定パターンノイズを確実に除去することが可能になる。
一方、撮像感度が低い場合、閾値を高く変更する。その結果、撮像感度が低くてノイズの少ない状況において、固定パターンノイズの選別が抑制される。したがって、減算処理によってノイズ画像データ中のランダムノイズが、高Ｓ／Ｎの画像データに重畳するといった不具合を改善することが可能になる。
【００１２】
《請求項５》
請求項５に記載の発明は、画像データに対して固定パターンノイズのノイズ除去を実施するノイズ除去装置であって、入力部およびノイズ除去部を備える。この入力部は、被写体を撮像部により撮像して生成した画像データ、および被写体からの光を遮って撮像部を駆動して生成したノイズ画像データを取り込む。ノイズ除去部は、ノイズ画像データのノイズレベルを画素単位に閾値判定する。ノイズレベルが閾値以上の画素について、ノイズ除去部は、固定パターンノイズのノイズ除去を実施する。一方、ノイズレベルが閾値未満の画素について、ノイズ除去部は、ノイズ除去を省略する。特に、このノイズ除去部は、ノイズレベル判定用の閾値を、色成分の種類に従って切り換える。すなわち、『輝度情報を多く含む色成分』および／または『撮像面上の分布密度の高い色成分』の閾値を、その他の色成分の閾値よりも低くする。
【００１３】
《請求項６》
請求項６に記載のノイズ除去プログラムは、コンピュータを、請求項５に記載の入力部およびノイズ除去部として機能させることを特徴とする。
【００１４】
【発明の実施の形態】
以下、図面に基づいて本発明にかかる実施形態を説明する。
【００１５】
《本実施形態の構成説明》
図１は、本実施形態における電子カメラ１１（ノイズ除去装置を含む）の構成を示す図である。
図１に示すように、電子カメラ１１には、撮影レンズ１２が装着される。この撮影レンズ１２の光路上には、シャッター１２ａおよび撮像素子１３が順番に配置される。この撮像素子１３の撮像面には、不図示のカラーフィルタアレイが配置される。また、この撮像素子１３には、温度検出部１３ａが近接して配置される。
【００１６】
この撮像素子１３において生成された画像データは、利得可変アンプ１４によって、撮像感度Ｓに対応した利得に増幅される。増幅された画像データは、Ａ／Ｄ変換部１５を介して１２ｂｉｔ階調にデジタル化された後、信号処理部１６に与えられる。信号処理部１６は、この画像データに対して、黒レベル補正などの信号処理を施す。信号処理された画像データは、バッファメモリ１７に一時記憶される。このバッファメモリ１７は、バス１８に接続される。このバス１８には、画像処理部１９、記録部２０、マイクロプロセッサ２２、および画像圧縮部２３などが接続される。
また、電子カメラ１１には、各種の情報入力やモード設定やレリーズ操作を行うためのスイッチ群２２ａ等が設けられる。これらスイッチ群２２ａから信号は、マイクロプロセッサ２２に入力される。
【００１７】
［発明との対応関係］
以下、発明と本実施形態との対応関係について説明する。なお、ここでの対応関係は、参考のために一解釈を例示するものであり、本発明を徒らに限定するものではない。
請求項記載の撮像部は、シャッター１２ａ、撮像素子１３、利得可変アンプ１４、Ａ／Ｄ変換部１５、信号処理部１６、およびバッファメモリ１７に対応する。
請求項記載のノイズ標本部は、シャッター１２ａ、バッファメモリ１７、およびマイクロプロセッサ２２の『シャッター１２ａを閉じた状態で、撮像素子１３を駆動してノイズ画像データを撮像する機能』に対応する。
請求項記載のノイズ除去部は、マイクロプロセッサ２２の『画像データから固定パターンノイズを除去する機能』に対応する。
請求項記載の温度検出部は、温度検出部１３ａに対応する。
請求項記載の入力部は、バッファメモリ１７、マイクロプロセッサ２２の『画像データおよびノイズ画像データを取り込む機能』に対応する。
【００１８】
《本実施形態の動作説明》
図２は、電子カメラ１１による固定パターンノイズの除去処理を説明する流れ図である。図３〜図５は、ノイズレベル判定用の閾値の調整傾向を示す図である。図６（Ａ）は、画像データの画素値パターンを示す図である。図６（Ｂ）は、ノイズ画像データの画素値パターンを示す図である。図６（Ｃ）は、ノイズ除去後の画素値パターンを示す図である。
以下、図２に示すステップ番号に従って、このノイズ除去処理について説明する。
【００１９】
ステップＳ１：  マイクロプロセッサ２２は、シャッター１２ａを開いた状態で、撮像素子１３を電子シャッタ制御し、所定の電荷蓄積時間Ｔｅにわたって被写界を撮像する。撮像素子１３で生成された画像データは、利得可変アンプ１４、Ａ／Ｄ変換部１５および信号処理部１６を介して信号処理された後、バッファメモリ１７に一時記憶される。
【００２０】
ステップＳ２：  マイクロプロセッサ２２は、シャッター１２ａを閉じた遮光状態で撮像素子１３を電子シャッタ制御し、所定の電荷蓄積時間Ｔｅにわたって蓄積されたノイズ画像データを生成する。このノイズ画像データは、利得可変アンプ１４、Ａ／Ｄ変換部１５および信号処理部１６を介して信号処理された後、バッファメモリ１７に一時記憶される。
【００２１】
ステップＳ３：  マイクロプロセッサ２２は、温度検出部１３ａの出力に基づいて、撮像素子１３の温度Ｔｐを検出する。
【００２２】
ステップＳ４：  マイクロプロセッサ２２は、利得可変アンプ１４の設定利得から現時点の撮像感度Ｓを情報取得する。マイクロプロセッサ２２は、電荷蓄積時間Ｔｅ、温度Ｔｐ、および撮像感度Ｓの各条件に応じて、内部メモリ上のテーブルデータを参照し、ＲＧＢ色成分ごとに定めた閾値ＴＨｒ，ＴＨｇ，ＴＨｂを決定する。
ここで決定する各閾値ＴＨｒ，ＴＨｇ，ＴＨｂは、中レベルのノイズレベル判定用であり、例えば、１２階調（０〜４０９５）の信号レベルに対して、およそ１００以下の値に決定される。
なお、ここで閾値決定に使用するテーブルデータは、使用する撮像素子１３のノイズ特性などによって大きく変化する。そのため、ここでは具体的なテーブルデータを示す代わりに、各条件に応じた各閾値ＴＨｒ，ＴＨｇ，ＴＨｂの調整傾向を説明する。当業者は、使用する撮像素子１３についてノイズ除去の主観評価テストを繰り返しながら、これら調整傾向に合わせてテーブルデータを作成することにより、適切なテーブルデータを作成できる。
図３は、電荷蓄積時間Ｔｅによる各閾値ＴＨｒ，ＴＨｇ，ＴＨｂの調整傾向を示す図である。ここでは、ＴＨｂ＞ＴＨｒ＞ＴＨｇの関係を保ちながら、電荷蓄積時間Ｔｅが長くなるに従って、各閾値ＴＨｒ，ＴＨｇ，ＴＨｂを低くする。
図４は、温度Ｔｐによる各閾値ＴＨｒ，ＴＨｇ，ＴＨｂの調整傾向を示す図である。ここでは、ＴＨｂ＞ＴＨｒ＞ＴＨｇの関係を保ちながら、温度Ｔｐが高くなるに従って、各閾値ＴＨｒ，ＴＨｇ，ＴＨｂを低くする。
図５は、撮像感度Ｓによる各閾値ＴＨｒ，ＴＨｇ，ＴＨｂの調整傾向を示す図である。ここでは、ＴＨｂ＞ＴＨｒ＞ＴＨｇの関係を保ちながら、撮像感度Ｓが高くなるに従って、各閾値ＴＨｒ，ＴＨｇ，ＴＨｂを低くする。
マイクロプロセッサ２２は、これら調整傾向ごとに定めた閾値ＴＨｒ，ＴＨｇ，ＴＨｂについて、平均値、メディアン値、または最小値を算出する。この演算により、複数の調整傾向を総合した閾値ＴＨｒ，ＴＨｇ，ＴＨｂが最終的に決定される。
【００２３】
ステップＳ５：  マイクロプロセッサ２２は、画素位置（ｉ，ｊ）を初期化する。
【００２４】
ステップＳ６：  マイクロプロセッサ２２は、バッファメモリ１７から、画素位置（ｉ，ｊ）における『画像データの画素値Ｘ（ｉ，ｊ）』および『ノイズ画像データの画素値Ｙ（ｉ，ｊ）』をそれぞれ読み出す。
【００２５】
ステップＳ７：  マイクロプロセッサ２２は、撮像素子１３のカラーフィルタアレイの色配列ルールに基づいて、画素位置（ｉ，ｊ）が担当する色成分を求める。
ここで、Ｒ色成分の場合、マイクロプロセッサ２２はステップＳ８に動作を移行する。
Ｇ色成分の場合、マイクロプロセッサ２２はステップＳ９に動作を移行する。
Ｂ色成分の場合、マイクロプロセッサ２２はステップＳ１０に動作を移行する。
【００２６】
ステップＳ８：  マイクロプロセッサ２２は、閾値ＴＨに、ステップＳ４で決定したＲ色成分用の閾値ＴＨｒを代入する。この動作の後、マイクロプロセッサ２２は、ステップＳ１１に動作を移行する。
【００２７】
ステップＳ９：  マイクロプロセッサ２２は、閾値ＴＨに、ステップＳ４で決定したＧ色成分用の閾値ＴＨｇを代入する。この動作の後、マイクロプロセッサ２２は、ステップＳ１１に動作を移行する。
【００２８】
ステップＳ１０：  マイクロプロセッサ２２は、閾値ＴＨに、ステップＳ４で決定したＢ色成分用の閾値ＴＨｂを代入する。この動作の後、マイクロプロセッサ２２は、ステップＳ１１に動作を移行する。
【００２９】
ステップＳ１１：  マイクロプロセッサ２２は、ノイズ画像データの画素値Ｙ（ｉ，ｊ）が、閾値ＴＨ以上であるか否かを判定する。
ここで、画素値Ｙ（ｉ，ｊ）が閾値ＴＨ以上の場合、マイクロプロセッサ２２はステップＳ１２に動作を移行する。
一方、画素値Ｙ（ｉ，ｊ）が閾値ＴＨ未満の場合、マイクロプロセッサ２２は固定パターンノイズの除去処理を省略して、ステップＳ１５に動作を移行する。
図６（Ａ）〜（Ｃ）に示す※印付きの画素は、画素値Ｙ（ｉ，ｊ）がいずれも閾値ＴＨ未満を示す画素であり、ステップＳ１１の判定処理に従ってノイズ除去処理が省略される画素である。
【００３０】
ステップＳ１２：  マイクロプロセッサ２２は、画像データの画素値Ｘ（ｉ，ｊ）をレベル判定し、画素値Ｘ（ｉ，ｊ）が飽和レベルに近いか否かを判定する。
一般に、画像データのハイライト箇所では、画素値Ｘ（ｉ，ｊ）が飽和レベルに近づいて、画素値Ｘ（ｉ，ｊ）に非線形なレベル圧縮が生じる。このようなレベル圧縮画素の箇所に対してノイズ画像データを単純に減算した場合、過剰に信号レベルが低下し、黒点ノイズが発生する。
そこで、画素値Ｘ（ｉ，ｊ）が飽和レベルに近いと判断すると、マイクロプロセッサ２２は、ステップＳ１４に動作を移行する。
一方、画素値Ｘ（ｉ，ｊ）が飽和レベルにかからない場合、マイクロプロセッサ２２は、ステップＳ１３に動作を移行する。
【００３１】
ステップＳ１３：  マイクロプロセッサ２２は、下式の減算処理を実施する。
Ｘ（ｉ，ｊ）＝Ｘ（ｉ，ｊ）−Ｙ（ｉ，ｊ）
図６（Ｃ）にクロスハッチで示す画素は、上式の減算処理により固定パターンノイズが除去される画素である。
このような減算処理の後、マイクロプロセッサ２２は、ステップＳ１５に動作を移行する。
【００３２】
ステップＳ１４：  マイクロプロセッサ２２は、画素位置（ｉ，ｊ）の局所領域内においてメディアン値を求め、画像データの画素値Ｘ（ｉ，ｊ）をこのメディアン値で置換する。
図６（Ｃ）に水平ハッチングで示す画素は、このような置換処理により固定パターンノイズが除去された画素である。
このような置換処理の後、マイクロプロセッサ２２は、ステップＳ１５に動作を移行する。
【００３３】
ステップＳ１５：  マイクロプロセッサ２２は、現在の画素位置（ｉ，ｊ）が走査完了位置か否かを判定する。走査完了位置に達した場合、マイクロプロセッサ２２は、固定パターンノイズの除去処理を終了する。
一方、走査完了位置にまだ達していない場合、マイクロプロセッサ２２は、ステップＳ１６に動作を移行する。
【００３４】
ステップＳ１６：  マイクロプロセッサ２２は、現在の画素位置（ｉ，ｊ）を、画像の走査経路に沿って一つ進め、ステップＳ６に動作を戻す。
以上説明した一連の動作により、画像データに対する固定パターンノイズの除去処理が完了する。
【００３５】
この除去処理を完了した画像データは、画像処理部１９において色補間処理や輪郭強調などの画像処理が施される。この画像処理を終えた画像データは、画像圧縮部２３によってデータ圧縮された後、記録部２０によってメモリカードに記録保存される。
【００３６】
《本実施形態の効果など》
以上説明したように、本実施形態では、輝度情報を多く含む色成分（Ｇ、次にＲ）のノイズレベル判定用の閾値ＴＨｇ，ＴＨｒを、その他色成分Ｂの閾値ＴＨｂよりも小さくする。さらに、本実施形態では、撮像面上の分布密度の高い色成分Ｇの閾値ＴＨｇを、その他色成分Ｒ，Ｂの閾値ＴＨｒ，ＴＨｂよりも小さくする。その結果、中レベルのノイズを、目立ちやすい色／目立ちにくい色といった尺度で適切に選別することが可能になる。その結果、目立ちやすい色の固定パターンノイズを敏感に選別し、中レベルに特有な目立ちやすい色の固定パターンノイズを適切に除去できる。逆に、目立ちにくい色の固定パターンノイズについては選別を適度に抑制するため、固定パターンノイズの除去処理が適切に省略され、電子カメラ１１の処理高速化を図ることができる。
【００３７】
さらに、本実施形態では、電荷蓄積時間Ｔｅが長いほど、ノイズレベル判定用の閾値を低くする。その結果、電荷蓄積時間Ｔｅが長く固定パターンノイズが支配的な状況において、中レベルの固定パターンノイズを見逃すことが少なくなり、画像データから固定パターンノイズを確実に除去することが可能になる。逆に、電荷蓄積時間Ｔｅが短くてランダムノイズの割合が大きい状況では、固定パターンノイズのノイズ除去を抑えるため、ランダムノイズが画像データに重畳するといった不具合を改善できる。特に、このような閾値切り換えでは、電荷蓄積時間Ｔｅが短いほど、ノイズ除去の処理が早く完了する。そのため、電子カメラ１１の処理速度を体感的に高速化することが可能になる。
【００３８】
また、本実施形態では、温度Ｔｐが高いほど、ノイズレベル判定用の閾値を低くする。その結果、温度Ｔｐが高く固定パターンノイズが支配的な状況において、中レベルの固定パターンノイズを見逃すことが少なくなり、画像データから固定パターンノイズを確実に除去することが可能になる。逆に、温度Ｔｐが低くて固定パターンノイズが少ない状況ではノイズ除去処理を省略して、電子カメラ１１の処理高速化を図ることができる。
【００３９】
さらに、本実施形態では、撮像感度Ｓが高いほど、ノイズレベル判定用の閾値を低くする。その結果、撮像感度Ｓが高く固定パターンノイズが多い状況において、中レベルの固定パターンノイズを見逃すことが少なくなり、画像データから固定パターンノイズを確実に除去することが可能になる。逆に、撮像感度Ｓが低くて固定パターンノイズが少ない状況では、ノイズ除去処理を省略して、電子カメラ１１の処理高速化を図ることができる。
【００４０】
《実施形態の補足事項》
なお、上述した実施形態では、本発明を電子カメラに適用するケースについて説明した。しかしながら、本発明はこれに限定されるものではない。例えば、図２に示す動作の内から、ノイズ除去関連の動作をプログラムコード化することによって、ノイズ除去プログラムを作成してもよい。このノイズ除去プログラムをコンピュータ上で実行することにより、コンピュータ上において、画像データ（特にＲＡＷデータ）のノイズ除去を実施することが可能になる。
【００４１】
また、上述した実施形態では、カラーフィルタアレイが原色表色系のケースについて説明した。しかしながら、本発明はこれに限定されるものではない。補色表色系その他の一般的な色成分に対応して、閾値を切り換えてもよい。この場合は、『輝度情報を多く含む色成分』および／または『撮像面上の分布密度の高い色成分』の閾値を、それ以外の色成分の閾値よりも低くすればよい。
【００４２】
【発明の効果】
以上説明したように、本発明では、色成分の種類、電荷蓄積時間の長短、温度の高低、または撮像感度の高低といった条件に従って、中レベルのノイズレベル判定用の閾値を切り換える。その結果、中レベルの固定パターンノイズを良好に選別することが可能になり、中レベルの固定パターンノイズを除去する処理の実行／非実行を、画素単位に適切に判断して切り換えることが可能になる。
【図面の簡単な説明】
【図１】本実施形態における電子カメラ１１（ノイズ除去装置を含む）の構成を示す図である。
【図２】固定パターンノイズの除去処理を説明する流れ図である。
【図３】電荷蓄積時間Ｔｅによる閾値の調整傾向を示す図である。
【図４】温度Ｔｐによる閾値の調整傾向を示す図である。
【図５】撮像感度Ｓによる閾値の調整傾向を示す図である。
【図６】固定パターンノイズの除去処理の様子を説明する図である。
【符号の説明】
１１  電子カメラ
１２  撮影レンズ
１２ａ  シャッター
１３  撮像素子
１３ａ  温度検出部
１４  利得可変アンプ
１５  Ａ／Ｄ変換部
１６  信号処理部
１７  バッファメモリ
１８  バス
１９  画像処理部
２０  記録部
２２  マイクロプロセッサ
２２ａ  スイッチ群
２３  画像圧縮部
【図１】
2004248006.tif 000003
【図２】
2004248006.tif 000004
【図３】
2004248006.tif 000005
【図４】
2004248006.tif 000006
【図５】
2004248006.tif 000007
【図６】
2004248006.tif 000008