(57)【要約】【課題】撮像光学系の特性に基づく画像補正に起因するノイズの変動の影響を抑制し、高画質な画像を生成する。【解決手段】撮像光学系により結像された被写体の光学像を撮像して画像を取得する撮像装置に適用され、該撮像装置により取得された画像及び前記撮像光学系の特性に関する光学特性情報を入力する入力手段と、前記光学特性情報に基づいて前記画像の補正を行う画像補正手段と、輝度値に対するノイズ量を示す基本ノイズ低減情報を予め記憶した基本ノイズ低減情報記憶手段と、前記画像が取得された際の撮影条件と前記光学特性情報とに基づいて、前記画像補正手段による前記画像の補正によって生じるノイズ量の変動を抑制するように、前記基本ノイズ低減情報を更新するノイズ低減情報更新手段と、該ノイズ低減情報更新手段により更新されたノイズ低減情報に基づいて前記画像のノイズ低減処理を行うノイズ低減手段と、を備える画像処理装置を提供する。【選択図】図１
2016015685.tif 000002
【特許請求の範囲】
【請求項１】
撮像光学系により結像された被写体の光学像を撮像して画像を取得する撮像装置に適用され、
該撮像装置により取得された画像及び前記撮像光学系の特性に関する光学特性情報を入力する入力手段と、
前記光学特性情報に基づいて前記画像の補正を行う画像補正手段と、
輝度値に対するノイズ量を示す基本ノイズ低減情報を予め記憶した基本ノイズ低減情報記憶手段と、
前記画像が取得された際の撮影条件と前記光学特性情報とに基づいて、前記画像補正手段による前記画像の補正によって生じるノイズ量の変動を抑制するように、前記基本ノイズ低減情報を更新するノイズ低減情報更新手段と、
該ノイズ低減情報更新手段により更新されたノイズ低減情報に基づいて前記画像のノイズ低減処理を行うノイズ低減手段と、を備える画像処理装置。
【請求項２】
前記基本ノイズ低減情報記憶手段が、周波数成分毎に複数の基本ノイズ低減情報を記憶する請求項１記載の画像処理装置。
【請求項３】
前記光学特性情報が、前記撮像光学系の光学性能を周波数特性で評価した光学伝達関数に基づいて生成される請求項１又は請求項２記載の画像処理装置。
【請求項４】
前記光学特性情報が、画像上の位置に応じて生成される請求項１乃至請求項３の何れか１項記載の画像処理装置。
【請求項５】
前記撮影条件が、Ｆ値、焦点距離及びＩＳＯ感度のうち少なくとも１以上の条件を含む請求項１乃至請求項４の何れか１項記載の画像処理装置。
【請求項６】
前記画像補正手段が、前記画像のボケを補正する請求項１乃至請求項５の何れか１項記載の画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置に係り、特に、処理対象の画像を撮像する撮像光学系に鑑みた画像処理を行う画像処理装置に関するものである。
【背景技術】
【０００２】
従来、撮像した画像のノイズを低減する画像処理装置が知られている。例えば、特許文献１には、画像を撮像するレンズ（撮像光学系）の性能による収差補正量（光学歪み、周辺光量落ち等）に基づいてノイズを低減している。つまり、特許文献１では、収差補正量に基づいてノイズ低減の基礎となるノイズ抑圧レベルを決定し、注目画素が平坦領域である場合に、収差補正量を参照しながらノイズ抑圧レベルを強めるようにノイズ低減を行い、注目画素がエッジである場合にノイズ低減を行わないようにしている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−２９５８０７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、一般に、ノイズは画素の輝度値（明るさ）によって発生する量及びその要因が異なる特性を有している。
しかしながら、上述した特許文献１では、ノイズ低減の際に、各画素の輝度値を考慮していない。このため、同じノイズ抑圧数や平坦性を示す画素であっても輝度値によってノイズ低減効果に差異が生じ、例えば、暗く平坦な画素のノイズが低減されている一方で、明るく平坦な画素のノイズが残存してしまうことがある。また、特許文献１では、処理対象の画素がエッジである場合にはノイズ低減を行っていないが、画素によってはエッジ部のノイズが残ったまま収差補正によって却って強調される場合があり、エッジ部及びその周辺部分が不自然となり、結果的に画質が低下する虞がある。
【０００５】
本発明は、上述した事情に鑑みてなされたものであって、撮像光学系や撮像素子等で構成される撮像系の特性に起因するノイズの変動の影響を抑制し、高画質な画像を生成することを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明は以下の手段を提供する。
本発明の一態様は、撮像光学系により結像された被写体の光学像を撮像して画像を取得する撮像装置に適用され、該撮像装置により取得された画像及び前記撮像光学系の特性に関する光学特性情報を入力する入力手段と、前記光学特性情報に基づいて前記画像の補正を行う画像補正手段と、輝度値に対するノイズ量を示す基本ノイズ低減情報を予め記憶した基本ノイズ低減情報記憶手段と、前記画像が取得された際の撮影条件と前記光学特性情報とに基づいて、前記画像補正手段による前記画像の補正によって生じるノイズ量の変動を抑制するように、前記基本ノイズ低減情報を更新するノイズ低減情報更新手段と、該ノイズ低減情報更新手段により更新されたノイズ低減情報に基づいて前記画像のノイズ低減処理を行うノイズ低減手段と、を備える画像処理装置を提供する。
【０００７】
本態様によれば、撮像装置から入力された画像に対して、ノイズ低減処理を行うと共に、撮像装置における撮像光学系の特性に関する光学特性情報に基づいて画像補正を行う。この場合において、基本ノイズ低減情報記憶手段に予め記憶されている輝度値に対するノイズ量を示す基本ノイズ低減情報が、撮像装置において画像を取得した際の撮影条件及び光学特性情報に基づいてノイズ低減情報更新手段によって更新され、更新されたノイズ低減情報を用いてノイズ低減手段によるノイズ低減処理が行われる。基本ノイズ低減情報を、撮影条件及び光学特性情報に基づいて、画像補正手段による画像の補正によって生じるノイズ量の変動を抑制するように更新するので、画像補正を行うことによってノイズ量が増加等変動した場合であっても、増加等の変動したノイズについても効果的にノイズ低減を行うことができる。すなわち、撮像光学系の特性に起因するノイズの変動の影響を抑制し、高画質な画像を生成することができる。
【０００８】
上記した態様においては、前記基本ノイズ低減情報記憶手段が、周波数成分毎に複数の基本ノイズ低減情報を記憶することが好ましい。
このようにすることで、周波数成分毎に異なるノイズの状態に応じてノイズ低減情報を適用することができるので、周波数成分に応じて最適なノイズ低減情報に基づいたノイズ低減処理を行うことができる。
【０００９】
上記した態様においては、前記光学特性情報が、前記撮像光学系の光学性能を周波数特性で評価した光学伝達関数に基づいて生成されることが好ましい。
このようにすることで、撮像光学系の光学性能に基づく画像補正を適切に行うと共に、画像補正によるノイズ量の変動を効果的に抑制するようにノイズ低減情報を更新することができる。
【００１０】
上記した態様においては、前記光学特性情報が、画像上の位置に応じて生成されることが好ましい。
このようにすることで、例えば歪曲収差（ディストーション）のような画像上の位置によって変動する収差についても、光学特性情報として歪曲収差に関する情報を保持することで適切に画像補正を行うと共に、画像補正によるノイズ量の変動を効果的に抑制するようにノイズ低減情報を更新することができる。
【００１１】
上記した態様においては、前記撮影条件が、Ｆ値、焦点距離及びＩＳＯ感度のうち少なくとも１以上の条件を含むことが好ましい。
このようにすることで、画像の画質に影響をもたらす撮影条件に鑑みて、ノイズ量の変動を効果的に抑制するようにノイズ低減情報を更新することができる。
【００１２】
上記した態様においては、前記画像補正手段が、前記画像のボケを補正することが好ましい。
このようにすることで、例えば球面収差のような収差起因のボケや回折起因によるボケを適切に補正すると共に、補正により増加するノイズ量を効果的に低減させるようにノイズ低減情報を更新することができる。
【発明の効果】
【００１３】
本発明によれば、撮像系の特性に起因するノイズの変動の影響を抑制し、高画質な画像を生成することができるという効果を奏する。
【図面の簡単な説明】
【００１４】
【図１】本発明の第１の実施形態に係る画像処理装置を適用した撮像装置の概略構成を示すブロック図である。
【図２】光学特性情報としての撮像光学系のＭＴＦ特性を補正するゲイン特性を示す図である。
【図３】回折起因のボケ補正の様子を示す参考図であり、（Ａ）は補正前、（Ｂ）は補正後の様子を示す。
【図４】ボケ補正前後の撮像光学系のＭＴＦ特性を示す図である。
【図５】基本ノイズ低減情報の例を示す図である。
【図６】ＭＴＦ特性の周波数情報に基づいて基本ノイズ低減情報を更新した場合の例を示す図である。
【図７】図１の画像処理装置におけるノイズ低減処理部の概略構成図である。
【図８】本発明の第１の実施形態に係る画像処理装置の作用を示すフローチャートである。
【図９】収差の一つである歪曲収差を補正する場合における画像補正前後の差分画像情報生成を示す。
【発明を実施するための形態】
【００１５】
（第１の実施形態）
以下に、本発明の第１の実施形態に係る画像処理装置について図面を参照して説明する。
本実施形態に係る画像処理装置１は、撮像光学系により結像された被写体の光学像を撮像して画像を取得する撮像部９に適用され、撮像部９により取得された画像に対して撮像部９が持ちうる（撮像光学系や撮像素子に依存する）光学特性に基づく画像補正やノイズ低減等の画像処理を行う装置である。
【００１６】
図１に示すように、画像処理装置１は、撮像部９における画像の撮影条件を設定する撮影条件設定部１１、入力部１２、前処理部１３、画像補正部１４、基本ノイズ低減情報記憶部１５、ノイズ低減情報更新部１６、ノイズ低減処理部１７、出力画像構成部１８及びこれらの各部を制御する処理制御部１９を備えている。
なお、図１における各部間を接続する矢印のうち、実線は画像情報の入出力を、破線は制御や設定に関する情報の入出力を示す。
【００１７】
撮影条件設定部１１は、撮像部９によって画像を取得する際の撮像条件を設定する。つまり、撮影条件設定部１１は、撮影条件として、例えば、Ｆ値、焦点距離、ＩＳＯ感度、シャッタスピード等を設定し、設定した撮影条件を後述する処理制御部１９により入力部１２を介して撮像部９に出力する。
【００１８】
入力部１２は、撮像部９において取得された画像及び撮像部９の撮像光学系８に設けられる記憶部７に記憶された撮像光学系や撮像素子の特性に関する情報である光学特性情報を入力し、これらを一時的に記憶する。入力部１２において一時的に記憶した画像は、前処理部１３に出力される。
【００１９】
光学特性情報は撮像光学系が有する収差や光学性能を表す情報、撮像素子の画素サイズ等により構成されている。収差としては、例えば、倍率色収差や軸上色収差、歪曲収差、シェーディング等の画像の画質に影響を及ぼすもの等が挙げられる。収差に関する光学特性情報として収差を補正するための情報と位置づける。例えば、倍率色収差における色別の画素の色ずれ量、歪曲収差における像の位置ずれ量、シェーディングにおける画像上の位置（画面位置）毎の光量差、等である。また、光学性能を表す情報として光学伝達関数（ＯＴＦ：Ｏｐｔｉｃａｌ  Ｔｒａｎｓｆｅｒ  Ｆｕｎｃｔｉｏｎ）の絶対値成分で表され被写体のコントラストの再現性を周波数特性で評価したＭＴＦ（Ｍｏｄｕｌａｔｉｏｎ  Ｔｒａｎｓｆｅｒ  Ｆｕｎｃｔｉｏｎ）等が挙げられる。
【００２０】
本実施形態においては、画像補正の一例として撮像系で発生する光の回折に起因するボケを補正する場合について説明する。従って、光学特性情報として、ボケ補正に利用するＭＴＦのゲイン特性（図２参照）が撮像光学系８に設けられる記憶部７に記憶されていることとして説明する（詳細は後述）。図２に示すゲイン特性は、ナイキスト周波数に近い空間周波数のコントラストを向上させるため、ナイキスト周波数に近い周波数ほど大きいゲインを示している。
【００２１】
前処理部１３は、入力部１２に入力された画像に対して、前処理としてＯｐｔｉｃａｌＢｌａｃｋ（ＯＢ）補正やホワイトバランス（ＷＢ）補正、撮像部９に設けられているカラーフィルタ（図示せず）が単板で構成されている場合には色情報補間（デモザイキング）、等の処理を行い、処理後の画像を画像補正部１４に出力する。
【００２２】
画像補正部１４は、入力部１２を介して取得した撮像部９の光学特性情報に基づいて前処理部１３で処理された画像に対して補正処理を行う。すなわち、前処理部１３で処理された画像に対して、撮像部９の光学特性に起因して発生した収差を補正するように収差補正処理（歪曲収差であれば歪曲（ディストーション）補正、シェーディングであればシェーディング補正、等）、あるいは回折起因のボケを回復するためのボケ回復処理等を行い、補正後の画像をノイズ低減処理部１７に出力する。
【００２３】
画像補正の一例として、回折に起因するボケを補正する場合について、ボケ補正の前後の様子を図３に、ボケ補正の前後におけるＭＴＦ特性の変化を図４に示した。図３（Ａ）はボケ補正前、図３（Ｂ）はボケ補正後の様子を夫々示す。図４において、横軸は周波数（ナイキスト周波数を１に正規化）、縦軸はＭＴＦ値（ＭＴＦ最大値を１に正規化）を示している。ＭＴＦ値が大きいほど高コントラストとなる。ボケ補正前のＭＴＦ特性に比べボケ補正を行うことでコントラストが高くなる。
【００２４】
基本ノイズ低減情報記憶部１５は、輝度値に対するノイズ量を示す、つまり、撮像素子から出力される光量（画像の輝度値）とノイズ量（輝度値の標準偏差）の関係を示す基本ノイズ低減情報を予め記憶している。基本ノイズ低減情報は、例えば、図５に示すように、ＩＳＯ感度毎に複数記憶されている。また、基本ノイズ低減情報は周波数成分毎に記憶されている。
【００２５】
図５に示すように、基本ノイズ低減情報は、光量が増加する（輝度が高くなる）につれノイズ量が単調増加するようになっている。また、基本ノイズ低減情報はＩＳＯ感度毎に異なる特性を持っており、ＩＳＯ感度が高くなる（高感度になる）に従って同じ光量に対するノイズ量が多くなるという特性を持つ。ＩＳＯ感度毎の基本ノイズ低減情報を保持することで、明るさ及び感度に応じてノイズ量が異なるという特性を利用し、ＩＳＯ感度の変化に応じて様々な明るさのノイズを均等に低減することが可能となる。
【００２６】
ノイズ低減情報更新部１６は、画像が取得された際の撮影条件と光学特性情報とに基づいて、画像補正を行うことによって生じるノイズ量の変動を抑制するように、基本ノイズ低減情報記憶部１５に記憶された基本ノイズ低減情報を更新する。つまり、処理制御部１９から取得した撮影条件及び光学特性情報に基づいて基本ノイズ低減情報記憶部１５に記憶されている基本ノイズ低減情報を取得すると共に基本ノイズ低減情報を更新する。
【００２７】
すなわち、ノイズ低減情報更新部１６は、基本ノイズ低減情報記憶部１５に記憶されている複数の基本ノイズ低減情報のうち、処理制御部１９から取得した撮影条件に合致する基本ノイズ低減情報を抽出し、抽出した基本ノイズ低減情報を、処理制御部１９を介して取得した光学特性情報に基づいて更新する。
【００２８】
ノイズ低減情報更新部１６における更新処理は、ノイズの変動特性を算出し、算出した変動特性に基づいて基本ノイズ低減情報を更新する構成とすることができる。また、光学特性情報として予めノイズの変動特性が記憶されている場合には、記憶された変動特性を適用して基本ノイズ低減情報を更新する。更新されたノイズ低減情報は画像補正後の画像情報とともにノイズ低減処理部１７に送られる。
画像補正として回折に起因するボケ補正を行った場合、光学特性情報としての図２に示すゲイン特性（ナイキスト周波数に近い周波数ほど大きいゲイン）を補正前のＭＴＦ特性（図４の破線参照）に適用することでボケ補正後のＭＴＦ特性（図４の実線参照）を出すようにしている。
【００２９】
すなわち、光学特性情報としてのゲイン特性（図２）は、ナイキスト周波数に近い空間周波数のコントラストを向上させるため、図３（Ｂ）に示すように、ボケ補正後の細い線の周辺の解像感は図３（Ａ）に比べて向上する一方、背景に存在する高周波成分からなるノイズが増加する。このような状況下でボケ補正により増加したノイズを低減するために、図２に示すゲイン特性を利用することで基本ノイズ低減情報を変更する。
【００３０】
図６に、光学特性情報としての図２のゲイン特性に基づいて、ＭＴＦ特性の周波数ごとに基本ノイズ低減情報を変更したノイズ低減情報を示す。図６の更新後のノイズ低減情報は、周波数に対応したゲイン特性を基本ノイズ低減情報に乗じる形でノイズ低減情報として表している。図２のゲイン特性において、ナイキスト周波数に対する割合としての周波数成分が小さい領域（＝低周波成分）はボケ補正の効果がわずかしか出ないことから、ゲインは１．０をわずかに超える程度であり、更新前の基本ノイズ低減情報との差があまりない。一方、周波数成分が大きい領域（＝高周波成分）はボケ補正の効果が顕著に現れることから、ゲインは大きくなり、輝度とノイズの関係からなるノイズ低減情報も大きくなる。これは、同じ輝度でも周波数成分によってノイズの発生状態が異なり、周波数成分に応じて異なるノイズ低減処理を行う必要があるためである。
【００３１】
ノイズ低減処理部１７は、更新されたノイズ低減情報に基づいて補正された画像に対してノイズ低減処理を行う。より詳細には、ノイズ低減処理部１７は、例えば、図７に示すように、３段のフィルタリング部１０１，１１１，１２１を備え、前段のフィルタリング部により作成された縮小画像を後段のフィルタリング部に入力することで、入力画像から互いに異なる解像度の縮小画像を逐次的に作成すると共に、縮小画像に対して夫々ノイズ低減を行っていく構成となっている。つまり、周波数ごとのノイズ低減情報に基づき、画像を周波数帯域に分解して周波数帯域ごとにノイズ低減処理を行う。なお、フィルタリング部によるフィルタリングによって縮小画像が作成されることの他、縮小処理を行わずに、例えば、ローパスフィルタを用いた処理を行う構成とすることもできる。
【００３２】
各フィルタリング部１０１，１１１，１２１の後段には、各フィルタリング部に対応して夫々拡大処理部１０２，１１２，１２２及び減算部１０３，１１３，１２３が設けられている。また、減算部１０３，１１３，１２３の後段には、夫々ノイズ低減部１０４，１１４，１２４及び加算部１０６，１１６，１２６が設けられている。
【００３３】
ノイズ低減処理部１７に入力された画像は、フィルタリング部１０１においてローパスフィルタ処理後に縮小される。縮小された画像は、次段のフィルタリング部１１１に出力されると共に、拡大処理部１０２に出力され、減算部１０３において処理前の画像との間で減算処理がなされ、減算処理後の画像に対してノイズ低減部１０４によりノイズ低減処理が行われる。
【００３４】
後段以降のフィルタリング部１１１，１２１、拡大処理部１１２，１２２、減算部１１３，１２３、ノイズ低減部１１４，１２４等においても同様の処理がなされ、各処理後の画像が加算部１２６，１１６，１０６において拡大処理部１２５，１１５，１０５により拡大された後段の画像と加算され、加算部１０６からの出力が最終的なノイズ低減処理後の画像として出力される。
なお、本実施形態においては、ノイズ低減処理に先立って光学特性に基づく画像補正をする構成としているが、必ずしもこれに限られず、ノイズ低減処理後に画像補正を行う構成としてもよい。
【００３５】
出力画像構成部１８は、ノイズ低減された画像に対して、後処理としてエッジ強調や色強調等のような画像強調処理を行い、出力画像にするための情報（例えばＥｘｉｆデータ等）の付加や出力フォーマットによる変換処理（例えばＪＰＥＧ変換等）を行うことによって最終的な出力画像を生成し、出力する。
【００３６】
処理制御部１９は、画像処理装置１を構成する各部の処理の管理、制御を行う。具体的には撮影条件設定部１１、入力部１２、画像補正部１４、ノイズ低減情報更新部１６、ノイズ低減処理部１７及び出力画像構成部１８に処理の指示や処理に必要な情報の送受信を行う。
【００３７】
以下、このように構成された画像処理装置１の作用、すなわち上記画像処理装置１によるノイズ低減処理について、図８のフローチャートを参照しつつ説明する。
ステップＳ１０１において、撮影条件設定部１１により処理制御部１９を介して撮像部９における撮影条件を設定する。また、画像の撮像に先立って、撮像部９の撮像光学系８に付随する記憶部７から光学特性情報を取得しておく。次のステップＳ１０２では、処理制御部１９から撮像部９に対して撮像指示を行い、撮像部９において画像を取得し、得られた画像に関して入力部１２を経由して前処理部１３により前処理を行う。
【００３８】
ステップＳ１０３では、処理制御部１９を介して取得した撮影条件及び光学特性情報に基づき、画像補正部１４において前処理後の画像に対する補正を行う。本実施形態では画像補正として回折により発生するボケの補正を行っている。回折ボケは主に光学系のＦ値に起因することから、Ｆ値に応じて補正を制御する。ボケ補正前後のＭＴＦ特性は図４に示した通りである。
【００３９】
次のステップＳ１０４では、基本ノイズ低減情報を取得する。すなわち、ノイズ低減情報更新部１６により、基本ノイズ低減情報記憶部１５に記憶された複数の基本ノイズ低減情報（図５）から撮影条件に対応する基本ノイズ低減情報を抽出し取得する。上述のように、基本ノイズ低減情報はＩＳＯ感度ごとに記憶されており、撮影条件のＩＳＯ感度に該当する基本ノイズ低減情報を取得する。
【００４０】
ステップＳ１０５では、ノイズ低減情報更新部１６において、取得した基本ノイズ低減情報に対して、光学特性情報としてのゲイン特性（図２）を適用してノイズ低減情報を更新し、新たなノイズ低減情報を生成する。ステップＳ１０６では、ノイズ低減処理部１７において、更新された新たなノイズ低減情報を用いて光学特性に基づく補正後の画像に対してノイズ低減処理を行う。ここでは撮像系に依存したノイズ低減処理が行われるので撮像系に適したノイズ低減となる。ステップＳ１０７で出力画像構成部１８において画像強調等の後処理を行い、画像を出力用のフォーマットに再構成することにより出力用の画像を生成し、生成された画像を出力する。
【００４１】
このように本実施形態によれば、ノイズ低減情報更新部により、基本ノイズ低減情報記憶部に予め記憶されている輝度値に対するノイズ量を示す基本ノイズ低減情報を更新する際に、画像を取得した際の撮影条件及び光学特性情報に基づいた更新を行うので、更新されたノイズ低減情報を用いたノイズ低減により、光学特性を考慮したノイズ低減を行うことができる。すなわち、基本ノイズ低減情報を、撮影条件及び光学特性情報に基づいて、画像の補正によって生じるノイズ量の変動を抑制するように更新するので、画像補正を行うことによってノイズ量が増加等変動した場合であっても効果的にノイズ低減を行うことができる。したがって、撮像光学系の特性に基づく補正に起因するノイズの変動の影響を抑制し、高画質な画像を生成することができる。
【００４２】
（変形例１）
図９に、画像補正前後の差分画像情報生成を示す。図９に示すように、補正前画像では歪曲収差（ディストーション）が発生している。これを画像補正部１４によりで補正することで歪みのない画像となる。
【００４３】
そこで、本変形例では、画像補正前後における変化を調べ、画像の変化が生じている箇所の輝度、位置に基づき処理制御部１９において光学特性情報を生成する。
つまり、光学特性情報は画像の歪曲収差補正前後で変化している位置とその輝度値による。歪曲収差補正の位置は主に撮像光学系に依存することから、撮像部９により取得する画像上の位置の情報を記憶部７で予め記憶しておく等、光学特性情報の生成前に処理制御部１９が取得すればよい。
【００４４】
本変形例においても、輝度値の変化により元の画像のノイズの状態も変化する（輝度が大きくなるとノイズも大きくなる、等）ので、輝度値に応じた基本ノイズ低減情報に対して、輝度が変化している位置についてのみ基本ノイズ低減情報を更新し、通常のノイズ低減処理とは異なるノイズ低減を行うようにノイズ低減情報を更新する。
このように画像上の位置に応じて生成された光学特性情報に基づいて基本ノイズ低減情報を更新することで、画像上の位置に応じたノイズ低減を行うことができ、歪曲収差（ディストーション）に鑑みたノイズ低減を行うことができる。
【００４５】
（変形例２）
撮像部９の撮像光学系が焦点距離可変機構を持ち、焦点距離を変更可能である場合のノイズ低減情報の更新は以下のように行われる。
撮像光学系のＭＴＦ特性は焦点距離により変化するが、撮像光学系がカバーする全ての焦点距離に対してＭＴＦ特性に基づくノイズ低減情報を基本ノイズ低減情報記憶部１５に記憶しておくことは現実的でない。このため、予め複数の焦点距離に関する基本ノイズ低減情報を記憶しておき、焦点距離に応じた実際の基本ノイズ低減情報として、記憶されている基本ノイズ低減情報を重み付け補間することで算出することができる。
【００４６】
具体的には、焦点Ｆ０のときの基本ノイズ低減情報成分をＰ０、焦点距離Ｆ１のときの基本ノイズ低減情報成分をＰ１とする。基本ノイズ低減情報成分は図５の所定の輝度に対するノイズの関係を表すものとする。また焦点距離Ｆ０〜Ｆ１の間のＭＴＦ特性の変化は線形性を保つものとする。
焦点距離Ｆ（Ｆ０≦Ｆ≦Ｆ１）の基本ノイズ低減情報成分Ｐを次式のように定義することができる。
【００４７】
【数１】
2016015685.tif 000003
【００４８】
これにより、焦点位置が変わることでＭＴＦ特性及び焦点位置に起因する補正に伴うノイズ特性が変化しても適切にノイズ低減情報を生成することができ、焦点距離に応じたノイズ低減情報の算出（及びノイズ低減）が可能になる。
【符号の説明】
【００４９】
１  画像処理装置
９  撮像部
１１  撮影条件設定部
１２  入力部
１３  前処理部
１４  画像補正部
１５  基本ノイズ低減情報記憶部
１６  ノイズ低減情報更新部
１７  ノイズ低減処理部
１８  出力画像構成部
１９  処理制御部
【図１】
2016015685.tif 000004
【図２】
2016015685.tif 000005
【図３】
2016015685.tif 000006
【図４】
2016015685.tif 000007
【図５】
2016015685.tif 000008
【図６】
2016015685.tif 000009
【図７】
2016015685.tif 000010
【図８】
2016015685.tif 000011
【図９】
2016015685.tif 000012