(57)【特許請求の範囲】
【請求項１】
画素に対応する所定の表色系の色成分信号で表される画像から、飽和画素に対応する飽和領域を抽出する飽和領域抽出部と、
前記画像の前記飽和領域と接する領域に含まれる画素に対応する色成分信号から複数の色成分信号の信号比率を取得する色成分比率取得部と、
前記飽和領域に含まれる前記飽和画素の複数の色成分信号の信号比率を、前記色成分比率取得部が取得した複数の色成分信号の信号比率に近づけるように、前記飽和領域の各画素の色成分信号を変更する色成分信号変更部とを備えることを特徴とする画像処理装置。
【請求項２】
請求項１に記載の画像処理装置において、
前記画像を表す色成分信号は、ＲＡＷ形式のデータであることを特徴とする画像処理装置。
【請求項３】
請求項１または２に記載の画像処理装置において、
前記飽和画素は、当該画素とその隣接する画素群において、対応する複数の色成分信号のうち少なくとも１つの色成分信号が飽和している画素であることを特徴とする画像処理装置。
【請求項４】
請求項１〜３のいずれか一項に記載の画像処理装置において、
前記飽和領域抽出部は、前記画像の肌色領域から前記飽和領域を抽出することを特徴とする画像処理装置。
【請求項５】
請求項１〜４のいずれか一項に記載の画像処理装置において、
前記色成分信号変更部は、前記飽和画素に対応する複数の色成分信号の全てが飽和しているか否かを判断し、全てが飽和している場合に、前記複数の色成分信号の中で前記飽和領域の範囲が最も狭い色成分の信号を基準信号とし、この基準信号を前記画像の前記飽和領域と接する領域に含まれる画素に対応する色成分信号を用いて算出し、前記算出した基準信号と前記複数の色成分信号の信号比率とに基づいて前記飽和画素に対応する色成分信号を変更することを特徴とする画像処理装置。
【請求項６】
請求項５に記載の画像処理装置において、
前記色成分信号変更部は、前記飽和画素に対応する複数の色成分信号の中で飽和していない色成分信号が存在する場合、前記色成分信号の中で最も信号値が小さい色成分の信号を基準信号とし、この基準信号と前記複数の色成分信号の信号比率とに基づいて前記飽和画素に対応する色成分信号を変更することを特徴とする画像処理装置。
【請求項７】
請求項５または６に記載の画像処理装置において、
前記色成分信号変更部によって色成分信号が変更された場合、前記変更後の色成分信号で表される画像の輝度レベルを低下させる輝度低下部をさらに備えることを特徴とする画像処理装置。
【請求項８】
請求項５または６に記載の画像処理装置において、
前記色成分信号変更部によって色成分信号が変更された場合、前記飽和領域および当該飽和領域と接する領域間において前記色成分信号が徐々に変化するように前記色成分信号を平滑化する平滑化部をさらに備えることを特徴とする画像処理装置。
【請求項９】
画像処理プログラムを有し、
該画像処理プログラムは、
画素に対応する所定の表色系の色成分信号で表される画像から、飽和画素に対応する飽和領域を抽出する飽和領域抽出命令と、
前記画像の前記飽和領域と接する領域に含まれる画素に対応する色成分信号から複数の色成分信号の信号比率を取得する色成分比率取得命令と、
前記飽和領域に含まれる前記飽和画素の複数の色成分信号の信号比率を、前記取得した複数の色成分信号の信号比率に近づけるように、前記飽和領域の各画素の色成分信号を変更する色成分信号変更命令とを有することを特徴とするコンピュータ読み込み可能なコンピュータプログラム製品。
【請求項１０】
画素に対応する所定の表色系の色成分信号で表される画像から、飽和画素に対応する飽和領域を抽出し、
前記画像の前記飽和領域と接する領域に含まれる画素に対応する色成分信号から複数の色成分信号の信号比率を取得し、
前記飽和領域に含まれる前記飽和画素の複数の色成分信号の信号比率を、前記取得した複数の色成分信号の信号比率に近づけるように、前記飽和領域の各画素の色成分信号を変更することを特徴とする画像処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、電子画像に対する画像処理に関する。
【背景技術】
【０００２】
被写体像を撮像して撮像信号を出力する撮像素子は、素子を構成する画素に一定レベル以上の強い光が入射されると、当該画素からの出力信号が飽和する。飽和した画素からの信号値は全て飽和レベルとして扱われるため、いわゆる白とび画像として観察される。このような画素の飽和を避けるため、撮像素子に異なる撮像感度の受光素子群を併存させ、撮像感度が高い側の受光素子からの出力信号が飽和した場合には撮像感度が低い側の受光素子からの出力信号を用いることにより、白とび画像の発生を抑える技術が特許文献１に開示されている。【０００３】
【特許文献１】特開２０００−１２５２０９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
撮像感度が高い受光素子群と撮像感度が低い受光素子群とを撮像素子に併存させることはコスト上昇の要因になる。そこで、この様な高感度と低感度の受光素子を併存させた特殊な撮像素子ではなく、一種類の撮像感度を持つ受光素子群で構成された一般的な撮像素子で撮像された画像について、画素の飽和が発生している場合には当該飽和画素からの飽和信号を補正する技術が望まれる。
【課題を解決するための手段】
【０００５】
請求項１の発明による画像処理装置は、画素に対応する所定の表色系の色成分信号で表される画像から、飽和画素に対応する飽和領域を抽出する飽和領域抽出部と、前記画像の前記飽和領域と接する領域に含まれる画素に対応する色成分信号から複数の色成分信号の信号比率を取得する色成分比率取得部と、前記飽和領域に含まれる前記飽和画素の複数の色成分信号の信号比率を、前記色成分比率取得部が取得した複数の色成分信号の信号比率に近づけるように、前記飽和領域の各画素の色成分信号を変更する色成分信号変更部とを備えることを特徴とする。
請求項２の発明は、請求項１の画像処理装置において、前記画像を表す色成分信号は、ＲＡＷ形式のデータであることを特徴とする。
請求項３の発明は、請求項１または２の画像処理装置において、前記飽和画素は、当該画素とその隣接する画素群において、対応する複数の色成分信号のうち少なくとも１つの色成分信号が飽和している画素であることを特徴とする。
請求項４の発明は、請求項１〜３のいずれかの画像処理装置において、前記飽和領域抽出部は、前記画像の肌色領域から前記飽和領域を抽出することを特徴とする。
請求項５の発明は、請求項１〜４のいずれかの画像処理装置において、前記色成分信号変更部は、前記飽和画素に対応する複数の色成分信号の全てが飽和しているか否かを判断し、全てが飽和している場合に、前記複数の色成分信号の中で前記飽和領域の範囲が最も狭い色成分の信号を基準信号とし、この基準信号を前記画像の前記飽和領域と接する領域に含まれる画素に対応する色成分信号を用いて算出し、前記算出した基準信号と前記複数の色成分信号の信号比率とに基づいて前記飽和画素に対応する色成分信号を変更することを特徴とする。
請求項６の発明は、請求項５の画像処理装置において、前記色成分信号変更部は、前記飽和画素に対応する複数の色成分信号の中で飽和していない色成分信号が存在する場合、前記色成分信号の中で最も信号値が小さい色成分の信号を基準信号とし、この基準信号と前記複数の色成分信号の信号比率とに基づいて前記飽和画素に対応する色成分信号を変更することを特徴とする。
請求項７の発明は、請求項５または６の画像処理装置において、前記色成分信号変更部によって色成分信号が変更された場合、前記変更後の色成分信号で表される画像の輝度レベルを低下させる輝度低下部をさらに備えることを特徴とする。
請求項８の発明は、請求項５または６の画像処理装置において、前記色成分信号変更部によって色成分信号が変更された場合、前記飽和領域および当該飽和領域と接する領域間において前記色成分信号が徐々に変化するように前記色成分信号を平滑化する平滑化部をさらに備えることを特徴とする。
請求項９の発明によるコンピュータ読み込み可能なコンピュータプログラム製品は、画像処理プログラムを有し、該画像処理プログラムは、画素に対応する所定の表色系の色成分信号で表される画像から、飽和画素に対応する飽和領域を抽出する飽和領域抽出命令と、前記画像の前記飽和領域と接する領域に含まれる画素に対応する色成分信号から複数の色成分信号の信号比率を取得する色成分比率取得命令と、前記飽和領域に含まれる前記飽和画素の複数の色成分信号の信号比率を、前記取得した複数の色成分信号の信号比率に近づけるように、前記飽和領域の各画素の色成分信号を変更する色成分信号変更命令とを有することを特徴とする。
請求項１０の発明による画像処理方法は、画素に対応する所定の表色系の色成分信号で表される画像から、飽和画素に対応する飽和領域を抽出し、前記画像の前記飽和領域と接する領域に含まれる画素に対応する色成分信号から複数の色成分信号の信号比率を取得し、前記飽和領域に含まれる前記飽和画素の複数の色成分信号の信号比率を、前記取得した複数の色成分信号の信号比率に近づけるように、前記飽和領域の各画素の色成分信号を変更することを特徴とする。
【発明の効果】
【０００６】
本発明によれば、撮像されたカラー画像に含まれる飽和領域の画素を補正できる。
【図面の簡単な説明】
【０００７】
【図１】画像処理プログラムの処理の流れを説明するフローチャートである。
【図２】プログラムを実行するコンピュータ装置を説明する図である。
【図３】カラー電子画像の飽和領域を説明する図である。
【図４】飽和領域βおよび飽和領域βに含まれる画素の色成分信号を説明する図である。
【図５】飽和領域αと飽和領域βおよびこれら飽和領域αと飽和領域βに含まれる画素の色成分信号を説明する図である。
【図６】図５のＢ色成分信号を抜粋した図である。
【図７】ステップＳ９の処理を説明する図である。
【図８】推定された画素の色成分信号の分布を説明する図である。
【図９】ステップＳ１１の処理を説明する図である。
【図１０】電子カメラの構成を示す図である。
【発明を実施するための最良の形態】
【０００８】
本発明による画像処理装置は、カラー電子画像の信号に含まれる飽和信号を補正する。画像処理装置が補正処理の対象とする電子カラー画像は、たとえば、ＣＣＤイメージセンサなどで構成される撮像装置によって撮像されたものである。撮像装置は、イメージセンサの撮像面上に結像された被写体像を撮像し、撮像装置から出力される画像信号は、各画素に入射される光の強さに応じてその信号レベルが異なる。【０００９】
撮像装置の撮像面には、たとえば、Ｒ（赤）、Ｇ（緑）およびＢ（青）のフィルタがベイヤー配列された色分解フィルタが、イメージセンサのそれぞれの受光素子の位置に対応するように設けられている。撮像装置が上記色分解フィルタを通して被写体像を撮像するため、撮像装置から出力される信号は１画素当たりＲＧＢのいずれか１つの色成分の情報を有する。すなわち、Ｒ色フィルタに対応する画素からはＲ色の信号が出力され、Ｇ色フィルタに対応する画素からはＧ色の信号が出力され、Ｂ色フィルタに対応する画素からはＢ色の信号が出力される。【００１０】
一般に、イメージセンサの画素を構成する受光素子の出力は、ＡＤコンバータでデジタルデータに変換される。その扱える値には制限があり、例えば１２ビットＡＤコンバータを使用する場合はデータ範囲は０〜４０９５の範囲である。あるレベル以上の強い光が入射されると飽和し、さらに強い光が入射してもＡＤの出力信号値は変化しない。本説明では、隣接し合ったいくつかの画素が、Ｒ成分、Ｇ成分、Ｂ成分のいずれかについて、取り得る値の最大値を示す画素群の一つの画素を「飽和画素」と呼び、飽和画素に対応する画像信号を「飽和信号」と呼ぶ。【００１１】
以下、図面を参照して本発明を実施するための最良の形態について説明する。図１は、本発明による画像処理プログラムの処理の流れを説明するフローチャートである。本実施形態では、図１の処理を行うプログラムを図２に示すコンピュータ装置１００に実行させることにより、画像処理装置を提供する。画像処理プログラムをパーソナルコンピュータ１００に取込んで使用する場合には、パーソナルコンピュータ１００のデータストレージ装置にプログラムをローディングした上で、当該プログラムを実行させることによって画像処理装置として使用する。【００１２】
パーソナルコンピュータ１００に対するプログラムのローディングは、プログラムを格納したＣＤ−ＲＯＭなどの記録媒体１０４をパーソナルコンピュータ１００にセットして行ってもよいし、ネットワークなどの通信回線１０１を経由する方法でパーソナルコンピュータ１００へローディングしてもよい。通信回線１０１を経由する場合は、通信回線１０１に接続されたサーバー（コンピュータ）１０２のハードディスク装置１０３などにプログラムを格納しておく。また、通信回線１０１を経由する場合は、プログラムをデータ信号として搬送波に乗せて送信する。このように、プログラムは記録媒体１０４や通信回線１０１を介するデータ信号での提供など、種々の形態のコンピュータプログラム製品として供給される。【００１３】
図１のステップＳ１において、コンピュータ装置１００（図２）のＣＰＵは、処理対象とするカラー電子画像の肌色領域を検出してステップＳ２へ進む。具体的には、カラー電子画像を構成する画素の色を示す信号であって、ＲＧＢ表色系で表されている色成分信号（R,G,B）についてのＲ成分、Ｇ成分、およびＢ成分の信号比率があらかじめ定められている所定範囲内である場合に、当該画素位置をカラー電子画像における肌色領域とみなす。一般に肌色領域は、Ｂ成分の比率がＲ成分およびＧ成分に比べて小さい。なお、色成分信号（R,G,B）は、ホワイトバランス処理やガンマ補正処理などの信号処理が施されていないＲＡＷ形式のデータとする。【００１４】
肌色領域の検出は、上記色成分間の信号比率を用いた色判定による方式の他に、画像中の顔などの特定形状パターンを抽出する（いわゆる顔検出）方式や、パーソナルコンピュータ１００のポインティング部材（不図示）から指定入力された領域を検出する方式として構成してもよい。【００１５】
ステップＳ２において、ＣＰＵは、ステップＳ１で検出した肌色領域内に含まれる色成分信号（R,G,B）について、飽和領域を検出してステップＳ３へ進む。飽和領域は、カラー電子画像の中で上記飽和画素に対応する領域である。ＣＰＵは、たとえば、色成分信号が１２ビット出力（フルスケール４０９５）のＡ／Ｄ変換器を用いてディジタル化されている場合、少なくとも１つの色成分の信号値が４０９５以上の場合に飽和画素とみなす。【００１６】
ステップＳ３において、ＣＰＵは飽和領域βを検出してステップＳ４へ進む。飽和領域βは、上記飽和領域の中で１つまたは２つの色成分の信号が飽和している画素がいくつか連なった領域とする。【００１７】
ステップＳ４において、ＣＰＵは飽和領域αを検出してステップＳ５へ進む。飽和領域αは、上記飽和領域βの中で３つの色成分の信号が全て飽和している画素の領域とする。【００１８】
図３は、処理対象とするカラー電子画像の飽和領域の分布を説明する図である。高画素数化が進んだ撮像装置で撮像した画像は、図３の様に、飽和領域βと飽和領域αが存在しているときには、飽和領域隣接部に囲まれて飽和領域βが存在し、飽和領域β内に飽和領域αが存在する。飽和領域隣接部には飽和画素は存在しない（３つの色成分の信号が全て非飽和である）。【００１９】
図４は、飽和領域βおよび飽和領域βに含まれる画素の色成分信号（Rs,Gs,Bs）を説明する図である。横軸は画素位置を表し、縦軸は信号値を表す。図４において、飽和領域βでは少なくともＢ色成分の信号が飽和せず、Ｒ成分およびＧ成分の少なくとも一方の信号が飽和している。飽和信号は飽和レベルのまま変化がない。破線４１は、Ｒ色成分の信号が飽和しなければ得られたであろう信号曲線を例示し、破線４２は、Ｇ色成分の信号が飽和しなければ得られたであろう信号曲線を例示する。【００２０】
図５は、飽和領域αと飽和領域βに含まれる画素の色成分信号（Rs,Gs,Bs）を説明する図である。横軸は画素位置を表し、縦軸は信号値を表す。図５において、飽和領域βでは少なくともＢ色成分の信号が飽和せず、Ｒ成分およびＧ成分の少なくとも一方の信号が飽和している。飽和領域αでは全ての色成分の信号が飽和している。飽和信号は飽和レベルのまま変化がない。破線５１は、Ｒ色成分の信号が飽和しなければ得られたであろう信号曲線を例示し、破線５２は、Ｇ色成分の信号が飽和しなければ得られたであろう信号曲線を例示する。また、破線５３は、Ｂ色成分の信号が飽和しなければ得られたであろう信号曲線を例示する。【００２１】
図１のステップＳ５において、ＣＰＵは以下のように基準とする色成分を選択し、ステップＳ６へ進む。すなわち、飽和領域αについては飽和領域の範囲（飽和画素が連続する範囲）が最も狭い色成分（図５の例ではＢ色成分）を選択し、飽和領域βについては非飽和の色成分のうち最も信号値が小さい色成分（図４、図５の例ではＢ色成分）を選択する。【００２２】
ステップＳ６において、ＣＰＵは飽和領域αが存在か否かを判定する。ＣＰＵは、ステップＳ４で飽和領域αが検出されている場合にステップＳ６を肯定判定してステップＳ７へ進み、ステップＳ４で飽和領域αが検出されていない場合にはステップＳ６を否定判定し、ステップＳ８へ進む。ステップＳ８へ進む場合は、非飽和の色成分のうち最も信号値が小さいＢ色成分の信号を飽和領域βにおける基準の色成分情報Bbとする。【００２３】
ステップＳ７において、ＣＰＵは基準とする色成分の情報を推測してステップＳ８へ進む。図６は、図５のＢ成分についての信号を抜粋した図である。ＣＰＵは、ステップＳ５において選択した色成分（本例ではＢ色成分）について、信号が飽和しなければ得られたであろう飽和領域αにおける曲線５３を推測する。【００２４】
この場合の推測は、飽和領域αを挟むように飽和領域αの両側に位置する飽和領域βのＢ色成分の信号値の変化（傾き）をそれぞれ求め、これらの傾きに周知のスプライン補間処理を施すことによって行う。この場合にスプライン曲線は二次式が好ましいが、三次以上の高次式を用いてもよい。飽和領域βの範囲が狭い場合には、飽和領域βだけでなく、飽和領域隣接部に含まれるＢ色成分の信号値も用いて信号の傾きを求めるとよい。この結果、破線で示した曲線５３が得られる。ＣＰＵは、Ｂ色成分の曲線５３によって示される信号を飽和領域αにおける基準の色成分情報Bbとする。なお、曲線５３の推測は、スプライン補間処理以外の公知な手法であってもよい。【００２５】
ステップＳ８において、ＣＰＵは、飽和領域βに接する飽和領域隣接部に含まれる画素（領域周辺画素（図３）と呼ぶ）についての色情報を取得してステップＳ９へ進む。色情報は、たとえば、領域周辺画素に対応する色成分信号（R,G,B）の色成分比率である。色情報は、飽和領域βに近い画素について取得するのが好ましい。【００２６】
ステップＳ９において、ＣＰＵは、飽和領域周辺から飽和領域β内部へ向けて色成分の情報を推測し、ステップＳ１０へ進む。この場合の推測は、飽和領域βおよび飽和領域αにおける色成分信号（Rs,Gs,Bs）の色成分比率を、ステップＳ８で取得した領域周辺画素に対応する色成分信号（R,G,B）の色成分比率と同じに揃えることによって行う。ＣＰＵは、基準の色成分情報（本例ではＢ色成分Bb）にステップＳ８で取得したＲ色成分の色成分比率、およびステップＳ８で取得したＧ色成分の色成分比率をそれぞれ乗算することにより、Ｒ色成分の信号RrおよびＧ色成分の信号Grをそれぞれ算出する。【００２７】
図７は、ステップＳ９の処理を説明する図である。図７の矢印が示すように、飽和領域隣接部に含まれる領域周辺画素から飽和領域β内部へ向けて、それぞれの方向から推測する。そして、飽和領域中の各画素の色成分信号（Rr,Gr）を推定する。図８は、ステップＳ９で推定されたG色成分およびR色成分を説明する図である。この結果、図８において破線で示した曲線８１のように、Ｒ色成分の信号が得られる。また、図８において破線で示した曲線８２のように、Ｇ色成分の信号が得られる。また、図５に示すような飽和領域αを有している場合も同様に各画素の色成分信号（Rr,Gr）を得ることができる。以下の工程では飽和領域αの有無に関係なく同じ処理が行われるので、図４に示す飽和領域を有したケースの説明のみを行う。【００２８】
ステップＳ１０において、ＣＰＵは、飽和領域α、飽和領域βに含まれる画素に対応する色成分信号（Rs,Gs,Bs）のうち、Ｒ成分の信号Rsを曲線８１で示される信号Rrに、Ｇ成分の信号Gsを曲線８２で示される信号Grに、それぞれ変更（置換）してステップＳ１１へ進む。これにより、飽和領域α、飽和領域βについての色成分信号（Rr,Gr,Bs）が得られる。なお、飽和領域隣接部に含まれる画素の色成分信号についての変更は不要であり、色成分信号（R,G,B）のままでよい。【００２９】
ステップＳ１１において、ＣＰＵはＲＡＷ画像の展開処理を行う。展開処理では、ステップＳ９で推測した信号曲線のうち最も信号値が大きい色成分を選択し、Ｇ色成分の曲線８２の最大値を飽和レベルより低くするように、カラー電子画像全体の輝度レベルに１より小さい値のゲインを掛けて低くする。具体的には、飽和レベルが４０９５、下げ幅がｄの場合、（４０９５／(４０９５＋ｄ)）で表されるゲインを掛ける。飽和領域α、飽和領域βについては色成分信号（Rr,Gr,Bs）にも同様に設定されたゲインを掛けて低くするとともに、飽和領域隣接部を含む他の領域についての色成分信号（R,G,B）にも同様にゲインを掛けて低くする。【００３０】
図９は、ステップＳ１１の処理を説明する図である。図４と同様に横軸は画素位置を表し、縦軸は信号値を表す。図９によれば、輝度レベルを低くしたことにより、どの色成分の信号値も飽和レベルより低く表されている。ＣＰＵはさらに、飽和領域βと飽和領域隣接部との境界において色成分信号が徐々に変化するように、色成分信号の不連続部分を平滑化する平滑化処理を行う。ＣＰＵは、ステップＳ１１の処理を行うと図２による一連の処理を終了する。【００３１】
以上説明した実施形態によれば、次の作用効果が得られる。
（１）カラー電子画像の中で、画素が飽和している箇所（飽和領域）の信号の色成分比率を画素が飽和していない箇所（飽和領域隣接部）の信号の色成分比率と揃えるように、上記飽和領域内で飽和している色成分の信号を推測するようにした。したがって、撮像素子の受光素子間の感度を異ならせることなしに共通の感度で撮像した単一の画像データについて、飽和信号の復元処理を撮影後に行うことができる。また、飽和領域と非飽和領域とで色成分比率を揃えるようにしたので、画像の観察者にとって違和感が少ない、より自然な色に復元できる。【００３２】
（２）電子画像の肌色部分について飽和信号の復元を行うようにしたので、他の色に比べて視覚的に悪影響が大きい肌色部分の白飛びを効果的に抑制できる。一般に、肌の色はなだらかなグラデーションを有して色相の変化が少ないため、飽和領域と非飽和領域とで色成分比率を揃える本実施形態の復元方法は特に有効である。さらに、肌色はＢ成分の信号比率がＲ成分およびＧ成分の信号比率に比べて小さいことから、少なくともＢ色成分の信号が飽和しないで階調情報を保持している可能性が高い。したがって、全ての色成分の信号が飽和する場合に比べて、より自然な色に復元することができる。【００３３】
（３）飽和領域と非飽和領域との境界部分において、色成分信号の変化の不連続部分を平滑化するようにしたので、復元後の画像の色合いが境界部分で階段状に変化することなく、画像の観察者にとって違和感が少なくなるように復元することができる。【００３４】
以上の説明ではＲＡＷ形式のデータに対して飽和信号を修復する処理を説明したが、本発明はＪＰＥＧ形式のデータなど、ＲＡＷ形式でないデータに対する修復処理においても適用が可能である。【００３５】
飽和領域を肌色領域の中から検出するようにしたが、飽和信号の復元処理を肌色以外の領域についても行うようにしてもよい。この場合にはステップＳ１を省略し、ステップＳ２から開始する構成とすればよい。【００３６】
飽和画素とみなす判定閾値を信号値４０９５とする例を説明したが、判定閾値は４０００以上の場合などに適宜変更してよい。また、色成分信号が１２ビットデータして表現されている例を説明したが、他のビットデータ（１４ビット、１６ビット等）の場合でも本発明を適用できる。【００３７】
ステップＳ１１の説明において、飽和領域βと飽和領域隣接部との境界において平滑化処理を行う例を説明したが、飽和領域αが存在する場合には、飽和領域αと飽和領域βとの境界においても平滑化処理を行うように構成してよい。【００３８】
カラー電子画像がＲＧＢの色分解フィルタを通して撮影された原色系画像信号で表されている例を説明したが、補色系色分解フィルタを通して撮影された補色系画像信号で表されている画像にも本発明を適用できる。なお、色分解数は３色に限らず、４色のものであってもよい。【００３９】
図１による画像処理プログラムを電子カメラに搭載するようにしてもよい。この場合の電子カメラは、撮影した電子画像データを記録媒体へ記録する場合に、飽和信号の復元処理を施した後の画像信号と、飽和信号の復元処理を施していない画像信号との両方を記録する。なお、電子カメラへの機能設定内容に応じて、いずれか一方の画像信号のみを記録媒体に記録する構成にしてもよい。【００４０】
図１０は、上記電子カメラ（デジタルカメラ）２００の構成を示す図である。ＣＣＤなどの撮像素子２０３は、撮影レンズ２０２を介して被写体２０１を撮像する。制御装置２０４は、撮像素子２０３からの出力信号に基づき電子画像データを生成しメモリ２０５にいったん格納する。制御装置２０４は、メモリ２０５に格納された電子画像データに対して前述した飽和信号の復元処理の画像処理を行い、飽和信号の復元処理を施した後の画像信号と飽和信号の復元処理を施していない画像信号との両方を、電子画像データとしてメモリーカードなどの記録媒体２０６に記録する。これらの処理は、メモリ２０５に格納された画像処理プログラムを実行することにより行われる。【００４１】
以上の説明はあくまで一例であり、発明を解釈する上で、上記の実施形態の構成要素と本発明の構成要素との対応関係に何ら限定されるものではない。【００４２】
次の優先権基礎出願の開示内容は引用文としてここに組み込まれる。
日本国特許出願２００５年第１７３８０６号（２００５年６月１４日出願）
【図１】
0004803178.tif 000002
【図２】
0004803178.tif 000003
【図３】
0004803178.tif 000004
【図４】
0004803178.tif 000005
【図５】
0004803178.tif 000006
【図６】
0004803178.tif 000007
【図７】
0004803178.tif 000008
【図８】
0004803178.tif 000009
【図９】
0004803178.tif 000010
【図１０】
0004803178.tif 000011