(57)【要約】【課題】明部領域と暗部領域が共存する画像では、ホワイトバランス後の画像は暗部領域が適切に調整されない場合があり、それを解決する。【解決手段】撮像部１００から出力される画像データを処理する画像処理装置２００は、画像データについてホワイトバランス調整を行うホワイトバランス処理部２１０と、該ホワイトバランス調整された画像データについて、各画素もしくは一定の大きさを持つ領域ごとに、色味調整を行うかどうか判定する色味調整判定部２２０、該色味調整判定部２２で色味調整が必要と判定された場合、ホワイトバランス処理部２１０でホワイトバランス調整された画像データの当該画素もしくは領域について色味調整を行う色味調整部２３０を備える。ここで、色味調整判定部２２０では、画素の輝度の大きさと色の偏りとから色味調整を行うかどうか判定する。【選択図】図１
2011250276.tif 000002
【特許請求の範囲】
【請求項１】
撮像素子で得られた画像データを処理する画像処理装置において、
前記画像データについてホワイトバランス処理を行うホワイトバランス処理手段と、
前記ホワイトバランス処理手段でホワイトバランス処理された画像データについて、各画素もしくは一定の大きさを持つ領域ごとに、色味調整を行うかどうか判定する色味調整判定手段と、
前記色味調整判定手段で色味調整が必要と判定された場合、前記ホワイトバランス処理手段でホワイトバランス処理された画像データの当該画素もしくは領域について色味調整を行う色味調整手段と、
を有することを特徴とする画像処理装置。
【請求項２】
前記色味調整判定手段は、画素の輝度の大きさと色の偏りとから色味調整を行うかどうか判定することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
画像上の画素の位置情報を算出する画素位置情報算出手段を更に有し、
前記色味調整手段は、前記画素位置情報算出手段で算出された位置情報に基づいて色味調整の度合いを変更することを特徴とする請求項１又は２に記載の画像処理装置。
【請求項４】
画像全体から一定値以上の輝度を持つ画素の数をカウントする明画素カウント手段を更に有し、
前記明画素カウント手段のカウント数が一定数以上の場合、前記ホワイトバランス処理された画像データに対して、前記色味調整手段で色味調整を行わないようにすることを特徴とする請求項１乃至３のいずれか１項に記載の画像処理装置。
【請求項５】
前記撮像素子の露光時間を取得する露光時間取得手段を更に有し、
前記露光時間取得手段で取得された露光時間が一定値以下の場合、前記ホワイトバランス処理された画像データに対して、前記色味調整手段で色味調整を行わないようにすることを特徴とする請求項１乃至３のいずれか１項に記載の画像処理装置。
【請求項６】
撮像素子で得られた画像データを処理する画像処理方法において、
前記画像データについてホワイトバランス処理を行うホワイトバランス処理過程と、
前記ホワイトバランス処理過程でホワイトバランス処理された画像データについて、各画素もしくは一定の大きさを持つ領域ごとに、色味調整を行うかどうか判定する色味調整判定過程と、
前記色味調整判定過程で色味調整が必要と判定された場合、前記ホワイトバランス処理過程でホワイトバランス処理された画像データの当該画素もしくは領域について色味調整を行う色味調整過程と、
を有することを特徴とする画像処理方法。
【請求項７】
前記色味調整判定過程では、画素の輝度の大きさと色の偏りとから色味調整を行うかどうか判定することを特徴とする請求項６に記載の画像処理方法。
【請求項８】
画像上の画素の位置情報を算出する画素位置情報算出過程を更に有し、
前記色味調整過程は、前記画素位置情報算出過程で算出された位置情報に基づいて色味調整の度合いを変更することを特徴とする請求項６又は７に記載の画像処理方法。
【請求項９】
画像全体から一定値以上の輝度を持つ画素の数をカウントする明画素カウント過程を更に有し、
前記明画素カウント過程で得られたカウント数が一定数以上の場合、前記ホワイトバランス処理された画像データに対して、前記色味調整過程で色味調整を行わないようにすることを特徴とする請求項６乃至８のいずれか１項に記載の画像処理方法。
【請求項１０】
前記撮像素子の露光時間を取得する露光時間取得過程を更に有し、
前記露光時間取得過程で取得された露光時間が一定値以下の場合、前記ホワイトバランス処理された画像データに対して、前記色味調整過程で色味調整を行わないようにすることを特徴とする請求項６乃至８のいずれか１項に記載の画像処理方法。
【請求項１１】
光学系と、該光学系を通して得られた撮像光を電気信号の画像データに変換する撮像素子とを有する撮像部と、
請求項１乃至５のいずれか１項に記載の画像処理装置と、
前記画像処理装置で処理された画像データを表示する表示装置と、
を備えてなる画像撮像装置。
【請求項１２】
前記画像撮像装置は車載カメラ装置であることを特徴とする請求項１１に記載の画像撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像素子で得られた画像データを処理する画像処理装置及び方法、並びに該画像処理装置を備えた画像撮像装置に関し、詳しくは、車載カメラ用途などに好適な色味調整技術に関する。
【背景技術】
【０００２】
デジタルカメラなど一般的なカメラでは、撮影画像の色味を自然に（人の見た眼と同じように）見せるために、撮像素子（センサ）で得られた画像データに対し、ホワイトバランスという色味を調整する処理を行っている。通常、ホワイトバランスは、画像データの画素のうち、輝度が所定値以上の画素の画素値（ＲＧＢ値など）を用いて色味を調整するため、夜間画像など輝度が小さい画素で構成される暗部領域が多い画像の場合は、ホワイトバランスが正しく行われない傾向がある。
【０００３】
車載カメラの場合もセンサの性能や個体差により、ホワイトバランスが正しく行われず、暗部領域において偽色ノイズが発生する。また、夜間時に車載カメラで自車両の前方を撮影する場合は、ヘッドライトの光により撮影画像の中央部のみが明るくなり、画像の周囲は暗部領域となるため、該暗部領域に強い偽色ノイズが発生して画質の低下を招くことになる。つまり、車載カメラでは、撮影画像の周囲の視認できないほど暗い領域に偽色が発生する。
【０００４】
なお、特許文献１には、デジタルカメラやカメラ付携帯電話などの撮影機能を有する電子機器において、撮像素子で得られた画像データに対してホワイトバランスを行った後に更に色味を補正する処理を行って、撮影時の色環境における被写体の色味を反映した画像を得るようにする技術が開示されているが、画面全体の色味を補正する手法のため、明部領域と暗部領域が共存する画像の場合は、暗部領域の色味も調整されてしまい、暗部領域に不自然な色が表示されてしまう恐れがある。
【発明の概要】
【発明が解決しようとする課題】
【０００５】
上述のように、通常のホワイトバランスを行っても、画面全体が明るい場合には、自然な色味に調整できていたが、画面全体内に輝度が大きい明部領域と輝度が小さい暗部領域が共存する場合は、明部領域の色味を調整するために暗部領域の色味も調整され、本来黒であるはずの暗部領域の色成分にゲインが掛かり、色が付いてしまうという問題があった。また、センサの個体差などが原因で、ホワイトバランス結果の色味が不自然になるという問題があった。これは特許文献１に記載の色味補正方法を適用しても解決されない。
【０００６】
一般的なデジタルカメラなどでは、色を忠実に再現することが要求されるため、暗部領域の色は残すように画像処理が行われるが、車載カメラでは偽色の発生箇所は視認できないほど暗い領域になるので、暗部領域の画素の色は無くしても大きな問題はないと判断される。暗部領域の画素の色をなくすという単純な処理でも、車載カメラの場合は十分な効果を得ることができる。
【０００７】
本発明は、このような点に鑑みなされたもので、映像の暗部領域で偽色ノイズが目立つことを抑えるようにした、車載カメラ用途などに好適な画像処理装置及び方法、並びに該画像処理装置を備えた画像撮像装置を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するため、請求項１の発明は、撮像素子で得られた画像データを処理する画像処理装置において、前記画像データについてホワイトバランス処理を行うホワイトバランス処理手段と、前記ホワイトバランス処理手段でホワイトバランス処理された画像データについて、各画素もしくは一定の大きさを持つ領域ごとに、色味調整を行うかどうか判定する色味調整判定手段と、前記色味調整判定手段で色味調整が必要と判定された場合、前記ホワイトバランス処理手段でホワイトバランス処理された画像データの当該画素もしくは領域について色味調整を行う色味調整手段とを有することを特徴とする。
【０００９】
請求項２の発明は、請求項１に記載の画像処理装置において、前記色味調整判定手段は、画素の輝度の大きさと色の偏りとから色味調整を行うかどうか判定することを特徴とする。
【００１０】
請求項３の発明は、請求項１又は２に記載の画像処理装置において、画像上の画素の位置情報を算出する画素位置情報算出手段を更に有し、前記色味調整手段は、前記画素位置情報算出手段で算出された位置情報に基づいて色味調整の度合いを変更することを特徴とする。
【００１１】
請求項４の発明は、請求項１乃至３のいずれか１項に記載の画像処理装置において、画像全体から一定値以上の輝度を持つ画素の数をカウントする明画素カウント手段を更に有し、前記明画素カウント手段のカウント数が一定数以上の場合、前記ホワイトバランス処理された画像データに対して、前記色味調整手段で色味調整を行わないようにすることを特徴とする。
【００１２】
請求項５の発明は、請求項１乃至３のいずれか１項に記載の画像処理装置において、前記撮像素子の露光時間を取得する露光時間取得手段を更に有し、前記露光時間取得手段で取得された露光時間が一定値以下の場合、前記ホワイトバランス処理された画像データに対して、前記色味調整手段で色味調整を行わないようにすることを特徴とする。
【００１３】
請求項６の発明は、撮像素子で得られた画像データを処理する画像処理方法において、前記画像データについてホワイトバランス処理を行うホワイトバランス処理過程と、前記ホワイトバランス処理過程でホワイトバランス処理された画像データについて、各画素もしくは一定の大きさを持つ領域ごとに、色味調整を行うかどうか判定する色味調整判定過程と、前記色味調整判定過程で色味調整が必要と判定された場合、前記ホワイトバランス処理過程でホワイトバランス処理された画像データの当該画素もしくは領域について色味調整を行う色味調整過程とを有することを特徴とする。
【００１４】
請求項７の発明は、請求項６に記載の画像処理方法において、前記色味調整判定過程では、画素の輝度の大きさと色の偏りとから色味調整を行うかどうか判定することを特徴とする。
【００１５】
請求項８の発明は、請求項６又は７に記載の画像処理方法において、画像上の画素の位置情報を算出する画素位置情報算出過程を更に有し、前記色味調整過程は、前記画素位置情報算出過程で算出された位置情報に基づいて色味調整の度合いを変更することを特徴とする。
【００１６】
請求項９の発明は、請求項６乃至８のいずれか１項に記載の画像処理方法において、画像全体から一定値以上の輝度を持つ画素の数をカウントする明画素カウント過程を更に有し、前記明画素カウント過程で得られたカウント数が一定数以上の場合、前記ホワイトバランス処理された画像データに対して、前記色味調整過程で色味調整を行わないようにすることを特徴とする。
【００１７】
請求項１０の発明は、請求項６乃至８のいずれか１項に記載の画像処理方法において、前記撮像素子の露光時間を取得する露光時間取得過程を更に有し、前記露光時間取得過程で取得された露光時間が一定値以下の場合、前記ホワイトバランス処理された画像データに対して、前記色味調整過程で色味調整を行わないようにすることを特徴とする。
【００１８】
請求項１１の発明は、光学系と、該光学系を通して得られた撮像光を電気信号の画像データに変換する撮像素子とを有する撮像部と、請求項１乃至５のいずれか１項に記載の画像処理装置と、前記画像処理装置で処理された画像データを表示する表示装置とを備えてなる画像撮像装置を特徴とする。
【００１９】
請求項１２の発明は、請求項１１の画像撮像装置は車載カメラ装置であることを特徴とする。
【発明の効果】
【００２０】
本発明の画像処理装置及び方法によれば、ホワイトバランス後の画像に対して、低輝度かつ色味に偏りのある画素あるいは一定の大きさの領域のみ色味を再調整するため、明部領域と暗部領域が共存する画像について、暗部領域の不自然な色味を抑制することができる。また、色味調整の際に、画素の位置をパラメータとして色味調整の度合いを変更することで、暗部領域の不自然な色味を画素位置に応じてより効果的に抑制することが可能になる。
【００２１】
したがって、本発明の画像処理装置を備えた画像撮像装置によれば、映像の暗部で偽色ノイズが目立つことを抑えることができる。また、比較的単純な処理で効果が上がるため、ハードウエアの回路規模を小さく抑えて実装することが可能になる。
【図面の簡単な説明】
【００２２】
【図１】本発明の第１の実施例の全体構成図である。
【図２】図１中の色味調整判定部と色味調整部の処理フローチャートである。
【図３】本発明の第２の実施例の全体構成図である。
【図４】図３中の色味調整判定部と色味調整部の処理フローチャートである。
【図５】本発明の第３の実施例の全体構成図である。
【図６】図５中の色味調整判定部と色味調整部の処理フローチャートである。
【図７】本発明の第４の実施例の全体構成図である。
【図８】図７中の色味調整判定部と色味調整部の処理フローチャートである。
【発明を実施するための形態】
【００２３】
以下、本発明の実施形態について図面を参照して説明する。
【実施例１】
【００２４】
図１に本発明の第１の実施例の全体構成図を示す。図１において、２００が本発明に係る画像処理装置であり、該画像処理装置２００と撮像部１００と表示装置３００とで画像撮像装置を構成している。そして、該画像撮像装置は、例えば車載カメラ装置として車両に搭載されて用いられる。これは後述の実施例２〜４の場合も同様である。
【００２５】
撮像部１００は、図１では省略したが、光学系、ＣＣＤやＣＭＯＭなどの撮像素子（センサ）、Ａ／Ｄ変換器などを備え、光学系を通して得た撮像光をセンサにて電気信号に変換し、該電気信号のアナログ信号をＡ／Ｄ変換器にてデジタル信号の画像データに変換する。
【００２６】
画像処理装置２００は、撮像部１００から出力される画像データを取り込んで所定の画像処理を実施する。該画像処理装置２００は、撮像部１００の出力画像データについてホワイトバランスの調整を行うホワイトバランス処理部２１０と、ホワイトバランス後の画像データに対して、各画素の色味調整を行うかどうか判定する色味調整判定部２２０と、該色味調整判定部２２０で色味調整が必要と判定された場合、ホワイトバランス後の画像データの当該画素に対して色味調整を行う色味調整部２３０とを有する。画像処理装置２００は、他にＭＴＦ補正部、ガンマ補正部などを有するが、図１では省略してある。
【００２７】
表示装置３００は、画像処理装置２００から出力される所定処理後の画像データを入力し、例えばＮＴＳＣ方式の映像信号に変換して表示する。
【００２８】
ここで、画像処理装置２００は、例えば、ＣＰＵ，ＲＯＭ，ＲＡＭ等で構成され、ＲＯＭに記憶されたプログラムをＣＰＵが実行することで、ホワイトバランス処理部２１０、色味調整判定部２２０、色味調整部２３０、その他の処理部（ＭＴＦ補正部、ガンマ補正部等）の機能を実現する。ＲＡＭは、処理途中の画像データや必要な閾値、パラメータ等を記憶するために用いられる。
【００２９】
以下、画像処理装置２００中の色味調整判定部２２０と色味調整部２３０での処理について詳述する。なお、ホワイトバランス処理部２１０でのホワイトバランス調整処理は従来と同様である。
【００３０】
ホワイトバランス後の画像データに対して、暗部領域での色味を調整するため、色味調整判定部２２０で、各画素について輝度が十分小さいか、及び、色味の偏りがあるかどうか判定する。該色味調整判定部２２０にて、輝度が十分小さく、かつ色味の偏りがあると判定されると、色味調整部２３０で、当該画素について色味の調整が行われる。
【００３１】
図２に、本実施例における色味調整判定部２２０と色味調整部２３０の処理フローチャートを示す。
【００３２】
色味調整判定部２２０は、ホワイトバランス後の画像データについて、まず、最初の画素を取り込む（ステップ１００１）。そして、当該画素の各ＲＧＢ成分の和Ｓを算出する（ステップ１００２）。すなわち、
Ｓ＝（Ｒ成分値）＋（Ｇ成分値）＋（Ｂ成分値）
を算出する。このＳの値を当該画素の明るさの度合いとする。
【００３３】
次に、色味調整判定部２２０は、ＲＧＢ成分の和Ｓに対する各成分の構成比Ｒを算出する（ステップ１００３）。いま、Ｒ成分、Ｇ成分、Ｂ成分の構成比をそれぞれＲｒ，Ｒｇ，Ｒｂとすると、
Ｒｒ＝（Ｒ成分値）／Ｓ
Ｒｇ＝（Ｇ成分値）／Ｓ
Ｒｂ＝（Ｂ成分値）／Ｓ
で表わされる。この構成比（割合い）を色の偏りの度合いとする。
【００３４】
続いて、色味調整判定部２２０は、当該画素について色味調整を行うか否か判定する（ステップ１００４）。本実施例では、当該画素の各成分（ＲＧＢ）の色味調整を行うか否かは次のようにして判定する。
Ｓ＜Ｔｓ  かつ  Ｒｒ＞Ｔｒｒ  ⇒  Ｒ成分を調整する
Ｓ＜Ｔｓ  かつ  Ｒｇ＞Ｔｒｇ  ⇒  Ｇ成分を調整する
Ｓ＜Ｔｓ  かつ  Ｒｂ＞Ｔｒｂ  ⇒  Ｂ成分を調整する
ここで、Ｔｓは明るさの閾値である。Ｔｓより大きいＳを有する画素は明るい画素と判定し、色味調整を行わない。ＴｒｒはＲ成分の偏りの度合いの閾値であり、Ｒ成分の構成比ＲｒがＴｒｒより大きい場合、Ｒ成分の偏りがあると判定し、Ｓ＞Ｔｓの条件下で、該Ｒ成分を色味調整の対象とする。Ｇ成分、Ｂ成分についても同様である。なお、各成分の偏りの度合いの閾値Ｔｒｒ，Ｔｒｇ，ＴｒｂはＴｒｒ＝Ｔｒｇ＝Ｔｒｂである。
【００３５】
色味調整部２３０は、色味調整判定部２２０にて色味調整を行うと判定された場合、当該画素の色味調整を行う（ステップ１００５）。ここでは、Ｒ成分あるいはＢ成分が色味調整を行うと判定された場合には、該Ｒ成分あるいはＢ成分の値をＧ成分の値と同じにすることで、色味の調整を行うとする。また、Ｇ成分が色味調整を行うと判定された場合には、該Ｇ成分の値を半分とすることで、色味の調整を行うとする。
【００３６】
一方、色味調整判定部２２０にて色味調整を行うと判定されなかった場合、色味調整部２３０は、当該画素について何もしないで処理を終了する。すなわち、ステップ１００５の処理をスキップする。
【００３７】
次に、色味調整判定部２２０は、ホワイトバランス後の画像データについて、全画素の処理を終了したか判定する（ステップ１００６）。そして、全画素の処理を終了しない場合、色味調整判定部２２０は、次の画素を取り込んで（ステップ１００７）、再び、ステップ１００２〜１００４の処理を実行する。また、色味調整部２３０は、色味調整判定部２２０にて色味調整を行うと判定された場合、ステップ１００５の色味調整処理を実行する。
【００３８】
上記色味調整判定部２２０及び色味調整部２３０の処理を、ホワイトバランス後の画像データの全ての画素について行うことで、輝度が小さくかつ色味の偏りがある画素のみ色味調整が行われることとなる。したがって、明部領域と暗部領域が共存する画像に対して、ホワイトバランス後の暗部領域の不自然な色味を抑制することができる。
【００３９】
なお、ここでは、ＲＧＢの全ての成分を色味調整の対象としたが、Ｇ成分は色味調整を行わないことでもよい。この場合、Ｇ成分の構成比は算出しないですむ。Ｒ成分とＢ成分の色味調整を行うかどうかの判定条件は先の説明と同様である。また、色味調整を行うと判定された画素は、調整する成分値（ＲまたはＢ成分）をＧ成分の値と同じにすることで、色味の調整を行うこととなる。
【実施例２】
【００４０】
図３に本発明の第２の実施例の全体構成図を示す。図３において、先の図１との相違は、画像処理装置２００が明画素カウンタ部２４０を更に有していることである。これ以外の構成は図１と同じである。明画素カウンタ部２４０は、ホワイトバランス処理部２１０から出力されるホワイトバランス後の画像データを入力して、画面全体（１フレーム）から一定値以上の輝度を持つ画素の数をカウントするものである。輝度は、先のＳ値とすることでもよい。色味調整判定部２２０は、明画素カウンタ部２４０でのカウント数が一定値以上の場合には、色味調整の判定処理を行わないようにする。この場合、色味調整部２３０では色味調整処理が行われない。
【００４１】
図４に、本実施例の場合の色味調整判定部２２０と色味調整部２３０の処理フローチャートを示す。図４において、先の図２との相違は、ステップ１０００が追加されていることである。これ以外は、図２とまったく同じである。
【００４２】
色味調整判定部２２０は、ホワイトバランス後の画像データの画素を取り込むのに先立って、明画素カウンタ部２４０のカウント数が一定数以上がどうか判定する（ステップ１０００）。そして、明画素カウンタ部２４０のカウント数が一定数以上ならば、その時点で処理を終了する。一方、明画素カウンタ部２４０のカウント数が一定数未満の場合のみ、ステップ１００１の処理に進む。ステップ１００１以降の処理は図２と同じであるので、説明は省略する。
【００４３】
本実施例によれば、全体が明るい画像の場合、ホワイトバランス後の画像データがそのまま出力されるため、撮影画像の色味を自然に見せることが可能になる。
【００４４】
なお、色味調整部２３０にて、明画素カウンタ部２４０のカウント数が一定数以上かどうか判定し、一定数以上の場合、色味調整判定部２２０での判定結果に関係なく、ホワイトバランス処理部２１０でホワイトバランス調整された画像データをそのまま出力するようにしてもよい。
【実施例３】
【００４５】
図５に本発明の第３の実施例の全体構成図を示す。図５において、先の図１との相違は、画像処理装置２００が露光時間取得部２５０を更に有していることである。これ以外の構成は図１と同じである。露光時間取得部２５０は、撮像部１００のセンサ（撮像素子）の露光時間を取得する。該露光時間は被写体の明るさを反映している。色味調整判定部２２０は、露光時間取得部２５０で取得されたセンサの露光時間が一定値以下の場合には、色味調整の判定処理を行わないようにする。この場合、色味調整部２３０では色味調整処理が行われない。
【００４６】
図６に、本実施例の場合の色味調整判定部２２０と色味調整部２３０の処理フローチャートを示す。図６において、先の図２との相違は、ステップ１０００’が追加されていることである。これ以外は、図２とまったく同じである。
【００４７】
色味調整判定部２２０は、ホワイトバランス後の画像データの画素を取り込むのに先立って、露光時間取得部２５０で取得されたセンサの露光時間が一定数以下がどうか判定する（ステップ１０００’）。そして、露光時間取得部２５０で取得されたセンサの露光時間が一定値以下ならば、その時点で処理を終了する。一方、露光時間取得部２５０で取得されたセンサの露光時間が一定値以上の場合のみ、ステップ１００１の処理に進む。ステップ１００１以降の処理は図２と同じであるので、説明は省略する。
【００４８】
本実施例においても、全体が明るい画像の場合、ホワイトバランス後の画像データがそのまま出力されるため、撮影画像の色味を自然に見せることが可能になる。
【００４９】
なお、本実施例でも、色味調整部２３０にて、露光時間取得部２５０で取得されたセンサの露光時間が一定値以下かどうか判定し、一定値以下の場合、色味調整判定部２２０での判定結果に関係なく、ホワイトバランス処理部２１０でホワイトバランス調整された画像データをそのまま出力するようにしてもよい。
【実施例４】
【００５０】
図７に本発明の第４の実施例の全体構成図を示す。図７において、先の図１との相違は、画像処理装置２００が画素位置情報算出部２６０を更に有していることである。これ以外の構成は図１と同じである。
【００５１】
画素位置情報算出部２６０は、撮像部１００で得られた画像データの各画素の位置情報を算出するものである。一般に撮像部１００は水平／垂直同期信号、クロック信号を生成する同期信号生成器を内蔵し、該水平／垂直同期信号、クロック信号に同期して、センサから画像データを読み出すようになっている。画素位置情報算出部２６０は、撮像部１００内の同期信号生成器から水平／垂直同期信号、クロック信号を取り込み、画像データの各画素の位置情報を算出する。なお、同期信号生成器が外付けされた構成の場合は、当該同期信号生成器から取り込めばよい。
【００５２】
色味調整部２３０は、注目画素に対し、色味調整判定部２２０で色味調整を行うと判定された場合、当該画素について色味の調整を行うが、その際、画素位置情報算出部２６０で算出された位置情報に基づいて色味調整の度合いを変更するようにする。例えば、画像中心から遠い画素ほど色の彩度を落とすようになる。
【００５３】
図８に、本実施例における色味調整判定部２２０と色味調整部２３０の処理フローチャートを示す。
【００５４】
色味調整判定部２２０は、ホワイトバランス処理部２１０で調整されたホワイトバランス後の画像データについて、まず、最初の画素を取り込む（ステップ２００１）。そして、当該画素の各成分（Ｒ，Ｇ，Ｂ）の和Ｓを算出し（ステップ２００２）、さらに各成分の構成比Ｒ（Ｒｒ，Ｒｇ，Ｒｂ）を算出する（ステップ２００３）。先に述べたように、これらの値は、以下のように求められる。
Ｓ  ＝（Ｒ成分値）＋（Ｇ成分値）＋（Ｂ成分値）
Ｒｒ＝（Ｒ成分値）／Ｓ
Ｒｇ＝（Ｇ成分値）／Ｓ
Ｒｂ＝（Ｂ成分値）／Ｓ
ここで、Ｓは当該画素の明るさの度合いを表し、Ｒｒ，Ｒｇ，Ｒｂは当該画素の各成分の偏りを表している。
【００５５】
続いて、色味調整判定部２２０は、上記算出したＳ、及びＲｒ，Ｒｇ，Ｒｂの値を閾値処理して、当該画素について色味調整を行うか否か判定する（ステップ２００４）。ここでは、Ｓの閾値をＴｓ、Ｒｒ，Ｒｇ，Ｒｂの閾値をそれぞれＴｒｒ，Ｔｒｇ，Ｔｒｂとして、判定条件を以下のように求める。なお、Ｔｒｒ＝Ｔｒｇ＝Ｔｒｂとする。
（１）  Ｓ＜Ｔｓ  かつ  Ｒｒ＞Ｔｒｒの場合には、Ｒ成分はそのままとし、Ｇ成分とＢ成分を調整する。
（２）  Ｓ＜Ｔｓ  かつ  Ｒｇ＞Ｔｒｇの場合には、Ｇ成分をそのままとし、Ｒ成分とＢ成分を調整する。
（３）  Ｓ＜Ｔｓ  かつ  Ｒｂ＞Ｔｒｂの場合には、Ｂ成分をそのままとし、Ｒ成分とＧ成分を調整する。
【００５６】
色味調整部２３０は、色味調整判定部２２０で色味調整を行うと判定された場合、当該画素について、上記判定条件に従って色味の調整を行う。この場合、本実施例では、画素位置情報算出部２６０で算出された当該画素の画像上の位置情報をパラメータとして色味の調整を行う（ステップ２００５）。例えば、画像中心から遠い画素ほど色の彩度をより落とす処理を実施する。
【００５７】
以下、上記（１）の判定条件を満たす場合を例えに、色味調整部２３０での色味調整処理を詳述する。なお、上記（２）及び（３）の判定条件を満たす場合の処理も同様に類推可能である。
【００５８】
今、色味調整を行う画素のＲＧＢ成分の内、最大の成分がＲ成分で、最小の成分が例えばＢ成分の場合、最大のＲ成分以外のＧ成分とＢ成分について、
Ｇ_delta  ←  Ｄ×（Ｒ成分＋Ｂ成分）
Ｂ_delta  ←  Ｄ×（Ｒ成分＋Ｂ成分）
Ｇ成分    ←  Ｇ成分＋Ｇ_delta
Ｂ成分    ←  Ｂ成分＋Ｂ_delta
但し、Ｄ＝(|X−width/2|＋|Y−height/2|)／(|X−width/2|＋|Y−height/2|)
（Ｘ，Ｙ）を画素の位置、width＝画素の幅、height＝画像の高さ
として、色味を調整する。これにより、当該画素の彩度を落とすことができる。
【００５９】
ここで、Ｄは画像中心からの距離を示すパラメータであり、０〜１の値をとる。Ｄ＝０は画像中心を示し、この場合、彩度は変わらない。Ｄ＝１は画像中心から最も遠い距離を示し、この場合、彩度は０に近くなる。すなわち、上記演算を施すことにより、画像中心付近の画素の彩度はあまり落とさず、画像中心から離れるほど彩度を落とすことができる。
【００６０】
ところで、上記演算のままでは、Ｇ及びＢ成分調整後の当該画素の輝度が増加してしまう。そこで、輝度を調整前の値にするために、Ｇ及びＢ成分調整後のＲＧＢ値から輝度Ｙ’を算出し、調整前のＲＧＢ値の輝度をＹとして、
ｄＹ    ←  Ｙ’−Ｙ
Ｒ成分  ←  Ｒ成分−ｄＹ
Ｇ成分  ←  Ｇ成分−ｄＹ
Ｂ成分  ←  Ｂ成分−ｄＹ
と補正する。これにより、色味調整を行う画素について輝度の値を増加させずに彩度を落とすことができる。
【００６１】
図８に戻り、色味調整判定部２２０にて色味調整を行うと判定されなかった場合には、色味調整部２３０は、当該画素について何もしないで処理を終了する。すなわち、ステップ２００５をスキップする。
【００６２】
次に、色味調整判定部２２０は、ホワイトバランス後の画像データについて、全画素の処理を終了したか判定する（ステップ２００６）。そして、全画素の処理を終了しない場合、色味調整判定部２２０は、次の画素を取り込んで（ステップ２００７）、再び、ステップ２００２〜２００４の処理を実行する。また、色味調整部２３０は、色味調整判定部２２０にて色味調整を行うと判定された場合、ステップ２００５の色味調整処理を実行する。
【００６３】
上記色味調整判定部２２０及び色味調整部２３０の処理を、ホワイトバランス後の画像データの全ての画素について行うことで、先の実施例１と同様に、輝度が小さくかつ色味の偏りがある画素のみ色味調整が行われることとなる。更に、本実施例では、色味調整を行う場合、画素の位置をパラメータとして色味調整の度合いを変更することができる。したがって、明部領域と暗部領域が共存する画像に対して、ホワイトバランス後の暗部領域の不自然な色味を、画素位置に応じてより効果的に抑制することが可能になる。
【００６４】
なお、色味の調整は、先の実施例１のように、色味調整を行う画素について、判定条件により、ＲあるいはＢ成分の値をＧ成分の値と同じにするか、Ｇ成分の値を半分にすることでもよい。この場合には、その値にＤを乗じることで、同様に画像上の画素の位置に応じて色味調整の度合いを変更することができる。
【００６５】
また、図７の構成に、図３の明画素カウンタ部２４０あるいは図５の露光時間取得部２５０を更に付加すれば、先の実施例２や３と同様に、画像全体が明るい場合、ホワイトバランス後の画像データについて色味調整を行わないようにすることが可能になる。
【００６６】
また、これまでの説明では、色味調整の判定や色味調整は、ホワイトバランス後の画像データについて、各画素ごとに行うとしたが、一定の大きさを持った領域（ｍ×ｎ画素）ごとに行うことでもよい。この場合、ＲＧＢ和のＳや、各成分の構成比（偏り）Ｒｒ，Ｒｇ，Ｒｂは、例えば、当該領域に含まれる各画素の平均値を用いればよい。また、色味調整は、当該領域に含まれる各画素に対して、同じ処理を行うようにすればよい。
【符号の説明】
【００６７】
１００  撮像部
２００  画像処理装置
２１０  ホワイトバランス処理部
２２０  色味調整判定部
２３０  色味調整部
２４０  明画素カウンタ部
２５０  露光時間取得部
２６０  画素位置情報算出部
３００  表示装置
【先行技術文献】
【特許文献】
【００６８】
【特許文献１】国際公開ＷＯ２００５／０４１５８８号公報
【図１】
2011250276.tif 000003
【図２】
2011250276.tif 000004
【図３】
2011250276.tif 000005
【図４】
2011250276.tif 000006
【図５】
2011250276.tif 000007
【図６】
2011250276.tif 000008
【図７】
2011250276.tif 000009
【図８】
2011250276.tif 000010