(57)【要約】【課題】  撮像光学系に起因する撮像画像中の画質劣化の程度を適切に提示する。【解決手段】  画像処理装置に、光学系を備える撮像手段により撮像された撮像画像から、所定の閾値以上の輝度信号を有する第１の領域を検出する検出手段と、前記検出手段により検出された前記第１の領域の位置に基づいて、前記撮像画像から、前記撮像手段の前記光学系に起因する画質劣化が発生し得る第２の領域を決定する決定手段と、前記決定手段により決定された前記第２の領域における画質劣化値を算出する算出手段と、前記算出手段により算出された前記画質劣化値に基づいて、画質劣化情報を表示するよう制御する制御手段と、を備える。【選択図】  図２
2019012886.tif 000002
【特許請求の範囲】
【請求項１】
光学系を備える撮像手段により撮像された撮像画像において、所定の閾値以上の輝度信号を有する第１の領域を検出する検出手段と、
前記検出手段により検出された前記第１の領域の位置に基づいて、前記撮像画像において、前記撮像手段の前記光学系に起因する画質劣化が発生し得る第２の領域を決定する決定手段と、
前記決定手段により決定された前記第２の領域における画質劣化の程度を示す画質劣化値を算出する算出手段と、
前記算出手段により算出された前記画質劣化値に基づいて、画質劣化情報を表示するよう制御する制御手段と、
を備えることを特徴とする画像処理装置。
【請求項２】
前記算出手段は、前記第１の領域の輝度信号に対する前記第２の領域の輝度信号の比を算出することにより、前記画質劣化値を算出する、
ことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記算出手段は、前記第２の領域の輝度信号を算出し、算出された前記第２の領域の前記輝度信号の値が小さいほど前記画質劣化値が大きくなるよう、前記画質劣化値を算出する、
ことを特徴とする請求項１または２に記載の画像処理装置。
【請求項４】
前記制御手段は、前記画質劣化情報を、前記第２の領域における画質劣化の程度を視認可能に表示するよう制御する、
ことを特徴とする請求項１から３のいずれか１項に記載の画像処理装置。
【請求項５】
前記検出手段は、前記第１の領域の中心画素と、前記第１の領域の最大径とを算出し、
前記決定手段は、前記検出手段により算出された前記第１の領域の前記中心画素と、前記第１の領域の前記最大径に応じて、前記第２の領域を決定する、
ことを特徴とする請求項１から４のいずれか１項に記載の画像処理装置。
【請求項６】
前記決定手段は、前記第２の領域を、前記第１の領域と画角中で点対称となる領域に決定する、
ことを特徴とする請求項１から５のいずれか１項に記載の画像処理装置。
【請求項７】
前記検出手段は、前記第１の領域の画素の色に応じた色情報を前記制御手段に供給し、
前記制御手段は、前記供給された色情報に応じて前記表示させる画質劣化情報の表示態様を変更する
ことを特徴とする請求項１から６のいずれか１項に記載の画像処理装置。
【請求項８】
前記制御手段は、
前記撮像画像における前記第１の領域の位置を、前記画像劣化情報として表示する
ことを特徴とする請求項１から７のいずれか１項に記載の画像処理装置。
【請求項９】
前記制御手段は、
前記撮像画像における前記第２の領域の位置を、前記画像劣化情報として表示する
ことを特徴とする請求項１から８のいずれか１項に記載の画像処理装置。
【請求項１０】
前記制御手段の制御に応じて、警告を表示する表示手段を、さらに有する
ことを特徴とする請求項１から９のいずれか１項に記載の画像処理装置。
【請求項１１】
光学系を備える撮像手段により撮像された撮像画像において、所定の閾値以上の輝度信号を有する第１の領域を検出する第１のステップと、
前記第１のステップにおいて検出された前記第１の領域の位置に基づいて、前記撮像画像において、前記撮像手段の前記光学系に起因する画質劣化が発生し得る第２の領域を決定する第２のステップと、
前記第２のステップにおいて決定された前記第２の領域における画質劣化の程度を示す画質劣化値を算出する第３のステップと、
前記第３のステップにおいて算出された前記画質劣化値に基づいて、画質劣化情報を表示するよう制御する第４のステップと、
を有することを特徴とする画像処理方法。
【請求項１２】
光学系を介して撮像した被写体の撮像画像を出力する撮像手段と、
前記撮像画像において、所定の閾値以上の輝度信号を有する第１の領域を検出する検出手段と、
前記検出手段により検出された前記第１の領域の位置に基づいて、前記撮像画像において、前記撮像手段の前記光学系に起因する画質劣化が発生し得る第２の領域を決定する決定手段と、
前記決定手段により決定された前記第２の領域における画質劣化の程度を示す画質劣化値を算出する算出手段と、
前記算出手段により算出された前記画質劣化値に基づいて、画質劣化情報を表示するよう制御する制御手段と、
を備えることを特徴とする撮像装置。
【請求項１３】
コンピュータを、請求項１から１０のいずれか１項に記載の画像処理装置の各手段として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、画像処理方法、撮像装置およびプログラムに関する。
【背景技術】
【０００２】
デジタルカメラやデジタルビデオカメラ等の光学機器においては、被写体側からレンズに入射した光が複数のレンズ群を順に通過した後に撮像素子へと到達して結像することで、画像を得ることができる。しかし、例えばある特定の角度でレンズに入射した光は、レンズ鏡筒の内壁での反射、撮像素子の表面での反射、レンズ面での多重反射、等の後に撮像素子へ到達することがある。特に、撮像画角内の一部に高輝度光源が存在する場合、このような不所望の反射光は、いわゆるフレアやゴーストと呼ばれる現象を招く。フレアによる撮影画像の一部もしくは全体での白かぶりの発生や、ゴーストによる幾何学的な模様の出現は、撮影画像の画質劣化の要因となりうる。
【０００３】
このようなフレアやゴーストを低減もしくは回避するための方法が提案されている。特許文献１は、レンズ等に光量を測光するセンサを設けることなく、フレアが発生していることを示す警告を表示することができる撮像装置を開示する。具体的には、この撮像装置では、被写体を撮像して得られたデジタル画像データ中の矩形の被写体像に基づき輝度を測定し、測定された輝度に基づいてフレアが発生しているか否かを判断する。そして、フレアが発生していると判断された場合に、フレアが発生していることを示す警告を表示する。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８−３５２５５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１に開示された技術では、フレアが発生していることを示す警告を表示することはできるものの、その警告表示は、フレア発生の有無を示すものに過ぎない。すなわち、撮像画像内で、フレア等の発生により生じる画質劣化の程度を示せるものではなかった。
本発明は、上記課題を鑑みてなされたものであり、撮像光学系に起因する撮像画像中の画質劣化の程度を適切に提示することが可能な画像処理装置および画像処理方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、本発明のある態様に係る画像処理装置は、光学系を備える撮像手段により撮像された撮像画像において、所定の閾値以上の輝度信号を有する第１の領域を検出する検出手段と、前記検出手段により検出された前記第１の領域の位置に基づいて、前記撮像画像において、前記撮像手段の前記光学系に起因する画質劣化が発生し得る第２の領域を決定する決定手段と、前記決定手段により決定された前記第２の領域における画質劣化の程度を示す画質劣化値を算出する算出手段と、前記算出手段により算出された前記画質劣化値に基づいて、画質劣化情報を表示するよう制御する制御手段と、を備える。
【発明の効果】
【０００７】
本発明によれば、撮像光学系に起因する撮像画像中の画質劣化の程度を適切に提示することができる。
【図面の簡単な説明】
【０００８】
【図１】実施形態１に係る画像処理装置の構成例を示すブロック図。
【図２】実施形態１における警告表示を行う機能部の構成を示すブロック図。
【図３】実施形態１における警告表示を行う処理の流れを示すフローチャート。
【図４】高輝度領域を示す図。
【図５】フレア発生領域を示す図。
【図６】フレア発生領域の警告表示の一例を示す図。
【図７】フレア発生領域の警告表示の一例を示す図。
【図８】高輝度領域およびフレア発生領域の警告表示の一例を示す図。
【図９】実施形態２における警告表示を行う機能部の構成を示すブロック図。
【図１０】実施形態２における警告表示を行う処理の流れを示すフローチャート。
【図１１】実施形態２におけるフレア発生領域の警告表示の一例を示す図。
【発明を実施するための形態】
【０００９】
以下、添付図面を参照して、本発明を実施するための実施形態について詳細に説明する。なお、以下に説明する各実施形態は、本発明の実現手段としての一例であり、本発明が適用される装置の構成や各種条件によって適宜修正または変更されるべきものであり、本発明は、以下の実施形態に限定されるものではない。また、各実施形態で説明されている特徴の組み合わせの全てが本発明の解決手段に必須のものとは限らない。なお、同一の構成または処理等については、同じ符号を付して説明する。
【００１０】
実施形態１
（全体構成）
図１は、本発明を適用した実施形態１に係る画像処理装置の構成例を示すブロック図である。本実施形態では、画像処理装置の一例としてデジタルカメラ（以下、単に「カメラ」という。）に本実施形態を適用した例について説明する。
このカメラは、撮像部１と、バッファメモリ２と、画像処理部３と、バッファメモリ４と、操作部５と、画像・メニュー表示部６と、表示制御部７と、システム制御部８と、インターフェース９と、通信部１０とを備えている。
撮像部１は、撮像に必要なＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）やＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）等の撮像素子やレンズ等の光学系および各種電子機器を備えている。
【００１１】
バッファメモリ２は、撮像部１が撮像した撮像画像の画像データを格納するバッファであって、画像処理部３による処理前のバッファである。
画像処理部３は、バッファメモリ２に格納された画像データに対して画像処理および圧縮処理を行う。この画像処理部３が実行する画像処理の詳細は後述する。
バッファメモリ４は、画像処理および圧縮処理後の画像データを格納するバッファであって、画像処理部３による処理後のバッファである。
また、操作部５は、スイッチ、ダイヤル等を備え、カメラ本体を操作するユーザからの、撮像操作、シャッタースピードや露出等を切り替える操作等の指示を入力する。
【００１２】
画像・メニュー表示部６は、ディスプレイ等の表示装置であり、カメラの背面の液晶モニタ等からなる。この画像・メニュー表示部６は、撮像画像の表示およびカメラ操作パラメータの設定や確認のためのメニュー表示や警告等を表示する。
表示制御部７は、画像・メニュー表示部６における表示を制御する。
システム制御部８は、カメラ全体の動作を制御する。
インターフェース９は、フラッシュメモリ等のリムーバブルな外部記憶装置に対する書き込み・読み出しを行う。
通信部１０は、有線通信または無線通信により外部の装置等とカメラとの間での通信を行う。
【００１３】
一般的に、レンズ等の光学系を有するカメラにおいて、ある特定の角度でレンズに入射した光は、レンズ鏡筒の内壁での反射、撮像素子の表面での反射、レンズ面での多重反射等の後に撮像素子へ到達し、フレアやゴーストと呼ばれる画質劣化現象を招く。
ここで、本実施形態における画質劣化現象とは、カメラ内での光学系における不要な反射に起因するこれらの現象が対象となる。以下、本実施形態においてはフレアを例に説明し、画質劣化現象をフレア、画質劣化領域をフレア発生領域と各々称する。しかしながら、本発明の適用対象には、ゴースト等の他の画質劣化現象も含むものとする。
【００１４】
本実施形態では、カメラで撮像時に画角内に高輝度の被写体が存在する場合には、撮像画像にフレアが生じる可能性があることを警告表示する。すなわち、このカメラでは、撮像部１により撮像された撮像画像において所定の閾値以上の輝度信号を有する高輝度領域を検出し、検出された高輝度領域に基づいて、撮像画像において撮像部１の光学系に起因する画質劣化が発生し得る画質劣化領域を決定する。さらに、このカメラでは、決定された画質劣化領域における画質劣化の程度を示す画像劣化値を算出し、算出された画像劣化値に基づいて、画像劣化情報（警告表示）を表示するよう制御する。
【００１５】
この警告表示は、カメラの背面に設ける画像・メニュー表示部６にて、撮像時に撮像画像をプレビューする際等に行ってよい。これにより、撮像時に画質劣化の有無を適切に提示することができる。
また、警告表示の表示態様は、画質劣化情報を、画質劣化領域における画質劣化の程度を視認可能に表示するよう制御する。すなわち、フレアの程度等に応じて警告表示の表示態様（濃度、色等）を変更することにより、撮像者にフレアによる画質劣化の程度を適切に提示することができる。
【００１６】
（画像処理装置の構成詳細）
図２は、本実施形態のカメラにおける警告表示を行う機能部の構成を示す機能ブロック図である。
高輝度領域検出部２１は、バッファメモリ２から撮像画像を取得し、撮像画像の画角内のある高輝度領域を検出する。本実施形態において、撮像画像は、レッド（Ｒ）、グリーン（Ｇ）、ブルー（Ｂ）各色８ビットの画素からなるデータであるとする。従って、撮像画像における各画素は、０〜２５５の何れかの値により構成される。高輝度領域検出部２１は、光学系を有する撮像部１により撮像された撮像画像の輝度信号Ｙが所定の条件を満たす領域を高輝度領域として検出する。高輝度領域検出部２１は、さらに、検出した高輝度領域内の画素について平均輝度信号（Ｙ１）を算出して、画質劣化値算出部２３へ出力する。高輝度領域検出部２１はまた、検出された高輝度領域の中心画素（ｘ１，ｙ１）および高輝度領域の最大径（Ｌ）を算出して、画質劣化領域決定部２２へ出力する。
【００１７】
画質劣化領域決定部２２は、撮像画像の画角内においてフレアが発生するフレア発生領域を決定する。具体的には、画質劣化領域決定部２２は、検出された高輝度領域の中心画素および最大径、すなわち高度領域の位置の情報に基づいて、撮像画像において撮像部１の光学系に起因する画質劣化が発生し得る画質劣化領域（フレア発生領域）を決定する。画質劣化領域決定部２２は、さらに、決定したフレア発生領域内の画素について平均輝度信号（Ｙ２）を算出して、画質劣化値算出部２３へ出力する。画質劣化領域決定部２２は、また、決定されたフレア発生領域の中心画素（ｘ２，ｙ２）および画質劣化領域の最大径（Ｌ＋ΔＬ）を算出して、警告表示部２４へ出力する。
【００１８】
画質劣化値算出部２３は、フレア発生領域における画質劣化の程度を示す画質劣化値を算出する。具体的には、画質劣化値算出部２３は、画質劣化領域決定部２２により決定されたフレア発生領域における画質劣化値（Ｑ）を算出する。この画質劣化値（Ｑ）は、フレアの場合にはフレアに起因する画質劣化の程度を示す値であり、例えば、高輝度領域の平均輝度信号（Ｙ１）と、画質劣化領域の平均輝度信号（Ｙ２）とに基づいて算出することができる。
警告表示部２４は、フレア発生領域における画質劣化の警告表示を制御する。具体的には、警告表示部２４は、画質劣化値算出部２３により算出された画質劣化値に基づいて、表示されるべき画質劣化情報を生成する。また、この警告表示部２４は、生成された画質劣化情報を、警告表示として画像・メニュー表示部６に表示させる。
なお、高輝度領域検出部２１〜警告表示部２４は、例えば図１中の画像処理部３ないし表示制御部７の機能として実現することができる。
【００１９】
（画像処理装置の動作詳細）
図３は、本実施形態において撮像画像のプレビュー時にフレア発生による画質劣化の警告表示を行う処理の流れを示すフローチャートである。図３に示す処理は、例えば、カメラにより構成される画像処理装置の撮像部１により画像が撮像され表示部６に表示された時点またはプレビュー表示が指示入力された時点から開始されてよい。ただし、図３に示す処理の開始タイミングは上記に限定されない。画像処理装置は、ＣＰＵが必要なプログラムを記憶部から読み出して実行することにより、図３に示す処理を実行することができる。なお、以降の説明において、フローチャートの各ステップをＳと表記することとする。
ただし、図２に示す構成の各要素のうち少なくとも一部が専用のハードウエアとして動作することで図３の処理が実現されるようにしてもよい。この場合、専用のハードウエアは、ＣＰＵの制御に基づいて動作する。
【００２０】
まず、Ｓ１では、高輝度領域検出部２１は、撮像画像のＲＧＢ値から導かれる輝度信号Ｙが所定の条件を満たす領域を、高輝度領域として検出する。例えば、輝度信号Ｙの値は、以下の式（１）によって算出することができる。
Ｙ＝０．２９９＊Ｒ＋０．５８８７＊Ｇ＋０．１１４＊Ｂ         （１）
ここで、高輝度領域検出部２１は、輝度信号Ｙが所定の閾値以上、例えば輝度信号Ｙ≧２４０を満たす領域を高輝度領域として検出するものとする。例えば図４に示すように、画像領域中に斜線で示す領域３１が高輝度領域であるとする。
なお、微小な領域において、輝度信号Ｙの微小な変動によりＹ＞２４０を満たす画素と満たさない画素が混在する場合には、高輝度領域検出部２１は、これらをまとめて一つの高輝度領域と扱う等の処理を行ってもよい。
【００２１】
Ｓ２では、高輝度領域検出部２１は、高輝度領域の中心画素（ｘ１，ｙ１）を算出する。ここで、中心画素とは、例えば高輝度領域の重心となる画素であってよい。
Ｓ３では、高輝度領域検出部２１は、高輝度領域中の各画素について中心画素との距離を算出し、中心画素との距離が最大となる画素の中心画素からの距離を、高輝度領域の最大径Ｌとして求める。
Ｓ４では、高輝度領域検出部２１は、検出された高輝度領域内の画素の輝度の平均値、すなわち平均輝度信号値Ｙ１を算出する。
以上のＳ１からＳ４の処理により、高輝度領域検出部２１は、中心画素（ｘ１，ｙ１）、平均輝度信号値Ｙ１の領域を、高輝度領域として検出する。
Ｓ５では、画質劣化領域決定部２２は、高輝度領域の位置に基づいて、フレア発生領域を決定する。本実施形態で対象とする画質劣化現象のフレアは、撮像画像中の高輝度領域の周囲、あるいは、画角上で高輝度領域の対角上（高輝度領域と画角中で点対称となる領域）に発生する可能性がある。本実施形態においては、例えば図５に示すように、画質劣化領域決定部２２は、高輝度領域の対角上の領域３２をフレア発生領域として決定する。
【００２２】
ここで、例えば撮像画像の画像サイズをＷピクセル＊Ｈピクセルとするとき、フレア発生領域の中心座標（ｘ２，ｙ２）は、（Ｗ−ｘ１、Ｈ−ｙ１）となる。また、フレア発生領域は中心座標から半径Ｌ＋ΔＬの円形内の範囲とする。ここで、ΔＬは任意の値であるとする。
Ｓ６では、画質劣化領域決定部２２は、中心画素（ｘ２，ｙ２）を中心とする最大径Ｌ＋ΔＬの円形の領域であるフレア発生領域の画素の輝度の平均値、すなわち平均輝度信号値Ｙ２を算出する。
【００２３】
Ｓ７では、画質劣化値算出部２３は、高輝度領域の平均輝度信号値Ｙ１とフレア発生領域の平均輝度信号値Ｙ２とから、画質劣化値Ｑを、以下の式（２）により算出する。
Ｑ＝Ｙ１／Ｙ２                                 （２）
上記式（２）から、高輝度領域が明るいほどフレアによる画質劣化は大きくなる。
一方、フレア発生領域が暗いほど、フレアによる画素値の上昇によって本来の暗部の再現ができず、画質劣化が大きくなると想定される。
本実施形態では、これら画質劣化の傾向に鑑み、高輝度領域の平均輝度信号値Ｙ１が大きいほど、また、フレア発生領域の平均輝度信号値Ｙ２が小さいほど、それぞれ、画質劣化値Ｑの値が大きくなるように式（２）を設定している。すなわち、本実施形態では、高輝度領域の輝度信号に対するフレア発生領域の輝度信号の比を算出することにより、画質劣化値を算出している。また、本実施形態では、フレア発生領域の輝度信号を算出し、算出されたフレア発生領域の輝度信号の値が小さいほど画質劣化値が大きくなるよう、画質劣化値を算出している。
【００２４】
Ｓ８では、警告表示部２４は、Ｓ７で算出された画質劣化値Ｑを取得し、取得した画質劣化値Ｑに基づいて、画質劣化があるか否かを判定する。
上述のように、高輝度領域が明るいほど、また、フレア発生領域が暗いほど、画質劣化は大きい。このため、本実施形態では、例えば、高輝度領域の輝度信号値Ｙ１≧２４０かつフレア発生領域の平均輝度信号値Ｙ２≦１０のときに、フレアによる画質劣化があると判定するものとする。すなわち、警告表示部２４は、上記式（２）に基づき、Ｑ≧２４のときに画質劣化があると判定する。換言すると、警告表示部２４は、画質劣化値Ｑに基づいて、画質劣化値Ｑが所定の閾値（２４）以上である場合に、画質劣化情報を警告として表示するよう制御する。
Ｑ≧２４であり画質劣化があると判定する場合には、警告表示部２４は、Ｓ９に移行する。一方、Ｑ＜２４であり画質劣化がないと判定する場合には、警告表示部２４は、図３に示す処理を終了する。
【００２５】
Ｓ９では、警告表示部２４は、フレア発生の警告を画像・メニュー表示部６に表示させる。
具体的には、警告表示部２４は、画質劣化領域決定部２２よりフレア発生領域の中心座標（ｘ２，ｙ２）と径Ｌ＋ΔＬとを取得する。そして、警告表示部２４は、例えば、撮像画像を表示するプレビュー画像上に、フレア発生領域として、中心座標（ｘ２，ｙ２）、径Ｌ＋ΔＬの円形領域を表示させる。この場合、警告表示部２４は、画質劣化領域の位置に、この円形領域を警告として表示させることになる。なお、例えば、円形領域の描画は塗りつぶしとし、例えばグレー等、任意の色であってよい。
【００２６】
さらに、警告表示部２４は、画質劣化の程度、すなわち、画質劣化値算出部２３から取得する画質劣化値Ｑの値に応じて、描画の塗りつぶしのグレーの濃度を変更してよい。すなわち、警告表示部２４は、画質劣化値に基づいて、画質劣化情報を、フレア発生領域における画質劣化の程度を視認可能に表示するよう制御する。本実施形態では、例えば画質劣化が大きいほど、すなわち、画質劣化値Ｑが大きいほど、フレア発生領域の示す領域の塗りつぶしのグレーの濃度を濃くする。
【００２７】
図６（ａ）、（ｂ）は、例えばＱ＝２４（例えば、Ｙ１＝２４０，Ｙ２＝１０）、Ｑ＝１２５（例えば、Ｙ１＝２５０，Ｙ２＝２）のときのフレア領域の警告表示の例を示す。警告表示部２４は、図６（ａ）に示すＱ＝２４の場合のフレア発生領域の警告表示３３と比較して、図６（ｂ）に示すＱ＝１２５の場合のフレア発生領域の警告表示３４の描画度（例えばグレーの濃度）を濃くしている。なお、図６（ａ）、（ｂ）中では、警告表示３３、３４の濃さを斜線の密度で示している。このように、フレア発生領域の描画濃度を変更することで、フレアによる画質劣化の程度を確認しやすくなる。
以上のＳ１からＳ９までの動作により、画像処理装置は、フレア発生による画質劣化の警告を表示し、画質劣化の警告表示を行う処理を終了する。
【００２８】
（実施形態１の効果）
上述のように、本実施形態では、撮像画像において所定の閾値以上の輝度信号を有する高輝度領域を検出し、検出した高輝度領域に基づいて、画質劣化が発生し得るフレア発生領域を決定し、フレア発生領域における画質劣化の程度を示す画質劣化値を算出している。さらに、本実施形態では、算出した画質劣化値に基づいて、画質劣化情報を表示するよう制御する。このような表示を行うことにより、本実施形態では、撮像光学系に起因する撮像画像中の画質劣化の程度を適切に提示することができる。
なお、警告の表示は、必ずしも図６（ａ）、（ｂ）のように、撮像画像に重ねて表示しなくともよく、例えば撮像画像外の領域に、画質劣化値Ｑの値に応じた濃度等の表示態様で表示するようにしてもよい。これにより、上述と同様に、画像劣化の程度を適切に提示することができる。
また、本実施形態では、高輝度領域およびフレア発生領域から算出する画質劣化値に応じて、フレア発生領域を表示させるだけでなく、画質劣化値に基づいて、フレア発生領域の描画濃度を変更している。すなわち、画質劣化値に応じてフレア発生領域すなわち画質劣化領域の表示態様（画質劣化情報の表示態様）を変更することにより、本実施形態では、撮像者にフレアによる画質劣化の程度を適切に提示することができる。
【００２９】
（変形例）
なお、以上の説明では、高輝度領域の数が１である場合を例に説明したが、高輝度領域が複数ある場合には複数の高輝度領域夫々について、図３のＳ２〜Ｓ９の処理を上述と同様に実行すればよい。また、フレア発生領域を表示する際には、警告表示部２４は、複数の高輝度領域に対応するフレア領域を同時に表示してもよいし、１つずつ順に表示してもよい。
また、本実施形態では、フレア発生領域は、画角上で高輝度領域の対角上（画角中で点対称となる領域）としたが、先に述べたように、撮像画像中の高輝度領域の周囲としてもよい。その場合には、画質劣化領域決定部２２は、フレア発生領域を（ｙ１，ｙ１）を中心座標とする半径Ｌ＋ΔＬの円形内の領域とする。
また、光学シミュレーション等により高輝度領域とフレア発生領域の位置関係を予め求め、その結果をシステム制御部８に記録しておき、記録しておいた結果に基づいて、画質劣化領域決定部２２が、高輝度領域からフレア発生領域を決定するようにしてもよい。
【００３０】
また、フレア発生領域の表示は、上述のように、フレア発生領域を塗りつぶす以外にも、領域の外周のみを表示するだけでもよい。さらに、フレアによる画質劣化値Ｑに応じて外周の線の濃度を変更したり、外周の線の太さを変更したりする、等の表示としてもよい。
一例として、外周の線の濃度を変更する例を図７（ａ）、（ｂ）に示す。図７（ａ）はＱ＝２４、（ｂ）はＱ＝１２５の例である。図７（ｂ）の場合は、図７（ａ）として比して画質劣化が大きいため、警告表示部２４は、線の濃度を濃く描画している。
また、本実施形態では、画質劣化値Ｑに応じてフレア発生領域の塗りつぶしの濃度を変更した。具体的には、画質劣化値Ｑが大きいほど塗りつぶしの濃度を濃くした。画質劣化値Ｑは、高輝度領域の平均輝度信号値Ｙ１とフレア発生領域の平均輝度信号値Ｙ２に依存する値であるため、Ｙ１またはＹ２に応じて、フレア発生領域の塗りつぶしの濃度を変更しても同様の効果が得られる。具体的には、Ｙ１が大きいほど、また、Ｙ２が小さいほど、フレア発生領域の塗りつぶしの濃度を濃くするようにしてもよい。このような処理を行う場合には、警告表示部２４は、高輝度領域検出部２１よりＹ１を取得し、画質劣化領域決定部２２よりＹ２を取得すればよい。
【００３１】
また、本実施形態では、フレア発生領域のみを表示したが、図８に示すように、警告表示部２４が、フレア発生領域４３の表示に加えて、高輝度領域４４を表示させるようにしてもよい。すなわち、警告表示部２４は、高輝度領域の位置を警告として表示させる。
また、本実施形態では、カメラでの撮像時のプレビュー画面での警告表示について説明したが、例えば、画像データをカメラからＰＣ等の情報処理装置に取り込んだ後、ＰＣでの画像閲覧や画像編集を行う際に警告表示を表示させるようにしてもよい。この場合、本実施形態で説明した全ての処理をＰＣ側で実行させてもよいし、カメラ側で途中の処理までを実行し、ＰＣに画像データを取り込んだ後に残りの処理をＰＣ側で実行させるようにしてもよい。
【００３２】
実施形態２
実施形態１では、高輝度領域およびフレア発生領域から算出する画質劣化値に基づいて、警告を表示させるか否かを判定し、さらに、画質劣化値に基づいてフレア発生領域の描画濃度を変更させていた。
ところで、フレア等による画質劣化の程度だけでなく、フレアの色を表示することは、フレアによる色の成分を有するどのような画質劣化が発生する可能性があるのか、撮像後の画像補正等の際に撮像者にとって有益な情報となり得る。そこで、本実施形態では、発生するフレアの色に応じてフレア領域を表示する色を変更する。
具体的には、フレアは高輝度領域の色の影響を受けることが考えられるため、高輝度領域の色に応じた色情報に応じて、フレア領域を示す警告表示の表示態様（例えば色）を変更する。
【００３３】
（画像処理装置の構成詳細）
図９は、本実施形態のカメラにおける警告表示を行う機能部の構成を示す機能ブロック図である。実施形態１の説明で用いた図２と同様の部分には同じ符号を付して説明を省略する。
図２に示す実施形態１の高輝度領域検出部２１は、検出した高輝度領域の中心画素の座標（ｘ１、ｙ１）と最大径Ｌを出力していた。高輝度領域検出部２５は、これに加えて高輝度領域の画素の色に応じた色情報、例えば高輝度領域の画素の色の平均ＲＧＢ値である平均画像信号値ＲＧＢ１（Ｒ１，Ｂ１，Ｇ１）を出力する。すなわち、高輝度領域検出部２５は、高輝度領域の色に応じた色情報を警告表示部２６に供給する。
警告表示部２６は、フレア発生領域の中心座標（ｘ２，ｙ２）、径Ｌ＋ΔＬ、画質劣化値Ｑに加え、高輝度領域検出部２５から高輝度領域の平均ＲＧＢ値である平均画像信号値ＲＧＢ１（Ｒ１，Ｂ１，Ｇ１）を取得する。さらに、警告表示部２６は、高輝度領域検出部２５から供給された色情報に応じて表示させる警告の表示態様を変更する。
【００３４】
（画像処理装置の動作詳細）
図１０は、本実施形態において撮像画像のプレビュー時にフレア発生による画質劣化の警告表示を行う処理の流れを示す図である。なお、実施形態１の説明で用いた図３と同様の処理部分には同じ符号を付して説明を省略する。
Ｓ１１では、高輝度領域検出部２１は、高輝度領域内の画素の輝度の平均値すなわち平均輝度信号値Ｙ１と、高輝度領域内の画素の色の平均値すなわち平均画像信号値ＲＧＢ１（Ｒ１，Ｂ１，Ｇ１）を算出する。
【００３５】
Ｓ１２では、警告表示部２６は、画質劣化領域決定部２２からフレア発生領域の中心座標（ｘ２，ｙ２）と径Ｌ＋ΔＬを取得し、プレビュー画像上にフレア発生領域領として、中心座標（ｘ２，ｙ２）、径Ｌ＋ΔＬの円形領域を表示させる。この円形領域の描画は、例えば塗りつぶしとし、警告表示部２６は、高輝度領域検出部２１から高輝度領域の平均ＲＧＢ値である平均画像信号値ＲＧＢ１（Ｒ１，Ｂ１，Ｇ１）を取得し、これに応じて円形領域の表示態様を変更する。具体的には、警告表示部２６は、円形領域の塗りつぶし色を平均画像信号値ＲＧＢ１（Ｒ１，Ｂ１，Ｇ１）とする。なお、塗りつぶし濃度は、実施形態１と同様に、画質劣化値Ｑが大きいほど濃くする等によって変更してもよい。
また、フレアによる色の成分を有する画質劣化の結果、フレア発生領域とその他の領域ではホワイトバランスがずれることが考えられる。そこで、フレア領域を警告表示するだけでなく、警告表示部２６が、例えば図１１に示すように、ホワイトバランス調整が必要であることを示す警告５１を合わせて表示させるようにしてもよい。
【００３６】
（実施形態２の効果）
上述のように、本実施形態では、高輝度領域の色に応じて、フレア発生領域の描画色を変更した。すなわち、高輝度領域検出部２５が、高輝度領域の画素の色に応じた色情報を警告表示部２６に供給し、警告表示部２６が、供給された色情報に応じて警告表示の表示態様（例えば色）を変更した。
これにより、本実施形態では、フレアによる色の成分を有する画質劣化を撮像者に適切に提示することができる。
なお、フレア発生領域の塗りつぶし色は、上述の平均画像信号値ＲＧＢ１をそのまま使用してもよいし、平均画像信号値ＲＧＢ１の各色の成分（Ｒ１、Ｇ１、Ｂ１）のうちの最大値となる色としてもよい。例えば、青色に対応するＢ１が最大の場合には、描画色を青としてもよい。
【００３７】
他の実施形態
また、本発明は、上述した実施形態の機能（例えば、上述のフローチャートにより示される工程）を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システム或いは装置に供給することによっても実現することができる。この場合、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ）が、コンピュータが読み取り可能に記憶媒体に格納されたプログラムコードを読み出し実行することにより、上述した実施形態の機能を実現する。また、プログラムは、１つのコンピュータで実行させても、複数のコンピュータを連動させて実行させるようにしてもよい。
また、上述した実施形態の機能を実現するハードウエアによる処理も同様である。
ハードウエアにより実現する場合、例えば、所定のコンパイラを用いることで、各ステップを実現するためのプログラムからＦＰＧＡ上に自動的に専用回路を生成すればよい。ＦＰＧＡとは、Ｆｉｅｌｄ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙの略である。また、ＦＰＧＡと同様にしてＧａｔｅ  Ａｒｒａｙ回路を形成し、ハードウエアとして実現するようにしてもよい。また、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ  Ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ）により実現するようにしてもよい。
【符号の説明】
【００３８】
１…撮像部、６…画像・メニュー表示部、７…表示制御部、２１，２５…高輝度領域検出部、２２…画質劣化領域決定部、２３…画質劣化値算出部、２４，２６…警告表示部
【図１】
2019012886.tif 000003
【図２】
2019012886.tif 000004
【図３】
2019012886.tif 000005
【図４】
2019012886.tif 000006
【図５】
2019012886.tif 000007
【図６】
2019012886.tif 000008
【図７】
2019012886.tif 000009
【図８】
2019012886.tif 000010
【図９】
2019012886.tif 000011
【図１０】
2019012886.tif 000012
【図１１】
2019012886.tif 000013