(57)【要約】【課題】カメラユーザの好みに応じた趣向性の高い合成画像データを生成することができる画像処理装置を提供すること。【解決手段】画像処理装置は、同一の被写体を撮像して得られた複数の画像データを取得する撮像制御部７２と、複数の画像データ毎に、各画素の色成分信号の信号レベルを調整して彩度を強調する彩度強調処理を実行する彩度強調部７３と、彩度強調処理の後、複数の画像データにおける対応する画素同士を比較して彩度の最も高い画素を選択し、当該選択した画素により構成された合成画像データを生成する合成処理を実行する合成画像生成部７４とを備える。【選択図】図１
2016163052.tif 000002
【特許請求の範囲】
【請求項１】
同一の被写体を撮像して得られた複数の画像データを取得する画像取得部と、
前記複数の画像データ毎に、各画素の色成分信号の信号レベルを調整して彩度を強調する彩度強調処理を実行する彩度強調部と、
前記彩度強調処理の後、前記複数の画像データにおける対応する画素同士を比較して彩度の最も高い画素を選択し、当該選択した画素により構成された合成画像データを生成する合成処理を実行する合成画像生成部とを備える
ことを特徴とする画像処理装置。
【請求項２】
前記彩度強調部は、
前記各画素の色成分信号の信号レベルに基づいて色相を算出し、当該色相が変化しないように、当該信号レベルを調整して彩度を強調する
ことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記彩度強調処理及び前記合成処理では、
前記色成分信号に含まれるＲ，Ｇ，Ｂの少なくともいずれかの信号レベルが飽和している画素は、除外される
ことを特徴とする請求項１または２に記載の画像処理装置。
【請求項４】
前記彩度強調処理及び前記合成処理では、
前記色成分信号に含まれるＲ，Ｇ，Ｂの少なくともいずれかの信号レベルがノイズレベルである画素は、除外される
ことを特徴とする請求項１〜３のいずれか一つに記載の画像処理装置。
【請求項５】
請求項１〜４のいずれか一つに記載の画像処理装置と、
被写体を撮像して前記複数の画像データを生成する撮像部とを備える
ことを特徴とする撮像装置。
【請求項６】
前記複数の画像データは、
前記撮像部に同一の被写体を異なる露出で撮像させることにより生成させた複数の画像データである
ことを特徴とする請求項５に記載の撮像装置。
【請求項７】
前記複数の画像データは、
前記撮像部に同一の被写体を同一の露出でかつ所定の時間を空けて撮像させることにより生成させた複数の画像データである
ことを特徴とする請求項５に記載の撮像装置。
【請求項８】
画像処理装置が実行する画像処理方法であって、
同一の被写体を撮像して得られた複数の画像データを取得する画像取得ステップと、
前記複数の画像データ毎に、各画素の色成分信号の信号レベルを調整して彩度を強調する彩度強調ステップと、
前記彩度強調ステップの後、前記複数の画像データにおける対応する画素同士を比較して彩度の最も高い画素を選択し、当該選択した画素により構成された合成画像データを生成する合成画像生成ステップとを含む
ことを特徴とする画像処理方法。
【請求項９】
請求項８に記載の画像処理方法を画像処理装置に実行させる
ことを特徴とする画像処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、撮像装置、画像処理方法、及び画像処理プログラムに関する。
【背景技術】
【０００２】
近年、撮像素子のダイナミックレンジの不足を補うＨＤＲ（High Dynamic Range）撮影を行う撮像装置が知られている（例えば、特許文献１参照）。
特許文献１に記載の撮像装置は、露出値（ＥＶ（Exposure Value））を変えながら同一の被写体を連写（複数回、撮像）することにより得られた複数の画像データを合成して合成画像データを生成するＨＤＲ撮影を行っている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１２−２０４９５２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１の撮像装置では、露出値（ＥＶ）のみに着目してＨＤＲ撮影により合成画像データを生成しているため、カメラユーザの好みに応じて、例えば、彩度が強調された鮮やかな合成画像データ等を生成することができない、という問題がある。
このため、カメラユーザの好みに応じた趣向性の高い合成画像データを生成することができる技術が要望されている。
【０００５】
本発明は、上記に鑑みてなされたものであって、カメラユーザの好みに応じた趣向性の高い合成画像データを生成することができる画像処理装置、撮像装置、画像処理方法、及び画像処理プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上述した課題を解決し、目的を達成するために、本発明に係る画像処理装置は、同一の被写体を撮像して得られた複数の画像データを取得する画像取得部と、前記複数の画像データ毎に、各画素の色成分信号の信号レベルを調整して彩度を強調する彩度強調処理を実行する彩度強調部と、前記彩度強調処理の後、前記複数の画像データにおける対応する画素同士を比較して彩度の最も高い画素を選択し、当該選択した画素により構成された合成画像データを生成する合成処理を実行する合成画像生成部とを備えることを特徴とする。
【０００７】
また、本発明に係る撮像装置は、上述した画像処理装置と、被写体を撮像して前記複数の画像データを生成する撮像部とを備えることを特徴とする。
【０００８】
また、本発明に係る画像処理方法は、画像処理装置が実行する画像処理方法であって、同一の被写体を撮像して得られた複数の画像データを取得する画像取得ステップと、前記複数の画像データ毎に、各画素の色成分信号の信号レベルを調整して彩度を強調する彩度強調ステップと、前記彩度強調ステップの後、前記複数の画像データにおける対応する画素同士を比較して彩度の最も高い画素を選択し、当該選択した画素により構成された合成画像データを生成する合成画像生成ステップとを含むことを特徴とする。
【０００９】
また、本発明に係る画像処理プログラムは、上述した画像処理方法を画像処理装置に実行させることを特徴とする。
【発明の効果】
【００１０】
本発明に係る画像処理装置は、同一の被写体を撮像して得られた複数の画像データを取得し、当該複数の画像データ毎に上述した彩度強調処理を実行し、当該彩度強調処理の後、上述した合成処理により合成画像データを生成する。
このため、彩度が強調された鮮やかな合成画像データを生成することができる。したがって、本発明に係る画像処理装置によれば、カメラユーザの好みに応じた趣向性の高い合成画像データを生成することができる、という効果を奏する。
【００１１】
本発明に係る撮像装置は、上述した画像処理装置を備えるため、上述した画像処理装置と同様の効果を奏する。
本発明に係る画像処理方法は、上述した画像処理装置が行う方法であるため、上述した画像処理装置と同様の効果を奏する。
本発明に係る画像処理プログラムは、上述した画像処理装置にて実行されるプログラムであるため、上述した画像処理装置と同様の効果を奏する。
【図面の簡単な説明】
【００１２】
【図１】図１は、本発明の実施の形態１に係る撮像装置の構成を示すブロック図である。
【図２】図２は、図１に示した撮像装置の動作を示すフローチャートである。
【図３】図３は、図１に示した表示部に表示されるメニュー画面の一例を示す図である。
【図４】図４は、図２に示した比較鮮やか合成処理（ステップＳ１２）を示すフローチャートである。
【図５Ａ】図５Ａは、図４に示したステップＳ１２Ｂを説明する図である。
【図５Ｂ】図５Ｂは、図４に示したステップＳ１２Ｂを説明する図である。
【図６】図６は、図４に示したステップＳ１２Ｃを説明する図である。
【図７】図７は、図４に示したステップＳ１２Ｈを説明する図である。
【図８】図８は、本発明の実施の形態２に係る撮像装置の動作を示すフローチャートである。
【図９】図９は、本発明の実施の形態２に係るステップＳ１２Ｈを説明する図である。
【図１０】図１０は、本発明の実施の形態３に係る撮像装置の構成を示すブロック図である。
【図１１】図１１は、図１０に示した撮像装置の動作を示すフローチャートである。
【図１２】図１２は、図１０に示した記録部に記録された対応情報の一例を示す図である。
【図１３】図１３は、図１１に示した比較色相合成処理（ステップＳ２０）を示すフローチャートである。
【図１４】図１４は、本発明の実施の形態４に係る撮像装置の構成を示すブロック図である。
【図１５】図１５は、図１４に示した撮像装置の動作を示すフローチャートである。
【図１６】図１６は、図１５に示した鮮やか撮影（ステップＳ２１）を示すフローチャートである。
【図１７】図１７は、図１６に示したステップＳ２１Ａにて標準露出で撮影された標準露出画像データに対応する標準露出画像の一例を示す図である。
【図１８】図１８は、本発明の実施の形態４の変形例を示す図である。
【発明を実施するための形態】
【００１３】
以下に、図面を参照して、本発明を実施するための形態（以下、実施の形態）について説明する。なお、以下に説明する実施の形態によって本発明が限定されるものではない。さらに、図面の記載において、同一の部分には同一の符号を付している。
【００１４】
（実施の形態１）
〔撮像装置の概略構成〕
図１は、本発明の実施の形態１に係る撮像装置１の構成を示すブロック図である。
撮像装置１は、カメラユーザによるユーザ操作に応じて各種のカメラモード（「再生モード」や「鮮やか合成モード」等）に切替可能に構成されている。
「鮮やか合成モード」は、露出値（ＥＶ）を変えながら同一の被写体を連写（複数回、撮像）することにより得られた複数の画像データを合成することにより、撮像素子のダイナミックレンジの不足を補うＨＤＲ撮影を行うモードである。
「再生モード」は、既に撮影及び記録された画像データ（例えば、上記合成画像データ）を表示するモードである。
以下では、撮像装置１の構成として、本発明の要部（撮像装置１が「鮮やか合成モード」に設定されている場合での機能）を主に説明する。
この撮像装置１は、図１に示すように、撮像部２と、メモリ部３と、記録部４と、操作部５と、表示部６と、制御部７とを備える。
【００１５】
撮像部２は、制御部７による制御の下、被写体を撮像して画像データを生成する。この撮像部２は、図１に示すように、光学系２１と、絞り２２と、シャッタ２３と、駆動部２４と、撮像素子２５とを備える。
光学系２１は、少なくともフォーカスレンズ及びズームレンズを有する撮像光学系とし、所定の視野領域からフォーカスレンズで、集光した光を撮像素子２５の受光面に結像する。
絞り２２は、光学系２１が集光した光の入射量を制限することで露出の調整を行う。
シャッタ２３は、フォーカルプレーンシャッタ等を用いて構成され、撮像素子２５の光路入射側に配設される。そして、シャッタ２３は、光学系２１が集光した光を撮像素子２５に入射させる露光状態、または、光学系２１が集光した光を遮断する遮光状態に切り替わる。
駆動部２４は、制御部７による制御の下、光学系２１における光軸Ｌax（図１）に沿った移動、絞り２２の絞り量の調整（Ｆ値の調整）、及びシャッタ２３の露光状態または遮光状態への切替を実行する。
【００１６】
撮像素子２５は、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等を用いて構成され、光学系２１が結像した被写体像を受光して光電変換を行うことによって画像データを生成する。
なお、具体的な図示は省略したが、撮像素子２５の受光面上には、透過させる光の波長帯域に応じてグループ分けされた複数のフィルタ群が所定の形式（例えば、ベイヤ配列）で配列されたカラーフィルタが設けられている。
より具体的に、当該カラーフィルタは、赤の波長帯域の光を透過させる赤フィルタ群と、青の波長帯域の光を透過させる青フィルタ群と、緑の波長帯域の光を透過させる第１緑フィルタ群（赤フィルタ群と同一の列に配列）と、緑の波長帯域の光を透過させる第２緑フィルタ群（青フィルタ群と同一の列に配列）とを有する。
すなわち、撮像素子２５にて生成された画像データは、画素毎に、赤フィルタ群を介した入射光に応じたＲ信号（色成分信号）、青フィルタ群を介した入射光に応じたＢ信号（色成分信号）、第１緑フィルタ群を介した入射光に応じた第１Ｇ信号（色成分信号）、及び第２緑フィルタ群を介した入射光に応じた第２Ｇ信号（色成分信号）を含む。
【００１７】
メモリ部３は、撮像部２の撮像素子２５にて生成された画像データを記憶する。
記録部４は、制御部７が実行する各種プログラム（本発明に係る画像処理プログラムを含む）等を記録する。また、記録部４は、カメラユーザによる操作部５への撮影操作に応じて制御部７にて生成された合成画像データを記録する。
操作部５は、ユーザ操作を受け付けるボタン、スイッチ、タッチパネル等を用いて構成され、当該ユーザ操作に応じた指示信号を制御部７に出力する。
表示部６は、液晶または有機ＥＬ（Electro Luminescence）等からなる表示パネルを用いて構成されている。そして、表示部６は、制御部７による制御の下、所定の画像を表示する。
【００１８】
制御部７は、ＣＰＵ（Central Processing Unit）等を用いて構成され、操作部５からの指示信号等に応じて撮像装置１を構成する各部に対する指示やデータの転送等を行って撮像装置１の動作を統括的に制御する。この制御部７は、図１に示すように、露出設定部７１と、撮像制御部７２と、彩度強調部７３と、合成画像生成部７４と、表示制御部７５とを備える。
露出設定部７１は、駆動部２４を動作させてＦ値及びシャッタスピードで決まる露出値（ＥＶ）を変更しながら撮像部２に撮像させ、当該撮像により得られた各画像データ（ライブビュー画像データ）に基づいて、ＨＤＲ撮影で連写する際の露出値（ＥＶ）の範囲を設定する（以下、ＨＤＲ測光と記載）。
例えば、露出設定部７１は、露出値（ＥＶ）を変更しながら撮像させた各ライブビュー画像データに対応する各ライブビュー画像を複数の領域にそれぞれ分割し、当該複数の領域のうち一の領域に着目して、黒つぶれが生じているか、白とびが生じているかを検出する。そして、露出設定部７１は、黒つぶれが生じた領域を有するライブビュー画像を撮影した際の露出値（ＥＶ）から、白とびが生じた領域を有するライブビュー画像を撮影した際の露出値（ＥＶ）までを、ＨＤＲ撮影で連写する際の露出値（ＥＶ）の範囲に設定する。なお、このような露出値（ＥＶ）の設定は、公知の多分割測光のアルゴリズムや黒つぶれ及び白とびを検出するアルゴリズムを用いて実行することができる。
なお、露出値（ＥＶ）の範囲については、上記のようにＨＤＲ測光により自動的に設定する構成の他、カメラユーザによる操作部５への操作（選択）に応じて、適宜、設定する構成としても構わない。
【００１９】
撮像制御部７２は、ＨＤＲ測光により得られた各ライブビュー画像データに基づいて、ＨＤＲ撮影で連写する撮影枚数を算出する。また、撮像制御部７２は、カメラユーザによる操作部５への撮影操作に応じて、駆動部２４を動作させて露出設定部７１にて設定された範囲で露出値（ＥＶ）を変更しながら、上記算出した撮影枚数だけ撮像部２に被写体を撮像させる。そして、撮像制御部７２は、当該撮像により得られた複数（上記算出した撮影枚数）の画像データ（以下、ＨＤＲ用画像データと記載）をメモリ部３に記憶する。
すなわち、撮像制御部７２は、複数のＨＤＲ用画像データを取得するため、本発明に係る画像取得部としての機能を有する。
【００２０】
彩度強調部７３は、メモリ部３に記憶された複数のＨＤＲ用画像データから画素毎の画素データ（Ｒ信号、Ｂ信号、第１，第２Ｇ信号）をそれぞれ取得し、当該画素毎の画素データの彩度を強調する彩度強調処理を実行する。
より具体的に、彩度強調部７３は、彩度強調処理において、画素データの色相が変化しないように、すなわち、当該色相を固定した状態で、当該画素データの彩度を強調する。
【００２１】
合成画像生成部７４は、彩度強調処理が実行された後、複数のＨＤＲ用画像データにおける対応する画素同士を比較して彩度の最も高い画素を選択し、当該選択した画素により構成された合成画像データを生成する合成処理を実行する。そして、合成画像生成部７４は、生成した合成画像データを記録部４に記録する。
なお、本実施の形態１において、彩度強調処理及び合成処理では、Ｒ信号、Ｂ信号、第１Ｇ信号、及び第２Ｇ信号の少なくともいずれかの信号レベルが飽和している画素（以下、飽和画素と記載）や、当該信号レベルがノイズレベル未満である画素（以下、ノイズ画素と記載）は、除外される。
そして、上述した撮像制御部７２（画像取得部）、彩度強調部７３、及び合成画像生成部７４は、本発明に係る画像処理装置としての機能を有する。
表示制御部７５は、表示部６の動作を制御し、所定の画像を表示部６に表示させる。
【００２２】
〔撮像装置の動作〕
次に、上述した撮像装置１の動作（本発明に係る画像処理方法）について説明する。
図２は、撮像装置１の動作を示すフローチャートである。
カメラユーザによる操作部５への起動操作によって撮像装置１の電源がオンになる（ステップＳ１：Ｙｅｓ）と、制御部７は、撮像装置１がどのカメラモードに設定されているかを判断する（ステップＳ２，Ｓ４）。
図３は、表示部６に表示されるメニュー画面の一例を示す図である。
例えば、図３に示したメニュー画面上で、カメラユーザによる操作部（タッチパネル）５への操作により、操作アイコンＭ１がタッチされた場合には、撮像装置１は、「再生モード」に設定される。また、カメラユーザによる操作部５への操作により、操作アイコンＭ２がタッチされた場合には、撮像装置１は、「鮮やか合成モード」に設定される。
【００２３】
撮像装置１が「再生モード」に設定されていると判断した場合（ステップＳ２：Ｙｅｓ）には、制御部７は、記録部４に記録された画像データ（例えば、合成画像データ）に対応する画像を表示部６に表示させる再生モード処理を実行する（ステップＳ３）。この後、撮像装置１は、ステップＳ１に戻る。
一方、撮像装置１が「再生モード」に設定されていないと判断した場合（ステップＳ２：Ｎｏ）には、制御部７は、撮像装置１が「鮮やか合成モード」に設定されているか否かを判断する（ステップＳ４）。
【００２４】
撮像装置１が「鮮やか合成モード」に設定されていないと判断した場合（ステップＳ４：Ｎｏ）には、制御部７は、その他のカメラモードに対応した処理を実行する（ステップＳ５）。この後、撮像装置１は、ステップＳ１に戻る。
一方、撮像装置１が「鮮やか合成モード」に設定されていると判断された場合（ステップＳ４：Ｙｅｓ）には、露出設定部７１は、ＨＤＲ測光により、ＨＤＲ撮影で連写する際の露出値（ＥＶ）の範囲を設定する（ステップＳ６）。
【００２５】
ステップＳ６の後、撮像制御部７２は、カメラユーザによる操作部５への撮影操作があったか否かを判断する（ステップＳ７）。
撮影操作がないと判断された場合（ステップＳ７：Ｎｏ）には、撮像装置１は、ステップＳ１に戻る。
一方、撮影操作があったと判断した場合（ステップＳ７：Ｙｅｓ）には、撮像制御部７２は、ステップＳ６でのＨＤＲ測光により得られた各ライブビュー画像データに基づいて、ＨＤＲ撮影で連写する撮影枚数を算出する（ステップＳ８）。
具体的に、撮像制御部７２は、ＨＤＲ測光により得られた全てのライブビュー画像における全画素のうち、最小輝度値ＢＶminとなる画素、及び最大輝度値ＢＶmaxとなる画素を特定する。そして、撮像制御部７２は、以下の式（１）により、撮影枚数を算出する。
撮影枚数＝（ＢＶmax−ＢＶmin）／露出段差  ・・・（１）
ここで、式（１）中、露出段差は、ＨＤＲ撮影で連写する際に切り替える露出値（ＥＶ）の差（例えば、０．５ＥＶ）を意味する。
【００２６】
ステップＳ８の後、撮像制御部７２は、駆動部２４を動作させ、露出値（ＥＶ）をステップＳ６にて設定された範囲のうち最低となる露出値（ＥＶ）に設定する（ステップＳ９）。
ステップＳ９の後、撮像制御部７２は、撮像部２に被写体を撮像（静止画撮影）させる（ステップＳ１０：画像取得ステップ）。そして、撮像制御部７２は、当該撮像により得られたＨＤＲ用画像データをメモリ部３に記憶する。
ステップＳ１０の後、撮像制御部７２は、ステップＳ８にて算出した撮影枚数だけ撮像部２に被写体を撮像させたか（全枚数の撮影を完了したか）否かを判断する（ステップＳ１１）。
【００２７】
全枚数の撮影を完了していないと判断した場合（ステップＳ１１：Ｎｏ）には、撮像装置１は、ステップＳ９に戻る。そして、撮像装置１は、ステップＳ９にて露出段差（例えば、０．５ＥＶ）だけ露出値（ＥＶ）を増加させ、ステップＳ１０にて当該露出値（ＥＶ）で撮像部２に被写体を撮像させる。
ステップＳ９〜Ｓ１１を繰り返し実行した結果、全枚数の撮影を完了したと判断された場合（ステップＳ１１：Ｙｅｓ）には、制御部７は、比較鮮やか合成処理を実行する（ステップＳ１２）。この後、撮像装置１は、ステップＳ１に戻る。
【００２８】
〔比較鮮やか合成処理〕
図４は、図２に示した比較鮮やか合成処理（ステップＳ１２）を示すフローチャートである。
先ず、彩度強調部７３は、メモリ部３に記憶された複数のＨＤＲ用画像データから対象となる画素位置（以下、対象画素位置と記載）の各画素の画素データをそれぞれ取得する（ステップＳ１２Ａ）。
ステップＳ１２Ａの後、彩度強調部７３は、彩度強調処理を実行する前に、ステップＳ１２Ａにて取得した各画素の画素データに基づいて、飽和画素及びノイズ画素を特定し、彩度強調処理を実行する対象となる画素から当該飽和画素及びノイズ画素を除外する（ステップＳ１２Ｂ）。
【００２９】
図５Ａ及び図５Ｂは、ステップＳ１２Ｂを説明する図である。具体的に、図５Ａ及び図５Ｂは、飽和画素におけるＲ，Ｇ，Ｂ信号毎の信号レベルを示すグラフである。なお、図５Ａ及び図５Ｂでは、説明の便宜上、第１，第２Ｇ信号を纏めてＧ信号としている。
例えば、彩度強調部７３は、図５Ａに示すように、Ｒ，Ｇ，Ｂ信号の全ての信号レベルが飽和している（飽和レベルである）場合には、白とびしている飽和画素として特定する。また、彩度強調部７３は、図５Ｂに示すように、Ｒ，Ｇ，Ｂ信号のいずれかの信号レベルが飽和している場合には、色とびしている飽和画素として特定する。
ここで、飽和レベルとは、例えば、Ｒ，Ｇ，Ｂ信号が８ビットの階調値で表現されている場合には、「２５５」の階調値を有するレベルを意味する。
また、例えば、彩度強調部７３は、Ｒ，Ｇ，Ｂ信号の全ての信号レベルがノイズレベル（図５Ａ，図５Ｂ）である場合には、黒つぶれしているノイズ画素として特定する。また、彩度強調部７３は、Ｒ，Ｇ，Ｂ信号のいずれかの信号レベルがノイズレベルである場合には、色つぶれしているノイズ画素として特定する。
ここで、ノイズレベルとは、例えば、Ｒ，Ｇ，Ｂ信号が８ビットの階調値で表現されている場合には、「５」程度の階調値を有するレベルを意味する。
【００３０】
ステップＳ１２Ｂの後、彩度強調部７３は、対象画素位置の各画素のうち、ステップＳ１２Ｂにて除外していない画素の画素データに対して、当該画素の色相が変化しないように、彩度強調処理を実行する（ステップＳ１２Ｃ：彩度強調ステップ）。
図６は、ステップＳ１２Ｃを説明する図である。具体的に、図６は、図５Ａ及び図５Ｂと同様に、ある画素におけるＲ，Ｇ，Ｂ信号毎の信号レベルを示すグラフである。そして、図６（ａ）は彩度強調処理を実行する前の信号レベルを示し、図６（ｂ）は彩度強調処理を実行した後の信号レベルを示している。
【００３１】
ここで、例えば、ＨＳＶ色空間では、色相Ｈは、以下の式（２）〜（４）で算出することができる。
なお、式（２）は、Ｒ，Ｇ，Ｂ信号のうち「Ｒ信号」の信号レベルが最も高い場合での色相Ｈである。式（３）は、Ｒ，Ｇ，Ｂ信号のうち「Ｇ信号」の信号レベルが最も高い場合での色相Ｈである。式（４）は、Ｒ，Ｇ，Ｂ信号のうち「Ｂ信号」の信号レベルが最も高い場合での色相Ｈである。式（２）〜（４）中、「Ｒ」はＲ信号の信号レベルであり、「Ｇ」はＧ信号の信号レベルであり、「Ｂ」はＢ信号の信号レベルである。また、「Ｍａｘ（ＲＧＢ）」は、Ｒ，Ｇ，Ｂ信号のうち最も高い信号レベルであり、「Ｍｉｎ（ＲＧＢ）」は、Ｒ，Ｇ，Ｂ信号のうち最も低い信号レベルである（以下の式（５）も同様）。
色相Ｈ＝（{Ｇ−Ｂ}／{Ｍａｘ（ＲＧＢ）−Ｍｉｎ（ＲＧＢ）}）×６０°・・・（２）
色相Ｈ＝（{Ｂ−Ｒ}／{Ｍａｘ（ＲＧＢ）−Ｍｉｎ（ＲＧＢ）}）×６０°＋１２０°
・・・（３）
色相Ｈ＝（{Ｒ−Ｇ}／{Ｍａｘ（ＲＧＢ）−Ｍｉｎ（ＲＧＢ）}）×６０°＋２４０°
・・・（４）
【００３２】
すなわち、彩度強調部７３は、図６に示す例では、Ｒ信号の信号レベルが最も高く、Ｂ信号の信号レベルが最も低いため、Ｒ信号及びＢ信号の各信号レベルの差分とＧ信号及びＢ信号の各信号レベルの差分との比率が変化しないように（式（２）で示した色相Ｈが変化しないように）、画素データの彩度強調処理を実行する（ステップＳ１２Ｃ）。
より具体的に、彩度強調部７３は、図６に示す例では、Ｒ信号及びＢ信号の各信号レベルの差分とＧ信号及びＢ信号の各信号レベルの差分との比率が変化しないように、Ｒ信号の信号レベルが飽和レベルに達するまで、画素データの彩度強調処理を実行する。
なお、彩度強調処理では、Ｒ，Ｇ，Ｂ信号のうち最も高い信号レベルを飽和レベルに達するように処理する構成に限られず、例えば、カメラユーザによる操作部５への操作に応じて設定されたレベルまで達するように構成しても構わない。
【００３３】
ステップＳ１２Ｃの後、合成画像生成部７４は、対象画素位置の各画素のうち、ステップＳ１２Ｂにて除外していない画素の画素データに基づいて、当該画素の彩度を算出する（ステップＳ１２Ｄ）。
ここで、例えば、ＨＳＶ色空間では、彩度Ｓは、以下の式（５）で算出することができる。
彩度Ｓ＝（Ｍａｘ（ＲＧＢ）−Ｍｉｎ（ＲＧＢ））／Ｍａｘ（ＲＧＢ）・・・（５）
【００３４】
ステップＳ１２Ｄの後、合成画像生成部７４は、ステップＳ１２Ｄにて算出した彩度を比較することにより、対象画素位置の各画素のうち、彩度が最も高い画素を選択する（ステップＳ１２Ｅ）。
ステップＳ１２Ｅの後、合成画像生成部７４は、メモリ部３に記憶された複数のＨＤＲ用画像データにおける全画素位置で彩度が最も高い画素を選択したか（全画素位置で実施したか）否かを判断する（ステップＳ１２Ｆ）。
全画素位置で実施していないと判断された場合（ステップＳ１２Ｆ：Ｎｏ）には、制御部７は、対象画素位置を他の画素位置に切り替え（ステップＳ１２Ｇ）、ステップＳ１２Ａに戻る。
【００３５】
ステップＳ１２Ａ〜Ｓ１２Ｇが繰り返し実行された結果、全画素位置で実施したと判断した場合（ステップＳ１２Ｆ：Ｙｅｓ）には、合成画像生成部７４は、各画素位置の画素としてステップＳ１２Ｅにて選択した画素をそれぞれ採用（選択した画素を合成）し、合成画像データを生成する合成処理を実行する（ステップＳ１２Ｈ：合成画像生成ステップ）。
図７は、ステップＳ１２Ｈを説明する図である。具体的に、図７では、ステップＳ８にて算出された撮影枚数が「３枚」の場合であって、同一の被写体である「山」を３回撮影した場合を例示している。そして、図７（ａ）は、露出値（ＥＶ）＝−１で撮影されるとともに彩度強調処理（ステップＳ１２Ｃ）が施された後のＨＤＲ用画像データに対応するＨＤＲ用画像Ｗ１０１を示している。図７（ｂ）は、露出値（ＥＶ）＝０で撮影されるとともに彩度強調処理が施された後のＨＤＲ用画像データに対応するＨＤＲ用画像Ｗ１０２を示している。図７（ｃ）は、露出値（ＥＶ）＝１で撮影されるとともに彩度強調処理が施された後のＨＤＲ用画像データに対応するＨＤＲ用画像Ｗ１０３を示している。図７（ｄ）は、各ＨＤＲ用画像Ｗ１０１〜Ｗ１０３に基づいて生成された合成画像Ｗ１００（合成画像データ）を示している。
【００３６】
図７に示す例では、ＨＤＲ用画像Ｗ１０１は、露出値（ＥＶ）が低いため、「山」の背景部分である「空」に相当する領域（ＨＤＲ用画像Ｗ１０３の領域Ａｒ１Ｃに対応する領域）が白とびしている。また、ＨＤＲ用画像Ｗ１０３は、露出値（ＥＶ）が高いため、「山」の前方側に位置する「木々」に相当する領域（ＨＤＲ用画像Ｗ１０１の領域Ａｒ１Ａに対応する領域）が黒つぶれしている。
そして、図７に示す例では、ステップＳ１２Ｅにおいて、ＨＤＲ用画像Ｗ１０１〜Ｗ１０３における対応する画素同士を比較した結果、ＨＤＲ用画像Ｗ１０１の領域Ａｒ１Ａにおける各画素、ＨＤＲ用画像Ｗ１０２の領域Ａｒ１Ｂにおける各画素、及びＨＤＲ用画像Ｗ１０３の領域Ａｒ１Ｃにおける各画素が最も高い彩度を有している画素として選択されている。このため、合成画像生成部７４は、ステップＳ１２Ｈにおいて、図７（ｄ）に示すように、各画素位置の画素として領域Ａｒ１Ａ〜Ａｒ１Ｃの各画素をそれぞれ採用し、合成画像Ｗ１００を生成する。
【００３７】
ステップＳ１２Ｈの後、表示制御部７５は、ステップＳ１２Ｈにて生成された合成画像データに応じた合成画像（図７の例では、合成画像Ｗ１００）を表示部６に表示させる（ステップＳ１２Ｉ）。この後、撮像装置１は、図２に示したメインルーチンに戻る。
【００３８】
以上説明した本実施の形態１に係る撮像装置１は、同一の被写体を撮像して得られた複数のＨＤＲ用画像データを取得し（ステップＳ１０）、当該複数のＨＤＲ用画像データ毎に彩度強調処理を実行し（ステップＳ１２Ｃ）、当該彩度強調処理の後、合成処理により合成画像データを生成する（ステップＳ１２Ｈ）。
このため、彩度が強調された鮮やかな合成画像データを生成することができる。したがって、本実施の形態１に係る撮像装置１によれば、カメラユーザの好みに応じた趣向性の高い合成画像データを生成することができる、という効果を奏する。
【００３９】
また、本実施の形態１に係る撮像装置１は、画素の色相が変化しないように、彩度強調処理を実行する（ステップＳ１２Ｃ）。
このため、違和感がなく自然な状態で彩度が強調された鮮やかな合成画像データを生成することができる。
【００４０】
また、本実施の形態１に係る撮像装置１は、彩度強調処理（ステップＳ１２Ｃ）及び合成処理（ステップＳ１２Ｈ）において、飽和画素及びノイズ画素が除外されている。
このため、白とび、色とび、黒つぶれ、及び色つぶれ等の階調の損失のない自然な合成画像データを生成することができる。
【００４１】
（実施の形態２）
次に、本発明の実施の形態２について説明する。
以下の説明では、上述した実施の形態１と同様の構成及びステップには同一符号を付し、その詳細な説明は省略または簡略化する。
上述した実施の形態１に係る「鮮やか合成モード」では、露出値（ＥＶ）を変えながら同一の被写体を連写することにより得られた複数のＨＤＲ用画像データを合成していた。以下、当該合成方式を「ＨＤＲ合成方式」と記載する。
これに対して本実施の形態２に係る「鮮やか合成モード」では、同一の被写体を同一の露出値（ＥＶ）でかつ所定の時間を空けて複数回、撮像することにより得られた複数の画像データを合成する。以下、当該合成方式を「同一連続露光合成方式」と記載する。
本実施の形態２に係る撮像装置は、上述した実施の形態１で説明した撮像装置１（図１）と同様の構成である。
以下、本実施の形態２に係る撮像装置１の動作を説明する。
【００４２】
〔撮像装置の動作〕
図８は、本発明の実施の形態２に係る撮像装置１の動作を示すフローチャートである。
本実施の形態２に係る撮像装置１の動作は、図８に示すように、上述した実施の形態１で説明した動作（図２，図４）に対して、ステップＳ６，Ｓ８〜１１の代わりにステップＳ６Ａ，Ｓ１３，Ｓ９Ａ〜Ｓ１１Ａを採用した点が異なるのみである。このため、以下では、ステップＳ６Ａ，Ｓ１３，Ｓ９Ａ〜Ｓ１１Ａのみを説明する。
【００４３】
ステップＳ６Ａは、ステップＳ４にて撮像装置１が「鮮やか合成モード」に設定されていると判断された場合（ステップＳ４：Ｙｅｓ）に実行される。
具体的に、露出設定部７１は、ステップＳ６Ａにおいて、撮像部２に撮像させ、当該撮像により得られたライブビュー画像データに基づいて、「同一連続露光合成方式」で複数回、撮像する際の適正露出（ＥＶ）を設定する（以下、測光と記載）。
なお、このような適正露出の設定は、公知の中央部重点測光、スポット測光、あるいは多分割測光のアルゴリズムを用いて実行することができる。
【００４４】
ステップＳ１３は、ステップＳ７にて撮影操作があったと判断された場合（ステップＳ７：Ｙｅｓ）に実行される。
具体的に、撮像制御部７２は、ステップＳ１３において、カメラユーザによる操作部５への操作に応じて予め設定され、メモリ部３に記憶された撮影枚数及び撮影間隔を取得する。
【００４５】
ステップＳ１３の後、撮像制御部７２は、駆動部２４を動作させ、露出値（ＥＶ）をステップＳ６Ａにて設定された適正露出に設定する（ステップＳ９Ａ）。
ステップＳ９Ａの後、撮像制御部７２は、撮像部２に被写体を撮像（静止画撮影）させる（ステップＳ１０Ａ：画像取得ステップ）。そして、撮像制御部７２は、当該撮像により得られたＨＤＲ用画像データをメモリ部３に記憶する。
ステップＳ１０Ａの後、撮像制御部７２は、ステップＳ１３にて取得した撮影枚数だけ撮像部２に被写体を撮像させたか（全枚数の撮影を完了したか）否かを判断する（ステップＳ１１Ａ）。
【００４６】
全枚数の撮影を完了していないと判断した場合（ステップＳ１１Ａ：Ｎｏ）には、撮像装置１は、ステップＳ９Ａに戻る。そして、撮像装置１は、ステップＳ１３にて取得した撮影間隔が経過した場合に、ステップＳ９Ａにて設定した適正露出で再度、ステップＳ１０Ａにて撮像部２に被写体を撮像させる。
ステップＳ９Ａ〜Ｓ１１Ａを繰り返し実行した結果、全枚数の撮影を完了したと判断された場合（ステップＳ１１Ａ：Ｙｅｓ）には、撮像装置１は、比較鮮やか合成処理（ステップＳ１２）に移行する。
【００４７】
なお、本実施の形態２に係る比較鮮やか合成処理は、上述した実施の形態１で説明した比較鮮やか合成処理（ステップＳ１２）と同様である。以下では、図９を参照しながら、ステップＳ１２Ｈを主に説明する。
図９は、本実施の形態２に係るステップＳ１２Ｈを説明する図である。具体的に、図９は、ステップＳ１３にて取得された撮影枚数が「３枚」で撮影間隔が「１０分」の場合であって、同一の被写体である「山」を日没３０分前に撮影を開始し、以降、１０分間隔で２回（合計３回）撮影した場合を例示している。なお、当該撮影時の露出値（ＥＶ）は同一である。そして、図９（ａ）は、日没３０分前に撮影されるとともに彩度強調処理（ステップＳ１２Ｃ）が施された後のＨＤＲ用画像データに対応するＨＤＲ用画像Ｗ２０１を示している。図９（ｂ）は、日没２０分前に撮影されるとともに彩度強調処理が施された後のＨＤＲ用画像データに対応するＨＤＲ用画像Ｗ２０２を示している。図９（ｃ）は、日没１０分前に撮影されるとともに彩度強調処理が施された後のＨＤＲ用画像データに対応するＨＤＲ用画像Ｗ２０３を示している。図９（ｄ）は、各ＨＤＲ用画像Ｗ２０１〜Ｗ２０３に基づいて生成された合成画像Ｗ２００（合成画像データ）を示している。
【００４８】
図９に示す例では、ステップＳ１２Ｅにおいて、ＨＤＲ用画像Ｗ２０１〜Ｗ２０３における対応する画素同士を比較した結果、ＨＤＲ用画像Ｗ２０１の領域Ａｒ２Ａにおける各画素、ＨＤＲ用画像Ｗ２０２の領域Ａｒ２Ｂにおける各画素、及びＨＤＲ用画像Ｗ２０３の領域Ａｒ２Ｃにおける各画素が最も高い彩度を有している画素として選択されている。このため、合成画像生成部７４は、ステップＳ１２Ｈにおいて、図９（ｄ）に示すように、各画素位置の画素として領域Ａｒ２Ａ〜Ａｒ２Ｃの各画素をそれぞれ採用し、合成画像Ｗ２００を生成する。
【００４９】
以上説明した本実施の形態２のように「同一連続露光合成方式」を採用した場合であっても、上述した実施の形態１と同様の効果を奏する。
【００５０】
（実施の形態２の変形例）
上述した実施の形態２では、撮影操作があった（ステップＳ７：Ｙｅｓ）直後に最初の撮影を行っていたが、これに限られず、例えば、カメラユーザによる操作部５への操作に応じて、予め設定され、メモリ部３に記憶された撮影時刻（日の出時刻、日没時刻等）になった場合に最初の撮影を行うように構成しても構わない。
【００５１】
（実施の形態３）
次に、本発明の実施の形態３について説明する。
以下の説明では、上述した実施の形態１，２と同様の構成及びステップには同一符号を付し、その詳細な説明は省略または簡略化する。
本実施の形態３に係る撮像装置は、上述した実施の形態１で説明した撮像装置１に対して、「鮮やか合成モード」の代わりに「シーン判定付き鮮やか合成モード」を採用している。
以下、本実施の形態３に係る撮像装置、及び当該撮像装置の動作を説明する。
【００５２】
〔撮像装置の構成〕
図１０は、本発明の実施の形態３に係る撮像装置１Ｂの構成を示すブロック図である。
本実施の形態３に係る撮像装置１Ｂは、上述した実施の形態１で説明した撮像装置１（図１）に対して、制御部７の一部の機能が変更されている。
本実施の形態３に係る制御部７Ｂは、図１０に示すように、上述した実施の形態１で説明した制御部７に対して、露出設定部７１及び彩度強調部７３が省略され、シーン判定部７６及び設定部７７が追加されている。
シーン判定部７６は、撮像部２にて撮像されたライブビュー画像データに基づいて、撮影時におけるシーンを解析（判定）する。例えば、シーン判定部７６は、ライブビュー画像データに含まれる各画素の画素データ（Ｒ信号、Ｂ信号、第１，第２Ｇ信号）の色成分の分布から風景（木々）、夜景、夕日、ビーチ、スノー、星空等のシーンを判定する。
【００５３】
設定部７７は、上述した実施の形態１で説明した露出設定部７１と同様の機能（ＨＤＲ測光により「ＨＤＲ合成方式」で複数回、撮像する際の露出値（ＥＶ）の範囲を設定する機能）の他、以下の機能を有する。
すなわち、設定部７７は、上述した実施の形態２で説明した露出設定部７１と同様の機能（ＨＤＲ測光により得られたライブビュー画像データに基づいて、「同一連続露光合成方式」で複数回、撮像する際の適正露出（ＥＶ）を設定する機能）を有する。また、設定部７７は、シーン判定部７６にて判定されたシーンに応じて、「ベースとなる色相」、「合成方式」、及び「撮影枚数」を設定する機能を有する。
【００５４】
〔撮像装置の動作〕
図１１は、撮像装置１Ｂの動作を示すフローチャートである。
本実施の形態３に係る撮像装置１Ｂの動作は、上述した実施の形態１で説明した撮像装置１の動作（図２，図４）に対して、ステップＳ４，Ｓ６，Ｓ９〜Ｓ１２の代わりにステップＳ１４，Ｓ６Ｂ，Ｓ９Ｂ〜Ｓ１１Ｂ，Ｓ２０を採用するとともに、ステップＳ１５〜Ｓ１９を追加した点が異なるのみである。このため、以下では、ステップＳ１４，Ｓ６Ｂ，Ｓ１５〜Ｓ１９，Ｓ９Ｂ〜Ｓ１１Ｂ，Ｓ２０のみを説明する。
【００５５】
ステップＳ１４は、ステップＳ２にて撮像装置１Ｂが「再生モード」に設定されていないと判断された場合（ステップＳ２：Ｎｏ）に実行される。
具体的に、制御部７Ｂは、ステップＳ１４において、撮像装置１Ｂが「シーン判定付き鮮やか合成モード」に設定されているか否かを判断する。
撮像装置１Ｂが「シーン判定付き鮮やか合成モード」に設定されていないと判断された場合（ステップＳ１４：Ｎｏ）には、制御部７Ｂは、ステップＳ５に移行する。
一方、撮像装置１Ｂが「シーン判定付き鮮やか合成モード」に設定されていると判断された場合（ステップＳ１４：Ｙｅｓ）には、設定部７７は、ＨＤＲ測光により、「ＨＤＲ合成方式」で複数回、撮像する際の露出値（ＥＶ）の範囲を設定するとともに、「同一連続露光合成方式」で複数回、撮像する際の適正露出（ＥＶ）を設定する（ステップＳ６Ｂ）。
【００５６】
ステップＳ６Ｂの後、シーン判定部７６は、ステップＳ６ＢでのＨＤＲ測光により得られたライブビュー画像データに基づいて、撮影時におけるシーンを解析（判定）する（ステップＳ１５：シーン判定ステップ）。
ステップＳ１５の後、設定部７７は、記録部４に記録された対応情報を参照し、ステップＳ１５にて判定されたシーンに対応する「ベースとなる色相」を決定する（ステップＳ１６：設定ステップ）とともに、当該シーンに対応する「合成方式」を選択する（ステップＳ１７）。この後、撮像装置１Ｂは、ステップＳ７に移行する。
【００５７】
図１２は、対応情報の一例を示す図である。
ここで、対応情報は、図１２に示すように、シーン判定部７６にて判定されたシーンに応じて、「ベースとなる色相」、「合成方式」、及び「撮影枚数」が対応付けられた情報である。
具体的には、例えば、シーンが「風景（木々）」に対しては、「ベースとなる色相」として緑（１２０°）が対応付けられ、「合成方式」としてＨＤＲ合成方式が対応付けられている。また、シーンが「夜景」に対しては、「ベースとなる色相」として黄（８０°）が対応付けられ、「合成方式」として同一連続露光合成方式が対応付けられ、「撮影枚数」として「○枚」が対応付けられている。撮影枚数については、合成方式が「同一連続露光合成方式」である場合にのみ対応付けられている。
【００５８】
ステップＳ１８は、ステップＳ７にて撮影操作があったと判断された場合（ステップＳ７：Ｙｅｓ）に実行される。
具体的に、制御部７Ｂは、ステップＳ１８において、ステップＳ１７にて選択された合成方式が「ＨＤＲ合成方式」であるか否かを判断する。
「ＨＤＲ合成方式」であると判断された場合（ステップＳ１８：Ｙｅｓ）には、撮像装置１Ｂは、ステップＳ８に移行する。
一方、「ＨＤＲ合成方式」ではない（「同一連続露光合成方式」である）と判断された場合（ステップＳ１８：Ｎｏ）には、設定部７７は、記録部４に記録された対応情報を参照し、ステップＳ１５にて判定されたシーンに対応する「撮影枚数」を決定する（ステップＳ１９）。
【００５９】
ステップＳ９Ｂ〜Ｓ１１Ｂは、ステップＳ８の後、または、ステップＳ１９の後に実行される。
具体的に、撮像制御部７２は、ステップＳ９Ｂ〜Ｓ１１Ｂにおいて、ステップＳ１７にて選択された合成方式が「ＨＤＲ合成方式」である場合には、上述した実施の形態１で説明したステップＳ９〜Ｓ１１と同様の処理を実行する。また、撮像制御部７２は、ステップＳ９Ｂ〜Ｓ１１Ｂにおいて、ステップＳ１７にて選択された合成方式が「同一連続露光合成方式」である場合には、上述した実施の形態２で説明したステップＳ９Ａ〜Ｓ１１Ａと同様の処理を実行する。
【００６０】
ステップＳ２０（比較色相合成処理）は、ステップＳ１１Ｂにて全枚数（「ＨＤＲ合成方式」の場合にはステップＳ８で算出した撮影枚数、「同一連続露光合成方式」の場合にはステップＳ１９で算出した撮影枚数）の撮影が完了したと判断された場合（ステップＳ１１Ｂ：Ｙｅｓ）に実行される。
【００６１】
〔比較色相合成処理〕
図１３は、比較色相合成処理（ステップＳ２０）を示すフローチャートである。
先ず、合成画像生成部７４は、上述した実施の形態１で説明したステップＳ１２Ａ，Ｓ１２Ｂと同様に、メモリ部３に記憶された複数のＨＤＲ用画像データにおける対象画素位置の各画素の画素データの取得（ステップＳ２０Ａ）、飽和画素及びノイズ画素の除外（ステップＳ２０Ｂ）を実施する。
ステップＳ２０Ｂの後、合成画像生成部７４は、対象画素位置の各画素のうち、ステップＳ２０Ｂにて除外していない画素の画素データに基づいて、例えば、上述した式（２）〜（４）により、当該画素の色相を算出する（ステップＳ２０Ｃ）。
【００６２】
ステップＳ２０Ｃの後、合成画像生成部７４は、ステップＳ２０Ｃにて算出した各画素の色相とステップＳ１６にて決定された「ベースとなる色相」とを比較することにより、対象画素位置の各画素のうち、当該「ベースとなる色相」に最も近い色相を有する画素を選択する（ステップＳ２０Ｄ）。
ステップＳ２０Ｄの後、合成画像生成部７４は、メモリ部３に記憶された複数のＨＤＲ用画像データにおける全画素位置で「ベースとなる色相」に最も近い色相を有する画素を選択したか（全画素位置で実施したか）否かを判断する（ステップＳ２０Ｅ）。
全画素位置で実施していないと判断された場合（ステップＳ２０Ｅ：Ｎｏ）には、制御部７Ｂは、対象画素位置を他の画素位置に切り替え（ステップＳ２０Ｆ）、ステップＳ２０Ａに戻る。
【００６３】
ステップＳ２０Ａ〜Ｓ２０Ｆが繰り返し実行された結果、全画素位置で実施したと判断した場合（ステップＳ２０Ｅ：Ｙｅｓ）には、合成画像生成部７４は、各画素位置の画素としてステップＳ２０Ｄにて選択した画素をそれぞれ採用（選択した画素を合成）し、合成画像データを生成する合成処理を実行する（ステップＳ２０Ｇ：合成画像生成ステップ）。
ステップＳ２０Ｇの後、表示制御部７５は、ステップＳ２０Ｇにて生成された合成画像データに応じた合成画像を表示部６に表示させる（ステップＳ２０Ｈ）。この後、撮像装置１Ｂは、図１１に示したメインルーチンに戻る。
【００６４】
そして、本実施の形態３に係る撮像装置１Ｂによれば、ベースとなる色相が撮影時のシーンに応じた色相となる合成画像データを生成することができ、上述した実施の形態１と同様の効果を奏する。
【００６５】
（実施の形態４）
次に、本発明の実施の形態４について説明する。
以下の説明では、上述した実施の形態１と同様の構成及びステップには同一符号を付し、その詳細な説明は省略または簡略化する。
本実施の形態４に係る撮像装置は、上述した実施の形態１で説明した撮像装置１に対して、「鮮やか合成モード」での処理の仕方が異なる。
以下、本実施の形態４に係る撮像装置、及び当該撮像装置の動作を説明する。
【００６６】
〔撮像装置の構成〕
図１４は、本発明の実施の形態４に係る撮像装置１Ｃの構成を示すブロック図である。
本実施の形態４に係る撮像装置１Ｃは、上述した実施の形態１で説明した撮像装置１（図１）に対して、制御部７の一部の機能が変更されている。
本実施の形態４に係る制御部７Ｃは、図１４に示すように、上述した実施の形態１で説明した制御部７に対して、露出設定部７１が省略され、露出補正部７８及びコントラスト強調部７９が追加されている。
露出補正部７８は、彩度強調処理が実行された後の画素データに対して、露出補正（明るさ補正）を行う。
コントラスト強調部７９は、露出補正部７８にて露出補正が行われた後の画像データに対してコントラスト強調処理を実行する。なお、コントラスト強調処理としては、例えば、公知のヒストグラム均等化法等を例示することができる。
【００６７】
〔撮像装置の動作〕
図１５は、撮像装置１Ｃの動作を示すフローチャートである。
本実施の形態４に係る撮像装置１Ｃの動作は、図１５に示すように、上述した実施の形態１で説明した動作（図２）に対して、ステップＳ６が省略されるとともに、ステップＳ８〜Ｓ１２の代わりにステップＳ２１を採用した点が異なるのみである。このため、以下では、ステップＳ２１のみを説明する。
なお、撮像装置１Ｃの動作では、ステップＳ６の省略に伴い、ステップＳ４にて撮像装置１Ｃが「鮮やか合成モード」に設定されていると判断された場合（ステップＳ４：Ｙｅｓ）には、撮像装置１Ｃは、ステップＳ７に移行する。
そして、ステップＳ７にて撮影操作があったと判断された場合（ステップＳ７：Ｙｅｓ）に、撮像装置１Ｃは、ステップＳ２１（鮮やか撮影）に移行する。
【００６８】
〔鮮やか撮影〕
図１６は、鮮やか撮影（ステップＳ２１）を示すフローチャートである。
先ず、撮像制御部７２は、駆動部２４を動作させ、露出値（ＥＶ）を標準露出（ＥＶ＝０）に設定するとともに、当該標準露出で撮像部２に被写体を撮像（静止画撮影）させる（ステップＳ２１Ａ）。そして、撮像制御部７２は、当該撮像により得られた画像データ（以下、標準露出画像データと記載）をメモリ部３に記憶する。
【００６９】
図１７は、ステップＳ２１Ａにて標準露出で撮影された標準露出画像データに対応する標準露出画像Ｗ３００の一例を示す図である。具体的に、図１７では、被写体として「山」を撮影した場合を例示している。
そして、図１７に示す例では、標準露出画像Ｗ３００において、「山」の前方側に位置する「木々」に相当する領域Ａｒ３Ａが黒つぶれしている。すなわち、領域Ａｒ３Ａは、ノイズ画素で構成された領域である。また、標準露出画像Ｗ３００において、「山」の背景部分である「空」に相当する領域Ａｒ３Ｃが白とびしている。すなわち、領域Ａｒ３Ｃは、飽和画素で構成された領域である。また、標準露出画像Ｗ３００において、「山」の領域Ａｒ３Ｂについては、黒つぶれも白とびもしていない。
【００７０】
ステップＳ２１Ａの後、彩度強調部７３は、メモリ部３に記憶された標準露出画像データから各画素の画素データをそれぞれ取得する（ステップＳ２１Ｂ）。
ステップＳ２１Ｂの後、彩度強調部７３は、メモリ部３に記憶された標準露出画像データに対応する標準露出画像（図１７の例では、標準露出画像Ｗ３００）の全領域を判定する（ステップＳ２１Ｃ）。
具体的に、彩度強調部７３は、ステップＳ２１Ｃにおいて、ステップＳ２１Ｂにて取得した各画素の画素データに基づいて、上述した実施の形態１で説明したステップＳ１２Ｂと同様に、飽和画素及びノイズ画素を特定する。そして、彩度強調部７３は、メモリ部３に記憶された標準露出画像データに対応する標準露出画像（図１７の例では、標準露出画像Ｗ３００）の全領域を、飽和画素で構成された飽和領域（図１７の例では、領域Ａｒ３Ｃ）、ノイズ画素で構成されたノイズ領域（図１７の例では、領域Ａｒ３Ａ）、及び飽和画素でもノイズ画素でもない通常の画素で構成された通常領域（図１７の例では、領域Ａｒ３Ｂ）に区分けする。
【００７１】
彩度強調部７３は、ステップＳ２１Ｃの判定結果として、飽和画素でもノイズ画素でも構成されていない（ステップＳ２１Ｄ：Ｙｅｓ、ステップＳ２１Ｅ：Ｙｅｓ）と判定した通常領域（図１７の例では、領域Ａｒ３Ｂ）における各画素の画素データに対して、上述した実施の形態１で説明したステップＳ１２Ｃと同様に、彩度強調処理を実行する（ステップＳ２１Ｆ）。
ステップＳ２１Ｆの後、彩度強調部７３は、彩度強調処理を全ての領域（図１７の例では、領域Ａｒ３Ａ〜Ａｒ３Ｃ）で実施したか否かを判断する（ステップＳ２１Ｇ）。
全ての領域で実施していないと判断された場合（ステップＳ２１Ｇ：Ｎｏ）には、撮像装置１Ｃは、ステップＳ２１Ｄに戻る。
【００７２】
また、ステップＳ２１Ｃの判定結果として、飽和画素で構成されている（ステップＳ２１Ｄ：Ｎｏ）と判定した飽和領域（図１７の例では、領域Ａｒ３Ｃ）がある場合には、撮像制御部７２は、露出＋Ｎ段撮影を実行する（ステップＳ２１Ｈ）。
具体的に、撮像制御部７２は、ステップＳ２１Ｈにおいて、駆動部２４を動作させ、露出値（ＥＶ）を標準露出（ＥＶ＝０）よりも高い露出値（ＥＶ＝＋Ｎ）に設定するとともに、当該露出値（ＥＶ＝＋Ｎ）で撮像部２に被写体（ステップＳ２１Ａでの被写体と同一）を撮像（静止画撮影）させる。そして、撮像制御部７２は、当該撮像により得られた画像データ（以下、＋Ｎ段画像データと記載）をメモリ部３に記憶する。
【００７３】
ステップＳ２１Ｈの後、彩度強調部７３は、メモリ部３に記憶された＋Ｎ段画像データから標準露出画像データにおける飽和領域（図１７の例では、領域Ａｒ３Ｃ）に相当する領域（以下、飽和相当領域と記載）における各画素の画素データをそれぞれ取得する。そして、彩度強調部７３は、飽和相当領域における各画素の画素データに対して、ステップＳ２１Ｆと同様に、彩度強調処理を実行する（ステップＳ２１Ｉ）。
ステップＳ２１Ｉの後、露出補正部７８は、ステップＳ２１Ｉにて彩度強調処理が実行された後の飽和相当領域における各画素の画素データに対して、標準露出画像と明るさを合わせるために、露出補正（明るさを増加させる補正）を行う（ステップＳ２１Ｊ）。この後、撮像装置１Ｃは、ステップＳ２１Ｇに移行する。
【００７４】
また、ステップＳ２１Ｃの判定結果として、ノイズ画素で構成されている（ステップＳ２１Ｅ：Ｎｏ）と判定したノイズ領域（図１７の例では、領域Ａｒ３Ａ）がある場合には、撮像制御部７２は、露出−Ｎ段撮影を実行する（ステップＳ２１Ｋ）。
具体的に、撮像制御部７２は、ステップＳ２１Ｋにおいて、駆動部２４を動作させ、露出値（ＥＶ）を標準露出（ＥＶ＝０）よりも低い露出値（ＥＶ＝−Ｎ）に設定するとともに、当該露出値（ＥＶ＝−Ｎ）で撮像部２に被写体（ステップＳ２１Ａでの被写体と同一）を撮像（静止画撮影）させる。そして、撮像制御部７２は、当該撮像により得られた画像データ（以下、−Ｎ段画像データと記載）をメモリ部３に記憶する。
【００７５】
ステップＳ２１Ｋの後、彩度強調部７３は、メモリ部３に記憶された−Ｎ段画像データから標準露出画像データにおけるノイズ領域（図１７の例では、領域Ａｒ３Ａ）に相当する領域（以下、ノイズ相当領域と記載）における各画素の画素データをそれぞれ取得する。そして、彩度強調部７３は、ノイズ相当領域における各画素の画素データに対して、ステップＳ２１Ｆと同様に、彩度強調処理を実行する（ステップＳ２１Ｌ）。
ステップＳ２１Ｌの後、露出補正部７８は、ステップＳ２１Ｌにて彩度強調処理が実行された後のノイズ相当領域における各画素の画素データに対して、標準露出画像と明るさを合わせるために、露出補正（明るさを減少させる補正）を行う（ステップＳ２１Ｍ）。
ステップＳ２１Ｍの後、コントラスト強調部７９は、ステップＳ２１Ｍにて露出補正が実行された後のノイズ相当領域に対して、コントラスト強調処理を実行する（ステップＳ２１Ｎ）。この後、撮像装置１Ｃは、ステップＳ２１Ｇに移行する。
【００７６】
ステップＳ２１Ｆの後、ステップＳ２１Ｊの後、またはステップＳ２１Ｎの後、全ての領域で実施していると判断された場合（ステップＳ２１Ｇ：Ｙｅｓ）には、合成画像生成部７４は、ステップＳ２１Ｆにて彩度強調処理が実行された後の通常領域（図１７の例では、領域Ａｒ３Ｂ）と、ステップＳ２１Ｊにて露出補正が実行された後の飽和相当領域と、ステップＳ２１Ｎにてコントラスト強調処理が実行された後のノイズ相当領域とを合成し（組み合わせ）、合成画像データを生成する（ステップＳ２１Ｏ）。
【００７７】
ステップＳ２１Ｏの後、表示制御部７５は、ステップＳ２１Ｏにて生成された合成画像データに対応する合成画像を表示部６に表示させる（ステップＳ２１Ｐ）。この後、撮像装置１Ｃは、図１５に示したメインルーチンに戻る。
【００７８】
なお、ステップＳ２１Ｃの判定結果として、標準露出画像データの全画素が通常の画素であると判定されている場合には、ステップＳ２１Ｈ〜Ｓ２１Ｊ及びステップＳ２１Ｋ〜Ｓ２１Ｎが行われない。このため、ステップＳ２１Ｏも実行されない。そして、ステップＳ２１Ｐでは、ステップＳ２１Ｆにて標準露出画像データの全画素の画素データに対して彩度強調処理が実行された後の画像データに対応する画像が表示部６に表示される。
また、ステップＳ２１Ｃの判定結果として、標準露出画像データに通常領域、飽和領域、またはノイズ領域が含まれていないと判定されている場合には、ステップＳ２１Ｆ、ステップＳ２１Ｈ〜Ｓ２１Ｊ、またはステップＳ２１Ｋ〜Ｓ２１Ｎが行われない。このため、ステップＳ２１Ｏでは、ステップＳ２１Ｆにて彩度強調処理が実行された後の通常領域と、ステップＳ２１Ｊにて露出補正が実行された後の飽和相当領域と、ステップＳ２１Ｎにてコントラスト強調処理が実行された後のノイズ相当領域とのうち、２つの領域が合成され、合成画像データが生成される。そして、ステップＳ２１Ｐでは、当該合成画像データに対応する合成画像が表示部６に表示される。
【００７９】
そして、本実施の形態４に係る撮像装置１Ｃによれば、上述した実施の形態１と同様の効果を奏する。
【００８０】
（実施の形態４の変形例）
図１８は、本発明の実施の形態４の変形例を示す図である。
上述した実施の形態４において、ステップＳ２１Ｈでの露出＋Ｎ段撮影、及びステップＳ２１Ｋでの露出−Ｎ段撮影での各露出値（ＥＶ）は、予め設定されていた露出値（ＥＶ）であってもよく、あるいは、図１８に示したメニュー画面上で、カメラユーザによる操作部（タッチパネル）５への操作により、設定及び記憶される構成としても構わない。
具体的に、カメラユーザは、操作アイコンＵ１をタッチすることにより露出−Ｎ段撮影での露出値ＥＶ１を高くすることができ、操作アイコンＤ１をタッチすることにより露出−Ｎ段撮影での露出値ＥＶ１を低くすることができる。同様に、カメラユーザは、操作アイコンＵ２をタッチすることにより露出＋Ｎ段撮影での露出値ＥＶ２を高くすることができ、操作アイコンＤ２をタッチすることにより露出＋Ｎ段撮影での露出値ＥＶ２を低くすることができる。
【００８１】
また、上述した実施の形態４では、ステップＳ２１Ａにおいて、標準露出（ＥＶ＝０）で撮影を行っていたが、これに限られず、上述した実施の形態２と同様に、適正露出で撮影を行っても構わない。
【００８２】
（その他の実施の形態）
ここまで、本発明を実施するための形態を説明してきたが、本発明は上述した実施の形態１〜４によってのみ限定されるべきものではない。
上述した実施の形態１〜４では、本発明に係る画像処理装置を撮像装置に採用していたが、これに限られず、例えば、電子顕微鏡（例えば、特開２０１２−１８８１３号公報参照）、カプセル内視鏡（例えば、特開２０１０−２５０１８８号公報参照）、あるいは、工業用内視鏡（例えば、特開２０１２−８８２７８号公報参照）等の他の機器に採用しても構わない。
【００８３】
また、処理フローは、上述した実施の形態１〜４で説明したフローチャートにおける処理の順序に限られず、矛盾のない範囲で変更しても構わない。
さらに、本明細書においてフローチャートを用いて説明した処理のアルゴリズムは、プログラムとして記述することが可能である。このようなプログラムは、コンピュータ内部の記録部に記録してもよいし、コンピュータ読み取り可能な記録媒体に記録してもよい。プログラムの記録部または記録媒体への記録は、コンピュータまたは記録媒体を製品として出荷する際に行ってもよいし、通信ネットワークを介したダウンロードにより行ってもよい。
【００８４】
本実施の形態３及び本実施の形態４に開示されている構成要素の適宜な組み合わせにより、種々の発明で形成ができる。本実施の形態３には、以下に示す付記項１〜８の発明が含まれるものである。
[付記項１]
同一の被写体を撮像して得られた複数の画像データを取得する画像取得部と、
前記画像データに基づいて、撮影時のシーンを判定するシーン判定部と、
前記撮影時のシーンに基づいて、ベースとなる色相を設定する設定部と、
前記複数の画像データにおける対応する画素同士を比較して前記ベースとなる色相に最も近い色相を有する画素を選択し、当該選択した画素により構成された合成画像データを生成する合成処理を実行する合成画像生成部とを備える
ことを特徴とする画像処理装置。
[付記項２]
前記合成処理では、
前記複数の画像データにおける各画素の色成分信号に含まれるＲ，Ｇ，Ｂの少なくともいずれかの信号レベルが飽和している画素は、除外される
ことを特徴とする付記項１に記載の画像処理装置。
[付記項３]
前記合成処理では、
前記複数の画像データにおける各画素の色成分信号に含まれるＲ，Ｇ，Ｂの少なくともいずれかの信号レベルがノイズレベルである画素は、除外される
ことを特徴とする付記項１または２に記載の画像処理装置。
[付記項４]
付記項１〜３のいずれか一つに記載の画像処理装置と、
被写体を撮像して前記複数の画像データを生成する撮像部とを備える
ことを特徴とする撮像装置。
[付記項５]
前記複数の画像データは、
前記撮像部に同一の被写体を異なる露出で撮像させることにより生成させた複数の画像データである
ことを特徴とする付記項４に記載の撮像装置。
[付記項６]
前記複数の画像データは、
前記撮像部に同一の被写体を同一の露出でかつ所定の時間を空けて撮像させることにより生成させた複数の画像データである
ことを特徴とする付記項４に記載の撮像装置。
[付記項７]
画像処理装置が実行する画像処理方法であって、
同一の被写体を撮像して得られた複数の画像データを取得する画像取得ステップと、
前記画像データに基づいて、撮影時のシーンを判定するシーン判定ステップと、
前記撮影時のシーンに基づいて、ベースとなる色相を設定する設定ステップと、
前記複数の画像データにおける対応する画素同士を比較して前記ベースとなる色相に最も近い色相を有する画素を選択し、当該選択した画素により構成された合成画像データを生成する合成画像生成ステップとを含む
ことを特徴とする画像処理方法。
[付記項８]
付記項７に記載の画像処理方法を画像処理装置に実行させる
ことを特徴とする画像処理プログラム。
【００８５】
また、本実施の形態４には、以下に示す付記項１〜９の発明が含まれるものである。
[付記項１]
被写体を撮像して画像データを生成する撮像部と、
前記撮像部に同一の被写体を互いに異なる少なくとも２つの第１露出値及び第２露出値でそれぞれ撮像させて第１画像データ及び第２画像データを生成させる撮像制御部と、
前記第１画像データにおける各画素の色成分信号の信号レベルに基づいて、当該第１画像データの全画素を互いに異なる少なくとも第１領域及び第２領域に区分けする領域判定部と、
前記第１領域における各画素、及び前記第２画像データにおける前記第２領域に相当する第２相当領域における各画素の色成分信号の信号レベルを調整して彩度を強調する彩度強調処理を実行する彩度強調部と、
前記彩度強調処理後の前記第１領域及び前記第２相当領域を合成して合成画像データを生成する合成処理を実行する合成画像生成部とを備える
ことを特徴とする撮像装置。
[付記項２]
前記第２領域における各画素は、
当該各画素の色成分信号に含まれるＲ，Ｇ，Ｂの少なくともいずれかの信号レベルが飽和している画素であり、
前記第２露出値は、
前記第１露出値よりも高い露出値である
ことを特徴とする付記項１に記載の撮像装置。
[付記項３]
前記彩度強調処理後の前記第２相当領域における各画素の画素データに対して、前記第１画像データの明るさに合わせるように、露出補正を行う露出補正部を備え、
前記合成画像生成部は、
前記彩度強調処理後の前記第１領域、及び前記露出補正後の前記第２相当領域を合成して前記合成画像データを生成する
ことを特徴とする付記項２に記載の撮像装置。
[付記項４]
前記第２領域における各画素は、
当該各画素の色成分信号に含まれるＲ，Ｇ，Ｂの少なくともいずれかの信号レベルがノイズレベルである画素であり、
前記第２露出値は、
前記第１露出値よりも低い露出値である
ことを特徴とする付記項１に記載の撮像装置。
[付記項５]
前記彩度強調処理後の前記第２相当領域における各画素の画素データに対して、前記第１画像データの明るさに合わせるように、露出補正を行う露出補正部を備え、
前記合成画像生成部は、
前記彩度強調処理後の前記第１領域、及び前記露出補正後の前記第２相当領域を合成して前記合成画像データを生成する
ことを特徴とする付記項４に記載の撮像装置。
[付記項６]
前記露出補正後の前記第２相当領域に対して、コントラスト強調処理を行うコントラスト強調部を備え、
前記合成画像生成部は、
前記彩度強調処理後の前記第１領域、及び前記コントラスト強調処理後の前記第２相当領域を合成して前記合成画像データを生成する
ことを特徴とする付記項５に記載の撮像装置。
[付記項７]
撮像装置が実行する撮像方法であって、
同一の被写体を互いに異なる少なくとも２つの第１露出値及び第２露出値でそれぞれ撮像し、第１画像データ及び第２画像データを生成する撮像ステップと、
前記第１画像データにおける各画素の色成分信号の信号レベルに基づいて、当該第１画像データの全画素を互いに異なる少なくとも第１領域及び第２領域に区分けする領域判定ステップと、
前記第１領域における各画素、及び前記第２画像データにおける前記第２領域に相当する第２相当領域における各画素の色成分信号の信号レベルを調整して彩度を強調する彩度強調ステップと、
前記彩度強調ステップ後の前記第１領域及び前記第２相当領域を合成して合成画像データを生成する合成画像生成ステップとを含む
ことを特徴とする撮像方法。
[付記項８]
付記項７に記載の撮像方法を撮像装置に実行させる
ことを特徴とする撮像プログラム。
【００８６】
なお、本実施の形態４と付記項との対応関係は、以下の通りである。
本実施の形態４に係る標準露出（ＥＶ＝０）及び標準露出画像データは、付記項に係る第１露出値及び第１画像データにそれぞれ相当する。本実施の形態４に係る露出値（ＥＶ＝−Ｎ，＋Ｎ）及び−Ｎ，＋Ｎ段画像データは、付記項に係る第２露出値及び第２画像データにそれぞれ相当する。本実施の形態４に係る通常領域は、付記項に係る第１領域に相当する。本実施の形態４に係る飽和領域及びノイズ領域は、付記項に係る第２領域に相当する。本実施の形態４に係る彩度強調部７３は、付記項に係る領域判定部及び彩度強調部に相当する。本実施の形態４に係る飽和相当領域及びノイズ相当領域は、上述した付記項に係る第２相当領域に相当する。本実施の形態４に係るステップＳ２１Ａ，Ｓ２１Ｈ，Ｓ２１Ｋは、付記項に係る撮像ステップに相当する。本実施の形態４に係るステップＳ２１Ｃは、付記項に係る領域判定ステップに相当する。本実施の形態４に係るステップＳ２１Ｆ，Ｓ２１Ｉ，Ｓ２１Ｌは、付記項に係る彩度強調ステップに相当する。本実施の形態４に係るステップＳ２１Ｏは、付記項に係る合成画像生成ステップに相当する。
【符号の説明】
【００８７】
１，１Ｂ，１Ｃ・・・撮像装置；２・・・撮像部；３・・・メモリ部；４・・・記録部４・・・操作部；６・・・表示部；７，７Ｂ，７Ｃ・・・制御部；２１・・・光学系；２２・・・絞り；２３・・・シャッタ；２４・・・駆動部；２５・・・撮像素子；７１・・・露出設定部；７２・・・撮像制御部；７３・・・彩度強調部；７４・・・合成画像生成部；７５・・・表示制御部；７６・・・シーン判定部；７７・・・設定部；７８・・・露出補正部；７９・・・コントラスト強調部；Ａｒ１Ａ〜Ａｒ１Ｃ，Ａｒ２Ａ〜Ａｒ２Ｃ，Ａｒ３Ａ〜Ａｒ３Ｃ・・・領域；ＥＶ１，ＥＶ２・・・露出値；Ｍ１，Ｍ２，Ｕ１，Ｕ２，Ｄ１，Ｄ２・・・操作アイコン；Ｗ１００，Ｗ２００・・・合成画像；Ｗ１０１〜Ｗ１０３，Ｗ２０１〜Ｗ２０３・・・ＨＤＲ用画像；Ｗ３００・・・標準露出画像
【図１】
2016163052.tif 000003
【図２】
2016163052.tif 000004
【図３】
2016163052.tif 000005
【図４】
2016163052.tif 000006
【図５Ａ】
2016163052.tif 000007
【図５Ｂ】
2016163052.tif 000008
【図６】
2016163052.tif 000009
【図７】
2016163052.tif 000010
【図８】
2016163052.tif 000011
【図９】
2016163052.tif 000012
【図１０】
2016163052.tif 000013
【図１１】
2016163052.tif 000014
【図１２】
2016163052.tif 000015
【図１３】
2016163052.tif 000016
【図１４】
2016163052.tif 000017
【図１５】
2016163052.tif 000018
【図１６】
2016163052.tif 000019
【図１７】
2016163052.tif 000020
【図１８】
2016163052.tif 000021