(57)【要約】  本開示の一実施の形態の制御装置は、可変光学ローパスフィルタと、可変光学ローパスフィルタを経由して入射した光から画像データを生成する撮像素子とを有する撮像デバイスを制御する制御装置である。この制御装置は、第１導出部と、第２導出部とを備えている。第１導出部は、可変光学ローパスフィルタの効果を変えながら撮像素子を駆動することにより撮像素子で生成された複数の画像データに基づいて解像度劣化量および偽色発生量を導出する。第２導出部は、第１導出部で導出した解像度劣化量および偽色発生量に基づいて可変光学ローパスフィルタの設定値を導出する。
2017191717.tif 000002
【特許請求の範囲】
【請求項１】
ローパスフィルタのローパス特性の変更に応じた、撮像された複数の画像データにおける解像度の変化及び偽色の変化に基づいて前記ローパスフィルタのローパス特性の設定値を設定する制御部を備えた
制御装置。
【請求項２】
前記制御部は、複数の前記画像データのうちの１つである第１画像データの空間周波数と、複数の前記画像データのうち、前記第１画像データ以外の第２画像データの空間周波数とに基づいて解像度の変化についての第１評価データを導出する
請求項１に記載の制御装置。
【請求項３】
前記制御部は、前記第１画像データの階調データと前記第２画像データの階調データとの差分に基づいて偽色の変化についての第２評価データを導出する
請求項２に記載の制御装置。
【請求項４】
前記制御部は、前記第１評価データおよび前記第２評価データに基づいて前記設定値を設定する
請求項３に記載の制御装置。
【請求項５】
前記制御部は、前記第２評価データの、前記可変光学ローパスフィルタのローパス特性に対する変化が相対的に緩やかな範囲が存在する場合に、その範囲の中で、前記第１評価データが最も小さくなるときの前記ローパスフィルタのローパス特性を前記設定値に設定する
請求項３に記載の制御装置。
【請求項６】
前記制御部は、複数の前記画像データに含まれる顔領域における偽色の変化に基づいて前記設定値を設定する
請求項１に記載の制御装置。
【請求項７】
前記制御部は、複数の前記画像データのうちユーザによって選択された１つの前記画像データが撮像されたときの前記ローパスフィルタのローパス特性を前記設定値に設定する
請求項１に記載の制御装置。
【請求項８】
前記制御部は、複数の前記画像データにおける解像度の変化及び偽色の変化と、複数の前記画像データに含まれる偽色の位置とに基づいて前記設定値を設定する
請求項１に記載の制御装置。
【請求項９】
前記制御部は、複数の前記画像データにおいて、複数の前記画像データに含まれる偽色の位置を拡大したものを生成する
請求項１に記載の制御装置。
【請求項１０】
前記制御部は、複数の前記画像データにおいて、複数の前記画像データに含まれる偽色の位置を強調表示したものを生成する
請求項１に記載の制御装置。
【請求項１１】
前記制御部は、複数の前記画像データにおいて、複数の前記画像データに含まれる、解像度劣化の生じている位置を強調表示したものを生成する
請求項１に記載の制御装置。
【請求項１２】
前記制御部は、前記第１画像データの階調データと前記第２画像データの階調データとの差分と、前記第１画像データから得られた彩度データとに基づいて前記第２評価データを導出する
請求項３に記載の制御装置。
【請求項１３】
前記第１画像データは、前記ローパスフィルタのローパス特性の変更可能な範囲の中で、前記第２評価データが最小もしくはほぼ最小となるときの画像データである
請求項３に記載の制御装置。
【請求項１４】
ローパスフィルタを経由して入射した光から画像データを生成する撮像素子と、
前記ローパスフィルタのローパス特性の変更に応じた、撮像された複数の画像データにおける解像度の変化及び偽色の変化に基づいて前記ローパスフィルタのローパス特性の設定値を設定する制御部と
を備えた
撮像装置。
【請求項１５】
前記制御部は、前記ローパスフィルタのローパス特性を、前記ローパスフィルタのローパス特性の設定最小分解能よりも大きなピッチで変化させる変化指示を生成するともに、前記ローパスフィルタのローパス特性の変化に同期した撮像指示を生成する
請求項１４に記載の撮像装置。
【請求項１６】
シャッターボタンをさらに備え、
前記制御部は、前記シャッターボタンの半押下げに伴って、前記変化指示および前記撮像指示を生成する
請求項１５に記載の撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、制御装置および撮像装置に関する。
【背景技術】
【０００２】
通常の単板式のデジタルカメラにおいてベイヤーコーディングのイメージャを用いる場合には、イメージャで得られた画像データに対してデモザイク処理を行うことにより、失われた情報を復元することが必要となる。しかし、原理的に失われた情報を完全に導出することは難しいことから、解像度の低下やアーティファクトの発生が避けられない。【０００３】
そこで、ローパスフィルタをレンズとイメージャとの間に設けることが考えられる。このようにした場合には、ローパスフィルタの効果を調整することで、アーティファクトの１つである偽色を低減することができる。なお、モアレを低減するローパスフィルタとして、例えば、下記の特許文献１に記載の光学的ローパスフィルタを用いることができる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００６−０８０４５号公報
【発明の概要】
【０００５】
ところで、上記の特許文献１に記載の発明では、ローパスフィルタの効果を、モアレが発生するまで弱めながら画像を取得し、取得した画像の中から、モアレが発生する直前に得られた画像が選択される。しかし、上記の特許文献１に記載の発明では、ローパスフィルタの効果が強くかかった画像が選択され易いので、モアレ以外の要因で画質が劣化してしまうという問題があった。ローパスフィルタを用いた際に画質のバランスのとれた画像を取得することの可能な制御装置および撮像装置を提供することが望ましい。
【０００６】
本開示の一実施の形態の制御装置は、ローパスフィルタのローパス特性の変更に応じた、撮像された複数の画像データにおける解像度の変化及び偽色の変化に基づいて前記ローパスフィルタのローパス特性の設定値を設定する制御部を備えている。
【０００７】
本開示の一実施の形態の撮像装置は、ローパスフィルタを経由して入射した光から画像データを生成する撮像素子を備えている。この撮像装置は、さらに、ローパスフィルタのローパス特性の変更に応じた、撮像された複数の画像データにおける解像度の変化及び偽色の変化に基づいてローパスフィルタのローパス特性の設定値を設定する制御部を備えている。
【０００８】
本開示の一実施の形態の制御装置および撮像装置では、ローパスフィルタのローパス特性の変更に応じた、撮像された複数の画像データにおける解像度の変化及び偽色の変化に基づいてローパスフィルタのローパス特性の設定値が設定される。これにより、ユーザの目的に応じた、画質のバランスのとれた画像データを得るのに適したローパスフィルタの設定値が得られる。
【０００９】
本開示の一実施の形態の制御装置および撮像装置によれば、ユーザの目的に応じた、画質のバランスのとれた画像データを得るのに適したローパスフィルタの設定値が得られるようにしたので、ローパスフィルタを用いた際に画質のバランスのとれた画像を取得することができる。なお、本開示の効果は、ここに記載された効果に必ずしも限定されず、本明細書中に記載されたいずれの効果であってもよい。
【図面の簡単な説明】
【００１０】
【図１】本開示の一実施の形態に係る撮像装置の概略構成の一例を表す図である。
【図２】図１の撮像デバイスにおける受光面の概略構成の一例を表す図である。
【図３】図１のメモリ部に記憶されるデータの一例を表す図である。
【図４】図１の可変光学ＬＰＦ（Low Pass Filter）の概略構成の一例を表す図である。
【図５】図４の液晶層の偏光変換効率曲線（Ｖ−Ｔ曲線）の一例を表す図である。
【図６Ａ】図５の可変光学ＬＰＦの作用の一例を表す図である。
【図６Ｂ】図５の可変光学ＬＰＦの作用の一例を表す図である。
【図６Ｃ】図５の可変光学ＬＰＦの作用の一例を表す図である。
【図７】図６Ａ〜図６ＣのＭＴＦ(Modulation Transfer Function)の一例を表す図である。
【図８】評価データの一例を表す図である。
【図９】図１の画像処理部の概略構成の一例を表す図である。
【図１０】図１の撮像装置における撮像手順の一例を表す図である。
【図１１】評価データの一例を表す図である。
【図１２】図１の撮像装置における撮像手順の一例を表す図である。
【図１３】評価データの一例を表す図である。
【図１４】図１の撮像装置における撮像手順の一例を表す図である。
【図１５】ヒストグラムの一例を表す図である。
【図１６】図１の撮像装置における撮像手順の一例を表す図である。
【図１７】図１のメモリ部に記憶されるデータの一例を表す図である。
【図１８】補正係数α，βが適用される偽色の発生位置の一例を表す図である。
【図１９】閾値Ｔｈ６，Ｔｈ７が適用される偽色の発生位置の一例を表す図である。
【図２０】図１の撮像装置における撮像手順の一例を表す図である。
【図２１】評価データの一例を表す図である。
【図２２】画像データの一部が拡大されている様子を表す図である。
【図２３】画像データの一部がゼブラ表示されている様子を表す図である。
【図２４】画像データの一部がエッジ強調表示されている様子を表す図である。
【図２５】図１の撮像装置における撮像手順の一例を表す図である。
【発明を実施するための形態】
【００１１】
以下、本開示を実施するための形態について、図面を参照して詳細に説明する。なお、説明は以下の順序で行う。
１．実施の形態
２．変形例
【００１２】
＜１．実施の形態＞
[構成]
図１は、本開示の一実施の形態に係る撮像装置１の概略構成の一例を表したものである。撮像装置１は、例えば、撮像光学系１０、レンズ駆動部２０、ＬＰＦ駆動部３０、撮像素子４０および画像処理部５０を備えている。撮像装置１は、さらに、例えば、表示パネル６０、メモリ部７０、制御部８０および操作部９０を備えている。
【００１３】
（撮像光学系１０）
撮像光学系１０は、例えば、可変光学ＬＰＦ（Low Pass Filter）１１およびレンズ１２を有している。レンズ１２は、光学的な被写体像を撮像素子４０上に形成するものである。レンズ１２は、複数のレンズを有しており、レンズ駆動部２０によって駆動されることにより、少なくとも１つのレンズを移動させることができるようになっている。これにより、レンズ１２は、光学的なフォーカス調節やズーム調節が可能となっている。可変光学ＬＰＦ１１は、光に含まれる高い空間周波数の成分を除去するものであり、ＬＰＦ駆動部３０によって駆動されることによりローパス特性の１つであるカットオフ周波数ｆｃを変化させるようになっている。撮像光学系１０は、撮像素子４０と一体に構成されていてもよいし、撮像素子４０とは別体で構成されていてもよい。また、撮像光学系１０の中の可変光学ＬＰＦ１１が、撮像素子４０と一体に構成されていてもよいし、撮像素子４０とは別体で構成されていてもよい。可変光学ＬＰＦ１１の具体的な構成やカットオフ周波数ｆｃの変調方法については、後に詳述するものとする。
【００１４】
（レンズ駆動部２０、ＬＰＦ駆動部３０）
レンズ駆動部２０は、制御部８０からの指示に従って、光学的なズーム倍率、およびフォーカスの調節等のためにレンズ１２の少なくとも１つのレンズを駆動するものである。ＬＰＦ駆動部３０は、制御部８０からの指示に従って、可変光学ＬＰＦ１１のローパス特性（カットオフ周波数ｆｃ）を変化させる制御を行うことにより、可変光学ＬＰＦ１１の効果を調整するものである。「可変光学ＬＰＦ１１の効果」とは、光に含まれる、ナイキスト周波数よりも高い空間周波数の成分の低減を指している。ＬＰＦ駆動部３０は、例えば、可変光学ＬＰＦ１１の電極間に、所定の電圧Ｖ（周波数一定）を印加することにより、可変光学ＬＰＦ１１のカットオフ周波数ｆｃを調整するようになっている。
【００１５】
（撮像素子４０）
撮像素子４０は、レンズ１２および可変光学ＬＰＦ１１を介して受光面４０Ａに結像された被写体像を光電変換により電気信号に変換して画像データを生成するものである。撮像素子４０は、例えばＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサにより構成されている。
【００１６】
撮像素子４０は、例えば、図２に示したように、複数の光電変換素子４０Ｂが所定の間隔で２次元配置された受光面４０Ａを有している。撮像素子４０は、さらに、例えば、受光面４０Ａにカラーフィルタアレイ４０Ｃを有している。図２には、カラーフィルタアレイ４０Ｃが、２ｘ２行列のＲ，Ｇ，Ｇ，Ｂが行列状に配置されたＢａｙｅｒ配列となっている様子が例示されている。カラーフィルタアレイ４０Ｃは、Ｂａｙｅｒ配列とは異なる配列となっていてもよい。撮像素子４０は、可変光学ＬＰＦ１１を経由して入射した光に基づいて画像データを生成するようになっている。撮像素子４０は、例えば、レンズ１２および可変光学ＬＰＦ１１を経由して入射した光を空間的にサンプリングすることによりカラーの画像データを生成するようになっている。画像データは、カラーフィルタアレイ４０Ｃに含まれる各色の色信号を画素ごとに有している。
【００１７】
（画像処理部５０）
画像処理部５０は、撮像素子４０で生成された画像データに対して、ホワイトバランス、デモザイク、階調変換、色変換、およびノイズリダクションなどの画像処理を行うものである。画像処理部５０は、画像データを表示パネル６０に表示するのに適した表示データに変換したり、画像データをメモリ部７０への記録に適したデータに変換する等の処理を行うようになっている。画像処理部５０における画像処理については、後に詳述するものとする。
【００１８】
（表示パネル６０、メモリ部７０、操作部９０）
表示パネル６０は、例えば液晶パネルにより構成されている。表示パネル６０は、画像処理部５０から入力された表示データなどを表示するものである。メモリ部７０は、撮影された画像データや各種プログラムなどを記憶可能となっている。メモリ部７０は、例えば、不揮発性メモリによって構成されており、例えば、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read-Only Memory）、フラッシュメモリ、抵抗変化型メモリなどによって構成されている。メモリ部７０は、撮像装置１に着脱可能な外部メモリであってもよい。メモリ部７０には、例えば、図３に示したように、画像処理部５０で生成される各種データや、操作部９０から入力される各種データが記憶される。図３は、メモリ部７０に記憶されるデータの一例を表したものである。メモリ部７０に記憶されるデータとしては、例えば、図３に示したように、画像データ７１、彩度データ７２、評価データ７３および設定値７４が挙げられる。画像データ７１、彩度データ７２、評価データ７３および設定値７４については、後に詳述するものとする。操作部９０は、ユーザからの指示を受け付けるものであり、例えば、操作ボタンや、シャッターボタン、操作ダイヤル、キーボード、タッチパネルなどで構成されている。
【００１９】
（制御部８０）
制御部８０は、レンズ駆動部２０、ＬＰＦ駆動部３０、撮像素子４０、画像処理部５０、表示パネル６０およびメモリ部７０の制御を行うプロセッサである。制御部８０は、レンズ駆動部２０を制御することにより、レンズ１２の光学的なズーム倍率、およびフォーカスの調節等を行うようになっている。制御部８０は、ＬＰＦ駆動部３０を制御することにより、可変光学ＬＰＦ１１の効果（カットオフ周波数ｆｃ）を調整するようになっている。制御部８０は、さらに、撮像素子４０を駆動することにより、撮像素子４０で画像データを生成させると共に、生成させた画像データを画像処理部５０に出力させるようになっている。制御部８０は、画像処理部５０を制御することにより、画像処理部５０で、上述の画像処理を行わせるとともに、上述の画像処理の結果、得られた各種データをメモリ部７０や表示パネル６０に出力させるようになっている。制御部８０は、操作部９０から入力される各種データに従って、レンズ駆動部２０、ＬＰＦ駆動部３０、撮像素子４０、画像処理部５０および表示パネル６０の制御を行ったり、操作部９０から入力される各種データをメモリ部７０に格納したりするようになっている。
【００２０】
（可変光学ＬＰＦ１１）
次に、可変光学ＬＰＦ１１について詳述する。図４は、可変光学ＬＰＦ１１の概略構成の一例を表したものである。可変光学ＬＰＦ１１は、光に含まれる高い空間周波数の成分を除去するものである。可変光学ＬＰＦ１１は、ＬＰＦ駆動部３０によって駆動されることにより可変光学ＬＰＦ１１の効果（カットオフ周波数ｆｃ）を変化させるようになっている。可変光学ＬＰＦ１１は、例えば、ピーク値変調方式でカットオフ周波数ｆｃを変化させるようになっている。なお、ピーク値変調方式については、後に詳述するものとする。
【００２１】
可変光学ＬＰＦ１１は、複屈折性を有する一対の複屈折板１１１，１１５と、一対の複屈折板１１１，１１５の間に配置された液晶層１１３とを備えている。可変光学ＬＰＦ１１は、さらに、液晶層１１３に電界を印加する電極１１２，１１４を備えている。なお、可変光学ＬＰＦ１１は、例えば、液晶層１１３の配向を規制する配向膜を備えていてもよい。電極１１２，１１４は、液晶層１１３を介して互いに対向配置されている。電極１１２，１１４は、それぞれ、１枚のシート状電極からなる。なお、電極１１２および電極１１４の少なくとも一方が、複数の部分電極で構成されていてもよい。
【００２２】
電極１１２，１１４は、例えば、ＩＴＯ(Indium Tin Oxide)などの透光性の導電膜である。電極１１２，１１４は、例えば、透光性を有する無機導電膜、透光性を有する有機導電膜、または、透光性を有する金属酸化膜であってもよい。複屈折板１１１は、可変光学ＬＰＦ１１の光入射側に配置されており、例えば、複屈折板１１１の外側の表面が光入射面１１０Ａとなっている。入射光Ｌ１は、被写体側から光入射面１１０Ａに入射する光である。複屈折板１１１は、例えば、入射光Ｌ１の光軸が複屈折板１１１（または光入射面１１０Ａ）の法線と平行となるように配置される。複屈折板１１５は、可変光学ＬＰＦ１１の光出射側に配置されており、例えば、複屈折板１１５の外側の表面が光出射面１１０Ｂとなっている。可変光学ＬＰＦ１１の透過光Ｌ２は、光出射面１１０Ｂから外部に出射された光である。複屈折板１１１、電極１１２、液晶層１１３、電極１１４および複屈折板１１５は、光入射側からこの順に積層されている。
【００２３】
複屈折板１１１，１１５は、複屈折性を有しており、１軸性結晶の構造を有している。複屈折板１１１，１１５は、複屈折性を利用して円偏光の光をｐｓ分離する機能を有している。複屈折板１１１，１１５は、例えば、水晶、方解石またはニオブ酸リチウムによって構成されている。
【００２４】
複屈折板１１１，１１５では、例えば、像の分離方向が互いに反対方向を向いている。複屈折板１１１の光学軸ＡＸ１および複屈折板１１５の光学軸ＡＸ２は、光入射面１１０Ａの法線と平行な面内において互いに交差している。光学軸ＡＸ１と光学軸ＡＸ２とのなす角は、例えば、９０°となっている。さらに、光学軸ＡＸ１，ＡＸ２が光入射面１１０Ａの法線と斜めに交差している。光学軸ＡＸ１と光入射面１１０Ａの法線とのなす角は、例えば、光入射面１１０Ａの法線を基準として反時計回りに９０°よりも小さくなっており、例えば、４５°となっている。光学軸ＡＸ２と光入射面１１０Ａの法線とのなす角は、例えば、光入射面１１０Ａの法線を基準として反時計回りに９０°よりも大きく１８０°よりも小さくなっており、例えば、１３５°（＝１８０−４５°）となっている。
【００２５】
図５は、液晶層１１３の偏光変換効率曲線（Ｖ−Ｔ曲線）の一例を表したものである。図５において、横軸は電極１１２，１１４間に印加される電圧Ｖ（周波数一定）である。図５において、縦軸は、偏光変換効率Ｔである。偏光変換効率Ｔとは、直線偏光の光に与えられた位相差を９０度で割ることにより得られた値に１００を掛けたものである。偏光変換効率Ｔが０％とは、直線偏光に対して何らの位相差も与えられていないことを指しており、例えば、直線偏光が偏光方向を変えられずに媒体を透過したことを指している。偏光変換効率Ｔが１００％とは、直線偏光に対して９０度の位相差が与えられたことを指しており、例えば、ｐ偏光がｓ偏光に、またはｓ偏光がｐ偏光に変換されて媒体を透過したことを指している。偏光変換効率Ｔが５０％とは、直線偏光に対して４５度の位相差が与えられたことを指しており、例えば、ｐ偏光またはｓ偏光が円偏光に変換されて媒体を透過したことを指している。
【００２６】
液晶層１１３は、電極１１２，１１４間の電圧によって生成される電界に基づいて、偏光を制御するものである。液晶層１１３では、図５に示したように、電極１１２，１１４間に電圧Ｖ１が印加されると、偏光変換効率ＴがＴ２となり、電極１１２，１１４間に電圧Ｖ２（Ｖ１＜Ｖ２）が印加されると、偏光変換効率ＴがＴ１となる。Ｔ２は１００％であり、Ｔ１は０％である。液晶層１１３では、さらに、図５に示したように、電極１１２，１１４間に電圧Ｖ３（Ｖ１＜Ｖ３＜Ｖ２）が印加されると、偏光変換効率ＴがＴ３となる。Ｔ３は０％よりも大きく、１００％よりも小さな値である。図５には、電圧Ｖ３が、Ｔ３が５０％となるときの電圧となっている場合が例示されている。ここで、電圧Ｖ１は、偏光変換効率曲線の立ち下がり位置の電圧以下の電圧であり、具体的には、偏光変換効率曲線において、偏光変換効率が最大値付近で飽和している区間の電圧を指している。電圧Ｖ２は、偏光変換効率曲線の立ち上がり位置の電圧以上の電圧であり、具体的には、偏光変換効率曲線において、偏光変換効率が最小値付近で飽和している区間の電圧を指している。電圧Ｖ３は、偏光変換効率曲線の立ち下がり位置の電圧と、偏光変換効率曲線の立ち上がり位置の電圧との間の電圧（中間電圧）である。
【００２７】
上述したように、液晶層１１３は、偏光を制御するものである。上述したような偏光変換効率曲線を有する液晶としては、例えば、ＴＮ(Twisted Nematic)液晶が挙げられる。ＴＮ液晶は、カイラルなネマティック液晶によって構成されており、通過する光の偏光方向をネマティック液晶の回転に沿って回転させる旋光性を有している。
【００２８】
次に、可変光学ＬＰＦ１１の光学的な作用について説明する。図６Ａ、図６Ｂ、図６Ｃは、可変光学ＬＰＦ１１の作用の一例を表したものである。図６Ａでは、電極１１２，１１４間の電圧Ｖが電圧Ｖ１となっている。図６Ｂでは、電極１１２，１１４間の電圧Ｖが電圧Ｖ２となっている。図６Ｃでは、電極１１２，１１４間の電圧Ｖが電圧Ｖ３となっている。
【００２９】
（Ｖ＝Ｖ１の場合（図６Ａ））
円偏光の入射光Ｌ１が複屈折板１１１に入射すると、入射光Ｌ１は、複屈折板１１１の複屈折性により、分離幅ｄ１でｐ偏光とｓ偏光とに分離される。複屈折板１１１の光学軸ＡＸ１に対して垂直に振動する偏光成分が、入射光Ｌ１に含まれるｓ偏光の成分である場合、分離されたｓ偏光は、複屈折板１１１内を、複屈折の影響を受けずに直進し、複屈折板１１１の裏面から出射する。入射光Ｌ１に含まれるｐ偏光の成分は、ｓ偏光の振動方向と直交する方向に振動するので、複屈折板１１１内を、複屈折の影響を受けて斜めに進み、複屈折板１１１の裏面のうち、分離幅ｄ１だけシフトした位置で屈折して、複屈折板１１１の裏面から出射する。従って、複屈折板１１１は、入射光Ｌ１を、分離幅ｄ１で、ｐ偏光の透過光Ｌ２と、ｓ偏光の透過光Ｌ２とに分離する。
【００３０】
複屈折板１１１で分離されたｐ偏光が、偏光変換効率がＴ２となっている液晶層１１３に入射すると、ｐ偏光はｓ偏光に変換されると共に、液晶層１１３内を直進し、液晶層１１３の裏面から出射する。複屈折板１１１で分離されたｓ偏光が、偏光変換効率がＴ２となっている液晶層１１３に入射すると、ｓ偏光はｐ偏光に変換されると共に、液晶層１１３内を直進し、液晶層１１３の裏面から出射する。従って、液晶層１１３は、複屈折板１１１で分離されたｐ偏光およびｓ偏光に対して、分離幅を一定に保ったままで、ｐｓ変換を行う。
【００３１】
液晶層１１３を透過してきたｓ偏光およびｐ偏光が複屈折板１１５に入射すると、ｓ偏光およびｐ偏光の分離幅が、複屈折板１１５の複屈折性により、変化する。複屈折板１１５の光学軸ＡＸ２に対して垂直に振動する偏光成分がｓ偏光である場合、ｓ偏光は、複屈折板１１５内を、複屈折の影響を受けずに直進し、複屈折板１１５の裏面から出射する。ｐ偏光は、ｓ偏光の振動方向と直交する方向に振動するので、複屈折板１１５内を、複屈折の影響を受けて、複屈折板１１１における像の分離方向とは反対方向に斜めに進む。さらに、ｐ偏光は、複屈折板１１５の裏面のうち、分離幅ｄ２だけシフトした位置で屈折して、複屈折板１１５の裏面から出射する。従って、複屈折板１１５は、液晶層１１３を透過してきたｓ偏光およびｐ偏光を、分離幅（ｄ１＋ｄ２）で、ｓ偏光の透過光Ｌ２と、ｐ偏光の透過光Ｌ２とに分離する。
【００３２】
（Ｖ＝Ｖ２の場合（図６Ｂ））
複屈折板１１１の、入射光Ｌ１に対する作用は、上記と同じである。そこで、以下では、液晶層１１３と複屈折板１１５の作用について説明する。複屈折板１１１で分離されたｐ偏光およびｓ偏光が、偏光変換効率がＴ１となっている液晶層１１３に入射すると、ｐ偏光およびｓ偏光は、液晶層１１３によって偏光変換されずに、液晶層１１３内を直進し、液晶層１１３の裏面から出射する。従って、液晶層１１３は、複屈折板１１１で分離されたｐ偏光およびｓ偏光に対して、光学的な作用を有していない。
【００３３】
液晶層１１３を透過してきたｓ偏光およびｐ偏光が複屈折板１１５に入射すると、ｓ偏光およびｐ偏光の分離幅が、複屈折板１１５の複屈折性により、変化する。複屈折板１１５の光学軸ＡＸ２に対して垂直に振動する偏光成分がｓ偏光である場合、ｓ偏光は、複屈折板１１５内を、複屈折の影響を受けずに直進し、複屈折板１１５の裏面から出射する。ｐ偏光は、ｓ偏光の振動方向と直交する方向に振動するので、複屈折板１１５内を、複屈折の影響を受けて、複屈折板１１１における像の分離方向とは反対方向に斜めに進む。さらに、ｐ偏光は、複屈折板１１５の裏面のうち、分離幅ｄ２だけシフトした位置で屈折して、複屈折板１１５の裏面から出射する。従って、複屈折板１１５は、液晶層１１３を透過してきたｓ偏光およびｐ偏光を、分離幅（｜ｄ１−ｄ２｜）で、ｓ偏光の透過光Ｌ２と、ｐ偏光の透過光Ｌ２とに分離する。ここで、ｄ１＝ｄ２の場合、ｓ偏光の透過光Ｌ２と、ｐ偏光の透過光Ｌ２とは、複屈折板１１５の裏面のうち、互いに同じ場所から出射される。従って、この場合は、複屈折板１１５は、液晶層１１３を透過してきたｓ偏光およびｐ偏光を互いに合成した光にする。
【００３４】
（Ｖ＝Ｖ３の場合（図６Ｃ））
複屈折板１１１の、入射光Ｌ１に対する作用は、上記と同じである。そこで、以下では、液晶層１１３と複屈折板１１５の作用について説明する。複屈折板１１１で分離されたｐ偏光が、偏光変換効率がＴ３（＝５０％）となっている液晶層１１３に入射すると、ｐ偏光は円偏光に変換されると共に、液晶層１１３内を直進し、液晶層１１３の裏面から出射する。複屈折板１１１で分離されたｓ偏光が、偏光変換効率がＴ３（＝５０％）となっている液晶層１１３に入射すると、ｓ偏光も円偏光に変換されると共に、液晶層１１３内を直進し、液晶層１１３の裏面から出射する。従って、液晶層１１３は、複屈折板１１１で分離されたｐ偏光およびｓ偏光を、分離幅を一定に保ったままで、円偏光に変換する。
【００３５】
液晶層１１３から出射されてきた円偏光が複屈折板１１５に入射すると、複屈折板１１５の複屈折性により、分離幅ｄ２でｐ偏光とｓ偏光とに分離される。複屈折板１１５の光学軸ＡＸ２に対して垂直に振動する偏光成分がｓ偏光である場合、ｓ偏光は、複屈折板１１５内を、複屈折の影響を受けずに直進し、複屈折板１１５の裏面から出射する。ｐ偏光は、ｓ偏光の振動方向と直交する方向に振動するので、複屈折板１１５内を、複屈折の影響を受けて、複屈折板１１１における像の分離方向とは反対方向に斜めに進む。さらに、ｐ偏光は、複屈折板１１５の裏面のうち、分離幅ｄ２だけシフトした位置で屈折して、複屈折板１１５の裏面から出射する。従って、複屈折板１１５は、液晶層１１３でｐ偏光から変換された円偏光と、液晶層１１３でｓ偏光から変換された円偏光とを、それぞれ、分離幅ｄ２で、ｓ偏光の透過光Ｌ２と、ｐ偏光の透過光Ｌ２とに分離する。
【００３６】
ここで、ｄ１＝ｄ２の場合、液晶層１１３でｐ偏光から変換された円偏光から分離されたｐ偏光と、液晶層１１３でｓ偏光から変換された円偏光から分離されたｓ偏光とが、複屈折板１１５の裏面のうち、互いに同じ場所から出射される。この場合、円偏光の透過光Ｌ２が複屈折板１１５の裏面から出射される。従って、この場合は、複屈折板１１５は、液晶層１１３から出射されてきた２つの円偏光を、分離幅（ｄ２＋ｄ２）でｐ偏光の透過光Ｌ２と、ｓ偏光の透過光Ｌ２とに分離すると共に、一旦分離したｐ偏光とｓ偏光とをｐ偏光の透過光Ｌ２とｓ偏光の透過光Ｌ２との間の位置で、ｐ偏光とｓ偏光とを合成した光にする。
【００３７】
次に、可変光学ＬＰＦ１１の透過光の点像強度分布について説明する。可変光学ＬＰＦ１１は、電極１１２，１１４間に電圧Ｖ２が印加されているときには、可変光学ＬＰＦ１１の透過光の点像強度分布に１つのピークｐ１を生じさせる。ピークｐ１は、複屈折板１１５から出射される１つの透過光Ｌ２によって形成されたものである。可変光学ＬＰＦ１１は、電極１１２，１１４間に電圧Ｖ１が印加されているときには、可変光学ＬＰＦ１１の透過光の点像強度分布に２つのピークｐ２，ｐ３を生じさせる。２つのピークｐ２，ｐ３は、複屈折板１１５から出射される２つの透過光Ｌ２によって形成されたものである。
【００３８】
可変光学ＬＰＦ１１は、電極１１２，１１４間に電圧Ｖ３が印加され、かつｄ１＝ｄ２となっているときには、可変光学ＬＰＦ１１の透過光の点像強度分布に３つのピークｐ１，ｐ２，ｐ３を生じさせる。３つのピークｐ１，ｐ２，ｐ３は、複屈折板１１５から出射される３つの透過光Ｌ２によって形成されたものである。可変光学ＬＰＦ１１は、電極１１２，１１４間に電圧Ｖ３が印加され、かつｄ１≠ｄ２となっているときには、可変光学ＬＰＦ１１の透過光の点像強度分布に４つのピークｐ１，ｐ２，ｐ３，ｐ４を生じさせる。４つのピークｐ１，ｐ２，ｐ３，ｐ４は、複屈折板１１５から出射される４つの透過光Ｌ２によって形成されたものである。
【００３９】
上述したように、可変光学ＬＰＦ１１は、電極１１２，１１４間に電圧Ｖ３が印加されているときに、可変光学ＬＰＦ１１の透過光の点像強度分布に３つのピークｐ１〜ｐ３または、４つのピークｐ１〜ｐ４を生じさせる。ここで、可変光学ＬＰＦ１１では、電極１１２，１１４間に印加する電圧Ｖ３の大きさが変化すると、上記３つのピークｐ１〜ｐ３の値または、上記４つのピークｐ１〜ｐ４が変化する。つまり、可変光学ＬＰＦ１１では、電極１１２，１１４間に印加する電圧Ｖ３の大きさが変化すると、透過光の点像強度分布が変化する。
【００４０】
このように、可変光学ＬＰＦ１１は、電極１１２，１１４間に印加する電圧Ｖの大きさを変化させることにより透過光の点像強度分布を変化させる。ここで、上記３つのピークｐ１〜ｐ３のピーク値（ピーク高さ）や、上記４つのピークｐ１〜ｐ４のピーク値（ピーク高さ）は、電極１１２，１１４間に印加する電圧Ｖの大きさによって変化する。一方、上記３つのピークｐ１〜ｐ３のピーク位置や、上記４つのピークｐ１〜ｐ４のピーク位置は、分離幅ｄ１，ｄ２によって定まる。分離幅ｄ１，ｄ２は、電極１１２，１１４間に印加する電圧Ｖ３の大きさに依らず、一定である。従って、上記３つのピークｐ１〜ｐ３のピーク位置や、上記４つのピークｐ１〜ｐ４のピーク位置は、電極１１２，１１４間に印加する電圧Ｖ３の大きさに依らず、一定である。
【００４１】
次に、透過光の点像強度分布とカットオフ周波数ｆｃとの関係について説明する。図７は、図６Ａ〜図６ＣのＭＴＦ(Modulation Transfer Function)の一例を表したものである。横軸は空間周波数であり、縦軸は規格化されたコントラストである。図６Ｂでは、可変光学ＬＰＦ１１が光線分離効果を有していないので、図６ＢのＭＴＦは、可変光学ＬＰＦ１１の前段に配置するレンズ（例えば、レンズ１３など）のＭＴＦと一致している。図６Ａでは、ピーク間距離が、図６Ｃでのピーク間距離よりも広く、光線分離効果が最も大きくなっている。そのため、図６ＡのＭＴＦのカットオフ周波数ｆｃ１が、図６ＣのＭＴＦのカットオフ周波数ｆｃ２よりも小さくなっている。
【００４２】
図６Ｃでは、分離幅は、図６Ａでの分離幅と等しくなっているが、ピーク数が、図６Ａでのピーク数よりも多くなっており、ピーク間距離が、図６Ａでのピーク間距離よりも狭くなっている。そのため、図６Ｃでは、光線分離効果が図６Ａの光線分離効果よりも弱くなっているので、図６ＣのＭＴＦのカットオフ周波数ｆｃ２が、図６ＡのＭＴＦのカットオフ周波数ｆｃ１よりも大きくなっている。図６ＣのＭＴＦのカットオフ周波数ｆｃ２は、電極１１２，１１４間に印加する電圧Ｖ３の大きさによって変化し、図６ＡのＭＴＦのカットオフ周波数ｆｃ１よりも大きな任意の周波数を採りうる。従って、可変光学ＬＰＦ１１は、電極１１２，１１４間に印加する電圧Ｖの大きさを変化させることにより、カットオフ周波数ｆｃを、光線分離効果が最大となるときのカットオフ周波数以上の任意の値に設定することができる。
【００４３】
（画像処理部５０およびメモリ部７０の詳細な説明）
次に、画像処理部５０およびメモリ部７０について詳細に説明する。
【００４４】
メモリ部７０には、上述したように、画像データ７１、彩度データ７２、評価データ７３および設定値７４が記憶される。
【００４５】
画像データ７１は、撮像素子４０によって得られた複数の画像データであり、例えば、後述の画像データＩ1や、後述の複数の画像データＩ2、後述の画像データＩなどを含んでいる。画像データＩ1は、偽色の無い画像データ、もしくは、偽色の少ない画像データである。偽色の無い画像データ、もしくは、偽色の少ない画像データは、例えば、可変光学ＬＰＦ１１の効果を最大もしくはほぼ最大にしたときに得られる。つまり、偽色の無い画像データ、もしくは、偽色の少ない画像データは、例えば、可変光学ＬＰＦ１１のカットオフ周波数ｆｃを最小もしくはほぼ最小にしたときに得られる。複数の画像データＩ2は、画像データＩ1を得る際の設定値とは異なる設定値が可変光学ＬＰＦ１１に設定されているときに得られる画像データである。画像データＩは、可変光学ＬＰＦ１１に対して適正な設定値（設定値７４）が設定された状態のときに撮像素子４０で取得された画像データである。設定値７４は、ユーザの目的に合った可変光学ＬＰＦ１１の設定値であり、画像データＩを得る際に可変光学ＬＰＦ１１に対して設定される設定値である。設定値７４は、画像処理部５０での画像処理の実行によって得られる。
【００４６】
彩度データ７２は、画像データＩ1から得られた彩度に関するデータである。彩度データ７２は、例えば、画像データＩ1の所定の単位のドットごとに対応付けられた２次元データである。評価データ７３は、解像度と偽色について評価するためのデータである。
【００４７】
解像度とは、どこまで細かいものが識別できるかを表す指標である。「解像度が高い」とは、撮影画像が、より細かいものが識別できる精細さを有していることを指している。「解像度が低い」とは、撮影画像に精細さがなく、ボケが生じていることを指している。「解像度が劣化している」とは、撮影画像に当初の精細さがなく、当初の撮影画像と比べてボケが強くなっていることを指している。高い空間周波数を含む撮像画像をローパスフィルタに通すと、撮像画像の高周波成分が減殺され、撮像画像の解像度が低下（劣化）する。つまり、解像度の劣化は、空間周波数の低下に相当する。ところで、偽色とは、本来はない色が画像に現れる現象である。この現象は、各色が空間的にサンプリングされているため撮影画像にナイキスト周波数を超える高周波成分が含まれている場合にエイリアシング(高周波成分の低周波領域への折り返し)が生じることによって発生する。従って、例えば、撮像画像に含まれる、ナイキスト周波数を超える高周波成分がローパスフィルタによって減殺されることにより、撮像画像の解像度が低下（劣化）する一方で、撮像画像において偽色の発生が抑えられる。
【００４８】
評価データ７３は、画像データＩ1と、複数の画像データＩ2とに基づいて導出される。具体的には、評価データ７３は、画像データＩ1と、複数の画像データＩ2と、彩度データ３３とに基づいて導出される。評価データ７３は、例えば、以下の式（１）を用いて導出される。
Ｄ＝ｆ（Ｉ1，Ｉ2）＋ΣＣ・Ｇ（Ｉ1，Ｉ2）…（１）
【００４９】
ここで、Ｄは、解像度および偽色についての評価データである。ｆ（Ｉ1，Ｉ2）は、撮像素子４０によって得られた２つの画像データＩ1，Ｉ2間の解像度の変化（劣化）についての評価データ（評価データＤ１）を導出する関数である。評価データＤ１の値が大きくなるほど、解像度が低くなることを意味する。評価データＤ１は、本開示の「第１評価データ」の一具体例に対応する。ｆ（Ｉ1，Ｉ2）は、２つの画像データＩ1，Ｉ2の空間周波数に基づいて、評価データＤ１を導出する関数である。ｆ（Ｉ1，Ｉ2）は、例えば、画像データＩ1の周波数スペクトルと、画像データＩ2の周波数スペクトルとの差分に基づいて、評価データＤ１を導出する関数である。ｆ（Ｉ1，Ｉ2）は、例えば、画像データＩ1の周波数スペクトルと、画像データＩ2の周波数スペクトルとの差分の中から、可変光学ＬＰＦ１１の効果が最も大きくなる周波数におけるパワーを抽出し、抽出したパワーに基づいて評価データＤ１を導出する関数である。式（１）の右辺第１項から、評価データＤ１が導出される。Ｃは、彩度データ７２である。ΣＣ・Ｇ（Ｉ1，Ｉ2）は、２つの画像データＩ1，Ｉ2の階調データに基づいて、２つの画像データＩ1，Ｉ2間の偽色の変化についての評価データ（評価データＤ２）を導出する関数である。ΣＣ・Ｇ（Ｉ1，Ｉ2）の値が大きくなるほど、偽色がより広範囲に発生していることを意味する。評価データＤ２は、本開示の「第２評価データ」の一具体例に対応する。ΣＣ・Ｇ（Ｉ1，Ｉ2）は、例えば、画像データＩ1の階調データと、画像データＩ2の階調データとの差分に基づいて、評価データＤ２として導出する関数である。ΣＣ・Ｇ（Ｉ1，Ｉ2）は、例えば、画像データＩ1の階調データと、画像データＩ2の階調データとの差分と、画像データＩ1から得られたＣ（彩度データ７２）とに基づいて、評価データＤ２を導出する関数である。ΣＣ・Ｇ（Ｉ1，Ｉ2）は、例えば、画像データＩ1の階調データと、画像データＩ2の階調データとの差分に対してＣを掛けたものの総和を、評価データＤ２として導出する関数である。式（１）の右辺第２項から、被写体の彩度が考慮された評価データＤ２が導出される。
【００５０】
図８は、式（１）の右辺第１項から得られる評価データＤ１と、式（１）の右辺第２項から得られる評価データＤ２とをグラフで例示したものである。式（１）の右辺第１項から得られる評価データＤ１では、可変光学ＬＰＦ１１の効果が強くなるにつれて、当初は解像度が急激に悪化し、それ以降では解像度の変化が徐々に緩やかになっていることがわかる。また、式（１）の右辺第２項から得られる評価データＤ２では、可変光学ＦＰＦ１１の効果が強くなるにつれて、偽色の範囲が徐々に低下していくことがわかる。
【００５１】
（画像処理部５０）
図９は、画像処理部５０の機能ブロックの一例を表したものである。画像処理部５０は、撮像素子４０から出力された画像データに対して所定の処理を行うものである。画像処理部５０は、例えば、可変光学ＬＰＦ１１の効果（もしくはローパス特性）の変更に応じた、撮像された複数の画像データにおける解像度の変化及び偽色の変化に基づいて可変光学ＬＰＦ１１の効果（もしくはローパス特性）の設定値７４を設定するようになっている。ローパス特性としては、例えば、カットオフ周波数ｆｃが挙げられる。画像処理部５０は、例えば、前処理回路５１、画像処理回路５２、表示処理回路５３、圧縮伸長回路５４およびメモリ制御回路５５を有している。
【００５２】
前処理回路５１は、撮像素子４０から出力された画像データに対して、シェーディング補正などの光学的な補正処理を行うものである。画像処理回路５２は、前処理回路５１から出力された補正後の画像データに対して、後述する種々の処理を行うようになっている。画像処理回路５２は、さらに、例えば、撮像素子４０から取得した画像データを、表示処理回路５３に出力するようになっている。画像処理回路５２は、さらに、例えば、撮像素子４０から取得した画像データを圧縮伸長回路５４に出力するようになっている。画像処理回路５２についての説明は、後に詳述するものとする。
【００５３】
表示処理回路５３は、画像処理回路５２から受け取った画像データから、表示パネル６０に表示させる画像信号を生成して、その画像信号を表示パネル６０に送るものである。圧縮伸長回路５４は、画像処理回路５２から受け取った静止画の画像データに対して、例えば、ＪＰＥＧ（Joint Photographic Experts Group）などの静止画像の符号化方式で圧縮符号化処理を行うものである。また、圧縮伸長回路５４は、画像処理回路５２から受け取った動画の画像データに対して、例えば、ＭＰＥＧ（Moving Picture Experts Group）などの動画像の符号化方式で圧縮符号化処理を行うものである。メモリ制御回路５５は、メモリ部７０に対するデータの書き込みおよび読み出しを制御するものである。
【００５４】
次に、撮像装置１における撮像手順について説明する。
【００５５】
図１０は、撮像装置１における撮像手順の一例を表したものである。まず、制御部８０は動作準備を行う（ステップＳ１０１）。動作準備とは、画像データＩが撮像素子４０から出力されるにあたって必要となる準備を指しており、例えば、ＡＦ（オートフォーカス）の条件などを設定することを指している。具体的には、制御部８０は、ユーザからの準備指示（例えば、シャッターボタンの半押下げ）を検知すると、ＡＦ等の動作準備をレンズ駆動部２０およびＬＰＦ駆動部３０に指示する。すると、レンズ駆動部２０は、制御部８０からの指示に従って、動作準備を画像データＩ1の出力前にレンズ１２に対して行う。レンズ駆動部２０は、例えば、レンズ１２のフォーカスの条件などを所定の値に設定する。このとき、制御部８０は、可変光学ＬＰＦ１１が光学的に作用しないようにした上でＡＦ等の動作準備をレンズ駆動部２０に実行させる。ＬＰＦ駆動部３０は、制御部８０からの指示に従って、動作準備を画像データＩ1の出力前に可変光学ＬＰＦ１１に対して行う。ＬＰＦ駆動部３０は、例えば、電極１１２，１１４間に電圧Ｖ２を印加する。このとき、可変光学ＬＰＦ１１の偏光変換効率ＴはＴ１となっている。
【００５６】
次に、制御部８０は、可変光学ＬＰＦ１１の効果を、可変光学ＬＰＦ１１の効果の設定最小分解能よりも大きなピッチで変化させる変化指示を生成し、その変化指示をＬＰＦ駆動部３０に対して行う。つまり、制御部８０は、可変光学ＬＰＦ１１のカットオフ周波数ｆｃを、可変光学ＬＰＦ１１のカットオフ周波数ｆｃの設定最小分解能よりも大きなピッチで変化させる変化指示を生成し、その変化指示をＬＰＦ駆動部３０に対して行う。すると、ＬＰＦ駆動部３０は、例えば、可変光学ＬＰＦ１１の電極間に印加する電圧Ｖ（周波数一定）を設定最小分解能よりも大きなピッチで変えることにより、可変光学ＬＰＦ１１のカットオフ周波数ｆｃを徐々に変化させる。このとき、制御部８０は、可変光学ＬＰＦ１１の効果（カットオフ周波数ｆｃ）の変化に同期した撮像指示を生成し、その撮像指示を撮像素子４０に対して行う。すると、撮像素子４０は、制御部８０からの指示に従って、可変光学ＬＰＦ１１の効果の変化（カットオフ周波数ｆｃの変化）に同期した撮像を行う。その結果、撮像素子４０は、可変光学ＬＰＦ１１の効果（カットオフ周波数ｆｃ）の互いに異なる複数の撮像データを生成し、画像処理部５０に出力する。
【００５７】
以下に、複数の撮像データのより具体的な取得方法について説明する。
【００５８】
まず、制御部８０は、可変光学ＬＰＦ１１の効果の変更可能な範囲の中で、可変光学ＬＰＦ１１の効果を最大もしくはほぼ最大にするよう、ＬＰＦ駆動部３０に指示する（ステップＳ１０２）。つまり、制御部８０は、可変光学ＬＰＦ１１のカットオフ周波数ｆｃの変更可能な範囲の中で、可変光学ＬＰＦ１１のカットオフ周波数ｆｃが最小もしくはほぼ最小となるよう、ＬＰＦ駆動部３０に指示する。すると、ＬＰＦ駆動部３０は、制御部８０からの指示に従って、可変光学ＬＰＦ１１の効果の変更可能な範囲の中で、可変光学ＬＰＦ１１の効果を最大もしくはほぼ最大にする。つまり、ＬＰＦ駆動部３０は、可変光学ＬＰＦ１１のカットオフ周波数ｆｃの変更可能な範囲の中で、可変光学ＬＰＦ１１のカットオフ周波数ｆｃを最小もしくはほぼ最小にする。ＬＰＦ駆動部３０は、例えば、電極１１２，１１４間に電圧Ｖ１、もしくは、電圧Ｖ１よりも若干大きな値の電圧を印加する。その結果、可変光学ＬＰＦ１１の偏光変換効率ＴがＴ２（最大）、もしくは、Ｔ２に近い値となる。
【００５９】
続いて、制御部８０は、画像データＩ1の取得を撮像素子４０に指示する（ステップＳ
１０３）。具体的には、制御部８０は、可変光学ＬＰＦ１１の効果の変更可能な範囲の中で、可変光学ＬＰＦ１１の効果が最大もしくはほぼ最大となっているときに、画像データＩ1の取得を撮像素子４０に指示する。つまり、制御部８０は、可変光学ＬＰＦ１１のカットオフ周波数ｆｃの変更可能な範囲の中で、可変光学ＬＰＦ１１のカットオフ周波数ｆｃが最小もしくはほぼ最小となっているときに、画像データＩ1の取得を撮像素子４０に指示する。すると、撮像素子４０は、可変光学ＬＰＦ１１の効果が最大もしくはほぼ最大となっている可変光学ＬＰＦ１１を経由して入射した光を、受光面４０Ａで離散的にサンプリングすることによりカラーの画像データＩ1を取得する。つまり、撮像素子４０は、可変光学ＬＰＦ１１のカットオフ周波数ｆｃが最小もしくはほぼ最小となっている可変光学ＬＰＦ１１を経由して入射した光を、受光面４０Ａで離散的にサンプリングすることによりカラーの画像データＩ1を取得する。撮像素子４０は、例えば、偏光変換効率Ｔが最大もしくはほぼ最大となっている可変光学ＬＰＦ１１を経由して入射した光を、受光面４０Ａで離散的にサンプリングすることによりカラーの画像データＩ1を取得する。
【００６０】
画像データＩ1は、可変光学ＬＰＦ１１の効果の変更可能な範囲の中で、可変光学ＬＰＦ１１の効果を最大もしくはほぼ最大としたときに撮像素子４０を駆動することにより撮像素子４０で生成された画像データである。つまり、画像データＩ1は、可変光学ＬＰＦ１１のカットオフ周波数ｆｃの変更可能な範囲の中で、可変光学ＬＰＦ１１のカットオフ周波数ｆｃが最小もしくはほぼ最小としたときに撮像素子４０を駆動することにより撮像素子４０で生成された画像データである。画像データＩ1は、本開示の「第１画像データ」の一具体例に相当する。撮像素子４０は、取得した画像データＩ1を画像処理部５０に出力する。次に、画像処理部５０は、取得した画像データＩ1を解析することにより、画像データＩ1における彩度に関するデータ（彩度データ３３）を導出する（ステップＳ１０４）。
【００６１】
次に、制御部８０は、可変光学ＬＰＦ１１の効果の変更をＬＰＦ駆動部３０に指示する（ステップＳ１０５）。具体的には、制御部８０は、可変光学ＬＰＦ１１の効果が可変光学ＬＰＦ１１の前回の効果よりも小さくなるよう、ＬＰＦ駆動部３０に指示する。つまり、制御部８０は、可変光学ＬＰＦ１１のカットオフ周波数ｆｃが可変光学ＬＰＦ１１の前回のカットオフ周波数ｆｃよりも大きくなるよう、ＬＰＦ駆動部３０に指示する。すると、ＬＰＦ駆動部３０は、制御部８０からの指示に従って、可変光学ＬＰＦ１１の効果を可変光学ＬＰＦ１１の前回の効果よりも小さくする。つまり、ＬＰＦ駆動部３０は、可変光学ＬＰＦ１１のカットオフ周波数ｆｃを可変光学ＬＰＦ１１の前回のカットオフ周波数ｆｃよりも大きくする。ＬＰＦ駆動部３０は、例えば、電極１１２，１１４間に、電圧Ｖ３として、前回よりも大きな電圧を印加する。その結果、可変光学ＬＰＦ１１の偏光変換効率ＴがＴ２とＴ１との間の大きさであって、かつ前回よりも小さな値となる。
【００６２】
続いて、制御部８０は、画像データＩ2の取得を撮像素子４０に指示する（ステップＳ１０６）。画像データＩ2は、本開示の「第２画像データ」の一具体例に相当する。具体的には、制御部８０は、画像データＩ1を得る際の設定値とは異なる設定値が可変光学ＬＰＦ１１に設定されているときに、画像データＩ2の取得を撮像素子４０に指示する。すると、撮像素子４０は、可変光学ＬＰＦ１１の効果が可変光学ＬＰＦ１１の前回の効果よりも小さくなっている可変光学ＬＰＦ１１を経由して入射した光を、受光面４０Ａで空間的にサンプリングすることによりカラーの画像データＩ2を取得する。つまり、撮像素子４０は、可変光学ＬＰＦ１１のカットオフ周波数ｆｃが可変光学ＬＰＦ１１の前回のカットオフ周波数ｆｃよりも大きくなっている可変光学ＬＰＦ１１を経由して入射した光を、受光面４０Ａで空間的にサンプリングすることによりカラーの画像データＩ2を取得する。撮像素子４０は、例えば、偏光変換効率ＴがＴ２とＴ１との間の大きさとなっている可変光学ＬＰＦ１１を経由して入射した光を、受光面４０Ａで空間的にサンプリングすることによりカラーの画像データＩ2を取得する。撮像素子４０は、取得した画像データＩ2を、画像処理部５０に出力する。
【００６３】
次に、制御部８０は、適正なローパス特性（設定値７４）の導出を画像処理部５０に指示する。すると、画像処理部５０は、撮像素子４０で得られた複数の画像データ（画像データＩ1および画像データＩ2）における解像度の変化及び偽色の変化に基づいて、適正なローパス特性（設定値７４）を導出する。
【００６４】
画像処理部５０は、まず、複数の画像データ（画像データＩ1および画像データＩ2）に基づいて、２つの評価データＤ１，Ｄ２を導出する（ステップＳ１０７）。
【００６５】
画像処理部５０は、複数の画像データ（画像データＩ1および画像データＩ2）の空間周波数に基づいて、解像度の変化についての評価データＤ１を導出する。画像処理部５０は、例えば、画像データＩ1の周波数スペクトルと、画像データＩ2の周波数スペクトルとの差分に基づいて、評価データＤ１を導出する。画像処理部５０は、例えば、画像データＩ1と画像データＩ2とを式（１）の右辺第１項に当てはめることにより、評価データＤ１を導出する。
【００６６】
画像処理部５０は、複数の画像データ（画像データＩ1および画像データＩ2）の階調データに基づいて、偽色の変化についての評価データＤ２を導出する。画像処理部５０は、例えば、画像データＩ1の階調データと、画像データＩ2の階調データとの差分に基づいて、評価データＤ２を導出する。画像処理部５０は、例えば、画像データＩ1の階調データと画像データＩ2の階調データとの差分と、画像データＩ1から得られた彩度データ３３とに基づいて、評価データＤ２を導出する。画像処理部５０は、例えば、画像データＩ1と、画像データＩ2と、彩度データ３３とを式（１）の右辺第２項に当てはめることにより、評価データＤ２を導出する。
【００６７】
次に、画像処理部５０は、得られた２つの評価データＤ１，Ｄ２に基づいて、可変光学ＬＰＦ１１の効果の適正を判定する（ステップＳ１０８）。つまり、画像処理部５０は、得られた２つの評価データＤ１，Ｄ２が、目的に応じた所望の基準を満たしているか否かを判定する。「目的に応じた所望の基準」は、撮影モードや被写体、シーンなどに応じて異なる。画像処理部５０は、例えば、今回新たに得られた２つの評価データＤ１，Ｄ２の合計値（評価データＤ）が、可変光学ＬＰＦ１１の効果（カットオフ周波数ｆｃ）の制御可能な領域において、最小値となるか否かを判定する。
【００６８】
画像処理部５０は、可変光学ＬＰＦ１１の効果が適正であると判定した場合には、そのときの可変光学ＬＰＦ１１のローパス特性を設定値７４とする。具体的には、画像処理部５０は、可変光学ＬＰＦ１１の効果が適正であると判定した場合には、そのときの可変光学ＬＰＦ１１の設定値を設定値７４とする。画像処理部５０は、設定値７４をメモリ部７０に格納する。画像処理部５０は、例えば、今回新たに得られた２つの評価データＤ１，Ｄ２の合計値（評価データＤ）が、可変光学ＬＰＦ１１の効果の制御可能な領域において最小値となると判定した場合には、そのときの可変光学ＬＰＦ１１の設定値を設定値７４とする。
【００６９】
画像処理部５０は、可変光学ＬＰＦ１１の効果が適正ではないと判定した場合には、ステップＳ１０５に戻って、可変光学ＬＰＦ１１の効果（カットオフ周波数ｆｃ）を変更し、ステップＳ１０６以降のステップを順次、実施する。このようにして、画像処理部５０は、ステップＳ１０５〜Ｓ１０８を繰り返し実施することにより、導出した２つの評価データＤ１，Ｄ２に基づいて可変光学ＬＰＦ１１の設定値７４を導出する。つまり、画像処理部５０は、ユーザからの準備指示（例えば、シャッターボタンの半押下げ）に伴って、ローパス特性（カットオフ周波数ｆｃ）を異ならせて撮影された複数の画像データ（画像データＩ1および複数の画像データＩ2）に基づいて可変光学ＬＰＦ１１の設定値７４を導出する。画像処理部５０は、設定値７４が得られたことを、制御部８０に知らせる。
【００７０】
制御部８０は、設定値７４が得られたことについての通知が画像処理部５０から入力された後、ユーザからの撮像指示（例えば、シャッターボタンの押下げ）を検知すると、可変光学ＬＰＦ１１を設定値７４に設定するよう、ＬＰＦ駆動部３０に指示する。具体的には、制御部８０は、ユーザからの撮像指示（例えば、シャッターボタンの押下げ）を検知すると、メモリ部７０から設定値７４を読み出し、読み出した設定値７４をＬＰＦ駆動部３０に出力するとともに、可変光学ＬＰＦ１１を設定値７４に設定するよう、ＬＰＦ駆動部３０に指示する。すると、ＬＰＦ駆動部３０は、制御部８０からの指示に従って、可変光学ＬＰＦ１１を設定値７４に設定する。
【００７１】
制御部８０は、さらに、画像データＩの取得を撮像素子４０に指示する。すると、撮像素子４０は、制御部８０からの指示に従って、画像データＩを取得する（ステップＳ１０９）。つまり、撮像素子４０は、設定値７４の設定された可変光学ＬＰＦ１１を経由して入射した光を、受光面４０Ａで離散的にサンプリングすることによりカラーの画像データＩを取得する。撮像素子４０は、取得した画像データＩを画像処理部５０に出力する。画像処理部５０は、画像データＩに対して所定の処理を行った後、処理のなされた後の画像データＩをメモリ部７０に出力するとともに、表示パネル６０に出力する。すると、メモリ部７０は、画像処理部５０から入力された画像データＩを記憶し、表示部６０は、画像処理部５０から入力された画像データＩを表示する（ステップＳ１１０）。
【００７２】
なお、撮像装置１において、上記の動作準備は、ユーザによる手動操作によって行われてもよい。また、撮像装置１において、可変光学ＬＰＦ１１の効果が変更されながら画像データＩ2が連続して取得されている最中に、レンズ１３のフォーカスの条件などが変更された場合には、画像データＩ1の取得からやり直しが行われてもよい。上記のユーザからの指示は、「シャッターボタンの半押下げ」以外の方法で行われてもよい。例えば、上記のユーザからの指示が、レンズ１３のフォーカスの条件などが設定された後の、撮像装置１本体に付属するボタン（シャッターボタン以外の操作ボタン）の押下げによって行われてもよい。また、例えば、上記のユーザからの指示が、レンズ１３のフォーカスの条件などが設定された後の、撮像装置１本体に付属する操作ダイヤルの回動によって行われてもよい。
【００７３】
ところで、上述したように、「目的に応じた所望の基準」は、撮影モードや被写体、シーンなどに応じて異なる。そこで、以下に、「目的に応じた所望の基準」を例示する。
【００７４】
（偽色の大きな増大を伴わずに解像度の劣化を低減したい場合）
例えば、図８に示したように、評価データＤ２の、可変光学ＬＰＦ１１の効果に対する変化が相対的に緩やかな範囲（範囲α）が存在する場合に、制御部８０は、その範囲αの中で、評価データＤ２が最も小さくなるとき（図８中の白丸）の可変光学ＬＰＦ１１の効果を、設定値７４として設定してもよい。つまり、評価データＤ２の、可変光学ＬＰＦ１１のカットオフ周波数ｆｃに対する変化が相対的に緩やかな範囲（範囲α）が存在する場合に、制御部８０は、その範囲αの中で、評価データＤ２が最も小さくなるとき（図８中の白丸）の可変光学ＬＰＦ１１のカットオフ周波数ｆｃを、設定値７４として設定してもよい。このようにした場合には、偽色の大きな増大を伴わずに、解像度の劣化を低減することができる。
【００７５】
（処理速度を速くしたい場合）
上記実施の形態において、式（１）右辺第２項（評価データＤ２）は、被写体やレンズ１３の特性次第では、例えば、図１１に示したように、階段状のプロファイルとなることがある。なお、図１１は、評価データＤ１，Ｄ２の一例を表したものである。この場合、制御部８０は、例えば、図１１に示したように、可変光学ＬＰＦ１１の効果（カットオフ周波数ｆｃ）の制御可能な領域を複数の領域Ｒに分割して、可変光学ＬＰＦ１１の効果（カットオフ周波数ｆｃ）を、分割した領域Ｒごとに設定した値に順次、変えるよう、ＬＰＦ駆動部３０に指示してもよい。この場合、ＬＰＦ駆動部３０は、制御部８０からの指示に従って、可変光学ＬＰＦ１１の効果（カットオフ周波数ｆｃ）を、領域Ｒごとに設定した値に順次、設定する。ここで、各領域Ｒは、可変光学ＬＰＦ１１の効果（カットオフ周波数ｆｃ）の設定最小分解能よりも大きな幅となっている。従って、ＬＰＦ駆動部３０は、可変光学ＬＰＦ１１の効果（カットオフ周波数ｆｃ）を、可変光学ＬＰＦ１１の効果（カットオフ周波数ｆｃ）の設定最小分解能よりも大きなピッチで順次、変化させる。
【００７６】
制御部８０は、さらに、可変光学ＬＰＦ１１の効果（カットオフ周波数ｆｃ）の設定に同期して、撮像を撮像素子４０に指示する。すると、撮像素子４０は、画像データＩ1および複数の画像データＩ2を取得し、取得した画像データＩ1および複数の画像データＩ2を、画像処理部５０に出力する。画像処理部５０は、入力された画像データＩ1および複数の画像データＩ2に基づいて２つの評価データＤ１，Ｄ２を導出する。
【００７７】
画像処理部５０は、さらに、２つの評価データＤ１，Ｄ２の合計値（評価データＤ）が最小となる領域Ｒ（例えば領域Ｒ１）において、可変光学ＬＰＦ１１の設定値を、偽色が増加し始める値（例えば、図１１中のｋ）に設定してもよい。このようにした場合には、可変光学ＬＰＦ１１の効果（カットオフ周波数ｆｃ）を実際に変化させる回数を、上記実施の形態よりも減らすことができる。その結果、処理速度が速くなる。
【００７８】
（顔検出された人物に髪の毛がある場合）
撮影対象の被写体に髪の毛がある場合には、その髪の毛に偽色が発生することがある。被写体に発生した偽色は目立つことから、そのような偽色をできるだけ小さくすることが好ましい。この場合、画像処理部５０は、複数の画像データ（画像データＩ1および画像データＩ2）に含まれる顔領域における偽色の変化に基づいて設定値７４を設定するよう
になっていてもよい。
【００７９】
図１２は、顔検出された人物に髪の毛がある場合の撮像手順の一例を表したものである。画像処理部５０は、撮像素子４０から画像データＩ1を取得した際に、画像データＩ1に対して顔検出を実施してもよい（図１２、ステップＳ１１１）。さらに、画像処理部５０が、ステップＳ１１１において画像データＩ1に対して顔検出を実施した結果、顔を検出した場合には、顔検出された人物に髪の毛があるか否か検出してもよい（図１２、ステップＳ１１２）。
【００８０】
その結果、顔検出された人物に髪の毛がある場合には、画像処理部５０は、例えば、評価データＤ２について閾値処理を行ってもよい。画像処理部５０は、例えば、評価データＤ２が所定の閾値Ｔｈ１を下回る範囲において、可変光学ＬＰＦ１１の効果を最も弱くする設定値を、設定値７４として決定してもよい（図１３）。なお、図１３は、評価データＤ１，Ｄ２の一例を種々の閾値とともに表したものである。このとき、所定の閾値Ｔｈ１は、顔検出用の閾値となっており、例えば、被写体である人物の髪の毛に生じた偽色を除外するのに適した値となっている。画像処理部５０は、例えば、評価データＤ２だけでなく、評価データＤ１についても閾値処理を行ってもよい。制御部８０は、例えば、評価データＤ２が所定の閾値Ｔｈ１を下回る範囲であって、かつ、評価データＤ１が所定の閾値Ｔｈ２を下回る範囲において、可変光学ＬＰＦ１１の効果を最も弱くする設定値を、設定値７４として決定してもよい（図１３）。
【００８１】
顔検出された人物に髪の毛がない場合、画像処理部５０は、上述と同様の方法で、設定値７４を決定すればよい。顔検出された人物に髪の毛がある場合には、画像処理部５０は、このようにして設定値７４を決定してもよい。
【００８２】
（マクロ撮影モードの場合）
図１４は、マクロ撮影モードにおける撮像手順の一例を表したものである。撮影モードがマクロ撮影モードとなっている場合、ユーザは物体を近接して撮影しようとしていることが多い。このとき、特に、ユーザが商品撮影をしようとしている場合には、撮影対象の商品に対して偽色が発生することは許容されないことが多い。そのような場合には、ユーザ自身が、偽色の有無を実際に確認した上で、設定値７４を決定することが好ましい。具体的には、画像処理部５０が、複数の画像データＩ2のうちユーザによって選択された１つの画像データＩ2が撮像されたときの可変光学ＬＰＦ１１の効果（カットオフ周波数ｆｃ）を設定値７４に設定することが好ましい。
【００８３】
撮像素子４０がマクロ撮影モードとなっている場合には、ステップＳ１０１が終了した後に、ユーザからの撮像指示（例えば、シャッターボタンの押下げ）が検知されたときには、画像処理部５０は、以下の処理を行う。画像処理部５０は、ステップＳ１０２からステップＳ１０７が順次、実施された後、ステップＳ１０８において、例えば、評価データＤ２が所定の閾値Ｔｈ３を下回るか否か判定する。このとき、所定の閾値Ｔｈ３は、マクロ撮影モード用の閾値であり、例えば、マクロ撮影モードにおいて被写体である物体に生じる偽色を除外するのに適した値となっている。
【００８４】
その結果、評価データＤ２が所定の閾値Ｔｈ３（図１３）を下回る場合には、画像処理部５０は、そのときの評価データＤ２に対応する可変光学ＬＰＦ１１の設定値を、適正値候補３５ａとして取得し（図１４、ステップＳ１１３）、さらに、適正値候補３５ａに対応する画像データＩ2を適正値候補３５ａとともにメモリ部７０に格納する。偽色の変化に関する評価データが所定の閾値Ｔｈ１を下回らない場合には、画像処理部５０は、ステップＳ１０５に戻る。
【００８５】
なお、画像処理部５０は、例えば、評価データＤ２だけでなく、評価データＤ１についても閾値処理を行ってもよい。画像処理部５０は、例えば、評価データＤ２が所定の閾値Ｔｈ３を下回るとともに、評価データＤ１が所定の閾値Ｔｈ４（図１３）を下回るか否か判定してもよい。その結果、評価データＤ２が所定の閾値Ｔｈ３を下回るとともに、評価データＤ１が所定の閾値Ｔｈ４を下回る場合には、画像処理部５０は、その評価データＤ２に対応する可変光学ＬＰＦ１１の設定値を、適正値候補３５ａとして取得してもよい。また、評価データＤ２が所定の閾値Ｔｈ３を下回らない場合や、評価データＤ１が所定の閾値Ｔｈ４を下回らない場合には、画像処理部５０は、ステップＳ１０５に戻ってもよい。
【００８６】
画像処理部５０は、ステップＳ１１３を行った後、可変光学ＬＰＦ１１の効果の変更が終了したか否か判定する（図１４、ステップＳ１１４）。画像処理部５０は、可変光学ＬＰＦ１１の効果の変更が終了するまで、ステップＳ１０５〜Ｓ１０８、Ｓ１１３を繰り返し実行する。つまり、画像処理部５０は、偽色の変化に関する評価データが所定の閾値Ｔｈ３を下回るごとに、そのときの評価データＤ２に対応する値を適正値候補３５ａとして取得する。その結果、可変光学ＬＰＦ１１の効果の変更が終了したら、画像処理部５０は、各適正値候補３５ａに対応する複数の画像データＩ2の中から１つの画像データＩ2の選択をユーザに要求する。
【００８７】
具体的には、画像処理部５０は、各適正値候補３５ａに対応する複数の画像データＩ2の中から１枚の画像データＩ2を表示部６０に出力する。すると、表示部６０は、画像処理部５０から入力された画像データＩ2を表示する（図１４、ステップＳ１１５）。画像処理部５０は、各適正値候補３５ａに対応する複数の画像データＩ2を順次、表示部６０に出力する。画像処理部５０は、ユーザからの表示指示（例えば、撮像装置１本体に付属する操作ボタンの押下げや、撮像装置１本体に付属する操作ダイヤルの回動など）が検知されるたびに、表示部６０に表示される画像データＩ2が別の画像データＩ2に入れ替わるように、複数の画像データＩ2を表示部６０に出力する。表示部６０は、画像処理部５０から画像データＩ2が入力される度に、表示させる画像データＩ2を入れ換える。
【００８８】
このとき、画像処理部５０は、例えば、画像データＩ2とともに、数値（例えば、偽色発生領域のピクセル換算の面積）や、ヒストグラムを表示部６０に出力してもよい。すると、表示部６０は、画像処理部５０から入力された数値やヒストグラムを表示する。ヒストグラムは、例えば、図１５に示したように、縦・横軸を彩度(例えば、ＹＣｂＣｒ空間上でのＣｂ，Ｃｒ)とし、偽色が発生しているピクセル数に応じた濃淡で各領域を表現したものとなっていてもよい。
【００８９】
画像処理部５０は、ユーザからの選択指示（例えば、撮像装置１本体に付属する別の操作ボタンの押下げなど）が検知された場合には、検知したときに表示部６０に表示させていた画像データＩ2に対応する適正値候補３５ａを設定値７４として決定する。このようにして、画像処理部５０は、ユーザに、適正な画像データＩ2（つまりは可変光学ＬＰＦ１１としての適正値）を選択させる（図１４、ステップＳ１１６）。
【００９０】
なお、撮影モードがマクロ撮影モードとなっている場合に、画像処理部５０は、例えば、評価データＤ２が所定の閾値Ｔｈ３を下回る範囲において、可変光学ＬＰＦ１１の効果を最も弱くする設定値（カットオフ周波数ｆｃが最も大きくなる設定値）を、設定値７４として決定してもよい。画像処理部５０は、例えば、評価データＤ２だけでなく、評価データＤ１についても閾値処理を行ってもよい。画像処理部５０は、例えば、評価データＤ２が所定の閾値Ｔｈ３を下回る範囲であって、かつ、評価データＤ１が所定の閾値Ｔｈ４を下回る範囲において、可変光学ＬＰＦ１１の効果を最も弱くする設定値（カットオフ周波数ｆｃが最も大きくなる設定値）を、設定値７４として決定してもよい。
【００９１】
（偽色の発生位置に応じた処理を必要とする場合）
撮影モードとして、偽色の発生位置に応じた処理を行うためのモード（便宜的に、「偽色処理モード」と称する。）が存在する場合には、画像処理部５０は、偽色処理モードにおいて、ステップＳ１０１を行った後に、偽色の発生位置の検出を実施してもよい。画面一面に対して、かなり大きい領域に偽色が発生している場合や、画面中心に偽色が発生している場合には、偽色が残存すると、残存している偽色が目立つ可能性があると考えられる。また、画面に対して、四隅に偽色がある場合には、それを完全に消すことで不必要に解像度劣化を招くことが考えられる。そのような場合には、画像処理部５０は、偽色の発生位置に応じて、可変光学ＬＰＦ１１の効果を調整することが好ましい。具体的には、画像処理部５０が、複数の画像データＩ1，Ｉ3における解像度の変化及び偽色の変化と、複数の画像データＩ1，Ｉ3に含まれる偽色の位置とに基づいて設定値７４を設定することが好ましい。
【００９２】
図１６は、偽色処理モードにおける撮像手順の一例を表したものである。まず、画像処理部５０は、ステップＳ１０１〜Ｓ１０４が実施された後、偽色の発生位置の検出を実施する。具体的には、まず、制御部８０は、可変光学ＬＰＦ１１の効果を最小またはほぼ最小にする（ステップＳ１１７）。例えば、制御部８０は、可変光学ＬＰＦ１１の効果が最小またはほぼ最小となるよう（カットオフ周波数ｆｃが最大またはほぼ最大となるように）、ＬＰＦ駆動部３０に指示する。すると、ＬＰＦ駆動部３０は、制御部８０からの指示に従って、可変光学ＬＰＦ１１の効果を最小またはほぼ最小にする。つまり、ＬＰＦ駆動部３０は、制御部８０からの指示に従って、カットオフ周波数ｆｃを最大またはほぼ最大にする。ＬＰＦ駆動部３０は、例えば、電極１１２，１１４間に電圧Ｖ２または電圧Ｖ２よりも若干小さな値の電圧を印加する。その結果、可変光学ＬＰＦ１１の偏光変換効率ＴがＴ１（最小）またはほぼＴ１となる。
【００９３】
続いて、画像処理部５０は、可変光学ＬＰＦ１１の効果が最小またはほぼ最小となっているときの画像データＩ3を取得する（ステップＳ１１８）。具体的には、制御部８０は、可変光学ＬＰＦ１１の効果が最小またはほぼ最小となっているときに、撮像を撮像素子４０に指示する。つまり、制御部８０は、カットオフ周波数ｆｃが最大またはほぼ最大となっているときに、撮像を撮像素子４０に指示する。すると、撮像素子４０は、可変光学ＬＰＦ１１の効果が最小またはほぼ最小となっている可変光学ＬＰＦ１１を経由して入射した光を、受光面４０Ａで離散的にサンプリングすることによりカラーの画像データＩ3を取得する。つまり、撮像素子４０は、カットオフ周波数ｆｃが最大またはほぼ最大となっている可変光学ＬＰＦ１１を経由して入射した光を、受光面４０Ａで離散的にサンプリングすることによりカラーの画像データＩ3を取得する。撮像素子４０は、例えば、偏光変換効率Ｔが最小またはほぼ最小となっている可変光学ＬＰＦ１１を経由して入射した光を、受光面４０Ａで離散的にサンプリングすることによりカラーの画像データＩ3を取得する。このとき、画像データＩ3には、可変光学ＬＰＦ１１によって取り除かれずに残った偽色が存在する可能性が高い。撮像素子４０は、取得した画像データＩ3を画像処理部５０に出力する。その結果、画像処理部５０は、画像データＩ3を取得する。
【００９４】
次に、画像処理部５０は、画像データＩ3に含まれる偽色の位置を検出する（ステップＳ１１９）。具体的には、画像処理部５０は、画像データＩ1と、画像データＩ3と、彩度データ３３とを用いて、画像データＩ3に含まれる偽色の位置を検出する。画像処理部５０は、例えば、２つの画像データＩ1，Ｉ3の階調の差分をドットごとに計算し、それにより得られた差分画像に対してＣを掛け合わせることにより、偽色判定画像を生成する。次に、画像処理部５０は、偽色判定画像の各ドットの値が所定の閾値Ｔｈ５を超えるか否か判定する。その結果、偽色判定画像の各ドットのいずれかの値が所定の閾値Ｔｈ５を超えている場合には、画像処理部５０は、所定の閾値Ｔｈ５を超えたドットの座標を取得し、取得した座標を、画像データＩ3に含まれる偽色の発生位置（偽色発生位置３５）として、メモリ部７０に格納する（図１７）。なお、図１７は、メモリ部７０に記憶されているデータの一例を表したものである。画像処理部５０は、画像データＩ3の代わりに、画像データＩ2を用いてもよい。具体的には、画像処理部５０は、画像データＩ2において、偽色の位置を検出してもよい。画像処理部５０は、画像データＩ2，Ｉ3において、偽色の位置を検出してもよい。
【００９５】
次に、画像処理部５０は、ステップＳ１０５〜Ｓ１０８が実施されたとき、ステップＳ１０８において、得られた評価データＤ２が、偽色の発生位置（偽色発生位置３５）に応じた所望の基準を満たしているか否かを判定する。
【００９６】
偽色発生位置３５が画面中心であったり、画面中心を含む大きな領域であったりする場合には、画像処理部５０は、例えば、評価データＤ２に対して、偽色発生位置３５が画面中心であるときの補正係数αを掛けてもよい（図１８）。偽色発生位置３５が画面の四隅である場合には、画像処理部５０は、例えば、評価データＤ２に対して、偽色発生位置３５が画面の四隅であるときの補正係数βを掛けてもよい（図１８）。補正係数βは、例えば、補正係数αよりも小さな値となっている。なお、図１８は、補正係数α，βが適用される偽色の発生位置の一例を表したものである。図１８では、補正係数α，βが、偽色の発生位置に対応して表されている。
【００９７】
なお、偽色発生位置３５が画面中心であったり、画面中心を含む大きな領域であったりする場合には、画像処理部５０は、例えば、評価データＤ２が、偽色発生位置３５が画面中心であるときの閾値Ｔｈ６以下となっているか否かを判定してもよい（図１９）。偽色発生位置３５が画面の四隅である場合には、評価データＤ２は、例えば、評価データＤ２が、偽色発生位置３５が画面の四隅であるときの閾値Ｔｈ７以下となっているか否かを判定してもよい（図１９）。閾値Ｔｈ６は、例えば、閾値Ｔｈ７よりも小さな値となっている。なお、図１９は、閾値Ｔｈ６，Ｔｈ７が適用される偽色の発生位置の一例を表したものである。図１９では、閾値Ｔｈ６，Ｔｈ７が、偽色の発生位置に対応して表されている。
【００９８】
画像処理部５０は、評価データＤ２が偽色発生位置３５に応じた所望の基準を満たしていた場合には、そのときの評価データＤ２に対応する値を設定値７４とし、メモリ部７０に格納する。
【００９９】
なお、画像処理部５０は、画像データＩ3において、偽色の代わりに、または偽色とともに、解像度劣化が生じている位置を検出してもよい。このとき、画像処理部５０は、画像データＩ3の代わりに、画像データＩ2を用いてもよい。具体的には、画像処理部５０は、画像データＩ2において、偽色の代わりに、または偽色とともに、解像度劣化が生じている位置を検出してもよい。画像処理部５０は、画像データＩ2，Ｉ3において、偽色の代わりに、または偽色とともに、解像度劣化が生じている位置を検出してもよい。画像処理部５０は、ステップＳ１０８において、評価データＤ１が、解像度劣化の発生位置（解像度劣化位置）に応じた所望の基準を満たしているか否かを判定する。
【０１００】
解像度劣化位置が画面中心であったり、画面中心を含む大きな領域であったりする場合には、画像処理部５０は、例えば、評価データＤ１に対して、解像度劣化位置が画面中心であるときの補正係数γを掛けてもよい。解像度劣化位置が画面の四隅である場合には、画像処理部５０は、例えば、評価データＤ１に対して、解像度劣化位置が画面の四隅であるときの補正係数δを掛けてもよい。補正係数δは、例えば、補正係数γよりも小さな値となっている。
【０１０１】
なお、解像度劣化位置が画面中心であったり、画面中心を含む大きな領域であったりする場合には、画像処理部５０は、例えば、評価データＤ１が、解像度劣化位置が画面中心であるときの閾値Ｔｈ８以下となっているか否かを判定してもよい。解像度劣化位置が画面の四隅である場合には、画像処理部５０は、例えば、評価データＤ１が、解像度劣化位置が画面の四隅であるときの閾値Ｔｈ９以下となっているか否かを判定してもよい。閾値Ｔｈ８は、例えば、閾値Ｔｈ９よりも小さな値となっている。
【０１０２】
制御部８０は、評価データＤ１が解像度劣化位置に応じた所望の基準を満たしていた場合には、そのときの評価データＤ１に対応する値を設定値７４とし、メモリ部７０に格納する。
【０１０３】
[効果]
次に、撮像装置１の効果について説明する。
【０１０４】
通常の単板式のデジタルカメラにおいてベイヤーコーディングのイメージャを用いる場合には、イメージャで得られた画像データに対してデモザイク処理を行うことにより、失われた情報を復元することが必要となる。しかし、原理的に失われた情報を完全に導出することは難しいことから、解像度の低下やアーティファクトの発生が避けられない。
【０１０５】
そこで、ローパスフィルタをレンズとイメージャとの間に設けることが考えられる。このようにした場合には、ローパスフィルタの効果を調整することで、アーティファクトの１つである偽色を低減することができる。ただし、偽色の低減と引き換えに、解像度が更に低下してしまう。解像度が過度に低下しないよう、ローパスフィルタの効果を調整することはできるが、そのようにした場合には、偽色の低減効果が小さくなってしまう。このように、ローパスフィルタにおいては、解像度の上昇と偽色の低減とがトレードオフの関係となっている。そのため、解像度および偽色のいずれか一方だけに着目して、ローパスフィルタを設定した場合には、ローパスフィルタの効果が強くかかった画像が選択されてしまい、必要以上に解像度が劣化してしまうという問題があった。
【０１０６】
一方、本実施の形態では、可変光学ＬＰＦ１１の効果を変えながら取得した複数の画像データ（画像データＩ1および複数の画像データＩ2）に基づいて、評価データＤ１および評価データＤ２が導出される。さらに、導出された評価データＤ１および評価データＤ２に基づいて可変光学ＬＰＦ１１の設定値７４が導出される。これにより、ユーザの目的に応じた、画質のバランスのとれた画像データＩを得ることができる。
【０１０７】
また、本実施の形態において、２つの画像データＩ1，Ｉ2の周波数スペクトルの差分に基づいて評価データＤ１が生成されるとともに、２つの画像データＩ1，Ｉ2の階調との差分に基づいて評価データＤ２が生成される場合には、より精度よく、画質のバランスのとれた画像データＩを得ることができる。
【０１０８】
また、本実施の形態において、評価データＤ１および評価データＤ２の合計値（評価データＤ）が最も小さくなるときの値を設定値７４にした場合には、簡易な方法で、画質のバランスのとれた画像データＩを得ることができる。
【０１０９】
また、本実施の形態において、例えば、図８に示したように、評価データＤ２の、可変光学ＬＰＦ１１の効果（カットオフ周波数ｆｃ）に対する変化が相対的に緩やかな範囲αが存在する場合に、その範囲αの中で、可変光学ＬＰＦ１１の効果（カットオフ周波数ｆｃ）が最も低くなるときの値を設定値７４にした場合には、簡易な方法で、偽色の大きな変化を伴わずに、解像度を低減することができる。
【０１１０】
また、本実施の形態において、例えば、図１１に示したように、可変光学ＬＰＦ１１の効果の制御可能な領域を複数の領域Ｒに分割して、分割した領域Ｒごとに、評価データＤ１および評価データＤ２を導出した場合には、可変光学ＬＰＦ１１の効果を実際に変化させる回数を、上記実施の形態よりも減らすことができる。その結果、処理速度を速くしつつ、画質のバランスのとれた画像データＩを得ることができる。
【０１１１】
本実施の形態において、画像データＩ1に対して顔検出が行われるとともに、顔検出された人物に髪の毛があるか否かの検出が行われる場合には、評価データＤ２が顔検出用の閾値Ｔｈ１を下回る範囲において、可変光学ＬＰＦ１１の効果を最も弱くする値が可変光学ＬＰＦ１１の設定値７４として設定される。これにより、被写体の髪の毛の偽色が少ない画像データＩを得ることができる。さらに、評価データＤ１が所定の閾値Ｔｈ２を下回る範囲において、可変光学ＬＰＦ１１の効果を最も弱くする値が可変光学ＬＰＦ１１の設定値７４として設定される場合には、画質のバランスのとれた画像データＩを得ることができる。
【０１１２】
本実施の形態において、撮影モードがマクロ撮影モードとなっている場合には、評価データＤ２がマクロ撮影モード用の閾値値Ｔｈ３を下回るごとに、そのときの評価データＤ２に対応する値が適正値候補３５ａとなることにより、ユーザは、各適正値候補３５ａに対応する複数の画像データＩ2の中から１つの画像データＩ2を選択することができる。その結果、ユーザの目的に応じた、画質のバランスのとれた画像データＩを得ることができる。
【０１１３】
本実施の形態において、可変光学ＬＰＦ１１の効果を最小もしくはほぼ最小としたときに得られた画像データＩ3に含まれる偽色の位置が検出されることにより、評価データＤ２が偽色の位置に応じた基準を満たすときの値を可変光学ＬＰＦ１１の設定値７４とすることができる。これにより、例えば、画面一面に対して、かなり大きい領域に偽色が発生している場合や、画面中心に偽色が発生している場合であっても、偽色の目立たない画像データＩを得ることができる。また、例えば、画面に対して、四隅に偽色がある場合であっても、不必要に解像度劣化が生じておらず、しかも偽色の目立たない画像データＩを得ることができる。
【０１１４】
本実施の形態において、２つの画像データＩ1，Ｉ2の階調データの差分と、画像データＩ1から得られた彩度データ３３とに基づいて評価データＤ２が導出された場合には、より精度よく、画質のバランスのとれた画像データＩを得ることができる。
【０１１５】
また、本実施の形態では、画像データＩ1は、可変光学ＬＰＦ１１の効果を最大もしくはほぼ最大としたときに撮像素子４０を駆動することにより撮像素子４０で生成される。これにより、偽色の無いもしくは偽色のほとんど無い画像データＩ1と、偽色のある画像データＩ2とに基づいて評価データＤ１および評価データＤ２が導出されるので、精度よく、画質のバランスのとれた画像データＩを得ることができる。
【０１１６】
また、本実施の形態において、シャッターボタンの半押下げに伴って、可変光学ＬＰＦ１１の設定が行われる場合には、ＡＦ（オートフォーカス）の条件や、アイリス１４の条件の設定指示と一緒に、可変光学ＬＰＦ１１の設定指示を行うことができる。これにより、ユーザに対する作業負荷を増やすことなく、画質のバランスのとれた画像データＩを得ることができる。
【０１１７】
＜２．変形例＞
次に、上記実施の形態に係る撮像装置１の変形例について説明する。
【０１１８】
[変形例Ａ]
上記実施の形態では、画像処理部５０は、ステップＳ１０２において、可変光学ＬＰＦ１１の効果を最大もしくはほぼ最大にしていた。しかし、画像処理部５０は、ステップＳ１０２において、可変光学ＬＰＦ１１の効果を任意の値に設定してもよい。この場合、画像処理部５０は、取得した画像データＩ1のうち、偽色の発生する可能性のある領域に対して偽色を消す処理を行った上で、彩度データ３３を導出してもよい。このようにした場合には、最初に、可変光学ＬＰＦ１１の効果を最大もしくはほぼ最大にしていたときと比べて、可変光学ＬＰＦ１１に対する適切な設定値を得るまでに要する時間を短縮することも可能である。
【０１１９】
[変形例Ｂ]
上記実施の形態およびその変形例では、可変光学ＬＰＦ１１は、電圧制御によりカットオフ周波数ｆｃを変化させるようになっていた。しかし、上記実施の形態およびその変形例において、制御部８０は、可変光学ＬＰＦ１１のカットオフ周波数ｆｃを周波数制御により変化させるようになっていてもよい。また、上記実施の形態およびその変形例において、可変光学ＬＰＦ１１の代わりに、物理的に加える振動の振幅の大きさに応じてカットオフ周波数ｆｃを変化させる光学ＬＰＦが撮像装置１に用いられていてもよい。つまり、本開示における可変光学ＬＰＦは、電圧変化、周波数変化または振動振幅変化によってカットオフ周波数ｆｃを調整可能に構成されていればよく、カットオフ周波数ｆｃを電子制御可能なものであれば、どのような光学ＬＰＦであっても構わない。
【０１２０】
[変形例Ｃ]
上記実施の形態では、制御部８０が可変光学ＬＰＦ１１の効果を自動で変化させていた。しかし、ユーザが可変光学ＬＰＦ１１の効果を手動で変化させてもよい。
【０１２１】
図２０は、本変形例における撮像手順の一例を表したものである。まず、画像処理部５０は、ステップＳ１０１〜Ｓ１０７が実施された後、可変光学ＬＰＦ１１の効果の変更が終了したか否か判定する（ステップＳ１２０）。可変光学ＬＰＦ１１の効果の変更が終了するまで、ステップＳ１０５〜Ｓ１０７が繰り返し実行される。その結果、可変光学ＬＰＦ１１の効果の変更が終了したら、画像処理部５０は、図２１の白丸で示した位置に対応する可変光学ＬＰＦ１１の適正値候補ｋ（ｋ１，ｋ２，ｋ３，…）を導出する（ステップＳ１２１）。なお、図２１は、評価データＤ１，Ｄ２の一例を表したものである。具体的には、画像処理部５０は、評価データＤ２の、可変光学ＬＰＦ１１の効果に対する変化（カットオフ周波数ｆｃ）が相対的に緩やかな範囲が複数、存在する場合に、その範囲ごとの端部（可変光学ＬＰＦ１１の効果の小さい方の端部）の位置に対応する値を、可変光学ＬＰＦ１１の適正値候補ｋ（ｋ１，ｋ２，ｋ３，…）とする。各適正値候補ｋ（ｋ１，ｋ２，ｋ３，…）は、評価データＤ２が増えない範囲内で、可変光学ＬＰＦ１１の効果を最も弱めたときの可変光学ＬＰＦ１１の設定値（カットオフ周波数ｆｃを最も大きくしたときの可変光学ＬＰＦ１１の設定値）に対応している。
【０１２２】
次に、画像処理部５０は、ユーザに対して、各適正値候補ｋ（ｋ１，ｋ２，ｋ３，…）に対応する複数の画像データＩ2の中から１つの画像データＩ2の選択を要求する。具体的には、画像処理部５０は、各適正値候補ｋ（ｋ１，ｋ２，ｋ３，…）に対応する複数の画像データＩ2の中から１枚の画像データＩ2を表示部６０に出力する。すると、表示部６０は、制御部８０から入力された画像データＩ2を表示する（ステップＳ１２２）。画像処理部５０は、各適正値候補ｋに対応する複数の画像データＩ2を順次、表示部６０に出力
する。画像処理部５０は、ユーザからの表示指示（例えば、撮像装置１本体に付属する操作ボタンの押下げや、撮像装置１本体に付属する操作ダイヤルの回動など）が検知されるたびに、表示部６０に表示される画像データＩ2（適正値候補ｋに対応する画像データＩ2）が適正値候補ｋに対応する別の画像データＩ2に入れ替わるように、複数の画像データＩ2を表示部６０に出力する。表示部６０は、画像処理部５０から画像データＩ2が入力される度に、表示させる画像データＩ2を入れ換える。画像処理部５０は、ユーザからの選択指示（例えば、撮像装置１本体に付属する別の操作ボタンの押下げなど）が検知された場合には、検知したときに表示部６０に表示させていた画像データＩ2に対応する適正値候補ｋを、設定値７４として決定する。このようにして、画像処理部５０は、ユーザに適正な画像データＩ2（またはユーザに適正な適正値３５）を選択させる（ステップＳ１２３）。
【０１２３】
本変形例では、例えば、ユーザが撮像装置１本体に付属する操作ボタンを一度押すごとや、撮像装置１本体に付属する操作ダイヤルを回すごとに、画像処理部５０が可変光学ＬＰＦ１１の設定値を複数の設定値ｋの中の１つの設定値ｋにすることができる。これにより、ユーザによる手動設定の手間を減らすことができる。さらに、ユーザの意図通りの解像度と偽色のバランスとなっている画像データＩを得ることができる。
【０１２４】
本変形例において、画像処理部５０は、各画像データＩ2において、複数の画像データＩ2に含まれる偽色の位置を強調（具体的には拡大）したものを生成し、表示部６０に出力してもよい。「強調」とは、対象となる領域を、他の領域と区別する（例えば他の領域よりも目立たせる）ことを指している。このとき、画像処理部５０は、例えば、可変光学ＬＰＦ１１の設定値が、ユーザの要求に応じて図２１中の白丸に対応する値（設定値ｋ）に遷移したときに、ローパス特性（カットオフ周波数ｆｃ）を異ならせて撮影された複数の画像データＩ2に基づいて、偽色の変化（もしくは発生）を検出してもよい。画像処理部５０は、さらに、例えば、各画像データＩ2において、その遷移によって偽色が変化（もしくは発生）した領域（領域６１）を強調（具体的には拡大）したもの（図２２参照）を生成し、表示部６０に出力してもよい。なお、図２２は、画像データＩ2の一部が拡大されている様子を表したものである。図２２において、領域６１は、画像データＩ2のうち領域６１以外の領域の倍率よりも大きな倍率で表示されている領域に相当する。表示部６０は、例えば、可変光学ＬＰＦ１１の設定値が、ユーザの要求に応じて図２１中の白丸に対応する値（設定値ｋ）に遷移したときに、画像データＩ2において、その遷移によって偽色が変化（もしくは発生）した領域（領域６１）を強調表示（具体的には拡大表示）する。このようにした場合には、表示部６０が小さくて偽色の変化を視認しにくいときであっても、偽色が変化したことや、偽色が発生した場所を直感的に知ることができる。その結果、可変光学ＬＰＦ１１の効果の調整を簡単に行うことができる。
【０１２５】
画像処理部５０は、画像データＩ2において偽色が変化（もしくは発生）した箇所全てに対して拡大を行う必要はない。画像処理部５０は、例えば、画像データＩ2において評価データＤ２が最も大きかった箇所（領域６１）を拡大したものを表示部６０に出力してもよい。
【０１２６】
また、本変形例において、画像処理部５０は、各画像データＩ2において、複数の画像データＩ2に含まれる偽色の位置を強調したものを生成し、表示部６０に出力してもよい。このとき、画像処理部５０は、例えば、可変光学ＬＰＦ１１の設定値が、ユーザの要求に応じて図２１中の白丸に対応する値（設定値ｋ）に遷移したときに、ローパス特性（カットオフ周波数ｆｃ）を異ならせて撮影された複数の画像データＩ2に基づいて、偽色の変化（もしくは発生）を検出してもよい。画像処理部５０は、さらに、例えば、各画像データＩ2において、その遷移によって偽色が変化（もしくは発生）した領域（領域６２）を強調（具体的にはゼブラ処理）したもの（図２３参照）を生成し、表示部６０に出力してもよい。ゼブラ処理とは、画像に対してゼブラ模様を重畳することを指している。なお、図２３は、画像データＩ2の一部がゼブラ処理されている様子を表したものである。図２３には、領域６２が、画像データＩ2のうち中央から下端にかけて分布している様子が例示されている。表示部６０は、例えば、可変光学ＬＰＦ１１の設定値がユーザの要求に応じて図２１中の白丸に対応する値（設定値ｋ）に遷移したときに、画像データＩ2のうち、偽色が変化（もしくは発生）した領域（領域６２）を強調表示（具体的にはゼブラ表示）する。このようにした場合には、表示部６０が小さくて偽色を視認しにくいときであっても、偽色が変化したことや、偽色が発生した場所を直感的に知ることができる。その結果、可変光学ＬＰＦ１１の効果の調整を簡単に行うことができる。
【０１２７】
画像処理部５０は、画像データＩ2において偽色が変化（もしくは発生）した箇所全てに対してゼブラ処理を行う必要はない。画像処理部５０は、例えば、画像データＩ2において評価データＤ２が最も大きかった箇所（領域６２）をゼブラ処理したものを表示部６０に出力してもよい。
【０１２８】
また、本変形例において、画像処理部５０は、各画像データＩ2において、複数の画像データＩ2に含まれる、解像度劣化の生じている位置を強調（具体的にはハイライト）したものを生成し、表示部６０に出力してもよい。画像処理部５０は、例えば、可変光学ＬＰＦ１１の設定値が、ユーザの要求に応じて図２１中の白丸に対応する値（設定値ｋ）に遷移したときに、ローパス特性（カットオフ周波数ｆｃ）を異ならせて撮影された複数の画像データＩ2に基づいて、解像度の変化を検出してもよい。画像処理部５０は、さらに、例えば、各画像データＩ2において、その遷移によって解像度が変化した領域のエッジ（部分６３）を強調（具体的にはハイライト）したもの（図２４参照）を生成し、表示部６０に出力してもよい。ハイライト表示は、例えば、画像データＩ2の輝度の変更、画像データＩ2の彩度の変更、または、画像データＩ2に対する色信号の重畳によってなされる。なお、図２４は、画像データＩ2の一部（部分６３）が強調されている様子を表したものである。図２４には、部分６３が、複数の線分で構成されている様子が例示されている。表示部６０は、例えば、可変光学ＬＰＦ１１の設定値がユーザの要求に応じて図２１中の白丸に対応する値（設定値ｋ）に遷移したときに、画像データＩ2のうち、解像度が変化した領域のエッジ（部分６３）を強調表示（具体的にはハイライト表示）する。このようにした場合には、表示部６０が小さくて解像度劣化を視認しにくいときであっても、解像度劣化の生じている箇所を直感的に知ることができる。その結果、可変光学ＬＰＦ１１の効果の調整を簡単に行うことができる。
【０１２９】
画像処理部５０は、画像データＩ2において解像度が変化（もしくは発生）した領域のエッジ全てに対してハイライトを行う必要はない。画像処理部５０は、例えば、画像データＩ2において評価データＤ１が最も大きかった箇所（部分６３）をハイライトしたものを表示部６０に出力してもよい。
【０１３０】
また、本変形例において、画像処理部５０は、各画像データＩ2において、複数種類の強調を行うようにしてもよい。画像処理部５０は、例えば、各画像データＩ2において、複数の画像データＩ2に含まれる偽色の位置および解像度劣化の生じている位置を強調したものを生成し、表示部６０に出力してもよい。画像処理部５０は、例えば、可変光学ＬＰＦ１１の設定値が、ユーザの要求に応じて図２１中の白丸に対応する値（設定値ｋ）に遷移したときに、ローパス特性（カットオフ周波数ｆｃ）を異ならせて撮影された複数の画像データＩ2に基づいて、偽色の変化（もしくは発生）および解像度の変化を検出してもよい。
【０１３１】
画像処理部５０は、例えば、各画像データＩ2において、その遷移によって偽色が変化（もしくは発生）した領域６１を強調（具体的には拡大）するとともに、その遷移によって解像度が変化した領域のエッジ（部分６３）を強調（具体的にはハイライト）したもの（図２５参照）を生成し、表示部６０に出力してもよい。このとき、画像処理部５０は、領域６１の表示色と、部分６３の表示色とを互いに異ならせてもよい。表示部６０は、例えば、可変光学ＬＰＦ１１の設定値がユーザの要求に応じて図２１中の白丸に対応する値（設定値ｋ）に遷移したときに、画像データＩ2のうち、偽色が変化（もしくは発生）した領域６１を強調（具体的には拡大）するとともに、解像度が変化した領域のエッジ（部分６３）を強調表示（具体的にはハイライト表示）する。このようにした場合には、表示部６０が小さくて解像度劣化を視認しにくいときであっても、解像度劣化の生じている箇所を直感的に知ることができる。その結果、可変光学ＬＰＦ１１の効果の調整を簡単に行うことができる。
【０１３２】
画像処理部５０は、例えば、各画像データＩ2において、その遷移によって偽色が変化（もしくは発生）した領域６２を強調（具体的にはゼブラ処理）するとともに、その遷移によって解像度が変化した領域のエッジ（部分６３）を強調（具体的にはハイライト）したもの（図２６参照）を生成し、表示部６０に出力してもよい。表示部６０は、例えば、可変光学ＬＰＦ１１の設定値がユーザの要求に応じて図２１中の白丸に対応する値（設定値ｋ）に遷移したときに、画像データＩ2のうち、偽色が変化（もしくは発生）した領域
６２を強調（具体的にはゼブラ処理）するとともに、解像度が変化した領域のエッジ（部分６３）を強調表示（具体的にはハイライト表示）する。このようにした場合には、表示部６０が小さくて解像度劣化を視認しにくいときであっても、解像度劣化の生じている箇所を直感的に知ることができる。その結果、可変光学ＬＰＦ１１の効果の調整を簡単に行うことができる。
【０１３３】
ところで、画像処理部５０が、画像データＩ2のうち領域６１を拡大したり、画像データＩ2のうち領域６２をゼブラ処理したりするためには、画像処理部５０が、あらかじめ、偽色の発生位置を特定している必要がある。従って、画像処理部５０は、例えば、図２５に示したように、図２０の一連のステップにおいてステップＳ１０５を行う前に、ステップＳ１１７〜Ｓ１１９が行われている必要がある。なお、図２５は、撮像手順の一例を表したものである。画像処理部５０は、ステップＳ１１７〜Ｓ１１９が行われていることにより、偽色の発生位置を特定できるので、領域６１の拡大や、領域６２のゼブラ処理を行うことが可能となる。
【０１３４】
[変形例Ｄ]
上記実施の形態では、ステップＳ１１７は、式（１）の右辺第１項から得られる値（評価データＤ１）と、式（１）の右辺第２項から得られる値（評価データＤ２）とを足し合わせた値（評価データＤ）に基づいて、可変光学ＬＰＦ１１の効果（設定値）の自動設定を行っていた。しかし、画像処理部５０は、評価データＤ１および評価データＤ２のいずれか一方の値に基づいて、可変光学ＬＰＦ１１の効果（設定値）の自動設定を行ってもよい。このようにした場合には、可変光学ＬＰＦ１１の効果（設定値）の調整を、様々な目的に応じて行うことができる。
【０１３５】
[変形例Ｅ]
上記実施の形態およびその変形例において、可変光学ＬＰＦ１１の代わりに、カットオフ周波数が固定のローパスフィルタが設けられていてもよい。また、上記実施の形態およびその変形例において、可変光学ＬＰＦ１１が省略されていてもよい。これらの場合に、撮像装置１が、撮像素子４０の受光面４０Ａを面内方向で振動させる駆動部を備えていてもよい。このとき、撮像素子４０および受光面４０Ａを振動させる駆動部からなるデバイスは、いわゆるイメージャシフト型のローパスフィルタとして機能する。このように、イメージャシフト型のローパスフィルタが設けられている場合であっても、上記実施の形態と同様、ユーザの目的に応じた、画質のバランスのとれた画像データＩを得ることができる。
【０１３６】
[変形例Ｆ]
上記実施の形態およびその変形例において、可変光学ＬＰＦ１１の代わりに、カットオフ周波数が固定のローパスフィルタが設けられていてもよい。また、上記実施の形態およびその変形例において、可変光学ＬＰＦ１１が省略されていてもよい。これらの場合に、レンズ駆動部２０が、レンズ１２の光軸と直交する面と平行な面内でレンズ１２を駆動させるようになっていてもよい。このとき、レンズ１２およびレンズ駆動部２０からなるデバイスは、いわゆるレンズシフト型のローパスフィルタとして機能する。このように、レンズシフト型のローパスフィルタが設けられている場合であっても、上記実施の形態と同様、ユーザの目的に応じた、画質のバランスのとれた画像データＩを得ることができる。
【０１３７】
[変形例Ｇ]
上記実施の形態およびその変形例において、撮像装置１は、通常のカメラの他に、車載用カメラ、監視カメラ、医療用カメラ（内視鏡カメラ）などにも適用可能である。
【０１３８】
以上、実施の形態およびその変形例を挙げて本開示を説明したが、本開示は上記実施の形態等に限定されるものではなく、種々変形が可能である。なお、本明細書中に記載された効果は、あくまで例示である。本開示の効果は、本明細書中に記載された効果に限定されるものではない。本開示が、本明細書中に記載された効果以外の効果を持っていてもよい。
【０１３９】
また、例えば、本開示は以下のような構成を取ることができる。
（１）
ローパスフィルタのローパス特性の変更に応じた、撮像された複数の画像データにおける解像度の変化及び偽色の変化に基づいて前記ローパスフィルタのローパス特性の設定値を設定する制御部を備えた
制御装置。
（２）
前記制御部は、複数の前記画像データのうちの１つである第１画像データの空間周波数と、複数の前記画像データのうち、前記第１画像データ以外の第２画像データの空間周波数とに基づいて解像度の変化についての第１評価データを導出する
（１）に記載の制御装置。
（３）
前記制御部は、前記第１画像データの階調データと前記第２画像データの階調データとの差分に基づいて偽色の変化についての第２評価データを導出する
（２）に記載の制御装置。
（４）
前記制御部は、前記第１評価データおよび前記第２評価データに基づいて前記設定値を設定する
（３）に記載の制御装置。
（５）
前記制御部は、前記第２評価データの、前記可変光学ローパスフィルタのローパス特性に対する変化が相対的に緩やかな範囲が存在する場合に、その範囲の中で、前記第１評価データが最も小さくなるときの前記ローパスフィルタのローパス特性を前記設定値に設定する
（３）に記載の制御装置。
（６）
前記制御部は、複数の前記画像データに含まれる顔領域における偽色の変化に基づいて前記設定値を設定する
（１）ないし（５）のいずれか１つに記載の制御装置。
（７）
前記制御部は、複数の前記画像データのうちユーザによって選択された１つの前記画像データが撮像されたときの前記ローパスフィルタのローパス特性を前記設定値に設定する
（１）ないし（５）のいずれか１つに記載の制御装置。
（８）
前記制御部は、複数の前記画像データにおける解像度の変化及び偽色の変化と、複数の前記画像データに含まれる偽色の位置とに基づいて前記設定値を設定する
（１）ないし（５）のいずれか１つに記載の制御装置。
（９）
前記制御部は、複数の前記画像データにおいて、複数の前記画像データに含まれる偽色の位置を拡大したものを生成する
（１）ないし（５）のいずれか１つに記載の制御装置。
（１０）
前記制御部は、複数の前記画像データにおいて、複数の前記画像データに含まれる偽色の位置を強調表示したものを生成する
（１）ないし（５）のいずれか１つに記載の制御装置。
（１１）
前記制御部は、複数の前記画像データにおいて、複数の前記画像データに含まれる、解像度劣化の生じている位置を強調表示したものを生成する
（１）ないし（５）のいずれか１つに記載の制御装置。
（１２）
前記制御部は、前記第１画像データの階調データと前記第２画像データの階調データとの差分と、前記第１画像データから得られた彩度データとに基づいて前記第２評価データを導出する
（３）に記載の制御装置。
（１３）
前記第１画像データは、前記ローパスフィルタのローパス特性の変更可能な範囲の中で、前記第２評価データが最小もしくはほぼ最小となるときの画像データである
（３）に記載の制御装置。
（１４）
ローパスフィルタを経由して入射した光から画像データを生成する撮像素子と、
前記ローパスフィルタのローパス特性の変更に応じた、撮像された複数の画像データにおける解像度の変化及び偽色の変化に基づいて前記ローパスフィルタのローパス特性の設定値を設定する制御部と
を備えた
撮像装置。
（１５）
前記制御部は、前記ローパスフィルタのローパス特性を、前記ローパスフィルタのローパス特性の設定最小分解能よりも大きなピッチで変化させる変化指示を生成するともに、前記ローパスフィルタのローパス特性の変化に同期した撮像指示を生成する
（１４）に記載の撮像装置。
（１６）
シャッターボタンをさらに備え、
前記制御部は、前記シャッターボタンの半押下げに伴って、前記変化指示および前記撮像指示を生成する
（１５）に記載の撮像装置。
【０１４０】
本出願は、日本国特許庁において２０１６年５月６日に出願された日本特許出願番号第２０１６−０９２９９３号を基礎として優先権を主張するものであり、この出願のすべての内容を参照によって本出願に援用する。
【０１４１】
当業者であれば、設計上の要件や他の要因に応じて、種々の修正、コンビネーション、サブコンビネーション、および変更を想到し得るが、それらは添付の請求の範囲やその均等物の範囲に含まれるものであることが理解される。
【図１】
2017191717.tif 000003
【図２】
2017191717.tif 000004
【図３】
2017191717.tif 000005
【図４】
2017191717.tif 000006
【図５】
2017191717.tif 000007
【図６Ａ】
2017191717.tif 000008
【図６Ｂ】
2017191717.tif 000009
【図６Ｃ】
2017191717.tif 000010
【図７】
2017191717.tif 000011
【図８】
2017191717.tif 000012
【図９】
2017191717.tif 000013
【図１０】
2017191717.tif 000014
【図１１】
2017191717.tif 000015
【図１２】
2017191717.tif 000016
【図１３】
2017191717.tif 000017
【図１４】
2017191717.tif 000018
【図１５】
2017191717.tif 000019
【図１６】
2017191717.tif 000020
【図１７】
2017191717.tif 000021
【図１８】
2017191717.tif 000022
【図１９】
2017191717.tif 000023
【図２０】
2017191717.tif 000024
【図２１】
2017191717.tif 000025
【図２２】
2017191717.tif 000026
【図２３】
2017191717.tif 000027
【図２４】
2017191717.tif 000028
【図２５】
2017191717.tif 000029
【国際調査報告】
2017191717.tif 000030
2017191717.tif 000031
2017191717.tif 000032
2017191717.tif 000033