(57)【特許請求の範囲】
【請求項１】
撮像素子に入射する光量を制御するための光学素子における複数の領域の各々の透過率を異なる値に制御する透過率制御部と、
前記複数の領域の各々の前記透過率が異なる値に制御された状態にて前記撮像素子により測光用の撮像を行わせる撮像制御部と、
前記測光用の撮像によって前記撮像素子から得られる撮像画像信号に基づいて被写体の明るさを測定する測光処理部と、
前記撮像画像信号を構成する前記複数の領域の各々に対応する画素信号群の中から、一部の前記画素信号群を選択し、選択した前記画素信号群を用いて表示用の画像データを生成する画像処理部と、
前記表示用の画像データを、画像を表示する表示部に出力する出力部と、を備える撮像制御装置。
【請求項２】
請求項１記載の撮像制御装置であって、
前記画像処理部は、前記撮像画像信号を構成する前記複数の画素信号群のうちのいずれか１つの画素信号群を選択し、選択した前記画素信号群に基づいて前記表示用の画像データを生成する撮像制御装置。
【請求項３】
請求項２記載の撮像制御装置であって、
前記画像処理部は、前記撮像画像信号を構成する前記複数の領域の各々に対応する画素信号群の中から、最も透過率の高い前記領域に対応する画素信号群に基づいて前記表示用の画像データを生成する撮像制御装置。
【請求項４】
請求項２記載の撮像制御装置であって、
前記画像処理部は、前記撮像画像信号を構成する前記複数の画素信号群の中から、前記測光処理部により測定された前記明るさに基づいて１つを選択し、選択した前記画素信号群に基づいて前記表示用の画像データを生成する撮像制御装置。
【請求項５】
請求項４記載の撮像制御装置であって、
前記画像処理部は、前記撮像画像信号を構成する前記複数の画素信号群の中から、前記測光処理部によって測定された前記明るさに近い明るさの画素信号群を選択する撮像制御装置。
【請求項６】
請求項１記載の撮像制御装置であって、
前記透過率制御部は、前記光学素子を分割して得られる複数の第一のブロックの各々に透過率の異なる前記複数の領域が含まれる状態に前記光学素子を制御し、
前記測光処理部は、前記撮像画像信号の前記複数の第一のブロックに対応する第二のブロック毎に、前記第二のブロックに基づいて被写体の明るさを測定し、
前記画像処理部は、前記撮像画像信号の前記第二のブロックのうちの前記複数の領域の各々に対応する画素信号群の中から、前記測光処理部により当該第二のブロックに対して測定された前記明るさに基づいて１つの画素信号群を選択し、全ての前記第二のブロックについて前記選択した画素信号群を合成して得られる画像信号群に基づいて、前記表示用の画像データを生成する撮像制御装置。
【請求項７】
請求項６記載の撮像制御装置であって、
前記画像処理部は、前記撮像画像信号の前記第二のブロックのうちの前記複数の領域の各々に対応する画素信号群の中から、前記測光処理部により当該第二のブロックに対して測定された前記明るさに最も近い明るさの画素信号群を選択する撮像制御装置。
【請求項８】
請求項１から７のいずれか１項記載の撮像制御装置であって、
予め決められたパターンにて並ぶ前記透過率の異なる複数のサブ領域のセットを、前記光学素子の光透過エリアの全体に渡って繰り返し配列した状態における前記複数のサブ領域の各々によって前記複数の領域が構成される撮像制御装置。
【請求項９】
請求項１から８のいずれか１項記載の撮像制御装置と、
前記撮像素子と、を備える撮像装置。
【請求項１０】
請求項９記載の撮像装置であって、
前記光学素子を更に備える撮像装置。
【請求項１１】
撮像素子に入射する光量を制御するための光学素子における複数の領域の各々の透過率を異なる値に制御する透過率制御ステップと、
前記複数の領域の各々の前記透過率が異なる値に制御された状態にて前記撮像素子により測光用の撮像を行わせる撮像制御ステップと、
前記測光用の撮像によって前記撮像素子から得られる撮像画像信号に基づいて被写体の明るさを測定する測光処理ステップと、
前記撮像画像信号を構成する前記複数の領域の各々に対応する画素信号群の中から、一部の前記画素信号群を選択し、選択した前記画素信号群を用いて表示用の画像データを生成する画像処理ステップと、
前記表示用の画像データを、画像を表示する表示部に出力する出力ステップと、を備える撮像制御方法。
【請求項１２】
請求項１１記載の撮像制御方法であって、
前記画像処理ステップは、前記撮像画像信号を構成する前記複数の画素信号群のうちのいずれか１つの画素信号群を選択し、選択した前記画素信号群に基づいて前記表示用の画像データを生成する撮像制御方法。
【請求項１３】
請求項１２記載の撮像制御方法であって、
前記画像処理ステップは、前記撮像画像信号を構成する前記複数の領域の各々に対応する画素信号群の中から、最も透過率の高い前記領域に対応する画素信号群に基づいて前記表示用の画像データを生成する撮像制御方法。
【請求項１４】
請求項１２記載の撮像制御方法であって、
前記画像処理ステップは、前記撮像画像信号を構成する前記画素信号群の中から、前記測光処理ステップにより測定された前記明るさに基づいて１つを選択し、選択した前記画素信号群に基づいて前記表示用の画像データを生成する撮像制御方法。
【請求項１５】
請求項１４記載の撮像制御方法であって、
前記画像処理ステップは、前記撮像画像信号を構成する前記画素信号群の中から、前記測光処理ステップによって測定された前記明るさに近い明るさの画素信号群を選択する撮像制御方法。
【請求項１６】
請求項１１記載の撮像制御方法であって、
前記透過率制御ステップは、前記光学素子を分割して得られる複数の第一のブロックの各々に透過率の異なる前記複数の領域が含まれる状態に前記光学素子を制御し、
前記測光処理ステップは、前記撮像画像信号の前記複数の第一のブロックに対応する第二のブロック毎に、前記第二のブロックに基づいて被写体の明るさを測定し、
前記画像処理ステップは、前記撮像画像信号の前記第二のブロックのうちの前記複数の領域の各々に対応する画素信号群の中から、前記測光処理ステップにより当該第二のブロックに対して測定された前記明るさに基づいて１つの画素信号群を選択し、全ての前記第二のブロックについて前記選択した画素信号群を合成して得られる画像信号群に基づいて、前記表示用の画像データを生成する撮像制御方法。
【請求項１７】
請求項１６記載の撮像制御方法であって、
前記画像処理ステップは、前記撮像画像信号の前記第二のブロックのうちの前記複数の領域の各々に対応する画素信号群の中から、前記測光処理ステップにより当該第二のブロックに対して測定された前記明るさに最も近い明るさの画素信号群を選択する撮像制御方法。
【請求項１８】
請求項１１から１７のいずれか１項記載の撮像制御方法であって、
予め決められたパターンにて並ぶ前記透過率の異なる複数のサブ領域のセットを、前記光学素子の光透過エリアの全体に渡って繰り返し配列した状態における前記複数のサブ領域の各々によって前記複数の領域が構成される撮像制御方法。
【請求項１９】
撮像素子に入射する光量を制御するための光学素子における複数の領域の各々の透過率を異なる値に制御する透過率制御ステップと、
前記複数の領域の各々の前記透過率が異なる値に制御された状態にて前記撮像素子により測光用の撮像を行わせる撮像制御ステップと、
前記測光用の撮像によって前記撮像素子から得られる撮像画像信号に基づいて被写体の明るさを測定する測光処理ステップと、
前記撮像画像信号を構成する前記複数の領域の各々に対応する画素信号群の中から、一部の前記画素信号群を選択し、選択した前記画素信号群を用いて表示用の画像データを生成する画像処理ステップと、
前記表示用の画像データを、画像を表示する表示部に出力する出力ステップと、をコンピュータに実行させるための撮像制御プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラムに関する。
【背景技術】
【０００２】
測光用のセンサが設けられていない撮像装置では、適正露出を決定するために、撮像素子を用いて取得した明るさが異なる複数の撮像画像信号に基づいて測光をおこなう方法が知られている。しかし、このように複数の撮像画像信号を取得して測光を行う方法では、測光に必要な時間が長くなってしまう。【０００３】
特許文献１には、撮像素子に入射する光量を調節することができる物性素子を二次元状に配列した透過率可変型の減光フィルタを備える撮像装置が記載されている。【０００４】
この撮像装置は、画角内の複数の領域において減光フィルタの光の透過率を異ならせた状態にて取得した撮像画像信号に基づいて被写体を測光することで、１度の撮像により精度の高い測光を行うことを可能にしている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】日本国特開２０１６−１５５９９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
特許文献１に記載の撮像装置は、ライブビュー画像表示用の撮像時における適正露出を決定するために、画角内の複数の領域において減光フィルタの光の透過率を異ならせた状態にて撮像画像信号を取得し、この撮像画像信号に基づいて被写体の明るさを求めている。そして、その後、その明るさに対応する露出にて、ライブビュー画像表示用の撮像を開始している。【０００７】
例えば、静止画記録のための自動露出を行う指示がなされ、この指示に応じて、上述した方法にて測光を行う場合を想定する。この場合には、測光を行うために取得された撮像画像信号はライブビュー画像としては表示されない。このため、この指示を行ってから僅かの間は、ライブビュー画像が更新されないか若しくはブラックアウトの状態となり、被写体を見失う可能性がある。【０００８】
本発明は、上記事情に鑑みてなされたものであり、被写体の測光動作の高速化とライブビュー画像の高品質化を両立させることのできる撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明の撮像制御装置は、撮像素子に入射する光量を制御するための光学素子における複数の領域の各々の透過率を異なる値に制御する透過率制御部と、上記複数の領域の各々の上記透過率が異なる値に制御された状態にて上記撮像素子により測光用の撮像を行わせる撮像制御部と、上記測光用の撮像によって上記撮像素子から得られる撮像画像信号に基づいて被写体の明るさを測定する測光処理部と、上記測光用の撮像によって得られる上記撮像画像信号から表示用の画像データを生成する画像処理部と、上記表示用の画像データを、画像を表示する表示部に出力する出力部と、を備えるものである。【００１０】
本発明の撮像装置は、上記撮像制御装置と、上記撮像素子と、を備えるものである。【００１１】
本発明の撮像制御方法は、撮像素子に入射する光量を制御するための光学素子における複数の領域の各々の透過率を異なる値に制御する透過率制御ステップと、上記複数の領域の各々の上記透過率が異なる値に制御された状態にて上記撮像素子により測光用の撮像を行わせる撮像制御ステップと、上記測光用の撮像によって上記撮像素子から得られる撮像画像信号に基づいて被写体の明るさを測定する測光処理ステップと、上記測光用の撮像によって得られる上記撮像画像信号から表示用の画像データを生成する画像処理ステップと、上記表示用の画像データを、画像を表示する表示部に出力する出力ステップと、を備えるものである。【００１２】
本発明の撮像制御プログラムは、撮像素子に入射する光量を制御するための光学素子における複数の領域の各々の透過率を異なる値に制御する透過率制御ステップと、上記複数の領域の各々の上記透過率が異なる値に制御された状態にて上記撮像素子により測光用の撮像を行わせる撮像制御ステップと、上記測光用の撮像によって上記撮像素子から得られる撮像画像信号に基づいて被写体の明るさを測定する測光処理ステップと、上記測光用の撮像によって得られる上記撮像画像信号から表示用の画像データを生成する画像処理ステップと、上記表示用の画像データを、画像を表示する表示部に出力する出力ステップと、をコンピュータに実行させるためのものである。
【発明の効果】
【００１３】
本発明によれば、被写体の測光動作の高速化とライブビュー画像の高品質化を両立させることのできる撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラムを提供することができる。
【図面の簡単な説明】
【００１４】
【図１】本発明の撮像装置の一実施形態であるデジタルカメラ１００の概略構成を示す図である。
【図２】図１に示すシステム制御部１１の機能ブロック図である。
【図３】透過率制御部１１Ａの制御内容の第一の例を説明するための模式図である。
【図４】透過率制御部１１Ａの制御内容の第二の例を説明するための模式図である。
【図５】透過率制御部１１Ａの制御内容の第三の例を説明するための模式図である。
【図６】図１に示すデジタル信号処理部１７の機能ブロック図である。
【図７】図１に示すデジタルカメラ１００の撮像モード時の動作を説明するためのフローチャートである。
【図８】可変ＮＤフィルタの分割例を示す図である。
【図９】撮像画像信号の分割例を示す図である。
【図１０】図７のステップＳ６及びステップＳ７の変形例を説明するためのフローチャートである。
【図１１】本発明の撮像装置の一実施形態であるスマートフォン２００の外観を示すものである。
【図１２】図１１に示すスマートフォン２００の構成を示すブロック図である。
【発明を実施するための形態】
【００１５】
以下、本発明の実施形態について図面を参照して説明する。
【００１６】
図１は、本発明の撮像装置の一実施形態であるデジタルカメラ１００の概略構成を示す図である。
【００１７】
図１に示すデジタルカメラ１００は、撮像レンズ１、絞り２、レンズ制御部４、レンズ駆動部８、及び絞り駆動部９を有するレンズ装置４０Ａと、本体部４０Ｂと、を備える。
【００１８】
レンズ装置４０Ａは、本体部４０Ｂに着脱可能なものであってもよいし、本体部４０Ｂと一体化されたものであってもよい。レンズ装置４０Ａが本体部４０Ｂに着脱可能な構成では、本体部４０Ｂが撮像装置を構成する。
【００１９】
撮像レンズ１は、光軸方向に移動可能なフォーカスレンズ又はズームレンズ等を含む。
【００２０】
レンズ装置４０Ａのレンズ制御部４は、本体部４０Ｂのシステム制御部１１と有線又は無線によって通信可能に構成される。
【００２１】
レンズ制御部４は、システム制御部１１からの指令にしたがい、レンズ駆動部８を介して撮像レンズ１に含まれるフォーカスレンズを制御してフォーカスレンズの主点の位置を変更したり、レンズ駆動部８を介して撮像レンズ１に含まれるズームレンズを制御してズームレンズの位置を変更したり、絞り駆動部９を介して絞り２の絞り値を制御したりする。
【００２２】
本体部４０Ｂは、撮像レンズ１及び絞り２を含む撮像光学系を通して被写体を撮像するＣＣＤ（Ｃｈａｒｇｅｄ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）型イメージセンサ又はＭＯＳ（Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）型イメージセンサ等の撮像素子５と、撮像素子５を駆動する撮像素子駆動部５Ａと、撮像素子５と撮像光学系の間に配置された可変ＮＤ（Ｎｅｕｔｒａｌ  Ｄｅｎｓｉｔｙ）フィルタ３と、可変ＮＤフィルタ３を駆動するＮＤ駆動部３Ａと、全体を統括制御するシステム制御部１１と、操作部１４と、を備える。
【００２３】
撮像素子５は、複数の画素が二次元状に配置された撮像面を有し、撮像光学系によってこの撮像面に結像される被写体像をこの複数の画素によって画素信号に変換して出力する。撮像素子５の各画素から出力される画素信号の集合を以下では撮像画像信号という。
【００２４】
撮像素子駆動部５Ａは、システム制御部１１からの指令に基づいて駆動信号を生成してこの駆動信号を撮像素子５に供給することで、撮像素子５を駆動する。
【００２５】
可変ＮＤフィルタ３は、撮像素子５に入射する光量を制御するための光学素子であり、部分的に光の透過率を変えることができるものである。
【００２６】
可変ＮＤフィルタ３は、具体的には、印加電圧によって透過率を変えられる特性素子（例えば液晶素子又はエレクトロクロミック素子等）が二次元状に配置された構成である。
【００２７】
可変ＮＤフィルタ３は、撮像素子５と一体的に形成されたものであってもよい。例えば、撮像素子５は、撮像素子チップと、これを収容するパッケージと、このパッケージを封止する保護カバーとを備える。そして、この保護カバーに可変ＮＤフィルタ３が積層されていてもよい。
【００２８】
ＮＤ駆動部３Ａは、システム制御部１１からの指示に応じて、可変ＮＤフィルタ３の各特性素子に印加する電圧を制御することによって可変ＮＤフィルタ３の透過率を制御する。
【００２９】
システム制御部１１は、デジタルカメラ１００全体を統括制御するものであり、ハードウェア的な構造は、撮像制御プログラムを含むプログラムを実行して処理を行う各種のプロセッサである。
【００３０】
各種のプロセッサとしては、プログラムを実行して各種処理を行う汎用的なプロセッサであるＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｓｅｓｓｉｎｇ  Ｕｎｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Ｐｒｏｇｒａｍｍａｂｌｅ  Ｌｏｇｉｃ  Ｄｅｖｉｃｅ：ＰＬＤ）、又はＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ  Ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
【００３１】
これら各種のプロセッサの構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路である。
【００３２】
システム制御部１１は、各種のプロセッサのうちの１つで構成されてもよいし、同種又は異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡの組み合わせ又はＣＰＵとＦＰＧＡの組み合わせ）で構成されてもよい。
【００３３】
本体部４０Ｂは、更に、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｓｅｓｓ  Ｍｅｍｏｒｙ）及びＲＯＭ（Ｒｅａｄ  ｏｎｌｙ  ｍｅｍｏｒｙ）を含むメモリ１６と、メモリ１６へのデータ記憶及びメモリ１６からのデータ読み出しの制御を行うメモリ制御部１５と、撮像素子５から出力される撮像画像信号に対しデジタル信号処理を行って、例えばＪＰＥＧ（Ｊｏｉｎｔ  Ｐｈｏｔｏｇｒａｐｈｉｃ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）形式等の各種フォーマットにしたがった撮像画像データを生成するデジタル信号処理部１７と、記憶媒体２１へのデータ記憶及び記憶媒体２１からのデータ読み出しの制御を行う外部メモリ制御部２０と、画像を表示するための有機ＥＬ（ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ）パネル又は液晶パネル等を含む表示部２２と、を備える。
【００３４】
メモリ１６に含まれるＲＯＭには、システム制御部１１が実行する撮像制御プログラムを含むプログラムが記憶されている。
【００３５】
メモリ制御部１５、デジタル信号処理部１７、外部メモリ制御部２０、及び表示部２２は、制御バス２４及びデータバス２５によって相互に接続され、システム制御部１１からの指令によって制御される。
【００３６】
デジタル信号処理部１７は、ハードウェア的な構造は、撮像制御プログラムを含むプログラムを実行して処理を行う上記に例示した各種のプロセッサである。
【００３７】
図２は、図１に示すシステム制御部１１の機能ブロック図である。
【００３８】
システム制御部１１は、メモリ１６のＲＯＭに記憶された撮像制御プログラムを含むプログラムを実行することにより、透過率制御部１１Ａ、撮像制御部１１Ｂ、及び測光処理部１１Ｃとして機能する。
【００３９】
透過率制御部１１Ａは、可変ＮＤフィルタ３の光透過エリアを構成する複数の領域の各々の透過率を異なる値に制御する。以下、具体的な透過率の制御内容の例について図３から図５を参照して説明する。
【００４０】
図３は、透過率制御部１１Ａの制御内容の第一の例を説明するための模式図である。
【００４１】
図３に示すように、透過率制御部１１Ａは、可変ＮＤフィルタ３の光透過エリアを、第一の領域３ａ、第二の領域３ｂ、第三の領域３ｃ、及び第四の領域３ｄの４つの領域に分割し、この４つの領域の各々の光の透過率を異なる値に制御する。図３に示す４つの領域を透過した被写体光が撮像素子５の撮像面に入射される。
【００４２】
第一の領域３ａは、例えば透過率が１００％の領域である。第二の領域３ｂは、例えば透過率が８０％の領域である。第三の領域３ｃは、例えば透過率が５０％の領域である。第四の領域３ｄは、例えば透過率が２０％の領域である。これらの数値は一例であり、これに限定されるものではない。
【００４３】
図３の例では、第一の領域３ａと第二の領域３ｂと第三の領域３ｃと第四の領域３ｄがこの順番にて撮像素子５の短手方向に並ぶセットが、光透過エリアの全体に渡って撮像素子５の短手方向に繰り返し配列されている。このセットを構成する各領域はサブ領域を構成する。つまり、図３の例では、第一の領域３ａ、第二の領域３ｂ、第三の領域３ｃ、及び第四の領域３ｄは、横ストライプ状に配列されている。
【００４４】
図４は、透過率制御部１１Ａの制御内容の第二の例を説明するための模式図である。
【００４５】
図４に示す例は、図３に示した第一の領域３ａ、第二の領域３ｂ、第三の領域３ｃ、及び第四の領域３ｄの配列の変形例である。
【００４６】
図４の例では、第一の領域３ａと第二の領域３ｂと第三の領域３ｃと第四の領域３ｄがこの順番にて撮像素子５の長手方向に並ぶセットが、光透過エリアの全体に渡って撮像素子５の長手方向に繰り返し配列されている。このセットを構成する各領域はサブ領域を構成する。つまり、図４の例では、第一の領域３ａ、第二の領域３ｂ、第三の領域３ｃ、及び第四の領域３ｄは、縦ストライプ状に配列されている。
【００４７】
図３と図４では、セットを構成する透過率の異なる領域が４つの例を示しているが、この領域の数は２つ以上であればよい。
【００４８】
図５は、透過率制御部１１Ａの制御内容の第三の例を説明するための模式図である。
【００４９】
図５に示す例は、図３に示した第一の領域３ａ、第二の領域３ｂ、第三の領域３ｃ、及び第四の領域３ｄの配列の別の変形例である。
【００５０】
図５の例では、格子状に並ぶ第一の領域３ａ、第二の領域３ｂ、第三の領域３ｃ、及び第四の領域３ｄのセットが、光透過エリアの全体に渡って格子状に繰り返し配列されている。このセットを構成する各領域はサブ領域を構成する。
【００５１】
図２に戻り、撮像制御部１１Ｂは、図３から図５に例示されるように、可変ＮＤフィルタ３の複数の領域の各々の透過率が異なる値に制御された状態にて、撮像素子５により測光用の撮像を行わせる。
【００５２】
この測光用の撮像によって撮像素子５から出力される撮像画像信号は、第一の領域３ａを透過した被写体光に応じた最も明るい第一の画素信号群（第一の領域３ａに対応する画素信号群）と、第二の領域３ｂを透過した被写体光に応じた、第一の画素信号群よりも暗い第二の画素信号群（第二の領域３ｂに対応する画素信号群）と、第三の領域３ｃを透過した被写体光に応じた、第二の画素信号群よりも暗い第三の画素信号群（第三の領域３ｃに対応する画素信号群）と、第四の領域３ｄを透過した被写体光に応じた、第三の画素信号群よりも暗い第四の画素信号群（第四の領域３ｄに対応する画素信号群）とから構成される。
【００５３】
測光処理部１１Ｃは、測光用の撮像によって撮像素子５から得られる撮像画像信号に基づいて、撮像中の被写体の明るさを測定する。
【００５４】
例えば、撮像面の全体を測光領域として指定するマルチパターン測光を行う場合には、測光処理部１１Ｃは、撮像画像信号を複数に分割し、各分割エリアにある第一の画素信号群、第二の画素信号群、第三の画素信号群、及び第四の画素信号群の各々に基づいて、各分割エリアの被写体の明るさを測定する。測光処理部１１Ｃは、このようにして測定した全ての分割エリアの被写体の明るさにしたがって、撮影範囲全体の被写体の明るさを測定する。
【００５５】
また、撮像面の中央部にある分割エリアを測光領域として指定する中央重点測光、又は、撮像面における焦点を合わせたい領域にある分割エリアを測光領域として指定するスポット測光を行う場合には、測光処理部１１Ｃは、測光領域として指定された分割エリアにある第一の画素信号群、第二の画素信号群、第三の画素信号群、及び第四の画素信号群の各々に基づいて、その分割エリアの被写体の明るさを測定する。
【００５６】
撮像制御部１１Ｂは、測光処理部１１Ｃにて測定された被写体の明るさに基づいて適正露出を決定し、この適正露出が得られる撮像条件（絞り値、露光時間、及び撮像感度）にて、撮像素子５に被写体を撮像させる。
【００５７】
図６は、図１に示すデジタル信号処理部１７の機能ブロック図である。
【００５８】
デジタル信号処理部１７は、メモリ１６のＲＯＭに記憶された撮像制御プログラムを含むプログラムを実行することにより、画像処理部１７Ａ及び出力部１７Ｂとして機能する。
【００５９】
図２の透過率制御部１１Ａ、撮像制御部１１Ｂ、及び測光処理部１１Ｃと、図６の画像処理部１７Ａ及び出力部１７Ｂと、によって、撮像制御装置が構成される。
【００６０】
画像処理部１７Ａは、撮像制御部１１Ｂの制御に基づいて行われる測光用の撮像によって得られる撮像画像信号から、表示部２２に表示するためのライブビュー表示用の画像データを生成する。この画像データの生成方法の具体例は後述する。
【００６１】
出力部１７Ｂは、画像処理部１７Ａによって生成されたライブビュー表示用の画像データを、表示部２２に出力して、この画像データに基づくライブビュー画像を表示部２２に表示させる。
【００６２】
図７は、図１に示すデジタルカメラ１００の撮像モード時の動作を説明するためのフローチャートである。
【００６３】
なお、撮像モードを設定した初期の状態では、システム制御部１１の透過率制御部１１Ａは、可変ＮＤフィルタ３の全ての特性素子の透過率を１００％に制御している。
【００６４】
撮像モードが設定されると、システム制御部１１は、撮像素子５によりライブビュー画像を表示するための撮像を行わせる（ステップＳ１）。
【００６５】
この撮像によって撮像素子５から出力された撮像画像信号はデジタル信号処理部１７によって処理されてライブビュー表示用の画像データが生成され、この画像データに基づいてライブビュー画像が表示部２２に表示される（ステップＳ２）。
【００６６】
ステップＳ２の後、ステップＳ３において、操作部１４に含まれるレリーズボタンの押下等によってＡＥ（ＡｕｔｏＥｘｐｏｓｕｒｅ）の実行指示がなされるまでは、ステップＳ１とステップＳ２の処理が繰り返される。
【００６７】
ステップＳ３においてＡＥの実行指示がなされると（ステップＳ３：ＹＥＳ）、システム制御部１１の透過率制御部１１Ａは、可変ＮＤフィルタ３の透過率を、例えば図３から図５のいずれかの状態に制御する（ステップＳ４）。ステップＳ４は透過率制御ステップを構成する。
【００６８】
その後、システム制御部１１の撮像制御部１１Ｂは、撮像素子５により測光用の撮像を行わせる（ステップＳ５）。この測光用の撮像により撮像素子５から撮像画像信号が出力されると、この撮像画像信号がシステム制御部１１の測光処理部１１Ｃにより取得される。ステップＳ５は撮像制御ステップを構成する。
【００６９】
測光処理部１１Ｃは、取得した撮像画像信号から上述した方法にて被写体の明るさを測定する。そして、この明るさに基づいて撮像制御部１１Ｂにより適正露出が決定される（ステップＳ６）。ステップＳ６は測光処理ステップを構成する。
【００７０】
ステップＳ６の処理の後又はこの処理と並行して、デジタル信号処理部１７の画像処理部１７Ａは、測光用の撮像により得られた撮像画像信号からライブビュー表示用の画像データを生成する（ステップＳ７）。ステップＳ７は画像処理ステップを構成する。
【００７１】
ステップＳ７において、画像処理部１７Ａは、撮像画像信号を構成する第一の画素信号群、第二の画素信号群、第三の画素信号群、及び第四の画素信号群のいずれか１つの画素信号群に基づいてライブビュー表示用の画像データを生成する。
【００７２】
どの画素信号群を選択するかは予め決めた任意のものとしてもよいし、測光処理部１１Ｃにより測定された被写体の明るさに基づいて決定してもよい。
【００７３】
例えば、画像処理部１７Ａは、第一の画素信号群、第二の画素信号群、第三の画素信号群、及び第四の画素信号群の中から、任意の画素信号群として、透過率が１００％の状態で得られた第一の画素信号群を選択する。
【００７４】
この選択方法によれば、ＡＥ指示の直前に表示されていたライブビュー画像と、ＡＥ指示の後に更新されるライブビュー画像とを同じ明るさとすることができ、ライブビュー画像の視認性を高めることができる。
【００７５】
画像処理部１７Ａは、測光処理部１１Ｃにより測定された被写体の明るさに基づいて１つの画素データ群を選択する場合には、例えば、第一の画素信号群、第二の画素信号群、第三の画素信号群、及び第四の画素信号群の中から、この被写体の明るさに最も近い明るさの画素信号群を選択する。この選択方法によれば、より実際の被写体に近いライブビュー画像を表示可能となる。
【００７６】
このようにしてライブビュー表示用の画像データが生成されると、ステップＳ８において、この画像データが表示部２２に出力され、この画像データに基づくライブビュー画像が表示部２２にて表示される（ステップＳ８）。ステップＳ８は出力ステップを構成する。
【００７７】
その後、ステップＳ９において、操作部１４に含まれるレリーズボタンの押下による記録のための撮像指示がなされるまでは、ステップＳ３〜ステップＳ８の処理が繰り返される。
【００７８】
操作部１４に含まれるレリーズボタンの押下によって撮像指示がなされると（ステップＳ９：ＹＥＳ）、システム制御部１１の透過率制御部１１Ａは、可変ＮＤフィルタ３の全ての特性素子の透過率を１００％に戻す（ステップＳ１０）。
【００７９】
その後、システム制御部１１の撮像制御部１１Ｂは、ステップＳ６にて決定された適正露出となる撮像条件にて、撮像素子５により、記録のための撮像を行わせる（ステップＳ１１）。ステップＳ１１の後は、ステップＳ１に処理が戻る（リターン）。
【００８０】
以上のように、デジタルカメラ１００によれば、１回の測光用の撮像によって、明るさの異なる複数（図３から図５の例では４つ）の画素信号群を得ることができる。このため、１回の撮像でも、白飛びと黒潰れを防いだ測光用の画像を得ることができ、被写体の明るさを正確に且つ高速に測定することができる。
【００８１】
また、デジタルカメラ１００によれば、測光用の撮像によって得られた撮像画像信号を構成する複数の画素信号群のうちのいずれか１つの画素信号群からライブビュー表示用の画像データが生成される。このため、測光用の撮像を行った直後に、ライブビュー画像の更新を行うことができ、被写体を見失うリスクを低減することができる。
【００８２】
また、デジタルカメラ１００によれば、測光処理部１１Ｃによって測定された被写体の明るさに最も近い明るさの画素信号群を用いてライブビュー表示用の画像データを生成することができる。この構成によれば、より実際の被写体の見た目に近いライブビュー画像を表示可能となるため、被写体を見失うリスクを低減することができる。
【００８３】
なお、画像処理部１７Ａは、測光処理部１１Ｃにより測定された被写体の明るさに基づいて１つの画素データ群を選択する場合に、第一の画素信号群、第二の画素信号群、第三の画素信号群、及び第四の画素信号群の中から、この被写体の明るさに２番目に近い明るさの画素信号群を選択してもよい。この構成であっても、実際の被写体の見た目に近いライブビュー画像を表示可能である。
【００８４】
また、上述したように、画像処理部１７Ａが選択する画素信号群を予め決めておく構成によれば、測光処理部１１Ｃによる測光結果を待たずに、ライブビュー画像の表示を開始することができる。このため、滑らかなライブビュー画像の表示が可能となる。
【００８５】
画像処理部１７Ａが選択する画素信号群を予め決めておく構成では、撮像素子５から撮像画像信号を読み出す際に、その画素信号群を優先的に読み出すようにしてもよい。これにより、ライブビュー画像の更新を更に高速に行うことができる。
【００８６】
画像処理部１７Ａは、４つの画素信号群のうちのいずれか１つの画素信号群を除く３つの画素信号群の少なくとも１つを用いて、ライブビュー表示用の画像データを生成してもよい。画像処理部１７Ａは、例えば、可変ＮＤフィルタ３の光透過エリアにおいて隣接する第一の領域３ａ及び第二の領域３ｂに対応する第一の画素信号群と第二の画素信号群を選択し、これら画素信号群における画素位置が近接するもの同士を平均することで１つの画素信号群を生成する。そして、この１つの画素信号群に基づいてライブビュー表示用の画像データを生成する。このようにすることでも、測光処理中のライブビュー画像の更新は可能である。また、２つ以上の画素信号群の明るさが平均化されるため、ライブビュー画像の見た目を向上させることができる。
【００８７】
以下では、画像処理部１７Ａによるライブビュー表示用の画像データの生成方法の変形例について説明する。
【００８８】
この変形例においては、可変ＮＤフィルタ３の光透過エリアを、図８に示すように、例えば複数（図８の例では２５個）のブロック３０に分割し、各ブロック３０における透過率の分布を、図５に示したような状態に透過率制御部１１Ａが制御するものとして説明する。ブロック３０は、第一のブロックを構成する。
【００８９】
この変形例においては、測光用の撮像により得られる撮像画像信号５０を、図９に示すように、図８の各ブロック３０に対応した複数（図９の例では２５個）のブロック５０Ａに分割して取り扱う。
【００９０】
各ブロック５０Ａは、これに対応するブロック３０を透過した被写体光から光電変換して得られたものである。２５個のブロック５０Ａには、１〜２５の番号が付与されているものとする。ブロック５０Ａは第二のブロックを構成する。
【００９１】
図１０は、図７のステップＳ６及びステップＳ７の変形例を説明するためのフローチャートである。
【００９２】
測光処理部１１Ｃは、測光用の撮像により撮像画像信号が得られると、この撮像画像信号における番号ｎのブロック５０Ａを選択する（ステップＳ７１）。なお、ｎの初期値は１とする。
【００９３】
選択したブロック５０Ａは、上述した第一の画素信号群と、第二の画素信号群と、第三の画素信号群と、第四の画素信号群とから構成されている。
【００９４】
次に、測光処理部１１Ｃは、選択したブロック５０Ａの第一の画素信号群、第二の画素信号群、第三の画素信号群、及び第四の画素信号群に基づいて、このブロック５０Ａの被写体の明るさを測定する（ステップＳ７２）。
【００９５】
次に、画像処理部１７Ａは、選択されたブロック５０Ａを構成する第一の画素信号群、第二の画素信号群、第三の画素信号群、及び第四の画素信号群の中から、測光処理部１１Ｃによりこのブロック５０Ａに対して測定された被写体の明るさに基づいて１つの画素信号群を選択する（ステップＳ７３）。
【００９６】
具体的には、画像処理部１７Ａは、第一の画素データ群、第二の画素データ群、第三の画素データ群、及び第四の画素データ群の中から、測光処理部１１Ｃにより測定された被写体の明るさに最も近い明るさの画素信号群を選択する。そして、画像処理部１７Ａは、選択した画像信号群を一時記憶する。
【００９７】
ステップＳ７３の後、画像処理部１７Ａは、番号ｎが２５であるか否かを判定する（ステップＳ７４）。番号ｎが２５ではない場合（ステップＳ７４：ＮＯ）には、画像処理部１７Ａは、番号ｎを１つ増やして（ステップＳ７５）、ステップＳ７１に処理を戻す。
【００９８】
ステップＳ７１〜ステップＳ７５の処理が繰り返されてステップＳ７４の判定がＹＥＳになると、画像処理部１７Ａは、一時記憶している２５個の画素信号群を合成して得られる画素信号群に基づいて、ライブビュー表示用の画像データを生成する（ステップＳ７６）。
【００９９】
ステップＳ７６の処理の後、又はこの処理と並行して、測光処理部１１Ｃは、全てのブロック５０Ａに対して測定された被写体の明るさに基づいて、最終的な被写体の明るさを決定する。そして、この明るさに基づいて撮像制御部１１Ｂにより適正露出が決定される（ステップＳ７７）。この後は、図７のステップＳ８以降の処理が行われる。
【０１００】
以上のように、この変形例によれば、ライブビュー画像は、全てのブロック５０Ａに対応する部分の明るさが一律ではなく、部分毎に被写体に合った明るさの画像となる。このため、ハーフＮＤフィルタをかけて撮像を行ったようなライブビュー画像を表示することができる。これにより、部分的に白飛び又は黒潰れが生じ得る被写体であっても、ライブビュー画像によってこれを良好に確認することが可能となる。
【０１０１】
なお、この変形例において、図８のブロック３０における透過率の分布は、図３又は図４に示すようなものであってもよい。この分布が図５に示すようになっていると、ステップＳ７６にて２５個の画素信号群を合成したときに、画素信号群毎の画素位置のずれを小さくすることができる。このため、ライブビュー画像の品質を向上させることができる。
【０１０２】
次に、本発明の撮像装置の実施形態としてスマートフォンの構成について説明する。
【０１０３】
図１１は、本発明の撮像装置の一実施形態であるスマートフォン２００の外観を示すものである。
【０１０４】
図１１に示すスマートフォン２００は、平板状の筐体２０１を有し、筐体２０１の一方の面に表示面としての表示パネル２０２と、入力部としての操作パネル２０３とが一体となった表示入力部２０４を備えている。
【０１０５】
また、この様な筐体２０１は、スピーカ２０５と、マイクロホン２０６と、操作部２０７と、カメラ部２０８とを備えている。なお、筐体２０１の構成はこれに限定されず、例えば、表示面と入力部とが独立した構成を採用したり、折り畳み構造又はスライド機構を有する構成を採用したりすることもできる。
【０１０６】
図１２は、図１１に示すスマートフォン２００の構成を示すブロック図である。
【０１０７】
図１２に示すように、スマートフォンの主たる構成要素として、無線通信部２１０と、表示入力部２０４と、通話部２１１と、操作部２０７と、カメラ部２０８と、記憶部２１２と、外部入出力部２１３と、ＧＰＳ（Ｇｌｏｂａｌ  Ｐｏｓｉｔｉｏｎｉｎｇ  Ｓｙｓｔｅｍ）受信部２１４と、モーションセンサ部２１５と、電源部２１６と、主制御部２２０とを備える。
【０１０８】
また、スマートフォン２００の主たる機能として、図示省略の基地局装置ＢＳと図示省略の移動通信網ＮＷとを介した移動無線通信を行う無線通信機能を備える。
【０１０９】
無線通信部２１０は、主制御部２２０の指示にしたがって、移動通信網ＮＷに収容された基地局装置ＢＳに対し無線通信を行うものである。この無線通信を使用して、音声データ、画像データ等の各種ファイルデータ、電子メールデータ等の送受信、ウェブデータ又はストリーミングデータ等の受信を行う。
【０１１０】
表示入力部２０４は、主制御部２２０の制御により、画像（静止画像及び動画像）又は文字情報等を表示して視覚的に利用者に情報を伝達するとともに、表示した情報に対する利用者操作を検出する、いわゆるタッチパネルであって、表示パネル２０２と、操作パネル２０３と、を備える。
【０１１１】
表示パネル２０２は、ＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）、ＯＥＬＤ（Ｏｒｇａｎｉｃ  Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ  Ｄｉｓｐｌａｙ）等を表示デバイスとして用いたものである。
【０１１２】
操作パネル２０３は、表示パネル２０２の表示面上に表示される画像を視認可能に載置され、利用者の指又は尖筆によって操作される一又は複数の座標を検出するデバイスである。このデバイスを利用者の指又は尖筆によって操作すると、操作に起因して発生する検出信号を主制御部２２０に出力する。次いで、主制御部２２０は、受信した検出信号に基づいて、表示パネル２０２上の操作位置（座標）を検出する。
【０１１３】
図１２に示すように、本発明の撮影装置の一実施形態として例示しているスマートフォン２００の表示パネル２０２と操作パネル２０３とは一体となって表示入力部２０４を構成しているが、操作パネル２０３が表示パネル２０２を完全に覆うような配置となっている。
【０１１４】
係る配置を採用した場合、操作パネル２０３は、表示パネル２０２外の領域についても、利用者操作を検出する機能を備えてもよい。換言すると、操作パネル２０３は、表示パネル２０２に重なる重畳部分についての検出領域（以下、表示領域と称する）と、それ以外の表示パネル２０２に重ならない外縁部分についての検出領域（以下、非表示領域と称する）とを備えていてもよい。
【０１１５】
なお、表示領域の大きさと表示パネル２０２の大きさとを完全に一致させても良いが、両者を必ずしも一致させる必要は無い。また、操作パネル２０３が、外縁部分と、それ以外の内側部分の２つの感応領域を備えていてもよい。さらに、外縁部分の幅は、筐体２０１の大きさ等に応じて適宜設計されるものである。
【０１１６】
さらにまた、操作パネル２０３で採用される位置検出方式としては、マトリクススイッチ方式、抵抗膜方式、表面弾性波方式、赤外線方式、電磁誘導方式、静電容量方式等が挙げられ、いずれの方式を採用することもできる。
【０１１７】
通話部２１１は、スピーカ２０５又はマイクロホン２０６を備え、マイクロホン２０６を通じて入力された利用者の音声を主制御部２２０にて処理可能な音声データに変換して主制御部２２０に出力したり、無線通信部２１０あるいは外部入出力部２１３により受信された音声データを復号してスピーカ２０５から出力させたりするものである。
【０１１８】
また、図１１に示すように、例えば、スピーカ２０５を表示入力部２０４が設けられた面と同じ面に搭載し、マイクロホン２０６を筐体２０１の側面に搭載することができる。
【０１１９】
操作部２０７は、キースイッチ等を用いたハードウェアキーであって、利用者からの指示を受け付けるものである。例えば、図１１に示すように、操作部２０７は、スマートフォン２００の筐体２０１の側面に搭載され、指等で押下されるとオンとなり、指を離すとバネ等の復元力によってオフ状態となる押しボタン式のスイッチである。
【０１２０】
記憶部２１２は、主制御部２２０の制御プログラム及び制御データ、アプリケーションソフトウェア、通信相手の名称又は電話番号等を対応づけたアドレスデータ、送受信した電子メールのデータ、ＷｅｂブラウジングによりダウンロードしたＷｅｂデータ、ダウンロードしたコンテンツデータを記憶し、またストリーミングデータ等を一時的に記憶するものである。また、記憶部２１２は、スマートフォン内蔵の内部記憶部２１７と着脱自在な外部メモリスロットを有する外部記憶部２１８により構成される。
【０１２１】
なお、記憶部２１２を構成するそれぞれの内部記憶部２１７と外部記憶部２１８は、フラッシュメモリタイプ（ｆｌａｓｈ  ｍｅｍｏｒｙ  ｔｙｐｅ）、ハードディスクタイプ（ｈａｒｄ  ｄｉｓｋ  ｔｙｐｅ）、マルチメディアカードマイクロタイプ（ｍｕｌｔｉｍｅｄｉａ  ｃａｒｄ  ｍｉｃｒｏ  ｔｙｐｅ）、カードタイプのメモリ（例えば、ＭｉｃｒｏＳＤ（登録商標）メモリ等）、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）等の格納媒体を用いて実現される。
【０１２２】
外部入出力部２１３は、スマートフォン２００に連結される全ての外部機器とのインターフェースの役割を果たすものであり、他の外部機器に通信等（例えば、ユニバーサルシリアルバス（ＵＳＢ）、ＩＥＥＥ１３９４等）又はネットワーク（例えば、インターネット、無線ＬＡＮ、ブルートゥース（Ｂｌｕｅｔｏｏｔｈ）（登録商標）、ＲＦＩＤ（Ｒａｄｉｏ  Ｆｒｅｑｕｅｎｃｙ  Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ）、赤外線通信（Ｉｎｆｒａｒｅｄ  Ｄａｔａ  Ａｓｓｏｃｉａｔｉｏｎ：ＩｒＤＡ）（登録商標）、ＵＷＢ（Ｕｌｔｒａ  Ｗｉｄｅｂａｎｄ）（登録商標）、ジグビー（ＺｉｇＢｅｅ）（登録商標）等）により直接的又は間接的に接続するためのものである。
【０１２３】
スマートフォン２００に連結される外部機器としては、例えば、有／無線ヘッドセット、有／無線外部充電器、有／無線データポート、カードソケットを介して接続されるメモリカード（Ｍｅｍｏｒｙ  ｃａｒｄ）、ＳＩＭ（Ｓｕｂｓｃｒｉｂｅｒ  Ｉｄｅｎｔｉｔｙ  Ｍｏｄｕｌｅ  Ｃａｒｄ）／ＵＩＭ（Ｕｓｅｒ  Ｉｄｅｎｔｉｔｙ  Ｍｏｄｕｌｅ  Ｃａｒｄ）カード、オーディオ・ビデオＩ／Ｏ（Ｉｎｐｕｔ／Ｏｕｔｐｕｔ）端子を介して接続される外部オーディオ・ビデオ機器、無線接続される外部オーディオ・ビデオ機器、有／無線接続されるスマートフォン、有／無線接続されるパーソナルコンピュータ、有／無線接続されるパーソナルコンピュータ、イヤホン等がある。
【０１２４】
外部入出力部２１３は、このような外部機器から伝送を受けたデータをスマートフォン２００の内部の各構成要素に伝達したり、スマートフォン２００の内部のデータが外部機器に伝送されるようにしたりすることができる。
【０１２５】
ＧＰＳ受信部２１４は、主制御部２２０の指示にしたがって、ＧＰＳ衛星ＳＴ１〜ＳＴｎから送信されるＧＰＳ信号を受信し、受信した複数のＧＰＳ信号に基づく測位演算処理を実行し、スマートフォン２００の緯度、経度、高度からなる位置を検出する。ＧＰＳ受信部２１４は、無線通信部２１０又は外部入出力部２１３（例えば、無線ＬＡＮ）から位置情報を取得できる時には、その位置情報を用いて位置を検出することもできる。
【０１２６】
モーションセンサ部２１５は、例えば、３軸の加速度センサ等を備え、主制御部２２０の指示にしたがって、スマートフォン２００の物理的な動きを検出する。スマートフォン２００の物理的な動きを検出することにより、スマートフォン２００の動く方向又は加速度が検出される。係る検出結果は、主制御部２２０に出力されるものである。
【０１２７】
電源部２１６は、主制御部２２０の指示にしたがって、スマートフォン２００の各部に、バッテリ（図示しない）に蓄えられる電力を供給するものである。
【０１２８】
主制御部２２０は、マイクロプロセッサを備え、記憶部２１２が記憶する制御プログラム及び制御データにしたがって動作し、スマートフォン２００の各部を統括して制御するものである。また、主制御部２２０は、無線通信部２１０を通じて、音声通信又はデータ通信を行うために、通信系の各部を制御する移動通信制御機能と、アプリケーション処理機能を備える。
【０１２９】
アプリケーション処理機能は、記憶部２１２が記憶するアプリケーションソフトウェアにしたがって主制御部２２０が動作することにより実現するものである。アプリケーション処理機能としては、例えば、外部入出力部２１３を制御して対向機器とデータ通信を行う赤外線通信機能、電子メールの送受信を行う電子メール機能、又はウェブページを閲覧するウェブブラウジング機能等がある。
【０１３０】
また、主制御部２２０は、受信データ又はダウンロードしたストリーミングデータ等の画像データ（静止画像又は動画像のデータ）に基づいて、映像を表示入力部２０４に表示する等の画像処理機能を備える。
【０１３１】
画像処理機能とは、主制御部２２０が、上記画像データを復号し、この復号結果に画像処理を施して、画像を表示入力部２０４に表示する機能のことをいう。
【０１３２】
さらに、主制御部２２０は、表示パネル２０２に対する表示制御と、操作部２０７、操作パネル２０３を通じた利用者操作を検出する操作検出制御を実行する。
【０１３３】
表示制御の実行により、主制御部２２０は、アプリケーションソフトウェアを起動するためのアイコン又はスクロールバー等のソフトウェアキーを表示したり、あるいは電子メールを作成したりするためのウィンドウを表示する。
【０１３４】
なお、スクロールバーとは、表示パネル２０２の表示領域に収まりきれない大きな画像等について、画像の表示部分を移動する指示を受け付けるためのソフトウェアキーのことをいう。
【０１３５】
また、操作検出制御の実行により、主制御部２２０は、操作部２０７を通じた利用者操作を検出したり、操作パネル２０３を通じて、上記アイコンに対する操作と上記ウィンドウの入力欄に対する文字列の入力を受け付けたり、あるいは、スクロールバーを通じた表示画像のスクロール要求を受け付けたりする。
【０１３６】
さらに、操作検出制御の実行により主制御部２２０は、操作パネル２０３に対する操作位置が、表示パネル２０２に重なる重畳部分（表示領域）か、それ以外の表示パネル２０２に重ならない外縁部分（非表示領域）かを判定し、操作パネル２０３の感応領域又はソフトウェアキーの表示位置を制御するタッチパネル制御機能を備える。
【０１３７】
また、主制御部２２０は、操作パネル２０３に対するジェスチャ操作を検出し、検出したジェスチャ操作に応じて、予め設定された機能を実行することもできる。
【０１３８】
ジェスチャ操作とは、従来の単純なタッチ操作ではなく、指等によって軌跡を描いたり、複数の位置を同時に指定したり、あるいはこれらを組み合わせて、複数の位置から少なくとも１つについて軌跡を描く操作を意味する。
【０１３９】
カメラ部２０８は、図１に示したデジタルカメラ１００における外部メモリ制御部２０、記憶媒体２１、表示部２２、及び操作部１４以外の構成を含む。
【０１４０】
カメラ部２０８によって生成された撮像画像は、記憶部２１２に記憶したり、外部入出力部２１３又は無線通信部２１０を通じて出力したりすることができる。
【０１４１】
図１１に示すスマートフォン２００において、カメラ部２０８は表示入力部２０４と同じ面に搭載されているが、カメラ部２０８の搭載位置はこれに限らず、表示入力部２０４の背面に搭載されてもよい。
【０１４２】
また、カメラ部２０８はスマートフォン２００の各種機能に利用することができる。例えば、表示パネル２０２にカメラ部２０８で取得した画像を表示したり、操作パネル２０３の操作入力のひとつとして、カメラ部２０８の画像を利用したりすることができる。
【０１４３】
また、ＧＰＳ受信部２１４が位置を検出する際に、カメラ部２０８からの画像を参照して位置を検出することもできる。さらには、カメラ部２０８からの画像を参照して、３軸の加速度センサを用いずに、或いは、３軸の加速度センサと併用して、スマートフォン２００のカメラ部２０８の光軸方向を判断したり、現在の使用環境を判断したりすることもできる。勿論、カメラ部２０８からの画像をアプリケーションソフトウェア内で利用することもできる。
【０１４４】
その他、静止画又は動画の画像データにＧＰＳ受信部２１４により取得した位置情報、マイクロホン２０６により取得した音声情報（主制御部等により、音声テキスト変換を行ってテキスト情報となっていてもよい）、モーションセンサ部２１５により取得した姿勢情報等を付加して記憶部２１２に記憶したり、外部入出力部２１３又は無線通信部２１０を通じて出力したりすることもできる。
【０１４５】
以上のような構成のスマートフォン２００においても、被写体の測光動作の高速化とライブビュー画像の高品質化を両立させることができる。
【０１４６】
なお、図１のデジタルカメラ１００において、可変ＮＤフィルタ３とＮＤ駆動部３Ａは、着脱可能なレンズ装置４０Ａに内蔵され、レンズ制御部４が、システム制御部１１からの指示に応じてＮＤ駆動部３Ａを制御するものであってもよい。
【０１４７】
また、システム制御部１１とデジタル信号処理部１７とで、撮像制御装置の全ての機能ブロックを有する構成としているが、システム制御部１１が撮像制御装置の全ての機能ブロックを有する構成であってもよい。
【０１４８】
以上説明してきたように、本明細書には以下の事項が開示されている。
【０１４９】
（１）
撮像素子に入射する光量を制御するための光学素子における複数の領域の各々の透過率を異なる値に制御する透過率制御部と、
上記複数の領域の各々の上記透過率が異なる値に制御された状態にて上記撮像素子により測光用の撮像を行わせる撮像制御部と、
上記測光用の撮像によって上記撮像素子から得られる撮像画像信号に基づいて被写体の明るさを測定する測光処理部と、
上記測光用の撮像によって得られる上記撮像画像信号から表示用の画像データを生成する画像処理部と、
上記表示用の画像データを、画像を表示する表示部に出力する出力部と、を備える撮像制御装置。
【０１５０】
（２）
（１）記載の撮像制御装置であって、
上記画像処理部は、上記撮像画像信号のうちの上記複数の領域の各々に対応する画素信号群のうちのいずれか１つの画素信号群に基づいて上記表示用の画像データを生成する撮像制御装置。
【０１５１】
（３）
（２）記載の撮像制御装置であって、
上記画像処理部は、上記撮像画像信号のうちの上記複数の領域の各々に対応する画素信号群の中から、最も透過率の高い上記領域に対応する画素信号群に基づいて上記表示用の画像データを生成する撮像制御装置。
【０１５２】
（４）
（２）記載の撮像制御装置であって、
上記画像処理部は、上記撮像画像信号のうちの上記複数の領域の各々に対応する画素信号群の中から、上記測光処理部により測定された上記明るさに基づいて１つを選択し、選択した上記画素信号群に基づいて上記表示用の画像データを生成する撮像制御装置。
【０１５３】
（５）
（４）記載の撮像制御装置であって、
上記画像処理部は、上記撮像画像信号のうちの上記複数の領域の各々に対応する画素信号群の中から、上記測光処理部によって測定された上記明るさに近い明るさの画素信号群を選択する撮像制御装置。
【０１５４】
（６）
（１）記載の撮像制御装置であって、
上記透過率制御部は、上記光学素子を分割して得られる複数の第一のブロックの各々に透過率の異なる上記複数の領域が含まれる状態に上記光学素子を制御し、
上記測光処理部は、上記撮像画像信号の上記複数の第一のブロックに対応する第二のブロック毎に、上記第二のブロックに基づいて被写体の明るさを測定し、
上記画像処理部は、上記撮像画像信号の上記第二のブロックのうちの上記複数の領域の各々に対応する画素信号群の中から、上記測光処理部によりその第二のブロックに対して測定された上記明るさに基づいて１つの画素信号群を選択し、全ての上記第二のブロックについて上記選択した画素信号群を合成して得られる画像信号群に基づいて、上記表示用の画像データを生成する撮像制御装置。
【０１５５】
（７）
（６）記載の撮像制御装置であって、
上記画像処理部は、上記撮像画像信号の上記第二のブロックのうちの上記複数の領域の各々に対応する画素信号群の中から、上記測光処理部によりその第二のブロックに対して測定された上記明るさに最も近い明るさの画素信号群を選択する撮像制御装置。
【０１５６】
（８）
（１）から（７）のいずれか１つに記載の撮像制御装置であって、
予め決められたパターンにて並ぶ上記透過率の異なる複数のサブ領域のセットを、上記光学素子の光透過エリアの全体に渡って繰り返し配列した状態における上記複数のサブ領域の各々によって上記複数の領域が構成される撮像制御装置。
【０１５７】
（９）
（１）から（８）のいずれか１つに記載の撮像制御装置と、
上記撮像素子と、を備える撮像装置。
【０１５８】
（１０）
（９）記載の撮像装置であって、
上記光学素子を更に備える撮像装置。
【０１５９】
（１１）
撮像素子に入射する光量を制御するための光学素子における複数の領域の各々の透過率を異なる値に制御する透過率制御ステップと、
上記複数の領域の各々の上記透過率が異なる値に制御された状態にて上記撮像素子により測光用の撮像を行わせる撮像制御ステップと、
上記測光用の撮像によって上記撮像素子から得られる撮像画像信号に基づいて被写体の明るさを測定する測光処理ステップと、
上記測光用の撮像によって得られる上記撮像画像信号から表示用の画像データを生成する画像処理ステップと、
上記表示用の画像データを、画像を表示する表示部に出力する出力ステップと、を備える撮像制御方法。
【０１６０】
（１２）
（１１）記載の撮像制御方法であって、
上記画像処理ステップは、上記撮像画像信号のうちの上記複数の領域の各々に対応する画素信号群のうちのいずれか１つの画素信号群に基づいて上記表示用の画像データを生成する撮像制御方法。
【０１６１】
（１３）
（１２）記載の撮像制御方法であって、
上記画像処理ステップは、上記撮像画像信号のうちの上記複数の領域の各々に対応する画素信号群の中から、最も透過率の高い上記領域に対応する画素信号群に基づいて上記表示用の画像データを生成する撮像制御方法。
【０１６２】
（１４）
（１２）記載の撮像制御方法であって、
上記画像処理ステップは、上記撮像画像信号のうちの上記複数の領域の各々に対応する画素信号群の中から、上記測光処理ステップにより測定された上記明るさに基づいて１つを選択し、選択した上記画素信号群に基づいて上記表示用の画像データを生成する撮像制御方法。
【０１６３】
（１５）
（１４）記載の撮像制御方法であって、
上記画像処理ステップは、上記撮像画像信号のうちの上記複数の領域の各々に対応する画素信号群の中から、上記測光処理部によって測定された上記明るさに近い明るさの画素信号群を選択する撮像制御方法。
【０１６４】
（１６）
（１１）記載の撮像制御方法であって、
上記透過率制御ステップは、上記光学素子を分割して得られる複数の第一のブロックの各々に透過率の異なる上記複数の領域が含まれる状態に上記光学素子を制御し、
上記測光処理ステップは、上記撮像画像信号の上記複数の第一のブロックに対応する第二のブロック毎に、上記第二のブロックに基づいて被写体の明るさを測定し、
上記画像処理ステップは、上記撮像画像信号の上記第二のブロックのうちの上記複数の領域の各々に対応する画素信号群の中から、上記測光処理ステップによりその第二のブロックに対して測定された上記明るさに基づいて１つの画素信号群を選択し、全ての上記第二のブロックについて上記選択した画素信号群を合成して得られる画像信号群に基づいて、上記表示用の画像データを生成する撮像制御方法。
【０１６５】
（１７）
（１６）記載の撮像制御方法であって、
上記画像処理ステップは、上記撮像画像信号の上記第二のブロックのうちの上記複数の領域の各々に対応する画素信号群の中から、上記測光処理部によりその第二のブロックに対して測定された上記明るさに最も近い明るさの画素信号群を選択する撮像制御方法。
【０１６６】
（１８）
（１１）から（１７）のいずれか１つに記載の撮像制御方法であって、
予め決められたパターンにて並ぶ上記透過率の異なる複数のサブ領域のセットを、上記光学素子の光透過エリアの全体に渡って繰り返し配列した状態における上記複数のサブ領域の各々によって上記複数の領域が構成される撮像制御方法。
【０１６７】
（１９）
撮像素子に入射する光量を制御するための光学素子における複数の領域の各々の透過率を異なる値に制御する透過率制御ステップと、
上記複数の領域の各々の上記透過率が異なる値に制御された状態にて上記撮像素子により測光用の撮像を行わせる撮像制御ステップと、
上記測光用の撮像によって上記撮像素子から得られる撮像画像信号に基づいて被写体の明るさを測定する測光処理ステップと、
上記測光用の撮像によって得られる上記撮像画像信号から表示用の画像データを生成する画像処理ステップと、
上記表示用の画像データを、画像を表示する表示部に出力する出力ステップと、をコンピュータに実行させるための撮像制御プログラム。
【０１６８】
以上、図面を参照しながら各種の実施の形態について説明したが、本発明はかかる例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例又は修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。また、発明の趣旨を逸脱しない範囲において、上記実施の形態における各構成要素を任意に組み合わせてもよい。
【０１６９】
なお、本出願は、２０１８年３月９日出願の日本特許出願（特願２０１８−０４３１０３）に基づくものであり、その内容は本出願の中に参照として援用される。
【産業上の利用可能性】
【０１７０】
本発明によれば、被写体の測光動作の高速化とライブビュー画像の高品質化を両立させることのできる撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラムを提供することができる。
【符号の説明】
【０１７１】
１００  デジタルカメラ
４０Ａ  レンズ装置
１  撮像レンズ
２  絞り
４  レンズ制御部
８  レンズ駆動部
９  絞り駆動部
４０Ｂ  本体部
３  可変ＮＤフィルタ
３ａ  第一の領域
３ｂ  第二の領域
３ｃ  第三の領域
３ｄ  第四の領域
３Ａ  ＮＤ駆動部
３０、５０Ａ  ブロック
５  撮像素子
５Ａ  撮像素子駆動部
１１  システム制御部
１１Ａ  透過率制御部
１１Ｂ  撮像制御部
１１Ｃ  測光処理部
１４  操作部
１５  メモリ制御部
１６  メモリ
１７  デジタル信号処理部
１７Ａ  画像処理部
１７Ｂ  出力部
２０  外部メモリ制御部
２１  記憶媒体
２２  表示部
２４  制御バス
２５  データバス
ＦＬ  フリッカ波形
ＮＬ  透過率波形
ＩＬ  被写体光量波形
Ｔ１、Ｔ２、Ｔ３  周期
２００  スマートフォン
２０１  筐体
２０２  表示パネル
２０３  操作パネル
２０４  表示入力部
２０５  スピーカ
２０６  マイクロホン
２０７  操作部
２０８  カメラ部
２１０  無線通信部
２１１  通話部
２１２  記憶部
２１３  外部入出力部
２１４  ＧＰＳ受信部
２１５  モーションセンサ部
２１６  電源部
２１７  内部記憶部
２１８  外部記憶部
２２０  主制御部
ＳＴ１〜ＳＴｎ  ＧＰＳ衛星
【図１】
0006950072.tif 000002
【図２】
0006950072.tif 000003
【図３】
0006950072.tif 000004
【図４】
0006950072.tif 000005
【図５】
0006950072.tif 000006
【図６】
0006950072.tif 000007
【図７】
0006950072.tif 000008
【図８】
0006950072.tif 000009
【図９】
0006950072.tif 000010
【図１０】
0006950072.tif 000011
【図１１】
0006950072.tif 000012
【図１２】
0006950072.tif 000013