(57)【要約】【課題】全体がぼけてしまわないライブビュー画像を表示できる撮像装置および撮像装置の表示方法を提供する。【解決手段】撮像レンズと撮像素子５との間に，マイクロレンズアレイが配置される。撮像素子５の複数の撮像素子６ごと（撮像素子群７）に１つのマイクロレンズ６が割り当てられている。被写体からの光線が通過する撮像レンズの瞳位置に対して相対的に同一位置に存在する光電変換素子６から得られる信号によって表わされるライブビュー画像が表示装置の表示画面に表示される。ライブビュー画像は多視点の画像ではないので，全体がぼけていない画像となる。【選択図】図８
2015186188.tif 000002
【特許請求の範囲】
【請求項１】
撮像レンズ，
光電変換素子が配列され，被写体を撮像する撮像素子，
上記撮像レンズと上記撮像素子との間に配置され，上記撮像素子の複数の光電変換素子に対して１つのマイクロレンズが割り当てられており，上記複数の光電変換素子のうち，被写体からの光線が通過する上記撮像レンズの瞳位置に対して相対的に同一位置に存在する光電変換素子に上記光線を入射させるマイクロレンズアレイ，および
上記複数の光電変換素子のうち，相対的に同一位置に存在する光電変換素子から得られる信号によって表されるライブビュー画像を表示装置の表示画面に表示させる表示制御部，
を備えた撮像装置。
【請求項２】
上記複数の光電変換素子のうち，相対的に同一位置に存在する光電変換素子の切替を指示する切替指示部をさらに備え，
上記表示制御部は，
上記切替指示部からの指示を検知して，切替られた光電変換素子から得られる信号によって表されるライブビュー画像を表示装置の表示画面に表示させる，
請求項１に記載の撮像装置。
【請求項３】
上記複数の光電変換素子のうち，上記マイクロレンズアレイの相対的に同一位置に存在する隣接している光電変換素子から得られる信号を組み合わせる，あるいは選択する信号演算手段をさらに備え，
上記表示制御部は，上記信号演算手段により組み合わされた，あるいは選択された信号によって表されるライブビュー画像を表示装置の表示画面に表示させる，
請求項１に記載の撮像装置。
【請求項４】
被写体の空間周波数が低いかどうかを判定する第１の判定手段，および
上記第１の判定手段により，被写体の空間周波数が低いと判定されたことにより上記信号演算手段による組み合わせを行わせる第１の演算制御手段，
をさらに備えた請求項３に記載の撮像装置。
【請求項５】
撮影モードの切替手段，および
上記切替手段により撮影モードが切り替わった場合に，上記信号演算手段による組み合わせ，または選択を行わせる第２の演算制御手段，
をさらに備えた請求項３または４に記載の撮像装置。
【請求項６】
被写体輝度がしきい値以下かどうかを判定する第２の判定手段，および
上記第２の判定手段により，被写体輝度がしきい値以下と判定されたことにより，上記信号演算手段による組み合わせを行わせる第３の演算制御手段，
をさらに備えた請求項３から５のうち，いずれか１項に記載の撮像装置。
【請求項７】
上記複数の光電変換素子のうち，上記マイクロレンズアレイの相対的に同一位置に存在する光電変換素子のみから出力される信号を上記撮像素子から出力させる撮像制御手段をさらに備え，
上記表示制御部は，
上記撮像制御手段の制御により上記撮像素子から出力された信号によって表されるライブビュー画像を表示装置の表示画面に表示させるものである，
請求項１から６のうち，いずれか１項に記載の撮像装置。
【請求項８】
上記撮像素子から出力された信号を記憶するメモリをさらに備え，
上記表示制御部は，上記メモリに記憶された信号の中から上記複数の光電変換素子のうち，上記マイクロレンズアレイの相対的に同一位置に存在する光電変換素子から出力された信号を読み取り，読み取られた信号によって表されるライブビュー画像を表示装置の表示画面に表示させるものである，
請求項１から７のうち，いずれか１項に記載の撮像装置。
【請求項９】
光電変換素子が配列された撮像素子が，被写体を撮像し，
撮像レンズと上記撮像素子との間に配置され，上記撮像素子の複数の光電変換素子に対して１つのマイクロレンズが割り当てられているマイクロレンズアレイが，上記複数の光電変換素子のうち，被写体からの光線が通過する上記撮像レンズの瞳位置に対して相対的に同一位置に存在する光電変換素子に上記光線を入射させ，
表示制御部が，上記複数の光電変換素子のうち，相対的に同一位置に存在する光電変換素子から得られる信号によって表されるライブビュー画像を表示装置の表示画面に表示させる，
撮像装置の表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は，撮像装置およびその表示方法に関する。
【背景技術】
【０００２】
ライトフィールドカメラと呼ばれるカメラが実現されている。ライトフィールドカメラでは，撮像素子から得られる画像データに，受光面における光の強度分布に加えて，その光の進行方向の情報も含まれる。これにより，複数の視点，方向からの観察画像を再構築できる。ライトフィールドカメラでは，撮像後にリフォーカスをすることにより，所望の部分がぼけの無い画像を再構築できる。このために，ライブビュー撮像によって得られるライブビュー画像を，そのまま表示画面に表示すると，図15に示すように全体的にぼけたライブビュー画像となってしまい，被写体を確認できない。このために，カメラに光学ファインダを搭載し，光学ファインダを用いて被写体を確認するものがある（特許文献１）。また，ライブビュー画像において，距離マップを作成し，距離ごとに分割し，分割領域ごとにリフォーカスし，リフォーカスした分割領域を合成するものもある（特許文献２）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開2013-165475号公報
【特許文献２】特開2013-145980号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら，特許文献１に記載のものでは，光学ファインダが必要であるので，カメラが高価となってしまう。また，カメラの小型化を図ることができない。また，特許文献２に記載のものでは，ＣＰＵの負荷が大きいので，ライブビュー画像を表示することは難しい。引用文献２に記載のやり方で得られる画像を見ながら，シャッタを押すと，タイムラグが生じることがある。
【０００５】
この発明は，コストを抑えつつ，ライトフィールドカメラで撮影し，ボケの無いライブビュー画像を表示できるようにすることを目的とする。
【課題を解決するための手段】
【０００６】
この発明による撮像装置は，撮像レンズ，光電変換素子が配列され，被写体をライブビュー撮像する撮像素子，撮像レンズと撮像素子との間に配置され，撮像素子の複数の光電変換素子に対して１つのマイクロレンズが割り当てられており，複数の光電変換素子のうち，被写体からの光線が通過する撮像レンズの瞳位置に対して相対的に同一位置に存在する光電変換素子に光線を入射させるマイクロレンズアレイ，および複数の光電変換素子のうち，相対的に同一位置に存在する光電変換素子から得られる信号によって表されるライブビュー画像を表示装置の表示画面に表示させる表示制御部を備えていることを特徴とする。
【０００７】
この発明は，撮像装置の表示方法も提供している。すなわち，この方法は，光電変換素子が配列された撮像素子が，被写体をライブビュー撮像し，撮像レンズと撮像素子との間に配置され，撮像素子の複数の光電変換素子に対して１つのマイクロレンズが割り当てられているマイクロレンズアレイが，複数の光電変換素子のうち，被写体からの光線が通過する撮像レンズの瞳位置に対して相対的に同一位置に存在する光電変換素子に光線を入射させ，表示制御部が，上記複数の光電変換素子のうち，相対的に同一位置に存在する光電変換素子から得られる信号によって表されるライブビュー画像を表示装置の表示画面に表示させるものである。
【０００８】
複数の光電変換素子のうち，相対的に同一位置に存在する光電変換素子の切替を指示する切替指示部をさらに備えてもよい。この場合，表示制御部は，たとえば，切替指示部からの指示を検知して，切替られた光電変換素子から得られる信号によって表されるライブビュー画像を表示装置の表示画面に表示させるものとなろう。
【０００９】
複数の光電変換素子のうち，マイクロレンズアレイの相対的に同一位置に存在する隣接している光電変換素子から得られる信号を組み合わせる，あるいは選択する信号演算手段をさらに備えてもよい。この場合，表示制御部は，信号演算手段により組み合わされた，あるいは選択された信号によって表されるライブビュー画像を表示装置の表示画面に表示させるものとなろう。
【００１０】
被写体の空間周波数が低いかどうかを判定する第１の判定手段，および第１の判定手段により，被写体の空間周波数が低いと判定されたことにより信号演算手段による組み合わせを行わせる第１の演算制御手段をさらに備えてもよい。
【００１１】
撮影モードの切替手段，および切替手段により撮影モードが切り替わった場合に，信号演算手段による組み合わせ，または選択を行わせる第２の演算制御手段をさらに備えてもよい。
【００１２】
被写体輝度がしきい値以下かどうかを判定する第２の判定手段，および第２の判定手段により，被写体輝度がしきい値以下と判定されたことにより，信号演算手段による組み合わせを行わせる第３の演算制御手段をさらに備えてもよい。
【００１３】
複数の光電変換素子のうち，マイクロレンズアレイの相対的に同一位置に存在する光電変換素子のみから出力される信号を撮像素子から出力させる撮像制御手段をさらに備えてもよい。この場合，表示制御部は，撮像制御手段の制御により撮像素子から出力された信号によって表されるライブビュー画像を表示装置の表示画面に表示させるものとなろう。
【００１４】
撮像素子から出力された信号を記憶するメモリをさらに備えてもよい。この場合，表示制御部は，メモリに記憶された信号の中から，複数の光電変換素子のうち，マイクロレンズアレイの相対的に同一位置に存在する光電変換素子から出力された信号を読み取り，読み取られた信号によって表されるライブビュー画像を表示装置の表示画面に表示させるものとなろう。
【発明の効果】
【００１５】
この発明によると，１つのマイクロレンズに割り当てられている複数の光電変換素子のうち，撮像レンズの瞳位置に対して相対的に同一位置に存在する光電変換素子から得られる信号によって表されるライブビュー画像が表示装置の表示画面に表示される。そのような光電変換素子から得られる信号によって表されるライブビュー画像は，同一方向から得られる光線の集まりであるから，視差が小さくなり，被写体が，ぼけていないライブビュー画像となる。比較的コストを抑えつつライブビュー画像が得られる。ＣＰＵの負荷も抑えることができるので，光電変換素子から出力された信号を短時間でライブビュー画像表示できる。
【図面の簡単な説明】
【００１６】
【図１】ライトフィールドカメラの電気的構成を示すブロック図である。
【図２】マイクロレンズアレイを示している。
【図３】撮像素子を示している。
【図４】マイクロレンズアレイと撮像素子とを示している。
【図５】撮像レンズ，マイクロレンズアレイおよび撮像素子との関係を示している。
【図６】撮像レンズの瞳領域を示している。
【図７】マイクロレンズと撮像素子との関係を示している。
【図８】マイクロレンズアレイと撮像素子とを示している。
【図９】ライブビュー画像の一例である。
【図１０】ライブビュー画像の一例である。
【図１１】マイクロレンズと撮像素子との関係を示している。
【図１２】マイクロレンズと撮像素子との関係を示している。
【図１３】ライトフィールドカメラの処理手順を示すフローチャートである。
【図１４】ライトフィールドカメラの処理手順を示すフローチャートである。
【図１５】ライブビュー画像の一例である。
【実施例】
【００１７】
図１は，この発明の実施例を示すもので，ライトフィールドカメラ（撮像装置）１の電気的構成を示すブロック図である。
【００１８】
ライトフィールドカメラ１の全体の動作は，制御装置20によって統括される。
【００１９】
ライトフィールドカメラ１には，撮像レンズ２および光電変換素子が配列されている撮像素子５が含まれている。また，撮像レンズ２と撮像素子５との間には，マイクロレンズアレイ３が配置されている。
【００２０】
図２は，マイクロレンズアレイ３の正面図である。
【００２１】
マイクロレンズアレイ３には，横方向および縦方向に複数のマイクロレンズ４が配列されている。
【００２２】
図３は，撮像素子５の正面図である。
【００２３】
撮像素子５には，横方向および縦方向に光電変換素子６が配列されている。この実施例では，横方向および縦方向にそれぞれ５個（５個でなくともよい）の計25個（25個でなくともよい）から構成される１つの光電変換素子群（複数の光電変換素子６）７に対して１つのマイクロレンズ４が割り当てられている。
【００２４】
図４は，被写体側から撮像素子５を見た正面図である。
【００２５】
上述のように，25個の光電変換素子６から構成される光電変換素子群７ごとに，１つのマイクロレンズ４が割り当てられている様子が分る。
【００２６】
図５は，撮像レンズ２を通過した光線が撮像素子５の光電変換素子６に入射する様子を示している。
【００２７】
被写体からの光線は，撮像レンズ２において屈折し，マイクロレンズアレイ３を構成するマイクロレンズ４を通って撮像素子５の光電変換素子６に入射する。撮像レンズ２は，図５において上下方向に５つの瞳領域ａ１からａ５に分けられている。図６に示すように，撮像レンズ２は，横方向および縦方向を考慮すると25個の瞳領域に分けられるが，図５では側面から見ているので便宜上縦方向に分けられた５つの瞳領域ａ１からａ５が表わされている。瞳領域ａ１を通過した光線Ｌ１は，光電変換素子群７の中の光電変換素子ｐ１に入射する。同様に，瞳領域ａ２，瞳領域ａ３，瞳領域ａ４または瞳領域ａ５を通過した光線Ｌ２，Ｌ３，Ｌ４およびＬ５は，光電変換素子群７の光電変換素子ｐ２，ｐ３，ｐ４およびｐ５にそれぞれ入射する。特定の光電変換素子群７に限らず，撮像素子５のすべての光電変換素子群７について同様である。
【００２８】
図６は，撮像レンズ２の瞳領域を，光電変換素子群７を構成する25個の光電変換素子６に分けた様子を示している。
【００２９】
撮像レンズ２は，25個の瞳領域ａ11からａ15（瞳領域ａ１），ａ21からａ25（瞳領域ａ２），ａ31からａ35（瞳領域ａ３），ａ41からａ45（瞳領域ａ４）およびａ51からａ55（瞳領域ａ５）の25個の瞳領域に分けられている。
【００３０】
図７は，マイクロレンズ４と光電変換素子群７を構成する25個の光電変換素子６との関係を示している。
【００３１】
光電変換素子群７を構成する25個の光電変換素子６を符号ｐ11からｐ15（光電変換素子ｐ１），ｐ21からｐ25（光電変換素子ｐ２），ｐ31からｐ35（光電変換素子ｐ３），ｐ41からｐ45（光電変換素子ｐ４）およびｐ51からｐ55（光電変換素子ｐ５）とする。
【００３２】
撮像レンズ２の瞳領域ａ11，ａ12，ａ13，ａ14またはａ15を通過した光線は，マイクロレンズアレイ３によって，光電変換素子ｐ11，ｐ12，ｐ13，ｐ14またはｐ15に入射する。同様に，撮像レンズ２の瞳領域ａ21，ａ22，ａ23，ａ24またはａ25を通過した光線は，マイクロレンズアレイ３によって，光電変換素子ｐ21，ｐ22，ｐ23，ｐ24またはｐ25に入射し，撮像レンズ２の瞳領域ａ31，ａ32，ａ33，ａ34またはａ35を通過した光線は，マイクロレンズアレイ３によって，光電変換素子ｐ31，ｐ32，ｐ33，ｐ34またはｐ35に入射し，撮像レンズ２の瞳領域ａ41，ａ42，ａ43，ａ44またはａ45を通過した光線は，マイクロレンズアレイ３によって，光電変換素子ｐ41，ｐ42，ｐ43，ｐ44またはｐ45に入射し，撮像レンズ２の瞳領域ａ51，ａ52，ａ53，ａ54またはａ55を通過した光線は，マイクロレンズアレイ３によって，光電変換素子ｐ51，ｐ52，ｐ53，ｐ54またはｐ55に入射する。このような撮像レンズ２の瞳領域ａ11からａ15，ａ21からａ25，ａ31からａ35，ａ41からａ45およびａ51からａ55と，光電変換素子群７の光電変換素子ｐ11からｐ15，ｐ21からｐ25，ｐ31からｐ35，ｐ41からｐ45およびｐ51からｐ55と，の関係は，特定の光電変換素子群７に限らず，撮像素子５に含まれるすべての光電変換素子群７について成立する。このように，マイクロレンズアレイ３は，光電変換素子群７を構成する複数の光電変換素子６のうち，被写体からの光線が通過する撮像レンズ２の瞳位置に対して相対的に同一位置に存在する光電変換素子６に光線を入射させるものである。
【００３３】
図８は，撮像素子５に含まれる光電変換素子６とマイクロレンズアレイ３に含まれるマイクロレンズ４との対応関係を示すもので，図４に対応している。
【００３４】
この実施例では，撮像素子５にライブビュー撮像を行わせる場合には，光電変換素子群７を構成する複数の光電変換素子６のうち，相対的に同一位置に存在する光電変換素子６から得られる信号が撮像素子５から出力される。たとえば，図８にハッチングで示すように，図７に符号ｐ44で示した光電変換素子６から得られる信号が撮像素子５の出力信号となる。符号ｐ44で示した光電変換素子６でなく，その他の光電変換素子６でもよいし，相対的に同一位置に存在する光電変換素子６であれば，隣接したまたは隣接していない複数個の光電変換素子６から得られる信号が撮像素子５の出力信号となってもよい。なお，通常は，図７の符号ｐ33（レンズの中心）で示した光電変換素子６から得られる信号を撮像素子５の出力信号として使用する。
【００３５】
図１に戻って，操作装置17に含まれるスイッチにより撮像モードが設定されると，ライブビュー撮像が行なわれ，制御装置（撮像制御手段）20による撮像制御によって，相対的に同一位置に存在する光電変換素子６から得られる信号が撮像素子５の出力信号となる。撮像素子５から出力される画像信号は，アナログ信号処理回路11において，相関二重サンプリング，信号増幅，アナログ／ディジタル変換などのアナログ信号処理が行われ，ディジタル画像データとして出力される。アナログ信号処理回路11から出力されたディジタル画像データは，ディジタル信号処理回路12において，基準レベル調整などのディジタル信号処理が行われる。ディジタル信号処理回路12から出力したディジタル画像データは，画像処理装置13において所定の画像処理が行われる。画像処理装置13から出力されたディジタル画像データは，制御装置20を介して表示装置18に与えられる。
【００３６】
ライトフィールドカメラの場合，異なる視点（異なる方向）からの光線が，光電変換素子群７を構成する複数の光電変換素子６のそれぞれに入射することとなるから，すべての光電変換素子６から得られる信号を用いてライブビュー画像を表示させると，図15に示したように，全体がぼけた画像32となってしまう。この実施例では，特定の視点（特定の方向）からの光線のみが入射する光電変換素子６から得られる信号によって表されるライブビュー画像が，制御装置（表示制御部）20によって，表示装置18の表示画面に表示させられる。図９に示すように，鮮鋭なライブビュー画像30が表示されるようになる。
【００３７】
操作装置17に含まれるシャッタレリーズボタンが押されると，ライブビュー撮像の場合とは異なり，すべての光電変換素子６から得られる信号が撮像素子５の出力信号となる。この出力信号がアナログ信号処理回路11，ディジタル信号処理回路12および画像処理装置13を介してメモリ14に与えられ，一時的に記憶される。ディジタル画像データは，メモリ14から読み取られ，読み取られた画像データは，記録制御装置15によってメモリカード16に多視点画像データとして記録される。メモリカード16には，多視点画像データが記録されるから，撮像された画像のうち，所望部分からボケが取り除かれるリフォーカス処理が行われることにより，所望部分が鮮鋭な画像が再生できるようになる。そのようなリフォーカス処理は例えば画像処理装置13によって行われる。
【００３８】
上述の実施例では，ライブビュー撮像の場合には，すべての撮像素子６ではなく，マイクロレンズ４に割り当てられている複数の光電変換素子６のうち（複数の光電変換素子６の一部），相対的に同一位置に存在する光電変換素子６から得られる信号が撮像素子５の出力信号とされ，その出力信号からライブビュー画像が生成されている。しかしながら，すべての撮像素子６から得られる画像信号をそのまま撮像素子５の出力信号とし，その出力信号から変換されたすべてのディジタル画像データをメモリ14に一時的に記憶し，メモリ14から読み取る際に，マイクロレンズアレイ３の相対的に同一位置に存在する光電変換素子６から出力された画像データを読み取り，読み取られた画像データ（信号）によって表わされるライブビュー画像が表示装置18の表示画面に表示されるようにしてもよい。
【００３９】
図10は，上述のようにして得られたライブビュー画像の一例である。
【００４０】
ライブビュー画像30Ａには，ゴースト31が発生している。撮像レンズ２などで複雑に反射を繰り返した光などによりゴースト31が発生することがある。このように，ライブビュー画像30Ａにゴースト31が発生した場合には，光電変換素子群７を構成する複数の光電変換素子６のうち，相対的に同一位置に存在する光電変換素子６の切り替えを操作装置（切替指示部）17によって指示するようにしてもよい。操作装置17からの指示が制御装置20によって検知されることにより，切り替えられた光電変換素子６（上述のように，メモリ14から読み出す場合でも同様である）から得られる信号によって表されるライブビュー画像が制御装置（表示制御部）20によって表示装置18の表示画面に表示される。
【００４１】
図11は，マイクロレンズ４と光電変換素子群７を構成する複数の光電変換素子６との関係を示すもので，図７に対応している。
【００４２】
上述した実施例では，符号ｐ44で示される光電変換素子６から得られる信号が撮像素子５の出力信号とされ，ライブビュー画像30Ａが生成されている。このような場合において，上述のように，ゴースト31が発生すると，相対的に同一位置に存在する光電変換素子６の切り替えが行われる。この実施例では，ハッチングで示すように，相対的に同一位置に存在する符号ｐ33で示す光電変換素子６から得られる信号が撮像素子５の出力信号とされる。この場合でも図９に示すように，ライブビュー画像はボケが見え無いものとなる。
【００４３】
図12は，変形例を示すもので，マイクロレンズ４と光電変換素子群７を構成する複数の光電変換素子６との関係を示している。
【００４４】
上述の実施例では，マイクロレンズ４に割り当てられている複数の光電変換素子６のうち，信号が読み出される光電変換素子６は一つであるが，図12の上図にハッチングで示すように複数の光電変換素子６（符号ｐ33，ｐ34，ｐ43，ｐ44）から信号を読み出してライブビュー画像が生成されてもよい。このように複数の光電変換素子６のうち，ハッチングで示すように隣接している（隣接していなくともよい）２以上の光電変換素子６から信号が読み出される場合に，図12の下図に示すように，信号が読み出される光電変換素子６の切り替え前後において一部が重複するように光電変換素子６が切り替えられてもよい。
【００４５】
図12の上図のように，複数の光電変換素子６のうち，マイクロレンズアレイ３の相対的に同一位置に存在する隣接している光電変換素子から得られる信号を組み合わせる，あるいは選択するように制御装置（信号演算手段）20が行なってもよい。その場合には，制御装置20により組み合わされた，あるいは選択された信号によって表されるライブビュー画像が制御装置20によって表示装置18の表示画面に表示させられることとなろう。
【００４６】
また，被写体の空間周波数が低いかがどうかを制御装置（第１の判定手段）20において判定し（撮像素子５から出力される信号にもとづいて判定できる），被写体の空間周波数が低いと判定されたことにより光電変換素子６から得られる信号の組み合わせを行なわせるようにしてもよい。
【００４７】
さらに，操作装置17に含まれている撮影モードの切り替えスイッチ（切替手段）により撮影モードが切り替わった場合に（たとえば，風景撮影モードに切り替わった場合に），光電変換素子６から得られる信号の組み合わせ，または選択が行なわれるようにしてもよい。
【００４８】
さらに，被写体輝度がしきい値以下かどうかを制御装置（第２の判定手段）20において判定し，被写体輝度がしきい値以下と判定されたことにより，光電変換素子６から得られる信号の組み合わせ，または選択が行なわれるようにしいてもよい。
【００４９】
上述の信号の組み合わせ，選択は，操作装置17に十字キー，タッチセンサなどを設け，これらの十字キー，タッチセンサなどを用いて信号を得る光電変換素子６を指示するようにしてもよいし，操作装置17にプッシュボタンを設け，単にプッシュボタンを押すことにより，信号を得る光電変換素子６をランダムに切り替えるようにしてもよい。
【００５０】
図13は，撮像モードが設定された場合のライトフィールドカメラ１の処理手順を示すフローチャートである。
【００５１】
撮像モードが設定されると，絞り（図示略）が開放とされ，被写体がライブビュー撮像される（ステップ41）。つづいて，上述のように光電変換素子群７を構成する複数の光電変換素子６のうち，相対的に同一位置に存在する光電変換素子６が決められる（ステップ42）。もちろん，あらかじめ決められていてもよい。決められた光電変換素子６から出力される信号が撮像素子５の出力信号とされ，その出力信号がアナログ信号処理回路11においてゲインアップ処理される（ステップ43）。ゲインアップされた信号にもとづいて上述のようにライブビュー画像が表示装置18の表示画面に表示されるようになる（ステップ44）。
【００５２】
図14は，撮像モードが設定された場合のライトフィールドカメラ１の他の処理手順を示すフローチャートである。
【００５３】
開放絞り値で被写体が撮像され（ステップ51），撮像素子５のすべての光電変換素子６（記録に使用されない光電変換素子６は除かれる）から出力された多視点画像データが上述のようにメモリ14に記憶される（ステップ52）。つづいて，メモリ14に記録された画像データのうち，上述のようにライブビュー画像の表示に利用される画像データが決められる（ステップ53）。上述のように，マイクロレンズ４に割り当てられている複数の光電変換素子６のうち，相対的に同一位置に存在する光電変換素子６から得られる画像データが読み取られることとなる。読み取られた画像データについて，画像処理装置13においてゲインアップ処理が行われ（ステップ55），ライブビュー画像が表示装置18の表示画面に表示されることとなる。
【符号の説明】
【００５４】
１  ライトフィールドカメラ（撮像装置）
２  撮像レンズ
３  マイクロレンズアレイ
５  撮像素子
14  メモリ
17  操作装置（切替指示部，切替手段）
20  制御装置（表示制御部，信号演算手段，第１の判定手段，第１の演算制御手段，第２の演算制御手段，第２の判定手段，第３の演算制御手段，撮像制御手段）
【図１】
2015186188.tif 000003
【図２】
2015186188.tif 000004
【図３】
2015186188.tif 000005
【図４】
2015186188.tif 000006
【図５】
2015186188.tif 000007
【図６】
2015186188.tif 000008
【図７】
2015186188.tif 000009
【図８】
2015186188.tif 000010
【図９】
2015186188.tif 000011
【図１０】
2015186188.tif 000012
【図１１】
2015186188.tif 000013
【図１２】
2015186188.tif 000014
【図１３】
2015186188.tif 000015
【図１４】
2015186188.tif 000016
【図１５】
2015186188.tif 000017