(57)【要約】【課題】ピントが合っていないことをユーザが容易に認識することができる画像処理装置を提供する。【解決手段】デジタルカメラ１００のフォーカシング領域４０２は複数の一部信号表示領域４０３からなり、各一部信号表示領域４０３が分割された複数の分割領域５０１〜５０４の各々には、各分割画素２００における各像信号のうち一部の像信号が合成された合成信号に基づいて形成されるピント調整用画像が表示される。【選択図】図５
2016212178.tif 000002
【特許請求の範囲】
【請求項１】
マニュアルフォーカスによって撮影光学系の焦点を調整し、前記撮影光学系からの光束を分割し、前記分割された各光束を各信号に変換し、前記変換された信号を合成して被写体画像を形成する画像処理装置であって、
前記被写体画像を表示するための撮像領域を有する表示手段を備え、
前記撮像領域は前記撮影光学系の焦点を調整するために用いられる焦点調整領域を含み、
前記焦点調整領域は複数の一部信号表示領域からなり、
各前記一部信号表示領域は複数の小領域に分割され、
各前記小領域には前記変換された信号のうち一部の信号に基づいて形成される焦点調整用画像が表示され、
互いに隣接する前記小領域のそれぞれに表示される前記焦点調整用画像は、互いに異なる前記一部の信号に基づいて形成されることを特徴とする画像処理装置。
【請求項２】
各前記小領域には前記変換された信号のうち一部の信号を合成した合成信号に基づいて形成される焦点調整用画像が表示され、
前記互いに隣接する小領域のそれぞれに表示される焦点調整用画像は、互いに異なる前記合成信号に基づいて形成されることを特徴とする請求項１記載の画像処理装置。
【請求項３】
各前記小領域には前記変換された信号を合成することなく、前記変換された信号のうち一部の信号に基づいて形成される焦点調整用画像が表示され、
前記互いに隣接する小領域のそれぞれに表示される焦点調整用画像は、互いに異なる前記一部の信号に基づいて形成されることを特徴とする請求項１記載の画像処理装置。
【請求項４】
前記撮像領域のうち前記焦点調整領域を除く領域には、前記変換された信号を欠けることなく合成して形成された前記被写体画像が表示されることを特徴とする請求項１乃至３のいずれか１項に記載の画像処理装置。
【請求項５】
前記撮像領域に表示される前記被写体画像の明るさをゲイン値によって制御するゲイン制御手段を更に備え、
前記ゲイン制御手段は、前記焦点調整領域及び前記焦点調整領域を除く領域のそれぞれに対して異なるゲイン値を用いて前記撮像領域に表示される被写体画像の明るさを制御することを特徴とする請求項１乃至４のいずれか１項に記載の画像処理装置。
【請求項６】
前記焦点調整領域の大きさ、形状、及び位置をユーザが設定可能な設定手段を更に備えることを特徴とする請求項１乃至５のいずれか１項に記載の画像処理装置。
【請求項７】
前記撮影光学系からの光束を３つ以上に分割する分割手段を更に備えることを特徴とする請求項１乃至６のいずれか１項に記載の画像処理装置。
【請求項８】
マニュアルフォーカスによって撮影光学系の焦点を調整し、前記撮影光学系からの光束を分割し、前記分割された各光束を各信号に変換し、前記変換された信号を合成して被写体画像を形成する画像処理装置の制御方法であって、
前記被写体画像を表示するための撮像領域を有する表示ステップを有し、
前記撮像領域は前記撮影光学系の焦点を調整するために用いられる焦点調整領域を含み、
前記焦点調整領域は複数の一部信号表示領域からなり、
各前記一部信号表示領域は複数の小領域に分割され、
各前記小領域には前記変換された信号のうち一部の信号に基づいて形成される焦点調整用画像が表示され、
互いに隣接する前記小領域のそれぞれに表示される前記焦点調整用画像は、互いに異なる前記一部の信号に基づいて形成されることを特徴とする画像処理装置の制御方法。
【請求項９】
マニュアルフォーカスによって撮影光学系の焦点を調整し、前記撮影光学系からの光束を分割し、前記分割された各光束を各信号に変換し、前記変換された信号を合成して被写体画像を形成する画像処理装置の制御方法をコンピュータに実行させるプログラムであって、
前記画像処理装置の制御方法は、
前記被写体画像を表示するための撮像領域を有する表示ステップを有し、
前記撮像領域は前記撮影光学系の焦点を調整するために用いられる焦点調整領域を含み、
前記焦点調整領域は複数の一部信号表示領域からなり、
各前記一部信号表示領域は複数の小領域に分割され、
各前記小領域には前記変換された信号のうち一部の信号に基づいて形成される焦点調整用画像が表示され、
互いに隣接する前記小領域のそれぞれに表示される前記焦点調整用画像は、互いに異なる前記一部の信号に基づいて形成されることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置及びその制御方法、並びにプログラムに関し、特に、マニュアルフォーカスを実行可能な画像処理装置及びその制御方法、並びにプログラムに関する。
【背景技術】
【０００２】
画像処理装置としてのデジタルカメラでは、被写体にピントを合わせる際、ユーザが直接ピント調整を行うマニュアルフォーカス、又はデジタルカメラが自動でピント調整を行うオートフォーカスのいずれかが行われる。オートフォーカスのピント調整では、例えば、像面位相差方式が用いられる。像面位相差方式では、例えば、撮像用画素群及び焦点検出用画素群の各々が設けられたデジタルカメラにおいて、当該デジタルカメラのレンズを透過した光束が分割（瞳分割）される。デジタルカメラは分割された各光束に基づいて撮像用画素群及び焦点検出用画素群の各々を用いて一対の被写体画像を形成する。さらに、デジタルカメラは焦点検出用画素群を用いて形成された一対の被写体画像の位相差に基づいてレンズのデフォーカス量を算出する（例えば、特許文献１参照）。また、撮像用画素群及び焦点検出用画素群をそれぞれ設けることなく、各画素に２つのフォトダイオードを設ける像面位相差方式も知られている。この像面位相差方式では、当該２つのフォトダイオードの各々を用いて形成される各被写体画像の位相差に基づいてレンズのデフォーカス量を算出する（例えば、特許文献２参照）。
【０００３】
像面位相差方式は、マニュアルフォーカスでピント調整を行う際にも用いられる。このとき、デジタルカメラは、被写体画像を表示する表示部が、マニュアルフォーカスのピント調整を行うためのピント調整領域を有し、例えば、ピント調整領域では被写体画像を上下に分割した分割画像が表示される。このピント調整領域では、被写体に対してピントが合わないと分割画像が左右にずれて表示され、被写体に対してピントが合うと分割画像がずれることなく表示される。ピント調整領域における各分割画像は、上記像面位相差方式によって得られる一対の被写体画像に基づいて生成される（例えば、特許文献３参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０００−１５６８２３号公報
【特許文献２】特開２００１−０８３４０７号公報
【特許文献３】特開２００９−１４７６６５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、ピント調整領域に上記分割画像を用いた場合、ピントが合っていないことをユーザが容易に認識することができない場合がある。例えば、ピント調整領域において目印となる被写体画像が上下に分割されない、若しくは上下に分割されたときの境目が分かりにくいとき、ユーザは各分割画像のずれが解消したことを認識することができない。その結果、ピントが合っていないことをユーザが認識することができない。
【０００６】
本発明の目的は、ピントが合っていないことをユーザが容易に認識することができる画像処理装置及びその制御方法、並びにプログラムを提供することにある。
【課題を解決するための手段】
【０００７】
上記目的を達成するために、本発明の画像処理装置は、マニュアルフォーカスによって撮影光学系の焦点を調整し、前記撮影光学系からの光束を分割し、前記分割された各光束を各信号に変換し、前記変換された信号を合成して被写体画像を形成する画像処理装置であって、前記被写体画像を表示するための撮像領域を有する表示手段を備え、前記撮像領域は前記撮影光学系の焦点を調整するために用いられる焦点調整領域を含み、前記焦点調整領域は複数の一部信号表示領域からなり、各前記一部信号表示領域は複数の小領域に分割され、各前記小領域には前記変換された信号のうち一部の信号に基づいて形成される焦点調整用画像が表示され、互いに隣接する前記小領域のそれぞれに表示される前記焦点調整用画像は、互いに異なる前記一部の信号に基づいて形成されることを特徴とする。
【発明の効果】
【０００８】
本発明によれば、ピントが合っていないことをユーザが容易に認識することができる。
【図面の簡単な説明】
【０００９】
【図１】本発明の実施の形態に係る画像処理装置としてのデジタルカメラの構成を概略的に示すブロック図である。
【図２】図１における撮像部の撮像素子に設けられる分割画素の構成を示す図であり、図２（ａ）は分割画素の平面図であり、図２（ｂ）は分割画素の側面図である。
【図３】図２の分割画素で実行される像信号の合成を説明するための図であり、図３（ａ）は各分割画素で光電変換された像信号を示し、図３（ｂ）は全ての像信号の合成を示し、図３（ｃ）は一部の像信号の合成を示し、図３（ｄ）は一部の像信号の合成を示す。
【図４】図１の表示部に表示される撮像領域の構成を説明するための図である。
【図５】図４における一部信号表示領域の構成を説明するための図である。
【図６】図５の一部信号表示領域の変形例の構成を説明するための図である。
【発明を実施するための形態】
【００１０】
以下、本発明の実施の形態を図面を参照しながら詳述する。
【００１１】
本実施の形態では、画像処理装置としてのデジタルカメラに本発明を適用した場合について説明するが、本発明の適用先はデジタルカメラに限られず、マニュアルフォーカスを実行可能な画像処理装置であれば本発明を適用することができる。
【００１２】
図１は、本発明の実施の形態に係る画像処理装置としてのデジタルカメラ１００の構成を概略的に示すブロック図である。
【００１３】
図１において、デジタルカメラ１００は、撮影レンズ１０１（撮影光学系）、シャッター１０２、撮像部１０３、画像処理部１０４、システム制御部１０５、不揮発性メモリ１０６、システムメモリ１０７、メモリ制御部１０８、及びメモリ１０９を備える。また、デジタルカメラ１００は、Ｄ／Ａ変換器１１０、表示部１１１、操作部１１２、及び記録媒体Ｉ／Ｆ１１３を備える。システム制御部１０５は、撮影レンズ１０１、シャッター１０２、撮像部１０３、画像処理部１０４、不揮発性メモリ１０６、システムメモリ１０７、メモリ制御部１０８、メモリ１０９、操作部１１２、及び記録媒体Ｉ／Ｆ１１３とそれぞれ接続されている。画像処理部１０４は撮像部１０３及びメモリ制御部１０８とそれぞれ接続され、メモリ制御部１０８は、メモリ１０９、Ｄ／Ａ変換器１１０、及び記録媒体Ｉ／Ｆ１１３と接続され、Ｄ／Ａ変換器１１０は表示部１１１と接続されている。
【００１４】
撮影レンズ１０１はズームレンズ及びフォーカスレンズを含むレンズ群である。本実施の形態では、フォーカスレンズの位置を移動させて被写体に対するピントを調整する。シャッター１０２は絞り機能を有する。撮像部１０３はＣＣＤやＣＭＯＳ等の撮像素子を有し、撮影レンズ１０１を透過した光束を撮像素子によって電気的なアナログ画像信号に光電変換する。本実施の形態における撮像素子には多数の画素が配列されるが、一部の領域において複数の後述する分割画素２００が配列される。また、撮像部１０３は、光電変換されたアナログ画像信号をデジタル画像信号に変換し、変換されたデジタル画像信号を画像処理部１０４に出力する。さらに、撮像部１０３は、変換されたデジタル画像信号に含まれるコントラスト情報等からオートフォーカス（ＡＦ）処理で用いられるＡＦ評価値を算出し、算出されたＡＦ評価値をシステム制御部１０５に出力する。画像処理部１０４は撮像部１０３から出力されたデジタル画像信号に対して所定の画素補間や縮小を行うリサイズ処理等を行って画像データを生成する。また、画像処理部１０４は生成された画像データに対して各種演算処理を行う。さらに、画像処理部１０４は撮像部１０３から出力されたＡＦ評価値等に基づいてＡＦ処理を行う。
【００１５】
システム制御部１０５は、不揮発性メモリ１０６に格納された各種プログラムを実行してデジタルカメラ１００全体を統括的に制御する。例えば、システム制御部１０５は画像処理部１０４による演算処理の演算結果に基づいて露光制御、測距制御を行い、スルー・ザ・レンズ（ＴＴＬ）方式の自動露出（ＡＥ）処理やフラッシュ自動調光発光（ＥＦ）処理等を行う。不揮発性メモリ１０６はフラッシュメモリ等であり、システム制御部１０５で用いられる各種定数及び各種プログラム等を格納する。システムメモリ１０７はＲＡＭ等であり、システムメモリ１０７にはシステム制御部１０５で用いられる定数及び不揮発性メモリ１０６から読み出された各種プログラムが展開される。メモリ制御部１０８は画像処理部１０４で生成された画像データを取得し、取得された画像データをメモリ１０９に格納する。メモリ１０９は各種画像データ及び表示部１１１に各種画像を表示するための表示用データ等を格納する。Ｄ／Ａ変換器１１０は、メモリ１０９に格納された表示用データをメモリ制御部１０８を介して取得し、取得された表示用データをアナログ信号に変換して表示部１１１に出力する。表示部１１１はＬＣＤ等のディスプレイを含み、Ｄ／Ａ変換器１１０から出力されたアナログ信号に基づいて各種画像を表示する。本実施の形態では、表示部１１１は、ユーザがマニュアルフォーカスを行う際、電子ビューファインダとして用いられ、撮像部１０３で光電変換されたデジタル画像信号に対応する表示用画像データに基づいてスルー画像表示を行う。操作部１１２は各種設定ボタンを含み、ユーザの設定ボタンの操作によってデジタルカメラ１００の各種設定を設定可能である。本実施の形態では、ユーザの操作部１１２の操作により、ユーザが直接ピント調整を行うマニュアルフォーカス、又はデジタルカメラが自動でピント調整を行うオートフォーカスのいずれかの設定が行われる。記録媒体Ｉ／Ｆ１１３はメモリカードやハードディスク等の外部記録媒体１１４とデータ通信を行う。
【００１６】
次に、本実施の形態で用いられる分割画素２００について説明する。
【００１７】
図２は、図１における撮像部１０３の撮像素子に設けられる分割画素２００の構成を示す図であり、図２（ａ）は分割画素２００の平面図であり、図２（ｂ）は分割画素２００の側面図である。なお、分割画素は複数の分割されたフォトダイオード（ＰＤ）を有するが、本実施の形態の分割画素２００は、一例として、分割された４つのＰＤ２０２〜２０５を有することを前提とする。
【００１８】
図２において、分割画素２００はマイクロレンズ２０１及びＰＤ２０２〜２０５を備える。
【００１９】
マイクロレンズ２０１はＰＤ２０２〜２０５と一定の間隔を設けて、当該ＰＤ２０２〜２０５と対向して配置される。マイクロレンズ２０１にはＲ，Ｇ，Ｂのいずれかのカラーフィルタが貼り付けられている。マイクロレンズ２０１は撮影レンズ１０１を透過した光束をＰＤ２０２〜２０５の各々へ向けて分割し、ＰＤ２０２〜２０５の各々は、マイクロレンズ２０１から分割された光束を受光し、受光された光束を像信号に光電変換する。分割画素２００はＰＤ２０２〜２０５の各々で光電変換された各像信号を合成した合成信号を画像処理部１０４に出力する。これにより、画像処理部１０４は当該合成信号に基づいて被写体画像を形成する。ここで、被写体に対してピント調整を行う際、合成される全ての像信号の位相が一致すると、被写体に対してピントが合った状態（以下、「合焦」という。）となり、表示部１１１に鮮明な被写体画像が表示される。一方、合成されるいずれかの像信号の位相が一致しないと、合焦しないので、表示部１１１にはぼやけた被写体画像が表示される。被写体画像のぼやけ方は合成される像信号の位相のずれ量に応じて異なる。
【００２０】
また、分割画素２００はＰＤ２０２〜２０５の各々で光電変換された各像信号を様々な組み合わせで合成可能である。図３（ａ）に示す４つの分割画素のうち、Ｒに対応する（マイクロレンズ２０１にＲのカラーフィルタが貼り付けられている）分割画素２００において、分割された光束を各像信号ＲＡ〜ＲＤに光電変換した場合、例えば、Ｒに対応する分割画素２００は、図３（ｂ）に示すように、組となる像信号ＲＡ〜ＲＤを全て合成して合成信号Ｒを生成する。また、Ｒに対応する分割画素２００は、組となる像信号ＲＡ〜ＲＤの一部を合成して、図３（ｃ）に示す、左右に一対をなす合成信号ＲＬ，ＲＲや、図３（ｄ）に示す、上下に一対をなす合成信号ＲＵ，ＲＤを生成する。具体的に、Ｒに対応する分割画素２００は、像信号ＲＡ及び像信号ＲＣを合成して合成信号ＲＬを生成し、像信号ＲＢ及び像信号ＲＤを合成して合成信号ＲＲを生成する。また、Ｒに対応する分割画素２００は、像信号ＲＡ及び像信号ＲＢを合成して合成信号ＲＵを生成し、像信号ＲＣ及び像信号ＲＤを合成して合成信号ＲＤを生成する。合成信号ＲＬ，ＲＲ，ＲＵ，ＲＤの各々は、合成された像信号の組合せが異なるので、合成信号ＲＬ，ＲＲ，ＲＵ，ＲＤの各々に基づいて形成される画像の態様は異なる。なお、図３（ａ）に示すＧに対応する分割画素２００やＢに対応する分割画素２００も、Ｒに対応する分割画素２００と同様に、各像信号を様々な組み合わせで各種合成信号を合成可能である。
【００２１】
デジタルカメラ１００では、マニュアルフォーカスを行う際、ピント調整を行うためのフォーカシング領域が表示部１１１に表示される。ところで、従来のデジタルカメラでは、当該フォーカシング領域に、被写体に対してピントが合わないと左右にずれて表示されるように分割された分割画像が用いられることがある。この場合、ピントが合っていないことをユーザが容易に認識することができない場合がある。例えば、フォーカシング領域において目印となる被写体画像が上下に分割されない、若しくは上下に分割されたときの境目が分かりにくいとき、ユーザは各分割画像のずれが解消したことを認識することができない。その結果、ピントが合っていないことをユーザが認識することができない。また、ＡＦ機能が搭載される以前に行われていたように、被写体画像を多数の小領域に分割し、各小領域においてプリズム等によって分割された光束から画像を形成する場合がある。この場合、ピントが合っていないと、各小領域における画像のぼやけ方が異なるために被写体画像がモザイク状に表示される。したがって、ユーザはピントが合っていないことを比較的容易に認識することができるが、デジタルカメラ１００にプリズム等の各種装置を設ける必要がある。
【００２２】
これに対応して、本実施の形態では、表示部１１１にフォーカシング領域において各分割画素２００の各像信号の一部を用いてピント調整用画像を形成する。
【００２３】
図４は、図１の表示部１１１に表示される撮像領域４０１の構成を説明するための図である。
【００２４】
図４において、撮像領域４０１は、マニュアルフォーカスのピント調整を行うために用いられるフォーカシング領域４０２（焦点調整領域）を含み、各分割画素２００から出力される合成信号に基づく画像を表示する。撮像領域４０１のうちフォーカシング領域４０２を除く領域では、組となる像信号を欠けることなく合成された合成信号Ｒ，Ｇ，Ｂ（例えば、図３（ｂ））に基づいた画像が表示される。フォーカシング領域４０２は多数の一部信号表示領域４０３によって構成される。各一部信号表示領域４０３は、複数、例えば、図５に示すように、４つに分割された三角形状の分割領域（小領域）５０１〜５０４を含む。分割領域５０１〜５０４の各々では、各分割画素２００において一対をなす合成信号（例えば、図３（ｃ）及び図３（ｄ）に示すような左右又は上下に一対をなす合成信号）のうちの一部の合成信号のみに基づいて形成されるピント調整用画像（焦点調整用画像）が表示される。例えば、分割領域５０１では上下に一対をなす合成信号ＲＵ，ＲＤ（図３（ｄ））のうち合成信号ＲＵのみに基づくピント調整用画像が表示される。分割領域５０２では上下に一対をなす合成信号ＲＵ，ＲＤのうち合成信号ＲＤのみに基づくピント調整用画像が表示される。また、分割領域５０３では左右に一対をなす合成信号ＲＬ，ＲＲ（図３（ｃ））のうち合成信号ＲＬのみに基づくピント調整用画像が表示される。分割領域５０４では左右に一対をなす合成信号ＲＬ，ＲＲのうち合成信号ＲＲのみに基づくピント調整用画像が表示される。すなわち、本実施の形態では、互いに隣接する分割領域５０１〜５０４のそれぞれに表示されるピント調整用画像は、互いに異なる合成信号に基づいて形成される。分割領域５０１〜５０４の各々では、被写体に対して合焦する場合、各ピント調整用画像は鮮明に表示される。一方、被写体に対して合焦しない場合、各ピント調整用画像はぼやける。さらに、分割領域５０１〜５０４の各々では異なる合成信号が用いられるので、分割領域５０１〜５０４の各々に表示されるピント調整用画像の態様が異なる。その結果、フォーカシング領域４０２では多数のぼやけ方が異なるピント調整用画像からなるモザイク状の画像が表示される。
【００２５】
本実施の形態によれば、フォーカシング領域４０２は複数の一部信号表示領域４０３からなる。各一部信号表示領域４０３が分割された複数の分割領域５０１〜５０４の各々には、各分割画素２００における各像信号のうち一部の像信号が合成された合成信号に基づいて形成されるピント調整用画像が表示される。分割領域５０１〜５０４のそれぞれに表示されるピント調整用画像は、互いに異なる合成信号に基づいて形成される。これにより、フォーカシング領域４０２では多数のぼやけ方が異なるピント調整用画像からなるモザイク状の画像が表示され、目印となる被写体画像を上下に分割することなくピントが合っていないことをユーザが認識することができる。すなわち、ピントが合っていないことをユーザが容易に認識することができる。また、ピント調整用画像は各分割画素２００における各像信号のうち一部の像信号が合成された合成信号に基づいて形成される。これにより、モザイク状の画像を生成するためにプリズム等を備える必要を無くすことができる。
【００２６】
また、本実施の形態によれば、各分割画素２００における各像信号のうちの一部の像信号を合成した一対をなす合成信号のいずれか一方に基づいて形成されるピント調整用画像が表示される。ここで、被写体に対して合焦しない場合、合成された各像信号の位相が一致しないので、合成信号に基づいて形成される画像はぼやけ、位相のずれ量に応じて当該画像のぼやけ方が異なる。これにより、被写体に対して合焦しない場合、各合成信号に基づいてフォーカシング領域４０２に多数のぼやけ方が異なるピント調整用画像からなるモザイク状の画像を確実に表示することができる。
【００２７】
さらに、本実施の形態によれば、撮像領域４０１のうちフォーカシング領域４０２を除く領域には、変換された像信号を欠けることなく合成された合成信号Ｒ，Ｇ，Ｂに基づいて形成された被写体画像が表示される。これにより、ユーザは被写体を明確に確認することができる。
【００２８】
以上、本発明について実施の形態を用いて説明したが、本発明は上述した実施の形態に限定されるものではない。
【００２９】
例えば、フォーカシング領域４０２及び当該フォーカシング領域４０２を除く領域のそれぞれに対して異なるゲイン値を用いて各領域に表示される画像の明るさを制御してもよい（ゲイン制御手段）。
【００３０】
フォーカシング領域４０２で用いられる合成信号、例えば、合成信号ＲＵは、当該フォーカシング領域４０２を除く領域で用いられる合成信号Ｒより、合成される像信号の数が少ない。このため、フォーカシング領域４０２で表示される画像は当該フォーカシング領域４０２を除く領域で表示される画像より暗く表示される場合がある。これに対応して、フォーカシング領域４０２では、当該フォーカシング領域４０２を除く領域より大きいゲイン値を用いて表示される画像の明るさを制御する。これにより、フォーカシング領域４０２及び当該フォーカシング領域４０２を除く領域の各々において明るさを個別に制御することができ、もって、領域毎に明るさが異なる不自然な表示が行われるのを防止することができる。
【００３１】
また、本実施の形態では、フォーカシング領域４０２の大きさ、形状、及び位置をユーザが設定してもよい。これにより、マニュアルフォーカスにおけるユーザの利便性を向上することができる。
【００３２】
本実施の形態では、分割画素２００が４つのＰＤ２０２〜２０５を備え、マイクロレンズ２０１からの光束が４つに分割されたが、分割画素２００が少なくとも３つのＰＤを備え、マイクロレンズ２０１からの光束が３つ以上に分割されればよい。これにより、分割された各光束に基づいて３種以上の像信号が生成され、生成された３種以上の像信号を組み合わせて、態様の異なる画像を表示するための合成信号を多種生成することができる。その結果、フォーカシング領域の各分割領域へ互いに異なる合成信号を容易に割り当てることができ、被写体に対して合焦しない場合、ぼやけ方が異なる各分割領域のピント調整用画像からなるモザイク状の画像を容易に得ることができる。
【００３３】
本実施の形態では、分割領域５０１〜５０４の形状は三角形に限定されず、例えば、図６の分割領域６０１〜６０４のように矩形であってもよい。また、分割領域６０１〜６０４には、各像信号を合成することなく、各分割画素２００における各像信号のうちの一部の像信号に基づいてピント調整用画像が表示され、互いに隣接する分割領域に表示されるピント調整用画像は互いに異なる一部の像信号に基づいて形成されてもよい。具体的に、分割領域６０１では像信号ＲＡ、ＧＡ、ＢＡのみに基づいたピント調整用画像が表示され、分割領域６０２では像信号ＲＢ、ＧＢ、ＢＢのみに基づいたピント調整用画像が表示される。また、分割領域６０３では像信号ＲＣ、ＧＣ、ＢＣのみに基づいたピント調整用画像が表示され、分割領域６０４では像信号ＲＤ、ＧＤ、ＢＤのみに基づいたピント調整用画像が表示される。ここで、被写体に対して合焦しない場合、各像信号の位相が一致しないので、互いに隣接する分割領域６０１〜６０４のそれぞれに表示されるピント調整用画像は、連続しない不自然な画像として表示される。これにより、被写体に対して合焦しない場合、各像信号を合成することなく、連続しない不自然な画像からなるピント調整用画像を表示することができ、ピントが合っていないことをユーザが容易に認識することができる。
【００３４】
本発明は、上述の実施の形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読み出して実行する処理でも実現可能である。また、本発明は、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
【符号の説明】
【００３５】
１００  デジタルカメラ
１０１  撮影レンズ
４０１  撮像領域
４０２  フォーカシング領域
４０３  一部信号表示領域
５０１〜５０４、６０１〜６０４  分割領域
ＲＡ〜ＲＤ、ＧＡ〜ＧＤ、ＢＡ〜ＢＤ  像信号
Ｒ、ＲＵ、ＲＤ、ＲＬ、ＲＲ、Ｇ、ＧＵ、ＧＤ、ＧＬ、ＧＲ、Ｂ、ＢＵ、ＢＤ、ＢＬ、ＢＲ  合成信号
【図１】
2016212178.tif 000003
【図２】
2016212178.tif 000004
【図３】
2016212178.tif 000005
【図４】
2016212178.tif 000006
【図５】
2016212178.tif 000007
【図６】
2016212178.tif 000008