(57)【要約】【課題】画像のプレビュー性を低下させること無く、ピントを視覚的に容易に把握できるようにする。【解決手段】撮像素子１２の受光した光に基づいて生成した表示用画像データＤ２に基づいた画像を表示部１９に表示するＤＳＣ１００であって、ピントズレを検出するピント部Ｍ３と、ピントズレに応じてピント領域Ａからずれた位置のズレ画像ＳＩを表示用画像のピント領域Ａに対して相加平均もしくは加重平均した合成画像を表示部１９に表示させる表示制御部Ｍ２と、を備える。【選択図】図４
2011119930.tif 000002
【特許請求の範囲】
【請求項１】
撮像素子にて受光した光に基づいて画像データを生成する撮像装置であって、
画像を表示する表示部と、
ピントズレを検出するピント部と、
上記画像データの画像の少なくとも一部の領域の画像と上記ピントズレに応じて該領域からずれた位置の画像とを重畳合成した合成画像を上記表示部に表示させる表示制御部と、
を具備することを特徴とする撮像装置。
【請求項２】
上記表示制御部は、上記画像データの画像と上記ずれた位置の画像との少なくとも一方の色を変更した上記合成画像を上記表示部に表示させる請求項１記載の撮像装置。
【請求項３】
上記表示制御部は、上記合成画像とともに上記領域を囲むようにピントが合っているときとずれているときとで異なる枠を上記表示部に表示させる請求項１又は請求項２に記載の撮像装置。
【請求項４】
上記表示制御部は、ピントが合っているときは上記合成画像とともに上記領域を囲む枠を上記表示部に表示させ、ピントがずれているときは上記領域を囲む枠を上記表示部に表示させない請求項１〜請求項３の何れか１項に記載の撮像装置。
【請求項５】
上記ピント部は、予め設定されたピント領域におけるピントズレを検出し、
上記表示制御部は、上記ピント領域の画像と上記ピントズレに応じて上記ピント領域からずれた位置の画像とを上記ピント領域に重複表示した合成画像を上記表示部に表示させる請求項１〜請求項４の何れか１項に記載の撮像装置。
【請求項６】
ユーザーの操作を受付ける操作部を更に備え、
上記表示制御部は、上記操作部にて行われる所定の操作に応じて上記領域を上記画像の領域内に複数設定する請求項５に記載の撮像装置。
【請求項７】
撮像素子にて受光した光に基づいて生成した画像データに基づいた画像を表示部に表示する撮像方法であって、
ピントズレを検出するピント工程と、
上記画像データの画像の少なくとも一部の領域の画像と上記ピントズレに応じて該領域からずれた位置の画像とを重畳合成した合成画像を上記表示部に表示させる表示制御工程と、
を具備することを特徴とする撮像方法。
【請求項８】
撮像素子にて受光した光に基づいて生成した画像データに基づいた画像を表示部に表示する機能をコンピューターに実現させるための撮像プログラムであって、
ピントズレを検出するピント機能と、
上記画像データの画像の少なくとも一部の領域の画像と上記ピントズレに応じて該領域からずれた位置の画像とを重畳合成した合成画像を上記表示部に表示させる表示制御部と、
を具備することを特徴とする撮像プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は撮像装置、撮像方法および撮像プログラムに関し、特に、撮像素子の受光した光に基づいて生成した画像を表示部に表示する撮像装置、撮像方法および撮像プログラムに関する。
【背景技術】
【０００２】
フィルム式カメラのユーザーには、マニュアルで所望の焦点にピントを合致させた画像を撮影したいというユーザーが存在する。このようなユーザーは、デジタルスチルカメラ（以下、ＤＳＣと略す）のユーザーにも存在し、ＤＳＣでマニュアルでピントを調節したいという要望が存在する。しかしながら、ピントの合致度合は確認が難しく、ＤＳＣが撮像した画像に基づいて液晶ディスプレイ等の表示部に表示したプレビュー画像に基づいてピントの合致状況を把握するのは困難である。このような困難性に対処するために、ピントのズレ量を検出し、このズレ量に基づいたスプリットイメージを撮像された画像とともに表示する技術が開示されている（特許文献１，２参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００１−３０９２１０号公報
【特許文献２】特開平９−２１４８１３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述の特許文献１，２の技術は、撮像された画像をスプリットイメージと置き換えて表示部に表示しているため、分割された部位において画像が見づらくなっていた。
本発明は、上記課題に鑑みてなされたもので、画像のプレビュー性の低下を抑制し、ピントを視覚的に容易に把握することが可能な撮像装置、撮像方法および撮像プログラムの提供を目的とする。
【課題を解決するための手段】
【０００５】
上記課題を解決するために、本発明にかかる撮像装置は、撮像素子の受光した光に基づいて生成した画像データに基づいて表示部に画像を表示する撮像装置であって、ピントズレを検出するピント部と、上記画像データの画像の少なくとも一部の領域の画像と上記ピントズレに応じて該領域からずれた位置の画像とを重畳合成した合成画像を上記表示部に表示させる表示制御部と、を具備する構成としてある。
【０００６】
上記撮像素子は、受光面で受光した光の強弱に応じた電気信号を生成可能なデバイスであればいかなるものであってもよく、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（complementary metal oxide semiconductor）センサーが例示される。上記表示部は、画像データに基づいて画像を表示することができればよく、液晶ディスプレイや有機ＥＬディスプレイ、プラズマディスプレイ、ブラウン管ディスプレイ等が例示される。上記少なくとも一部の領域は、上記画像の全部であってもよいし、上記画像の一部であってもよいし、上記領域が複数であってもよい。領域が複数の場合は、領域ごとに検出されたピントズレに応じてそれぞれに合成画像を生成して表示してもよいし、複数の領域の全てにおける総合的なピントズレに応じて合成画像を生成して表示してもよいし、複数の領域の中の一部の領域における総合的なピントズレに応じて合成画像を生成して表示してもよい。
【０００７】
上記合成画像の上記領域には、上記画像データに基づいてほんらい上記領域に表示されるべき画像と上記ピントズレに応じて該領域からずれた位置の画像とがともに表示されており、これら画像は上記ピントズレに応じたズレ量で互いにずれている。従って、上記ピントズレが０で有る場合を除いて、上記領域の画像は２重になっている。撮像装置のユーザーは、上記合成画像の上記領域における画像のズレ量を視認して、ピントズレを直感的に把握することができる。また、本来上記領域に表示されるべき画像は、上記ピントズレに応じて該領域からずれた位置の画像が重複されているものの表示されているため、上記領域における画像を含めた全体の構成の把握を妨げることがない。
【０００８】
本発明の選択的な一側面として、上記表示制御部は、上記画像データの画像と上記ずれた位置の画像との少なくとも一方の色を変更した上記合成画像を上記表示部に表示させる構成としてもよい。各画像で色を異ならせることにより、オリジナルの画像と重畳された画像とを区別しやすくなるため、画像が２重表示された部位の視認性が向上する。
【０００９】
本発明の選択的な一側面として、上記表示制御部は、上記合成画像とともに上記領域を囲ようにピントが合っているときとずれているときとで異なる枠を上記表示部に表示させる構成としてもよい。該構成によれば、ピントの合焦／非合焦が明確になり、ユーザーがピントをあわせたりずらしたりする際の明確かつ直感的な指標を提供できる。
【００１０】
本発明の選択的な一側面として上記表示制御部は、ピントが合っているときは上記合成画像とともに上記領域を囲む枠を上記表示部に表示させ、ピントがずれているときは上記領域を囲む枠を上記表示部に表示させない構成としてもよい。該構成によれば、ピントの合焦／非合焦が明確になり、ユーザーがピントをあわせたりずらしたりする際の明確かつ直感的な指標を提供できるとともに、ピントが合っている状態で画像観察の障害になる可能性のある枠を消去することにより、ユーザービリティを向上できる。
【００１１】
本発明の選択的な一側面として、上記ピント部は、予め設定されたピント領域におけるピントズレを検出し、上記表示制御部は、上記ピント領域の画像と上記ピントズレに応じて上記ピント領域からずれた位置の画像とを上記ピント領域に重複表示した合成画像を上記表示部に表示させる構成としてもよい。２重表示の行われる上記領域をピント領域とすることにより、ピントズレと２重表示との対応関係が明確になり、操作性が向上する。
【００１２】
本発明の選択的な一側面として、ユーザーの操作を受付ける操作部を更に備え、上記表示制御部は、上記操作部にて行われる所定の操作に応じて上記領域を上記画像の領域内に複数設定する構成としてもよい。画像に複数の被写体が含まれる場合に、被写体ごとのピント確認を、撮像装置を移動させること無く行うことができる。
【００１３】
上述した撮像装置は、他の機器に組み込まれた状態で実施されたり他の方法とともに実施されたりする等の各種の態様を含む。また、本発明は上記撮像装置を備える撮像システム、上述した装置の構成に対応した工程を有する撮像方法、上述した装置の構成に対応した機能をコンピューターに実現させる撮像プログラム、該撮像プログラムを記録したコンピューター読み取り可能な記録媒体、等としても実現可能である。これら撮像システム、撮像システム、撮像方法、撮像プログラム、該プログラムを記録した媒体、の発明も、上述した作用、効果を奏する。むろん、請求項２〜６に記載した構成も、前記システムや前記方法や前記プログラムや前記記録媒体に適用可能である。
【図面の簡単な説明】
【００１４】
【図１】ＤＳＣの構成を示すブロック図である。
【図２】ＤＳＣの外観の一例を示す外観図である。
【図３】撮像処理の流れを示すフローチャートである。
【図４】２重画像の合成についての説明図である。
【図５】ピントとピントズレの対応関係を示す説明図である。
【図６】ピントズレとズレ量との対応関係を示す説明図である。
【図７】表示用画像の全体をピントズレに応じて２重画像にする場合の説明図である。
【図８】ピント領域が複数設定された場合の２重画像の説明図である。
【発明を実施するための形態】
【００１５】
以下、下記の順序に従って本発明の実施形態を説明する。
（１）撮像装置の構成：
（２）撮像処理：
（３）各種変形例：
（４）まとめ：
【００１６】
（１）撮像装置の構成： 
図１は、本発明の一実施形態にかかる撮像装置の構成を示すブロック図である。本実施形態にかかる撮像装置は、デジタルスチルカメラ１００（以下、ＤＳＣ１００と略す）であり、被写体を撮像して生成した画像データに基づいて表示部に画像を表示したり、被写体を撮像して生成した画像データを記憶媒体に保存したりする。同図において、ＤＳＣ１００は、制御部２０および、この制御部２０によって制御される光学系１１と撮像素子１２とアナログフロントエンド１３（ＡＦＥ１３）と画像処理部１４と圧縮部１５とデータ記憶部１６と操作部１８と表示部１９とＶＲＡＭ２１とを備えている。
【００１７】
図１に示す制御部２０は、通信バスで互いに接続されたＣＰＵ２０ａ（演算処理部）とＲＡＭ２０ｂ（揮発性の半導体メモリー）とフラッシュメモリー２０ｃ（不揮発性の半導体メモリー）とを備えている。ＣＰＵ２０ａは、ＲＡＭ２０ｂをワークエリアとして利用しつつフラッシュメモリー２０ｃに記憶されている撮像プログラムを実行することにより、ＤＳＣ１００の全体の動作を制御する。制御部２０で撮像プログラムが実行されることにより撮像処理が行われて、不図示の撮像部Ｍ１や表示制御部Ｍ２やピント部Ｍ３等に対応した機能をＤＳＣ１００が実現することになる。
【００１８】
光学系１１は、不図示のレンズ群や絞り等によって構成されており、被写体の光学像を撮像素子１２の受光面に投射する。レンズ群や絞りは不図示の駆動機構によってレンズ位置や絞り量を調整される。制御部２０は、駆動機構を制御することによってＤＳＣ１００によって撮像される光学像において所望の被写体にピントを合致もしくはピントをずらしたり、撮像される光学像の明るさを調整したりすることができる。
【００１９】
撮像素子１２は、２次元空間に離散的に配置された複数の光電変換素子を備えており、各光電変換素子が光学系１１から投射された光の受光量に応じて光電変換した電荷を電気信号として出力する。撮像素子１２は、例えば、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（complementary metal oxide semiconductor）センサーで構成されており、これらの撮像素子を構成する光電変換素子は格子状やハニカム状の配置になっている。また、撮像素子１２は、光電変換素子の受光面にそれぞれＣ（シアン）、Ｍ（マゼンタ）、Ｙ（イエロー）、Ｇ（グリーン）の補色フィルタやＲ（レッド）、Ｇ（グリーン）、Ｂ（ブルー）の原色フィルタを市松模様配列等で設けることによりカラー画像情報を取り込むことが出来る。むろん、これらのフィルタを用いずに白黒画像情報を取り込んでもよい。
【００２０】
ＡＦＥ１３はＡ／Ｄ変換器を備えており、撮像素子１２から出力される電気信号を量子化してデジタル画像信号に変換する。
画像処理部１４は、ＡＦＥ１３から入力されたデジタル画像信号に対し、１つの画素に対して複数色の情報を持たせるいわゆるデモザイク処理としての画素補間処理、ホワイトバランス補正処理、ＲＧＢからＲＧＢへの３ｘ３の行列演算処理による色再現処理やノイズ除去処理、シャープネス処理、ガンマ補正処理、ＲＧＢ画像データ形成処理等の各種画像処理を行い、各画素がＲ，Ｇ，Ｂの階調値で表現された画像データＤ１を作成する。むろん、画像データＤ１はＲ，Ｇ，Ｂ以外の表色系（例えば、Ｙ，Ｃｂ，Ｃｒなど）の階調値で表現されていてもよい。
【００２１】
また、画像処理部１４は表示部１９に表示するための表示用画像データＤ２を作成する。表示用画像データＤ２は、画像データＤ１についてアスペクト変換や拡大・縮小を行って作成される。なお、後述するように、本実施形態の表示部１９にはＬＣＤ１９ａとＥＶＦ１９ｂの２種類がある。そのため、画像処理部１４は、撮影時のプレビュー画面としてユーザーに選択された方の画面サイズや画素数に合わせてアスペクト変換や拡大・縮小を行い、表示用画像データＤ２を作成する。むろん、双方でプレビュー表示するために、ＬＣＤ１９ａに適合する表示用画像データとＥＶＦ１９ｂに適合する表示用画像データの双方を作成してもよい。画像処理部１４は、作成した表示用画像データＤ２をＶＲＡＭ２１（グラフィックメモリー）に記憶する。
【００２２】
なお、本実施形態のＤＳＣ１００では、制御部２０の制御により所定時間おきにＶＲＡＭ２１の表示用画像データＤ２を更新している。すなわち、撮像素子１２が所定時間おきにカラー画像情報を取得してＡＥＦ１３に出力し、ＡＥＦ１３は入力されたカラー画像情報に基づいて、順次、デジタル画像信号を作成して画像処理部１４に出力する。このデジタル画像信号に基づいて、画像処理部１４は所定時間おきに新たな表示用画像データＤ２を作成してＶＲＡＭ２１に保存する。このようにして所定時間おきに更新されている表示用画像データＤ２を適宜取得して表示部１９に表示することにより、ユーザーが行う撮像範囲の変更などに追随したプレビューを行うことができる。
【００２３】
圧縮部１５は、制御部２０の制御に従って、画像処理部１４の作成した画像データを圧縮して圧縮画像データＤ４を生成する。圧縮形式は、非可逆圧縮ＪＰＥＧ形式や非可逆圧縮ＴＩＦＦ形式のように非可逆圧縮であってもよいし、ＰＮＧ形式や可逆圧縮ＪＰＥＧ形式や可逆圧縮ＴＩＦＦ形式のように可逆圧縮であってもよい。また、圧縮部１５は、画像データを圧縮せずにビットマップ形式で出力してもよい。このようにして作成された圧縮画像データＤ４は、データ記憶部１６に出力される。なお、制御部２０は、圧縮部１５を介さずに、ＡＦＥ１３から出力されるデモザイク前の画像データであるＲＡＷデータをそのままデータ記憶部１６に出力させることもできる。
【００２４】
データ記憶部１６は、例えば、リムーバブルメモリー（着脱可能な記憶媒体）を接続するためのカードスロット（着脱口）や接続されたリムーバブルメモリーに対するデータ読み書きを制御するメモリーコントローラーを備える。むろん、着脱できない固定式の記憶媒体によってデータ記憶部１６を構成してもよい。データ記憶部１６は、制御部２０の制御に従って、圧縮部１５の出力する圧縮画像データＤ４やＡＥＦ１３の出力するＲＡＷデータをリムーバブルメモリーに記憶する。また、データ記憶部１６は、制御部２０の制御によって、リムーバブルメモリーに記憶されている画像データを読み出すこともできる。
【００２５】
表示部１９は、例えば、ＬＣＤ（Liquid Crystal Display）とＬＣＤコントローラーを備えており、ＬＣＤコントローラーは、制御部２０の制御に従ってＬＣＤの表示を制御する。制御部２０は、ＬＣＤコントローラーを介して、各種の設定や画像をＬＣＤに表示することができる。なお、本実施形態においては、表示部１９のＬＣＤとして、ＬＣＤ１９ａとＥＶＦ１９ｂ（Electric View Finder）との２種類を備えている。ＬＣＤ１９ａは、主として撮像結果を確認するために撮影済みの画像を表示する目的で利用されることが多いのに対し、ＥＶＦ１９ｂは光学系１１から入力される光学像をリアルタイムで表示することによって画像の構図やピントを確認するために用いられる。すなわち、ＥＶＦ１９ｂは、フィルム式カメラ等において撮像範囲やピントを確認するためのファインダーの役割を果たす液晶画面である。そのためＥＶＦ１９ｂは、高精細で動きの速い被写体に対応可能な、高温ポリシリコンＬＣＤを利用することが好ましい。また、ＥＶＦ５８は、フィルム式カメラのファインダーに対応する構成であることから、人間の目に近いサイズの小型に形成されている。
【００２６】
操作部１８は、シャッターボタン、露光条件やその他各種の撮影条件を設定するためのダイヤルスイッチ、表示される各種のメニューを操作するための複数の押しボタンスイッチ、ジョグダイヤルなどを備える。なお、操作部１８は押しボタンやダイヤルスイッチで構成する以外に、表示部１９をタッチパネルなどで構成することにより、該タッチパネルに対する操作を操作部１８とすることもできる。
【００２７】
図２は、ＤＳＣ１００の外観の一例を示す外観図である。同図において、上図にはＤＳＣ１００の被写体とは反対側から見た側面図を示し、下図にはＤＳＣ１００の上面図を示してある。
同図において、ＤＳＣ１００は、電源のオンオフを切換えるための電源スイッチ１８ａと、画像を撮像するとともに取得した画像データをリムーバブルメモリーに記憶させる処理を指示するためのシャッターボタン１８ｂと、撮影済みのデジタル画像の再生表示や各種の設定メニューなどを表示するためのＬＣＤ１９ａと、ＬＣＤ１９ａに表示された設定メニューのカーソル等を移動させたり選択したメニュー項目を確定したりするためのカーソル操作キー１８ｄと、撮影前に撮像範囲の画像を表示するためのＥＶＦ１９ｂと、を備えている。また、巻き上げることによりセンサー前に配置されているフォーカルプレーン型のシャッタ装置の開閉動作を行ったり、あるいはシャッターボタンの押下げ操作に対するロックを解除したりする等の機能を有する巻上レバー１８ｃを備えている。
【００２８】
（２）撮像処理： 
次に、以上の構成を利用して制御部２０において実行されるマニュアルフォーカスで撮像する処理について説明する。図３は、撮像処理の流れを示すフローチャートである。撮像処理においては、撮像した画像に応じて作成される表示用画像データＤ２に基づいた画像をＥＶＦ１９ｂに適宜プレビューしつつ、ユーザーが所望のタイミングで撮像指示を行うと、撮像した画像データをデータ記憶部１６に保存させる。同図に示す処理は、上記各機能を実現した制御部２０よって実行される。なお、ユーザーは撮像処理の間にＤＳＣ１００の撮像画像の構図の変更、ピント調整やピント領域の追加や削除やサイズ変更といった調整も行うため、本撮像処理は１秒間に３０回以上の頻度で繰り返し実行されている。
【００２９】
処理が開始されると、表示制御部Ｍ２は、フラッシュメモリー２０ｃからピント設定情報を取得する（Ｓ１００）。ピント設定情報には、ピント領域の位置とサイズとが指定されており、このピント設定情報に基づいて撮像素子１２の受光面のどの領域をピント領域とするかを決定することができる。本撮像処理においては、ピント領域に含まれる被写体に対するピントの合焦程度を示す表示が行われる。むろん、オートフォーカスで撮像する際は、公知のオートフォーカス技術によってピント領域に含まれる被写体に自動的にピントを合わせる処理が実行される。なお、本実施形態ではピント領域の形状を四角として説明するが、丸や三角など任意の形状を採用可能である。
【００３０】
ピント領域の設定が終了すると、ピント部Ｍ３がピント領域におけるピントズレ（合焦度合もしくは不合焦度合）を検出する（Ｓ１０５）。ピントズレは、アクティブ方式やパッシブ方式で検出することができる。
アクティブ方式の場合は、対象物（被写体）に赤外線・超音波などを照射し、その反射波が戻るまでの時間や照射角度によりピント領域に含まれる被写体と撮像レンズとの距離を検出し、撮影レンズの焦点距離との差を計算する。本方式を採用する場合は、赤外線・超音波などを被写体に向けて照射する照射手段と、その反射波を受信する受信手段とをＤＳＣ１００に備えさせる。また、受信手段は、反射波の受信角度を検出するセンサーや反射波が戻るまでの時間を計測するタイマーも備えることになる。
【００３１】
次に、パッシブ方式のひとつである位相差検出方式によってピントズレを検出する場合は、ＤＳＣ１００にセパレータレンズとラインセンサーとを設けて、セパレータレンズで生成された２つの像の間隔（位相差）をラインセンサーで計測し、この位相差に基づいてピントのズレ量を検出する。このとき、位相差が大きいほどピントのずれ量が大きいことを意味し，位相差が小さいほどピントのずれ量が小さいことを意味する。
また、パッシブ方式のひとつである高周波成分の山登り方式によってピントズレを検出する場合は、メインの光学系１１の焦点距離を変化させながら撮像素子１２が撮像した画像データの明暗のコントラストを計算し、コントラストが最も大きくなる所が焦点距離が合っていると判断する。あるいはコントラストを計算する他に画像データを離散コサイン変換などの手法で空間周波数分解し、ピント領域の画像に含まれる高周波成分の量を評価する。そのため、例えば画像処理部１４に、画像の空間周波数分解を行う手段と、画像に含まれる高周波成分の比率とピントズレの量との対応関係データとを備える。画像処理部１４は、画像処理の何れかの段階で作成された画像データからピント領域の画像データを抽出し、この画像データに含まれる高周波成分の比率に基づいてピントズレの量を検出する。
【００３２】
なお、山登り方式によるピントズレの評価をより正確に行うには、ピントズレを検出している間にユーザーの調整した位置からレンズを微小変動させることによりピントを変化させればよい。すなわち、レンズの微小変動によって高周波成分が大きく変動するほどピントズレが大きく、変動量が小さいほどピントが合っていることになる。また、レンズの微小変動によってピントを遠景方向に変動させたときに、コントラストや高周波成分が増加したときはピントが近景方向にずれているし、高周波成分が減少したときはピントが遠景方向にずれていることになる。レンズの微小変動によってピントを近景方向に変動させたときは、その逆である。なお、圧縮部１５にＪＰＥＧ圧縮回路機能を有する場合は、ＪＰＥＧ処理の一部として離散コサイン変換機能があるため画像処理部１４で処理した画像を圧縮部１５の離散コサイン処理によりＡＣ成分を抽出して、このＡＣ成分の量を用いて高周波成分の量を評価することもできる。
【００３３】
表示制御部Ｍ２は、ピント部Ｍ３からピントズレを取得すると、ピントズレに応じて作成された２重画像をピント領域Ａに合成した合成画像を作成する（Ｓ１０５）。
図４は２重画像の合成についての説明図であり、図５はピントとピントズレΔＰの対応関係を示す説明図であり、図６はピントズレΔＰと２重画像に発生するズレ量Δｘとの対応関係を示す説明図である。ズレ量Δｘとは、表示用画像データＤ２のピント領域に本来表示される画像と、この画像に重複される画像とのずれに相当する量である。
【００３４】
まず、図５と図６を参照してピントとピントズレΔＰとズレ量Δｘとの関係を説明する。ピントズレΔＰとズレ量Δｘとは正の相関を有しており、ピントズレΔＰが大きくなるほどズレ量Δｘは大きくなり、ピントズレΔＰが小さくなるにつれてズレ量Δｘは小さくなる。また、ピントズレの方向が近景方向と遠景方向とでズレ量の正負を変えており、ピントズレの方向に応じてずれる方向が方向を異なるようにしてある。
【００３５】
図６に示す例では、近景方向へのピントズレと遠景方向へのピントズレとでズレ方向が左右逆になっており、近景方向へのピントズレのときにはズレ量は０から＋方向に徐々に大きくなっていくため、図６に示すようにずれる方向が右である。一方、遠景方向へのピントズレのときにはシフト量は０から−方向へ徐々に大きくなるため、図６に示すようにずれる方向は左になっている。むろん、ズレ方向は上下方向や斜め方向など他の方向であってもよいし、近景方向へのピントズレのときには左方向へずれるとともに遠景方向へのピントズレのときには上方向へずれたり、近景方向へのピントズレでも遠景方向へのピントズレでも左方向へずれるなど、ずらす方向は様々に変更しても構わない。
なお、ピントズレΔＰとズレ量Δｘとの対応関係は演算式や対応表で表現されており、本実施形態ではフラッシュメモリー２０ｃに予め記憶されている。ピント部Ｍ３は、フラッシュメモリー２０ｃに記憶されている対応関係に基づいてピントズレΔＰからシフト量Δｘを求めることができる。
【００３６】
シフト量Δｘを算出すると、次に表示制御部Ｍ２は２重画像を作成する。表示制御部Ｍ２は、ピント領域Ａを図４の左方向にズレ量Δｘ（Ａ）だけずらしたズレ画像領域Ａ’のズレ画像をピント領域Ａに合成する。具体的には、ピント領域Ａの画素を、順次、着目画素として選択し、表示用画像データＤ２における着目画素の画素データと着目画素からΔｘ（Ａ）だけずれた位置の画素データとを取得する。そして、これらの画像データを相加平均もしくは加重平均し、合成画像を表す合成画像データＤ３の着目画素における画素データとする。なお、合成画像データＤ３におけるピント領域Ａ以外の画素データは、表示用画像データＤ２のデータをそのまま利用する。これによって、ピント領域Ａは２重像となる。
【００３７】
以上のようにして合成画像データＤ３が作成されると、表示制御部Ｍ２は、合成画像データＤ３に基づいて合成画像をＥＶＦ５８に出力する（Ｓ１１０）。その結果、ＥＶＦ５８には、図４に示すように、本来の画像からズレ量Δｘに応じた量だけずれた画像がピント領域Ａに表示される。ユーザーは、本来の画像とのずれ度合を見ることにより、ピント領域Ａにおけるピントズレを直感的に把握することができる。むろん、ピント領域にはオリジナルの画像も残存しており、ピント領域に加算されたズレ画像とピント領域Ａの外の画像と非連続的に形成されているものの、オリジナルのピント領域Ａの画像はピント領域Ａの外の画像と連続的に形成されている。従って、ユーザーは２重画像のズレ量に基づいてピントズレを直感的に把握できるし、さらに画像の全体像も視認することができる。
【００３８】
また、図６に示すように、合成画像を表示するときにはピント領域の周囲を囲う枠が表示さている。枠を表示することにより、ユーザーは、ピント領域Ａの位置と範囲を容易に把握できるし、ピント領域Ａとそれ以外の領域との境界を明確に認識できる。さらに、図６に示すように、ピントが合うとピント枠が消えるようにしてもよい。また、ピントが合ったときとピントが合っていないときとで枠の色が変わるようにしてもよい。例えば、ピントが合っていないときは枠を白や黒といった無彩色で表示し、ピントが合うと枠を有彩色にする。むろん、ピントが合っているときと合っていないときとで、有彩色と無彩色を逆にしてもよい。このようにすると、ユーザーは、ピント領域Ａの位置と範囲、ピント領域Ａの境界、をさらに明確に認識できるし、合焦した瞬間を確実かつ直感的に認識できる。
【００３９】
次に、表示制御部Ｍ２は、ピント操作が実行されたか否かを判断する（Ｓ１１５）。ピントが変更されるとピント領域ＡにおけるピントズレΔＰが変化するため、２重画像の更新が必要になるからである。表示制御部Ｍ２は、操作部１８を介して実行されるピント操作の有無を判断し、ピント操作が行われた場合には（Ｓ１１５：Ｙｅｓ）ステップＳ１０５〜Ｓ１１０を実行することにより、新たなピントズレΔＰに基づいて作成された合成画像をＥＶＦ５８に表示する。
【００４０】
一方、ピント操作が行われていない場合は（Ｓ１１５：Ｎｏ）ピント領域に変更が加えられたか否かを判断する（Ｓ１２０）。ピント領域に変更が加えられると、ピントズレの判断対象となる範囲が変化し、２重画像の形成対象が変化するからである。なお、ピント領域の変更とは、ピント領域の位置やサイズの変更であり、また後述のようにピント領域の追加や削除であってもよい。ステップＳ１１において、表示制御部Ｍ２は、操作部１８を介してピント設定に対する変更を確定する操作の有無を判断し、ピント設定が変更された場合は（Ｓ１２０：Ｙｅｓ）ステップＳ１００〜Ｓ１１０を実行し、変更後のピント設定に基づいて作成された合成画像をＥＶＦ５８に表示する。一方、ピント操作が行われていない場合はステップＳ１３０に進む（Ｓ１２０：Ｎｏ）、
【００４１】
ステップＳ１３０では、表示制御部Ｍ２は、撮像が指示されたか否かを判断する。本実施形態においては、撮像の指示はシャッターボタン１８ｂを押下げることにより行われる。表示制御部Ｍ２は、シャッターボタン１８ｂの操作を監視しており、シャッターボタン１８ｂが押下げられた場合はステップＳ１３５に進む（Ｓ１３０：Ｙｅｓ）。一方、シャッターボタン１８ｂが押下げられていない場合は、所定時間が経過した後でステップＳ１０５に戻り、ステップＳ１０５〜Ｓ１１０の処理を繰り返すことによりＥＶＦ５８に表示される画像を更新する。このとき、ピントズレの検出やピントズレを用いた処理を繰り返すために、被写体やカメラが移動していても、その時点でのピントズレに応じた画像をＥＶＦ５８に表示する。
【００４２】
ステップＳ１３５では、撮像部Ｍ１が各部１１〜１５を制御することによって撮像処理が実行される。まず、光学系１１の図示しないシャッタースクリーンが所定時間だけ開口し、撮像範囲に含まれる被写体の光学像が撮像素子１２により取得される。そしてＡＦＥ１３でデジタル化されたデジタル画像信号に対し画像処理部１４で各種画像処理が施すことにより画像データＤ１を作成し、圧縮部１５が画像データＤ１をＪＰＥＧ画像データに圧縮する。このようにして作成されたＪＰＥＧ画像データは、データ記憶部１６からリムーバブルメモリーに書込まれる。なお、Ｒａｗデータの保存が選択されている場合には、ＡＦＥの出力するデジタル画像信号に画像処理を施すことなくそのままリムーバブルメモリーに書込む。
【００４３】
（３）各種変形例：
（３−１）変形例１：
上述した実施形態では、ピント領域Ａの画像が２重表示されるように合成画像を作成したが、２重表示される範囲はピント領域Ａに限る必要は無い。例えば、ピント領域Ａのピントズレに応じて、表示用画像の全体が２重にずれて表示されるようにしてもよい。また、ピント領域Ａは１重で表示され、ピント領域Ａ以外の領域が２重にずれて表示されるというように、ピント領域Ａとは異なる範囲が、２重にずれて表示されるようにしてもよい。ここでは、前者の例について説明する。
【００４４】
図７は、表示用画像の全体をピントに応じて２重化する場合の説明図である。同図に示すように、撮像された画像にはピント領域Ａが設定されており、表示制御部Ｍ２はピント部Ｍ３からピント領域ＡにおけるピントズレΔＰを取得する。そして、表示制御部Ｍ２は、フラッシュメモリー２０ｃに記憶されている対応関係に基づいてピントズレΔＰに応じたシフト量Δｘを算出し、表示用画像の全体を図７の左方向にズレ量Δｘ（Ａ）だけずらしたズレ画像領域Ａ’のズレ画像をピント領域Ａに合成する。具体的な合成手法は上述した実施形態と同様である。なお、ズレ画像が合成されない部位もあるが、この部位はオリジナルの表示用画像のままにしておけばよい。このとき、画像を合成された部位と画像を合成されなかった部位との境界を表示する枠を表示してもよく、上述した実施形態のように合焦時に枠を消去したり色を変化させたりできるようになる。このように画像全体を２重表示することにより、ＥＶＦ５８のように小さな表示部であっても、ピントズレの有無を明確に視認できるようになる。
【００４５】
（３−２）変形例２：
また、上述した実施形態では、１つだけピント領域Ａを設定する例について説明したが、ピント領域Ａは複数設定されていてもよい。ここでは、複数のピント領域にそれぞれ符号Ａ１，Ａ２，Ａ３を付け、それぞれのピント領域に対応して設定されるズレ画像領域にそれぞれ符号Ａ１’，Ａ２’，Ａ３’をつけて説明することにする。また、各ズレ画像領域から取得されるズレ画像には、符号ＳＩ（Ａ１），ＳＩ（Ａ２），ＳＩ（Ａ３）をつけて説明する。
【００４６】
図８は、ピント領域が複数設定された場合に、各ピント領域の画像を２重化する場合の説明図である。同図に示すように、表示制御部Ｍ２はピント部Ｍ３からピント領域Ａ１，Ａ２，Ａ３のそれぞれにおけるピントズレΔＰ（Ａ１），ΔＰ（Ａ２），ΔＰ（Ａ３）を取得する。そして、表示制御部Ｍ２は、フラッシュメモリー２０ｃの対応関係に基づいてピントズレΔＰ（Ａ１），ΔＰ（Ａ２），ΔＰ（Ａ３）からシフト量Δｘ（Ａ１），Δｘ（Ａ２），Δｘ（Ａ３）を算出する。表示制御部Ｍ２は、各ピント領域を各シフト量でシフトした位置にズレ画像領域Ａ１’，Ａ２’，Ａ３’を設定し、各ズレ画像領域からズレ画像ＳＩ（Ａ１），ＳＩ（Ａ２），ＳＩ（Ａ３）を取得する。
【００４７】
そして、表示制御部Ｍ２は、各ズレ画像を表すデータをオリジナルの表示用画像データの各ピント領域に合成して合成画像データを作成し、表示用画像データとしてＥＶＦ５８に出力する。その結果、ＥＶＦ５８には、各ピント領域に各ピント領域のピントズレに応じた量だけずれた画像が重畳された合成画像が表示されることになる。ピント領域ごとにピントズレの度合を示す２重画像が表示されるため、撮影される画像の複数箇所におけるピントを把握できる。よって、画像の各所におけるピントを容易に把握できるし、画像の全体的な合焦傾向を容易に把握することができる。
【００４８】
なお、本実施形態におけるピント領域の追加・削除・サイズ変更は、操作部１８で行う。例えば、設定メニューにピント領域に関する設定項目を設けておいて、操作部１８に所定の操作を行ったときにピント領域に関する設定を行うモードになるようにしておく。そして、このモードになると、例えばカーソル操作キー１８ｄで新規ピント領域の位置を指定したり、既存のピント領域を選択して削除・サイズ変更・位置変更を行ったりといった各種ピント領域の設定を行えるようにする。むろん、この操作は一例であり、公知の様々な手法と適宜採用可能である。
【００４９】
（３−３）変形例３：
上述した実施形態では、マニュアルでピントを調整するＭＦ方式のＤＳＣを例にとって説明を行ったが、本実施形態のＤＳＣは自動的にピント領域のピントを合致させるＡＦ方式をも実行可能であってもよい。ＭＦ方式とＡＦ方式とを切換えて実行可能であれば、ユーザーの利便性が向上する。また、ＤＳＣがパッシブ方式でのＡＦ機構を備えさせることにより、上述した実施形態のピント部Ｍ３がピントズレを検出する際に、ピントを変化させつつピント領域における映像信号の高周波解析を行う山登り方式でピント領域におけるピントズレを検出することも可能である。
【００５０】
（３−４）変形例４：
上述した実施形態では、合成画像をＥＶＦ５８に表示する場合を例にとって説明を行ったが、むろん、合成画像はＬＣＤ５０に表示しても構わない。また、合成画像の表示先を、ＥＶＦ５８、ＬＣＤ５０、ＥＶＦ５８およびＬＣＤ５０の双方、のいずれかを操作部１８に対して行われる操作に基づいて選択可能に構成しても構わない。
【００５１】
（３−５）変形例５：
上述した実施形態では、光学系１１の駆動機構が表示制御部Ｍ２の制御によって駆動される場合を例にとって説明したが、むろん、ラック＆ピニオンのような機械的機構によって手動で駆動機構を調整するための操作部を設けても構わない。
（３−６）変形例６：
上述した実施形態では表示制御部Ｍ２は、ピント領域Ａをずらしたズレ画像領域Ａ’のズレ画像をオリジナルの画像のピント領域Ａに合成していた。しかし、オリジナルの画像とズレ画像との少なくとも一方の色を変更して合成することで、ズレ画像とオリジナルの画像とを区別しやすいようにしても構わない。この色を変更するとは具体的には、赤色成分を１．５倍にすることで赤っぽいズレ画像又はオリジナルの画像としたり、ズレ画像又はオリジナルの画像の全体をモノクロ画像にしたり、オリジナルの画像のピント領域Ａのみを緑色成分のみにし、かつズレ画像を赤色成分と青色成分のみにして合成し、ピント領域Ａの外のオリジナルの画像は元のままにしたり、といった方法が採用できる。
【００５２】
（４）まとめ： 
以上説明した実施形態によれば、撮像素子１２の受光した光に基づいて生成した表示用画像データＤ２に基づいた画像を表示部１９に表示するＤＳＣ１００であって、ピントズレを検出するピント部Ｍ３と、ピントズレに応じてピント領域Ａからずれた位置のズレ画像ＳＩを表示用画像のピント領域Ａに対して相加平均もしくは加重平均した合成画像を表示部１９に表示させる表示制御部Ｍ２と、を備えている。よって、画像のプレビュー性を低下させること無く、ピントを視覚的に容易に把握できるようになる。
【００５３】
なお、本発明は上述した実施形態や変形例に限られず、上述した実施形態および変形例の中で開示した各構成を相互に置換したり組み合わせを変更したりした構成、公知技術並びに上述した実施形態および変形例の中で開示した各構成を相互に置換したり組み合わせを変更したりした構成、等も含まれる。
【符号の説明】
【００５４】
１００…デジタルスチルカメラ（ＤＳＣ）、１１…光学系、１２…撮像素子、１３…ＡＦＥ、１４…画像処理部、１５…圧縮部、１６…データ記憶部、１８…操作部、１８ａ…電源スイッチ、１８ｂ…シャッターボタン、１８ｃ…巻上レバー、１８ｄ…カーソル操作キー、１９…表示部、１９ａ…ＬＣＤ、１９ｂ…ＥＶＦ、２０…制御部、２１…ＶＲＡＭ、Ｍ１…撮像部、Ｍ２…表示制御部、Ｍ３…ピント部 
【図１】
2011119930.tif 000003
【図２】
2011119930.tif 000004
【図３】
2011119930.tif 000005
【図４】
2011119930.tif 000006
【図５】
2011119930.tif 000007
【図６】
2011119930.tif 000008
【図７】
2011119930.tif 000009
【図８】
2011119930.tif 000010