(57)【要約】【課題】リアルタイムにぼけ量を確認しながら、主要被写体にピントが合い、背景部分をぼかした撮影が簡単な操作で行うことができる撮影装置を提供する。【解決手段】撮影モードにおいて絞りを操作を選択して、絞り操作となる回転リングを開放限界の絞り値を超える操作量だけ回転する操作を行うと、開放限界の絞り値に相当するぼけ量を算出し、さらに開放限界の絞り値を超える操作量に対応したぼけ量を発生するためのレンズ５のピント位置からのシフト量を決定し、ピント位置と、シフト量だけシフトしたシフト位置でそれぞれ撮像した画像から主要被写体にピントが合い、背景部分をぼかした合成画像を合成処理で生成して、殆どリアルタイムに表示し、撮影操作がされた場合には合成画像を撮影画像として記録する。【選択図】図４
2013090010.tif 000002
【特許請求の範囲】
【請求項１】
撮影を行うための撮影レンズと、
上記撮影レンズを介した被写体の光学像を電気信号に変換する撮像素子と、
上記撮影レンズの絞りを制御する絞り制御部と、
上記撮影レンズのピント位置を制御するピント位置制御部と、
を具備する撮影装置において、
上記撮影レンズの実際の絞り開放限界の値を超える絞り値に設定するための操作を行う絞り操作部と、
上記絞り操作部の上記絞り開放限界の値を超える、該絞り開放限界の値からの操作量に応じて、上記ピント位置制御部により上記被写体における主要被写体部分にピント合わせしたピント位置で上記撮像素子により撮像した画像と共に、該ピント位置から上記撮影レンズを光軸方向に所定のシフト量だけシフトしたシフト位置で上記撮像素子により撮像した上記主要被写体部分に対して背景となる、上記所定のシフト量に対応したぼけ量だけぼけた背景画像をほぼリアルタイムに表示可能とする表示部と、
を有することを特徴とする撮影装置。
【請求項２】
上記表示部は、上記主要被写体にピント合わせしたピント位置で上記撮像素子により撮像した画像における上記主要被写体の画像部分を、上記シフト位置で上記撮像素子により撮像した上記ぼけた背景画像を含む画像に、上記主要被写体の画像部分を位置合わせして置換した合成画像をほぼリアルタイムに表示可能にする合成画像表示部を有することを特徴とする請求項１に記載の撮影装置。
【請求項３】
さらに、撮影操作により、上記合成画像を撮影画像として記録する記録部を有することを特徴とする請求項２に記載の撮影装置。
【請求項４】
上記絞り操作部による上記絞り開放限界の値を超える、該絞り開放限界の値からの操作量を判定する操作量判定部を有し、上記絞り開放限界の値からの操作量に応じて上記撮影レンズを上記ピント位置と上記シフト位置との間で振動的に移動設定する振動的駆動部を有することを特徴とする請求項２に記載の撮影装置。
【請求項５】
上記絞り操作部は、上記絞り開放限界の値以下の絞り値に設定する操作機能を含み、上記絞り操作部による絞り値を変化する操作毎に、上記撮像素子で撮像した画像を画像記録部に記録することを特徴とする請求項３に記載の撮影装置。
【請求項６】
上記振動的駆動部により上記撮影レンズが設定された上記ピント位置で撮像した画像からぼけ量が十分に小さい輪郭を検出して、該輪郭を境界としてピントが合った上記主要被写体の第１の画像領域と上記背景画像の第２の画像領域とに領域分けを行い、上記ピント位置で撮像した上記画像における上記第１の画像領域を、上記シフト位置で撮像した画像に位置合わせして置換することにより上記合成画像を生成する合成画像生成部を有することを特徴とする請求項４に記載の撮影装置。
【請求項７】
上記絞り操作部により上記絞り開放限界の値を超える絞り値に設定する操作が行われた場合、上記ピント位置において上記絞り開放限界の値の場合に、上記撮像素子で撮像される背景画像で発生するぼけ量の値を上記シフト量の基準値にして、上記絞り開放限界からの操作量に応じて、上記撮影レンズを上記ピント位置から上記シフト位置にシフトする上記所定のシフト量を決定することを特徴とする請求項４に記載の撮影装置。
【請求項８】
上記表示部は、上記合成画像の表示と、合成画像生成前における上記ピント位置で上記撮像素子により撮像した上記画像及び上記シフト位置において上記撮像素子により撮像した上記ぼけた背景画像からなる２つの画像の表示との一方を選択して表示可能とすることを特徴とする請求項７に記載の撮影装置。
【請求項９】
さらに、上記ピント位置において上記撮像素子により時間的に隣接して撮像した２つのフレーム間の画像における対応する小領域間での相対的な動き量を検出する動き量検出部を有し、
上記動き検出部が検出した動き量の最大値が閾値以下の場合には、上記撮影レンズを上記ピント位置から上記シフト位置への移動設定を抑制する制御を行うことを特徴とする請求項４に記載の撮影装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は主要被写体にピントが合った撮影を行う撮影装置に関する。
【背景技術】
【０００２】
近年、光電変換する機能を備えた撮像素子を用いて、被写体を撮影する撮影装置としてのカメラが広く用いられるようになっている。このように撮像素子を用いた撮影装置においては、例えば３５ｍｍサイズの銀塩フィルムを用いた銀塩カメラの場合に比べて小さなサイズの撮像素子が用いられる場合が一般的である。  
このため、同じＦナンバの撮影レンズを用いて撮影した場合、主要被写体にピントを合わせて撮影すると、背景側を撮影者（ユーザ）が意図する程のぼけ量が得られないという問題があった。
【０００３】
このため、特開２００３−２０９７２７号公報の従来例は、被写体を撮影する場合、主要被写体と、その前景又は背景となるエリアを区分け手段により区分けし、前景又は背景のぼけ量の設定手段と、区分け手段により区分けされた各エリア毎に焦点位置を設定して複数コマの撮像を行い、複数コマの撮像画像から各エリアの画像を抽出して各エリアの画像を合成することを開示している。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００３−２０９７２７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、上記従来例は所望とするぼけ量の撮影画像を取得するまでに時間がかかると共に、通常の操作とは異なるぼけ量の設定が必要となる。また、上記従来例では、ぼけ量の程度（ぼけ味）を確認するのに時間がかかる欠点がある。このため、シャッターチャンスを逃してしまう可能性がある。  
本発明は上述した点に鑑みてなされたもので、リアルタイムにぼけ量を確認しながら、主要被写体にピントが合い、背景部分をぼかした撮影が簡単な操作で行うことができる撮影装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の一態様に係る撮影装置は、撮影を行うための撮影レンズと、上記撮影レンズを介した被写体の光学像を電気信号に変換する撮像素子と、上記撮影レンズの絞りを制御する絞り制御部と、上記撮影レンズのピント位置を制御するピント位置制御部と、を具備する撮影装置において、上記撮影レンズの実際の絞り開放限界の値を超える絞り値に設定するための操作を行う絞り操作部と、上記絞り操作部の上記絞り開放限界の値を超える、該絞り開放限界の値からの操作量に応じて、上記ピント位置制御部により上記被写体における主要被写体部分にピント合わせしたピント位置で上記撮像素子により撮像した画像と共に、該ピント位置から上記撮影レンズを光軸方向に所定のシフト量だけシフトしたシフト位置で上記撮像素子により撮像した上記主要被写体部分に対して背景となる、上記所定のシフト量に対応したぼけ量だけぼけた背景画像をほぼリアルタイムに表示可能とする表示部と、を有することを特徴とする。
【発明の効果】
【０００７】
本発明によれば、リアルタイムにぼけ量を確認しながら、主要被写体にピントが合い、背景部分をぼかした撮影が簡単な操作で行うことができる撮影装置を提供することができる。
【図面の簡単な説明】
【０００８】
【図１】図１は本発明の第１の実施形態の撮影装置としてのカメラの全体構成を示す図。
【図２】図２はＦナンバが大きいレンズを用いて背景をぼかして撮影するための説明図。
【図３Ａ】図３Ａはユーザが撮影操作を行う様子の説明図。
【図３Ｂ】図３Ｂはユーザが撮影操作を行う場合、タッチパネルにより絞りの操作を選択する様子の説明図。
【図３Ｃ】図３Ｃは図３Ｂの操作により表示部の表示画面に絞りが選択された様子を示す説明図。
【図４】図４は第１の実施形態によるカメラ制御の処理内容を示すフローチャート。
【図５】図５は図４における絞り開放相当のぼけ量算出のステップの処理内容を示すフローチャート。
【図６】図６は図５における距離算出の変形例の説明図。
【図７】図７は図４におけるリング操作量に応じてピントシフト量を決定するステップの処理内容を示すフローチャート。
【図８】図８は図４におけるピントシフト振動＆合成のステップの処理内容を示すフローチャート。
【図９】図９は図８の変形例の処理内容を示すフローチャート。
【図１０】図１０はカメラ本体側と撮影レンズ部側とが通信を行って背景をぼかした撮影画像を取得する動作の説明図。
【図１１】図１１は第１の実施形態の第１変形例のカメラにおける処理手順を示すフローチャート。
【図１２】図１２は図１１により表示部に表示される２つの画像の表示例を示す図。
【図１３】図１３は合成画像を表示した場合の表示部による表示例を示す図。
【図１４】図１４は第１の実施形態の第２変形例のカメラにおける処理手順を示すフローチャート。
【発明を実施するための形態】
【０００９】
以下、図面を参照して本発明の実施形態を説明する。  
（第１の実施形態）
図１に示すように本発明の撮影装置を構成する第１の実施形態のカメラ１は、撮影を行うための撮影レンズを構成するレンズ５を備えた撮影レンズ部２と、この撮影レンズ部２が着脱自在に装着（マウント）されるカメラ本体３と、このカメラ本体３の上面に着脱自在に装着される撮影補助アクセサリ（単にアクセサリと略記）４とを有する。  
カメラ本体３には、撮影レンズ部２の光学系を構成するレンズ５の結像位置付近にＣＭＯＳセンサ等、撮像面に結像された光学像を電気信号に変換する光電変換機能を備えた撮像素子６が配置され、レンズ５と、撮像素子６により撮像部７が形成される。  
カメラ本体３は、撮像素子６に対する信号処理やカメラ１の全体の制御等を行う信号処理＆制御部８を有する。この信号処理＆制御部８は、ＣＰＵにより構成される。
【００１０】
また、このカメラ本体３は、撮像部７により撮像した画像を表示する表示部９と、撮像した画像及び撮影操作（レリーズ操作）で撮影画像を記録する記録部１１と、タッチして絞り値やピント合わせの調整等、操作項目の選択等を行うタッチパネル１２と、レリーズボタン３ａ（図３Ｂ参照）によるレリーズ操作等の操作を判定する操作判定部１３を有する。  
また、このカメラ本体３は、時間を計測して時間管理を行うための時計部１４と、撮像素子６により撮像した画像から被写体が人物の場合の顔部分を検出する顔検出部１５と、撮影レンズ部２と双方向の通信を行う通信部１６と、アクセサリ４と双方向の通信を行う通信部１７と、を有する。なお、アクセサリ４を有しない構成のカメラでも良い。
【００１１】
撮影レンズ部２は、撮影レンズ部２の動作を制御する制御部２１と、レンズ５の絞り値及びピント合わせの操作をするための例えば回転リングを有する操作部２２と、レンズ５又はレンズ５を構成する移動可能なフォーカスレンズ等の可動レンズを、光軸方向に移動させるように駆動と、絞り４０の絞り値を変えるように駆動する駆動部２３ａ，２３ｂと、レンズ５を構成する可動レンズ等の光軸方向における位置の検出と、操作部２２の回転リングの操作位置の検出とを行う位置検出部２４ａ，２４ｂとを有する。  
また、この撮影レンズ部２は、その撮影レンズ部２に搭載されたレンズ５の特性（焦点距離Ｆ、有効口径Ｄ０、開放限界の絞り値（絞り開放限界の値、又は絞り開放限界とも言う）としてのＦナンバＦｎｏ０）等の情報を記録した記録部２５と、カメラ本体３の通信部１６と双方向の通信を行う通信部２６とを有する。
【００１２】
また、制御部２１は、操作部２２により絞り開放限界の値を超える回転操作が行われた場合、位置検出部２４ｂによる位置検出などを利用して、絞り開放限界の値を超えたか否かを判定すると共に、絞り開放限界の値を超える操作量を判定する操作量判定部２１ａを有する。なお、操作量判定部２１ａを制御部２１以外に設ける構成でも良い。  
また、レンズ５は、上記操作部２２による絞り開放限界以内での絞り操作に対応した絞り制御を行う絞り制御部５ａと、操作部２２によるピント合わせの操作に対応したピント位置制御を行うピント位置制御部５ｂとを有する。  
本実施形態においては、このピント位置制御部５ｂは、操作部２２により絞り開放限界の値を超える回転操作が行われた場合には、ピント合わせしたピント位置から、レンズ５を光軸方向にシフトしたシフト位置に設定する制御も行う。
【００１３】
なお、図１では、レンズ５内に絞り制御部５ａと、ピント位置制御部５ｂとを設けた例で示しているが、例えば制御部２１内に絞り制御部５ａと、ピント位置制御部５ｂと形成する構成にしても良い。  
また、本実施形態においては、タッチパネル１２による選択操作により操作部２２による操作項目として、絞りを可変する操作とピント合わせする操作とから選択できるようにしている（図３Ｂにて後述する）。  
また、本実施形態においては、タッチパネル１２により絞りの操作が選択された場合、操作部２２としての回転リングは、絞り値を可変する絞り操作部２２ａとなる。
【００１４】
そして、絞り操作部２２ａが選択された状態においてユーザが絞り操作部２２ａを操作した場合、操作量判定部２１ａは、上記のようにレンズ５の絞り開放限界を超えて操作されたか否かを判定する。タッチパネル１２によりピントの操作が選択された場合、操作部２２としての回転リングは、ピント操作部、又はピント合わせ操作部となる。  
なお、タッチパネル１２による選択により、操作部２２で、図示しないズーム調整を行うことも可能である。  
制御部２１は、操作部２２によるピント合わせの操作やズーム操作や絞り操作等に応じて、駆動部２３ａ，２３ｂを介してレンズ５を光軸方向に移動する制御や絞り値を変更する制御動作を行うと共に、位置検出部２４ａ，２４ｂによる位置検出結果を参照し、操作されたピント合わせに対応したピント位置への設定、ズーム状態、絞り値等に設定する制御動作を行う。
【００１５】
なお、駆動部２３ａ，２３ｂによる駆動制御する際に図示しない位置判定部により判定し、目標とするピント位置、ズーム状態、絞り値等に、より円滑に設定し易い制御を行うようにしても良い。  
また、制御部２１は、撮影レンズ部２側での操作内容又は操作結果を通信部２６、通信部１６とを介してカメラ本体３の信号処理＆制御部８に送り、カメラ本体３の信号処理＆制御部８は対応した信号処理や制御を円滑に行うことができるようにしている。  
カメラ本体３の信号処理＆制御部８は、後述する図１０に示すようにカメラ本体３内の撮像素子６の１フレーム分の画像に対するフレーム同期信号としての垂直同期信号に同期して、撮像素子６による撮像と、その撮像した画像に対する読出しの処理を行う。また、撮像と読出しを行う最中等において、カメラ本体３と撮影レンズ部２とは通信を行い、通信結果に対応した処理をそれぞれ行う。
【００１６】
図１に示すようにアクセサリ４は、カメラ本体３の通信部１７と双方向の通信を行う通信部３１と、この通信部３１により取得した例えば画像情報を接眼画像として表示する接眼表示部３２とを有する。  
カメラ本体３の信号処理＆制御部８は、各フレームにおいて生成した撮像画像を間引く等した縮小画像を通信部１７，３１を介して接眼表示部３２に送り、接眼表示部３２は、リアルタイムに撮像部７により撮像している画像の縮小画像を動画状態で表示する。ユーザはこの接眼表示部３２に表示される縮小画像を観察しながら、撮影操作を行うことができる。なお、アクセサリ４をカメラ本体３に装着しない場合には、表示部９で撮像部７により撮像している画像を表示する。  
また、カメラ本体３の信号処理＆制御部８は、各フレームの撮像画像に対して、表示部９等において撮像画像として表示できるように信号処理すると共に、表示する制御を行う。このため、信号処理＆制御部８は、表示制御部８ａの機能を有する。
【００１７】
ユーザは、表示部９に表示される（接眼表示部３２の表示サイズよりも大きい表示サイズの）撮像画像を観察することにより、撮影しようとする画像をより詳細に確認しながら撮影の操作を行うことができる。  
また、信号処理＆制御部８は、撮像素子６により撮像画像におけるコントラストのピークからピント位置（又はピント位置からのずれ）を検出したり、コントラストの平均値から（パラメータとしての）露出量を制御するパラメータ制御部８ｂの機能を持つ。  
また、信号処理＆制御部８は、タッチパネル１２によるタッチ検出と共に、タッチされた位置から選択された操作を検出するタッチ検出部８ｃの機能を有する。なお、表示制御部８ａは、タッチパネル１２により選択できる操作項目（図３Ｂの図示例では絞りとピント合わせ）を表示部９にて表示する制御も行う。
【００１８】
また、信号処理＆制御部８は、上述した絞り操作部２２ａにより、レンズ５の絞り開放状態（換言するとレンズ５の絞りを最大に開いた絞り開放限界）の値を超えて操作された場合には、その絞り開放限界の値を超える操作量に応じて、ピントが合ったピント位置の主要被写体の画像に対して背景となる画像部分をぼかすぼかし処理を行うぼかし処理部８ｄを有する。なお、ユーザは、絞り操作部２２ａにより、絞り開放限界の値（絞り開放限界とも言う）以下での絞り値に可変設定する操作を行うこともできる。  
また、信号処理＆制御部８は、ピント位置の主要被写体の画像と、ぼかし処理部８ｄによりぼかした画像とを合成した合成画像を略リアルタイムで生成する合成画像生成部８ｅを有する。
【００１９】
この場合、表示制御部８ａは、合成画像を略リアルタイムで表示部９にて表示するように制御し、表示部９は、通常の撮像画像を表示する表示部の機能と共に、合成画像表示部９ａの機能を持つ。  
また、図示しないが、本実施形態のカメラ１は、オートフォーカス（ＡＦと略記）と、オート露出（ＡＥ）の機能を備えている。  
図２は、本実施形態における上述した背景となる画像部分をぼかすぼかし処理に関係した説明図を示す。図２（Ａ）は、ぼかし処理を必要としない程度に明るいレンズ５Ｃ（小さいＦナンバ（Ｆ値）Ｆｎｏ１のレンズ）を用いて光軸Ｏ上に設定した主要被写体４１の像を結像する場合の説明図を示し、図２（Ｂ）は本実施形態における、図２（Ａ）のレンズ５Ｃに比較して暗いレンズ５、つまり大きいＦナンバＦｎｏ０のレンズを用いて主要被写体４１と無限遠の背景被写体の像を結像する場合の説明図を示す。
【００２０】
図２（Ａ）において、主要被写体４１とレンズ５Ｃとの被写体距離（以下、単に距離）をＬ，レンズ５Ｃの焦点距離をＦとすると、無遠遠の背景被写体に対しては、点線で示すようにレンズ５Ｃから焦点距離Ｆの距離の光軸Ｏ上の位置Ｐ１に結像し、主要被写体４１に対しては実線で示すように位置Ｐ１からさらに距離Ｚだけ後方側となる位置Ｐ２に結像する。  
また、このレンズ５Ｃの有効口径をＤ１とし、図２（Ａ）ではその有効口径Ｄ１の状態、つまり絞り開放限界まで絞り４０が開放されている状態を示す。  
図１の状態におけるレンズ５Ｃに対して、写像公式などから以下の（１）式が成立する。  
（Ｌ−Ｆ）・Ｚ＝Ｆ＾２  （１）
つまり、（Ｌ−Ｆ）とＺとの積は、焦点距離Ｆの２乗に等しい。
【００２１】
また、上記有効口径Ｄ１として（その添え字１を削除し）一般化した有効口径Ｄを用い、同様に一般化した絞り開放（限界）ＦナンバＦｎｏを用いると、以下の（２）式のようになる。  
Ｆｎｏ＝Ｆ／Ｄ＝Ｚ／φ  （２）
ここで、φは、図２（Ａ）に示すように有限の主要被写体４１の結像位置Ｐ２の点のサイズが位置Ｐ１で円状に広がる直径φ１を（その添え字１を削除し）一般化して表している。  
また、図２（Ａ）の場合、直径φ１は、ピントが合った状態の主要被写体４１に対して背景被写体のぼけ量の大きさを表していると見なすことができる。
【００２２】
この直径φ１は、以下に説明する図２（Ｂ）の場合の直径φ０に比較してかなり大きい。  
上記の式（１）、（２）から直径φを求めると、以下の（３）式のようになる。  
φ＝Ｆ＾２／（Ｆｎｏ×（Ｌ−Ｆ））  （３）
なお、図２（Ａ）の場合の直径φ１とした場合には（２）式は、以下の（４）式のようになる。  
Ｆｎｏ１＝Ｚ／φ１  （４）
一方、図２（Ｂ）においては図２（Ａ）と同じ距離Ｌの主要被写体４１及び無限遠の背景被写体を同じ焦点距離Ｆのレンズ５にて結像する様子を示す。このレンズ５は、図２（Ａ）のレンズ５Ｃに比較するとその有効口径Ｄ０が小さいものの、その絞り開放限界まで絞り４０が開放されている状態を示す。
【００２３】
なお、上述の（１）―（３）式は、図２（Ｂ）の場合のレンズ５の有効口径Ｄ１をＤ，その有効口径Ｄ１でのＦナンバＦｎｏ０をＦｎｏとして、同様に適用できる。  
また、図２（Ｂ）の場合の直径φ０とした場合には（２）式は、以下の（５）式のようになる。  
Ｆｎｏ０＝Ｚ／φ０  （５）
（５）式における直径φ０は、（４）式における直径φ１より小さい。このため、レンズ５を主要被写体４１にピントが合ったピント位置に設定して撮影した場合、背景被写体のぼけ量を、明るいレンズ５Ｃの場合程に大きくすることができない。
【００２４】
そのため、本実施形態においては、図２（Ｃ）に示すように背景被写体に対してはレンズ５を、図２（Ｂ）に示す主要被写体４１にピントが合ったピント位置から、光軸方向に沿って前方側（被写体側）にシフト量Ｚｓｉｆｔだけシフトした位置に設定して、背景画像に対しては図２（Ａ）で示した直径φ１の値に相当するぼけた画像を取得する。  
図２（Ｃ）に示すレンズ５の設定状態においては、以下の（６）式を満たす。  
Ｆｎｏ０＝Ｚ／φ０＝（Ｚ＋Ｚｓｉｆｔ）／φ１  （６）
この（６）式を変形すると、以下の（７）式のようになる。
【００２５】
Ｚｓｉｆｔ＝φ１×Ｆｎｏ０−Ｚ  （７）
本実施形態においては、レンズ５の実際の絞り開放限界からさらに絞り４０を仮想的に開く操作を行えるように絞り操作部２２ａを設け、この絞り操作部２２ａによりレンズ５の実際の絞り開放限界の値を超えて絞り４０を開く操作が行われた場合には、例えばピント位置制御部５ｂは、その絞り開放限界の値を超えた操作量に対応した所定のシフト量Ｚｓｉｆｔだけ主要被写体４１にピントが合ったピント位置からシフトした位置にレンズ５を設定する。そして、そのシフトした位置で被写体を撮像して背景被写体が十分にぼけた画像を取得する。  
図２（Ｃ）は、図２（Ｂ）の絞り開放限界の状態から、絞り操作部２２ａの操作によりこの絞り開放限界からより開放させる方向に所定量だけ開放させた場合のレンズ５の設定位置の１例に相当する。
【００２６】
なお、後述するように本実施形態においては、絞り操作部２２ａの操作によりこの絞り開放限界からより開放させる方向にｎ目盛分（ｎ＝１，２）だけ開放させた場合には、そのｎ目盛分の開放に対応するシフト量だけレンズ５の設定位置をシフトする。  
但し、図２（Ｃ）のようにレンズ５をシフトした位置に設定すると、主要被写体４１の画像もぼけてしまうため、本実施形態においては高速にピント位置とシフトしたシフト位置とに交互に設定して（つまり振動的に設定して）、両画像を交互に高速に撮像して取得することができるようにしている。  
このため、本実施形態においては、図１に示す例えば駆動部２３ａは、レンズ５をピント位置とシフト位置とに高速に振動的に設定する振動的駆動部２３ｃの機能を有する。
【００２７】
また、記録部１１は、上記絞り操作部２２ａによる絞り４０の絞り値を変化させた場合に撮像素子６により撮像した画像と、上記振動的駆動部２３ｃによりレンズ５がピント位置とシフト位置とにそれぞれ設定して撮像素子６により撮像した画像とを記録する画像記録部１１ａを有する。なお、画像記録部１１ａを記録部１１以外のメモリなどで形成しても良い。  
図３Ａは、ユーザ５１が本実施形態のカメラ１により、被写体を撮影する様子を示す。図３Ａは、本実施形態の主要な内容のみを説明するための説明図を示す。図３Ａに示すようにユーザ５１は、カメラ１を例えば右手５２で把持し、左手５３でピント合わせ及び絞りの調整を行う撮影レンズ部２の外周部分に設けられた操作部２２としての回転リングを保持する。
【００２８】
そして、ユーザ５１は、アクセサリ４（の接眼表示部３２）から、撮影しようとする被写体を視認する姿勢にすると、手振れを少なくしてシャッターチャンスを逃がさない撮影モードでの保持状態となる。図３Ａのような基本的な保持状態に設定すると、極力指や手を動かさないで、撮影に必要な操作を迅速に行えるようになる。  
この場合、右手５２の把持状態を示すと、図３Ｂに示すように右手５２の人差し指５２ａを、撮影操作を行うレリーズボタン３ａにおいたままにし、左手５３は図３Ａのように手振れが発生しないように撮影レンズ部２の外周の回転リング部分に置いたまま操作ができるようにする。  
また、この状態で絞りを操作する場合には、図３Ａに示すように表示部９における例えば右側領域に形成されたタッチパネル１２部分をタッチする。タッチパネル１２にタッチ操作をすると、信号処理＆制御部８のタッチ検出部８ｃによりそのタッチ操作が検出され、操作の選択画面を表示する。
【００２９】
図３Ｂの表示例では、タッチパンル１２の上側に絞り、その下側にピント（ＭＦと略記）を選択する選択画面を表示する。ユーザ５１は、例えば図３Ｂに示すように親指５２ｂで絞りの選択画面部分をタッチすることにより、絞りの操作を選択することができる。  
また、この選択操作に対応して、アクセサリ４の接眼表示部３２には、図３Ｃに示すように絞りが選択されて、絞り値が調整されていることを示す表示３２ａを行う。  
なお、図３Ｃにおける中央部分には、ユーザ５１が撮影しようとする被写体における主要被写体となる人物５４（図６参照）の画像５４ａが表示されている。
【００３０】
このような構成の撮影装置としての第１の実施形態のカメラ１は、撮影を行うための撮影レンズとしてのレンズ５と、上記撮影レンズを介した被写体の光学像を電気信号に変換する撮像素子６と、上記撮影レンズの絞りを制御する絞り制御部５ａと、上記撮影レンズのピント位置を制御するピント位置制御部５ｂと、を具備する撮影装置において、上記撮影レンズの実際の絞り開放限界の値を超える絞り値に設定するための操作を行う絞り操作部２２ａと、上記絞り操作部２２ａの上記絞り開放限界の値を超える、該絞り開放限界の値からの操作量に応じて、上記ピント位置制御部５ｂにより上記被写体における主要被写体部分にピント合わせしたピント位置で上記撮像素子６により撮像した画像と共に、該ピント位置から上記撮影レンズを光軸方向に所定のシフト量だけシフトしたシフト位置で上記撮像素子６により撮像した上記主要被写体部分に対して背景となる、上記所定のシフト量に対応したぼけ量だけぼけた背景画像をほぼリアルタイムに表示可能とする表示部９とを有することを特徴とする。
【００３１】
次に図４を参照して本実施形態におけるカメラ制御の処理内容を説明する。  
ユーザ５１は、図３Ａのようにカメラ１を保持し、カメラ１の図示しない電源をＯＮする。カメラ１のカメラ本体３内の信号処理＆制御部８は、ステップＳ１に示すように電源ＯＮされたか否かを判定し、ＯＮされていない場合にはステップＳ２に示すようにスタンバイの処理状態を保持する。  
一方、ＯＮされた場合には、ステップＳ３において信号処理＆制御部８は、撮影モードの設定又は撮影モードが選択されているか否かの判定を行う。  
撮影モードの場合には、ステップＳ４において信号処理＆制御部８は、撮像素子６により撮像した画像に対し、動画表示を行うための画像処理を行う。
【００３２】
そして生成した動画表示用の画像を表示部９と接眼表示部３２に出力し、表示部９と接眼表示部３２とでライブビュー表示を行う。なお、ユーザ５１による選択設定により、表示部９と接眼表示部３２との一方でライブビュー表示を行うようにしても良い。  
ステップＳ４による画像処理が開始すると、ステップＳ５において撮影レンズ部２の制御部２１は、通信部２６，１６を介して信号処理＆制御部８と撮影レンズ部２のレンズ５のレンズ状態の情報に関する通信を行う。この通信によりカメラ本体３の信号処理＆制御部８は、レンズ５のレンズ状態の情報を取得し、このレンズ状態に対応した処理を速やかに行うことが可能になる。  
また、ステップＳ６において信号処理＆制御部８は、タッチパネル１２からの操作により絞りとピントのいずれの操作が選択されたかの判定を行う。
【００３３】
タッチパネル１２からピント操作が選択された場合には、操作部２２の回転リングの回転操作に応じてピント位置制御部５ｂはピント位置制御を行い、ステップＳ８の処理に進む。  
また、ステップＳ６において、タッチ操作が無い場合にもステップＳ８の処理に進む。  
ステップＳ８において信号処理＆制御部８は、レリーズボタン３ａによる撮影操作が行われたか否かを操作判定部１３により操作判定結果から判定する。撮影操作が行われない場合には、ステップＳ１の処理に戻る。一方、撮影操作が行われた場合には、ステップＳ９において撮像素子６により撮像され、信号処理＆制御部８により画像処理した画像を撮影画像として記録部１１に記録し、ステップＳ１の処理に戻る。
【００３４】
また、ステップＳ３において、撮影モードでない場合には、ステップＳ１０において信号処理＆制御部８は、再生モードの設定（又は選択）であるか否かの判定を行う。再生モードの場合には、ステップＳ１１において信号処理＆制御部８は、記録部１１に記録された撮影画像における例えば最後に記録した撮影画像を再生する処理を行う。  
次のステップＳ１２において信号処理＆制御部８は、再生画像を更新する操作が行われたか否かを判定する。更新する操作が行われた場合には、ステップＳ１３において信号処理＆制御部８は、再生画像を更新する処理を行った後、ステップＳ１の処理に戻る。なお、ステップＳ１２の処理において更新する操作が行われない場合には、ステップＳ１の処理に戻る。
【００３５】
また、ステップＳ１０の処理において、再生モードでないと、ステップＳ１４において信号処理＆制御部８は、撮影レンズ部２と画像通信を行った後、ステップＳ１の処理に戻る。  
一方、ステップＳ６の処理において、タッチパネル１２により絞りが選択された場合には、図１に示す操作部２２は絞り操作部２２ａとして機能する。  
そして、ステップＳ１５において制御部２１（の操作量判定部２１ａ）は、絞り操作部２２ａとして機能する操作部２２の回転リングが回転操作されたか否かを位置検出部２４ｂの検出結果を介して判定する。操作部２２の回転リングが回転操作されない場合にはステップＳ８の処理に進む。この場合には、ステップＳ１５の操作前の絞りの設定状態で撮影が行われるか、撮影が行われることなくステップＳ１の処理に戻る。
【００３６】
ステップＳ１５の処理において、回転操作された場合には、ステップＳ１６において回転操作による絞り毎（絞り値毎）に信号処理＆制御部８は、撮像素子６による撮像画像を取得する。  
また、ステップＳ１７において制御部２１（操作量判定部２１ａ）は、絞り４０がその開放限界（の値）を超える操作が行われたか否かを判定する。絞り４０の開放限界（の値）を超える操作が行われない場合、つまり絞り開放限界以内である場合には、ステップＳ１８において制御部２１又は絞り制御部５ａは、回転リングの回転操作（量）で絞り４０の絞り値を制御し、ステップＳ８の処理に移る。  
この場合には、絞り開放限界以内での通常の撮影を行う処理内容に該当する。
【００３７】
一方、ステップＳ１７の処理において、絞り４０の開放限界（の値）を超える操作が行われた場合には、ステップＳ１９において信号処理＆制御部８は、制御部２１との通信を利用して、絞り開放（限界）に相当するぼけ量を算出する処理を行う。このぼけ量は、ピント位置からシフト位置にピントシフトする場合のシフト量の基準値となる。そして、開放限界を超える操作量に応じた所定のシフト量が、このシフト量の基準値を用いて決定される。この処理は図５にてより詳細に後述する。なお、このぼけ量の算出処理を制御部２１が行うようにしても良い。  
次のステップＳ２０において制御部２１又は信号処理＆制御部８は、回転リングの回転操作量（の値）からレンズ５によるぼけ量を増大させるピントシフト量を決定する処理を行う。この処理は図７にてより詳細に後述する。  
次のステップＳ２１において信号処理＆制御部８又はピント位置制御部５ｂは、レンズ５をピント位置と、このピント位置からシフトしたシフト位置との間で振動させるように駆動させる制御を行い、両位置で撮像した画像から合成画像を生成する処理を行った後、ステップＳ１の処理に戻る。
【００３８】
次に図５を参照して図４のステップＳ１９の絞り開放（限界）に相当するぼけ量を算出する処理の詳細を説明する。この処理が開始すると、ステップＳ３１において信号処理＆制御部８は、撮影レンズ部２との通信を利用してレンズ５の絞り開放（限界）のＦナンバＦｎｏ０の値を取得する。  
また、ステップＳ３２において信号処理＆制御部８は、撮影レンズ部２との通信を利用してレンズ５の焦点距離Ｆを取得する。  
次のステップＳ３３において信号処理＆制御部８は、ＡＦ結果、又はピント合わせの調整により被写体（における主要被写体）にピントが合ったピント位置の状態での図２（Ｂ）の場合の（５）式中の距離Ｚの値を判定する。なお、この距離Ｚは、次のステップＳ３４の処理の際に使用される。
【００３９】
次のステップＳ３４において信号処理＆制御部８は、（１）式、つまり（Ｌ−Ｆ）・Ｚ＝Ｆ^２を用いて被写体距離Ｌを算出する。そして、次のステップＳ３５において信号処理＆制御部８は、絞り開放相当のぼけ量としての（３）式に相当するφ０＝Ｆ^２／（Ｆｎｏ０×（Ｌ−Ｆ））を算出する。そして、図４の次のステップＳ２０の処理に進む。  
なお、上記のステップＳ３４において被写体距離Ｌを算出する場合、（１）式を用いることなく、図６のように主要被写体となる人物５４の顔検出を利用して被写体距離Ｌを算出しても良い。
【００４０】
図６に示すように人物５４にピント合わせした状態では、人物５４の顔５５の縦方向のサイズをＨｆ０とし、撮像素子６の撮像面に結像された像上における顔５５の縦方向のサイズをＨｆ１とした場合には、以下の（８）式が近似的に成立する。  
Ｌ＝Ｆ×Ｈｆ０／Ｈｆ１  （８）
撮像面上でのサイズＨｆ１は、撮像素子６のデータを用いて算出でき、また顔５５のサイズＨｆ０は通常の人物５４の場合には既知の評価値で近似することにより、（８）式から被写体距離Ｌを算出できる。  
次に図７を参照して図４のステップＳ２０の回転操作量からピントシフト量（より具体的には回転操作量に対応したピントシフト量）を決定する処理の詳細を説明する。以下の説明では、制御部２１が主に行う場合で説明するが、信号処理＆制御部８がその制御動作を行うようにしても良い。従って、制御部２１又は信号処理＆制御部８は、ピントシフト量（又はシフト量）を決定するピントシフト量（又はシフト量）決定部の機能を持つ。
【００４１】
この処理が開始すると、ステップＳ４１において制御部２１（の操作量判定部２１ａ）は、回転リングが絞り開放限界（の絞り値）の次の目盛までの（回転）操作量であるか否かの判定を、位置検出部２４ｂによる位置検出を利用して行う。  
次の目盛までの（回転）操作量である判定結果の場合にはステップＳ４２において制御部２１は、絞り開放限界の場合のぼけ量に相当する直径φ０の場合の距離Ｚから、その√２倍（√２は２の平方根を表す）のぼけ量となる直径√２・φ０の場合の距離Ｚに相当するピントシフト量ＺｓをＺ×√２として決定した後、図４の次のステップＳ２１の処理に進む。
【００４２】
絞り開放限界の場合には、（５）式から
φ０＝Ｚ／Ｆｎｏ０  （９）
となる。このため、この場合のぼけ量となる直径φ０を、絞り開放限界（の絞り値）を超える方向で、絞り開放の次の絞り値に対応する次の直径φｎｅｘｔ１として
φｎｅｘｔ１＝√２×φ０  （１０）
に相当するぼけ量を発生させるように、上記ピントシフト量ＺｓをＺ×√２にする。なお、絞りを可変する操作においては通常、１目盛分毎の操作量により、Ｆナンバは√２倍変化し、本実施形態においては絞りの通常の操作に対応したぼけ量を生成するようにピントシフト量Ｚｓを決定する。
【００４３】
また、ステップＳ４１の処理において、回転リングが次の目盛までの（回転）操作量でない場合にはステップＳ４３において制御部２１（の操作量判定部２１ａ）は、回転リングが絞り開放限界（の絞り値）の次の次の目盛までの（回転）操作量であるか否かの判定を行う。  
次の次の目盛までの（回転）操作量であるとの判定結果の場合には、ステップＳ４４において制御部２１は、直径φ０の場合の距離Ｚから、その√２・√２倍のぼけ量となる直径２・φ０の場合のピントシフト量Ｚｓとなるように、ピントシフト量ＺｓをＺ×２として決定した後、図４の次のステップＳ２１の処理に進む。  
なお、ここでのピントシフト量Ｚｓは、図２（Ｃ）における距離Ｚ＋シフト量Ｚｓｉｆｔを表わしている。このため、ピント位置からレンズ５を実際にシフトするシフト量Ｚｓｉｆｔは、ピントシフト量Ｚｓから距離Ｚを減算した値となる。
【００４４】
このため、図４のステップＳ２０の処理「回転操作量からピントシフト量を決定する」処理内容において、さらに「ピントシフト量Ｚｓからシフト量を算出する」処理内容を含めるようにしても良い。  
ステップＳ４４の処理は、上述した（絞り開放の次の絞り値に対応する）次の直径φｎｅｘｔ１の次の絞り値の場合に該当する次の次の直径φｎｅｘｔ２の場合に該当する。この場合、
φｎｅｘｔ２＝√２×φｎｅｘｔ１＝２×φ０  （１１）
となる。  
一方、ステップＳ４３の処理において、回転リングが次の次の目盛までの（回転）操作量でない場合にはステップＳ４５において制御部２１は、警告を行う信号を通信を利用して信号処理＆制御部８に送り、信号処理＆制御部８は規定された操作範囲を超える操作、又は規定されていない操作であると警告する旨を、例えば表示部９での表示で行う。
【００４５】
図７では、簡略化して、開放限界から２目盛分のみ、ぼけ量を増大させる処理内容を示しているが、３目盛以上にぼけ量を増大させる処理内容にしても良い。また、図７においては、簡略的に１目盛単位の操作量の場合で説明しているが、より詳細に例えば１．５目盛のように１目盛よりも小さい目盛単位で（例えば０．１目盛単位で）回転操作量を設定できるようにしても良い。  
次に図８を参照して図４のステップＳ２１のピントシフト振動＆合成の処理の詳細を説明する。  
この処理が開始すると、ステップＳ５１において信号処理＆制御部８は、ピントシフト無し画像を取得する。つまり、レンズ５が主要被写体にピントが合ったピント位置の状態で撮像素子６により撮像した撮像画像を信号処理＆制御部８は取得する。なお、ステップＳ２１においては、ピント位置において撮像素子６により撮像される撮像画像は、レンズ５が絞り開放限界の値に固定された状態の画像となる。
【００４６】
次のステップＳ５２において信号処理＆制御部８は、通信を利用して振動的駆動部２３ｃによりレンズ５を、ステップＳ２０で決定されたピントシフト量Ｚｓとなるように振動的に駆動する。  
例えばステップＳ２０による回転操作量から、（１０）式のφｎｅｘｔ１が図２（Ｃ）に示すφ１に一致する場合には、振動的駆動部２３ｃはレンズ５を図２（Ｂ）のピントシフト無しのピント位置と、図２（Ｃ）に示すピントシフト後の位置との間を往復するように高速に振動的に駆動する。  
そして、次のステップＳ５３において信号処理＆制御部８は、ピントシフト後の画像を取得する。つまり、レンズ５によるピントがずれた位置の状態で撮像素子６により撮像した撮像画像を信号処理＆制御部８は取得する。この場合においても、レンズ５は絞り開放限界の値に固定された状態となり、その状態で撮像素子６は撮像する。
【００４７】
次のステップＳ５４において信号処理＆制御部８は、図４のステップＳ１６の処理において絞り（を変化させた場合の絞り値）毎に取得した画像のコントラスト値、又は空間周波数の高域側成分値を比較してぼけ量の程度を評価する処理を行う。なお、絞り開放限界を超える絞り操作状態においては、レンズ５は常時開放状態に固定される。このステップＳ５４は、各絞り値毎に行う場合に限らず、少なくとも絞り開放限界の場合を含む代表的な絞り値の場合のみで行うようにしても良い。  
次のステップＳ５５において信号処理＆制御部８は、ピントシフト無し画像（つまりピント位置の状態で取得した画像）において、絞り開放限界においても十分に小さいぼけ量未満とみなすことができるぼけ量変化なし部の画像部分を切り取る（又は抽出する）処理を行う。具体的には、ピント位置の状態で取得した撮像画像における主要被写体の画像部分をぼけ量変化なし部の画像として切り取る。
【００４８】
次のステップＳ５６において信号処理＆制御部８は、切り取った画像を、ピントシフト後の背景部分のぼけが大きいぼけた画像に、切り取った画像の位置合わせをして嵌め込み（又は置換し）、合成画像を生成する処理を行う。この合成画像を生成した後、ステップＳ５７において表示部９は、合成画像を表示（例えば図１３における符号Ｉｃ）し、この処理を行った後、図４のステップＳ１の処理に戻る。  
なお、ステップＳ５７の処理において、合成画像の表示を一定時間行った後、次の処理に移っても良いし、表示部９における表示画面を分けてその表示画面の一部に合成画像を表示するようにしても良い。  
後者の場合には、ステップＳ１の処理に戻り、さらにステップＳ４の処理になった場合には、表示部９の表示画面には、ライブビュー表示と、その直前において生成された合成画像の表示とが殆ど同時に殆どリアルタイムに行われる。
【００４９】
ユーザ５１は、表示部９に表示される合成画像を観察することにより、ピントがあった主要被写体と共に、その背景部分のぼけ量の程度（ぼけ味）を確認しながら撮影を行うことができ、シャッターチャンスを逃すことを低減できる。  
図８に示す処理の変形例として、図９に示す処理内容にしても良い。図９におけるステップＳ５１−Ｓ５４、Ｓ５７に関しては図８と同じであり、図８におけるステップＳ５５，Ｓ５６の処理を、ステップＳ６１，Ｓ６２に変更している。  
ステップＳ５４の次のステップＳ６１において信号処理＆制御部８は、絞り開放限界においても十分に小さいぼけ量未満とみなすことができるぼけ量変化なし部の輪郭により、ぼけ量変化なし部の画像領域とそれ以外の画像領域との領域分けの処理を行う。
【００５０】
具体的には、ピント位置の状態で取得した撮像画像における主要被写体の画像部分の輪郭から、ぼけ量変化なし部と、主要被写体の画像部分に比較してぼけが大きい背景部分との画像領域を分ける。このステップＳ６１は、ぼけ量変化なし部とぼけが大きい背景部分との輪郭を検出する処理とみなすこともできる。  
次のステップＳ６２において信号処理＆制御部８は、例えば上記領域分けを行った画像において輪郭を境界として、ぼけ量変化無し部となるピントが合った主要被写体の画像領域の外側の画像領域にステップＳ５３で取得したぼけの大きい背景画像部分を置換し、合成画像を生成する。この処理の後、ステップＳ５７の処理に移る。なお、このステップＳ６２の合成画像を生成する処理を行う場合、ステップＳ５３で取得した画像に対して、上記輪郭を境界としてその境界内側部分をぼけ量変化無し部となるピントが合った主要被写体の画像領域で置換して合成画像を生成しても良い。  
図９の変形例による作用効果は、図８の場合とほぼ同様となる。また、図９の変形例によると、領域分けを行うので、図８の場合よりも主要被写体の画像部分と背景部分とをより確実に分離できる可能性が高い。
【００５１】
図１０は本実施形態における回転リングが絞り開放限界を超えて操作された場合におけるカメラ本体３と、撮影レンズ部２とが通信を行い、それぞれ対応した処理を行う様子の動作説明図を示す。  
カメラ本体３の信号処理＆制御部８は、菱形で示すＣＭＯＳセンサによる撮像素子６による撮像・（撮像された画像の）読出しする際の各フレームの画像に同期する垂直同期信号に同期して、カメラ本体内処理を行う。  
カメラ本体３は、撮像・読出し中（のフレーム期間）においては、通信前のカメラ本体内処理（図中Ｂ１）を行い、この処理Ｂ１においてこのフレーム前における撮影レンズ部２側での回転リングの絞り開放限界を超える回転操作量等の情報からレンズ５のピント位置からのシフト量を算出する処理等を行う。
【００５２】
この処理Ｂ１が終了すると、カメラ本体３から撮影レンズ部２へ通信（図中のＢＬ）により、撮影レンズ部２に対してレンズ５をどれだけシフトさせるかのシフト量Ｚｓｉｆｔの情報を送信する。  
この送信に対して、撮影レンズ部２は対応する撮影レンズ内処理（図中のＬ１）を開始する。その際、返信信号を通信（図中のＬＢ）によりカメラ本体３に返すと共に、前回以後に回転リングの操作の有無の情報と、現在における回転リングの絞り開放限界を超える回転操作量（前回からの変化分でも良い）等の情報を送信する。  
また、撮影レンズ部２は、撮影レンズ内処理Ｌ１において、１フレーム分の撮像画像の撮像・読出しが終了したタイミングでレンズ５をピント位置から送信されたシフト量Ｚｓｉｆｔだけシフトさせるように駆動部２３ａ（振動的駆動部２３ｃ）を介して駆動させる動作を開始する。
【００５３】
この動作の終了のタイミングにおいて次のフレームの撮像画像の撮像・読出しが開始する。  
一方、カメラ本体３は、通信により上記絞り開放限界を超える回転操作量等の情報を受けると、通信後のカメラ本体内処理（図中Ｂ２）において、その情報を蓄積する。また、次の通信前のカメラ本体内処理Ｂ１を行い、その処理の終了が終了すると、カメラ本体３から撮影レンズ部２へ通信（図中のＢＬ）により、撮影レンズ部２に対してレンズ５をピント位置に戻すように、シフト位置からどれだけ戻すかの情報を送信する。  
この送信に対して、撮影レンズ部２は対応する撮影レンズ内処理（図中のＬ１）を開始する。その際、返信信号を通信（図中のＬＢ）によりカメラ本体３に返すと共に、前回以後に回転リングの操作の有無の情報と、現在における回転リングの絞り開放限界を超える回転操作量（前回からの変化分でも良い）等の情報を送信する。
【００５４】
また、撮影レンズ部２は、撮影レンズ内処理Ｌ１において、１フレーム分の撮像画像の撮像・読出しが終了したタイミングで、送信された情報に対応してレンズ５をピント位置に戻すように駆動部２３ａ（振動的駆動部２３ｃ）を介して駆動させる動作を開始する。この動作の終了のタイミングにおいて次のフレームの撮像画像の撮像・読出しが開始する。そして、上述した動作が繰り返される。  
このように動作する本実施形態においては、図４に示すように絞りを操作する（絞り操作部２２ａの）選択を行い、回転リングを絞り開放限界を超える操作を行った場合には、レンズ５を主要被写体にピントが合ったピント位置と、絞り開放限界の値を超える操作量に応じて背景部分に対する画像のぼけ量を大きくするシフト位置とに振動的（交互）に設定して、それぞれの画像を取得した後、ピントが合った主要被写体の画像部分と、ぼけの大きい背景部分の画像部分とから合成画像を生成し、その合成画像を表示する処理を巡回するように繰り返し行う。
【００５５】
このため、ユーザ５１は、撮影する操作を行う際に背景部分のぼけ量の程度を合成画像から殆どリアルタイムに確認しながら、絞りを開放限界の絞り値を超えて回転する簡単な操作を行うのみで、主要被写体にピントが合い、その背景部分を十分にぼかした画像を撮影することが容易にできる。  
また、背景部分のぼけ量の程度を殆どリアルタイムに確認できるので、シャッターチャンスを逃すことが少ない撮影し易いカメラを提供できる。  
また、通常の絞りを開放側に操作するのに対応させて、開放限界を超える操作量に対応した量だけ背景画像をぼけさせるようにピント位置からのシフト量を設定しているので、操作性の良い撮影装置としてのカメラを提供できる。
【００５６】
次に第１の実施形態のカメラの第１変形例を説明する。第１の実施形態においては図４のカメラ制御の処理手順における特にステップＳ２１の処理より、殆どリアルタイムに合成画像を生成し、その合成画像を殆どリアルタイムに表示することができるようにしている。  
これに対して、本変形例においては、合成画像の表示と、合成画像を生成する前の画像（合成前画像と言う）としての２つの画像（具体的にはピントが合った主要被写体部分の画像と、背景部分がぼけたぼけ背景画像）の表示との一方を選択できるようにしている。この選択は、例えばタッチパネル１２によるタッチ操作で選択できる。このため、タッチパネル１２は、表示を選択する表示選択部の機能を持つ。
【００５７】
また、信号処理＆制御部８は、ユーザ５１が上記選択により合成画像を選択した場合には上述した第１の実施形態と同様の処理となるが、合成前画像を選択した場合には、合成前画像を表示部９に出力する。  
このため、信号処理＆制御部８の表示制御部８ａは、合成前画像を生成して表示部９に出力する合成前画像表示制御部の機能を持つ。また、表示部９は、合成前画像を表示する（図１において点線で示す）合成前画像表示部９ｂの機能を持つ。  
次に本変形例における図４に示すカメラ制御におけるステップＳ２１と異なる処理部分を図１１を参照して説明する。図１１は、本変形例におけるピントシフト振動＆画像表示の処理を示す。
【００５８】
図１１におけるステップＳ５１からステップＳＳ６１までの処理は、図９の場合と同様の処理を適用できる。  
ステップＳ６１において信号処理＆制御部８は、ピントが合った状態のピントシフト無し画像において絞り開放限界における画像からぼけ変化無し部として、最もぼけ量が小さい輪郭を検出する。  
次のステップＳ７１において信号処理＆制御部８（のタッチ検出部８ｃ）は、ユーザ５１が合成画像の表示と、合成前画像の表示とのいずれを選択したかを判定する。ユーザ５１により合成画像の表示が選択された場合には、図９の場合と同様にステップＳ６２，Ｓ５７を順次行う。
【００５９】
一方、合成前画像の表示が選択された場合には、ステップＳ７２において信号処理＆制御部８は、ピントが合った主要被写体を少なくとも含む絞り開放限界の値で撮像した画像（第１の画像）と、ピントシフトしたぼけた背景画像を少なくとも含む画像（第２の画像）とを表示部９に出力する。  
また、この場合、第１の画像においては、ステップＳ６１で検出した輪郭を付ける。そして、次のステップＳ７３において表示部９は、第１の画像と第２の画像とを隣接して殆ど同時に殆どリアルタイムに表示する処理を行う。  
次のステップＳ７４において信号処理＆制御部８は、合成前画像の表示から合成画像の表示への変更の操作が行われたか否かを判定する処理を行う。合成画像の表示を行う変更の操作がされた場合には、ステップＳ６２の処理に移り、変更の操作がされない場合には、ステップＳ１の処理に戻る。なお、ステップＳ７４の処理を行うことなく、ステップＳ７３の処理後にステップＳ１に戻るように簡略化しても良い。
【００６０】
なお、本変形例においては信号処理＆制御部８は、絞り開放限界を超える操作が行われた場合には、図４のステップＳ４のライブビュー表示は、アクセサリ４の接眼表示部３２で行うように制御する。ユーザ５１の選択操作により表示部９の表示画面を分割して表示部９において、上記２つの画像又は合成画像と共に、ライブビュー表示も行うようにしても良い。  
また、本変形例の場合には、図４におけるステップＳ８において撮影操作が行われた場合には、表示部９において合成画像を表示する選択がされた状態では、上述した第１の実施形態と同様の処理となるが、表示部９において２つの画像を表示する選択がされた状態の場合には、信号処理＆制御部８は、２つの画像を記録部１１に記録した後、ステップＳ６２の処理を行い、合成画像を記録部１１に記録する。
【００６１】
なお、表示部９において２つの画像を表示する選択がされた状態において、撮影操作が行われた場合、信号処理＆制御部８は、ステップＳ６２の処理を行った後、合成画像を記録部１１に記録するようにしても良い。  
また、表示部９において表示された２つの画像を互いに関連付けて記録部１１に記録し、記録後においてユーザ５１による指示操作により、記録された画像から合成画像を生成して表示したり、記録部１１に合成画像を記録するようにしても良い。  
図１１の処理は、巡回して繰り返し行われるため、上述した合成画像の表示の場合と同様にステップＳ７３による２つの画像の表示は、殆どリアルタイムに行われる。
【００６２】
図１２は、表示部９による２つの画像の表示例を模式的に示す。表示部９の表示面には、第１の画像Ｉａとして主要被写体となる人物の画像５４ａがピントが合った状態で表示される。また、人物の画像５４ａの周囲には、背景となる山の画像６１ａが人物の画像５４ａよりは不鮮明に表示される。  
また、ステップＳ６１において検出された輪郭６２が、人物の画像領域と山の画像領域とを分ける境界６２として太い線で表示される。  
第１の画像Ｉａに隣接して、第２の画像Ｉｂが表示される。この第２の画像Ｉｂは、ピント位置からシフトしたシフト位置で撮像された画像であるため、特に背景となる山の画像６１ｂが、第１の画像における山の画像６１ａよりも大きくぼけた状態のものとなる。
【００６３】
なお、第２の画像Ｉｂ中での点線で示す人物の画像５４ｂは、第１の画像Ｉａ中の人物の画像５４ａよりもぼけた不鮮明なものとなる。  
また、ステップＳ７３による２つの画像Ｉａ，Ｉｂの表示状態からステップＳ７４により合成画像の表示に変更した場合における表示部９での合成画像の表示例を図１３に示す。図１３の表示例では、表示部９の表示面における例えば右側に合成画像Ｉｃを表示し、その左側にライブビュー（表示）画像Ｉｄを表示する例を示す。  
合成画像Ｉｃにおいては、図１２における第１の画像Ｉａ中の人物の画像５４ａと、第２の画像Ｉｂ中のぼけた背景画像としての山の画像６１ｂとが輪郭６２を境界として位置合わせして合成される。
【００６４】
本変形例によれば、第１の実施形態の効果を有すると共に、ユーザ５１は、表示部９に表示される２つの画像Ｉａ，Ｉｂから背景となる山の画像６１ｂのぼけ量の程度を殆どリアルタイムに確認できる。  
このため、ユーザ５１は、背景のぼけ量が適当であると確認した後に撮影操作を行うことにより、主要被写体にピントが合い、その背景部分が十分にぼけたユーザ５１が望む画像を撮影又は取得することができる。  
一方、ぼけ量が足りないと判断した場合には、さらに回転リングを絞り開放限界の値を超える方向に回転操作すれば良い。その回転操作量に対応して、ピント位置制御部５ｂは駆動部２３ａ（振動的駆動部２３ｃ）を介してレンズ５を、ピント位置からのシフト量を増大したシフト位置に設定し、背景画像となる山の画像６１ｂのぼけ量を増大できる。
【００６５】
また、本変形例によれば、第１の画像Ｉａ中において、輪郭６２を表示するため、ユーザ５１は、輪郭６２の検出が適切に行われたか否かを確認できる。  
なお、輪郭６２の検出が適切に行われていない場合には、ユーザ５１がタッチパネル１２からの操作により輪郭６２を内側或いは外側に移動して、移動方向に輪郭６２を修正できるようにしても良い。  
なお、上述した説明においては、背景は無限遠としてレンズ５のピント位置からのシフト量を設定する簡略化した場合で説明したが、ユーザ５１がより精度良く背景となる背景被写体の概略の距離を指定又は入力し、指定された距離に応じてピント位置からのシフト量を決定するようにしても良い。また、背景部分にＡＦして、そのＡＦにより算出した距離を用いてピント位置からのシフト量を決定するようにしても良い。
【００６６】
なお、上述した図４，図５，図７―図９，図１１等において説明した各ステップの手順は、その機能に不都合が生じない限り、実行順序を変更しても良いし、複数同時に実行し、あるいは実行毎に異なった順序で実行してもよい。  
また、絞り開放限界を超えて操作された場合、記録部１１に記録した画像や撮像素子６により読み出した画像からフレーム間における画像の動きを検出する（図１において点線で示す）動き検出部８ｆを備える構成にし、検出される動き量が小さい場合にはピント位置とシフト位置間でレンズ５を振動的に駆動する回数を低減するように制御しても良い。
【００６７】
この動き検出部８ｆは、例えば１つ前のフレームにおけるピント位置で撮像された画像と、次のフレームのピント位置で撮像された画像との相対的な動き量を検出する。検出された各部における動き量の最大値が、動き量が小さいか否かを判定基準となる閾値Ｖｔと比較し、閾値以下となるか否かを判定する。その判定結果に応じて、ピント位置からシフト位置への移動動作を抑制する。  
図１４はこの動き検出を利用した場合のカメラ１におけるピントシフト振動＆合成の処理手順を示す。  
図１４における処理手順は、図９の処理手順に類似しているので、図９を参照して説明する。図１４におけるステップＳ５１、Ｓ５２ａ、Ｓ５３は、図９のステップＳ５１、Ｓ５２，Ｓ５３と殆ど同じである。但し、図９におけるステップＳ５２ではレンズ５を振動的に駆動するが、図１４におけるステップＳ５２ａは、レンズ５をピント位置からピントシフト位置に駆動する処理を表す。
【００６８】
また、図１４においてはステップＳ５３の処理後のステップＳ５２ｂにおいて、レンズ５をピント位置に駆動する。  
次のステップＳ６１において図９のステップＳ６１と実施的に同じ処理、つまりボケ変化無し部の輪郭を検出する。  
さらに次のステップＳ８１において動き検出部８ｆは、例えば時間的に隣接して撮像された２つのピントシフト無し画像のフレーム間での対応する画像部分での動き検出を行う。この動き検出を行う場合、各画像を適宜の小領域に分割し、分割した各小領域においてフレーム間での動き方向及びその動き方向での動き量を検出する。  
そして、次のステップＳ８２において動き検出部８ｆは、検出した各小領域での動き量の絶対値（又は大きさ）の最大値が閾値Ｖｔ以下となるか否かを判定する。
【００６９】
動き量の最大値が閾値Ｖｔ以下とならない判定結果の場合には、ステップＳ６２，Ｓ５７の処理を順次行う。この場合には、図９と実質的に同様の処理となる。  
一方、動き量の最大値が閾値Ｖｔ以下となる判定結果の場合には、ステップＳ８３において、次のピントシフト無し画像を取得する。また、次のステップＳ８４において、（レンズ５をピントシフト駆動すること無く）次のピントシフト後の画像として、前回取得したピントシフト後の画像を兼用（流用）し、ステップＳ８１の処理に戻る。  
従って、動き量の最大値が閾値Ｖｔ以下となる判定結果の場合には、レンズ５をピント位置からシフト位置に移動する処理を行わない。換言すると、制御部２１又は信号処理＆制御部８は、駆動部２３ａ又は振動的駆動部２３ｃによるレンズ５をピント位置からシフト位置に移動する動作を抑制（規制）する制御を行う。
【００７０】
このように動き量の最大値が小さい場合には、ピントシフト後の画像として前回のピントシフト後の画像を流用することになるが、この画像はぼけた背景画像であり、前回のフレームのものを流用しても支障ない。  
本変形例によれば、レンズ５を振動的に駆動する回数を低減できる。その他、上述した実施形態とほぼ同様の効果を有する。  
なお、上述した実施形態等を部分的に組み合わせて構成される実施形態も本発明に属する。  
また、本発明は、上述した撮影装置としてのカメラ１として、撮影レンズ部２がカメラ本体３に着脱自在となる撮影レンズ交換式の場合に限定されるものでなく、撮影レンズ部２がカメラ本体３に一体化されたカメラの場合を含む。  
撮影レンズ部２がカメラ本体３と一体化した構成の場合には、図１に示した撮影レンズ部２側の制御部２１の機能を、信号処理＆制御部８が兼ねる構成にしても良い。また、この場合は、通信部２６、１６を用いることなく、信号処理＆制御部８が撮影レンズ部２の各部を制御するようにしても良い。なお、信号処理＆制御部８が、絞り制御部５ａ、ピント位置制御部５ｂ等の機能を持つ構成にしても良い。
また、本発明は、撮影機能を備えた携帯機器に搭載されたカメラや、そのカメラを搭載した携帯機器の場合も含む。
【符号の説明】
【００７１】
１…カメラ、２…撮影レンズ部、３…カメラ本体、４…アクセサリ、５…レンズ、５ａ…絞り制御部、５ｂ…ピント位置制御部、６…撮像素子、７…撮像部、８…信号処理＆制御部、８ａ…表示制御部、８ｂ…パラメータ制御部、８ｃ…タッチ検出部、８ｄ…ぼかし処理部、８ｅ…合成画像生成部、９…表示部、９ａ…合成画像表示部、１１，２５…記録部、１２…タッチパネル、１３…操作判定部、１５…顔検出部、１６，１７，２６，３１…通信部、２１…制御部、２１ａ…操作量判定部、２２…操作部、２２ａ…絞り操作部、２３ａ，２３ｂ…駆動部、２４ａ，２４ｂ…位置検出部、３２…接眼表示部、
【図１】
2013090010.tif 000003
【図２】
2013090010.tif 000004
【図３Ａ】
2013090010.tif 000005
【図３Ｂ】
2013090010.tif 000006
【図３Ｃ】
2013090010.tif 000007
【図４】
2013090010.tif 000008
【図５】
2013090010.tif 000009
【図６】
2013090010.tif 000010
【図７】
2013090010.tif 000011
【図８】
2013090010.tif 000012
【図９】
2013090010.tif 000013
【図１０】
2013090010.tif 000014
【図１１】
2013090010.tif 000015
【図１２】
2013090010.tif 000016
【図１３】
2013090010.tif 000017
【図１４】
2013090010.tif 000018