(57)【要約】【課題】  従来の撮像装置では、複数回撮影する各画像の中に個人認識が優先される優先人物が存在した場合、常にこの優先人物に撮像条件が最適化されて撮影が行われる。【解決手段】  撮像素子２の撮像条件は、撮像条件設定手段により、撮像素子２によって撮像する第１の画像に応じて、図２、Ｓ９の処理により、検出手段により検出された被写体像の中で優先順位が最も高い最優先被写体像である例えば人物Ｂに適した第１の撮像条件に設定され、撮像素子２によって撮像する第２の画像に応じて、図３、Ｓ４７、Ｓ４８の処理で、最優先被写体像以外の被写体像である例えば人物Ｄに適した第２の撮像条件に設定される。このため、本実施形態のパノラマ集合写真の撮像のように、被写体像を含んだ画像を複数回撮像する場合でも、優先順位が最も高い最優先被写体像である例えば人物Ｂに適した撮像条件で常に撮像され続けることがない。【選択図】  図４
2011250277.tif 000002
【特許請求の範囲】
【請求項１】
画像を撮像する撮像手段と、
前記撮像手段によって撮像された画像から被写体像を検出する検出手段と、
前記撮像手段によって撮像する画像に応じて、前記検出手段により検出された被写体像の中で優先順位が最も高い最優先被写体像に適した第１の撮像条件、または、前記最優先被写体像以外の被写体像に適した第２の撮像条件に、前記撮像手段の撮像条件を設定する撮像条件設定手段と
を備える撮像装置。
【請求項２】
請求項１に記載の撮像装置において、
前記検出手段により検出された被写体像の優先順位を前記撮像手段によって撮像する画像との関係で決定する優先順位決定手段を備えていることを特徴とする撮像装置。
【請求項３】
請求項１または請求項２に記載の撮像装置において、
前記撮像条件は、前記撮像手段に被写体像を結像する光学系の焦点調節状態、または、前記撮像手段に導く被写体光の光量を調節する絞りの絞り量であることを特徴とする撮像装置。
【請求項４】
請求項１から請求項３のいずれか１項に記載の撮像装置において、
前記第２の撮像条件における前記最優先被写体像以外の被写体像は、新たな画像を撮像する際に新たに加わった被写体像、または、前記最優先被写体像を除く被写体像の中の所定の優先順位の被写体像、または、前記検出手段により検出された全ての被写体像であることを特徴とする撮像装置。
【請求項５】
請求項１から請求項４のいずれか１項に記載の撮像装置において、
前記第１の撮像条件で撮像された第１画像および前記第２の撮像条件で撮像された第２画像の共通部分を繋ぎ合わせて合成画像を生成する合成画像生成手段を備えることを特徴とする撮像装置。
【請求項６】
請求項１から請求項５のいずれか１項に記載の撮像装置において、
前記第１の撮像条件で撮像された第１画像の撮像終了後に、前記第１画像における被写体像の集合列の一端に立っていた人物が、前記第２の撮像条件で撮像される第２画像を撮像するように指示する撮像アシスト手段を備えることを特徴とする撮像装置。
【請求項７】
請求項６に記載の撮像装置において、
前記撮像アシスト手段は、前記第２画像が撮像される際、前記第１画像の撮像者または新たに撮像される人物が、前記集合列の一端と反対側の他端に位置するように指示することを特徴とする撮像装置。
【請求項８】
請求項１から請求項７のいずれか１項に記載の撮像装置において、
前記第１の撮像条件で撮像された第１画像の撮像終了後、前記第１画像における被写体像の集合列の端以外の位置に居た人物が前記集合列から抜けた場合に、前記第２の撮像条件で撮像される第２画像を撮像する際、前記第１画像の撮像者または新たに撮像される人物が、前記集合列から抜けた位置に位置せずに前記集合列の端に位置するように指示する撮像アシスト手段を備えることを特徴とする撮像装置。
【請求項９】
請求項１から請求項８のいずれか１項に記載の撮像装置において、
前記第１の撮像条件で撮像される第１画像を撮像する際、前記第２の撮像条件で撮像される第２画像を撮像する予定の第２画像撮像者は、被写体像の集合列の端に位置するように指示する撮像アシスト手段を備えることを特徴とする撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像手段によって画像を撮像する撮像装置に関する。
【背景技術】
【０００２】
従来、この種の撮像装置としては、例えば、特許文献１に開示されたデジタルカメラがある。このデジタルカメラは、撮像手段によって取得された撮影フレーム内の画像から人物の顔を検出する顔検出手段を備えており、顔検出手段によって検出された人物の顔を、顔情報記憶手段に記憶されている顔の特徴情報を基に、個人認識手段によって認識する。撮影者が、顔情報記憶手段に登録されている人物の中から撮影対象として優先する人物を指定して顔情報記憶手段に記憶させておくことにより、撮影時の撮影フレーム内に検出された人物が優先人物である場合、優先人物に適した撮影条件で自動撮影が行われる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００８−７８９５１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記従来の撮像装置では、例えばパノラマ集合写真の撮影のように、被写体像を含んだ画像を複数回撮影する際、複数回撮影する各画像の中に個人認識が優先される優先人物が存在した場合、常にこの優先人物に焦点調節状態等の撮像条件が最適化されて撮影が行われる。このため、パノラマ集合写真の撮影画像の中には、優先人物以外の他の人物に最適な撮像条件で撮影された画像が含まれないという問題がある。
【課題を解決するための手段】
【０００５】
本発明はこのような課題を解決するためになされたもので、
画像を撮像する撮像手段と、
撮像手段によって撮像された画像から被写体像を検出する検出手段と、
撮像手段によって撮像する画像に応じて、検出手段により検出された被写体像の中で優先順位が最も高い最優先被写体像に適した第１の撮像条件、または、最優先被写体像以外の被写体像に適した第２の撮像条件に、撮像手段の撮像条件を設定する撮像条件設定手段と
を備えて撮像装置を構成した。
【発明の効果】
【０００６】
本発明による撮像装置によれば、被写体像を含んだ画像を複数回撮像する際、複数の被写体像に撮像条件が最適化されて、複数の被写体像の写真写りが良い好ましい複数の画像が得られる。
【図面の簡単な説明】
【０００７】
【図１】本発明の一実施形態によるデジタルカメラの電気回路構成の概略を示すブロック図である。
【図２】図１に示すデジタルカメラを用いたパノラマ合成画像の作成において、被写体像の中で優先順位が最も高い最優先被写体像に適した第１の撮像条件で撮像が行われる際の撮像アシスト処理の概略を示すフローチャートである。
【図３】図２に示すフローチャートに続けて行われる、最優先被写体像以外の被写体像に適した第２の撮像条件で撮像が行われる際の撮像アシスト処理の概略を示すフローチャートである。
【図４】（ａ）は、図１に示すデジタルカメラにより、第１の撮像条件で撮像する際にモニタに表示されるスルー画像、（ｂ）は、第２の撮像条件で撮像する際にモニタに表示されるスルー画像、（ｃ）は、生成されたパノラマ合成画像を示す図である。
【図５】一実施形態の変形例によるデジタルカメラを用いたパノラマ合成画像の作成において、第２の撮像条件で撮像する際にモニタに表示されるスルー画像を示す図である。
【発明を実施するための形態】
【０００８】
次に、本発明による撮像装置をデジタルカメラに適用した場合における、本発明を実施するための一形態ついて説明する。
【０００９】
図１は、この一実施形態によるデジタルカメラの電気回路構成の概略を示すブロック図である。
【００１０】
撮像光学系１を介してデジタルカメラ内に導かれた被写体光は、撮像素子２の受光面上に被写体像を投影する。図を簡単にするため、同図では撮像光学系１を単レンズとして図示しているが、撮像光学系１は、ズームレンズ、フォーカシングレンズ、ぶれ補正レンズを含む複数のレンズ群から成り、撮像素子２に被写体像を結像する光学系を構成する。ズームレンズ、フォーカシングレンズ、およびぶれ補正レンズは、ＣＰＵ（中央演算処理部）１３の制御により、不図示のズームレンズ駆動部，フォーカシングレンズ駆動部、およびぶれ補正レンズ駆動部がそれぞれ駆動されることで、移動する。ズームレンズが光軸方向に移動すると、撮像素子２の受光面上に投影される被写体像は拡大または縮小され、光学ズームの拡大倍率が調節される。また、フォーカシングレンズが光軸方向に移動すると、撮像素子２の受光面上に投影される被写体像のピントが調節される。また、ぶれ補正レンズがデジタルカメラの手ぶれ方向と逆の方向に移動すると、撮像素子２の受光面上に導かれる光の屈折方向が手ぶれを打ち消す方向に変化し、受光面上に投影される被写体像のぶれが補正される。ズームレンズ、フォーカシングレンズ、およびぶれ補正レンズの各レンズ位置は、それぞれ、不図示のズームレンズ位置検出センサ、フォーカシングレンズ位置検出センサ、およびぶれ補正レンズ位置検出センサにより検出され、検出された信号はＣＰＵ１３に出力される。
【００１１】
撮像素子２は、受光面に受光素子が二次元配列されたＣＣＤ（Charge Coupled Device）イメージセンサやＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサなどからなり、撮像光学系１を介して画像を撮像する撮像手段を構成している。デジタルカメラの筐体の上部には、被写体像を撮像する際に操作されるレリーズボタンが設けられている。撮像素子２は、レリーズボタンに対する操作者のレリーズ操作に応じ、設定されたシャッタースピードに応じた所定時間つまり露光時間、被写体像を撮像する。撮像された被写体像はアナログ画像信号に変換され、変換されたアナログ画像信号は、信号処理回路（ＡＦＥ回路）３において、相関二重サンプリングやゲイン調整が行われて、デジタル信号に変換される。画像処理回路４は、信号処理回路３で変換されたデジタル信号を取得し、取得したデジタル信号に対して、色補間処理や、階調変換処理、輪郭強調処理、ホワイトバランス調整処理などの各種の画像処理を行って画像データを生成する。生成された画像データは、圧縮処理が施され、バス５を介して一旦バッファメモリ８に格納される。
【００１２】
バス５に接続されたＩ／Ｆ（インターフェイス）部６は、不図示のコネクタを有し、該コネクタに記録媒体７が接続される。Ｉ／Ｆ部６は、接続された記録媒体７に対する画像データの書込や、記録媒体７からの画像データの読み込みを行う。バッファメモリ８に格納された画像データは、バス５およびＩ／Ｆ部６を介して記録媒体７に記録される。記録媒体７は、半導体メモリを内蔵した、デジタルカメラに着脱自在なメモリカード、またはハードディスクドライブなどで構成される。
【００１３】
バス５に接続された半押しスイッチ１０および全押しスイッチ１１は、レリーズボタンの押下操作に連動して、それぞれがオン信号をＣＰＵ１３へ出力する。
【００１４】
半押しスイッチ１０からのオン信号（半押し操作信号）は、レリーズボタンが通常ストロークの半分程度まで押し下げ操作されると出力され、半ストロークの押し下げ操作が解除されると出力が解除される。半押し操作信号は、ＣＰＵ１３に対して撮像準備の開始を指示し、ＣＰＵ１３は、この指示に応じて、ＡＦ（自動焦点調節）動作制御やＡＥ（自動露出調節）動作制御、ＡＷＢ（オートホワイトバランス）調整処理などを行って撮像条件を設定する。ＡＦ動作制御は、例えば、コントラスト検出方式を用いて行われ、スルー画像のコントラスト情報に基づいてフォーカシングレンズを移動させ、撮像素子２に被写体像を結像する撮像光学系１の焦点調節状態を調整して合焦位置を決める。ここで、スルー画像とは、撮像指示前に撮像素子２が取得するモニタ１６用の画像のことをいう。ＡＥ動作制御は、撮像素子２に導く被写体光の光量を調節する絞りの絞り量がＣＰＵ１３によって調節されることで行われ、被写体の明るさが調節される。
【００１５】
全押しスイッチ１１からのオン信号（全押し操作信号）は、レリーズボタンが通常ストロークまで押し下げ操作されると出力され、通常ストロークの押し下げ操作が解除されると出力が解除される。全押し操作信号は、ＣＰＵ１３に対して撮像開始を指示する。全押しされてこの指示を受けると、ＣＰＵ１３は、予め設定されたシャッター速度でシャッターを開き、被写体像を所定時間撮像素子２に露光させて被写体像の撮像を行わせる。
【００１６】
また、バス５には、不図示のフラッシュメモリが接続されている。フラッシュメモリは、データの読み書きが電気的に可能なＥＥＰＲＯＭ（Electrically Erasable Programmable ＲＯＭ）などからなり、ＣＰＵ１３が種々の処理を行う際の制御プログラムであるファームウェアや、モニタ１６に表示されるメニュー画面におけるメニュー項目の内容等が記憶される。モニタ１６は、ＴＦＴ（Thin Film Transistor）液晶などからなり、オンスクリーン用表示メモリ１４および表示バッファ１５を介してバズ５に接続されている。モニタ画像は、オンスクリーン用表示メモリ１４に記憶され、表示バッファ１５に読み出されてモニタ１６に表示される。モニタ１６には、撮像に関する種々の情報や、構図を確認するための上記のスルー画像、上記のメニュー画面などが表示される。
【００１７】
また、バス５には、操作部材９が接続されている。操作部材９は、上述したレリーズボタンや、不図示の十字キー、コマンドダイヤル、決定ボタンなどから構成され、各操作に応じた操作信号をＣＰＵ１３に送出する。また、バス５には、音声出力Ｉ／Ｆ１７を介してスピーカ１８が接続され、また、撮像時に発光して被写体を照明するフラッシュ１２が接続されている。
【００１８】
ＣＰＵ１３は、モニタ１６に表示するスルー画像に被写体像として含まれる人物像の顔領域を検出する。顔領域検出処理は、公知の特徴点抽出処理によって、眉、目、鼻、唇の各端点などの特徴点を抽出し、抽出した特徴点に基づいて顔領域か否かを判定する。なお、スルー画像と予め用意した参照データ（顔画像など）との相関関数を求め、この相関関数が所定の判定閾値を超えた場合に顔領域と判定する構成としてもよい。ＣＰＵ１３は、撮像素子２によって撮像された画像から被写体像の顔領域を検出する検出手段を構成する。
【００１９】
また、ＣＰＵ１３は、撮像素子２によって撮像する画像に応じて、検出手段により検出された被写体像の中で優先順位が最も高い最優先被写体像に適した第１の撮像条件、または、最優先被写体像以外の被写体像に適した第２の撮像条件に、撮像素子２の撮像条件を設定する撮像条件設定手段を構成する。ここで、第１の撮像条件および第２の撮像条件は、撮像素子２に被写体像を結像する撮像光学系１の焦点調節状態、撮像素子２に導く被写体光の光量を調節する絞りの絞り量、および、オートホワイトバランス等である。また、ＣＰＵ１３は、メニュー画面などにおける撮像者のカメラ設定に応じて、検出手段により検出された被写体像の優先順位を、撮像素子２によって撮像する画像との関係で決定する優先順位決定手段を構成する。決定された優先順位は、フラッシュメモリなどに記憶されて、デジタルカメラに予め登録される。また、第２の撮像条件で行われる撮像における最優先被写体像以外の被写体像は、本実施形態では、新たな画像を撮像する際に新たに加わった被写体像である。また、ＣＰＵ１３は、第１の撮像条件で撮像された第１画像および第２の撮像条件で撮像された第２画像の共通部分を繋ぎ合わせてパノラマ合成画像を生成する合成画像生成手段を構成する。
【００２０】
また、本実施形態におけるデジタルカメラのＣＰＵ１３は、撮像モード時にメニュー画面が操作されて、撮像アシスト機能がオン設定されると、所定のプログラムを起動して、撮像者によるパノラマ集合写真の撮像を手助けする撮像アシスト機能を実行する。ＣＰＵ１３は、撮像アシスト手段を構成し、第１の撮像条件で撮像された第１画像の撮像終了後に、第１画像における被写体像の集合列の一端に立っていた人物が、第２の撮像条件で撮像される第２画像を撮像するように指示する。また、撮像アシスト手段を構成するＣＰＵ１３は、第２画像が撮像される際、第１画像の撮像者または新たに撮像される人物が、集合列の一端と反対側の他端に位置するように指示する。
【００２１】
図２は、本実施形態のデジタルカメラを用いたパノラマ合成画像の作成において、被写体像の中で優先順位が最も高い最優先被写体像に適した第１の撮像条件で撮像が行われる際の撮像アシスト処理の概略を示すフローチャートである。
【００２２】
ＣＰＵ１３は、ステップ（以下、Ｓと記す）１において、操作部材９からの操作信号に応じて、モニタ１６に撮像アシスト機能の設定画面を表示させる。撮像者が、この撮像アシスト機能の設定画面で操作部材９を操作することで、ＣＰＵ１３は、撮像アシスト機能を実行させる。なお、設定変更の必要がない場合には、この撮像アシスト機能の設定画面をモニタ１６に表示するＳ１の処理を省略してもよい。次に、ＣＰＵ１３は、Ｓ２において、撮像素子２にスルー画像用の撮像を開始させる。このスルー画像の取得は、３０フレーム/秒のフレームレートで繰り返し撮像素子２から読み出されることで行われ、読み出されたスルー画像はオンスクリーン用表示メモリ１４に記憶されて逐次表示バッファ１５を介してモニタ１６に表示される。
【００２３】
次に、ＣＰＵ１３は、Ｓ３において、顔検出処理を行う。この検出処理では、検出手段により検出された人物の顔領域の位置を示す顔マークが、モニタ１６のスルー画像に重ねて表示される。例えば、第１の撮像条件で撮像する際にモニタ１６に表示される図４（ａ）に示すスルー画像において、スルー画像の撮像範囲に対応するフレーム枠２１内に顔検出処理により人物Ａ、Ｂ１、Ｃ１の各顔が検出された場合には、検出された各顔の顔領域に顔マーク３１、３２、３３がモニタ１６に表示される。次に、ＣＰＵ１３は、Ｓ４において、スルー画像で検出された顔領域の顔マークの数（Ｚ）をカウントする。例えば、図４（ａ）に示すように、フレーム枠２１内に顔マーク３１、３２、３３が検出された場合には、その数（Ｚ）は３とカウントされる。カウントされた顔マークの数（Ｚ）は、バッファメモリ８に一時記録される。次に、ＣＰＵ１３は、Ｓ５において、検出された顔マークの数（Ｚ）が２以上であるか否かを判別する。
【００２４】
検出された顔マークの数（Ｚ）が２以上であり、Ｓ５の判別が“ＹＥＳ”の場合、ＣＰＵ１３は、Ｓ６において、「全員撮影アシストを行いますか？」というメッセージをモニタ１６のスルー画像に重ねて表示させて、撮像者の操作部材９の操作により、撮像アシスト機能が行われるのを希望するか否かを判別する。一方、検出された顔マークの数（Ｚ）が２以上ではなく、Ｓ５の判別が“ＮＯ”の場合、または、操作部材９から否定操作を示す操作信号が出力されて、Ｓ６の判別が“ＮＯ”の場合、ＣＰＵ１３は、Ｓ３１において、半押し操作信号を受け付ける。レリーズボタンが半押しされ、半押し操作信号を受け付けると、ＣＰＵ１３は、Ｓ３２において、複数の顔マークのコントラスト情報の平均に基づいて平均的にＡＦ動作制御を行い、複数の顔マークの輝度情報の平均に基づいて平均的に自動露出演算してＡＥ動作制御を行う。次に、ＣＰＵ１３は、Ｓ３３において、レリーズボタンが全押しされたか否かを判別する。レリーズボタンが全押しされず、Ｓ３３の判別が“ＮＯ”の場合、ＣＰＵ１３はＳ３１の処理に戻り、再び撮像条件の設定が行われる。一方、レリーズボタンが全押しされ、Ｓ３３の判別が“ＹＥＳ”の場合、ＣＰＵ１３は、Ｓ３４において、撮像を行い、Ｓ３５において、撮像された画像の画像データを確認画像としてモニタ１６に表示させると共に、画像データを記録媒体７に記録して、処理を終了する。
【００２５】
操作部材９から肯定操作を示す操作信号が出力されて、Ｓ６の判別が“ＹＥＳ”の場合、ＣＰＵ１３は、Ｓ７において、「撮影者も含めて２枚撮影します」というメッセージをモニタ１６のスルー画像に重ねて表示させる。次に、ＣＰＵ１３は、Ｓ８において、スルー画像のフレーム枠内に個人認識される顔があるか否かを判別する。フレーム枠内に個人認識される顔があり、Ｓ８の判別が“ＹＥＳ”の場合、ＣＰＵ１３は、Ｓ９において、個人認識される顔の中から、予めデジタルカメラに登録された登録順最上位者の顔を検出する。例えば、図４（ａ）において、フレーム枠２１内に予めデジタルカメラに登録された人物Ａや人物Ｂ１が個人認識されると、顔マーク３１、３２の色（不図示）が変わり、さらに人物Ｂ１の登録順位が最上位であることが検出されると、同図（ａ）に示すように、人物Ｂ１の顔マーク３２が二重線に変わり、他の顔マーク３１、３３と区別される。次に、ＣＰＵ１３は、Ｓ１０において、レリーズボタンが半押しされたか否かを判別する。レリーズボタンが半押しされず、Ｓ１０の判別が“ＮＯ”の場合、ＣＰＵ１３は、レリーズボタンが半押しされるまで待機状態となる。一方、レリーズボタンが半押しされてＣＰＵ１３が半押し操作信号を受信し、Ｓ１０の判別が“ＹＥＳ”の場合、ＣＰＵ１３は、Ｓ１１において、登録順最上位者の顔にピントや露出等の撮像条件を最適化して、第１の撮像条件を設定する。ピントについては、スルー画像データにおける登録順最上位者の顔マーク内のコントラスト情報に基づいて、ＡＦ動作制御を行い、露出については、登録順最上位者の顔マーク内の輝度情報に基づいて自動露出演算をして、ＡＥ動作制御を行う。例えば、図４（ａ）に示すスルー画像においては、登録順最上位者の人物Ｂ１の二重線の顔マーク３２内のスルー画像データに対して撮像条件を最適化する。一方、フレーム枠内に個人認識される顔がなく、Ｓ８の判別が“ＮＯ”の場合、ＣＰＵ１３は、Ｓ１２において、検出された人物の全員の顔マークに対してピントや露出等の撮像条件を平均的に最適化する。
【００２６】
上述したＳ１１またはＳ１２で撮像条件が最適化された後、ＣＰＵ１３は、Ｓ１３において、レリーズボタンが全押しされたか否かを判別する。レリーズボタンが全押しされず、Ｓ１３の判別が“ＮＯ”の場合、ＣＰＵ１３はＳ８の処理に戻り、再び第１の撮像条件の設定が行われる。一方、レリーズボタンが全押しされ、Ｓ１３の判別が“ＹＥＳ”の場合、ＣＰＵ１３は、Ｓ１４において、第１画像の撮像を行い、Ｓ１５において、第１画像をバッファメモリ８に記録し、Ｓ１６において、確認用の第１画像をモニタ１６に表示する。次に、ＣＰＵ１３は、Ｓ１７において、確認用の第１画像が撮像者が満足するものでＯＫか否かを判別する。撮像者が確認用の第１画像に不満を持ち、確認用の第１画像をＯＫしないという否定的な操作を行い、Ｓ１７の判別が“ＮＯ”の場合、ＣＰＵ１３はＳ８の処理に戻り、再び第１の撮像条件の設定が行われる。
【００２７】
一方、撮像者が確認用の第１画像をＯＫする肯定的な操作を行い、Ｓ１７の判別が“ＹＥＳ”の場合、ＣＰＵ１３は、Ｓ１８において、登録順最上位者の顔の位置が集合列の端にあるか否かを判別する。例えば、図４（ａ）に示すスルー画像では、検出された複数の顔マーク３１、３２，３３の中で、登録順最上位者Ｂ１の顔が集合列の端にあるか否かをＣＰＵ１３が検出する。登録順最上位者の顔の位置が端にあることが検出され、Ｓ１８の判別が“ＹＥＳ”の場合、ＣＰＵ１３は、Ｓ１９において、「登録順最上位の人と撮影を交代してください」というメッセージをモニタ１６のスルー画像に表示させる。一方、登録順最上位者の顔の位置が端にないことが検出され、Ｓ１８の判別が“ＮＯ”の場合、ＣＰＵ１３は、Ｓ２０において、「列の端にいる人と撮影を交代してください」というメッセージをモニタ１６のスルー画像に重ねて表示させる。例えば、図４（ａ）に示すように、登録順最上位者である人物Ｂ１の顔の位置が端になく、Ｓ１８の判別が“ＮＯ”の場合、「列の端にいる人と撮影を交代してください」というメッセージがモニタ１６に表示される。このメッセージにより、例えば、図４（ａ）に示す集合列の左端にいる人物Ａが後述する第２画像の撮像者となる。Ｓ１９、Ｓ２０の処理の後、ＣＰＵ１３は、Ｓ２１において、「第１画像の撮影者は、第２画像の撮影者がいた位置とは反対側に並んでください」というメッセージをモニタ１６のスルー画像に重ねて表示させる。
【００２８】
図３は、図２に示すフローチャートに続けて行われる、最優先被写体像以外の被写体像に適した第２の撮像条件で撮像が行われる際の撮像アシスト処理の概略を示すフローチャートである。
【００２９】
図２、Ｓ２１の処理の後、ＣＰＵ１３は、図３，Ｓ４１において、第２画像の撮像者がデジタルカメラを被写体像に向けると撮像準備を行い、Ｓ４２において、図２、Ｓ３と同様に顔検出処理を行い、検出された顔領域の位置を示す顔マークを、モニタ１６に表示されるスルー画像に重ねて表示させる。例えば、第２の撮像条件で撮像する際にモニタ１６に表示される図４（ｂ）に示すスルー画像において、顔検出処理により、フレーム枠２２内に人物Ｂ２、Ｃ２、Ｄの各顔が検出された場合、検出された各顔の顔領域に顔マーク３４、３５、３６が表示される。なお、図４（ａ）に示す、第１画像のフレーム枠２１に表示された人物Ｂ１および人物Ｃ１と、図４（ｂ）に示す、第２画像のフレーム枠２２に表示された人物Ｂ２および人物Ｃ２とは同一人物である。同図（ｂ）に示すように、集合列の右側の、第２画像の撮像者Ａがいた左端位置と反対側には、図３、Ｓ２１でモニタ１６に表示されたメッセージに従い、第１画像の撮像者Ｄが並んでいる。
【００３０】
次に、ＣＰＵ１３は、Ｓ４３において、検出された顔の中から、第１画像の撮像時に検出された顔と異なる、第１画像になかった新しい顔があるか否かを判別する。検出された顔の中に新しい顔がなく、Ｓ４３の判別が“ＮＯ”の場合、ＣＰＵ１３は、Ｓ４４において、エラー表示をモニタ１６に表示し、処理を終了する。つまり、第２画像撮像時に検出された顔の中に第１画像撮像時に検出された顔と異なる新しい顔がない場合、第１画像と第２画像の被写体像における人物は全く同じなので、第１画像と第２画像とからパノラマ合成画像を作成する必要もなく、処理を終了する。一方、検出された顔の中に新しい顔があり、Ｓ４３の判別が“ＹＥＳ”の場合、ＣＰＵ１３は、Ｓ４５において、新しく検出された顔が第１画像の撮像者か否かを判別する。新しく検出された顔が、例えば単なる通行人であり、第１画像の撮像者でないことを認識した第２画像撮像者が所定の操作を行い、Ｓ４５の判別が“ＮＯ”の場合、ＣＰＵ１３は、Ｓ４４おいて、上述したエラー表示を行い、処理を終了する。
【００３１】
一方、新しく検出された顔が第１画像の撮像者であることを認識した第２画像撮像者が所定の操作を行い、Ｓ４５の判別が“ＹＥＳ”の場合、ＣＰＵ１３は、Ｓ４６において、レリーズボタンが半押しされたか否かを判別する。レリーズボタンが半押しされず、Ｓ４６の判別が“ＮＯ”の場合、ＣＰＵ１３は、レリーズボタンが半押しされるまで待機状態となる。一方、レリーズボタンが半押しされて、半押し操作信号を受信し、Ｓ４６の判別が“ＹＥＳ”の場合、ＣＰＵ１３は、Ｓ４７において、被写体像を個人認識して優先登録順位を付ける機能を解除する。次に、ＣＰＵ１３は、Ｓ４８において、第１画像になかった顔である、新たに加わった第１画像の撮像者に対して撮像条件を最適化して第２の撮像条件を設定し、ＡＦ動作制御やＡＥ動作制御などを行う。例えば、図４（ｂ）に示すスルー画像の第２画像を撮像する際、第１画像の撮像者である人物Ｄが、第２画像の撮像時に新たに集合列に加わったので、この人物Ｄの顔マーク３６が二重線に変わり、ＣＰＵ１３は、この人物Ｄの顔マーク３６に対して撮像条件を最適化する。
【００３２】
次に、ＣＰＵ１３は、Ｓ４９において、レリーズボタンが全押し操作されたか否かを判別する。レリーズボタンが全押し操作されず、Ｓ４９の判別が“ＮＯ”の場合、ＣＰＵ１３はＳ４３の処理に戻り、再び第２の撮像条件の設定が行われる。一方、レリーズボタンが全押し操作され、Ｓ４９の判別が“ＹＥＳ”の場合、ＣＰＵ１３は、Ｓ５０において、第２画像の撮像を行い、Ｓ５１において、第２画像をバッファメモリ８に記録し、Ｓ５２において、確認用の第２画像をモニタ１６に表示する。次に、ＣＰＵ１３は、Ｓ５３において、確認用の第２画像が撮像者が満足するものでＯＫか否かを判別する。撮像者がモニタ１６に表示される確認用の第２画像を見て、ＯＫしない否定的な操作を行い、Ｓ５３の判別が“ＮＯ”の場合、ＣＰＵ１３はＳ４３の処理に戻り、再び第２の撮像条件の設定が行われる。
【００３３】
一方、撮像者が確認用の第２画像をＯＫする肯定的な操作を行い、Ｓ５３の判別が“ＹＥＳ”の場合、ＣＰＵ１３は、Ｓ５４において、「合成しますか」というメッセージをモニタ１６に表示し、第１画像と第２画像とからパノラマ合成画像を合成するか否を判別する。撮像者が合成しない否定的な操作を行い、Ｓ５４の判別が“ＮＯ”の場合、処理は終了する。一方、撮像者が合成する肯定的な操作を行い、Ｓ５４の判別が“ＹＥＳ”の場合、ＣＰＵ１３は、Ｓ５５において合成処理を行う。この合成処理では、図４（ａ）の構図で撮像された第１画像のフレーム枠２１を線Ｘで切り取り、図４（ｂ）の構図で撮像された第２画像のフレーム枠２２を線Ｙで切り取る。次に、線Ｘで切り取られた第１画像の左側の画像と、線Ｙで切り取られた第２画像の右側の画像との各共通部分を繋ぎ合わせることにより、図４（ｃ）に示すパノラマ合成画像２３が生成される。次に、ＣＰＵ１３は、Ｓ５６において、生成されたパノラマ合成画像２３の画像データを記録媒体７に記録して、処理を終了する。
【００３４】
このような本実施形態によるデジタルカメラによれば、検出手段により検出された被写体像の優先順位が、撮像素子２によって撮像する画像との関係で、優先順位決定手段により決定される。このため、第１の撮像条件で撮像される第１の画像は、図２、Ｓ９の処理により、優先順位決定手段により決定された優先順位の中で最も高い最優先被写体像、例えば人物Ｂ１に適した撮像条件で撮像され、第２の撮像条件で撮像される第２の画像は、図３、Ｓ４７およびＳ４８の処理により、最優先被写体像以外の被写体像、例えば人物Ｄに適した撮像条件で撮像される。
【００３５】
すなわち、本実施形態によるデジタルカメラによれば、撮像素子２の撮像条件は、撮像条件設定手段により、撮像素子２によって撮像する第１の画像に応じて、検出手段により検出された被写体像の中で優先順位が最も高い最優先被写体像である例えば人物Ｂ１に適した第１の撮像条件に設定され、撮像素子２によって撮像する第２の画像に応じて、最優先被写体像以外の被写体像である例えば人物Ｄに適した第２の撮像条件に設定される。このため、本実施形態のパノラマ集合写真の撮像のように、被写体像を含んだ画像を複数回撮像する場合でも、優先順位が最も高い最優先被写体像である例えば人物Ｂに適した撮像条件で常に撮像され続けることがないため、最優先被写体像に適した撮像条件で撮像された第１の画像と共に、最優先被写体像以外の被写体像である例えば人物Ｄに適した撮像条件で撮像された第２の画像が得られる。この結果、被写体像を含んだ画像を複数回撮像する際、複数の被写体像例えば人物Ｂ１、人物Ｄに撮像条件が最適化されて、複数の被写体像の写真写りが良い好ましい複数の画像が得られる。
【００３６】
また、本実施形態によるデジタルカメラによれば、図２、Ｓ１４で第１の撮像条件で撮像された第１画像、および図３、Ｓ５０で第２の撮像条件で撮像された第２画像の共通部分が、図３、Ｓ５５の処理で合成画像生成手段により繋ぎ合わされて、パノラマ合成画像２３が生成される。このため、複数の被写体像の写真写りが良いパノラマ合成集合写真が得られる。
【００３７】
また、本実施形態によるデジタルカメラによれば、第１の撮像条件で撮像された第１画像の撮像終了後に、第１画像における被写体像の集合列の一端に立っていた人物Ａが、第２の撮像条件で撮像される第２画像を撮像するように、撮像アシスト手段により図２、Ｓ２０の処理で指示される。このため、第１画像の、人物Ａが抜けてしまって変化する集合列の一端と反対側における変化しない部分を、第１および第２の各撮像画像の共通部分にすることができるので、簡単にパノラマ合成画像を作成することができる。
【００３８】
また、本実施形態によるデジタルカメラによれば、第１の撮像条件で撮像された第１画像の撮像終了後に、第１画像における被写体像の集合列の一端に立っていた人物Ａが、第２の撮像条件で撮像される第２画像を撮像するように、撮像アシスト手段により図２、Ｓ２０の処理で指示された後、第２画像が撮像される際、第１画像の撮像者Ｄが、集合列の一端と反対側の他端に位置するように撮像アシスト手段により図２、Ｓ２１の処理で指示される。このため、集合列の一端に第２画像の撮像者Ａが位置する図４（ａ）に示す第１画像と、集合列の一端と反対側の他端に第１画像の撮像者Ｄが位置する図４（ｂ）に示す第２画像とが、変化しない共通部分で繋ぎ合わされることで、簡単に図４（ｃ）に示すパノラマ合成画像２３を作成できる。
【００３９】
図５は、一実施形態の変形例によるデジタルカメラを用いたパノラマ合成画像の作成において、第２の撮像条件で撮像する際にモニタ１６に表示されるスルー画像を示す図である。
【００４０】
撮像アシスト手段を構成するＣＰＵ１３は、第１の撮像条件で撮像された、上述した図４（ａ）に示す構図の第１画像の撮像終了後、第１画像における被写体像の集合列の端以外の位置に居た人物Ｂ１が集合列から抜けた場合に、第２の撮像条件で撮像される第２画像を撮像する際、第１画像の撮像者が、集合列から抜けた位置に位置せずに集合列の端に位置するように指示する。
【００４１】
この撮像アシスト手段の指示により、第２の撮像条件で撮像される第２画像を撮像する際、図５に示すスルー画像のように、第１画像の撮像者Ｄが、フレーム枠４１内で集合列の右端に加わる。このスルー画像において、顔マーク５１、５２、５３の中から、人物Ｄが第１画像の撮像者であることが検出されると、同図に示すように、人物Ｄの顔マーク５３が二重線に変わり、他の顔マーク５１、５２と区別される。
【００４２】
同図の構図で第２画像を撮像後、上述した図４（ａ）に示す、線Ｘで切り取られた第１画像の左側の画像と、図５に示す、線Ｙで切り取られた第２画像の右側の画像との共通部分を繋ぎ合わせることにより、図４（ｃ）に示すパノラマ合成画像２３が生成される。
【００４３】
このような変形例によるデジタルカメラによれば、撮像アシスト手段の指示に従って、第２画像を撮像する際、第１画像の撮像者Ｄが集合列の端に位置することにより、この端に居る第１画像の撮像者Ｄを含む領域を上記のように第２画像から切り取って第１画像と合成することにより、第１画像と第２画像とのパノラマ合成画像の作成が可能になる。
【００４４】
なお、本実施形態および変形例では、第２の撮像条件に合わされる最優先被写体像以外の被写体像を、新たな画像を撮像する際に新たに加わった第１の撮像者とした場合について説明したが、第２の撮像条件に合わされる最優先被写体像以外の被写体像は、第１の撮像者以外の、新たな画像を撮像する際に新たに加わった被写体像や、最優先被写体像を除く被写体像の中の所定の優先順位の被写体像、または、検出手段により検出された全ての被写体像であってもよい。また、第２の撮像条件に合わされる最優先被写体像以外の被写体像は、検出手段により検出された全ての被写体像ではなく、検出手段により検出された全ての被写体像から登録順最上位者を除いた残りの全ての被写体像でもよい。
【００４５】
また、第１の撮像条件で撮像される第１画像を撮像する際、第２の撮像条件で撮像される第２画像を撮像する予定の第２画像撮像者は、被写体像の集合列の端に位置するように、撮像アシスト手段を構成するＣＰＵ１３が指示する構成にしてもよい。この構成によれば、撮像アシスト手段の指示に従って、撮像操作に適した第２画像撮像者が予め集合列の端に位置することができる。このため、第１画像の、人物が抜けてしまって変化する集合列の一端と反対側における変化しない部分を、第１および第２の各撮像画像の共通部分にすることができるので、簡単にパノラマ合成画像を作成することができる。
【００４６】
また、本実施形態では、デジタルカメラが、第１画像および第２画像の共通部分を繋ぎ合わせてパノラマ合成画像２３を生成する合成画像生成手段を備える構成であったが、デジタルカメラから第１画像および第２画像を取得したパソコン（パーソナルコンピュータ）等の外部機器が、合成画像生成手段を備えて上述したパノラマ合成画像を生成する構成にしてもよい。この場合、デジタルカメラは、バッファメモリ８に一時記憶している第１画像と第２画像の各画像データを関連づけて、それぞれ記録媒体７に記録させる。外部機器は、記録媒体７に記録された一連の画像データを取得し、合成画像データを生成する。
【００４７】
また、本実施形態では、パノラマ合成画像２３は、２枚の画像から生成されたが、２枚に限らず、３枚以上の画像からパノラマ合成画像を生成してもよい。また、被写体像の人物が例えば５人いる場合、撮像条件を各５人に最適な状態で高速連写で撮像し、５枚の画像からパノラマ合成画像を生成する構成にしてもよい。
【産業上の利用可能性】
【００４８】
上述した実施形態では、本発明による撮像装置をデジタルカメラに適用した場合について説明したが、ビデオカメラや、携帯電話機等に内蔵されるカメラ等の、個人認識して、特定の人物を優先して撮像を行うその他の撮像装置にも適用することが可能である。このような撮像装置に本発明を適用した場合においても、上記実施形態と同様な作用効果が奏される。
【符号の説明】
【００４９】
１…撮像光学系
２…撮像素子
１３…ＣＰＵ
２３…パノラマ合成画像
Ａ、Ａ２、Ｂ１、Ｂ２、Ｃ１、Ｃ２、Ｄ…人物（被写体像）
【図１】
2011250277.tif 000003
【図２】
2011250277.tif 000004
【図３】
2011250277.tif 000005
【図４】
2011250277.tif 000006
【図５】
2011250277.tif 000007