(57)【要約】【課題】各撮像素子において、主要被写体となる人物の顔を適正に撮影する。【解決手段】二つの撮像部２６、２７を備えたデジタルカメラ１１は、顔検出回路６３、顔照合回路６４、顔評価回路６５を有している。レリーズボタン１７が半押しされると、顔検出回路６３によって、各撮像部２６、２７で取得された撮像画像から顔画像が検出される。顔評価回路６５によって、各撮像画像から検出された顔画像について、評価値がそれぞれ一旦算出されるとともに、評価値による顔画像の順位が一旦決定される。顔照合回路６４によって、各撮像画像から検出された顔画像が照合される。顔評価値回路６５によって、相対的に望遠側の撮像画像から検出された顔画像の評価値、及びその評価値による顔画像の順位を考慮して、他の撮像画像から検出された顔画像について、評価値が再度算出されるとともに、評価値による顔画像の順位が再度決定される。【選択図】図２
2011109427.tif 000002
【特許請求の範囲】
【請求項１】
個別にズーム倍率が変更可能な複数の光学系と、
各々の前記光学系で結像された被写体像を撮像して画像データを取得する複数の撮像素子と、
各々の撮像素子で取得した一画面分の画像データで構成される撮像画像の中から顔画像を検出する顔検出手段と、
各顔画像を照合し、同一被写体の顔画像を対応付ける顔照合手段と、
各撮像画像に対し、顔の特徴量に基づく評価値を算出するとともに複数の顔画像が検出されている場合に評価値による顔画像の順位を決定する顔評価手段とを備え、
前記顔評価手段は、最も望遠側の撮像画像における顔画像の順位を、残りの撮像画像における顔画像の順位に反映させることを特徴とする複眼式撮像装置。
【請求項２】
いずれか一つの撮像画像に基づくスルー画像を選択的に表示する表示手段を備えたことを特徴とする請求項１に記載の複眼式撮像装置。
【請求項３】
前記顔評価手段は、最も望遠側の撮像画像において最も評価値が高い顔画像を、残りの撮像画像において評価値が最も高くなるようにすることを特徴とする請求項２に記載の複眼式撮像装置。
【請求項４】
顔画像を予め登録しておく記憶手段を備え、
前記顔照合手段は、前記記憶手段に登録された顔画像を利用して顔画像を照合することを特徴とする請求項２又は３に記載の複眼式撮像装置。
【請求項５】
オートフォーカス機能、自動露出機能、及びオートホワイトバランス機能を制御する撮影制御手段を備え、
前記撮影制御手段は、最も望遠側以外の撮像画像に基づくスルー画像が前記表示手段に表示されている場合に、前記撮像画像毎に独立して制御を行うことを特徴とする請求項２〜４のいずれかに記載の複眼式撮像装置。
【請求項６】
画像補正処理を施す画像補正処理手段を備え、
前記画像補正処理手段は、最も望遠側以外の撮像画像に基づくスルー画像が前記表示手段に表示されている場合に、前記撮像画像毎に独立して処理を施すことを特徴とする請求項２〜５のいずれかに記載の複眼式撮像装置。
【請求項７】
前記顔評価手段は、最も望遠側以外の撮像画像から検出された顔画像のうち、最も望遠側の撮像画像から検出された顔画像と対応するものだけについて、重みを付けて評価値を高くすることを特徴とする請求項２〜６のいずれかに記載の複眼式撮像装置。
【請求項８】
最も望遠側の撮像画像から検出された顔画像の数が、残りの撮像画像のいずれかから検出された顔画像の数より少ない場合において、最も望遠側の撮像画像に基づくスルー画像が前記表示手段に表示されているときに、表示されているエリアの外に顔が存在することを報知する報知手段を備えたことを特徴とする請求項２〜７のいずれかに記載の複眼式撮像装置。
【請求項９】
前記報知手段は、前記表示手段に表示されているスルー画像を、最も望遠側の撮像画像よりも検出された顔画像の数が多い撮像画像のいずれかに基づくものに一時的に切り替えることを特徴とする請求項８に記載の複眼式撮像装置。
【請求項１０】
前記顔検出手段で検出された顔画像に基づいて、前記表示手段に表示されるスルー画像中の顔画像を囲う顔枠の位置、大きさを決定する顔枠決定手段を備え、
前記顔枠は、一時的に切り替えられた前記スルー画像において、最も望遠側の撮像画像から検出された顔画像と同一被写体であるか否かが識別可能な態様であることを特徴とする請求項９に記載の複眼式撮像装置。
【請求項１１】
前記報知手段は、前記表示手段に表示されている最も望遠側の撮像画像に基づくスルー画像に、エリア外に存在する顔の方向を示す印を表示することを特徴とする請求項８〜１０のいずれかに記載の複眼式撮像装置。
【請求項１２】
前記表示手段は、最も望遠側の撮像画像から検出された顔画像の数が、残りの画像データのいずれかから検出された顔画像の数より少ない場合に、最も望遠側の撮像画像に基づくスルー画像、及び最も多くの顔画像が検出された撮像画像に基づくスルー画像を並べて表示することを特徴とする請求項２〜１１のいずれかに記載の複眼式撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数の撮像素子を備えた複眼式撮像装置に関する。
【背景技術】
【０００２】
デジタルカメラの中には、複数の撮像素子を備えた複眼式撮像装置がある。複眼式撮像装置として、視差を利用して３Ｄ撮影を実行するステレオ撮影装置、各撮像素子で取得した撮像画像を連結してパノラマ画像を生成するパノラマ撮影装置などが知られている。また、各撮像素子で互いに異なる条件の撮像画像を同時に取得する複眼式撮像装置がある（例えば、特許文献１参照）。
【０００３】
特許文献１に記載の複眼式撮像装置では、撮像素子毎に、取得した撮像画像から顔画像を検出し、顔画像に対して焦点を合わせたり、顔画像が適正露出となるように露出条件を設定したりする。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−１０４５８６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
特許文献１に記載の複眼式撮像装置において、各撮像素子の画角が互いに異なる場合、各撮像素子で検出される顔の数、位置、大きさが互いに異なることがある。この場合、焦点の位置や露出条件が異なる撮像画像が取得される。このため、いずれかの撮像素子では、主要被写体となる人物の顔が適正に撮影されない可能性がある。
【０００６】
本発明は、上記課題を鑑みてなされたものであり、各撮像素子において、主要被写体となる人物の顔が適正に撮影される複眼式撮像装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記目的を達成するために、本発明の複眼式撮像装置は、個別にズーム倍率が変更可能な複数の光学系と、各々の前記光学系で結像された被写体像を撮像して画像データを取得する複数の撮像素子と、各々の撮像素子で取得した一画面分の画像データで構成される撮像画像の中から顔画像を検出する顔検出手段と、各顔画像を照合し、同一被写体の顔画像を対応付ける顔照合手段と、各撮像画像に対し、顔の特徴量に基づく評価値を算出するとともに複数の顔画像が検出されている場合に評価値による顔画像の順位を決定する顔評価手段とを備え、前記顔評価手段は、最も望遠側の撮像画像における顔画像の順位を、残りの撮像画像における顔画像の順位に反映させることを特徴とする。
【０００８】
いずれか一つの撮像画像に基づくスルー画像を選択的に表示する表示手段を備えていることが好ましい。
【０００９】
前記顔評価手段は、最も望遠側の撮像画像において最も評価値が高い顔画像を、残りの撮像画像において評価値が最も高くなるようにすることが好ましい。
【００１０】
顔画像を予め登録しておく記憶手段を備え、前記顔照合手段は、前記記憶手段に登録された顔画像を利用して顔画像を照合することが好ましい。
【００１１】
オートフォーカス機能、自動露出機能、及びオートホワイトバランス機能を制御する撮影制御手段を備え、前記撮影制御手段は、最も望遠側以外の撮像画像に基づくスルー画像が前記表示手段に表示されている場合に、前記撮像画像毎に独立して制御を行うことが好ましい。
【００１２】
画像補正処理を施す画像補正処理手段を備え、前記画像補正処理手段は、最も望遠側以外の撮像画像に基づくスルー画像が前記表示手段に表示されている場合に、前記撮像画像毎に独立して処理を施すことが好ましい。
【００１３】
前記顔評価手段は、最も望遠側以外の撮像画像から検出された顔画像のうち、最も望遠側の撮像画像から検出された顔画像と対応するものだけについて、重みを付けて評価値を高くすることが好ましい。
【００１４】
最も望遠側の撮像画像から検出された顔画像の数が、残りの撮像画像のいずれかから検出された顔画像の数より少ない場合において、最も望遠側の撮像画像に基づくスルー画像が前記表示手段に表示されているときに、表示されているエリアの外に顔が存在することを報知する報知手段を備えていることが好ましい。
【００１５】
前記報知手段は、前記表示手段に表示されているスルー画像を、最も望遠側の撮像画像よりも検出された顔画像の数が多い撮像画像のいずれかに基づくものに一時的に切り替えることが好ましい。
【００１６】
前記顔検出手段で検出された顔画像に基づいて、前記表示手段に表示されるスルー画像中の顔画像を囲う顔枠の位置、大きさを決定する顔枠決定手段を備え、前記顔枠は、一時的に切り替えられた前記スルー画像において、最も望遠側の撮像画像から検出された顔画像と同一被写体であるか否かが識別可能な態様であることが好ましい。
【００１７】
前記報知手段は、前記表示手段に表示されている最も望遠側の撮像画像に基づくスルー画像に、エリア外に存在する顔の方向を示す印を表示することが好ましい。
【００１８】
前記表示手段は、最も望遠側の撮像画像から検出された顔画像の数が、残りの画像データのいずれかから検出された顔画像の数より少ない場合に、最も望遠側の撮像画像に基づくスルー画像、及び最も多くの顔画像が検出された撮像画像に基づくスルー画像を並べて表示することが好ましい。
【発明の効果】
【００１９】
本発明によれば、相対的に望遠側の撮像画像における顔の評価値順位を、他の撮像画像における顔の評価値順位に反映させるから、評価値にズレが生じ易い広角側の撮像画像における顔の評価値順位を適正なものとし、各撮像素子において、主要被写体となる人物の顔を適正に撮影することができる。
【図面の簡単な説明】
【００２０】
【図１】複眼式デジタルカメラの外観斜視図である。
【図２】複眼式デジタルカメラの電気的構成を示すブロック図である。
【図３】評価値による顔画像の順位を説明する図である。
【図４】顔画像の評価値を説明する一つ目の図である。
【図５】顔画像の評価値を説明する二つ目の図である。
【図６】顔画像の評価値を説明する三つ目の図である。
【図７】液晶ディスプレイに表示されるスルー画像を説明する図であり、（Ａ）は相対的に望遠側の撮像画像に基づくスルー画像を示す図であり、（Ｂ）は他方の撮像画像に基づくスルー画像を示す図である。
【図８】液晶ディスプレイに表示されるスルー画像を説明する図であり、各撮像画像に基づくスルー画像が並置された場合を示す図である。
【図９】デジタルカメラの処理手順を説明するフローチャートである。
【発明を実施するための形態】
【００２１】
図１に示すデジタルカメラ１１は、二つの撮像素子３１、４４（図２参照）を備えており、二つの画像を同時に撮影する複眼式撮像装置である。デジタルカメラ１１の前面には、撮像光学系が組み込まれた二つのレンズ鏡筒１２、１３、フラッシュ発光部１４などが設けられている。また、デジタルカメラ１１の上面には、デジタルカメラ１１の電源状態をオンオフで切り替える電源ボタン１５、撮影モードを切り替えるモード切替えダイヤル１６、シャッタレリーズ操作に用いられるレリーズボタン１７などが設けられている。
【００２２】
レンズ鏡筒１２、１３は沈胴式になっており、デジタルカメラ１１が電源オフ状態にある際に、デジタルカメラ１１の前面に設けられた鏡筒収納部１８、１９内に収納され、電源オンとともにデジタルカメラ１１の前面から突出して、広角端で停止する。また、デジタルカメラ１１の背面に設けられたズーム操作ボタン２０の操作によって、レンズ鏡筒１２、１３が前進及び後退してズーム倍率が変更される。
【００２３】
モード切替えダイヤル１６は、つまみの切替えによって、撮影条件が異なる撮影モードを選択する。撮影モードには、一方の撮像素子３１又は４４で撮影を実行する通常撮影モード、二つの撮像素子３１、４４でズーム倍率が互いに異なる撮影を実行する同時撮影モード、３Ｄ撮影モードなどがある。同時撮影モード、３Ｄ撮影モードでは、レリーズボタン１７の押圧操作（半押し操作）により、仮撮影が実行されて撮影条件が設定される。そして、レリーズボタン１７の更なる押圧操作（全押し操作）により、二つの撮像素子３１、４４で同時に撮影が実行される。以下では、同時撮影モードが選択されている場合を説明する。
【００２４】
図２に示すように、デジタルカメラ１１は、第一及び第二撮像部２６、２７を備えている。第一撮像部２６は、レンズ鏡筒１２、繰出しモータ２８、フォーカスモータ２９、モータドライバ３０、撮像素子３１、タイミングジェネレータ（以下、ＴＧと略す）３２、ＣＤＳ３３、ＡＭＰ３４、及びＡ／Ｄ変換器３５で構成される。
【００２５】
レンズ鏡筒１２には、撮像光学系としてズームレンズ３６、フォーカスレンズ３７、絞り３８が組み込まれている。レンズ鏡筒１２の撮影位置への繰出しと、収納位置への沈胴は、繰出しモータ２８の駆動によって行われる。ズームレンズ３６及びフォーカスレンズ３７の光軸方向への進退移動は、フォーカスモータ２９の駆動によって行われる。各モータ２８、２９は、モータドライバ３０に接続されている。モータドライバ３０は、デジタルカメラ１１を統括的に制御するＣＰＵ３９に接続されており、ＣＰＵ３９からの制御信号に応じて各モータ２８、２９を駆動させる。
【００２６】
撮像光学系の背後には、撮像素子３１が配置されている。撮像光学系は、この撮像素子３１の受光面に被写体像を結像させる。撮像素子３１は、ＴＧ３２に接続されている。ＴＧ３６は、ＣＰＵ３９に接続されており、ＣＰＵ３９の制御の下、タイミング信号（クロックパルス）を撮像素子３１に入力する。撮像素子３１は、このタイミング信号に応じて受光面に結像された被写体像の撮像を行い、被写体像に対応した撮像信号を出力する。
【００２７】
撮像素子３１から出力された撮像信号は、相関二重サンプリング回路であるＣＤＳ３３に入力される。ＣＤＳ３３は、入力された撮像信号を撮像素子３１の各セルの蓄積電荷量に正確に対応したＲ、Ｇ、Ｂの平面画像データとして出力する。ＣＤＳ３３から出力された画像データは、ＡＭＰ３４で増幅され、さらにＡ／Ｄ変換器３５でデジタルデータに変換される。このデジタル化された画像データは、Ａ／Ｄ変換器３５から第一画像データとして画像入力コントローラ４０に出力される。
【００２８】
第二撮像部２７は、第一撮像部２６と同様、レンズ鏡筒１３、繰出しモータ４１、フォーカスモータ４２、モータドライバ４３、撮像素子４４、ＴＧ４５、ＣＤＳ４６、ＡＭＰ４７、及びＡ／Ｄ変換器４８で構成される。第二撮像部２７の各部は、第一撮像部２６のものと同様であり、詳細な説明は省略する。レンズ鏡筒１３には、撮像光学系としてズームレンズ４９、フォーカスレンズ５０、絞り５１が組み込まれている。撮像素子４４によって撮像され、ＣＤＳ４６、ＡＭＰ４７を経由した後、Ａ／Ｄ変換器４８によってデジタルデータに変換された画像データは、Ａ／Ｄ変換器４８から第二画像データとして画像入力コントローラ４０に出力される。
【００２９】
画像入力コントローラ４０は、データバス５２を介してＣＰＵ３９に接続されている。同様に、ＣＰＵ３９には、データバス５２を介して、ＳＤＳＲＡＭ５３、画像信号処理回路５４、画像圧縮回路５５、液晶ドライバ５６、及びメディアコントローラ５７が接続されている。
【００３０】
画像入力コントローラ４０は、ＣＰＵ３９の制御の下、各撮像部２６、２７から入力された各画像データを一画面分毎にＳＤＲＡＭ５３に記憶させる。
【００３１】
画像信号処理回路５４は、ＳＤＲＡＭ５３から各一画面分の画像データを読み出し、後述するＡＥ検出領域から検出した被写体輝度に基づく階調補正、ホワイトバランス補正、γ補正などの各種の画像補正処理を各一画面分の画像データに施す。そして、処理後の各一画面分の画像データを再びＳＤＲＡＭ５３に記憶させる。
【００３２】
画像圧縮回路５５は、画像信号処理回路５４で各種の処理が施された各一画面分の画像データをＳＤＲＡＭ５３から読み出す。そして、これらの各一画面分の画像データをＴＩＦＦやＪＰＥＧなどの所定の圧縮形式で圧縮し、ＳＤＲＡＭ５３に記憶させる。
【００３３】
液晶ドライバ５６は、ＣＰＵ３９からの指示に応じてＳＤＲＡＭ５３から所定の一画面分の画像データを読み出す。そして、液晶ドライバ５６は、デジタルカメラの背面側に配設された液晶ディスプレイ５８に対して、ＳＤＲＡＭ５３から読み出した一画面分の画像データに基づくスルー画像を表示させる。
【００３４】
メディアコントローラ５７は、ＣＰＵ３９からの指示に応じてメディアスロットに着脱自在に装着された記録メディア５９にアクセスし、記録メディア５９に対して各一画面分の画像データの書込みを行う。ＣＰＵ３９は、レリーズボタン１７の押下による撮影実行の指示に応答して、画像圧縮回路５５で圧縮された各一画面分の画像データを記録メディア５９に記録させる。
【００３５】
ＣＰＵ３９には、ＥＥＰＲＯＭ６０が接続されている。ＥＥＰＲＯＭ６０には、デジタルカメラ１１を制御するための各種プログラムやデータが記憶されている。ＣＰＵ３９は、各種プログラムやデータを読み出して、各種処理を実行する。
【００３６】
ＣＰＵ３９には、上記の他に、データバス５２を介して、ＡＥ／ＡＷＢ検出回路６１、ＡＦ検出回路６２、顔検出回路６３、顔照合回路６４、顔評価回路６５、及び顔枠決定回路６６が接続されている。
【００３７】
ＡＥ／ＡＷＢ検出回路６１は、各一画面分の画像データに設定されるＡＥ検出領域の被写体輝度を検出し、検出した被写体輝度をＣＰＵ３９に出力する。ＣＰＵ３９は、被写体輝度に基づいて、露出量、及びホワイトバランスの適否を判断し、撮像素子３１、４４のシャッタ速度、絞り３８、５１の絞り値を決定する。このように、ＡＥ／ＡＷＢ検出回路６１及びＣＰＵ３９は、自動露出機能及びオートホワイトバランス機能を制御する。
【００３８】
ＡＦ検出回路６２は、各一画面分の画像データに設定されるＡＦ検出領域から高周波成分を抽出し、その高周波成分を積算したＡＦ評価値をＣＰＵ３９に出力する。ＣＰＵ３９は、モータドライバ３０、４３によってフォーカスモータ３９、４２を駆動し、ＡＦ評価値が最大、すなわちＡＦ検出領域内のコントラストが最大となる合焦位置にフォーカスレンズ３７、５０を移動させる。これにより、焦点をＡＦ検出領域内の被写体に合致させる。このように、ＡＦ検出回路６２及びＣＰＵ３９は、オートフォーカス機能を制御する。
【００３９】
顔検出回路６３は、各一画面分の画像データに基づく撮像画像から、被写体の顔画像をそれぞれ検出する。顔画像の検出には、特開平０５−１５８１６４号公報で開示されている測光値から作成した色相値と彩度値とのヒストグラムを用いた方法や、特開平０７−３０６４８３号公報で開示されている肌色検出を用いた方法などを利用する。また、パターンマッチングを用いた技術を利用してもよい。
【００４０】
顔検出回路６３で検出された顔画像は、ＡＥ検出領域、ＡＦ検出領域にそれぞれ割り当てられる。顔画像が検出されない場合には、予め設定されている例えば画像中央の適当なサイズの初期検出領域が、ＡＥ検出領域、ＡＦ検出領域にそれぞれ割り当てられる。
【００４１】
顔照合回路６４は、各撮像画像から検出された顔画像を照合し、相互に同一人物のものであるか否かを判定する。照合には、ＥＥＰＲＯＭ６０に予め登録された顔画像を用い、各顔画像がＥＥＰＲＯＭ６０の顔画像とそれぞれ一致するかで判定する。
【００４２】
顔評価回路６５は、各撮像画像から検出された顔画像について、評価値をそれぞれ算出するとともに、一つの撮像画像から複数の顔画像が検出されている場合には、当該撮像画像について評価値による顔画像の順位を決定する。
【００４３】
算出した評価値、及び評価値による顔画像の順位は、ＡＥ検出領域となる各顔画像から検出した被写体輝度や、ＡＦ検出領域となる各顔画像から取得したＡＦ評価値への顔画像毎の重み付けに用いられる。このように、各顔画像に主従関係を作ることで、主要被写体を基準としつつ他の被写体も考慮した撮影準備処理の実行、及び画像補正処理の施しをすることができる。
【００４４】
顔画像の評価値を算出する方法としては、特開２００７−０２８５５５号公報に開示されている顔の姿勢（角度）、顔画像のサイズ、撮像画像に対する顔画像の位置から算出する方法、特開平０５−０２０４４２号公報に開示されている画像の濃淡分布から算出する方法、特開平０８−２２１５４７号に開示されているモザイク化による類型分類から算出する方法、特開２００３−１７８３０４号公報に開示されている顔画像から抽出したパーツ（例えば、目）に基づくヒストグラムを用いた方法などが挙げられる。
【００４５】
但し、各撮像画像から複数の同一人物の顔画像が検出されている場合には、顔評価回路６５は、各撮像画像における顔画像の順位に齟齬が生じないよう、相対的に望遠側の撮像画像における顔画像の順位を、他方の撮像画像における顔画像の順位とする。例えば、図３に示すように、各撮像画像からＡさん、Ｂさんの顔画像が検出され、望遠側の撮像画像における顔画像の順位が、Ａさんが２位であり、Ｂさんが１位である場合、その順位が広角側の撮像画像に反映され、広角側の撮像画像における顔画像の順位が、Ａさんが２位となり、Ｂさんが１位となる。
【００４６】
また、顔評価回路６５は、順位が１位となる顔画像に各撮像画像で齟齬が生じないよう、相対的に望遠側の撮像画像において順位が１位である顔画像を、他方の撮像画像においても順位が１位となるようにする。具体的には、該当する顔画像について、一旦算出された評価値に対し、１を超える重みαを乗じることなどが挙げられる。例えば、図４に示すように、望遠側の撮像画像においてＢさんの順位が１位である場合、他方の撮像画像から検出されたＢさんの顔画像の評価値は、一旦算出された評価値Ｗｂに重みαを乗じた値αＷｂとなる。
【００４７】
さらに、顔評価回路６５は、相対的に望遠側以外の撮像画像、すなわち、相対的に広角側の撮像画像から検出された顔画像のうち、相対的に望遠側の撮像画像から検出された顔画像と同一人物のものだけについて、重みを付けて評価値を高めに算出する。重み付けの方法としては、一旦算出された評価値に対し、１を超える重みを乗じることなどが挙げられる。但し、相対的に望遠側の撮像画像において順位が１位である顔画像と、それ以外の順位の顔画像との区別をするために、順位が１位である顔画像の評価値に乗じる重みαを、それ以外の順位である顔画像の評価値に乗じる重みβよりも大きくする。
【００４８】
例えば、図５に示すように、相対的に望遠側の撮像画像からＡさん、Ｂさんの顔画像が検出され、他方の撮像画像からＡさん、Ｂさん、Ｃさん、Ｄさんの顔画像が検出され、また、Ｂさんの順位が１位である場合、他方の撮像画像から検出されたＡさん、Ｂさんの顔画像の評価値は、相対的に望遠側の撮像画像から顔画像が検出されたＡさん、Ｂさんについてのもので、順位が１位のＢさんの重みがαで、順位が１位ではないＡさんの重みがβだから、一旦算出された評価値Ｗａには重みβを、評価値Ｗｂには重みαをそれぞれ乗じた値βＷａ、αＷｂとなる。Ｃさん、Ｄさんについての評価値は、重みを乗じていないＷｃ、Ｗｄとなる。
【００４９】
但し、顔評価値６５は、相対的に望遠側の撮像画像から顔画像が検出されたにも関わらず、その顔画像と同一人物の顔画像が他方の撮像画像から検出されなかった場合、他方の撮像画像で検出されなかった顔画像について評価値を算出することができない。図５に示す場合を例にすると、図６に示すように、相対的に望遠側の撮像画像からＡさん、Ｂさんの顔画像が検出され、他方の撮像画像から何らかの不具合でＡさんの顔画像が検出されず、Ｂさん、Ｃさん、Ｄさんの顔画像のみが検出された場合、他方の撮像画像について、Ｂさんの顔画像の評価値は算出されず、Ａさん、Ｃさん、Ｄさんの顔画像の評価値は算出される。
【００５０】
顔枠決定回路６６は、顔検出回路６３で検出された顔画像の位置・大きさに基づいて、液晶ディスプレイ５８に表示されるスルー画像中の顔画像を囲う顔枠７１（図７参照）の位置・大きさを決定する。
【００５１】
ＣＰＵ３９には、電源ボタン１５、モード切替えダイヤル１６、レリーズボタン１７、ズーム操作ボタン２０、並びにデジタルカメラ１１の背面側に配設されたメニューボタン６７及び十字キー６８などの各操作部材が接続されている。これらの各操作部材は、ユーザによる操作を検出し、その検出結果をＣＰＵ３９に入力する。
【００５２】
電源ボタン１５が押圧されると、図示を省略したバッテリの電力が各部に供給され、デジタルカメラ１１が起動する。そして、電源ボタン１５が再度押圧されると、電力の供給が停止され、デジタルカメラ１１が停止状態になる。ＣＰＵ３９は、電源ボタン１５の操作を検出すると、その操作に応じて繰出しモータ２８、４１を駆動し、レンズ鏡筒１２、１３の繰出し、あるいは沈胴を行わせる。一方、モード切替えダイヤル１６が操作されると、撮影モードが切り替えられる。
【００５３】
レリーズボタン１７は、二段階で押圧される。レリーズボタン１７が軽く押圧（半押し）されると、各撮像部２６、２７において、ＡＥ処理やＡＦ処理などの各種撮影準備処理が施される。そして、半押しされた状態からレリーズボタン１７が強く押圧（全押し）されると、各撮像部２６、２７の一画面分の撮像信号が画像データに変換される。
【００５４】
ＣＰＵ３９は、ズーム操作ボタン２０の操作を検出すると、その操作に応じてフォーカスモータ２９、４２を駆動し、ズームレンズ３６、４９を光軸方向に進退移動させる。そして、ワイド端とテレ端との間に所定の間隔で複数設定されたズーム位置にズームレンズ３６、４９を配置することにより、各撮像部２６、２７のズーム倍率を変化させる。
【００５５】
図７（Ａ）に示すように、液晶ディスプレイ５８には、相対的に望遠側の撮像画像に基づくスルー画像が表示される。レリーズボタン１７が半押しされると、スルー画像中の顔画像を囲う位置には、顔枠７１が表示される。レリーズボタン１７の半押しが解除されると、顔枠７１の表示が消される。また、相対的に望遠側の撮像画像から検出されず、かつ、他方の撮像画像から検出された顔画像がある場合、液晶ディスプレイ５８には、スルー画像として表示されているエリアの外に、人物の顔が検出されていることを報知する印７２が表示される。印７２は、顔をイメージしたイラストと顔の方向を示す矢印とから構成され、エリア外に検出されている顔の数だけ表示される。この印７２は、メニューボタン６７及び十字キー６８の操作により、非表示状態にすることも可能である。
【００５６】
ＣＰＵ３９は、メニューボタン６７及び十字キー６８の所定の操作を検出すると、その操作に応じて液晶ドライバ５６を駆動し、液晶ディスプレイ５８に表示されるスルー画像を、図７（Ｂ）に示すように、他方の撮像画像に基づくものに切り替える。レリーズボタン１７が半押しされると、スルー画像中の顔画像を囲う位置には、顔枠７１が表示される。顔枠７１は、各撮像画像の双方から検出された顔画像を囲うものと、他方の撮像画像だけから検出された顔画像を囲うものとで区別できる態様（例えば、枠の太さが異なる態様、枠の形状が異なる態様、枠の色が異なる態様など）で表示される。
【００５７】
そして、他方の撮像画像に基づくスルー画像に切り替えられてから所定時間（例えば、３秒）が経過すると、ＣＰＵ３９は、液晶ドライバ５６を駆動し、液晶ディスプレイ５８に表示されるスルー画像を、図７（Ａ）に示す元の撮像画像（相対的に望遠側の撮像画像）に基づくものに切り替える。このように、液晶ディスプレイ５８には、いずれか一つの撮像画像に基づくスルー画像が選択的に表示される。なお、所定時間が経過する前にＣＰＵ３９がメニューボタン６７及び十字キー６８の所定の操作を検出した場合にも、元の撮像画像に基づくスルー画像に復帰する。
【００５８】
また、ＣＰＵ３９は、メニューボタン６７及び十字キー６８の所定の別の操作を検出すると、その操作に応じて液晶ドライバ５６を駆動し、液晶ディスプレイ５８に表示されるスルー画像を、図８に示すように、各撮像画像に基づくものが並置されたものに切り替える。レリーズボタン１７が半押しされると、顔枠７１が、各撮像画像の双方から検出された顔画像を囲うものと、一方の撮像画像だけから検出された顔画像を囲うものとで区別できる態様（例えば、枠の太さが異なる態様、枠の形状が異なる態様、枠の色が異なる態様）で表示される。
【００５９】
そして、図７（Ｂ）の場合と同様、所定時間（例えば、３秒）が経過すると、液晶ディスプレイ５８に表示されるスルー画像は、図７（Ａ）に示す元の撮像画像（相対的に棒縁側の撮像画像）に基づくものに切り替わる。また、所定時間が経過する前にＣＰＵ３９がメニューボタン６７及び十字キー６８の所定の操作を検出した場合にも、元の撮像画像に基づくスルー画像に復帰する。
【００６０】
次に、デジタルカメラ１１の処理手順を図９のフローチャートを参照しながら説明する。同時撮影モードで撮影される場合、まず電源ボタン１５が押下され、デジタルカメラ１１が起動される。そして、モード切替えダイヤル１６が操作され、同時撮影モードに設定される。
【００６１】
液晶ディスプレイ５８には、相対的に望遠側の撮像画像に基づくスルー画像が表示される（図７（Ａ）参照）。メニューボタン６７及び十字キー６８が所定の手順で操作されると、液晶ディスプレイ５８に表示されているスルー画像が、他方の撮像画像に基づくもの（図７（Ｂ）参照）、あるいは、各撮像画像に基づくものが並置されたもの（図８参照）に切り替えられる。そして、所定時間（例えば、３秒）が経過すると、元の撮像画像（相対的に望遠側の撮像画像）に基づくものに復帰する（図７（Ａ）参照）。
【００６２】
レリーズボタン１７が半押しされると、顔検出回路６３によって、各撮像画像から顔画像が検出される。顔画像が検出されると、スルー画像には、顔枠７１が表示される。また、顔評価回路６５によって、各撮像画像から検出された顔画像について、評価値がそれぞれ一旦算出されるとともに、評価値による顔画像の順位が一旦決定される。
【００６３】
さらに、顔照合回路６４によって、各撮像画像から検出された顔画像が照合され、相互に同一人物のものであるか否かを判定する。顔画像が照合されると、顔評価回路６５によって、相対的に望遠側の撮像画像から検出された顔画像の評価値、及びその評価値による顔画像の順位を考慮して、他の撮像画像から検出された顔画像について、評価値が再度算出されるとともに、評価値による顔画像の順位が再度決定される。
【００６４】
半押しされた状態からレリーズボタン１７が全押しされると、各撮像部２６、２７の一画面分の撮像信号が画像データに変換される。そして、所定の画像処理、圧縮処理が施され、記録メディア５９に記録される。
【００６５】
以上説明したように、相対的に望遠側の撮像画像における評価値による顔画像の順位を、他の撮像画像における評価値による顔画像の順位に反映させるから、評価値にズレが生じ易い広角側の撮像画像における評価値による顔画像の順位を適正なものとし、各撮像素子において、適正な撮影準備処理を実行することができる。これにより、主要被写体となる人物の顔を適正に撮影することができる。
【００６６】
なお、上記実施形態において、液晶ディスプレイ５８に表示されているスルー画像が、図７（Ｂ）に示すように望遠側ではない撮像画像に基づくものである時に、レリーズボタン１７が半押しされた場合に、各撮像部２６、２７における各種撮影準備処理、及び画像信号処理回路５４における画像補正処理を、画像毎に独立して施すようにしてもよい。この場合、相対的に望遠側の撮像画像における評価値による顔画像の順位を、他方の撮像画像におけるその順位に反映させることはなく、また、評価値に対して１を超える重みαやβを乗じることはない。
【００６７】
また、上記実施形態では、同時撮影モードで撮影を実行する場合を例に説明したが、本発明は、二つ以上の撮像素子でズーム倍率が互いに異なる撮影を実行する撮影モードであればよく、３Ｄ撮影モードにも適用可能である。
【００６８】
また、上記実施形態では、二つの撮像部２６、２７で同時に撮影が実行されるデジタルカメラ１１を例に説明したが、本発明は、三つ以上の撮像部で同時に撮影が実行される複眼式撮像装置であってもよい。この場合、最も望遠側の撮像画像を取得する撮像素子と、それ以外の撮像素子とに区別して処理を実行することになる。
【００６９】
また、上記実施形態では、ＥＥＰＲＯＭ６０に予め登録された顔画像を用いて各撮像画像から検出された顔画像を照合したが、ＥＥＰＲＯＭ６０に予め登録された顔画像を用いず、各撮像画像から検出された顔画像を直接照合するようにしてもよい。
【００７０】
また、上記実施形態では、スルー画像として表示されているエリアの外に、人物の顔が検出されていることを報知する手段として、液晶ディスプレイ５８に印７２を表示したが、印７２を表示することに代え、又は印７２を表示することとともに音声で報知してもよい。この場合、デジタルカメラ１１に内蔵されたスピーカ（図示省略）などを用いる。
【００７１】
また、上記実施形態では、メニューボタン６７及び十字キー６８の所定の操作により、液晶ディスプレイ５８に表示されるスルー画像が一時的に切り替えられる場合を例に説明したが、スルー画像として表示されているエリアの外に、人物の顔が検出されている場合に、自動的に広角側のスルー画像（例えば、図７（Ａ）→図７（Ｂ））に一時的に切り替えられるようにしてもよい。あるいは、自動的に広角側のスルー画像を並置するよう（例えば、図７（Ａ）→図８）に一時的に切り替えられるようにしてもよい。このように、スルー画像を自動的に切り替える一連の構成は、スルー画像として表示されているエリアの外に、人物の顔が検出されていることを報知する手段として機能する。
【符号の説明】
【００７２】
１１  デジタルカメラ
３１、４４  撮像素子
３６、４９  ズームレンズ
３７、５０  フォーカスレンズ
３８、５１  絞り
３９  ＣＰＵ
５４  画像信号処理回路
５６  液晶ドライバ
５８  液晶ディスプレイ
６０  ＥＥＰＲＯＭ
６１  ＡＥ／ＡＷＢ検出回路
６２  ＡＦ検出回路
６３  顔検出回路
６４  顔照合回路
６５  顔評価回路
６６  顔枠決定回路
【図１】
2011109427.tif 000003
【図２】
2011109427.tif 000004
【図３】
2011109427.tif 000005
【図４】
2011109427.tif 000006
【図５】
2011109427.tif 000007
【図６】
2011109427.tif 000008
【図７】
2011109427.tif 000009
【図８】
2011109427.tif 000010
【図９】
2011109427.tif 000011