(57)【要約】【課題】  特定の被写体を選択し、まだ撮影されていない他の被写体との組み合わせ候補を表示する表示装置を提供すること。【解決手段】  複数の異なる被写体を検出する検出手段により検出された複数の異なる被写体を記録し、画角内のすべての被写体を登録手段により登録する。撮影予定の被写体と記録手段で記録された被写体を比較し、一致するかを判断する。登録された被写体から、特定の被写体を選択し、まだ撮影されていない他の被写体との組み合わせ候補を表示することを特徴とする構成とした。【選択図】  図３
2014017691.tif 000002
【特許請求の範囲】
【請求項１】
複数の異なる被写体を検出する検出手段と、検出手段により検出された被写体を比較し、一致するかを判断する判断手段を有し、前記判断手段から一致したと判断された複数の異なる被写体の組み合わせ候補を記録する記録手段と、画角内のすべての被写体を登録する登録手段を有し、前上記判定手段で一致していると判断された被写体とまだ撮影されていない他の被写体の組み合わせ候補を表示することを特徴とする情報処理装置。
【請求項２】
前記情報処理装置は、主被写体の選択を切り替えて未撮影の被写体の組み合わせ候補を表示することを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記情報処理装置は、上記登録手段により登録された主被写体と、他の被写体の撮影された組み合わせを表示することを特徴とする請求項１又は請求項２に記載の情報処理装置。
【請求項４】
前記情報処理装置は、顔情報以外に、被写体の特徴を登録することで、人物以外のまだ撮影されていない被写体の組み合わせ候補を表示することを特徴とする請求項１乃至請求項３の何れか１項に記載の情報処理装置。
【請求項５】
情報処理装置は、撮影の最中に表示装置上に請求項１乃至４のいずれかの結果を、表示することを特徴とする請求項１乃至請求項４の何れか１項に記載の情報処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、被写体を撮影する画像処理装置、その制御方法及びプログラムに関し、特に顔などの特徴検出機能を有する撮影確認のためのものである。
【背景技術】
【０００２】
従来、デジタルカメラやデジタルビデオカメラ等の情報処理装置において、あらかじめ登録しておいた人物データとこれから撮影する人物の顔の特徴を比較し、その比較結果から登録された人物が撮影されたかを確認する技術が多く提案されている。
【０００３】
また、被写体の特徴の情報データを抽出し、これから撮影する被写体と同一であるかを確認するパターン認識を利用した技術も多く存在する。撮影したい被写体が、既に撮影されているかを確認するための技術であり、個人単位のみならず、集団において撮影されているかを確認できることが求められている。
【０００４】
そこで、上記認識手段を利用した技術として、複数人物が集まるイベント等の開催期間中に参加者が、これまでに何回撮影されたかを表示装置上に数字でカウント表示する技術がある。
【０００５】
上記技術は、撮影前に被写体の顔や特徴を登録しておき、撮影した被写体が、登録していたデータと一致したときに被写体の近辺にカウント数を表示するものであり、集団の撮り漏らしを減らす事を可能にする。さらに、事前にどうしても撮影したい複数の被写体をグループとして登録することで、そのグループ内で欠けることなく撮影されているかを確認する方法も提案されている（特許文献１参照）。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開2010-161573号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、上述の特許文献に開示された従来技術では、撮影対象の集団全体の中の小グループ内で、まだ撮影されていない人が誰かを知ることはできるが、その中で特定人物同士が既に撮影されているかを瞬時に判断できない。
【０００８】
さらに、どうしても撮影したい被写体が居て、その被写体と一緒にどうしても撮影したい人物の組み合わせが複数ある場合、撮影されているかの確認が困難である。
【０００９】
そこで、本発明の目的は、複数の被写体を撮影する場面において、特定の組み合わせが撮影されているかを確認できる情報処理装置を提供することである。
【課題を解決するための手段】
【００１０】
上記目的を達成するために、本発明は、複数の異なる被写体を検出する検出手段と、検出手段により検出された被写体を比較し、一致するかを判断する判断手段を有し、前記判断手段から一致したと判断された複数の異なる被写体の組み合わせ候補を記録する記録手段と、画角内のすべての被写体を登録する登録手段を有し、前上記判定手段で一致していると判断された被写体とまだ撮影されていない他の被写体の組み合わせ候補を表示することを特徴とする。
【発明の効果】
【００１１】
本発明によれば、複数の異なる被写体を撮影する場面で、必ず撮影したい被写体と撮影されている被写体の組み合わせが撮影されているかを確認できる。
【図面の簡単な説明】
【００１２】
【図１】本発明の実施形態にかかわるデジタルカメラの正面斜視図と背面斜視図である。
【図２】本発明の実施形態にかかわる撮像装置としてのデジタルカメラの電気的構成を示すブロック図である。
【図３】本発明の第１の実施例を表すフローチャートである。
【図４】事前登録した全ての被写体データの取りうる組み合わせ候補の例を示す図である。
【図５】未撮影者表示モードを示す図である。
【図６】未撮影者表示モードで主被写体を切り替えているところを示す図である。
【図７】本発明の第２の実施例を表すフローチャートである。
【図８】組み合わせグループ表示モードを示す図である。
【図９】組み合わせグループ表示モードで撮影回数を表示している状態を示す図である。
【図１０】未撮影者表示モード及び組み合わせグループ表示モードをリアルタイムで撮影中に実行する場合のフローチャートである。
【図１１】未撮影者表示モードをリアルタイムで撮影中に実行する場合の画面表示を表す図である。
【図１２】組み合わせグループ表示モードをリアルタイムで撮影中に実行する場合の画面表示を表す図である。
【発明を実施するための形態】
【００１３】
以下、本発明を図面に基づいて詳しく説明する。
【００１４】
＜第１の実施形態＞
本発明の第１の実施例によるデジタルカメラの表示装置について説明する。
【００１５】
図１（ａ）はデジタルカメラの正面斜視図である。図１（ｂ）はデジタルカメラの背面斜視図である。これらは、本発明の実施形態にかかわる撮像装置としてのデジタルカメラの外観斜視図である。
【００１６】
１０１はレリーズスイッチ、１０２はズームレバー、１０３は電源スイッチであり，ストロボ１０４は写真撮影時に発光する。また１０５は外部接続端子で、PCなどと接続して画像情報を送受信するために利用する。１０６は鏡筒、１０７は撮影指示を行うための操作部であり、１０８は画像や各種情報を表示する表示部である。１０９はモードスイッチである。
【００１７】
図２は、第１の実施形態に係るビデオカメラの基本構成を示すブロック図である。１０６は鏡筒である。被写体からの光はレンズ群２０２から入射し、絞り２０４を通してＣＣＤ２０５に到達する。ＣＣＤ２０５の受光面と平行に配置されたレンズ群２０２を、フォーカッシングモータ２０１により平行移動させることで、レンズ群２０２とＣＣＤ２０５間の距離を調節し、被写体像をＣＣＤ２０５上に結像させる。
【００１８】
レンズ群２０２は、図示しないが複数枚設置されており、それぞれのレンズ間の距離を変化させることによって、ＣＣＤ２０５に結像する被写体の焦点距離を調節することが可能である。
【００１９】
フォーカッシングモータ２０１は、図示しないフォトインタラプタによってその回転数が読み取られており、これによりレンズ群２０２の存在する位置が認識できるようになっている。フォーカッシングモータ２０１は、モータドライバ２０６によって回転数を制御することができ、レンズ群２０２を所望の位置に移動することが可能である。
【００２０】
デジタルカメラと被写体との距離や角度によって、レンズ群２０２に入射する光線の入光量や角度が変化するため、撮影の都度、レンズ群２０２とＣＣＤ２０５間の距離を調整する焦点検出動作が必要になる。
【００２１】
アイリスモータ２０３は、絞り２０４を制御するモータであり、被写体の明るさによって絞り２０４の開口径を制御することで、ＣＣＤ２０５に入射する光量を制御し、最適な露出が得られる撮影を行うことができる。
【００２２】
ＣＣＤ２０５に結像した被写体像に対して光電変換が行われ、ＣＣＤ２０５の画素一つ一つが得た光量に比例した電荷量に変換される。被写体像の明るい部分は大きな電荷量が得られ、被写体像の暗い部分の電荷量は小さくなり、被写体像の濃淡を電荷量の差として得ることができる。
【００２３】
ＣＣＤ２０５は、数百〜数千万画素で構成されており、それぞれの画素にマイクロレンズ、カラーフィルタが配置されている。赤、緑、青のカラーフィルタを配置することで、３原色の入光量を得ることができ、フルカラー画像を得ることができる。
【００２４】
ＣＣＤ２０５からの電荷は、図示しないプリント基板上の配線パターンを通してＡＦＥ２０７に入力される。
【００２５】
ＡＦＥ２０７には、ＣＣＤ２０５で発生する固定パターンノイズを除去するＣＤＳ回路、ＣＣＤ２０５からの信号をアナログ−デジタル変換するＡ／Ｄ変換回路等のアナログ信号処理回路が組み込まれている。
【００２６】
また、ＡＦＥ２０７には、ＣＣＤ２０５からの電気信号を読み出すためのタイミング信号を作り出すＴＧ回路が組み込まれている。
【００２７】
ＴＧ回路ではＣＣＤ２０５を制御するタイミング信号を生成し、上記タイミング信号に従って、ＣＣＤ２０５からＡＦＥ２０７に電荷が転送される。読み出した電荷は、ＣＤＳ回路にてノイズ成分の低減処理が行われ、Ａ／Ｄ変換回路でアナログ量である電荷量がデジタル信号に変換される。
【００２８】
変換されたデジタル信号は、バス信号ライン２１２を介してＳＤＲＡＭ２０８等の高速送受信が可能なデバイスに一時蓄積される。そこから逐次、カメラ信号処理回路２１３への読み出しが行われ、エッジ強調やノイズ除去、ホワイトバランス等の各種画像処理が行われる。昨今の多くのデジタルカメラにおいては顔検知機能を有する物が多い。カメラ信号処理回路２１３により処理された信号は、カメラ信号処理回路２１３内の画像記憶部２１４に動画や静止画として記録される。顔検出部２１５は、カメラ信号処理回路２１３から出力される画像信号における顔領域の部分から撮影人物の顔の特徴情報をあらかじめデジタルカメラの画像記録部２１４に顔のデータベースとして保存しておき、撮影時に顔と思われる物体との比較を行う。両者のまゆげ、目、鼻、口など特徴的な部分の位置関係を比較して、顔判断部２１６が人物の顔であるかどうかの判断を行っている。顔以外にも被写体の特徴を記録対象にすることで、特徴が一致したものを登録対象にすることも可能である。また、情報記録部２１７は被写体の撮影回数を記録する部分である。
【００２９】
各種画像処理が終了した画像データは、数メガバイト程度の大容量のデータであるため、ＪＰＥＧ方式等による画像圧縮処理が施された後に、フラッシュメモリ２０９やカードコネクタ２１０に挿入可能な不揮発性メモリ２１１等に保存される。
【００３０】
持ち運び可能な不揮発性メモリ２１１に画像データを記憶することで、デジタルカメラで撮影した画像を他のデバイス、例えば、パーソナルコンピュータやプリンタで読み出すことが可能となる。それにより、大画面のディスプレイ上で画像を閲覧したり、写真紙にプリントアウトすることで写真として閲覧することが可能になる。
【００３１】
このように、不揮発性メモリ２１１を介しての画像出力の他に、液晶パネルなどの（液晶表示手段）表示部１０８を有するデジタルカメラでは、撮影した画像を、表示部ドライバ２１８を介して、すぐに表示部１０８の画面上で確認することができる。
【００３２】
尚、カメラ信号処理回路２１３には、表示部１０８、外部接続端子１０５も接続されている。
【００３３】
以下、図３を参照して、本発明の第1の実施例による撮影装置について説明する。
【００３４】
図３は、図２のデジタルカメラによって実行される、顔認識を利用した主被写体の撮影回数の表示処理を行うフローチャートである。
【００３５】
ステップＳ３０１において、顔判断部２１６において撮影予定の複数の被写体の顔認識を行い、ステップＳ３０２でそれらのデータを情報記録部２１７に登録する。その際に、ステップＳ３０３で登録した被写体データが取りうる１対１の全ての組み合わせの情報を作成し、被写体の顔データと合わせて情報記録部２１７に保存する。例えば、ステップＳ３０２で登録したのが４人であれば、すべての組み合わせは組合せの公式より、6C2 = ６通りとなる。このとき求めた１つ１つの情報を組み合わせ候補と呼ぶことにし、図４に示す通り各組合せ候補に通し番号を割り、情報記録部２１７に保存する。次にステップＳ３０４で実際の写真撮影を行い、顔検出部２１５で画角内に入ってきた被写体の顔検出を行う。このとき撮影画像と一緒に検出した顔データの組み合わせ候補が、メモリ部２１１に関連付けて保存される。ステップＳ３０５で、ステップＳ３０４で撮影された被写体が、ステップＳ３０３において情報記録部２１７に保存された顔データの組み合わせと一致するか比較を行う。撮影画像内に登録していた被写体が検知できた場合はステップＳ３０６に進み、一致した被写体の組合せ候補を算出する。組合せ候補算出後、ステップＳ３０７に進み、ステップＳ３０３で求めた組合せ候補と一致する組合せの撮影回数データをインクリメントする。情報記録部２１７に保存された顔データの組み合わせと一致しない場合は、ステップＳ３０８に進む。ステップＳ３０８では、未撮影者表示モードに移行するかどうかの選択をする。移行する場合はステップＳ３０８に進み、しない場合はステップＳ３１０の撮影終了確認へ進む。ステップＳ３０９の未撮影者表示モードで他の被写体についても調べたい場合は、ステップＳ３０８に戻って実行する。他の被写体について調べない場合はステップＳ３１０に進む。ステップＳ３１０は撮影終了確認であり、終了する場合は写真撮影を終了し、まだ続ける場合はステップＳ３０３に戻る。
【００３６】
図５は未撮影者表示モードを表し、画像記録部２１４に登録した被写体全員の顔を表示部１０８に表示し、どの組み合わせと写っているかを確認したい主被写体を選択する。選択方法は表示部１０８上の被写体の顔を液晶パネルに備わっているタッチパネルで直接選択する他、カメラに備わっている操作ボタンや十字キー等で選択する方法がある。選択された被写体は、図５のように情報記録部２１７に保存されている組み合わせ候補の撮影回数とともに表示される。図５は、被写体Ａを選択したときにステップＳ３０７の段階で情報記録部２１７に保存されている組み合わせ候補の撮影回数を表示している例である。図６のように、主被写体を切り替えることで、特定の被写体に対して他の被写体のまだ撮影されていない候補や、撮影回数を確認することができる。
【００３７】
このように、第１の実施例におけるデジタルカメラによれば、どうしても撮影したい被写体と、一緒に撮影した被写体が撮影されているかを撮影回数とともに容易に確認できる。
【００３８】
＜第２の実施形態＞
次に、本発明の第２の実施例における、デジタルカメラの主被写体と他の複数の被写体のまだ撮影されていない組み合わせを表示する方法について説明する。以降では、主被写体と他の複数の被写体の組み合わせの撮影回数を表示する事を組み合わせグループ表示と呼ぶことにする。また、組み合わせグループを表示する事を組み合わせグループ表示モードとする。第２の実施例のデジタルカメラの構成は、前記第１の実施例とほぼ同一であるので、同一の構成については同一の符号を用いることで図の説明を省略し、ここでは異なる構成について説明する。図７は、主被写体を含む組み合わせグループの撮影回数の表示処理を行うフローチャートである。ステップＳ７０１〜ステップＳ７０３までは第１の実施形態の図３の処理と同じなので省略する。ステップＳ７０４でその時画格内に収まっている被写体すべての顔情報が、ステップＳ７０２で登録した顔情報と一致するかを顔判断部２１６で判断し、ステップＳ７０５で、情報記録部２１７に組み合わせグループとして登録し、撮影回数データをインクリメントする。その後ステップＳ７０６において、組み合わせグループ表示モードを実行するかを決定する。実行する場合は、図８のような表示画面にモードスイッチ１０９や表示部１０８からのタッチ操作等で切り替える。図９のように表示部１０８からのタッチ操作などで選択した主被写体と、実際に撮影されている組み合わせグループの撮影回数を表示する。図９は主被写体としてＡを選択した場合の表示例で、Ａ・Ｂ・Ｃの組み合わせの写真が２枚、Ａ・Ｂ・Ｃ・Ｄの組み合わせの写真が１枚撮影されている事を示している。実行しない場合、ステップＳ７０８の撮影終了判断をする。ステップＳ７０７で主被写体の切り替えをするかを選択する事で、他の被写体の組み合わせグループの撮影回数も調べることができる。それ以上調べない場合はステップＳ７０８に移行し、撮影終了判断をする。さらに撮影する場合はステップＳ７０３まで戻り、しない場合は終了する。
【００３９】
このように、第２の実施例におけるデジタルカメラによれば、どうしても撮影したい被写体のグループが撮影できているかを撮影回数と主に容易に確認できる。
【００４０】
＜第３の実施形態＞
次に、本発明の第３の実施例における、デジタルカメラの主被写体と他の複数の被写体のまだ撮影されていない組み合わせを撮影中リアルタイムで表示する方法について説明する。
【００４１】
第３の実施例のデジタルカメラの構成は、前記第１及び第２の実施例とほぼ同一であり異なる部分について説明する。実施例１及び実施例２はそれぞれ組み合わせ候補の撮影回数を確認するための専用モードに移行していたが、実施例３は撮影しながら主被写体との他の被写体の組み合わせ、または組み合わせグループのまだ撮影されていない組み合わせをリアルタイムで表示する。この処理を図１０のフローチャートに示す。ステップＳ１００１からステップＳ１００７までで被写体の事前登録及び、グループ登録までを行っている。実施例１及び２との相違点は、ステップＳ１００８で、モードスイッチ１０９や表示部１０８へのタッチ操作等で選択し、情報記録部２１７内に記録された情報から図１１のように未撮影者表示モードを表示部１０８の画面端に表示できることである。終了する場合はステップＳ１００９でモードスイッチ１０９や表示部１０８へのタッチ操作によって行う。組み合わせグループを表示する場合もステップＳ１０１０、ステップＳ１０１１で同様の処理を行い、図１２のように結果を表示する。最後にステップＳ１０１２で、撮影終了判断をして、まだ続ける場合はステップＳ１００３まで戻り、終了する場合は撮影終了する。
【００４２】
このように、第３の実施例におけるデジタルカメラによれば、どうしても撮影したい被写体を中心とした他の被写体や、そのグループのまだ撮影されていない組み合わせや撮影回数を撮影中にリアルタイムで容易に確認できる。
【００４３】
以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。
【符号の説明】
【００４４】
１０１  リレーズスイッチ
１０２  ズームレバー
１０３  電源スイッチ
１０４  ストロボ
１０５  外部接続端子
１０６  鏡筒
１０７  操作部
１０８  表示部
１０９  モードスイッチ
２０１  フォーカッシングモータ
２０２  レンズ群
２０３  アイリスモータ
２０４  絞り
２０５  ＣＣＤ
２０６  モータドライバ
２０７  ＡＦＥ
２０８  ＳＤＲＡＭ
２０９  フラッシュメモリ
２１０  カードコネクタ
２１１  不揮発性メモリ
２１２  バス信号ライン
２１３  カメラ信号処理回路
２１４  画像記録部
２１５  顔検出部
２１６  顔判断部
２１７  情報記録部
２１８  表示部ドライバ
【図１】
2014017691.tif 000003
【図２】
2014017691.tif 000004
【図３】
2014017691.tif 000005
【図４】
2014017691.tif 000006
【図５】
2014017691.tif 000007
【図６】
2014017691.tif 000008
【図７】
2014017691.tif 000009
【図８】
2014017691.tif 000010
【図９】
2014017691.tif 000011
【図１０】
2014017691.tif 000012
【図１１】
2014017691.tif 000013
【図１２】
2014017691.tif 000014