(57)【要約】【課題】子供の成長／変化が良く分かるような画像の撮影を促す。【解決手段】画像取得部５１は、撮像部１１の出力信号から入力画像を取得する。顔検出部５２及び顔認識部５３は、入力画像から人物の顔を検出すると共に顔辞書ＤＩＣ１を用いて検出顔の個体識別（誰の顔であるのかの識別）を行う。顔辞書ＤＩＣ２には、１以上の登録人物の顔の画像データが保持されている。成長／変化評価部５４は、検出顔の顔認識ＩＤ（個体識別情報）に対応付けられた登録人物の顔を顔辞書ＤＩＣ２から抽出及び選択し、顔の類似度評価処理を介して、抽出／選択顔と検出顔の類似度に応じたスコア（評価値）を算出する。スコアが所定の閾値以上であるとき、検出顔（子供の顔）に変化／成長がみられると判断し（例えば子供の顔が登録人物である父親に似てきたと判断し）、撮影を促す通知を行う。【選択図】図３
2014011523.tif 000002
【特許請求の範囲】
【請求項１】
撮影による被写体像の信号を出力する撮像部、シャッタ操作の入力を受ける操作部、及び、前記シャッタ操作が入力された際に前記撮像部の出力信号から対象画像を生成して前記対象画像を記録する記録媒体を備えた撮像装置であって、
前記撮像部の出力信号から前記対象画像と異なる入力画像を取得する画像取得部と、
前記入力画像の画像データに基づき前記入力画像上における特定種類の物体を対象物として検出する対象物検出部と、
１以上の登録物の画像データを保持するデータベースと、
前記１以上の登録物に含まれる、前記対象物に対応付けられた特定登録物の画像データと、前記入力画像における前記対象物の画像データと、に基づき評価値を導出する評価値導出部と、
前記対象画像の撮影用処理の実行可否を前記評価値に基づき決定する制御部と、を備えた
ことを特徴とする撮像装置。
【請求項２】
前記撮影用処理は、前記シャッタ操作の入力に関わる通知を含む
ことを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記通知は、前記シャッタ操作の入力を指示、催促、推奨又は許可する通知を含む
ことを特徴とする請求項２に記載の撮像装置。
【請求項４】
前記対象物検出部は、前記入力画像の画像データに基づき前記対象物の個体識別をも行い、
当該撮像装置は、前記１以上の登録物の中から前記対象物の個体識別情報に対応する登録物を前記特定登録物として選択する選択部を更に備えた
ことを特徴とする請求項１〜請求項３の何れかに記載の撮像装置。
【請求項５】
前記特定登録物が複数存在する場合、前記評価値導出部は、複数の特定登録物の画像データと、前記入力画像における前記対象物の画像データと、に基づき前記評価値を導出する
ことを特徴とする請求項１〜請求項４の何れかに記載の撮像装置。
【請求項６】
前記撮影用処理は、前記対象画像の撮影条件を調整する処理を含む
ことを特徴とする請求項１〜請求項５の何れかに記載の撮像装置。
【請求項７】
前記撮影用処理は、前記シャッタ操作の入力を待たずに、前記撮像部の出力信号から前記対象画像を生成して前記対象画像を記録する処理を含む
ことを特徴とする請求項１に記載の撮像装置。
【請求項８】
前記入力画像又は前記対象画像である再生用画像を表示可能な表示部を更に備え、
前記対象物及び前記特定登録物の夫々は複数のパーツから成り、
前記評価値導出部は、前記特定登録物の画像データ及び前記再生用画像における前記対象物の画像データに基づき前記パーツごとにパーツ評価値を導出可能であり、
前記表示部は、前記再生用画像を表示する際、導出された各パーツ評価値に応じた表示を行う
ことを特徴とする請求項１〜請求項７の何れかに記載の撮像装置。
【請求項９】
前記評価値は、前記特定登録物の画像データ及び前記入力画像における前記対象物の画像データに基づく前記特定登録物及び前記対象物間の類似度に依存する
ことを特徴とする請求項１〜請求項８の何れかに記載の撮像装置。
【請求項１０】
撮影による被写体像の信号を出力する撮像部、シャッタ操作の入力を受ける操作部、及び、前記シャッタ操作が入力された際に前記撮像部の出力信号から対象画像を生成して前記対象画像を記録する記録媒体を備えた撮像装置に用いられる撮影支援方法をコンピュータに実現させるプログラムであって、
前記撮影支援方法は、
前記撮像部の出力信号から前記対象画像と異なる入力画像を取得する入力画像取得ステップと、
前記入力画像の画像データに基づき前記入力画像上における特定種類の物体を対象物として検出する検出ステップと、
前記撮像装置内のデータベースに保持された１以上の登録物に含まれる、前記対象物に対応付けられた特定登録物の画像データと、前記対象物の画像データと、に基づき評価値を導出する評価値導出ステップと、
前記対象画像の撮影用処理の実行可否を前記評価値に基づき決定する制御ステップと、を備えた
ことを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、デジタルカメラ等の撮像装置、及び、その撮像装置に利用可能なプログラムに関する。
【背景技術】
【０００２】
子供の成長過程において、或る日は子供が父親に似ており、別の日には母親に似ていることがある。また、或る日は子供が父親又は母親に似ていないが、日数を経て子供が父親又は母親と似てくることもある。このような子供（特に顔）の変化は、当該子供にたまに会う知人の指摘により気づかされることが多く、常に子供と接している親族（特に父親や母親）には分かりにくい。
【０００３】
一方、デジタルカメラを利用する理由の一つとして、子供の成長過程を記録することが挙げられる。自分の子供を被写体に定めた一種の定点撮影を継続的に行っておけば、子供の成長過程を画像として記録しておくことができる。尚、特許文献１には、自分の撮影画像とデータベースに保持されているモデルや芸能人との類似度を算出及び提示する方法が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００４−２９７１６７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
上述したように、定点撮影の継続的な実行は成長過程の記録に役立つ。しかし、子供の日々の変化に気づくことなく漫然と定点撮影を行うことは、撮影者の撮影意欲低下につながり、やがて撮影者が撮影を行わなくなるということもある。人間の子供（特に顔）が定点撮影の対象物であることを想定してカメラの利用方法等を説明したが、対象物が動物等であっても同様のことが言える。尚、特許文献１の方法は、対象物の撮影（定点撮影等）を支援するものではない。
【０００６】
そこで本発明は、対象物の撮影支援機能を持つ撮像装置及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明に係る撮像装置は、撮影による被写体像の信号を出力する撮像部、シャッタ操作の入力を受ける操作部、及び、前記シャッタ操作が入力された際に前記撮像部の出力信号から対象画像を生成して前記対象画像を記録する記録媒体を備えた撮像装置であって、前記撮像部の出力信号から前記対象画像と異なる入力画像を取得する画像取得部と、前記入力画像の画像データに基づき前記入力画像上における特定種類の物体を対象物として検出する対象物検出部と、１以上の登録物の画像データを保持するデータベースと、前記１以上の登録物に含まれる、前記対象物に対応付けられた特定登録物の画像データと、前記入力画像における前記対象物の画像データと、に基づき評価値を導出する評価値導出部と、前記対象画像の撮影用処理の実行可否を前記評価値に基づき決定する制御部と、を備えたことを特徴とする。
【０００８】
これにより例えば、対象物（子供の顔など）と対象物に対応付けられた特定登録物（親の顔など）との類似度に応じた評価値を導出し、類似度が相応に高ければ、類似度が低い状態から高い状態への変化がみられる（即ち例えば、子供の顔が親に似ていない状態から似ている状態へ変化した）と判断して対象画像の撮影用処理を実行する、といったことが可能となる。対象画像の撮影用処理を通じて実際に対象画像の撮影及び記録が成されることにより、例えば子供の成長／変化が分かるような画像記録が実現されるようになる。即ち、対象物（子供の顔など）に対する適切な撮影が支援される。
【０００９】
具体的には例えば、前記撮影用処理は、前記シャッタ操作の入力に関わる通知を含んでいてもよい。
【００１０】
この通知によって撮影者による撮影意欲が喚起され、実際に撮影者がシャッタ操作の入力を行うことが期待される。
【００１１】
より具体的には例えば、前記通知は、前記シャッタ操作の入力を指示、催促、推奨又は許可する通知を含んでいてもよい。
【００１２】
また例えば、前記対象物検出部は、前記入力画像の画像データに基づき前記対象物の個体識別をも行い、当該撮像装置は、前記１以上の登録物の中から前記対象物の個体識別情報に対応する登録物を前記特定登録物として選択する選択部を更に備えていても良い。
【００１３】
また例えば、前記特定登録物が複数存在する場合、前記評価値導出部は、複数の特定登録物の画像データと、前記入力画像における前記対象物の画像データと、に基づき前記評価値を導出してもよい。
【００１４】
これにより例えば、対象物（子供の顔など）と対象物に対応付けられた第１特定登録物（父親の顔など）との類似度、及び、対象物（子供の顔など）と対象物に対応付けられた第２特定登録物（母親の顔など）との類似度を用いて評価値を求めるといったことが可能になり、結果、複数の類似度を考慮して上記撮影用処理の実行可否を決定できるようになる。
【００１５】
また例えば、  前記撮影用処理は、前記対象画像の撮影条件を調整する処理を含んでいてもよい。
【００１６】
これにより、後に入力が予想されるシャッタ操作の前に撮影条件が調整され、シャッタ操作が実際に入力されたときには、適切な撮影条件にて速やかに対象画像を取得すること可能となる。
【００１７】
また例えば、前記撮影用処理は、前記シャッタ操作の入力を待たずに、前記撮像部の出力信号から前記対象画像を生成して前記対象画像を記録する処理を含んでいてもよい。
【００１８】
これにより、評価値から記録が望ましい判断される画像を確実に取得及び記録しておくことができる。
【００１９】
また例えば、当該撮像装置は、前記入力画像又は前記対象画像である再生用画像を表示可能な表示部を更に備え、前記対象物及び前記特定登録物の夫々は複数のパーツから成り、前記評価値導出部は、前記特定登録物の画像データ及び前記再生用画像における前記対象物の画像データに基づき前記パーツごとにパーツ評価値を導出可能であり、前記表示部は、前記再生用画像を表示する際、導出された各パーツ評価値に応じた表示を行ってもよい。
【００２０】
また例えば、前記評価値は、前記特定登録物の画像データ及び前記入力画像における前記対象物の画像データに基づく前記特定登録物及び前記対象物間の類似度に依存していてもよい。
【００２１】
本発明に係るプログラムは、撮影による被写体像の信号を出力する撮像部、シャッタ操作の入力を受ける操作部、及び、前記シャッタ操作が入力された際に前記撮像部の出力信号から対象画像を生成して前記対象画像を記録する記録媒体を備えた撮像装置に用いられる撮影支援方法をコンピュータに実現させるプログラムであって、前記撮影支援方法は、前記撮像部の出力信号から前記対象画像と異なる入力画像を取得する入力画像取得ステップと、前記入力画像の画像データに基づき前記入力画像上における特定種類の物体を対象物として検出する検出ステップと、前記撮像装置内のデータベースに保持された１以上の登録物に含まれる、前記対象物に対応付けられた特定登録物の画像データと、前記対象物の画像データと、に基づき評価値を導出する評価値導出ステップと、前記対象画像の撮影用処理の実行可否を前記評価値に基づき決定する制御ステップと、を備えたことを特徴とする。
【発明の効果】
【００２２】
本発明によれば、対象物の撮影支援機能を持つ撮像装置及びプログラムを提供することが可能である。
【図面の簡単な説明】
【００２３】
【図１】本発明の実施形態に係る撮像装置の概略内部ブロック図である。
【図２】図１の撮像部の内部構成図である。
【図３】本発明の実施形態に係る撮像装置の特徴部の機能ブロック図である。
【図４】図３の成長／変化評価部５４の内部ブロック図である。
【図５】本発明の実施形態にて想定される複数の人物の対応関係を示す図である。
【図６】入力画像、対象画像、撮影勧告通知及びシャッタ操作入力の関係を示す図である。
【図７】本発明の第１実施例に係る撮像装置の動作フローチャートである。
【図８】本発明の第５実施例に係る動作を説明するための図である。
【図９】本発明の第６実施例に係る動作を説明するための図である。
【図１０】本発明の第７実施例に係る動作を説明するための図である。
【図１１】本発明の第９実施例に係る動作を説明するための図である。
【図１２】本発明の第１０実施例に係る３つの画像を示す図である。
【図１３】本発明の第１０実施例に係る表示画面の内容例を示す図である。
【図１４】本発明の第１０実施例に係る表示画面の他の内容例を示す図である。
【図１５】本発明の第１１実施例に係り、表示画面の変化の様子を示す図である。
【図１６】本発明の第１２実施例に係る表示画面の内容例を示す図である。
【発明を実施するための形態】
【００２４】
以下、本発明の実施形態の例を、図面を参照して具体的に説明する。参照される各図において、同一の部分には同一の符号を付し、同一の部分に関する重複する説明を原則として省略する。尚、本明細書では、記述の簡略化上、情報、信号、物理量、状態量又は部材等を参照する記号又は符号を記すことによって該記号又は符号に対応する情報、信号、物理量、状態量又は部材等の名称を省略又は略記することがある。
【００２５】
図１は、本発明の実施形態に係る撮像装置１の概略内部ブロック図である。撮像装置１は、静止画像及び動画像を撮影及び記録可能なデジタルビデオカメラ、又は、静止画像のみを撮影及び記録可能なデジタルスチルカメラである。また、撮像装置１は、携帯電話機などの携帯端末に搭載されるものであっても良い。撮像装置１は、符号１１〜１７によって参照される各部位を備える。表示部１４は、撮像装置１の外部に設けられた表示装置であっても良い。
【００２６】
撮像部１１は、撮像素子を用いて被写体の撮影を行う。図２は、撮像部１１の内部構成図である。撮像部１１は、光学系３５と、絞り３２と、ＣＣＤ（Charge Coupled Device）又はＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサなどから成る撮像素子（固体撮像素子）３３と、光学系３５や絞り３２を駆動制御するためのドライバ３４と、を有している。光学系３５は、撮像部１１の画角を調節するためのズームレンズ３０及び焦点を合わせるためのフォーカスレンズ３１を含む複数枚のレンズから形成される。ズームレンズ３０及びフォーカスレンズ３１は光軸方向に移動可能である。主制御部１２からの制御信号に基づき、光学系３５内におけるズームレンズ３０及びフォーカスレンズ３１の位置並びに絞り３２の開度（即ち絞り値）が制御される。撮像素子３３は、水平及び垂直方向に複数の受光画素が配列されることによって形成される。撮像素子３３の各受光画素は、光学系３５及び絞り３２を介して入射した被写体像（被写体の光学像）を光電変換し、該光電変換によって得られた被写体像の信号を撮像部１１の出力信号として出力する。
【００２７】
主制御部１２は、信号処理回路、ＣＰＵ（Central Processing Unit）、ＲＯＭ(Read Only Memory)及びＲＡＭ（Random Access Memory）等にて形成され、撮像部１１の出力信号に対して所定の信号処理を施すことで、撮像部１１による撮影画像である被写体像の画像データを生成する。データベース部１３は、不揮発性メモリにてから形成され、様々な情報を記憶する。表示部１４は、液晶ディスプレイパネル等の表示画面を有する表示装置であり、主制御部１２の制御の下、任意の映像を表示する。本明細書において、単に表示及び表示画面と言った場合、それらは、表示部１４における表示及び表示画面を指すものとする。音声入出力部１５は、撮像装置１の周辺音を音響信号に変換するマイクロホン及び任意の音響信号を音として出力するスピーカ等から成る。記録媒体１６は、カード状半導体メモリや磁気ディスク等の不揮発性メモリであり、主制御部１２による制御の下、撮影画像の画像データ等を記録する。
【００２８】
操作部１７は、静止画像の撮影指示であるシャッタ操作の入力を受け付けるシャッタボタン１７ａ等を備え、外部からの各種操作を受け付ける。操作部１７に対する操作内容は、主制御部１２に伝達される。シャッタボタン１７ａは、表示部１４に設けられうるタッチパネル上のボタンであっても良い。シャッタ操作が入力されたとき、主制御部１２は、撮像部１１の出力信号から対象画像を生成して対象画像の画像データを記録媒体１６に記録させる。対象画像は、シャッタ操作の入力に応答して、撮像部１１により撮影された被写体像である。
【００２９】
図３は、撮像装置１が有する特異な特徴部の機能ブロック図であり、符号５１〜５５、ＤＢ１及びＤＢ２によって参照される各部位が撮像装置１に設けられる。画像取得部５１は撮像部１１を含み、主制御部１２の機能を用いて実現される。顔検出部５２、顔認識部５３、成長／変化評価部５４及び成長／変化対応制御部５５は、主制御部１２にて実現される。第１データベースであるデータベースＤＢ１及び第２データベースであるデータベースＤＢ２は、データベース部１３に設けられる。
【００３０】
画像取得部５１は、撮像部１１の出力信号による被写体像の画像データを、入力画像の画像データとして取得する。入力画像の画像データは撮像部１１の出力信号そのものであっても良いし、撮像部１１の出力信号に対し所定の信号処理を施すことで得た画像データであっても良い。また、画像取得部５１は、任意の記録媒体を介して入力画像の画像データを取得しても良い。入力画像の画像データは、顔検出部５２、顔認識部５３及び成長／変化評価部５４に供給される。
【００３１】
顔検出部５２は、入力画像の画像データに基づく顔検出処理を行う。顔検出処理として人物の顔の検出に適した公知の処理を利用可能である。顔検出処理は、入力画像上に人物の顔が存在するか否かの検出（以下、顔有無検出という）を含む。顔検出処理において、顔検出部５２は、入力画像上に存在している人物の顔の位置（入力画像上の位置）及び向きを表す顔座標及び顔向きを検出すると共に、人物の顔であると判定した物体の顔らしさを表す顔スコアを算出する。顔検出部５２は、顔有無検出の結果を示す顔有無情報、顔座標、顔向き及び顔スコアを含む顔検出情報を出力する。以下の説明では、特に記述無き限り、入力画像において人物の顔が検出されたことを前提とする。また、人物の顔を単に顔と呼ぶ。更に、顔検出部５２において検出された入力画像上の顔を、検出顔とも呼ぶ。
【００３２】
顔認識部５３は、入力画像の画像データ、顔検出情報及びデータベースＤＢ１に保存されている顔辞書ＤＩＣ１に基づき、検出顔が誰の顔であるのかを認識する顔認識処理を実行する。顔認識処理に公知の顔認識方法を利用可能である。顔辞書ＤＩＣ１には、互いに異なる複数の人物Ｐ［１］〜Ｐ［ｍ］の顔の画像データが含まれており、その複数の人物Ｐ［１］〜Ｐ［ｍ］の夫々に対して固有の識別情報が割り当てられている。ｍは２以上の整数である。人物Ｐ［ｉ］に割り当てられた識別情報をＩＤ［ｉ］にて表す（ｉは整数）。顔認識部５３は、検出顔が人物Ｐ［１］〜Ｐ［ｍ］の何れの顔であるのかを判断し、その判断結果を顔認識情報に含めて出力する。
【００３３】
顔認識情報には、顔の認識の成否を示す顔認識成否情報、顔認識ＩＤ及び顔認識スコアが含まれる。顔認識ＩＤは、検出顔に対応する人物に割り当てられた識別情報であり、顔認識スコアは顔認識処理における認識の確からしさを表す。従って例えば、検出顔が顔認識処理において人物Ｐ［ｉ］の顔であると判断された場合には、識別情報ＩＤ［ｉ］が顔認識ＩＤとして顔認識情報に含められ、その判断の確からしさが顔認識スコアとして顔認識情報に含められる。
【００３４】
尚、撮像装置１から顔検出部５２を割愛することも可能である。この場合、顔認識部５３は、入力画像上のどこに顔が存在するのかが分からない状態で、入力画像内の各画像領域が人物Ｐ［１］〜Ｐ［ｍ］の何れかの顔の領域に相当するのかを判断してゆくことになる。そのような判断の処理負荷は重く、また認識の精度面でも不利である。故に、顔認識情報を得るまでの処理の高速化及び顔認識の高精度化のためには、顔認識部５３の前段に顔検出部５２を設ける方が望ましい。
【００３５】
また、顔辞書ＤＩＣ１に、一人の人物Ｐ［１］のみの顔の画像データが含まれていてもよい。この場合、顔認識部５３は、検出顔が、当該一人の人物Ｐ［１］の顔であるのか否かを判断することになる。
【００３６】
成長／変化評価部５４は、入力画像の画像データ、顔検出情報、顔認識情報及びデータベースＤＢ２に保存されている顔辞書ＤＩＣ２に基づき、検出顔と顔辞書ＤＩＣ２内の登録顔との類似度を求める類似度評価処理を行い、その処理を介して、検出顔を有する人物の成長又は変化度合いを認識することができる。評価部５４は、その処理結果及び認識結果を含む評価出力情報を生成及び出力する。成長／変化対応制御部５５は、その評価出力情報に応じた様々な制御を行う。
【００３７】
顔辞書ＤＩＣ２には、１以上の登録人物Ｑ［１］〜Ｑ［ｎ］の顔の画像データが含まれている（ｎは１以上の整数）。顔辞書ＤＩＣ２に含まれている、登録人物Ｑ［ｉ］の顔を特に登録顔とも呼ぶ。図４に示す如く、評価部５４は、顔辞書ＤＩＣ２に含まれる１以上の登録顔の中から検出顔の顔認識ＩＤに対応する登録顔を対比用登録顔として抽出及び選択する選択部６１と、検出顔と対比用登録顔との間の類似度を導出する類似度導出部６２と、を備えている。
【００３８】
具体的な例を挙げて評価部５４及び制御部５５の機能を詳細に説明する。以下では、特に記述無き限り、図５に示す如く、人物Ｐ［１］及びＰ［２］が夫々少女Ａ及び少年Ｂであって、且つ、顔辞書ＤＩＣ２に登録人物Ｑ［１］〜Ｑ［４］の顔の画像データが含まれており、且つ、登録人物Ｑ［１］及びＱ［２］がそれぞれ少女Ａの父親及び母親であると共に登録人物Ｑ［３］及びＱ［４］がそれぞれ少年Ｂの父親及び母親であることを想定する。
【００３９】
少女Ａである人物Ｐ［１］の識別情報ＩＤ［１］には、登録人物Ｑ［１］及びＱ［２］が対応づけられており、少年Ｂである人物Ｐ［２］の識別情報ＩＤ［２］には、登録人物Ｑ［３］及びＱ［４］が対応づけられている。それらの対応関係を示す対応関係リストが評価部５４又はデータベースＤＢ２に保持されており、選択部６１は、その対応関係リストを用いて対比用登録顔を選択する。従って、検出顔の顔認識ＩＤがＩＤ［１］である場合、選択部６１は、ＩＤ［１］に対応する登録顔である登録人物Ｑ［１］及びＱ［２］の顔を対比用登録顔として選択する。検出顔の顔認識ＩＤがＩＤ［２］である場合、選択部６１は、ＩＤ［２］に対応する登録顔である登録人物Ｑ［３］及びＱ［４］の顔を対比用登録顔として選択する。本例では、評価部５４内に設けられた選択部６１が顔認識ＩＤに基づき対比用登録顔を選択しているが、顔認識ＩＤをデータベースＤＢ２に与えるようにし、データベースＤＢ２から対比用登録顔の画像データが評価部５４に供給されるような構成を採用しても良い（この場合、選択部６１がデータベースＤＢ２に内在していると考えることができる）。
【００４０】
類似度導出部６２は、対比用登録顔ごとに、検出顔の画像データ及び対比用登録顔の画像データに基づき検出顔及び対比用登録顔間の類似度を導出する。従って、検出顔が少女Ａである場合には、検出顔と登録人物Ｑ［１］の顔との類似度が導出されると共に検出顔と登録人物Ｑ［２］の顔との類似度が導出され、検出顔が少年Ｂである場合には、検出顔と登録人物Ｑ［３］の顔との類似度が導出されると共に検出顔と登録人物Ｑ［４］の顔との類似度が導出される。画像データに基づく２つの物体間の類似度の導出方法は公知であるので、その導出方法の詳細な説明は割愛する。以下、類似度導出部６２によって導出された、検出顔と登録人物Ｑ［ｉ］との類似度を記号ＳＩＭ［ｉ］にて表す。類似度ＳＩＭ［ｉ］は０以上１以下の値をとる。検出顔が登録人物Ｑ［ｉ］の顔に全く類似していなければ類似度ＳＩＭ［ｉ］は０になり、検出顔が登録人物Ｑ［ｉ］の顔に類似しているほど類似度ＳＩＭ［ｉ］は１に近くなる。
【００４１】
評価部５４は、類似度導出部６２にて導出された類似度に基づき、成長／変化スコアＥSCRを求める。検出顔が少女Ａの場合、評価部５４は、例えば下記（１）、（２）又は（３）に従ってスコアＥSCRを求める。ｋは１未満の正の所定値である。但し、ｋは０又は１であっても良い。ｋ＝０の場合は式（３）及び式（６）が式（２）及び式（５）と一致し、ｋ＝１の場合は式（３）及び式（６）が式（１）及び式（４）と一致する。
ＥSCR＝ＳＩＭ［１］                                    …（１）
ＥSCR＝ＳＩＭ［２］                                    …（２）
ＥSCR＝ｋ×ＳＩＭ［１］＋（１−ｋ）×ＳＩＭ［２］      …（３）
検出顔が少年Ｂの場合、評価部５４は、例えば下記（４）、（５）又は（６）に従ってスコアＥSCRを求める。
ＥSCR＝ＳＩＭ［３］                                    …（４）
ＥSCR＝ＳＩＭ［４］                                    …（５）
ＥSCR＝ｋ×ＳＩＭ［３］＋（１−ｋ）×ＳＩＭ［４］      …（６）
【００４２】
検出顔の顔認識ＩＤに対応して選択された対比用登録顔が３以上ある場合、３以上の対比用登録顔について求められた３以上の類似度に基づき、スコアＥSCRが求められてもよい。
【００４３】
評価部５４は、成長／変化スコアＥSCRを含む評価出力情報を制御部５５に出力する（図３参照）。評価部５４は、スコアＥSCRが所定の閾値ＴＨ以上であるか否かに基づいて検出顔を有する人物に成長／変化が見られるか否かを判断し、その判断結果を示す成長／変化有無情報を評価出力情報に含める（ＴＨ＞０）。少女Ａが検出顔である時に求められたスコアＥSCRが、閾値ＴＨ未満である状態から時を経て閾値ＴＨ以上である状態に遷移したとき、少女Ａに相応の成長、変化が生じたと判断することができる。更に、評価出力情報には、成長／変化有無の判断対象に相当する検出顔の、入力画像上の位置である成長／変化認識位置と、検出顔の顔認識ＩＤを含む成長／変化認識ＩＤと、が含められる。式（１）に従って求められたスコアＥSCRが閾値ＴＨ以上である場合、登録人物Ｑ［１］との関係において少女Ａの成長／変化が見られる。従って、この場合、成長／変化認識ＩＤに、登録人物Ｑ［１］の固有識別情報を含めておいても良い。同様に、式（２）に従って求められたスコアＥSCRが閾値ＴＨ以上である場合には、登録人物Ｑ［２］の固有識別情報を成長／変化認識ＩＤに含めておいても良い。
【００４４】
制御部５５は、対象画像の撮影を催促、準備等する処理である所定の撮影用処理を実行可能であり、その撮影用処理の実行可否をスコアＥSCRに基づき決定する。具体的には、スコアＥSCRが所定の閾値ＴＨ以上であるとき、即ち、検出顔を有する人物に成長及び／又は変化があると判断されたときに、制御部５５は上記撮影用処理を実行する。スコアＥSCRが閾値ＴＨ未満であるときには、制御部５５は上記撮影用処理を実行しない。上述したように、対象画像はシャッタ操作の入力に応答して撮影されるべき画像である。
【００４５】
対象画像の撮影用処理は、シャッタ操作の入力をユーザに指示、催促、推奨又は許可等する撮影勧告通知を含む。この撮影勧告通知は、シャッタ操作の入力に関わる通知の一種であり、撮影者であるユーザの五感に訴える任意の通知であって良い。例えば、シャッタ操作の入力をユーザに指示、催促、推奨又は許可等する任意の映像の出力（文字、アイコンなどの表示）又は任意の音声の出力（アナウンス音などの出力）により、撮影勧告通知が達成される。映像の出力及び音声の出力を、夫々、表示部１４及び音声入出力部１５にて行うことができる。撮影勧告通知によって撮影者による撮影意欲が喚起され、実際に撮影者がシャッタ操作の入力を行うことが期待される。
【００４６】
図６に、入力画像、対象画像、撮影勧告通知及びシャッタ操作入力の関係を示す。上記撮影用処理を介して取得される対象画像について注目した場合、撮影用処理の実行有無判断に用いられる入力画像は、その対象画像の撮影前に取得される１以上の入力画像である。撮影勧告通知を受けたユーザが、対象人物又は対象人物の顔である対象顔を撮像部１１の撮影領域内に収めた状態で、実際にシャッタボタン１７ａに対してシャッタ操作を入力することにより、対象人物全体又は対象顔の撮影画像である対象画像が取得され、対象画像の画像データが記録媒体１６に記録される。対象人物は、対象画像の撮影用処理を実行に至らしめた人物である。即ち、検出顔が少女Ａの顔であるときに対象画像の撮影用処理が行われた場合、対象人物及び対象顔は少女Ａ及び少女Ａの顔であり、検出顔が少年Ｂの顔であるときに対象画像の撮影用処理が行われた場合、対象人物及び対象顔は少年Ｂ及び少年Ｂの顔である。
【００４７】
本実施形態によれば、対象顔と対象顔に対応付けられた登録顔との類似度に応じたスコアＥSCRが導出される。そして例えば、類似度に応じたスコアＥSCRが相応に高い場合、類似度が低い状態から高い状態への変化がみられる（即ち例えば、子供の顔が親に似ていない状態から似ている状態へ変化した）と判断して撮影勧告通知を含む対象画像の撮影用処理を実行する。対象画像の撮影用処理を通じて実際に対象画像の撮影及び記録が成されることにより、子供の成長／変化が分かるような画像記録が実現されるようになる。即ち、対象人物に対する適切な撮影が支援される。また、スコアＥSCRを求める際、複数の類似度を用いるようにすれば（例えば上記式（３）又は（６）を用いるようにすれば）、少女Ａと父親及び母親との各類似度に応じて少女Ａの成長／変化の様子をより細かく判定する、といったことも可能である。
【００４８】
以下、上述の構成及び機能を基本とする、撮像装置１についての幾つかの実施例を説明する。矛盾なき限り、以下に述べる第１〜第１２実施例の内、任意の２以上の実施例を組み合わせて実施することも可能である。以下の任意の実施例において、個別に述べていないこともあるが、閾値ＴＨ以上のスコアＥSCRが得られたならば、上述の如く撮影勧告通知を含む撮影用処理が実行されてもよい。閾値ＴＨ以上のスコアＥSCRが得られたときに実行される以下の任意の処理は撮影用処理の一種である、と考えることができる。また、上述の説明では特に述べなかったが、評価部５４は、対象画像を入力画像として用い、対象画像に対して上述の類似度ＳＩＭ［ｉ］及びスコアＥSCRを求めることも可能である。
【００４９】
＜＜第１実施例＞＞
第１実施例を説明する。図７は、第１実施例に係る撮像装置１の動作フローチャートである。まず、ステップＳ１１において、画像取得部５１を用いてスルー画像が取得される。スルー画像は、表示部１４での表示に利用される入力画像である。画像取得部５１に含まれる撮像部１１は、所定のフレーム周期でスルー画像を順次撮影することができる。順次得られるスルー画像を動画像として表示部１４に表示する処理をスルー表示処理と呼ぶ。ステップＳ１１ではスルー表示処理が実行される。ステップＳ１１に続くステップＳ１２において、最新の入力画像に基づきスコアＥSCRが算出され、算出されたスコアＥSCRが閾値ＴＨ以上である場合にはステップＳ１２からステップＳ１３への移行が発生するが、そうでない場合にはステップＳ１１に戻る。
【００５０】
ステップＳ１３において、制御部５５は、撮像部１１に仮画像の撮影を行わせる。仮画像は、閾値ＴＨ以上のスコアＥSCRが観測された直後の、撮像部１１の出力信号による被写体像である。故に、仮画像は、閾値ＴＨ以上のスコアＥSCRを実現するような、対象人物（少女Ａ等）の成長又は変化が良く分かる構図を有していると言える。尚、閾値ＴＨ以上のスコアＥSCRが得られた後にシャッタ操作が速やかに入力されうることを考慮し、仮画像の撮影後の対象画像の撮影を素早く行えるような方法で仮画像の撮影（例えば電子シャッタ撮影）を行うことが望ましい。
【００５１】
仮画像の撮影後、ステップＳ１４において、制御部５５は、仮画像及びスルー画像に基づくスルー表示処理を表示部１４に行わせる。制御部５５は、そのスルー表示処理の実行中に、シャッタ操作の入力有無を監視し（ステップＳ１５）、シャッタ操作の入力があった場合には対象画像の撮影を撮像部１１に行わせて対象画像の画像データを記録媒体１６に記録させる（ステップＳ１６）。
【００５２】
仮画像及びスルー画像に基づくスルー表示処理では、表示画面を２つに分割し、仮画像とスルー画像を並列に表示しても良い。この際、評価出力情報に応じて、仮画像の表示領域とスルー画像の表示領域の大きさ割合を変更しても良い。仮画像とスルー画像の並列表示を見たユーザは、例えば、スルー画像の構図が仮画像の構図と概ね一致するように（即ち、対象人物の成長又は変化が良く分かる構図が得られるように）撮影方向等を調整してからシャッタ操作を入力することが期待される。
【００５３】
仮画像及びスルー画像に基づくスルー表示処理では、仮画像及びスルー画像を重ね合わせた状態で同時に視認できるように、仮画像を透過設定して半透明の仮画像をスルー画像上に重畳表示しても良い。この際、評価出力情報に応じて、透過率及びマスク領域（透過する領域）を変更しても良い。透過設定は仮画像ではなくスルー画像に対して行われても良い。このような重畳表示を見たユーザは、例えば、表示画面上の仮画像とスルー画像が概ね一致するように（即ち、対象人物の成長又は変化が良く分かる構図が得られるように）撮影方向等を調整してからシャッタ操作を入力することが期待される。尚、透過設定される仮画像又はスルー画像の透過率を時間経過と共に変化させても良い。このとき、表示画像が仮画像及びスルー画像の一方から他方に徐々に変化するような、所謂モーフィング表示を行っても良く、この場合においても評価出力情報に応じて透過率及びマスク領域（透過する領域）を変更しても良い。
【００５４】
第１実施例によれば、対象人物（少女Ａ等）の成長又は変化が良く分かる構図での対象画像撮影が支援される。
【００５５】
＜＜第２実施例＞＞
第２実施例を説明する。第２実施例でも、上述のステップＳ１１〜Ｓ１３の処理を実行することができる。
【００５６】
そして、閾値ＴＨ以上のスコアＥSCRが得られたとき、制御部５５は、表示画面の一部に所定のアイコンを表示する。このアイコンの表示は、撮影勧告通知の一種である。表示されるアイコンの種類及びアイコンの表示タイミングを、評価出力情報に応じて変更しても良い。アイコンの表示と、第１実施例で述べた仮画像及びスルー画像に基づくスルー表示処理を組み合わせて行っても良い。アイコンを見たユーザは対象人物の成長又は変化がみられる画像を撮影できると判断してシャッタ操作の入力を行うことが期待される。
【００５７】
或いは、閾値ＴＨ以上のスコアＥSCRが得られたとき、制御部５５は、スルー画像の代わりに仮画像を一定時間表示部１４に表示させると共に、音声入出力部１５を用いて所定の音を出力するようにしても良い。当該音を聞いたユーザは対象人物の成長又は変化がみられる画像を撮影できると判断してシャッタ操作の入力を行うことが期待される。制御部５５は、出力される音の種類及び音の出力タイミングを評価出力情報に応じて変更しても良い。例えば、対象人物（検出顔を有する人物）が誰に似ているのかを音声出力によってユーザに通知しても良いし、スコアＥSCRに応じて音の大きさを変えても良い。
【００５８】
第２実施例によれば、対象人物の成長又は変化が良く分かる状態でのシャッタ操作入力が促進される（シャッタチャンスの逸失が回避されやすくなる）。
【００５９】
＜＜第３実施例＞＞
第３実施例を説明する。第３実施例においても上述のステップＳ１１〜Ｓ１３の処理を行っても良い。そして、閾値ＴＨ以上のスコアＥSCRが得られたとき、制御部５５は、シャッタ操作の入力に備え、上記撮影用処理の一種として撮影条件調整処理を実行しても良い。撮影条件調整処理は、対象画像の撮影条件を調整する処理（換言すれば、対象人物又は対象物の撮影条件を調整する処理）である。
【００６０】
撮影条件調整処理は、対象顔にピントを合わせるためのＡＦ処理を含んでいてもよい。当該ＡＦ処理では、例えば、入力画像及び対象画像上で対象顔にピントがあうように、撮像部１１の出力信号に基づき光学系３５内におけるフォーカスレンズ３１の位置を制御する。
撮影条件調整処理は、画像上の対象顔の明るさを最適化するためのＡＥ処理を含んでいてもよい。当該ＡＥ処理では、例えば、入力画像及び対象画像上における対象顔の明るさが所望の明るさになるように、撮像部１１の出力信号に基づき露出条件（絞り値、撮像素子３３の出力信号に対する増幅度など）を制御する。
撮影条件調整処理は、画像上の対象顔のホワイトバランスを最適化するためのＡＷＢ処理を含んでいてもよい。当該ＡＷＢ処理では、例えば、入力画像及び対象画像上における対象顔のホワイトバランスが所望のホワイトバランスになるように、撮像部１１の出力信号から入力画像及び対象画像の画像データを生成するための信号処理の内容を、撮像部１１の出力信号に基づき制御する。
【００６１】
第３実施例によれば、撮影勧告通知等の後に予定されるシャッタ操作入力に応答して、最適な撮影条件にて速やかに対象画像を取得することができる。
【００６２】
＜＜第４実施例＞＞
第４実施例を説明する。撮影用処理は、対象画像の撮影処理そのものを含んでいても良い。即ち、閾値ＴＨ以上のスコアＥSCRが得られたとき、制御部５５は、シャッタ操作の入力を待たずに（シャッタ操作が入力されたか否かに関わらず）、対象画像の撮影を撮像部１１に行わせて（即ち、撮像部１１の出力信号から対象画像の画像データを生成して）対象画像の画像データを記録媒体１６に記録させても良い。これにより、対象人物の成長又は変化が良く分かる画像を確実に取得及び記録しておくことができる。
【００６３】
＜＜第５実施例＞＞
第５実施例を説明する。閾値ＴＨは固定値であっても良いが、可変値であっても良い。制御部５５又は評価部５４により閾値ＴＨの変更が行われる。例えば、初期値ＴＨOを有する閾値ＴＨ以上のスコアＥSCRが得られたことに対応して、撮影用処理並びに対象画像の取得及び記録が行われた場合、図８（ａ）及び（ｂ）に示す如く、その後の第１所定期間（例えば数日〜数１００日）だけ、閾値ＴＨを初期値ＴＨOから所定量Δだけ増大させる。図８（ａ）に示す如く、第１所定期間中に、閾値ＴＨ（＝ＴＨO＋Δ）以上のスコアＥSCRが得られなかった場合には、閾値ＴＨは初期値ＴＨOに戻される。図８（ｂ）に示す如く、第１所定期間中に、閾値ＴＨ（＝ＴＨO＋Δ）以上のスコアＥSCRが得られたことに対応して、撮影用処理並びに対象画像の取得及び記録が再び行われたならば、その後の第２所定期間（例えば数日〜数１００日）だけ、更に閾値ＴＨを所定量Δだけ増大させても良い。第２所定期間中に、閾値ＴＨ（＝ＴＨO＋２×Δ）以上のスコアＥSCRが得られなかった場合には、閾値ＴＨは初期値ＴＨOに戻される（或いは所定量だけ減少せしめられる）。
【００６４】
＜＜第６実施例＞＞
第６実施例を説明する。基本的に人間の顔は時間経過に伴って成長又は変化する。故に、前回、対象顔についての対象画像が撮影された時点から見た経過日数を加味してスコアＥSCRを導出しても良い。第６実施例並びに後述の第７〜第１２実施例では、説明の具体化及び明確化のため、入力画像及び対象画像に常に少女Ａの顔が含まれており且つ検出顔及び対象顔が少女Ａであると限定する。
【００６５】
例えば、日付Ｔ１において閾値ＴＨ以上のスコアＥSCRが得られ、結果、図９に示す如く、日付Ｔ１にて、撮影用処理並びに対象画像ＴＩ［Ｔ１］の取得及び記録が行われた場合を考える。対象画像ＴＩ［Ｔ１］は、対象人物としての少女Ａを撮影することで得た、第ｊ枚目の対象画像である（ｊは整数）。この後、第（ｊ＋１）枚目の対象画像が得られることなく、日付Ｔ１よりも後の日付Ｔ２に至ったとする。
【００６６】
日付Ｔ２において、少女Ａの顔が検出顔として入力画像に含まれたとき、評価部５４は、日付Ｔ１から日付Ｔ２までの経過日数と、類似度ＳＩＭ［１］及び／又はＳＩＭ［２］とに基づき、スコアＥSCRを導出しても良い。具体的には例えば、下記式（１ａ）、（２ａ）又は（３ａ）に従って、或いは、下記式（１ｂ）、（２ｂ）又は（３ｂ）に従って、日付Ｔ２におけるスコアＥSCRを導出しても良い。係数αは、上記経過日数が増大するにつれて増大する正の値を持つ。
ＥSCR＝α・ＳＩＭ［１］                                        …（１ａ）
ＥSCR＝α・ＳＩＭ［２］                                        …（２ａ）
ＥSCR＝α（ｋ×ＳＩＭ［１］＋（１−ｋ）×ＳＩＭ［２］）        …（３ａ）
ＥSCR＝α＋ＳＩＭ［１］                                        …（１ｂ）
ＥSCR＝α＋ＳＩＭ［２］                                        …（２ｂ）
ＥSCR＝α＋（ｋ×ＳＩＭ［１］＋（１−ｋ）×ＳＩＭ［２］）      …（３ｂ）
【００６７】
対象顔が少女Ａであることを想定したが、対象顔が少年Ｂの場合も同様である。尚、年少の頃は時間経過に対する成長又は変化の度合いが比較的大きい。故に、対象人物の年齢に応じて、経過日数と係数αの関係を変化させても良い。例えば、対象人物の年齢が第１年齢範囲に属しているとき、経過日数の増大につれて係数αを比較的大きく増大させ、対象人物の年齢が第１年齢範囲よりも大きな第２年齢範囲に属しているとき、経過日数の増大につれて係数αを比較的小さく増大させても良い。対象人物の年齢が一定年齢以上である場合には、係数αの値を１で固定しても良い。
【００６８】
＜＜第７実施例＞＞
第７実施例を説明する。以下のようにスコアＥSCRを導出しても良い。第６実施例と同様、日付Ｔ１において閾値ＴＨ以上のスコアＥSCRが得られ、結果、図１０に示す如く、日付Ｔ１にて、撮影用処理並びに対象画像ＴＩ［Ｔ１］の取得及び記録が行われた場合を考える。
【００６９】
ＳＩＭ［１］T1及びＳＩＭ［２］T1は、夫々、対象画像ＴＩ［Ｔ１］を入力画像として用いたときに得られる類似度ＳＩＭ［１］及びＳＩＭ［２］であり、日付Ｔ１における少女Ａの顔と少女Ａの父親及び母親の顔との類似度に相当する。上述したように、対象画像ＴＩ［Ｔ１］は、対象人物としての少女Ａを撮影することで得た、第ｊ枚目の対象画像である（ｊは整数）。この後、第（ｊ＋１）枚目の対象画像が得られることなく、日付Ｔ１よりも後の日付Ｔ２に至ったとする。
【００７０】
ＳＩＭ［１］T2及びＳＩＭ［２］T2は、夫々、日付Ｔ２にて撮影された入力画像に対して導出された類似度ＳＩＭ［１］及びＳＩＭ［２］であり、日付Ｔ２における少女Ａの顔と少女Ａの父親及び母親の顔との類似度に相当する。
【００７１】
評価部５４は、下記式（１ｃ）、（２ｃ）又は（３ｃ）に従って、或いは、下記式（１ｄ）、（２ｄ）又は（３ｄ）に従って、日付Ｔ２におけるスコアＥSCRを導出しても良い。ＤＩＦＦ［１］及びＤＩＦＦ［２］は下記式（７）及び（８）で示される。ＤＩＦＦ［１］は、日付Ｔ１及びＴ２間における少女Ａの顔と少女Ａの父親の顔との類似度変化量を表しており、ＤＩＦＦ［２］は、日付Ｔ１及びＴ２間における少女Ａの顔と少女Ａの母親の顔との類似度変化量を表している。評価部５４は、式（１ｃ）、（２ｃ）、（３ｃ）、（１ｄ）、（２ｄ）又は（３ｄ）の右辺に係数βを乗じて得た値を、日付Ｔ２におけるスコアＥSCRとして導出しても良い。係数βは、日付Ｔ１から日付Ｔ２までの経過日数が増大するにつれて増大する正の値を持つ。
ＥSCR＝ＤＩＦＦ［１］                                            …（１ｃ）
ＥSCR＝ＤＩＦＦ［２］                                            …（２ｃ）
ＥSCR＝ｋ×ＤＩＦＦ［１］＋（１−ｋ）×ＤＩＦＦ［２］            …（３ｃ）
ＥSCR＝｜ＤＩＦＦ［１］｜                                        …（１ｄ）
ＥSCR＝｜ＤＩＦＦ［２］｜                                        …（２ｄ）
ＥSCR＝ｋ×｜ＤＩＦＦ［１］｜＋（１−ｋ）×｜ＤＩＦＦ［２］｜    …（３ｄ）
ＤＩＦＦ［１］＝ＳＩＭ［１］T2−ＳＩＭ［１］T1                …（７）
ＤＩＦＦ［２］＝ＳＩＭ［２］T2−ＳＩＭ［２］T1                …（８）
【００７２】
本実施例によっても、第６実施例と同様、成長又は変化に関連の深い時間の概念を加味してスコアＥSCRが導出される。対象顔が少女Ａであることを想定したが、対象顔が少年Ｂの場合も同様である。
【００７３】
＜＜第８実施例＞＞
第８実施例を説明する。顔認識部５３で認識された人物の顔は対比用登録顔から除外すると良く、これによって処理負荷の軽減を図ると良い。即ち例えば、顔辞書ＤＩＣ２に少女Ａの顔の画像データが登録顔の画像データとして保存されている場合において、顔認識部５３で検出顔が少女Ａの顔であると認識された場合、評価部５４は、顔辞書ＤＩＣ２中の少女Ａの登録顔が対比用登録顔に設定されないようにする。
【００７４】
＜＜第９実施例＞＞
第９実施例を説明する。図１１を参照する。今、複数の日付にて複数の対象画像が撮影及び記録された場合を考える。対象画像ＴＩ［Ｔ１］、ＴＩ［Ｔ２］及びＴＩ［Ｔ３］は、夫々、日付Ｔ１、Ｔ２及びＴ３において対象人物としての少女Ａを撮影することで得た、第ｊ枚目、第（ｊ＋１）枚目及び第（ｊ＋２）枚目の対象画像である。
【００７５】
ＳＩＭ［１］T1、ＳＩＭ［１］T2、ＳＩＭ［１］T3は、夫々、対象画像ＴＩ［Ｔ１］、ＴＩ［Ｔ２］、ＴＩ［Ｔ３］を入力画像として用いたときに得られる類似度ＳＩＭ［１］であり、日付Ｔ１、Ｔ２、Ｔ３における少女Ａの顔と少女Ａの父親の顔との類似度に相当する。ＳＩＭ［２］T1、ＳＩＭ［２］T2、ＳＩＭ［２］T3は、夫々、対象画像ＴＩ［Ｔ１］、ＴＩ［Ｔ２］、ＴＩ［Ｔ３］を入力画像として用いたときに得られる類似度ＳＩＭ［２］であり、日付Ｔ１、Ｔ２、Ｔ３における少女Ａの顔と少女Ａの母親の顔との類似度に相当する。
【００７６】
例えば、日付Ｔ１において、類似度ＳＩＭ［１］T1が閾値ＴＨ以上であることに起因して対象画像ＴＩ［Ｔ１］の撮影用処理が実行され、その結果として対象画像ＴＩ［Ｔ１］の撮影が行われた場合、制御部５５は、その旨を表す父親フラグを対象画像ＴＩ［Ｔ１］に関連付けて記録媒体１６に記録しておくことができる。同様に、日付Ｔ２において、類似度ＳＩＭ［１］T2が閾値ＴＨ以上であることに起因して対象画像ＴＩ［Ｔ２］の撮影用処理が実行され、その結果として対象画像ＴＩ［Ｔ２］の撮影が行われた場合、制御部５５は、その旨を表す父親フラグを対象画像ＴＩ［Ｔ２］に関連付けて記録媒体１６に記録しておくことができる。日付Ｔ３についても同様であり、また、母親についての類似度ＳＩＭ［２］T1〜ＳＩＭ［２］T3についても同様である。
【００７７】
評価部５４は、日付Ｔ３の後、記録媒体１６に記録された各対象画像に父親フラグが関連付けられているかを確認する。そして例えば、全対象画像の内、父親フラグが関連付けられている対象画像の割合が所定割合以上であるとき、評価部５４は、父親似の対象画像ばかりが記録されていると判断し、少女Ａと少女Ａの母親との類似度に特に注目してスコアＥSCRを導出する（例えば、上述の式（２）及び（２ａ）〜（２ｄ）の何れかにてスコアＥSCRを導出する）。この際、父親との類似度であるＳＩＭ［１］の導出を割愛できるため処理負荷が軽減されると共に、多数記録されている父親似の対象画像と異なった趣を持つ対象画像（母親似の対象画像）の撮影が促進される。但し、母親との類似度ＳＩＭ［２］に基づき導出したスコアＥSCRが閾値ＴＨ未満であるとき、父親との類似度ＳＩＭ［１］を導出して類似度ＳＩＭ［１］に基づきスコアＥSCRを導出しなおしても良い。
【００７８】
また、上述したような父親フラグの記録を行う代わりに、類似度ＳＩＭ［１］T1、ＳＩＭ［１］T2、ＳＩＭ［１］T3、ＳＩＭ［２］T1、ＳＩＭ［２］T2及びＳＩＭ［３］T3を用いて上述と同様の処理を行っても良い。即ち例えば、類似度ＳＩＭ［１］T1、ＳＩＭ［１］T2及びＳＩＭ［１］T3が全て閾値ＴＨ以上である一方で、類似度ＳＩＭ［２］T1、ＳＩＭ［２］T2及びＳＩＭ［２］T3が全て閾値ＴＨ未満である場合、評価部５４は、父親似の対象画像ばかりが記録されていると判断し、日付Ｔ３の後において、少女Ａと少女Ａの母親との類似度に特に注目してスコアＥSCRを導出しても良い（例えば、上述の式（２）及び（２ａ）〜（２ｄ）の何れかにてスコアＥSCRを導出しても良い）。この判断に用いる各類似度（ＳＩＭ［１］T1等）は、各対象画像の記録時に各対象画像と共に記録媒体１６に記録されたものであっても良いし、記録された対象画像の画像データに基づき任意のタイミングで導出されるものであっても良い。
【００７９】
＜＜第１０実施例＞＞
第１０実施例を説明する。第１０実施例では、特異な画像再生方法を説明する。表示部１４にて表示される画像である再生用画像は、記録媒体１６に記録された対象画像、又は、スルー表示処理にも利用可能な入力画像である。任意のタイミングにおいて、再生用画像の画像データを、図３の顔検出部５２、顔認識部５３及び評価部５４に入力することができる。
【００８０】
図１２（ａ）の画像３１０Ａは、少女Ａの顔を検出顔及び対象顔として含む再生用画像である。図１２（ｂ）の画像３１０Ｆは、少女Ａの父親、即ち登録人物Ｑ［１］の顔を含む画像である。図１２（ｃ）の画像３１０Ｍは、少女Ａの母親、即ち登録人物Ｑ［２］の顔を含む画像である。画像３１０Ｆ及び３１０Ｍの画像データはデータベースＤＢ２に保存されている。
【００８１】
画像３１０Ａ、３１０Ｆ及び３１０Ｍにおける少女Ａの顔、少女Ａの父親の顔及び少女Ａの母親の顔の夫々には、複数の顔パーツが含まれている。複数の顔パーツは、眼、鼻、口、耳などから成る。画像３１０Ａにおいて、少女Ａの眼、鼻、口、耳の画像データが存在している画像領域を、夫々、記号ＲA［１］、ＲA［２］、ＲA［３］及びＲA［４］にて表す。画像３１０Ｆにおいて、少女Ａの父親の眼、鼻、口、耳の画像データが存在している画像領域を、夫々、記号ＲF［１］、ＲF［２］、ＲF［３］及びＲF［４］にて表す。画像３１０Ｍにおいて、少女Ａの母親の眼、鼻、口、耳の画像データが存在している画像領域を、夫々、記号ＲM［１］、ＲM［２］、ＲM［３］及びＲM［４］にて表す。眼領域ＲA［１］には片眼だけが含まれていても良いし、両眼が含まれていても良い（眼領域ＲF［１］及びＲM［１］についても同様）。耳領域ＲA［４］には片耳だけが含まれていても良いし、両耳が含まれていても良い（耳領域ＲF［４］及びＲM［４］についても同様）。
【００８２】
顔検出部５２又は評価部５４に含まれている顔パーツ検出部（不図示）は、画像３１０Ａの画像データに基づき、公知の顔パーツ検出方法を用いて、画像３１０Ａ中における領域ＲA［１］〜ＲA［４］を分離抽出することができる（画像３１０Ｆ及び３１０Ｍについても同様）。
【００８３】
また、類似度導出部６２（図４参照）は、画像３１０Ａ及び３１０Ｆの画像データに基づき、顔パーツごとに、画像３１０Ａにおける対象顔（少女Ａの顔）の顔パーツと画像３１０Ｆにおける登録顔（少女Ａの父親の顔）の顔パーツとの類似度を求めることができ、画像３１０Ａ及び３１０Ｍの画像データに基づき、顔パーツごとに、画像３１０Ａにおける対象顔（少女Ａの顔）の顔パーツと画像３１０Ｍにおける登録顔（少女Ａの母親の顔）の顔パーツとの類似度を求めることができる。
【００８４】
より具体的には、類似度導出部６２は、ｉ＝１、２、３、４の夫々について、領域ＲA［ｉ］及び領域ＲF［ｉ］の画像データに基づき領域ＲA［ｉ］内の顔パーツと領域ＲF［ｉ］内の顔パーツとの間の類似度ＦＰＳAF［ｉ］を求めると共に、領域ＲA［ｉ］及び領域ＲM［ｉ］の画像データに基づき領域ＲA［ｉ］内の顔パーツと領域ＲM［ｉ］内の顔パーツとの間の類似度ＦＰＳAM［ｉ］を求める。顔パーツごとに求められた類似度を特に顔パーツ類似度（パーツ評価値）とも呼ぶ。
【００８５】
表示部１４にて再生用画像の表示を行う際、各顔パーツ類似度に応じた表示を行うことができる。図１３に、再生用画像３１０Ａを表示する際の表示画面の例を示す。図１３の例では、再生用画像３１０Ａと共に円グラフ３３０［１］〜３３０［４］が表示される。円グラフ３３０［ｉ］は、顔パーツ類似度ＦＰＳAF［ｉ］及びＦＰＳAM［ｉ］の和に対する、ＦＰＳAF［ｉ］及びＦＰＳAM［ｉ］の夫々の比をグラフ化したものである。例えば、ＦＰＳAF［１］＝０．１且つＦＰＳAM［１］＝０．９である場合、円グラフ３３０［１］において、母親に対応する斜線部分が父親に対応する白部分よりも大きく表示される。再生用画像３１０Ａ及び円グラフ３３０［１］〜３３０［４］と並列させて、画像３１０Ｆ及び３１０Ｍを更に表示するようにしても良い。
【００８６】
図１４に、再生用画像３１０Ａを表示する際の表示画面の他の例を示す。図１４の例では、再生用画像３１０Ａと共に複合画像３４０［１］〜３４０［４］が表示される。複合画像３４０［ｉ］は、画像３１０Ｆ及び３１０Ｍの内、一方の画像を他方の画像に重畳して得られる画像である。複合画像３４０［ｉ］の全体を占める画像３１０Ｆの大きさの割合は比“ＦＰＳAF［ｉ］／（ＦＰＳAF［ｉ］＋ＦＰＳAM［ｉ］）”であり、複合画像３４０［ｉ］の全体を占める画像３１０Ｍの大きさの割合は比“ＦＰＳAM［ｉ］／（ＦＰＳAF［ｉ］＋ＦＰＳAM［ｉ］）”である。例えば、ＦＰＳAF［１］＝０．１且つＦＰＳAM［１］＝０．９である場合、複合画像３４０［１］において、母親の画像３１０Ｍが支配的になる。
【００８７】
再生用画像３１０Ａが対象画像である場合、対象画像のサムネイル表示時において、再生用画像３１０Ａ及び円グラフ３３０［１］〜３３０［４］の同時表示、又は、再生用画像３１０Ａ及び複合画像３４０［１］〜３４０［４］の同時表示を行っても良い。この場合、対象画像としての再生用画像と円グラフの組、又は、対象画像としての再生用画像と複合画像の組が、複数組同時に並列表示される。このような表示を行うことで、成長又は変化がみられる画像をユーザが探索しやすくなる。複数の対象画像（サムネイル）を見渡したとき、円グラフ又は複合画像が急変している部分において成長又は変化が生じていると判断することができるからである。
【００８８】
尚、再生用画像３１０Ａはスルー表示処理における入力画像であっても良く、この場合、再生用画像３１０Ａ及び円グラフ３３０［１］〜３３０［４］の同時表示、又は、再生用画像３１０Ａ及び複合画像３４０［１］〜３４０［４］の同時表示がスルー表示処理において実行される。
【００８９】
＜＜第１１実施例＞＞
第１１実施例を説明する。対象画像としての再生用画像３１０Ａの再生時において、図１５に示す如く、画像３１０Ａ、３１０Ｆ、３１０Ａ及び３１０Ｍの順番で、各画像を順次切り替え且つ繰り返し表示するようにしても良い。この際、表示画像が画像３１０Ａから画像３１０Ｆに徐々に変化するような、所謂モーフィング表示を行っても良い。画像３１０Ａから画像３１０Ｍへの変化等においても同様である。仮に、少女Ａ及び母親間において眼が似ている場合、表示画像の画像３１０Ａ及び３１０Ｍ間の切り替え時において、眼の部分の表示に殆ど変化が見られず、視聴者は類似点を把握しやすくなる。
【００９０】
＜＜第１２実施例＞＞
第１２実施例を説明する。対象画像としての再生用画像３１０Ａの再生時において、画像３１０Ａ、３１０Ｆ及び３１０Ｍにおける任意の顔パーツの画像を表示しても良い。例えば、図１６に示す如く、再生用画像３１０Ａの再生時において、再生用画像３１０Ａと共に、口領域ＲA［３］、ＲF［３］及びＲM［３］内の画像である画像３５０Ａ、３５０Ｆ及び３５０Ｍを表示するようにしても良く、画像３５０Ｆ及び３５０Ｍの周辺に顔パーツ類似度ＦＰＳAF［３］及びＦＰＳAM［３］（図１６において、７５％及び２５％）を表示するようにしても良い。図１６の例では、更に、口の顔パーツ類似度に対応する複合画像３４０［３］も再生用画像３１０Ａと共に表示されているが、複合画像３４０［３］の表示は割愛可能である。尚、画像３５０Ａ、３５０Ｆ及び３５０Ｍの表示サイズが同じになるように、表示の際、適宜、解像度変換等が行われる。
【００９１】
再生用画像３１０Ａと共に表示される顔パーツの画像は、対応する顔パーツ類似度に応じて決定されても良い。即ち例えば、顔パーツ類似度ＦＰＳAF［ｉ］及びＦＰＳAM［ｉ］の少なくとも一方、又は、ＦＰＳAF［ｉ］及びＦＰＳAM［ｉ］の合計値若しくは平均値が所定値以上である場合、制御部５５は、ＦＰＳAF［ｉ］及びＦＰＳAM［ｉ］に対応する顔パーツ（即ち、高い類似度に対応する顔パーツ）を表示対象顔パーツとして設定する。そして、表示部１４は、画像３１０Ａ、３１０Ｆ及び３１０Ｍに含まれる表示対象顔パーツの画像（図１６の例では、画像３５０Ａ、３５０Ｆ及び３５０Ｍ）を再生用画像３１０Ａと共に表示する。表示対象顔パーツが複数ある場合、表示対象顔パーツごとに表示対象顔パーツの画像を表示しても良い（例えば、少女Ａとその父親及び母親の眼の画像と、少女Ａとその父親及び母親の口の画像とを表示しても良い）。
【００９２】
＜＜変形等＞＞
本発明の実施形態は、特許請求の範囲に示された技術的思想の範囲内において、適宜、種々の変更が可能である。以上の実施形態は、あくまでも、本発明の実施形態の例であって、本発明ないし各構成要件の用語の意義は、以上の実施形態に記載されたものに制限されるものではない。上述の説明文中に示した具体的な数値は、単なる例示であって、当然の如く、それらを様々な数値に変更することができる。上述の実施形態に適用可能な注釈事項として、以下に、注釈１〜注釈５を記す。各注釈に記載した内容は、矛盾なき限り、任意に組み合わせることが可能である。
【００９３】
［注釈１］
上述の第１０〜第１２実施例にて示される再生時の各処理は、撮像装置１と異なる装置である再生装置（不図示）で行われても良い。この場合、撮像装置１に設けられた各部位と同等の部位を当該再生装置に設けておくと良い。尚、当該再生装置も撮像装置１も電子機器の一種である。
【００９４】
［注釈２］
顔辞書ＤＩＣ１に、同一人物の複数の顔の画像データが含まれていても良い。同一人物についての複数の顔の画像データは、例えば、その人物の年齢又は月齢が第１の値であるときの撮影によって得られた当該人物の顔の画像データ、及び、その人物の年齢又は月齢が第２の値であるときの撮影によって得られた当該人物の顔の画像データを含む。ここで第１及び第２の値は互いに異なり、例えば、第１の値に対応する画像データは、当該人物が５歳のときに得られた顔の画像データであって、第２の値に対応する画像データは、当該人物が７歳のときに得られた顔の画像データである。このような画像データを顔辞書ＤＩＣ１に含めておくことにより、検出顔が誰の何歳のときの顔であるのかを認識することも可能となり、年齢まで識別した顔認識ＩＤを顔認識情報に含めることも可能となる。
【００９５】
［注釈３］
本発明に係る撮像装置は、入力画像の画像データに基づき入力画像上における特定種類の物体を対象物として検出する対象物検出部を備えており、当該対象物検出部は、入力画像の画像データに基づき対象物の個体識別をも行っている。上述の実施形態では、特定種類の物体は人物の顔であり、顔検出部５２及び顔認識部５３にて対象物検出部が形成され、データベースＤＢ１を用いて顔の個体識別（誰の顔であるのかの識別）が行われている。但し、本発明において、上記特定種類の物体は、人物の顔に限定されず、人物の顔以外の部位又は人物の全身であっても良いし、動物の顔、動物の顔以外の部位又は動物の全身であっても良いし、人物及び動物以外の任意の物体であっても良い。
【００９６】
［注釈４］
上述の実施形態では、対象物が人物の顔であることに対応して、スコアＥSCRを導出するために対象物と比較されるべき登録物も人物の顔（登録人物Ｑ［ｉ］の顔））である。成長／変化評価部５４は、評価値としてのスコアＥSCRを導出する評価値導出部の例であり、評価値導出部は、データベースＤＢ２に保持された１以上の登録物（登録人物Ｑ［ｉ］の顔）の中から対象物の個体識別情報（顔認識ＩＤ）に対応する登録物を特定登録物として選択する選択部を有している。上述の実施形態では、この選択部として選択部６１（図４参照）が設けられ、対象物が少女Ａであるならば、少女Ａの個体識別情報であるＩＤ［１］に基づき、ＩＤ［１］に対応付けられた登録人物Ｑ［１］及びＱ［２］の顔が特定登録物として選択される。
【００９７】
［注釈５］
撮像装置１を、ハードウェア、或いは、ハードウェアとソフトウェアの組み合わせによって構成することができる。ソフトウェアを用いて撮像装置１を構成する場合、ソフトウェアにて実現される部位についてのブロック図は、その部位の機能ブロック図を表すことになる。ソフトウェアを用いて実現される機能をプログラムとして記述し、該プログラムをプログラム実行装置（例えばコンピュータ）上で実行することによって、その機能を実現するようにしてもよい。
【００９８】
特に例えば、図３の画像取得部５１、顔検出部５２、顔認識部５３、評価部５４及び制御部５５にて実現される機能をプログラムとして記述して、該プログラムを主制御部１２に搭載可能なフラッシュメモリに保存しておき、該プログラムをコンピュータ（例えば、主制御部１２に搭載可能なマイクロコンピュータ）上で実行することによって、それらの機能を実現するようにしても良い。
【符号の説明】
【００９９】
１  撮像装置
１１  撮像部
１４  表示部
５１  画像取得部
５２  顔検出部
５３  顔認識部
５４  成長／変化評価部
５５  成長／変化対応制御部
６１  選択部
６２  類似度導出部
ＤＢ１、ＤＢ２  データベース
ＤＩＣ１、ＤＩＣ２  顔辞書
【図１】
2014011523.tif 000003
【図２】
2014011523.tif 000004
【図３】
2014011523.tif 000005
【図４】
2014011523.tif 000006
【図５】
2014011523.tif 000007
【図６】
2014011523.tif 000008
【図７】
2014011523.tif 000009
【図８】
2014011523.tif 000010
【図９】
2014011523.tif 000011
【図１０】
2014011523.tif 000012
【図１１】
2014011523.tif 000013
【図１２】
2014011523.tif 000014
【図１３】
2014011523.tif 000015
【図１４】
2014011523.tif 000016
【図１５】
2014011523.tif 000017
【図１６】
2014011523.tif 000018