(57)【要約】【課題】ユーザである閲覧者自身と関連性のある被写体が写っている画像も鑑賞することができるようにする。【解決手段】第１の撮像部１０１で被写体が撮像されて第１の画像を得るとともに、第２の撮像部１０３によってユーザを撮像して第２の画像を得る。顔検出及び個人認証部１０９および１１５はそれぞれ第１の画像および第２の画像に対して顔検出を行って、第１の顔情報および第２の顔情報を取得する。制御部１１６はユーザの指示に応じて、関連性構築部１１９によって第１の顔情報と第２の顔情報とを関連付ける。【選択図】図１
2015088883.tif 000002
【特許請求の範囲】
【請求項１】
画像を表示する表示部と、
前記表示部を閲覧しているユーザを撮影可能な第２の撮影手段と、
前記表示部に表示された第１の画像に対して顔検出を行い、顔情報を取得する第１の顔検出手段と、
前記第２の撮影手段により撮影して得られた第２の画像に対して顔検出を行い、顔情報を取得する第２の顔検出手段と、
ユーザの指示に応じて、前記第１の顔検出手段で得られた顔情報と、前記第２の顔検出手段で得られた顔情報とを関連付ける関連付け手段と、を有することを特徴とする撮影装置。
【請求項２】
さらに、前記第２の撮影手段による撮影方向とは反対方向を撮影するための第１の撮影手段を有し、
前記表示部は、前記第１の撮影手段により撮影された第１の画像を表示することを特徴とする請求項１に記載の撮影装置。
【請求項３】
前記関連付け手段は、前記第１の顔検出手段で得られた顔情報と、前記第２の顔検出手段で得られた顔情報とを関連付ける関連性データを生成することを特徴とする請求項１または２に記載の撮影装置。
【請求項４】
前記第１の顔検出手段は、前記第１の画像に含まれる複数の顔の顔情報を取得し、
前記関連付け情報は、前記第１の顔検出手段で得られた複数の顔情報のそれぞれと、前記第２の顔検出手段で得られた顔情報とを関連付けることを特徴とする請求項１ないし３のいずれか１項に記載の撮影装置。
【請求項５】
前記関連付け手段は、前記第１の顔検出手段で得られた複数の顔情報のうち、ユーザにより選択された顔情報と、前記第２の顔検出手段で得られた顔情報とを関連付けることを特徴とする請求項１ないし４のいずれか１項に記載の撮影装置。
【請求項６】
前記表示部へのタッチを検出するタッチ検出手段を有し、
前記関連付け手段は、前記タッチ検出手段により検出されたタッチ位置に対応する顔情報と、前記第２の顔検出手段で得られた顔情報とを関連付けることを特徴とする請求項５に記載の撮影装置。
【請求項７】
前記第１の画像を前記表示部に表示する制御を行う表示制御手段であって、前記第１の画像の前記第１の顔検出手段により検出された顔の近傍に、前記第２の顔検出手段により取得した顔情報との関連付けを指示するための表示アイテムを表示するように制御する表示制御手段を有することを特徴とする請求項１ないし６のいずれか１項に記載の撮影装置。
【請求項８】
前記第１の顔検出手段により取得した顔情報に基づいて、個人認証を行う第１の個人認証手段を有することを特徴とする請求項１ないし６のいずれか１項に記載の撮影装置。
【請求項９】
前記第１の画像の前記第１の顔検出手段により検出された顔の近傍に、前記個人認証により取得した登録名称を表示する表示制御手段を有することを特徴とする請求項８に記載の撮影装置。
【請求項１０】
前記第２の顔検出手段により取得した顔情報に基づいて、個人認証を行う第２の個人認証手段を有することを特徴とする請求項１ないし９のいずれか１項に記載の撮影装置。
【請求項１１】
画像を表示する表示部と、前記表示部を閲覧しているユーザを撮影可能な第２の撮影手段とを備える撮像装置の制御方法であって、
前記表示部に表示された第１の画像に対して顔検出を行い、顔情報を取得する第１の顔検出ステップと、
前記第２の撮影手段により撮影して得られた第２の画像に対して顔検出を行い、顔情報を取得する第２の顔検出ステップと、
ユーザの指示に応じて、前記第１の顔検出ステップで得られた顔情報と、前記第２の顔検出ステップで得られた顔情報とを関連付ける関連付けステップと、を有することを特徴とする制御方法。
【請求項１２】
画像を表示する表示部と、前記表示部を閲覧しているユーザを撮影可能な第２の撮影手段とを備える撮像装置で用いられる制御プログラムであって、
前記撮像装置が備えるコンピュータに、
前記表示部に表示された第１の画像に対して顔検出を行い、顔情報を取得する第１の顔検出ステップと、
前記第２の撮影手段により撮影して得られた第２の画像に対して顔検出を行い、顔情報を取得する第２の顔検出ステップと、
ユーザの指示に応じて、前記第１の顔検出ステップで得られた顔情報と、前記第２の顔検出ステップで得られた顔情報とを関連付ける関連付けステップと、を実行させることを特徴とする制御プログラム。
【請求項１３】
請求項１２に記載の制御プログラムが記録されたコンピュータに読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置、その制御方法、および制御プログラム、並びに記録媒体に関し、特に、個人認証に応じて画像再生処理を行う撮像装置に関する。
【背景技術】
【０００２】
一般に、デジタルカメラ又はカメラ付き携帯電話機などの撮像装置では、撮影の結果得られた画像はデジタル画像データとしてメモリなどに保存される。そして、メモリに保存された画像データはプリントして鑑賞するばかりでなく、静止画像として順番に再生して所謂スライドショーで鑑賞することもある（特許文献１参照）。
【０００３】
一方、メモリに保存された大量の画像データの全てについてスライドショーを行うとなると時間が掛かるので、個人認識によってスライドショーを行う際の時間を短縮することが行われている。例えば、閲覧者対象である人物の顔を撮影して顔情報を得て、当該閲覧対象者（つまり、閲覧者）の顔情報と同一の顔情報を含む画像データを、メモリに保存された画像データから抽出するようにした画像処理装置が知られている（特許文献２参照）。これによって、閲覧者対象者が鑑賞を希望するであろう画像データのみを抽出してスライドショーを行うようにしている。
【０００４】
さらに、顔認証又は個人認証などの認証処理機能を備える撮像装置が知られている（特許文献３参照）。ここでは、撮像装置による撮影の結果得られた画像データにおいて、特定の被写体領域が含まれる被写体画像領域を検出する。そして、被写体画像領域において被写体領域を被認証対象として識別するための特徴情報を抽出して、特徴情報と予めデータベースに登録された登録画像の特徴情報とを比較して類似度を得る。その後、当該類似度に基づいて被認証対象の認証を行う。この際、人物の顔領域における特徴情報を用いて個人認証を行うようにしている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０００−２９３９７４号公報
【特許文献２】特開２００６−３１８３５２号公報
【特許文献３】特開２０１０−２７０３４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
ところで、特許文献２に記載の手法では、閲覧者が写っている画像のみが抽出される。例えば、複数の友人と一緒に旅行した際に撮影した画像を鑑賞する場合を考慮すると、閲覧者は自分自身のみが写っている画像だけを見たいわけではなく、友人とともに又友人が写っている画像も見たいと考えるのが自然である。
【０００７】
このように、特許文献２に記載の手法では、閲覧者が写っている画像のみが抽出される結果、必ずしも閲覧者所望の画像を閲覧又は鑑賞できるとは限らない。
【０００８】
従って、本発明の目的は、閲覧者自身と関連性のある被写体が写っている画像も鑑賞することのできる撮像装置、その制御方法、および制御プログラム、並びに記録媒体を提供することにある。
【課題を解決するための手段】
【０００９】
上記の目的を達成するため、本発明による撮像装置は、画像を表示する表示部と、前記表示部を閲覧しているユーザを撮影可能な第２の撮影手段と、前記表示部に表示された第１の画像に対して顔検出を行い、顔情報を取得する第１の顔検出手段と、前記第２の撮影手段により撮影して得られた第２の画像に対して顔検出を行い、顔情報を取得する第２の顔検出手段と、ユーザの指示に応じて、前記第１の顔検出手段で得られた顔情報と、前記第２の顔検出手段で得られた顔情報とを関連付ける関連付け手段と、を有することを特徴とする。
【００１０】
本発明による制御プログラムは、画像を表示する表示部と、前記表示部を閲覧しているユーザを撮影可能な第２の撮影手段とを備える撮像装置の制御方法であって、前記表示部に表示された第１の画像に対して顔検出を行い、顔情報を取得する第１の顔検出ステップと、前記第２の撮影手段により撮影して得られた第２の画像に対して顔検出を行い、顔情報を取得する第２の顔検出ステップと、ユーザの指示に応じて、前記第１の顔検出ステップで得られた顔情報と、前記第２の顔検出ステップで得られた顔情報とを関連付ける関連付けステップと、を有することを特徴とする。
【００１１】
本発明による制御プログラムは、画像を表示する表示部と、前記表示部を閲覧しているユーザを撮影可能な第２の撮影手段とを備える撮像装置で用いられる制御プログラムであって、前記撮像装置が備えるコンピュータに、前記表示部に表示された第１の画像に対して顔検出を行い、顔情報を取得する第１の顔検出ステップと、前記第２の撮影手段により撮影して得られた第２の画像に対して顔検出を行い、顔情報を取得する第２の顔検出ステップと、ユーザの指示に応じて、前記第１の顔検出ステップで得られた顔情報と、前記第２の顔検出ステップで得られた顔情報とを関連付ける関連付けステップと、を実行させることを特徴とする。
【００１２】
本発明による記録媒体は、上記の制御プログラムが記録されたコンピュータに読み取り可能な記録媒体である。
【発明の効果】
【００１３】
本発明によれば、第１の画像を閲覧するユーザを撮像して第２の画像を得て、第２の画像におけるユーザと第１の画像に存在する被写体（つまり、顔）とが関連性付けるようにしたので、ユーザである閲覧者自身と関連性のある被写体が写っている画像を容易に鑑賞することができる。
【図面の簡単な説明】
【００１４】
【図１】本発明の実施の形態による撮像装置の一例についてその構成を示すブロック図である。
【図２】図１に示すカメラの外観を説明するための図であり、（ａ）はカメラを正面から見た図、（ｂ）はカメラを背面から見た図である。
【図３】図１に示す顔検出・個人認証部についてその構成の一例を示すブロック図である。
【図４】図１に示す関係性構築部の構成についてその一例を示すブロック図である。
【図５】図１に示すカメラにおける関連性構築データの生成を説明するための図であり、（ａ）は第１の撮影部で得られた画像が表示部に表示された状態を示す図、（ｂ）は第２の撮影部で得られた画像を示す図である。
【図６】図４に示す関連性構築データ記録部に記録された関連性構築データを説明するための図である。
【図７】図１に示すカメラで行われる関連性構築処理を説明するためのフローチャートである。
【発明を実施するための形態】
【００１５】
以下、本発明の実施の形態による撮像装置の一例について図面を参照して説明する。
【００１６】
図１は、本発明の実施の形態による撮像装置の一例についてその構成を示すブロック図である。
【００１７】
図示の撮像装置は、例えば、デジタルカメラ（以下単にカメラと呼ぶ）１０１であり、第１の撮影部１０２および第２の撮影部１０３を備えている。そして、これら第１の撮影部１０２および第２の撮影部１０３は同一の構成を有しており、第１の撮影部１０２および第２の撮影部１０３はそれぞれ被写体およびユーザを撮影可能である。
【００１８】
ここで、第１の撮影部１０２に注目して、第１の撮影部１０２は撮像レンズユニット（以下単に撮像レンズと呼ぶ）１０４を有しており、撮像レンズ１０４を介して撮像素子１０５に被写体像（光学像）が結像する。そして、撮像素子１０５は、光学像に応じた電気信号（アナログ信号）を出力する。
【００１９】
アナログ信号処理部１０６はＣＤＳ回路および増幅回路を有しており、ＣＤＳ回路によってアナログ信号のノイズ成分を除去した後、増幅回路によってアナログ信号を増幅する。アナログ信号処理部１０６の出力であるアナログ信号は、Ａ／Ｄ変換部１０７に与えられ、Ａ／Ｄ変換部１０７はアナログ信号をＡ／Ｄ変換してデジタル画像信号を出力する。そして、デジタル信号処理部１０８はデジタル画像信号に対して欠陥画素補正およびスミア補正などのセンサ補正、色収差補正、およびデモザイク処理などの信号処理を行って、画像データを生成する。
【００２０】
この画像データ（以下第１の画像データと呼ぶ）は制御部１１６に与えられるとともに、第１の撮影部１０２に備えられた顔検出・個人認証部１０９に与えられ、後述するように処理される。
【００２１】
なお、第２の撮影部１０３は、撮像レンズ１１０、撮像素子１１１、アナログ信号処理部１１２、Ａ／Ｄ変換部１１３、デジタル信号処理部１１４、および顔検出・個人認証部１１５を備えている。そして、第１の撮影部１０３と同様の処理を行い、デジタル信号処理部１１４の出力である画像データ（以下第２の画像データと呼ぶ）が顔検出・個人認証部１１５に与えられる。
【００２２】
図２は、図１に示すカメラ１０１の外観を説明するための図である。そして、図２（ａ）はカメラ１０１を正面から見た図であり、図２（ｂ）はカメラ１０１を背面から見た図である。
【００２３】
カメラ１０１の筐体１０１ａにおいて、撮像レンズ１０４が配置された面（正面）と反対側の面（背面）に表示部１１８が配置されている。撮影モードにおいては、表示部１１８には撮像素子１０５の出力に応じて生成された画像がリアルタイムに表示される。このため、撮影者（ユーザ）が撮像レンズ１０４を被写体に向けて、表示部１１８に表示される画像を観察すれば、撮影の結果として得られる画像の状態を確認することができる。つまり、表示部１１８はカメラ１０１におけるファインダとして用いることができる。
【００２４】
カメラ筐体１０１ａの表示部１１８が設けられた面（背面）には、第２の撮影部１０３の撮像レンズ１１０が配置されている。この撮像レンズ１１０の光軸方向（撮影方向）は撮像レンズ１０４の光軸方向（撮影方向）と略反対方向である。このため、ユーザが被写体を撮影しようとしてカメラ１０１を構えると、第２の撮影部１０３の撮像レンズ１１０を介してユーザ像が撮像素子１１１に結像して、デジタル信号処理部１１４からユーザを示す第２の画像データが出力されることになる。
【００２５】
なお、ユーザがカメラ１０１を構えて第１の撮影部１０２によって被写体を撮影しようとすると、ユーザの顔が撮影されるように撮像レンズ１１０の光軸方向および撮影視野が設定されている。また、第２の撮影部１０３で得られる画像は鑑賞用ではなく、人物の識別可能であればよいので、第２の撮影部１０３における解像度および光学性能は第１の撮影部１０２における解像度および光学性能よりも低くてもよい。さらに、第２の撮影部１０３で得られる画像のサイズも第１の撮影部１０２で得られる画像のサイズよりも小さくてよい。
【００２６】
顔検出・個人認証部１０９は、第１の画像データを受けて、後述する顔検出および個人認証を行って、その認証結果（以下第１の認証結果と呼ぶ）を制御部１１６に出力する。同様に、顔検出・個人認証部１１５は、第２の画像データを受けて、顔検出および個人認証を行って、その認証結果（以下第２の認証結果と呼ぶ）を制御部１１６に出力する。
【００２７】
制御部１１６はカメラ１０１の全体の制御を司り、露出制御、ホワイトバランス処理、および測距制御などを行う。図１には示されていないが、例えば、測距制御の場合には、制御部１１６は半押しＳＷ１２０が操作されると測距制御を開始し、撮像レンズ１０４に備えられたフォーカスレンズをフォーカス駆動回路によって光軸に沿って駆動する。そして、制御部１１６は第１の認証結果に応じて第１の画像データにおいて被写体のコントラストを検出して、当該コントラストがピークとなる位置にフォーカスレンズを駆動する。そして、全押しＳＷ１２１が操作されると、制御部１１６はデジタル信号処理部１０８から第１の画像データを記録部（メモリ）１１７に記録する。
【００２８】
なお、制御部１１６は、後述する関係性構築部１１９が接続されている。
【００２９】
図３は、図１に示す顔検出・個人認証部１０９についてその構成の一例を示すブロック図である。なお、図１に示す顔検出・個人認証部１１５の構成は、顔検出・個人認証部１０９の構成と同様である。
【００３０】
顔検出・個人認証部１０９は、顔検出部２０１、個人認証部２０２、および登録顔画像データ記録部２０３を有している。顔検出部２０１は、デジタル信号処理部１０８から第１の画像データを受けて、顔検出用に準備されたテンプレートを用いて第１の画像データが示す画像を走査する。そして、顔検出部２０１は第１の画像データが示す画像について所定のブロック毎にテンプレートとの相関値を算出する。顔検出部２０１は相関値が所定の閾値よりも高いブロックを顔領域として判定して、顔領域を示す第１の顔情報（第１の顔画像データともいう）を出力する。
【００３１】
なお、顔領域を検出する際には、テンプレートマッチング処理の代わりに、例えば、部分空間法などを用いた顔領域抽出法を用いるようにしてもよい。
【００３２】
登録者情報データベースに備えられた登録顔画像データ記録部２０３には、複数の顔画像データが登録顔画像データとして予め登録されている。なお、撮影の際、ＥＶＦ表示の際、又は再生の際に顔画像データを登録顔画像データとして登録するようにしてもよい。そして、登録顔画像データの各々には、当該登録顔画像データを示す人物の個人名（登録名称）などが関連付けられて記録されている。
【００３３】
個人認証部２０２は、顔検出部２０１から第１の顔画像データを受けて、当該第１の顔画像データと登録顔画像データ記録部２０３に登録された登録顔画像データとの類似度を求める。そして、個人認証部２０２は第１の認証結果として類似度が所定の類似度閾値以上である顔画像データに係る特徴量（顔特徴量：以下第１の顔特徴量と呼ぶ）を制御部１１６に出力する。
【００３４】
類似度を算出する手法として、例えば、特開２０００−０３００６５号公報に記載された手法が用いられる。つまり、第１の顔画像データにおける顔の大きさ、角度（つまり、向き）、および輝度などを正規化した後、フーリエスペクトルのＫＬ展開法を用いて類似度を算出する。または、特開２００４−３８５３１号公報に記載の手法を用いるようにしてもよい。ここでは、第１の顔画像データを顔までの距離に応じて正規化してマッチングを行って類似度を算出する。
【００３５】
なお、登録顔画像データ記録部２０３に記録された登録顔画像データとして、例えば、圧縮された顔画像データ、又は目、鼻、口、眉毛など顔に関する特徴量を示す特徴情報が用いられる。
【００３６】
このような方法で個人認証を行うことで、第１の顔画像データと対応する登録顔画像データから、人物の個人名（登録名称）等の情報を得ることができる。
【００３７】
同様にして、顔検出・個人認証部１１５は、第２の画像データに応じて第２の認証結果である顔特徴量（以下第２の顔特徴量と呼ぶ）を制御部１１６に出力する。そして、制御部１１６は第１の特徴量および第２の特徴量を所定のタイミングで関係性構築部１１９に出力する。
【００３８】
図４は、図１に示す関係性構築部１１９の構成についてその一例を示すブロック図である。
【００３９】
関連性構築部１１９は、第１の個人認証結果一時記憶部（以下単に第１の記憶部と呼ぶ）７０１および第２の個人認証結果一時記憶部（以下単に第２の記憶部と呼ぶ）７０２を有している。そして、制御部１１６は前述の第１の顔特徴量および第２の顔特徴量をそれぞれ第１の個人認証結果および第２の個人認証結果として第１の記憶部７０１および第２の記憶部７０２に格納する。
【００４０】
前述の表示部１１８には、例えば、タッチパネル（タッチ検出手段）が備えられており、表示部１１８へのタッチ操作、タッチ位置を検出することができる。タッチパネルにおける所定のタッチ操作によって、第１の個人認証結果および第２の個人認証結果はそれぞれ第１の記憶部７０１および第２の記憶部７０２から個人認証結果関連付け部７０３に出力される。個人認証結果関連付け部７０３は、後述するようにして、第１の個人認証結果および第２の個人認証結果に応じて、第１の画像データにおける被写体像と第２の画像データにおけるユーザ像との関連付けを行って、関連性構築データ（関連性データともいう）を生成する。そして、個人認証結果関連付け部７０３は、関連性構築データを関係性構築データベースに備えられた関係性構築データ記録部（関連性メモリ）７０４に保存する。
【００４１】
なお、同一の関係性構築データについては、再度保存する必要はないので、個人認証結果関連付け部７０３は関連性構築データを生成する都度、関連性構築データ記録部７０３に同一の関連性構築データが存在するか否かを調べる。そして、同一の関連性構築データが存在すると、個人認証結果関連付け部７０３は既に存在する関係性構築データであることを示す既存関係性フラグを制御部１１６に出力する。
【００４２】
制御部１１６は、既存関係性フラグを参照して、表示部１１８に登録ボタン（選択部）を表示するか否かを判定する。つまり、制御部１１６は既存関連性フラグが存在すれば、当該既存関連性フラグに対応する関連性構築データが既に関連性構築データ記録部７０４に保存されているとして登録ボタンを非表示とする。一方、制御部１１６は既存関連性フラグが存在しないと、当該既存関連性フラグに対応する関連性構築データが関連性構築データ記録部７０４に保存されていないとして登録ボタンを表示部１１８に表示する。
【００４３】
図５は、図１に示すカメラ１０１における関連性構築データの生成を説明するための図である。そして、図５（ａ）は第１の撮影部１０２で得られた画像が表示部１１８に表示された状態を示す図であり、図５（ｂ）は第２の撮影部１０３で得られた画像を示す図である。
【００４４】
図５（ａ）に示す例では、第１の撮影部１０２で得られた第１の画像データには２人の被写体（“Ａ”および”Ｂ”）が存在し、顔検出および個人認証の結果に応じて第１の画像データが表示部１１８に表示される。本実施形態では、各被写体の近傍に、個人認証の結果得られた人物の個人名（登録名称）の情報（“Ａ”さん、および、”Ｂ”さん）と、登録ボタン４０１を表示する。なお、図５（ｂ）に示すように、第２の撮影部１０３で得られた第２の画像データではユーザ（“Ｃ”）４０２について顔検出および個人認証が行われる。
【００４５】
ここで、ユーザＣが表示部１１８に表示された登録ボタン４０１をタッチ操作すると、制御部１１６は関連性構築部１１９を制御して、ユーザＣとタッチ操作されたタッチ位置に対応する被写体とを関連付ける関連性構築データを生成する。この際、前述のように、当該関連性構築データが存在すれば、既存関連性フラグが関連性構築部１１９から制御部１１６に送られて、制御部１１６は対応する登録ボタン４０１を非表示とする。
【００４６】
前述のように、顔検出および個人認証の結果、表示部１１８に表示された画像に存在する被写体はそれぞれ“Ａ”および“Ｂ”と認証され、第２の撮影部１０３で得られた画像に存在するユーザ（撮影者）は“Ｃ”と認証されている。
【００４７】
例えば、撮影者“Ｃ”が被写体“Ａ”の登録ボタン４０１をタッチ操作すると、制御部１１６は関連性構築部１１９によって、“Ｃ”＝“Ａ”を示す関連性構築データを生成する。また、撮影者“Ｃ”が被写体“Ｂ”の登録ボタン４０１をタッチ操作すると、制御部１１６は関連性構築部１１９によって、“Ｃ”＝“Ｂ”を示す関連性構築データを生成する。
【００４８】
図示の例では、ユーザ“Ｃ”が被写体“Ａ”の登録ボタン４０１をタッチ操作すると、ユーザ“Ａ”と被写体“Ｃ”との双方の関係性が構築されているが、ユーザ“Ｃ”から見た場合に被写体“Ａ”又は“Ｂ”と関係性があるように一方からの関係性を構築するようにしてもよい。
【００４９】
なお、ここでは、表示部１１８に被写体とともに登録ボタン４０１を表示するようにしたが、ユーザが被写体を登録する際、登録ボタン４０１とは別のアイコンや被写体に枠等を表示する等して、登録ボタンとは異なる表示アイテムを表示させてもよい。又は画像被写体自体をタッチ操作するようにしてもよい。タッチ位置に対応する表示部１１８に表示されている第１の画像データ被写体と、第２の画像データの被写体とを関連付けるようにするとよい。さらには、タッチ操作ではなく十字キーなどを操作して被写体の登録を指示するようにしてもよい。
【００５０】
図６は、図４に示す関連性構築データ記録部７０４に記録された関連性構築データを説明するための図である。
【００５１】
図６において、関連性構築データは関連性構築データ記録部７０４においてテーブルとして記録される。当該テーブルはユーザ（撮影者又は閲覧者）欄５０１と被写体欄５０２を有し、ここでは、ユーザ欄５０１には”Ａ”〜”Ｈ”が登録され、被写体欄５０２には”Ａ”〜”Ｈ”が登録されている。
【００５２】
いま、ユーザ“Ｃ”＝被写体“Ａ”という関係性が構築されると、ユーザ欄５０１の“Ｃ”と被写体欄５０２の“Ａ”とが交わるセルが”１”となってフラグが立つ。当該フラグが関連性構築データとして関係性構築データ記録部７０４に記録されて、被写体とユーザとのの関係性が構築される。
【００５３】
図７は、図１に示すカメラ１０１で行われる関連性構築処理を説明するためのフローチャートである。なお、図示のフローチャートに係る処理は、制御部１１６の制御下で行われる。
【００５４】
カメラ１０１の電源がオンされると、制御部１１６は、前述したようにして、第１の撮影部１０２で得られた画像（第１の画像データ）を表示部に表示する（ＥＶＦ表示：ステップＳ６０１）。続いて、制御部１１６はタッチパネルにおいて関連性構築モードが選択されたか否かを判定する（ステップＳ６０２）。
【００５５】
関連性構築モードが選択されると（ステップＳ６０２において、ＹＥＳ）、制御部１１６は、図５に関連して説明したように、画面上に登録ボタン４０１を表示して、顔検出・個人認証部１０９によってデジタル信号処理部１０８で得られた第１の画像データにおいて被写体の顔検出を行う（ステップＳ６０３）。さらに、制御部１１６は、顔検出・個人認証部１０９によって顔検出結果に応じて、前述したようにして個人認証を行って、第１の個人認証結果を得る（ステップＳ６０４）。
【００５６】
続いて、制御部１１６は、顔検出・個人認証部１１５によってデジタル信号処理部１１４で得られた第２の画像データにおいてユーザの顔検出を行う（ステップＳ６０５）。さらに、制御部１１６は、顔検出・個人認証部１１５によって顔検出結果に応じて、前述したようにして個人認証を行って、第２の個人認証結果を得る（ステップＳ６０６）。
【００５７】
次に、制御部１１６は、ユーザ（ここでは、撮影者）が表示部１１８に表示された登録ボタン４０１をタッチ操作したか否かを判定する（ステップＳ６０７）。登録ボタン４０１がタッチ操作されると（ステップＳ６０７において、ＹＥＳ）、制御部１１６は関連性構築部１１９によって、前述したようにして、タッチ操作された被写体とユーザとの関連性構築データを生成する（ステップＳ６０８）。この際、当該関連性構築データが既に存在するか又は登録されると、前述したように、制御部１１６は登録ボタン４０１を非表示とする。この結果、ユーザは登録ボタン４０１の非表示によって関連性が構築されたことを知ることができる。
【００５８】
その後、制御部１１６は撮影処理を行って（ステップＳ６０９）、関連性構築処理を終了する。なお、撮影の際には、前述のように、半押しＳＷ１２０および全押しＳＷ１２１の操作に応じて撮影が行われる。
【００５９】
所定の時間を経過しても登録ボタン４０１がタッチ操作されないと（ステップＳ６０７において、ＮＯ）、制御部１１６はステップＳ６０９の処理に移行する。また、関連性構築モードが選択されないと（ステップＳ６０２において、ＮＯ）、制御部１１６はステップＳ６０９の処理に移行する。
【００６０】
ユーザである閲覧者が、撮影の結果記録部１１７に記録された画像を再生（画像再生処理）して閲覧する際には、制御部１１６は関連性構築部１１８から関連性構築データを取得して、当該関連性構築データに応じて画像の再生を許可するか否かを判定する。つまり、再生対象の画像に、第２の撮影部１０３で得られた第２の画像データ（ユーザ画像）に個人認証された閲覧者が存在すれば、制御部１１６は当該再生対象の画像の再生を許可する。
【００６１】
さらに、制御部１１６は関連性構築データによって閲覧者（ユーザ）に関連付けられた被写体が再生対象の画像に存在すると、当該再生対象の画像の再生を許可することになる。この結果、再生対象の画像に閲覧者が存在しなくても、閲覧者に関連付けられた被写体が再生対象の画像に存在すれば、当該再生対象の画像の再生は許可されることになる。
【００６２】
以上のように、本発明の実施の形態では、ユーザ（撮影者又は閲覧者）と被写体とを関連付ける関連性構築データを、被写体を撮影する際に保存しておき、画像再生の際に、当該関連性構築データを参照して画像の再生を行うようにすれば、閲覧者自身と関連性のある被写体が写っている画像も鑑賞することができる。
【００６３】
この結果、大量の画像データの中からユーザのみが写っている画像を再生するだけでなく、ユーザと関連性の高い被写体が写っている画像も再生することができることになる。
【００６４】
上述の説明から明らかなように、図１に示す例では、制御部１１６および関連性構築部１１９が関連付け手段として機能し、顔検出・個人認証部１０９および１１５が第１の顔検出手段および第２の顔検出手段として機能する。また、制御部１１６は表示制御手段として機能する。
【００６５】
以上、本発明について実施の形態に基づいて説明したが、本発明は、これらの実施の形態に限定されるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。
【００６６】
例えば、上記の実施の形態の機能を制御方法として、この制御方法を撮像装置に実行させるようにすればよい。また、上述の実施の形態の機能を有するプログラムを制御プログラムとして、当該制御プログラムを撮像装置が備えるコンピュータに実行させるようにしてもよい。なお、制御プログラムは、例えば、コンピュータに読み取り可能な記録媒体に記録される。
【００６７】
上記の制御方法および制御プログラムの各々は、少なくとも第１の顔検出ステップ、第２の顔検出ステップ、およびを有している。
【００６８】
また、本発明は、以下の処理を実行することによっても実現される。つまり、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種の記録媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵなど）がプログラムを読み出して実行する処理である。
【符号の説明】
【００６９】
１０２  第１の撮影部
１０３  第２の撮影部
１０４，１１０  撮像レンズ
１０５，１１１  撮像素子
１０６，１１２  アナログ信号処理部
１０７，１１３  Ａ／Ｄ変換部
１０８，１１４  デジタル信号処理部
１０９，１１５  顔検出・個人認証部
１１６  制御部
１１９  関係性構築部
【図１】
2015088883.tif 000003
【図２】
2015088883.tif 000004
【図３】
2015088883.tif 000005
【図４】
2015088883.tif 000006
【図５】
2015088883.tif 000007
【図６】
2015088883.tif 000008
【図７】
2015088883.tif 000009