(57)【要約】【課題】画像ファイル等の画像コンテンツに含まれる人物の位置関係に応じて画像コンテンツの検索を行って、画像コンテンツの検索性を向上させる。【解決手段】デジタルカメラ１０１は、複数の画像を有する記録媒体１２０から検索対象である顔をキー顔としてキー顔が含まれる画像を検索して検索画像を得て、検索画像にキーと異なる他の顔が含まれていると、検索画像に対応するメタデータに応じてキー顔と他の顔との距離を相対距離として求める。さらに、デジタルカメラは他の顔をキー顔に対して相対距離に応じて画面表示する。【選択図】図１
2011221844.tif 000002
【特許請求の範囲】
【請求項１】
複数の画像を有する画像ファイルから検索対象である顔をキー顔として前記キー顔が含まれる画像を検索して検索画像を得る検索手段と、
前記検索画像に前記キーと異なる他の顔が含まれていると、前記検索画像に対応するメタデータに応じて前記キー顔と前記他の顔との距離を相対距離として求める算出手段と、
前記他の顔を前記キー顔に対して前記相対距離に応じて画面表示する表示制御手段とを有することを特徴とする表示制御装置。
【請求項２】
前記表示制御手段は、前記キー顔及び前記他の顔をそれぞれ代表画として配置した顔検索インデックス画面を生成して表示することを特徴とする請求項１記載の表示制御装置。
【請求項３】
前記顔検索インデックス画面には、前記キー顔を基準として前記相対距離を示すスケールが表示されることを特徴とする請求項２記載の表示制御装置。
【請求項４】
前記算出手段は前記メタデータに応じて前記キー顔に対する前記他の顔の方向を示す相対的方向を算出しており、
前記表示制御手段は、前記相対距離及び相対的方向に応じて前記キー顔及び前記他の顔をそれぞれ代表画として配置した顔検索インデックス画面を生成して表示することを特徴とする請求項１記載の表示制御装置。
【請求項５】
前記顔検索インデックス画面には、二次元座標が表示され、前記キー顔が前記二次元座標の原点に位置づけられており、
前記表示制御手段は、前記相対距離及び前記相対的方向に応じて前記二次元座標上に前記他の顔を位置づけることを特徴とする請求項４記載の表示制御装置。
【請求項６】
前記他の顔の数が予め規定された数を越えると、前記表示制御手段は、所定の基準に応じて得られた数だけ前記他の顔を前記顔検索インデックス画面に位置づけることを特徴とする請求項２〜４いずれか１項記載の表示制御装置。
【請求項７】
前記他の顔を前記顔検索インデックス画面に表示する際、前記表示制御手段は前記相対距離が予め定められた距離以下である場合に前記他の顔を表示することを特徴とする請求項２〜４いずれか１項記載の表示制御装置。
【請求項８】
前記顔検索インデックス画面において、前記他の顔から一つの顔が選択されると、前記表示制御手段は、当該選択された他の顔が含まれる画像を前記画像ファイルから検索して表示することを特徴とする請求項１〜６いずれか１項記載の表示制御装置。
【請求項９】
前記顔検索インデックス画面において、前記他の顔から一つの顔が選択されると、前記表示制御手段は、当該選択された他の顔に付随するメタデータを前記画像ファイルから検索して前記メタデータの編集を行うためのメタデータ編集画面を表示することを特徴とする請求項１〜６いずれか１項記載の表示制御装置。
【請求項１０】
前記顔検索インデックス画面において、前記他の顔から一つの顔が選択されると、前記検索手段は前記他の顔を前記キー顔として再検索を実行することを特徴とする請求項１〜６いずれか１項記載の表示制御装置。
【請求項１１】
前記表示制御手段は、前記キー顔に所定のマークを付して強調表示することを特徴とする請求項１〜９いずれか１項記載の表示制御装置。
【請求項１２】
前記画像ファイルは動画像ファイルであり、
前記表示制御手段は、前記相対距離に応じて前記キー顔に前記他の顔が最も接近した際の前記動画像ファイルのフレームに基づいて前記キー顔及び前記他の顔を表示するようにしたことを特徴とする請求項１記載の表示制御装置。
【請求項１３】
複数の画像を有する画像ファイルから検索対象である顔をキー顔として検索して表示部に表示するための表示制御方法において、
前記キー顔が含まれる画像を前記画像ファイルから検索して検索画像を得る検索ステップと、
前記検索画像に前記キーと異なる他の顔が含まれていると、前記検索画像に対応するメタデータに応じて前記キー顔と前記他の顔との距離を相対距離として求める算出ステップと、
前記他の顔を前記キー顔に対して前記相対距離に応じて前記表示部に画面表示する表示制御ステップとを有することを特徴とする表示制御方法。
【請求項１４】
複数の画像を有する画像ファイルから検索対象である顔をキー顔として検索して表示部に表示するための表示制御プログラムにおいて、
コンピュータに、
前記キー顔が含まれる画像を前記画像ファイルから検索して検索画像を得る検索ステップと、
前記検索画像に前記キーと異なる他の顔が含まれていると、前記検索画像に対応するメタデータに応じて前記キー顔と前記他の顔との距離を相対距離として求める算出ステップと、
前記他の顔を前記キー顔に対して前記相対距離に応じて前記表示部に画面表示する表示制御ステップとを実行させることを特徴とする表示制御プログラム。
【請求項１５】
請求項１３に記載の表示制御プログラムが記録されたコンピュータに読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示部に画像を表示するための表示制御装置、表示制御方法、及び表示制御プログラム、並びに記録媒体に関し、特に、撮像装置等の各種装置で管理される複数の画像コンテンツから所望の画像コンテンツを検索して、表示部に画像として表示する表示制御装置、表示制御方法、及び表示制御プログラム、並びに記録媒体に関する。
【背景技術】
【０００２】
一般に、撮像装置の一つとして所謂デジタルカメラが知られており、近年、デジタルカメラにおける記憶容量は大容量となっている。さらに、顔認識技術又は顔識別技術が進化し、顔認識又は顔識別の機能を有するデジタルカメラもある。大容量の記録媒体に多量の画像コンテンツを保存した場合には、画像コンテンツの検索性の向上が求められている。
【０００３】
一方、最近では、撮影後多くの画像コンテンツから特定の顔データが含まれる画像コンテンツを検索して一覧表示する機能を備えたデジタルカメラが開発されている。画像コンテンツを検索して一覧表示する機能に関して、画像コンテンツに付随するメタデータ同士の類似度に応じて画像コンテンツの検索を行うようにしたものである（例えば、特許文献１参照）。
【０００４】
特許文献１においては、１つの画像コンテンツに対して複数のメタデータが付加されている。そして、ユーザーが適切なキーワードを入力して検索を実行すると、キーワードと類似したメタデータが付加された画像コンテンツが複数表示される。画像コンテンツを表示する際には、キーワードに類似する順に、例えば、画面中央から外部に向かってＮ（Ｎは２以上の整数）次元空間に画像コンテンツが表示される。そして、ユーザーは近傍に位置する画像コンテンツをグルーピングして、このグループに対して新しいメタデータを付加することができる。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０００−９９５３１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、上記の特許文献１に記載の技術では、キーワードに類似のメタデータを有する画像コンテンツを表示できるものの、画像コンテンツを表示する際、メタデータに含まれる顔間の距離データを互いに比較して、画像コンテンツ間における顔の相対距離又は相対的位置に基づいて画像コンテンツを一覧表示することができない。つまり、特許文献１において、画像コンテンツに含まれる人物の位置関係に応じて、所望の画像コンテンツを検索することができないという課題がある。
【０００７】
従って、本発明の目的は、画像コンテンツに含まれる人物の位置関係に応じて、画像コンテンツの検索を行って、画像コンテンツの検索性を向上させることのできる表示制御装置、表示制御方法、及び表示制御プログラム、並びに記録媒体を提供することにある。
【課題を解決するための手段】
【０００８】
上記の目的を達成するため、本発明による表示制御装置は、複数の画像を有する画像ファイルから検索対象である顔をキー顔として前記キー顔が含まれる画像を検索して検索画像を得る検索手段と、前記検索画像に前記キーと異なる他の顔が含まれていると、前記検索画像に対応するメタデータに応じて前記キー顔と前記他の顔との距離を相対距離として求める算出手段と、前記他の顔を前記キー顔に対して前記相対距離に応じて画面表示する表示制御手段とを有することを特徴とする。
【０００９】
本発明による表示制御方法は、複数の画像を有する画像ファイルから検索対象である顔をキー顔として検索して表示部に表示するための表示制御方法において、前記キー顔が含まれる画像を前記画像ファイルから検索して検索画像を得る検索ステップと、前記検索画像に前記キーと異なる他の顔が含まれていると、前記検索画像に対応するメタデータに応じて前記キー顔と前記他の顔との距離を相対距離として求める算出ステップと、前記他の顔を前記キー顔に対して前記相対距離に応じて前記表示部に画面表示する表示制御ステップとを有することを特徴とする。
【００１０】
本発明による表示制御プログラムは、複数の画像を有する画像ファイルから検索対象である顔をキー顔として検索して表示部に表示するための表示制御プログラムにおいて、コンピュータに、前記キー顔が含まれる画像を前記画像ファイルから検索して検索画像を得る検索ステップと、前記検索画像に前記キーと異なる他の顔が含まれていると、前記検索画像に対応するメタデータに応じて前記キー顔と前記他の顔との距離を相対距離として求める算出ステップと、前記他の顔を前記キー顔に対して前記相対距離に応じて前記表示部に画面表示する表示制御ステップとを実行させることを特徴とする。
【００１１】
本発明による記録媒体は、上記の表示制御プログラムが記録されたコンピュータに読み取り可能な記録媒体である。
【発明の効果】
【００１２】
本発明によれば、画像コンテンツから所望の人物の顔をキー顔として選択するだけで、当該人物の顔と一緒に写る他の人物の検索を容易に行うことができる。さらに、キー顔の人物と他の人物の距離等の位置関係を容易に確認することもできる。このように、本発明ではキー顔として指定した人物の顔と他の人物の相対距離等の位置関係をユーザーに提示するようにしたので、人物の位置関係を検索しやすくなって利便性が向上するという効果がある。
【図面の簡単な説明】
【００１３】
【図１】本発明の実施の形態による表示制御装置の一例が用いられた撮像装置を示すブロック図である。
【図２】図１に示すデジタルスチルカメラの外観を示す図であり、（ａ）は背面、側面、及び上面を示す斜視図、（ｂ）は正面、側面、及び上面を示す斜視図である。
【図３】図２に示すタッチパネルに表示される画面の一例を説明するための図であり、（ａ）はインデックスモードの際にタッチパネルに表示される代表画の一例を示す図、（ｂ）は代表画を拡大表示した例を示す図、（ｃ）は記録モードの際にタッチパネルに表示される映像の一例を示す図である。
【図４】図１に示すデジタルスチルカメラを用いて撮影を行う際の手順を説明するための図であり、（ａ）はデジタルスチルカメラと被写体との関係を示す図、（ｂ）はカメラレンズと被写体との関係を上方から示す図、（ｃ）はタッチパネルに表示された画面を示す図である。
【図５】図１に示すデジタルスチルカメラにおいて顔認識の結果得られたメタデータの一例を示す図である。
【図６】図１に示すデジタルスチルカメラで用いられる角度一覧テーブルの一例について説明するための図であり、（ａ）は被写体とカメラ視野との関係を示す図、（ｂ）はズーム１．０の場合にタッチパネルに表示される画面を示す図、（ｃ）はズーム１．５の場合にタッチパネルに表示される画面を示す図である。
【図７】図１に示すデジタルスチルカメラで用いられる角度一覧テーブルの一例を示す図である。
【図８】図１に示す記録媒体に保存された画像データの第１の例を説明するための図であり、（ａ）は記録媒体に保存された画像データの第１の例を示す図、（ｂ）は当該画像データを得た撮影状況を示す図である。
【図９】図１に示す記録媒体に保存された画像データの第２の例を説明するための図であり、（ａ）は記録媒体に保存された画像データの第２の例を示す図、（ｂ）は当該画像データを得た撮影状況を示す図である。
【図１０】図１に示す記録媒体に保存された画像データの第３の例を説明するための図であり、（ａ）は記録媒体に保存された画像データの第３の例を示す図、（ｂ）は当該画像データを得た撮影状況を示す図である。
【図１１】図１に示す記録媒体に保存された画像データの第４の例を説明するための図であり、（ａ）は記録媒体に保存された画像データの第４の例を示す図、（ｂ）は当該画像データを得た撮影状況を示す図である。
【図１２】図１に示すデジタルスチルカメラにおいて顔検索モードにおける動作を説明するための図であり、（ａ）は顔選択を説明するための図、（ｂ）は顔検索モードにおける顔枠の表示を説明するための図である。
【図１３】図１に示すデジタルスチルカメラにおいて顔検索インデックスの生成を説明するための図であり、（ａ）は顔検索インデックスの生成開始を示す図、（ｂ）は顔検索インデックスの生成完了を示す図、（ｃ）は顔検索インデックスの生成が完了した後顔画像の選択を示す図である。
【図１４】図１に示すデジタルスチルカメラと被写体との位置関係及び距離の算出を説明するための図である。
【図１５】図１３で説明した顔画像のタッチに応じた処理を説明するための図であり、（ａ）は選択した顔画像を含む画像の表示を示す図、（ｂ）は選択した顔画像に付随するメタデータの編集を示す図、（ｃ）は選択した顔画像をキーとする再検索を示す図である。
【図１６】図１に示すデジタルスチルカメラの顔検索動作を説明するためのフローチャートである。
【図１７】図１に示すデジタルスチルカメラで生成される顔インデックスの他の例を説明するための図である。
【図１８】デジタルビデオカメラで撮影した動画の１シーンを説明するための図であり、（ａ）は再生直後の動画を示す図、（ｂ）は再生開始後１８０秒経過した動画を示す図である。
【図１９】図１８に示す動画ファイルにおいて人物画像の移動について説明するための図である。
【図２０】デジタルビデオカメラで撮影された動画シーンにおける顔検索インデックスの作成手順を説明するための図であり、（ａ）はキー顔の選択を示す図、（ｂ）はキー顔と類似する顔の検索開始を示す図、（ｃ）は顔検索インデックスの生成完了を示す図、（ｄ）はユーザーの選択した顔に係る時間からの再生開始を示す図である。
【発明を実施するための形態】
【００１４】
以下、本発明の実施の形態による表示制御装置の一例について図面を参照して説明する。
【００１５】
図１は、本発明の実施の形態による表示制御装置の一例が用いられた撮像装置を示すブロック図である。なお、ここでは撮像装置がデジタルスチルカメラである場合について説明する。
【００１６】
図１を参照して、図示のデジタルスチルカメラ１０１は、全体制御部１１４及びカメラ基本部１１５を有している。そして、全体制御部１１４はタッチ状態検出部１１３を介してタッチパネル部１０２に接続されている。また、カメラ基本部１１５もタッチパネル部１０２に接続されている。
【００１７】
カメラ基本部１１５は、距離検出・映像入力部１０５、メタデータ解析代表画生成部１０６、合成部１０７、復号部１０８、符号部１０９、グラフィック部１１０、記録媒体アクセス部１１１、データベース部１１２、及びメタデータ生成部１１６を有している。そして、記録媒体アクセス部１１１には記録媒体１２０が接続される。
【００１８】
タッチパネル部１０２は表示部１０３及び操作部１０４を有している。表示部１０３には、撮影された静止画が表示される一方、ユーザーに対して指示ボタンを表示する。さらに、表示部１０３には、デジタルスチルカメラ１０１に関する情報及び記録媒体１２０の残容量等が表示される。操作部１０４は、タッチパネルに表示されたボタン等からユーザーの指示を受け付ける。
【００１９】
距離検出・映像入力部１０５は、撮影の際に人物等の顔認識を行って顔が検出されるとデジタルスチルカメラ１０１から顔までの距離を計測する。つまり、撮影する際には、距離検出・映像入力部１０５から外界の映像（画像ともいう）がメタデータ生成部１１６及び符号化部１０９に入力される。そして、メタデータ生成部１１６は映像に応じて、後述するメタデータを生成して、符号化部１０９に与える。
【００２０】
符号部１０９は、映像入力部１０５から入力された映像及びメタデータを符号化して、符号化画像データを出力する。そして、この符号化データは、例えば、記録媒体アクセス部１１１を介して記録媒体１２０に記録される。このようにして、記録媒体１２０には多数の符号化画像データが記録されて、画像ファイルが形成される。
【００２１】
一方、記録媒体１１１に記録された符号化画像データは、記録媒体アクセス部１１１によって復号部１０６に与えられ、ここで画像データに復号化される。そして、画像データは合成部１０７及びメタデータ解析代表画生成部１０６に与えられる。
【００２２】
メタデータ解析代表画生成部１０６は、画像データ（ここでは、静止画）に係るメタデータを解析する。そして、メタデータ解析代表画生成部１０６は、対象となる静止画に顔画像（以下単に顔ともいう）がいくつ記録されているか、また、デジタルスチルカメラからの顔までの距離はどのくらいか等を示す情報をメタデータから取得する。さらに、メタデータ解析代表画生成部１０６はメタデータに基づいて幾つかの顔を切り出して代表画を生成する。
【００２３】
合成部１０７は、表示部１０３に表示する文字情報及び画像と前述の代表画等とを合成して、表示部１０３に与える。グラフィック部１１０はデジタルスチルカメラ１０１の各種情報を表示部１０３に表示するための画面を生成する。例えば、グラフィック部１１０は、時計、電池残量、記録媒体残量、及び記録された静止画数等の情報を描画する。
【００２４】
なお、前述の記録媒体アクセス部１１１は、静止画記録時には記録媒体１２０に画像データを記録し、再生時には記録媒体１２０から画像データを再生するインターフェイスである。
【００２５】
データベース部１１２は、記録媒体１２０に含まれる静止画に関係した情報を保持する。タッチ状態検出部１１３は、タッチパネル上にユーザーの指が幾つ触れているか、そして、どこに触れているか等を検出する。全体制御部１１４は、カメラ基本部１１５の各ブロックについて記録及び再生時の動作に応じて制御する。なお、図示の記録媒体１２０は、例えば、脱着式の記録媒体であり、必要に応じてデジタルスチルカメラ１０１に装着される。
【００２６】
図２は、図１に示すデジタルスチルカメラ１０１の外観を示す図であり、図２（ａ）は背面、側面、及び上面を示す斜視図、図２（ｂ）は正面、側面、及び上面を示す斜視図である。
【００２７】
図２を参照して、デジタルスチルカメラ１０１はカメラ筐体２０１を有しており、カメラ筐体２０１の側面には記録媒体挿入口２０２が形成されている。そして、図１に示す記録媒体１２０には当該挿入口２０２からデジタルスチルカメラ１０１に挿入される。
【００２８】
カメラ筐体２０１の上面には、電源ボタン２０３が配置され、この電源ボタン２０３によってデジタルスチルカメラ１０１の主電源がオン・オフされる。また、カメラ筐体２０１の正面にはレンズ・鏡筒部２０４が位置づけられている。そして、カメラ筐体２０１の背面にはタッチパネル１０２が配置されている。
【００２９】
図３は、図２に示すタッチパネル１０２に表示される画面の一例を説明するための図である。そして、図３（ａ）はインデックスモードの際にタッチパネル１０２に表示される代表画の一例を示す図であり、図３（ｂ）は代表画を拡大表示した例を示す図である。また、図３（ｃ）は記録モードの際にタッチパネル１０２に表示される映像の一例を示す図である。
【００３０】
図１及び図３を参照すると、図２で説明したように、カメラ筐体２０１の背面には、タッチパネル１０２が配置されている。いま、デジタルスチルカメラ１０１がインデックス（ＩＮＤＥＸ）モードであると、記録媒体１２０から符号化画像データが読み出され、前述のようにして、代表画３０３が画面３０２上に一覧表示される（図３（ａ）参照）。図３（ａ）に示す画面３０２においては、符号Ａ、Ｂ、Ｃ、及びＤで示す４枚の代表画３０３が表示されている。インデックスモードにおける画面３０２においては、記録モードボタン３０４が表示され、この記録モードボタン３０４の操作によってデジタルスチルカメラ１０１はインデックスモードから記録モードに遷移する。
【００３１】
いま、ユーザーが符合Ａで示す代表画３０３を、画面３０２上で選択すると、画面３０２の全体に符号Ａで示す代表画が拡大されて拡大画像３１１として表示される（図３（ｂ）参照）。そして、画面３０２上にはインデックスモードボタン３１２が表示され、このインデックスモードボタン（ＩＮＤＥＸ）３１２を操作すると、デジタルスチルカメラ１０１は、図３（ａ）に示すインデックスモードに復帰する。
【００３２】
インデックスモードにおける画面３０２において、ユーザーが記録モードボタン３０４を操作すると、デジタルスチルカメラ１０１は記録モードに移行する。この記録モードにおいては、図３（ｃ）に示すように、画面３０２上に外界の映像（画像）３２１が表示される。そして、記録モードにおける画面３０２には、撮影ボタン３２２及びインデックスモードボタン３１２が表示される。撮影ボタン３２２を操作すると、画面３０２上の映像３２１が記録媒体１２０に符号化画像データとして保存される。
【００３３】
図４は図１に示すデジタルスチルカメラ１０１を用いて撮影を行う際の手順を説明するための図である。そして、図４（ａ）は、デジタルスチルカメラ１０１と被写体４０２との関係を示す図であり、図４（ｂ）は、カメラレンズ４１３と被写体との関係を上方から示す図である。また、図４（ｃ）は、タッチパネル２０５に表示された画面を示す図である。
【００３４】
図４（ａ）において、デジタルスチルカメラ１０１に備えられたレンズは撮影方向４０５に向けられているものとする。また、撮影方向４０５と被写体（人物）４０２の方向との間のなす角度は符号４０３で示されている。デジタルスチルカメラ１０１には距離センサー４０４（図１で説明した距離検出映像入力部１０５）が備えられている。そして、この距離センサー４０４によってデジタルスチルカメラ１０１と被写体（人物）４０２との距離が計測される。
【００３５】
図４（ｂ）において、いま、デジタルスチルカメラ１０１において、被写体（人物）４１１及び４１２を撮影しようとする。この際、カメラレンズ４１３の方向、つまり、撮影方向は符合４１５で示す方向であるとする。そして、被写体（人物）４１１の方向と撮影方向４１５とのなす角度は符号４１４で示す角度（ここでは、右３０度）であるとする。また、被写体（人物）４１２と撮影方向４１５とのなす角度は左４０度であるとする。
【００３６】
この場合、図４（ａ）に示す距離センサー４０４によって被写体４１１までの距離を計測するとする。ここで、被写体（人物）４１１はカメラレンズ４１３から１０００ｃｍ離れているものとする。また、被写体（人物）４１２はカメラレンズ４１３から３６０ｃｍ離れているものとする。
【００３７】
図４（ｂ）に示す状況を撮影すると、タッチパネル１０５には図４（ｃ）に示す画面４２１が表示される。ここで、図示の画面４２１は横１２８０ピクセル、縦７２０ピクセルの静止画であるものとする。なお、符号４２２は画面４２１の座標原点である。そして、画面４２１には被写体（人物）４１２が人物画像４２３として表示され、被写体（人物）４１１が人物画像４２４として表示される。
【００３８】
ここでは、人物画像４２３について顔認識が行われて顔切り出し枠情報４２５が得られる。そして、この顔切り出し枠情報４２５を用いて顔画像（単に顔ともいう）を一覧表示するインデックス表示が行われる。顔切り出し枠情報４２５を得る際には、破線で示す切り出し枠を切り出す。この切り出し枠の左上の位置を（Ｘ、Ｙ）＝（１２８ピクセル、２００ピクセル）とし、切り出し枠のサイズを、Ｗ＝１００ピクセル、Ｈ＝１００ピクセルとする。
【００３９】
同様にして、被写体画像４２４について顔認識が行われて顔切り出し枠情報４２６が得られる。そして、この顔切り出し枠情報４２６を用いて顔画像を一覧表示するインデックス表示が行われる。顔切り出し枠情報４２６を得る際には、破線で示す切り出し枠を切り出す。この切り出し枠の左上の位置を（Ｘ、Ｙ）＝（１１００ピクセル、８０ピクセル）とし、切り出し枠のサイズを、Ｗ＝６０ピクセル、Ｈ＝６０ピクセルとする。
【００４０】
図５は、図１に示すデジタルスチルカメラ１０１において顔認識の結果得られたメタデータの一例を示す図である。
【００４１】
図５を参照すると、図１に示すメタデータ生成部１１６は、上述のように顔切り出し情報４２５及び４２６を得た後、これら顔切り出し情報４２５及び４２６を数値情報であるメタデータとする。このメタデータは画像データに含まれるパラメータである。例えば、画像データがＪＰＥＧ（Ｊｏｉｎｔ  Ｐｈｏｔｏｇｒａｐｈｉｃ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）であれば、当該画像データ中に含むことができるＥＸＩＦ（Ｅｘｃｈａｎｇｅａｂｌｅ  ｉｍａｇｅ  ｆｉｌｅ  ｆｏｒｍａｔ）という情報がメタデータに相当する。
【００４２】
図５に示すメタデータは、顔ＩＤ（顔を識別する番号）、デジタルスチルカメラ１０１からの直線距離（ｃｍ）、撮影方向と被写体（人物）との角度、画像中の顔の位置、及び画像中の顔のサイズを有している。そして、このメタデータは、例えば、図１に示す記録媒体１２０に記録された符号化画像データに付加される。
【００４３】
なお、撮影方向４１５と被写体（人物）４１１又は４１２の方向とのなす角度４１４は、カメラレンズ４１３のズーム倍率、そして、人物画像４２３又は４２４と撮影画面の中央とのずれ（距離）に応じて、予め設定された角度一覧テーブルから取得される。
【００４４】
図６は、図１に示すデジタルスチルカメラ１０１で用いられる角度一覧テーブルの一例について説明するための図である。そして、図６（ａ）は被写体（人物）とカメラ視野との関係を示す図であり、図６（ｂ）はズーム１．０の場合にタッチパネル１０２に表示される画面を示す図である。また、図６（ｃ）はズーム１．５の場合にタッチパネル１０２に表示される画面を示す図である。
【００４５】
図６（ａ）において、いま、カメラレンズ６００の視野に、被写体（人物）６０１〜６０４が位置するものとする。被写体（人物）６０１はカメラレンズ６００の撮影方向６１０に対して左４０度の方向に存在し、被写体（人物）６０２、６０３、及び６０４は撮影方向６１０に対して右３０度の方向に存在する。そして、被写体（人物）６０２、６０３、及び６０４のなかでは、被写体（人物）６０２がカメラレンズ６００にもっとも近い位置に存在する。また、矢印６１１で示す範囲は、ズーム倍率ｘ１．０において撮影できる視野である。矢印６１２で示す範囲は、ズーム倍率ｘ１．５において撮影できる視野である。
【００４６】
図６（ａ）に示す状況において、ズーム倍率ｘ１．０で撮影を行うと、タッチパネル１０２には図６（ｂ）に示す画面が表示される。一方、図６（ａ）に示す状況においてズーム倍率ｘ１．５で撮影を行うと、タッチパネル１０２には図６（ｃ）に示す画面が表示される。ズーム倍率ｘ１．０とズーム倍率ｘ１．５とでは視野が異なるので、図６（ａ）に示す被写体（人物）６０１は、ズーム倍率ｘ１．５の際には視野に入らない。
【００４７】
符号６２０は撮影方向６１０を基準とする視野の最大幅であり、この最大幅を”１００”として各被写体（人物）と撮影方向６１０からのずれ位置を正規化して数値化する。例えば、被写体（人物）６０２、６０３、及び６０４のずれ位置６２１は”６０”であるとする。
【００４８】
図７は図１に示すデジタルスチルカメラ１０１で用いられる角度一覧テーブルの一例を示す図である。
【００４９】
図６及び図７を参照すると、図６（ａ）〜（ｃ）に関連して説明したように、ずれ位置６２１は”６０”であるので、ズームｘ１．０とずれ位置６２１＝”６０”とから求められる被写体（人物）６０２〜６０４と撮影方向６１０との角度は３０度となる。このようにして、ズーム倍率毎にずれ位置と角度との関係を対応付けた角度一覧テーブルが生成される（図７参照）。
【００５０】
図８〜図１１はそれぞれ図１に示す記録媒体１２０に保存された画像データの例を説明するための図である。そして、図８（ａ）〜図１１（ａ）はそれぞれ記録媒体に保存された画像データの例を示す図であり、図８（ｂ）〜図１１（ｂ）は当該画像データを得た撮影状況を示す図である。なお、図８（ａ）〜図１１（ａ）においては、記録媒体１２０に記録された画像データを画面表示した状態が示されている。
【００５１】
いま、図１に示すデジタルスチルカメラ１０１に装着された記録媒体１２０には、図８（ａ）〜図１１（ａ）に示す４枚の静止画像データが記録されているものとする。図８（ａ）においては、画面８０１には被写体である人物画像８０２及び８０３が写っており、人物画像８０２は人物画像８０３よりも大きい。また、人物画像８０３及び８０２は、画面８０１の中心を基準としてそれぞれ左右に配置されている。
【００５２】
図８（ａ）に示す画像データは、図８（ｂ）に示す撮影状況において得られたものである。カメラレンズ８００の撮影方向に対して、人物８０２は右側に位置し、人物８０３は左側に位置している。そして、人物８０２は人物８０３よりもカメラレンズ８００に近い位置にいる。このような撮影状況下で撮影すると、図８（ａ）に示す画像データが得られることになる。
【００５３】
図９（ａ）においては、画面９０１には被写体である人物画像９０２及び９０３が写っており、人物画像９０３は人物画像９０２よりも大きい。また、人物画像９０３及び９０２は、画面９０１の中心を基準としてそれぞれ左右に配置されている。
【００５４】
図９（ａ）に示す画像データは、図９（ｂ）に示す撮影状況において得られたものである。カメラレンズ９００の撮影方向に対して、人物９０２は右側に位置し、人物９０３は左側に位置している。そして、人物９０３は人物９０２よりもカメラレンズ９００に近い位置にいる。このような撮影状況下で撮影すると、図９（ａ）に示す画像データが得られることになる。
【００５５】
図１０（ａ）においては、画面１００１には被写体である人物画像１００２、１００３、及び１００４が写っており、人物画像１００３が最も大きく、次に人物画像１００２が大きく、人物画像１００４が最も小さい。また、人物画像１００２及び１００４は、画面１００１の中心を基準としてそれぞれ右に配置されている。そして、人物画像１００３は、画面１００１の中心を基準として左に配置されている。さらに、人物画像１００４は人物画像１００２よりも画面の中心に近い位置にいる。
【００５６】
図１０（ａ）に示す画像データは、図１０（ｂ）に示す撮影状況において得られたものである。カメラレンズ１０００の撮影方向に対して、人物１００２及び１００４は右側に位置し、人物１００３は左側に位置している。そして、人物１００３がカメラレンズ１０００に最も近い位置にいる。また、人物１００４はカメラレンズ１０００に最も遠い位置にいる。このような撮影状況下で撮影すると、図１０（ａ）に示す画像データが得られることになる。
【００５７】
図１１（ａ）においては、画面１１０１には被写体である人物画像１１０２、１１０３、及び１１０４が写っており、人物画像１１０３及び１１０４は並んでいる。そして、人物画像１１０２が最も小さい。また、人物画像１１０３及び１１０４は、画面１１０１の中心を基準として左に配置されている。人物画像１１０２は、画面１１０１の中心を基準として右に配置されている。さらに、人物画像１１０４は人物画像１１０３よりも画面の中心に近い位置にいる。
【００５８】
図１１（ａ）に示す画像データは、図１１（ｂ）に示す撮影状況において得られたものである。カメラレンズ１１００の撮影方向に対して、人物１１０３及び１１０４は左側に位置し並んで立っている。人物１１０２は左側に位置している。そして、人物１１０２がカメラレンズ１１００から最も遠い位置にいる。このような撮影状況下で撮影すると、図１１（ａ）に示す画像データが得られることになる。
【００５９】
続いて、顔検索を行う際の動作について説明する。図１２は図１に示すデジタルスチルカメラ１０１において顔検索モードにおける動作を説明するための図である。そして、図１２（ａ）は、顔選択を説明するための図であり、図１２（ｂ）は顔検索モードにおける顔枠の表示を説明するための図である。
【００６０】
図１及び図１２を参照して、いまユーザーが前述したインデックス画面から所望の画像を選択したとする。これによって、全体制御部１１４はカメラ基本部（以下単に基本部という）１１５を制御して、記録媒体１２０に記録された当該画像に対応する画像データ（符号化画像データ）を読み出す。これによって、基本部１１５は前述したように、画像データを画像として画面１２０１（つまり、タッチパネル）上に表示する。図示の例では、画面１２０１には人物画像１２０４及び１２０５が表示されている。
【００６１】
この際、全体制御部１１４は、基本部１１５を制御して画面１２０１に顔検索ボタン１２０２を表示するとともに、インデックスボタン（ＩＮＤＥＸ）１２０３を表示する（図１２（ａ）参照）。そして、顔検索ボタン１２０２をタッチすると、全体制御部１１４は当該タッチを、タッチ状態検出部１１３を介して知り、顔検索モードに移行する。なお、インデックスボタン１２０３はインデックス画面に戻る場合にタッチされる。
【００６２】
顔検索モードに移行すると、全体制御部１１４は、基本部１１５を制御して、図１２（ｂ）に示す画面１２１０をタッチパネル１０２の表示部１０３に表示する。この際、メタデータを有する顔画像に枠を表示する。ここでは、人物画像１２０４及び１２０５の顔がそれぞれ枠１２１１及び１２１２で囲まれる。
【００６３】
いま、ユーザーが枠１２１１を選択するため、当該枠１２１１を指１２１３でタッチすると、タッチ状態検出部１１３によって当該タッチが検出されて、全体制御部１１４は基本部１１５を制御して枠１２１１を強調して表示する（このことは、枠１２１１に強調するためのマークが付されていることに相当する）。そして、全体制御部１１４は次の画面の表示制御を行う。
【００６４】
図１３は図１に示すデジタルスチルカメラ１０１において顔検索インデックスの生成を説明するための図である。そして、図１３（ａ）は顔検索インデックスの生成開始を示す図であり、図１３（ｂ）は顔検索インデックスの生成完了を示す図である。また、図１３（ｃ）は顔検索インデックスの生成が完了した後、顔画像の選択を示す図である。
【００６５】
図１及び図１３を参照して、図１２に関連して説明したようにユーザーが枠１２１１をタッチすると、全体制御部１１４は顔検索インデックスの生成を開始する。まず、全体制御部１１４は基本部１１５を制御して、ユーザーが選択した人物画像１２０４が記録媒体１２０に記録された他の画像データに存在するかを調べる。
【００６６】
この際、タッチパネル１０２の表示部１０３には、図１３（ａ）に示す顔検索結果画面１３２１が表示される。この顔検索結果画面１３２１においては、「サーチ中」という表示体１３２２が表示され、これによって、全体制御部１１４が記録媒体１２０に記録された画像データを検索していることを示している。
【００６７】
また、この顔検索結果画面１３２１においては、その左下隅に、ユーザーが選択した顔画像（つまり、検索対象）を含む枠１３２３（キー顔）が表示される。この際、ユーザーが選択したことを示すため、当該枠１３２３（キー顔）は強調されて表示される。さらに、顔検索結果画面１３２１には、スケール１３２４が表示され、後述するように、このスケール１３２４によって選択した顔画像（キー顔）と他の顔画像（他の顔）との相対距離が示される。
【００６８】
図１４は、図１に示すデジタルスチルカメラと被写体（人物）との位置関係（相対的方向）及び距離（相対距離）の算出を説明するための図である。
【００６９】
図１４に示すように、いま被写体である人物１４０２及び１４０３とカメラレンズ１４０１との距離がそれぞれＬａ及びＬｂであるとする。また、カメラレンズ１４０１及び人物１４０２を結ぶ線分とカメラレンズ１４０１及び人物１４０３を結ぶ線分とのなす角度がθであるとする。この際、人物１４０２及び１４０３間の距離Ｌは、次の式（１）で示すことができる。
【００７０】
Ｌ＝｛Ｌａ２＋Ｌｂ２−２×Ｌａ×Ｌｂ×ｃｏｓθ｝１／２        （１）
【００７１】
再び図１及び図１３を参照して、全体制御部１１４の制御下において、メタデータ解析代表画生成部１０６は、ユーザーが指定した顔画像（キー顔）と同一の人物画像を含むと判定した画像データから他の顔画像を抜き出す。そして、メタデータ解析代表画生成部１０６は当該顔画像を枠１３３１で囲んで検索結果画面１３２１（検索画像）に表示する。つまり、メタデータ解析代表画生成部１０６は、記録媒体１２０に記録された顔画像１３２３と同一の顔画像を記録媒体１２０から抽出することになる。そして、図１３（ｂ）に示すように、検索結果画面１３２１には、顔検索の終了を示す表示体１３３２である「完了」が表示される。
【００７２】
ところで、顔画像（つまり、代表画）を生成する際、顔画像の数が所定の数より多い場合には、メタデータ解析代表画生成部１０６は、次のいずれかの基準（所定の基準）に応じて代表画を表示するようにしてもよい。（１）画像コンテンツ記録日時が最近のものから表示する。（２）画像コンテンツ記録日時が過去のものから表示する。（３）画像コンテンツ記録日時が所定の期間うちにあるものを表示する。（４）顔画像の画像サイズが大きいものから表示する。（５）第１の顔画像（つまり、キー顔である顔画像１３２３）との距離が近い顔画像から表示する。
【００７３】
さらに、顔画像１３２３からの距離を入力して、顔画像を表示する際に距離に応じた制限を設けるようにしてもよい。つまり、キー顔からの相対距離が所定の距離以下の他の顔のみを表示するようにしてもよい。
【００７４】
図１３（ｂ）に示す検索結果画面１３２１において、ユーザーは、注目する顔画像（代表画）選択することができる。いま、ユーザーが検索結果画面１３２１において最も上側に位置する顔画像１３３１に関心があるとする。ユーザーが指１３４０で当該顔画像１３３１をタッチすると（図１３（ｃ）参照）、全体制御部１１４は次の処理を実行する。
【００７５】
図１５は図１３で説明した顔画像のタッチに応じた処理を説明するための図である。そして、図１５（ａ）は選択した顔画像を含む画像の表示を示す図であり、図１５（ｂ）は選択した顔画像に付随するメタデータの編集を示す図である。また、図１５（ｃ）は選択した顔画像をキーとする再検索を示す図である。
【００７６】
図１５（ａ）に示すように、顔画像１３３１がタッチされると、全体制御部１１４は、基本部１１５を制御して、当該顔画像を含む画像を記録媒体１２０からサーチして、その画像を小画面１５６１に表示する。これによって、少なくとも顔画像１３２３及び当該顔画像１３３１が存在する画像を表示することができる。
【００７７】
また、図１５（ｂ）に示すように、顔画像１３３１がタッチされると、全体制御部１１４は基本部１１５を制御して、小画面１５６１にメッセージを表示するようにしてもよい。ここでは、タッチした顔画像１３３１のメタデータの編集に関するメッセージが表示される（つまり、メタデータ編集画面が表示されることになる）。図示の例では、メッセージとして「この顔に関するメタデータを消去しますか？」が表示される。
【００７８】
これによって、顔画像１３２３が当該顔画像１３３１とまったく関係ない他人であった場合には、そのメタデータを削除する等のメタデータ編集を行うことができる。
【００７９】
さらに、図１５（ｃ）に示すように、顔画像１３３１がタッチされると、全体制御部１１４は基本部１１５を制御して、小画面１５７１に再検索メッセージを表示するようにしてもよい。ここでは、タッチした顔画像１３３１の再検索に関するメッセージが表示される。図示の例では、再検索メッセージとして「この顔をキー顔として再検索しますか？」が表示される。これによって、当該顔画像１３３１をキー顔画像として設定し、インデックス画面を再構築することができる。
【００８０】
図１６は、図１に示すデジタルスチルカメラ１０１の顔検索動作を説明するためのフローチャートである。
【００８１】
図１及び図１６を参照して、いまユーザーが操作部１０４を操作すると、全体制御部１１４は当該操作が顔検索モードに該当するか否かについて判定する（ステップＳ１６０１）。そして、顔検索モードでないと（ステップＳ１６０１において、ＮＯ）全体制御部１１４は顔検索処理を行わない（終了）。
【００８２】
一方、顔検索モードであると（ステップＳ１６０１において、ＹＥＳ）、全体制御部１１４は基本部１１５を制御して顔検索を行った結果である顔検索インデックスを生成する。ここで、顔検索インデックスとは、図１２（ａ）で説明した顔検索ボタン１２０２をタッチした際に表示部１０３に表示されるインデックス画面（顔検索インデックス画面）である。
【００８３】
続いて、全体制御部１１４はキー顔が選択されたか否かを検出する（ステップＳ１６０２）。ここでは、ユーザーは第１の顔画像としてキー顔を選択することになる。キー顔が選択されないと（ステップＳ１６０２において、ＮＯ）、全体制御部１１４はステップＳ９０１に戻って処理を続行する。
【００８４】
キー顔が選択されると（ステップＳ１６０２において、ＹＥＳ）、全体制御部１１４は基本部１１５を制御して、インデックス画面を初期化して表示し、顔検索を開始する（ステップＳ１６０３）。そして、メタデータ解析代表画生成部１０６が当該キー顔に付加されたメタデータを解析して抽出する（ステップＳ１６０４）。
【００８５】
その後、メタデータ解析代表画生成部１０６は記録媒体１２０に記録された全ての画像コンテンツを検索したか否かを確認する（ステップＳ１６０５）。つまり、メタデータ解析代表画生成部１０６は画像ファイル中の全ての画像コンテンツを検索したか否かを確認する。全ての画像コンテンツを検索していると（ステップＳ１６０５において、ＮＯ）、全体制御部１１４は処理を終了する。
【００８６】
一方、全ての画像コンテンツの検索が終了していないと（ステップＳ１６０５において、ＹＥＳ）、メタデータ解析代表画生成部１０６は、記録媒体１２０から次の画像コンテンツを読み込んで、当該画像コンテンツのメタデータを調べる（ステップＳ１６０６）。そして、メタデータ解析代表画生成部１０６は、当該画像コンテンツにキー顔が含まれているか否かを判定する（ステップＳ１６０７）。
【００８７】
当該画像コンテンツにキー顔が含まれていないと（ステップＳ１６０７において、ＮＯ）、メタデータ解析代表画生成部１０６はステップＳ１６０５に戻って処理を続行する。
【００８８】
当該画像コンテンツにキー顔が含まれていると（ステップＳ１６０７において、ＹＥＳ）、メタデータ解析代表画生成部１０６は、当該キー顔と他の顔との相対距離及び相対方向を計算する（ステップＳ１６０８）。メタデータ解析代表画生成部１０６は相対距離及び相対方向に応じて画像コンテンツに含まれる顔画像を切り出す。そして、メタデータ解析代表画生成部１０６は当該顔画像を代表画として顔検索インデックスに貼り付ける（ステップＳ１６０９）。その後、メタデータ解析代表画生成部１０６は、ステップＳ１６０５に戻って処理を続行する。
【００８９】
続いて、図１３（ｂ）で説明した顔検索インデックスの表示をする際における他の手法について説明する。
【００９０】
図１７は図１に示すデジタルスチルカメラ１０１で生成される顔検索インデックスの他の例を説明するための図である。
【００９１】
図１７を参照すると、図示の顔検索インデックスにおいては、顔画像が二次元座標上に配置されている。つまり、表示部１０３に表示される検索結果画面１７０１において、二次元座標が規定されている。当該検索結果画面１７０１では、ユーザーが選択した顔画像の枠１７０２が二次元座標の原点に配置される（枠１７０２は強調表示される）。
【００９２】
また、二次元座標の横軸１７０３は、顔画像の枠１７０２を原点として当該顔画像から左右方向の距離を表し、縦軸１７０４は原点からの遠近方向の距離を表している。つまり、検索結果画面１７０１において、その下側はデジタルスチルカメラ１０１に近いことを示しており、その上側はデジタルスチルカメラ１０１に対して遠いことを示している。そして、検索結果画面１７０１において、その右側は顔画像の枠１７０２の右側を示しており、その左側は顔画像の枠１７０２の左側を示している。このようにして、図１７に示す検索結果画面１７０１では、顔画像の枠１７０２画面の中央に配置して、他の顔画像の枠１７０５を当該枠１７０２の周囲に配置して、枠１７０２と枠１７０５との位置関係を示す位置情報が表示されることになる。
【００９３】
図１７に示すように、二次元空間に顔の枠１７０２及び１７０５を配置するようにすれば、顔画像の枠１７０２を中心として周囲の状況が容易に理解できるようになる。この結果、特定の人物と当該人物に関連のある顔画像の検索性を向上することができる。
【００９４】
上述の例では、デジタルスチルカメラ１０１において顔画像を検索する例について説明したが、次にデジタルビデオカメラにおいて顔画像を検索する例について説明する。
【００９５】
近年、デジタルビデオカメラにおいては顔情報を備える動画が記録される。デジタルビデオカメラにおいては、記録開始（撮影開始）から記録停止（撮影停止）までを１シーンという単位として動画ファイルを記録する。この動画ファイルを一覧表示する際には、その内容を分かりやすくするためサムネールと呼ばれる画像（以下サムネール画像と呼ぶ）が添付される。サムネール画像は動画ファイルの先頭に位置する画像を縮小したものが一般的であるが、ユーザーはサムネール画像を動画ファイル中の任意の画像とすることができる。ここでは、サムネール画像を、上述した顔検索に用いる画像としてとして扱う。このようにサムネール画像を顔検索に用いる画像とすれば、動画像ファイルについても前述の顔検索インデックス画面の対象とすることができる。
【００９６】
図１８は、デジタルビデオカメラで撮影した動画の１シーンを示す図である。そして、図１８（ａ）は再生直後の動画を示す図であり、図１８（ｂ）は再生開始後１８０秒経過した動画を示す図である。ここでは、この１シーンは３分間であるものとする。
【００９７】
図１８を参照すると、いま、動画ファイル（動画像ファイルともいう）の先頭画像が画面（以下先頭画面と呼ぶ）１８０１で表示されているものとする。先頭画面１８０１には、先頭画面からの経過時間１８０８が表示されている。そして、先頭画面１８０１には人物画像１８０３及び１８０４が表示されている（図１８（ａ）参照）。
【００９８】
動画像ファイルを再生した際には、経過時間１８０８の経過とともに、画面中の人物画像が移動する。例えば、３分（１８０秒）経過すると、画面１８０２が表示されたとする。この画面１８０２においては、新たに人物画像１８９７が現われ、人物画像１８０３及び１８０４は、先頭画面１８０１と比べて移動していることがわかる（図１８（ｂ）参照）。
【００９９】
当該動画像ファイルにおいては、メタデータは次のようにして記録される。（１）動画ファイルを構成する全てのフレームに、顔とカメラとの距離情報及び時間情報（メタデータ）を記録する。（２）動画ファイルを構成するフレームのうち、数秒に１回程度顔とカメラとの距離情報及び時間情報（メタデータ）を記録する。
【０１００】
ここでは、動画ファイルを構成する全てのフレームにメタデータが記録されているとする。また、メタデータは次のいずれかの箇所に保存される。（１）動画ファイル中に埋め込む。（２）動画ファイルと別の管理ファイルに格納する。
【０１０１】
図１９は、図１８に示す動画ファイルにおいて人物画像の移動について説明するための図である。
【０１０２】
図１９において、横軸１９０１は動画シーンの経過時間を示し、縦軸１９０２は図１８に示す人物画像１８０３の顔をキー顔とした際の当該キー顔と他の人物画像の顔との相対距離を表す。ここで、符号１９０３で示す範囲は、動画シーンの撮影時間を表し、符号１９０４で示す範囲は動画シーンの中程の範囲（例えば、１：００〜２：００）を示している。
【０１０３】
実線で示す曲線１９０５は図１８に示す人物画像１８０４の顔と人物画像１８０３の顔（キー顔）との相対距離の時間変化を示している。この曲線１９０５から、キー顔と人物画像１８０４とは時間経過とともに近づいていったことがわかる。
【０１０４】
破線で示す曲線１９０６は、人物画像１８０７の顔とキー顔との相対距離の時間変化を示している。この曲線１９０６から、キー顔と人物画像１８０７は時間経過とともに一度近づいて、符号１９１３で示す時間で最短距離（符号１９１２で示す）になった後、互いに離れていったことがわかる。また、人物画像１８０７は動画シーンの途中から画面に登場して記録されたことになる。
【０１０５】
ここで、検索期間が範囲１９０３であるとすると、人物画像１８０４は、符号１９１４で示す時間においてキー顔に最も接近し、人物画像１８０７は、符号１９１３で示す時間においてキー顔に最も接近している。ここでは、キー顔に最も接近した際の相対位置関係を顔検索インデックスとして用いる。
【０１０６】
図２０はデジタルビデオカメラで撮影された動画シーンにおける顔検索インデックスの作成手順を説明するための図である。そして、図２０（ａ）はキー顔の選択を示す図であり、図２０（ｂ）はキー顔と類似する顔の検索開始を示す図である。また、図２０（ｃ）は顔検索インデックスの生成完了を示す図であり、図２０（ｄ）はユーザーの選択した顔に係る時間からの再生開始を示す図である。
【０１０７】
図２０（ａ）において、動画再生中の画面で、ユーザーは所望の人物画像１８０３をキーとしてその顔（キー顔）２００１をタッチする（つまり、選択する）。これによって、キー顔２００１には強調された枠が表示され、人物画像１８０４の顔２００２にも破線で示す枠が表示される。この際、動画シーンの再生時間（経過時間）は、００：１５であり、動画シーンの先頭から１５秒目のフレームでユーザーがキー顔を選択したことになる。
【０１０８】
デジタルビデオカメラのＣＰＵ（マイクロコンピュータ：図示せず）は、キー顔２００１と類似する顔を動画ファイルから検索して、顔検索インデックスの作成を開始する。
【０１０９】
図２０（ｂ）に示すように、ＣＰＵは、キー顔２００１を画面の左下隅（原点：相対位置＝０ｍ）に位置づけ、当該キー顔２００１を太線で示す枠で囲む。そして、ＣＰＵは画面上にサーチ中である旨の表示体２０１１を表示する。
【０１１０】
顔検索インデックスの作成が完了すると、ＣＰＵは検索結果画面を表示する。図２０（ｃ）に示すように、キー顔２００１に類似する顔（顔画像）２０２２及び２０２３が検索結果画面上に表示され、ここでは、相対距離が動画ファイル中でキー顔２００１に最も接近した位置に顔２０２２及び２０２３が表示される。
【０１１１】
図１９で説明した例では、顔２０２２は符合１９１３で示す時間にキー顔２００１に最も接近し、このときの距離は約符号１９１２で示す２ｍである。同様にして、顔２０２３は符号１２１４で示す時間にキー顔２００１に最も接近する。このときの距離は符号１２１１で示す４．５ｍである。よって、従って、図２０（ｃ）に示す検索結果画面では、顔２０２２及び２０２３の表示位置はそれぞれ２ｍ及び４．５ｍの位置に設定される。
【０１１２】
ユーザーが顔検索結果画面上で顔２０２２を指２０２５でタッチすると（選択すると）、ＣＰＵは当該顔２０２２がキー顔２００１に最も接近した時間（つまり、図１９に符号１９１３で示す時間）から動画ファイルの再生を実行する。この際、ＣＰＵは、図２０（ｄ）に示すように、タッチパネルの表示部上に小画面２０３２を表示して当該小画面２０３２上で動画の再生を行う。なお、表示部全体を用いて再生を行うようにしてもよい。
【０１１３】
上述の例では、動画ファイル（つまり、１シーン）の全体を対象として検索を行ったが、図１９に符号１２０４で示す範囲を指定して検索を行うようにしてもよい。さらには、キー顔と類似した顔を複数のシーンから検索して、複数のシーンにまたがって他の人物画像を検索するようにしてもよい。
【０１１４】
上述したように、本発明の実施の形態では、顔が表示されたインデックス画面から所望の人物の顔をキー顔として選択するだけで、当該人物の顔と一緒に写る他の人物の検索を容易に行うことができる。そして、キー顔の人物と他の人物の距離等の位置関係を容易に確認することもできるという効果もある。
【０１１５】
なお、上述の説明から明らかなように、全体制御部１１４及び基本部１１５が検索手段、算出手段、及び表示制御手段して機能することになる。
【０１１６】
以上、本発明について実施の形態に基づいて説明したが、本発明は、これらの実施の形態に限定されるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。
【０１１７】
例えば、上記の実施の形態の機能を表示制御方法として、この表示制御方法をデジタルスチルカメラ１０１に実行させるようにしてもよい。さらに、上述の実施の形態の機能を有するプログラムを表示制御プログラムとして、この表示制御プログラムをデジタルスチルカメラ１０１が備えるコンピュータに実行させるようにしてもよい。この際には、表示制御方法及び表示制御プログラムは、少なくとも検索ステップ、算出ステップ、及び表示制御ステップを備えることになる。
【０１１８】
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記録媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。この場合、そのプログラム、及び該プログラムを記憶した記憶媒体は本発明を構成することになる。
【０１１９】
上述した実施形態においては、本発明をデジタルカメラに適用した場合を例にして説明したが、これはこの例に限定されない。すなわち、本発明はパーソナルコンピュータやＰＤＡ、携帯電話端末や携帯型の画像ビューワ、プリンタ装置に設けられた印刷画像選択および確認のためのディスプレイ、デジタルフォトフレームなど、複数の画像を同時に表示するように制御可能な表示制御装置であれば適用可能である。
【符号の説明】
【０１２０】
１０１  デジタルスチルカメラ
１０２  タッチパネル
１０３  表示部
１０４  操作部
１０５  距離検出・映像入力部
１０６  メタデータ解析・代表画像生成部
１１３  タッチ状態検出部
１１４  全体制御部
１２０  記録媒体
【図１】
2011221844.tif 000003
【図２】
2011221844.tif 000004
【図３】
2011221844.tif 000005
【図４】
2011221844.tif 000006
【図５】
2011221844.tif 000007
【図６】
2011221844.tif 000008
【図７】
2011221844.tif 000009
【図８】
2011221844.tif 000010
【図９】
2011221844.tif 000011
【図１０】
2011221844.tif 000012
【図１１】
2011221844.tif 000013
【図１２】
2011221844.tif 000014
【図１３】
2011221844.tif 000015
【図１４】
2011221844.tif 000016
【図１５】
2011221844.tif 000017
【図１６】
2011221844.tif 000018
【図１７】
2011221844.tif 000019
【図１８】
2011221844.tif 000020
【図１９】
2011221844.tif 000021
【図２０】
2011221844.tif 000022