(57)【要約】【課題】動画内の人物などの顔に関する情報に有意な変化が生じたシーンを抽出して表示することができる撮像装置、再生装置、および再生プログラムを提供することを目的とする。【解決手段】複数のフレームから構成される動画データを生成する撮像手段２０１と、前記フレームに基づく画像を表示する表示手段２０４と、前記動画データに含まれる人間の顔に関する変化点を検出する顔検出手段２０７と、前記変化点に対応するフレームに関する情報を記録する記録手段２１２と、前記動画データの再生を指示する指示手段２１１と、前記指示手段２１１によって前記動画データの再生が指示されたときに、前記記録手段２１２に記録された前記変化点に対応するフレームに関する情報に基づいて、前記動画データを構成する複数のフレームのうち前記変化点に対応するフレームに基づく画像を前記表示手段に表示させる制御手段２０２と、を備える、ことを特徴とする。【選択図】図２
2011234180.tif 000002
【特許請求の範囲】
【請求項１】
複数のフレームから構成される動画データを生成する撮像手段と、
前記フレームに基づく画像を表示する表示手段と、
前記動画データに含まれる人間の顔に関する変化点を検出する顔検出手段と、
前記変化点に対応するフレームに関する情報を記録する記録手段と、
前記動画データの再生を指示する指示手段と、
前記指示手段によって前記動画データの再生が指示されたときに、前記記録手段に記録された前記変化点に対応するフレームに関する情報に基づいて、前記動画データを構成する複数のフレームのうち前記変化点に対応するフレームに基づく画像を前記表示手段に表示させる制御手段と、
を備える、
ことを特徴とする撮像装置。
【請求項２】
前記変化点は、
前記動画データに人間の顔が含まれない状態から含まれる状態への変化点である、
ことを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記変化点は、
前記動画データに含まれる人間の顔の表情の変化点である、
ことを特徴とする請求項１に記載の撮像装置。
【請求項４】
前記変化点は、
前記動画データに特定の人物の顔が含まれない状態から含まれる状態への変化点である、
ことを特徴とする請求項１に記載の撮像装置。
【請求項５】
前記顔検出手段は、
前記動画データに含まれる動物の顔に関する変化点を検出する、
ことを特徴とする請求項１に記載の撮像装置。
【請求項６】
複数のフレームから構成される動画データを再生する再生手段と、
前記フレームに基づく画像を表示する表示手段と、
前記動画データに含まれる人間の顔に関する変化点を検出する顔検出手段と、
前記変化点に対応するフレームに関する情報を記録する記録手段と、
前記動画データの再生を指示する指示手段と、
前記指示手段によって前記動画データの再生が指示されたときに、前記記録手段に記録された前記変化点に対応するフレームに関する情報に基づいて、前記動画データを構成する複数のフレームのうち前記変化点に対応するフレームに基づく画像を前記表示手段に表示させる制御手段と、
を備える、
ことを特徴とする再生装置。
【請求項７】
複数のフレームから構成される動画データを再生する再生手段と、
前記フレームに基づく画像信号を出力する出力手段と、
前記動画データに含まれる人間の顔に関する変化点を検出する顔検出手段と、
前記変化点に対応するフレームに関する情報を記録する記録手段と、
前記動画データの再生を指示する指示手段と、
前記指示手段によって前記動画データの再生が指示されたときに、前記記録手段に記録された前記変化点に対応するフレームに関する情報に基づいて、前記動画データを構成する複数のフレームのうち前記変化点に対応するフレームに基づく画像を前記出力手段に出力させる制御手段と、
を備える、
ことを特徴とする再生装置。
【請求項８】
前記変化点は、
前記動画データに人間の顔が含まれない状態から含まれる状態への変化点である、
ことを特徴とする請求項６または請求項７に記載の再生装置。
【請求項９】
前記変化点は、
前記動画データに含まれる人間の顔の表情の変化点である、
ことを特徴とする請求項６または請求項７に記載の再生装置。
【請求項１０】
前記変化点は、
前記動画データに特定の人物の顔が含まれない状態から含まれる状態への変化点である、
ことを特徴とする請求項６または請求項７に記載の再生装置。
【請求項１１】
前記顔検出手段は、
前記動画データに含まれる動物の顔に関する変化点を検出する、
ことを特徴とする請求項６または請求項７に記載の再生装置。
【請求項１２】
電子計算機を、
複数のフレームから構成される動画データを再生する再生手段と、
前記フレームに基づく画像を表示する表示手段と、
前記動画データに含まれる人間の顔に関する変化点を検出する顔検出手段と、
前記変化点に対応するフレームに関する情報を記録する記録手段と、
前記動画データの再生を指示する指示手段と、
前記指示手段によって前記動画データの再生が指示されたときに、前記記録手段に記録された前記変化点に対応するフレームに関する情報に基づいて、前記動画データを構成する複数のフレームのうち前記変化点に対応するフレームに基づく画像を前記表示手段に表示させる制御手段と、
して動作させる、
ことを特徴とする再生プログラム。
【請求項１３】
前記変化点は、
前記動画データに人間の顔が含まれない状態から含まれる状態への変化点である、
ことを特徴とする請求項１２に記載の再生プログラム。
【請求項１４】
前記変化点は、
前記動画データに含まれる人間の顔の表情の変化点である、
ことを特徴とする請求項１２に記載の再生プログラム。
【請求項１５】
前記変化点は、
前記動画データに特定の人物の顔が含まれない状態から含まれる状態への変化点である、
ことを特徴とする請求項１２に記載の再生プログラム。
【請求項１６】
前記顔検出手段は、
前記動画データに含まれる動物の顔に関する変化点を検出する、
ことを特徴とする請求項１２に記載の再生プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、動画のフレーム画像に人物などの顔が含まれているかどうかを検出する顔検出機能を備えた撮像装置、再生装置、および再生プログラムに関するものである。
【背景技術】
【０００２】
特許文献１には、記録媒体に記録されている動画像のコンテンツをスライドショー的に再生することにより、動画像のコンテンツの新しい楽しみかたをユーザに提供し、ユーザを満足させられる再生装置が記載されている。
【０００３】
特許文献１に記載の再生装置は、第２の画像再生手段が出力するフレームの画像を切り換える時間間隔を条件に、静止画像出力手段が出力するフレームの画像を抽出するので、音声再生手段が出力している音声にあった、フレームの画像を抽出し、出力することができる。
【０００４】
また、特許文献１に記載の再生装置は、第２の画像再生手段が出力するフレームの画像を、前後のフレームとは独立していて、単独で記録されている基本フレームの画像、例えばＭＰＥＧ２におけるＩ−Ｐｉｃｔｕｒｅ、としたので、そのフレームにかかる画像データのみ処理するだけでよい。したがって、装置本体にかかる負荷が抑えられるとともに、静止画像として出力するフレームの画像の画質を適正に保つことができる。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００７−６３４８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１に記載の再生装置は、第２の画像再生手段が出力するフレームの画像を切り換える時間間隔を条件に、静止画像出力手段が出力するフレームの画像を抽出するか、第２の画像再生手段が出力するフレームの画像を、前後のフレームとは独立していて、単独で記録されている基本フレームの画像としたので、動画内の人物などの顔に関する情報に有意な変化が生じたシーンを抽出して表示することはできない。
【０００７】
第２の画像再生手段が出力するフレームの画像を切り換える時間間隔や前後のフレームとは独立していて、単独で記録されている基本フレームは、動画内の人物などの顔に関する情報とは無関係に決定されるからである。
【０００８】
本発明は、前記課題を解決し、動画内の人物などの顔に関する情報に有意な変化が生じたシーンを抽出して表示することができる撮像装置、再生装置、および再生プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００９】
前記課題を解決するために、本発明の撮像装置は、複数のフレームから構成される動画データを生成する撮像手段と、前記フレームに基づく画像を表示する表示手段と、前記動画データに含まれる人間の顔に関する変化点を検出する顔検出手段と、前記変化点に対応するフレームに関する情報を記録する記録手段と、前記動画データのスライドショー再生を指示する指示手段と、前記指示手段によって前記動画データのスライドショー再生が指示されたときに、前記記録手段に記録された前記変化点に対応するフレームに関する情報に基づいて、前記動画データを構成する複数のフレームのうち前記変化点に対応するフレームに基づく画像を前記表示手段に表示させる制御手段と、を備える、ことを特徴とする。
【００１０】
また、本発明の再生装置は、複数のフレームから構成される動画データを再生する再生手段と、前記フレームに基づく画像を表示する表示手段と、前記動画データに含まれる人間の顔に関する変化点を検出する顔検出手段と、前記変化点に対応するフレームに関する情報を記録する記録手段と、前記動画データのスライドショー再生を指示する指示手段と、前記指示手段によって前記動画データのスライドショー再生が指示されたときに、前記記録手段に記録された前記変化点に対応するフレームに関する情報に基づいて、前記動画データを構成する複数のフレームのうち前記変化点に対応するフレームに基づく画像を前記表示手段に表示させる制御手段と、を備える、ことを特徴とする。
【００１１】
また、本発明の再生プログラムは、電子計算機を、複数のフレームから構成される動画データを再生する再生手段と、前記フレームに基づく画像を表示する表示手段と、前記動画データに含まれる人間の顔に関する変化点を検出する顔検出手段と、前記変化点に対応するフレームに関する情報を記録する記録手段と、前記動画データのスライドショー再生を指示する指示手段と、前記指示手段によって前記動画データのスライドショー再生が指示されたときに、前記記録手段に記録された前記変化点に対応するフレームに関する情報に基づいて、前記動画データを構成する複数のフレームのうち前記変化点に対応するフレームに基づく画像を前記表示手段に表示させる制御手段と、して動作させる、ことを特徴とする。
【発明の効果】
【００１２】
以上のように、本発明によれば、記録手段に記録された人間の顔に関する変化点に対応するフレームに関する情報に基づいて、前記動画データを構成する複数のフレームのうち前記変化点に対応するフレームに基づく画像を前記表示手段に表示させるので、動画内の人物などの顔に関する情報に有意な変化が生じたシーンを抽出して表示することができるという効果を奏する。
【図面の簡単な説明】
【００１３】
【図１】本発明の実施の形態に係るデジタルカメラ１００の外観図
【図２】本発明の実施の形態に係るデジタルカメラ１００のブロック図
【図３】記憶媒体２１２内のフォルダ構成を示す図
【図４】動画ファイルとフレーム位置情報の対応の一例を示す図
【図５】フレーム位置情報として記録されるデータの一例を示す図
【図６】本発明の実施の形態に係るデジタルカメラ１００の動画撮影動作を示すフローチャート
【図７】表情変化検出機能を備えたデジタルカメラ１００の動画撮影動作を示すフローチャート
【図８】被写体識別機能を備えたデジタルカメラ１００の動画撮影動作を示すフローチャート
【図９】表情変化検出機能と被写体識別機能を備えたデジタルカメラ１００の動画撮影動作を示すフローチャート
【図１０】本発明の実施の形態に係るデジタルカメラ１００のスライドショー再生動作を示すフローチャート
【図１１】本発明の実施の形態に係るデジタルカメラ１００のファイル構成の一例を示す図
【図１２】フレーム位置情報を利用したスライドショー再生で表示される代表画像を示す図
【図１３】フレーム位置情報を利用したマルチサムネイル再生で表示される代表画像を示す図
【発明を実施するための形態】
【００１４】
（実施の形態）
（１．外観）
以下、本発明の実施の形態に係るデジタルカメラについて、図面を参照しながら説明する。
【００１５】
図１は、本発明の実施の形態に係るデジタルカメラ１００の外観図である。図１（ａ）は、正面図であり、図１（ｂ）は、背面図である。本発明の実施の形態に係るデジタルカメラ１００は、ＡＶＣＨＤ規格によって規定された動画とＤＣＦ（Ｄｅｓｉｇｎ  ｒｕｌｅ  ｆｏｒ  Ｃａｍｅｒａ  Ｆｉｌｅ  ｓｙｓｔｅｍ）規格によって規定された静止画を記録できる。
【００１６】
デジタルカメラ１００の正面には、撮像光学系１０１とフラッシュ１０２が配されている。撮像光学系１０１は、被写体像をデジタルカメラ１００内の撮像素子に結像させる。フラッシュ１０２は、静止画撮影モードにおいて、暗所での撮影の場合に、閃光を発して撮影光量の不足を補う。
【００１７】
デジタルカメラ１００の上面には、シャッターボタン１０３が配されている。静止画撮影モードにおいて、シャッターボタン１０３を押下すると、撮像素子に結像した光学像に基づく電気信号が静止画ファイルとしてメモリカードなどの記録媒体に記録される。
【００１８】
また、動画撮影モードにおいて、シャッターボタン１０３を押下すると、撮像素子に結像した光学像に基づく電気信号が、順次、動画ファイルとして記録媒体に記録される。再度、シャッターボタン１０３を押下すると、動画ファイルの記録が終了する。同時に、記録媒体に管理ファイルが存在しない場合は、管理ファイルが記録媒体に新たに作成され、記録媒体に管理ファイルが既に存在する場合は、管理ファイルが更新される。管理ファイルには、撮影時間や動画ファイルのプロファイル情報などが記載される。
【００１９】
デジタルカメラ１００の下面には、記録媒体を装着するスロット１０８が配されている。デジタルカメラ１００を用いて静止画および動画を撮影した場合、静止画ファイルと動画ファイルは、記録媒体内の異なるフォルダに格納される。また、再生モードにおいては、記録媒体に記録された静止画ファイルに基づく静止画や動画ファイルに基づく動画を液晶モニター１０４に表示する。
【００２０】
デジタルカメラ１００の背面には、液晶モニター１０４、モードダイヤル１０５、各種操作ボタン１０６が配されている。液晶モニター１０４には、静止画撮影モードまたは動画撮影モードのとき、撮像素子に結像した光学像に基づく画像が、順次、表示される。したがって、液晶モニター１０４に表示された画像を確認しながら撮影のための構図を決定することができる。また、液晶モニター１０４は、再生モードのとき、記録媒体に記録された静止画ファイルに基づく静止画や動画ファイルに基づく動画を表示することができる。
【００２１】
モードダイヤル１０５は、静止画撮影モード、動画撮影モードおよび再生モードを切り替えるためのダイヤル式のスイッチである。モードダイヤル１０５を操作することによって、デジタルカメラ１００の動作モードを決定することができる。デジタルカメラ１００の動作モードには、静止画撮影モード、動画撮影モードおよび再生モードがある。
【００２２】
静止画撮影モードは、シャッターボタン１０３を押下することにより、撮像素子に結像した光学像に基づく電気信号を静止画ファイルとして記録媒体に記録する動作モードである。静止画撮影モードは、さらに全自動撮影モード、プログラム撮影モード、シャッター速度優先撮影モード、絞り優先撮影モード、シーン別撮影モードに細分される。
【００２３】
動画撮影モードは、シャッターボタン１０３を押下してから、再度、シャッターボタン１０３を押下するまでの間、撮像素子に結像した光学像に基づく電気信号を、順次、動画ファイルとして記録媒体に記録する動作モードである。
【００２４】
再生モードは、記録媒体に記録された静止画ファイルに基づく静止画や動画ファイルに基づく動画を液晶モニター１０４に表示する動作モードである。また、静止画ファイルのサムネイル画像と動画ファイルの代表画像を示すサムネイル画像を混在させて、撮影日時順に並べて液晶モニター１０４に表示することができる。液晶モニター１０４に表示されたサムネイル画像を選択することによって、表示を切り替えることができる。すなわち、静止画ファイルのサムネイル画像が選択された場合は、静止画ファイルに基づく静止画が液晶モニター１０４に表示され、動画ファイルの代表画像を示すサムネイル画像が選択された場合は、動画ファイルに基づく動画が再生される。また、静止画ファイルと動画ファイルの代表画像を混在させて、撮影日時順に並べて、所定の時間間隔ごとに順番に液晶モニター１０４に表示する、いわゆるスライドショー再生をすることができる。動画ファイルの代表画像がスライドショー再生された場合は、所望の代表画像が表示されているときに、各種操作ボタン１０６を操作することで、その代表画像以降の動画ファイルに基づく動画を再生することができる。
【００２５】
各種操作ボタン１０６は、液晶モニター１０４にメニュー画面を表示するためのメニューボタン１０６ｂ、メニュー画面における項目を選択するために上下左右にカーソルを移動させる上下左右ボタン１０６ａ、メニュー画面においてカーソルが存在する項目の決定を指示する決定ボタン１０６ｂ（メニューボタンと兼用）、液晶モニター１０４上のＯＳＤ（Ｏｎ  Ｓｃｒｅｅｎ  Ｄｉｓｐｌａｙ）表示項目を切り替えるための表示切替ボタン１０６ｃ、不要な静止画ファイルまたは動画ファイルの削除を指示する削除ボタン１０６ｄから構成される。動画ファイルが削除されると、これを受けて管理ファイルが更新される。
【００２６】
これらのボタンを操作することによって、静止画撮影モード、動画撮影モードおよび再生モードにおけるさらに詳細な設定をすることができる。すなわち、静止画撮影モードにおいては、露出補正、ホワイトバランス調整、フラッシュ１０２の発光に関する設定、顔検出機能に関する設定などを行うことができる。また、動画撮影モードにおいては、解像度やフレームレートなどを変更することができる。さらに、再生モードにおいては、液晶モニター１０４に表示された静止画の拡大や縮小、液晶モニター１０４に同時に表示するサムネイル画像の数の設定、記録媒体に記録された静止画ファイルや動画ファイルの検索などを行うことができる。
（２．構成）
図２は、本発明の実施の形態に係るデジタルカメラ１００のブロック図である。
【００２７】
本実施の形態に係るデジタルカメラ１００は、記録媒体２１２に、メモリカードを採用する。
【００２８】
操作手段２１１は、シャッターボタン１０３、各種操作ボタン１０６、モードダイヤル１０５から構成され、これらを通じてユーザの指示を制御手段２０２に出力する。
【００２９】
制御手段２０２は、操作手段２１１から出力されたユーザの指示にしたがって、撮像手段２０１、信号処理手段２０５、表示制御手段２０３、記録制御手段２０６を制御し、撮影、記録および再生などの処理を実行する。
【００３０】
表示手段２０４は、液晶モニター１０４から構成され、撮像素子に結像した光学像に基づく画像や、記録媒体に記録されている静止画ファイルや動画ファイルの再生画像、撮影や再生に関する設定を行うメニュー画面などを表示する。表示制御手段２０３は、表示手段２０４の表示を制御する。
【００３１】
撮像手段２０１は、ＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）などの撮像素子から構成され、制御手段２０２の指示にしたがって、光学像を電気信号に変換し、信号処理手段２０５に出力する。
【００３２】
信号処理手段２０５は、静止画撮影モードにおいて、撮像手段２０１から出力された電気信号に対して、ＪＰＥＧ圧縮などの圧縮処理を行い、圧縮された静止画ファイルを記録制御手段２０６に出力する。
【００３３】
また、信号処理手段２０５は、動画撮影モードにおいて、撮像手段２０１から、順次、出力される電気信号に対して、ＭＰＥＧ（Ｍｏｖｉｎｇ  Ｐｉｃｔｕｒｅ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）圧縮などの圧縮処理を行い、圧縮された動画ファイルを記録制御手段２０６に出力する。
【００３４】
さらに、信号処理手段２０５は、静止画撮影モードおよび動画撮影モードにおいて、撮像手段２０１から、順次、出力される電気信号を、ＹＣ信号などの表示手段２０４が表示できる信号に変換し、表示制御手段２０３に出力する。
【００３５】
加えて、信号処理手段２０５は、再生モードにおいて、記録制御手段２０６から出力される記録媒体２１２内の静止画ファイルを伸張し、表示制御手段２０３に出力する。また、記録制御手段２０６から出力される記録媒体２１２内の動画ファイルを伸張し、表示制御手段２０３に出力する。
【００３６】
顔検出機能を有効にしている場合、信号処理手段２０５は、各動作モードにおいて生成した静止画あるいは動画のフレーム画像の信号を、顔検出手段２０７に出力する。
【００３７】
顔検出手段２０７は、信号処理手段２０５から出力された静止画あるいは動画のフレーム画像に対して、顔情報の検出を行う。ここでいう顔情報の検出とは、パターン識別などのアルゴリズムにより、静止画あるいは動画のフレーム画像の中に人物などの顔画像が含まれているかどうか、顔画像の個数、顔画像の位置、顔画像の大きさ、顔画像の角度といった情報を検出することを指す。顔検出手段２０７は、これらの情報のうち少なくとも一つを検出することのできる顔検出機能を備える。また、顔検出手段２０７は、被写体識別機能を備えていてもよい。ここでいう被写体識別機能は、顔検出により得られた顔画像が、デジタルカメラ１００自体のもつ図示しない記憶手段や記録媒体２１２などに記録されているデータベースに登録されている被写体であるかどうかを検出することのできる機能を指す。あるいは、顔検出手段２０７は、表情変化検出機能を備えていてもよい。ここでいう表情変化検出機能は、顔検出により得られた顔画像から、人物などの表情が変化したかどうかを検出することのできる機能を指す。さらに、被写体識別機能と表情変化検出機能を両方とも備えていてもよい。
【００３８】
顔検出手段２０７の備える機能によって検出された情報は、静止画あるいは動画のフレーム画像に対する顔検出情報として、制御手段２０２の指示にしたがって、制御手段２０２および記録制御手段２０６に出力される。
【００３９】
記録制御手段２０６は、信号処理手段２０５から出力された静止画ファイルまたは動画ファイルを記録媒体２１２に記録する。また、制御手段２０２の指示にしたがって、信号処理手段２０５および顔検出手段２０７から出力された情報を元に、管理ファイルを記録媒体２１２に記録する。さらに、制御手段２０２の指示にしたがって、記録媒体２１２から静止画ファイルまたは動画ファイルを読み出し、信号処理手段２０５に出力する。加えて、制御手段２０２の指示にしたがって、記録媒体２１２内の管理ファイルを読み出し、制御手段２０２に出力する。
（３．ファイル構成）
（３−１．フォルダ構成）
図３は、記憶媒体２１２内のフォルダ構成を示す図である。フォルダ名は四角によって囲まれているが、ファイル名は四角によって囲まれていない。ＲＯＯＴフォルダの下位には、ＤＣＩＭフォルダとＰＲＩＶＡＴＥフォルダが作成されている。
【００４０】
ＤＣＩＭフォルダは、ＤＣＦ規格によって規定されたフォルダである。ＤＣＩＭフォルダの下位には、１００＿ＰＡＮＡフォルダが作成されている。１００＿ＰＡＮＡフォルダは、ＤＣＦ規格に基づいて命名されたフォルダであって、静止画ファイルが格納される。Ｐ１０００００１．ｊｐｇファイルからＰ１００ｎｎｎｎ．ｊｐｇファイルは、ＤＣＦ規格に基づいて命名された静止画ファイルである（ｎｎｎｎ＝０００２〜９９９９）。静止画ファイルに対応する管理ファイルは、存在しない。
【００４１】
ＰＲＩＶＡＴＥフォルダの下位には、ＡＶＣＨＤフォルダが作成されている。ＡＶＣＨＤフォルダの下位には、ＢＤＭＶフォルダが作成されている。
【００４２】
ＢＤＭＶフォルダの下位には、ＳＴＲＥＡＭフォルダが作成されている。ＳＴＲＥＡＭフォルダには、動画ファイルが格納される。０００００．ｍｔｓファイルからＸＸＸＸＸ．ｍｔｓファイルは、動画ファイルである（ＸＸＸＸＸ＝００００１〜９９９９９）。
【００４３】
ＢＤＭＶフォルダに格納されるファイルとＢＤＭＶフォルダの下位のフォルダに格納されるファイルのうち、ＳＴＲＥＡＭフォルダに格納される動画ファイル以外のファイルは、管理ファイルの一例である。
【００４４】
管理ファイルの一例として、ＣＬＩＰＩＮＦフォルダに格納されるクリップ情報ファイルについて説明する。ＢＤＭＶフォルダの下位には、ＣＬＩＰＩＮＦフォルダが作成されている。ＣＬＩＰＩＮＦフォルダには、クリップ情報ファイルが格納される。０００００．ｃｐｉファイルからＸＸＸＸＸ．ｃｐｉファイルは、クリップ情報ファイルである。クリップ情報ファイルは、動画ファイルと一対一に対応し、対応する動画ファイルの撮影時間などの情報が記載されている。
【００４５】
ＢＤＭＶフォルダに格納されるＩＮＤＥＸ．ｂｄｍファイル、ＭＯＶＩＥＯＢＪ．ｂｄｍファイルおよびＰＬＡＹＬＩＳＴフォルダに格納される０００００．ｍｐｌファイルからＹＹＹＹＹ．ｍｐｌファイルについては説明を省略する。
（３−２．フレーム位置情報）
以下に、管理ファイルに記録されるフレーム位置情報について、例を挙げて説明する。図４は動画ファイルとフレーム位置情報の対応の一例を示す図である。また、図５はフレーム位置情報として記録されるデータの一例を示す図である。
【００４６】
管理ファイルには、フレーム位置情報として、再生位置情報、顔検出情報、参照画像の有無、管理番号などが記録されている。本例はあくまでも一例であり、これら以外の情報が記録されていてもよいし、ここで挙げた情報のうちのいくつかが記録されていなくても問題ない。
【００４７】
再生位置情報は動画ファイル内におけるフレームの位置を特定するための情報である。なお、再生位置情報としては、ＰＴＳ（Ｐｒｅｓｅｎｔａｔｉｏｎ  Ｔｉｍｅ  Ｓｔａｍｐ）情報のほか、動画の再生時間、動画の撮影時刻、フレーム番号、パケット数、ＧＯＰ（Ｇｒｏｕｐ  Ｏｆ  Ｐｉｃｔｕｒｅｓ）情報、ＤＴＳ（Ｄｅｃｏｄｉｎｇ  Ｔｉｍｅ  Ｓｔａｍｐ）情報、およびこれらの情報から算出される値を利用することもできる。
【００４８】
顔検出情報は顔検出手段２０７に備わる顔検出機能により検出された、顔画像の有無、検出された顔画像の個数、位置、大きさ、角度などを含む情報を指す。また、顔検出手段２０７が被写体識別機能を備える場合は、被写体識別機能によって検出された、被写体識別の成否、識別された被写体の識別番号や名称などを含む情報を記録してもよい。また、顔検出手段２０７が表情変化検出機能を備える場合は、表情変化検出機能によって検出された、表情変化の有無、検出された表情種別の識別番号あるいは名称などを含む情報を記録してもよい。
【００４９】
参照画像の有無は、再生位置情報の指し示すフレーム画像を、動画ファイルとは別に、静止画ファイルとして保存する場合に使用する。スライドショー再生やマルチサムネイル再生など、静止画の表示を主な用途とする場合には、この情報を元に、動画内のフレーム画像から生成した静止画の参照画像を代表画像として参照することで、高速な表示が可能である。
【００５０】
管理番号は再生位置情報と顔検出情報を管理するために割り振られる番号である。
【００５１】
ＰＴＳ情報は、動画ファイル内の各パケットに記録されるデータの表示時刻を指示するインデックス値であり、一般的に動画ファイル内のフレーム情報と一対一で割り当てられる。再生位置情報としてＰＴＳ情報を用いた場合、この数値を読み取ることで、動画ファイル内の参照したいフレームを特定することが可能である。その他の例として、再生位置情報として再生時間を利用する場合などは、フレームレートなどの情報を用いて基準となるフレームからの時間差を算出することで、参照したいフレームを特定することが可能である。
（４．動作）
（４−１．フレーム位置情報の記録動作）
（４−１−１．顔検出）
図６は、本発明の実施の形態に係るデジタルカメラ１００の動画撮影動作を示すフローチャートである。
【００５２】
本発明の実施の形態に係るデジタルカメラ１００は、顔検出機能が有効になっている場合、動画撮影モードで動画の撮影開始後に、信号処理手段２０５より出力された動画のフレーム画像に対して、顔検出手段２０７で顔検出を行う（Ｓ６００）。顔検出手段２０７の備える機能によって検出された顔検出情報は、制御手段２０２の指示にしたがって、制御手段２０２および記録制御手段２０６に出力される。
【００５３】
制御手段２０２は、顔検出手段２０７から出力された顔検出情報を元に、顔検出の結果を判定する（Ｓ６０１）。動画のフレーム画像から人物などの顔が１つ以上検出されていない場合は、制御手段２０２は、そのフレーム画像に対する判定処理を終了する。一方、動画のフレーム画像から人物などの顔画像が検出されている場合は、制御手段２０２は、顔検出手段２０７から出力された顔検出情報のもつ各値に対して閾値判定を行う（Ｓ６０２）。この閾値判定では、検出された顔画像の個数があらかじめ指定した個数に達しているか、顔画像の検出位置があらかじめ指定した範囲に収まっているか、顔画像の領域の大きさがあらかじめ指定した範囲に収まっているか、顔画像の角度があらかじめ指定した範囲に収まっているか、といった判定条件のうちいくつかを組み合わせて実施する。これらの判定が、時間あるいはフレーム数などを基準とした一定の期間以上連続で満たされた場合、フレーム位置情報を記録するためのフラグを有効にする。これらの判定の閾値に関するパラメータは、デジタルカメラ１００の設定などから変更できるようにしてもよい。
【００５４】
顔検出情報の閾値判定の結果、フレーム位置情報を記録するためのフラグが有効になっている場合（Ｓ６０３でＹＥＳ）は、動画内の人物などの顔に関する情報が変化したシーンであるとみなし、記録制御手段２０６は、制御手段２０２の指示にしたがって、信号処理手段２０５と顔検出手段２０７から出力された情報を元に、動画のフレーム位置情報を管理ファイルであるクリップ情報ファイルに記録する（Ｓ６０４）。このとき、動画のフレーム位置情報は、動画の撮影中は一時的にデジタルカメラ１００の図示しないワークメモリ上に出力し、撮影停止の際に管理ファイルであるクリップ情報ファイルに記録しても構わない。また、フレーム画像から静止画ファイルの参照画像を生成する場合は、フレーム位置情報とともに参照画像を記録する。
【００５５】
フレーム位置情報を記録するためのフラグが有効になっていない場合（Ｓ６０３でＮＯ）、あるいは検出された顔画像に対するフレーム位置情報の記録（Ｓ６０４）が終了した場合、同じフレーム画像から検出された顔画像が他にあるかどうかの判定を行う（Ｓ６０５）。検出された顔画像がまだある場合は、その顔画像に対してＳ６０２の閾値判定より同様の処理を繰り返す。
【００５６】
撮影停止操作が入力されるまで、制御手段２０２の指示にしたがって実行される顔検出の実行タイミングごとに、一連の処理を繰り返し実行する。
【００５７】
この構成では、動画撮影中に人物などの顔が特定の位置に検出されたフレーム、人物などがカメラに向かって近づくことで人物などの顔が特定大きさで検出されたフレーム、人物などの顔が特定の方向を向いたフレームなどのフレーム位置情報を管理ファイルであるクリップ情報ファイルに記録することとなる。
（４−１−２．表情変化検出）
なお、顔検出手段２０７は、動画のフレーム画像に人物などの顔が含まれているかどうかを検出する顔検出機能に加え、追加の機能を備えていてもよい。一例として、デジタルカメラ１００の顔検出手段２０７が、人物などの表情が変化したかどうかを検出する表情変化検出機能を備えている場合を挙げる。図７は、表情変化検出機能を備えたデジタルカメラ１００の動作を示すフローチャートである。
【００５８】
表情変化検出機能を備えている場合でも、顔検出手段２０７で顔検出を行い（Ｓ７００）、検出された顔画像の個数を判定する（Ｓ７０１）処理の流れについては、表情変化検出機能を備えていない場合と同様である。しかし、表情変化検出機能を備えている場合は、顔検出情報に対する閾値判定を行う前に、表情変化検出機能により表情変化の検出を実行する（Ｓ７０２）。表情変化検出の実行後、表情変化検出機能を備えていない場合と同様に顔検出情報のもつ各値に対して閾値判定を行うが、表情変化が検出されているかといった判定条件を新たに加えることができる（Ｓ７０３）。
【００５９】
顔検出情報の閾値判定の結果、フレーム位置情報を記録するためのフラグが有効になっている場合（Ｓ７０４でＹＥＳ）は、動画内の人物などの顔や表情に関する情報が変化したシーンであるとみなし、記録制御手段２０６は、制御手段２０２の指示にしたがって、信号処理手段２０５と表情変化検出機能を備える顔検出手段２０７から出力された情報を元に、動画のフレーム位置情報を管理ファイルに記録する（Ｓ７０５）。このとき、動画のフレーム位置情報は、動画の撮影中は一時的にデジタルカメラ１００の図示しないワークメモリ上に出力し、撮影停止の際に管理ファイルに記録しても構わない。また、フレーム画像から静止画ファイルの参照画像を生成する場合は、フレーム位置情報とともに参照画像を記録する。
【００６０】
上記の処理が終わった場合、表情変化検出機能を備えていない場合と同様に、同じフレーム画像から検出された顔画像が他にあるかどうかの判定（Ｓ７０６）を行い、次の顔画像に対して表情変化検出の実行（Ｓ７０２）から、一連の処理を繰り返し実行する。
【００６１】
この構成では、動画撮影中に人物などの顔が検出され、検出された人物などの表情が変化したフレームのフレーム位置情報を管理ファイルであるクリップ情報ファイルに記録することとなる。このとき、表情変化検出機能が表情の変化の種類まで判別できる場合、どんな表情に変化したかという情報もフレーム位置情報に加えて記録することができる。検出された人物などの表情の変化は、例えば、真顔から笑顔への変化を挙げることができる。
（４−１−３．被写体識別）
デジタルカメラ１００の顔検出手段２０７が追加の機能を備えている場合の一例として、デジタルカメラ１００自体のもつ図示しない記憶手段や記録媒体２１２などに記録されているデータベースに登録されている被写体かどうかを検出する被写体識別機能を備えている場合を挙げる。図８は、被写体識別機能を備えたデジタルカメラ１００の動作を示すフローチャートである。
【００６２】
被写体識別機能を備えている場合でも、顔検出手段２０７で顔検出を行い（Ｓ８００）、検出された顔画像の個数を判定する（Ｓ８０２）処理の流れについては、被写体識別機能を備えていない場合と同様である。しかし、被写体識別機能を備えている場合は、顔検出情報に対する閾値判定を行う前に、被写体識別機能により被写体の識別を実行する（Ｓ８０２）。被写体識別の実行後、被写体識別機能を備えていない場合と同様に顔検出情報のもつ各値に対して閾値判定を行うが、被写体識別が成功したかどうか、あらかじめ指定した特定の被写体であるかどうか、といった判定条件を新たに加えることができる（Ｓ８０３）。
【００６３】
顔検出情報の閾値判定の結果、フレーム位置情報を記録するためのフラグが有効になっている場合（Ｓ８０４でＹＥＳ）は、動画内の人物などの顔や被写体の識別に関する情報が変化したシーンであるとみなし、記録制御手段２０６は、制御手段２０２の指示にしたがって、信号処理手段２０５と顔検出手段２０７から出力された情報を元に、動画のフレーム位置情報を管理ファイルに記録する（Ｓ８０５）。このとき、動画のフレーム位置情報は、動画の撮影中は一時的にデジタルカメラ１００の図示しないワークメモリ上に出力し、撮影停止の際に管理ファイルに記録しても構わない。また、フレーム画像から静止画ファイルの参照画像を生成する場合は、フレーム位置情報とともに参照画像を記録する。
【００６４】
上記の処理が終わった場合、被写体識別機能を備えていない場合と同様に、同じフレーム画像から検出された顔画像が他にあるかどうかの判定（Ｓ８０６）を行い、次の顔画像に対して被写体識別の実行（Ｓ８０２）から、一連の処理を繰り返し実行する。
【００６５】
この構成では、動画撮影中に人物などの顔が検出され、検出された人物などの顔画像に対して被写体識別が成功したフレームのフレーム位置情報を管理ファイルであるクリップ情報ファイルに記録することとなる。このとき、被写体識別機能の出力する識別結果に関する情報もフレーム位置情報に加えて記録することができる。被写体識別機能の出力する識別結果に関する情報は、例えば、識別された被写体の名称や番号を挙げることができる。
（４−１−４．被写体識別と表情変化検出）
デジタルカメラ１００の顔検出手段２０７が追加の機能を備えている場合の一例として、被写体検出機能と表情変化検出機能の両方を備えている場合を挙げる。図９は、被写体識別機能と表情変化検出機能を備えたデジタルカメラ１００の動作を示すフローチャートである。
【００６６】
顔検出機能に付随する追加の機能を複数備えている場合でも、顔検出手段２０７で顔検出を行い（Ｓ９００）、検出された顔画像の個数を判定する（Ｓ９０１）処理の流れについては、顔検出機能に付随する追加の機能を備えていない場合や、追加の機能を１つ備えている場合と同様である。しかし、追加の機能を複数備えている場合、顔検出情報に対する閾値判定を行う前に、被写体識別機能による被写体の識別（Ｓ９０２）と表情変化検出機能による表情変化の検出（Ｓ９０３）を実行する。
【００６７】
各追加の機能による処理実行後の流れは、追加の機能を１つ備えている場合と同様である。各追加の機能の出力する情報を含んだ顔検出情報のもつ各値に対して閾値判定を行い（Ｓ９０４）、フレーム位置情報を記録するフラグが有効になっているかどうかの判定（Ｓ９０５）を行う。フレーム位置情報を記録するためのフラグが有効になっている場合（Ｓ９０５でＹＥＳ）は、動画内の人物などの顔や表情や被写体の識別に関する情報が変化したシーンであるとみなし、記録制御手段２０６は、制御手段２０２の指示にしたがって、信号処理手段２０５と顔検出手段２０７から出力された情報を元に、動画のフレーム位置情報を管理ファイルに記録する（Ｓ９０６）。上記の処理が終わった場合、同じフレーム画像から検出された顔画像が他にあるかどうかの判定（Ｓ９０７）を行い、次の顔画像に対して被写体識別の実行（Ｓ９０２）から、一連の処理を繰り返し実行する。
【００６８】
なお、本例では、被写体識別の実行を表情変化検出の実行より先に行っているが、これらの処理の実行順序についてはどちらを先に実行しても構わない。
（４−１−５．まとめ）
顔検出手段２０７の備える追加の機能の一例として、表情変化検出機能と被写体識別機能を挙げたが、まったく他の機能でも構わないし、追加の機能を備えていなくても構わない。また、追加の機能を３つ以上備えていてもよい。
【００６９】
上記のように、本発明の実施の形態に係るデジタルカメラ１００は、動画撮影の際に、動画内の人物などの顔に関する情報が変化したフレームのフレーム位置情報を、管理ファイルに記録することができる。一方、動画撮影モードで動作させた場合に限らず、動画再生時に顔検出手段２０７を動作できる構成であれば、動画再生の際に、動画内の人物などの顔に関する情報が変化したフレームのフレーム位置情報を、管理ファイルに記録することが可能である。動画再生時に、動画内の人物などの顔に関する情報が変化したフレームのフレーム位置情報を記録する方法については、説明を省略する。
【００７０】
したがって、本発明は、デジタルカメラ１００などの撮像装置に限定されず、撮像手段２０１を備えない再生装置にも適用することができる。具体的な再生装置としては、静止画や動画を再生することができるビューワ、携帯電話、ＰＤＡ、フォトフレーム、テレビ受像機、カーナビなどを挙げることができる。また、光ディスクプレーヤ、光ディスクレコーダ、ハードディスクレコーダなどの（記録）再生装置も、テレビ受像機などを表示手段とすることによって、本発明を適用することができる。すなわち、表示手段を備えない再生装置であっても、テレビ受像機などの表示手段に画像を出力することができる出力手段を備えた再生装置であれば、本発明を適用することができる。さらに、本発明は、電子計算機の再生プログラムとすることもできる。
【００７１】
なお、本実施の形態に係るデジタルカメラ１００は、動画撮影の際に、動画内の人物などの顔に関する情報が変化したフレームのフレーム位置情報を、管理ファイルであるクリップ情報ファイルに記録することとしたが、動画内の人物などの顔に関する情報が変化したフレームのフレーム位置情報を、管理ファイルであるクリップ情報ファイル以外のファイルに記録することとしてもよい。例えば、ＡＶＣＨＤ規格によって規定される管理ファイルとは無関係のファイルに記録することとしてもよい。このファイルは、動画ファイルごとに作成してもよいし、一つのファイルに複数の動画ファイルのフレーム位置情報を記録してもよい。また、フレーム位置情報を動画ファイルのヘッダに記録することとしてもよい。さらに、記録する形式は一つに限定するものでなく、例えば、クリップ情報ファイルと動画ファイルのヘッダといったように、複数のファイルに同時に記録してもよい。
（４−２．フレーム位置情報を利用したスライドショー再生動作）
本発明におけるフレーム位置情報は、動画内の人物などの顔に関する情報が変化したシーンの再生位置情報などを含んでいる。
【００７２】
そのため、再生や編集などにおいて動画内の有意なシーンを検索する際に本情報を利用することで、利便性を向上させることができる。
【００７３】
一例として、本発明におけるフレーム位置情報を利用したスライドショー再生について説明する。
【００７４】
図１０は、本発明の実施の形態に係るデジタルカメラ１００のスライドショー再生動作を示すフローチャートである。
【００７５】
本発明の実施の形態に係るデジタルカメラ１００は、スライドショーの再生が開始されると、静止画ファイルと動画ファイルを撮影日時などの情報で並び替え、並び替え順序の最も若いファイルが動画ファイルであるかどうかの判定を行う（Ｓ１０００）。並び替え順序の最も若いファイルは、撮影日時が最も新しいファイルであってもよいし、撮影日時が最も古いファイルであってもよい。
【００７６】
該当ファイルが動画ファイルでなく静止画ファイルである場合は、デジタルカメラ１００は静止画の表示処理を実行し、表示手段２０４には該当する静止画ファイルに基づく画像が表示される（Ｓ１００６）。
【００７７】
一方、該当ファイルが動画ファイルである場合は、デジタルカメラ１００は該当する動画ファイルに対応する管理ファイルを検索し、フレーム位置情報が記録されているかどうかを判定する（Ｓ１００１）。
【００７８】
ここで、該当する動画ファイルに対応するフレーム位置情報が記録されていない場合は、本発明におけるフレーム位置情報を利用しない場合と同様の、通常の表示処理を行う（Ｓ１００５）。動画ファイルの通常の表示処理には、動画ファイルに記録されているサムネイル画像や先頭フレームの画像を代表画像として表示手段２０４に静止画表示する方法や、動画として表示手段２０４に再生表示する方法などが一般的であるが、この限りではない。
【００７９】
これに対して、該当する動画ファイルに対応するフレーム位置情報が記録されている場合は、動画のフレーム位置情報を利用し、本情報に記録されている再生位置に関するフレームの画像を代表画像として表示手段２０４に静止画表示する（Ｓ１００２）。なお、このとき表示する代表画像は、動画ファイルから直接生成してもよいし、動画ファイルとは別に記録した参照画像を利用してもよい。また、このとき、フレームの画像を代表画像として静止画表示する代わりに、動画のフレーム位置情報に記録されている再生位置から動画として再生表示してもよい。あるいは、フレームの画像を代表画像として静止画表示している際に、各種操作ボタン１０６の操作を行うことにより、動画のフレーム位置情報に記録されている再生位置から動画として再生表示してもよい。
【００８０】
なお、動画のフレーム位置情報を利用し、本情報に記録されている再生位置に関するフレームの画像を代表画像として表示手段２０４に静止画表示する際は、本情報に記録されている再生位置に関するフレームから所定時間経過したあとのフレームの画像を代表画像として表示手段２０４に静止画表示するようにしてもよい。動画内の人物などの顔に関する情報が変化したフレームにおいては、例えば、人物などが動画内に入ってきた直後のように、顔検出手段２０７が人物の顔を検出したとしても、人物が画面の端に存在するなどして、代表画像とするには不適切な場合があるからである。一方、顔検出手段２０７が、画面の中央部の所定の領域において人物の顔を検出したときにフレーム位置情報を記録するようにすれば、このような問題を回避することもできる。
【００８１】
上記表示処理の実行から、何らかの操作が入力される、あるいは所定の時間が過ぎ、次の画像を表示するタイミングとなると、該当する動画ファイルに対して、まだ表示していないフレーム位置情報があるかどうかを判定する（Ｓ１００３）。まだ表示していないフレーム位置情報があった場合、そのフレーム位置情報に関して、Ｓ１００２の表示処理を実行する。
【００８２】
一方、まだ表示していないフレーム位置情報がなくなった場合には、該当する動画ファイルに対する処理を終了し、並び替え順序における次のファイルがあるかどうかを判定する（Ｓ１００４）。この判定は、静止画ファイルの表示処理（Ｓ１００６）や動画ファイルの通常の表示処理（Ｓ１００５）が行われたあとにも行う。
【００８３】
並び替え順序における次のファイルがなかった場合は、スライドショー再生を終了する。
【００８４】
並び替え順序における次のファイルがあった場合は、並び替え順序における最後のファイルの表示処理が行われるまで、次のファイルに対して、動画ファイルであるかどうかの判定（Ｓ１０００）から、一連の処理を繰り返し実行する。
【００８５】
図１１は本発明の実施の形態に係るデジタルカメラ１００のファイル構成の一例を示す図である。このファイル構成では、記憶媒体２１２に２つの静止画ファイル（Ｐ１００００１．ｊｐｇ、Ｐ１００００２．ｊｐｇ）と３つの動画ファイル（０００００．ｍｔｓ、００００１．ｍｔｓ、００００２．ｍｔｓ）と３つの動画ファイルに対応するクリップ情報ファイル（０００００．ｃｐｉ、００００１．ｃｐｉ、００００２．ｃｐｉ）が記録されている。また、３つあるクリップ情報ファイルのうち１つに、対応する動画ファイルの３フレーム分のフレーム位置情報が記録されており、３つあるクリップ情報のうち残り２つにはフレーム位置情報が含まれていない。ただし、記憶媒体２１２には、ここに記載していないファイルや情報が記録されていても構わない。
【００８６】
図１１に示すファイル構成について、図８のフローチャートに示すスライドショー再生動作を行った場合の実施例について説明する。スライドショーの再生が開始された際の並び替えは静止画および動画の撮影日時による順序とし、撮影日時が最も古いファイルを並び替え順序の最も若いファイルとする。図１２は、フレーム位置情報を利用したスライドショー再生で表示される代表画像を示す図である。
【００８７】
まず、並び替え順序の最も若いＰ１００００１．ｊｐｇに対して、動画ファイルであるかの判定（Ｓ１０００）を行う。Ｐ１００００１．ｊｐｇは静止画ファイルであるため、表示手段２０４に対して静止画ファイルに基づく画像のスライドショー表示処理（Ｓ１００６）を行い、並べ替え順序における次のファイルの有無の判定（Ｓ１００４）を行った後、次のファイルである０００００．ｍｔｓの表示処理に移行する。
【００８８】
０００００．ｍｔｓは動画ファイルであるが、管理ファイルであるクリップ情報ファイル０００００．ｃｐｉ内にフレーム位置情報が記録されていないため、Ｓ１００１の判定の後、動画ファイルの先頭フレームの画像を代表画像として表示手段２０４に対して静止画表示するなどの、フレーム位置情報を利用しない場合と同様の通常の表示処理（Ｓ１００５）を行う。表示処理を終えると、次のファイルの有無の判定（Ｓ１００４）を行った後、次のファイルである００００１．ｍｔｓの表示処理に移行する。
【００８９】
００００１．ｍｔｓは動画ファイルであり、かつ、管理ファイルであるクリップ情報ファイル００００１．ｃｐｉ内にフレーム位置情報が記録されているため、Ｓ１００１の判定の後、本情報に記録されている再生位置情報に関するフレームの画像を代表画像として表示手段２０４に対して静止画表示するなどの、動画のフレーム位置情報を利用した表示処理（Ｓ１００２）を行う。００００１．ｃｐｉのように複数フレームのフレーム位置情報が記録されている場合は、フレーム位置情報を並び替え、並び替え順序の若い順番に使用する。並び替え順序としては、フレーム位置情報のもつ管理番号により昇順あるいは降順に並べる方法や、再生位置情報により昇順あるいは降順に並べる方法などが考えられる。１フレーム目の表示処理を終えると、次のフレーム位置情報の有無の判定（Ｓ１００３）を行った後、２フレーム目の表示処理に移行する。こうして、１フレーム目の時と同様にして、２フレーム目と３フレーム目の動画のフレーム位置情報を利用した表示処理を行う。３フレーム目の表示処理を終えると、次のフレーム位置情報の有無の判定（Ｓ１００３）にて、次のフレーム位置情報がこれ以上ないため、次のファイルの有無の判定（Ｓ１００４）を行った後、次のファイルであるＰ１０００００２．ｊｐｇの表示処理に移行する。
【００９０】
Ｐ１００００２．ｊｐｇは静止画ファイルであるため、表示手段２０４に対して静止画ファイルに基づく画像のスライドショー表示処理（Ｓ１００６）を行い、並べ替え順序における次のファイルの有無の判定（Ｓ１００４）を行った後、次のファイルである００００２．ｍｔｓの表示処理に移行する。
【００９１】
００００２．ｍｔｓは、０００００．ｍｔｓと同様に、フレーム位置情報を持たない動画ファイルであるため、フレーム位置情報を利用しない場合と同様の通常の表示処理（Ｓ１００５）を行う。表示処理を終えると、次のファイルの有無の判定（Ｓ１００４）にて、次のファイルがこれ以上ないため、終了処理に移行する。
【００９２】
フレーム位置情報は、動画再生の際に動画内の人物などの顔に関する情報が変化したシーンに関する情報を含んでいる。そのため、このような再生方法を行うことにより、動画内の人物などの顔に関する情報に有意な変化が生じたシーンを抽出して表示することができる。一例として、本発明におけるフレーム位置情報を利用したスライドショー再生ついて説明したが、この限りでなく、動画ファイルの代表画像を並べて表示するマルチサムネイル再生の際などにも有用である。一例として、図１３は、フレーム位置情報を利用したマルチサムネイル再生で表示される代表画像を示す図である。図１２に示した複数の静止画像及び動画の代表画像のサムネイルが１つの画面に複数並べて表示される。
【００９３】
また、動画ファイルの編集を行う際のシーン検出などに利用することも可能である。なお、被写体識別や表情変化検出によって得られた情報を参照することで、動画ファイル内のシーンを登場人物ごとにカテゴリ分類したり、特定の人物が笑顔になったときを検出するといった利用方法も可能である。したがって、本発明の利用により、利便性の向上した撮像装置、再生装置、および再生プログラムを提供することができる。
【００９４】
なお、近時の顔検出手段は、犬や猫などの動物の顔を検出することができる。そのような機能を備えた顔検出手段を採用すれば、人物の顔のみならず動物の顔についても、実施の形態において説明したと同様の効果を奏することができる。
【産業上の利用可能性】
【００９５】
本発明によれば、動画内の人物などの顔に関する情報が変化したシーンを検出し、代表画像として選択することができるため、動画の撮像手段と顔検出手段を有する撮像装置、たとえばデジタルカメラやデジタルビデオカメラに適用して有用である。また、動画の表示手段と顔検出手段を有する再生装置、たとえばテレビやパーソナルコンピュータに使用する再生プログラムに適用して有用である。
【符号の説明】
【００９６】
１００    デジタルカメラ
１０１    撮像光学系
１０２    フラッシュ
１０３    シャッターボタン
１０４    液晶モニター
１０５    モードダイヤル
１０６    各種操作ボタン
１０６ａ    上下左右ボタン
１０６ｂ    メニュー／決定ボタン
１０６ｃ    表示切替ボタン
１０６ｄ    削除ボタン
１０８    スロット
２０１    撮像手段
２０２    制御手段
２０３    表示制御手段
２０４    表示手段
２０５    信号処理手段
２０６    記録制御手段
２０７    顔検出手段
２１１    操作手段
２１２    記録媒体
【図１】
2011234180.tif 000003
【図２】
2011234180.tif 000004
【図３】
2011234180.tif 000005
【図４】
2011234180.tif 000006
【図５】
2011234180.tif 000007
【図６】
2011234180.tif 000008
【図７】
2011234180.tif 000009
【図８】
2011234180.tif 000010
【図９】
2011234180.tif 000011
【図１０】
2011234180.tif 000012
【図１１】
2011234180.tif 000013
【図１２】
2011234180.tif 000014
【図１３】
2011234180.tif 000015