(57)【要約】【課題】撮像範囲内における被写体の位置に基づき、ユーザが所望する撮像データを検索することができる撮像装置を提供すること。【解決手段】デジタルカメラ１は、被写体を撮像して撮像データを取得するアナログ信号処理部（１５）と、アナログ信号処理部（１５）により撮像される撮像範囲内において、被写体の位置を検出するＣＰＵ２０と、を備える。そして、ＣＰＵ２０は、撮像範囲内における被写体の位置に基づき、アナログ信号処理部（１５）により取得された撮像データを検索する。【選択図】図３
2010213052.tif 000002
【特許請求の範囲】
【請求項１】
被写体を撮像して撮像データを取得する画像取得手段と、
前記画像取得手段により取得された撮像データの撮像範囲において、前記被写体の位置を検出する被写体位置検出手段と、
前記被写体位置検出手段により検出された前記撮像範囲における前記被写体の位置に基づき、前記画像取得手段により取得された撮像データを検索する検索手段と、
を備えることを特徴とする撮像装置。
【請求項２】
前記被写体位置検出手段は、
前記画像取得手段により取得された前記撮像データの前記撮像範囲において、前記被写体の特徴部を特定する特徴部特定手段と、
前記特徴部特定手段により特定された前記被写体の特徴部を追跡する被写体追跡手段と、
前記画像取得手段により取得された前記撮像データに、前記被写体追跡手段により追跡された前記撮像範囲における前記被写体の特徴部の位置を位置情報として付加する位置情報付加手段と、
を備え、
前記検索手段は、
前記位置情報付加手段により前記位置情報が付加された前記撮像データを記憶するデータ記憶手段と、
前記位置情報付加手段により付加された前記位置情報に基づいて、前記データ記憶手段により記憶された前記撮像データを検索する撮像データ検索手段と、を備えることを特徴とする請求項１記載の撮像装置。
【請求項３】
前記画像取得手段は、被写体の撮像データを取得し、
前記被写体位置検出手段は、
前記画像取得手段により順次取得された前記撮像データのフレーム画像において、被写体の特徴部を特定する特徴部特定手段と、
前記特徴部特定手段により特定された前記被写体の特徴部を追跡する被写体追跡手段と、
前記画像取得手段により取得された前記撮像データを構成するフレーム画像の各々に、前記被写体追跡手段により追跡された前記撮像範囲における前記被写体の特徴部の位置を位置情報として付加する位置情報付加手段と、
を備え、
前記検索手段は、
前記位置情報付加手段により前記位置情報が付加されたフレーム画像の各々に対応する前記撮像データを記憶するデータ記憶手段と、
前記位置情報付加手段により付加された前記位置情報に基づいて、前記データ記憶手段により記憶されたフレーム画像の各々に対応する前記撮像データを検索する撮像データ検索手段と、を備えることを特徴とする請求項１記載の撮像装置。
【請求項４】
前記被写体追跡手段により追跡されている前記被写体の前記特徴部に基づいて撮影条件を自動設定する撮影条件設定手段を備えることを特徴とする請求項２乃至３記載の撮像装置。
【請求項５】
前記撮影条件設定手段は、前記被写体追跡手段により追跡されている前記被写体の前記特徴部のコントラストに基づいてフォーカス距離を自動設定することを特徴とする請求項４記載の撮像装置。
【請求項６】
前記撮影条件設定手段は、前記被写体追跡手段により追跡されている前記被写体の前記特徴部に基づいて露出条件を自動設定することを特徴とする請求項４記載の撮像装置。
【請求項７】
被写体画像を表示する表示手段と、
前記撮像データを前記撮像データ検索手段により検索した結果に基づき、前記画像取得手段により取得した前記被写体画像を再生画像として前記表示手段に表示する再生手段と、を備えることを特徴とする請求項３記載の撮像装置。
【請求項８】
前記表示手段は、前記画像取得手段により取得された前記撮像データの前記撮像範囲に対応する領域を複数に分割した複数の表示領域を有し、
前記表示手段により表示される前記複数の表示領域のうち、一の表示領域を選択する選択手段と、
前記選択手段により選択された一の表示領域に対応する撮像範囲における被写体の位置情報を選択位置情報として記憶する選択位置情報記憶手段と、
を備え、
前記撮像データ検索手段は、前記選択位置情報記憶手段により記憶された位置情報に基づいて、前記データ記憶手段により記憶されたフレーム画像に対応する撮像データを検索することを特徴とする請求項７記載の撮像装置。
【請求項９】
前記被写体追跡手段により追跡された前記撮像範囲における前記被写体の位置の変化の軌跡を前記表示手段に表示する軌跡表示手段と、
前記軌跡表示手段により表示された前記軌跡の中から所定の箇所を選択する軌跡選択手段と、
前記軌跡選択手段により選択された前記所定の箇所における前記被写体の位置情報を軌跡選択位置情報として記憶する軌跡選択位置情報記憶手段と、
を備え、
前記撮像データ検索手段は、前記軌跡選択位置情報記憶手段により記憶された前記軌跡選択位置情報に基づいて、前記データ記憶手段により記憶された前記フレーム画像に対応する撮像データを検索することを特徴とする請求項７記載の撮像装置。
【請求項１０】
被写体の撮像データを取得する画像取得工程と、
前記画像取得工程により取得された撮像データの撮像範囲において、前記被写体の位置を検出する被写体位置検出工程と、
前記被写体位置検出工程により検出された前記撮像範囲における前記被写体の位置に基づき、前記画像取得工程により取得された撮像データを検索する検索工程と、
を備えることを特徴とする撮像方法。
【請求項１１】
撮像装置が備えるコンピュータを
被写体の撮像データを取得する画像取得手段、
前記画像取得手段により取得された撮像データの撮像範囲において、前記被写体の位置を検出する被写体位置検出手段、
前記被写体位置検出手段により検出された前記撮像範囲における前記被写体の位置に基づき、前記画像取得手段により取得された撮像データを検索する検索手段、
として機能させることを特徴とする撮像プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置、撮像方法、及び撮像プログラムに関する。
【背景技術】
【０００２】
従来より、人物などの動きのある被写体を動画に撮影することができるデジタルカメラやビデオカメラなどの撮像装置が存在している。
【０００３】
また、被写体を動画データに撮像している際に場面変更があったとき、その都度、場面変更があった時点を再生開始点として記憶し、撮像した動画データをそれぞれの再生開始点を基準に分類して、チャプターデータを生成する撮像装置が知られている（例えば、特許文献１参照）。この撮像装置によれば、ユーザはチャプターデータを用いて、撮像した動画データをチャプターごとに再生して確認して、所望のシーンを検索し再生することができる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８−１６０５６４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、ユーザは通常、被写体の構図を考えながら撮像しているため、撮像した動画データを場面変更ごとにチャプターに分類したとしても、動画データの中からユーザが覚えている動画データを容易に検索できるとは限らない。そこで、撮像した動画の動画データから、所望のシーンの動画データを容易に検索して再生することができる撮像装置が求められている。
【０００６】
本発明は、係る従来の課題に鑑みてなされたものであり、ユーザが所望する撮像データを容易に検索することができる撮像装置、撮像方法、及び撮像プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
請求項１に記載の発明に係る撮像装置は、被写体を撮像して撮像データを取得する画像取得手段と、前記画像取得手段により取得された撮像データの撮像範囲において、前記被写体の位置を検出する被写体位置検出手段と、前記被写体位置検出手段により検出された前記撮像範囲における前記被写体の位置に基づき、前記画像取得手段により取得された撮像データを検索する検索手段と、を備えることを特徴とする。
【０００８】
請求項２に記載の発明に係る撮像装置は、前記被写体位置検出手段は、前記画像取得手段により取得された前記撮像データの前記撮像範囲において、前記被写体の特徴部を特定する特徴部特定手段と、前記特徴部特定手段により特定された前記被写体の特徴部を追跡する被写体追跡手段と、前記画像取得手段により取得された前記撮像データに、前記被写体追跡手段により追跡された前記撮像範囲における前記被写体の特徴部の位置を位置情報として付加する位置情報付加手段と、を備え、前記検索手段は、前記位置情報付加手段により前記位置情報が付加された前記撮像データを記憶するデータ記憶手段と、前記位置情報付加手段により付加された前記位置情報に基づいて、前記データ記憶手段により記憶された前記撮像データを検索する撮像データ検索手段と、を備えることを特徴とする。
【０００９】
請求項３に記載の発明に係る撮像装置は、前記画像取得手段は、被写体の撮像データを取得し、前記被写体位置検出手段は、前記画像取得手段により順次取得された前記撮像データのフレーム画像において、被写体の特徴部を特定する特徴部特定手段と、前記特徴部特定手段により特定された前記被写体の特徴部を追跡する被写体追跡手段と、前記画像取得手段により取得された前記撮像データを構成するフレーム画像の各々に、前記被写体追跡手段により追跡された前記撮像範囲における前記被写体の特徴部の位置を位置情報として付加する位置情報付加手段と、を備え、前記検索手段は、前記位置情報付加手段により前記位置情報が付加されたフレーム画像の各々に対応する前記撮像データを記憶するデータ記憶手段と、前記位置情報付加手段により付加された前記位置情報に基づいて、前記データ記憶手段により記憶されたフレーム画像の各々に対応する前記撮像データを検索する撮像データ検索手段と、を備えることを特徴とする。
【００１０】
請求項４に記載の発明に係る撮像装置は、前記被写体追跡手段により追跡されている前記被写体の前記特徴部に基づいて撮影条件を自動設定する撮影条件設定手段を備えることを特徴とする。
【００１１】
請求項５に記載の発明に係る撮像装置は、前記撮影条件設定手段は、前記被写体追跡手段により追跡されている前記被写体の前記特徴部のコントラストに基づいてフォーカス距離を自動設定することを特徴とする。
【００１２】
請求項６に記載の発明に係る撮像装置は、前記撮影条件設定手段は、前記被写体追跡手段により追跡されている前記被写体の前記特徴部の明るさに基づいて露出条件を自動設定することを特徴とする。
【００１３】
請求項７に記載の発明に係る撮像装置は、被写体画像を表示する表示手段と、前記撮像データを前記撮像データ検索手段により検索した結果に基づき、前記画像取得手段により取得した前記被写体画像を再生画像として前記表示手段に表示する再生手段と、を備えることを特徴とする。
【００１４】
請求項８に記載の発明に係る撮像装置は、前記表示手段は、前記画像取得手段により取得された前記撮像データの前記撮像範囲に対応する領域を複数に分割した複数の表示領域を有し、前記表示手段により表示される前記複数の表示領域のうち、一の表示領域を選択する選択手段と、前記選択手段により選択された一の表示領域に対応する撮像範囲における被写体の位置情報を選択位置情報として記憶する選択位置情報記憶手段と、を備え、前記撮像データ検索手段は、前記選択位置情報記憶手段により記憶された位置情報に基づいて、前記データ記憶手段により記憶されたフレーム画像に対応する撮像データを検索することを特徴とする。
【００１５】
請求項９に記載の発明に係る撮像装置は、前記被写体追跡手段により追跡された前記撮像範囲における前記被写体の位置の変化の軌跡を前記表示手段に表示する軌跡表示手段と、前記軌跡表示手段により表示された前記軌跡の中から所定の箇所を選択する軌跡選択手段と、前記軌跡選択手段により選択された前記所定の箇所における前記被写体の位置情報を軌跡選択位置情報として記憶する軌跡選択位置情報記憶手段と、を備え、前記撮像データ検索手段は、前記軌跡選択位置情報記憶手段により記憶された前記軌跡選択位置情報に基づいて、前記データ記憶手段により記憶された前記フレーム画像に対応する撮像データを検索することを特徴とする。
【００１６】
請求項１０に記載の発明に係る撮像方法は、被写体の撮像データを取得する画像取得工程と、前記画像取得工程により取得された撮像データの撮像範囲において、前記被写体の位置を検出する被写体位置検出工程と、前記被写体位置検出工程により検出された前記撮像範囲における前記被写体の位置に基づき、前記画像取得工程により取得された撮像データを検索する検索工程と、を備えることを特徴とする。
【００１７】
請求項１１に記載の発明に係る撮像プログラムは、撮像装置が備えるコンピュータを被写体の撮像データを取得する画像取得手段、前記画像取得手段により取得された撮像データの撮像範囲において、前記被写体の位置を検出する被写体位置検出手段、前記被写体位置検出手段により検出された前記撮像範囲における前記被写体の位置に基づき、前記画像取得手段により取得された撮像データを検索する検索手段、として機能させることを特徴とする。
【発明の効果】
【００１８】
本発明によれば、ユーザが所望する撮像データを容易に検索することができる撮像装置、撮像方法、及び撮像プログラムを提供できる。
【図面の簡単な説明】
【００１９】
【図１】本発明の第１実施の形態に係る撮像装置としてのデジタルカメラの電気的構成を示すブロック図である。
【図２】図１の撮像装置の機能フローを示す図である。
【図３】図１のデジタルカメラの動画撮影処理を示すフローチャートである。
【図４】図１のデジタルカメラの動体追跡処理における追跡対象の画像内の移動の検出を説明するための図である。
【図５】図１のデジタルカメラの動画再生編集処理を示すフローチャートである。
【図６】図１のデジタルカメラの検索対象を選択する手順を説明するための図である。
【図７】本発明の第２実施の形態に係る撮像装置としてのデジタルカメラの機能フローを示す図である。
【図８】図７のデジタルカメラの動画再生編集処理を示すフローチャートである。
【図９】図７のデジタルカメラの検索対象を選択する手順を説明するための図である。
【発明を実施するための形態】
【００２０】
以下、本発明の実施の形態を図面に基づいて説明する。なお、以下の実施の形態の説明にあたって、同一構成要件については同一符号を付し、その説明を省略若しくは簡略化する。
【００２１】
［第１実施例］
以下、図１〜図４を参照して、本発明の第１実施の形態に係るデジタルカメラについて説明する。
【００２２】
［電気的構成］
図１は、本発明の第１実施の形態に係る撮像装置としてのデジタルカメラの電気的構成を示すブロック図である。このデジタルカメラは、基本となる動作モードとして、動画撮影を行うための動画撮影モードと、撮影した画像を再生又は編集を行うための動画再生編集モードとを有している。
【００２３】
本実施の形態のデジタルカメラ１は、画像取得部１０、ドライバ１４、アナログ信号処理部１５、フラッシュ１９、制御部２０、プレビューエンジン２２、Ｄ／Ａコンバータ２３、ドライバ２４、表示手段としての表示部２５、イメージバッファ２６、キー操作部２７、デジタル信号処理部２８、画像圧縮／伸張処理部２９、プログラムメモリ３０、画像メモリ３１、カードＩ／Ｆ３２、外部記録媒体３３、外部接続用Ｉ／Ｆ３４、ＲＡＭ３５を備える。
【００２４】
画像取得部１０は、レンズ１１、シャッタ１２、ＬＰＦ１３からなる。レンズ１１は、通常の光学レンズであり、非球面レンズを重ねたレンズ群からなる。シャッタ１２は、シャッタボタンが操作されると、制御部２０によって駆動されるドライバ１４により動作する、所謂メカニカルシャッタでよい。なお、デジタルカメラによっては、メカニカルシャッタを備えない場合もあり、沈胴式のレンズ構造、メカニカルズームを搭載する機種の場合、これらの駆動制御もドライバ１４で行う。ＬＰＦ１３は、例えば水晶ローパスフィルタであり、モアレの発生を防ぐために搭載されている。
【００２５】
次に、アナログ信号処理部１５は、撮像センサ（ＣＣＤ，ＣＭＯＳ）１６、サンプリング／信号増幅処理部１７、Ａ／Ｄコンバータ１８からなる。撮像センサ１６は、被写体画像（イメージ）を結像し、ＲＧＢの各色の光の強さを、電流値に変換する。サンプリング／信号増幅処理部１７は、ノイズや色むらを抑えるための相関二重サンプリング処理や信号増幅処理を行う。Ａ／Ｄコンバータ１８は、アナログフロントエンドとも呼ばれ、サンプリング・増幅したアナログ信号をデジタル信号に変換する（ＲＧＢ，ＣＭＹＧ各色について１２ｂｉｔデータに変換してバスラインに出力する）。制御部２０は、例えば、ＣＰＵによって構成され、後述するプログラムメモリ格納されるプログラムに従ってデジタルカメラ１（撮像装置）の全体を制御する。
【００２６】
プレビューエンジン２２は、動画撮影モード（録画モードともいう）において、画像取得部１０、アナログ信号処理部１５を介して入力されたデジタルデータ、若しくはシャッタ操作検出直後、イメージバッファ２６に格納されたデジタルデータ、及び、画像メモリ３１に格納されたデジタルデータを動画再生編集モードにおいて表示部２５に表示させるために間引き処理を行う。Ｄ／Ａコンバータ２３は、プレビューエンジン２２により間引き処理されたデジタルデータを変換し、後段のドライバ２４に出力する。
【００２７】
ドライバ２４は、後段の表示部２５に表示されるデジタルデータを一時記憶するバッファ領域を備え、キー操作部２７、制御部２０を介して入力された制御信号に基づいて表示部２５を駆動させる。表示手段としての表示部２５は、カラーＴＦＴ液晶や、ＳＴＮ液晶などからなり、プレビュー画像や、撮影後の画像データ、設定メニューなどを表示する。
【００２８】
イメージバッファ２６は、例えば、ＳＤＲＡＭなどで構成され、撮影直後のデジタルデータを一時的に格納し、例えば、アナログ信号処理部１５、若しくはデジタル信号処理部２８がデジタルデータを処理する際に、デジタルデータを一時的に格納する。キー操作部２７は、例えば、シャッタボタンや、動画撮影モードでの撮影の開始及び停止を行うＲＥＣボタン、動画再生モードでの動画の再生及び停止を行うＰＬＡＹボタン、動画撮影モード／動画再生編集モード選択スライドスイッチ、メニューボタン、十字キー（中央押しで決定）などを含む。
【００２９】
デジタル信号処理部２８は、アナログ信号処理部１５を介して入力されたデジタルデータに対して、ホワイトバランス処理、色処理、階調処理、輸郭強調、ＲＧＢ形式からＹＵＶ形式への変換、ＹＵＶ形式からＪＰＥＧ形式への変換などを行う。画像圧縮／伸張処理部２９は、デジタル信号処理部２８を介して入力されたデジタルデータをＪＰＥＧ方式に圧縮符号化したり、モーションＪＰＥＧ形式の動画ファイルを生成したり、モーションＪＰＥＧ形式の動画ファイルをＭＰＥＧ形式の動画ファイルに変換したり、再生モードにおいては、ＪＰＥＧ形式、モーションＪＰＥＧ形式、あるいはＭＰＥＧ形式の動画ファイルを伸張したりする。
【００３０】
プログラムメモリ３０は、制御部２０にロードされる各種プログラムや、ベストショット機能におけるＥＶ値、色補正情報などを格納する。画像メモリ３１は、イメージバッファ２６に一時的に保持された画像データや、各種ファイル形式に変換されたデジタルデータ、動画データなどを格納する。カードＩ／Ｆ３２は、外部記録媒体３３とデジタルカメラ本体との間のデータ交換を制御する。
【００３１】
外部記録媒体３３は、コンパクトフラッシュ（登録商標）、メモリースティック（登録商標）、ＳＤカード（登録商標）などからなる着脱可能な記録媒体である。外部接続用Ｉ／Ｆ３４は、ＵＳＢコネクター用スロットなどからなり、パーソナルコンピュータなどと接続され、撮影した画像データの転送などに用いられる。ＲＡＭ３５は、制御部２０の制御に必要な各種パラメータや、夜景撮影時の各種パラメータ（ゲイン（ＩＳＯ感度）、絞り、シャッタスピード、画像合成のための閾値、重みなど）などを記憶する。
【００３２】
図２は、本発明の第１実施の形態に係る撮像装置としてのデジタルカメラの機能構成図である。
【００３３】
本実施の形態に係る撮像装置は、被写体を撮像して撮像データを取得する、画像取得部１０によって構成される画像取得手段と、画像取得手段により取得された撮像データの撮像範囲において、被写体の位置を検出する、制御部２０によって構成される被写体位置検出手段と、被写体位置検出手段により検出された撮像範囲における被写体の位置に基づき、画像取得手段により取得された撮像データを検索する、制御部２０によって構成される検索手段と、を備える。
【００３４】
被写体位置検出手段は、画像取得手段により取得された撮像データの撮像範囲において、被写体の特徴部を特定する、特徴部特定手段と、特徴部特定手段により特定された被写体の特徴部を追跡する被写体追跡手段と、被写体追跡手段により追跡されている被写体の特徴部に基づいて撮影条件を自動設定する撮影条件設定手段と、画像取得手段により取得された撮像データに、被写体追跡手段により追跡された撮像範囲における被写体の特徴部の位置を位置情報として付加する位置情報付加手段と、を備えてもよい。また、撮影条件設定手段は、被写体追跡手段により追跡されている被写体の特徴部のコントラストに基づいてフォーカス距離を自動設定してもよい。また、撮影条件設定手段は、被写体追跡手段により追跡されている被写体の特徴部の明るさに基づいて露出条件を自動設定してもよい。なお、後述する実施の形態では、特徴部として顔を上げているが、本発明はこれに限定されず、様々な対象が可能である。
【００３５】
検索手段は、位置情報付加手段により位置情報が付加された撮像データを記憶する、ＲＡＭ３５によって構成されるデータ記憶手段と、位置情報付加手段により付加された位置情報に基づいて、データ記憶手段により記憶された撮像データを検索する撮像データ検索手段と、を備えてもよい。
【００３６】
画像取得手段は、被写体の撮像データを取得し、被写体位置検出手段は、画像取得手段により順次取得された撮像データのフレーム画像において、被写体の特徴部を特定する特徴部特定手段と、特徴部特定手段により特定された被写体の特徴部を追跡する被写体追跡手段と、画像取得手段により取得された撮像データを構成するフレーム画像の各々に、被写体追跡手段により追跡された撮像範囲における被写体の特徴部の位置を位置情報として付加する位置情報付加手段と、を備えてもよい。
【００３７】
検索手段は、位置情報付加手段により位置情報が付加されたフレーム画像の各々に対応する撮像データを記憶するデータ記憶手段と、位置情報付加手段により付加された位置情報に基づいて、データ記憶手段により記憶されたフレーム画像の各々に対応する撮像データを検索する撮像データ検索手段と、を備えてもよい。
【００３８】
撮像装置は、被写体画像を表示する、表示部２５によって構成される表示手段と、撮像データを撮像データ検索手段により検索した結果に基づき、画像取得手段により取得した被写体画像を再生画像として、表示部２５によって構成される表示手段に表示する、制御部２０などによって構成される再生手段と、を備えてもよい。
【００３９】
表示手段は、画像取得手段により取得された撮像データの撮像範囲に対応する領域を複数に分割した複数の表示領域を有してもよい。撮像装置は、さらに、表示手段により表示される複数の表示領域のうち、一の表示領域を選択する、キー操作部２７によって構成される選択手段と、選択手段により選択された一の表示領域に対応する撮像範囲における被写体の位置情報を選択位置情報として記憶する、ＲＡＭ３５などによって構成される選択位置情報記憶手段と、を備え、撮像データ検索手段は、選択位置情報記憶手段により記憶された位置情報に基づいて、ＲＡＭ３５などによって構成されるデータ記憶手段により記憶されたフレーム画像に対応する撮像データを検索するようにしてもよい。なお、特徴部特定手段、被写体追跡手段、位置情報付加手段を含む被写体位置検出手段、検索手段の機能は、ＣＰＵ２０がプログラムメモリ３０に記憶されたプログラムを実行して実現する。
【００４０】
［動画撮影処理］
図３は、デジタルカメラ１が動画撮影モードで実行する動画撮影処理を示すフローチャートであり、図４は、動画撮影モードで行われる動体追跡処理を説明するための図である。キー操作部２７に設けられている動画撮影モード／動画再生編集モード選択スライドスイッチが操作されて動画撮影モードが設定され、ＲＥＣボタンが操作されると、ＣＰＵ２０は、図３に示すフローチャートの処理を実行するためのプログラムをＲＡＭ３５から読み出す。ＣＰＵ２０は、このプログラムに従って、図３に示すフローチャートにおける各種処理を実行する。
【００４１】
まず、図３を参照して、ＣＰＵ２０の制御による動画撮影モードで実行される動画撮影処理について説明する。
【００４２】
はじめに、制御部を構成するＣＰＵ２０は、ユーザにより動画撮影モード／動画再生編集モード選択スライドスイッチが操作され、ＲＥＣボタンが操作されると、アナログ信号処理部１５を制御して、ＣＣＤ又はＣＭＯＳからなる撮像センサ１６により撮像された映像を取り込み、動画撮影モードによる動画の撮影を開始する。まず、１フレームの画像を撮像する（ステップＳ１）。具体的には、ＣＰＵ２０は、撮像センサ１６を制御して、所定のフレームレートで被写体を撮像する処理を行い、撮像されたフレーム画像データを１フレームごとにＲＡＭ３５に格納する。ここでは、まず、１フレームの画像を撮像してＲＡＭ３５に格納する。
【００４３】
次に、撮像範囲内においてオートフォーカス（以後、「ＡＦ」と呼ぶ）を行う追跡対象の被写体は設定済みであるか否かを判別する（ステップＳ２）。ＡＦを行う追跡対象の被写体は設定済みであると判別したときには、動体追跡処理により、追跡対象の撮像範囲に対応する画像内の移動を検出する（ステップＳ３）。動体追跡処理では、事前に撮影して被写体を認識しておいた、例えば、被写体の顔が撮像範囲内のどこに移動したのかを検出する被写体の追跡を行う被写体追跡機能を行う処理であり、ブロックマッチング法などにより該認識された顔がどこに移動したのかを検出する。
【００４４】
ステップＳ２の処理において、被写体の追跡対象は設定済みではないと判別したときには、例えば、顔認識処理により、撮像範囲に対応する表示部２５における画像内において撮影の対象とする被写体の顔部分を検出する（ステップＳ５）。次に、検出された被写体の顔部分の後述のＡＦ処理を行う際のＡＦを行う追跡対象として設定する（ステップＳ６）。
【００４５】
ステップＳ３の後、又は、ステップＳ６の処理の後において、追跡対象の位置をＡＦ領域に設定する（ステップＳ４）。例えば、この処理では後述のＡＦ処理において、コンティニュアス的にＡＦ処理を行うための被写体の顔の位置をＡＦ領域として設定する。このＡＦ処理は、個人認識された全ての顔、若しくは検出された全ての顔が、被写界深度に入るよう行い、個人認識された顔、若しくは、検出された顔を重点に露出条件を設定して行う。
【００４６】
尚、本実施の形態にあっては、追跡対象の位置をＡＦ領域に設定したがこれに限られない。したがって、例えば、追跡対象をＡＦ領域に設定として設定せずに、後述の位置情報を記録するためだけに利用してもよい。
【００４７】
次に、設定されたＡＦ領域の位置情報を当該フレームに対応付けて記録する（ステップＳ７）。次に、撮影条件設定処理を行う（ステップＳ８）。この撮影条件設定処理では、ＡＦ処理及び露出条件設定処理が行われる。ＡＦ処理においては、検出された被写体の顔のコントラストに基づいてフォーカス距離を自動設定すること、具体的には、検出された被写体の顔のコントラスト成分が最も高くなるレンズ位置を検出し、該検出したレンズ位置にレンズを自動的に移動させるフォーカス位置の調整処理や、表示部２５で表示しているスルー画像上においてＡＦの対象を示すＡＦ枠４３を表示する処理などが行われる。露出条件設定処理においては、検出された被写体の顔の明るさを検出し、ＲＡＭ３５に記憶されている各種パラメータを参照して、露出時間や絞り値などの露出条件を自動設定する処理が行われる。
【００４８】
次に、撮影処理は終了であるか否かを判別する（ステップＳ９）。この処理では、キー操作部２７に設けられているＲＥＣボタンが操作されて、動画撮影モードが終了したか否かが判別される。撮影処理は終了ではないと判別したときには、ステップＳ１の処理に戻る。撮影処理は終了であると判別したときには、撮像して得られた複数のフレーム画像を圧縮して作成された撮像データとしての動画データに対し、各フレーム画像を特定するためのフレーム番号と、撮像範囲内においてＡＦの対象となった被写体のＡＦ位置の位置情報と、を対応付けた対応情報を関連付けて記録する（ステップＳ１０）。この処理により、フレーム番号が付された各フレームごとに被写体のＡＦ位置が位置情報として記録された対応情報が、動画データに付加されてＲＡＭ３５において記録される。この処理が終了すると、動画撮影処理を終了する。この各フレーム番号に対して、動画撮影処理が開始されてから経過した時間も同時に記録される。
【００４９】
この動画撮影処理で、表示部２５にスルー画像として表示される表示例を図４に示す。図４（ａ）〜（ｆ）に示すように、表示部２５には、ＡＦの対象となる被写体４２と、ＡＦの対象を示すＡＦ枠４３と、動画撮影処理が開始されてから経過した時間を示す時間枠４４とが表示される。
【００５０】
被写体４２がゲレンデ内を左右に滑走することにより、撮像範囲に対応する表示部２５内においてＡＦの対象となっている被写体４２の位置が、撮像範囲の上方から左右に振れながら徐々に下方に向けて移動している。このとき、撮像範囲内における被写体４２の位置がＡＦ領域の位置情報としてフレーム画像に対応付けて記録される。このとき、各フレーム画像に対して、動画撮影処理が開始されてから経過した時間も同時に記録される。
【００５１】
尚、本実施の形態にあっては、顔認識処理により被写体の顔部分の検出を行い、顔部分を追跡対象としたがこれに限られない。したがって、例えば、撮像範囲内において動く対象を検出し、この動く対象を追跡対象としてもよい。具体的には、被写体の体全体の検出を行い、被写体の体全体を追跡対象としてもよく、又は、海辺の撮影において砂浜で動く蟹などの生物や、船などの機械物を検出し、追跡対象として設定してもよい。また、ユーザが撮影中に追跡対象を任意に指定してもよく、ＣＰＵ２０が追跡対象を自動的に設定してもよい。
【００５２】
被写体４２がゲレンデ内を左右に滑走することにより、撮像範囲に対応する表示部２５内においてＡＦの対象となっている被写体４２の位置が、撮像範囲の上方から左右に振れながら徐々に下方に向けて移動している。このとき、撮像範囲内における被写体４２の位置がＡＦ領域の位置情報としてフレーム画像に対応付けて記録される。このとき、各フレーム画像に対して、動画撮影処理が開始されてから経過した時間も同時に記録される。
【００５３】
尚、本実施の形態にあっては、動画データと、フレーム番号とＡＦ位置の位置情報とが関連付けて動画データに付して記録しているがこれに限られない。したがって、例えば、動画データと、被写体のＡＦ位置の位置情報のデータとは、それぞれ別のデータファイルとしてＲＡＭ３５に記録してもよい。
【００５４】
［動画再生編集処理］
図５は、デジタルカメラ１が動画再生編集モードで実行する動画再生編集処理を示すフローチャートであり、図６は、動画再生編集モードで行われる検索対象を選択する手順を説明するための図である。キー操作部２７に設けられている動画撮影モード／動画再生編集モード選択スライドスイッチが操作されて動画再生編集モードが設定され、ＰＬＡＹボタンが操作されると、ＣＰＵ２０は、図５に示すフローチャートの処理を実行するためのプログラムをＲＡＭ３５から読み出す。ＣＰＵ２０は、このプログラムに従って、図５に示すフローチャートにおける各種処理を実行する。
【００５５】
図５を参照して、本実施の形態におけるＣＰＵ２０の制御により動画再生モードで実行される動画再生編集処理について説明する。この処理では、動画撮影処理において記録された撮影データを表示部２５に表示する処理を行う。図６は、動画再生処理において、表示部２５に表示される表示例である。
【００５６】
はじめに、ＣＰＵ２０は、ユーザにより動画撮影モード／動画再生編集モード選択スライドスイッチが操作され、ＰＬＡＹボタンが操作されると、動画の先頭位置から動画再生を開始する（ステップＳ２１）。次に、動画再生処理を行う（ステップＳ２２）。
【００５７】
次に、動画の再生が停止されたか（又は、編集操作があったか）否かを判別する（ステップＳ２３）。この処理では、動画撮影モード／動画再生編集モード選択スライドスイッチが操作されたり、ＰＬＡＹボタンが再び操作されたりしたか否かが判別される。動画の再生の停止は行われていないと判別したときには、ステップＳ２２の処理に戻る。一方で、動画の再生の停止が行われたと判別したときには、動画の再生（又は、編集）が終了したか否かを判別する（ステップＳ２４）。再生（又は編集）が終了したと判別したときには、動画再生編集処理を終了する。一方で、再生（又は編集）が終了していないと判別したときには、表示部２５に表示される撮像範囲に対応する画面を分割して枠４５を表示する（ステップＳ２５）。この処理では、表示部２５を分割する枠４５を表示し、撮像範囲を９分割する処理を行う。
【００５８】
次に、表示部２５において分割された枠４５のうち、ユーザが所望する被写体位置に対応する枠４５を選択する（ステップＳ２６）。この処理では、ユーザが操作することにより選択された枠４５を検索対象枠として選択する処理が行われる。具体的には、ユーザがキー操作部２７に設けられている十字キーを上下左右に操作して、所望する枠上で十字キーの中央を押すことにより、所望する枠を選択することができる。そして、その選択された枠４５が検索対象枠として選択される。
【００５９】
次に、選択された枠内にＡＦ位置がある全フレームを検索する（ステップＳ２７）。この処理では、ＲＡＭ３５に記録された動画データの全フレームに対し、選択された枠に対応する撮像範囲にＡＦ位置の位置情報を有するフレームを検索する処理が行われる。次に、検索された動画データの全フレームの中からチャプター単位で代表フレームを抽出する（ステップＳ２８）。次に、抽出された代表フレームを一覧表示する（ステップＳ２９）。この処理では、抽出された各代表フレームを表示部２５上に表示する処理を行う。
【００６０】
次に、一覧表示された代表フレームの中から一の代表フレームを選択する（ステップＳ３０）。この処理では、ユーザが操作することにより選択された代表フレームを一の代表フレームとして選択する処理が行われる。具体的には、この処理では、ユーザがキー操作部２７に設けられている十字キーを上下に操作して、所望する代表フレームにおいて十字キーの中央を押すことにより、一覧表示されているフレームの中から所望する代表フレームを選択することができる。そして、その選択された代表フレームが一の代表フレームとして選択される。次に、選択された代表フレームに対応するチャプター位置から、動画の再生を開始する（ステップＳ３１）。この処理が終了すると、ステップＳ２２の動画再生処理に戻る。
【００６１】
尚、本実施の形態においては、選択された代表フレームに対応するチャプター位置から、動画の再生を開始するようにしたがこれに限られない。したがって、例えば、選択された代表フレームに対応するチャプターを動画データの編集対象としてもよい。つまり、選択された代表フレームに対応するチャプターを編集対象として選択する処理が行われた後に、画像の色合いを変化させたり、モザイクを加えたり、動画データ同士を結合又は分割を行うことができる動画の編集処理を実行するようにしてもよい。
【００６２】
図６に、動画再生処理において、表示部２５に表示される表示例を示す。
【００６３】
まず、ユーザが動画撮影モード／動画再生編集モード選択スライドスイッチを操作して、ＰＬＡＹボタンを操作すると、動画再生モードにより図６（ｇ）に示すように、表示部２５において、動画撮影処理において撮影された動画データの再生が行われる。
【００６４】
次に、図６（ｈ）に示すように、表示部２５上において、撮像範囲に対応する画面を分割した枠４５を表示され撮像範囲を９分割される。そして、ユーザが十字キーを上下左右に操作して強調されている枠を移動し、９分割されている枠４５のうち所望する撮像範囲の枠上で十字キーの中央を押すことにより、所望する撮像範囲の位置に対応する枠４５が選択される。
【００６５】
次に、図６（ｉ）に示すように、選択した枠４５に対応する位置情報を有するフレームに対応する代表フレームがチャプター単位で表示部２５の右枠４６において一覧になってキャプチャー表示される。このとき、代表フレームとともに、撮影が開始されてから経過した時間が表示された時間枠４４ａ，４４ｂ，４４ｃも表示される。
【００６６】
次に、図６（ｊ）に示すように、ユーザが十字キーを上下に操作して強調されている枠を移動し、右枠４６に表示された代表フレームの中から、再生の対象とする代表フレーム上で十字キーの中央を押すことにより、所望する代表フレームに対応するチャプターが選択される。
【００６７】
次に、図６（ｋ）に示すように、選択された代表フレームが表示部２５の左方に拡大表示され、選択された代表フレームに対応するチャプター位置から動画データの再生が行われる。この時、動画データの撮影が開始されてから経過した時間が表示された時間枠４４も一緒に表示される。
【００６８】
さらに、図６（ｌ）に示すように、選択された代表フレームをさらに指定することにより、表示部の右枠４６において一覧表示されているキャプチャー表示が消え、再生されている再生映像を表示部２５の全面に拡大表示する。
【００６９】
〔第２実施の形態〕
第２実施の形態では、デジタルカメラ１の動作が、動画再生編集処理において、第１実施の形態と異なる。すなわち、本実施の形態の動画撮影処理のステップＳ１〜ステップＳ１０の処理は、第１実施の形態における動画撮影処理のステップＳ１〜ステップＳ１０の処理と同様である。
【００７０】
図７は、本発明の第２実施の形態に係る撮像装置としてのデジタルカメラの機能構成図である。
本実施の形態の撮像装置は、第１の実施の形態の撮像装置と、被写体追跡手段により追跡された撮像範囲における被写体の位置の変化の軌跡を、表示部２５によって構成される表示手段に表示する軌跡表示手段と、軌跡表示手段により表示された軌跡の中から所定の箇所を選択する、キー操作部２７によって構成される軌跡選択手段と、軌跡選択手段により選択された所定の箇所における被写体の位置情報を軌跡選択位置情報として記憶する、ＲＡＭ３５などによって構成される軌跡選択位置情報記憶手段と、を備え、撮像データ検索手段は、軌跡選択位置情報記憶手段により記憶された軌跡選択位置情報に基づいて、ＲＡＭ３５などによって構成されるデータ記憶手段により記憶されたフレーム画像に対応する撮像データを検索する点が異なる。
【００７１】
図８を参照して、第２実施例におけるＣＰＵ２０の制御による動画再生モードの動作を示す動画再生編集処理のフローチャートについて説明する。この処理では、動画撮影処理において記録された撮影データを表示部２５に表示する処理を行う。
【００７２】
はじめに、ユーザにより動画撮影モード／動画再生編集モード選択スライドスイッチが操作され、ＰＬＡＹボタンが操作されると、動画の先頭位置から動画の再生を開始する（ステップＳ４１）。次に、動画再生処理を行う（ステップＳ４２）。
【００７３】
次に、動画の再生が停止されたか（又は、編集操作があったか）否かを判別する（ステップＳ４３）。この処理では、動画撮影モード／動画再生編集モード選択スライドスイッチが操作されたり、ＰＬＡＹボタンが再び操作されたりして動画の再生が停止されたか否かが判別される。動画の再生の停止は行われていないと判別したときには、ステップＳ４２の処理に戻る。一方で、動画の再生の停止が行われたと判別したときには、動画の再生（又は、編集）が終了したか否かを判別する（ステップＳ４４）。再生（又は編集）が終了したと判別したときには、動画再生編集処理を終了する。一方で、再生（又は編集）が終了していないと判別したときには、次のフレームのＡＦ位置を取得する（ステップＳ４５）。
【００７４】
次に、現フレームのＡＦ位置と、次のフレームのＡＦ位置とを結ぶ軌跡４６を表示部２５における画面上に表示する（ステップＳ４６）。この処理では、各フレームの位置情報を参照して、各フレームの位置情報に対応するＡＦ位置を結ぶ軌跡４６を表示部２５に表示する処理を行う。具体的には、撮像範囲内におけるＡＦの対象となった被写体のＡＦ位置の履歴を、各フレームに対応するＡＦ位置を結ぶ軌跡４６として、表示部２５において時間の経過とともに徐々に表示する。
【００７５】
次に、表示部２５における画面上の軌跡位置が指示操作されたか否かを判別する（ステップＳ４７）。この処理では、ユーザが指示操作することにより、軌跡４６の位置を指定する処理が行われる。具体的には、ユーザがキー操作部２７に設けられている十字キーを上下左右に操作して、所望する軌跡４６の位置で十字キーの中央を押すことにより、所望する軌跡４６の位置を指示することができる。
【００７６】
画面上の軌跡位置が指示操作されなかったと判別したときには、ステップＳ４５の処理に移る一方で、画面上の軌跡位置が指示操作されたと判別したときには、指示された軌跡位置にＡＦ位置があるフレームを検索する（ステップＳ４８）。この処理では、ＲＡＭ３５に記録された動画データの全フレームに対し、指示された軌跡位置に対応する撮像範囲にＡＦ位置の位置情報を有するフレームを検索する処理が行われる。次に、検索されたフレーム位置から動画の再生を開始する（ステップＳ４９）。この処理が終了すると、再びステップＳ４２の動画再生処理に戻る。
【００７７】
尚、本実施の形態においては、ユーザにより指示された軌跡位置に対応する撮像範囲にＡＦ位置の位置情報を有するフレームを検索し、該検索されたフレーム位置から動画の再生を開始するようにしたがこれに限られない。したがって、例えば、ユーザにより指示された軌跡位置に対応する撮像範囲にＡＦ位置の位置情報を有するフレームをチャプター単位で抽出し、抽出されたチャプターに対応する代表フレームを一覧表示し、一覧表示された代表フレームの中から一の代表フレームを選択し、選択された代表フレームに対応するチャプター位置から、動画の再生を開始するようにしてもよい。
【００７８】
また、検索されたフレーム位置から動画の再生を開始するようにしたがこれに限られない。したがって、例えば、指示された軌跡位置に対応するフレームから開始されるチャプターを動画データの編集対象としてもよい。つまり、指示された軌跡位置に対応するフレームから開始されるチャプターを編集対象として指示する処理が行われた後に、画像の色合いを変化させたり、モザイクを加えたり、動画データ同士を結合又は分割を行うことができる動画の編集処理を実行するようにしてもよい。
【００７９】
次に、図９を参照して、本願発明の第２実施の形態に係る動画再生編集処理において、表示部２５に表示される表示例について説明する。
【００８０】
図９は、動画再生処理において、表示部２５に表示される表示例を示す。
【００８１】
まず、はじめにユーザが動画撮影モード／動画再生編集モード選択スライドスイッチを操作して、ＰＬＡＹボタンを操作すると、動画再生モードにより図９（ｍ）に示すように、表示部２５において、動画撮影処理において撮影された動画データの再生が行われる。
【００８２】
次に、図９（ｎ）〜（ｏ）に示すように、撮像範囲内におけるＡＦの対象となった被写体のＡＦ位置の履歴が、各フレームに対応するＡＦ位置を結ぶ軌跡４６として、表示部２５において時間の経過とともに徐々に表示される。
【００８３】
次に、図９（ｐ）に示すように、ユーザがキー操作部２７に設けられている十字キーを上下左右に操作して、所望する軌跡４６の位置で十字キーの中央を押すことにより、所望する軌跡４６の位置の指示が行われる。このとき表示部２５において、指示された軌跡４６の位置がポイント４７で強調表示される。
【００８４】
次に、図９（ｑ）に示すように、指示された軌跡４６の位置に対応する撮像範囲にＡＦ位置の位置情報を有するフレームが、表示部２５の右上に表示された右上枠４８においてキャプチャー表示される。この時、動画データの撮影が開始されてから経過した時間が表示された時間枠４４ｄも一緒に表示される。
【００８５】
さらに、図９（ｒ）に示すように、キャプチャー表示されたフレームをさらに指定することにより、表示部２５の右上枠４８に表示されているキャプチャー表示が消え、指示したチャプター位置から動画データを表示部２５の全面において拡大表示される。
【００８６】
以上説明したように、本実施の形態おいては、撮像範囲内における被写体の位置を検出し、検出された被写体の位置に撮像した動画データの中からユーザが所望する動画データを検索するので、ユーザが撮像した際の撮像範囲における被写体の位置を引き金として所望のシーンの撮像データを検索することができる。これにより、撮影を行ったユーザが覚えている撮影した時の構図を元に容易に動画の場面検索を行うことができる。したがって、撮影内容が曖昧であっても、所望する動画データを非常に簡単に素早く場面検索を行うことができる。
【００８７】
また、本実施の形態においては、撮像して得られた複数のフレーム画像を圧縮して作成された動画データに対し、撮像範囲内においてＡＦの対象となった被写体のＡＦ位置の位置情報を対応付けた対応情報を関連付けて記録することから、動画撮影後において、画像処理などによる被写体位置の検出処理を不要として、検索処理の効率を向上させることができる。
【００８８】
また、本実施の形態にあっては、コンティニュアス的にＡＦ処理を行うための被写体の顔の位置をＡＦ領域として設定し、該設定されたＡＦ領域の位置情報を当該フレームに対応付けて記録する。そして、撮像して得られた複数のフレーム画像を圧縮して作成された動画データに対し、撮像範囲内においてＡＦの対象となった被写体のＡＦ位置の位置情報を対応付けた対応情報を関連付けて記録することから、ユーザにより選択された撮像範囲にＡＦ位置の位置情報を有するフレームを容易に検索することができ、検索された動画データの全フレームの中からチャプター単位で代表フレームの抽出を容易に行うことができる。
【００８９】
また、本実施の形態にあっては、デジタルカメラ１に搭載された被写体追跡機能により検出される被写体の特徴部のＡＦ位置を、撮影中においては、被写体の移動に合わせて撮影条件を変化させるために用いることができ、また、撮影後の画像再生においては、被写体の位置が異なる画像を検索するために用いることができる。これにより、同じ被写体追跡機能を撮影時と再生時の両方で効果的に利用することができる。
【００９０】
また、本実施の形態にあっては、ユーザにより選択された枠に対応する撮像範囲にＡＦ位置の位置情報を有するフレームを検索してチャプター単位で代表フレーム一覧表示し、一覧表示された代表フレームのうち、ユーザにより選択された代表フレームに対応するチャプター位置から、動画の再生を開始する。したがって、ユーザが所望する撮像範囲にＡＦ位置の位置情報を有するチャプターを容易に素早く検索することができ、動画の再生に利用することができる。
【００９１】
また、本実施の形態にあっては、ＲＡＭ３５に記録された動画データの全フレームに対し、選択された枠に対応する撮像範囲にＡＦ位置の位置情報を有するフレームの検索が行われる。したがって、ユーザが所望する撮像範囲に対応する指定領域内に被写体のＡＦ位置が含まれるフレームを容易に素早く検索することができる。
【００９２】
また、本実施の形態にあっては、各フレームの位置情報を参照して、各フレームの位置情報に対応するＡＦ位置を結ぶ軌跡４６を表示部２５に表示する。したがって、ユーザが、表示された軌跡のうち所望する撮像範囲における軌跡位置を指示することにより、指定された位置に被写体が映っているフレーム画像を容易に素早く検索することができる。
【００９３】
以上、様々な実施の形態の撮像装置について説明した。本発明の撮像装置は、画像取得部１０を備えた一般的なコンピュータを上述した各手段として機能させる撮像プログラムによって動作させることができる。撮像プログラムは、通信回線を介して配布することも可能であるし、ＣＤ−ＲＯＭなどの記録媒体に書き込んで配布することも可能である。
【符号の説明】
【００９４】
１    デジタルカメラ
１０    画像取得部
１１    レンズ
１２    シャッタ
１３    ＬＰＦ
１４    ドライバ
１５    アナログ信号処理部
１６    撮像センサ
１７    サンプリング／信号増幅処理部
１８    Ａ／Ｄコンバータ
１９    フラッシュ
２０    制御部（ＣＰＵ）
２２    プレビューエンジン
２３    Ｄ／Ａコンバータ
２４    ドライバ
２５    表示部
２６    イメージバッファ
２７    キー操作部
２８    デジタル信号処理部
２９    画像圧縮／伸張処理部
３０    プログラムメモリ
３１    画像メモリ
３２    カードＩ／Ｆ
３３    外部記録媒体
３４    外部接続用Ｉ／Ｆ
３５    ＲＡＭ
【図１】
2010213052.tif 000003
【図２】
2010213052.tif 000004
【図３】
2010213052.tif 000005
【図４】
2010213052.tif 000006
【図５】
2010213052.tif 000007
【図６】
2010213052.tif 000008
【図７】
2010213052.tif 000009
【図８】
2010213052.tif 000010
【図９】
2010213052.tif 000011