(57)【要約】【課題】  記録媒体に記録されている多数のコンテンツの所定のシーンを検索し、マルチインデックス表示すると、記録されているシーン数、時間などが多い場合に検索に時間を要する。再度表示する場合には同様の時間がかかる。検索時間を短縮し、装置の操作性を向上させる【解決手段】  記録媒体に記録されている多数の画像コンテンツから、所定の条件と一致する画像コンテンツを検索し、その検索結果をデータベースファイルとして記録媒体に記録することで、再度同様のコンテンツ検索を行う場合に、記録媒体に記録されているデータベースファイルを用いることで検索時間を短縮する。  また、画像記録中に前記データベースファイルを更新することで、新たに記録された動画コンテンツが反映された検索結果を得るための検索処理時間が短縮される。【選択図】  図１
2010041294.tif 000002
【特許請求の範囲】
【請求項１】
多数の画像コンテンツが記録されている記録媒体から、所定の条件と一致する画像コンテンツを検索する検索手段と、
前記検索手段によって得られた検索結果を、データベース化する検索データベース生成手段と、
前記検索データベースをファイルとして前記記録媒体に記録するデータベース記録手段と、
前記データベースに応じて再生画像を生成する画像再生手段と、
を有することを特徴とする画像記録再生装置。
【請求項２】
動画像を記録媒体に記録する画像記録手段と、
前記データベース記録手段によって記録された検索データベースファイルから検索条件を抽出する検索条件抽出手段と、
前記画像記録手段によって記録中の画像が、前記検索条件抽出手段によって得られた検索条件を満たすかを判別する記録画像判別手段と、
前記データベースに新たなデータを追記更新するデータベース更新手段と、
を有し、前記記録画像判別手段によって判別された結果に応じて、前記データベース更新手段で、検索データベースを更新することを特徴とする画像記録再生装置。
【請求項３】
前記データベースを所定の優先順位によってソートするソート手段を有することを特徴とする請求項１に記載の画像記録再生装置。
【請求項４】
前記検索手段の検索条件は記録日時であることを特徴とする請求項１に記載の画像記録再生装置。
【請求項５】
前記検索手段の検索条件は撮影位置情報であることを特徴とする請求項１に記載の画像記録再生装置。
【請求項６】
前記検索手段の検索条件は顔認識であることを特徴とする請求項１に記載の画像記録再生装置。
【請求項７】
前記検索手段の検索条件は個人認識であることを特徴とする請求項１に記載の画像記録再生装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は画像記録再生装置に関し、特に記録媒体から任意の画像をユーザに選択させ再生するための記録再生装置に関する。
【背景技術】
【０００２】
現在、ＤＶＤ−Ｒ／−ＲＷ／＋Ｒ／＋ＲＷ／ＲＡＭ、メモリカード、ＨＤＤなどのメディアに画像データを記録するビデオカメラが普及してきている。記録媒体の大容量化にともない記録可能な動画像コンテンツ数が増え、ユーザが所定の画像を容易に選択するための検索機能を搭載したビデオカメラが求められている。
【０００３】
従来のビデオカメラは、記録媒体に記録されている多数の画像コンテンツから、所定の記録日時に撮影された画像コンテンツを検索し、マルチインデックス再生するものがある。
【０００４】
また、記録時にメタデータを付加して記録することで、再生時に付加したメタデータを検索し、所定の画像を再生するものがある。（例えば、特許文献１参照）
【特許文献１】特開２００２−１０８８９１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、記録媒体に記録されている多数のコンテンツから所定のシーンを検索しマルチインデックス表示するためには、すべての画像コンテンツに対して検索処理を行う必要があり、記録されているシーン数、撮影時間などに応じて検索処理時間が長くなる問題があった。また、再度表示する場合には同様の処理時間を必要とするといった問題がある。
【０００６】
本発明は上述の問題に関して鑑みてなされたもので、記録媒体に記録されている多数のコンテンツから、所定の条件に一致するものを検索する場合に、検索時間を短縮し装置の操作性を向上させることを目的とする。
【課題を解決するための手段】
【０００７】
多数の画像コンテンツが記録されている記録媒体から、所定の条件と一致する画像コンテンツを検索する検索手段と、
前記検索手段によって得られた検索結果を、データベース化する検索データベース生成手段と、
前記検索データベースをファイルとして前記記録媒体に記録するデータベース記録手段と、
前記データベースに応じて再生画像を生成する画像再生手段と、を有することを特徴とする。
【０００８】
また、動画像を記録媒体に記録する画像記録手段と、
前記データベース記録手段によって記録された検索データベースファイルから検索条件を抽出する検索条件抽出手段と、
前記画像記録手段によって記録中の画像が、前記検索条件抽出手段によって得られた検索条件を満たすかを判別する記録画像判別手段と、
前記データベースに新たなデータを追記更新するデータベース更新手段と、
を有し、前記記録画像判別手段によって判別された結果に応じて、前記データベース更新手段で、検索データベースを更新することを特徴とする。
【０００９】
また、前記データベースを所定の優先順位によってソートするソート手段を有することを特徴とする。
【００１０】
また、前記検索手段の検索条件は記録日時であることを特徴とする。
【００１１】
また、前記検索手段の検索条件は撮影位置情報であることを特徴とする。
【００１２】
また、前記検索手段の検索条件は顔認識であることを特徴とする。
【００１３】
また、前記検索手段の検索条件は個人認識であることを特徴とする。
【発明の効果】
【００１４】
請求項１に記載の装置によれば、
記録媒体に記録されている多数の画像コンテンツから、所定の条件と一致する画像コンテンツを検索し、その検索結果をデータベースファイルとして記録媒体に記録することで、再度同様のコンテンツ検索を行う場合に、記録媒体に記録されているデータベースファイルを用いることで検索時間を短縮することが可能である。
【００１５】
また、画像記録中に前記データベースファイルを更新することで、新たに記録された動画コンテンツが反映された検索結果を得るための検索処理時間が短縮される。
【発明を実施するための最良の形態】
【００１６】
次に、本発明の詳細を実施例の記述に従って説明する。
【実施例１】
【００１７】
以下、図を参照しながら本発明の一実施形態について説明する。
【００１８】
図１は本発明に係る画像記録再生装置１００の概略ブロック構成図である。
【００１９】
１０１は、ＣＣＤなどの撮像素子含むカメラレンズユニット。
【００２０】
１０２は、カメラレンズユニット１０１からの撮像信号を電気信号に変換するカメラ信号処理部。
【００２１】
１０３は、ビデオフレームメモリ１０７に一時保持されている画像データから顔認識、個人判別などの画像の特徴を抽出する画像判別手段。
【００２２】
１０４は、カメラ信号処理１０２から入力される画像データをＭＰＥＧ−４  ＡＶＣ／Ｈ．２６４などのフレーム間差分を用いて符号化処理や、ストリームバッファ１０８から符号化データを読み出し、デコード処理を行うＭＰＥＧ  ＣＯＤＥＣ。
【００２３】
１０５は、ビデオフレームメモリ１０７に一時保持されている画像データを読み出し、ＬＣＤ、外部出力等の表示装置へ信号を出力する表示部。
【００２４】
１０６は、ビデオフレームメモリ１０７に一時保持されている画像データを読み込み拡大縮小処理を施し、ビデオフレームメモリ１０７へ書き戻すリサイズ部。
【００２５】
１０７は、カメラ信号処理１０１からの出力画像データや、ＭＰＥＧ  ＣＯＤＥＣ１０４からのでコード画像データ、リサイズ部１０６からの出力画像データを一時保持するビデオフレームメモリ。
【００２６】
１０８は、ＭＰＥＧ  ＣＯＤＥＣ１０４から出力される符号化データを一時保持するストリームバッファ。
【００２７】
１０９は、メモリカード２００に記録されている画像コンテンツをＭｅｄｉａ  Ｉ／Ｆを介して読み込み、ユーザが選択した検索条件に合致するかの判別を行う検索手段。
【００２８】
１１０は、検索手段１０９が検索した結果から検索データベースを生成しデータバッファ１１４に出力する検索データベース生成手段。
【００２９】
１１１は、データベース記録／更新手段１１２によってメモリカード２００に記録されたデータベースファイルが、どのような条件で検索されたデータベースなのか、検索条件を抽出する検索条件抽出手段。
【００３０】
１１２は、データバッファ１１４に一時保持されている検索データベースをファイルとしてメモリカード２００に記録するデータベース記録／更新手段。
【００３１】
１１３は、データバッファ１１４に一時保持されている検索データベースを読み込みデータベースを所定の優先順位でソートし、データバッファ１１４に書き戻す検索データベースソート手段。
【００３２】
１１４は、検索データベースを一時保持するデータバッファ。
【００３３】
１１５は、メモリカード２００へのアクセスを行うためのＭｅｄｉａ  Ｉ／Ｆ。
【００３４】
１１６は、画像記録再生装置１００全体を制御するＣＰＵ。
【００３５】
２００は、記録媒体であるメモリカード。
【００３６】
カメラレンズユニット１０１〜ＣＰＵ１１６によって画像記録装置１００は構成されており、メモリカード２００は、記録媒体１００から脱着可能である。
【００３７】
通常記録時は、カメラレンズユニット１０１とカメラ信号処理１０２を介して得られた画像データをＭＰＥＧ  ＣＯＤＥＣ１０４が符号化しストリームバッファ１０８に出力し、Ｍｅｄｉａ  Ｉ／Ｆ１１５を介してメモリカード２００に動画ストリームファイルを記録する。記録終了時は、ＭＰＥＧ  ＣＯＤＥＣ１０４が符号化を停止し、ストリームバッファ１０８に保持されているすべての動画ストリームをメモリカード２００に記録することで記録動作を終了する。
【００３８】
通常再生時は、メモリカード２００に記録されている動画ストリームファイルをＭｅｄｉａ  Ｉ／Ｆ１１５を介してストリームバッファ１０８に読み込み、ＭＰＥＧ  ＣＯＤＥＣ１０４はストリームバッファ１０８に一時保持されている動画ストリームをデコードし、ビデオフレームメモリ１０７へ出力し、表示手段１０５はビデオフレームメモリ１０７に一時保持されている画像データを出力する。
【００３９】
通常のマルチインデックス再生は、動画ストリームファイルから先頭のＩピクチャを含むデータをＭｅｄｉａ  Ｉ／Ｆ１１５を介してストリームバッファ１０８に読み込み、ＭＰＥＧ  ＣＯＤＥＣ１０４を用いてデコードし、ビデオフレームメモリ１０７に一時保持した後にリサイズ部１０６を用いて縮小処理を行う。この処理を同一画面に表示する画像処理を行うことでマルチインデックス画像をビデオフレームメモリ１０７に作成し、表示手段１０５によって出力することで実現する。
【００４０】
図２は、本発明に係る検索マルチインデックス再生の動作フローチャートである。
【００４１】
本実施の形態ではメモリカード２００に記録されている動画コンテンツから特定人物が記録されているシーンを検索し、マルチインデックス再生する動作について説明する。
【００４２】
ユーザは通常再生を行い検索したい特定人物が撮影されているシーンを再生し、画像判別手段１０３によってその人物の顔を判別するための個人特徴データを作成する。
【００４３】
その後にユーザの支持によって上記で判別された特定人物をメモリカード２００に記録されている動画コンテンツから検索するように動画記録再生装置１００に指示する。
【００４４】
まず、検索条件抽出手段１１１によって、上記の個人特徴データによって検索されたデータベースファイルがメモリカード２００に存在するか判断する（Ｓ２０１）。
【００４５】
Ｓ２０１でＮｏならば、メモリカード２００に記録されている動画コンテンツすべてをＩピクチャのみ再生するサーチ再生をおこない、再生された画像を画像判別手段１０３で判定し、上記個人特徴データと一致するかを判断する（Ｓ２０２）。
【００４６】
一致したシーンが存在した場合は、その動画コンテンツのファイル名と再生時間情報、例えばＭＰＥＧデータのＰＴＳ（Ｐｒｅｓｅｎｔａｔｉｏｎ  Ｔｉｍｅ  Ｓｔａｍｐ）をコンテンツ検索手段１０９が取得し、検索データベース生成手段１１０によってデータバッファ１１４に検索データベースとして蓄積していく（Ｓ２０３）。
【００４７】
すべての動画コンテンツから特定人物の検索が終了後に、データバッファ１１４に蓄積された検索データベースを、検索データベースソート手段１１３によって優先順位、例えば特定人物が連続して記録されている時間によってソートする（Ｓ２０４）。
【００４８】
データバッファ１１４に蓄積されている検索データベースを、検索データベース記録／更新手段１１２によってメモリカード２００にファイルとして記録する（Ｓ２０５）。
【００４９】
データバッファ１１４に一時保持されている検索データベースをもとに、マルチインデックス再生をおこなうＩピクチャの位置を決定し、マルチインデックス再生を行う（Ｓ２０６）。
【００５０】
また、Ｓ２０１でＹｅｓと判断された場合は、メモリカード２００に記録されている検索データベースファイルをデータバッファ１１４に読み込み、Ｓ２０６へ移行する（Ｓ２０７）。
【００５１】
また、本実施の形態では検索条件を“特定人物が撮影されているシーン”で検索をおこなったが、動画ストリームに多重化されている付加情報、メタデータ、関連ファイルなどに記録されている『撮影日時』で検索してもよい。
【００５２】
また、本実施の形態では検索条件を“特定人物が撮影されているシーン”で検索をおこなったが、動画ストリームに多重化されている付加情報、メタデータ、関連ファイルなどに記録されている『撮影位置情報』で検索してもよい。
【００５３】
また、本実施の形態では検索条件を“特定人物が撮影されているシーン”で検索をおこなったが、『人物が撮影されているシーン』で検索してもよい。
【００５４】
図３は、本発明に係る検索データベース更新記録動作の動作フローチャートである。
【００５５】
ユーザによって記録動作が要求されると、メモリカード２００に検索データベースファイルが存在するかを判断する（Ｓ３０１）。
【００５６】
Ｓ３０１でＹｅｓならば検索データベースファイルをデータバッファ１１４に読み込み、検索条件抽出手段１１１によって、上記検索データベースの検索条件を取得する。例えば検索データベースの検索条件として“特定人物が撮影されているシーン”で検索をおこなった検索条件Ａが取得できたとする（Ｓ３０２）。
【００５７】
次に、カメラレンズユニット１０１とカメラ信号処理１０２を介して得られた画像データをＭＰＥＧ  ＣＯＤＥＣ  １０４  が符号化しストリームバッファ１０８に出力するように指示し、記録を開始する（Ｓ３０３）。
【００５８】
Ｓ３０２で取得した検索条件に対して、現在記録している画像が一致するかをリアルタイムでサンプリングする。例えば上記の検索条件Ａに対しては画像判別手段１０３を用いて“特定人物が撮影されているかを判別する（Ｓ３０４）。
【００５９】
Ｙｅｓならば検索データベース記録／更新手段１１２によって、データバッファ１１４に蓄積されているデータベースを更新し、検索データベースソート手段１１３によってソート処理を行った後にメモリカード２００に検索データベースファイルとして記録する（Ｓ３０５）。
【００６０】
Ｓ３０４でＮｏ、またはＳ３０５の処理が終了後に、ユーザから記録停止要求がきているかを判断する（Ｓ３０６）。
【００６１】
Ｓ３０６でＹｅｓならば記録動作を終了する。ＮｏならばＳ３０４に戻る。
【００６２】
Ｓ３０１でＮｏならば、通常記録動作になり、カメラレンズユニット１０１とカメラ信号処理１０２を介して得られた画像データをＭＰＥＧ  ＣＯＤＥＣ  １０４が符号化しストリームバッファ１０８に出力するように指示し、記録を開始する（Ｓ３０７）。
【００６３】
Ｓ３０７の処理が終了後に、ユーザから記録停止要求がきているかを判断する（Ｓ３０８）。
【００６４】
Ｓ３０８でＹｅｓならば記録動作を終了する。ＮｏならばＳ３０８に戻る。
【００６５】
また、本実施の形態ではＳ３０２で取得する検索条件Ａを“特定人物が撮影されているシーン”として検索データベースの更新をおこなったが、動画ストリームに多重化して記録する付加情報、メタデータ、関連ファイル中の『撮影日時』で検索データベースを更新してもよい。
【００６６】
また、本実施の形態ではＳ３０２で取得する検索条件Ａを“特定人物が撮影されているシーン”として検索データベースの更新をおこなったが、動画ストリームに多重化して記録する付加情報、メタデータ、関連ファイル中の『撮影位置情報』で検索データベースを更新してもよい。
【００６７】
また、本実施の形態ではＳ３０２で取得する検索条件Ａを“特定人物が撮影されているシーン”として検索データベースの更新をおこなったが、『人物が撮影されているシーン』で検索してもよい。
【００６８】
また、本実施の形態ではＳ３０２で取得する検索条件Ａに対してだけ検索データベース更新をおこなったが、メモリカード２００に複数の検索データベースファイルが存在する場合は、Ｓ３０２で複数の検索条件を取得し、複数の検索データベース更新をおこなってもよい。
【００６９】
上記本発明に係る検索マルチインデックス再生動作によって、検索結果をデータベースファイルとしてメモリカード２００に記録することで、再度同様の検索を行う場合には、検索時間を短縮することが可能である。
【００７０】
また、上記本発明に係る検索データベース更新記録動作によって、画像記録中に前記データベースファイルを更新することで、記録後すぐに同様のコンテンツ検索を行う場合に新たに記録された動画コンテンツが反映された検索結果を得る処理時間が短縮される。
【図面の簡単な説明】
【００７１】
【図１】本発明に係る画像記録装置１００の概略ブロック構成図
【図２】本発明に係る検索マルチインデックス再生の動作フローチャート
【図３】本発明に係る検索データベース更新記録動作の動作フローチャート
【符号の説明】
【００７２】
１００  画像記録再生装置
１０１  カメラレンズユニット
１０２  カメラ信号処理
１０３  画像判別手段
１０４  ＭＰＥＧ  ＣＯＤＥＣ
１０５  表示手段
１０６  リサイズ
１０７  ビデオフレームメモリ
１０８  ストリームバッファ
１０９  コンテンツ検索手段
１１０  検索データベース生成手段
１１１  検索条件抽出手段
１１２  データベース記録／更新手段
１１３  検索データベースソート手段
１１４  データバッファ
１１５  Ｍｅｄｉａ  Ｉ／Ｆ
１１６  ＣＰＵ
２００  メモリカード
【図１】
2010041294.tif 000003
【図２】
2010041294.tif 000004
【図３】
2010041294.tif 000005