(57)【要約】【課題】ユーザが実際に編集作業を行うことなく、擬似の編集効果を得る。【解決手段】（ａ）ホスト側のカムコーダ１００Ａは、ＵＳＢ接続されたデバイス側のカムコーダ１００Ｂから、動画像ファイルおよび画像情報管理ファイル上の動画像関連メタデータを取り込み、内部のＨＤＤに追加記録する。（ｂ）カムコーダ１００Ａは、記録日時情報から、記録日時が重複している動画像ファイルを抽出し、ＧＯＰの整数倍の区間毎に画像の重要度を示す重要度スコアを算出する。（ｃ）所定の動画像ファイルを再生する際に、重複情報に基づいて、当該所定のファイルと記録日時が重複する動画像ファイルが存在するとき、重複期間においては、区間毎に、双方の動画像ファイルに基づく画像のうち、重要度スコアの高い方の画像を選択して表示する。【選択図】図１
2010074271.tif 000002
【特許請求の範囲】
【請求項１】
動画像データストリームをファイル化して得られた動画像ファイルが記録された記録媒体から上記動画像ファイルを読み出すファイル読み出し部と、
上記ファイル読み出し部で読み出された動画像ファイルに基づく動画像の表示部への表示を制御する制御部を備え、
上記制御部は、上記記録媒体に記録されている他の動画像ファイルとの間の記録日時の重複に係る重複情報に基づいて、上記ファイル読み出し部で上記記録媒体から読み出される第１の動画像ファイルと記録日時が重複する第２の動画像ファイルが存在するとき、上記記録日時の重複期間において上記第１の動画像ファイルに基づく動画像と上記第２の動画像ファイルに基づく動画像との表示部への表示を制御する
再生装置。
【請求項２】
上記制御部は、上記記録日時の重複期間において、上記第１の動画像ファイルに基づく動画像または上記第２の動画像ファイルに基づく動画像が選択的に表示されるように上記表示部への表示を制御する
請求項１に記載の再生装置。
【請求項３】
上記重複情報は、該動画像ファイルが他の動画像ファイルとの間で記録日時の重複があるとき、重複期間を一定区間で区切って得られた区間毎に、画像の重要度を示す重要度情報を含み、
上記制御部は、上記記録日時の重複期間において、上記第１の動画像ファイルに基づく動画像または上記第２の動画像ファイルに基づく動画像が選択的に表示されるように上記表示部への表示を制御する際に、上記区間毎の重要度情報に基づいて、該区間毎に上記表示される動画像の選択を行う
請求項２に記載の再生装置。
【請求項４】
上記制御部は、上記記録日時の重複期間において、上記第１の動画像ファイルに基づく動画像または上記第２の動画像ファイルに基づく動画像が選択的に表示されるように上記表示部への表示を制御する際に、上記区間毎の重要度情報に基づいて、該区間毎に、上記表示される動画像として重要度の高い方の動画像を選択する
請求項３に記載の再生装置。
【請求項５】
上記制御部が上記区間毎に上記表示される動画像として重要度の高い方の画像を選択する状態から、上記制御部が上記区間毎に上記表示される動画像として重要度の低い方の画像を選択する状態へ移行させるユーザ操作部をさらに備える
請求項４に記載の再生装置。
【請求項６】
上記制御部が上記区間毎に上記表示される動画像として重要度の高い方の画像を選択する状態から、所定数の区間だけ上記制御部が上記区間毎に上記表示される動画像として重要度の低い方の画像を選択する状態へ移行させるユーザ操作部をさらに備える
請求項４に記載の再生装置。
【請求項７】
上記制御部は、上記表示される動画像として、上記第１の動画像ファイルに基づく動画像と上記第２の動画像ファイルに基づく動画像のうち一方を連続して設定時間だけ選択した後には、所定時間だけ他方の動画像ファイルに基づく動画像を選択する
請求項４に記載の再生装置。
【請求項８】
上記動画像データストリームは圧縮符号化されており、上記一定区間は上記動画像データストリームの復号再生単位の整数倍の長さを持つ
請求項３に記載の再生装置。
【請求項９】
上記制御部は、上記記録日時の重複期間において、上記第１の動画像ファイルに基づく動画像と上記第２の動画像ファイルに基づく動画像が並列的に表示されるように上記表示部への表示を制御する
請求項１に記載の再生装置。
【請求項１０】
動画像データストリームをファイル化して得られた動画像ファイルが記録された記録媒体から上記動画像ファイルを読み出すファイル読み出しステップと、
上記ファイル読み出しステップで読み出された動画像ファイルに基づく動画像の表示部への表示を制御する制御ステップを備え、
上記制御ステップでは、上記記録媒体に記録されている他の動画像ファイルとの間の記録日時の重複に係る重複情報に基づいて、上記ファイル読み出しステップで上記記録媒体から読み出される第１の動画像ファイルと記録日時が重複する第２の動画像ファイルが存在するとき、上記記録日時の重複期間において上記第１の動画像ファイルに基づく動画像と上記第２の動画像ファイルに基づく動画像との表示部への表示を制御する
再生方法。
【請求項１１】
外部機器から動画像ファイルを取得する動画像ファイル取得部と、
動画像ファイルが記録されている記録媒体から、上記動画像ファイル取得部で取得された第１の動画像ファイルと記録日時が重複する第２の動画像ファイルを検索する動画像ファイル検索部と、
上記動画像ファイル検索部で上記第２の動画像ファイルが検索されたとき、上記第１の動画像ファイルおよび上記第２の動画像ファイルのそれぞれにおいて、重複期間を一定区間で区切って得られた区間毎に、画像の重要度を示す重要度情報を生成する重要度情報生成部と、
上記動画像ファイル検索部の検索結果および上記重要度情報生成部の生成結果に基づく重複情報の記憶部への保持を制御する重複情報保持制御部と
を備える画像処理装置。
【請求項１２】
上記動画像ファイルは、圧縮符号化された動画像データストリームをファイル化して得られたものであり、
上記一定区間は、上記動画像データストリームの復号再生単位の整数倍の長さを持つ
請求項１１に記載の画像処理装置。
【請求項１３】
上記重複情報保持制御部は、上記動画像ファイルが記録されている上記記録媒体に、上記重複情報を保持する
請求項１１に記載の画像処理装置。
【請求項１４】
上記重複情報保持制御部は、内蔵メモリに、上記重複情報を保持する
請求項１１に記載の画像処理装置。
【請求項１５】
外部機器から動画像ファイルを取得する動画像ファイル取得ステップと、
動画像ファイルが記録されている記録媒体から、上記動画像ファイル取得ステップで取得された第１の動画像ファイルと記録日時が重複する第２の動画像ファイルを検索する動画像ファイル検索ステップと、
上記動画像ファイル検索ステップで上記第２の動画像ファイルが検索されたとき、上記第１の動画像ファイルおよび上記第２の動画像ファイルのそれぞれにおいて、重複期間を一定区間で区切って得られた区間毎に、画像の重要度を示す重要度情報を生成する重要度情報生成ステップと、
上記動画像ファイル検索ステップの検索結果および上記重要度情報生成ステップの生成結果に基づく重複情報の記憶部への保持を制御する重複情報保持ステップと
を備える画像処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、再生装置および再生方法に関する。詳しくは、この発明は、記録媒体から所定の動画像ファイルを読み出し、この所定の動画像ファイルに基づく動画像の表示を行う際に、この所定の動画像ファイルの重複情報に基づいて、この所定の動画像ファイルと記録日時が重複している他の動画像ファイルが存在するときには、記録日時の重複期間において、双方の動画像ファイルに基づく動画像の表示を行うことにより、ユーザが実際に編集作業を行うことなく、擬似の編集効果を簡易に得るようにした再生装置等に関する。
【背景技術】
【０００２】
従来、家庭用ビデオカメラはイベントの撮影などに使用されることが多いが、通常は一台のカメラでの撮影なので固定視点に限定され、複数のカメラアングルでの撮影ができない。そのため、撮影画像は、冗長な部分も多く、おもしろみに欠けるものが多い。
【０００３】
カメラと撮影者が複数用意できた場合でも、複数のカメラで撮影した複数の動画をひとつのコンテンツとして閲覧するためには編集作業が必要になる。近年コンピュータを使用したノンリニア編集システムが複数のメーカから商品化され、リニア編集時代に比べ比較的やりやすい環境がそろってきている。
【０００４】
例えば、特許文献１には、映像素材をタイムライン上にドラッグアンドドロップまたは自動で並び替える編集方法が提案されている。また、例えば、特許文献２には、２台以上のストリーム記録装置の記録ストリームの日時情報からマルチアングルストリームを生成する編集装置が提案されている。
【０００５】
しかし、編集作業は画像取り込み、オーサリング、再エンコード出力といった過程を含み、作業時間も実撮影時間の数倍かかり、編集技術的にも、手間の問題的にも一般ユーザにとっては敷居が高く、面倒であるという問題は本質的には解決されない。
【０００６】
なお、特許文献３には、記録データのストリームに記録日時やカメラ情報などの付加情報を含むように記録する装置が提案されている。また、特許文献４には、光ディスクのフォーマットに対応する形でビデオ、オーディオストリーミングデータを記録媒体に多重記録する装置及び方法が提案されている。
【０００７】
【特許文献１】特開２００７−３１７３５３号公報
【特許文献２】特開２００５−２８６６６９号公報
【特許文献３】特開２００４−３５０２５１号公報
【特許文献４】特開２００７−１５０６７４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００８】
複数のアングルの撮影動画像が存在する場合、編集作業を行うことで、個々の撮影動画像画像から冗長な部分を削除し、重要度の高い部分を抜き出した動画像を構成できる。しかし、上述したように、編集作業は画像取り込み、オーサリング、再エンコード出力といった過程を含み、作業時間も実撮影時間の数倍かかり、編集技術的にも、手間の問題的にも一般ユーザにとっては敷居が高く、面倒である。
【０００９】
この発明の目的は、ユーザが実際に編集作業を行うことなく、擬似の編集効果を簡易に得ることにある。
【課題を解決するための手段】
【００１０】
この発明の概念は、
動画像ストリームをファイル化して得られた動画像ファイルが記録された記録媒体から上記動画像ファイルを読み出すファイル読み出し部と、
上記ファイル読み出し部で読み出された動画像ファイルに基づく動画像の表示部への表示を制御する制御部を備え、
上記制御部は、上記記録媒体に記録されている他の動画像ファイルとの間の記録日時の重複に係る重複情報に基づいて、上記ファイル読み出し部で上記記録媒体から読み出される第１の動画像ファイルと記録日時が重複する第２の動画像ファイルが存在するとき、上記記録日時の重複期間において上記第１の動画像ファイルに基づく動画像と上記第２の動画像ファイルに基づく動画像との表示部への表示を制御する
再生装置にある。
【００１１】
この発明において、ファイル読み出し部により、記録媒体から動画像ファイルが読み出される。記録媒体は、再生装置に内蔵の記録媒体、あるいは再生装置に着脱自在な記録媒体であり、例えば、ＨＤＤ（Hard disk drive）、メモリカード、内蔵メモリ、ＤＶＤ-Ｖｉｄｅｏ、ＤＶＤ-ＶＲ、ＡＶＣＨＤ  ＤＶＤ、Ｂｌｕ-ｒａｙ等の光記録ディスクである。ここで、「ＤＶＤ」、「ＡＶＣＨＤ」、「Ｂｌｕ-ｒａｙ」は、それぞれ、登録商標であるが、規格名としても用いられる。
【００１２】
制御部により、ファイル読み出し部で読み出された動画像ファイルに基づく動画像の表示部への表示が制御される。表示部は、例えば、再生装置に内蔵されているか、あるいは、再生装置接続されたモニタ等である。
【００１３】
制御部では、記録媒体に記録されている他の動画像ファイルとの間の記録日時の重複に係る重複情報に基づいて、ファイル読み出し部で記録媒体から読み出される第１の動画像ファイルと記録日時が重複する第２の動画像ファイルが存在するか認識される。この重複情報は、例えば、再生装置の内蔵メモリ、あるいは、記録媒体に記録されている。
【００１４】
第２の動画像ファイルが存在するとき、制御部により、記録日時の重複期間においては、第１の動画像ファイルに基づく動画像と第２の動画像ファイルに基づく動画像との表示部への表示が制御される。これにより、ユーザが実際に編集作業を行うことなく、擬似の編集効果を簡易に得ることを可能となる。
【００１５】
例えば、記録日時の重複期間において、第１の動画像ファイルに基づく動画像または第２の動画像ファイルに基づく動画像が選択的に表示される。例えば、所定区間毎に、第１の動画像ファイルに基づく動画像と第２の動画像ファイルに基づく動画像とが交互に表示されるようにしてもよい。
【００１６】
また、例えば、以下のようにされてもよい。ここで、動画像ファイルの重複情報は、この動画像ファイルが他の動画像ファイルとの間で記録日時の重複があるとき、重複期間を一定区間で区切って得られた区間毎に、画像の重要度を示す重要度情報を含むものとされる。
【００１７】
例えば、動画像データストリームは圧縮符号化されており、一定区間は動画像データストリームの復号再生単位の整数倍の長さとされる。このように一定区間の長さが設定されることにより、区間毎に、表示される動画像が第１の動画像ファイルに基づく動画像または第２の動画像ファイルに基づく動画像が選択表示されるとき、当該区間の動画像データだけを効率的にデコードして用いることができる。
【００１８】
この場合、記録日時の重複期間において、区間毎に、重要度情報に基づいて、第１の動画像ファイルに基づく動画像または第２の動画像ファイルに基づく動画像が選択的に表示される。例えば、区間毎に、表示される画像として、重要度の高い方の動画像が選択される。これにより、重要度の高い部分が抜き出されて動画像の表示が行われるので、良好な擬似編集効果が得られる。
【００１９】
なお、上述したように、区間毎に表示される画像として重要度の高い方の動画像が選択される状態から、区間毎に表示される動画像として、所定数の区間、あるいはもとの状態に戻す操作が行われるまで、重要度の低い方の画像を選択する状態へ移行させるユーザ操作部をさらに備える、ようにされてもよい。これにより、ユーザは重要度が低い動画像が選択される状態に意識的に移行させることができ、当該動画像の確認が可能となる。
【００２０】
また、上述したように、区間毎に表示される画像として重要度の高い方の動画像が選択される状態で、一方の動画像が連続して予め設定された時間だけ連続して選択された後には、所定時間だけ他方の動画像が選択される、ようにしてもよい。これにより、同一の動画像ファイルに基づく動画像が長い間連続して表示されることが回避され、良好な擬似編集効果が得られる。
【００２１】
また、例えば、上述したように記録日時の重複期間において、第１の動画像ファイルに基づく動画像または第２の動画像ファイルに基づく動画像が選択的に表示される代わりに、例えば、第１の動画像ファイルに基づく動画像と第２の動画像ファイルに基づく動画像が並列的に表示されてもよい。この場合、ユーザは、複数の動画像を並べて見ることができる。
【００２２】
また、この発明の概念は、
外部機器から動画像ファイルを取得する動画像ファイル取得部と、
動画像ファイルが記録されている記録媒体から、上記動画像ファイル取得部で取得された第１の動画像ファイルと記録日時が重複する第２の動画像ファイルを検索する動画像ファイル検索部と、
上記動画像ファイル検索部で上記第２の動画像ファイルが検索されたとき、上記第１の動画像ファイルおよび上記第２の動画像ファイルのそれぞれにおいて、重複期間を一定区間で区切って得られた区間毎に、画像の重要度を示す重要度情報を生成する重要度情報生成部と、
上記動画像ファイル検索部の検索結果および上記重要度情報生成部の生成結果に基づく重複情報の記憶部への保持を制御する重複情報保持制御部と
を備える画像処理装置にある。
【００２３】
この発明において、動画像ファイル取得部により、外部機器から動画像ファイルが取得される。動画像ファイル取得部では、例えば、有線または無線の通信により、外部機器から動画像ファイルが取得される。動画像ファイル検索部により、動画像ファイルが記録されている記録媒体から、動画像ファイル取得部で取得された第１の動画像ファイルと記録日時が重複する第２の動画像ファイルが検索される。
【００２４】
動画像検出部により第２の動画像検索部が検索された場合、重要度情報生成部により、第１の動画像ファイルおよび第２の動画像ファイルのそれぞれにおいて、重複期間を一定区間で区切って得られた区間毎に、画像の重要度を示す重要度情報が生成される。例えば、動画像ファイルは、圧縮符号化された動画像データストリームをファイル化して得られたものであり、一定区間は、動画像データストリームの復号再生単位の整数倍の長さとされる。
【００２５】
このように一定区間の長さが設定されることにより、擬似編集効果再生を行う際に、重要度情報に基づいて、区間毎に、表示される動画像が第１の動画像ファイルに基づく動画像または第２の動画像ファイルに基づく動画像を選択表示する際に、当該区間の動画像データだけを効率的にデコードして用いることが可能となる。
【００２６】
重複情報保持制御部により、動画像ファイル検索部の検索結果および重要度情報生成部の生成結果に基づく重複情報の記憶部への保持が制御される。例えば、重複情報は、動画像ファイルが記録されている記録媒体、あるいは、内蔵メモリに保持される。このように、記憶部に保持された重複情報は、擬似編集効果再生を行う際に用いることができる。
【発明の効果】
【００２７】
この発明によれば、記録媒体から所定の動画像ファイルを読み出し、この所定の動画像ファイルに基づく動画像の表示を行う際に、この所定の動画像ファイルの重複情報に基づいて、この所定の動画像ファイルと記録日時が重複している他の動画像ファイルが存在するときには、記録日時の重複期間において、双方の動画像ファイルに基づく動画像の表示を行うものであり、ユーザが実際に編集作業を行うことなく、擬似の編集効果を簡易に得ることができる。
【発明を実施するための最良の形態】
【００２８】
以下、発明を実施するための最良の形態（以下、「実施の形態」とする）について説明する。
【００２９】
［実施の形態の概略］
図１（ａ）〜（ｄ）は、実施の形態の概略を示している。図１（ａ）に示すように、ホスト（ＨＯＳＴ）側のビデオカメラレコーダ１００Ａは、ＵＳＢ（Universal Serial Bus）にて、デバイス（Ｄｅｖｉｃｅ）側のビデオカメラレコーダ１００Ｂに接続される。ビデオカメラレコーダ１００Ａ，１００Ｂの構成については後述する。ホスト側のビデオカメラレコーダ１００Ａでは、デバイス側のビデオカメラレコーダ１００Ｂから、動画像ファイルおよび画像情報管理ファイル上の動画像関連メタデータの取り込みが行われ、内部のＨＤＤ（Hard Disk Drive）に追加記録することが行われる。
【００３０】
その後、図１（ｂ）に示すように、記録日時情報から、記録日時が重複している動画像ファイルを抽出することが行われる。ここで、動画像ファイル１（動画１）、動画像ファイル２（動画２）、動画像ファイル３（動画３）は、ＨＤＤに既に記録されていた動画像ファイルである。また、動画像ファイル４（動画４）はＨＤＤに追加記録された動画像ファイルである。この例では、動画像ファイル４は、動画像ファイル２と記録日時が重複している。
【００３１】
そして、この記録日時の重複期間において、重複している動画像ファイルのそれぞれで、一定区間で区切って得られた区間毎に画像の重要度を示す重要度スコアを算出することが行われる。この実施の形態において、各動画像ストリームはＭＰＥＧ（Moving Picture Experts Group）方式で圧縮符号化されており、一定区間は復号再生単位であるＧＯＰ（Group Of Pictures）の整数倍の長さ、例えば１０ＧＯＰに設定されている。
【００３２】
その後、図１（ｃ）に示すように、再生時において、所定の動画像ファイルを再生する際に、重複情報に基づいて、当該所定のファイルと記録日時が重複する動画像ファイルが存在するか否かを認識することが行われる。そして、記録日時の重複する動画像ファイルが存在するとき、重複期間においては、区間毎に、双方の動画像ファイルに基づく画像のうち、重要度スコアの高い方の画像を選択して表示することが行われ、擬似編集効果再生が実行される。
【００３３】
また、図１（ｄ）に示すように、この実施の形態においては、ダビング時には、上述の擬似編集効果再生の結果を、光記録ディスクに書き込みできるものとする。
【００３４】
［ビデオカメラレコーダの構成例］
ビデオカメラレコーダ１００Ａの構成例を説明する。図２は、ビデオカメラレコーダ１００Ａの構成例を示している。詳細説明は省略するが、ビデオカメラレコーダ１００Ｂは、ビデオカメラレコーダ１００Ａと同様に構成されている。
【００３５】
ビデオカメラレコーダ１００Ａは、制御部１０１と、ユーザ操作部１０２と、電源回路１０３と、バッテリ１０４と、ＡＣ電源プラグ１０５と、電源スイッチ１０６を有している。また、ビデオカメラレコーダ１００Ａは、撮像レンズ１１１と、撮像素子１１２と、撮像信号処理回路１１３と、マイク部１１４と、音声信号処理回路１１５と、重畳分離回路１１６と、記録再生回路１１７を有している。また、ビデオカメラレコーダ１００Ａは、重畳回路１２１と、ＬＣＤパネル１２２と、タッチパネル１２３と、ＯＳＤ（On-Screen Display）回路１２４と、音声出力部１２５と、スピーカ部１２６と、通信処理部１２７と、ＵＳＢ端子１２８を有している。
【００３６】
制御部１０１は、ビデオカメラレコーダ１００Ａの各部の動作を制御する。制御部１０１は、ＣＰＵ１０１ａ、ＲＯＭ１０１ｂおよびＲＡＭ１０１ｃを備えている。ＲＯＭ１０１ｂは、ＣＰＵ１０１ａの制御プログラム等を記憶している。ＲＡＭ１０１ｃは、ＣＰＵ１０１ａの制御処理に必要なデータの一時記憶等に用いられる。ＣＰＵ１０１ａは、ＲＯＭ１０１ｂから読み出したプログラムやデータをＲＡＭ１０１ｃ上に展開してプログラムを起動し、ビデオカメラレコーダ１００Ａの各部を制御する。
【００３７】
ユーザ操作部１０２は、制御部１０１に接続されている。ユーザ操作部１０２は、ビデオカメラレコーダ１００Ａの本体部およびＬＣＤパネル１２２の筐体面に配置された操作釦等である。制御部１０１は、電源回路１０３を介して、バッテリ１０４または商用電源に接続されたＡＣ電源プラグ１０５から電源の供給を受ける。制御部１０１は、ユーザのユーザ操作部１０２への操作入力に応じて電源をオン（ＯＮ）にする旨の操作入力信号が供給されると、電源スイッチ１０６を接続状態に切り替えて各部に電源を供給する。
【００３８】
撮像素子１１２は、例えば、ＣＣＤ(Charge Coupled Device)イメージセンサ、ＣＭＯＳ(Complementary Metal Oxide Semiconductor）イメージセンサ等で構成される。撮像素子１１２は、撮像レンズ１１１により撮像面に被写体の光学像が結像された状態で撮像処理を行って、撮像信号を出力する。
【００３９】
撮像信号処理回路１１３は、撮像素子１１２から出力される撮像信号（アナログ信号）に対し、サンプルホールドおよび利得制御、アナログ信号からデジタル信号への変換、さらにホワイトバランス調整、ガンマ補正等を行って、撮像画像データを生成する。
【００４０】
また、撮像信号処理回路１１３は、顔検出部（顔検出エンジン）１１３ａを有している。この顔検出部１１３ａは、撮像画像データに基づいて、各フレーム画像に人物の顔画像（顔領域）が含まれるか否かを検出し、顔画像情報（顔画像の座標、顔画像のサイズ、顔画像の数、顔画像の属性など）を取得する。この顔検出処理には、詳細説明は省略するが、既存の顔検出処理アルゴリズムを適用可能である。
【００４１】
マイク部１１４は、撮影時に、被写体周辺の音声を収集するマイクロホンを備える。音声信号処理回路１１５は、マイク部１１４からの音声信号に対して、ＡＧＣ（Auto Gain Control）処理、ノイズ軽減処理等の処理を行うと共に、音声信号をアナログ信号からデジタル信号に変換する処理を行って、上述の撮像画像データに対応した音声データを得る。また、音声信号処理回路１１５は、音検出部１１５ａを有している。この音検出部１１５ａは、音声データに基づいて、撮像画像データの各フレームに対応して、音声レベル等を取得する。
【００４２】
重畳分離回路１１６は、記録時には、撮像信号処理回路１１３で得られた撮像画像データと音声信号処理回路１１５で得られた音声データを重畳して、記録再生回路１１７に記録データとして供給する。また、重畳分離回路１１６は、再生時には、記録再生回路１１７で得られた再生データから、画像データおよび音声データを分離する。
【００４３】
記録再生回路１１７は、記録時には、重畳分離回路１１６で得られた記録データに対して予め設定された圧縮方式でデータ圧縮処理を実行した後、フォーマット変換処理を施して、記録媒体（ハードディスク１１８、光記録ディスク１１９）に動画像ファイルとして記録する。この場合、映像信号の記録方式として、例えば、ＭＰＥＧ-４  ＡＶＣ／Ｈ．２６４圧縮を用いた高精細（ＨＤ：High Definition）映像記録、あるいはＭＰＥＧ-２圧縮を用いた標準（ＳＤ：Standard Definition）映像記録などが利用される。
【００４４】
また、記録再生回路１１７は、動画像ファイルに対応する管理情報を記録した画像情報管理ファイル（システムインデックスファイル）を生成し、記録媒体に記録する。この画像情報管理ファイルの詳細については後述する。
【００４５】
また、記録再生回路１１７は、再生時には、記録媒体（ハードディスク１１８、光記録ディスク１１９）から動画像ファイルを読み出し、圧縮符号化データに対してデータ伸長処理を実行して再生データを得、この再生データを重畳分離回路１１６に供給する。
【００４６】
ＯＳＤ（On Screen Display）回路１２４は、制御部１０１の制御のもと、ＧＵＩ（Graphical User Interface）および各種情報を示す表示信号を発生する。重畳回路１２１は、重畳分離回路１１６から供給される画像データ（撮像画像データ、再生画像データ）に、ＯＳＤ回路１２４からの表示信号を重畳して、ＬＣＤ（Liquid Crystal Display）パネル１２２に出力する。
【００４７】
タッチパネル１２３は、ＬＣＤパネル１２２の画面上の位置を指定する位置指定部を構成しており、このＬＣＤパネル１２２の画面上に配置されている。このタッチパネル１２３は、制御部１０１に接続されている。ユーザは、ＬＣＤパネル１２２のＧＵＩ画面に対応してタッチパネル１２３上の所定位置を指で直接触れるか、あるいはペンで触れるかして、ＬＣＤパネル１２２の画面上で種々の操作を行うことができる。
【００４８】
音声出力部１２５は、再生時に、重畳分離回路１１６で得られた再生音声データを、デジタル信号からアナログ信号に変換して、スピーカ部１２６に供給する。また、音声出力部２５は、制御部１０１の制御に基づいて、スピーカ部１２６に供給する音声信号のレベルを変化させて音量調整を行う。
【００４９】
通信処理部１２７は、ＵＳＢ（Universal Serial Bus）端子１２８を介したＵＳＢ通信の制御を行う。この通信処理部１２７は、制御部１０１からの指示に従って、外部機器との間で動画像ファイルの送受信を行う。
【００５０】
［ビデオカメラレコーダの基本動作例］
図２に示すビデオカメラレコーダ１００Ａの基本動作例を説明する。
【００５１】
最初に、撮像時、記録時の動作を説明する。撮像素子１１２で得られた撮像信号は撮像信号処理回路１１３に供給されて処理され、この撮像信号処理回路１１３からは被写体の撮像画像に対応した撮像画像データが得られる。また、マイク部１１４で得られた音声信号は音声信号処理回路１１５に供給されて処理され、この音声信号処理回路１１５からは、撮像画像データに対応した音声データが得られる。撮像信号処理回路１１３で得られた撮像画像データおよび音声信号処理回路１１５で得られた音声データは、重畳分離回路１１６に供給される。
【００５２】
重畳分離回路１１６に供給された撮像画像データは、重畳回路１２１を通じて、ＬＣＤパネル１２２に供給される。ＬＣＤパネル１２２には撮像画像が表示され、ユーザはその表示により撮像画像の確認が可能となる。この状態で、制御部１０１の制御のもと、ＯＳＤ回路１２４では、撮像動作、記録動作等に係るＧＵＩおよび各種情報を示す表示信号が発生される。この表示信号は、重畳回路１２１に供給されて、重畳分離回路１１６から供給される撮像画像データに重畳される。
【００５３】
この表示信号により、ＬＣＤパネル１２２に表示される撮像画像には、撮像動作、記録動作等に係るＧＵＩおよび各種情報が重ねて表示される。そのため、ユーザは、ＬＣＤパネル１２２上に配置されたタッチパネル１２３を用いて、撮像動作、記録動作等を操作できる。なお、ユーザは、ユーザ操作部１０２を構成するキー等を用いても同様に撮像動作、記録動作等を操作できる。
【００５４】
上述の撮像状態において、ユーザの記録指示があると、撮像画像データおよび音声データの記録動作が開始される。すなわち、重畳分離回路１１６で撮像画像データと音声データが重畳されて記録データとして記録再生回路１１７に供給される。記録再生回路１１７では、記録データに対して予め設定された圧縮方式でデータ圧縮処理が実行され、その後に、フォーマット変換処理が施されて、記録媒体（ハードディスク１１８、光記録ディスク１１９）に動画像ファイルとして記録される。
【００５５】
次に、再生時の動作について説明する。記録再生回路１１７では、記録媒体（ハードディスク１１８、光記録ディスク１１９）から動画像ファイルが読み出され、圧縮符号化データに対してデータ伸長処理が実行されて再生データが得られる。この再生データは重畳分離回路１１６に供給され、再生画像データおよび再生音声データが分離される。
【００５６】
重畳分離回路１１６で分離された再生画像データは、重畳回路１２１を通じて、ＬＣＤパネル１２２に供給される。ＬＣＤパネル１２２には再生画像が表示され、ユーザはその表示により再生画像の確認が可能となる。
【００５７】
この状態で、制御部１０１の制御のもと、ＯＳＤ回路１２４では、再生動作等に係るＧＵＩおよび各種情報を示す表示信号が発生される。この表示信号は、重畳回路１２１に供給されて、重畳分離回路１１６から供給される撮像画像データに重畳される。この表示信号により、ＬＣＤパネル１２２に表示される再生画像には、再生動作等に係るＧＵＩおよび各種情報が重ねて表示される。そのため、ユーザは、ＬＣＤパネル１２２上に配置されたタッチパネル１２３を用いて、再生動作等を操作できる。なお、ユーザは、ユーザ操作部１０２を構成するキー等を用いても同様に再生動作等を操作できる。
【００５８】
また、重畳分離回路１１６で分離された再生音声データは、音声出力部１２５でデジタル信号からアナログ信号に変換され、スピーカ部１２６に供給される。これにより、スピーカ部１２６からは再生音声が出力され、ユーザはその音声出力により再生音声の確認が可能となる。
【００５９】
［画像情報管理ファイル］
画像情報管理ファイル（システムインデックスファイル）について説明する。この画像情報管理ファイルは、上述したように、記録媒体（ハードディスク１１８、光記録ディスク１１９）に記録される動画像ファイルの管理情報を記録したファイルであって、当該記録媒体に記録される。画像情報管理ファイルには、フォルダの構造、ファイルの属性情報、ブックマークに関する情報、ファイルのサムネイル画像などが記述されている。ビデオカメラは、これらの情報を一括して管理することによりアクセス速度を向上させている。ここでは、ハードディスク（ＨＤＤ）１１８上に動画像ファイルが記録される場合について説明する。
【００６０】
画像情報管理ファイルは、図３に示すように、ツリー構造と呼ばれる階層構造をとる。この画像情報管理ファイルは、「AV Index Root」と呼ばれる最上位層のルートディレクトリに対する下位層として、「Original Root Folder」と呼ばれるフォルダ（以下、「オリジナルフォルダ」という）を有している。また、この画像情報管理ファイルは、「AV Index Root」と呼ばれる最上位層のルートディレクトリに対する下位層として、「Favorite Root Folder」と呼ばれるフォルダ（以下、「お好みフォルダ」という）を有している。
【００６１】
オリジナルフォルダには、日付をタイトルとするフォルダ（以下、「日付フォルダ」という）が登録（以下、「エントリ」という）される。この日付フォルダには、その日付においてハードディスク１１８に記録された動画像ファイルに関する情報を格納するファイル（以下、「ファイル情報ファイル」という）が、撮像カットごとに古いものから順にエントリされる。このファイル情報ファイルには、ファイルの属性、サムネイルインデックス画像、動画像付帯情報（メタデータ）等が含まれる。
【００６２】
この図３の例では、サムネイルインデックス画像は、「Ａ」「Ｂ」「Ｃ」に相当している。また、ファイル識別子は、「“Face1”」「“Face2”」「“Face3”」の各タイトル名に相当している。因みに、タイトル名は、ユーザによる編集操作によって適宜変更できる。
【００６３】
上述の撮像信号処理回路１１３の顔検出部１１３ａで取得された顔画像情報（顔画像の座標、顔画像のサイズ、顔画像の数、顔画像の属性など）および音声信号処理回路１１５の音検出部１１５ａで取得された音声レベル等は、動画像付帯情報として記録される。
【００６４】
お好みフォルダには、日付フォルダの下位層にある１または２以上のファイル情報フォルダのうち、連続再生対象として選択された動画像ファイルに関する情報を格納するフォルダ（以下、「プレイリストフォルダ」という）がエントリされる。
【００６５】
このプレイリストフォルダには、連続再生対象とすべきものとして選択された動画像ファイルに対応するファイル情報ファイルのリンク情報が選択順にエントリされる。なお、この図３の例では、プレイリストフォルダ「＃４」には、「２００７／３／１」に記録された動画像ファイルに対応するファイル情報ファイル「“Face1”」のリンク情報と、「２００７／３／５」に記録されたファイルに対応するファイル情報ファイル「“Face3”」のリンク情報とがエントリされている。
【００６６】
上述の画像情報管理ファイルは、ハードディスク１１８に対して物理的に記録される実際のファイルとしては、図４に示すようなる。すなわち、画像情報管理ファイルは、プロパティファイル（Property File）、シーンサムネイルピクチャファイル（SceneThumbnail Picture File）およびメタデータファイル（Meta Data File）の３つからなる。上述の図３は、プロパティファイルに登録された各エントリの参照関係を概念的に示したものである。
【００６７】
プロパティファイル中、「♯４」はプレイリストに関するエントリであり、ここでは動画像ファイルエントリ（♯２１、♯２４）の識別子が格納される。動画像ファイルエントリには、シーンサムネイルピクチャファイル中の対応するサムネイル画像（例えば「Ａ」、「Ｂ」、「Ｃ」など）を参照するためのパス情報、メタデータファイル中の対応するメタデータ（例えば「“Face1”」、「“Face2”」、「“Face3”」など）を参照するためのパス情報が格納される。
【００６８】
「♯２０」のエントリには、「２００７／３／１」に撮像された動画像ファイルエントリ「＃２１」、「＃２２」の識別子が格納される。また、「＃２３」のエントリには、「２００７／３／５」に撮像された動画像ファイルエントリ「＃２４」の識別子が格納される。
【００６９】
［画像取り込みおよび重複判定の処理］
上述したように、ホスト側のビデオカメラレコーダ１００Ａは、デバイス側のビデオカメラレコーダ１００Ｂから、動画像ファイルおよび画像情報管理ファイル上の動画像関連メタデータの取り込みを行ってハードディスク１１８に追加記録する。その後、ホスト側のビデオカメラレコーダ１００Ａは、追加記録した動画像ファイルにつき、ハードディスク１１８に既に記録されている動画像ファイルとの記録日時の重複判定を行う。この画像取り込みおよび重複判定の処理について説明する。
【００７０】
図５のフローチャートは、ビデオカメラレコーダ１００Ａの制御部１０１における画像取り込みおよび重複判定の処理手順の一例を示している。
【００７１】
制御部１０１は、ステップＳＴ１において、処理を開始する。この場合、制御部１０１は、ＬＣＤパネル１２２上に、図６（ａ）に示すようなＧＵＩ画面を表示し、ユーザが「画像取り込み」を選択したとき、ステップＳＴ２の処理に移る。このステップＳＴ２において、制御部１０１は、ビデオカメラレコーダ１００Ｂとの間でＵＳＢ接続を実行し、ホストとして動作を開始する。
【００７２】
次に、制御部１０１は、ステップＳＴ３において、動画像取り込みを行うか否かを判断する。この場合、制御部１０１は、ＬＣＤパネル１２２上に、図６（ｂ）に示すようなＧＵＩ画面を表示し、動画像の取り込みをユーザに選択させてもよい。動画像取り込みを行わないとき、制御部１０１は、ステップＳＴ４において、ビデオカメラレコーダ１００Ｂとの間のＵＳＢ接続を切断し、その後に、ステップＳＴ５において、処理を終了する。
【００７３】
ステップＳＴ３で動画像取り込みを行うとき、制御部１０１は、ステップＳＴ６において、ビデオカメラレコーダ１００Ｂから動画像（動画像ファイルおよび画像情報管理ファイル上の動画像関連メタデータ）を取り込む。そして、制御部１０１は、取り込みが終了したとき、ステップＳＴ７において、ビデオカメラレコーダ１００Ｂとの間のＵＳＢ接続を切断する。
【００７４】
なお、制御部１０１は、ステップＳＴ４およびステップＳＴ７でＵＳＢ接続を切断する際に、ＬＣＤパネル１２２上に、図６（ｃ）に示すようなＧＵＩ画面を表示し、ユーザに切断を確認させてもよい。
【００７５】
上述したように、ビデオカメラレコーダ１００Ｂから動画像を取り込み、取り込んだ動画像ファイルをハードディスク１１８に追加記録する場合、それに伴って、画像情報管理ファイルは変更される。
【００７６】
図７、図８は、上述の図３、図４に対して、変更後の画像情報管理ファイルの構造例を示している。この例は、「２００７／３／１」に記録された動画像ファイル（タイトル名は“Face4”）が追加記録された場合を示している。この場合、図７に示すように、オリジナルフォルダの下位層に、「２００７／３／１」の日付フォルダが新たに設けられ、この日付フォルダには、動画像ファイル（タイトル名は“Face4”）に関する情報を格納するファイル情報ファイルがエントリされる。また、この場合、図８に示すように、「♯２５」のエントリには、「２００７／３／１」に撮像された動画像ファイルエントリ「＃２６」の識別子が格納される。
【００７７】
図５に戻って、制御部１０１は、ステップＳＴ７でＵＳＢ接続を切断した後、ステップＳＴ８において、重複動画像の検索を実行するか否かを判断する。この場合、制御部１０１は、ＬＣＤパネル１２２上に、図６（ｄ）に示すようなＧＵＩ画面を表示し、重複動画像の検索をユーザに選択させてもよい。重複動画像の検索を実行しないとき、制御部１０１は、ステップＳＴ５において、処理を終了する。
【００７８】
また、ステップＳＴ８で重複動画像の検索を実行するとき、制御部１０１は、ステップＳＴ９において、重複判定を行う。制御部１０１は、この重複判定において、画像情報管理ファイルを参照して、追加記録した動画像ファイルが、既存の動画像ファイルと記録日時が重複しているか否かを判定する。制御部１０１は、ステップＳＴ９の処理が終了した後、ステップＳＴ５において、処理を終了する。
【００７９】
［重複判定の処理］
重複判定の処理の詳細を説明する。図９のフローチャートは、上述の図５のフローチャートのステップＳＴ９を展開したフローチャートであって、ビデオカメラレコーダ１００Ａの制御部１０１における重複判定の処理手順の一例を示している。
【００８０】
制御部１０１は、ステップＳＴ１１において、処理を開始し、その後、ステップＳＴ１２において、ハードディスク１１８に追記動画像ファイルがあるか否かを判断する。追記動画像ファイルがないとき、制御部１０１は、ステップＳＴ１３において、リターンする。
【００８１】
ステップＳＴ１２で追記動画像ファイルがあるとき、制御部１０１は、ステップＳＴ１４において、動画像ファイルの日付検索を開始する。そして、制御部１０１は、ステップＳＴ１５において、追記動画像ファイルと記録日付が一致する既存動画像ファイルがあるかどうかを判断する。この判断は、画像情報管理ファイルにおいて、追記動画像ファイルに対応した日付フォルダのタイトルと、その他の日付フォルダのタイトルとを比較することで判断できる（図７参照）。
【００８２】
ステップＳＴ１５で日付が一致する既存動画像ファイルがあるとき、制御部１０１は、ステップＳＴ１６において、時刻の検索を開始する。そして、制御部１０１は、ステップＳＴ１７において、追加記録動画像ファイルと日付が一致する既存動画像ファイルとの間で、時刻一致があるか否かを判断する。
【００８３】
例えば、この時刻一致の判断は、動画像ファイルの記録日時と、この動画像ファイルの長さの情報を用いて行うことができる。また、例えば、この時刻一致の判断は、動画像ファイル内の動画像データストリームの復号再生単位毎、例えばＧＯＰ毎に付加されている情報パック（ＡＲＩ_ＰＣＫ）内の記録時間を用いて行うことができる（特開２００４−３５０２５１号公報参照）。この場合、最初のＧＯＰの記録時間が動画像ファイルの記録開始時刻となり、最後のＧＯＰの記録時間が動画像ファイルの記録終了時刻となる。
【００８４】
ステップＳＴ１７で時刻一致があるとき、つまり記録日時の重複があるとき、制御部１０１は、ステップＳＴ１８において、重要度スコアの算出処理（重み付け処理）を実行し、その後に、ステップＳＴ１９の処理に進む。ステップＳＴ１５で日付が一致する既存動画像ファイルがなかったとき、あるいは、ステップＳＴ１７で時刻の一致がなかったとき、制御部１０１は、直ちに、ステップＳＴ１９の処理に移る。
【００８５】
このステップＳＴ１９において、制御部１０１は、全ての追記動画像ファイルについて日付検索、時刻検索を終了したか否かを判断する。全ての追記動画像ファイルについて日付検索、時刻検索を終了していないとき、制御部１０１は、ステップＳＴ２０において、注目している追記動画像ファイルを変更し、その後に、ステップＳＴ１４の処理に戻り、上述したと同様の処理を繰り返す。一方、全ての追記動画像ファイルについて日付検索、時刻検索を終了したとき、制御部１０１は、ステップＳＴ１３において、重複判定処理を終了する。
【００８６】
図９に示すフローチャートでは、記録日付が一致した場合のみ、時刻検索を行って記録時間の重複の判断が行われる。画像情報管理ファイルでは、上述したように日付により動画像ファイルが管理されている（図７参照）。したがって、図９に示すフローチャートで重複判定処理を行うことで、処理時間を短縮することができる。
【００８７】
なお、動画像ファイルが光記録ディスクに記録され、上述したような画像情報管理ファイルがない場合には、動画像ファイルの日付時刻情報を全比較すれば、同様にして、重複判定処理を実行できる。
【００８８】
上述の図９のフローチャートでは、制御部１０１は、ステップＳＴ１７で記録日時の重複（時刻の一致）があるとき、直ちに、ステップＳＴ１８で重要度スコア算出処理を行う。しかし、記録日時の重複の判断だけでは、関連のない動画像ファイルに重要度スコア算出処理を行ってしまうおそれがある。
【００８９】
図１０のフローチャートは、関連のない動画像ファイルに重要度スコア算出処理が行われることを回避可能とした処理手順の一例を示している。この図１０のフローチャートにおいて、図９と対応するステップには同一の参照符号を付し、その詳細説明は省略する。
【００９０】
この図１０のフローチャートにおいて、ステップＳＴ１７で記録時間の重複があるとき、制御部１０１は、ステップＳＴ２１において、処理を実行するか否かを判断する。この場合、制御部１０１は、ＬＣＤパネル１２２上に、図１１に示すようなＧＵＩ画面を表示し、重要度スコア算出処理の実行をユーザに選択させる。このＧＵＩ画面には、記録日時が重複している追記動画像ファイルのサムネイル画像ＴＮｅと既存動画像ファイルのサムネイル画像ＴＮａとが表示されており、ユーザの選択の便宜が図られる。
【００９１】
ステップＳＴ２１で処理実行が選択されるとき、制御部１０１は、ステップＳＴ１８に進んで、重要度スコア算出処理を行う。一方、ステップＳＴ２１で処理実行が選択されないとき、制御部１０１は、ステップＳＴ１９の処理に進む。この図１０のフローチャートにおいて、その他のステップは、図９のフローチャートと同様である。
【００９２】
また、図１２のフローチャートは、関連のない動画像ファイルに重要度スコア算出処理が行われることを回避可能とした処理手順の他の例を示している。この図１２のフローチャートにおいて、図９と対応するステップには同一の参照符号を付し、その詳細説明は省略する。
【００９３】
この図１２のフローチャートは、動画像付帯情報（メタデータ）に、記録位置情報（例えば、ＧＰＳ（Global Positioning System）情報）が含まれている場合の例である。
【００９４】
この図１２のフローチャートにおいて、ステップＳＴ１７で時刻の一致があるとき、制御部１０１は、ステップＳＴ２２において、記録日時が重複している追記動画像ファイルの記録位置と既存動画像ファイルの記録位置が近いか否か、例えば１００ｍ以内にあるか否かを、記録位置情報に基づいて判断する。記録位置が近いとき、制御部１０１は、ステップＳＴ１８に進んで、重要度スコア算出処理を行う。一方、ステップＳＴ２２で記録位置が近くないとき、制御部１０１は、ステップＳＴ１９の処理に進む。この図１２のフローチャートにおいて、その他のステップは、図９のフローチャートと同様である。
【００９５】
上述の図９、図１０、図１２のフローチャートにおいて、追記動画像ファイルおよび既存動画像ファイルの重複期間が見つかったとき、制御部１０１は、図１３に示すように、管理情報またはストリーム追跡によって、実際に重複開始時刻直後のＧＯＰ（Group of Picture:ＭＰＥＧにおけるレイヤー構造の単位）の開始位置をそれぞれの重複動画像のみなし重複開始位置、みなし重複終了位置とし、その区間をそれぞれの動画像ファイルのみなし重複期間とする。なお、図１３の例において、動画像ファイル４は追記動画像ファイルであり、動画像ファイル２は既存動画像ファイルである。
【００９６】
ここで、重複期間の選択範囲をＧＯＰ基準にしている理由は、後述するダビング時における再エンコード作業による作業時間および記憶容量の抑制と、擬似編集効果再生におけるデコード作業の簡略化のためである。また、みなし重複開始終了時刻を実際の重複開始終了時刻の直後のＧＯＰ開始終了位置としている理由は、ＧＯＰ単位での動画の切り替えによる記録部分の欠損を防ぐためであり、あえて重複部分を残すためである。
【００９７】
［重要度スコア算出処理］
重要度スコア算出処理（重み付け処理）の詳細を説明する。図１４のフローチャートは、上述の図９、図１０、図１２のフローチャートのステップＳＴ１８を展開したフローチャートであって、ビデオカメラレコーダ１００Ａの制御部１０１における重要度スコア算出の処理手順の一例を示している。この例は、記録日時の重複がある動画像ファイルが動画像ファイルＡ，Ｂである場合を示している。例えば、動画像ファイルＡが追記動画像ファイルであり、動画像ファイルＢが既存動画像ファイルである。
【００９８】
制御部１０１は、ステップＳＴ３１において、処理を開始し、その後、ステップＳＴ３２の処理に移る。このステップＳＴ３２において、制御部１０１は、動画像ファイルＡを選択する。そして、制御部１０１は、ステップＳＴ３３において、記録日時の重複位置を算出する。この場合、制御部１０１は、動画像ファイルＡのみなし重複期間を求める（図１３の動画像ファイル４のみなし重複期間参照）。
【００９９】
次に、制御部１０１は、ステップＳＴ３４において、ステップＳＴ３３で求めたみなし重複期間（図１３参照）を、設定時間１の単位に分割し、複数の重要度スコア算出区間を得る。設定時間１は、画像を切り替えた場合にその内容を認識できる程度の時間であり、例えば１０ＧＯＰの時間とされる。１ＧＯＰの時間が最も標準的な０．５秒固定であるとき、１０ＧＯＰの時間は５秒となる。なお、設定時間１は固定でもよいが、ユーザ設定部１０２を操作して、あるいはタッチパネル１２３上を押圧操作して、ユーザが任意の時間に設定可能としてもよい。
【０１００】
ここで、みなし重複期間を設定時間１で区切って順次重要度スコア算出区間とした場合、最後に１０ＧＯＰに満たない短い期間が残る場合もある。この期間に関しては、重要度スコア算出区間とする、あるいは重要度スコア算出区間としない、のいずれの取り扱いも可能である。
【０１０１】
次に、制御部１０１は、ステップＳＴ３５において、重要度スコア算出区間における重要度のスコアを算出し、例えば、画像情報管理ファイルのメタデータファイルに、あるいは、画像情報管理ファイルとは別個の重複情報管理ファイルに、記録する。
【０１０２】
なお、重要度スコアの算出は、図１５（ａ）に示す画面上の顔画像情報、図１５（ｂ）に示す音量レベル情報、図１５（ｃ）に示すチャネル別音量情報などを用いて行われる。例えば、重要度スコアは、以下の８つの条件の一つにより、または複数の条件を加算することにより、求めることができる。Ａ，Ｂ，Ｃ，Ｄ，Ｅ，Ｆ，Ｇ，Ｈは、それぞれの条件の重み付け係数である。ユーザは、ユーザ操作部を操作して、使用する条件の選択および各重み付け係数の値の変更を行うことが可能とされている。
【０１０３】
Ａ×顔検出した数、
Ｂ×検出した顔サイズ、
Ｃ×顔の属性が指定した属性（子供、大人、男性、女性、特定の個人など）を検知した数
Ｄ×ある閾値以上の音量（音圧）レベルを検出した割合、
Ｅ×複数の音声チャネルのうち特定（例えば中央）のチャネルの音量（音圧）レベルが最大になった割合
Ｆ×特定のキーワードを認識したとき
Ｇ×カメラのズーミング動作の回数、時間
Ｈ×カメラのパン、チルト動作の回数、時間
【０１０４】
図１４のフローチャートに戻って、制御部１０１は、ステップＳＴ３５の処理の後、ステップＳＴ３６の処理に移る。このステップＳＴ３６において、制御部１０１は、みなし重複期間における全ての重要度スコア算出区間で重要度スコアの算出、記録が終了したか否かを判断する。
【０１０５】
全区間の重要度スコアの算出、記録が終了していないとき、制御部１０１は、ステップＳＴ３７において、重要度スコア算出区間を更新してステップＳＴ３５の処理に戻り、全区間において重要度のスコア算出が終わるまでループを繰り返す。一方、全区間の重要度スコアの算出、記録が終了したとき、制御部１０１は、ステップＳＴ３８の処理に移り、動画像ファイルＢについての処理を開始する。ここで、動画像ファイルＢに係るステップＳＴ３８〜ステップＳＴ４３は、それぞれ上述した動画像ファイルＡに係るステップＳＴ３２〜ステップＳＴ３７に対応している。
【０１０６】
制御部１０１は、ステップＳＴ３８において、動画像ファイルＢを選択する。そして、制御部１０１は、ステップＳＴ３９において、記録日時の重複位置を算出する。この場合、制御部１０１は、動画像ファイルＢのみなし重複期間を求める（図１３の動画像ファイル２のみなし重複期間参照）。
【０１０７】
次に、制御部１０１は、ステップＳＴ４０において、ステップＳＴ３９で求めたみなし重複期間を、重要度スコア算出区間である設定時間１の単位（例えば１０ＧＯＰ）に分割する。そして、制御部１０１は、ステップＳＴ４１において、重要度スコア算出区間における重要度のスコアを算出し、例えば、画像情報管理ファイルのメタデータファイルに、あるいは、画像情報管理ファイルとは別個の重複管理情報ファイルに、記録する。
【０１０８】
次に、制御部１０１は、ステップＳＴ４２において、みなし重複期間における全ての重要度スコア算出区間で重要度スコアの算出、記録が終了したか否かを判断する。全区間の重要度スコアの算出、記録が終了していないとき、制御部１０１は、ステップＳＴ４３において、重要度スコア算出区間を更新してステップＳＴ４１の処理に戻り、全区間において重要度のスコア算出が終わるまでループを繰り返す。一方、全区間の重要度スコアの算出、記録が終了したとき、制御部１０１は、ステップＳＴ４４において、処理を終了する。
【０１０９】
［重複管理情報ファイル］
各動画像ファイルの他の動画像ファイルとの重複の有無、重複動画像ファイルに関連して算出された重要度スコア等の情報は、画像情報管理ファイルで管理することもできるが、これとは別個の重複管理情報ファイルで管理してもよい。以下、重複情報管理データについて説明する。
【０１１０】
図１６は、重複情報管理データの一例を示しており、分割管理の場合を示している。この場合、重複ファイル有無とその相手を一括管理する全重複ファイル管理表（OVERLAP.INFファイル）（図１６（ａ）参照）と、各重複ファイルにおける重要度スコア算出区間のスコアを管理する重複スコア管理ファイル（OVR_*****.INFファイル）（図１６（ｂ），（ｃ）参照）に分割して管理される。このような分割管理の場合、重複情報を効率的に管理できる。ただし、重複動画像ファイル数が増大すると管理ファイルの数が増大し、記録媒体の容量を圧迫しかねないという問題がある。
【０１１１】
図１７は、重複情報管理データの他の例を示しており、一元管理の場合を示している。この場合、図示のように、重複情報管理データはタグによって一元管理される。このような一元管理の場合、管理すべきファイルは一つで済むので記録媒体に占めるデータ量を削減できる可能性が高い。しかし、タグ情報を、図１６で管理されたような形にパース（字句解析）してからでないと利用できないため、処理時間が長くなる上、必要とするＲＡＭ容量が大きくなるという問題がある。
【０１１２】
この実施の形態においては、図１６に示すように重複情報を分割管理する場合を採用し、図１８に示すように専用の重複管理情報格納フォルダを作って、そこに重複情報管理データを全て格納することとする。なお、図１６、図１７に示す重複情報管理データは、ＭＯＶ００００２．ＭＰＧファイルとＭＯＶ００００４．ＭＰＧファイルが２００８年３月１日１０時３２分３３秒から２００８年３月１日１０時３５分４８秒まで重複していることを示している。
【０１１３】
ただし、ハードディスク（ＨＤＤ）/半導体メモリカード/内蔵メモリの場合は、図１８に示すようなファイル/フォルダ配置をとることとする。しかし、ＤＶＤ／ＡＶＣＨＤ  ＤＶＤ／Ｂｌｕ−ｒａｙなどの光記録ディスクにおいては、重複管理情報ファイル群は規格外データとなるため、画像記録メディア上には配置せず、画像処理装置の内蔵メモリ上に配置するのが望ましい。その場合、ディスクのイジェクトによって重複管理情報は失われてしまうため、再度重複画像情報を得るためにはディスクの再挿入後に再度重複管理情報の作成を行わせる必要がある。
【０１１４】
［擬似編集効果再生］
上述したように、ホスト側のビデオカメラレコーダ１００Ａは、再生時において、所定の動画像ファイルを再生する際に、重複情報に基づいて、当該所定のファイルと記録日時が重複する動画像ファイルが存在するか否かを認識する。そして、ホスト側のビデオカメラレコーダ１００Ａは、記録日時の重複する動画像ファイルが存在するとき、重複期間においては、区間毎に、双方の動画像ファイルに基づく画像のうち、重要度スコアの高い方の画像を選択して表示する、擬似編集効果再生を実行する。この擬似編集効果再生の処理について説明する。
【０１１５】
図１９のフローチャートは、所定の動画像ファイルを再生する際の、ビデオカメラレコーダ１００Ａの制御部１０１における制御処理例を示している。
【０１１６】
制御部１０１は、ステップＳＴ５１において、処理を開始し、その後に、ステップＳＴ５２の処理に移る。このステップＳＴ５２において、制御部１０１は、重み付け再生が有効になっているか否かを判断する。ユーザは、ユーザ操作部１０２により、あるいはタッチパネル１２３上の押圧操作により、重み付け再生の有効、無効の設定が可能とされている。
【０１１７】
重み付け再生が有効になっているとき、制御部１０１は、ステップＳＴ５３の処理に移る。このステップＳＴ５３において、制御部１０１は、重複管理情報（図１６、図１７参照）に基づいて、再生対象の所定の動画像ファイルと記録日時が重複している他の動画像ファイルがあるか否かを判断する。
【０１１８】
重複動画像ファイルがあるとき、制御部１０１は、ステップＳＴ５４において、記録日時の重複期間が設定時間１以上であるか否かを判断する。設定時間１は、上述したように、重要度スコア算出区間に対応しており、例えば１０ＧＯＰの長さである。重複期間が設定時間１以上であるとき、制御部１０１は、ステップＳＴ５５の処理に移る。
【０１１９】
このステップＳＴ５５において、制御部１０１は、再生対象の所定の動画像ファイルおよび記録日時が重複している他の動画像ファイルの重要度スコアを比較する。そして、制御部１０１は、ステップＳＴ５７において、重要度スコアの比較結果に基づいて、重み付け再生処理を実行する。
【０１２０】
制御部１０１は、ステップＳＴ５７の処理の後、ステップＳＴ５８の処理に移る。制御部１０１は、ステップＳＴ５２で重み付け再生が有効になっていないとき、ステップＳＴ５３で重複動画像ファイルがないとき、あるいはステップＳＴ５４で重複期間が設定時間１より短いとき、ステップＳＴ５９において、通常再生を実行し、その後、ステップＳＴ５８に進む。
【０１２１】
このステップＳＴ５８において、制御部１０１は、再生終了であるか否かを判断する。制御部１０１は、再生終了でないときは、ステップＳＴ５２に戻ってループを繰り返し、一方、再生終了であるときは、ステップＳＴ６０において、処理を終了する。
【０１２２】
［重み付け再生処理］
重み付け再生処理の詳細を説明する。図２０のフローチャートは、上述の図１９のフローチャートのステップＳＴ５７を展開したフローチャートであって、ビデオカメラレコーダ１００Ａの制御部１０１における重み付け再生の処理手順の一例を示している。
【０１２３】
制御部１０１は、ステップＳＴ６１において、処理を開始し、その後に、ステップＳＴ６２の処理に移る。このステップＳＴ６２において、制御部１０１は、連続再生であるか否か、つまり、連続して同一動画像ファイルを再生しているか否かを判断する。連続再生であるとき、制御部１０１は、ステップＳＴ６３において、連続再生カウント（連続再生時間）をアップし、その後にステップＳＴ６４の処理に移る。一方、連続再生でないとき、制御部１０１は、ステップＳＴ６５において、連続再生カウントをクリアし、その後にステップＳＴ６４の処理に移る。
【０１２４】
このステップＳＴ６４において、制御部１０１は、連続再生カウントが設定時間Ｔ２以上であるか否かを判断する。ここで、設定時間２は、ユーザが同一動画ファイルの再生が続いて退屈しない程度の時間に設定される。例えば、設定時間２は、３０ＧＯＰ＝１５秒とされる。なお、設定時間２は固定でもよいが、ユーザ設定部１０２を操作して、あるいはタッチパネル１２３上を押圧操作して、ユーザが任意の時間に設定可能としてもよい。図２１は、設定時間２および上述した設定時間１をユーザがタッチパネル１２３上を押圧操作して設定する場合に、ＬＣＤパネル１２２上に表示されるＧＵＩ画面（設定画面）の一例を示している。
【０１２５】
ステップＳＴ６４で連続再生カウントが設定時間２以上であるとき、制御部１０１は、ステップＳＴ６６において、連続再生カウントをクリアする。そして、制御部１０１は、ステップＳＴ６７において、低いスコアの動画像区間を再生し、その後に、ステップＳＴ６８において、リターンする。
【０１２６】
また、ステップＳＴ６４で、連続再生カウントが設定時間２より短いとき、制御部１０１は、ステップＳＴ６９において、高いスコアの動画像区間を再生し、その後に、ステップＳＴ６８において、リターンする。
【０１２７】
図１９のフローチャートに示す再生制御が実行されることで、重み付け再生が有効にされている場合には、再生対象の動画像ファイルのみなし重複期間にあって、原則として、重要度スコア算出区間毎に、スコアの高い方の動画像区間が選択的に再生される。この場合、重要度の高い部分が抜き出されて動画像の表示が行われるので、良好な擬似編集効果が得られる。
【０１２８】
図２２は、擬似編集効果再生の基本動作を模式的に示している。図２２（ｂ）の動画像ファイル２は再生対象の動画像ファイルであり、図２２（ａ）の動画像ファイル４は記録日時が重複している他の動画像ファイルである。重み付け再生が有効になっていないとき、動画像ファイル２の区間ａ、区間ｂ、区間ｃ，区間ｄが順に再生されていく。一方、重み付け再生が有効になっているとき、図２２（ｃ）に示すように、重複期間にあっては、スコアの高い方の動画像区間が選択的に再生されていく。
【０１２９】
また、図２０のフローチャートに示す重み付け再生処理が実行されることで、同一動画像ファイルの動画像が設定時間２以上連続して再生される場合には、自動的に他の動画像ファイルに基づくスコアの低い動画像の再生が行われる。これにより、重複動画像のうち、常に同じ側の動画像が再生されてしまうという問題が回避される。
【０１３０】
なお、図１９のフローチャートに示す再生制御では、重み付け再生が有効にされている場合には、再生対象の動画像ファイルの重複期間において、スコアの高い方の動画像区間が選択的に再生される。
【０１３１】
しかし、図２３に示すように、ＬＣＤパネル１２２上に、アングル切り替えボタンＢＴＮを表示し、ユーザがアングル切り替えボタンＢＴＮに対応したタッチパネル１２３上の位置を押圧操作して、スコアの低い方の動画像区間の再生に切り替え可能としてもよい。これにより、ユーザは重要度が低い動画像が選択される状態に意識的に移行させることができ、当該動画像の確認が可能となる。なお、重複動画像の再生時には、図２３に示すように、ＬＣＤパネル１２２上に、その旨を示すアイコンＡＣが表示される。
【０１３２】
ここで、ユーザ操作があった後、重複期間の残り期間で、再度ユーザ操作があるまで、ずっとスコアの低い方の動画像区間の再生が行われてもよく、あるいは、ユーザ操作があった後、所定個数の区間だけ、スコアの低い方の動画像区間の再生が行われてもよい。
【０１３３】
図２４は、擬似編集効果再生において、ユーザのアングル切り替え操作があった場合の動作例を模式的に示している。図２４（ａ），（ｂ）は、図２２（ａ），（ｂ）に対応している。この例では、図２４（ｃ）に示すように、動画像ファイル２の動画像区間ｃの再生中にユーザ操作があったとき、直後の１区間だけ、スコアの低い動画像ファイル４の動画像区間ｃ′が再生され、その後は、スコアの高い動画像区間が選択的に再生される。
【０１３４】
また、図２５は、擬似編集効果再生において、ユーザのアングル切り替え操作があった場合の他の動作例を模式的に示している。図２５（ａ），（ｂ）は、図２２（ａ），（ｂ）に対応している。この例では、図２５（ｃ）に示すように、動画像ファイル２の動画像区間ｃの再生中にユーザ操作があったとき、その後は、スコアの低い動画像ファイル４の動画像区間ｃ′，ｄ′が順に再生されていく。
【０１３５】
［簡易編集効果付きダビング］
ホスト側のビデオカメラレコーダ１００Ａは、ハードディスク１１８から光記録ディスク１１９へのダビングを行うことができる。ユーザは、ダビング時に、通常ダビングまたは擬似編集効果付きダビングを選択できる。擬似編集効果付きダビングにおいては、図１９に示す擬似編集再生と同様の処理で、記録日時の重複期間においては、選択された動画像を再結合してダビングする。
【０１３６】
この場合、記録日時の重複期間においては重要度スコア算出区間（例えば、１０ＧＯＰ）毎に重要度スコアの高い方の動画像が選択される。そのため、動画像の再エンコードは必要なく、ＤＶＤ、ＡＶＣＨＤ、Ｂｌｕ−ｒａｙディスク等の光記録ディスクに対応した動画像記録形式への変換のみでダビングが可能となり、編集時間と手間が大幅に軽減される。
【０１３７】
以上説明したように、ホスト側のビデオカメラレコーダ１００Ａは、デバイス側のビデオカメラレコーダ１００Ｂから、動画像ファイルおよび画像情報管理ファイル上の動画像関連メタデータの取り込みを行ってハードディスク１１８に追加記録する。その後、このビデオカメラレコーダ１００Ａは、追加記録した動画像ファイル（追記動画像ファイル）につき、ハードディスク１１８に既に記録されている動画像ファイル（既存動画像ファイル）との記録日時の重複判定を行う。ビデオカメラレコーダ１００Ａは、記録日時の重複があるとき、重複期間において、双方の動画像ファイルにつき、重要度スコア算出区間毎に、重要度スコアを算出する。そして、ビデオカメラレコーダ１００Ａは、各動画像ファイルの他の動画像ファイルとの重複の有無、重複動画像ファイルに関連して算出された重要度スコア等の重複情報を、例えば重複情報管理ファイルで管理する（図１６〜図１８参照）。
【０１３８】
そして、ビデオカメラレコーダ１００Ａは、再生時において、所定の動画像ファイルを再生する際に、重み付け再生が有効になっている場合には、重複情報管理ファイルに記載されている重複情報に基づいて、当該所定の動画像ファイルと記録日時が重複する動画像ファイルが存在するか否かを認識し、重複期間においては、原則として、上述の重要度スコア算出区間毎に、重要度スコアの高い方の動画像を選択して表示する。したがって、ビデオカメラレコーダ１００Ａにおいては、ユーザが実際に編集作業を行うことなく、あたかも編集を行ったような再生結果を、比較的短時間で得ることができる。
【０１３９】
また、ビデオカメラレコーダ１００Ａは、擬似編集効果再生を行う際に、復号再生単位であるＧＯＰの整数倍の長さを持つ区間毎に、重複情報に基づいて、再生動画像の選択的に切り換えるものであり、元の動画像データストリームを破壊せず、必要な区間の動画像データだけを効率的にデコードして用いることができる。
【０１４０】
［応用例、変形例］
なお、上述実施の形態においては、ホスト側のビデオカメラレコーダ１００Ａは、デバイス側のビデオカメラレコーダ１００ＢとＵＳＢ接続を行って画像取込を行っている。しかし、ホスト側のビデオカメラレコーダ１００Ａとデバイス側のビデオカメラレコーダ１００Ｂとの接続方法は、ＵＳＢ接続に限らず、ＩＥＥＥ１３９４、ｅＳＡＴＡといった高速有線接続、およびＩＥＥＥ８０２．１１ａ／ｂ／ｇ／ｎ、ＷｉｒｅｌｅｓｓＵＳＢ、ＵＷＢ（Ultra Wide Band）といった高速無線通信接続でもかまわない。
【０１４１】
また、上述実施の形態においては、説明の簡単化のために、ホスト側のビデオカメラレコーダ１００Ａにデバイス側のビデオカメラレコーダ１００Ｂが接続された１対１接続の場合を取り扱ったが、２台以上の接続に関しても基本的には同様の処理で実現可能である。
【０１４２】
また、上述実施の形態においては、ハードディスク（ＨＤＤ）１１８に動画像ファイルが接続されるものを示したが、動画像ファイルが記録される記録媒体は、ハードディスク１１８に限るものではなく、容量が十分であれば光記録媒体（DVD/Blu-rayなどの光ディスク）、半導体メモリカード、内蔵メモリなどでも応用可能であることはいうまでもない。
【０１４３】
また、上述実施の形態においては、ホスト側のビデオカメラレコーダ１００Ａは、デバイス側のビデオカメラレコーダ１００Ｂの接続（機器間接続）による重複画像の擬似編集効果ついて述べている。しかし、この発明は、ハードディスク/半導体メモリカード/内蔵メモリ/光記録媒体などの複数の記録媒体を備えたハイブリッドメディアの画像記録装置単体において、取り外し可能なメディア同士、または取り外し可能なメディアと内蔵記録メディアとのメディア間コピー／ダビング時にも応用可能である。
【０１４４】
また、上述実施の形態においては、ホスト側のビデオカメラレコーダ１００Ａは、デバイス側のビデオカメラレコーダ１００Ｂから動画像を取り込み、接続を切断してから重複判定処理を行っている（図５参照）が、接続したまま記録日時が重複する動画像ファイルを判定、スコア付けを行う構成としてもよい。
【０１４５】
図２６のフローチャートは、その場合における、ビデオカメラレコーダ１００Ａの制御部１０１における画像取り込みおよび重複判定の処理手順の一例を示している。
【０１４６】
制御部１０１は、ステップＳＴ７１において、処理を開始する。この場合、制御部１０１は、ＬＣＤパネル１２２上に、図２７（ａ）に示すようなＧＵＩ画面を表示し、ユーザが「画像取り込み」を選択したとき、ステップＳＴ７２の処理に移る。このステップＳＴ７２において、制御部１０１は、ビデオカメラレコーダ１００Ｂとの間でＵＳＢ接続を実行し、ホストとして動作を開始する。
【０１４７】
次に、制御部１０１は、ステップＳＴ７３において、動画像受信を行うか否かを判断する。この場合、制御部１０１は、ＬＣＤパネル１２２上に、図２７（ｂ）に示すようなＧＵＩ画面を表示し、動画像の受信をユーザに選択させてもよい。動画像受信を行わないとき、制御部１０１は、ステップＳＴ７４において、処理を終了する。
【０１４８】
ステップＳＴ７３で動画像受信を行うとき、制御部１０１は、ステップＳＴ７５において、ビデオカメラレコーダ１００Ｂから動画像（動画像ファイルおよび画像情報管理ファイル上の動画像関連メタデータ）を受信する。そして、制御部１０１は、ステップＳＴ７６において、重複動画像の検索を実行するか否かを判断する。この場合、制御部１０１は、ＬＣＤパネル１２２上に、図２７（ｃ）に示すようなＧＵＩ画面を表示し、重複動画像の検索をユーザに選択させてもよい。
【０１４９】
重複動画像の検索を実行しないとき、制御部１０１は、ステップＳＴ７４において、処理を終了する。一方、重複動画像の検索を実行するとき、制御部１０１は、ステップＳＴ７７において、重複判定を行う。制御部１０１は、この重複判定において、画像情報管理ファイルを参照して、受信している動画像ファイルが、既存の動画像ファイルと記録日時が重複しているか否かを判定する。
【０１５０】
詳細説明は省略するが、このステップＳＴ７７における重複判定の処理は、上述の図５のフローチャートのステップＳＴ９における重複判定処理と同様である（図９、図１０、図１２のフローチャート参照）。制御部１０１は、ステップＳＴ７７の処理が終了した後、ステップＳＴ７４において、処理を終了する。
【０１５１】
この場合、重複判定処理結果に基づいて、ハードディスク１１８には、既存の動画像ファイルと記録時間が重複している動画像ファイルのみを取り込むことができる。またこの場合、通信帯域が充分であれば、ハードディスク１１８に動画像ファイルを取り込むことなく、重複判定処理結果に基づいて、接続したまま擬似編集再生を行うことも可能となる。
【０１５２】
また、上述していないが、図１４の重要度スコア算出処理で得られた重要度スコアに基づいて擬似編集効果再生を行った場合、その再生結果が望ましいものでなかったとき、ユーザは、ユーザ操作部１０２を操作して、重要度スコア算出条件を変更した上で、図１４の重要度スコア算出処理を再度実行させることができる。これにより、違う擬似編集効果を得ることが可能となる。
【０１５３】
また、上述実施の形態においては、ホスト側のビデオカメラレコーダ１００Ａとデバイス側のビデオカメラレコーダ１００Ｂの日時時刻情報が同期していることが前提である。そのため、時刻の同一性を保つために、使用前にビデオカメラ１００Ａ，１００Ｂを接続して日時時刻情報を同期させる手段を設けてもより。その手段としては、以下が考えられる。
【０１５４】
１．接続時にホスト（HOST）側が、デバイス（DEVICE）側のメーカーコードとＩＤを認識して時刻同期可能と判断した場合に、同期コマンドと時刻情報を送信する。デバイス側は同期コマンドを受信して自機の時計時刻情報をホスト側に同期させる。
【０１５５】
２．接続時にデバイス（DEVICE）側からホスト（HOST）側に時刻同期要求コマンドを送信し、ホスト側がレスポンスとして時刻情報をデバイス側に送信し、デバイス側がその時刻情報を受信して自機の時計時刻情報をホスト側に同期させる。
【０１５６】
また、上述実施の形態においては、日時重複ファイルの妥当性判断を強化するために、ビデオカメラレコーダ等の携帯型動画像記録装置にＧＰＳ等の位置検出手段を設け、日時の重複に加え、位置情報の近さで重複妥当性を判断させることを説明した（図１２参照）。この位置情報を、重複妥当性以外にも、例えば以下のように、重要度スコアの算出条件として追加することもできる。
【０１５７】
I×位置情報が登録位置情報近辺（Iは係数）
【０１５８】
ＧＰＳは位置情報を検出するために極めて正確な時計情報を取得可能なため、ＧＰＳを搭載した場合には日時情報の正確性が向上するという利点も存在する。
【０１５９】
また、上述実施の形態においては、動画像の重要度スコアに従った切り換え再生による擬似編集効果を得ている。しかし、ビデオカメラレコーダ１００Ａの動画像エンコード能力が十分であれば、図２８または図２９に示すように、重複期間において重複動画像を並列に再生し、重要度スコア（重み付けレベル）を重畳して表示する方法も考えられる。
【０１６０】
ここで、図２８の表示例は、ハードディスク１１８に記録されている３つの動画像ファイルの記録日時が重複している場合の表示例であって、各動画像が同じサイズで表示されている。また、図２９の表示例は、ハードディスク１１８に記録されている３つの動画像ファイルの記録日時が重複している場合の表示例であって、重要度スコアが最大の動画像は大きなサイズで、その他の動画像は小さなサイズで表示されている。
【０１６１】
また、上述実施の形態においては、ＭＰＥＧ２ストリーム記録を例に挙げて説明した。しかし、この発明は、ＭＰＥＧ−４  ＡＶＣ／Ｈ．２６４圧縮時にも基本的な考え方を同様にして適用できる。上述実施の形態においては、標準的なＭＰＥＧ信号を扱っているため、復号再生単位であるＧＯＰの整数倍の単位で、重要度スコア算出および再生選択を行っているが、この発明は、これに限定されるものではない。非圧縮の動画像ストリームや業務用途で使用されることの多い１ＧＯＰ＝１フレームのイントラフレーム方式で圧縮された動画像で同様の処理を行えば、フレーム基準で実際の重複期間を使用して重要度スコア算出、再生区間を設定可能である。
【０１６２】
また、上述実施の形態においては、この発明をビデオカメラレコーダに適用したものを示したが、この発明は、ビデオカメラレコーダ以外にもデジタルスチルカメラ、編集デッキ、パーソナルコンピュータなどのパーソナル画像コンテンツを扱え、画像情報付帯情報を用いることのできる画像編集再生装置に関しても応用は可能である。
【産業上の利用可能性】
【０１６３】
この発明は、ユーザが実際に編集作業を行うことなく、擬似の編集効果を簡易に得ることができるものであり、パーソナル画像コンテンツを扱うビデオカメラレコーダ等に適用できる。
【図面の簡単な説明】
【０１６４】
【図１】実施の形態の概略を示す図である。
【図２】ビデオカメラレコーダの構成例を示す図である。
【図３】画像情報管理ファイルの構造（概念的構造）の一例を示す図である。
【図４】画像情報管理ファイルの構造（記録上の物理的構造）の一例を示す図である。
【図５】ビデオカメラレコーダの制御部における画像取り込みおよび重複判定の処理手順の一例を示すフローチャートである。
【図６】画像取り込みおよび重複判定の処理の各場面におけるＧＵＩ画面の一例を示す図である。
【図７】動画像ファイルの取り込み後における画像情報管理ファイルの構造（概念的構造）の一例を示す図である。
【図８】動画像ファイルの取り込み後における画像情報管理ファイルの構造（記録上の物理的構造）の一例を示す図である。
【図９】ビデオカメラレコーダの制御部における重複判定の処理手順の一例を示すフローチャートである。
【図１０】ビデオカメラレコーダの制御部における重複判定の処理手順の他の例を示すフローチャートである。
【図１１】重要度スコア算出処理の実行をユーザに選択させる際のＧＵＩ画面の一例を示す図である。
【図１２】ビデオカメラレコーダの制御部における重複判定の処理手順の他の例を示すフローチャートである。
【図１３】追記動画像ファイルおよび既存動画像ファイルにおける実際の重複期間とＧＯＰ単位におけるみなし重複期間を説明するための図である。
【図１４】ビデオカメラレコーダの制御部における重要度スコア算出の処理手順の一例を示すフローチャートである。
【図１５】重要度スコアの算出時に使用する各種情報を説明するための図である。
【図１６】分割管理の場合における重複情報管理データの一例を示す図である。
【図１７】一元管理の場合における重複情報管理データの一例を示す図である。
【図１８】動画像ファイル、重複管理情報ファイルなどの実ファイル構成の一例を示す図である。
【図１９】所定の動画像ファイルを再生する際の、ビデオカメラレコーダの制御部における制御処理例を示すフローチャートである。
【図２０】ビデオカメラレコーダの制御部における重み付け再生の処理手順の一例を示すフローチャートである。
【図２１】ユーザがタッチパネル上を押圧操作して時間設定を行う際のＧＵＩ画面の一例を示す図である。
【図２２】擬似編集効果再生の基本動作を模式的に示した図である。
【図２３】アングル切り替えボタンＢＴＮを表示したＧＵＩ画面の一例を示す図である。
【図２４】擬似編集効果再生において、ユーザのアングル切り替え操作があった場合の動作例を模式的に示した図である。
【図２５】擬似編集効果再生において、ユーザのアングル切り替え操作があった場合の動作例を模式的に示した図である。
【図２６】ビデオカメラレコーダの制御部における画像取り込みおよび重複判定の処理手順の他の例を示すフローチャートである。
【図２７】画像取り込みおよび重複判定の処理の各場面におけるＧＵＩ画面の他の例を示す図である。
【図２８】重複動画像の並列再生時における画面表示の一例を示す図である。
【図２９】重複動画像の並列再生時における画面表示の他の例を示す図である。
【符号の説明】
【０１６５】
１００Ａ，１００Ｂ・・・ビデオカメラレコーダ、１０１・・・制御部、１０２・・・ユーザ操作部、１０３・・・電源回路、１０４・・・バッテリ、１０５・・・ＡＣ電源プラグ、１０６・・・電源スイッチ、１１１・・・撮像レンズ、１１２・・・撮像素子、１１３・・・撮像信号処理回路、１１３ａ・・・顔検出部、１１４・・・マイク部、１１５・・・音声信号処理回路、１１５ａ・・・音検出部、１１６・・・重畳分離回路、１１７・・・記録再生回路、１２１・・・重畳回路、１２２・・・ＬＣＤパネル、１２３・・・タッチパネル、１２４・・・ＯＳＤ回路、１２５・・・音声出力部、１２６・・・スピーカ部、１２７・・・通信処理部、１２８・・・ＵＳＢ端子
【図１】
2010074271.tif 000003
【図２】
2010074271.tif 000004
【図３】
2010074271.tif 000005
【図４】
2010074271.tif 000006
【図５】
2010074271.tif 000007
【図６】
2010074271.tif 000008
【図７】
2010074271.tif 000009
【図８】
2010074271.tif 000010
【図９】
2010074271.tif 000011
【図１０】
2010074271.tif 000012
【図１１】
2010074271.tif 000013
【図１２】
2010074271.tif 000014
【図１３】
2010074271.tif 000015
【図１４】
2010074271.tif 000016
【図１５】
2010074271.tif 000017
【図１６】
2010074271.tif 000018
【図１７】
2010074271.tif 000019
【図１８】
2010074271.tif 000020
【図１９】
2010074271.tif 000021
【図２０】
2010074271.tif 000022
【図２１】
2010074271.tif 000023
【図２２】
2010074271.tif 000024
【図２３】
2010074271.tif 000025
【図２４】
2010074271.tif 000026
【図２５】
2010074271.tif 000027
【図２６】
2010074271.tif 000028
【図２７】
2010074271.tif 000029
【図２８】
2010074271.tif 000030
【図２９】
2010074271.tif 000031