(57)【要約】【課題】  映像の編集を行うにあたってカットを切出した際、その動作と同期して切出したカットの特徴量を求め、カット識別のための付加情報を生成する場合に、別途具体的な指定をしなくとも、付加情報を生成するための映像データが選ばれるようにする。【解決手段】  カット指定部１０１は入力する映像データ１０９における所望のカットの位置を、ＧＵＩ１０７を介した外部からの操作に応じて指定する。付加情報生成部１０５は指定したカットの映像データの特徴量を示す付加情報を生成するのに用いる実効範囲の映像データを指定して、この実効範囲の映像データに基づいてカットの映像データに対応した付加情報を生成する。このための実効範囲は、ＧＵＩ１０７を介してユーザが指定したカットの開始位置と終了位置とを用いて決定する。【選択図】        図１
2006025248.tif 000002
【特許請求の範囲】
【請求項１】
映像に対応した付加情報を生成する付加情報生成装置であって、
時系列の映像データから時間的に区分した任意の範囲をカットとして指定するカット指定手段と、
前記カットの範囲内で時間的な長さを持った実効範囲を決定する実効範囲決定手段と、
前記実効範囲の映像データに基づいて前記カットの特徴を示す付加情報を生成する付加情報生成手段とを備える、付加情報生成装置。
【請求項２】
前記カット指定手段は、前記カットの開始位置と終了位置とを指定して、
前記実効範囲決定手段は、前記開始位置及び前記終了位置の値に基づいて前記実効範囲を決定することを特徴とする、請求項１に記載の付加情報生成装置。
【請求項３】
前記実効範囲決定手段は更に、外部から与えられる範囲指定操作に応じて前記実効範囲を可変に設定することを特徴とする、請求項２に記載の付加情報生成装置。
【請求項４】
前記カット指定手段は、前記カットの開始位置を少なくとも指定して、
前記実効範囲決定手段は、前記開始位置の値に基づいて所定長さの前記実効範囲を決定することを特徴とする、請求項１に記載の付加情報生成装置。
【請求項５】
前記実効範囲決定手段は更に、前記映像データのシーンチェンジ位置を検出し、該検出結果に基づいて前記実効範囲を可変に設定することを特徴とする、請求項４に記載の付加情報生成装置。
【請求項６】
映像に対応した付加情報を生成する付加情報生成装置であって、
時系列の映像データから時間的に区分した任意の範囲をカットとして指定するカット指定手段と、
前記映像データのシーンチェンジ位置に従い、前記カットを更に区分した小範囲の映像データそれぞれについて特徴量を求め、求めた前記特徴量のうち出現頻度の高い特徴量を有する小範囲を前記カットの実効範囲とする実効範囲決定手段と、
前記実効範囲の映像データに基づいて前記カットの特徴を示す付加情報を生成する付加情報生成手段とを備える、付加情報生成装置。
【請求項７】
前記付加情報生成手段で生成した付加情報を、出力または記録するための所定の形式に変換するフォーマット手段を更に備える、請求項１または６に記載の付加情報生成装置。
【請求項８】
映像の一部又は全部を切り出して編集する映像編集装置であって、
時系列の映像データから時間的に区分した任意の範囲をカットとして指定するカット指定手段と、
前記カットの範囲内で時間的な長さを持った実効範囲を決定する実効範囲決定手段と、
前記実効範囲の映像データに基づいて前記カットの特徴を示す付加情報を生成する付加情報生成手段と、
前記付加情報に基づいて前記映像を編集する編集手段とを備える、映像編集装置。
【請求項９】
映像の一部又は全部を切り出して編集する映像編集装置であって、
時系列の映像データから時間的に区分した任意の範囲をカットとして指定するカット指定手段と、
前記映像データのシーンチェンジ位置に従い、前記カットを更に区分した小範囲の映像データそれぞれについて特徴量を求め、求めた前記特徴量のうち出現頻度の高い特徴量を有する小範囲を前記カットの実効範囲とする実効範囲決定手段と、
前記実効範囲の映像データに基づいて前記カットの特徴を示す付加情報を生成する付加情報生成手段と、
前記付加情報に基づいて前記映像を編集する編集手段とを備える、映像編集装置。
【請求項１０】
映像に対応した付加情報を生成する付加情報生成方法であって、
時系列の映像データから時間的に区分した任意の範囲をカットとして指定するカット指定ステップと、
前記カットの範囲内で時間的な長さを持った実効範囲を決定する実効範囲決定ステップと、
前記実効範囲の映像データに基づいて前記カットの特徴を示す付加情報を生成する付加情報生成ステップとを含む、付加情報生成方法。
【請求項１１】
映像に対応した付加情報を生成する付加情報生成方法であって、
時系列の映像データから時間的に区分した任意の範囲をカットとして指定するカット指定ステップと、
前記映像データのシーンチェンジ位置に従い、前記カットを更に区分した小範囲の映像データそれぞれについて特徴量を求め、求めた前記特徴量のうち出現頻度の高い特徴量を有する小範囲を前記カットの実効範囲とする実効範囲指定ステップと、
前記実効範囲の映像データに基づいて前記カットの特徴を示す付加情報を生成する付加情報生成ステップとを含む、付加情報生成方法。
【請求項１２】
映像の一部又は全部を切り出して編集する映像編集方法であって、
時系列の映像データから時間的に区分した任意の範囲をカットとして指定するカット指定ステップと、
前記カットの範囲内で時間的な長さを持った実効範囲を決定する実効範囲決定ステップと、
前記実効範囲の映像データに基づいて前記カットの特徴を示す付加情報を生成する付加情報生成ステップと、
前記付加情報に基づいて前記映像を編集する編集ステップとを含む、映像編集方法。
【請求項１３】
映像の一部又は全部を切り出して編集する映像編集方法であって、
時系列の映像データから時間的に区分した任意の範囲をカットとして指定するカット指定ステップと、
前記映像データのシーンチェンジ位置に従い、前記カットを更に区分した小範囲の映像データそれぞれについて特徴量を求め、求めた前記特徴量のうち出現頻度の高い特徴量を有する小範囲を前記カットの実効範囲とする実効範囲決定ステップと、
前記実効範囲の映像データに基づいて前記カットの特徴を示す付加情報を生成する付加情報生成ステップと、
前記付加情報に基づいて前記映像を編集する編集ステップとを含む、映像編集方法。
【請求項１４】
映像に対応した付加情報を生成する付加情報生成装置であって、
時系列の映像データから時間的に区分した任意の範囲をカットとして指定するカット指定手段と、
前記カットの範囲に含まれる映像データの一部又は全部に基づいて、前記カットの特徴を示す付加情報を生成する付加情報生成手段とを備え、
前記付加情報生成手段は、前記カット指定手段の指定動作に応じて動作することを特徴とする、付加情報生成装置。
【請求項１５】
映像に対応した付加情報を生成する付加情報生成装置であって、
時系列の映像データから時間的に区分した任意の範囲をカットとして指定するカット指定手段と、
前記カットの範囲内で実効範囲を決定する実効範囲決定手段と、
前記実効範囲の映像データに基づいて前記カットの特徴を示す付加情報を生成する付加情報生成手段とを備え、
前記実効範囲決定手段は、前記カット指定手段の指定動作に応じて動作することを特徴とする、付加情報生成装置。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、映像の付加情報生成装置および方法、ならびに付加情報を用いた映像編集装置および方法に関し、より詳細には、映像の全部または一部を検索するための、映像に対応する付加情報を生成する装置および方法、ならびに、該付加情報を映像と共にあるいは別個に記録し、該付加情報を用いて映像の全部または一部を用いて映像の編集を行う編集装置および方法に関する。
【背景技術】
【０００２】
映像は一般に、時間的に区切られる「シーン」や「ショット」といった単位の連なりで構成される。「シーン」とは「第１幕、第２幕」といったシナリオ上の区切りや「出会いのシーン、別れのシーン」といった意味的な区切りを指し、「ショット」とは「１回の撮影における開始から終了まで」や「ある編集点から次の編集点までの区間」といった物理的な区切りを指すが、物理的な区切りも含めて「シーン」と呼ぶことも多い。また、１つのシーンが複数のショットまたはシーンを含むこともある。
【０００３】
映像を記録する機器としては、テープ媒体を用いたＶＴＲ（Video Tape Recorder）や、昨今ではハードディスクやＤＶＤ（Digital Versatile Disc）などのディスク媒体を用いた録画機器も普及してきている。そして、ハードディスクやＤＶＤなどのディスクを記録媒体とする録画機器は、任意の再生位置に高速に移動して再生する、いわゆるランダムアクセス機能など、テープ媒体には無い特徴機能を備えている。
【０００４】
ランダムアクセス機能を生かして、映像中の任意の開始位置、終了位置を指定し、示される映像区間―これを「カット」と呼ぶ―を順に繋げることで行う、いわゆる「カット編集」も広く行われている。その際、繋げるカットを逐次指定するのでなく、予め複数のカットを切出しておき、後で適当なカットを選択し順番を指定するといった編集形態もある。以下、図２４を用いて、このような形態によるカット編集について説明する。
【０００５】
図２４は、カット編集を行う従来の映像編集装置の概略構成を示した機能ブロック図である。カット指定部１９０１はＧＵＩ（Graphical User Interface）を有し、入力された映像データ１９０７を再生しながら、カットの開始位置と終了位置とをＧＵＩ１９０５を通して指定する。指定されたこれらのカットの位置情報１９０６は保持部１９０２に送られる。
【０００６】
カット編集部１９０３は同じくＧＵＩ１９０８を有し、各々のカットを、対応するアイコンやサムネールなどを用いて画面上に表示する。この時、サムネールの作成には映像データ１９０７と保持部１９０２に保持されたカット位置情報１９０６とを利用する。ユーザは、ＧＵＩ１９０８を通して、表示されたカットから必要なカットを選択し、順序を指定することで編集を実行する。編集完了部１９０４は、編集結果１９０９を最終的に出力、保存される形式―例えば、再生位置および順をリストで表したプレイリスト形式―に整える。特許文献１には、このような従来のカット編集の例が示されている。
【特許文献１】特開２００２−１５２６６６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
先に述べたように、映像は元々、複数のシーンまたはショットからなり、例えば映像に含まれる全てのショットを編集単位であるカットとして用いるとすれば、一般にその数は大きい。また、１つのショットを分割した更に小さな映像単位（サブショット）をカットとすることも考えられる。このように扱うカットの数が増えた場合、従来のカット編集では、編集時に各カットを一意に識別し管理することは難しかった。
【０００８】
それゆえに、この発明の目的は、映像の編集を行うにあたって任意部分の映像を切出した際、その動作と同期して切出した任意部分の映像の特徴量を求め、任意部分の映像の各々を識別するための付加情報（映像検索用のメタデータ）を生成する、更にその際に、別途厳密または具体的な指定をしなくとも、付加情報を生成するのに最適な映像データが選ばれるようにする、付加情報生成装置および方法、ならびに映像編集装置および方法を提供することである。
【課題を解決するための手段】
【０００９】
この発明のある局面に従う、映像に対応した付加情報を生成する付加情報生成装置は、
時系列の映像データから時間的に区分した任意の範囲をカットとして指定するカット指定手段と、
前記カットの範囲内で時間的な長さを持った実効範囲を決定する実効範囲決定手段と、
前記実効範囲の映像データに基づいて前記カットの特徴を示す付加情報を生成する付加情報生成手段とを備える。
【００１０】
好ましくは、カット指定手段は、前記カットの開始位置と終了位置とを指定して、
前記実効範囲決定手段は、前記開始位置及び前記終了位置の値に基づいて前記実効範囲を決定する。
【００１１】
好ましくは、実効範囲決定手段は更に、外部から与えられる範囲指定操作に応じて前記実効範囲を可変に設定することを特徴とする。
【００１２】
好ましくは、カット指定手段は、前記カットの開始位置を少なくとも指定して、
前記実効範囲決定手段は、前記開始位置の値に基づいて所定長さの前記実効範囲を決定する。
【００１３】
好ましくは、実効範囲決定手段は更に、前記映像データのシーンチェンジ位置を検出し、該検出結果に基づいて前記実効範囲を可変に設定する。
【００１４】
この発明の他の局面に従う、映像に対応した付加情報を生成する付加情報生成装置は、
時系列の映像データから時間的に区分した任意の範囲をカットとして指定するカット指定手段と、
前記映像データのシーンチェンジ位置に従い、前記カットを更に区分した小範囲の映像データそれぞれについて特徴量を求め、求めた前記特徴量のうち出現頻度の高い特徴量を有する小範囲を前記カットの実効範囲とする実効範囲決定手段と、
前記実効範囲の映像データに基づいて前記カットの特徴を示す付加情報を生成する付加情報生成手段とを備える。
【００１５】
好ましくは、付加情報生成手段で生成した付加情報を、出力または記録するための所定の形式に変換するフォーマット手段を更に備える。
【００１６】
この発明のさらに他の局面に従う、映像の一部又は全部を切り出して編集する映像編集装置は、
時系列の映像データから時間的に区分した任意の範囲をカットとして指定するカット指定手段と、
前記カットの範囲内で時間的な長さを持った実効範囲を決定する実効範囲決定手段と、
前記実効範囲の映像データに基づいて前記カットの特徴を示す付加情報を生成する付加情報生成手段と、
前記付加情報に基づいて前記映像を編集する編集手段とを備える。
【００１７】
この発明のさらに他の局面に従う、映像の一部又は全部を切り出して編集する映像編集装置は、
時系列の映像データから時間的に区分した任意の範囲をカットとして指定するカット指定手段と、
前記映像データのシーンチェンジ位置に従い、前記カットを更に区分した小範囲の映像データそれぞれについて特徴量を求め、求めた前記特徴量のうち出現頻度の高い特徴量を有する小範囲を前記カットの実効範囲とする実効範囲決定手段と、
前記実効範囲の映像データに基づいて前記カットの特徴を示す付加情報を生成する付加情報生成手段と、
前記付加情報に基づいて前記映像を編集する編集手段とを備える。
【００１８】
この発明のさらに他の局面に従う、映像に対応した付加情報を生成する付加情報生成方法は、
時系列の映像データから時間的に区分した任意の範囲をカットとして指定するカット指定ステップと、
前記カットの範囲内で時間的な長さを持った実効範囲を決定する実効範囲決定ステップと、
前記実効範囲の映像データに基づいて前記カットの特徴を示す付加情報を生成する付加情報生成ステップとを含む。
【００１９】
この発明のさらに他の局面に従う、映像に対応した付加情報を生成する付加情報生成方法は、
時系列の映像データから時間的に区分した任意の範囲をカットとして指定するカット指定ステップと、
前記映像データのシーンチェンジ位置に従い、前記カットを更に区分した小範囲の映像データそれぞれについて特徴量を求め、求めた前記特徴量のうち出現頻度の高い特徴量を有する小範囲を前記カットの実効範囲とする実効範囲指定ステップと、
前記実効範囲の映像データに基づいて前記カットの特徴を示す付加情報を生成する付加情報生成ステップとを含む。
【００２０】
この発明のさらに他の局面に従う、映像の一部又は全部を切り出して編集する映像編集方法は、
時系列の映像データから時間的に区分した任意の範囲をカットとして指定するカット指定ステップと、
前記カットの範囲内で時間的な長さを持った実効範囲を決定する実効範囲決定ステップと、
前記実効範囲の映像データに基づいて前記カットの特徴を示す付加情報を生成する付加情報生成ステップと、
前記付加情報に基づいて前記映像を編集する編集ステップとを含む。
【００２１】
この発明のさらに他の局面に従う、映像の一部又は全部を切り出して編集する映像編集方法は、
時系列の映像データから時間的に区分した任意の範囲をカットとして指定するカット指定ステップと、
前記映像データのシーンチェンジ位置に従い、前記カットを更に区分した小範囲の映像データそれぞれについて特徴量を求め、求めた前記特徴量のうち出現頻度の高い特徴量を有する小範囲を前記カットの実効範囲とする実効範囲決定ステップと、
前記実効範囲の映像データに基づいて前記カットの特徴を示す付加情報を生成する付加情報生成ステップと、
前記付加情報に基づいて前記映像を編集する編集ステップとを含む。
【００２２】
この発明のさらに他の局面に従う、映像に対応した付加情報を生成する付加情報生成装置は、
時系列の映像データから時間的に区分した任意の範囲をカットとして指定するカット指定手段と、
前記カットの範囲に含まれる映像データの一部又は全部に基づいて、前記カットの特徴を示す付加情報を生成する付加情報生成手段とを備え、
前記付加情報生成手段は、前記カット指定手段の指定動作に応じて動作する。
【００２３】
この発明のさらに他の局面に従う、映像に対応した付加情報を生成する付加情報生成装置は、
時系列の映像データから時間的に区分した任意の範囲をカットとして指定するカット指定手段と、
前記カットの範囲内で実効範囲を決定する実効範囲決定手段と、
前記実効範囲の映像データに基づいて前記カットの特徴を示す付加情報を生成する付加情報生成手段とを備え、
前記実効範囲決定手段は、前記カット指定手段の指定動作に応じて動作する。
【００２４】
これら発明によれば、ユーザは時系列の映像データから時間的に区分した任意の範囲をカットとして指定すれば、以降は指定された任意範囲で時間的な長さを持った実効範囲を決定して、決定された実効範囲の映像データに基づき、カットの特徴を示す付加情報を生成する。
【００２５】
それゆえに、ユーザはフレーム指定など具体的な指示を与えなくとも、指定した任意範囲の映像データのための付加情報の生成が可能となる。
【発明の効果】
【００２６】
上記の構成により、本発明では、映像に対応した付加情報（映像検索用のメタデータ）を、特別なトリガ無しに、ユーザが特に意識しないで生成可能とし、編集に利用できるようにした。また、生成された付加情報は所定のフォーマットに従って記録することで、２次的利用を可能とした。
【発明を実施するための最良の形態】
【００２７】
以下、この発明の第１〜第４の実施の形態について図１〜図２３を参照して説明する。なお、ここでは映像データの編集単位はカットとしているが、これに限定されるものではなく、時系列に連続している映像データの時間的に区切られた部分の映像データであればよい。たとえば、シーンやショットという単位であってもよい。
【００２８】
（装置のハードウェア構成）
まず、図２３を参照してこの発明の第１〜第４の実施の形態の付加情報生成装置、ならびに映像編集装置に適用される装置１のハードウェア構成について説明する。装置１はコンピュータの構成を有する。具体的には、装置１の各部を集中的に制御および監視するためのＣＰＵ（Central Processing Unit）２、各種プログラムおよびデータを格納するためのＲＯＭ（Read Only Memory）４およびＲＡＭ（Random Access Memory）６、ＨＤＤ（Hard Disk Drive）８、ＤＶＤ１０を制御してアクセスするＤＶＤ制御装置１２、インターネットを含む各種の通信ネットワーク１６と接続するための通信デバイス１４、キーボード、マウス、ボタンなどからなる入力部１８、映像信号による静止画または動画または文字などを表示する表示部２０、音声などの出力部２２、外部の図示のない装置から供給される映像信号２４を入力するビデオＩ／Ｆ（Interface）２６、映像データをＭＰＥＧ（Motion Picture Experts Group）などの所定手順に従い復号化して映像信号を出力するデコーダ２８、映像信号をＭＰＥＧなどの所定手順に従い符号化して後述の映像データ１０９を出力するエンコーダ３０、およびこれら各部間の高速な通信を可能とするためのバス３２を備える。映像データ１０９は時間軸方向にフレーム画像などの画像データが連なったデータ群である。
【００２９】
（第１の実施の形態）
以下、本発明の第１の実施形態に係る付加情報生成装置、ならびに映像編集装置について、図１〜図１２を用いて説明する。
【００３０】
図１は、本発明の第１の実施形態に係る付加情報生成装置ならびに映像編集装置の概略構成を示した機能ブロック図である。本装置は、入力部１８と表示部２０に対応のカット指定部１０１およびカット編集部１０３、ＲＡＭ６に対応の保持部１０２、編集完了部１０４、付加情報生成部１０５およびフォーマット部１０６を備える。また、これらの各部は適宜ＣＰＵ２の演算処理機能を用いてその機能が実現される。
【００３１】
図２は、図１の付加情報生成部１０５の内部構成を示した機能ブロック図である。付加情報生成部１０５は、範囲指定部２０１と付加情報計算部２０２とを備える。
【００３２】
図１に示した本装置の機能構成のうち、付加情報生成部１０５およびフォーマット部１０６が、本発明の特徴となるものである。そして、図１の機能構成のうち、カット指定部１０１および付加情報生成部１０５から構成される装置、もしくはこれにフォーマット部１０６を加えて構成される装置を、本発明の第１の実施形態に係る付加情報生成装置とする。図１の装置全体は、本発明の第１の実施形態に係る映像編集装置である。即ち、本発明の第１の実施形態に係る映像編集装置は、内部構成として本発明の第１の実施形態に係る付加情報生成装置を含んで構成される。
【００３３】
カット指定部１０１は、カット位置を指定するためのＧＵＩ１０７を有し、入力された映像データ１０９に対して、編集単位として切出されるカットのカット位置を指定する。以下、「映像」とは映像内容（コンテンツ）の意味で用い、映像を構成する具体的な映像信号（原データあるいは圧縮符号化データなど）を「映像データ」と呼ぶ。指定するカットの位置とは具体的には、カットの開始位置（「イン点」と呼ばれる）および終了位置（「アウト点」と呼ばれる）であり、更に詳細には、カットの開始位置にあたるフレーム画像のフレーム番号、時刻またはデータ位置、およびカットの終了位置にあたるフレーム画像のフレーム番号、時刻またはデータ位置を指す。無論、終了位置は、開始位置を基準としたカットの長さの情報（フレーム数、時間またはデータ長）で置き換えることも可能である。これらは例えば、入力された映像を画面上で再生しながらユーザが手入力することで指定される。
【００３４】
図３は、そのようにしてカット位置を指定する際の表示部２０の表示画面、即ちカット指定部１０１のＧＵＩ１０７の例である。ＧＵＩ１０７は窓３０１と３０５、シークバー３０２、ボタン群３０３、再生決定ボタン３０４、プレビューボタン３０６および取消ボタン３０７を含む。窓３０１は再生映像を表示する窓であり、シークバー３０２は映像全体に対する現在の再生箇所、ならびに指定されたイン点、アウト点の位置を示す。
【００３５】
シークバー３０２上では始め、映像の再生位置と同期するかたちでイン点の表示位置が移動している。この時、アウト点については表示されないか、あるいはイン点と同じ位置を指して、再生位置に合せて移動表示される。
【００３６】
窓３０１で再生されている映像に対し、巻き戻し、早送り、一時停止などの操作を、ボタン群３０３を使って行う。そして、適当なカットの開始位置を決めたら、決定ボタン３０４を押してカットの開始位置（イン点）を指定する。すると、シークバー３０２上のイン点の表示がその位置に固定される。
【００３７】
更に再生をすると、シークバー３０２上では、アウト点の表示のみが現在の再生位置を指して移動する。適当な終了位置を決めたら、再度、決定ボタン３０４を押してカットの終了位置（アウト点）を指定する。すると、シークバー３０２上のアウト点の表示がその位置に固定される。ここで再度、決定ボタン３０４を押すと、切出されるカットが決定され、決定されたカットが窓３０５に表示される。
【００３８】
また図３の例では、カットを決定する前（３度目の決定ボタン３０４を押す前）に、プレビューボタン３０６を押してカットの内容を窓３０１にてプレビューして確認することができ、指定が失敗した際（指定位置が望んだ通りでなかった場合）には、取消ボタン３０７を押して再度、カットの開始/終了位置を始めから指定し直すことができる。
【００３９】
無論、この３度目に押す決定確認の処理が無く、２度目に決定ボタン３０４を押しアウト点が指定された時点でカットを決定して窓３０５に表示する（即ちプレビューボタン３０６が無い）といった構成もあり得る。窓３０５には、カットの情報として、サムネールとイン点、アウト点の位置情報（時刻）３０８が表示されている。サムネールは、カットの先頭フレーム画像を縮小した画像などによって構成される。
【００４０】
カットが連続して切出される場合に、１つのカットのアウト点が次のカットのイン点となることがある。その場合には、映像の先頭を最初のイン点とするか、もしくは最初のイン点を別途指定した以降、アウト点のみを順次ユーザが指定していくことでカットを順次切出していく、といった構成をとることもできる。最終的に映像は複数のカットに分割される。
【００４１】
また、映像に含まれるショット全てを編集のためのカットとして利用することも可能である。この場合、カット点（イン点、アウト点）の指定は、ユーザによる直接入力だけでなく、映像の変化を解析して自動的に、あるいは、その解析結果をガイドとして半自動的に為されるとしてもよい。
【００４２】
この映像解析によるカット点の自動／半自動検出は、一般に「シーンチェンジ検出」や「カット点検出」と呼ばれる周知技術により実現されるものである。本発明ではそれらの具体的方法については特に説明をしないが、本発明の付加情報生成装置および方法、ならびに映像編集装置および方法の構成要件であるカット指定部もしくはカット指定ステップが、そのようなカット点（シーンチェンジ点）を自動／半自動検出する機能を有するものであっても、以下の処理が同様に適用可能であることは言うまでもない。
【００４３】
カット指定部１０１は、上記の処理を行い、各カットの指定されたカット点（イン点、アウト点）を一連の映像データ１０９における位置として示す、カットの位置情報１１０を出力する。このカット位置情報１１０は、保持部１０２に送られると共に、付加情報生成部１０５、およびフォーマット部１０６に入力される。また、カット指定部１０１は入力した映像データ１０９をそのままカット編集部１０３と付加情報生成部１０５に出力する。
【００４４】
次に、付加情報生成部１０５の動作について説明する。
【００４５】
図２に示した付加情報生成部１０５の内部構成のうち、範囲指定部２０１は、カットの位置情報１１０を受け取り、受け取った位置情報１１０に基づいて、カットの付加情報１１２を計算するのに用いる映像データ１０９の範囲を決定する。この範囲指定部２０１で指定される範囲を、以下、「実効範囲」と呼ぶこととする。付加情報計算部２０２は、範囲指定部２０１で指定された実効範囲内の映像データ１０９を用いて、そのカットに関する付加情報１１２を計算する。ここで、カットの付加情報１１２は、実効範囲内の映像データ１０９から計算される特徴量に基づいて与えられるものとする。
【００４６】
特徴量とは、カットを構成する映像データ１０９から直接あるいは間接に計算して得られる数値量である。例えば、映像データ１０９（原データ）から直接に計算されるものとしては、カットに含まれる映像データ１０９内での「色構成比」や「代表色」（最も出現頻度が高い色）、「模様（テクスチャ）の周波数成分分布」などがあげられる。これを図４（Ａ）〜（Ｃ）を参照して説明する。
【００４７】
図４（Ａ）は、映像データ１０９に従う映像がａ、ｂ、ｃの３色から成り、かつ１つのフレーム画像が４×４の１６画素から成るとした場合に、図４（Ｃ）の矢印で示すカット映像の特徴量として色構成比（図４（Ａ））と代表色（図４（Ｂ））を求めることができる。無論、実際の映像は色数、画素数共に図４（Ａ）〜（Ｃ）の例よりもはるかに多いが、算出方法はこれと同様である。ただし、色数については、適当に量子化して色数を限定し、それから色構成比、代表色を求めることも多く行われる。
【００４８】
また、間接に得られる特徴量としては、映像内の「動きの強度」（動きの激しさ）や「動き強度の空間分布または時間分布」などがあげられる。これら動きに関する特徴量を映像データ１０９（原データ）から求めるには、複数のフレーム画像データからフレーム間で映像信号がどう移動しているかを示した動きベクトルをまず求めて、得られた動きベクトル情報から計算する。
【００４９】
図５（Ａ）〜（Ｄ）は、図５（Ｄ）の矢印で示すカット映像に含まれるそれぞれのフレーム画像を４つのブロックに区切り、それぞれのブロックについて動きベクトルを求めた上で、カットの特徴量、すなわち動き強度、および動き強度の空間分布を求めたものである。図５（Ｄ）の個々のブロックに付された動きベクトルは、そのブロックを構成している映像信号が、１つ前のフレーム画像内でどこに位置していたかを、１つ前のフレーム画像からの移動量としてベクトル表示したものである。よって、図中では、カット先頭のフレームには動きベクトルは与えられていない。動き強度、および動き強度の空間分布は、それぞれのブロックに付された動きベクトルについて、ベクトルの大きさを求めた上で（図５（Ａ））、それらのカット全体（動き強度、図５（Ｂ））、もしくはそれぞれの空間位置（動き強度の空間分布、図５（Ｃ））における平均値を計算することで得られる。この他、標準偏差値を用いて動きの強度及びその空間分布を表すこともある。
【００５０】
なお、図５（Ａ）〜（Ｄ）では、動きベクトルを求めるブロックと動き強度の空間分布を求めた際の分割数が同じ（２×２の４つ）になっているが、これらが同じである必要はなく、複数ブロックをまとめて１つの空間位置とし、動き強度の空間分布を求めてもよい。例えば、４×４の１６個のブロックに区切られた映像に対して、２×２の４個ずつを組にし、２×２の４つの分割位置を設定して動き強度の空間分布が求められる。
【００５１】
映像データがＭＰＥＧのようなフレーム間予測符号化方式で符号化された圧縮符号化データである場合では、上記の動きに関する特徴量は、符号化データに含まれる動きベクトル情報を用いて直接計算することができる。一方、符号化された映像データ１０９から色信号に関する特徴量を求めるには、一旦映像を復号した上で特徴量を計算することが必要なこともある。この他、信号成分の急激に変化している箇所を捉える「エッジの分布」なども、映像データ１０９から間接に得られる特徴量にあたる。
【００５２】
範囲指定部２０１の処理について、図６（Ａ）と（Ｂ）〜図９（Ａ）〜（Ｃ）を用いて説明する。図６（Ａ）と（Ｂ）では矢印で示す時間の経過方向にカットの映像データが連なっている場合にカットの映像データ中の斜線部分は実効範囲３を示している。図７では矢印で示す時間の経過方向にカットの映像データが連なっている場合にカットの映像データ中の斜線部分は実効範囲３を示している。
【００５３】
カットの特徴量を計算する際、カットに含まれている映像データ全体から特徴量を算出する（図６（Ａ））。あるいは、対象データの量を減らし計算時間を短縮するために、カットに含まれている全体の映像データを適宜間引き、間引いた後の映像データを使って特徴量を算出することができる。例えば、図６（Ｂ）に示すように、数フレームおきにフレーム画像データを抜き出し、抜き出したフレーム画像データを用いて特徴量を計算する。また、画面の一部分、例えば図７に示すように、カットに含まれている映像データのうち画面の中央部分にあたる映像データのみを用いて特徴量を計算することもできる。一般に画面中央により重要な被写体が映っていることが多いことから、こうして得られた特徴量は被写体を特定する指標として効果的に働く。
【００５４】
ただし、図６（Ａ）と（Ｂ）及び図７を用いて説明した例は、カットに含まれる映像データの特徴が時間的に変化しないことが前提となっている。一方、カットは編集のためにユーザが任意に切出したものであるから、例えば、予め映像に含まれているショットのうち、複数の特徴の異なったショットが１つのカットに含まれて切出される、といったことが起こり得る。このように、カットに含まれる映像データは時間的に一様なデータとして用いることが適当でないことを考慮して、本発明では、カットに含まれる映像データ全体ではなく、その一部のデータを用いて、特徴量を計算することとする。
【００５５】
範囲指定部２０１は、カットに含まれる映像データ全体において特徴量の計算に用いるデータの範囲を指定する。この範囲が、本発明で言う「実効範囲」である。実効範囲３は、以下で説明する、「Ａ．どの時間範囲を選ぶか」と「Ｂ．ショットの有無を考慮するか否か」の２点から適切なものを選び、予め設定する。もしくはユーザの指示によって適宜設定を変えるようにしてもよい。
【００５６】
「Ａ．どの時間範囲を選ぶか」
付加情報計算部２０２がカット全体の映像データではなく、カット内の時間的に一部の映像データを用いて特徴量を計算すると設定されていた場合には、範囲指定部２０１は、その一部の映像データにあたる映像データの実効範囲３の長さと位置を指定する。
【００５７】
実効範囲３の長さは、例えばカットの長さの半分、３分の１といった長さが指定でき、その時のカット自体の長さは、カットの位置情報であるイン点、アウト点の位置情報１１０から求められる。あるいは、映像に含まれるショットの平均的な長さを考慮して、適当な固定の長さを設定してもよい。
【００５８】
実効範囲３の位置は、例えばカットの中央、即ちカットの中央を基準に前後に均等に延ばした指定長さ分、カット先頭から末端方向に指定長さ分、カット末端から先頭方向に指定長さ分といった指定ができ、中央位置、先頭、末端位置はイン点、アウト点の位置情報１１０から得られる。
【００５９】
図８（Ａ）〜（Ｃ）では矢印で示す時間の経過方向にカットの映像データが連なっている場合にカットの映像データ中の斜線部分は実効範囲３を示している。図８（Ａ）は中央位置で長さをカットの半分とした例、図８（Ｂ）は先頭位置から長さをカットの半分とした例である。図８（Ａ）の例は、各々のカットが比較的短く、ばらつきがないような場合に適している。一方、図８（Ｂ）の例は、各々のカットが比較的長い場合に適したものである。カットが比較的長い場合、カット前半の映像の方がより印象に強く残るために、このような処理が、特徴量からカットを特定する上で有効となる。またこれらのことから、実効範囲３を決める際に、カットの長さを見て、カットが基準長さより短い場合には図８（Ａ）に示す中央位置による方式に、またカットが基準長さより長い場合には図８（Ｂ）に示す先頭位置からの方式に、自動的に切替えるといった構成をとることもできる。
【００６０】
また、図８（Ｃ）に示したように、カット開始直後の数フレームを間引いた後で、間引きフレーム直後を先頭にしたカット内の時間的な一部、例えばカットの半分または３分の１にあたる映像データを抜き出し特徴量の計算に用いることもある。これは特に、カット開始点がシーンチェンジ検出によって得られたものであったような場合に、シーンチェンジ直後の画像は安定していない画像であることが多いことから、画像が安定するまでの分のマージンを取っておくものである。
【００６１】
「Ｂ．ショットを考慮するか否か」
図９（Ａ）〜（Ｃ）では矢印で示す時間の経過方向にカットの映像データが連なっている場合にカットの映像データ中の斜線部分は実効範囲３を示している。
【００６２】
従来例で述べたように、元の映像はシーンまたはショットを内部に含んでおり、カット指定部１０１で任意に指定されたカットが複数のシーンまたはショットを含むことも当然あり得る。そして、カットが複数のショットを含んでいるような場合に、含まれるそれぞれのショットで性質が異なる（特徴量が異なる）と、カット全体で算出された特徴量が意味をなさなくなる場合がある。そこで、カットを切出した時点で、切出されたカット内に複数のショットが含まれるか否かを調べ、含まれた場合には、カット内の複数のショットから代表とする１つ（または幾つか）のショットを選択する、といった付加処理の機能を範囲指定部２０１が備えてもよい。その場合、付加情報計算部２０２では、図９（Ａ）に示すように、そのカットに対応する特徴量を、選択された代表ショットから求めるものとする。
【００６３】
この代表ショット選択の処理は実際には、シーンチェンジ検出と特徴量の計算処理とを組合せることで構成される。例えば、各々のショットに対応して特徴量を概算し、概算した特徴量の値別に対応するショットの数（ショットの出現頻度）をカウントする。そして、最も出現頻度の高い特徴量を持ったショットのうち、最も時間的に早くに出現するショットをカット内の代表ショットとする。
【００６４】
あるいは、この代表ショットの選択処理を、シーンチェンジ検出と共に厳密に行うのでなく、カット内に含まれるショットの長さとして適当な値を予め決めて、カットをその長さで分割することにより疑似的に複数のショットを形成し、それから上記と同様の代表ショットの選択処理を行うようにしてもよい。
【００６５】
上記「Ｂ．ショットを考慮するか否か」で記載した処理を行った上で、選択された代表ショットに対して、上記「Ａ．どの時間範囲を選ぶか」による範囲の制限を更に加えるとしてもよい。例えば、図９（Ｂ）は、代表ショットを選んだ上で、その代表ショットの前半分の映像データに実効範囲３を限定し、特徴量を計算する例を示している。また、選択された代表ショットに対して、図６（Ｂ）または図７のような間引きなどの処理を組合せて特徴量を計算することも可能である。即ち、図９（Ｃ）に示すように、選んだ代表ショットからフレームを間引いて抽出し、抽出したフレームから特徴量を求めてもよい。
【００６６】
また、特殊なケースとして、カットの先頭フレーム（もしくは先頭フレームから予め定めた所定枚数後のフレーム）のデータから特徴量を求め、それをそのカットに対応する特徴量としてもよい。
【００６７】
付加情報計算部２０２は、範囲指定部２０１で指定された実効範囲３に含まれる映像データを用いて、上記で説明した特徴量を計算する。その上、付加情報計算部２０２では更に、得られた特徴量のそれぞれを、検索情報として扱い易い形に変換する。この、検索情報として扱い易い形に変換された情報を、ここでは付加情報１１２と呼んでいる。具体的には、上記特徴量の数値を扱い易いように少数のレベルに量子化したり、特徴量の分布パターンに対応して特定の記号を割り付けたりする。それら量子化値や割り付けられた記号が付加情報１１２にあたる。
【００６８】
ここで言う付加情報１１２とは、元の映像データ１０９に対して、その映像データ１０９の属性を表し、映像データ１０９を管理するための「データのためのデータ」であり、俗に「メタデータ」と呼ばれるものである。以下、付加情報１１２とメタデータとは同じ意味で用いる。この付加情報１１２即ちメタデータは、カット各々を一意に識別したり、カットどうしの類似度を計ったりするのに用いられる。
【００６９】
なお、上記の説明では、カットの特徴量とカットの付加情報１１２即ちメタデータとは別のものとして記載しているが、必ずしも別とは限らない。カットの映像データから計算される特徴量を直接にメタデータとすることも無論可能である。つまり、カットを構成する映像データから直接にメタデータを求めることも可能である。
【００７０】
得られた付加情報１１２は保持部１０２に入力され、カット指定部１０１で得られたカット位置情報１１０と共に管理されて、カット編集部１０３で行う編集時の表示制御に用いられる。また、後述するフォーマット部１０６へ送られて所定の形式に格納される。
【００７１】
カット編集部１０３は、編集を実行するためのＧＵＩ１０８を有する。ユーザは、アイコンやサムネールなどにより画面上に表示されたカットを、ＧＵＩ１０８を通して指定し編集する。例えば、画面表示された複数のカット（カットのサムネール）のうちから適当なカットを幾つか選び、選んだカットを順番を指定して連結する。ＧＵＩ１０８は入力部１８と表示部２０に対応する。
【００７２】
図１０は、カット編集部１０３の内部構成を示した機能ブロック図である。カット編集部１０３は、編集対象となるカットを画面上に表示するカット表示部１００１、表示されたカットを選択し連結順を決めるなど、編集操作を行うカット操作部１００２、およびそれらをユーザによって制御するためのＧＵＩ１０８を備える。
【００７３】
カット表示部１００１は、保持部１０２から得られるカット位置情報１１０とカット指定部１０１から得られる映像データ１０９とから、カットのサムネール画像（例えばカットの先頭フレーム画像）を生成し、画面上に表示する。またこの時、以下で説明するように、カット表示部１００１は、ユーザから入力された指示に従い、保持部１０２から得られるカット位置情報１１０、もしくはカットに対応する付加情報１１２に基づいて、例えばカットを時間順に、もしくは類似順に表示することを決め、決めた順番に従いカットを並び替えて表示する。
【００７４】
カット操作部１００２は、ＧＵＩ１０８を介したユーザの指示を受付けて、受けた指示に基づき、カット表示部１００１により表示された複数のカットから適宜必要なカットを選択し、カットの挿入、削除、入替などの操作を行って編集する（連結する）カットとそれらの連結順とを決定する。
【００７５】
図１１は、そのようにして映像を編集する際の表示画面、即ちカット編集部１０３を構成するＧＵＩ１０８の例である。窓１１０１にはカット指定部１０１で切出されたカットそれぞれがサムネールとして表示され、窓１１０２には既に選択されたカットのサムネールが並べられて表示されている。窓１１０２のサムネールは、それらのサムネールと対応するカットを左から右の順に連結して編集することを意味している。
【００７６】
ユーザは、窓１１０１から必要なカット（カットのサムネール）を選び、それを窓１１０２内に表示されたサムネール間の所望の位置にカーソルＣＲを操作してドラッグアンドドロップする（図１１はドロップする直前での表示画面例）ことで、編集されるカットの連結順を指定する。また、窓１１０２内でカット（カットのサムネール）の順をドラッグアンドドロップで入れ替えたり、また不要なカット（カットのサムネール）をドラッグして窓１１０２の外にドロップすることで削除したりもできる。こうして編集（連結）するカットが全て指定されたら、プレビューボタン１１０３を押して窓１１０４で再生される映像を確認し、良ければ決定ボタン１１０５を押す。決定された編集映像は窓１１０６に登録される。
【００７７】
窓１１０６に編集映像が登録されると、編集完了部１０４が、その編集結果を、最終的に出力、保存される形式に整える。例えば、再生位置および再生順をリスト形式で表したプレイリストを生成し、出力する。または、各カットの映像データを実際に切出し、それぞれを繋げて１つの新規の映像データとして出力する。この際、映像データを繋げた時に齟齬が無いように、編集に付随して加工を加えてもよい。例えば、圧縮符号化データの編集時における再符号化処理などがその加工処理にあたる。前述のプレイリスト形式で出力を行う編集は非破壊編集と呼ばれる。それに対して、実際に編集して新規の映像データを生成する編集は破壊編集と呼ばれる。本発明の映像編集装置は、編集が非破壊編集であるか、破壊編集であるかを問わず、適応できるものである。
【００７８】
この時、カット編集部１０３（の内部構成であるカット表示部１００１）は、保持部１０２に保持されたカットの位置情報１１０およびカットに対応する付加情報１１２を用いて、画面に表示するカットを制御する。カット位置情報１１０はカット指定部１０１で生成されたもの、カットの付加情報１１２は付加情報生成部１０５で生成されたものである。
【００７９】
付加情報生成部１０５で生成されたカットの付加情報１１２、例えば、カット映像内での代表色を付加情報１１２とした場合に、特定の色を指定し、同じ代表色を持ったカットのみを選択して画面に表示する。また、カットに含まれる映像の色構成比を付加情報１１２として用いた場合に、あるカットを指定し、そのカットと色構成比が類似したカットを選んで優先的に画面に表示する。また、色の分布や動きの強度分布を付加情報１１２として用いた場合では、あるカットを指定し、そのカットとそれらの分布が類似したカットを選んで優先的に画面に表示する。
【００８０】
図１１の例では、類似順ボタン１１０７ならびに時間順ボタン１１０８によって、窓１１０１に表示されるカット（カットのサムネール）の表示順を入れ替える。始めに、時間順に表示された窓１１０１内のカットに対して、ユーザが入力部１８を介してカーソルＣＲの操作により基準のカットを１つ選び、類似順ボタン１１０７を押す。すると、カット表示部１００１は、その選択されたカットに対応する付加情報１１２（色構成比、色分布、動き強度分布など）とその他のカットに付された付加情報１１２とを用いて、基準として選択されたカットとその他のカットとの類似度を計算する。そして、基準のカットとの類似度の高い順にカットを並べ替えて窓１１０１内に再表示する。また、基準のカットを選び、時間順ボタン１１０８を押すと、カット表示部１００１は、カット位置情報１１０に従って、選択された基準カットと時間的に近いカットから時間順に並べて窓１１０１内に表示し直す。
【００８１】
このような付加情報１１２を利用した制御を行うことで、所望のカットを検索し見つけることがより容易になり、編集時の効率を向上させることができる。なお、上記は付加情報１１２による制御の一例であり、付加情報１１２を用いて行うことができる表示制御の態様、および利用可能な付加情報の種類はこれに限るものではない。
【００８２】
また、本発明の映像編集装置では、付加情報生成部１０５で生成した付加情報１１２を出力して記録し、他の機器でも利用可能とする。その際、カット指定部１０１で出力されたカット位置情報１１０も同様に出力して記録する。このため、それらの情報が他の機器で利用が容易になるように、フォーマット部１０６で所定のフォーマットに変換した上で付加情報１１４として出力する。
【００８３】
フォーマット部１０６は、付加情報生成部１０５から出力されたカット個々に対応する付加情報１１２と、カット指定部１０１で得られたカット個々に対応する位置情報１１０とをまとめて、映像のメタデータに適した所定のフォーマットに変換した上で付加情報１１４として出力する。
【００８４】
例えば、コンテンツ記述メタデータの国際規格であるＭＰＥＧ−７では、全体から部分（シーン、ショットまたはカット）へと分岐される映像の階層的な構造をＸＭＬ（eXtensible Markup Language）言語で表したメタデータフォーマットが規定されている。更にＭＰＥＧ−７では、上記のような特徴量から形成される種々のメタデータをメタデータフォーマットに格納する機能を有している。従って、フォーマット部１０６は、例えばＭＰＥＧ−７のメタデータフォーマットを所定のフォーマットとして、付加情報１１２および位置情報１１０それぞれを所定のフォーマットに格納する。無論、ＭＰＥＧ−７のメタデータフォーマット以外にも、既存のメタデータフォーマット、例えば要素名とそのメタデータ値を対として記録したテーブル型のフォーマットなどを所定のフォーマットとすることもできる。
【００８５】
（記録の形態について）
上述のようにフォーマット部１０６から出力された所定のフォーマットに従う映像の付加情報１１４、即ちメタデータは、特に記録部を通して媒体に記録される。図１２（Ａ）〜（Ｄ）は、本発明の付加情報生成装置および映像編集装置でメタデータを記録する先の記録媒体について説明するための図である。
【００８６】
本発明では、映像の付加情報生成装置ならびに該装置を備えた映像編集装置として、ＨＤＤ８などの内蔵型のディスク媒体、もしくはＤＶＤ１０などの着脱可能型のディスク媒体を備えた映像記録再生装置を想定している。そこで、生成されたメタデータ（付加情報１１４）は、対応する映像データ１０９と共にこれらディスク媒体上に記録することが可能である（図１２（Ａ））。ここで言う映像データ１０９は、メタデータを生成する対象とした映像データ、即ち編集前の入力映像の映像データ１０９である。無論、編集後の映像の映像データと、対応するメタデータとを記録することも可能である。その場合には、編集後の映像に対応するメタデータを生成する。この編集後の映像に対応するメタデータは、編集後の映像の映像データから改めて求めてもよいが、既に生成されている入力映像のメタデータを用いれば、更に容易に形成することができる。
【００８７】
また、生成されたメタデータは、対応する映像データ１０９と同じくディスク媒体上に記録されるが、映像データ１０９の記録領域とは異なる管理領域にまとめて記録されることも可能である（図１２（Ｂ））。その際、記録領域に記録された映像データへの参照情報をメタデータと共に管理領域に記録するか、あるいは管理領域に記録されたメタデータへの参照情報を映像データと共に記録領域に記録し、映像データと対応するメタデータとを関連付けて管理する。あるいはその両方の参照情報を備えて、相互に関連付けて管理することもできる。図１２（Ａ）と（Ｂ）のディスク媒体のＤＶＤ１０は装置１の本体に、すなわちＤＶＤ制御装置１２に着脱自在に装着されてもよい。
【００８８】
また、装置１の本体がＨＤＤ８およびＤＶＤ１０などのディスク媒体以外のメモリ、たとえばＲＡＭ６を備えて、メタデータはこのＲＡＭ６に記録されることも可能である（図１２（Ｃ））。また、それらディスク媒体、およびメモリが装置１の本体から着脱可能であってもよい（図１２（Ｄ））。その際、メモリには、メタデータと共に、ディスク媒体への参照情報（ディスクの固有ＩＤなど）及びそのディスク媒体上の映像データへの参照情報を記録する。これにより、ディスク媒体とメモリのいずれか一方あるいは双方が装置１から分離された場合でも、再び装置１に双方を装着するか、または他の装置に双方を装着した時に、映像データと対応するメタデータとを関連付けて管理することができる。あるいは、ディスク媒体に、映像データと共に、メタデータが記録されたメモリへの参照情報（メモリの固有ＩＤなど）及びメモリ上のメタデータへの参照情報を記録するとしてもよい。無論、その両方の参照情報を互いに備えて、相互に関連付けて管理することもできる。参照情報には、上記したメディアに対するＩＤ情報の他、例えば、ネットワーク上のリソースの位置情報（ＵＲＬ（Uniform Resource Locator））等が挙げられる。
【００８９】
フォーマット部１０６で形成されたメタデータ（付加情報１１４）は、ＭＰＥＧ−７などの汎用なフォーマットに従うので、これら媒体に記録したり、外部装置に転送して外部装置で利用するといったことが容易となる。この外部装置への転送は通信デバイス１４および通信ネットワーク１６を用いたデータ通信の形態であってもく、またはこれら着脱自在の記録媒体を介して外部装置に供給するという形態であってもよい。
【００９０】
また図示しないが、映像データ１０９はディスク媒体でなく、装置１の本体内に用意された内蔵型もしくは着脱可能な大容量の半導体メモリ上に記録されるような場合でも、同様に図１２（Ａ）〜（Ｃ）のようにして映像データ１０９およびメタデータ（付加情報１１４）を記録することができる。例えば半導体メモリ上に映像データを格納するディレクトリと管理情報を格納するディレクトリとが用意されて、映像データ１０９は映像データの格納ディレクトリに、メタデータ（付加情報１１４）は管理情報の格納ディレクトリに格納される、といった構成があり得る。その半導体メモリは装置１に対して着脱可能であってもよい。
【００９１】
（付加情報の生成手順について）
次に、本発明の第１の実施形態に係る映像編集時に行う付加情報生成方法について、図１３と図１４を用いて説明する。更に、該付加情報生成方法を備えた、本発明の第１の実施形態に係る映像編集方法について、図１５を用いて説明する。図１３〜図１５のフローチャートは予めプログラムとしてＨＤＤ８またはＲＯＭ４などに格納されて、入力部１８からのユーザの指示により映像編集モードに移行すると、ＣＰＵ２はＨＤＤ８またはＲＯＭ４からこれらプログラムを読出してＲＡＭ６の所定領域に展開する。以降は、ＣＰＵ２がＲＡＭ６のこれらプログラムを読出し実行することで付加情報の生成および映像編集が実行される。図１３〜図１５の処理ステップは図１に示した各部により実現される機能を示している。
【００９２】
図１３と図１４はいずれも、本発明の第１の実施形態に係る付加情報生成方法でメタデータを生成する際の処理を示しており、いずれも、上記した所定のフォーマットにメタデータを変換して出力するまでの手順を示す。
【００９３】
ここで、映像に対応したメタデータを生成する方法は、大きく分けて、映像データ１０９を入力して入力した映像データ１０９が示す映像全体からカットを切出すステップ（ステップＳ（以下、単にＳと略す）１０、Ｓ１１およびＳ１２、Ｓ２０、Ｓ２１およびＳ２２）と、切出された各々のカットに対して、実効範囲３を決定し、実効範囲３内の映像データ１０９を基にカットの付加情報即ちメタデータを算出するステップ（Ｓ１３およびＳ１４、Ｓ２４およびＳ２５）と、カット個々のメタデータを所定のフォーマットに変換して付加情報１１４として出力するステップ（Ｓ１６とＳ１７、Ｓ２６とＳ２７）とから各々なっている。そして、図１３と図１４に示された付加情報生成方法は、メタデータを算出するタイミングのみが若干異なる。
【００９４】
図１３の方法では、カットの各々が切出された時点（Ｓ１２で個々のカットが決定された時点）で、即座に実効範囲３を決定し（Ｓ１３）、切出されたカットに対応するメタデータが算出され（Ｓ１４）、これを必要なカット全てについて行った後（Ｓ１５で切出し処理が終了と判定された時点）で、所定のフォーマットに変換する（Ｓ１６）。一方、図１４の方法では、映像から必要なカットを先に全て切出し、全てのカットが切出された後（Ｓ２３で切出し処理が終了と判定された時点）で、切出したそれぞれのカットについて実効範囲３を決定し（Ｓ２４）、カットそれぞれに対応するメタデータを算出し（Ｓ２５）、所定のフォーマットに変換する（Ｓ２６）。
【００９５】
図１５は、本発明の第１の実施形態に係る映像編集方法で映像を編集する際の処理を示したフローチャートである。図１５のステップのうち、カットに対応したメタデータを生成するステップ（Ｓ３０とＳ３１）には、図１３のステップＳ１０〜Ｓ１５、もしくは図１４のステップＳ２０〜Ｓ２５による入力映像データ１０９についてカットを切出し切出した各カットに対応したメタデータを生成するまでの手順がそのまま代入される。
【００９６】
その後、切出したカットを、指定された順番に従い画面に表示する（Ｓ３２）。これらの表示されたカットは、表示順の変更が指示された場合に（Ｓ３３でＮＯ）、新たに指定された順番に従って表示し直される（Ｓ３２）。
【００９７】
表示された複数のカットからユーザが入力する指示に基づき適宜必要なカットを選択し、画面上で選択したカットの挿入、削除、入替などの操作を行う（Ｓ３４）。そして、編集するカットおよび連結順が決定したら、編集を完了し（Ｓ３５でＹＥＳ）、その編集結果を最終的に出力する形式、例えばプレイリスト形式に加工して（Ｓ３６）、出力する（Ｓ３７）。
【００９８】
本発明に係る付加情報生成方法および該付加情報生成方法を有した映像編集方法では、メタデータの算出に用いる映像データ１０９の実効範囲３を特別な指示無く行えるものとし、カットに対応するメタデータの生成を、カットの切出し処理と同期（カットそれぞれの切出しと同期（図１３）、もしくは映像内のカットの切出し完了と同期（図１４））させた。このことから、本発明に係る付加情報生成方法では、メタデータ生成のための余分なトリガを必要とせず、ユーザに特に意識させずにメタデータの生成を行うことができる。
【００９９】
なお、上記第１の実施形態では、カット指定部１０１で行うカットの切出し処理を、映像内のカット点（イン点、アウト点）を指定してカットを特定する処理として記載したが、これに限らず、実際にカットの映像データを切出す処理、例えば、切出されたカットそれぞれを別々のファイルに分割して保存する、といった形態をとることもできる。分割して保存されたファイルは、カット指定部１０１から出力される映像データ１０９にあたる。この場合、特徴量即ちメタデータを算出するために使用する映像データは、それぞれのファイルに保存された映像データとなり、この保存された個々のファイルの映像データに基づいて実効範囲３の選択やサムネール画像の表示、編集を行うことになるが、付加情報１１２の生成処理全体としての処理は、上記で説明したものと変わらない。以下特に明記しないが、このカット毎に映像データを別ファイルにして切出すといったカット処理を、第１の実施形態以外の実施形態にも同様に適用することが可能である。無論、第１の実施形態以外の実施形態に適用したとしても、同様に全体の処理は変わらない。
【０１００】
また、以上で説明した映像信号から直接または間接に得られるメタデータ以外に、切出されたカットに含まれる音声もしくは音響信号から得られるメタデータを、カットに対応するメタデータとして生成するとしてもよい。
【０１０１】
また、図９（Ａ）と（Ｂ）に示したカット内の代表ショットを実効範囲３として利用する別の例として、既に各々のショットはテキスト形式でのメタデータが付されている映像を有して、このような映像データ１０９が入力された場合には、カットを切出した時点でそのカットに含まれるショットを特定し、そのショットに付されたテキストをコピーもしくは加工して、カットに対応するメタデータとして利用するとしてもよい。
【０１０２】
本発明の付加情報生成装置および方法、ならびに付加情報を用いた映像編集装置および方法の最も主要なポイントは、カット編集のために映像からカットを切出した際に、カットに含まれるデータ（映像データ、音声データ、テキストデータ）の一部（実効範囲３）を用いて、切出されたカットに対応するメタデータを自動抽出できるとした点、ならびに、それを所定のフォーマットに変換する点にある。
【０１０３】
（第２の実施の形態）
次に、本発明の第２の実施形態に係る付加情報生成装置、ならびに映像編集装置について、図１６、図１７および図１８（Ａ）〜（Ｄ）を用いて説明する。図１６は、第２の実施形態に係る付加情報生成装置ならびに映像編集装置の機能ブロック図である。図１６の装置と図１の装置とを比較して異なる点は、図１６の装置は図１のカット指定部１０１と付加情報生成部１０５に代替してカット指定部２１０１と付加情報生成部２１０５を備える点にある。図１６の装置の他の構成は図１のそれと同じである。
【０１０４】
カット指定部２１０１は入力部１８と表示部２０に対応するものであり、入力する映像データ１０９についてＧＵＩ１０７をユーザが操作して指定したカットの位置情報２１１０を付加情報生成部２１０５に出力する。
【０１０５】
図１７の付加情報生成部２１０５は図２の付加情報生成部１０５の範囲指定部２０１に代替して範囲指定部２２０１を備えるが、他の構成は図２のそれと同じである。範囲指定部２２０１は与えられるカット位置情報２１１０に基づき実効範囲３を図１８（Ａ）〜（Ｄ）のように指定する。図１８（Ａ）〜（Ｄ）では矢印で示す時間の経過方向にカットの映像データが連なっている場合にカットの映像データ中の斜線部分は実効範囲３を示している。
【０１０６】
第２の実施形態に係る付加情報生成装置ならびに映像編集装置の概略構成は、第１の実施形態とほぼ同様であるが、カットの指定に対応してメタデータを生成する際の、処理を実行するタイミングが異なる。そのため、範囲指定部２２０１の機能は、第１の実施形態のそれとは若干異なる。
【０１０７】
第１の実施形態に係る付加情報生成では、カットの開始位置（イン点）および終了位置（アウト点）が指定され、カットが確定された時点で、イン点、アウト点の位置情報１１０から適切な実効範囲３を指定し、メタデータの生成を行うとした。これに対し、第２の実施形態に係る付加情報生成では、カット指定部２１０１においてカットの開始位置（イン点）が指定された段階で、カット点（イン点のみ）の位置情報２１１０が付加情報生成部２１０５に出力されて、範囲指定部２２０１は入力した位置情報２１１０を基に実効範囲３を指定し、映像データ１０９からメタデータを生成する。
【０１０８】
付加情報生成部２１０５の範囲指定部２２０１は、カット指定部２１０１で指定されたイン点の位置情報２１１０を受け取ると、受けた位置情報２１１０に基づきイン点から始まる予め決められた長さ分の実効範囲３を指定する（図１８（Ａ））。付加情報計算部２０２は、その実効範囲３に含まれる映像データを用いて付加情報の生成を行い、それをその指定されたイン点から始まるカットに対応した付加情報１１２として出力する。そして、フォーマット部１０６は、第１の実施形態と同様に、得られた付加情報１１２とカットの位置情報２１１０とを、映像に対応するメタデータとして所定のフォーマットに変換して付加情報１１４として出力する。（この時点ではイン点と共にアウト点も指定されており、同じくフォーマットに格納される。）
このように、第２の実施形態では、実効範囲３のための所定の長さを予め定めておき、予め定めた所定長さ分の映像データに基づいてメタデータを算出する。このことで、終了位置（アウト点）の指定を待ってその位置に基づいた映像データの実効範囲３を決め、決めた実行範囲３の映像データからメタデータを算出する、という第１の実施形態の処理を省略できる。その結果、より簡単な処理でカットに対応したメタデータを生成できる。
【０１０９】
なお、ここで言う所定の長さは、平均的なカットの長さもしくは平均的なショットの長さと同等か、もしくはそれらに比較して十分に短いものとし、かつ、カット映像の特徴を求めるのに十分な長さである。
【０１１０】
また、指定されたカット点（イン点）を先頭とした実効範囲３の映像データを用いる以外に、カット点から数フレーム後に位置するフレーム画像を先頭とした所定長さ分の映像データを基に算出したり（図１８（Ｂ））、フレームを間引いた上での所定長さ分の、もしくは所定のフレーム枚数分の映像データを基に算出したり（図１８（Ｃ））、といったことも可能である。カット点から先頭の数フレームを間引く処理は、カット開始点がシーンチェンジ検出によって得られたものである場合に、シーンチェンジ直後から画像が安定するまでのマージンを取っておく効果がある。また中間のフレームを適宜間引くのは計算量を削減する効果をもたらす。
【０１１１】
その他、画面の一部分、例えば画面の中央部分の映像データを用いるなど、第１の実施形態で図６（Ａ）と（Ｂ）、図７を用いて説明したのと同様の処理が、第２の実施形態においても適用可能である。
【０１１２】
更に、第１の実施形態で図９（Ａ）〜（Ｃ）を用いて説明したのと同様に、シーンチェンジ検出と組合せたメタデータ生成を行うことも可能である。ただし、本実施形態の場合には、カットの終了位置（アウト点）は指定されないので、検出されるシーンチェンジ点はカットに含まれるものとの制限はなく、カット開始位置（イン点）の後方にある最も近いシーンチェンジ点、もしくは続く数個のシーンチェンジ点を検出することとなる。
【０１１３】
例えば、指定されたカット点（イン点）から最初に検出されるシーンチェンジ点までで構成されるショット、即ち、カットに含まれる最初のショットの映像データに基づいて、当該カットのメタデータを生成する。その際、カット点（イン点）からシーンチェンジ点までの間隔を調べ、その間隔が所定の長さを超えた場合に、メタデータ生成に用いる映像データを、カット点を先頭とした所定長さ分の映像データに制限するとしてもよい。また、この間隔が所定の長さを満たさない場合には、メタデータ生成に用いる映像データを、検出されたシーンチェンジ点を先頭とした第２のショット（最初のシーンチェンジ点と次のシーンチェンジ点とで挟まれた、カットに含まれる２番目のショット）の映像データ、もしくは検出されたシーンチェンジ点を先頭とした所定長さ分の映像データに切り替える（図１８（Ｄ））、といった処理を付加することも可能である。更に、１つめと２つめのシーンチェンジ点の間隔が所定の長さを満たさなければ２つめのシーンチェンジ点を先頭としたものに切り替える、２つめと３つめのシーンチェンジ点の間隔が所定の長さを満たさなければ３つめのシーンチェンジ点を先頭としたものに切り替える、といった処理を繰り返してもよい。
【０１１４】
また、特殊なケースとして、カット点（イン点）が指定された時、そのカット点のフレーム（もしくはそのカット点のフレームから所定枚数後のフレーム）のデータから特徴量を求めて、それを指定されたカット点のフレームから始まるカットに対応するメタデータとしてもよい。
【０１１５】
（第３の実施の形態）
次に、本発明の第３の実施形態に係る付加情報生成装置、ならびに映像編集装置について、図１９、図２０、図２１、図２２（Ａ）〜（Ｄ）、を用いて説明する。
【０１１６】
本発明の第３の実施形態に係る付加情報生成装置ならびに映像編集装置は、図１と図２に類似の図１９と図２０に示す機能構成を有する。ただし、第３の実施形態を第１および第２の実施形態と比較すると、付加情報を計算するのに用いる映像データ１０９の実効範囲３の指定方法が異なる。そのため、図１９と図２０では図１のカット指定部１０１および図２の範囲指定部２０１の機能とは若干異なる機能を有するカット指定部３１０１と範囲指定部３２０１を有する。
【０１１７】
本実施形態におけるカット指定部３１０１は、第１および第２の実施形態で説明したのと同様の処理を行って映像のカット点（イン点、アウト点）を指定し、カットの切出しを行う機能に加えて、カット内の任意の位置（これを、キーポイントという）を指定する機能を有する。カット指定部３１０１から出力される情報３１１０は、カット位置情報１１０とキーポイントの情報３１１１とを含み、付加情報生成部３１０５内の範囲指定部３２０１に入力される。
【０１１８】
第１および第２の実施形態では、注目すべき実効範囲３はカット内の予め設定された位置、例えばカットの前半分といった範囲に設定された。これに対し、第３の実施形態では、指定されたキーポイントを利用し、キーポイントが指定された場合に、そのキーポイントに重点を置いて実効範囲３を決定し付加情報を計算するように、付加情報を計算するための範囲を修正する。また、キーポイントの指定が行われなかった場合には、第１および第２の実施形態の付加情報生成装置ならびに映像編集装置と同じ動作を行う。
【０１１９】
図２１はそのようにしてなされるカット処理時の表示画面、即ち本実施形態におけるカット指定部３１０１を構成するＧＵＩ３１０７の例である。図２１のＧＵＩ３１０７は窓１７０１と１７０５、シークバー１７０２、ボタン群１７０３、決定ボタン１７０４、キーポイントボタン１７０６および取消ボタン１７０７を含む。
【０１２０】
ＧＵＩ３１０７は図３に示した第１の実施形態におけるカット処理時の表示画面の例と比べ、プレビューボタン３０６が無く、代りにキーポイントボタン１７０６が備わっている。またこれに伴い、シークバー１７０２にキーポイントを表示する機能が追加されている。その他の構成は同一である。無論、プレビューボタン、キーポイントボタンいずれも備える構成とすることも可能である。
【０１２１】
図３での説明と同様に、窓１７０１で再生されている映像に対し、巻き戻し、早送り、一時停止などの操作を、ボタン群１７０３を用いて行い、適当なカットの開始位置を決めたら、決定ボタン１７０４を押してカットの開始位置（イン点）を指定する。この時、シークバー１７０２上のイン点の表示がその位置に固定される。更に再生し、適当な終了位置を決めたら再度決定ボタン１７０４を押してカットの終了位置（アウト点）を指定する。この時、シークバー１７０２上のアウト点の表示がその位置に固定される。更に決定ボタン１７０４を押すことで切出されるカットが決定され、決定されたカットは窓１７０５に表示される。
【０１２２】
この、イン点を指定してからアウト点を指定するまでの間、およびカットの最終決定の前（３度目の決定ボタン１７０４を押す前）に、再生中もしくは一時停止中にユーザがキーポイントボタン１７０６を押すと、そのときの映像データ１０９中の再生位置または一時停止位置がキーポイントとして登録される。そしてキーポイント位置がシークバー１７０２上に表示される。ただし、指定できるキーポイントは選択中のカットの範囲内に限られ、キーポイントの指定がアウト点の指定より前に行われた場合、アウト点が指定された時点で、そのカットの範囲外（アウト点より後ろ）にある指定済のキーポイントは除外されることになる。そして、カットの最終決定（３度目の決定ボタン１７０４を押す動作）が行われた後、以下で説明するメタデータの生成処理などを行う。無論、この最終決定の以前であれば、取消ボタン１７０７を押して再度始めからカット点およびキーポイントを指定し直すことができる。
【０１２３】
キーポイントが指定された場合の範囲の指定方法について、図２２（Ａ）〜（Ｄ）を用いて説明する。図２２（Ａ）〜（Ｄ）では矢印で示す時間の経過方向にカットの映像データが連なっている場合にカットの映像データ中の斜線部分は実効範囲３を示している。
【０１２４】
第１の実施形態において図８（Ａ）〜（Ｃ）を用いて説明したように、付加情報１１２を計算するための映像データ１０９の実効範囲３は、その範囲の長さと位置との組合せで指定される。このうち、キーポイントの指定によって変わるのは、実効範囲３の位置である。実効範囲３の長さについては、第１の実施形態で図８と共に説明したように別途決められる。図２２（Ａ）〜（Ｄ）の例では、実効範囲３の長さはカット全体の長さの半分としているが、これに限らない。
【０１２５】
図２２（Ａ）は、キーポイントが指定された場合に、キーポイントを先頭とした所定長さ（この例ではカット全体の半分）を実効範囲３とする例を示している。図２２（Ｂ）は、キーポイントが指定された場合に、キーポイントを中心として前後に延ばした所定長さ分の範囲を実効範囲３に指定する例である。
【０１２６】
図２２（Ａ）と（Ｂ）の例は、指定されたキーポイントが１つの場合である。一方、図２２（Ｃ）は、キーポイントが３つ指定された場合を表しており、図２２（Ｃ）では、指定されたそれぞれのキーポイントについて、キーポイントを中心として前後に範囲を延ばし、その範囲長さの合計が予め決めた所定の長さになるように実効範囲３を指定した例である。この場合、キーポイントの数は３つであるため、それぞれのキーポイントの範囲は所定長さ（この例ではカット全体の半分）を３等分したものとなっている。無論、キーポイントの数はこれに限らず、幾つでもよい。また、上記のようにして範囲を指定していった時、キーポイントどうしの位置が近く、延ばした範囲どうしが重なってしまうような場合には、その分を重ならない方に延ばし、合計で所定の長さになるように調整して実効範囲３を指定する。
【０１２７】
また、カットの先頭位置は常に重要であるとみなして、カットの先頭部分は必ず実効範囲３に含めるものとした上で、キーポイントが指定された場合には、カットの先頭部分とキーポイントで指定される箇所とを合せて実効範囲３とすることもできる。図２２（Ｄ）にはその例が示される。カット先頭からの範囲と、キーポイントを中心とした範囲との合計が所定の長さになるように実効範囲３を指定している。図２２（Ｄ）の場合、それぞれの範囲は所定長さ（この例ではカット全体の半分）の半分になっている。
【０１２８】
また、キーポイントの数を制限し、制限を越える数のキーポイントが指定された時点で、最も過去に指定されたキーポイントを削除し、制限以下にキーポイント数を抑えるようにすることもできる。例えば、キーポイントの制限数が１個の場合、新たなキーポイントを指定する度にその前に指定されていたキーポイントが削除され、結果、最後に指定したキーポイントに基づいて実効範囲３が指定される。
【０１２９】
なお、本実施形態に係る付加情報生成装置および方法、映像編集装置および方法における主要なポイントは、カット指定部３１０１でユーザが指定するキーポイントによって付加情報を生成するために用いる映像データ１０９の実効範囲３を変更できることであり、これによって、よりユーザにとって望ましいメタデータを生成可能とした点にある。生成されるメタデータは、既に第１および第２の実施形態で説明したいずれの種別のメタデータであっても適用可能である。
【０１３０】
（第４の実施の形態）
次に第４の実施の形態について説明する。
【０１３１】
以上説明した処理機能は、プログラムで実現される。本実施の形態では、このプログラムは図２３の構成を有するコンピュータで読取可能な記録媒体に格納される。
【０１３２】
本実施の形態では、この記録媒体として、図２３に示されている装置１で処理が行なわれるために必要なメモリ、たとえばＲＯＭ４のようなそのものがプログラムメディアであってもよいし、また外部記憶装置として図示のない磁気テープ装置およびＣＤ−ＲＯＭ装置などのプログラム読取装置が設けられ、そこに記憶媒体である磁気テープまたはＣＤ−ＲＯＭが挿入されることで読取可能なプログラムメディアであってもよい。いずれの場合においても、格納されているプログラムはＣＰＵ２がアクセスして実行させる構成であってもよいし、あるいはいずれの場合もプログラムが一旦読出されて、読出されたプログラムは、図２３の装置１の所定のプログラム記憶エリア、たとえばＲＡＭ６のプログラム記憶エリアにロードされて、ＣＰＵ２により読出されて実行される方式であってもよい。このロード用のプログラムは、予め当該装置１に格納されているものとする。
【０１３３】
ここで、上述したプログラムメディアは装置１本体と分離可能に構成される記録媒体であり、磁気テープやカセットテープなどのテープ系、フレキシブルディスクやＨＤＤ８などの磁気ディスクやＣＤ−ＲＯＭ／ＭＯ（Magnetic  Optical  Disc）／ＭＤ（Mini  Disc）／ＤＶＤ１０などの光ディスクのディスク系、ＩＣカード（メモリカードを含む）／光カードなどのカード系、あるいはマスクＲＯＭ、ＥＰＲＯＭ（Erasable  and  Programmable  ＲＯＭ）、ＥＥＰＲＯＭ(Electrically  ＥＰＲＯＭ)、フラッシュＲＯＭなどによる半導体メモリを含めた固定的にプログラムを担持する媒体であってもよい。
【０１３４】
また、本実施の形態においては、装置１は通信ネットワーク１６と通信デバイス１４を介して接続可能な構成が採用されているから、通信ネットワーク１６からプログラムがダウンロードされて流動的にプログラムを担持する媒体であってもよい。なお、このように通信ネットワーク１６からプログラムがダウンロードされる場合には、ダウンロード用プログラムは予め当該装置１本体に格納しておくか、あるいは別の記録媒体から予め当該装置１本体にインストールされるものであってもよい。
【０１３５】
なお記録媒体に格納されている内容としてはプログラムに限定されず、データであってもよい。
【０１３６】
今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
【図面の簡単な説明】
【０１３７】
【図１】第１の実施形態に係る付加情報生成装置ならびに映像編集装置の概略構成を示した機能ブロック図である。
【図２】図１中、付加情報情報生成部の内部構成を示した機能ブロック図である。
【図３】第１の実施形態におけるカット指定部によるカット切出し時の画面表示の例を示した図である。
【図４】（Ａ）〜（Ｃ）は特徴量として色構成比、および代表色を求める際の求め方を説明した図である。
【図５】（Ａ）〜（Ｄ）は特徴量として動き強度、および動き強度の空間分布を求める際の求め方を説明した図である。
【図６】（Ａ）と（Ｂ）は第１の実施形態においてカットから付加情報を生成する際に用いるデータの範囲を説明した図である。
【図７】第１の実施形態においてカットから付加情報を計算する際に用いるデータの範囲を説明した別の図である。
【図８】（Ａ）〜（Ｃ）は第１の実施形態においてカットから付加情報を計算する際に用いるデータの範囲を説明した更に別の図である。
【図９】（Ａ）〜（Ｃ）は第１の実施形態においてカットから付加情報を計算する際に用いるデータの範囲を説明した更に別の図である。
【図１０】図１中、カット編集部の内部構成を示した機能ブロック図である。
【図１１】第１の実施形態におけるカット編集部による編集時の画面表示の例を示した図である。
【図１２】（Ａ）〜（Ｄ）は付加情報が記録される記録媒体および記録位置を説明した図である。
【図１３】第１の実施形態に係る付加情報生成方法を説明するフローチャートである。
【図１４】第１の実施形態に係る付加情報生成方法を説明する別のフローチャートである。
【図１５】第１の実施形態に係る映像編集方法を説明するフローチャートである。
【図１６】第２の実施形態に係る付加情報生成装置ならびに映像編集装置の概略構成を示した機能ブロック図である。
【図１７】図１６中、付加情報情報生成部の内部構成を示した機能ブロック図である。
【図１８】（Ａ）〜（Ｄ）は第２の実施形態においてカットから付加情報を計算する際に用いるデータの範囲を説明した図である。
【図１９】第３の実施の形態に係る付加情報生成装置ならびに映像編集装置の概略構成を示した機能ブロック図である。
【図２０】図１９中、付加情報情報生成部の内部構成を示した機能ブロック図である。
【図２１】第３の実施形態におけるカット指定部によるカット切出し時の画面表示の例を示した図である。
【図２２】（Ａ）〜（Ｄ）は第３の実施形態においてカットから付加情報を計算する際に用いるデータの範囲を説明した図である。
【図２３】第１〜第４の実施の形態に係る装置のハードウェア構成図である。
【図２４】従来技術による映像編集装置の概略構成を示した機能ブロック図である。
【符号の説明】
【０１３８】
１０１，１９０１，２１０１，３１０１  カット指定部、１０２，１９０２  保持部、１０３，１９０３  カット編集部、１０４，１９０４  編集完了部、１０５，２１０５，３１０５  付加情報生成部、１０６  フォーマット部、２０１，２２０１，３２０１  範囲指定部、２０２  付加情報計算部、１００１  カット表示部、１００２  カット操作部。
【図１】
2006025248.tif 000003
【図２】
2006025248.tif 000004
【図３】
2006025248.tif 000005
【図４】
2006025248.tif 000006
【図５】
2006025248.tif 000007
【図６】
2006025248.tif 000008
【図７】
2006025248.tif 000009
【図８】
2006025248.tif 000010
【図９】
2006025248.tif 000011
【図１０】
2006025248.tif 000012
【図１１】
2006025248.tif 000013
【図１２】
2006025248.tif 000014
【図１３】
2006025248.tif 000015
【図１４】
2006025248.tif 000016
【図１５】
2006025248.tif 000017
【図１６】
2006025248.tif 000018
【図１７】
2006025248.tif 000019
【図１８】
2006025248.tif 000020
【図１９】
2006025248.tif 000021
【図２０】
2006025248.tif 000022
【図２１】
2006025248.tif 000023
【図２２】
2006025248.tif 000024
【図２３】
2006025248.tif 000025
【図２４】
2006025248.tif 000026