(57)【要約】【課題】映像から任意の着目シーンを切り出してメタデータを作成する作業を支援する装置を提供する。【解決手段】記録者のキーまたはボタン操作を受け付け、着目シーンごとにその開始時点及び終了時点を識別する入力部１２と、開始時点及び終了時点と作業開始時刻との差分に基づいて、着目シーンごとの開示時刻及び終了時刻を求め、時刻系列情報を生成する時刻発生部１３と、時刻系列情報に基づいてメタデータを作成するメタデータ変換部２０と、を設ける。【選択図】      図１
2006067343.tif 000002
【特許請求の範囲】
【請求項１】
映像から任意の着目シーンを切り出して該着目シーンに対応するメタデータを作成するメタデータ作成方法であって、
記録者のキーまたはボタン操作を受け付けて作業開始時刻を定めるステップと、
前記記録者のキーまたはボタン操作を受け付けて着目シーンごとにその開始時点及び終了時点を識別するステップと、
前記開始時点及び終了時点と前記作業開始時刻との差分に基づいて、着目シーンごとの開示時刻及び終了時刻を求め、時刻系列情報を生成するステップと、
前記時刻系列情報に基づいてメタデータを作成するステップと、
を有する、メタデータ作成方法。
【請求項２】
映像から任意の着目シーンを切り出して該着目シーンに対応するメタデータを作成するメタデータ作成方法であって、
記録者のキーまたはボタン操作を受け付けて作業開始時刻を定めるステップと、
前記記録者のキーまたはボタン操作を受け付けて着目シーンごとのその操作時点を識別するステップと、
前記操作時点と前記作業開始時刻との差分に基づいて、着目シーンごとに、前記操作時点より所定の開始算出用時間だけ早い開示時刻と、該開示時刻から所定の継続時間後の終了時刻とを求め、時刻系列情報を生成するステップと、
前記時刻系列情報に基づいてメタデータを作成するステップと、
を有する、メタデータ作成方法。
【請求項３】
前記キーまたはボタン操作に用いられたキーまたはボタンを識別して、対象とする着目シーンに対応するイベントの種類を判別するステップと、
イベントの種類ごとに予め定められた前記開始算出用時間と前記継続時間とを格納するデータベースを検索して、判別されたイベント種類に対応する前記開始算出用時間と前記継続時間とを取得するステップと、
をさらに有し、
取得された開始算出用時間と継続時間とに基づいて前記開始時刻及び前記終了時刻を求めるととともに、前記判別されたイベント種類に対応するタグ情報を前記時刻系列情報に含ませる、請求項２に記載のメタデータ作成方法。
【請求項４】
映像から任意の着目シーンを切り出して該着目シーンに対応するメタデータを作成するメタデータ作成装置であって、
記録者のキーまたはボタン操作を受け付け、着目シーンごとにその開始時点及び終了時点を識別する入力部と、
前記開始時点及び終了時点と作業開始時刻との差分に基づいて、着目シーンごとの開示時刻及び終了時刻を求め、時刻系列情報を生成する時刻発生部と、
前記時刻系列情報に基づいてメタデータを作成するメタデータ変換部と、
を有する、メタデータ作成装置。
【請求項５】
映像から任意の着目シーンを切り出して該着目シーンに対応するメタデータを作成するメタデータ作成装置であって、
記録者のキーまたはボタン操作を受け付けて着目シーンごとのその操作時点を識別する入力部と、
前記操作時点と作業開始時刻との差分に基づいて、着目シーンごとに、前記操作時点より所定の開始算出用時間だけ早い開示時刻と、該開示時刻から所定の継続時間後の終了時刻とを求め、時刻系列情報を生成する時刻発生部と、
前記時刻系列情報に基づいてメタデータを作成するメタデータ変換部と、
を有する、メタデータ作成装置。
【請求項６】
イベントの種類ごとに予め定められた前記開始算出用時間と前記継続時間とを格納するデータベースと、
データタグ付け部と、
をさらに有し、
前記入力部は、前記キーまたはボタン操作に用いられたキーまたはボタンを識別して、対象とする着目シーンに対応するイベントの種類を判別し、
前記時刻発生部は、前記データベースを検索して、判別されたイベント種類に対応する前記開始算出用時間と前記継続時間とを取得し、取得された開始算出用時間と継続時間とに基づいて前記開始時刻及び前記終了時刻を求め、
前記データタグ付け部は、前記判別されたイベント種類に対応するタグ情報を前記時刻系列情報に含ませる、請求項５に記載のメタデータ作成装置。
【請求項７】
前記作業開始時刻は、前記記録者のキーまたはボタン操作に基づいて前記入力部によって定められる、請求項４乃至６のいずれか１項に記載のメタデータ作成装置。
【請求項８】
前記キーまたはボタン操作は、ネットワークを介して前記入力部に受け付けられる、請求項４乃至７のいずれか１項に記載のメタデータ作成装置。
【請求項９】
コンピュータに、
記録者のキーまたはボタン操作を受け付けて作業開始時刻を定める処理と、
前記記録者のキーまたはボタン操作を受け付けて、映像に含まれる着目シーンごとにその開始時点及び終了時点を識別する処理と、
前記開始時点及び終了時点と前記作業開始時刻との差分に基づいて、シーンごとの開示時刻及び終了時刻を求め、時刻系列情報を生成する処理と、
前記時刻系列情報に基づいて、前記着目シーンに対応したメタデータを作成する処理と、
を実行させるプログラム。
【請求項１０】
コンピュータに、
記録者のキーまたはボタン操作を受け付けて作業開始時刻を定める処理と、
前記記録者のキーまたはボタン操作を受け付けて、映像に含まれる着目シーンごとのその操作時点を識別する処理と、
前記操作時点と前記作業開始時刻との差分に基づいて、シーンごとに、前記操作時点より所定の開始算出用時間だけ早い開示時刻と、該開示時刻から所定の継続時間後の終了時刻とを求め、時刻系列情報を生成する処理と、
前記時刻系列情報に基づいて、前記着目シーンに対応したメタデータを作成する処理と、
を実行させるプログラム。
【請求項１１】
コンピュータに、
記録者のキーまたはボタン操作を受け付けて作業開始時刻を定める処理と、
前記記録者のキーまたはボタン操作を受け付けて、映像に含まれる着目シーンごとのその操作時点を識別するとともに、当該キーまたはボタン操作に用いられたキーまたはボタンを識別して、対象とする着目シーンに対応するイベントの種類を判別する処理と、
イベントの種類ごとに予め定められた前記開始算出用時間と前記継続時間とを格納するデータベースを検索して、判別されたイベント種類に対応する前記開始算出用時間と前記継続時間とを取得するステップと、
前記操作時点と前記作業開始時刻との差分に基づいて、着目シーンごとに、前記操作時点より前記取得された開始算出用時間だけ早い開示時刻と、該開示時刻から前記取得された継続時間後の終了時刻とを求め、前記判別されたイベント種類に対応するタグ情報を含ませて時刻系列情報を生成する処理と、
前記時刻系列情報に基づいて、前記着目シーンに対応したメタデータを作成する処理と、
を実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、任意の映像からその映像中の各イベントに関する情報のメタデータを作成するメタデータ作成装置に関し、特に、映像中の任意の着目シーンをタグ付けすることによって、瞬時に検索可能とするために有効なメタデータを作成するメタデータ作成方法及び装置に関する。
【背景技術】
【０００２】
ライブ映像あるいはビデオ録画（ＶＴＲ）映像からダイジェスト版のビデオコンテンツやスポーツ公式戦記録映像を作成したり、ビデオ録画映像中から着目シーン（例えば、サッカーのビデオ映像でのゴールシーン、野球のビデオ映像でのホームランやダブルプレー、三振のシーン）を検索してその着目シーンを表示させるためには、あらかじめ、映像においてどの部分が着目シーンであるかを判別してその着目シーンの開始時刻及び終了時刻を識別し、さらに各着目シーンに対してタグ（そのシーンが何のシーンであるかを示す情報）付けしておく必要がある。そのような作業を一般にアノテーション作業と呼ぶ。一連の映像中のどの部分が着目シーンであるかが判別されるとともに、各着目シーンへのタグ付けが終われば、単なるダイジェスト版のビデオコンテンツを作成する場合であれば、オリジナルの映像から着目シーンを取り出して順番に接続するだけで、そのビデオコンテンツが完成する。さらに、ダイジェスト版のビデオコンテンツであっても、省略をしないで１試合をまるまる収録したビデオコンテンツであっても、着目シーンへのタグ付けを行うことで、他のデータ、例えばスポーツの場合の公式記録と組み合わせることにより、前半○分のＡ選手によるゴールシーンとか、後半○分のＣＫ（コーナーキック）のシーンを即座に検索してそのシーンをビデオ再生することが可能になる。
【０００３】
しかしながら、現状では、映像データを与えてそこから着目シーンを自動的に抽出することは難しい。例えば、サッカーの場合、ゴールシーンなのか、反則のためにノーゴールとなっているシーンなのかを機械だけで判断することは困難である。そこで、従来は、映像に対するアノーテーション作業は、その過半を人の手作業で行っているのが現状である（非特許文献１）。具体的には、図１０に示すように従来は、対象となるＶＴＲ映像やライブ映像を再生しながらその映像を視聴している記録者が着目シーンを見つけ出し、あるいは、ライブ映像（例えば、スポーツ試合の現場）をＶＴＲなどで撮影しながらその現場にいる記録者が着目シーンとなるべきシーンを判別し、映像表示開始からのその着目シーンの開始時刻、終了時刻を測定し（ライブでの測定の場合であればライブ撮影の開始時点からの相対的な時間あるいは絶対的な時刻で各着目シーンの開始時刻、終了時刻を測定し）、また何のシーンであるかなどの情報とともに、測定したそれらの時刻を例えば紙に手書きで記録している。そして、メタデータを例えばＸＭＬ(eXtensible Markup Language)で記述するために、各着目シーンについて、開始時刻や終了時刻、何のシーンであるかの情報（タグ）を手入力でパーソナルコンピュータ（ＰＣ）に入力している。
【非特許文献１】山本  大介、“半自動ビデオアノテーションとそれに基づく意味的ビデオ検索に関する研究（名古屋大学工学部電気電子・情報工学科卒業論文）”、[Online]、2003年2月、名古屋大学大学院情報科学研究科メディア科学専攻長尾研究室、［2004年3月2日検索］、インターネット〈ＵＲＬ：http://www.nagao.nuie.nagoya-u.ac.jp/papers/yamamoto_sotsuron03.xml〉あるいは〈ＵＲＬ：http://www.nagao.nuie.nagoya-u.ac.jp/papers/pdfs/yamamoto_sotsuron03.pdf〉
【発明の開示】
【発明が解決しようとする課題】
【０００４】
したがって、従来の方法では、映像中からどこが着目シーンであるかを判別して開始及び終了の時刻指定を行いさらにタグ付けを行ってメタデータを作成するための一連の作業に対して多大な手作業を必要とし、特に、メタデータ作成対象の映像が多数あるときや、映像中の着目シーンの数が多い場合には、メタデータ作成のために膨大な時間を要する、という問題点がある。
【０００５】
本発明の目的は、任意の映像における着目シーンの時刻指定や着目シーンに対するタグ付けを容易にすることで、その映像に対するメタデータ作成を支援するメタデータ作成方法及び装置を提供することにある。
【課題を解決するための手段】
【０００６】
本発明の第１のメタデータ作成方法は、映像から任意の着目シーンを切り出して着目シーンに対応するメタデータを作成するメタデータ作成方法であって、記録者のキーまたはボタン操作を受け付けて作業開始時刻を定めるステップと、記録者のキーまたはボタン操作を受け付けて着目シーンごとにその開始時点及び終了時点を識別するステップと、開始時点及び終了時点と作業開始時刻との差分に基づいて、着目シーンごとの開示時刻及び終了時刻を求め、時刻系列情報を生成するステップと、時刻系列情報に基づいてメタデータを作成するステップと、を有する。
【０００７】
本発明の第２のメタデータ作成方法は、映像から任意の着目シーンを切り出して着目シーンに対応するメタデータを作成するメタデータ作成方法であって、記録者のキーまたはボタン操作を受け付けて作業開始時刻を定めるステップと、記録者のキーまたはボタン操作を受け付けて着目シーンごとのその操作時点を識別するステップと、操作時点と作業開始時刻との差分に基づいて、着目シーンごとに、操作時点より所定の開始算出用時間だけ早い開示時刻と、開示時刻から所定の継続時間後の終了時刻とを求め、時刻系列情報を生成するステップと、時刻系列情報に基づいてメタデータを作成するステップと、を有する。さらに、キーまたはボタン操作に用いられたキーまたはボタンを識別して、対象とする着目シーンに対応するイベントの種類を判別するステップと、イベントの種類ごとに予め定められた開始算出用時間と継続時間とを格納するデータベースを検索して、判別されたイベント種類に対応する開始算出用時間と継続時間とを取得するステップと、を設け、取得された開始算出用時間と継続時間とに基づいて開始時刻及び終了時刻を求めるととともに、判別されたイベント種類に対応するタグ情報を時刻系列情報に含ませるようにしてもよい。
【０００８】
本発明の第１のメタデータ作成装置は、映像から任意の着目シーンを切り出して着目シーンに対応するメタデータを作成するメタデータ作成装置であって、記録者のキーまたはボタン操作を受け付け、着目シーンごとにその開始時点及び終了時点を識別する入力部と、開始時点及び終了時点と作業開始時刻との差分に基づいて、着目シーンごとの開示時刻及び終了時刻を求め、時刻系列情報を生成する時刻発生部と、時刻系列情報に基づいてメタデータを作成するメタデータ変換部と、を有する。
【０００９】
本発明の第２のメタデータ作成装置は、映像から任意の着目シーンを切り出して着目シーンに対応するメタデータを作成するメタデータ作成装置であって、記録者のキーまたはボタン操作を受け付けて着目シーンごとのその操作時点を識別する入力部と、操作時点と作業開始時刻との差分に基づいて、着目シーンごとに、操作時点より所定の開始算出用時間だけ早い開示時刻と、該開示時刻から所定の継続時間後の終了時刻とを求め、時刻系列情報を生成する時刻発生部と、時刻系列情報に基づいてメタデータを作成するメタデータ変換部と、を有する。さらに、イベントの種類ごとに予め定められた開始算出用時間と継続時間とを格納するデータベースと、データタグ付け部と、を有し、入力部が、キーまたはボタン操作に用いられたキーまたはボタンを識別して、対象とする着目シーンに対応するイベントの種類を判別し、時刻発生部が、データベースを検索して、判別されたイベント種類に対応する開始算出用時間と継続時間とを取得し、取得された開始算出用時間と継続時間とに基づいて開始時刻及び終了時刻を求め、データタグ付け部が、判別されたイベント種類に対応するタグ情報を時刻系列情報に含ませるようにしてもよい。
【発明の効果】
【００１０】
本発明によれば、メタデータ作成に関して、記録者のキー操作などによる入力時刻に対応して、複数の着目シーンのそれぞれに対して開始時刻、終了時刻をメタデータに容易に設定することが可能となる、という効果が得られる。
【００１１】
さらに、キー操作に用いられたキーやボタンを識別することによって、着目シーンに対応したイベントの種類を識別でき、自動的にタグ付けを行えるようになるという効果がある。例えば、スポーツ試合観戦時に、スポーツ公式戦記録用のデータタグ付けを行いながら、複数の着目シーンのそれぞれに対して開始時刻、終了時刻をメタデータに容易に設定することが可能となる。これにより、スポーツ公式戦記録用ビデオコンテンツや審判用ビデオコンテンツの作成を容易に行えるようになる。
【発明を実施するための最良の形態】
【００１２】
次に、本発明の好ましい実施の形態について、図面を参照して説明する。図１は本発明の実施の一形態のメタデータ作成装置の構成を示すブロック図である。
【００１３】
図１に示すメタデータ作成装置は、ＶＴＲ映像やライブ映像を視聴しているあるいはライブ撮影の現場にいてその撮影の対象となるスポーツ試合などを観戦している記録者からの入力を受け付け、時刻系列情報を生成する時刻系列生成部１０と、時刻系列情報を例えばＸＭＬで記述されたメタデータに変換するメタデータ変換部２０と、を備えている。時刻系列生成部１０には、現在時刻を常時出力する時計部１１と、キーボード３０などが接続する入力部１２と、入力部１２への入力に基づいてシーンの開始時刻と終了時刻を決定し、時刻系列情報を生成する時刻発生部１３と、を備えている。メタデータ変換部２０には、各タグ（セグメント）に対してセグメント情報を対応させてメタデータに変換する相対時間変換部２１が設けられている。
【００１４】
図２は、図１に示したメタデータ作成装置の動作原理を説明する図である。説明のため、キーボード３０には、少なくとも「０」、「１」、「２」のキーあるいはボタンが設けられているものとする。
【００１５】
キーボード３０から入力部１２に対して最初に「０」が入力されると、入力部１２は、時計部１１から現在時刻を読み出し、それを作業開始時刻（init_time）に設定する。その後、キーボード３０からのキー入力を順次受け付ける。ここでキー「１」が押下された場合には着目シーンの開始であると識別しその時の時刻を時計部１１から読み出して時刻発生部１３に通知し、キー「２」が押下された場合には着目シーンの終了であると識別しそのときの時刻を時計部１１から読み出して時刻発生部１３に通知する。時刻発生部１３は、入力部１２から通知された時刻とinit_time（作業開始時刻）と差分をとって、シーン開始時刻、シーン終了時刻とし、テキスト形式で時刻系列情報を生成する。記録者は、着目シーンごとに、そのシーンの開始時にはキー「１」を押下し終了時にキー「２」を押下する。そして、映像中の全ての着目シーンが終わり、着目シーンの抽出作業を終える場合には、キー「０」を押下する。その結果、時刻系列情報のテキストデータには、着目シーンごとに１行が割当てられ、各着目シーンの行には、そのシーンの開始時刻と終了時刻と連番で振られたタグ（タグ１、タグ２、…、タグｎ）とが記録されている。最後にキー「０」が押下された場合には、入力部１２はその旨を時刻発生部１３に通知し、時刻発生部１３は、時刻系列情報のテキストデータの末尾に「ｅｎｄ」だけを有する行を追加して、一連の時刻系列生成の処理を終了する。
【００１６】
メタデータ変換部２０では、相対時間変換部２１が、入力した時刻系列情報のテキストデータに基づき、各タグに対してセグメント情報等を対応させてメタデータに変換する。時刻系列生成部１０からの時刻系列情報は、あくまで、作業開始時刻init_time（最初に「０」が入力された時刻）からの相対的な時間で表されているものに過ぎず、本来の映像再生開始時からの時刻で表記されているわけではない。作業開始時刻init_timeは、記録者によって任意に決められてしまうものなので、本来その映像が備えている時間軸の原点（映像コンテンツとしての開始点）とはずれており、そのため、時刻系列生成部１０からの時刻系列情報での時刻を採用して映像中のシーンの検索を行った場合に、意図したシーンを検索できない可能性がある。そこで、相対時間変換部２１は、各シーンの開始時刻や終了時刻などを、作業開始時刻init_timeを基準としたものから、その映像の本来の開始時からの時間表記のものに変換する。ＸＭＬ形式によるメタデータは、例えば、セグメント開始時刻要素、セグメント終了時刻要素、セグメント継続時間要素、検索用メタデータ要素（イベントの種別）、各シーン（セグメント）ごとに一意に定められたセグメントＩＤなどを各要素を含んでいる。
【００１７】
図３は、時刻系列生成部１０での処理を示すフローチャートである。処理が開始すると、まず、キーボード３０においてキー「０」が押下されたかどうかを判定してキー「０」が押下されるまで待ち合わせ（ステップ１０１）、キー「０」が押下されたら、作業開始時刻init_timeに現在時刻を設定する（ステップ１０２）。次に、キー入力があるかどうかを待ち合わせ（ステップ１０３）、キー入力があった場合にはどのキー入力であるかを判別する（ステップ１０４）。キー「１」が入力した場合には、Ｔ＝現在時刻−init_timeを求めてこのＴをシーン開始時刻として、時刻系列情報のテキストデータにおける現在行の次の行の先頭に記録し（ステップ１０５）、ステップ１０３に戻る。キー「２」が入力した場合には、Ｔ＝現在時刻−init_timeを求めてこのＴをシーン終了時刻として、時刻系列情報のテキストデータにおける現在行に追加し、タグを付加し、その行を終りにし（ステップ１０６）、ステップ１０３に戻る。キー「０」が入力した場合には、時刻系列情報のテキストデータにおける現在行の次の行に「ｅｎｄ」を記録し、そのテキストデータのファイルをクローズして（ステップ１０７）、処理を終了する。「０」、「１」、「２」以外のキー入力があった場合には、そのキー入力を無視するものとして、ステップ１０３に戻る。
【００１８】
以上説明した処理では、着目シーンごとにその開始時点と終了時点とにおいて記録者はキー操作を行う必要があるが、それでは記録者にとってキー操作が煩雑に感じられるような場合もある。着目シーンの継続時間をほぼ一定としてよいような場合には、着目シーンごとに１回のキー操作で済ませるようなことも可能である。図４は、その場合の時刻系列発生部１０での処理を示している。
【００１９】
ここでは、予め２つの時間パラメータ（開始算出用時間Ｓ、継続時間Ｄ）を設定する。Ｓは、記録者によるキー入力があったときに、そのキー入力よりどれだけ前の時点をシーン開始時刻とするかを示すものであり、記録者によるボタン押下のタイミングが少し遅れることを想定したものである。Ｄは、着目シーンの継続時間を示している。
【００２０】
処理が開始すると、まず、キーボード３０においてキー「０」が押下されたかどうかを判定してキー「０」が押下されるまで待ち合わせ（ステップ１１１）、キー「０」が押下されたら、作業開始時刻init_timeに現在時刻を設定する（ステップ１１２）。次に、キー入力があるかどうかを待ち合わせ（ステップ１１３）、キー入力があった場合にはどのキー入力であるかを判別する（ステップ１１４）。キー「１」が入力した場合には、Ｔ１＝現在時刻−init_time−Ｓを求めてこのＴ１をシーン開始時刻とし、また、Ｔ２＝現在時刻−init_time＋Ｄを求めてこのＴ２をシーン終了時刻とし、時刻系列情報のテキストデータにおける現在行の次の行に、これらシーン開始時刻、シーン終了時刻及びタグを付加してその行を終りにし（ステップ１１５）、ステップ１０３に戻る。キー「０」が入力した場合には、時刻系列情報のテキストデータにおける現在行の次の行に「ｅｎｄ」を記録し、そのテキストデータのファイルをクローズして（ステップ１１６）、処理を終了する。「０」、「１」以外のキー入力があった場合には、そのキー入力を無視するものとして、ステップ１１３に戻る。
【００２１】
図５は、ボタン押下とシーン開始時刻、シーン終了時刻との関係を示す図である。
【００２２】
さらに本発明では、スポーツの試合の映像に対して、着目シーンの抽出とともに、各着目シーンがどのようなイベント（野球の場合ならホームランとか三振、サッカーの場合であればゴールとかフリーキック）に対応するかのタグ付けを同時に行うようにすることもできる。図６は、このようなメタデータ作成装置の構成を示すブロック図である。
【００２３】
図６に示すメタデータ作成装置は、図１に示したメタデータ作成装置と同様のものであるがさらに、データタグ付け部１５と、データベース１６とを備えている。このメタデータ作成装置においては、データタグ付け部１５は、キーボード３０のどのキーが押下されたかに応じて、どのようなイベントが発生したかを識別し、時刻系列情報のテキストデータに含まれる各シーンのタグに、イベントの種類を特定するための情報を付加する。また、イベントの種類に応じて、上述した継続時間Ｄの値を変化させることが好ましいので、データベース１６には、イベントの種類ごとに継続時間Ｄの値が格納されている。野球の場合、例えば、ホームランに対してはＤを３０秒程度に設定し、ダブルプレーに対してはＤを１０秒程度に設定すればよい。なお、イベントの種類に応じて、記録者がそのイベントが起きたと認識するために必要な時間が変化する可能性もあるので（例えば、サッカーのゴールシーンの場合、ゴールにボールが入る前の数秒間あるいは十数秒間にわたる一連のプレーも含めて着目シーンとしたいので）、Ｓについてもイベントの種類に応じて変化させるようにすることが好ましい。Ｓ，Ｄの値は、イベントの種類に応じて経験値に基づいて定められる。
【００２４】
このメタデータ作成装置を用いる場合、記録者は、キーボード３０のキーを押下する際に、イベントの種類に応じてキーを用いるものとする。例えば、野球の場合、キー「１」はホームラン、キー「２」は三振、キー「３」は盗塁、などのように割当てておく。サッカーの場合であれば、キー「１」をゴール、キー「２」をフリーキック（ＦＫ）、キー「３」をペナルティーキック（ＰＫ）、などのように割当てておけばよい。もちろん、どのキーにどのイベントを対応させるかは、予め定めておく必要がある。後述するように、ネットワークを介してキー入力を行う場合には、時刻系列生成部及びメタデータ作成部として機能するサイトに接続する際に、そのサイトから記録者に対してキーとイベントとの対応関係が指示されることになる。そして、ＶＴＲ映像やライブ撮影時において記録者は、イベントが起こるたびにそのイベントの種類を識別し、イベントの種類に応じたキーを押下する。その結果、入力部１２は、どのキーが押下されたかによってどの種類のイベントが発生したかを識別し、それに応じて時刻発生部１３はデータベース１６を検索してそのイベント種類に対応したＳ，Ｄの値を読み出し、読み出した値とキー入力があった時刻とに基づいて、上述と同様にして、イベント開始時刻、イベント終了時刻を決定する。そして、データタグ付け部１５は、識別したイベント種類に応じたタグ付けを行う。
【００２５】
図７は、時刻系列発生部１０におけるそのような処理を示すフローチャートである。処理が開始すると、まず、キーボード３０においてキー「０」が押下されたかどうかを判定してキー「０」が押下されるまで待ち合わせ（ステップ１２１）、キー「０」が押下されたら、作業開始時刻init_timeに現在時刻を設定する（ステップ１２２）。次に、キー入力があるかどうかを待ち合わせ（ステップ１２３）、キー入力があった場合にはどのキー入力であるかを判別する（ステップ１２４）。「０」以外のキー入力であった場合には、キーに応じてイベント種類を識別し（ステップ１２５）、データベース１６を検索してイベント種類に応じたパラメータＳ，Ｄを読み出し（ステップ１２６）、Ｔ１＝現在時刻−init_time−Ｓを求めてこのＴ１をシーン開始時刻とし、また、Ｔ２＝現在時刻−init_time−Ｓ＋Ｄを求めてこのＴ２をシーン終了時刻とし、時刻系列情報のテキストデータにおける現在行の次の行に、これらシーン開始時刻、シーン終了時刻及びタグを付加してその行を終りにし（ステップ１２７）、ステップ１０３に戻る。この際、タグには、イベント種類に対応した情報が含まれるようにする。一方、キー「０」が入力した場合には、時刻系列情報のテキストデータにおける現在行の次の行に「ｅｎｄ」を記録し、そのテキストデータのファイルをクローズして（ステップ１２８）、処理を終了する。
【００２６】
メタデータ変換部２０は、このようにして生成された時刻系列情報のテキストデータから、ＸＭＬによって記述されたメタデータを生成する。図８は、生成したメタデータの一例を示している。
【００２７】
このようにしてこの実施形態では、着目シーンを抽出してその開始時刻や終了時刻を決定すると同時に、イベント種類に応じたタグ付けを行うことができる。なお、１回のキー入力によってシーン開始時刻とシーン終了時刻の両方が定められるようになっているが、図３に示した処理のように、シーン開始時刻とシーン終了時刻とを陽にかつ別個に指定するようにしてもよい。
【００２８】
以上、本発明の好ましい実施形態を説明したが、本発明において、記録者が、着目シーンの開始及び終了時に入力を行い、あるいは着目シーンに対応したイベントの発生を認識してその旨を入力する際に用いられるものは、上述したキーボードに限られるものではない。キーボードの代わりに、例えば、テンキーを有する携帯電話機などを使用することも可能である。その場合は、携帯電話機から無線回線を介して入力部１２に入力がなされることになる。本発明において、記録者が行うキー操作あるいはボタン操作としては、機構部品としてのキースイッチあるいはボタンスイッチを指によって押下する操作だけでなくいわゆるソフトキーあるいはソフトボタンに対する操作、例えば、タッチパネル上に表示されているキーあるいはボタンを押す操作や、表示装置の画面上に表示されているキーあるいはボタンのアイコンをマウスでクリックするなどの操作も含まれる。
【００２９】
さらには、図９に示すように、インターネットなどのネットワーク４を介して時刻系列発生部１０に接続する端末５０をも入力のために用いることができる。端末５０としては、キーボードなどを備える一般的なパーソナルコンピュータを用いることができる。時刻系列発生部１０及びメタデータ作成部２０は、例えば、端末５０に対する映像配信機能を有する（あるいは有しない）サーバとして構成することができる。
【００３０】
以上説明したメタデータ作成装置は、それを実現するためのコンピュータプログラムを、パーソナルコンピュータなどのコンピュータに読み込ませ、そのプログラムを実行させることによっても実現できる。そのようなプログラムは、ＣＤ−ＲＯＭなどの記録媒体によって、あるいは、ネットワークを介して、コンピュータに読み込まれる。そのようなコンピュータは、一般に、ＣＰＵと、プログラムやデータを格納するためのハードディスク装置と、主メモリと、キーボードやマウスなどの入力装置と、液晶ディスプレイなどの表示装置と、ＣＤ−ＲＯＭ等の記録媒体を読み取る読み取り装置と、ネットワークとの接続に用いられる通信インタフェースとから構成されている。このコンピュータでは、上述したプログラムを格納した記録媒体を読み取り装置に装着して記録媒体からプログラムを読み出してハードディスク装置に格納し、あるいは、ネットワークを介してプログラムをハードディスク装置に格納し、その後、ハードディスク装置に格納されたプログラムをＣＰＵが実行することにより、上述した時刻系列発生部１０及びメタデータ作成部２０として機能することになる。
【図面の簡単な説明】
【００３１】
【図１】本発明の実施の一形態のメタデータ作成装置の構成を示すブロック図である。
【図２】図１に示す装置の動作原理を示す図である。
【図３】図１に示す装置における時刻系列生成部の処理を示すフローチャートである。
【図４】図１に示す装置における時刻系列生成部の処理の別の例をを示すフローチャートである。
【図５】ボタン押下とシーン開始時刻、シーン終了時刻との関係を示す図である。
【図６】本発明の別の実施形態のメタデータ作成装置の構成を示すブロック図である。
【図７】図５に示す装置における時刻系列生成部の処理を示すフローチャートである。
【図８】ＸＭＬによって記述されたメタデータの一例を示す図である。
【図９】本発明のさらに別の実施形態のメタデータ作成装置の構成を示すブロック図である。
【図１０】従来のメタデータ作成方法を説明する図である。
【符号の説明】
【００３２】
１０    時刻系列生成部
１１    時計部
１２    入力部
１３    時刻発生部
１５    データタグ付け部
１６    データベース
２０    メタデータ変換部
２１    相対時間変換部
３０    キーボード
４０    ネットワーク
５０    端末
【図１】
2006067343.tif 000003
【図２】
2006067343.tif 000004
【図３】
2006067343.tif 000005
【図４】
2006067343.tif 000006
【図５】
2006067343.tif 000007
【図６】
2006067343.tif 000008
【図７】
2006067343.tif 000009
【図８】
2006067343.tif 000010
【図９】
2006067343.tif 000011
【図１０】
2006067343.tif 000012