(57)【要約】【課題】ユーザが効率よく映像の特定カット点からの映像を抽出できるようにすることで、映像の内容を容易に確認出来るようにすること。【解決手段】本発明は、記録するオリジナル映像をそのオリジナル映像のカット点を基準に別々のファイルに分割した分割ファイルを生成し、この分割ファイルと共に分割ファイルを管理する管理情報をまとめたインデックスを、分割ファイルと関連つけて蓄積することで、インデックスからオリジナル映像に含まれる分割ファイルを認識でき、抽出できるようにしたものである。【選択図】　　　図１
2004080623.tif 000002
【特許請求の範囲】
【請求項１】
入力映像のシーンの変化点であるカット点を抽出するカット点検出手段と、検出した前記カット点を基準にして前記入力映像を複数に分割した分割ファイルを生成する映像ファイル分割手段と、前記分割ファイルを管理する管理情報をまとめたインデックスファイルを生成するインデックスファイル生成手段と、生成した前記分割ファイルと前記インデックスファイルを対応づけて蓄積するファイル蓄積手段と、を具備したことを特徴とする映像ファイル生成装置。
【請求項２】
前記管理情報は、前記分割ファイルの時間情報であることを特徴とする請求項１記載の映像ファイル生成装置。
【請求項３】
前記分割ファイルを１種類以上の方式で圧縮した１種類以上の圧縮ファイルを生成し、前記分割ファイルに関連付けて蓄積することを特徴とする請求項１または請求項２記載のファイル生成装置。
【請求項４】
入力映像のシーンの変化点であるカット点を抽出する工程と、検出した前記カット点を基準にして前記入力映像を複数に分割した分割ファイルを生成する工程と、前記分割ファイルを管理する管理情報をまとめたインデックスファイルを生成する工程と、生成した前記分割ファイルと前記インデックスファイルを対応づけて蓄積する工程と、を具備したことを特徴とする映像ファイル生成方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、シーンカット検出を用いて要約映像を生成する映像ファイル生成装置および映像ファイル生成方法に関する。
【０００２】
【従来の技術】
近年、コンピュータや蓄積メディアの性能や容量の向上やインターネット、ＤＶＤビデオ等の普及により、動画映像をコンピュータデータとして扱うことが非常に増加している。また、映像蓄積技術の進歩により、映像データも大きなものを扱うことが可能になってきている。これに伴って、大きな映像デ−タから所望する映像かどうかの確認をするために要約映像が用いられるようになっている。
【０００３】
以下、従来の映像ファイル生成装置について、図４を用いて説明する。
【０００４】
従来の映像ファイル生成装置４００は、映像入力部４０１からオリジナル映像を入力し、入力したオリジナル映像をオリジナル映像蓄積部４０２に蓄積する。
【０００５】
これと共に、カット点検出部４０３が、図５の５０１に示すように、オリジナル映像のシーンの変わり目であるシーン変化点（以下、カット点という）を検出する。
【０００６】
次に、要約映像蓄積部４０４が、図５の５０２に示すように、カット点検出部４０３が検出したカット点から登録時に設定された時間長の映像をオリジナル映像蓄積部４０２から取り出し蓄積する。
【０００７】
次に、要約映像生成部４０５が、要約映像蓄積部４０４に蓄積された登録時に設定された時間長の映像の先頭静止画映像を複数並べたマルチ画面を生成する。そして、要約映像出力部４０６が、要約映像生成部４０５が生成したマルチ画面を表示する。
【０００８】
【発明が解決しようとする課題】
しかしながら、従来のようにシーンのカット点検出によって要約映像を作成する場合、カット点を先頭に登録時に設定された時間長の映像を抽出して表示している。このため、あるカット点を用いた要約映像の終了点から次のカット点までの映像を参照する事が出来ないデッドゾ−ンが存在する。映像をカット点から抽出する時間長は、過去の経験に基づいた時間長の映像を抽出しているため、映像によっては、要約映像に映像の内容を示す情報が含まれない場合もある。つまり、要約映像から映像の内容を把握できない場合がある。
【０００９】
このため、従来の方法を用いて、映像の内容を詳細に確認する為には、要約映像として抽出されていない部分を参照することが必要になる。これには、実際に蓄積されたオリジナルの映像を確認する必要がある。
【００１０】
オリジナルの映像はひとつのファイルとして記録されていて、さらにカット点の位置が記憶されていないので、所望のカット点から映像を即座に、つまり容易に再生することができない。このため、映像の内容確認の為には、１つのファイルとして記録されたオリジナルの映像の先頭部分から読み出す必要があり、非常にレスポンスが悪いという問題がある。
【００１１】
また、ＤＶＤを用いて、映像を所望の用途に応じて分割したファイルで蓄積している場合があるが、分割位置がカット点に対応していないため、映像検索では有効に機能しない。
【００１２】
本発明は、かかる点に鑑みてなされたものであり、ユーザが効率よく映像の特定カット点からの映像を抽出できるようにすることで、映像の内容を容易に確認出来るようにすることを目的とする。
【００１３】
【課題を解決するための手段】
本発明は、オリジナル映像をそのオリジナル映像のカット点を基準に別々のファイルに分割した分割ファイルを生成し、この分割ファイルと共に、分割ファイルを管理する管理情報をまとめたインデックスファイルを、分割ファイルと関連づけて蓄積するようにしたものである。
【００１４】
これにより、インデックスファイルからオリジナル映像に含まれる分割ファイルを認識でき、抽出できる。この結果、オリジナル映像をカット点から快適かつ高速に再生させることができる。
【００１５】
【発明の実施の形態】
本発明の第１の態様にかかる映像ファイル生成装置は、入力映像のシーンの変化点であるカット点を抽出するカット点検出手段と、検出した前記カット点を基準にして前記入力映像を複数に分割した分割ファイルを生成する映像ファイル分割手段と、前記分割ファイルを管理する管理情報をまとめたインデックスファイルを生成するインデックスファイル生成手段と、生成した前記分割ファイルと前記インデックスファイルを対応づけて蓄積するファイル蓄積手段と、を具備した構成を採る。
【００１６】
これにより、インデックスファイルから入力映像に含まれる分割ファイルを認識でき、抽出できる。この結果、入力映像をカット点から快適かつ高速に再生させることができ、入力映像の内容を容易に確認できるようにできる。
【００１７】
本発明の第２の態様は、第１の態様にかかる映像ファイル生成装置において、前記管理情報は、前記分割ファイルの時間情報であることを特徴とする。
【００１８】
これにより、インデックスファイルを参照することで、分割ファイルの先頭の位置を認識でき、抽出できる。
【００１９】
本発明の第３の態様は、第１の態様または第２の態様にかかる映像ファイル生成装置において、前記分割ファイルを１種類以上の方式で圧縮した１種類以上の圧縮ファイルを生成し、前記分割ファイルに関連付けて蓄積する。
【００２０】
これにより、ネットワ−クの帯域状況によって、オリジナルの分割ファイルか、圧縮ファイルのいずれのファイルを使うか選択できる。この結果、ネットワーク負荷に対応することができるシステムを構築できる。
【００２１】
本発明の第４の態様は、入力映像のシーンの変化点であるカット点を抽出する工程と、検出した前記カット点を基準にして前記入力映像を複数に分割した分割ファイルを生成する工程と、前記分割ファイルを管理する管理情報をまとめたインデックスファイルを生成する工程と、生成した前記分割ファイルと前記インデックスファイルを対応づけて蓄積する工程と、を具備したことを特徴とする映像ファイル生成方法である。
【００２２】
以下、本発明の一実施の形態におけるシーン検出を用いた映像ファイル生成装置について図面を参照して説明する。
【００２３】
まず、上記実施の形態にかかる映像ファイル生成装置の構成について図１を用いて説明する。図１は、上記実施の形態おける映像ファイル生成装置のブロック図である。
【００２４】
本映像ファイル生成装置１００には、オリジナルの映像を入力する映像入力部１０１が設けられている。映像入力部１０１は、ＩＥＥＥ１３９４、ＵＳＢ、ＳＣＳＩ、ＳＤＩ等で構成される。
【００２５】
また、映像ファイル生成装置１００には、映像入力部１０１から入力された映像を蓄積するオリジナル映像蓄積部１０２が設けられている。オリジナル映像蓄積部１０２は、ＨＤＤ等の記録メディアであり、記録可能なファイル形式で一時的な記録を行う。
【００２６】
また、映像ファイル生成装置１００には、映像に関する時間情報であるタイムコ−ドを発生する手段であるタイムコード発生部１０４が設けられている。タイムコード発生部１０４は、オリジナル映像蓄積部１０２に蓄積した映像にタイムコードが付加されていない状態で蓄積されている場合に、蓄積した映像にタイムコード情報を付加する。
【００２７】
また、映像ファイル生成装置１００には、オリジナル映像蓄積部１０２に蓄積するオリジナル映像のシーンの変化点であるカット点を検出するカット点検出部１０３が設けられている。カット点検出部１０３のカット点検出方法は、特に限定しない。また、カット点検出部１０３は、タイムコード発生部１０４が発生するタイムコードを用いて、カット点のタイムコードデータを生成し、出力する。
【００２８】
また、映像ファイル生成装置１００には、ひとつのファイルで構成されるオリジナル映像をカット点で分割して、複数の分割ファイルを生成する映像ファイル分割・生成部１０５が設けられている。
【００２９】
また、映像ファイル生成装置１００には、映像ファイル分割・生成部１０５が生成した複数の分割ファイルを管理する管理情報をまとめたインデックスファイルを生成するインデックスファイル生成部１０６が設けられている。インデックスファイル生成部１０６は、インデックスファイルに、各分割ファイルの番号情報、各分割ファイルに関連する読み取り開始時間等の時間情報、および分割ファイル取材時や制作時のメタ情報等（キーワード）を記録する。
【００３０】
また、映像ファイル生成装置１００には、映像ファィル分割・生成部１０５が生成した分割ファイルとインデックスファイル生成部１０６が生成したインデックスファイルを対応づけて格納するファィル蓄積部１０７が設けられている。ファイル蓄積部１０７の使用する記録媒体は特に限定しないが、本実施の形態ではＨＤＤとＤＶＤ−ＲＡＭによりハイブリッド構成を採っている。
【００３１】
また、映像ファイル生成装置１００には、検索ツ−ルを使って所望する映像を特定する手段を備えたユ−ザ端末であるインターフェース部１１０が設けられている。
【００３２】
また、映像ファイル生成装置１００には、ファイル蓄積部１０７に蓄えられた分割ファイルから、インターフェース部１１０から入力されたキーワードに対応するメタ情報を持つ分割ファイルを抽出し、抽出した分割ファイルの先頭静止画映像を複数並べたマルチ画面を生成する要約映像生成部１０８が設けられている。そして、このマルチ画面の表示を見たユーザがインターフェース部１１０から所望の代表静止画を指示すると、指示された代表静止画に対応する分割ファイルを自動的に再生する。なお、分割ファイルの先頭静止画を並べた形態ではなく、分割ファイルを縮小表示した動画を並べたものを生成しても良い。
【００３３】
そして、映像ファイル生成装置１００には、要約映像生成部１０８が生成したマルチ画面を表示する要約映像出力部１０９が設けられている。
【００３４】
次に、上記実施の形態にかかる映像ファイルの分割・生成動作について図２を用いて説明する。図２は、上記実施の形態にかかる映像ファイル生成装置の分割ファイルおよびインデックスファイルの生成を説明するための図である。
【００３５】
映像ファイル分割・生成部１０５は、オリジナル映像蓄積部１０２に蓄積されたオリジナル映像２００を抽出する。次に、映像ファイル分割・生成部１０５は、オリジナル映像２００にカット点２１１〜２２０のタイムコードが付与されている場合はオリジナル映像から、オリジナル映像２００にカット点２１１〜２２０のタイムコードが付与されていない場合はカット点検出部１０３から、抽出したオリジナル映像２００のカット点２１１〜２２０のタイムコードデータを得る。
【００３６】
次に、映像ファイル分割・生成部１０５は、得たタイムコードデータを用いてカット点２１１〜２２０を区切りにオリジナル映像２００を複数の分割ファイル２０１〜２１０に分割する。
【００３７】
これに伴って、インデックスファイル生成部１０６が、オリジナル映像２００をどのような分割ファイル２０１〜２１０が含まれているか明確にするために、各分割ファイル２０１〜２１０の識別番号であるシーン検出番号、およびカット点２１１〜２２０のタイムコード等をまとめて記憶したインデックスファイル２２１を生成する。
【００３８】
そして、ファイル蓄積部１０７が、分割ファイル２０１〜２１０およびインデックスファイル２２１を対応づけて格納する。
【００３９】
これにより、ユーザは、インデックスファイル２２１を参照することで、オリジナル映像２００を構成する分割ファイル２０１〜２１０を認識でき、かつ分割ファイル２０１〜２１０に対応するタイムコードを認識できる。さらに、このタイムコードから分割ファイル２０１〜２１０の先頭の位置の時間情報を認識できる。この結果、分割ファイル２０１〜２１０の先頭の時間情報を用いて、分割ファイル２０１〜２１０の先頭から映像を抽出できる。この結果、ユーザは、分割された分割ファイル２０１〜２１０の先頭から任意の時間だけ再生でき、次々に分割ファイル２０１〜２１０を再生していくことで、オリジナル映像２００を明瞭にかつ素早く確認しながら再生することができる。
【００４０】
これに対して、従来の方式では、映像ファイルがカット点により分割された状態で格納されてなく、かつ各カット点の先頭位置に関する情報も格納されていないため、映像ファイルにどのようなカット点が含まれているか認識することができず、映像ファイルをカット点から抽出することができなかった。
【００４１】
さらに、上記実施の形態では、映像ファィル分割・生成部１０５が、オリジナル映像２００のカット点２１１〜２２０を先頭にしたファイル分割だけでなく、同時にオリジナル映像２００とは異なる方式で圧縮した圧縮映像を同時に生成結合するようになっている。
【００４２】
次に、映像ファイル分割・生成部１０５の圧縮映像生成方法について、図３を用いて説明する。図３は、上記実施の形態にかかる映像ファイル生成装置の圧縮映像生成動作を説明するための図である。
【００４３】
映像ファイル分割・生成部１０５は、オリジナルの分割ファイル２０１〜２１０を用いて、異なる方式を用いた圧縮ファイル３０４〜３０６を生成する。
【００４４】
本実施の形態では、圧縮ファイル３０４はＭＰＥＧ−２、圧縮ファイル３０５は、ＭＰＥＧ−１、そして圧縮ファイル３０６はＭＰＥＧ−４の圧縮を用いて生成している。
【００４５】
なお、圧縮ファイル３０４〜３０６の圧縮形式は、これに限定されないが、圧縮ファイル３０４〜３０６を異なる圧縮率や異なる使用形態に対応する圧縮方式を用いることが好ましい。また、圧縮ファイル３０４〜３０６の数もこの数に限定されない。
【００４６】
次に、映像ファイル分割・生成部１０５は、オリジナルの分割ファイル２０１〜２１０、および圧縮ファイル３０４〜３０６のそれぞれのファイル構成情報を格納するヘッダー部３０２を生成する。
【００４７】
そして、最終的に、映像ファイル分割・生成部１０５は、オリジナルの分割ファイル２０１〜２１０、圧縮ファイル３０４〜３０６、およびヘッダー部３０２を一つのファイルに結合構成した結合ファイル３０１を生成し、ファィル蓄積部１０７に送る。
【００４８】
ファィル蓄積部１０７は、結合ファイル３０１に含まれる、オリジナルの分割ファイル２０１〜２１０、圧縮ファイル３０４〜３０６、およびヘッダー部３０２を、オリジナル映像２００に連携するフォルダに一定のルールをもって記録する。例えばオリジナル映像２００のファイル名をディレクトリとしてつくり、そのディレクトリ内に、オリジナルの分割ファイル２０１〜２１０、圧縮ファイル３０４〜３０６、およびヘッダー部３０２を格納する。
【００４９】
そして、オリジナルの分割ファイル２０１〜２１０、圧縮ファイル３０４〜３０６、およびヘッダー部３０２の格納が終了すると、オリジナル映像蓄積部１０２のオリジナル映像は削除する。
【００５０】
このように、オリジナルの分割ファイル２０１〜２１０だけでなく、圧縮ファイル３０４〜３０６を生成し蓄積することで、ユーザが、インターフェース部１１０に至るネットワ−クの帯域状況によって、インターフェース部１１０からオリジナルの分割ファイル２０１〜２１０、圧縮ファイル３０４〜３０６のいずれのファイルを使うか選択できる。そして、選択した、オリジナルの分割ファイル２０１〜２１０、圧縮ファイル３０４〜３０６を用いた要約映像を生成し表示することも、特定のシーンの要約でなく全ての映像を参照する事もできる。
【００５１】
つまり、ネットワークがブロ−ドバンドであれば、低圧縮率の圧縮ファイルを選択することでより高画質な映像を参照でき、ネットワークの状態が悪い場合は、高圧縮率の圧縮ファイルを選ぶことでスピードを重視した映像の参照ができる。
【００５２】
なお、映像ファイル生成装置１００にインターフェース部１１０に到るネットワークの状態を監視するネットワーク監視部を設け、映像ファイル生成装置１００がユーザ操作の介入無しに自動的に最適な圧縮方式を用いたファイルを選択し、出力するようにしても良い。この場合は、先頭静止画映像を複数並べたマルチ画面を見たユーザがインターフェース部１１０から指示した所望の代表静止画に対応し、かつネットワークの状態に合わせた圧縮率の圧縮ファイル３０４〜３０６を自動的に抽出し、再生するようにする。
【００５３】
以上説明したように、上記実施の形態によれば、大容量の映像アーカイブシステムにおける映像検索のおいて、オリジナル映像２００を複数の分割ファイル２０１〜２１０に分割すると共に、複数の分割ファイル２０１〜２１０に関する情報であるインデックスファイル２２１を生成することで、オリジナル映像２００の任意の位置に効率的なアクセスが可能になる。この結果、効率よくオリジナル映像２００の特定カット点２１１〜２２０からの映像を抽出でき、オリジナル映像２００の内容を容易に確認出来るようにできる。
【００５４】
また、上記実施の形態によれば、オリジナルの分割ファイル２０１〜２１０だけでなく、圧縮ファイル３０４〜３０６を生成し蓄積することで、ネットワ−ク負荷によって参照する映像ファイルの種類を選択できる。これを、アーカイブ映像蓄積・配信システムに用いることにより、外部からの多数の映像配信要求があるシステムであっても、ネットワーク負荷に快適に対応することができるシステムを構築することができる。つまり、Ｗｅｂ等を使ったコンテンツ検索分野での広い展開をするための有効な手段となる。
【００５５】
【発明の効果】
以上説明したように、本発明によれば、ユーザが効率よく映像の特定カット点からの映像を抽出できるようにすることで、映像の内容を容易に確認出来る。
【図面の簡単な説明】
【図１】本発明の一実施の形態おける映像ファイル生成装置のブロック図
【図２】上記実施の形態にかかる映像ファイル生成装置の分割ファイルおよびインデックスファイルの生成を説明するための図
【図３】上記実施の形態にかかるの映像ファイル生成装置の圧縮映像生成動作を説明するための図
【図４】従来の映像ファイル生成装置のブロック図
【図５】従来の映像ファイル生成装置の動作を説明するための図
【符号の説明】
１０１　映像入力部
１０２　オリジナル映像蓄積部
１０３　カット点検出部
１０４　タイムコード発生部
１０５　映像ファイル分割・生成部
１０６　インデックスファイル生成部
１０７　ファイル蓄積部
１０８　要約映像生成部
１０９　要約映像出力部
１１０　インターフェース部
【図１】
2004080623.tif 000003
【図２】
2004080623.tif 000004
【図３】
2004080623.tif 000005
【図４】
2004080623.tif 000006
【図５】
2004080623.tif 000007