(57)【要約】  作成過程に対応関係のある映像間において、作成元の映像の区間ごとの利用頻度を容易に把握可能とする。元映像と、元映像の少なくとも一部の区間を利用して作成された複数の派生映像との間における、対応関係のある区間を示す情報である関係情報を関係情報記憶部に記憶し、関係情報記憶部に記憶されている関係情報に基づいて、元映像と複数の派生映像との間における区間の対応関係と、複数の派生映像による元映像の各区間の利用頻度とを表示する。
2012108089.tif 000002
【特許請求の範囲】
【請求項１】
元映像と、前記元映像の少なくとも一部の区間を利用して作成された複数の派生映像との間における、対応関係のある区間を示す情報である関係情報を記憶する関係情報記憶部と、
前記関係情報記憶部に記憶されている前記関係情報に基づいて、前記元映像と前記複数の派生映像との間における前記区間の対応関係と、前記複数の派生映像による前記元映像の各区間の利用頻度とを表示する対応関係表示部と、
を備える映像間対応関係表示システム。
【請求項２】
請求項１に記載の映像間対応関係表示システムであって、
前記対応関係表示部は、前記利用頻度を前記元映像の時間軸に合わせて表示する、
映像間対応関係表示システム。
【請求項３】
請求項２に記載の映像間対応関係表示システムであって、
前記対応関係表示部は、前記複数の派生映像のそれぞれについて、前記対応関係を前記元映像の時間軸に合わせて表示する、
映像間対応関係表示システム。
【請求項４】
請求項３に記載の映像間対応関係表示システムであって、
前記対応関係表示部は、所定の記憶部に記憶されている、前記複数の派生映像間における作成順序を識別するための順序情報に基づいて、前記複数の派生映像についての前記対応関係を前記作成順序に従って表示する、
映像間対応関係表示システム。
【請求項５】
請求項３に記載の映像間対応関係表示システムであって、
前記対応関係表示部は、所定の記憶部に記憶されている、前記複数の派生映像のそれぞれの利用頻度を識別するための頻度情報に基づいて、前記複数の派生映像についての前記対応関係を前記派生映像の利用頻度の順序に従って表示する、
映像間対応関係表示システム。
【請求項６】
請求項１〜５に記載の映像間対応関係表示システムであって、
前記関係情報記憶部は、複数の前記元映像に対する前記関係情報を記憶し、
前記対応関係表示部は、
前記複数の元映像のうちの１つを選択するための情報を表示し、
該表示に応じてユーザ入力により選択される１つの元映像について、前記対応関係及び前記利用頻度を表示する、
映像間対応関係表示システム。
【請求項７】
請求項１〜６の何れか一項に記載の映像間対応関係表示システムであって、
前記関係情報記憶部は、前記対応関係のある区間における、前記元映像から前記派生映像への改変度を示す情報である改変度情報を前記区間と対応付けて記憶し、
前記対応関係表示部は、前記対応関係及び前記利用頻度とともに、前記元映像の各区間における前記複数の派生映像による改変度を表示する、
映像間対応関係表示システム。
【請求項８】
請求項７に記載の映像間対応関係表示システムであって、
前記関係情報出力部は、前記改変度を前記元映像の時間軸に合わせて表示する、
映像間対応関係表示システム。
【請求項９】
請求項１〜８の何れか一項に記載の映像間対応関係表示システムであって、
映像を構成する所定の区間ごとの特徴量を映像ごとに対応づけて記憶する特徴量記憶部と、
前記元映像及び派生映像を含む、複数の映像に対する前記区間ごとの特徴量を比較する特徴量比較部と、
前記区間ごとの特徴量の比較結果に基づいて前記関係情報を出力して前記関係情報記憶部に格納する関係情報出力部と、
をさらに備える映像間対応関係表示システム。
【請求項１０】
請求項１〜９の何れか一項に記載の対応関係表示システムであって、
前記複数の派生映像のうちの少なくとも１つは、前記派生映像の少なくとも一部の区間を利用して作成された映像である、
映像間対応関係表示システム。
【請求項１１】
元映像と、前記元映像の少なくとも一部の区間を利用して作成された複数の派生映像との間における、対応関係のある区間を示す情報である関係情報を関係情報記憶部に記憶し、
前記関係情報記憶部に記憶されている関係情報に基づいて、前記元映像と前記複数の派生映像との間における前記区間の対応関係と、前記複数の派生映像による前記元映像の各区間の利用頻度とを表示する、
映像間対応関係表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像間対応関係表示システム及び映像間対応関係表示方法に関する。
【背景技術】
【０００２】
デジタル映像の普及に伴い、既存の映像を用いて別の映像を作成することが容易になっている。例えば、放送局では、取材により生成された取材映像を編集することにより、編集映像が作成される。そして、実際に番組の放送時に使用される放送映像を作成する際には、複数の編集映像が用いられる。また、取材映像は、１つの編集映像に用いられるだけではなく、必要に応じて様々に編集され、複数の編集映像を作成するために用いられることがある。同様に、編集映像についても、１つの放送映像に用いられるだけではなく、複数の放送映像に用いられることがある。【０００３】
このように、映像間に対応関係がある場合、映像の増加に伴って対応関係を把握することが難しくなってくる。そこで、例えば、特許文献１に開示されているように、素材映像、編集映像、及びオンエア映像間の対応関係をデータベースに登録しておくことにより、映像間の対応関係を表示する手法が提案されている。この手法では、映像を作成する際に、その映像と他の映像との対応関係がデータベースに登録されることとなっている。そのため、作成済の映像については対応関係がデータベースに登録されていることが前提となっている。【０００４】
ところが、実際には、作成済の映像について対応関係がデータベースに登録されずに、複数の映像が生成されていることが多い。このような場合、まず、映像間の対応関係を検出する必要がある。例えば、特許文献２には、コンテンツの特徴情報を用いることにより、あるコンテンツに類似するコンテンツを検索する手法が開示されている。また、例えば、特許文献３には、コンテンツの特徴量に基づいてコンテンツの同一性を判定し、コンテンツをグルーピングする手法が開示されている。【０００５】
また、編集映像から放送映像を作成するには、例えばテロップを追加する等の改変が行われることがある。そのため、作成済の多くの映像の中から、対応関係のある映像を見つけるためには、このような改変を考慮する必要がある。そこで、例えば、特許文献４には、このような改変がある場合であっても、高い識別力で映像間の同一性を判定することが可能な手法が開示されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００４−１７２７８８号公報
【特許文献２】特開２００５−１４８８０１号公報
【特許文献３】特開２００７−１６４６３３号公報
【特許文献４】国際公開第２０１０／０８４７１４号
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、特許文献１に開示されている手法では、映像間の対応関係が表示されるものの、作成元の映像の区間ごとの利用頻度を容易に把握することができない。例えば、取材映像の一部の区間を用いて複数の編集映像や放送映像が生成される場合、取材映像のどの部分がどの程度利用されているかを容易に把握することができない。また、特許文献２〜４には、映像間の類似性や同一性を判定する手法については開示されているものの、作成元の映像の区間ごとの利用頻度を容易に把握可能とするための手法については何ら開示されていない。【０００８】
本発明はこのような事情に鑑みてなされたものであり、作成過程に対応関係のある映像間において、作成元の映像の区間ごとの利用頻度を容易に把握可能とすることを目的とする。
【課題を解決するための手段】
【０００９】
本発明の一側面に係る映像間対応関係表示システムは、元映像と、元映像の少なくとも一部の区間を利用して作成された複数の派生映像との間における、対応関係のある区間を示す情報である関係情報を記憶する関係情報記憶部と、関係情報記憶部に記憶されている関係情報に基づいて、元映像と複数の派生映像との間における区間の対応関係と、複数の派生映像による元映像の各区間の利用頻度とを表示する対応関係表示部と、を備える。【００１０】
なお、本発明において、「部」とは、単に物理的手段を意味するものではなく、その「部」が有する機能をソフトウェアによって実現する場合も含む。また、１つの「部」や装置が有する機能が２つ以上の物理的手段や装置により実現されても、２つ以上の「部」や装置の機能が１つの物理的手段や装置により実現されても良い。
【発明の効果】
【００１１】
本発明によれば、作成過程に対応関係のある映像間において、作成元の映像の区間ごとの利用頻度を容易に把握することができる。
【図面の簡単な説明】
【００１２】
【図１】本発明の一実施形態である映像間対応関係提示システムの構成を示す図である。
【図２】取材映像データベースの構成例を示す図である。
【図３】編集映像データベースの構成例を示す図である。
【図４】放送映像データベースの構成例を示す図である。
【図５】フレーム画像の領域分割の一例を示す図である。
【図６】第Ｍ次元における特徴量を抽出する際のイメージを示す図である。
【図７】特徴量記憶部に格納される特徴量ベクトルの一例を示す図である。
【図８】対応関係判定部の構成例を示す図である。
【図９】関係情報記憶部に格納される関係情報の一例を示す図である。
【図１０】対応関係表示部により出力される画面の一例を示す図である。
【図１１】元映像及び派生映像を表示する画面の一例を示す図である。
【図１２】映像間対応関係提示システムにおける処理の一例を示すフローチャートである。
【発明を実施するための形態】
【００１３】
以下、図面を参照して本発明の一実施形態について説明する。
【００１４】
図１は、本発明の一実施形態である映像間対応関係提示システムの構成を示す図である。映像間対応関係提示システム１０は、作成過程において対応関係のある映像間において、映像間の対応関係とともに、作成元の映像の区間ごとの利用頻度を提示するシステムであり、特徴量抽出部２０、特徴量記憶部２２、対応関係判定部２４、関係情報記憶部２６、及び対応関係表示部２８を含んで構成される。図１に示すように、特徴量記憶部２２は、取材映像特徴量記憶部３０、編集映像特徴量記憶部３２、及び放送映像特徴量記憶部３４を含んでいる。また、映像間対応関係提示システム１０は、映像データベース４０を参照する。映像データベース４０には、取材映像データベース（ＤＢ）４２、編集映像データベース（ＤＢ）４４、及び放送映像データベース（ＤＢ）４６が含まれている。
【００１５】
このような映像間対応関係提示システム１０は、１台または複数台の情報処理装置を用いて構成され、特徴量抽出部２０、対応関係判定部２４、及び対応関係表示部２８は、メモリに記憶されたプログラムをプロセッサが実行することにより実現することができる。また、特徴量記憶部２２及び関係情報記憶部２６は、メモリや記憶装置等の記憶領域を用いて実現することができる。
【００１６】
ここで、作成過程において対応関係のある映像とは、例えば、放送局で用いられる取材映像と、取材映像の少なくとも一部を利用して作成される編集映像や、さらに編集映像の少なくとも一部を利用して作成される放送映像である。この場合、取材映像が元映像であり、編集映像や放送映像が、取材映像からの派生映像となる。なお、作成過程において対応関係のある映像は、放送局で用いられる映像に限られない。例えば、放送映像や記録媒体上の映像を元に作成されて動画サイトに投稿された違法動画が存在する場合、放送映像や記録媒体上の映像が元映像、違法動画が派生映像となる。本実施形態では、放送局で用いられる映像を中心に説明するが、本実施形態で示す対応関係の提示システムは、作成過程において対応関係のある映像であれば任意の映像に適用することが可能である。
【００１７】
まず、図２〜図４を参照して、映像データベース４０の構成について説明する。図２は、取材映像ＤＢ４２の構成例を示す図である。取材映像ＤＢ４２には、取材映像の映像データが、映像識別子、及び属性情報と対応付けられて記憶されている。映像識別子は、取材映像を識別するための情報であり、例えばファイル名等を用いることができる。属性情報は、取材映像に関する様々な属性を示す情報であり、例えば、映像のタイトルや作成日時、映像全体の時間等が含まれている。
【００１８】
図３は、編集映像ＤＢ４４の構成例を示す図である。編集映像ＤＢ４４には、編集映像の映像データが、映像識別子及び属性情報と対応付けられて記憶されている。映像識別子及び属性情報については、取材映像ＤＢ４２と同様のものである。
【００１９】
図４は、放送映像ＤＢ４６の構成例を示す図である。放送映像ＤＢ４６には、放送映像の映像データが、映像識別子、属性情報、及び頻度情報と対応付けられて記憶されている。映像識別子及び属性情報については、取材映像ＤＢ４２と同様のものである。頻度情報には、例えば、放送映像が放送された回数を示す情報が設定される。例えば、再放送が行われるたびに頻度情報の値を増加させることができる。なお、再放送の放送映像が、元の放送映像とは別の映像として放送映像ＤＢ４６に格納されることとしてもよい。この場合、属性情報には放送日時に関する情報を含めることが可能である。また、視聴者の要求に応じて放送映像が配信される場合であれば、放送映像の視聴回数を頻度情報に設定することとしてもよい。
【００２０】
なお、本実施形態では、取材映像、編集映像、及び放送映像を別々のデータベースに格納することとしたが、これらの映像が１つのデータベースにまとめて格納されることとしてもよい。この場合、例えば、映像の種別を示す情報を各映像に付与しておくこととしてもよい。
【００２１】
図１に戻り、映像間対応関係提示システム１０を構成する各部の詳細について説明する。
【００２２】
特徴量抽出部２０は、映像データベース４０を参照し、映像を構成する複数のフレーム画像のそれぞれから特徴量ベクトルを抽出し、特徴量記憶部２２に格納する。本実施形態では、取材映像、編集映像、及び放送映像の特徴量ベクトルは、それぞれ、取材映像特徴量記憶部３０、編集映像特徴量記憶部３２、及び放送映像特徴量記憶部３４に格納される。なお、取材映像、編集映像、及び放送映像の特徴量ベクトルが、１つの記憶部にまとめて格納されることとしてもよい。この場合、映像の種別を示す情報を各特徴量ベクトルに付与しておくこととしてもよい。
【００２３】
特徴量ベクトルは、映像を構成する所定の区間ごとの特徴量を示すものである。本実施形態では、国際公開第２０１０／０８４７１４号に記載されている手法により、映像を構成するフレーム画像ごとに特徴量ベクトルが生成されることとする。この手法で生成される特徴量ベクトルは、フレーム画像内で定義されたＮ個（Ｎ≧２）の部分領域に対応するＮ個の特徴量の集合である。特徴量ベクトルの各次元に対応する各部分領域は、例えば、フレーム画像内における複数の部分領域を含んでいる。そして、各次元の特徴量は、例えば、各次元に対応する複数の部分領域の特徴量の差分に基づいて生成することができる。
【００２４】
図５は、フレーム画像の領域分割の一例を示す図である。図５に示すように、例えば、各フレーム画像は３２×３２の１０２４の領域（分割領域）に分割することができる。特徴量ベクトルにおける各次元に対応する部分領域は、１つ以上の分割領域の組み合わせにより構成される。
【００２５】
図６は、第Ｍ次元における特徴量を抽出する際のイメージを示す図である。図６の例では、第Ｍ次元に対応する部分領域は、２つの部分領域６２，６４である。そして、特徴量抽出部２０は、部分領域６２の特徴量（領域特徴量）と部分領域６４の特徴量（領域特徴量）との差分に基づいて、第Ｍ次元の特徴量を生成することができる。ここで、各部分領域６２，６４の特徴量は、例えば、それぞれの部分領域における画素値の平均値やメディアン値等、任意の手法を用いて算出することができる。そして、特徴量抽出部２０は、部分領域６２，６４の領域特徴量の差分を例えば３値（−１，０，１）に量子化することにより、第Ｍ次元特徴量を生成することができる。特徴量抽出部２０は、各次元（第１次元〜第Ｎ次元）について特徴量を生成することにより、Ｎ次元の特徴量ベクトルを生成することができる。なお、ここで説明した各次元の特徴量の算出手法は一例であり、任意の手法によって特徴量ベクトルを生成することが可能である。
【００２６】
図７は、取材映像特徴量記憶部３０に格納される特徴量ベクトルの一例を示す図である。図７に示すように、特徴量ベクトルは、映像識別子と、フレーム画像の時間的順序を示すシーケンス情報とに対応付けられて記憶されている。シーケンス情報は、特徴量ベクトルの順序を把握することができる情報であればよく、例えば、フレーム番号などを用いることができる。なお、データの格納構造等によって特徴量ベクトルの時間的順序を識別可能であれば、シーケンス情報はなくてもよい。編集映像特徴量記憶部３２及び放送映像特徴量記憶部３４についても、取材映像特徴量記憶部３０と同様に構成することができる。
【００２７】
図１に戻り、対応関係判定部２４は、特徴量記憶部２２に格納されている特徴量ベクトルに基づいて、映像間の対応関係を判定する。具体的には、取材映像（元映像）と編集映像（派生映像）との対応関係、および、編集映像（元映像）と放送映像（派生映像）との対応関係が判定される。これにより、取材映像（元映像）と放送映像（派生映像）との対応関係についても、編集映像を介して間接的に判定される。なお、対応関係判定部２４は、取材映像と放送映像との対応関係を編集映像を介さずに直接的に判定することも可能である。
【００２８】
図８は、対応関係判定部２４の構成例を示す図である。図８に示すように、対応関係判定部２４は、特徴量比較部７０、フレーム選択部７２、及び関係情報出力部７４を含んで構成することができる。
【００２９】
特徴量比較部７０は、元映像の候補となる映像の特徴量ベクトルと、派生映像の候補となる映像の特徴量ベクトルとを例えばフレームごとに比較する。例えば、特徴量比較部７０は、取材映像の特徴量ベクトルと編集映像の特徴量ベクトルとを比較する。また、特徴量比較部７０は、編集映像の特徴量ベクトルと放送映像の特徴量ベクトルとを比較する。
【００３０】
フレーム選択部７２は、特徴量比較部７０での比較結果に基づいて、映像間で対応関係（同一性）があると判定されるフレーム画像を選択する。なお、フレーム画像間の同一性の判定については、例えば、２つの特徴量ベクトル間で特徴量が一致する次元の数や、特徴量が一致しない次元の数、特徴量ベクトルの大きさを比較することにより行うことができる。
【００３１】
関係情報出力部７４は、映像間において対応関係のある区間を示す情報である関係情報を出力する。具体的には、関係情報出力部７４は、フレーム選択部７２によってフレーム画像に同一性があると判定された区間を示す関係情報を生成し、関係情報記憶部２６に格納する。また、関係情報出力部７４は、特徴量比較部７０での比較結果に基づいて、映像間において対応関係のある区間での改変度を示す情報を出力する。ここで、改変度とは、元映像を用いて派生映像を作成する際にテロップ追加等によって改変が行われた度合いを示すものである。
【００３２】
図９は、関係情報記憶部２６に格納される関係情報の一例を示す図である。図９に示すように、関係情報には、元映像に関する情報、派生映像に関する情報、及び改変度を示す情報が含まれている。元映像または派生映像に関する情報には、映像種別、映像識別子、及び区間情報が含まれている。映像種別は、取材映像、編集映像、または放送映像の何れであるかを示す情報である。区間情報は映像区間を示す情報であり、例えば、映像内における該区間の再生時間やフレーム番号等を用いることができる。
【００３３】
図９には、取材映像Ｃ１を利用して３つの編集映像Ｅ１〜Ｅ３が作成されたことが示されている。より具体的には、取材映像Ｃ１の区間「００：００〜２０：００」を利用して、編集映像Ｅ１の区間「００：００〜２０：００」が作成されており、改変度が「０」となっている。すなわち、編集映像Ｅ１は、取材映像Ｃ１の「００：００〜２０：００」の区間をそのまま抜き出したものであることがわかる。同様に、編集映像Ｅ２、Ｅ３は、それぞれ、取材映像Ｃ１の「２０：００〜４０：００」の区間、「４０：００〜６０：００」の区間をそのまま抜き出したものであることがわかる。
【００３４】
また、図９には、編集映像Ｅ１〜Ｅ３を利用して放送映像Ｂ１が作成されたことが示されている。より具体的には、編集映像Ｅ１の「００：００〜０５：００」の区間が、放送映像Ｂ１の「００：００〜０５：００」の区間に利用されており、改変度が「２」となっている。すなわち、放送映像Ｂ１の「００：００〜０５：００」の区間は、編集映像Ｅ１の「００：００〜０５：００」の区間に改変を加えたものであることがわかる。同様に、放送映像Ｂ１の「０５：００〜１５：００」の区間は、編集映像Ｅ２の「０３：００〜１３：００」の区間に改変を加えたものであり、放送映像Ｂ１の「１５：００〜２０：００」の区間は、編集映像Ｅ３の「０２：００〜０７：００」の区間に改変を加えたものであることがわかる。
【００３５】
図１に戻り、対応関係表示部２８は、関係情報記憶部２６に格納されている関係情報に基づいて、元映像と複数の派生映像との間における対応関係と、元映像の各区間における複数の派生映像による利用頻度とを表示する。
【００３６】
図１０は、対応関係表示部２８により出力される画面の一例を示す図である。対応関係表示部２８は、関係情報記憶部２６に記憶されている関係情報に基づいて、映像間の対応関係を表示することができる。図１０に示すように、画面８０には、領域８２〜９４が含まれている。
【００３７】
領域８２には、元映像となる取材映像を選択するための情報が表示される。対応関係表示部２８は、取材映像ＤＢ４２を参照することにより、取材映像の映像識別子やタイトル、作成日時等の情報を領域８２に表示することができる。なお、対応関係表示部２８は、取材映像ＤＢ４２に格納されている全ての取材映像に関する情報を領域８２に表示してもよいし、関係情報記憶部２６に関係情報が格納されている取材映像のみに関する情報を領域８２に表示してもよい。領域８２は、クリック等のユーザ操作によって一つの取材映像を選択可能となっている。対応関係表示部２８は、領域８２において選択された取材映像に関連する情報を他の領域に表示することができる。
【００３８】
領域８４には、取材映像の代表的なサムネイル画像が表示される。また、領域８６には、取材映像のタイムラインが表示され、領域８８には、タイムラインに沿って取材映像のサムネイル画像が表示される。なお、対応関係表示部２８は、例えば取材映像ＤＢ４２を参照することにより、取材映像のサムネイル画像を表示することができる。
【００３９】
領域９０には、取材映像と対応関係のある編集映像及び放送映像に関する情報が表示される。図１０に示すように、領域９０には、取材映像のどの部分が利用されているかがわかるように、各映像のタイムラインが、取材映像のタイムラインに合わせて表示されている。例えば、編集映像Ｅ１は、取材映像Ｃ１の区間「００：００〜２０：００」と対応関係にあることが示されている。同様に、編集映像Ｅ２、Ｅ３は、それぞれ、取材映像Ｃ１の区間「２０：００〜４０：００」、「４０：００〜６０：００」と対応関係にあることが示されている。また、例えば、放送映像Ｂ１は、取材映像Ｃ１の区間「００：００〜０５：００」、「２３：００〜３３：００」、「４２：００〜４７：００」と対応関係にあることが示されている。なお、取材映像Ｃ１と放送映像Ｂ１との対応関係は、取材映像Ｃ１と編集映像Ｅ１〜Ｅ３との対応関係、および、編集映像Ｅ１〜Ｅ３と放送映像Ｂ１との対応関係から導くことが可能である。
【００４０】
また、領域９０では、複数の映像に関する情報が、映像の作成日時の順序に従って表示されている。つまり、図１０の例では、編集映像Ｅ１、編集映像Ｅ２、編集映像Ｅ３、放送映像Ｂ１、放送映像Ｂ２、編集映像Ｅ４、放送映像Ｂ３の順に表示されている。このように、領域９０に表示される情報を映像の作成日時順とすることにより、取材映像からどのように映像が派生していったのかを時系列に沿って確認することができる。なお、領域９０に放送映像のみの情報を表示する場合であれば、放送映像の放送回数順に情報を表示することも可能である。また、例えば、動画サイトに投稿されている動画を派生映像とする場合であれば、動画が投稿（アップロード）された順や動画の視聴回数順に情報を表示することも可能である。
【００４１】
領域９２には、取材映像の各区間における、編集映像及び放送映像による利用頻度を示す情報が表示される。図１０の例では、取材映像のタイムラインに合わせて、取材映像の各区間が利用された回数がグラフで表示されている。このグラフを見ると、例えば、円９６で囲まれた範囲の利用頻度が高いことがわかる。そして、取材映像のタイムラインを参照すると、取材映像の区間「２０：００〜３０：００」付近の利用頻度が高いことがわかる。さらに、領域８８のサムネイル画像を参照すると、利用頻度が高い区間がどのような場面であるかを把握することができる。なお、派生映像が違法動画の場合であれば、元映像のどの区間が違法に利用されているかを把握することができる。
【００４２】
領域９４には、取材映像の各区間における、編集映像及び放送映像による改変度を示す情報が表示される。図１０の例では、取材映像のタイムラインに合わせて、取材映像の各区間からの改変度がグラフで表示されている。このグラフを見ると、例えば、円９８で囲まれた範囲の改変度が高いことがわかる。そして、取材映像のタイムラインを参照すると、取材映像の区間「２０：００〜２５：００」付近の改変度が高いことがわかる。さらに、領域８８のサムネイル画像を参照すると、改変度が高い区間がどのような場面であるかを把握することができる。
【００４３】
また、対応関係表示部２８は、領域９０において、ある映像の区間が選択されると、選択された区間の映像と、この区間に対応する取材映像とを表示する画面を出力することができる。図１１はその一例である。画面１２０には、取材映像が表示される領域１２２と、編集映像または放送映像が表示される領域１２３が含まれている。対応関係表示部２８は、選択された区間の区間情報を関係情報から取得し、該区間における映像を映像データベース４０から取得して領域１２２，１２３に表示する。また、対応関係表示部２８は、領域９０ではなく、領域９２や領域９４において選択された区間の映像を表示することとしてもよい。例えば、領域９２においてある区間が選択されると、この区間付近の取材映像と、この取材映像を利用して作成された編集映像や放送映像が並べて表示されるようにすることができる。このように、選択された区間の映像が表示されることにより、対応関係のある映像の全区間を再生して比較することなく、映像間における改変内容を確認することができる。
【００４４】
図１２は、映像間対応関係提示システム１０における処理の一例を示すフローチャートである。まず、特徴量抽出部２０は、映像データベース４０に格納されている映像ごとに特徴量ベクトルを抽出し、特徴量記憶部２２に格納する（Ｓ１２０１）。
【００４５】
特徴量比較部７０は、特徴量記憶部２２を参照し、映像間で特徴量ベクトルを比較する（Ｓ１２０２）。フレーム選択部７２は、特徴量比較部７０での比較結果に基づいて、対応関係（同一性）のあるフレーム画像を選択する（Ｓ１２０３）。そして、関係情報出力部７４は、選択されたフレーム画像を含む区間についての関係情報を関係情報記憶部２６に格納する（Ｓ１２０４）。
【００４６】
最後に、対応関係表示部２８は、関係情報記憶部２６に格納されている関係情報に基づいて、元映像（取材映像）及び派生映像（編集映像及び放送映像）の対応関係と、元映像の各区間の利用頻度及び改変度を表示する（Ｓ１２０５）。
【００４７】
以上、本実施形態について説明した。本実施形態の映像間対応関係提示システム１０によれば、元映像と派生映像との対応関係とともに、元映像の各区間における派生映像による利用頻度や改変度が表示されるため、作成元の映像の区間ごとの利用頻度や改変度を容易に把握することができる。
【００４８】
なお、本実施形態は、本発明の理解を容易にするためのものであり、本発明を限定して解釈するためのものではない。本発明は、その趣旨を逸脱することなく、変更／改良され得るととともに、本発明にはその等価物も含まれる。
【００４９】
この出願は、２０１１年２月１０日に出願された日本出願特願２０１１−０２７１８９を基礎とする優先権を主張し、その開示の全てをここに取り込む。
【００５０】
以上、実施形態を参照して本願発明を説明したが、本願発明は上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。
【００５１】
本実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
（付記１）元映像と、前記元映像の少なくとも一部の区間を利用して作成された複数の派生映像との間における、対応関係のある区間を示す情報である関係情報を記憶する関係情報記憶部と、前記関係情報記憶部に記憶されている前記関係情報に基づいて、前記元映像と前記複数の派生映像との間における前記区間の対応関係と、前記複数の派生映像による前記元映像の各区間の利用頻度とを表示する対応関係表示部と、を備える映像間対応関係表示システム。
（付記２）付記１に記載の映像間対応関係表示システムであって、前記対応関係表示部は、前記利用頻度を前記元映像の時間軸に合わせて表示する、映像間対応関係表示システム。
（付記３）付記２に記載の映像間対応関係表示システムであって、前記対応関係表示部は、前記複数の派生映像のそれぞれについて、前記対応関係を前記元映像の時間軸に合わせて表示する、映像間対応関係表示システム。
（付記４）付記３に記載の映像間対応関係表示システムであって、前記対応関係表示部は、所定の記憶部に記憶されている、前記複数の派生映像間における作成順序を識別するための順序情報に基づいて、前記複数の派生映像についての前記対応関係を前記作成順序に従って表示する、映像間対応関係表示システム。
（付記５）付記３に記載の映像間対応関係表示システムであって、前記対応関係表示部は、所定の記憶部に記憶されている、前記複数の派生映像のそれぞれの利用頻度を識別するための頻度情報に基づいて、前記複数の派生映像についての前記対応関係を前記派生映像の利用頻度の順序に従って表示する、映像間対応関係表示システム。
（付記６）付記１〜５に記載の映像間対応関係表示システムであって、前記関係情報記憶部は、複数の前記元映像に対する前記関係情報を記憶し、前記対応関係表示部は、前記複数の元映像のうちの１つを選択するための情報を表示し、該表示に応じてユーザ入力により選択される１つの元映像について、前記対応関係及び前記利用頻度を表示する、映像間対応関係表示システム。
（付記７）付記１〜６の何れか一項に記載の映像間対応関係表示システムであって、前記関係情報記憶部は、前記対応関係のある区間における、前記元映像から前記派生映像への改変度を示す情報である改変度情報を前記区間と対応付けて記憶し、前記対応関係表示部は、前記対応関係及び前記利用頻度とともに、前記元映像の各区間における前記複数の派生映像による改変度を表示する、映像間対応関係表示システム。
（付記８）付記７に記載の映像間対応関係表示システムであって、前記関係情報出力部は、前記改変度を前記元映像の時間軸に合わせて表示する、映像間対応関係表示システム。
（付記９）付記１〜８の何れか一項に記載の映像間対応関係表示システムであって、映像を構成する所定の区間ごとの特徴量を映像ごとに対応づけて記憶する特徴量記憶部と、前記元映像及び派生映像を含む、複数の映像に対する前記区間ごとの特徴量を比較する特徴量比較部と、前記区間ごとの特徴量の比較結果に基づいて前記関係情報を出力して前記関係情報記憶部に格納する関係情報出力部と、をさらに備える映像間対応関係表示システム。
（付記１０）付記１〜９の何れか一項に記載の対応関係表示システムであって、前記複数の派生映像のうちの少なくとも１つは、前記派生映像の少なくとも一部の区間を利用して作成された映像である、映像間対応関係表示システム。
（付記１１）元映像と、前記元映像の少なくとも一部の区間を利用して作成された複数の派生映像との間における、対応関係のある区間を示す情報である関係情報を関係情報記憶部に記憶し、前記関係情報記憶部に記憶されている関係情報に基づいて、前記元映像と前記複数の派生映像との間における前記区間の対応関係と、前記複数の派生映像による前記元映像の各区間の利用頻度とを表示する、映像間対応関係表示方法。
【符号の説明】
【００５２】
１０  映像間対応関係提示システム
２０  特徴量抽出部
２２  特徴量記憶部
２４  対応関係判定部
２６  関係情報記憶部
２８  対応関係表示部
３０  取材映像特徴量記憶部
３２  編集映像特徴量記憶部
３４  放送映像特徴量記憶部
４０  映像データベース
４２  取材映像データベース
４４  編集映像データベース
４６  放送映像データベース
７０  特徴量比較部
７２  フレーム選択部
７４  関係情報出力部
【図１】
2012108089.tif 000003
【図２】
2012108089.tif 000004
【図３】
2012108089.tif 000005
【図４】
2012108089.tif 000006
【図５】
2012108089.tif 000007
【図６】
2012108089.tif 000008
【図７】
2012108089.tif 000009
【図８】
2012108089.tif 000010
【図９】
2012108089.tif 000011
【図１０】
2012108089.tif 000012
【図１１】
2012108089.tif 000013
【図１２】
2012108089.tif 000014
【国際調査報告】
2012108089.tif 000015
2012108089.tif 000016
2012108089.tif 000017
2012108089.tif 000018