(57)【要約】  元映像を利用して作成された派生映像における、元映像からの改変有無を容易に把握可能とする。少なくとも１つの元映像と、少なくとも１つの元映像の少なくとも一部の区間を利用して作成された派生映像との間における、区間の対応関係を示す情報と、派生映像の対応関係のある区間における元映像からの改変の有無を示す情報とを含む関係情報を関係情報記憶部に記憶し、関係情報記憶部に記憶されている関係情報に基づいて、派生映像と少なくとも１つの元映像との間における区間の対応関係を、派生映像の対応関係のある区間における元映像からの改変の有無に応じた表示態様で表示する。
2012108090.tif 000002
【特許請求の範囲】
【請求項１】
少なくとも１つの元映像と、前記少なくとも１つの元映像の少なくとも一部の区間を利用して作成された派生映像との間における、区間の対応関係を示す情報と、前記派生映像の前記対応関係のある区間における前記元映像からの改変の有無を示す情報とを含む関係情報を記憶する関係情報記憶部と、
前記関係情報記憶部に記憶されている前記関係情報に基づいて、前記派生映像と前記少なくとも１つの元映像との間における前記区間の対応関係を、前記派生映像の前記対応関係のある区間における前記元映像からの改変の有無に応じた表示態様で表示する対応関係表示部と、
を備える映像間対応関係表示システム。
【請求項２】
請求項１に記載の対応関係表示システムであって、
前記対応関係のある区間における改変の有無を示す情報は、該区間に含まれる複数の分割区間のそれぞれにおける改変の有無を示す情報を含み、
前記対応関係表示部は、前記関係情報に基づいて、前記区間の対応関係を、該区間に含まれる複数の分割区間のそれぞれにおける改変の有無に応じた表示態様で表示する、
映像間対応関係表示システム。
【請求項３】
請求項１または２に記載の映像間対応関係表システムであって、
前記対応関係表示部は、前記改変の有無を前記派生映像の時間軸に合わせて表示する、
映像間対応関係表示システム。
【請求項４】
請求項１〜３の何れか一項に記載の映像間対応関係表示システムであって、
前記対応関係表示部は、前記少なくとも１つの元映像のそれぞれについて、前記対応関係を前記派生映像の時間軸に合わせて表示する、
映像間対応関係表示システム。
【請求項５】
請求項１〜４に記載の映像間対応関係表示システムであって、
前記区間における改変の有無を示す情報は、該区間における改変の度合いを示す情報を含み、
前記対応関係表示部は、前記関係情報に基づいて、前記区間の対応関係を、各区間における改変の度合いに応じた表示態様で表示する、
映像間対応関係表示システム。
【請求項６】
請求項１〜５の何れか一項に記載の映像間対応関係表示システムであって、
前記対応関係表示部は、前記元映像の区間ごとのサムネイル画像が記憶されている記憶部を参照し、前記対応関係を前記改変の有無に応じた表示態様で表示するともに、前記対応関係のある区間における前記元映像のサムネイル画像を表示する、
映像間対応関係表示システム。
【請求項７】
請求項１〜６の何れか一項に記載の映像間対応関係表示システムであって、
前記関係情報記憶部は、複数の前記派生映像に対する前記関係情報を記憶し、
前記対応関係表示部は、
前記複数の派生映像のうちの１つを選択するための情報を表示し、
該表示に応じてユーザ入力により選択される１つの派生映像について、前記対応関係を前記改変の有無に応じた表示態様で表示する、
映像間対応関係表示システム。
【請求項８】
請求項１〜７の何れか一項に記載の映像間対応関係表示システムであって、
前記対応関係表示部は、前記対応関係が表示された区間のうちの１つの区間を選択するユーザ入力に応じて、前記派生映像及び元映像が記憶されている記憶部を参照し、該選択された区間における前記派生映像及び前記元映像を表示する、
映像間対応関係表示システム。
【請求項９】
請求項１〜８の何れか一項に記載の映像間対応関係表示システムであって、
映像を構成する所定の区間ごとの特徴量を映像ごとに対応づけて記憶する特徴量記憶部と、
前記派生映像及び前記元映像を含む、複数の映像に対する前記区間ごとの特徴量を比較する特徴量比較部と、
前記区間ごとの特徴量の比較結果に基づいて前記関係情報を出力して前記関係情報記憶部に格納する関係情報出力部と、
をさらに備える映像間対応関係表示システム。
【請求項１０】
少なくとも１つの元映像と、前記少なくとも１つの元映像の少なくとも一部の区間を利用して作成された派生映像との間における、区間の対応関係を示す情報と、前記派生映像の前記対応関係のある区間における前記元映像からの改変の有無を示す情報とを含む関係情報を関係情報記憶部に記憶し、
前記関係情報記憶部に記憶されている前記関係情報に基づいて、前記派生映像と前記少なくとも１つの元映像との間における前記区間の対応関係を、前記派生映像の前記対応関係のある区間における前記元映像からの改変の有無に応じた表示態様で表示する、
映像間対応関係表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像間対応関係表示システム及び映像間対応関係表示方法に関する。
【背景技術】
【０００２】
デジタル映像の普及に伴い、既存の映像を用いて別の映像を作成することが容易になっている。例えば、放送局では、取材により生成された取材映像を編集することにより、編集映像が作成される。そして、実際に番組の放送時に使用される放送映像を作成する際には、複数の編集映像が用いられる。また、取材映像は、１つの編集映像に用いられるだけではなく、必要に応じて様々に編集され、複数の編集映像を作成するために用いられることがある。同様に、編集映像についても、１つの放送映像に用いられるだけではなく、複数の放送映像に用いられることがある。【０００３】
このように、映像間に対応関係がある場合、映像の増加に伴って対応関係を把握することが難しくなってくる。そこで、例えば、特許文献１に開示されているように、素材映像、編集映像、及びオンエア映像間の対応関係をデータベースに登録しておくことにより、映像間の対応関係を表示する手法が提案されている。この手法では、映像を作成する際に、その映像と他の映像との対応関係がデータベースに登録されることとなっている。そのため、作成済の映像については対応関係がデータベースに登録されていることが前提となっている。【０００４】
ところが、実際には、作成済の映像について対応関係がデータベースに登録されずに、複数の映像が生成されていることが多い。このような場合、まず、映像間の対応関係を検出する必要がある。例えば、特許文献２には、コンテンツの特徴情報を用いることにより、あるコンテンツに類似するコンテンツを検索する手法が開示されている。また、例えば、特許文献３には、コンテンツの特徴量に基づいてコンテンツの同一性を判定し、コンテンツをグルーピングする手法が開示されている。【０００５】
また、編集映像から放送映像を作成するには、例えばテロップを追加する等の改変が行われることがある。そのため、作成済の多くの映像の中から、対応関係のある映像を見つけるためには、このような改変を考慮する必要がある。そこで、例えば、特許文献４には、このような改変がある場合であっても、高い識別力で映像間の同一性を判定することが可能な手法が開示されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００４−１７２７８８号公報
【特許文献２】特開２００５−１４８８０１号公報
【特許文献３】特開２００７−１６４６３３号公報
【特許文献４】国際公開第２０１０／０８４７１４号
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、特許文献１に開示されている手法では、映像間の対応関係が表示されるものの、元映像の一部の区間を利用して派生映像が作成されている場合に、派生映像の各区間における元映像からの改変有無を容易に把握することができない。例えば、放送映像は、編集映像に対してテロップ追加等の改変が行われることにより作成される場合があるが、放送映像のどの区間において、編集映像からの改変が行われたのかを容易に把握することができない。そのため、例えば、放送映像において編集映像からどのような改変が行われているかを確認するためには、放送映像の全区間を、編集映像と比較しながら再生する必要がある。また、特許文献２〜４には、映像間の類似性や同一性を判定する手法については開示されているものの、作成元の映像からの改変の有無を容易に把握可能とするための手法については何ら開示されていない。【０００８】
本発明はこのような事情に鑑みてなされたものであり、元映像を利用して作成された派生映像の各区間における、元映像からの改変有無を容易に把握可能とすることを目的とする。
【課題を解決するための手段】
【０００９】
本発明の一側面に係る映像間対応関係表示システムは、少なくとも１つの元映像と、少なくとも１つの元映像の少なくとも一部の区間を利用して作成された派生映像との間における、区間の対応関係を示す情報と、派生映像の対応関係のある区間における元映像からの改変の有無を示す情報とを含む関係情報を記憶する関係情報記憶部と、関係情報記憶部に記憶されている関係情報に基づいて、派生映像と少なくとも１つの元映像との間における区間の対応関係を、派生映像の対応関係のある区間における元映像からの改変の有無に応じた表示態様で表示する対応関係表示部と、を備える。【００１０】
なお、本発明において、「部」とは、単に物理的手段を意味するものではなく、その「部」が有する機能をソフトウェアによって実現する場合も含む。また、１つの「部」や装置が有する機能が２つ以上の物理的手段や装置により実現されても、２つ以上の「部」や装置の機能が１つの物理的手段や装置により実現されても良い。
【発明の効果】
【００１１】
本発明によれば、元映像を利用して作成された派生映像における、元映像からの改変有無を容易に把握することができる。
【図面の簡単な説明】
【００１２】
【図１】本発明の一実施形態である映像間対応関係提示システムの構成を示す図である。
【図２】取材映像データベースの構成例を示す図である。
【図３】編集映像データベースの構成例を示す図である。
【図４】放送映像データベースの構成例を示す図である。
【図５】フレーム画像の領域分割の一例を示す図である。
【図６】第Ｍ次元における特徴量を抽出する際のイメージを示す図である。
【図７】特徴量記憶部に格納される特徴量ベクトルの一例を示す図である。
【図８】対応関係判定部の構成例を示す図である。
【図９】関係情報記憶部に格納される関係情報の一例を示す図である。
【図１０】対応関係表示部により出力される画面の一例を示す図である。
【図１１】派生映像及び元映像を表示する画面の一例を示す図である。
【図１２】映像間対応関係提示システムにおける処理の一例を示すフローチャートである。
【発明を実施するための形態】
【００１３】
以下、図面を参照して本発明の一実施形態について説明する。
【００１４】
図１は、本発明の一実施形態である映像間対応関係提示システムの構成を示す図である。映像間対応関係提示システム１０は、作成過程において対応関係のある映像間において、映像間の対応関係とともに、派生映像の各区間における改変の有無を提示するシステムであり、特徴量抽出部２０、特徴量記憶部２２、対応関係判定部２４、関係情報記憶部２６、及び対応関係表示部２８を含んで構成される。図１に示すように、特徴量記憶部２２は、取材映像特徴量記憶部３０、編集映像特徴量記憶部３２、及び放送映像特徴量記憶部３４を含んでいる。また、映像間対応関係提示システム１０は、映像データベース４０を参照する。映像データベース４０には、取材映像データベース（ＤＢ）４２、編集映像データベース（ＤＢ）４４、及び放送映像データベース（ＤＢ）４６が含まれている。
【００１５】
このような映像間対応関係提示システム１０は、１台または複数台の情報処理装置を用いて構成され、特徴量抽出部２０、対応関係判定部２４、及び対応関係表示部２８は、メモリに記憶されたプログラムをプロセッサが実行することにより実現することができる。また、特徴量記憶部２２及び関係情報記憶部２６は、メモリや記憶装置等の記憶領域を用いて実現することができる。
【００１６】
ここで、作成過程において対応関係のある映像とは、例えば、放送局で用いられる取材映像と、取材映像の少なくとも一部を利用して作成される編集映像や、さらに編集映像の少なくとも一部を利用して作成される放送映像である。この場合、放送映像が派生映像であり、取材映像や編集映像が元映像である。なお、作成過程において対応関係のある映像は、放送局で用いられる映像に限られない。例えば、放送映像や記録媒体上の映像を元に作成されて動画サイトに投稿された違法動画が存在する場合、放送映像や記録媒体上の映像が元映像、違法動画が派生映像となる。本実施形態では、放送局で用いられる映像を中心に説明するが、本実施形態で示す対応関係の提示システムは、作成過程において対応関係のある映像であれば任意の映像に適用することが可能である。
【００１７】
まず、図２〜図４を参照して、映像データベース４０の構成について説明する。図２は、取材映像ＤＢ４２の構成例を示す図である。取材映像ＤＢ４２には、取材映像の映像データが、映像識別子、及び属性情報と対応付けられて記憶されている。映像識別子は、取材映像を識別するための情報であり、例えばファイル名等を用いることができる。属性情報は、取材映像に関する様々な属性を示す情報であり、例えば、映像のタイトルや作成日時、映像全体の時間等が含まれている。
【００１８】
図３は、編集映像ＤＢ４４の構成例を示す図である。編集映像ＤＢ４４には、編集映像の映像データが、映像識別子及び属性情報と対応付けられて記憶されている。映像識別子及び属性情報については、取材映像ＤＢ４２と同様のものである。
【００１９】
図４は、放送映像ＤＢ４６の構成例を示す図である。放送映像ＤＢ４６には、放送映像の映像データが、映像識別子、属性情報、及び頻度情報と対応付けられて記憶されている。映像識別子及び属性情報については、取材映像ＤＢ４２と同様のものである。頻度情報には、例えば、放送映像が放送された回数を示す情報が設定される。例えば、再放送が行われるたびに頻度情報の値を増加させることができる。なお、再放送の放送映像が、元の放送映像とは別の映像として放送映像ＤＢ４６に格納されることとしてもよい。この場合、属性情報には放送日時に関する情報を含めることが可能である。また、視聴者の要求に応じて放送映像が配信される場合であれば、放送映像の視聴回数を頻度情報に設定することとしてもよい。
【００２０】
なお、本実施形態では、取材映像、編集映像、及び放送映像を別々のデータベースに格納することとしたが、これらの映像が１つのデータベースにまとめて格納されることとしてもよい。この場合、例えば、映像の種別を示す情報を各映像に付与しておくこととしてもよい。
【００２１】
図１に戻り、映像間対応関係提示システム１０を構成する各部の詳細について説明する。
【００２２】
特徴量抽出部２０は、映像データベース４０を参照し、映像を構成する複数のフレーム画像のそれぞれから特徴量ベクトルを抽出し、特徴量記憶部２２に格納する。本実施形態では、取材映像、編集映像、及び放送映像の特徴量ベクトルは、それぞれ、取材映像特徴量記憶部３０、編集映像特徴量記憶部３２、及び放送映像特徴量記憶部３４に格納される。なお、取材映像、編集映像、及び放送映像の特徴量ベクトルが、１つの記憶部にまとめて格納されることとしてもよい。この場合、映像の種別を示す情報を各特徴量ベクトルに付与しておくこととしてもよい。
【００２３】
特徴量ベクトルは、映像を構成する所定の区間ごとの特徴量を示すものである。本実施形態では、国際公開第２０１０／０８４７１４号に記載されている手法により、映像を構成するフレーム画像ごとに特徴量ベクトルが生成されることとする。この手法で生成される特徴量ベクトルは、フレーム画像内で定義されたＮ個（Ｎ≧２）の部分領域に対応するＮ個の特徴量の集合である。特徴量ベクトルの各次元に対応する各部分領域は、例えば、フレーム画像内における複数の部分領域を含んでいる。そして、各次元の特徴量は、例えば、各次元に対応する複数の部分領域の特徴量の差分に基づいて生成することができる。
【００２４】
図５は、フレーム画像の領域分割の一例を示す図である。図５に示すように、例えば、各フレーム画像は３２×３２の１０２４の領域（分割領域）に分割することができる。特徴量ベクトルにおける各次元に対応する部分領域は、１つ以上の分割領域の組み合わせにより構成される。
【００２５】
図６は、第Ｍ次元における特徴量を抽出する際のイメージを示す図である。図６の例では、第Ｍ次元に対応する部分領域は、２つの部分領域６２，６４である。そして、特徴量抽出部２０は、部分領域６２の特徴量（領域特徴量）と部分領域６４の特徴量（領域特徴量）との差分に基づいて、第Ｍ次元の特徴量を生成することができる。ここで、各部分領域６２，６４の特徴量は、例えば、それぞれの部分領域における画素値の平均値やメディアン値等、任意の手法を用いて算出することができる。そして、特徴量抽出部２０は、部分領域６２，６４の領域特徴量の差分を例えば３値（−１，０，１）に量子化することにより、第Ｍ次元特徴量を生成することができる。特徴量抽出部２０は、各次元（第１次元〜第Ｎ次元）について特徴量を生成することにより、Ｎ次元の特徴量ベクトルを生成することができる。なお、ここで説明した各次元の特徴量の算出手法は一例であり、任意の手法によって特徴量ベクトルを生成することが可能である。
【００２６】
図７は、取材映像特徴量記憶部３０に格納される特徴量ベクトルの一例を示す図である。図７に示すように、特徴量ベクトルは、映像識別子と、フレーム画像の時間的順序を示すシーケンス情報とに対応付けられて記憶されている。シーケンス情報は、特徴量ベクトルの順序を把握することができる情報であればよく、例えば、フレーム番号などを用いることができる。なお、データの格納構造等によって特徴量ベクトルの時間的順序を識別可能であれば、シーケンス情報はなくてもよい。編集映像特徴量記憶部３２及び放送映像特徴量記憶部３４についても、取材映像特徴量記憶部３０と同様に構成することができる。
【００２７】
図１に戻り、対応関係判定部２４は、特徴量記憶部２２に格納されている特徴量ベクトルに基づいて、映像間の対応関係を判定する。具体的には、取材映像（元映像）と編集映像（派生映像）との対応関係、および、編集映像（元映像）と放送映像（派生映像）との対応関係が判定される。これにより、取材映像（元映像）と放送映像（派生映像）との対応関係についても、編集映像を介して間接的に判定される。なお、対応関係判定部２４は、取材映像と放送映像との対応関係を編集映像を介さずに直接的に判定することも可能である。
【００２８】
図８は、対応関係判定部２４の構成例を示す図である。図８に示すように、対応関係判定部２４は、特徴量比較部７０、フレーム選択部７２、及び関係情報出力部７４を含んで構成することができる。
【００２９】
特徴量比較部７０は、元映像の候補となる映像の特徴量ベクトルと、派生映像の候補となる映像の特徴量ベクトルとを例えばフレームごとに比較する。例えば、特徴量比較部７０は、取材映像の特徴量ベクトルと編集映像の特徴量ベクトルとを比較する。また、特徴量比較部７０は、編集映像の特徴量ベクトルと放送映像の特徴量ベクトルとを比較する。
【００３０】
フレーム選択部７２は、特徴量比較部７０での比較結果に基づいて、映像間で対応関係（同一性）があると判定されるフレーム画像を選択する。なお、フレーム画像間の同一性の判定については、例えば、２つの特徴量ベクトル間で特徴量が一致する次元の数や、特徴量が一致しない次元の数、特徴量ベクトルの大きさを比較することにより行うことができる。
【００３１】
関係情報出力部７４は、映像間において対応関係のある区間を示す情報である関係情報を出力する。具体的には、関係情報出力部７４は、フレーム選択部７２によってフレーム画像に同一性があると判定された区間を示す関係情報を生成し、関係情報記憶部２６に格納する。また、関係情報出力部７４は、特徴量比較部７０での比較結果に基づいて、映像間において対応関係のある区間での改変度を示す情報を出力する。ここで、改変度とは、元映像を用いて派生映像を作成する際にテロップ追加等によって改変が行われた度合いを示すものであり、例えば、上述したフレーム画像間の同一性の判定と同様の手法により得ることができる。
【００３２】
図９は、関係情報記憶部２６に格納される関係情報の一例を示す図である。図９に示すように、関係情報には、元映像に関する情報、派生映像に関する情報、及び改変度を示す情報が含まれている。元映像または派生映像に関する情報には、映像種別、映像識別子、及び区間情報が含まれている。映像種別は、取材映像、編集映像、または放送映像の何れであるかを示す情報である。区間情報は映像区間を示す情報であり、例えば、映像内における該区間の再生時間やフレーム番号等を用いることができる。
【００３３】
図９には、編集映像Ｅ１〜Ｅ３を利用して放送映像Ｂ１が作成されたことが示されている。より具体的には、編集映像Ｅ１の「１５：００〜３０：００」の区間が、放送映像Ｂ１の「００：００〜１５：００」の区間に利用されており、改変度が「５」となっている。すなわち、放送映像Ｂ１の「００：００〜１５：００」の区間は、編集映像Ｅ１の「１５：００〜３０：００」の区間に改変を加えたものであることがわかる。同様に、放送映像Ｂ１の「１５：００〜２０：００」の区間は、編集映像Ｅ２の「０５：００〜１０：００」の区間に改変を加えたものであり、放送映像Ｂ１の「２０：００〜３０：００」の区間は、編集映像Ｅ３の「０３：００〜１３：００」の区間に改変を加えたものであることがわかる。なお、図９では、対応関係のある区間における改変度として１つの値のみが示されているが、区間内において改変度に変化がある場合には、この区間に含まれる複数の区間（分割区間）のそれぞれについて、改変度が設定されることとしてもよい。
【００３４】
また、図９には、編集映像Ｅ１の区間「００：００〜４０：００」は、取材映像Ｃ１の区間「１０：００〜５０：００」から作成されており、改変度が「０」となっている。すなわち、編集映像Ｅ１は、取材映像Ｃ１の「１０：００〜５０：００」の区間をそのまま抜き出したものであることがわかる。同様に、編集映像Ｅ２、Ｅ３は、それぞれ、取材映像Ｃ２の区間「０２：００〜１７：００」、取材映像Ｃ２の区間「２５：００〜５５：００」をそのまま抜き出したものであることがわかる。
【００３５】
図１に戻り、対応関係表示部２８は、関係情報記憶部２６に格納されている関係情報に基づいて、派生映像と元映像との間における対応関係を、派生映像の各区間における改変度に応じた表示態様で表示する。
【００３６】
図１０は、対応関係表示部２８により出力される画面の一例を示す図である。対応関係表示部２８は、関係情報記憶部２６に記憶されている関係情報に基づいて、映像間の対応関係を表示することができる。図１０に示すように、画面８０には、領域８２〜９４が含まれている。
【００３７】
領域８２には、派生映像である放送映像を選択するための情報が表示される。対応関係表示部２８は、放送映像ＤＢ４６を参照することにより、放送映像の映像識別子やタイトル、作成日時等の情報を領域８２に表示することができる。なお、対応関係表示部２８は、放送映像ＤＢ４６に格納されている全ての放送映像に関する情報を領域８２に表示してもよいし、関係情報記憶部２６に関係情報が格納されている放送映像や、改変が行われている放送映像のみに関する情報を領域８２に表示してもよい。領域８２は、クリック等のユーザ操作によって一つの放送映像を選択可能となっている。対応関係表示部２８は、領域８２において選択された放送映像に関連する情報を他の領域に表示することができる。
【００３８】
領域８４には、選択された放送映像の代表的なサムネイル画像が表示される。また、領域８６には、放送映像の複数のサムネイル画像が表示される。なお、対応関係表示部２８は、例えば、放送映像ＤＢ４６を参照することにより、放送映像のサムネイル画像を表示することができる。
【００３９】
領域８８には、放送映像のタイムラインが表示され、領域９０には、放送映像のタイムラインの時間軸に合わせて、放送映像と編集映像との間における区間の対応関係が表示される。例えば、図１０の例では、領域８８には、放送映像Ｂ１のタイムライン（００：００〜３０：００）が示されており、領域９０には、放送映像Ｂ１の区間「００：００〜１５：００」は編集映像Ｅ１から作成されたものであり、放送映像Ｂ１の区間「１５：００〜２０：００」は編集映像Ｅ２から作成されたものであり、放送映像Ｂ１の区間「２０：００〜３０：００」は編集映像Ｅ３から作成されたものであることが示されている。なお、対応関係表示部２８は、領域９０に放送映像と編集映像との対応関係を表示する際に、関係情報に基づいて、各編集映像の区間を表示することも可能である。例えば、編集映像Ｅ１の区間が「１５：００〜３０：００」であることを表示することができる。編集映像Ｅ２、Ｅ３についても同様である。
【００４０】
また、領域９２には、放送映像と対応関係のある区間における編集映像のサムネイル画像が表示されている。なお、対応関係表示部２８は、例えば、編集映像ＤＢ４４を参照することにより、編集映像のサムネイル画像を表示することができる。また、対応関係表示部２８は、関係情報記憶部２６に記憶されている関係情報に基づいて編集映像と取材映像との対応関係を把握することができる。したがって、対応関係表示部２８は、取材映像ＤＢ４２を参照することにより、編集映像に対応する取材映像のサムネイル画像を領域９２に表示することも可能である。
【００４１】
さらに、領域９４には、放送映像と編集映像との間における区間の対応関係を示す情報の一部として、対応関係のある区間における改変度を示す情報が表示される。図１０の例では、放送映像のタイムラインに合わせて、放送映像の各区間における編集映像からの改変度がグラフで表示されている。このグラフを見ると、例えば、円９６で囲まれた範囲の改変度が高いことがわかる。そして、放送映像のタイムラインを参照すると、放送映像の区間「００：００〜０５：００」付近の改変度が高いことがわかる。さらに、領域９２のサムネイル画像を参照すると、改変度が高い区間がどのような場面であるかを把握することができる。
【００４２】
このように、対応関係表示部２８は、領域９０に対応関係を表示し、領域９４に改変度を表示することにより、両領域全体として、放送映像と編集映像との間における区間の対応関係を、対応関係のある区間における改変度に応じた表示態様で表示している。なお、改変度に応じた表示態様は、図１０に示したように改変度をグラフ表示するものに限られず、改変度もしくは改変の有無を識別可能な表示態様であればよい。例えば、領域９０や領域９２において、改変されている区間をハイライト表示することとしてもよい。また、例えば、領域９０や領域９２において、改変の度合いに応じてハイライトの強弱や色を変更したり、サムネイル画像の大きさを変更したりすることとしてもよい。
【００４３】
また、対応関係表示部２８は、領域９２において、ある映像の区間が選択されると、選択された区間の放送映像及び編集映像を表示する画面を出力することができる。図１１はその一例である。画面１２０には、放送映像が表示される領域１２２と、編集映像または取材映像が表示される領域１２３とが含まれている。対応関係表示部２８は、選択された区間の区間情報を関係情報から取得し、該区間における映像を映像データベース４０から取得して領域１２２，１２３に表示する。また、対応関係表示部２８は、領域９２ではなく、領域８６や領域９４において選択された区間の映像を表示することとしてもよい。
【００４４】
図１２は、映像間対応関係提示システム１０における処理の一例を示すフローチャートである。まず、特徴量抽出部２０は、映像データベース４０に格納されている映像ごとに特徴量ベクトルを抽出し、特徴量記憶部２２に格納する（Ｓ１２０１）。
【００４５】
特徴量比較部７０は、特徴量記憶部２２を参照し、映像間で特徴量ベクトルを比較する（Ｓ１２０２）。フレーム選択部７２は、特徴量比較部７０での比較結果に基づいて、対応関係（同一性）のあるフレーム画像を選択する（Ｓ１２０３）。そして、関係情報出力部７４は、選択されたフレーム画像を含む区間についての関係情報を関係情報記憶部２６に格納する（Ｓ１２０４）。
【００４６】
最後に、対応関係表示部２８は、関係情報記憶部２６に格納されている関係情報に基づいて、派生映像（放送映像）及び元映像（編集映像または取材映像）の間における区間の対応関係を、派生映像の各区間における元映像からの改変度に応じた表示態様で表示する（Ｓ１２０５）。
【００４７】
以上、本実施形態について説明した。本実施形態の映像間対応関係提示システム１０によれば、派生映像と元映像との間における区間の対応関係が、派生映像の各区間における改変度に応じた表示態様で表示されるため、派生映像の各区間における改変の有無を容易に把握することができる。
【００４８】
なお、本実施形態は、本発明の理解を容易にするためのものであり、本発明を限定して解釈するためのものではない。本発明は、その趣旨を逸脱することなく、変更／改良され得るととともに、本発明にはその等価物も含まれる。
【００４９】
この出願は、２０１１年２月１０日に出願された日本出願特願２０１１−０２７１９２を基礎とする優先権を主張し、その開示の全てをここに取り込む。
【００５０】
以上、実施形態を参照して本願発明を説明したが、本願発明は上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。
【００５１】
本実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
（付記１）少なくとも１つの元映像と、前記少なくとも１つの元映像の少なくとも一部の区間を利用して作成された派生映像との間における、区間の対応関係を示す情報と、前記派生映像の前記対応関係のある区間における前記元映像からの改変の有無を示す情報とを含む関係情報を記憶する関係情報記憶部と、前記関係情報記憶部に記憶されている前記関係情報に基づいて、前記派生映像と前記少なくとも１つの元映像との間における前記区間の対応関係を、前記派生映像の前記対応関係のある区間における前記元映像からの改変の有無に応じた表示態様で表示する対応関係表示部と、を備える映像間対応関係表示システム。
（付記２）付記１に記載の対応関係表示システムであって、前記対応関係のある区間における改変の有無を示す情報は、該区間に含まれる複数の分割区間のそれぞれにおける改変の有無を示す情報を含み、前記対応関係表示部は、前記関係情報に基づいて、前記区間の対応関係を、該区間に含まれる複数の分割区間のそれぞれにおける改変の有無に応じた表示態様で表示する、映像間対応関係表示システム。
（付記３）付記１または２に記載の映像間対応関係表システムであって、前記対応関係表示部は、前記改変の有無を前記派生映像の時間軸に合わせて表示する、映像間対応関係表示システム。
（付記４）付記１〜３の何れか一項に記載の映像間対応関係表示システムであって、前記対応関係表示部は、前記少なくとも１つの元映像のそれぞれについて、前記対応関係を前記派生映像の時間軸に合わせて表示する、映像間対応関係表示システム。
（付記５）付記１〜４に記載の映像間対応関係表示システムであって、前記区間における改変の有無を示す情報は、該区間における改変の度合いを示す情報を含み、前記対応関係表示部は、前記関係情報に基づいて、前記区間の対応関係を、各区間における改変の度合いに応じた表示態様で表示する、映像間対応関係表示システム。
（付記６）付記１〜５の何れか一項に記載の映像間対応関係表示システムであって、前記対応関係表示部は、前記元映像の区間ごとのサムネイル画像が記憶されている記憶部を参照し、前記対応関係を前記改変の有無に応じた表示態様で表示するともに、前記対応関係のある区間における前記元映像のサムネイル画像を表示する、映像間対応関係表示システム。
（付記７）付記１〜６の何れか一項に記載の映像間対応関係表示システムであって、前記関係情報記憶部は、複数の前記派生映像に対する前記関係情報を記憶し、前記対応関係表示部は、前記複数の派生映像のうちの１つを選択するための情報を表示し、該表示に応じてユーザ入力により選択される１つの派生映像について、前記対応関係を前記改変の有無に応じた表示態様で表示する、映像間対応関係表示システム。
（付記８）付記１〜７の何れか一項に記載の映像間対応関係表示システムであって、前記対応関係表示部は、前記対応関係が表示された区間のうちの１つの区間を選択するユーザ入力に応じて、前記派生映像及び元映像が記憶されている記憶部を参照し、該選択された区間における前記派生映像及び前記元映像を表示する、映像間対応関係表示システム。
（付記９）付記１〜８の何れか一項に記載の映像間対応関係表示システムであって、映像を構成する所定の区間ごとの特徴量を映像ごとに対応づけて記憶する特徴量記憶部と、前記派生映像及び前記元映像を含む、複数の映像に対する前記区間ごとの特徴量を比較する特徴量比較部と、前記区間ごとの特徴量の比較結果に基づいて前記関係情報を出力して前記関係情報記憶部に格納する関係情報出力部と、をさらに備える映像間対応関係表示システム。
（付記１０）少なくとも１つの元映像と、前記少なくとも１つの元映像の少なくとも一部の区間を利用して作成された派生映像との間における、区間の対応関係を示す情報と、前記派生映像の前記対応関係のある区間における前記元映像からの改変の有無を示す情報とを含む関係情報を関係情報記憶部に記憶し、前記関係情報記憶部に記憶されている前記関係情報に基づいて、前記派生映像と前記少なくとも１つの元映像との間における前記区間の対応関係を、前記派生映像の前記対応関係のある区間における前記元映像からの改変の有無に応じた表示態様で表示する、映像間対応関係表示方法。
【符号の説明】
【００５２】
１０  映像間対応関係提示システム
２０  特徴量抽出部
２２  特徴量記憶部
２４  対応関係判定部
２６  関係情報記憶部
２８  対応関係表示部
３０  取材映像特徴量記憶部
３２  編集映像特徴量記憶部
３４  放送映像特徴量記憶部
４０  映像データベース
４２  取材映像データベース
４４  編集映像データベース
４６  放送映像データベース
７０  特徴量比較部
７２  フレーム選択部
７４  関係情報出力部
【図１】
2012108090.tif 000003
【図２】
2012108090.tif 000004
【図３】
2012108090.tif 000005
【図４】
2012108090.tif 000006
【図５】
2012108090.tif 000007
【図６】
2012108090.tif 000008
【図７】
2012108090.tif 000009
【図８】
2012108090.tif 000010
【図９】
2012108090.tif 000011
【図１０】
2012108090.tif 000012
【図１１】
2012108090.tif 000013
【図１２】
2012108090.tif 000014
【国際調査報告】
2012108090.tif 000015
2012108090.tif 000016
2012108090.tif 000017
2012108090.tif 000018