(57)【要約】【課題】同一のコンテンツを複数回オーサリング及び配信することがあり、過去コンテンツが保存されない環境下で、今回オーサリングしたコンテンツが過去のものと一致することを確認する一致度確認装置を提供する。【解決手段】調達情報DB11にて管理される過去配信コンテンツのIDを参照して、再配信判定部12は今回コンテンツのIDに一致するものがある場合に、再配信であると判定する。インデクス情報生成部13は今回コンテンツ及び一連の過去コンテンツのインデクス情報を生成してインデクス情報DB14に格納し、今回のIDをキーに過去配信時インデクス情報取得部15は対応する過去インデクス情報を取得する。類似フレーム検索部21は今回・過去インデクス情報の両者において、今回コンテンツのサンプル画像に類似する一連のフレーム番号を出力し、当該番号系列の比較によって一致度判定部22はコンテンツ同士の一致度を求める。【選択図】図１
2014191408.tif 000002
【特許請求の範囲】
【請求項１】
同一コンテンツに関する動画像のオーサリング及び配信が複数回ありうる環境下にて、今回のオーサリング及び配信対象のコンテンツが、過去にオーサリング及び配信されたコンテンツと同一の内容であるかに関する一致度を判定する一致度確認装置であって、
今回のオーサリング済みコンテンツと、そのIDと、を取得するコンテンツ取得部と、
前記今回のオーサリング済みコンテンツより、その動画像データから抽出した特徴量時系列として、インデクス情報を生成するインデクス情報生成部と、
過去に配信された各コンテンツのIDを保持する調達情報データベースと、
過去に配信された各コンテンツに対して前記インデクス情報生成部が生成したインデクス情報を、各コンテンツのIDと共に保持するインデクス情報データベースと、
前記取得したIDと一致するものを前記調達情報データベースより調べ、存在する場合に前記今回のオーサリング済みコンテンツが再配信となる旨を判定する再配信判定部と、
前記再配信となる旨が判定された場合に、前記インデクス情報データベースを前記取得したIDを用いて参照して、前記今回のオーサリング済みコンテンツに相当するコンテンツとして過去に配信されたコンテンツのインデクス情報を取得する過去配信時インデクス情報取得部と、
前記今回のオーサリング済みコンテンツに対するサンプル画像を取得するサンプル取得部と、
前記今回のオーサリング済みコンテンツに対して前記生成された今回のインデクス情報と、前記取得された前記過去に配信されたコンテンツのインデクス情報と、のそれぞれにおいて、前記サンプル画像に類似する一連のフレーム番号を類似度の高い順に検索する類似フレーム検索部と、
前記それぞれのインデクス情報に対して検索された一連のフレーム番号の比較によって、前記今回のオーサリング済みコンテンツと、当該コンテンツに相当するものとして前記過去に配信されたコンテンツと、の一致度を判定する一致度判定部と、を備えることを特徴とする一致度確認装置。
【請求項２】
前記一致度判定部が、前記それぞれのインデクス情報に対して検索された一連のフレーム番号同士のピアソン相関係数によって、前記一致度を判定することを特徴とする請求項１に記載の一致度確認装置。
【請求項３】
前記一致度判定部が、前記それぞれのインデクス情報に対して検索された一連のフレーム番号同士の差を要素とするpノルムによって、前記一致度を判定することを特徴とする請求項１に記載の一致度確認装置。
【請求項４】
前記一致度判定部が、前記それぞれのインデクス情報に対して検索された一連のフレーム番号同士のケンドールの順位相関係数によって、前記一致度を判定することを特徴とする請求項１に記載の一致度確認装置。
【請求項５】
前記一致度判定部が、前記それぞれのインデクス情報に対して検索された一連のフレーム番号を予め昇順又は降順に並び替えてから、当該並び替えられた一連のフレーム番号の比較によって、前記一致度を判定することを特徴とする請求項１ないし４のいずれかに記載の一致度確認装置。
【請求項６】
同一コンテンツに関する動画像のオーサリング及び配信が複数回ありうる環境下にて、今回のオーサリング及び配信対象のコンテンツが、過去にオーサリング及び配信されたコンテンツと同一の内容であるかに関する一致度のユーザによる判定を補助する一致度確認装置であって、
今回のオーサリング済みコンテンツと、そのIDと、を取得するコンテンツ取得部と、
前記今回のオーサリング済みコンテンツより、その動画像データから抽出した特徴量時系列として、インデクス情報を生成するインデクス情報生成部と、
過去に配信された各コンテンツのIDを保持する調達情報データベースと、
過去に配信された各コンテンツに対して前記インデクス情報生成部が生成したインデクス情報を、各コンテンツのIDと共に保持するインデクス情報データベースと、
前記取得したIDと一致するものを前記調達情報データベースより調べ、存在する場合に前記今回のオーサリング済みコンテンツが再配信となる旨を判定する再配信判定部と、
前記再配信となる旨が判定された場合に、前記インデクス情報データベースを前記取得したIDを用いて参照して、前記今回のオーサリング済みコンテンツに相当するコンテンツとして過去に配信されたコンテンツのインデクス情報を取得する過去配信時インデクス情報取得部と、
前記今回のオーサリング済みコンテンツに対するサンプル画像を取得するサンプル取得部と、
前記今回のオーサリング済みコンテンツに対して前記生成された今回のインデクス情報と、前記取得された前記過去に配信されたコンテンツのインデクス情報と、のそれぞれにおいて、前記サンプル画像に類似する一連のフレーム番号を類似度の高い順に検索する類似フレーム検索部と、
前記検索された一連のフレーム番号に対応する、前記今回のオーサリング済みコンテンツのフレーム画像と、前記過去に配信されたコンテンツのフレーム画像と、を前記今回のオーサリング済みコンテンツから抽出する検索フレーム抽出部と、
前記抽出されたフレーム画像を表示する抽出結果表示部と、を備えることを特徴とする一致度確認装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、同一の動画像コンテンツを複数回オーサリング及び配信することのある環境下で、当該動画像コンテンツの内容サンプルとして与えられているサンプル静止画像（サムネイル）を利用することで、今回オーサリングしたコンテンツが過去に配信済みのコンテンツと一致するかのユーザによる確認を補助する、コンテンツの一致度確認装置に関する。
【背景技術】
【０００２】
映画やテレビ番組をはじめとする映像コンテンツは、一義的には映画館での上映や放送による視聴のため製作されているが、近年ではDVD/Blu-ray(登録商標)などのパッケージメディアによる販売やVoD(ビデオオンデマンド；Video on Demand)などネットワーク上での配信など二次利用も積極的に行われている。こうした二次利用にあたっては、配信メディアの特性に応じたオーサリングを行った上で、流通・配信が行われる。
【０００３】
ここで、オーサリングとは、コンテンツ権利者からマスタ版を借用し、主に当該メディア情報量に応じたメディア信号の圧縮を行う作業を指す。コンテンツのマスタ版には映画や放送にたえうる高品質の映像が業務用映像フォーマットに基づき収録されているが、その情報量は莫大であり蓄積メディアやオンラインによる流通には適さない。よって、適切な形式に変換するためにオーサリングが行われる。
【０００４】
オーサリングに関して、例えば特許文献１には、シーンの途切れや抽出漏れを低減し、自然な映像を抽出するオーサリング支援装置が開示されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開2012-221322号公報（オーサリング支援装置、オーサリング支援方法およびプログラム）
【発明の概要】
【発明が解決しようとする課題】
【０００６】
オーサリングにより生成されたコンテンツは、その処理過程で品質上の問題が生じていないかが検査される。品質上の問題とは、圧縮などの信号処理により著しい劣化が生じた、機器の故障により正しく再生できない、または一部に内容の欠損がある、コンテンツの取り違えや編集上のミスにより異なるコンテンツが混入するなどの事象が考えられる。
【０００７】
このうち、最後のコンテンツの内容検証に関しては、コンテンツ権利者またはオーサリング運用者があらかじめ作成した静止画サンプルと一致する映像フレームを検索・照合することにより意図したコンテンツが生成されていることを確認するような運用が行われる。
【０００８】
ここで、オーサリングの工程では、パッケージメディア作成を目的にしたものに関しては、パッケージメディアの原盤を作成する際に一度だけ行われ、以降はその原盤を複製したメディア（ディスク）を生産しそれを流通させるのが一般的である。一方、VoDなどのネットワーク配信では、契約上、公開期間が設定されており、公開期間が終了するとオーサリングされたコンテンツは破棄されるのが通例である。
【０００９】
ところで、VoDではコンテンツの配信終了後、一定期間後に再配信するケースがよくある。しかし上記のとおり、以前にオーサリングしたコンテンツは破棄されているので、この場合、再度コンテンツ権利者からマスタ版素材を借用しなおし、オーサリングをやりなおす必要がある。
【００１０】
このオーサリングのやり直しは契約上およびストレージ上の観点で致し方ないため、再配信の都度行うしかない。例えばVoDの場合、毎月数千本の単位で新作のリリースがあるため、契約上保存が可能であったとしても設備的に困難な場合が多い。そして、やり直し作業を行う際、オーサリング工程の作業ミスにより、当初発生しなかった問題・サービス上致命的な障害が再公開時にのみ発生しうる。作業ミスの一例として、シリーズもの（第ｎ話の形式を持つもの）における話数の取り違え等が挙げられる。
【００１１】
こうした作業ミスの可能性を考慮し、運用上「今回オーサリングしたものは、前回公開し、配信したコンテンツと確かに同じ内容である」ことを照合・確認したいという要望がある。しかし、当該作業はコンテンツの意味理解が必要であり、現状では人手に頼るほかない。この照合確認作業に要する工数を削減するための自動化が課題となっている。
【００１２】
本発明は、上記課題に鑑み、過去配信されたコンテンツが必ずしも残っていない環境であっても、今回新たにオーサリングしたコンテンツが、過去に配信したコンテンツと一致しているかに関するユーザの確認作業を補助できる、一致度確認装置を提供することを目的とする。
【課題を解決するための手段】
【００１３】
同一コンテンツに関する動画像のオーサリング及び配信が複数回ありうる環境下にて、今回のオーサリング及び配信対象のコンテンツが、過去にオーサリング及び配信されたコンテンツと同一の内容であるかに関する一致度を判定する一致度確認装置であって、今回のオーサリング済みコンテンツと、そのIDと、を取得するコンテンツ取得部と、前記今回のオーサリング済みコンテンツより、その動画像データから抽出した特徴量時系列として、インデクス情報を生成するインデクス情報生成部と、過去に配信された各コンテンツのIDを保持する調達情報データベースと、過去に配信された各コンテンツに対して前記インデクス情報生成部が生成したインデクス情報を、各コンテンツのIDと共に保持するインデクス情報データベースと、前記取得したIDと一致するものを前記調達情報データベースより調べ、存在する場合に前記今回のオーサリング済みコンテンツが再配信となる旨を判定する再配信判定部と、前記再配信となる旨が判定された場合に、前記インデクス情報データベースを前記取得したIDを用いて参照して、前記今回のオーサリング済みコンテンツに相当するコンテンツとして過去に配信されたコンテンツのインデクス情報を取得する過去配信時インデクス情報取得部と、前記今回のオーサリング済みコンテンツに対するサンプル画像を取得するサンプル取得部と、前記今回のオーサリング済みコンテンツに対して前記生成された今回のインデクス情報と、前記取得された前記過去に配信されたコンテンツのインデクス情報と、のそれぞれにおいて、前記サンプル画像に類似する一連のフレーム番号を類似度の高い順に検索する類似フレーム検索部と、前記それぞれのインデクス情報に対して検索された一連のフレーム番号の比較によって、前記今回のオーサリング済みコンテンツと、当該コンテンツに相当するものとして前記過去に配信されたコンテンツと、の一致度を判定する一致度判定部と、を備えることを第一の特徴とする。
【００１４】
また、上記目的を達成するため、本発明は、同一コンテンツに関する動画像のオーサリング及び配信が複数回ありうる環境下にて、今回のオーサリング及び配信対象のコンテンツが、過去にオーサリング及び配信されたコンテンツと同一の内容であるかに関する一致度のユーザによる判定を補助する一致度確認装置であって、今回のオーサリング済みコンテンツと、そのIDと、を取得するコンテンツ取得部と、前記今回のオーサリング済みコンテンツより、その動画像データから抽出した特徴量時系列として、インデクス情報を生成するインデクス情報生成部と、過去に配信された各コンテンツのIDを保持する調達情報データベースと、過去に配信された各コンテンツに対して前記インデクス情報生成部が生成したインデクス情報を、各コンテンツのIDと共に保持するインデクス情報データベースと、前記取得したIDと一致するものを前記調達情報データベースより調べ、存在する場合に前記今回のオーサリング済みコンテンツが再配信となる旨を判定する再配信判定部と、前記再配信となる旨が判定された場合に、前記インデクス情報データベースを前記取得したIDを用いて参照して、前記今回のオーサリング済みコンテンツに相当するコンテンツとして過去に配信されたコンテンツのインデクス情報を取得する過去配信時インデクス情報取得部と、前記今回のオーサリング済みコンテンツに対するサンプル画像を取得するサンプル取得部と、前記今回のオーサリング済みコンテンツに対して前記生成された今回のインデクス情報と、前記取得された前記過去に配信されたコンテンツのインデクス情報と、のそれぞれにおいて、前記サンプル画像に類似する一連のフレーム番号を類似度の高い順に検索する類似フレーム検索部と、前記検索された一連のフレーム番号に対応する、前記今回のオーサリング済みコンテンツのフレーム画像と、前記過去に配信されたコンテンツのフレーム画像と、を前記今回のオーサリング済みコンテンツから抽出する検索フレーム抽出部と、前記抽出されたフレーム画像を表示する抽出結果表示部と、を備えることを第二の特徴とする。
【発明の効果】
【００１５】
前記第一の特徴によれば、今回のオーサリング済みコンテンツのIDと一致するものが過去配信コンテンツの中にある場合に、それぞれから抽出したインデクス情報において、今回コンテンツに対して用意されているサンプル画像に類似する一連のフレーム番号を求め、当該番号同士の比較によって当該コンテンツ同士の一致度が自動で算出される。従って、ユーザに当該一致度の値を提示することによって、確認作業を補助することができる。この際、過去コンテンツに対しては過去に抽出したインデクス情報のみを参照できればよいので、今回、過去コンテンツそのものを参照する必要がない。
【００１６】
前記第二の特徴によれば、上記一致度算出の基礎となっている、今回及び過去コンテンツにおける類似する一連のフレーム番号に対応する位置におけるフレーム画像が、今回のオーサリング済みコンテンツより抽出され、ユーザに提示すべく表示される。従って、ユーザにおいては、当該提示された今回及び過去に対応するフレーム画像がそれぞれサンプル画像に似ているか否かを目視確認することで、一致判断の補助が得られる。すなわち、ユーザにおいて当初のコンテンツ映像自体を参照させることなく、確認作業を補助することができる。この際、過去コンテンツに対しては過去に抽出したインデクス情報のみを参照できればよいので、今回、過去コンテンツそのものを参照する必要がない。
【図面の簡単な説明】
【００１７】
【図１】一実施形態に係る一致度確認装置の機能ブロック図である。
【図２】一実施形態に係る一致度確認装置の機能ブロック図である。
【図３】抽出結果表示部による表示の一例を示す図である。
【発明を実施するための形態】
【００１８】
図１は、一実施形態に係る一致度確認装置の機能ブロック図である。一致度確認装置100は、コンテンツ取得部10、調達情報データベース(調達情報DB)11、再配信判定部12、インデクス情報生成部13、インデクス情報データベース(インデクス情報DB)14、過去配信時インデクス情報取得部15、サンプル取得部20、類似フレーム検索部21及び一致度判定部22を備える。
【００１９】
コンテンツ取得部10は、一致度確認装置100への第一の入力として、ユーザ(オーサリング作業者)より入力される、今回配信対象となっているコンテンツのオーサリングされた後の動画像ファイル(オーサリング済みコンテンツ)と、当該ユーザが付与した当該動画像ファイルにおけるコンテンツを一意に識別するIDと、を取得する。
【００２０】
一方、一致度確認装置100へのユーザによる第二の入力として、当該コンテンツ取得部10で取得するコンテンツの動画像ファイルに対応するサンプル静止画を、サンプル取得部20が取得する。当該サンプル静止画は、コンテンツの配信の際にサイト上にコンテンツを示すために提示するのにも利用可能なサムネイル画像であって、当該コンテンツのマスタ素材の所有者によってマスタ素材内のフレームから選択されたものであってもよいし、オーサリング作業者等が自身でマスタ素材又はオーサリング後動画像のフレームから選択したものであってもよい。
【００２１】
なお、サンプル取得部20で取得するサンプル画像はコンテンツのサムネイルであるが、その解像度やサイズに関してはマスタ素材と同様であっても、オーサリング後のものと同等であっても、また、その他の値が設定されていてもよい。また、サンプル画像は当該１つのコンテンツに対して複数用意され、サンプル取得部20にて取得してもよい。
【００２２】
オーサリング作業では、その少なくとも一部分において何らかのマニュアル作業が伴うので、オーサリング後の動画像ファイルと、コンテンツのIDと、サンプル静止画像と、の3者の対応付けのうち少なくとも一部分において、間違いが生じてしまう場合もありうる。本発明によれば、過去の同一内容コンテンツの配信があった場合に、当該過去コンテンツと今回のオーサリング後のコンテンツとの一致度を自動判定することで、当該間違いを検出することが可能となる。また、間違いがない場合もその旨の確認を容易に行えるようになる。
【００２３】
調達情報DB11は、オーサリング後に当該一致度確認装置100を利用して内容チェックがなされ配信された一連のコンテンツのIDを、その配信履歴と共に管理する。当該管理により、再配信判定部12からの問い合わせへの回答が可能となる。なお、配信履歴の記録形式は、実際のコンテンツ配信期間をユーザ入力によって記録しておくようにしてもよいし、当該コンテンツIDに対する再配信判定部12からの問い合わせの日時のみの簡略化した形式で記録しておいてもよい。
【００２４】
なお、マスタ素材の所有者のデータベース等と連動させることで、調達情報DB11は未配信のコンテンツに関する情報をも含んだ一連の情報を、当該一致度確認装置100を利用しての配信の有無の情報と共に管理してもよい。コンテンツ取得部10ではオーサリング後の動画像ファイルのみを取得して、上記一連の情報が管理された調達情報DB11を参照することで、ファイル名又はチェックサムなどを利用することにより、そのIDを自動で取得するようにしてもよい。（ただし、自動取得させるためには予め何らかのマニュアル設定が必要となる。当該マニュアル設定が間違っていた場合であっても、本発明により確認を行うことができる。）
【００２５】
再配信判定部12は、コンテンツ取得部10が取得した今回の配信対象となっているコンテンツのIDを、調達情報DB11内で検索することで、同一のコンテンツに関して過去に配信履歴があったか否か、すなわち、今回の配信が再配信に該当するか否かを判定する。
【００２６】
再配信に該当する場合、再配信判定部12がその旨及びコンテンツIDを伝えることによって、過去配信時インデクス情報取得部15以降の処理(過去配信時インデクス情報取得部15、類似フレーム検索部21及び一致度判定部22の処理)が実施される。
【００２７】
再配信に該当しない場合(初回配信となる場合)は、過去配信時インデクス情報取得部15以降の処理は実施できないため省略されるが、当該新規に配信対象となっているコンテンツのオーサリング済みファイルに対して、後述するインデクス情報生成部13の生成処理及びインデクス情報DB14の格納処理は再配信の場合と同様に実施される。こうして、今回より後の時点において同じIDのコンテンツを対象とした再配信に該当するオーサリングがあった場合に、一致度確認装置100にて再配信に対応する処理が可能となる。
【００２８】
なお、初回配信であって再配信に該当しない場合は、後述の一致度判定部22からの一致度を出力できないので、代わりに、図中に点線矢印で描いてあるように、初回配信である旨を当該再配信判定部12がユーザへと通知する。
【００２９】
インデクス情報生成部13は、コンテンツ取得部10が取得した今回配信対象となるコンテンツのオーサリング済み動画像ファイルより、そのフレーム時系列上で抽出した特徴量時系列として、インデクス情報を生成し、そのコンテンツIDと対応付けて、インデクス情報DB14へと格納する。当該インデクス情報DB14への格納は、再配信判定部12での再配信か否かの判定結果がいずれであった場合においても、実施される。当該インデクス情報における特徴量時系列においては、各フレームから抽出される任意の種類の特徴量を採用してよい。
【００３０】
一方、判定結果が再配信であった場合においてはさらに、インデクス情報生成部13の生成したインデクス情報は、インデクス情報DB14に格納されるのみでなく、図1中に「今回生成したインデクス情報(D2)」として示すように、類似フレーム検索部21へも渡される。
【００３１】
インデクス情報DB14は、上記のようにインデクス情報生成部13が機能することで、配信対象となるコンテンツがありそのオーサリング済みファイルが用意されるごとに、そのインデクス情報をコンテンツIDと対応付けて保存していく。同一IDのコンテンツに対して再配信により2回以上インデクス情報が生成される場合、調達情報DB11にて管理された配信履歴の情報を対応付けることで、同一IDのコンテンツであってもさらに区別を設けて保存する。
【００３２】
あるいは、当該保存に関して、同一IDのコンテンツ毎に直近の過去配信に該当するインデクス情報のみを保存するようにして、同一IDコンテンツの再配信があり、当該一致度確認装置100を用いた確認作業が完了する都度、当該完了した旨をユーザ入力で受け付けることにより、既に保存されていたインデクス情報を削除するようにしてもよい。
【００３３】
なお、過去に一度も配信されていない、初回配信のコンテンツのオーサリング済みファイルに対して当該インデクス情報生成部13及びインデクス情報DB14が処理を実施する際は、付与されたIDで示されるコンテンツとオーサリング済みファイルに含まれるコンテンツとが一致しており、ID付与に間違いのない旨をユーザが確認しておくものとする。後述するように、当該確認の作業も本発明によって補助することが可能である。
【００３４】
過去配信時インデクス情報取得部15は、再配信判定部12にて今回配信対象のコンテンツが再配信である判定がなされた場合に、そのコンテンツIDによってインデクス情報DB14を検索し、同一コンテンツが過去に配信された際にインデクス情報生成部13で生成されたインデクス情報を取得し、図1中に「過去に生成されたインデクス情報(D1)」として示すように、類似フレーム検索部21へ渡す。
【００３５】
なお、当該コンテンツIDに対して、過去に生成されたインデクス情報が2回分以上存在する場合は、そのうち所定の1つ(例えば直近の過去に生成されたもの)を取得して、類似フレーム検索部21へと渡すようにすればよい。
【００３６】
類似フレーム検索部21及び一致度判定部22の処理の意義は次の通りである。当該処理の具体的内容は、当該意義の後に説明する。
【００３７】
現行のオーサリング工程のマスタ素材は前回配信時に提供された素材と同一であるとは限らない(例えば、コンテンツの大部分は「本編」として共通であるが、各回で異なる短い特典映像その他が配されるなどで、完全には同一でなくなることがある)ため、このインデクス情報(D2)は、過去に生成されたインデクス情報（過去配信時インデクス情報取得部15で抽出したインデクス情報D1）とは完全一致することはない。よって、この段階での照合（D1とD2とを直接的に照合すること）は不可能である。
【００３８】
ただし、現行のマスタ素材に対して提供されているサンプル静止画に一致するフレームは過去・現行のいずれのコンテンツにも共通な「本編」内に含まれているという前提は通常ほぼ常に成り立つため、過去・現行の2つのインデクス情報(D1及びD2)のそれぞれとサンプル静止画との照合を行い、その結果が一致する、あるいは結果の類似度が非常に高いことをもって、過去配信コンテンツと今回の入力動画像ファイルの内容が一致するとみなすことができる。
【００３９】
当該2つの照合処理に関して、図1では、類似フレーム検索部21のブロック内部に補助説明を加えてある。すなわち、過去配信におけるインデクス情報D1を用いた検索処理を類似フレーム検索処理(1)として、また、インデクス情報生成部13により出力された今回のインデクス情報D2を用いた検索処理を類似フレーム検索処理(2)として、比較されるデータを示す矢印と共に描いている。さらに図示するように、当該2つの照合処理の結果が一致度判定部22にて比較され、最終的な結果が得られる。以下、これら処理の詳細を説明する。
【００４０】
類似フレーム検索部21は、同一の検索手法によって、上記概要を説明した2つの検索処理を実施し、当該2つの検索結果を一致度判定部22へ渡す。第一の検索処理として、今回配信対象であるコンテンツと同一とされる過去コンテンツに対して過去配信時インデクス情報取得部15が取得したインデクス情報(D1)内より、サンプル取得部20で取得した今回配信対象のコンテンツに対するサンプル静止画に類似するフレーム番号を検索し、その類似度の高い順番に並べて上位側の所定数n個のフレーム番号を出力する。
【００４１】
同様に、第二の検索処理として、今回配信対象のコンテンツのオーサリング後ファイルよりインデクス情報生成部13にて生成されたインデクス情報(D2)内より、サンプル取得部20で取得した今回配信対象のコンテンツに対するサンプル静止画に類似するフレーム番号を検索し、その類似度の高い順番に並べて上位側の所定数n個のフレーム番号を出力する。
【００４２】
当該２つの検索処理の出力の数値例(概念的な例)を挙げる。例えば、過去インデクス情報D1がフレーム長105を有し、上位n=3個のフレーム番号が順に、(10, 80, 25)となる。今回のインデクス情報D2がフレーム長100を有し、上位n=3個のフレーム番号が順に、(9, 79, 30)となる。なお、当該例においては、前述のように同一コンテンツであっても配信ごとにマスタ素材の加工(特典映像の配置など)に微差がある場合があることを想定して、フレーム長として105及び100のように異なるものが与えられている。
【００４３】
なお、サンプル静止画が複数存在する場合は、サンプル取得部20で当該複数のサンプル静止画を取得し、類似フレーム検索部21は各サンプル静止画 i ( i=1, 2, ..., m )につきそれぞれ、当該2つの検索処理を行い、一致度判定部22へと出力する。出力される類似度の高い上位n個の個数も、n=n(i)として、サンプル静止画iごとに個別の定数としてもよい。
【００４４】
当該２つの検索処理を実施するための共通の検索手法には、映像より抽出された画像特徴量の時系列であるインデクス情報と、サンプル静止画の特徴量と、を比較する任意の類似画像検索手法を用いることができる。なおここで、サンプル静止画の特徴量は、インデクス情報の特徴量と同種類の特徴量として、すなわち、長さが1(時系列上の個数が1)のインデクス情報として、類似フレーム検索部21が抽出することにより検索を実施する。当該検索における好適な手法として、以下の特許文献2に開示の手法を利用してもよい。
【００４５】
[特許文献２]特開2011-248671号公報：多数の参照用映像の中から検索キー用映像を用いて検索する映像検索装置、プログラム及び方法
【００４６】
上記特許文献２では、検索対象となる多数の「参照用映像」(ある程度の長さを有する)の中から、「検索キー用映像」(参照用映像よりは短い映像)を用いて該当区間を検索する技術が開示されている。ここでは、参照用映像より「辞書」を生成し、当該辞書で参照用映像のインデクス情報及び検索キー用のインデクス情報を得る。そして、参照用映像内において検索キー用映像の位置をスライドさせながら、当該インデクス情報同士の比較によって各位置での類似度(「投票数」)を算出し、類似度最大の位置に相当するものとして、該当区間が検索される。
【００４７】
当該技術を本発明に適用する場合、検索キー用映像として、長さ1の映像とみなせるサンプル静止画を利用し、参照用映像として、今回及び過去のコンテンツを利用するようにし、また、類似度が最大となる位置のみではなく上位所定数の位置を求めることによって、２つの検索処理を実施すればよい。この場合、インデクス情報生成部13によるインデクス情報の生成も、特許文献2の手法を用いればよい。
【００４８】
なお、特許文献２の技術を利用する場合、前述のように2つの検索処理のそれぞれにおけるサンプル静止画のインデクス情報を生成する際に、今回・過去のインデクス情報から予め生成された辞書が必要となる。当該辞書はインデクス情報生成部13がインデクス情報を生成する際に生成し、インデクス情報と対応づけてインデクス情報DB14に格納しておき、類似フレーム検索部21が参照して利用すればよい。あるいは、個別の辞書を利用するのではなく、共通の１つの辞書を用意しておいて特許文献２の技術を利用してもよい。また、こうした辞書を必要としないその他の技術によるインデクス情報を利用する場合においては、対応する手法でインデクス情報を生成して検索を実施すればよい。
【００４９】
一致度判定部22は、類似フレーム検索部21の出力したサンプル静止画ごとの2つの検索結果を比較することにより、今回のオーサリング済みファイルにおけるコンテンツと、IDの共通性により同一コンテンツであるものとされた過去配信されたコンテンツと、の実際の内容上における一致度を求め、一致度確認装置100の出力となす。
【００５０】
ここで、当該2つの検索結果の比較においては、類似フレーム番号を上位から所定数n個並べた当該2つの番号系列が似ているほど、対応するコンテンツ同士も似ているものとして一致度を求め、当該サンプル静止画ごとに求めた一致度を総計して、最終的な一致度を求める。当該番号系列の類似による一致度は、今回・過去コンテンツにおいて、大部分を占める「本編」は共通であり、特典映像などのその他の小部分のみが異なっており、何らかの間違いがない限りサンプル画像の類似フレームは「本編」から得られる、ということに基づく。
【００５１】
従って、i番目(i=1, 2, ..., m)のサンプル静止画に対し、過去インデクス情報D1及び今回のインデクス情報D2のそれぞれに対する検索結果として得られた、フレーム番号の系列をC1(i, j), C2(i, j)とするとき、一致度Sを以下の(式1)のように求めることができる。なおここでjは、当該検索結果における順位を表す。例えば、前述のD1及びD2に対する検索結果の数値例(10, 80, 25)及び(9, 79, 30)においてサンプル画像のインデクスをi=1であるとすれば、当該数値例は当該表記によれば、C1(1, 1)=10, C1(1, 2)=80, C1(1, 3)=25及びC2(1, 1)=9, C2(1, 2)=79, C2(1, 3)=30となる。
【００５２】
【数１】
2014191408.tif 000003
【００５３】
上記(式1)にて、M(Xj , Yj)は系列Xj , Yjの一致度合いを表すメトリックであり、種々のものが利用可能である。メトリックの一例として、以下の(式2)のピアソンの相関係数が挙げられる。
【００５４】
【数２】
2014191408.tif 000004
【００５５】
あるいは、系列Xj , Yj間におけるp-norm(pノルム)、すなわち、当該系列の各要素の差(Xj −Yj)を要素としたpノルムを求め、当該pノルムの値が小さいほど一致度合いが大きくなるように、当該pノルムに対してさらに所定の単調減少関数f(x)を用いた以下の(式3)をメトリックとして用いてもよい。
【００５６】
【数３】
2014191408.tif 000005
【００５７】
また、上記(式1)のメトリックとして、Xj , Yjに対するケンドールの順位相関係数を利用してもよい。
【００５８】
なお、上記メトリックを求める際に、上記のXj , Yj(類似フレーム検索部21が出力したそのままの結果)に代えて、一致度判定部22にてあらかじめXj , Yjをそれぞれ昇順または降順に並べ替えておいてから、メトリックを求めてもよい。この場合、類似フレーム検索部21での2つの検索結果を比較した際に、類似度が近いためノイズ程度の差によって偶然順位がi番目とi+1番目との間で逆転しているような箇所がある場合に、当該逆転によって必要以上に一致度を低く算出してしまうことを抑制できる。
【００５９】
なおまた、以上のようにして数値として求めた一致度に対してさらに、所定閾値による判定を加えることによって、一致度が高い場合は同一コンテンツであり、一致度が低い場合は異なるコンテンツである、との2値判断を出力としてもよい。
【００６０】
なお、今回・過去のコンテンツにおけるフレームレートが異なっている場合、上記「フレーム番号」を「フレーム時刻」に置き換えて同様に一致度を求めればよい。
【００６１】
図2は、図1とは別の一実施形態に係る一致度確認装置100の機能ブロック図であり、当該実施形態では、図1の構成における一致度判定部22の代わりに、検索フレーム抽出部25及び抽出結果表示部26を備えて一致度確認装置100は構成される。
【００６２】
図1の実施形態では、出力として、コンテンツ一致度の数値又は当該数値に基づくコンテンツの一致／不一致の判定結果が与えられた。図2の実施形態では、当該コンテンツの一致／不一致をユーザが目視確認する際の参考となる、一連のフレーム画像が出力される。従って、コンテンツを映像として再生することなく、一連の静止画の目視によってある程度の確認が可能となるため、特に明らかな間違いがある場合などに早期に間違いを発見可能であり、手間が低減される。
【００６３】
図2の実施形態では、類似フレーム検索部21までの各機能部(参照番号が21以下の機能部)については、図1で説明した実施形態と同様に機能する。図2の実施形態では、再配信判定部12が再配信である旨を判定した場合、過去配信時インデクス情報取得部15、類似フレーム検索部21、検索フレーム抽出部25及び抽出結果表示部26が各処理を実施し、再配信でないと判定した場合、当該各処理は実施されない。
【００６４】
検索フレーム抽出部25は、入力として、図1の実施形態にて類似フレーム検索部21が一致度判定部22に渡したのと同様の、各サンプル静止画iにおける過去・今回のフレーム番号の検索結果（前述のC1(i, j)及び C2(i, j)）と、コンテンツ取得部10で取得した今回のオーサリング済みコンテンツと、を受け取る。
【００６５】
検索フレーム抽出部25は、図2中に検索フレーム抽出処理(1),(2)として補助説明してあるように、各サンプル静止画iにつき、2つの抽出処理を実施する。第一に、今回のオーサリング済みコンテンツ内より、過去インデクス情報D1の検索結果C1(i, j)に対応するフレームの静止画を、当該順位jの順に抽出する。
【００６６】
当該第一の抽出の際には、当該過去コンテンツにおけるフレーム番号C1(i, j)をそのまま今回のオーサリング済みコンテンツの番号として採用して、抽出してもよい。ここで、該当番号が存在せず抽出不能の場合はその旨を出力してもよい。
【００６７】
あるいは、今回生成されたインデクス情報D2のフレーム長がL2であり、過去インデクス情報D1のフレーム長がL1であるとし、L2とL1とが異なる場合、当該フレーム長による規格化を行い、今回のオーサリング済みコンテンツにおける以下の(式4)のフレーム番号C1'(i, j)に該当するフレーム画像を抽出してもよい。当該番号が整数でない場合は四捨五入などで整数とすればよい。
【００６８】
あるいは、1番目(j=1)の検索結果のフレームは過去・今回で同じフレームである仮定のもと、当該フレームによって過去・今回のフレーム番号の位置合わせを実施して、以下の(式5)のフレーム番号C1"(i, j)に該当するフレーム画像を抽出してもよい。(式5)の該当フレーム番号が存在せず抽出不能の場合はその旨出力してもよい。
【００６９】
【数４】
2014191408.tif 000006
【００７０】
なお、(式4)における長さの規格化を実施する場合には、フレーム長が長い側のコンテンツを短い側に合わせるように規格化すると、フレーム番号が重複することになる。この場合、フレームを一意に識別することができなくなる。従って、重複している番号のうち所定のもの(一番大きい、一番小さい又は中央の番号など)のみを残す等の付随処理を行ってもよいが、好ましくは、重複を避けるため、以下の(式4-1),(式4-2)のように、規格化する際は短い方を長い側に合わせるようにすることができる。
【００７１】
【数５】
2014191408.tif 000007
【００７２】
なお仮に、当該コンテンツIDにつき、オーサリングして過去配信した際のファイルが破棄する等されずに、あるいは配信後一定期間経過の後に廃棄する取り決め等のもとで、今回のオーサリングの時点にて保存されている場合は、上記(式4)や(式5)を適用することなく、当該保存ファイルより直接抽出してよい。すなわち、過去インデクス情報D1の検索フレーム番号C1(i, j)のフレーム画像を、当該保存されている過去配信ファイルから抽出してもよい。当該保存はIDと対応付けて、インデクス情報DB14にて実施すればよい。
【００７３】
検索フレーム抽出部25はさらに、第二の抽出として、今回のインデクス情報D2の検索結果C2(i, j)に対応するフレームの静止画を、当該順位jの順に抽出する。この際は、当該フレーム番号C2(i, j)に該当するフレームをそのまま、今回のオーサリング済みコンテンツから抽出すればよい。
【００７４】
抽出結果表示部26は、検索フレーム抽出部25の抽出したフレーム画像をユーザの目視に供すべく、表示する。この際、対応するサンプル静止画iも表形式などによって対応関係を明示したうえで表示するようにしてよい。
【００７５】
図3は、抽出結果表示部26によって当該表示される画面の例であり、その画面の一部分におけるレイアウト例として、サンプル静止画1及び2に対する今回・過去の類似フレームが上位3位まで表示されたところが示されている。ここではコンテンツID等の付随情報も表示されている。なお、ユーザによる画面スクロール操作などにより、図3に描かれていないその他の結果もさらに同様にして表示されてよい。
【００７６】
従って、ユーザは、各サンプル静止画iにおける、今回のインデクス情報D2から今回のオーサリング済みコンテンツ内の類似箇所として順次検索された一連のフレーム画像と、過去のインデクス情報D1から対応する今回のオーサリング済みコンテンツ内の類似箇所として検索された一連のフレーム画像と、を目視確認可能となる。当該一連のフレーム画像はすなわち、図1の実施形態で一致度を算出した際の算出の基礎となる画像に相当するので、ユーザはこれら画像同士を直接目視によって比較し、極端に異なっているような場合は、間違いがある可能性が高いことを早期に気付くことができる。
【００７７】
なお、今回のオーサリング済みコンテンツが初回配信である場合、次のように図2の一致度確認装置100を機能させ、ユーザによるチェックの作業を補助するようにしてもよい。
【００７８】
すなわち、ユーザはチェック作業として、サンプル画像が当該初回配信のコンテンツ内に存在する正しいサムネイルとなっているかを確認することで、ID付与が間違っていないかを確認する。当該チェックにより、前述のようにインデクス情報DB14にインデクス情報を初めて格納する際も間違いがないことを確認できる。
【００７９】
当該チェック作業を補助すべく、今回生成されるインデクス情報D2のみを用いて類似フレーム検索部21、検索フレーム抽出部25及び抽出結果表示部26を機能させてもよい。ユーザは、当該初回配信コンテンツにおけるサンプル画像に類似する一連のフレーム画像につき、その抽出結果を得て、目視によりサンプル画像に該当するフレームが存在しているか確認することができる。この場合、図3の表示例であれば、今回・過去のうち今回のみが表示されることとなる。
【００８０】
以下、補足的事項を説明する。
【００８１】
図1及び図2の実施形態は組み合わせてもよい。この場合、類似フレーム検索部21の後段側を図1の構成と図2の構成とで並列的に構成して、当該各実施形態における両方の出力(一致度と、一連の類似フレーム検索結果)がユーザに提示される。
【００８２】
オーサリング済みコンテンツに対し、ID付与又はサンプル画像の対応付けに間違いがあった場合、ユーザはその旨を一致度確認装置100へ入力することで、当該間違いを含んだデータ(IDなど)をユーザ入力で修正するか、あるいは、間違いを含んだデータを削除して、当該コンテンツにおける正しいデータを入力として与えて再度、一致度確認装置100の利用を行うものとする。当該修正ないし削除は、オーサリング済みコンテンツが初回配信か、再配信かに限らず実施する。こうして、調達情報DB11及びインデクス情報DB14が正確に構築及び更新され、一致度確認装置100の適切な運用が可能となる。
【００８３】
過去配信コンテンツにおけるサンプル画像が保存され、利用可能である場合は、以上説明した、今回のオーサリング済みコンテンツと今回のサンプル画像と、を入力として各種の出力を得るのに加えてさらに、今回のサンプル画像を過去のサンプル画像に置き換えて本発明を実施してもよい。すなわち、今回のオーサリング済みコンテンツと過去のサンプル画像と、を入力として同様の各種の出力を得るようにしてもよい。この場合、ユーザは今回・過去のサンプル画像によって２重にチェックを行うことが可能となる。
【符号の説明】
【００８４】
100…一致度確認装置、10…コンテンツ取得部、11…調達情報DB、12…再配信判定部、13…インデクス情報生成部、14…インデクス情報DB、15…過去配信時インデクス情報取得部、20…サンプル取得部、21…類似フレーム検索部、22…一致度判定部、25…検索フレーム抽出部、26…抽出結果表示部
【図１】
2014191408.tif 000008
【図２】
2014191408.tif 000009
【図３】
2014191408.tif 000010