(57)【要約】【課題】コンテンツの映像や音響等の各チャネルにインデックスおよび重要度を付与しておき、各チャネルにダイジェストに最適な部分を選択して、ダイジェストを作成することにより、情報量の多いダイジェストを提供することを目的とする。【解決手段】本発明のダイジェスト作成装置は、複数のデータから構成されるコンテンツを、前記各データの内容に応じてセグメントに分離し、前記セグメント毎に前記内容を示すインデックスを付与するインデックス付与手段と、前記インデックスを用いて選択された前記セグメントを蓄積し、コンテンツのダイジェストを作成するダイジェスト作成手段とを含む構成であり、ダイジェスト作成に必要なセグメントのみを選択することで、情報量の多いダイジェストを作成することが可能となる。【選択図】図１
2005229366.tif 000002
【特許請求の範囲】
【請求項１】
複数のデータから構成されるコンテンツを、前記各データの内容に応じてセグメントに分離し、前記セグメント毎に前記内容を示すインデックスを付与するインデックス付与手段と、前記インデックスを用いて選択された前記セグメントを蓄積し、コンテンツのダイジェストを作成するダイジェスト作成手段とを含むダイジェスト作成装置。
【請求項２】
ダイジェスト作成手段は、選択されたセグメントを、同期させてコンテンツのダイジェストを作成する請求項１記載のダイジェスト作成装置。
【請求項３】
ダイジェスト手段は、セグメント間の類似度を付与する類似度付与手段を更に含み、前記類似度とインデックスとを用いてセグメントを選択する請求項１記載のダイジェスト作成装置。
【請求項４】
複数のデータから構成されるコンテンツを、前記各データの内容に応じてセグメントに分離し、前記セグメント毎に前記内容を示すインデックスを付与する第１のステップと、前記インデックスを用いて選択された前記セグメントを蓄積し、コンテンツのダイジェストを作成する第２のステップとを含むダイジェスト作成方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映画やＴＶ番組、講演等の映像音響コンテンツを、本来の時間よりも短い時間で効率的に視聴するための装置および方法に関し、特に映像情報や音響情報等の各チャネルの情報を独立に制御することにより、情報量の多い効率的なダイジェストを作成することを目的とする。
【背景技術】
【０００２】
図６は、従来のダイジェスト作成装置により作成されるダイジェストの構成を示したものである。コンテンツは、映像のインデックスが付与され、ユーザの要求条件で、例えば「３分でニュースが見たい」等の要求が提示された場合に、ニュース映像ではアナウンサの登場するシーンがニュースの概要を読み上げるシーンとなるというニュース・コンテンツの構造を利用して、アナウンサが登場する映像部分を選択して、ユーザの要求にあわせて作成されたダイジェストが送出される（例えば、特許文献１参照）。
【０００３】
また、番組映像とともに、その補足情報が番組付加情報として送信される放送環境下において、そのダイジェスト作成をリアルタイムで行うために、あるイベントが起こった時点において（例えば、野球ゲームにおける逆転）、そのきっかけとなった過去のイベント（例えばヒット等）の重要性をあげることによって、より効率の良いダイジェスト作成方法を示している（例えば、特許文献２参照）。
【０００４】
ここで、ダイジェストを構成するコンテンツを選択するための重要性や類似性は、コンテンツの各セグメントに対して付与され、コンテンツを構成する映像、音響等のそれぞれのチャネルに対して付与されるものではなく、実際のコンテンツを考えると、常に同じアナウンサ映像が表示されるダイジェストよりは、音響データは概要が述べられるアナウンサ映像部分の情報の重要性が高いが、映像情報としては、より具体的な中継部分の映像の方が情報は多い、という場合が多々ある。
【特許文献１】特開２００２−０４４５７３号公報
【特許文献２】特開２００２−３３０３９３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
本発明は、かかる点に鑑みてなされたもので、コンテンツの映像や音響等の各チャネルにインデックスおよび重要度を付与しておき、各チャネルにダイジェストに最適な部分を選択して、ダイジェストを作成することにより、情報量の多いダイジェストを提供することを目的とする。
【課題を解決するための手段】
【０００６】
前記従来の課題を解決するために、本発明のダイジェスト作成装置は、複数のデータから構成されるコンテンツを、前記各データの内容に応じてセグメントに分離し、前記セグメント毎に前記内容を示すインデックスを付与するインデックス付与手段と、前記インデックスを用いて選択された前記セグメントを蓄積し、コンテンツのダイジェストを作成するダイジェスト作成手段とを含む構成であり、ダイジェスト作成に必要なセグメントのみを選択することで、情報量の多いダイジェストを作成することが可能となる。
【発明の効果】
【０００７】
以上のように、本発明によれば、コンテンツの映像や音響等の各チャネルにインデックスとして内容や重要度、類似度を付与しておき、各チャネルにダイジェストに最適な部分
を選択して、時間的に同期しないチャネルの情報を再構築してダイジェストを作成することにより、情報量の多いダイジェストを提供することができる。
【０００８】
すなわち、音響情報や映像情報等に対して個別にインデックスを付与し、時間的に異なるタイミングの音響情報や映像情報等を同期させて新しいダイジェストを作成することにより、情報量の多いダイジェストを作成することができる。
【発明を実施するための最良の形態】
【０００９】
本発明の第１の発明は、複数のデータから構成されるコンテンツを、前記各データの内容に応じてセグメントに分離し、前記セグメント毎に前記内容を示すインデックスを付与するインデックス付与手段と、前記インデックスを用いて選択された前記セグメントを蓄積し、コンテンツのダイジェストを作成するダイジェスト作成手段とを含むダイジェスト作成装置とするものであり、ダイジェスト作成に必要なセグメントのみを選択することで、情報量の多いダイジェストを作成するという作用を有する。
【００１０】
本発明の第２の発明は、ダイジェスト作成手段は、選択されたセグメントを、同期させてコンテンツのダイジェストを作成する請求項１記載のダイジェスト作成装置とするものであり、選択されたセグメントを同期して出力するため、時間を短縮することができるという作用を有する。
【００１１】
本発明の第３の発明は、ダイジェスト手段は、セグメント間の類似度を付与する類似度付与手段を更に含み、前記類似度とインデックスとを用いてセグメントを選択する請求項１記載のダイジェスト作成装置とするものであり、類似度を参照することで、コンテンツ内で強調されているセグメントを選択することや、重複しているセグメントを削除することができるという作用を有する。
【００１２】
本発明の第４の発明は、複数のデータから構成されるコンテンツを、前記各データの内容に応じてセグメントに分離し、前記セグメント毎に前記内容を示すインデックスを付与する第１のステップと、前記インデックスを用いて選択された前記セグメントを蓄積し、コンテンツのダイジェストを作成する第２のステップとを含むダイジェスト作成方法とするものであり、ダイジェスト作成に必要なセグメントのみを選択することで、情報量の多いダイジェストを作成するという作用を有する。
【００１３】
以下、本発明の実施の形態について、図を用いて説明する。
【００１４】
（実施の形態１）
図１に本発明の実施の形態１におけるダイジェスト作成装置の構成を示す。入力されるコンテンツは、映像データを示す映像チャネル、音響データを示す音響チャネル、文字データを示す文字チャネルから構成される。インデックス付与部２００は、映像チャネル・タグ付与部２０１、音響チャネル・タグ付与部２０２、文字チャネル・タグ付与部２０３、チャネル分離部２０４から構成される。入力されたコンテンツの信号を、チャネル分離部２０４が、映像・音響・文字の３種以上に分割することも可能であるが、本実施例ではこの３種とする。
【００１５】
映像チャネル・タグ付与部２０１、音響チャネル・タグ付与部２０２及び文字チャネル・タグ付与部２０３では、シーンカット技術、音声区間検出技術、音声認識技術等の従来の技術を用いて、各信号の区間分割であるセグメンテーションを行い、セグメント毎にインデックスが付与される。なお、区間分割およびインデックス付与は、従来の技術を用いて自動で行ってもよいし、マニュアルで行っても良い。また、インデックス情報は、各セグメントのデータの情報を示すものである。
【００１６】
ダイジェスト作成部３００は、ダイジェストを作成する場合に使用する映像データを選択する映像選択部３０１、ダイジェストを作成する場合に使用する音響データを選択する音響選択部３０２、ダイジェストを作成する場合に使用する文字データを選択する文字選択部３０３及び選択された部分的なデータを一旦蓄積し、効率的に配置してダイジェストとして構築するダイジェスト構築部３０４とから構成される。
【００１７】
要求条件入力部５００は、ユーザが要求を入力するものであり、例えば、コンテンツの種類、コンテンツの容量、各データの優先度などを指定し、要求条件としてダイジェスト構築部３０４に出力される。なお、本発明のダイジェスト作成装置は、要求条件入力部５００を省略する構成とすることも可能であり、この場合は、入力されたコンテンツは、予め定めた条件により作成されることになる。
【００１８】
このように作成されたダイジェストは、ダイジェスト送出部４００を通じて提供される。
【００１９】
図２にダイジェストの作成手順について詳細に示す。入力されるコンテンツがニュース番組である場合は、コンテンツの最初にヘッドラインがあり、その後に、各ニュースの解説があるという構成を持つ。ここで、映像チャネルの情報には、アナウンサ映像や中継映像といったインデックスが付与される。インデックスとしては、さらに細かい分割も可能だが、説明の簡素化のためアナウンサ映像・中継映像とする。同様に音声チャネルには、概要説明、中継音声等のインデックスが付与され、文字チャネルには、概要説明、中継情報等のインデックスが付与される。
【００２０】
従来のダイジェストでは、インデックスは映像や音響等チャネル別に付与されていても、ダイジェストとしては、同じタイミングのもの、すなわち、チャネル毎に分離されていないコンテンツの一部分を切り取る形で作成されている。本発明では、情報量の多いダイジェストを作成するために、映像データおよび音響データのタイミングが異なる場合であっても選択することとし、選択された映像データと音響データを同期させて構成することにより情報量の多いダイジェストを構築する。
【００２１】
図２では、ニュース１について、映像チャネルは「ニュース１中継映像」を選択し、音響チャネルは「ニュース１概要説明」を選択する。
【００２２】
このように、本実施例の構成に寄れば、音声チャネル、映像チャネル等夫々に最適な部分を選択してダイジェストとして再構築することにより、情報量の多いダイジェストを提供することができる。
【００２３】
（実施の形態２）
図３は、実施の形態２におけるコンテンツ作成手順を示した図である。コンテンツのセグメント分割は、実施の形態１より細かくなっている。実施の形態１では、映像チャネル、音響チャネルの選択されたセグメント全体の情報をダイジェスト作成に用いていたが、本実施例では、各セグメント情報の一部を用いて、できる限り多くのセグメントをダイジェスト構築に採用する。
【００２４】
ここで、図３において、映像チャネルは、Ａのアナウンサの映像と、Ｓのニュース１内で利用される各映像データのセグメントから構成される。Ａ０１は、ヘッドラインのアナウンサ映像、Ａ１１は、ニュース１の最初のアナウンサ映像を示し、Ｓ１１〜Ｓ１４は、ニュース１内の映像データを示す。
【００２５】
図３では、各々のセグメントから短い映像を切りだして使うことにより、音響チャネルは、「概要説明」の音響データを使用し、映像チャネルは、アナウンサの映像以外を用いて「Ｓ１１、Ｓ１３、Ｓ１５、Ｓ１７」を用いて構成した。
【００２６】
以上の構成より、本実施の形態では、同じ時間のダイジェストでも映像に関するより多くの情報を提供することが可能となる。
【００２７】
（実施の形態３）
図４に本発明の実施の形態３におけるダイジェスト作成装置の構成を示す。実施の形態１の構成に加えて、映像チャネルの映像データに対して類似度付与部３０５を含む構成となる。
【００２８】
類似度付与部３０５では、各セグマントの映像データの類似度を求める。実施の形態２と同様、Ａ０１、Ａ１１、Ｓ１１〜Ｓ１４のセグメントを持つニュース映像の各セグメントの類似度を、図６に示す。映像の類似度を求める方法としては、各セグメントの平均的映像の色成分の差分、パターンマッチング、特徴量など、従来技術を用いることができる。
【００２９】
図５の第１行は、Ａ０１とＡ１１との類似度および、Ａ０１とＳ１１〜Ｓ１４との類似度を５段階評価した結果を示す。以降の行についても同様である。ここで、Ａ０１とＡ１１とは、同じアナウンサ映像なので、類似度は高く「５」であり、Ａ０１とＳ１１〜Ｓ１４とは、アナウンサ映像と中継映像で類似度は低く全て「０」となる。
【００３０】
以上より、図５では、Ａ０１、Ａ１１が同じアナウンサ音声で類似度５、Ｓ１１、Ｓ１２、Ｓ１４が類似度３、Ｓ１３は他のセグメントとは類似度０、という結果となり、映像選択部３０１では、夫々のグループからダイジェストとして利用する映像情報を選択する。ただし、同じグループに属するＳ１１、Ｓ１２、Ｓ１４のどれを選択するかは、インデックスとして付与された類似度による。
【００３１】
このように類似度を用いて類似度の高い情報をダイジェスト作成の候補から除外することにより、情報量の多い効率的なダイジェストを提供することができる。
【００３２】
なお、図４には、図示していないが、音響データ及び文字データの類似度を算出し、ダイジェスト作成に用いることも可能である。例えば、音響データに同じ単語が繰り返し発声される場合は、ニュースのキーワードと判断し、キーワードが発声されている映像データをダイジェストに加える構成とすることも可能である。
【００３３】
なお、本発明の実施の形態では、コンテンツのインデックス付け、ユーザの要求に応じたダイジェストの作成を提供側で行い、ダイジェスト送出部４００を用いて、ユーザにダイジェストを提供するシステムについて解説したが、これは、本発明を何ら拘束するものではない。番組映像とともにその補足情報（インデックス情報）が放送配信され、受信したユーザ側でダイジェスト作成を行う構成も可能である。
【産業上の利用可能性】
【００３４】
本発明に係るダイジェスト作成装置は、複数の情報から構成されているコンテンツを、各情報の出力タイミングに囚われずに編集することで、情報量の多いダイジェストの作成を容易にするという効果を有し、ダイジェスト作成装置等として有用である。また、映像の編集装置等の用途にも適応できる。
【図面の簡単な説明】
【００３５】
【図１】実施の形態１によるダイジェスト作成装置の構成を示す図
【図２】実施の形態１による作成さるダイジェストを示す図
【図３】実施の形態２による作成されるダイジェストを示す図
【図４】実施の形態３におけるダイジェスト作成装置の構成を示す図
【図５】実施の形態３によるセグメントの類似度を示す図
【図６】従来のダイジェスト作成装置により作成されるダイジェストを示す図
【符号の説明】
【００３６】
２００  インデックス付与部
２０１  映像チャネル・インデックス付与部
２０２  音響チャネル・インデックス付与部
２０３  文字チャネル・インデックス付与部
３００ダイジェスト作成部
３０１  映像選択部
３０２  音響選択部
３０３  文字選択部
３０４  コンテンツ再構築部
３０５  類似度付与部
４００  ダイジェスト送出部
５００  要求条件入力部
【図１】
2005229366.tif 000003
【図２】
2005229366.tif 000004
【図３】
2005229366.tif 000005
【図４】
2005229366.tif 000006
【図５】
2005229366.tif 000007
【図６】
2005229366.tif 000008