(57)【要約】【課題】  視聴者が、蓄積された番組コンテンツを視聴する前に、興味に合致するものか否かを簡単に判断できるダイジェスト映像を生成することを目的とする。【解決手段】  番組コンテンツの再生時間全体における前方所定期間をダイジェスト映像の作成対象区間として選定し、シーン記述メタデータのシーン重要度値に基づき１つ以上のダイジェスト映像を所定の順序によって所定の再生時間長だけ選択するシーン選択部１４と、シーン選択部１４によって選択された１つ以上のダイジェスト映像の再生順序を、乱数を発生させてこの乱数に基づき順不同に決定し、この決定された再生順序に応じて選択された１つ以上のダイジェスト映像それぞれのシーン開始時刻と再生時間長とを再生シナリオとして生成する乱数発生部１６及びシーン並べ替え部１５とを備えた。【選択図】      図１
2006211311.tif 000002
【特許請求の範囲】
【請求項１】
番組コンテンツと、この番組コンテンツの各シーンに対応したシーン開始時刻とシーンの重要度を示したシーン重要度値とからなるシーン記述メタデータと、をそれぞれ含む番組情報に基づいてダイジェスト映像を生成するダイジェスト映像生成装置であって、
前記番組コンテンツの再生時間全体における前方所定期間をダイジェスト映像の作成対象区間として選定し、前記シーン記述メタデータのシーン重要度値に基づき１つ以上のダイジェスト映像を所定の順序によって所定の再生時間長だけ選択するシーン選択手段と、
このシーン選択手段によって選択された１つ以上のダイジェスト映像の再生順序を、乱数を発生させてこの乱数に基づき順不同に決定し、この決定された再生順序に応じて前記選択された１つ以上のダイジェスト映像それぞれのシーン開始時刻と再生時間長とを再生シナリオとして生成する再生シナリオ生成手段と、
を備えたダイジェスト映像生成装置。
【請求項２】
視聴者から投稿された番組コンテンツに関する投稿文情報を掲示する電子掲示板を有した情報サーバがネットワークを介して接続されて、前記投稿文情報に基づいて前記番組コンテンツのダイジェスト映像を生成するダイジェスト映像生成装置であって、
前記情報サーバの電子掲示板から前記番組コンテンツに関する投稿文情報を検出して取得する通信手段と、
この通信手段によって取得された投稿文情報について、シーンチェンジについて記述された記述文を検索し、この記述文に含まれる投稿時刻データに基づきシーン開始時刻を決定すると共に、前記検索された記述文の数に応じてシーンの重要度を示すシーン重要度値を決定するシーン情報分析手段と、
前記番組コンテンツの再生時間全体における前方所定期間をダイジェスト映像の作成対象区間として選定し、前記シーン重要度値に基づき１つ以上のダイジェスト映像を所定の順序によって所定の再生時間長だけ選択するシーン選択手段と、
このシーン選択手段によって選択された１つ以上のダイジェスト映像の再生順序を、乱数を発生させてこの乱数に基づき順不同に決定し、この決定された再生順序に応じて前記選択された１つ以上のダイジェスト映像それぞれのシーン開始時刻と再生時間長とを再生シナリオとして生成する再生シナリオ生成手段と、
を備えたダイジェスト映像生成装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、記録番組のダイジェスト映像を生成するためのダイジェスト映像生成装置に関する。
【背景技術】
【０００２】
近年、番組コンテンツの記録が可能なハードディスク内蔵レコーダ（以下、レコーダと称す。）等において、利用者の嗜好に基づいた自動録画機能によって多数の番組コンテンツが自動録画できるようになった。しかし、録画された番組コンテンツを視聴する際には、自動録画された番組が真に利用者の興味を引くものかどうかを判断しなければならない場合が発生している。このようなケースは、特別番組や新番組等をレコーダに自動録画した場合によく発生する。
【０００３】
従来においては、ＥＰＧ（Ｅｌｅｃｔｒｉｃ  Ｐｒｏｇｒａｍ  Ｇｕｉｄｅ：電子番組表）に含まれる番組解説を番組コンテンツと共に記録し、番組コンテンツを視聴する際に番組解説を参照して番組の内容を確認することが可能である。しかし、文字情報が中心の番組解説では、番組のあらすじは概略把握できても番組全体の雰囲気や真の興味度までは直感的に伝わってこない場合が多い。
【０００４】
この問題の一つの改善手段として、番組コンテンツのサムネイル画像を自動生成して映像の全体構成を分かり易く表示するよう工夫された、映像のダイジェスト作成装置及び方法が特許文献１に開示されている。しかしながら、この文献に開示された手段をもってしても、ダイジェスト情報としては番組内容を把握できるものの、番組全体の雰囲気や真の興味度までを利用者が把握することについて十分ではなかった。
【０００５】
また、従来のレコーダでは、番組コンテンツの早送りや部分的なプレビュー再生によって番組内容を把握させる方法もとられていた。しかしながら、この方法によって表示される映像は必ずしも番組の重要な場面であるとは限らず、また番組長によっては時間もかかり、利用者がその番組に対して興味を引くものかどうかを短時間で判断するには不十分であった。
【０００６】
さらに、ドラマ等の収録番組のように放送前に編集がされることが通常である番組においては、放送時に番組の先頭部分に既にダイジェスト映像が含まれており、その部分を再生するだけで番組内容の概要を推測できる場合もある。しかしながら、スポーツ中継やニュース等の生放送番組の場合には、このようなダイジェスト映像を付加して放送することは困難である。
【特許文献１】特開平９−２８４６９８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
そこで本発明は、録画番組についてダイジェスト映像を生成することにより、利用者が番組コンテンツの視聴に先立ちダイジェスト映像を確認することで、番組内容が利用者の興味に合致するものか否かを簡単に判断することができる、ダイジェスト映像生成装置を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記の課題を解決するために、請求項１に記載の発明は、番組コンテンツと、この番組コンテンツの各シーンに対応したシーン開始時刻とシーンの重要度を示したシーン重要度値とからなるシーン記述メタデータと、をそれぞれ含む番組情報に基づいてダイジェスト映像を生成するダイジェスト映像生成装置であって、前記番組コンテンツの再生時間全体における前方所定期間をダイジェスト映像の作成対象区間として選定し、前記シーン記述メタデータのシーン重要度値に基づき１つ以上のダイジェスト映像を所定の順序によって所定の再生時間長だけ選択するシーン選択手段（１４）と、このシーン選択手段によって選択された１つ以上のダイジェスト映像の再生順序を、乱数を発生させてこの乱数に基づき順不同に決定し、この決定された再生順序に応じて前記選択された１つ以上のダイジェスト映像それぞれのシーン開始時刻と再生時間長とを再生シナリオとして生成する再生シナリオ生成手段（１６，１５）と、を備えたダイジェスト映像生成装置を提供するものである。
【０００９】
請求項２に記載の発明は、視聴者から投稿された番組コンテンツに関する投稿文情報を掲示する電子掲示板（４ａ）を有した情報サーバ（４）がネットワーク（ｂ）を介して接続されて、前記投稿文情報に基づいて前記番組コンテンツのダイジェスト映像を生成するダイジェスト映像生成装置であって、前記情報サーバの電子掲示板から前記番組コンテンツに関する投稿文情報を検出して取得する通信手段（１７）と、この通信手段によって取得された投稿文情報について、シーンチェンジについて記述された記述文を検索し、この記述文に含まれる投稿時刻データに基づきシーン開始時刻を決定すると共に、前記検索された記述文の数に応じてシーンの重要度を示すシーン重要度値を決定するシーン情報分析手段（１２）と、前記番組コンテンツの再生時間全体における前方所定期間をダイジェスト映像の作成対象区間として選定し、前記シーン重要度値に基づき１つ以上のダイジェスト映像を所定の順序によって所定の再生時間長だけ選択するシーン選択手段（１４）と、このシーン選択手段によって選択された１つ以上のダイジェスト映像の再生順序を、乱数を発生させてこの乱数に基づき順不同に決定し、この決定された再生順序に応じて前記選択された１つ以上のダイジェスト映像それぞれのシーン開始時刻と再生時間長とを再生シナリオとして生成する再生シナリオ生成手段（１６，１５）と、を備えたダイジェスト映像生成装置を提供するものである。
【発明の効果】
【００１０】
本発明によれば、利用者は録画番組の視聴の前に、番組全体の概要や雰囲気、更には真に興味を引くものであるか否かを簡単に感覚的に把握することができるという効果を得ることができる。
【発明を実施するための最良の形態】
【００１１】
以下、本発明を実施するための最良の形態について、好ましい実施例を示して詳細に説明する。
【実施例】
【００１２】
本実施例においては、本発明に係るダイジェスト映像生成装置を適用させた記録再生装置及びその記録再生方法について説明する。図１に記録再生装置の概略構成を示す。同図において、記録再生装置１は、受信部１０、再生部１１、シーン情報分析部１２、記録部１３、シーン選択部１４、シーン並べ替え部１５、乱数発生部１６、及び通信部１７を備えている。
【００１３】
受信部１０は、放送タワーから送信されるデジタル地上波放送や放送衛星や通信衛星から送信されるデジタル衛星放送をデジタル放送信号ａとして受信し、受信したデジタル放送信号ａを復調処理やエラー訂正処理を行って番組情報を抽出して出力する機能を有する。ここで、デジタル地上波放送やデジタル衛星放送においては、番組コンテンツに関連した動画ストリームや番組のシーンを記述したシーン記述メタデータ等を番組コンテンツと同時に放送することが可能である。よって、データ放送として、予告編動画ストリームを伝送したり、番組コンテンツに対して予告編映像となるような再生順序を指定した予告編メタデータを放送することも可能である。本実施例においては、このような番組コンテンツと付加情報とを合わせて番組情報と称することとする。
【００１４】
再生部１１は、受信部１０から供給された番組情報のうち番組コンテンツを映像信号と音声信号とにデコードして、記録再生装置１の外部に接続された提示装置２に映像表示と音声出力とをさせる機能を有する。また、再生部１１は、番組情報を記録部１３に記録したり、記録されたや予告編情報や番組コンテンツ等を読み出して再生させる機能を有する。通信部１７は、ネットワークｂを介してコンテンツ関連情報サーバ４と接続され、データ通信を行うことが可能である。
【００１５】
シーン情報分析部１２は、受信部１０から供給された番組情報を分析し、この番組情報に予告編情報やシーン開始時刻とシーン重要度値とで構成されるシーン記述メタデータが含まれているか否かを判定する機能を有する。また、シーン選択部１４は、シーン情報分析部１２から供給されるシーン記述メタデータに基づき、シーン重要度値に応じて予告編シーンを選択する機能を有する。さらに、シーン並べ替え部１５は、乱数発生部１６で発生させた乱数に基づき、予告編シーンの再生順序を決定する機能を有する。
【００１６】
次に、録画再生装置１の録画再生動作について説明する。まず、番組情報の録画動作について説明する。録画再生装置１は、デジタル放送信号ａを受信部１０で受信し、デジタル放送方式に対応した復調処理を行って番組情報を抽出し、再生部１１を介して記録部１３へ記録させると共にシーン情報分析部１２に供給する。
【００１７】
次に、シーン情報分析部１２におけるシーン情報分析処理について図３のフローチャートを参照して説明する。シーン情報分析部１２は、受信部１０から供給された番組情報に予告編情報が存在しているか否かを検出する（ステップＳ０１）。番組情報に予告編情報が存在している場合、その予告編情報が記録部１３に記録される番組コンテンツに対する予告編動画ストリームであるか否かを判定する（ステップＳ０２）。そして、予告編情報が予告編動画ストリームであった場合は、その予告編動画ストリームを受信部１０から再生部１１を介して記録部１３へ記録させる（ステップＳ０３）。
【００１８】
一方、ステップＳ０２において予告編情報が予告編動画ストリームでないと判定された場合は、この予告編情報が予告編再生用の予告編メタデータであるか否かを判定する（ステップＳ０４）。そして、予告編情報が予告編メタデータであった場合は、この予告編メタデータをシーン情報分析部１２から記録部１３に記録させる（ステップＳ０５）。なお、予告編メタデータには、対応する番組コンテンツに関係するシーン開始時刻とシーン時間長とシーン再生順序データとが含まれている。
【００１９】
ステップＳ０１において、番組情報に予告編情報が含まれていない場合や、ステップＳ０４において予告編情報が予告編メタデータでなかった場合は、番組情報にシーン記述メタデータが存在するか否かを判定する（ステップＳ０６）。そして、シーン記述メタデータが検出された場合は、このシーン記述メタデータをシーン情報分析部１２から記録部１３に記録させる（ステップＳ１０）。なお、シーン記述メタデータには、シーン開始時刻とシーン重要度値とが含まれている。
【００２０】
一方、放送局の事情等によって、デジタル放送で予告編情報やシーン記述メタデータを番組コンテンツと共に送信できない場合もある。また、既に記録部１３に番組コンテンツのみが記録されている場合もある。このような場合には、一般公衆よりアクセス可能なコンテンツ関連情報サーバ４をネットワークｂに接続させておき、このサーバに記録管理されたデータを利用するようにしてもよい。すなわち、コンテンツ関連情報サーバ４では電子掲示板４ａを稼動させ、放送番組の番組進行に伴って視聴者からの番組に対する感想や意見等を電子掲示板４ａへ逐次投稿可能なようにする。これによって得られる投稿文には、番組のシーンチェンジについて記述された投稿文（以下、シーンチェンジ記述文と称す。）も多く存在する。
【００２１】
そこで、記録再生装置１の通信部１７は、コンテンツ関連情報サーバ４の電子掲示板４ａに番組に関連する投稿文があるか否かを判定し（ステップＳ０７）、番組に関する投稿文がある場合はその投稿文を取得する（ステップＳ０８）。次に、シーン情報分析部１２は取得した投稿文を分析する（ステップＳ０９）。具体的な例としては、シーン情報分析部１２は、取得した投稿文からシーンチェンジ記述文を検索する。そして、シーンチェンジ記述文に含まれる投稿時刻データをシーンの先頭時刻のシーン開始時刻として得る。これにおいては、シーン開始時刻の精度向上のために、投稿文中に含まれる複数のシーンチェンジ記述文の時間分布を統計処理することによってシーン開始時刻を求める。
【００２２】
さらに、シーン情報分析部１２は、検出されたシーンチェンジ記述文の数を正規化してシーン重要度値を求める。具体的な例としては、ある番組コンテンツにおいて、同一シーンについて記述されたシーンチェンジ記述文の数の最大値で、各シーンにおけるシーンチェンジ記述文の数を除算してシーン重要度値を得ることができる。このようにして、コンテンツ関連情報サーバ４の電子掲示板４ａより番組コンテンツに対するいくつかのシーン開始時刻とシーン重要度値とを得ることができる。そして、これらシーン開始時刻とシーン重要度値とをシーン記述メタデータとして記録部１３へ記録させる（ステップＳ１０）。
【００２３】
なお、前述の予告編動画ストリーム、予告編メタデータ、又はシーン記述メタデータがデジタル放送信号ａではなくネットワークｂ経由で受信されるようにしてもよい。この場合は、通信部１７が予告編動画ストリーム、予告編メタデータ、又はシーン記述メタデータを受信してシーン情報分析部１２を通して記録部１３へ記録させるように処理する。
【００２４】
次に、シーン情報分析部１２での処理の後、シーン選択部１４におけるシーン選択処理について図４のフローチャートを参照して説明する。まず、シーン選択部１４は、予告編映像の作成対象区間を設定する（ステップＳ１１）。ここで、通常の放送番組においては、番組の最後部分に重要な結論シーンやクライマックスシーンが収録されている場合が多い。このため、予告編映像の作成対象区間を番組全体としてしまうと、作成された予告編映像に結論シーンやクライマックスシーンも含まれてしまう恐れがある。特に、スポーツ番組やドラマ等の予告編映像にこのような結論シーン等が含まれてしまうと、視聴者の興味を減退させてしまう恐れがある。
【００２５】
そこで、シーン選択部１４は、予告編映像の作成対象区間を番組コンテンツの前方一部区間に設定する。すなわち、番組コンテンツの先頭より全体の３／４〜５／６区間を対象とするのが好ましい。具体的な例としては、１時間の番組コンテンツに対して、先頭から５０分間を予告編映像の作成対象区間とする。
【００２６】
次に、シーン選択部１４は、作成対象区間に含まれるシーンの中から重要シーンの抽出を行う（ステップＳ１２）。具体的な例としては、まず記録部１３から先に記録してあるシーン記述メタデータを読み込む。次に、連続するシーンにおいて、シーン重要度値がピークを有するシーンを検出してこれを重要シーンとして指定する。重要シーンの判定は、あるシーンにおいて、そのシーンのシーン重要度値と前後のシーンのシーン重要度値とをそれぞれ比較し、シーン重要度値がピークを形成しているか否かを判定することで行う。
【００２７】
なお、時間的に２つの重要シーンが近接する場合には、シーン重要度値が低い方のシーンは重要シーンとしての指定を取り消す。この近接判定条件は、番組全体の時間に対して２つのシーンが所定の比率より小さいか否か、又はある一定時間長より近いか否かを基準とする。例えば、番組全体の時間に対する比率を基準として判定する場合には、その比率を１０％〜２０％とし、時間長を基準として判定する場合には３分とするような場合をいう。
【００２８】
また、番組コンテンツのオープニング部分も放送番組全体からみればシーンチェンジの一種に該当する。そのため、シーン選択部１４は、オープニング部分が重要シーンであるとして判定する場合も発生し得るが、このオープニング部分は番組の本質的内容とは関係しない場合が多いため、予め重要シーンとしては指定しないように適宜設定することができる。
【００２９】
次に、シーン選択部１４は、予告編を短時間に収めるために、先に重要シーンとして指定されたシーンの中から所定数のシーンを選択して予告編シーンとする（ステップＳ１３）。例えば、所定数を６個とした場合の予告編シーンの選択を次のように行う。まず、番組の全体長に応じて番組をいくつかの区間に分割する。この分割は番組の特定部分に選択されたシーンが偏らないようにすることを目的としている。すなわち、例えば番組が３０分である場合は分割せず、１時間番組であるならば、作成対象区間５０分を前半２５分と後半２５分とに分割する。
【００３０】
以下、１時間番組を例にして予告編シーンの選択処理を説明する。この場合、前半２５分と後半２５分とのそれぞれについて例えば３シーンづつ、計６つの予告編シーンを選択する。予告編シーンの選択方法は、先に登録された重要シーンにおいてシーン重要度値が大きい順とする。なお、各予告編シーンの再生時間長は、所定の一定時間より長くならないように制限する。この所定時間は例えば１０秒とする。
【００３１】
このようにして予告編シーンを選択した後、予告編シーンの再生順序をシーン並べ替え部１５によって決定する。すなわち、これら予告編シーンの再生順を選択基準順、例えばシーン重要度値の大きさの順やシーンの時間順として再生したのでは、シーンの重要度の関係や時間関係等が利用者に明らかになってしまう。これでは番組コンテンツへの視聴興味を減退させてしまう恐れもあるため、利用者にはシーンの相互関係が分からないようにするために各予告編シーンの並べ替えを行う。
【００３２】
シーン並べ替え部１５におけるシーン並べ替え処理について図５のフローチャートを参照して説明する。まず、乱数発生部１６で乱数を発生させて取得する（ステップＳ２１）。この取得した乱数に基づき、再生させる予告編シーンを１つ選択して再生の順番を設定する。（ステップＳ２２）。そして、この処理を全ての予告編シーンが選択されるまで繰り返し実行する（ステップＳ２３）。このようにして、予告編シーンの再生順は順不同に決定される。
【００３３】
このようにして決定された予告編シーンの再生順序は、自動生成予告編再生シナリオとして記録部１３に記録された番組コンテンツに対応付けられて記録される（ステップＳ２４）。この自動生成予告編再生シナリオのデータ構成例を図７に示す。同図に示したように、自動生成予告編再生シナリオは、１つの番組に対してシーン番号とシーン開始時刻とシーン時間長とが関連付けられて記録される。
【００３４】
次に、記録部１３に記録された予告編映像の再生処理について図６のフローチャートを参照して説明する。番組コンテンツの再生に際しては、提示装置２に再生部１１によって生成された図２に示すような記録番組一覧画面２０が表示される。利用者は、記録番組一覧画面２０の記録番組一覧より１つの記録番組２３を選択すると、選択された記録番組２３がハイライト表示されると共に、番組解説欄２４に解説文が表示され、そしてプレビュー画面２２に記録番組の予告編映像が再生される。
【００３５】
なお、予告編映像が記録再生装置１内で生成されたものである場合には、プレビュー画面２２にそれを意味するテロップをスーパーインポーズして利用者に知らせる。例えば、同図のプレビュー画面２２に「自動生成予告編」をインポーズさせる。
【００３６】
予告編映像の再生は、再生部１１によって次のように実行される。まず、再生部１１は、記録部１３に予告編情報が記録されているかどうかを判定する（ステップＳ３１）。そして、予告編情報がある場合は、そのフォーマットに従って予告編映像を再生させる。具体的な例としては、放送局から送信された予告編動画ストリームが記録部１３に記録されているか否かを判定し（ステップＳ３２）、記録されている場合は、この予告編動画ストリームを読み出して再生させる（ステップＳ３３）。
【００３７】
ステップＳ３２において、記録部１３に予告編動画ストリームが記録されていない場合は、放送局から送信された予告編メタデータが存在するかどうかを判定する（ステップＳ３４）。そして、予告編メタデータが存在する場合は、予告編メタデータのシナリオに沿って記録番組を再生させる（ステップＳ３５）。
【００３８】
そして、ステップＳ３１において記録部１３に予告編情報が記録されていない場合やステップＳ３４において予告編メタデータが存在しない場合は、自動生成予告編再生シナリオが存在するか否かを判定する（ステップＳ３６）。自動生成予告編再生シナリオがある場合は、このシナリオに従って記録番組を再生させる（ステップＳ３７）。一方、ステップＳ３６において自動生成予告編再生シナリオが存在しない場合は、記録番組を通常再生、又は早送り再生を行う（ステップＳ３８）。
【００３９】
以上詳述したように、本実施例によれば、番組コンテンツに関する予告編情報が放送局から提供されていない場合であっても、自動生成予告編再生シナリオに従って予告編シーンを再生させることが可能である。また、利用者は番組コンテンツの視聴前にその記録番組が興味を引く番組であるか否かの判断を簡単にとることが可能となる。
【産業上の利用可能性】
【００４０】
以上により、本発明はデジタル放送の受信装置、ハードディスクレコーダ、ＤＶＤレコーダ等の記録再生装置において有用である。
【図面の簡単な説明】
【００４１】
【図１】本発明の実施例における記録再生装置の概略構成例を示した図である。
【図２】記録番組一覧画面の一例を示した図である。
【図３】シーン情報分析処理を示したフローチャートである。
【図４】シーン選択処理を示したフローチャートである。
【図５】シーン並べ替え処理を示したフローチャートである。
【図６】予告編映像の再生処理を示したフローチャートである。
【図７】自動生成予告編再生シナリオのデータ構成例を示した図である。
【符号の説明】
【００４２】
ａ  デジタル放送信号
ｂ  ネットワーク
１  記録再生装置
２  提示装置
４  コンテンツ関連情報サーバ
４ａ  電子掲示板
１０  受信部
１１  再生部
１２  シーン情報分析部
１３  記録部
１４  シーン選択部
１５  シーン並べ替え部
１６  乱数発生部
１７  通信部
【図１】
2006211311.tif 000003
【図２】
2006211311.tif 000004
【図３】
2006211311.tif 000005
【図４】
2006211311.tif 000006
【図５】
2006211311.tif 000007
【図６】
2006211311.tif 000008
【図７】
2006211311.tif 000009