(57)【要約】【課題】放送された番組からストーリを切り出すことが可能なデジタル放送受信システムを提供すること。【解決手段】デジタル放送で放送された番組に対して分割点の情報を生成するデジタル放送受信システムは、デジタル放送を受信して番組を復号する番組復号手段と、番組に対して分割点の情報を生成する分割点生成手段と、番組を記録して再生する番組記録再生手段と、を備え、分割点生成手段は、番組記録再生手段が番組を記録している期間に、番組から所定の定型画像を検出し、検出した定型画像に関連付けられる時刻を第１の時刻とする定型画像検出手段と、番組記録再生手段が番組を記録している期間に、番組から画像の遷移を検出し、検出した遷移に関連付けられる時刻を第２の時刻とする画像遷移検出手段とを備え、第１の時刻及び第２の時刻に基づいて番組に対する第１の分割点の情報を生成することを特徴とする。【選択図】図１
2010283729.tif 000002
【特許請求の範囲】
【請求項１】
デジタル放送で放送された番組に対して分割点の情報を生成するデジタル放送受信システムであって、
前記デジタル放送受信システムは、
前記デジタル放送を受信して前記番組を復号する番組復号手段と、
前記番組に対して分割点の情報を生成する分割点生成手段と、
前記番組を記録して再生する番組記録再生手段と、を備え、
前記分割点生成手段は、
前記番組記録再生手段が前記番組を記録している期間に、前記番組から所定の定型画像を検出し、検出した前記定型画像に関連付けられる時刻を第１の時刻とする定型画像検出手段と、
前記番組記録再生手段が前記番組を記録している期間に、前記番組から画像の遷移を検出し、検出した前記遷移に関連付けられる時刻を第２の時刻とする画像遷移検出手段とを備え、
前記第１の時刻及び前記第２の時刻に基づいて前記番組に対する第１の分割点の情報を生成することを特徴とする、
前記デジタル放送受信システム。
【請求項２】
前記番組は字幕データを含み、
前記分割点生成手段は、さらに、
前記番組記録再生手段が前記番組を記録している期間に、前記字幕データから所定の定型表現の出現を検出し、検出した前記定型表現に関連付けられる時刻を第３の時刻とする定型表現検出手段を備えることを特徴とする、
請求項１に記載のデジタル放送受信システム。
【請求項３】
前記分割点生成手段は、
前記第２の時刻及び前記第３の時刻に基づいて前記番組に対する第２の分割点の情報を生成することを特徴とする、
請求項２に記載のデジタル放送受信システム。
【請求項４】
前記分割点生成手段は、
前記第１の分割点の情報又は前記第２の分割点の情報のいずれかに基づいて、前記番組に含まれる特定のストーリの範囲を算出すること特徴とする、
請求項３に記載のデジタル放送受信システム。
【請求項５】
前記分割点生成手段は、
前記第１の分割点の情報に基づいて前記字幕データを分割するための第３の分割点の情報を生成することを特徴とする、
請求項２に記載のデジタル放送受信システム。
【請求項６】
前記分割点生成手段は、
前記第３の時刻又は前記第３の分割点の情報のいずれかに基づいて、前記字幕データに含まれる特定のストーリの範囲を算出すること特徴とする、
請求項５に記載のデジタル放送受信システム。
【請求項７】
前記番組記録再生手段は、
前記分割点生成手段が生成した前記第１の分割点の情報又は前記第２の分割点の情報を用いて、前記番組の再生を開始することを特徴とする、請求項３に記載のデジタル放送受信システム。
【請求項８】
前記番組記録再生手段は、
前記第３の時刻又は前記第３の分割点の情報を用いて、前記番組の再生を開始することを特徴とする、請求項５に記載のデジタル放送受信システム。
【請求項９】
デジタル放送で放送された番組に対して分割点の情報を生成するデジタル放送受信プログラムであって、
前記デジタル放送受信プログラムは、
前記デジタル放送を受信して前記番組を復号する番組復号手段と、
前記番組に対して分割点の情報を生成する分割点生成手段と、
前記番組を記録して再生する番組記録再生手段と、を備えるコンピュータをデジタル放送受信システムとして動作させ、
前記分割点生成手段は、
前記番組記録再生手段が前記番組を記録している期間に、前記番組から所定の定型画像を検出し、検出した前記定型画像に関連付けられる時刻を第１の時刻とする定型画像検出手段と、
前記番組記録再生手段が前記番組を記録している期間に、前記番組から画像の遷移を検出し、検出した前記遷移に関連付けられる時刻を第２の時刻とする画像遷移検出手段とを備え、
前記第１の時刻及び前記第２の時刻に基づいて前記番組に対する第１の分割点の情報を生成することを特徴とする、
前記デジタル放送受信プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、デジタル放送で放送された番組に対して分割点の情報を生成するデジタル放送受信システムに関する。
【背景技術】
【０００２】
従来、テレビ放送によるニュース番組等の映像を解析し、一つの話題に関連するストーリの境界を検出するための手法が知られている（非特許文献１）。この手法によれば、ニュース番組等に含まれる画像の特徴を検出することにより、番組に含まれる個別の話題をストーリとして分割することができるとしている。例えば、カット検出アルゴリズムを用いて、ニュース番組に含まれる映像の切り替え等のカット点が特徴点として検出できるとしている。また、例えば、予め用意したサンプル画像を用いて、ニュース番組等に定型的に用いられるスーパーインポーズ画面の出現を検出し、出現したフレームをストーリの開始フレームとすることが可能であるとしている。また、例えば、特定の番組に登場するアンカーパーソンのサンプル画像を予め用意し、放送の画面から、顔に相当する部分と背景に相当する部分との、それぞれの色ヒストグラムをサンプル画像と比較することにより、アンカーパーソンが登場したフレームを検出し、当該フレームをストーリの開始フレームとすることが可能であるとしている。
【０００３】
また、上述のようなニュース番組等における画像の特徴の検出に関し、個々のストーリがスタジオシーンから始まりスタジオシーンに終わるということを利用して、ストーリの境界を検出する技法が知られている（非特許文献２）。同様に、場面の切り替えに用いられる、カット、ディゾルブ等の、トランジションと呼ばれる映像効果を検出する技術が知られている（非特許文献３）。
【０００４】
さらに、近年、符号化したデータを放送波により伝送する手法を用いて、テレビ受信機等をＪａｖａ（登録商標）仮想マシンとして用いる技術が知られている（非特許文献４）。この技術によれば、放送局はＪａｖａ仮想マシンとしてのテレビ受信機等にメッセージ又はプログラム等を送信し、テレビ受信機等はＪａｖａアプリケーション・プログラミング・インタフェース（Ｊａｖａ  ＡＰＩ）を用いて、受信したメッセージに対する所定の処理等を実施することができる。デジタル放送を受信可能なテレビ受信機等をＪａｖａ仮想マシンとして動作させる当技術分野の技術は、参照により全体を本願明細書に取り入れるものとする。
【先行技術文献】
【非特許文献】
【０００５】
【非特許文献１】鎌原ら、「自動再構成を行うマルチメディアニュース推薦システム」、社団法人情報処理学会、情報処理学会論文誌．データベース、第４０（ＳＩＧ＿３（ＴＯＤ＿１））巻、ｐｐ．１２４−１３３、１９９９年０２月１５日
【非特許文献２】有木ら、「ニュース映像中の記事に対する音声・文字・映像を用いた索引付けと分類」、社団法人電子情報通信学会、電子情報通信学会技術研究報告．ＰＲＭＵ、パターン認識・メディア理解、第９６巻、第３８５号、ｐｐ．３１−３８、１９９６年１１月２２日
【非特許文献３】河合ら、「逐次的な特徴算出によるディゾルブ、フェードを含むショット境界の高速検出手法」、電子情報通信学会論文誌Ｄ、第Ｊ９１−Ｄ巻、第１０号、ｐｐ．２５２９−２５３９、２００８年
【非特許文献４】（社）電波産業会、“デジタル放送におけるアプリケーション実行環境標準規格（ＡＲＩＢ  ＳＴＤ−Ｂ２３  １．１版）”、第二部“アプリケーション実行環境”、平成１６年２月５日
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、従来のストーリの境界を検出するための手法においては、カメラを用いて撮影した映像を解析するため、スタジオの光線の加減、カメラアングルのずれ、又は撮影フレーム内の被写体の大きさの変化等の、映像のばらつきの影響によって検出率が異なるという問題があった。また、番組によっては、スーパーインポーズ画面の出現するタイミングが異なる場合がある、一つの話題に関するストーリ中に何度もアンカーパーソンが登場するタイミングが含まれる場合がある、等の多様性のために、映像からストーリの開始点を検出することには限界があった。
【０００７】
本発明は、映像のばらつき又は多様性の影響を受けずに、放送された番組から一つの話題に関するストーリを切り出すことが可能な、デジタル放送受信システムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
本発明においては次のような手段を提供する。本願明細書に用いる「映像」という用語は主として動画を指し、「画像」という用語は特に記載のない限り静止画及び動画を非限定的に指す。例えば、「コンピュータ生成された画像」は、コンピュータを用いて生成された静止画、動画、又はこれらの組み合わせを指す。「ストーリ」という用語は、時間的順序に従って配列された個々の話題を指す。「スーパー」という用語は、特に記載のない限り、スーパーインポーズされた画像を指す略語であり、例えば、タイトルとして表示されるスーパーインポーズされた画像を、タイトルスーパーと略称する場合がある。
【０００９】
本発明の第１の態様によると、デジタル放送で放送された番組に対して分割点の情報を生成するデジタル放送受信システムであって、デジタル放送受信システムは、デジタル放送を受信して番組を復号する番組復号手段と、番組に対して分割点の情報を生成する分割点生成手段と、番組を記録して再生する番組記録再生手段と、を備え、分割点生成手段は、番組記録再生手段が番組を記録している期間に、番組から所定の定型画像を検出し、検出した定型画像に関連付けられる時刻を第１の時刻とする定型画像検出手段と、番組記録再生手段が番組を記録している期間に、番組から画像の遷移を検出し、検出した遷移に関連付けられる時刻を第２の時刻とする画像遷移検出手段とを備え、第１の時刻及び第２の時刻に基づいて番組に対する第１の分割点の情報を生成することを特徴とする、デジタル放送受信システムが提供される。
【００１０】
好適には、本発明に係るデジタル放送受信システムは、典型的にはデジタル放送受信機を備え、このデジタル放送受信機は、当技術分野に公知のＪａｖａ  ＡＰＩを用いることが可能なＪａｖａ仮想マシンである。このようなデジタル放送受信機は、放送局からのデジタル放送をＪａｖａデータ放送として受け取ることが可能である。従って、放送局は、Ｊａｖａ仮想マシンとしての当該デジタル放送受信機に対して、文字列等のデータ又は所定の処理を実行させるためのプログラム等を、それぞれ所定の仕様に従って送信することができる。本発明に係るデジタル放送受信機は、所定のＡＰＩを用いて文字列の抽出等の処理を実施することができる。典型的には、本発明に係るデジタル放送受信機を含むＪａｖａデータ放送の受信機等は、適宜記憶媒体等を用いて、経時的に放送により送られるデータを蓄積し、蓄積したデータから所定の情報又はプログラムを取り出して動作する。
【００１１】
本発明に係るデジタル放送受信システムは、典型的には、受信したデジタル放送からＴＳ（Ｔｒａｎｓｐｏｒｔ  Ｓｔｒｅａｍ、トランスポート・ストリーム）を復号し、このＴＳから、映像、音声、字幕データ、文字放送データ等の、異なる形式を有する複数のデータを取り出すことが可能である。これらのうちで、映像、音声、及び字幕データは、いずれも時系列の情報として取り扱うことができる。すなわち、映像、音声、及び字幕データは、共通の時刻を用いて、相互に関連するデータの箇所を特定することができる。例えば、再生中の番組に含まれる、ある時間の長さを有する映像について、特定のフレームに関連付けられた、映像と音声の同期に利用される表示時刻（ＰＴＳ：Ｐｒｅｓｅｎｔａｔｉｏｎ  Ｔｉｍｅ  Ｓｔａｍｐ）を用い、この表示時刻に対応する時刻に、映像以外の音声又は字幕データが存在する場合には、対応する音声の箇所又は対応する字幕データを特定することができる。このような関係は、音声又は字幕データに基づいてもよく、例えば、ある字幕データの表示時刻（ＰＴＳ）を用いて、当該表示時刻に対応する映像のフレーム又は音声の箇所を、特定してもよい。
【００１２】
本発明に係るデジタル放送受信システムが検出する、所定の定型画像としては、例えば、スーパーインポーズされる図形等を用いることができる。このような、出現する場所、形状等が定型的である画像の出現を検出することにより、本発明においては、画像の解析を実施する領域を限定することができ、解析のためのコストを抑えることが可能になる。画像の遷移としては、例えば、カット、ディゾルブ等の、当技術分野においてトランジションとして知られる映像効果を用いることができる。トランジションによる画像の遷移は、所定の定型画像が検出される画面上の領域にも及びうるので、所定の定型画像に対して発生する画像の遷移も、本発明に係るデジタル放送受信システムが検出する、画像の遷移に含まれる。他の所定の定型画像及び画像の遷移の検出、並びに、検出と検出に関連付けられる時刻との関係については、実施例を挙げて後述する。一実施形態において、本発明に係るデジタル放送受信システムは、第１の時刻として検出した所定の定型画像が出現した時刻と、第２の時刻として検出した画像の遷移の時刻とを用いて、第１の分割点の情報を、時間の情報の形態で生成することができる。
【００１３】
本発明に係るデジタル放送受信システムが受信するデジタル放送は、放送波によるものでもよく、インターネット等の広域ネットワークを介して配信されるデータ放送等でもよく、任意に設定できる。
【００１４】
さらに、本発明に係るデジタル放送受信システムにおいて、番組は字幕データを含み、分割点生成手段は、さらに、番組記録再生手段が番組を記録している期間に、字幕データから所定の定型表現の出現を検出し、検出した定型表現に関連付けられる時刻を第３の時刻とする定型表現検出手段を備えることを特徴とする。
【００１５】
本発明に係るデジタル放送受信システムが検出する、定型表現の出現においては、例えば文字列の一致を判定するための公知の手法を任意に用いてもよい。検出した定型表現に関連付けられる時刻としては、例えば、前述の表示時刻（ＰＴＳ）を用いることができる。
【００１６】
さらに、本発明に係るデジタル放送受信システムにおいて、分割点生成手段は、第２の時刻及び第３の時刻に基づいて番組に対する第２の分割点の情報を生成することを特徴とする。
【００１７】
一実施形態において、本発明に係るデジタル放送受信システムは、第２の時刻として検出された画像の遷移の時刻と、第３の時刻としての字幕データにおける所定の定型表現が出現した時刻とを用いて、第２の分割点の情報を、時間の情報の形態で生成することができる。
【００１８】
さらに、本発明に係るデジタル放送受信システムにおいて、分割点生成手段は、第１の分割点の情報又は第２の分割点の情報のいずれかに基づいて、番組に含まれる特定のストーリの範囲を算出すること特徴とする。
【００１９】
本発明に係るデジタル放送受信システムは、上述の第１の分割点の情報が表す時間、又は第２の分割点の情報が表す時間のいずれかを、ストーリの開始点とすることができる。これらのいずれを用いるかは、例えば、所定の遅延時間に基づく適切なフィルタリング等により、自動的に選択することが可能である。フィルタリングの具体例については、実施形態にて後述する。一つの番組内には、複数のこのようなストーリの開始点が設定されうる。従って、本発明に係るデジタル放送受信システムは、このように算出した複数の開始点を用い、二つの開始点の間の期間を、番組に含まれる一つの話題に関するストーリの範囲とすることができる。
【００２０】
このように、本発明に係るデジタル放送受信システムは、一つの番組を、複数の連続したストーリに分割することが可能である。さらに、分割されたそれぞれのストーリを代表する静止画又は短時間の動画等を、公知の手法により抽出又は生成してもよい。従って、本発明においては、分割されたストーリを用いて、番組の一部又は全体の要約等を、静止画又は動画等の映像の形態で提供することが可能である。
【００２１】
さらに、本発明に係るデジタル放送受信システムにおいて、分割点生成手段は、第１の分割点の情報に基づいて字幕データを分割するための第３の分割点の情報を生成することを特徴とする。
【００２２】
本発明に係るデジタル放送受信システムは、前述の定型表現の検出以外に、映像の特徴を用いて生成した第１の分割点の情報に基づいて、字幕データを分割するための情報である、第３の分割点の情報を生成することができる。従って、本発明においては、映像との関連性を有する、字幕データの分割点の情報を生成することが可能になる。
【００２３】
さらに、本発明に係るデジタル放送受信システムにおいて、分割点生成手段は、第３の時刻又は第３の分割点の情報のいずれかに基づいて、字幕データに含まれる特定のストーリの範囲を算出すること特徴とする。
【００２４】
本発明に係るデジタル放送受信システムは、上述の第３の時刻、又は第３の分割点の情報が表す時刻のいずれかを、ストーリの開始点とすることができる。前述と同様に、これらのいずれを用いるかは、例えば、所定の遅延時間に基づく適切なフィルタリング等により、自動的に選択することが可能である。従って、本発明に係るデジタル放送受信システムは、このように算出した複数の開始点を用い、二つの開始点の間の期間を、番組に含まれる一つの話題に関するストーリの範囲とすることができる。さらに、分割されたそれぞれのストーリごとに、ストーリを代表する用語等の言語的表現を、公知の手法により抽出又は生成してもよい。分割されたストーリを用いる言語的解析等は、任意に設定できる。従って、本発明においては、分割されたストーリを用いて、番組の一部又は全体の要約の生成、ストーリの解析、メタデータ抽出等を実施することが可能である。
【００２５】
さらに、本発明に係るデジタル放送受信システムにおいて、番組記録再生手段は、分割点生成手段が生成した第１の分割点の情報又は第２の分割点の情報を用いて、番組の再生を開始することを特徴とする。
【００２６】
このようにすることで、本発明に係るデジタル放送受信システムは、番組に含まれる一つの話題に関するストーリの範囲を特定し、ユーザに提供することが可能になる。従って、本発明に係るデジタル放送受信システムが生成する分割点の情報は、映像等を含む番組の頭出しをするための索引として用いることができる。こうした索引は、分割点に対応する静止画又は短時間の動画等の、任意の形態でユーザに提供することができる。
【００２７】
さらに、本発明に係るデジタル放送受信システムにおいて、番組記録再生手段は、第３の時刻又は第３の分割点の情報を用いて、番組の再生を開始することを特徴とする。
【００２８】
前述と同様に、本発明に係るデジタル放送受信システムは、上述の第３の時刻、又は第３の分割点の情報が表す時刻のいずれかを、ストーリの開始点とすることができる。このようにすることで、本発明に係るデジタル放送受信システムは、字幕データが存在し、当該字幕データが分割された箇所から、番組の再生を開始することが可能になる。従って、本発明に係るデジタル放送受信システムが生成する分割点の情報は、字幕データを含む番組の頭出しをするための索引として用いることができる。こうした索引は、分割点に対応する語句又は文章等の、任意の形態でユーザに提供することができる。
【００２９】
また、本発明の第２の態様によると、デジタル放送で放送された番組に対して分割点の情報を生成するデジタル放送受信プログラムであって、デジタル放送受信プログラムは、デジタル放送を受信して番組を復号する番組復号手段と、番組に対して分割点の情報を生成する分割点生成手段と、番組を記録して再生する番組記録再生手段と、を備えるコンピュータをデジタル放送受信システムとして動作させ、分割点生成手段は、番組記録再生手段が番組を記録している期間に、番組から所定の定型画像を検出し、検出した定型画像に関連付けられる時刻を第１の時刻とする定型画像検出手段と、番組記録再生手段が番組を記録している期間に、番組から画像の遷移を検出し、検出した遷移に関連付けられる時刻を第２の時刻とする画像遷移検出手段とを備え、第１の時刻及び第２の時刻に基づいて番組に対する第１の分割点の情報を生成することを特徴とする、デジタル放送受信プログラムが提供される。
【００３０】
本発明に係るデジタル放送受信プログラムは、メモリカード、読み出し専用メモリ（ＲＯＭ）等の任意のコンピュータ可読媒体の形態で提供されうる。例えば、テレビ受信機にマイクロプロセッサ及び記憶媒体を備えて、本発明に係るデジタル放送受信プログラムを実行させてもよい。また、本発明に係る受信プログラムは、放送の形態で受信され、デジタル放送受信機により復号され、抽出されてもよい。本発明に係るデジタル放送受信プログラムは、単独で実行可能なバイナリ形式、適切なライブラリを併用するバイナリ・コード、又はスクリプト言語のソースコード等、当技術分野に公知の任意の形態で提供されうる。また、本発明に係るデジタル放送受信プログラムは、デジタルテレビ放送等の受信プログラム、予約録画プログラム等の、既存の技術と組み合わせることができ、そのように組み合わせた技術もまた、本発明の技術範囲に含まれる。さらに、本発明の技法は、本発明に係る動作の諸段階を、ＦＰＧＡ（プログラム可能ゲートアレイ）、ＡＳＩＣ（特定用途向け集積回路）、これらと同等のハードウェアロジック素子、プログラム可能な集積回路、又はこれらの組み合わせが記憶し得るプログラムの形態、すなわちプログラム製品として提供することができる。具体的には、データ入出力、データバス、メモリバス、システムバス等を備えるカスタムＬＳＩ（大規模集積回路）の形態として、本発明に係るデジタル放送受信プログラムを提供でき、そのように集積回路に記憶されたプログラム製品の形態も、本発明の技術範囲に含まれる。
【発明の効果】
【００３１】
本発明によれば、画像の解析と、番組に付随する字幕の解析を併用することにより、映像のばらつき又は多様性の影響を受けずに、放送された番組から一つの話題に関するストーリを切り出すことが可能な、デジタル放送受信システムを提供することが可能になる。また、本発明によれば、画像の解析においてスーパーインポーズ等の所定の定型画像の出現を検出することにより、画像の解析を実施する領域を限定することができ、解析のためのコストを抑えることが可能になる。さらに、本発明によれば、画像のストーリ分割と共に、字幕もストーリ分割することができる。従って、本発明によれば、字幕を用いたストーリ解析やメタデータ抽出等を利用することも可能である。
【図面の簡単な説明】
【００３２】
【図１】本発明の一実施形態に係る、デジタル放送受信システム１０を示す図である。
【図２】本発明の一実施形態に係る、映像分割位置及び字幕分割位置を用いる、番組からストーリへの分割の例を示す図である。
【図３】本発明の一実施形態に係る、映像を分割する情報を生成する方法の例を示すフロー図である。
【図４】本発明の一実施形態に係る、字幕を分割する情報を生成する方法の例を示すフロー図である。
【図５】本発明の一実施形態に係る、分割点の情報を生成するために用いる、定型画像の例を示す図である。
【図６】本発明の一実施形態に係る、分割点の情報を生成するために用いる、定型画像の別の例を示す図である。
【図７】本発明の一実施形態に係る、分割点の情報を生成するために用いる、トランジションの例を示す図である。
【図８】本発明の一実施形態に係る、分割点の情報を生成するために用いる、定型画像及びトランジションの組み合わせの例を示す図である。
【図９】本発明の一実施形態に係る、分割点の情報を生成するために用いる、字幕データの例を示す図である。
【発明を実施するための形態】
【００３３】
以下、本発明の実施形態について説明する。なお、これはあくまでも一例であって、本発明の技術的範囲はこれに限られるものではない。
【００３４】
［デジタル放送受信システム１０の構成］
図１は、本発明の一実施形態に係る、デジタル放送受信システム１０を示す図である。一実施形態において、デジタル放送受信システム１０は、受信装置１００、記憶媒体１７０、映像音声出力手段１８０を備える。記憶媒体１７０は、例えば、ハードディスク等の磁気記録媒体、又はＤＶＤ−Ｒ（記録可能なデジタル多目的ディスク）等の光学記録媒体等、書き込み可能な記録媒体から任意に選択することができる。映像音声出力手段は、例えば、テレビ放送に含まれる映像及び音声を出力することが可能な、テレビ装置等を用いることができる。
【００３５】
受信装置１００は、放送受信部１１０、録画再生部１２０、復号部１３０、定型画像検出部１４０、画像遷移検出部１５０、字幕データ検出部１６０、受信装置制御部１９０を含む。受信装置制御部１９０は、内蔵型コンピュータ装置等の形態を有してもよく、受信装置１００の各構成要素の動作を制御する。受信装置制御部１９０は、このような制御を実施するコンピュータ・プログラムの動作のために、適宜、読み出し専用メモリ（ＲＯＭ）等の記憶媒体（図示せず）を備えてもよい。
【００３６】
放送受信部１１０は、放送波又はネットワーク配信等を介して、デジタル放送を受信する。復号部１３０は、受信したデジタル放送から番組を復号する。典型的には、復号部１３０は、受信したデジタル放送からＴＳ（トランスポート・ストリーム）を復号する。このＴＳには、映像、音声、字幕データ、文字放送データ等の、異なる形式を有する複数のデータが含まれる。これらの放送受信部１１０及び復号部１３０は、デジタル放送を受信して前記番組を復号する番組復号手段を構成することができる。ＴＳに含まれる映像、音声、字幕データ、文字放送データ等のデータは、復号部１３０から映像音声出力手段１８０に送られ、番組の視聴ユーザに提供される。
【００３７】
録画再生部１２０は、受信した番組を録画し、録画を再生する。録画再生部１２０は、番組を記録して再生する番組記録再生手段を構成することができる。録画及び再生される番組は、典型的には、前述の復号されたＴＳの形態を有する。あるいは、録画再生部１２０は、受信したデジタル放送を、圧縮した動画データ形式の一つである、所定のビットレートのＭＰＥＧ−２形式に変換して録画し、再生するときには圧縮された当該ＭＰＥＧ−２形式のデジタル放送を再生する。デジタル放送を録画及び再生するためのデータ形式は、ＭＰＥＧ−２に限らず、録画及び再生に対応した公知のデータ形式から選択することができる。例えば、データ形式は、ＭＰＥＧ−４、ＱｕｉｃｋＴｉｍｅ（商標）、ＦｌａｓｈＶｉｄｅｏ（商標）等でもよい。録画におけるデータ圧縮及び再生におけるデータ復号の方法及び手段は何でもよい。
【００３８】
定型画像検出部１４０は、録画再生部１２０が番組を録画している期間に、番組から所定の定型画像を検出し、検出した定型画像に関連付けられる時刻の情報を抽出する、定型画像検出手段を構成することができる。所定の定型画像としては、例えば、カメラを用いて撮影された画像に重ね合わされる、コンピュータ等を用いて作成されたスーパーインポーズ等の画像が挙げられる。典型的には、スーパーインポーズ等の画像は、カメラ等により撮影された人物像又は自然風景とは異なり、照明光による明暗のばらつき、カメラアングルのずれ、撮影倍率による縮尺等の多様性を含まない、一定した画像でありうる。検出した定型画像に関連付けられる時刻としては、例えば、前述の表示時刻（ＰＴＳ）を用いることができる。
【００３９】
画像遷移検出部１５０は、録画再生部１２０が番組を録画している期間に、番組から画像の遷移を検出し、検出した遷移に関連付けられる時刻の情報を抽出する、画像遷移検出手段を構成することができる。画像の遷移は、カット、ディゾルブ、ワイプ、スクロール等を含む、二つの画像の切り替えに用いられる映像効果である。トランジションによる画像の遷移は、所定の定型画像が検出される画面上の部分的な領域にも及びうるので、所定の定型画像に対して発生する画像の遷移も、本発明に係るデジタル放送受信システム１０が検出する、画像の遷移に含まれる。これらのような画像の遷移は、本発明に係るデジタル放送受信システム１０において、番組中の話題の切り替えの情報として用いることができる。検出した画像の遷移に関連付けられる時刻としては、例えば、前述の表示時刻（ＰＴＳ）を用いることができる。
【００４０】
字幕データ検出部１６０は、録画再生部１２０が番組を録画している期間に、字幕データから所定の定型表現の出現を検出し、検出した定型表現に関連付けられる時刻の情報を抽出する、定型表現検出手段を構成することができる。定型表現の出現においては、例えば文字列の一致を判定するための公知の手法を任意に用いることが可能である。検出した定型表現に関連付けられる時刻としては、例えば、前述の表示時刻（ＰＴＳ）を用いることができる。
【００４１】
定型画像検出部１４０、画像遷移検出部１５０、字幕データ検出部１６０及び受信装置制御部１９０は、復号された番組に対して、映像の分割点の情報又は字幕データの分割点の情報を生成する、分割点生成手段を構成することができる。分割点生成手段としての動作は、図３及び図４を用いて後述する。
【００４２】
図１には、受信装置１００、記憶媒体１７０、映像音声出力手段１８０のそれぞれを独立した構成要素として示したが、本発明に係るデジタル放送受信システム１０はこれに限定せず、いずれかの構成要素が他の構成要素を内蔵してもよい。例えば、受信装置１００に記憶媒体１７０を内蔵してもよく、映像音声出力手段１８０に受信装置１００及び記憶媒体１７０を内蔵してもよい。あるいは、受信装置１００、記憶媒体１７０、映像音声出力手段１８０のそれぞれの機能を有する構成要素を備えるコンピュータシステム等を、本発明に係るデジタル放送受信システム１０として用いてもよい。
【００４３】
［番組からストーリへの分割の例］
図２は、本発明の一実施形態に係る、映像分割位置及び字幕分割位置を用いる、番組からストーリへの分割の例を示す図である。映像２１０及び字幕２２０は、例えば図１に示した、本発明に係る受信装置１００により受信され、復号された、一つの番組に含まれる。映像２１０は、表示時刻（ＰＴＳ）により同期される音声を伴ってもよい。
【００４４】
まず、本発明に係るデジタル放送受信システム１０が検出する、デジタル放送に含まれる特徴について述べる。当該特徴は、（１）スーパーインポーズ画像、（２）トランジション、及び（３）定型表現である。
【００４５】
例えば、ニュース番組では、ストーリの冒頭にその内容を表すタイトルが「スーパー」（オープンキャプション、スーパーインポーズされた画像の形態を有する語句又は文章等）で表示されるのが一般的である。また、前のストーリで収録映像や中継映像、解説者等のショットが表示されていた場合、次のストーリに移るタイミングでは、映像を切り替えるカットや、二つの映像を重複させながら切り替えるディゾルブ等のトランジションを経由して、映像がアナウンサーのショットに切り替わる。さらにアナウンサーの言葉に着目すると、ストーリの冒頭では「さて」、「続いて」、「次は○○です」といった定型的な表現が多用される。これらを利用して、本システムではスーパーの出現、カットとディゾルブ、定型表現の３つの特徴からストーリの境界を検出する。
【００４６】
典型的には、ニュース番組の字幕は、放送時にライブ制作されるため、アナウンサー等が話したタイミングよりも字幕が表示されるタイミングは数秒から２０秒程度遅れる場合がある。すなわち、映像におけるストーリの境界と、字幕におけるストーリの境界とは異なる。本発明に係るデジタル放送受信システム１０においては、このような異なる種類の境界を、それぞれ個別に検出することが可能である。以下、各特徴の検出方法について説明する。
【００４７】
（特徴（１）：スーパーインポーズ画像）
スーパーインポーズ画像は、例えば、文字の形態を有する図形を含む図形及び図形の組み合わせであり、画像の形態を有する。ストーリのタイトルスーパーは、例えば、特定のデザインの背景画に文字を載せたものである。背景画は番組ごとに決まっており、タイトルの文章が異なっても毎回同じ背景画が同じ位置に表示される。スポーツや特集といった特殊なジャンルのストーリでは、一般ニュースと異なる画像が使われることもある。また、円株や気象等では、ストーリの冒頭にタイトルを表示せず、ストーリそのものが定形のスーパーで表示されるものもある。これらの定形画像が特定の位置に出現するタイミングを検出する。このタイミングを、第１の時刻としてもよい。なお、フラッシュニュースのようにワイプでタイトルスーパーが切り替わる場合は、定形画像にワイプの境界線が横切るタイミングを、次のストーリのタイトルスーパーが出現するタイミングとする。
【００４８】
（特徴（２）：トランジション）
トランジションは、二つの画像の切り替えのために用いられる映像効果であり、画像の形態に含めることができる。あるいは、トランジションは、切り替えによる変形又は他の画像との重複等の影響を受けた画像又は画像の一部として扱ってもよい。トランジションの検出は、例えば、前述の公知技術を用いて実施することが可能である。例えば、カット、ディゾルブ等のトランジションを検出することができる。また、フラッシュニュースのように、タイトルスーパーがワイプで切り替わったタイミングも、同様にカット位置の一つと見なしてもよい。このタイミングを、第２の時刻としてもよい。
【００４９】
（特徴（３）：定型表現）
定型表現は、文字情報の形態を有する字幕データに含まれる、定型的な語句等である。従って、定型表現は、文字データに含まれる。ストーリ開始の表現としては、例えば、「さて」、「続いて」、「さあ続いては」、「では続いてのニュース」、「続いてプロ野球です」、「次のニュースです」等が挙げられる。また、ストーリ終了の表現としては、例えば、「以上、スポーツでした」、「今夜のスポーツは以上です」、「気象情報でした」、「特集でした」、「中継でお伝えしました」等が挙げられる。しかしながら、ストーリの開始又は終了の表現は、これらに限定しない。本発明に係るデジタル放送受信システム１０においては、これらのような頻繁に使われる表現を、予め記憶媒体１７０等に記憶し、字幕に含まれる文章等の文字データとの部分的一致を判定することにより、定型表現の出現する箇所を検出してもよい。このように検出したタイミングを、第３の時刻としてもよい。
【００５０】
以下、トランジションを検出し、複数検出されたカット、ディゾルブ等のトランジションの位置のうち、スーパー検出位置の直前のトランジションの検出位置を映像分割位置とすることを、映像分割の基本プロセスと呼ぶ。また、定型表現の検出による字幕の分割を、字幕分割の基本プロセスと呼ぶ。
【００５１】
一実施形態において、本発明に係るデジタル放送受信システム１０は、映像分割の基本プロセスを実施することにより、第１の時刻及び第２の時刻に基づいて、映像分割位置の情報を生成し、生成した情報を第１の分割点の情報とすることができる。別の実施形態において、本発明に係るデジタル放送受信システム１０は、第２の時刻及び第３の時刻に基づいて、映像分割位置の情報を生成し、生成した情報を第２の分割点の情報とすることができる。さらに別の実施形態において、本発明に係るデジタル放送受信システム１０は、第１の分割点の情報に基づいて、字幕データを分割するための情報である、第３の分割点の情報を生成することができる。
【００５２】
再び、図２を参照し、本発明に係るデジタル放送受信システム１０において、デジタル放送に含まれる特徴の検出により、番組からストーリへの分割について説明する。映像２１０からは、スーパー２６０又はトランジション２７０として、前述のスーパーインポーズ画像又はカット、ディゾルブ等が検出される。しかし、これらの映像の特徴のみを用いる映像分割の基本プロセスでは、例えば、ストーリの冒頭で必ずしもスーパーが出現しない、といった映像の多様性の影響を受ける場合がある。そこで、本発明に係るデジタル放送受信システム１０においては、次のように、字幕分割位置２４０を併用する。
【００５３】
図２に示す、字幕２２０からは、定型表現２５０が検出される。定型表現２５０は、例えば「以上、気象情報でした」等の、ストーリ終了を表す定型表現２５２、又は「続いて、」等のストーリ開始を表す定型表現２５４等である。字幕分割位置２４０は、このような、ストーリ終了を表す定型表現２５２とストーリ開始を表す定型表現２５４との境界として、検出されてもよい。字幕分割位置２４０が検出されることにより、字幕２２０において、ストーリ１（２２２）とストーリ２（２２４）との境界が画定することになる。後続のストーリ３（２２６）についても、同様に後続の字幕分割位置を検出することにより、境界が画定される。
【００５４】
次いで、前述の映像分割の基本プロセスを用い、図２に示す映像２１０においてカット、ディゾルブ等のトランジションを検出し、映像分割位置２３０の情報が生成される。さらに、特定の映像分割位置２３０に対して、当該映像分割位置２３０以降であって所定の時間ｔ以内に字幕分割位置２４０がある場合に、これらの映像分割位置２３０と字幕分割位置２４０とが関連付けられる。例えば、ｔ＝３０［秒］に設定し、特定の映像分割位置２３０が３５分４０秒の時刻であり、字幕分割位置が３５分４８秒の時刻であれば、両者は同一のストーリの開始位置であることが算出される。しかしながら、特定の映像分割位置が３５分４０秒の時刻であり、字幕分割位置が３６分４８秒の時刻であれば、両者は異なるストーリの開始位置であることが算出される。このように、異なるストーリの開始位置であることが算出された字幕分割位置に対しては、当該字幕分割位置が対応するストーリは、特定の映像分割位置が対応するストーリの次のストーリ、又は次のストーリに後続するストーリであることを示す情報を生成してもよい。このようにして、ストーリの開始位置が算出されることにより、映像２１０において、ストーリ１（２１２）とストーリ２（２１４）との境界が画定することになる。後続のストーリ３（２１６）についても、同様に後続の映像分割位置を検出することにより、境界が画定される。
【００５５】
このようにすることで、本発明に係るデジタル放送受信システム１０においては、字幕から定型表現を検出することを用いて、映像からストーリへの分割を実施することができる。図２に示した、所定の時間ｔについては、以下の実施形態と共に、さらに説明する。
【００５６】
［映像の分割方法］
図３は、本発明の一実施形態に係る、映像を分割する情報を生成する方法の例を示すフロー図である。本発明に係るデジタル放送受信システム１０においては、番組を録画する期間において、映像分割の基本プロセス及び字幕分割の基本プロセスを、並列して動作させることが可能である。さらに、映像分割の基本プロセスにおいては、スーパーインポーズ画像の検出及びトランジションの検出を並列して動作させることができる。
【００５７】
ステップＳ３１０において、デジタル放送受信システム１０は、スーパー検出を実施する。すなわち、ニュース番組等において、ストーリの冒頭に表示される、所定のスーパーインポーズ画像が検出される。このスーパー検出のタイミングを、第１の時刻としてもよい。
【００５８】
ステップＳ３２０において、デジタル放送受信システム１０は、トランジションを検出する。すなわち、カット又はディゾルブ等の映像効果の出現が検出される。このトランジションの検出のタイミングを、第２の時刻としてもよい。
【００５９】
ステップＳ３３０において、デジタル放送受信システム１０は、定型表現を検出する。すなわち、ストーリ開始の表現又はストーリ終了の、所定の表現が検出される。この定型表現の検出のタイミングを、第３の時刻としてもよい。
【００６０】
ステップＳ３４０において、デジタル放送受信システム１０は、字幕分割位置選択を実施する。この字幕分割位置選択は、前述の字幕分割の基本プロセスである。
【００６１】
ステップＳ３５１において、デジタル放送受信システム１０は、映像分割位置選択（１）を実施する。この映像分割位置選択（１）は、前述の映像分割の基本プロセスである。この映像分割位置選択（１）により、例えば、第１の時刻及び第２の時刻に基づいて、第１の分割点の情報を生成することができる。
【００６２】
ステップＳ３５２において、デジタル放送受信システム１０は、映像分割位置選択（２）を実施する。すなわち、トランジション検出により検出されたカット、ディゾルブ等のトランジションのうちから、字幕分割の基本プロセスにより検出された字幕分割位置に対して、直前のものが映像分割位置として選択される。この映像分割位置選択（２）により、例えば、第２の時刻及び第３の時刻に基づいて、第２の分割点の情報を生成することができる。
【００６３】
ステップＳ３７０において、デジタル放送受信システム１０は、フィルタリングを実施する。すなわち、映像分割位置選択（１）の結果と、字幕分割位置選択の結果とを比較する。例えば、映像分割位置の後３０秒以内に字幕分割位置があれば（すなわち、図２において、ｔ≦３０［秒］）、同じストーリに関する分割位置として対応付けた上で、対応する映像分割位置のない字幕分割位置に関してのみ、映像分割位置選択（２）の検出結果を残す。
【００６４】
ステップＳ３８０において、デジタル放送受信システム１０は、以上の諸段階から検出された映像分割位置を、図１に示した記憶媒体１７０等の記憶媒体に記憶する。
【００６５】
このようにすることで、本発明に係るデジタル放送受信システム１０においては、映像分割位置選択（１）、映像分割位置選択（２）、及び字幕分割位置選択を用いて、映像を分割し、分割した映像をストーリとすることができる。さらに、分割されたそれぞれのストーリを代表する静止画又は短時間の動画等を、公知の手法により抽出又は生成してもよい。従って、本発明に係るデジタル放送受信システム１０においては、分割されたストーリを用いて番組の一部又は全体の要約等を、静止画又は動画等の映像の形態で提供することが可能である。
【００６６】
［字幕の分割方法］
図４は、本発明の一実施形態に係る、字幕を分割する情報を生成する方法の例を示すフロー図である。図３に示した映像を分割する情報の生成と同一のステップについては、説明の一部を省略する。
【００６７】
ステップＳ３１０において、図３と同様に、スーパー検出が実施される。ステップＳ３２０において、図３と同様に、トランジションが検出される。ステップＳ３５０における映像分割位置選択は、前述の映像分割の基本プロセスである。これらの、ステップＳ３１０、Ｓ３２０及びＳ３５０の動作により、映像のみに基づいて、映像を分割するための複数の情報が生成される。例えば、前述と同様に、ステップＳ３１０において得られる第１の時刻と、ステップＳ３２０において得られる第２の時刻とを用い、ステップＳ３５０において第１の分割点の情報が生成される。
【００６８】
ステップＳ３３０において、デジタル放送受信システム１０は、前述と同様に、字幕分割の基本プロセスを実施し、定型表現を検出する。ステップＳ３４１において、デジタル放送受信システム１０は、字幕分割位置選択（１）を実施する。この字幕分割位置選択（１）は、検出された定型表現のタイミングを、第３の時刻とする処理である。
【００６９】
ステップＳ３６２において、デジタル放送受信システム１０は、字幕分割位置選択（２）を実施する。これにより、第３の分割点の情報が生成される。すなわち、前述の第１の分割点の情報に基づいて、字幕を分割するための第３の分割点の情報が生成される。例えば、第１の分割点でありうる映像分割位置の５秒後以降（図２におけるｔ≧５）に文章が開始する位置を、新たに字幕分割位置として、第３の分割点の情報を生成してもよい。
【００７０】
ステップＳ３７０において、デジタル放送受信システム１０は、フィルタリングを実施する。すなわち、ステップＳ３４１による第３の時刻と、ステップＳ３６２による第３の分割点の情報とを比較し、映像分割位置の後３０秒以内に字幕分割位置があれば（例えば、図２においてｔ≦３０）、同じストーリに関する分割位置として対応付けた上で、対応する字幕分割位置のない映像分割位置に関してのみ、第３の分割点の情報を残してもよい。ここで、ｔの値は番組の特性に応じて変えることが可能である。
【００７１】
ステップＳ３９０において、デジタル放送受信システム１０は、以上の諸段階から検出された字幕分割位置を、図１に示した記憶媒体１７０等の記憶媒体に記憶する。すなわち、字幕分割位置は、第３の時刻又は第３の分割点の情報から生成した、字幕データの分割点でありうる。
【００７２】
このようにすることで、本発明に係るデジタル放送受信システム１０においては、字幕分割位置選択（１）、字幕分割位置選択（２）、及び映像分割位置選択を用いて、字幕を分割し、分割した字幕をストーリとすることができる。さらに、分割されたそれぞれのストーリごとに、ストーリを代表する用語等の言語的表現を、公知の手法により抽出又は生成してもよい。分割されたストーリを用いる言語的解析等は、任意に設定できる。従って、本発明に係るデジタル放送受信システム１０においては、分割されたストーリを用いて、番組の一部又は全体の要約の生成、ストーリの解析、メタデータ抽出等を実施することが可能である。
【００７３】
図３に示した映像を分割する情報を生成する方法、及び図４に示した字幕を分割する情報を生成する方法により、本発明に係るデジタル放送受信システム１０は、従来技術に係る映像の特徴を用いる分割とは異なり、画像の解析と番組に付随する字幕の解析を併用することで、特別なメタデータなしに、構成がシンプルな番組以外でもストーリ分割の精度を上げることが可能になる。また、本発明に係る画像解析をスーパー出現の検出、及びトランジションの検出のみとすることにより、スーパーはカメラで撮影した映像に番組固有の画像を合成したものであるため、カメラの特性やアングル、スタジオの照明のばらつき等によらず、毎回決まったデザインのスーパー画像を確実に検出し、映像又は字幕を分割する情報を生成することが可能になる。また、スーパーは出現する位置も大きさも固定であるため、画像解析する領域を限定することができ、解析のためのコストも抑えることができる。また、本発明に係るデジタル放送受信システム１０においては、ストーリの境界を用いて、次のストーリの開始点にスキップして再生する、必要なストーリだけ抽出して再生する等の操作が可能となる。さらに、本発明に係るデジタル放送受信システム１０は、画像のストーリ分割と共に字幕もストーリ分割できるため、字幕を用いたストーリ解析やメタデータ抽出等に利用できる。
【実施例】
【００７４】
以下、本発明に係るデジタル放送受信システム１０が検出する、映像又は字幕の実施例を挙げる。
【００７５】
（実施例１：定型画像の例）
図５は、本発明の一実施形態に係る、分割点の情報を生成するために用いる、定型画像の例を示す図である。図５（ａ）に、定型画像の例としてのスーパーインポーズ画像６１０を示す。図５（ｂ）に、部分的な定型画像の例としてのスーパーインポーズ画像６１５を示す。
【００７６】
まず、図５（ａ）に示す、表示領域５５０について説明する。本発明に係るデジタル放送受信システム１０は、市販入手可能なテレビ受信機等が備える表示装置等の画面５１０を用い、この画面５１０の中に適宜設けられる表示領域５５０を介して、ユーザに映像を提供することができる。表示領域５５０は、テレビ受信機に限定せず、パーソナルコンピュータが備えるディスプレイ装置等（図示せず）に設けられてもよい。表示領域５５０の大きさは一つの画面５１０よりも小さくてもよく、複数の表示装置を二次元的に組み合わせて、一つの表示装置の画面５１０よりも大きな、全体として一つの表示領域５５０を設けてもよく、適宜設計することができる。以下、画面５１０を構成するためのハードウェア等は特に限定せず、表示領域５５０に含まれ、本発明に係るデジタル放送受信システム１０が分割点の情報を生成するために用いることのできる、映像又は字幕の実施例について説明する。
【００７７】
図５（ａ）には、表示領域５５０の中に、スーパーインポーズ画像６１０が配置されている例を示す。図５（ａ）に例示するスーパーインポーズ画像６１０は、略長方形の形状を有する枠組みの画像、及びこの枠組みの画像に重ねて表示される、文字の形態を有する画像等を、適宜含む。本発明に係るデジタル放送受信システム１０は、例えば、枠組みの画像のみを定型画像として検出してもよい。あるいは、略長方形の形状を有する枠組みの画像の左上から右上の部分、又は左上から左下の部分等の、枠組みの画像の一部を、所定の定型画像とすることができるが、これらの部分に限定しない。典型的には、このような所定の定型画像は、文字の形態を有する画像を含まない、一定の形状を有する。このようにすることで、スーパーインポーズ画像６１０に含まれる文字の形態を有する画像が変化しても、本発明に係るデジタル放送受信システム１０は、枠組みの画像の一部を所定の定型画像として検出することができる。
【００７８】
典型的には、スーパーインポーズ画像６１０は、放送局等において画像データを生成するコンピュータ装置（図示せず）等により生成された画像データでありうる。すなわち、スーパーインポーズ画像６１０は、通常は、スタジオ又は野外等における照明光による明暗のばらつき、カメラアングルのずれ、撮影倍率による縮尺等の多様性を含まない。すなわち、表示領域５５０の他の領域に表示される人物等がカメラを介して撮影された映像であっても、スーパーインポーズ画像６１０は定型的な画像でありうる。従って、本発明に係るデジタル放送受信システム１０は、映像のばらつきや多様性の影響を受けることなく、定型的な画像を検出することができる。また、本発明に係るデジタル放送受信システム１０は、表示領域の一部に表示される、スーパーインポーズ画像６１０等の所定の定型画像の出現を検出することにより、表示領域５５０内における画像の解析を実施する領域を限定してもよい。例えば、表示領域５５０の下半分等を画像の解析を実施する領域としてもよいが、これに限定しない。従って、本発明に係るデジタル放送受信システム１０は、画像解析のためのコストを抑えることが可能になる。
【００７９】
図５（ｂ）は、本発明の一実施形態に係る、分割点の情報を生成するために用いる、部分的な定型画像としての、スーパーインポーズ画像６１５を示す図である。
【００８０】
図５（ｂ）には、図５（ａ）に示した例と同様に、表示領域５５０の中に、スーパーインポーズ画像６１５が配置される。スーパーインポーズ画像６１５には、時間の進行に従って、後続のスーパーインポーズ画像６１７が追加される。例えば、後続のスーパーインポーズ画像６１７は、スーパーインポーズ画像６１５の右側に延長して、映像と対応する見出し等の文字を含む画像であってもよい。すなわち、スーパーインポーズ画像６１５は、後続のスーパーインポーズ画像６１７等の、他の文字又は画像の形態を有する部分との組み合わせが可能な、部分的な定型的な画像であってもよい。本発明に係るデジタル放送受信システム１０は、スーパーインポーズ画像６１５等の、他の画像を伴う全体の画像の一部を定型画像として検出し、分割点の情報を生成するために用いることができる。
【００８１】
本発明に係るデジタル放送受信システム１０は、図５（ａ）及び図５（ｂ）に例示するスーパーインポーズ画像６１０又はスーパーインポーズ画像６１５を定型画像として検出し、分割点の情報を生成するために用いることができる。具体的には、図１に示した定型画像検出部１４０により、表示領域５５０に出現したスーパーインポーズ画像６１０又はスーパーインポーズ画像６１５が検出され、さらに、検出されたスーパーインポーズ画像６１０又はスーパーインポーズ画像６１５に、個別に表示時刻（ＰＴＳ）等の時刻が関連付けられる。
【００８２】
（実施例２：定型画像の別の例）
図６は、本発明の一実施形態に係る、分割点の情報を生成するために用いる、定型画像のさらに別の例を示す図である。図６（ａ）は、表示領域５５０の中に、スーパーインポーズ画像６３５が配置される例である。図６（ｂ）は、スーパーインポーズ画像６３５の一部に含まれる、略長円形状の図形６４０を示す図である。図６（ｂ）に示す例においては、この略長円形状の図形６４０は、「東京外国為替市場」という文字の形態を有する画像の一部として用いられている。
【００８３】
図６（ａ）においては、表示領域５５０の他の領域には、為替価格等を表す文字の形態を有する画像が表示されている。本発明に係るデジタル放送受信システム１０は、略長円形状の図形６４０等の一部を所定の定型画像として予め設定することができる。例えば、略長円形状の図形６４０の左下から右下の部分、又は左上から左下の部分等を、所定の定型画像とすることができるが、これらの部分に限定しない。従って、本発明に係るデジタル放送受信システム１０は、略長円形状の図形６４０の一部を、所定の定型画像として検出することができる。このようにすることで、表示領域５５０の他の領域に表示される映像が、人物等ではない文字の形態を有する画像等であっても、略長円形状の図形６４０の一部が表示されたタイミングで、これを所定の定型画像として検出し、分割点の情報を生成するために用いることができる。
【００８４】
図６（ａ）及び図６（ｂ）に示す例においては、本発明に係るデジタル放送受信システム１０は、略長円形状の図形６４０等の少なくとも一部を定型的な画像として検出すればよく、検出に用いる部分を除く他の部分の画像は何でもよい。例えば、共に表示される文字又は他の任意の形態を有する他の部分の画像の配置は、図６（ａ）におけるスーパーインポーズ画像６３５のように、隣接又は並列して配置されてもよい。
【００８５】
（実施例３：トランジションの例）
図７は、本発明の一実施形態に係る、分割点の情報を生成するために用いる、トランジションの例を示す図である。図７（ａ）は、トランジションの一例として、ワイプを示す図である。図７（ｂ）は、ワイプの別の形態を示す図である。
【００８６】
図７（ａ）は、本発明の一実施形態に係る、分割点の情報を生成するために用いる、トランジションの例を示す図である。トランジションは、図５（ａ）に示したスーパーインポーズ画像６１０等と同様に、表示領域５５０を介してユーザに提供される映像に含まれる。
【００８７】
図７（ａ）には、表示領域５５０の中に、ワイプイン領域５２０及びワイプアウト領域５３０が含まれ、これらの境界にワイプ５４０が設けられる例を示す。図７（ａ）に示す例においては、ワイプ５４０は、移動方向５４５の方向に沿って、すなわち表示領域５５０の左上方から右下方に移動する。ワイプ５４０のこのような移動に伴い、表示領域５５０においてワイプイン領域５２０の占める領域は大きくなり、ワイプアウト領域５３０の占める領域は小さくなる。結果として、ワイプアウト領域５３０に表示される映像は、ワイプイン領域５２０に表示される映像に置き換えられる。このようにして、二つの映像の切り替えが行われる。ワイプ５４０は棒状の画像等であってもよく、単に境界であってもよい。ワイプ５４０の形状、移動方向５４５等は、図７（ａ）に示した例に限らず、任意に設定することができる。
【００８８】
図７（ｂ）は、ワイプの別の形態を示す図である。図７（ｂ）に例示するワイプの例において、表示領域５５０の中には、切り替え後の画像を表示するための部分領域５５６が含まれる。部分領域５５６は、同じ形状の他の部分領域と共に、表示領域５５０の範囲内に規則的に配列される。図７（ｂ）に示す例においては、略三角形の図形の形状を有する部分領域５５６が、同じ形状の他の部分領域と共に、次第に拡大することにより、略三角形の境界の外側にある映像の領域は次第に狭まり、略三角形の境界の内側にある映像の領域は次第に広がる。このようにして、二つの映像の切り替えが行われる。このようなワイプに用いられる図形の形状は、略三角形に限らず、正方形、円、ランダムな大きさの図形の組み合わせ等、任意に設定することができる。
【００８９】
図７（ａ）及び図７（ｂ）に例示するワイプは、放送局等において画像データを生成するコンピュータ装置（図示せず）等により生成される映像効果又は画像データでありうる。従って、図７（ａ）に示すワイプイン領域５２０又はワイプアウト領域５３０等に表示される人物等がカメラを介して撮影された映像であっても、ワイプ５４０自体は、スタジオ又は野外等における照明光による明暗のばらつき、カメラアングルのずれ、撮影倍率による縮尺等の多様性を含まない。図７（ｂ）についても同様である。従って、本発明に係るデジタル放送受信システム１０は、映像のばらつきや多様性の影響を受けることなく、トランジションを検出することができる。
【００９０】
本発明に係るデジタル放送受信システム１０は、図７（ａ）及び図７（ｂ）に例示するワイプをトランジションとして検出し、分割点の情報を生成するために用いることができる。加えて、本発明に係るデジタル放送受信システム１０は、二つの画面を瞬時に切り替えるカット、画面全体を徐々に別の画面に切り替えるディゾルブ等の、他の形態のトランジションを、ワイプと同様に検出してもよい。具体的には、図１に示した画像遷移検出部１５０により、表示領域５５０に出現した任意の形態のトランジションが検出され、さらに、検出したトランジションと表示時刻（ＰＴＳ）等の時刻とが関連付けられる。
【００９１】
（実施例４：定型画像及びトランジションの組み合わせ）
図８は、本発明の一実施形態に係る、分割点の情報を生成するために用いる、定型画像及びトランジションの組み合わせの例を示す図である。図８（ａ）は、表示領域５５０の中に、スーパーインポーズ画像６５０及びワイプ６７０が含まれる例である。ワイプ６７０は、移動方向６７５の方向に沿って、すなわち表示領域５５０の下方から上方に移動する。図８（ｂ）は、スーパーインポーズ画像６５０に含まれる、略長方形状の図形６６０を示す図である。図８（ｂ）に示す例においては、この略長方形状の図形６６０は、「貸出金利引き下げ」という文字の形態を有する画像の背景として用いられている。
【００９２】
定型画像としては、略長円形状の図形６６０の一部が用いられる。例えば、略長円形状の図形６６０の右下の部分等の、文字の形態を有する画像との重複のない部分を、所定の定型画像とすることができるが、これに限定しない。従って、本発明に係るデジタル放送受信システム１０は、略長円形状の図形６６０の一部等、文字の形態を有する画像が変化する場合であっても、一定の形状を有して繰り返し用いられる画像の部分を、所定の定型画像として検出することができる。
【００９３】
例えば、図８（ａ）及び図８（ｂ）に示す例において、スーパーインポーズ画像６５０に含まれる略長方形状の図形６６０は、複数のストーリにおいて共通に表示されてもよい。一つのストーリから次のストーリに番組が進行するときに、表示領域５５０においてワイプ６７０が移動方向６７５の方向に沿って、すなわち表示領域５５０の下方から上方に移動することにより、画面の切り替えが行われてもよい。本発明に係るデジタル放送受信システム１０は、ワイプ６７０が略長方形状の図形６６０を横切るタイミングで、定型的な画像である略長方形状の図形６６０に画像の遷移が発生したことを検出できる。換言すれば、本発明に係るデジタル放送受信システム１０は、表示領域５５０の全体よりも、むしろ略長方形状の図形６６０の領域又はその周辺等の部分的な画面の領域について、トランジションを検出することができる。従って、本発明に係るデジタル放送受信システム１０は、トランジションの検出においても、図５に示した所定の定型画像の出現の検出と同様に、表示領域５５０内における検出のための領域を限定することができ、映像を解析するためのコストを抑えることが可能になる。
【００９４】
図８（ａ）には、略長方形状の図形６６０をワイプ６７０が横切る例を示したが、定型画像に画像の遷移を発生させるトランジションの形態及び様式は、これに限定せず、任意に設定することができる。例えば、前述のディゾルブにより、定型画像に画像の遷移が発生することを検出してもよい。ワイプ６７０は、図８（ａ）の例のように、表示領域５５０の左右方向の全体にわたってもよく、略長方形状の図形６６０又はこの周辺のみに発生してもよい。同様に、例えば、スーパーインポーズ画像６５０に含まれる略長方形状の図形６６０又はこの周辺の領域に、ディゾルブ等のトランジションによる画像の切り替えが生じた場合に、本発明に係るデジタル放送受信システム１０は、この画像の切り替えを、定型画像に発生した画像の遷移として検出し、分割点の情報を生成することが可能である。
【００９５】
本発明に係るデジタル放送受信システム１０においては、定型的な画像を含む画面の領域において、トランジションによる画像の遷移を検出し、分割点の情報を生成することができる。具体的には、図１に示した画像遷移検出部１５０により、表示領域５５０の一部に出現するトランジションを検出し、さらに、検出したトランジションと表示時刻（ＰＴＳ）等の時刻とを関連付けることができる。
【００９６】
（実施例５：字幕データ）
図９は、本発明の一実施形態に係る、分割点の情報を生成するために用いる、字幕データの例を示す図である。字幕データは、表示領域５５０に表示される映像に重ね合わされて表示される、文字情報の形態を有するデータでありうる。
【００９７】
図９に示す例においては、表示領域５５０の中に字幕領域６８０が設けられる。字幕領域６８０は、字幕データに含まれ、所定の文字コードを有する文字情報に対応する文字を、画像として配列して表示するための領域として用いられる。字幕領域６８０に表示される字幕データは、文字の色、フォント、背景、表示位置等の文字属性の情報を含んでもよい。また、受信装置１００は、ユーザによる所望の設定に従って、字幕データに対応する文字を映像に含めてもよく、含めなくてもよい。すなわち、ユーザが文字として字幕データを視認できるかどうかに関わらず、本発明に係るデジタル放送受信システム１０は、字幕データを用いて分割点の情報を生成することができる。字幕データに対応する文字を映像に含める場合に、受信装置１００は、ユーザが文字を視認しやすくするために、適宜、字幕領域６８０に所定の透過率を有する灰色等の背景を追加してもよい。字幕データに含まれる文字情報の文字属性、又は受信装置１００による追加の表示等は、任意に設定することができる。
【００９８】
本発明に係るデジタル放送受信システム１０は、図９に例示する字幕データに含まれる定型的な表現を検出し、分割点の情報を生成するために用いることができる。具体的には、図１に示した字幕データ検出部１６０により、字幕データに含まれる定型的な表現が検出され、さらに、検出した定型的な表現と表示時刻（ＰＴＳ）等の時刻とが関連付けられる。
【００９９】
図９に示す字幕領域６８０に表示される字幕データは、放送局等において、番組の一部として映像及び音声と共に放送される。従って、本発明に係るデジタル放送受信システム１０は、表示領域５５０に表示される映像とは独立して、字幕データを取得することができる。従って、本発明に係るデジタル放送受信システム１０は、映像のばらつきや多様性の影響を受けることなく、字幕データを取得し、字幕データに含まれる定型的な表現を検出することができる。
【０１００】
以上、本発明の実施形態を用いて説明したが、本発明の技術的範囲は上記実施形態に記載の範囲には限定されない。上記実施形態に、多様な変更又は改良を加えることができる。そのような変更又は改良を加えた形態も本発明の技術的範囲に含まれうることが、特許請求の範囲の記載から明らかである。
【符号の説明】
【０１０１】
１０  デジタル放送受信システム
１００  受信装置
１１０  放送受信部
１２０  録画部
１３０  復号部
１４０  定型画像検出部
１５０  画像遷移検出部
１６０  字幕データ検出部
１７０  記憶媒体
１８０  映像音声出力手段
１９０  受信装置制御部
２２０  字幕
２３０  映像分割位置
２４０  字幕分割位置
２６０  スーパー
２７０  トランジション
５１０  画像出力手段
５２０  ワイプイン領域
５３０  ワイプアウト領域
５４０、６７０  ワイプ
５４５、６７５  移動方向
５５０  表示領域
６１０、６１５、６３５、６４０、６５０、６６０  定型画像（スーパー）
６８０  字幕領域
【図１】
2010283729.tif 000003
【図２】
2010283729.tif 000004
【図３】
2010283729.tif 000005
【図４】
2010283729.tif 000006
【図５】
2010283729.tif 000007
【図６】
2010283729.tif 000008
【図７】
2010283729.tif 000009
【図８】
2010283729.tif 000010
【図９】
2010283729.tif 000011