(57)【要約】【課題】映像区間で区切られた番組に、番組の内容に対して適切な見出しを紐付ける。【解決手段】見出し関連キーワード群抽出部２２は、番組に関連する情報に含まれる見出しに紐付けられている本文から、本文に含まれる単語を見出しキーワードとして抽出する。映像区間切り出し部１６は、番組を複数の映像区間で切り出す切り出し、字幕キーワード群抽出部１８は、映像区間切り出し部１６により切り出された映像区間ごとに、番組の映像に同期している字幕から、字幕に含まれる単語を字幕キーワードとして抽出する。そして、字幕キーワードと見出しキーワードとの類似性を評価する類似性評価部２４により、字幕キーワードとの類似性が最も高いと評価された見出しキーワードが抽出された本文に紐付けられている見出しを、紐付け情報保持部２６は、映像区間に紐付ける。本発明は、例えば、録画再生装置に適用できる。【選択図】図１
2008134825.tif 000002
【特許請求の範囲】
【請求項１】
番組、および前記番組に関連する情報を処理する情報処理装置において、
前記番組に関連する情報に含まれる見出しに紐付けられている本文から、前記本文に含まれる単語を、見出しキーワードとして抽出する見出しキーワード抽出手段と、
前記番組から複数の映像区間を切り出す切り出し手段と、
前記切り出し手段により切り出された前記映像区間ごとに、前記番組の映像に同期している字幕から、前記字幕に含まれる単語を、字幕キーワードとして抽出する字幕キーワード抽出手段と、
前記字幕キーワードと前記見出しキーワードとの類似性を評価する評価手段と、
前記字幕キーワードとの類似性が最も高いと評価された前記見出しキーワードが抽出された前記本文に紐付けられている前記見出しを、前記映像区間に紐付ける紐付け手段と
を備える情報処理装置。
【請求項２】
前記番組を受信する番組受信手段と、
前記番組に関連する情報を受信する情報受信手段と
をさらに備える請求項１に記載の情報処理装置。
【請求項３】
前記番組と、前記番組に関連する情報との受信を、時分割で行う受信手段
をさらに備える請求項１に記載の情報処理装置。
【請求項４】
前記番組の映像の特徴量の変化に基づいて、前記切り出し手段により前記番組から切り出される前記映像区間を決定する映像区間決定手段
をさらに備える請求項１に記載の情報処理装置。
【請求項５】
番組、および前記番組に関連する情報を処理する情報処理方法において、
前記番組に関連する情報に含まれる見出しに紐付けられている本文から、前記本文に含まれる単語を見出しキーワードとして抽出し、
前記番組から複数の映像区間を切り出し、
前記映像区間ごとに、前記番組の映像に同期している字幕から、前記字幕に含まれる単語を字幕キーワードとして抽出し、
前記字幕キーワードと前記見出しキーワードとの類似性を評価し、
前記字幕キーワードとの類似性が最も高いと評価された前記見出しキーワードが抽出された前記本文に紐付けられている前記見出しを、前記映像区間に紐付ける
ステップを含む情報処理方法。
【請求項６】
番組、および前記番組に関連する情報を処理するコンピュータに実行させるプログラムにおいて、
前記番組に関連する情報に含まれる見出しに紐付けられている本文から、前記本文に含まれる単語を見出しキーワードとして抽出し、
前記番組から複数の映像区間を切り出し、
前記映像区間ごとに、前記番組の映像に同期している字幕から、前記字幕に含まれる単語を字幕キーワードとして抽出し、
前記字幕キーワードと前記見出しキーワードとの類似性を評価し、
前記字幕キーワードとの類似性が最も高いと評価された前記見出しキーワードが抽出された前記本文に紐付けられている前記見出しを、前記映像区間に紐付ける
ステップを含むプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置および情報処理方法、並びにプログラムに関し、特に、番組から切り出された映像区間に、映像区間内の番組の内容に対して適切な見出しを紐付けることができるようにした情報処理装置および情報処理方法、並びにプログラムに関する。
【背景技術】
【０００２】
従来、ハードディスクレコーダなどの録画再生装置の中には、テレビジョン放送された番組を録画する際に、番組の映像を解析することによって抽出された特徴に基づいて、場面（シーン）が切り替わる位置を検出し、その位置に応じて、番組から複数の映像区間を切り出す機能が搭載されているものがある。
【０００３】
このような録画再生装置では、録画済の番組の再生時において、表示部に、映像区間の先頭のフレームに対応する静止画像を並べて表示させ、それらの静止画像に基づいてユーザが所望の映像区間を選択すると、ユーザにより選択された映像区間の開始位置から、番組の再生が開始される。
【０００４】
ここで、例えば、特許文献１には、テレビジョン放送されている番組でコーナが開始するときに表示されるタイトル名を抽出し、そのコーナが放送されている間、タイトル名を表示する表示装置が開示されている。
【０００５】
【特許文献１】特開２００４−７２５０４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
ところで、上述したように、録画再生装置が、映像区間に応じた静止画像を表示したとしても、ユーザが、静止画像だけによって、映像区間内の番組の内容を把握することは難しく、所望の映像区間を見つけ出すことが困難であった。例えば、録画再生装置が、映像区間に応じた静止画像とともに、映像区間内の番組の内容を適切に表現した見出しを表示することができれば、ユーザは、静止画像と見出しにより映像区間内の番組の内容を把握し、所望の映像区間を容易に見つけ出すことができると考えられる。
【０００７】
しかしながら、従来の録画再生装置では、映像区間内の番組に含まれる情報を処理して、番組の内容を認識することは困難であったため、映像区間内の番組の内容を適切に表現した見出しを表示することは行われていなかった。そこで、このような表示を行うために、映像区間内の番組に含まれる情報を処理して、映像区間の内容を適切に表現した見出しを、映像区間に紐付ける情報処理装置が求められていた。
【０００８】
本発明は、このような状況に鑑みてなされたものであり、番組から切り出された映像区間に、映像区間内の番組の内容に対して適切な見出しを紐付けることができるようにするものである。
【課題を解決するための手段】
【０００９】
本発明の一側面の情報処理装置は、番組、および前記番組に関連する情報を処理する情報処理装置であって、前記番組に関連する情報に含まれる見出しに紐付けられている本文から、前記本文に含まれる単語を、見出しキーワードとして抽出する見出しキーワード抽出手段と、前記番組から複数の映像区間を切り出す切り出し手段と、前記切り出し手段により切り出された前記映像区間ごとに、前記番組の映像に同期している字幕から、前記字幕に含まれる単語を、字幕キーワードとして抽出する字幕キーワード抽出手段と、前記字幕キーワードと前記見出しキーワードとの類似性を評価する評価手段と、前記字幕キーワードとの類似性が最も高いと評価された前記見出しキーワードが抽出された前記本文に紐付けられている前記見出しを、前記映像区間に紐付ける紐付け手段とを備える。
【００１０】
本発明の一側面の情報処理方法またはプログラムは、番組、および前記番組に関連する情報を処理する情報処理方法、または、番組、および前記番組に関連する情報を処理するコンピュータに実行させるプログラムであって、前記番組に関連する情報に含まれる見出しに紐付けられている本文から、前記本文に含まれる単語を見出しキーワードとして抽出し、前記番組から複数の映像区間を切り出し、前記映像区間ごとに、前記番組の映像に同期している字幕から、前記字幕に含まれる単語を字幕キーワードとして抽出し、前記字幕キーワードと前記見出しキーワードとの類似性を評価し、前記字幕キーワードとの類似性が最も高いと評価された前記見出しキーワードが抽出された前記本文に紐付けられている前記見出しを、前記映像区間に紐付けるステップを含む。
【００１１】
本発明の一側面においては、番組に関連する情報に含まれる見出しに紐付けられている本文から、本文に含まれる単語が見出しキーワードとして抽出される。また、番組から複数の映像区間が切り出され、映像区間ごとに、番組の映像に同期している字幕から、字幕に含まれる単語が字幕キーワードとして抽出される。そして、字幕キーワードと見出しキーワードとの類似性が評価され、字幕キーワードとの類似性が最も高いと評価された見出しキーワードが抽出された本文に紐付けられている見出しが、映像区間に紐付けられる。
【発明の効果】
【００１２】
本発明の一側面によれば、番組から切り出された映像区間に、映像区間内の番組の内容に対して適切な見出しを紐付けることができる。
【発明を実施するための最良の形態】
【００１３】
以下に本発明の実施の形態を説明するが、本発明の構成要件と、明細書又は図面に記載の実施の形態との対応関係を例示すると、次のようになる。この記載は、本発明をサポートする実施の形態が、明細書又は図面に記載されていることを確認するためのものである。従って、明細書又は図面中には記載されているが、本発明の構成要件に対応する実施の形態として、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その構成要件に対応するものではないことを意味するものではない。逆に、実施の形態が構成要件に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その構成要件以外の構成要件には対応しないものであることを意味するものでもない。
【００１４】
本発明の一側面の情報処理装置は、番組、および前記番組に関連する情報を処理する情報処理装置であって、
前記番組に関連する情報に含まれる見出しに紐付けられている本文から、前記本文に含まれる単語を、見出しキーワードとして抽出する見出しキーワード抽出手段（例えば、図１の見出し関連キーワード群抽出部２２）と、
前記番組から複数の映像区間を切り出す切り出し手段（例えば、図１の映像区間切り出し部１６）と、
前記切り出し手段により切り出された前記映像区間ごとに、前記番組の映像に同期している字幕から、前記字幕に含まれる単語を、字幕キーワードとして抽出する字幕キーワード抽出手段（例えば、図１の字幕キーワード群抽出部１８）と、
前記字幕キーワードと前記見出しキーワードとの類似性を評価する評価手段（例えば、図１の類似性評価部２４）と、
前記字幕キーワードとの類似性が最も高いと評価された前記見出しキーワードが抽出された前記本文に紐付けられている前記見出しを、前記映像区間に紐付ける紐付け手段（例えば、図１の紐付け処理部２５）と
を備える。
【００１５】
また、本発明の一側面の情報処理装置は、
前記番組を受信する番組受信手段（例えば、図１の番組受信部１３）と、
前記番組に関連する情報を受信する情報受信手段（例えば、図１のデータ放送受信部１９）と
をさらに備えることができる。
【００１６】
また、本発明の一側面の情報処理装置は、
前記番組と、前記番組に関連する情報との受信を、時分割により行う受信手段（例えば、図１の番組受信部１３およびデータ放送受信部１９）
をさらに備えることができる。
【００１７】
また、本発明の一側面の情報処理装置は、
前記番組の映像の特徴量の変化に基づいて、前記切り出し手段により前記番組から切り出される前記映像区間を決定する映像区間決定手段（例えば、図１の映像区間決定部１５）
をさらに備えることができる。
【００１８】
本発明の一側面の情報処理方法またはプログラムは、番組、および前記番組に関連する情報を処理する情報処理方法、または、番組、および前記番組に関連する情報を処理するコンピュータに実行させるプログラムであって、
前記番組に関連する情報に含まれる見出しに紐付けられている本文から、前記本文に含まれる単語を見出しキーワードとして抽出し（例えば、図７のステップＳ１４）、
前記番組から複数の映像区間を切り出し（例えば、図８のステップＳ２３）、
前記映像区間ごとに、前記番組の映像に同期している字幕から、前記字幕に含まれる単語を字幕キーワードとして抽出し（例えば、図８のステップＳ２５）、
前記字幕キーワードと前記見出しキーワードとの類似性を評価し（例えば、図８のステップＳ２６）、
前記字幕キーワードとの類似性が最も高いと評価された前記見出しキーワードが抽出された前記本文に紐付けられている前記見出しを、前記映像区間に紐付ける（例えば、図８のステップＳ２８）
ステップを含む。
【００１９】
以下、本発明を適用した具体的な実施の形態について、図面を参照しながら詳細に説明する。
【００２０】
図１は、本発明を適用した情報処理装置の一実施の形態の構成例を示すブロック図である。
【００２１】
図１において、情報処理装置１１は、アンテナ１２、番組受信部１３、特徴抽出部１４、映像区間決定部１５、映像区間切り出し部１６、字幕切り出し部１７、字幕キーワード群抽出部１８、データ放送受信部１９、見出し取得部２０、本文取得部２１、見出し関連キーワード群抽出部２２、見出し保持部２３、類似性評価部２４、紐付け処理部２５、および紐付け情報保持部２６から構成される。
【００２２】
アンテナ１２は、テレビジョン放送されているRF（radio frequency）信号を受信し、番組受信部１３およびデータ放送受信部１９にRF信号を供給する。
【００２３】
番組受信部１３は、アンテナ１２からのRF信号を受信して復調し、MPEG-TS(Moving Picture Experts Group-Transport Stream)を取得する。番組受信部１３は、録画の対象になっている番組のデータ（映像のデータ、および映像に同期した字幕のデータ）をMPEG-TSから抽出し、その番組のデータを、特徴抽出部１４および映像区間切り出し部１６に供給する。
【００２４】
特徴抽出部１４は、番組から複数の映像区間を切り出すことの前処理として、番組受信部１３から供給された番組のデータを解析し、解析結果である特徴量を番組のデータから抽出する。例えば、特徴抽出部１４は、連続するフレームの画素値の変化や、テロップの表示の有無、音量の変化などに基づいて、番組のデータを解析する。そして、特徴抽出部１４は、番組から抽出した特徴量を、映像区間決定部１５に供給する。
【００２５】
映像区間決定部１５は、特徴抽出部１４から供給される特徴量に基づいて、番組から切り出される映像区間を決定する。例えば、ドラマや映画における場面（シーン）の変わり目においては、連続するフレームの画素値の変化が大きくなり、特徴抽出部１４から供給される特徴量も大きな値となる。従って、映像区間決定部１５は、特徴量が、所定の閾値以上となった時刻を、映像区間の開始時刻または終了時刻として決定する。そして、映像区間決定部１５は、映像区間の開始時刻または終了時刻を含む情報であるチャプタ情報を生成し、映像区間切り出し部１６に供給する。
【００２６】
映像区間切り出し部１６には、番組受信部１３から番組のデータが供給されるとともに、映像区間決定部１５からチャプタ情報が供給される。映像区間切り出し部１６は、映像区間決定部１５から供給されたチャプタ情報に基づいて、番組受信部１３から供給された番組のデータから映像区間を切り出し、映像区間ごとに、番組のデータを字幕切り出し部１７および紐付け処理部２５に供給する。
【００２７】
字幕切り出し部１７は、映像区間切り出し部１６から供給された映像区間ごとの番組のデータから、映像に同期した字幕のデータを抽出し、字幕キーワード群抽出部１８に供給する。
【００２８】
字幕キーワード群抽出部１８は、字幕切り出し部１７から供給された映像区間ごとの字幕のデータに対して形態素解析を行い、字幕に含まれる単語を字幕キーワードとして抽出する。例えば、字幕キーワード群抽出部１８は、字幕中の単語を単語(形態素)単位に区切り、区切られた各単語に品詞を付与し、品詞として「名詞」が付与された単語を、字幕キーワードとして抽出する。字幕キーワード群抽出部１８は、映像区間ごとに複数の字幕キーワードを抽出し、それらの字幕キーワード（字幕キーワード群）のデータを類似性評価部２４に供給する。
【００２９】
データ放送受信部１９は、アンテナ１２からのRF信号を受信して復調し、データ放送として放送されているテキストデータや静止画像などを取得する。データ放送受信部１９は、データ放送のテキストデータを、見出し取得部２０および本文取得部２１に供給する。
【００３０】
見出し取得部２０は、データ放送受信部１９から供給されたデータ放送のテキストデータから、データ放送の記述言語として規定されているBML（Broadcast Markup Language）に基づいて、見出しのデータを取得する。見出し取得部２０は、データ放送のテキストデータから取得した見出しのデータを、見出し保持部２３に供給する。
【００３１】
本文取得部２１は、データ放送受信部１９から供給されたデータ放送のテキストデータから、BMLに基づいて、本文のデータを取得する。本文取得部２１は、データ放送のテキストデータから取得した本文のデータを、見出し関連キーワード群抽出部２２に供給する。
【００３２】
見出し関連キーワード群抽出部２２は、本文取得部２１から供給された本文のデータに対して形態素解析を行い、本文に含まれる単語を、見出し関連キーワードとして抽出する。見出し関連キーワード群抽出部２２は、データ放送の本文から複数の見出し関連キーワードを抽出し、それらの見出し関連キーワード（見出し関連キーワード群）のデータを見出し保持部２３に供給する。
【００３３】
見出し保持部２３は、見出し取得部２０から供給された見出しのデータと、見出し関連キーワード群抽出部２２から供給された見出し関連キーワード群のデータとを対応付けて保持（記憶）する。また、データ放送は、放送局から定期的に送信されてくるものであるので、見出し保持部２３には、見出しのデータと見出し関連キーワード群のデータとが、順次蓄積される。
【００３４】
類似性評価部２４には、字幕キーワード群抽出部１８から字幕キーワード群が供給され、類似性評価部２４は、字幕キーワード群抽出部１８からの字幕キーワード群と、見出し保持部２３に保持されている複数の見出し関連キーワード群との類似性を評価する。
【００３５】
例えば、類似性評価部２４は、字幕キーワード群および見出し関連キーワード群の全ての単語の数に対する、字幕キーワード群と見出し関連キーワード群との間で一致した単語の数の割合に応じて、字幕キーワード群と見出し関連キーワード群との類似性を評価する。即ち、類似性評価部２４は、この割合が高ければ、字幕キーワード群と見出し関連キーワード群との類似性が高いと評価し、この割合が低ければ、字幕キーワード群と見出し関連キーワード群との類似性が低いと評価する。
【００３６】
そして、類似性評価部２４は、類似性の評価が所定の基準以上である見出し関連キーワード群のうちの、類似性の評価が最も高い見出し関連キーワード群を特定する特定情報を、紐付け処理部２５に供給する。なお、類似性の評価が所定の基準以上である見出し関連キーワード群が、見出し保持部２３に保持されていない場合、類似性評価部２４は、紐付け処理部２５に特定情報を供給しない。
【００３７】
紐付け処理部２５には、映像区間切り出し部１６から映像区間ごとの番組のデータが供給される。紐付け処理部２５は、類似性評価部２４から字幕キーワード群との類似性の評価が最も高い見出し関連キーワード群を特定する特定情報が供給されると、類似性評価部２４から供給された特定情報により特定される見出し関連キーワード群に対応付けられている見出しのデータを、見出し保持部２３から読み出す。そして、紐付け処理部２５は、見出し保持部２３から読み出した見出しのデータと、映像区間切り出し部１６から供給された映像区間ごとの番組のデータとを紐付ける紐付け情報を生成して、紐付け情報保持部２６に供給する。
【００３８】
紐付け情報保持部２６は、紐付け処理部２５から供給された映像区間ごとの番組のデータと見出しとを紐付ける紐付け情報を保持（記憶）する。
【００３９】
次に、図２は、データ放送の画面の表示例を示す図である。
【００４０】
図２には、テレビジョン放送される番組の内容を紹介するための画面３０が示されており、画面３０には、番組の番組名３１、番組の内容を紹介する番組情報３２、および番組の出演者などの静止画像３３などが表示されている。番組情報３２には、番組内のコーナのタイトル名である見出し３４、およびコーナの内容が要約された文章である本文３５が表示されている。
【００４１】
図２の表示例においては、見出し３４には「県の花情報  花の森」と表示されており、本文３５には「クリンソウが咲き始めています。クリンソウはサクラソウ科で、白やピンク色の可愛らしい花を咲かせます。野草花園の方によると、今年は例年よりも少し遅い開花となっており、見頃は今月いっぱい続くということです。」と表示されている。
【００４２】
図１のデータ放送受信部１９が、図２に示される画面３０を表示させるデータ放送を受信して、データ放送のテキストデータを見出し取得部２０および本文取得部２１に供給したとする。この場合、見出し取得部２０は、見出しとして「県の花情報  花の森」を取得し、本文取得部２１から本文のデータを供給された見出し関連キーワード群抽出部２２は、見出し関連キーワード群として「クリンソウ、サクラソウ、白、ピンク、花、開花、見頃」を抽出する。
【００４３】
次に、図３は、図１の映像区間決定部１５が、特徴抽出部１４から供給された特徴量に基づいて決定する映像区間を説明する図である。図３において、横軸は、録画される番組の時刻の経過を表す。なお、図４乃至図６の横軸も、図３と同様に、録画される番組の時刻の経過を表す。
【００４４】
映像区間決定部１５は、例えば、録画の対象になっている番組が開始した時刻が、時刻ｔ1であれば、１番目の映像区間である映像区間Ａの開始時刻を時刻ｔ1とする。そして、時刻ｔ1から時刻ｔ2までの間、特徴抽出部１４から順次供給される特徴量が所定の閾値未満であって、時刻ｔ2での特徴量が所定の閾値以上になったとする。この場合、映像区間決定部１５は、時刻ｔ2を、映像区間Ａと、２番目の映像区間である映像区間Ｂとを区切る時刻（カット点）として検出し、映像区間Ａの終了時刻および映像区間Ｂの開始時刻と、時刻ｔ2とする。また、映像区間決定部１５は、時刻ｔ2での処理と同様に、映像区間Ｂの終了時刻を、時刻ｔ3とする。
【００４５】
次に、図４は、図１の字幕切り出し部１７が、映像区間切り出し部１６から供給された映像区間ごとの番組のデータから抽出した字幕のデータを説明する図である。
【００４６】
字幕切り出し部１７は、映像区間切り出し部１６から映像区間Ａの番組のデータが供給されると、例えば、映像区間Ａの開始時刻ｔ1よりも所定の時間だけ遅延した時刻ｔ1’から、映像区間Ａの終了時刻ｔ2までの字幕のデータを、映像区間Ａに同期した字幕群Ａとして、番組のデータから抽出する。なお、映像に同期した字幕のデータを作成する作業は、例えば、放送局側で、映像区間内の番組の映像を視聴した人が文章を入力することにより行われるため、字幕のデータは、映像区間に対して若干遅れることになる。従って、字幕切り出し部１７は、映像区間の開始時刻よりも所定の時間だけ遅延した時刻から、字幕のデータの抽出を行う。
【００４７】
また、字幕切り出し部１７は、映像区間Ａでの処理と同様に、映像区間Ｂの開始時刻ｔ2よりも所定の時間だけ遅延した時刻ｔ2’から、映像区間Ｂの終了時刻ｔ3までの字幕のデータを、映像区間Ｂに同期した字幕群Ｂとして番組のデータから抽出する。
【００４８】
次に、図５は、図１の字幕キーワード群抽出部１８が、字幕切り出し部１７から供給された字幕群から抽出した字幕キーワード群を説明する図である。
【００４９】
例えば、字幕切り出し部１７から字幕キーワード群抽出部１８に供給された字幕群Ａが、図５に示されているように、「クリンソウはサクラソウ科に属し」、「花の色はピンクや白」、および「今年の開花は遅く、見頃は来月です。」からなるものであるとする。この場合、字幕キーワード群抽出部１８は、字幕群Ａに含まれる単語「クリンソウ、サクラソウ、白、ピンク、花、開花、見頃」を、字幕キーワード群として抽出する。
【００５０】
次に、図６は、図１の紐付け処理部２５により紐付けられた映像区間と見出しとを説明する図である。
【００５１】
例えば、図２に示される画面３０を表示させるデータ放送が放送され、そのデータ放送をデータ放送受信部１９が受信していたとする。この場合、図１の見出し取得部２０は、見出しとして「県の花情報  花の森」を取得し、見出し関連キーワード群抽出部２２は、見出し関連キーワード群として「クリンソウ、サクラソウ、白、ピンク、花、開花、見頃」を抽出しており、見出し保持部２３には、見出し「県の花情報  花の森」と、見出し関連キーワード群「クリンソウ、サクラソウ、白、ピンク、花、開花、見頃」とが対応付けられて保持されている。
【００５２】
また、図５を参照して説明したように、字幕キーワード群抽出部１８が字幕キーワード群「クリンソウ、サクラソウ、白、ピンク、花、開花、見頃」を抽出して、類似性評価部２４に供給したとする。この場合、類似性評価部２４は、字幕キーワード群抽出部１８からの字幕キーワード群「クリンソウ、サクラソウ、白、ピンク、花、開花、見頃」が、見出し保持部２３に保持されている見出し関連キーワード群「クリンソウ、サクラソウ、白、ピンク、花、開花、見頃」と一致しているので、字幕キーワード群抽出部１８からの字幕キーワード群との類似性が最も高い見出し関連キーワード群「クリンソウ、サクラソウ、白、ピンク、花、開花、見頃」を特定する特定情報を紐付け処理部２５に供給する。
【００５３】
そして、紐付け処理部２５は、その特定情報に基づいて、見出し関連キーワード群「クリンソウ、サクラソウ、白、ピンク、花、開花、見頃」に対応付けられている見出し「県の花情報  花の森」を見出し保持部２３から読み出し、映像区間Ａと、見出し「県の花情報  花の森」とを紐付ける紐付け情報を生成する。
【００５４】
次に、図７は、図１の情報処理装置１１が、見出しと見出し関連キーワード群とを対応付ける処理を説明するフローチャートである。
【００５５】
アンテナ１２が、テレビジョン放送されているRF信号を受信し、データ放送受信部１９に供給すると、ステップＳ１１において、データ放送受信部１９は、アンテナ１２からのRF信号を受信して復調し、データ放送として放送されているテキストデータや静止画像などを取得する。データ放送受信部１９は、データ放送のテキストデータを、見出し取得部２０および本文取得部２１に供給し、処理はステップＳ１２に進む。
【００５６】
ステップＳ１２において、見出し取得部２０は、データ放送受信部１９から供給されたデータ放送のテキストデータから、BMLに基づいて、見出しのデータを取得して見出し保持部２３に供給し、処理はステップＳ１３に進む。
【００５７】
ステップＳ１３において、本文取得部２１は、データ放送受信部１９から供給されたデータ放送のテキストデータから、BMLに基づいて、本文のデータを取得し、見出し関連キーワード群抽出部２２に供給する。
【００５８】
ステップＳ１３の処理後、処理はステップＳ１４に進み、見出し関連キーワード群抽出部２２は、本文取得部２１から供給された本文のデータから見出し関連キーワード群を抽出し、見出し保持部２３に供給して、処理はステップＳ１５に進む。
【００５９】
ステップＳ１５において、見出し保持部２３は、ステップＳ１２で見出し取得部２０から供給された見出しと、ステップＳ１４で見出し関連キーワード群抽出部２２から供給された見出し関連キーワード群とを対応付けて保持し、処理は終了する。
【００６０】
次に、図８は、図１の情報処理装置１１が、映像区間と見出しとを対応付ける処理を説明するフローチャートである。
【００６１】
録画の対象になっている番組の放送が開始され、その番組のRF信号がアンテナ１２から番組受信部１３に供給されると、ステップＳ２１において、番組受信部１３は、アンテナ１２から供給されるRF信号から、録画の対象になっている番組のデータを取得する。番組受信部１３は、番組のデータを特徴抽出部１４および映像区間切り出し部１６に供給し、処理はステップＳ２２に進む。
【００６２】
ステップＳ２２において、特徴抽出部１４は、番組受信部１３から供給された番組のデータ解析し、解析結果である特徴量を、映像区間決定部１５に供給する。
【００６３】
ステップＳ２２の処理後、処理はステップＳ２３に進み、映像区間決定部１５は、特徴抽出部１４から供給される特徴量に基づいて、番組から切り出される映像区間を決定する。そして、映像区間決定部１５は、映像区間の開始時刻または終了時刻を含む情報であるチャプタ情報を生成して、映像区間切り出し部１６に供給する。映像区間切り出し部１６は、映像区間決定部１５から供給されたチャプタ情報に基づいて、番組受信部１３から供給された番組から映像区間を切り出し、映像区間ごとに、番組のデータを字幕切り出し部１７および紐付け処理部２５に供給する。
【００６４】
ステップＳ２３の処理後、処理はステップＳ２４に進み、字幕切り出し部１７は、ステップＳ２３で映像区間切り出し部１６から供給された映像区間ごとの番組のデータから、映像に同期した字幕のデータを取得して、字幕キーワード群抽出部１８に供給し、処理はステップＳ２５に進む。
【００６５】
ステップＳ２５において、字幕キーワード群抽出部１８は、字幕切り出し部１７から供給された映像区間ごとの字幕のデータから字幕キーワード群を抽出して、類似性評価部２４に供給し、処理はステップＳ２６に進む。
【００６６】
ステップＳ２６において、類似性評価部２４は、ステップＳ２５で字幕キーワード群抽出部１８から供給された字幕キーワード群と、見出し保持部２３に保持されている複数の見出し関連キーワード群との類似性を評価する。
【００６７】
ステップＳ２６の処理後、処理はステップＳ２７に進み、類似性評価部２４は、字幕キーワード群との類似性の評価が所定の基準以上である見出し関連キーワード群が、見出し保持部２３に保持されているか否かを判定する。
【００６８】
ステップＳ２７において、類似性評価部２４が、字幕キーワード群との類似性の評価が所定の基準以上である見出し関連キーワード群が、見出し保持部２３に保持されていると判定した場合、処理はステップＳ２８に進む。
【００６９】
ステップＳ２８において、類似性評価部２４は、字幕キーワード群との類似性の評価が最も高い見出し関連キーワード群を特定する特定情報を、紐付け処理部２５に供給する。紐付け処理部２５は、類似性評価部２４から供給された特定情報により特定される見出し関連キーワード群に対応付けられている見出しのデータを、見出し保持部２３から読み出し、その見出しのデータと、ステップＳ２３で映像区間切り出し部１６から供給された映像区間ごとの番組のデータとを紐付ける紐付け情報を生成して、紐付け情報保持部２６に供給する。付け情報保持部２６は、紐付け処理部２５から供給された紐付け情報を保持し、処理は終了される。
【００７０】
一方、ステップＳ２７において、類似性評価部２４が、字幕キーワード群との類似性の評価が所定の基準以上である見出し関連キーワード群が、見出し保持部２３に保持されていないと判定した場合、ステップＳ２８をスキップして、処理は終了される。
【００７１】
以上のように、情報処理装置１１は、映像区間切り出し部１６により切り出された映像区間ごとの番組に、その映像区間の字幕から抽出された字幕キーワード群との類似性が最も高い見出し関連キーワード群に応じた見出しを、紐付けることができる。即ち、情報処理装置１１は、映像区間内の番組の内容に対して適切な見出しを、映像区間に紐付けることができる。
【００７２】
これにより、例えば、情報処理装置１１の紐付け情報保持部２６に保持された紐付け情報を、録画再生装置が利用することにより、録画済の番組の再生時において、映像区間の先頭のフレームに対応する静止画像とともに、映像区間に紐付けられた見出しを表示することができる。従って、ユーザは、静止画像および見出しから映像区間の内容を把握することができ、従来よりも、所望の映像区間を容易に見つけ出すことができる。
【００７３】
また、例えば、録画再生装置が、キーワードに基づく検索を行うことができれば、録画再生装置は、ユーザにより入力されたキーワードに基づいて、紐付け情報保持部２６に保持された紐付け情報を検索し、その検索の結果得られた映像区間を、ユーザに提示することができる。
【００７４】
なお、情報処理装置１１は、テレビジョン放送される番組やデータ放送のデータだけでなく、例えば、インターネットなどのネットワークを介して配信されてきた番組やデータ放送のデータに対しても、映像区間と見出しとを紐付ける処理を行うことができる。
【００７５】
また、テレビジョン放送されている番組から映像区間を切り出すとともに、映像区間と見出しとを紐付ける処理が行われる他、例えば、映像区間ごとに切り出された番組が録画再生装置に録画されていて、その番組を再生する処理と並列して、映像区間と見出しとを紐付ける処理が行われてもよい。
【００７６】
即ち、図９は、本発明を適用した情報処理装置の他の実施の形態の構成例を示すブロック図である。
【００７７】
図９において、情報処理装置４１は、ネットワーク４３を介して、録画再生装置４２に接続されている。
【００７８】
情報処理装置４１は、アンテナ４４、表示部４５、字幕処理部４６、見出し処理部４７、および保持部４８から構成される。
【００７９】
アンテナ４４は、テレビジョン放送されているRF信号を受信し、見出し処理部４７に供給する。
【００８０】
表示部４５は、テレビジョン放送されている番組や、録画再生装置４２により再生される番組を表示する。
【００８１】
字幕処理部４６は、図１の字幕切り出し部１７および字幕キーワード群抽出部１８を備えており、録画再生装置４２により再生される番組のデータが、映像区間ごとに供給される。字幕処理部４６は、録画再生装置４２から供給される映像区間ごとの番組のデータから、字幕のデータを抽出するとともに、字幕に含まれる字幕キーワード群のデータを抽出し、字幕キーワード群のデータを見出し処理部４７に供給する。
【００８２】
見出し処理部４７は、図１のデータ放送受信部１９、見出し取得部２０、本文取得部２１、見出し関連キーワード群抽出部２２、類似性評価部２４、および紐付け処理部２５を備えており、見出し処理部４７には、アンテナ４４からRF信号が供給される。見出し処理部４７は、アンテナ４４からのRF信号から、データ放送として放送されているテキストデータを抽出し、BMLに基づいて、テキストデータから見出しのデータと本文のデータとを取得する。そして、見出し処理部４７は、テキストデータの本文のデータから見出し関連キーワード群を抽出して、見出しのデータと見出し関連キーワード群のデータとを保持部４８に供給し、それらを対応付けて保持させる。
【００８３】
また、見出し処理部４７は、字幕処理部４６から字幕キーワード群のデータが供給されると、その字幕キーワード群と、保持部４８に保持されている複数の見出し関連キーワード群との類似性を評価する。そして、見出し処理部４７は、類似性の評価が所定の基準以上である見出し関連キーワード群のうちの、類似性の評価が最も高い見出し関連キーワード群に対応付けられている見出しを保持部４８から読み出して、字幕処理部４６から供給された字幕キーワード群に対応する映像区間と、保持部４８から読み出した見出しとを紐付ける紐付け情報を生成する。さらに、見出し処理部４７は、その紐付け情報を、ネットワーク４３を介して録画再生装置４２に供給する。
【００８４】
保持部４８は、見出し処理部４７から供給される見出しのデータと見出し関連キーワード群のデータとを対応付けて保持する。
【００８５】
録画再生装置４２は、例えば、ハードディスクなどの記録部（図示せず）を備えており、番組を録画または再生する。また、録画再生装置４２に録画されている番組は、映像に同期した字幕を含み、映像の特徴量の変化に基づいた映像区間で区切られている。
【００８６】
また、録画再生装置４２が、録画済の映像を再生し、情報処理装置４１の表示部４５に表示させるために、ネットワーク４３を介して、映像区間で区切られた番組のデータを情報処理装置４１に供給すると、録画再生装置４２には、情報処理装置４１の見出し処理部４７から、映像区間と見出しとを紐付ける紐付け情報が供給される。録画再生装置４２は、見出し処理部４７から供給された紐付け情報を記録部に記録する。
【００８７】
ネットワーク４３は、HDMI（High-Definition Multimedia Interface），DLNA（Digital Living Network Alliance）、またはIEEE（Institute of Electrical and Electronics Engineers）1394などの規格に準拠したデジタルインタフェースである。
【００８８】
このように、情報処理装置４１は、録画再生装置４２による番組の再生と並列して、映像区間と見出しとを紐付ける処理を行うことができ、録画再生装置４２には、映像区間と見出しとを紐付ける紐付け情報が記録される。そして、ユーザは、録画再生装置４２に記録された紐付け情報に基づいて、録画再生装置４２に録画された番組の所望の映像区間を容易に見つけ出すことができる。
【００８９】
また、一般的な録画再生装置においては、データ放送では天気予報などのようにタイムシフトするメリットがない情報が放送されることより、データ放送を録画する機能が備えられていないが、そのような録画再生装置でも、ネットワーク４３を介して録画再生装置４２に接続し、録画再生装置４２が備える機能を利用することにより、映像区間の内容に適した見出しと、映像区間とを紐付ける紐付け情報を記録することができる。
【００９０】
なお、情報処理装置４１は、映像区間に見出しを紐付けることを確認するメッセージを表示部４５に表示し、ユーザの確認を得た後に、録画再生装置４２に紐付け情報を供給することができる。
【００９１】
ところで、情報処理装置１１または４１により映像区間に紐付けられた見出しは、ユーザが、所望の映像区間を検索するときに用いられる他、例えば、図示しないDVD（Digital Versatile Disc）レコーダにより番組が記録されたディスクのディスクラベルに、番組の情報をプリントするときに用いることができる。
【００９２】
例えば、ディスクラベルに番組の情報をプリントするプリンタ（図示せず）には、ディスクラベルにプリントされる情報のテンプレートとして、番組のタイトルイメージ、分類、タイトル、話数、イメージ、日時、およびインデックスなどを印刷する位置が設定されている。そして、プリンタは、ユーザの操作に応じて、ディスクに記録されている番組に対応するデータ放送のデータを、図示しないデータ放送記録部から取得し、ディスクラベルにプリントする番組の情報となる要素、即ち、番組のタイトルイメージ、分類、タイトル、話数、イメージ、および日時などの情報を取得する。
【００９３】
一方、情報処理装置１１は、ユーザの操作に応じ、ディスクに記録されている番組に対応する紐付け情報が紐付け情報保持部２６に保持されていれば、番組区間に紐付けられている見出しをプリンタに供給する。同様に、情報処理装置４１も、見出しをプリンタに供給する。これにより、プリンタは、情報処理装置１１または４１から供給された見出しを、ディスクラベルのインデックスにプリントする情報として取得し、これらの番組の情報をディスクラベルにプリントする。
【００９４】
ユーザは、このようにしてインデックスがプリントされたディスクラベルにより、ディスクに記録された番組の内容を詳細に把握することができる。また、ディスクラベルにプリントされたインデックスに対応する紐付け情報を、番組とともにディスクに記録させてもよい。これにより、ディスクに記録されている番組の再生時に、番組区間に対応する見出しが表示され、ユーザは、所望の番組区間を容易に見つけ出して、再生させることができる。
【００９５】
なお、ディスクに記録された番組に応じた見出しが多数ある場合には、それらの見出しを図示しない表示部に表示させ、ディスクラベルにプリントする見出しをユーザに選択させ、ユーザに選択された見出しをプリントするようにしてもよい。また、ディスクラベルの背景色は、データ放送から取得されたタイトルイメージの画像の色あいから決定することができる。
【００９６】
上述した一連の処理は、ハードウエアにより実行させることもできるし、ソフトウエアにより実行させることもできる。一連の処理をソフトウエアにより実行させる場合には、そのソフトウエアを構成するプログラムが、専用のハードウエアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、プログラム記録媒体からインストールされる。
【００９７】
図１０は、上述した一連の処理をプログラムにより実行するパーソナルコンピュータの構成の例を示すブロック図である。CPU（Central Processing Unit）１０１は、ROM（Read Only Memory）１０２、または記憶部１０８に記憶されているプログラムに従って各種の処理を実行する。RAM（Random Access Memory）１０３には、CPU１０１が実行するプログラムやデータなどが適宜記憶される。これらのCPU１０１、ROM１０２、およびRAM１０３は、バス１０４により相互に接続されている。
【００９８】
CPU１０１にはまた、バス１０４を介して入出力インターフェース１０５が接続されている。入出力インターフェース１０５には、キーボード、マウス、マイクロホンなどよりなる入力部１０６、ディスプレイ、スピーカなどよりなる出力部１０７が接続されている。CPU１０１は、入力部１０６から入力される指令に対応して各種の処理を実行する。そして、CPU１０１は、処理の結果を出力部１０７に出力する。
【００９９】
入出力インターフェース１０５に接続されている記憶部１０８は、例えばハードディスクからなり、CPU１０１が実行するプログラムや各種のデータを記憶する。通信部１０９は、インターネットやローカルエリアネットワークなどのネットワークを介して外部の装置と通信する。
【０１００】
また、通信部１０９を介してプログラムを取得し、記憶部１０８に記憶してもよい。
【０１０１】
入出力インターフェース１０５に接続されているドライブ１１０は、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどのリムーバブルメディア１１１が装着されたとき、それらを駆動し、そこに記録されているプログラムやデータなどを取得する。取得されたプログラムやデータは、必要に応じて記憶部１０８に転送され、記憶される。
【０１０２】
コンピュータにインストールされ、コンピュータによって実行可能な状態とされるプログラムを格納するプログラム記録媒体は、図１０に示すように、磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM(Compact Disc-Read Only Memory),DVD(Digital Versatile Disc)を含む）、光磁気ディスク、もしくは半導体メモリなどよりなるパッケージメディアであるリムーバブルメディア１１１、または、プログラムが一時的もしくは永続的に格納されるROM１０２や、記憶部１０８を構成するハードディスクなどにより構成される。プログラム記録媒体へのプログラムの格納は、必要に応じてルータ、モデムなどのインターフェースである通信部１０９を介して、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の通信媒体を利用して行われる。
【０１０３】
なお、上述のフローチャートを参照して説明した各処理は、必ずしもフローチャートとして記載された順序に沿って時系列に処理する必要はなく、並列的あるいは個別に実行される処理（例えば、並列処理あるいはオブジェクトによる処理）も含むものである。
【０１０４】
また、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
【図面の簡単な説明】
【０１０５】
【図１】本発明を適用した情報処理装置の一実施の形態の構成例を示すブロック図である。
【図２】データ放送の画面の表示例を示す図である。
【図３】映像区間決定部１５が、特徴抽出部１４から供給された特徴量に基づいて決定する映像区間を説明する図である。
【図４】字幕切り出し部１７が、映像区間切り出し部１６から供給された映像区間ごとの番組のデータから抽出した字幕のデータを説明する図である。
【図５】字幕キーワード群抽出部１８が、字幕切り出し部１７から供給された字幕群から抽出した字幕キーワード群を説明する図である。
【図６】紐付け処理部２５により紐付けられた映像区間と見出しとを説明する図である。
【図７】情報処理装置１１が、見出しと見出し関連キーワード群とを対応付ける処理を説明するフローチャートである。
【図８】情報処理装置１１が、映像区間と見出しとを対応付ける処理を説明するフローチャートである。
【図９】本発明を適用した情報処理装置の他の実施の形態の構成例を示すブロック図である。
【図１０】パーソナルコンピュータの構成の例を示すブロック図である。
【符号の説明】
【０１０６】
１１  情報処理装置，  １２  アンテナ，  １３  番組受信部，  １４  特徴抽出部，  １５  映像区間決定部，  １６  映像区間切り出し部，  １７  字幕切り出し部，  １８  字幕キーワード群抽出部，  １９  データ放送受信部，  ２０  見出し取得部，  ２１  本文取得部，  ２２  見出し関連キーワード群抽出部，  ２３  見出し保持部，  ２４  類似性評価部，  ２５  紐付け処理部，  ２６  紐付け情報保持部，  ４１  情報処理装置，  ４２  録画再生装置，  ４３  ネットワーク，  ４４  アンテナ，  ４５  表示部，  ４６  字幕処理部，  ４７  見出し処理部，  ４８  保持部
【図１】
2008134825.tif 000003
【図２】
2008134825.tif 000004
【図３】
2008134825.tif 000005
【図４】
2008134825.tif 000006
【図５】
2008134825.tif 000007
【図６】
2008134825.tif 000008
【図７】
2008134825.tif 000009
【図８】
2008134825.tif 000010
【図９】
2008134825.tif 000011
【図１０】
2008134825.tif 000012