(57)【要約】【課題】多数の番組内容を短時間で把握できる。【解決手段】録画番組を蓄積し、その蓄積された録画番組の動画像から静止画と少なくとも字幕情報に基づいて生成したメタデータとを取得する。次いで、視聴者の視聴動作をリモコン情報として入力し、静止画から動画像へ遷移したときに、その動画像を視聴していた区間に対応する少なくともメタデータを蓄積し、静止画とメタデータと蓄積された動画像を視聴していた区間に対応するメタデータとに基づいて各番組の代表的な静止画情報を選択する。そして、取得された静止画とメタデータと動画像と入力されたリモコン情報と選択された代表的静止画情報とからザッピングデータを取得し、ザッピング動作を制御するとともに、そのザッピング制御手段の制御結果を表示する。【選択図】図１
2011071818.tif 000002
【特許請求の範囲】
【請求項１】
録画番組を蓄積する番組蓄積手段と、
該蓄積された録画番組の動画像から静止画と少なくとも字幕情報に基づいて生成したメタデータとを取得する情報取得手段と、
視聴者の視聴動作をリモコン情報として入力するリモコン情報入力手段と、
静止画視聴の状態から動画像視聴の状態へあるいは、動画像視聴の状態から静止画視聴の状態へ遷移させる遷移手段と、
該動画像を視聴していた区間に対応する少なくともメタデータを蓄積する動画像視聴区間情報蓄積手段と、
前記静止画とメタデータと前記動画像視聴区間情報蓄積手段に蓄積された前記動画像を視聴していた区間に対応するメタデータとに基づいて各番組の代表的な静止画情報を選択する代表的静止画情報選択手段と、
前記取得された静止画とメタデータと動画像と前記入力されたリモコン情報と前記選択された代表的静止画情報とからザッピングデータを取得し、ザッピング動作を制御するザッピング制御手段と、
該ザッピング制御手段の制御結果を表示する表示手段と、
を備えたことを特徴とする録画番組選択装置。
【請求項２】
前記情報取得手段が生成するメタデータが動画像を構成する前記静止画に付された字幕情報よりも多くの情報を含むことを特徴とする請求項１に記載の録画番組選択装置。
【請求項３】
代表的静止画情報選択手段が、各静止画に付されたメタデータと前記動画像視聴区間情報蓄積手段に蓄積された前記動画像を視聴していた区間に対応するメタデータとの距離を算出して、最も距離の近いメタデータが付された静止画を代表的静止画として選択することを特徴とする請求項１に記載の録画番組選択装置。
【請求項４】
動画像視聴区間情報蓄積手段が、前記動画像を視聴していた区間に対応するメタデータに加えて、視聴をしていた曜日と時間帯に関する情報を蓄積し、
代表的静止画情報選択手段が、現在の曜日と時間帯から動画像視聴区間情報蓄積手段を検索し、メタデータを抽出して、該抽出したメタデータとの距離を算出して、最も距離の近いメタデータが付された静止画を代表的静止画として選択することを特徴とする請求項１に記載の録画番組選択装置。
【請求項５】
動画像視聴区間情報蓄積手段が、前記動画像を視聴していた区間に対応するメタデータに加えて、視聴時間に関する情報を蓄積し、
代表的静止画情報選択手段が、一定時間連続して視聴していたメタデータを抽出して、該抽出したメタデータとの距離を算出して、最も距離の近いメタデータが付された静止画を代表的静止画として選択することを特徴とする請求項１に記載の録画番組選択装置。
【請求項６】
代表的静止画情報選択手段が、各静止画に付されたメタデータと前記動画像視聴区間情報蓄積手段に蓄積された前記動画像を視聴していた区間に対応するメタデータとの距離を算出して、該算出した距離が所定値以下であるメタデータが付された静止画を代表的静止画として選択することを特徴とする請求項１に記載の録画番組選択装置。
【請求項７】
動画像視聴区間情報蓄積手段が、前記動画像を視聴していた区間に対応するメタデータに加えて、視聴をしていた曜日と時間帯に関する情報を蓄積し、
代表的静止画情報選択手段が、現在の曜日と時間帯から動画像視聴区間情報蓄積手段を検索し、メタデータを抽出して、該抽出したメタデータとの距離を算出して、該算出した距離が所定値以下であるメタデータが付された静止画を代表的静止画として選択することを特徴とする請求項１に記載の録画番組選択装置。
【請求項８】
動画像視聴区間情報蓄積手段が、前記動画像を視聴していた区間に対応するメタデータに加えて、視聴時間に関する情報を蓄積し、
代表的静止画情報選択手段が、一定時間連続して視聴していたメタデータを抽出して、該抽出したメタデータとの距離を算出して、該算出した距離が所定値以下であるメタデータが付された静止画を代表的静止画として選択することを特徴とする請求項１に記載の録画番組選択装置。
【請求項９】
ザッピング制御手段は、代表的静止画情報選択手段が、代表的静止画して選択した静止画のうち、距離の値が小さい代表的静止画を有する番組から順に、前記ザッピングデータを取得し、ザッピング動作を制御することを特徴とする請求項３から請求項８のいずれかに記載の録画番組選択装置。
【請求項１０】
前記表示手段は、代表的静止画情報選択手段が、代表的静止画して選択した静止画のうち、距離の値が小さい代表的静止画を有する番組から順に表示画面の中央部から端部にかけて、番組画像を表示することを特徴とする請求項９に記載の録画番組選択装置。
【請求項１１】
録画番組からユーザの嗜好に合わせた番組を選択する録画番組選択方法であって、
録画番組を蓄積する第１のステップと、
該蓄積された録画番組の動画像から静止画と少なくとも字幕情報に基づいて生成したメタデータとを取得する第２のステップと、
視聴者の視聴動作をリモコン情報として入力する第３のステップと、
静止画から動画像へ遷移したときに、該動画像を視聴していた区間に対応する少なくともメタデータを蓄積する第４のステップと、
前記静止画とメタデータと前記蓄積された前記動画像を視聴していた区間に対応するメタデータとに基づいて各番組の代表的な静止画情報を選択する第５のステップと、
前記取得された静止画とメタデータと動画像と前記入力されたリモコン情報と前記選択された代表的静止画情報とからザッピングデータを取得し、ザッピング動作を制御する第６のステップと、
該ザッピング制御手段の制御結果を表示する第７のステップと、
を備えたことを特徴とする録画番組選択方法。
【請求項１２】
コンピュータに、録画番組からユーザの嗜好に合わせた番組を選択する録画番組選択方法を実行させるためのプログラムであって、
録画番組を蓄積する第１のステップと、
該蓄積された録画番組の動画像から静止画と少なくとも字幕情報に基づいて生成したメタデータとを取得する第２のステップと、
視聴者の視聴動作をリモコン情報として入力する第３のステップと、
静止画から動画像へ遷移したときに、該動画像を視聴していた区間に対応する少なくともメタデータを蓄積する第４のステップと、
前記静止画とメタデータと前記蓄積された前記動画像を視聴していた区間に対応するメタデータとに基づいて各番組の代表的な静止画情報を選択する第５のステップと、
前記取得された静止画とメタデータと動画像と前記入力されたリモコン情報と前記選択された代表的静止画情報とからザッピングデータを取得し、ザッピング動作を制御する第６のステップと、
該ザッピング制御手段の制御結果を表示する第７のステップと、
をコンピュータに実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、録画番組をユーザの嗜好等に合わせて自動的に選択させるための装置等であって、特に、多数の番組内容を短時間で把握できる録画番組選択装置、録画番組選択方法およびプログラムに関する。
【背景技術】
【０００２】
近年、放送の多チャンネル化やインターネットの普及により視聴できるコンテンツが増大している。また、デジタル放送において画像に字幕情報やメタデータが付与された番組が増えている。
【０００３】
さらに、セットトップボックス（ＳＴＢ）を用いた多数の番組の録画が可能になり、タイムシフト視聴が一般化してきた。そのため、ＳＴＢへの自動録画手段の登場により、これまでに比較して、はるかに多数の番組を自動録画することが可能となり、多数の番組から視聴者の好みに合った番組やシーンを短時間で検索する手段が必要とされている。
【０００４】
このような状況に対応して、特許文献１では、電子番組ガイド（１番組ごとの情報）と視聴者の好みのジャンル情報に基づき番組を並べ替える技術が開示されている。また、特許文献２においては、番組ごとに予め定められたザッピングデータ（番組の一部、ダイジェスト、代表画面、番組タイトル、予告、お知らせ、広告のいずれか）を用いる技術が開示されている。
【０００５】
さらに、特許文献３および４においては、過去にザッピングした番組のシーンをキャプチャした静止画フレームのリストを番組名とともに表示する技術が開示されている。また、特許文献５においては、チャネル毎の直近のシーン（ＣＭ（コマーシャル）を除く）でかつ特徴のあるシーンをザッピングデータとして用いる技術が開示されている。さらに加えて、非特許文献１においては、各番組の短時間視聴を可能にするための、動画から静止画と字幕情報を有する情報を生成し閲覧する技術が提案されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２０００−２５３３２５号公報
【特許文献２】特開２００３−３２４７１１号公報
【特許文献３】特開２００５−１５９５２１号公報
【特許文献４】特開２００８−６７４０３号公報
【特許文献５】特開２００８−８５７０２号公報
【非特許文献】
【０００７】
【非特許文献１】松本他、”地デジ放送からの字幕主体の携帯電話向け要約コンテンツの自動生成”，電子情報通信学会技術研究報告．ＩＥ，画像工学１０８（４２５）ｐｐ．５９−６３，２００９、０１、２８。
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかしながら、電子番組表の情報や番組毎に予め定められたザッピングデータからだけでは視聴者が見たい番組かどうかを判断するのが難しい場合がある。また、ジャンル情報では視聴者の視聴傾向の多様性を必ずしも表現できない。さらに、過去にザッピングしたシーンを用いる手法やチャネル毎の直近のシーンを用いる手法では蓄積された多数の番組のザッピングには困難があるという課題があった。
【０００９】
そこで、本発明は、上述の課題に鑑みてなされたものであり、多数の番組内容を短時間で把握できる録画番組選択装置、録画番組選択方法およびプログラムを提供することを目的とする。
【課題を解決するための手段】
【００１０】
本発明は、上記の課題を解決するために、以下の事項を提案している。
【００１１】
（１）本発明は、録画番組を蓄積する番組蓄積手段と、該蓄積された録画番組の動画像から静止画と少なくとも字幕情報に基づいて生成したメタデータとを取得する情報取得手段と、視聴者の視聴動作をリモコン情報として入力するリモコン情報入力手段と、静止画視聴の状態から動画像視聴の状態へあるいは、動画像視聴の状態から静止画視聴の状態へ遷移させる遷移手段と、該動画像を視聴していた区間に対応する少なくともメタデータを蓄積する動画像視聴区間情報蓄積手段と、前記静止画とメタデータと前記動画像視聴区間情報蓄積手段に蓄積された前記動画像を視聴していた区間に対応するメタデータとに基づいて各番組の代表的な静止画情報を選択する代表的静止画情報選択手段と、前記取得された静止画とメタデータと動画像と前記入力されたリモコン情報と前記選択された代表的静止画情報とからザッピングデータを取得し、ザッピング動作を制御するザッピング制御手段と、該ザッピング制御手段の制御結果を表示する表示手段と、を備えたことを特徴とする録画番組選択装置を提案している。
【００１２】
本発明によれば、番組蓄積手段は、録画番組を蓄積する。情報取得手段は、その蓄積された録画番組の動画像から静止画と少なくとも字幕情報に基づいて生成したメタデータとを取得する、リモコン情報入力手段は、視聴者の視聴動作をリモコン情報として入力する。遷移手段は、静止画視聴の状態から動画像視聴の状態へ遷移させる。動画像視聴区間情報蓄積手段は、動画像を視聴していた区間に対応する少なくともメタデータを蓄積する。代表的静止画情報選択手段は、静止画とメタデータと動画像視聴区間情報蓄積手段に蓄積された動画像を視聴していた区間に対応するメタデータとに基づいて各番組の代表的な静止画情報を選択する。ザッピング制御手段は、取得された静止画とメタデータと動画像と入力されたリモコン情報と選択された代表的静止画情報とからザッピングデータを取得し、ザッピング動作を制御する。そして、表示手段は、ザッピング制御手段の制御結果を表示する。したがって、番組の中から視聴者の嗜好等に基づいて、番組の内容を最も反映する代表的な静止画情報を選択し、これらの代表的な静止画情報について、ザッピング処理を行うため、多数の番組内容を短時間で把握することができる。
【００１３】
（２）本発明は、（１）の録画番組選択装置について、前記情報取得手段が生成するメタデータが動画像を構成する前記静止画に付された字幕情報よりも多くの情報を含むことを特徴とする録画番組選択装置を提案している。
【００１４】
本発明によれば、情報取得手段が生成するメタデータが動画像を構成する静止画に付された字幕情報よりも多くの情報を含む。したがって、メタデータが動画像を構成する静止画に付された字幕情報よりも多くの情報を含むため、容易に、番組内容をすばやく把握することができる。
【００１５】
（３）本発明は、（１）の録画番組選択装置について、代表的静止画情報選択手段が、各静止画に付されたメタデータと前記動画像視聴区間情報蓄積手段に蓄積された前記動画像を視聴していた区間に対応するメタデータとの距離を算出して、最も距離の近いメタデータが付された静止画を代表的静止画として選択することを特徴とする録画番組選択装置を提案している。
【００１６】
本発明によれば、代表的静止画情報選択手段が、各静止画に付されたメタデータと動画像視聴区間情報蓄積手段に蓄積された動画像を視聴していた区間に対応するメタデータとの距離を算出して、最も距離の近いメタデータが付された静止画を代表的静止画として選択する。したがって、視聴者が興味を示した区間の静止画との距離が最も近い静止画を代表的静止画として選択するため、短時間で、視聴者が番組内容を把握することができる。
【００１７】
（４）本発明は、（１）の録画番組選択装置について、動画像視聴区間情報蓄積手段が、前記動画像を視聴していた区間に対応するメタデータに加えて、視聴をしていた曜日と時間帯に関する情報を蓄積し、代表的静止画情報選択手段が、現在の曜日と時間帯から動画像視聴区間情報蓄積手段を検索し、メタデータを抽出して、該抽出したメタデータとの距離を算出して、最も距離の近いメタデータが付された静止画を代表的静止画として選択することを特徴とする録画番組選択装置を提案している。
【００１８】
本発明によれば、動画像視聴区間情報蓄積手段が、動画像を視聴していた区間に対応するメタデータに加えて、視聴をしていた曜日と時間帯に関する情報を蓄積し、代表的静止画情報選択手段が、現在の曜日と時間帯から動画像視聴区間情報蓄積手段を検索し、メタデータを抽出して、その抽出したメタデータとの距離を算出して、最も距離の近いメタデータが付された静止画を代表的静止画として選択する。したがって、動画像を視聴していた区間に対応するメタデータに加えて、視聴をしていた曜日と時間帯に関する情報を蓄積し、現在の曜日と時間帯から動画像視聴区間情報蓄積手段を検索し、メタデータを抽出して、その抽出したメタデータとの距離を算出して、最も距離の近いメタデータが付された静止画を代表的静止画とすることから、さらに、短時間で、視聴者が番組内容を把握することができる。
【００１９】
（５）本発明は、（１）の録画番組選択装置について、動画像視聴区間情報蓄積手段が、前記動画像を視聴していた区間に対応するメタデータに加えて、視聴時間に関する情報を蓄積し、代表的静止画情報選択手段が、一定時間連続して視聴していたメタデータを抽出して、該抽出したメタデータとの距離を算出して、最も距離の近いメタデータが付された静止画を代表的静止画として選択することを特徴とする録画番組選択装置を提案している。
【００２０】
本発明によれば、動画像視聴区間情報蓄積手段が、動画像を視聴していた区間に対応するメタデータに加えて、視聴時間に関する情報を蓄積し、代表的静止画情報選択手段が、一定時間連続して視聴していたメタデータを抽出して、その抽出したメタデータとの距離を算出して、最も距離の近いメタデータが付された静止画を代表的静止画として選択する。したがって、一定時間連続して視聴していたメタデータを抽出して、その抽出したメタデータとの距離を算出して、最も距離の近いメタデータが付された静止画を代表的静止画として選択することから、さらに、短時間で、視聴者が番組内容を把握することができる。
【００２１】
（６）本発明は、（１）の録画番組選択装置について、代表的静止画情報選択手段が、各静止画に付されたメタデータと前記動画像視聴区間情報蓄積手段に蓄積された前記動画像を視聴していた区間に対応するメタデータとの距離を算出して、該算出した距離が所定値以下であるメタデータが付された静止画を代表的静止画として選択することを特徴とする録画番組選択装置を提案している。
【００２２】
本発明によれば、代表的静止画情報選択手段が、各静止画に付されたメタデータと動画像視聴区間情報蓄積手段に蓄積された前記動画像を視聴していた区間に対応するメタデータとの距離を算出して、該算出した距離が所定値以下であるメタデータが付された静止画を代表的静止画として選択する。したがって、視聴者が興味を示した区間の静止画との距離が所定値以下である例えば、複数の静止画を代表的静止画として選択するため、より短時間で、視聴者が番組内容を把握することができる。
【００２３】
（７）本発明は、（１）の録画番組選択装置について、動画像視聴区間情報蓄積手段が、前記動画像を視聴していた区間に対応するメタデータに加えて、視聴をしていた曜日と時間帯に関する情報を蓄積し、代表的静止画情報選択手段が、現在の曜日と時間帯から動画像視聴区間情報蓄積手段を検索し、メタデータを抽出して、該抽出したメタデータとの距離を算出して、該算出した距離が所定値以下であるメタデータが付された静止画を代表的静止画として選択することを特徴とする録画番組選択装置を提案している。
【００２４】
本発明によれば、動画像視聴区間情報蓄積手段が、動画像を視聴していた区間に対応するメタデータに加えて、視聴をしていた曜日と時間帯に関する情報を蓄積し、代表的静止画情報選択手段が、現在の曜日と時間帯から動画像視聴区間情報蓄積手段を検索し、メタデータを抽出して、その抽出したメタデータとの距離を算出して、その算出した距離が所定値以下であるメタデータが付された静止画を代表的静止画として選択する。したがって、動画像を視聴していた区間に対応するメタデータに加えて、視聴をしていた曜日と時間帯に関する情報を蓄積し、現在の曜日と時間帯から動画像視聴区間情報蓄積手段を検索し、メタデータを抽出して、その抽出したメタデータとの距離を算出して、その距離が所定値以下である例えば、複数のメタデータが付された静止画を代表的静止画とすることから、さらに、短時間で、視聴者が番組内容を把握することができる。
【００２５】
（８）本発明は、（１）の録画番組選択装置について、動画像視聴区間情報蓄積手段が、前記動画像を視聴していた区間に対応するメタデータに加えて、視聴時間に関する情報を蓄積し、代表的静止画情報選択手段が、一定時間連続して視聴していたメタデータを抽出して、該抽出したメタデータとの距離を算出して、該算出した距離が所定値以下であるメタデータが付された静止画を代表的静止画として選択することを特徴とする録画番組選択装置を提案している。
【００２６】
本発明によれば、動画像視聴区間情報蓄積手段が、動画像を視聴していた区間に対応するメタデータに加えて、視聴時間に関する情報を蓄積し、代表的静止画情報選択手段が、一定時間連続して視聴していたメタデータを抽出して、その抽出したメタデータとの距離を算出して、その算出した距離が所定値以下であるメタデータが付された静止画を代表的静止画として選択する。したがって、一定時間連続して視聴していたメタデータを抽出して、その抽出したメタデータとの距離を算出して、その距離が所定値以下である例えば、複数のメタデータが付された静止画を代表的静止画として選択することから、さらに、短時間で、視聴者が番組内容を把握することができる。
【００２７】
（９）本発明は、（３）から（８）の録画番組選択装置について、ザッピング制御手段は、代表的静止画情報選択手段が、代表的静止画して選択した静止画のうち、距離の値が小さい代表的静止画を有する番組から順に、前記ザッピングデータを取得し、ザッピング動作を制御することを特徴とする録画番組選択装置を提案している。
【００２８】
本発明によれば、ザッピング制御手段は、代表的静止画情報選択手段が、代表的静止画して選択した静止画のうち、距離の値が小さい代表的静止画を有する番組から順に、ザッピングデータを取得し、ザッピング動作を制御する。したがって、視聴者の嗜好にあった番組から順に、ザッピング動作を行うため、短時間に番組内容を把握して、好みの番組を視聴することができる。
【００２９】
（１０）本発明は、（９）の録画番組選択装置について、前記表示手段は、代表的静止画情報選択手段が、代表的静止画して選択した静止画のうち、距離の値が小さい代表的静止画を有する番組から順に表示画面の中央部から端部にかけて、番組画像を表示することを特徴とする録画番組選択装置を提案している。
【００３０】
本発明によれば、表示手段は、代表的静止画情報選択手段が、代表的静止画して選択した静止画のうち、距離の値が小さい代表的静止画を有する番組から順に表示画面の中央部から端部にかけて、番組画像を表示する。したがって、視聴者の嗜好にあった番組から順に、表示画面の中央部から端部にかけて、番組画像を表示するため、短時間に番組内容を把握して、好みの番組を視聴することができる。
【００３１】
（１１）本発明は、録画番組からユーザの嗜好に合わせた番組を選択する録画番組選択方法であって、録画番組を蓄積する第１のステップと、該蓄積された録画番組の動画像から静止画と少なくとも字幕情報に基づいて生成したメタデータとを取得する第２のステップと、視聴者の視聴動作をリモコン情報として入力する第３のステップと、静止画から動画像へ遷移したときに、該動画像を視聴していた区間に対応する少なくともメタデータを蓄積する第４のステップと、前記静止画とメタデータと前記蓄積された前記動画像を視聴していた区間に対応するメタデータとに基づいて各番組の代表的な静止画情報を選択する第５のステップと、前記取得された静止画とメタデータと動画像と前記入力されたリモコン情報と前記選択された代表的静止画情報とからザッピングデータを取得し、ザッピング動作を制御する第６のステップと、該ザッピング制御手段の制御結果を表示する第７のステップと、を備えたことを特徴とする録画番組選択方法を提案している。
【００３２】
本発明によれば、録画番組を蓄積し、その蓄積された録画番組の動画像から静止画と少なくとも字幕情報に基づいて生成したメタデータとを取得する。次いで、視聴者の視聴動作をリモコン情報として入力し、静止画から動画像へ遷移したときに、その動画像を視聴していた区間に対応する少なくともメタデータを蓄積し、静止画とメタデータと蓄積された動画像を視聴していた区間に対応するメタデータとに基づいて各番組の代表的な静止画情報を選択する。そして、取得された静止画とメタデータと動画像と入力されたリモコン情報と選択された代表的静止画情報とからザッピングデータを取得し、ザッピング動作を制御するとともに、そのザッピング制御手段の制御結果を表示する。したがって、番組の中から視聴者の嗜好等に基づいて、番組の内容を最も反映する代表的な静止画情報を選択し、これらの代表的な静止画情報について、ザッピング処理を行うため、多数の番組内容を短時間で把握することができる。
【００３３】
（１２）本発明は、コンピュータに、録画番組からユーザの嗜好に合わせた番組を選択する録画番組選択方法を実行させるためのプログラムであって、録画番組を蓄積する第１のステップと、該蓄積された録画番組の動画像から静止画と少なくとも字幕情報に基づいて生成したメタデータとを取得する第２のステップと、視聴者の視聴動作をリモコン情報として入力する第３のステップと、静止画から動画像へ遷移したときに、該動画像を視聴していた区間に対応する少なくともメタデータを蓄積する第４のステップと、前記静止画とメタデータと前記蓄積された前記動画像を視聴していた区間に対応するメタデータとに基づいて各番組の代表的な静止画情報を選択する第５のステップと、前記取得された静止画とメタデータと動画像と前記入力されたリモコン情報と前記選択された代表的静止画情報とからザッピングデータを取得し、ザッピング動作を制御する第６のステップと、該ザッピング制御手段の制御結果を表示する第７のステップと、をコンピュータに実行させるためのプログラムを提案している。
【００３４】
本発明によれば、録画番組を蓄積し、その蓄積された録画番組の動画像から静止画と少なくとも字幕情報に基づいて生成したメタデータとを取得する。次いで、視聴者の視聴動作をリモコン情報として入力し、静止画から動画像へ遷移したときに、その動画像を視聴していた区間に対応する少なくともメタデータを蓄積し、静止画とメタデータと蓄積された動画像を視聴していた区間に対応するメタデータとに基づいて各番組の代表的な静止画情報を選択する。そして、取得された静止画とメタデータと動画像と入力されたリモコン情報と選択された代表的静止画情報とからザッピングデータを取得し、ザッピング動作を制御するとともに、そのザッピング制御手段の制御結果を表示する。したがって、番組の中から視聴者の嗜好等に基づいて、番組の内容を最も反映する代表的な静止画情報を選択し、これらの代表的な静止画情報について、ザッピング処理を行うため、多数の番組内容を短時間で把握することができる。
【発明の効果】
【００３５】
本発明によれば、電子番組表の情報のような１番組毎の情報ではなく番組の中身の情報と視聴者の嗜好を考慮したザッピングデータ、また、過去に視聴していない番組に対してもザッピングデータを生成することにより、録画された多数の番組内容を短時間に把握し、視聴者の嗜好に応じた番組を提供することができるという効果がある。
【図面の簡単な説明】
【００３６】
【図１】本発明の実施形態に係る録画番組選択装置の構成を示す図である。
【図２】本発明の実施形態に係る録画番組選択装置の処理フローを示す図である。
【図３】本発明の実施形態に係る録画動画像と静止画およびメタデータとの関係を示す図である。
【図４】本発明の実施形態に係る静止画ＩＤとこれに対応する字幕テキストを例示した図である。
【図５】本発明の実施形態に係る連続動画像視聴区間履歴の蓄積に関する説明に用いる図である。
【図６】本発明の実施形態に係る視聴区間履歴と各静止画のメタデータ（字幕情報）とを用いた距離計算を例示した図である。
【図７】本発明の実施形態に係る視聴区間履歴と各静止画のメタデータ（字幕情報）とを用いた距離計算を例示した図である。
【図８】本発明の実施形態に係る視聴区間履歴と各静止画のメタデータ（字幕情報）とを用いた距離計算を例示した図である。
【図９】本発明の実施形態に係る代表的静止画の選択方法を例示的に示した図である。
【図１０】本発明の実施形態に係る代表的静止画の選択方法を例示的に示した図である。
【図１１】本発明の実施形態に係る番組の提示順序方法を例示的に示した図である。
【図１２】本発明の実施形態に係る番組の表示位置の決定方法を例示的に示した図である。
【発明を実施するための形態】
【００３７】
以下、本発明の実施形態について、図面を用いて、詳細に説明する。
なお、本実施形態における構成要素は適宜、既存の構成要素等との置き換えが可能であり、また、他の既存の構成要素との組合せを含む様々なバリエーションが可能である。したがって、本実施形態の記載をもって、特許請求の範囲に記載された発明の内容を限定するものではない。
【００３８】
＜録画番組選択装置の構成＞
図１を用いて、本実施形態に係る録画番組選択装置の構成について説明する。なお、本実施形態においては、既に、番組が録画されていることを前提に説明を行うため、本来、機能として、有する放送信号の受信部については、省略して説明する。
【００３９】
図１に示すように、本実施形態に係る録画番組選択装置１００は、番組蓄積部１０１と、静止画・メタデータ取得部１０２と、視聴区間履歴情報制御部１０３と、リモコン入力部１０４と、視聴区間履歴蓄積部１０５と、代表的静止画選択部１０６と、ザッピング制御部１０７と、表示部１０８とから構成されている。
【００４０】
番組蓄積部１０１は、録画番組を蓄積する記憶手段であり、例えば、録画番組ごとに固有のＩＤが付され、そのＩＤと録画された番組内容とが関連付けられて記憶されている。静止画・メタデータ取得部１０２は、番組蓄積部１０１に記憶されている固有の番組に関する動画像から静止画と少なくとも字幕情報に基づいて生成したメタデータとを取得し、取得したメタデータを所定のルールに従って加工する。なお、処理の詳細については、後述する。
【００４１】
視聴区間履歴情報制御部１０３は、後述するリモコン入力部１０４からの情報に基づいて、静止画視聴の状態から動画像視聴の状態へあるいは、動画像視聴の状態から静止画視聴の状態へ遷移させ、動画像を視聴していた区間と、この区間に対応する少なくともメタデータを抽出して、視聴区間履歴蓄積部１０５に出力する。リモコン入力部１０４は、視聴者の視聴動作をリモコン情報として入力する。
【００４２】
視聴区間履歴蓄積部１０５は、視聴区間履歴情報制御部１０３から入力した動画像を視聴していた区間と、この区間に対応する少なくともメタデータとを関連付けて記憶する。代表的静止画選択部１０６は、静止画・メタデータ取得部１０２が取得し、加工した静止画とメタデータと視聴区間履歴蓄積部１０５に蓄積された動画像を視聴していた区間に対応するメタデータとに基づいて各番組の代表的な静止画情報を選択する。
【００４３】
ザッピング制御部１０７は、取得された静止画とメタデータと動画像と入力されたリモコン情報と選択された代表的静止画情報とからザッピングデータを取得し、ザッピング動作を制御する。表示部１０８は、ザッピング制御部１０７の制御結果を表示する例えば、液晶表示装置のような表示器である。
【００４４】
＜録画番組選択装置の処理＞
本発明に係る録画番組選択装置の一連の処理について、図２を参照して説明する。
【００４５】
まず、番組蓄積部１０１は、録画番組を蓄積する（ステップＳ１０１）。静止画・メタデータ取得部１０２は、番組蓄積部１０１に蓄積された録画番組の動画像から静止画と少なくとも字幕情報に基づいて生成したメタデータとを取得し、加工する（ステップＳ１０２）。
【００４６】
リモコン入力部１０４は、視聴者の視聴動作をリモコン情報として入力し（ステップＳ１０３）、これにより、視聴区間履歴情報制御部１０３の制御により、静止画から動画像へ遷移したときに、視聴区間履歴蓄積部１０５が、その動画像を視聴していた区間に対応する少なくともメタデータを蓄積する（ステップＳ１０４）。
【００４７】
代表的静止画選択部１０６は、静止画とメタデータと蓄積された動画像を視聴していた区間に対応するメタデータとに基づいて各番組の代表的な静止画情報を選択する（ステップＳ１０５）。そして、ザッピング制御部１０７は、取得された静止画とメタデータと動画像と入力されたリモコン情報と選択された代表的静止画情報とからザッピングデータを取得し、ザッピング動作を制御して（ステップＳ１０６）、表示部１０８がその制御結果を表示する（ステップＳ１０７）。
【００４８】
次に、本発明の特徴部分である各録画番組における代表的静止画を選択する方法について、「録画動画像と静止画およびメタデータとの関係」、「静止画ＩＤとこれに対応する字幕テキストについて」、「動画像視聴区間履歴の蓄積」、「視聴区間履歴と各静止画のメタデータ（字幕情報）とを用いた距離計算」の項目に分けて、順に、図面を用いて説明する。
【００４９】
＜録画動画像と静止画およびメタデータとの関係＞
図３を用いて、録画動画像と静止画およびメタデータとの関係について説明する。
図３に示すように、録画動画像（図中、元動画像）は、複数のメタデータを含んだ静止画に分解できる。この具体的な方法としては、上記の非特許文献１等の技術を利用して実行することができる。また、各「静止画・メタデータ」は元動画像と時刻情報で紐付けされている。なお、メタデータには、字幕情報のほか出演者等の情報を含んでも良い。
【００５０】
＜静止画ＩＤとこれに対応する字幕テキストについて＞
次に、図３を用いて、抽出した静止画ＩＤとこれに対応する字幕テキストについて説明する。抽出した静止画ＩＤとこれに対応する字幕テキストは、具体的に、図４に示すようになっている。例えば、静止画ＩＤ「１」に対応する字幕テキストは、「いま街中の電子看板が注目されています。」であり、静止画ＩＤ「２」に対応する字幕テキストは、「駅あるいは電車の中で良く見るディスプレイ。」であり、静止画ＩＤ「３」に対応する字幕テキストは、「皆さんもこのようなディスプレイを目にしたことはあるのではないでしょうか。」であり、静止画ＩＤ「４」に対応する字幕テキストは、「このような電子看板はデジタルサイネージと呼ばれ日々進化をしています。」であり、静止画ＩＤ「５」に対応する字幕テキストは、「デジタルサイネージがこれまでの電子看板を異なるのは、ひとつひとつの看板が通信ネットワークでつながれているということです。」であり、静止画ＩＤ「６」に対応する字幕テキストは、「ネットワークでつながることによって、画像やテキストを更新することが可能になります。」となっている。
【００５１】
これらの字幕テキストは、実際に静止画から抽出した字幕テキストよりも詳細に内容を表示するように、静止画・メタデータ取得部１０２において加工されている。つまり、メタデータ（字幕テキスト）が動画像を構成する静止画に付された字幕情報よりも多くの情報を含むことによって、詳細な字幕テキストに加工されているため、容易に、番組内容をすばやく把握することができる。
【００５２】
＜動画像視聴区間履歴の蓄積＞
図５を用いて、動画像視聴区間履歴の蓄積について説明する。一般に、録画された多くの番組から、視聴者が気に入った番組を検索する場合、動画像を高速再生（静止画の再生）させ、気になった場面で、動画像を確認するのが有効である。本実施形態では、このように、図５に示すように、視聴者が、時短視聴を目的として、「静止画・メタデータ」情報を順に視聴するほか、「静止画・メタデータ」と「元動画」との間を遷移して視聴できる機能を備えている。
【００５３】
このとき、「静止画・メタデータ」の視聴用デバイスと元動画像の視聴用デバイスは同じであっても、異なっても良い。例えば、元動画像の視聴にＴＶ受像機を用い、「静止画・メタデータ」の視聴にリモコンあるいはデジタルフォトフレームを用いても良い。
【００５４】
また、上記の機能を用いて、「静止画・メタデータ」と「元動画」との間を遷移して視聴する機能を用いた視聴区間では、視聴者の嗜好に応じた静止画あるいはメタデータが存在していた可能性が高い。そこで、「静止画・メタデータ」情報から遷移し動画視聴を行った区間に対応するメタデータ情報を視聴区間履歴蓄積部１０５に蓄積しておく。なお、このとき、メタデータ情報以外に再生タイミング（曜日、時間帯等）、連続視聴時間を蓄積しても良い。
【００５５】
＜視聴区間履歴と各静止画のメタデータ（字幕情報）とを用いた距離計算＞
次に、上記の視聴区間履歴と各静止画のメタデータ（字幕情報）との距離を算出する例について、図６から図８を用いて、具体的に例示する。
【００５６】
図６は、すべての視聴区間履歴を用いてある静止画のメタデータ（字幕情報）との距離を求める方法を示している。この場合、各「静止画・メタデータ」のテキスト情報と蓄積された視聴区間履歴（テキスト）との距離計算を行う。距離は、既存の文書間類似度尺度（例えば、ＴＦ−ＩＤＦ、コサイン距離など）が利用できる。
【００５７】
具体的には、図６に示すように、視聴区間履歴を用いてあるすべての静止画のメタデータ（字幕情報）、「衆議院では・・・」および「今日の天気です。・・・」と、ある静止画のメタデータ（字幕情報）、「いま街中の電子看板が注目されています。」および「皆さんもこのようなディスプレイを目にしたことはあるのではないでしょうか。」との距離計算を実行する。この結果、よく視聴する内容に近い静止画との距離が近くなる。したがって、視聴者が興味を示した区間の静止画との距離が最も近い静止画を代表的静止画として選択するため、短時間で、視聴者が番組内容を把握することができる。
【００５８】
図７は、図６の方法に対して、さらに、曜日や時間帯により視聴区間履歴を絞り込んで、その視聴区間履歴を用いて、ある静止画のメタデータ（字幕情報）との距離を求める方法を示している。
【００５９】
具体的には、図７に示すように、視聴区間履歴から例えば、曜日、時間帯等のパラメータにより視聴区間履歴を絞り込んだ情報、「月曜日、２２時から２４時、衆議院では・・・」および「月曜日、２２時から２４時、経済情勢について・・・」と、ある静止画のメタデータ（字幕情報）、「いま街中の電子看板が注目されています。」および「皆さんもこのようなディスプレイを目にしたことはあるのではないでしょうか。」との距離計算を実行する。この結果、現在の時間と時間帯によく視聴する内容に近い静止画との距離が近くなる。したがって、動画像を視聴していた区間に対応するメタデータに加えて、視聴をしていた曜日と時間帯に関する情報を蓄積し、現在の曜日と時間帯から動画像視聴区間情報蓄積手段を検索し、メタデータを抽出して、その抽出したメタデータとの距離を算出して、最も距離の近いメタデータが付された静止画を代表的静止画とすることから、さらに、短時間で、視聴者が番組内容を把握することができる。
【００６０】
図８は、図６の方法に対して、さらに、連続して視聴した時間により視聴区間履歴を絞り込んで、その視聴区間履歴を用いて、ある静止画のメタデータ（字幕情報）との距離を求める方法を示している。
【００６１】
具体的には、図８に示すように、視聴区間履歴から例えば、連続して視聴した時間等のパラメータにより視聴区間履歴を絞り込んだ情報、「５分３０秒、衆議院では・・・」および「４分３５秒、経済情勢について・・・」と、ある静止画のメタデータ（字幕情報）、「いま街中の電子看板が注目されています。」および「皆さんもこのようなディスプレイを目にしたことはあるのではないでしょうか。」との距離計算を実行する。この結果、ある一定時間以上連続して視聴を行った内容に近い静止画との距離が近くなる。したがって、一定時間連続して視聴していたメタデータを抽出して、その抽出したメタデータとの距離を算出して、最も距離の近いメタデータが付された静止画を代表的静止画として選択することから、さらに、短時間で、視聴者が番組内容を把握することができる。
【００６２】
＜代表的静止画の選択について＞
代表的静止画の選択のひとつとして、各「静止画・メタデータ」のテキスト情報と蓄積された視聴区間履歴（テキスト）との距離が最も近い「静止画・メタデータ」を代表的静止画とする。
【００６３】
つまり、図９に示すように、番組Ａの録画動画像（図中、元動画像）は、メタデータを含むｎ枚の静止画で構成されている。このそれぞれの静止画について、上記で述べた方法を用いて、視聴区間履歴（テキスト）と各静止画のメタデータ（テキスト）の距離を求め、距離が最小の静止画（図名では、斜線部の静止画５）を代表的静止画とする。
【００６４】
こうすることにより、視聴者が興味を示した区間の静止画との距離が最も近い静止画を代表的静止画として選択するため、短時間で、視聴者が番組内容を把握することができる。
【００６５】
また、上記では、各「静止画・メタデータ」のテキスト情報と蓄積された視聴区間履歴（テキスト）との距離が最も近い「静止画・メタデータ」を代表的静止画とする場合を例示したが、距離が予め定めたしきい値以下の複数の「静止画・メタデータ」をすべて、代表的静止画としても良い。つまり、図１０に示すように、上記で述べた方法を用いて、視聴区間履歴（テキスト）と各静止画のメタデータ（テキスト）の距離を求め、距離が予め定めた閾値以下である静止画（図名では、斜線部の静止画２、静止画５、静止画６）そのすべてを代表的静止画としても良い。
【００６６】
こうすることにより、視聴者が興味を示した区間の静止画との距離が所定値以下である例えば、複数の静止画を代表的静止画として選択するため、より短時間で、視聴者が番組内容を把握することができる。
【００６７】
＜番組の提示順序および表示方法＞
これまで、説明したような方法により、代表的静止画を視聴者に提示することにより、ある番組の内容を従来よりも短時間で把握させることができる。しかしながら、番組蓄積部１０１に多くの番組が録画されている場合には、その提示方法にも何らかの工夫が必要となる。ここでは、上記で得られた代表的静止画の距離を用いて、番組の提示順序あるいは表示位置を最適化する方法について、図を用いて、説明する。
【００６８】
＜番組の提示順序＞
上記において、各番組の代表的静止画を抽出する方法を説明したが、ここでは、代表的静止画を抽出するに際して用いた視聴区間履歴に含まれる字幕情報と代表的静止画との距離を再び利用して、番組の提示順序を決定する方法について説明する。
【００６９】
図１１に示すように、番組蓄積部１０１に番組Ａ、番組Ｂ、番組Ｃ、番組Ｄが格納され、番組Ａの代表的静止画と視聴区間履歴に含まれる字幕情報との距離が「Ｄａ１」、番組Ｂの代表的静止画と視聴区間履歴に含まれる字幕情報との距離が「Ｄｂ１」、「Ｄｂ２」、番組Ｃの代表的静止画と視聴区間履歴に含まれる字幕情報との距離が「Ｄｃ１」、番組Ｄの代表的静止画と視聴区間履歴に含まれる字幕情報との距離が「Ｄｄ１」、「Ｄｄ２」、「Ｄｄ３」であり、それぞれの距離の関係が以下のようである場合を考える。
Ｄｂ１＜Ｄd３＜Ｄａ１＜Ｄｄ１＜・・・・・・・
【００７０】
このとき、視聴者に対して、より短時間で、番組内容を把握させるためには、距離の近い代表的静止画を有する番組から順に提示するのが、最も、好ましい。つまり、図１１の例では、番組Ｂ、番組Ｄ、番組Ａ、番組Ｄ、・・・の順番に番組を提示する。つまり、距離の近い代表的静止画を有するということは、視聴者の嗜好にあった番組である可能性が非常に高いため、上記のように、番組を提示することにより、さらに、短時間に番組の内容を把握して、視聴者が好みの番組を視聴することができる。
【００７１】
＜番組の提示位置＞
上記は、比較的、表示画面が小さい表示装置に番組を表示する場合に好適な例であるが、表示画面の大きく、多くの情報を表示できる表示装置では、その表示位置も重要となる。このような場合には、図１１の場合を例にすると、図１２のように、表示位置を決定することが好ましい。つまり、視聴区間履歴に含まれる字幕情報との距離が近い代表的静止画を有する番組を画面の中央に配置する。なお、配置位置は、Ｘ方向の一次元に限らず、Ｘ−Ｙの２次元であっても良い。
【００７２】
このように番組を配置して表示することにより、視聴者は、通常、中央から順に、番組を選択するものと思われることから、さらに、短時間に番組の内容を把握して、視聴者が好みの番組を視聴することができる。
【００７３】
したがって、本実施形態によれば、番組の中から視聴者の嗜好等に基づいて、番組の内容を最も反映する代表的な静止画情報を選択し、これらの代表的な静止画情報について、ザッピング処理を行うため、多数の番組内容を短時間で把握することができる。
【００７４】
なお、録画番組選択装置の処理をコンピュータ読み取り可能な記録媒体に記録し、この記録媒体に記録されたプログラムを録画番組選択装置に読み込ませ、実行することによって本発明の録画番組選択装置を実現することができる。ここでいうコンピュータシステムとは、ＯＳや周辺装置等のハードウェアを含む。
【００７５】
また、「コンピュータシステム」は、ＷＷＷ（Ｗｏｒｌｄ  Ｗｉｄｅ  Ｗｅｂ）システムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）も含むものとする。また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されても良い。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。
【００７６】
また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組合せで実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。
【００７７】
以上、この発明の実施形態につき、図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。
【符号の説明】
【００７８】
１００；録画番組選択装置
１０１；番組蓄積部
１０２；静止画・メタデータ取得部
１０３；視聴区間履歴情報制御部
１０４；リモコン入力部
１０５；視聴区間履歴蓄積部
１０６；代表的静止画選択部
１０７；ザッピング制御部
１０８；表示部
【図１】
2011071818.tif 000003
【図２】
2011071818.tif 000004
【図３】
2011071818.tif 000005
【図４】
2011071818.tif 000006
【図５】
2011071818.tif 000007
【図６】
2011071818.tif 000008
【図７】
2011071818.tif 000009
【図８】
2011071818.tif 000010
【図９】
2011071818.tif 000011
【図１０】
2011071818.tif 000012
【図１１】
2011071818.tif 000013
【図１２】
2011071818.tif 000014