(57)【要約】【課題】テレビジョン放送のリアルタイムの裏番組のダイジェストや、席を離れている最中の主番組のダイジェストの重要なものを確実に視聴することができるようにする。【解決手段】ダイジェスト作成部１８は、テレビジョン放送のリアルタイムの裏番組のダイジェストを作成し、表示インデックス決定部１９は、ダイジェストの重要度を算定し、重要度順のインデックスを作成する。ダイジェスト蓄積部２０は新規のダイジェストを蓄積し、制御部１４の指示により、ダイジェスト提示の際に指定されたダイジェストを、提示情報作成部２１に出力する。提示情報作成部２１は、メイン画像とインデックスを合成し、情報提示部２２に出力する。本発明はテレビジョン受像機に適用することができる。【選択図】　　　図１
2004088384.tif 000002
【特許請求の範囲】
【請求項１】
リアルタイムで受信する少なくとも映像からダイジェストを抽出するダイジェスト抽出手段と、
前記ダイジェスト抽出手段により抽出した前記ダイジェストとしての静止画からインデックスを生成するインデックス生成手段と、
前記ダイジェスト抽出手段により抽出した前記ダイジェストの重要度を算定する重要度算定手段と、
前記重要度算定手段により算定された前記重要度に基づいて、前記インデックス生成手段により生成された前記インデックスの表示を制御する表示制御手段と、
前記表示制御手段により表示が制御された前記インデックスのうち、ユーザにより選択された前記インデックスに対応する前記ダイジェストを提示するダイジェスト提示手段と
を備えることを特徴とする情報処理装置。
【請求項２】
前記ダイジェスト抽出手段において、前記ダイジェストはさらにリアルタイムで受信される音声からも抽出される
ことを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記インデックス生成手段は、前記ダイジェストとしての静止画を縮小してインデックスを生成する
ことを特徴とする請求項１に記載の情報処理装置。
【請求項４】
前記重要度算定手段は、前記重要度の算定に、前記ダイジェストの受信時刻を用いる
ことを特徴とする請求項１に記載の情報処理装置。
【請求項５】
前記重要度算定手段は、前記重要度を、前記受信時刻から現在時刻までの経過時間に基づいて単調減少させる
ことを特徴とする請求項４に記載の情報処理装置。
【請求項６】
前記重要度算定手段は、前記重要度の算定に、ユーザが前記情報処理装置の近傍から離れた時刻である離席時刻を用いる
ことを特徴とする請求項４に記載の情報処理装置。
【請求項７】
前記重要度算定手段は、前記重要度を、前記離席時刻から前記現在時刻までの経過時間に対する、前記受信時刻から前記現在時刻までの経過時間の比に基づいて単調減少させる
ことを特徴とする請求項６に記載の情報処理装置。
【請求項８】
前記重要度算定手段は、前記重要度の算定に、前記ダイジェストとしての前記静止画に含まれるテロップの量をさらに用いる
ことを特徴とする請求項４に記載の情報処理装置。
【請求項９】
前記重要度算定手段は、前記重要度の算定に、前記ダイジェストとしての前記静止画に人物が含まれるか否かの情報をさらに用いる
ことを特徴とする請求項４に記載の情報処理装置。
【請求項１０】
情報処理装置の情報処理方法において、
リアルタイムで受信する少なくとも映像からダイジェストを抽出するダイジェスト抽出ステップと、
前記ダイジェスト抽出ステップの処理により抽出した前記ダイジェストとしての静止画からインデックスを生成するインデックス生成ステップと、
前記ダイジェスト抽出ステップの処理により抽出した前記ダイジェストの重要度を算定する重要度算定ステップと、
前記重要度算定ステップの処理により算定された前記重要度に基づいて、前記インデックス生成ステップの処理により生成された前記インデックスの表示を制御する表示制御ステップと、
前記表示制御ステップの処理により表示が制御された前記インデックスのうち、ユーザにより選択された前記インデックスに対応する前記ダイジェストを提示するダイジェスト提示ステップと
を含むことを特徴とする情報処理方法。
【請求項１１】
情報処理装置のプログラムであって、
リアルタイムで受信する少なくとも映像からダイジェストを抽出するダイジェスト抽出ステップと、
前記ダイジェスト抽出ステップの処理により抽出した前記ダイジェストとしての静止画からインデックスを生成するインデックス生成ステップと、
前記ダイジェスト抽出ステップの処理により抽出した前記ダイジェストの重要度を算定する重要度算定ステップと、
前記重要度算定ステップの処理により算定された前記重要度に基づいて、前記インデックス生成ステップの処理により生成された前記インデックスの表示を制御する表示制御ステップと、
前記表示制御ステップの処理により表示が制御された前記インデックスのうち、ユーザにより選択された前記インデックスに対応する前記ダイジェストを提示するダイジェスト提示ステップと
を含むことを特徴とするコンピュータが読み取り可能なプログラムが格納されているプログラム格納媒体。
【請求項１２】
情報処理装置を制御するコンピュータに、
リアルタイムで受信する少なくとも映像からダイジェストを抽出するダイジェスト抽出ステップと、
前記ダイジェスト抽出ステップの処理により抽出した前記ダイジェストとしての静止画からインデックスを生成するインデックス生成ステップと、
前記ダイジェスト抽出ステップの処理により抽出した前記ダイジェストの重要度を算定する重要度算定ステップと、
前記重要度算定ステップの処理により算定された前記重要度に基づいて、前記インデックス生成ステップの処理により生成された前記インデックスの表示を制御する表示制御ステップと、
前記表示制御ステップの処理により表示が制御された前記インデックスのうち、ユーザにより選択された前記インデックスに対応する前記ダイジェストを提示するダイジェスト提示ステップと
を実行させることを特徴とするプログラム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、情報処理装置および方法、プログラム格納媒体、並びにプログラムに関し、特に、テレビジョン放送などの視聴時に、リアルタイムで放送されている番組の裏番組のダイジェストや、席を離れた間の視聴番組のダイジェストで重要な情報を、確実に視聴できるようにした情報処理装置および方法、プログラム格納媒体、並びにプログラムに関する。
【０００２】
【従来の技術】
従来のＡＶ（Ａｕｄｉｏ　Ｖｉｓｕａｌ）コンテンツ自動要約システムは、テレビジョン放送番組の要約を作成し、提示している（例えば、特許文献１参照）。
【０００３】
【特許文献１】
特開２００２−１４９６７２号公報（第６頁乃至第８頁、図５乃至図９）
【０００４】
【発明が解決しようとする課題】
しかしながら、特許文献１に記載の装置では、番組を一旦記録し、その後、記録された番組の要約が作成されるため、例えば、リアルタイムで放送されている番組の裏番組の中から所定の番組を選択するのに利用することができない課題があった。
【０００５】
本発明はこのような状況に鑑みてなされたものであり、リアルタイムで受信する映像と音声から、所望のものを確実に視聴できるようにするものである。
【０００６】
【課題を解決するための手段】
本発明の情報処理装置は、リアルタイムで受信する少なくとも映像からダイジェストを抽出するダイジェスト抽出手段と、ダイジェスト抽出手段により抽出したダイジェストとしての静止画からインデックスを生成するインデックス生成手段と、ダイジェスト抽出手段により抽出したダイジェストの重要度を算定する重要度算定手段と、重要度算定手段により算定された重要度に基づいて、インデックス生成手段により生成されたインデックスの表示を制御する表示制御手段と、表示制御手段により表示が制御されたインデックスのうち、ユーザにより選択されたインデックスに対応するダイジェストを提示するダイジェスト提示手段とを備えることを特徴とする。
【０００７】
ダイジェスト抽出手段において、ダイジェストはさらにリアルタイムで受信される音声からも抽出されることができる。
【０００８】
インデックス生成手段は、ダイジェストとしての静止画を縮小してインデックスを生成することができる。
【０００９】
重要度算定手段は、重要度の算定に、ダイジェストの受信時刻を用いることができる。
【００１０】
重要度算定手段は、重要度を、受信時刻から現在時刻までの経過時間に基づいて単調減少させることができる。
【００１１】
重要度算定手段は、重要度の算定に、ユーザが前記情報処理装置の近傍から離れた時刻である離席時刻を用いることができる。
【００１２】
重要度算定手段は、重要度を、離席時刻から現在時刻までの経過時間に対する、受信時刻から現在時刻までの経過時間の比に基づいて単調減少させることができる。
【００１３】
重要度算定手段は、重要度の算定に、ダイジェストとしての静止画に含まれるテロップの量をさらに用いることができる。
【００１４】
重要度算定手段は、重要度の算定に、前記ダイジェストとしての前記静止画に人物が含まれるか否かの情報をさらに用いることができる。
【００１５】
本発明の情報処理方法は、リアルタイムで受信する少なくとも映像からダイジェストを抽出するダイジェスト抽出ステップと、ダイジェスト抽出ステップの処理により抽出したダイジェストとしての静止画からインデックスを生成するインデックス生成ステップと、ダイジェスト抽出ステップの処理により抽出したダイジェストの重要度を算定する重要度算定ステップと、重要度算定ステップの処理により算定された重要度に基づいて、インデックス生成ステップの処理により生成されたインデックスの表示を制御する表示制御ステップと、表示制御ステップの処理により表示が制御されたインデックスのうち、ユーザにより選択されたインデックスに対応するダイジェストを提示するダイジェスト提示ステップとを含むことを特徴とする。
【００１６】
本発明のプログラム格納媒体のプログラムは、リアルタイムで受信する少なくとも映像からダイジェストを抽出するダイジェスト抽出ステップと、ダイジェスト抽出ステップの処理により抽出したダイジェストとしての静止画からインデックスを生成するインデックス生成ステップと、ダイジェスト抽出ステップの処理により抽出したダイジェストの重要度を算定する重要度算定ステップと、重要度算定ステップの処理により算定された重要度に基づいて、インデックス生成ステップの処理により生成されたインデックスの表示を制御する表示制御ステップと、表示制御ステップの処理により表示が制御されたインデックスのうち、ユーザにより選択されたインデックスに対応するダイジェストを提示するダイジェスト提示ステップとを含むことを特徴とする。
【００１７】
本発明のプログラムは、リアルタイムで受信する少なくとも映像からダイジェストを抽出するダイジェスト抽出ステップと、ダイジェスト抽出ステップの処理により抽出したダイジェストとしての静止画からインデックスを生成するインデックス生成ステップと、ダイジェスト抽出ステップの処理により抽出したダイジェストの重要度を算定する重要度算定ステップと、重要度算定ステップの処理により算定された重要度に基づいて、インデックス生成ステップの処理により生成されたインデックスの表示を制御する表示制御ステップと、表示制御ステップの処理により表示が制御されたインデックスのうち、ユーザにより選択されたインデックスに対応するダイジェストを提示するダイジェスト提示ステップとをコンピュータに実行させることを特徴とする。
【００１８】
本発明においては、リアルタイムで受信する少なくとも映像から抽出されたダイジェストとしての静止画からインデックスが生成される。また、抽出したダイジェストの重要度が算定され、算定された重要度に基づいて、インデックスの表示が制御され、表示されたインデックスのうち、ユーザにより選択されたインデックスに対応するダイジェストが提示される。
【００１９】
【発明の実施の形態】
図１は、本発明を適用したテレビジョン受像機１の構成例を表している。人センサ部１１は、テレビジョン受像機１の近傍に、視聴者がいるか否かを検知し、その結果を制御部１４に出力する。受信部１２は、リモートコントローラ（以下、リモコンと記載する）１３が出力する各種の制御内容を表す赤外線信号を受信し、対応する制御信号を制御部１４へ出力する。
【００２０】
リモコン１３は、図２に示されるように構成されている。リモコン１３の上部には、放送チャンネルの番号や、インデックスの一覧よりダイジェストを選択するための番号を入力するときユーザ（視聴者）により操作される、０から９までの数字に対応するテンキー３１が設けられている。テンキー３１の下には、ユーザがモードを選択するとき操作される、通常ボタン３２、裏番組ボタン３３、および離席ボタン３４からなるモードボタンが設けられている。なお、離席とは、ユーザが一時的にテレビジョン受像機１の前（視聴している位置）から席を離れることを意味する。
【００２１】
通常ボタン３２は、１つの番組を視聴する通常モードを設定するとき操作される。裏番組ボタン３３は、所定のチャンネルで放送されている主番組の他に、同時に放送されている裏番組のダイジェストを表示させる裏番組モードを設定するとき操作される。離席ボタン３４は、ユーザが席を離れ、主番組のダイジェストを順次更新させる離席更新モードを設定するとき操作される。離席ボタン３４はまた、更新を中止する離席モードを設定するときにも操作される。
【００２２】
さらに、これらのモードボタンの下方には、ユーザがテンキー３１で指定したダイジェストを提示させるとき操作されるダイジェスト提示ボタン３５が設けられている。ダイジェストを提示させるとき、ユーザは、テンキー３１を操作し、インデックスの番号を指定した後、ダイジェスト提示ボタン３５を操作する。赤外線発光部３６は、上記した各ボタンが操作されたとき、対応する赤外線信号を出力する。
【００２３】
図１に戻り、チューナ１５は、制御部１４からの指示に基づき、ユーザが視聴する放送番組を受信し、受信信号をセレクタ１７および提示情報作成部２１に出力する。提示情報作成部２１に出力される受信信号は、ユーザがリアルタイムに視聴するメインの放送番組（視聴番組）の信号である。チューナ１６は、制御部１４からの指示に基づき、ユーザが視聴する放送番組の裏番組のプログラムを受信し、受信信号をセレクタ１７に出力する。
【００２４】
セレクタ１７は、制御部１４からの指示に基づき、離席更新モードの時にはチューナ１５の受信信号を選択し、裏番組モードの時にはチューナ１６の受信信号を選択し、それぞれダイジェスト作成部１８に出力する。ダイジェスト作成部１８は、セレクタ１７からの受信信号の入力を受け、ダイジェストを作成し、ダイジェストの重要度の算定に必要な情報をダイジェストと共に表示インデックス決定部１９に出力する。なお、この例の場合、ダイジェストは、インデックスとして表示される静止画と、所定の時間の音声信号により構成される。
【００２５】
表示インデックス決定部１９は、制御部１４より指定された現在のモードに応じて、現在表示されているインデックスに対応するダイジェストの重要度と、新しく作成されたダイジェストの重要度の算定を行う。表示インデックス決定部１９は、表示可能なインデックスを、重要度の順に選択し、対応するダイジェストを提示情報作成部２１に出力する。また、表示インデックス決定部１９は、選択されたダイジェストの中に新規のものが含まれる場合には、そのダイジェストをダイジェスト蓄積部２０に出力する。
【００２６】
ダイジェスト蓄積部２０は、表示インデックス決定部１９からダイジェストが出力された場合、そのダイジェストを蓄積する。また、ダイジェスト蓄積部２０は、ユーザがインデックスの一覧より１つのインデックスを選択したとき、そのインデックスに対応するダイジェストを提示情報作成部２１に出力する。
【００２７】
提示情報作成部２１は、制御部１４より指定された現在のモードに応じて、メインの表示（主たる表示）とインデックスの表示を構成し、メインの表示に対応する音声とともに情報提示部２２に出力する。情報提示部２２は、ディスプレイおよびスピーカにより構成され、提示情報作成部２１より出力された画像および音声をユーザに提示する。
【００２８】
制御部１４には、必要に応じて、ドライブ２３が接続され、ドライブ２４により、リムーバブルメディア２４が駆動される。
【００２９】
次に、図３のフローチャートを参照して、制御部１４のモード選択処理について説明する。
【００３０】
制御部１４により選択されるモードには、通常モード、裏番組モード、離席更新モード、および離席モードの４つのモードがある。通常モードは、ユーザが視聴したい主たる番組のみの視聴を行うモードである。裏番組モードは、ユーザが視聴を行う主たる番組と同時に、主たる番組と異なる放送チャンネルで放送されている裏番組の情報のダイジェストを作成し、そのインデックスを重要度順に提示するモードである。離席更新モードは、ユーザがテレビジョン受像機１の前より席を外している間に、そのときユーザが視聴している主たる番組のダイジェストを作成するモードである。離席モードは、離席更新モードの間に作成されたダイジェストのインデックスを重要度順に提示するモードである。
【００３１】
ステップＳ１において、制御部１４は、モードをデフォルトとしての通常モードに設定する。通常モードにおいては、図４に示されるように、情報提示部２２には、ユーザがリモコン１３を操作して指定した放送チャンネルの番組（主たる番組）の画像が、画面一杯に表示され、対応する音声が出力される。
【００３２】
すなわち、このとき、制御部１４は、チューナ１５を制御し、リモコン１３から指示された放送チャンネルを受信させる。チューナ１５により受信された信号は、提示情報作成部２１に供給され、通常の信号として、情報提示部２２に出力され、表示される。このようにして、通常モードにおいては、ユーザが指定した放送チャンネルの画像が、標準の大きさで、画面に表示される。
【００３３】
ステップＳ２において、制御部１４は、ユーザが通常ボタン３２を操作したか否かを判定し、通常ボタン３２が操作されたと判定された場合、処理はステップＳ３に進められ、制御部１４は、モードを通常モードに設定する。このとき、現在のモードが既に通常モードである場合には、ステップＳ３の処理はスルーされる。ステップＳ３の処理の後、処理はステップＳ２に戻される。
【００３４】
ステップＳ２において、通常ボタン３２が操作されていないと判定された場合、処理はステップＳ４に進められ、制御部１４は、ユーザが裏番組ボタン３３を操作したか否かを判定する。裏番組ボタン３３が操作されたと判定された場合、処理はステップＳ５に進められ、制御部１４は、モードを裏番組モードに設定する。このとき、現在のモードが既に裏番組モードである場合には、ステップＳ５の処理はスルーされる。ステップＳ５の処理の後、処理はステップＳ２に戻される。
【００３５】
この裏番組モードにおいては、表示インデックス更新処理が実行される。その詳細については、図５のフローチャートを参照して後述するが、主番組以外に、裏番組のインデックスが表示される。そして、そのインデックスは、更新される。
【００３６】
ステップＳ４において、裏番組ボタン３３が操作されていないと判定された場合、処理はステップＳ６に進められ、制御部１４は、ユーザが離席ボタン３４を操作したか否かを判定する。離席ボタン３４が操作されたと判定された場合、処理はステップＳ７に進められる。
【００３７】
ステップＳ７において、制御部１４は、現在のモードが離席更新モードであるか否かを判定し、現在のモードが離席更新モードであると判定された場合、処理はステップＳ８に進められ、制御部１４は、モードを離席モードに設定する。ステップＳ８の処理の後、処理はステップＳ２に戻される。
【００３８】
この離席モードにおいては、表示インデックス更新処理が、少なくとも１回行われた後、その後、更新が行われない状態となる。
【００３９】
ステップＳ７において、現在のモードが離席更新モードでないと判定された場合、処理はステップＳ９に進められ、制御部１４は、モードを離席更新モードに設定する。ステップＳ９の処理の後、処理はステップＳ２に戻される。
【００４０】
この離席更新モードにおいては、裏番組モードにおける場合と同様に、表示インデックス更新処理が実行される。
【００４１】
ステップＳ６において、離席ボタン３４が操作されていないと判定された場合、処理はステップＳ１０に進められ、制御部１４は、人センサ部１１がユーザの離席を検知したか否かを判定し、離席を検知したと判定された場合、処理はステップＳ１１に進められる。
【００４２】
ステップＳ１１において、制御部１４は、現在のモードが通常モードであるか否かを判定し、現在のモードが通常モードであると判定された場合、処理はステップＳ９に進められ、制御部１４は、モードを離席更新モードに設定する。ステップＳ９の処理の後、処理はステップＳ２に戻される。ステップＳ１１において、現在のモードが通常モードではないと判定された場合、並びに、ステップＳ１０において、離席が検知されていないと判定された場合、処理はステップＳ２に戻される。
【００４３】
次に、図５のフローチャートを参照して、表示インデックス更新処理について説明する。この処理は、制御部１４により、裏番組モード（図３のステップＳ５）または、離席更新モード（図３のステップＳ９）が設定されたときに、予め定められた所定の周期で繰り返し実行される。なお、裏番組モードと離席更新モードにおける表示インデックス更新処理は、ダイジェストの重要度の算定方法が異なるだけで、その他の処理は同様である。
【００４４】
ステップＳ３１において、制御部１４は、現在のモードが裏番組モードであるのか、または、離席更新モードであるのかを判定し、裏番組モードであると判定された場合、処理はステップＳ３２に進められ、制御部１４は、チューナ１６に裏番組を受信させる。すなわち、チューナ１６は、チューナ１５が受信している主番組が放送されている放送チャンネル以外の放送チャンネルを受信する。このとき、制御部１４はセレクタ１７を制御し、チューナ１６の出力を選択させ、ダイジェスト作成部１８に出力させる。
【００４５】
ステップＳ３１において、離席更新モードであると判定された場合、処理はステップＳ３３に進められ、制御部１４は、チューナ１５に主番組を受信させる（最も、チューナ１５は、動作状態の場合、常に主番組を受信しているので、実際には、ここでは、特別の処理は行われない）。また、このとき、制御部１４は、セレクタ１７を制御し、チューナ１５の出力を選択させ、ダイジェスト作成部１８に出力させる。
【００４６】
ステップＳ３２、または、ステップＳ３３の処理の後、ステップＳ３４において、ダイジェスト作成部１８は、セレクタ１７より供給された番組のダイジェストを作成し、作成したダイジェストを表示インデックス決定部１９に出力する。上述したように、裏番組モードであれば、裏番組のダイジェストが作成され、離席更新モードであれば、主番組のダイジェストが作成される。ダイジェストとは、その時点の１枚の静止画と、その時点から所定の時間の音声で構成される。またダイジェスト作成部１８は、重要度の算定に必要な情報を表示インデックス決定部１９に出力する。
【００４７】
ステップＳ３５において、表示インデックス決定部１９は、制御部１４から指示された現在のモードに応じて、既に表示されているインデックスに対応するダイジェストの重要度と、新しく作成されたダイジェストの重要度を算定する。
【００４８】
裏番組モードにおけるダイジェストの重要度は、以下のような基本的方針に従って算定される。
（１）受信時刻の新しいものが重要である。
（２）静止画に含まれる情報の重要度が大きいものが重要である。
（２−１）画像中に人物が含まれる方が重要である。
（２−２）テロップ量の多いものが重要である。
【００４９】
このような方針に従って、具体的には、裏番組モードにおけるダイジェストの重要度の算定は、次式（１）により計算する。
2004088384.tif 000003
【００５０】
なお、式（１）の「人存在有無」の値は、そのダイジェストとしての画像（インデックスとしての画像）中に人物が存在するとき「１」とされ、存在しないとき「０」とされる。「人存在重要度」と「単位面積あたりのテロップ重要度」は、ユーザにより所定の値が与えられる。
【００５１】
また、「受信時刻に基づく重要度」の計算式の例としては、次式（２）のようなものが考えられる。
2004088384.tif 000004
Ａはユーザにより所定の値が与えられる正の定数である。式（２）をグラフとして表示したものを図６に示す。すなわち、インデックスの画像の受信時刻からの時間の経過が長くなればなるほど（現在時刻と受信時刻との差が大きくなればなるほど）、重要度が単調減少する。
【００５２】
また、「受信時刻に基づく重要度」の計算式の他の例としては、次式（３）のようなものが考えられる。
2004088384.tif 000005
ここでも、Ａはユーザにより所定の値が与えられる正の定数である。式（３）をグラフとして表示したものを図７に示す。すなわち、式（２）と同様に、時間の経過が長くなればなるほど、重要度が単調減少する。
【００５３】
以上のように、式（１）において、ダイジェストの重要度は、画像の中の人物の存在、画像の中のテロップの量、並びに受信時刻により決定される。
【００５４】
なお、受信時刻としては、ダイジェストにおける静止画の受信時刻を用いる方法や、ダイジェストにおける音声の開始時刻、または終了時刻、または両者の中間の受信時刻を用いる方法などが考えられる。
【００５５】
一方、離席更新モードにおけるダイジェストの重要度は、以下のような基本的方針に従って算定される。
（１）受信時刻の新しいものが重要である。ただし、新しさは離席更新モード開始時刻（離席時刻）から現在時刻までの経過時間を基準として決定する。
（２）静止画に含まれる情報の重要度が大きいものが重要である。
（２−１）画像中に人が含まれる方が重要である。
（２−２）テロップ量の多いものが重要である。
【００５６】
なお、離席更新モードにおいては、裏番組モードと同様の方針で、受信時刻のみから重要度を決定すると、離席から間もない時に受信された情報は、時間の経過と共に、その重要度が減少しつづけるが、離席更新モードにおいては、離席から席に戻るまでの全体を考慮した形で、受信時刻に応じた重要度づけをすることが好ましいので、このような方針とされている。
【００５７】
離席更新モードにおけるダイジェストの重要度の算定は、次式（４）により計算される。
2004088384.tif 000006
【００５８】
式（４）と式（１）と比較して明らかなように、両者は、式（１）における「受信時刻に基づく重要度」が、式（４）では「離席時刻と受信時刻に基づく重要度」となっている点が異なり、他は同様である。
【００５９】
「離席時刻と受信時刻に基づく重要度」の計算式の例としては、次式（５）のようなものが考えられる。
2004088384.tif 000007
式（５）と式（２）を比較して明らかなように、式（５）は、式（２）の全体を「現在時刻−離席時刻」で除算したものとなっている。式（５）をグラフとして表示したものを図８および図９に示す。図８が、離席後、間もない時点での重要度を示し、図９が、さらに時間が経過した時点での重要度を示す。すなわち、時間の経過が長くなればなるほど重要度が単調減少する。
【００６０】
また、離席時刻と受信時刻に基づく重要度の計算式の他の例としては、次式（６）のようなものが考えられる。
2004088384.tif 000008
式（６）と式（３）を比較して明らかなように、式（６）は、式（３）の「ｅｘｐ」の項を「現在時刻−離席時刻」で除算したものとなっている。式（６）をグラフとして表示したものを図１０および図１１に示す。図１０が、離席後、間もない時点での重要度を示し、図１１が、さらに時間が経過した時点での重要度を示す。すなわち、式（５）と同様に、時間の経過が長くなればなるほど重要度が単調減少する。
【００６１】
このように、式（４）においては、ダイジェストの重要度は、画像の中の人物の存在、画像の中のテロップの量、並びに離席時刻と受信時刻により決定される。
【００６２】
式（１）と式（４）のいずれにおいても、現在時刻と受信時刻との差に基づく重要度が、ダイジェストの重要度を決定する要素に含まれているため、ダイジェストの重要度は、時間の経過とともに変化するので、その都度計算される。
【００６３】
図５に戻って、以上のようにして、ステップＳ３５の処理が行なわれ、ダイジェストの重要度が計算されると、ステップＳ３６において、表示インデックス決定部１９は、重要度が大きいものから順番に、表示可能な数のダイジェストを選択し、ダイジェストの静止画（インデックス）と重要度の順位を、提示情報作成部２１に出力する。
【００６４】
ステップＳ３６で選択されたダイジェストの中に新規のものが含まれる場合には、ステップＳ３７において、表示インデックス決定部１９は、そのダイジェストをダイジェスト蓄積部２０に出力し、ダイジェスト蓄積部２０は、その新規のダイジェストを蓄積する。その結果、ダイジェスト蓄積部２０には、作成された全てのダイジェストが蓄積される。
【００６５】
ステップＳ３８において、提示情報作成部２１は、ステップＳ３６の処理で、表示インデックス決定部１９より供給されたダイジェストの静止画を縮小してインデックスを生成し、インデックスと、チューナ１５から直接供給された画像をメイン画像として１つの合成画像を作成し、これとチューナ１５の音声を、情報提示部２２に出力する。
【００６６】
以上のような図５の処理が、定期的に繰り返し実行されることで、例えば、裏番組モードにおいては、図１２に示されるように、情報提示部２２にメイン画像４１とインデックス４２とが表示される。
【００６７】
図１２の例では、画面左上に、標準の大きさの約１／４の大きさに縮小された（縦と横がそれぞれ１／２に縮小された）メイン画像４１が、視聴している主番組として、音声と共に出力されている。また、裏番組の静止画と音声からなるダイジェストが自動抽出され、ダイジェストの重要度の順番に、画面の残りの領域の左上から右下方向に、標準の大きさの約１／１６の大きさに縮小された（縦と横がそれぞれ１／４に縮小された）、１２個のインデックス４２が表示されている。なお、図１２のインデックス４２の画像の右上の番号は、ダイジェストの重要度の順位を表している。
【００６８】
例えば、インデックス４２−１は、画面の全体にテロップ４３が表示された画像であるので、ダイジェストの重要度が最も大きい（順位が１番の）インデックスとなっている。また、インデックス４２−２は、画面のほぼ中央に人の顔４４が大きく写された画像であるので、ダイジェストの重要度が、次に高いインデックスとされている。
【００６９】
図５の処理で１つのインデックスが表示されるため、インデックスは、図５の処理の周期の１２倍の周期で更新される。図１２の１２個のインデックスは、裏番組の画像であるため、主番組とは異なる放送チャンネルの画像である。
【００７０】
一方、離席更新モードの場合、ダイジェストは、ユーザがテレビジョン受像機１の前より席を外している間に、ユーザが視聴している主番組のダイジェストである。例えば、離席更新モードにおいては、図１３に示されるように、裏番組モードにおける表示と同様に、情報提示部２２にメイン画像５１とインデックス５２とが表示される。しかし、裏番組モードとは異なり、インデックス５２の画像は、ユーザが視聴している主番組の、図５の処理の周期毎のダイジェストである。
【００７１】
離席更新モードの場合、インデックス５２は、図５の処理の周期の１２倍の周期で順次更新される。しかしながら、離席更新モードにおいて、ユーザが離席ボタン３４を操作すると、上述したように離席更新モードは離席モードに変更される。離席モードにおいては、インデックス５２の更新は中止される。
【００７２】
図１２または図１３に示されるように、メイン画像４１，５１とインデックス４２，５２が表示されている状態において、ユーザが所定のインデックスを指定すると、そのインデックスが、メイン画像として表示される。次に、図１４のフローチャートを参照して、この場合における、ダイジェスト提示処理について説明する。この処理は、裏番組モード、または離席モードにおいて、ユーザが所要の番号のテンキー３１を操作し、その後、リモコン１３のダイジェスト提示ボタン３５を操作したときに開始される。
【００７３】
ステップＳ４１において、受信部１２は、リモコン１３より、ダイジェスト表示を行うインデックス番号の信号の入力を受け、その信号を、制御部１４に出力する。ステップＳ４２において、制御部１４は、ダイジェスト蓄積部２０と提示情報作成部２１に、提示するダイジェストを指示する。ステップＳ４３において、ダイジェスト蓄積部２０は、制御部１４により指示されたダイジェスト（静止画と音声）を読み出し、提示情報作成部２１に出力する。
【００７４】
ステップＳ４４において、提示情報作成部２１は、ダイジェストの静止画と主番組の画像と置き換えを行ったダイジェストの画像と音声を、情報提示部２２に出力する。情報提示部２２は、入力された情報をユーザに提示する。提示の終了、すなわち、ダイジェスト音声の出力が終了すると、元の状態に戻る。すなわち、元の主番組の画像がメイン画像として表示されるとともに、対応する音声が出力される。
【００７５】
ダイジェスト提示処理の具体例について、図１５、および図１６を参照して、さらに説明する。
【００７６】
裏番組モードにおいて、ユーザがリモコン１３のテンキー３１の番号「２」のキーを操作し、さらに、ダイジェスト提示ボタン３５を操作すると、ダイジェスト提示処理が行われ、図１５に示されるように、２番目の重要度のインデックス４２−２に対応するダイジェストの静止画が、図１２におけるメイン画像４１の主番組の画像と置き換えて表示され、同時にダイジェストの音声が再生される。ダイジェストの音声の再生が終了すると、もとの図１２のような提示状態に戻る。
【００７７】
離席モードにおいても、同様に、ユーザがリモコン１３のテンキー３１の番号「１」のキーを操作し、さらに、ダイジェスト提示ボタン３５を操作すると、ダイジェスト提示処理が行われ、図１６に示されるように、１番目の重要度のインデックス５２−１に対応するダイジェストの静止画が、図１３におけるメイン画像５１の主番組の画像と置き換えて表示され、同時にダイジェストの音声が再生される。ダイジェストの音声の再生が終了すると、もとの図１３のような提示状態に戻る。
【００７８】
以上においては、１つの表示部の表示領域を分割して、メイン画像とインデックスを表示させるようにしたが、メイン画像とインデックスの表示は、図１７に示されるように、情報提示部２２を、複数のディスプレイで構成し、それぞれに表示させるようにしてもよい。図１７の例では、４個のディスプレイが用いられており、１個のディスプレイに、メイン画像６１が表示され、残りのディスプレイに、１つのディスプレイを約４分割した１２個のインデックス６２が表示される。
【００７９】
また、ダイジェスト提示の際に音声のみの置き換えを行い、画像の置き換えをしないようにしてもよい。また、インデックスとメイン画像を同じサイズで表示するようにしてもよい。
【００８０】
以上、本発明をテレビジョン受像機に適用した場合を例として説明したが、本発明は、ビデオテープレコーダ、ハードディスクレコーダ、その他の情報処理装置に適用することも可能である。
【００８１】
上述した一連の処理は、ハードウエアにより実行させることもできるが、ソフトウエアにより実行させることもできる。一連の処理をソフトウエアにより実行させる場合には、そのソフトウエアを構成するプログラムが、専用のハードウエアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、ネットワークや記録媒体からインストールされる。
【００８２】
この記録媒体は、装置本体とは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク（フロッピディスクを含む）、光ディスク（ＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ　Ｄｉｓｋ−Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）、ＤＶＤ（Ｄｉｇｉｔａｌ　Ｖｅｒｓａｔｉｌｅ　Ｄｉｓｋ）を含む）、光磁気ディスク（ＭＤ（Ｍｉｎｉ−Ｄｉｓｋ）を含む）、もしくは半導体メモリなどよりなるパッケージメディアとしてのリムーバブルメディア２４により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される、プログラムが記録されているＲＯＭや、ハードディスクなどで構成される。
【００８３】
なお、本明細書において、プログラム格納媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【００８４】
【発明の効果】
以上のごとく本発明によれば、テレビジョン放送の視聴時に、番組のダイジェストをユーザに提示することができる。特に、リアルタイムで受信される裏番組のダイジェストや、席を離れている最中の主番組のダイジェストのうち重要なものを、ユーザに確実に提示し、視聴させることが可能となる。
【図面の簡単な説明】
【図１】本発明を適用したテレビジョン受像機の構成を示すブロック図である。
【図２】図１のリモートコントローラの構成を示す図である。
【図３】図１のテレビジョン受像機のモード選択処理を説明するフローチャートである。
【図４】通常モードの表示例を表す図である。
【図５】図１のテレビジョン受像機の表示インデックス更新処理を説明するフローチャートである。
【図６】受信時刻に基づく重要度の計算式の例を示すグラフである。
【図７】受信時刻に基づく重要度の計算式の例を示すグラフである。
【図８】離席時刻と受信時刻に基づく重要度の計算式の例を示すグラフである。
【図９】離席時刻と受信時刻に基づく重要度の計算式の例を示すグラフである。
【図１０】離席時刻と受信時刻に基づく重要度の計算式の例を示すグラフである。
【図１１】離席時刻と受信時刻に基づく重要度の計算式の例を示すグラフである。
【図１２】裏番組モードでの提示画像例を示す図である。
【図１３】離席更新モードでの提示画像例を示す図である。
【図１４】図１のテレビジョン受像機のダイジェスト表示処理を説明するフローチャートである。
【図１５】裏番組モードでのダイジェスト提示例を示す図である。
【図１６】離席モードでのダイジェスト提示例を示す図である。
【図１７】複数のディスプレイを用いた画像提示例を示す図である。
【符号の説明】
１　テレビジョン受像機，　１１　人センサ部，　１２　受信部，　１３　リモートコントローラ，　１４　制御部，　１５，１６　チューナ，　１７　セレクタ，　１８　ダイジェスト作成部，　１９　表示インデックス決定部，　２０ダイジェスト蓄積部，　２１　提示情報作成部，　２２　情報提示部，　３１テンキー，　３２　通常ボタン，　３３　裏番組ボタン，　３４　離席ボタン，　３５　ダイジェスト提示ボタン
【図１】
2004088384.tif 000009
【図２】
2004088384.tif 000010
【図３】
2004088384.tif 000011
【図４】
2004088384.tif 000012
【図５】
2004088384.tif 000013
【図６】
2004088384.tif 000014
【図７】
2004088384.tif 000015
【図８】
2004088384.tif 000016
【図９】
2004088384.tif 000017
【図１０】
2004088384.tif 000018
【図１１】
2004088384.tif 000019
【図１２】
2004088384.tif 000020
【図１３】
2004088384.tif 000021
【図１４】
2004088384.tif 000022
【図１５】
2004088384.tif 000023
【図１６】
2004088384.tif 000024
【図１７】
2004088384.tif 000025