(57)【要約】【課題】見逃しがあった場合に、見逃した箇所を含むコンテンツ全体の効率的な再生を行えるようにする。【解決手段】視聴者の視聴状態をセンシングによって取得する。一方でコンテンツ内容を解析することによって見逃した区間のコンテンツがどのような内容であったかを定量値として出力する。そして、視聴者の視聴状態および見逃した区間のコンテンツの内容を統合した情報を視聴中もしくは視聴後の画面に提示する。それにより、視聴者に見逃したコンテンツ期間を見直す必要があるかどうかを判断させる。また、以前視聴した際のコンテンツ解析結果を用いて見逃していない期間のコンテンツはダイジェスト再生しつつ、見逃した期間を集中的に再生する。【選択図】図６
2009188670.tif 000002
【特許請求の範囲】
【請求項１】
表示装置に表示された提示コンテンツに対する視聴者の視聴状態を示す情報を受信する受信部と、
前記受信した視聴者の視聴状態を示す情報に基づいて、前記提示コンテンツのダイジェストを生成する提示処理部と、
を含むことを特徴とする情報処理装置。
【請求項２】
前記受信部が受信した前記視聴者の視聴状態を示す情報から、前記視聴者が前記提示コンテンツを見逃した箇所に関する情報を含む見逃し情報を生成する見逃し情報生成部、を備え、
前記提示処理部は、前記見逃し情報生成部で生成された見逃し情報に応じて前記提示コンテンツのダイジェストを生成する
ことを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記提示コンテンツの内容を解析するコンテンツ解析部を、さらに含み、
前記提示処理部は、見逃した情報を再生するためのパラメータとして、前記見逃し情報生成部で生成された前記見逃し情報と、前記コンテンツ解析部の前記コンテンツの解析結果を取得する
ことを特徴とする請求項２に記載の情報処理装置。
【請求項４】
前記提示処理部は、前記提示コンテンツを見逃した箇所に関する情報を、前記表示装置に出力し表示させる
ことを特徴とする請求項３に記載の情報処理装置。
【請求項５】
前記提示処理部は、前記提示コンテンツのある範囲における見逃し時間および前記提示コンテンツの内容を示すコンテンツ情報を、前記表示装置に出力し表示させる
ことを特徴とする請求項４に記載の情報処理装置。
【請求項６】
前記提示処理部は、前記提示コンテンツ全体の見逃し時間および前記提示コンテンツの内容を示すコンテンツ情報を、前記表示装置に出力し表示させる
ことを特徴とする請求項４に記載の情報処理装置。
【請求項７】
視聴者にコンテンツを提供する情報処理装置による情報処理方法において、
表示装置に表示された提示コンテンツに対する前記視聴者の視聴状態を示す情報を受信するステップと、
前記受信した視聴者の視聴状態を示す情報に基づいて、前記提示コンテンツのダイジェストを生成するステップと、
を含むことを特徴とする情報処理方法。
【請求項８】
視聴者にコンテンツを提供する処理をコンピュータに実行させるプログラムにおいて、
表示装置に表示された提示コンテンツに対する視聴者の視聴状態を示す情報を受信するステップと、
前記受信した視聴者の視聴状態を示す情報に基づいて、前記提示コンテンツのダイジェストを生成するステップと、
をコンピュータに実行させるためのプログラム。
【請求項９】
視聴者にコンテンツを提供する処理をコンピュータに実行させるプログラムが記録されている記録媒体において、  表示装置に表示された提示コンテンツに対する視聴者の視聴状態を示す情報を受信するステップと、
前記受信した視聴者の視聴状態を示す情報に基づいて、前記提示コンテンツのダイジェストを生成するステップと、
をコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、視聴者のコンテンツの視聴状況に応じて効率の良いコンテンツの提示を行うのに好適な情報処理装置、情報処理方法、プログラム並びにそのプログラムを記録した記録媒体に関する。
【背景技術】
【０００２】
従来、表示装置に提示したコンテンツを視聴者が見ているかどうかを判定し、判定の結果、コンテンツの見逃しがあった場合、録画を開始する、映像の表示を停止させる、表示装置の電源を切る、あるいは、映像を遡って再生するなど、その場で映像もしくは表示装置自体に対する処理を行っていた。つまり、従来のものは、リアルタイムでの問題解決手段である。
【０００３】
例えば、電話着信による中断や来客による中断等のように、視聴中の予期しない中断により見逃した番組を、中断時に溯って視聴できるようにした技術が開示されている（例えば、特許文献１参照。）。
【０００４】
また、視聴者が表示部を見ている否かに応じて、適切な再生制御を行う技術が開示されている（例えば、特許文献２参照。）。
【０００５】
また、番組の視聴を行うとき、継続して視聴することができない、例えば屋外での番組視聴を行う場合においても、視聴者が番組を見ているか否かを判断することで、番組の見逃しが発生することなく番組を試聴することを可能とする技術が開示されている（例えば、特許文献３参照。）。
【０００６】
しかし、実際には、見逃したという事実の中には、ユーザはそのコンテンツを見たかったが見ることができなかった場合、見る必要がなくて見なかった場合、または、見ることができなかったが結局見る必要がなかった場合など、さまざまな状況が存在する。
【特許文献１】特開２００５−２２３７７８号公報
【特許文献２】特開２００５−２７５０４６号公報
【特許文献３】特開２００６−０１３６４５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
ところで、視聴者がコンテンツを視聴する際、突発的な出来事によって視聴を中断せざるを得ない状況が存在する。例えば放送コンテンツを視聴中の場合であれば、ユーザは視聴を中断している間のコンテンツ内容を見逃してしまうことになる。記録装置に記録した映像やＤＶＤなどの記録媒体に記録された映像であれば一時停止によって再生を止めることもできるが、突発的な視聴中断であるとそれを実行できない場合が多い。一般的には、その際、もう一度同じコンテンツを見直せばよいのだが、見逃したコンテンツ内容を知らないため、本当に見直す必要があるのかどうかを視聴者が判断するのは難しい。つまり、見逃しの状況には「見逃したので見直したい場合」と「見逃してしまったが、見直す必要のない場合」、「故意に見ていなかったが、見直したくなった場合」、「故意に見ていなく、見直す必要がない場合」が考えられる。どの場合においても視聴者はその期間のコンテンツを見ていないため、見直す必要があるかどうかの判断は難しい。
【０００８】
本発明は、このような状況に鑑みてなされたものであり、見逃しがあった場合に、見逃した箇所を含むコンテンツ全体の効率的な再生を行うことを目的とする。
【課題を解決するための手段】
【０００９】
本発明の一側面の情報処理装置は、表示装置に表示された提示コンテンツに対する前記視聴者の視聴状態を示す情報を受信する受信部と、前記受信した視聴者の視聴状態を示す情報に基づいて、前記提示コンテンツのダイジェストを生成する提示処理部とを含むことを特徴とする。
【００１０】
本発明の一側面の情報処理方法およびプログラムは、視聴者にコンテンツを提供する情報処理装置による情報処理方法とそのプログラムであって、表示装置に表示された提示コンテンツに対する前記視聴者の視聴状態を示す情報を受信するステップと、前記受信した視聴者の視聴状態を示す情報に基づいて、前記提示コンテンツのダイジェストを生成するステップとを含むことを特徴とする。
【００１１】
本発明の一側面においては、提示した情報を視聴者が視聴しているかどうかを検出し、見逃しが発生した場合には、見逃しを考慮したダイジェストが作成される。
【発明の効果】
【００１２】
以上のように、本発明の一側面によれば、再視聴時のダイジェスト再生において、効率のよい再生を行うことができる。
【発明を実施するための最良の形態】
【００１３】
以下、本発明の実施の形態の例について、添付図面を参照しながら説明する。
【００１４】
以下に述べる実施の形態は、本発明を実施するための好適な形態の具体例であるから、技術的に好ましい種々の限定が付されている。ただし、本発明は、以下の実施の形態の説明において特に本発明を限定する旨の記載がない限り、これらの実施の形態に限られるものではない。したがって、例えば、以下の説明で挙げる使用材料とその使用量、処理時間、処理順序および各パラメータの数値的条件等は好適例に過ぎず、また、説明に用いた各図における寸法、形状および配置関係等も実施の形態の一例を示す概略的なものである。
【００１５】
図１は、本発明の第１の実施の形態に係る情報処理装置が適用される情報提示システムの概要を示すブロック図である。
【００１６】
図１において、本発明の情報処理装置の一例である情報処理装置１は、チューナ２、蓄積部３、コンテンツ解析部４、提示処理部７を含むように構成される。また、情報処理装置１は、センサ５および入力装置９から入力される信号を受信するとともに、表示装置８に提示するコンテンツすなわち情報を出力する。これらセンシング部５、表示装置８および入力装置２については、情報提示システムとしてこれらを備えていればよく、必ずしも情報処理装置１と一体に構成されていなくてもよい。
【００１７】
チューナ２は、複数のテレビジョン放送波（テレビジョン放送信号）の中から、アンテナ（図示せず）を介して、ユーザ（視聴者）等により要求されたテレビジョン放送波を受信し、テレビジョン放送番組（以下、単に「放送番組」ともいう。）を構成する映像信号と音声信号を分離してそれぞれ所定のフォーマットで復調する。復調した映像信号および音声信号を蓄積部３、コンテンツ解析部４または提示処理部７に供給する。なお、本実施の形態において、なお、放送は、テレビジョン放送に替えて衛星放送でもよい。また、これらの放送は、デジタル放送でもアナログ放送でもよい。また、放送番組等のコンテンツを受信できればよいので、モデムなどのインタフェース（通信部）を利用してストリーミングデータ形式のコンテンツをダウンロードするようにしてもよい。
【００１８】
蓄積部３は、チューナ２が受信したテレビジョン放送番組を、一旦記録して蓄積していく。チューナ２が２つ以上ある場合、蓄積部３は、チューナ２で受信したテレビジョン放送番組を記録、保存する。蓄積部３には、一例としてハードディスクドライブ（HDD：Hard Disk Drive）、ＤＶＤ（Digital Versatile Disc）および半導体メモリ等を適用することができる。この蓄積部３は、チューナ２の数に対応する台数分設けてもよい。あるいは、１台の蓄積部３を複数のパーティション（領域）に分割し、チューナ２が受信した複数のテレビジョン放送番組をそれぞれの領域に記録するようにしてもよい。
【００１９】
本発明では、見逃しがあった場合にコンテンツを再度見直すことが重要なポイントになるので、扱うコンテンツとしては、上述のようにテレビジョン放送番組やネットワーク（図示略）経由でダウンロードした映像コンテンツなどをハードディスクドライブに保存したもの、もしくはＤＶＤなどの記録媒体に保存されたものを想定する。唯一、リアルタイムの放送番組を見ながら同時に録画をしている場合のみ、もともと保存していないコンテンツでも適用することが可能である。
【００２０】
コンテンツ解析部４は、特許請求の範囲に記載した「コンテンツ解析部」の一例であり、チューナ２から入力されるテレビジョン放送波などのコンテンツ源より得られるコンテンツ（映像情報、音声情報等）を解析し、解析結果を提示処理部７へ出力する。同時に蓄積部３などの不揮発性の記録手段に保存する。本実施の形態においてコンテンツを解析するとは、入力されたコンテンツの時間変化を伴う特徴（またはその時点での特徴）を検出することである。
【００２１】
コンテンツの解析手法には、いわゆる音声信号の強弱による盛り上がりを検出する方法、または、映像の切り替わりを周知のシーンチェンジ検出手法を用いて検出し、そのシーンチェンジした時刻およびその後の一定区間を含む区間を、重要な区間とする方法、あるいは、音量が大きく、かつ、映像フレームのアクティビティ量が多い瞬間を盛り上がり部分と判定するなどの方法がある。
【００２２】
センサ５は、視聴者または視聴環境を検知し、視聴者の視聴状態を示す検知データとして受信部６へ出力する検出部である。センサ５を用いて視聴者の動きなどを直接検知したり、視聴者の視聴環境を検知したりすることにより、視聴者の視聴状態を判定することができる。
【００２３】
受信部６は、特許請求の範囲に記載した「受信部」の一例であり、センサ５から出力される検知データを受信し、必要に応じて所定の処理を行い提示処理部７へ送信するインタフェースとして機能する。例えば、センサ５から出力される検知データがアナログ信号である場合、検知データをアナログ−デジタル変換処理した後に提示処理部７へ送る。
【００２４】
このセンサ５を用いた視聴状態検知においては、視聴者がコンテンツを提示している画面を見ているか否か、もしくは、画面を見ることができる状態にあるか否かを検知することができればよい。その方法に関しては、例えば図２〜図６に示すようにさまざまなパターンが考えられる。
【００２５】
図２は、カメラを用いて視聴者の顔の向き、もしくは、視線を検出する場合の例を示した図である。
図２に示すように、表示装置８に、センサ５としてカメラ１１（スチルカメラまたはビデオカメラ）を設置し、このカメラ１１から得られる画像に基づいて視聴者１０の顔の向き、もしくは、視線を検出する。
【００２６】
図３は、外部機器を利用して視聴者の顔の向き、もしくは、頭の位置を検出する場合の例を示した図である。
図３に示すように、表示装置８に表示されたコンテンツを視聴している視聴者１０の頭に、加速度センサを内蔵したヘッドホン１２をセンサ５として装着する。このヘッドホン１２から得られる加速度データに基づいて視聴者１０の顔の向き（動き）、もしくは、頭の位置を検出する。
【００２７】
図４は、回転式の椅子などを利用して視聴者の向きを検出する場合の例を示した図である。
図４に示すように、表示装置８に表示されたコンテンツを視聴している視聴者１０が座る椅子１３の下に、センサ５としてロータリエンコーダ１４を設置する。ロータリエンコーダ１４は、計測対象の機械的な回転変位（アナログ量）を電気的なパルス（デジタル量）に変換する代表的な検出器であり、これにより対象装置ひいてはユーザ１０の回転量、回転角度、回転位置等を計測することができる。
【００２８】
図５は、入力装置などを用いて視聴者が視聴状態を直接指示する場合の例を示した図である。
図５に示すように、表示装置８に表示されたコンテンツを視聴している視聴者１０が、リモートコントローラ等の入力装置１５を操作して表示装置８に自身の視聴状態を直接入力（申告）する。入力装置１５をセンサ５の代わりとして利用することにより、視聴者１０の向いている方向を検知する。
【００２９】
図６は、固定された家具等を使用することによって視聴者の見逃しを検知する場合の例を示した図であり、（ａ）は視聴者が椅子から立った状態、（ｂ）は視聴者が椅子に座っている状態を表している。
図６に示すように、椅子１３などの固定された家具から受ける圧力を検知する圧力センサ１６を設け、センサ５として利用する。この圧力センサ１６で検知した圧力に基づいて、視聴者１０が椅子１３から立った状態（図６（ａ）参照）、および、視聴者１０が椅子１３に座っている状態（図６（ｂ）参照）を検知し、視聴者の視聴状態を判定する。
【００３０】
図１の説明に戻る。提示処理部７は、特許請求の範囲に記載した「提示処理部」、「見逃し情報生成部」の一例であり、ＭＰＵ（Microprocessor）等のプロセッサ（制御部）から構成される。提示処理部７は、チューナ２または蓄積部３からのコンテンツ入力信号、コンテンツ解析部４からのコンテンツ解析データ、受信部６を介したセンサ５からの検知データ、入力装置９からの入力信号が入力される。提示処理部７は、入力されたこれらの信号およびデータに基づいて、視聴者の視聴状態すなわち提示したコンテンツを視聴者が視聴しているか否か（見逃しの有無）を判定し、判定結果に応じて各ブロックに指令を送り、各ブロックの動作を制御する。
【００３１】
また、提示処理部７は、チューナ２から入力された、または、蓄積部４に記録されたコンテンツをデコードして映像信号と音声信号に分離することができる。提示処理部７は、ユーザの要求に応じて、コンテンツに含まれる映像信号を、後述する表示装置８に出力するよう制御する。以降において、映像信号を単に「映像」ということもある。また、提示処理部７は、ユーザの要求に応じて、放送番組等のコンテンツに含まれる音声信号を、後述する表示装置８などに設けられたスピーカ（図示せず）に出力する。以降において、音声信号を単に「音声」ということもある。
【００３２】
なお、提示処理部７が内部クロック（内部時計）、もしくは、情報処理装置１が図示しない時計部を備え、目的に応じて任意の事象および処理に係る時間を計測することができるように構成されている。
【００３３】
ここで、提示処理部７についてさらに詳細に説明する。
図７は、提示処理部７の内部構成の一例を示すブロック図である。提示処理部７は、見逃し情報生成部７Ａ、ダイジェスト作成部７Ｂ、再生処理部７Ｃ、ＯＳＤ（オンスクリーンディスプレイ）信号生成部７Ｄ、映像信号合成部７Ｅを含むように構成される。
【００３４】
見逃し情報生成部７Ａは、特許請求の範囲に記載した「見逃し情報生成部」の一例であり、受信部６がセンサ５から受信した視聴者の視聴状態を示す情報（検知データ）に基づいて、表示装置８に提示されたコンテンツを視聴者が見逃した箇所に関する情報を含む見逃し情報を生成する。
【００３５】
ダイジェスト作成部７Ｂは、コンテンツ解析部４から入力されるコンテンツ解析データ、見逃し情報生成部７Ａで生成された見逃し情報、または、ユーザにより入力されるパラメータに基づいて、入力されたコンテンツ（映像）の最適なダイジェスト映像を作成する。そして、作成したダイジェスト映像を再生処理部７Ｃへ出力する。ダイジェストの作成手段としては、例えば早送り、情報間引き、盛り上がり部分のみ抽出するなどがある。なお、ユーザによるコンテンツの見逃しが発生していない場合やダイジェストを作成しない指示を受けた場合には、ダイジェストは作成されない。
【００３６】
再生処理部７Ｃは、ダイジェスト作成部７Ｂで作成されたダイジェスト映像に必要な映像の早回しなどの再生処理を行う。そして、所定の再生処理を施したダイジェスト映像を映像信号合成部７Ｅに出力する。
【００３７】
ＯＳＤ信号生成部７Ｄは、設定画面等のグラフィカルユーザインタフェースなど、コンテンツ（映像信号）に重畳する映像信号を生成する。そして、生成した映像信号を映像信号合成部７Ｅに出力する。同様に、ＯＳＤ信号生成部７Ｄは、見逃し情報生成部７Ａで生成された見逃し情報の映像信号を生成し、映像信号合成部７Ｅに出力する。
【００３８】
映像信号合成部７Ｅは、再生処理部７ＣおよびＯＳＤ信号生成部から入力された各映像信号を合成し、合成した映像信号を最終的に視聴者へ提示するための映像信号（提示コンテンツ）として表示装置８へ出力する。
【００３９】
図７に示した例では、映像信号について説明したが、その映像信号の内容に対応する音声信号についても、ダイジェスト作成部７Ｂ、再生処理部７Ｃで加工され、視聴者へ提示する映像信号と同期して表示装置８に付属のまたは任意のスピーカ（図示略）へ出力される。なお、音声信号は映像信号に対応してダイジェストが作成されると説明したがこの例に限られるものではなく、例えば、ダイジェスト作成部７Ｂが、コンテンツに含まれる音声信号のみのダイジェストを作成するようにしてもよい。
【００４０】
さらに、図７に示した例では、提示処理部７の内部に、見逃し情報生成部７Ａ、ダイジェスト作成部７Ｂ、再生処理部７Ｃ、ＯＳＤ信号生成部７Ｄ、映像信号合成部７Ｅが含まれる場合について説明したが、この例に限られるものではない。例えば、これらの各ブロックは、それぞれ独立して設けられるようにしてもよく、見逃し情報生成部７Ａだけを提示処理部７の外部に設けるなどのように、種々の形態が考えられる。
【００４１】
図１の説明に戻る。表示装置８は、提示処理部７から入力される映像信号を表示画面に表示する。また、提示処理部７から入力される音声信号を付属のスピーカから出力（放音）する。この表示装置８には、例えば例えばＬＣＤ（Liquid Crystal Display）、有機ＥＬ（Electro Luminescence）ディスプレイ、プラズマディスプレイ、ＦＥＤ（Field Emission Display）、ＣＲＴ（Cathode Ray Tube）等を適用できる。なお、表示装置８は、複数の表示装置からなる表示システム、いわゆるマルチディスプレイでもよい。また、本実施の形態の例では、表示装置８の表示画面の近傍に図示しないスピーカが配置されているものとしているが、スピーカは表示装置８と別体でもよいことは勿論である。
【００４２】
入力装置９は、例えばリモートコントローラから構成され、ユーザ操作に応じて、任意の処理のためのパラメータやユーザの判断結果などを、図示しない受信部を介して、提示処理部７へ送信する。例えば、入力装置９からチャンネル選択信号を送信した場合、提示処理部７はチューナ２に対し、当該入力装置９から受信したチャンネル選択信号に基づいて、ユーザが選択したチャンネルのテレビジョン放送波を受信するよう制御し、そのテレビジョン放送波の放送番組を表示装置８に表示する。
【００４３】
なお、入力装置９を利用して送信する情報は、視聴者の判断結果や設定パラメータの数値入力を想定しており、視聴者の視聴状態を入力するために用いられる入力装置１５（図５参照）と区別したが、入力装置９と入力装置１５を同一のものとしてもよい。また、入力装置９は、情報処理装置１の筐体の所定位置に設けられた操作キー等の入力手段であってもよい。
【００４４】
次に、図８のフローチャートを参照して、提示処理部７による見逃し検出処理を説明する。
【００４５】
まず、視聴者が、入力装置９を操作して、チューナ２により受信したコンテンツまたは蓄積部３から読み出したコンテンツの視聴を開始することにより、見逃し検出処理を開始する。
【００４６】
ステップＳ１において、提示処理部７は、ユーザによるコンテンツの視聴が開始されたこと、すなわち表示装置８にコンテンツの提示を開始すると同時に視聴時間の計測を開始する。
【００４７】
ステップＳ２において、コンテンツ解析部４は、入力されたコンテンツの内容を解析する。
【００４８】
ステップＳ３において、提示処理部７は、表示装置８に提示したコンテンツを視聴者が見ているか否かを判定する。この判定は、センサ５から受信部６を介して入力された視聴状態の検知データまたは入力装置１５から直接入力された情報に基づいて行われる。そして、ユーザがコンテンツを視聴していると判定された場合はステップＳ８へ移行し、コンテンツの見逃しが発生していると判定された場合は、ステップＳ５へ移行する。また、このステップＳ３の処理と並行してステップＳ４の処理が行われる。
【００４９】
ステップＳ４において、コンテンツ解析部４は、コンテンツ解析の結果をタイムコードとともにコンテンツ解析データとして提示処理部７に出力する。また、コンテンツ解析データを蓄積部３へ保存する。この処理が終了後、ステップＳ５へ移行する。
【００５０】
ステップＳ５において、提示処理部７の見逃し情報生成部７Ａは、視聴者によるコンテンツの見逃しを検出した場合、コンテンツ解析データに基づいて見逃し評価を行う。この見逃し評価とは、見逃しが起きたタイムコードのデータを取得し、同じ時間軸において、コンテンツ解析結果と見逃し区間を示すデータを作成する処理をいう。この処理が終了後、ステップＳ６へ移行する。
【００５１】
ステップＳ６において、提示処理部７は、ステップＳ５で作成した見逃し時間データおよび見逃し評価データを蓄積部３に保存するとともに、見逃し時間データおよび／または見逃し評価データを表示装置８に出力する。この処理が終了後、ステップＳ７へ移行する。
【００５２】
ステップＳ７において、表示装置８は、提示処理部７から見逃し時間データおよび／または見逃し評価データを受信し、コンテンツ解析結果と視聴者が見ていなかった（見逃した）箇所に関する情報をともに表示する。なお、これに限らず、見逃し時間のみを表示するようにしてもよい。この処理が終了後、ステップＳ８の判定処理へ移行する。
【００５３】
ここで、提示処理部７のＯＳＤ信号生成部７Ｄで生成される映像信号に基づく表示例を、図９〜図１１に示す。
【００５４】
図９は、見逃し情報として見逃し時間のみを表示した例を示すものである。
この例では、見逃し時間として、あるコンテンツについて、ユーザが見逃した時間を積算した合計時間２１を数値で表示している。この合計時間２１の表示は、コンテンツが表示されている画面の任意の位置、または、下記の図１０および図１１に示す画面の任意の位置に表示するようにしてもよい。
【００５５】
このように見逃し時間（積算時間）を表示することにより、ユーザは一つのコンテンツの見逃し時間を容易に知ることができる。それにより、コンテンツの視聴時間に対する見逃した時間の割合に基づいて、コンテンツを見直すかどうか判断することができる。
【００５６】
図１０は、見逃し情報として所定時間前までのコンテンツ解析結果と見逃しが発生した時間の表示例を示すものであり、（ａ）はある時刻における表示例、（ｂ）は（ａ）に示した時刻から所定時間経過後の表示例である。また図１０（ａ），（ｂ）において、横軸は時間、縦軸はコンテンツの盛り上がり度を示している。
この例では、画面２２内に、あるコンテンツの見逃し時間（見逃し区間２４）とコンテンツ情報（盛り上がり度曲線２３、ＣＭ（commercial message）区間２５）をリアルタイムに表示している。盛り上がり度曲線は、その形状によってコンテンツの盛り上がり具合すなわちコンテンツの内容を表している。
【００５７】
この画面２２内の表示内容は時間とともに遷移する。例えばある時刻において、図１０（ａ）に示すように見逃し区間２４とＣＭ区間２５が表示されているが、時間経過とともに全体的に右方向に遷移し、ある時間経過後の時刻においては、図１０（ｂ）に示すように見逃し区間２４が右方向へ移動し、ＣＭ区間２５の表示領域はほとんど消える。なお、ＣＭとは番組の間に放送される広告放送である。
【００５８】
このように、例えば見逃し区間２４、盛り上がり度曲線２３およびＣＭ区間２５を表示するなどして、見逃し時間とコンテンツ情報を同一画面内に表示することにより、コンテンツの内容を容易に把握できるとともに、見逃した箇所や時間帯がコンテンツの中でどのような位置づけかを容易に視認できる。
【００５９】
図８のフローチャートの説明に戻る。
ステップＳ８において、提示処理部７は、提示すべきコンテンツが終了もしくは見逃し検出処理を終了するか否かどうかどうかを判定する。この判定処理でいずれも終了していないと判定された場合、ステップＳ２に戻ってコンテンツ解析を行い、一連の処理を継続する。一方、コンテンツが終了もしくは見逃し検出処理が終了したと判定された場合、ステップＳ９の処理に移行する。
【００６０】
ステップＳ９において、提示処理部７の見逃し情報生成部７Ａは、コンテンツが終了もしくは見逃し検出処理を終了すると判定された場合、トータル見逃し評価を行う。すなわち、あるコンテンツ全体について、その内容の解析結果と見逃し区間を評価したトータル見逃し評価データを作成する。この処理が終了後、ステップＳ１０に移行する。
【００６１】
ステップＳ１０において、最適表示処理部６は、トータル見逃し評価データを蓄積部３に保存するとともに、トータル見逃し評価データを表示装置８に出力する。この処理が終了後、ステップＳ１１へ移行する。
【００６２】
ステップＳ１１において、表示装置８は、提示処理部７からトータル見逃し評価データを受信し、コンテンツ全体の解析結果と視聴者が見ていなかった（見逃した）箇所に関する情報をともに表示する。この処理が終了後、一連の見逃し検出処理を終了する。
【００６３】
図１１は、コンテンツを視聴した全区間におけるコンテンツ解析結果と見逃しが発生した区間、および、代表画像の表示例を示したものである。
この例では、画面３１内に、あるコンテンツの情報（コンテンツ内容表示領域３２、ＣＭ表示領域３３）と、コンテンツの内容を表す静止画（代表画像表示領域３４）を表示するようにしている。
【００６４】
コンテンツ内容表示領域３２には、例えば盛り上がり度曲線３５を表示することで、コンテンツの内容を表している。ＣＭ表示領域３３には、例えばＣＭ区間３７−１，３７−２が表示され、ＣＭの放送時刻や時間等を読み取れる。また、代表画像表示領域３４には、例えばコンテンツから数分間隔で、または、チャプターの先頭で、あるいは盛り上がる毎に切り出した静止画３８Ａ〜３８Ｉを表示することにより、コンテンツ全体の概要および流れが理解できるようになっている。そして、コンテンツ内容表示領域３２およびＣＭ表示領域３３に重畳して、見逃し区間３６−１，３６−２を表示するようにしている。
【００６５】
このように、例えばコンテンツを視聴した全区間におけるコンテンツ解析結果と見逃しが発生した区間、および、代表画像を表示装置８の画面に表示することにより、コンテンツの内容を容易に把握できるとともに、見逃した箇所や時間帯がコンテンツ（の内容）の中でどのような位置づけかを容易に視認できる。視聴者はこのような画面に表示された情報を、見逃した箇所の重要度の判断の材料とすることができる。
【００６６】
なお、一例として図９〜図１１に示した表示形態については、視聴者がリモートコントローラなどの入力装置９を用いて変更することができるようにする。また、コンテンツの解析結果のグラフ（例えば、盛り上がり度曲線）、静止画などの提示する内容の組合せはこれに限られるものではなく、視聴者が選択可能な形態にする。また、上述例では、コンテンツの盛り上がり度を検出してコンテンツの内容を表しているが、コンテンツに関する他の情報によってコンテンツの内容を表すようにしてもよいことは勿論である。
【００６７】
次に、図１２〜図１４を参照して、提示処理部７による見逃しを考慮したダイジェスト再生を説明する。
【００６８】
図１２は、提示処理部７によるダイジェスト再生処理を示すフローチャートである。
本発明では、ダイジェスト再生を行う際、選択されたコンテンツを視聴者が以前に視聴済みである場合に、そのコンテンツについて見逃しを考慮した再生を選択できるようにしたものである。見逃しを考慮した再生とは、以前コンテンツを視聴した際に検知された見逃し区間を重点的に視聴し、それ以外はダイジェスト再生することを指している。見逃しを考慮しないことを選択された場合は一般的なダイジェスト再生を行う。
【００６９】
ステップＳ２１において、提示処理部７は、入力装置９からの入力信号に基づいて、ダイジェスト視聴が選択されたか否かを判定する。ダイジェスト視聴が選択されたと判定された場合は、ステップＳ２２の処理に移行する。一方、ダイジェスト視聴が選択されなかったと判定された場合は、ステップＳ３２の処理に移行し、通常のコンテンツの再生および表示を行う。
【００７０】
ステップＳ２２において、提示処理部７は、選択されたダイジェスト再生が見逃しを考慮したダイジェスト再生であるか否かを判定する。見逃しを考慮したダイジェスト再生でないと判定された場合は、ステップＳ２７に移行し、通常のダイジェスト再生を行う。一方、見逃しを考慮したダイジェスト再生であると判定された場合は、ステップＳ２３に移行する。
【００７１】
ステップＳ２３において、提示処理部７は、コンテンツ解析データを蓄積部３から読み込む。
【００７２】
また、ステップＳ２４において、以前に視聴者が当該コンテンツを視聴したときのトータル見逃し評価データ（タイムコードおよびその際の全体のコンテンツ情報）を、蓄積部３から読み込む。ステップＳ２３，Ｓ２４の処理が終了後、ステップＳ２５の処理に移行する。
【００７３】
ステップＳ２５において、提示処理部７は、入力装置９からの入力信号に基づいて、ダイジェスト密度を設定する。つまり、表示装置８に例えば再生メニュー画面を表示して、ユーザに対し、入力装置９を用いてダイジェスト再生の密度を入力するよう促し、入力信号によってダイジェスト再生の密度を設定する。この処理が終了後、ステップＳ２６に移行する。
【００７４】
ここで、本発明におけるダイジェスト再生の密度とは、ダイジェストを作成するためのパラメータのことであり、言い換えるとダイジェスト再生の方法またはダイジェストの再生態様を指す。このパラメータは、例えばコンテンツの再生時間の圧縮比率であったり、ＣＭ除去の有無であったり、ユーザ指定箇所の再生の指示であったりする。あるいは、ユーザ操作によりコンテンツの圧縮率（例えば、再生時間３０分→５分に短縮、再生時間を何％短縮など）を入力してもらい、入力された圧縮率によってダイジェストの再生態様を決定するようにしてもよい。
【００７５】
ステップＳ２６において、提示処理部７のダイジェスト作成部７Ｂは、トータル見逃し評価データおよび設定したダイジェスト再生の密度に基づいて、選択されたコンテンツのダイジェストを作成する。作成されたダイジェストは、再生処理部６Ｃを介して映像信号合成部７Ｅへ入力され、映像信号合成部７Ｅから表示装置８へ供給される。
【００７６】
なお、ユーザが入力装置９を利用してダイジェスト再生の密度を入力するのを待つ代わりに、予め自動的にダイジェスト密度を設定しておいてもよい。例えば、見逃しを考慮したダイジェスト再生が選択された際、ダイジェスト作成部７Ｂは、予め設定されたダイジェスト再生の密度に基づいてダイジェストを作成する。
【００７７】
そして、ステップＳ３２において、表示装置８は、提示処理部７から提示すべきコンテンツの映像信号を受信し、表示画面に表示する。この処理が終了後、このダイジェスト再生においてさらに視聴者の見逃し検出を行う。このようにダイジェスト再生においても見逃し検出を行うようにした場合、ダイジェスト再生における見逃しを考慮したさらなるダイジェスト再生が行え、多忙な視聴にとっては重宝する機能である。この処理が終了後、一連のダイジェスト再生の処理を終了する。なお、このステップＳ３３の見逃し検出処理は必須ではなく省略してもよい。
【００７８】
一方、ステップＳ２７において、選択されたコンテンツを以前にコンテンツ解析部４が解析したことがあるか否かを判定する。以前にコンテンツを解析済みであると判定された場合、ステップＳ２８に移行する。
【００７９】
ステップＳ２８において、提示処理部７は、以前に解析したコンテンツ解析データを、蓄積部３から読み込む。この処理が終了後、ステップＳ３０に移行する。
【００８０】
一方、ステップＳ２９では、ステップＳ２７において以前にコンテンツを解析済みでないと判定された場合、コンテンツ解析部４は選択されたコンテンツを解析する。解析したコンテンツ解析データは、蓄積部３に保存される。この処理が終了後、ステップＳ３０に移行する。
【００８１】
ステップＳ３０において、提示処理部７は、入力装置９からの入力信号に基づいて、ダイジェスト密度を設定する。つまり、表示装置８に例えば再生メニュー画面を表示して、ユーザに対し、入力装置９を用いてダイジェスト再生の密度を入力するよう促し、入力信号によってダイジェスト再生の密度を設定する。この処理が終了後、ステップＳ３１に移行する。
【００８２】
ステップＳ３１において、提示処理部７のダイジェスト作成部７Ｂは、コンテンツ解析データおよび設定したダイジェスト再生の密度に基づいて、選択されたコンテンツのダイジェストを作成する。作成されたダイジェストは、再生処理部７Ｃを介して映像信号合成部７Ｅへ入力され、映像信号合成部７Ｅから表示装置８へ供給される。この処理が終了後、ステップＳ３２へ移行し、選択されたコンテンツのダイジェストを表示装置８の表示画面に表示する。
【００８３】
次に、ダイジェスト作成部７Ｂで作成されるコンテンツのダイジェストについて、２つの例を説明する。
【００８４】
図１３は、本発明の第１の実施の形態に係るダイジェストの例を示す図である。
この第１の実施の形態に係るダイジェストは、コンテンツの見逃しが発生した区間はそのまま再生し、その他の区間でダイジェスト再生を行うという、最も簡単な方法で作成されたものである。
【００８５】
図１３において、ダイジェスト処理前のトータル見逃し評価データは、盛り上がり度曲線４３を含むコンテンツ内容表示領域４１と、ＣＭ表示領域４２を備えている。コンテンツには、２つの見逃し区間４４−１，４４−２があり、コンテンツ全体が３つの見逃しのない区間４５−１〜４５−３に分割されている。また、このコンテンツには、ＣＭ区間４６−１，４６−２があり、そのうちの一つのＣＭ区間４６−１は見逃し区間４４−１の範囲にある。
【００８６】
このようなコンテンツ情報および見逃し区間を含むコンテンツをダイジェスト処理することにより、図１３の下図に示すようになる。この例では、見逃し区間４４−１，４４−２はそのままに、見逃しのない区間４５−１〜４５−３を圧縮し、ダイジェスト区間４５Ａ−１，４５Ａ−２，４５Ａ−３−１，４５Ａ−３−２としている。ダイジェスト区間４５Ａ−３−２は、もともとＣＭ区間４６−２である。ＣＭ区間を圧縮してダイジェスト区間とすることにより、さらに効率のよい再生が可能になる。
【００８７】
図１４は、本発明の第２の実施の形態に係るダイジェストの例を示す図である。
この第２の実施の形態に係るダイジェストは、コンテンツ解析によって一般的な録画装置にも搭載されているチャプター機能を利用するものである。コンテンツ解析によってチャプターに分割されたコンテンツのうち、見逃しが起こった区間のチャプターはそのまま再生を行い、その他のチャプターでダイジェスト再生を行う。
【００８８】
図１４において、ダイジェスト処理前のトータル見逃し評価データは、盛り上がり度曲線５３を含むコンテンツ内容表示領域５１と、ＣＭ表示領域５２を備えている。コンテンツには、２つの見逃し区間５４−１，５４−２があり、コンテンツ全体が３つの見逃しのない区間に分割されている。また、このコンテンツには、ＣＭ区間５５−１，５５−２があり、これらのＣＭ区間の前後に、６つのチャプターに分割された区間５６−１〜５６−６がある。
【００８９】
このようなコンテンツ情報および見逃し区間を含むコンテンツをダイジェスト処理することにより、図１４の下図に示すようになる。この例では、見逃し区間５４−１，５４−２を一部含むチャプターの区間５６−２，５６−３，５６−５をそのままに再生する。ただし、ＣＭ区間５５−２については圧縮してダイジェスト区間とすることがより好ましい。また、見逃しのない区間５６−１，５６−４，５６−６を圧縮し、ダイジェスト区間５６Ａ−１，５６Ａ−４，５６Ａ−６とする。
【００９０】
上述したダイジェスト作成やチャプター付加などは公知技術を用いて実現できる。例えば、特開２００６−５４６２２号公報には、チャプターをつけてそれに応じてダイジェストを決定していく技術が開示されている。また、特開２００４−１９１７８０号公報には、イベント等における音響信号から盛り上がり部分を高精度に検出し、その盛り上がり部分にインデックスを付加する技術が開示されている。また、特開２００５−３２８３２９号公報には、シーンの重要度に順位をつけ、それに応じてダイジェストを決定していく技術が開示されている。
【００９１】
以上説明したように、本発明によれば、一段階目において、視聴者に対して提示したコンテンツを見直す必要があるかどうかの判断材料として、見逃し時間やコンテンツ情報（図９〜図１１）などを提示する。そして、見直す必要があると判断された場合に、二段階目としてダイジェスト再生を行い効率的な提示（図１３、図１４参照）を行うようにしている。
【００９２】
このように構成したことにより、視聴者がコンテンツ視聴時に見逃しをしてしまった際に、いつどの時間（区間）に見逃したのかを容易に知ることができる。
【００９３】
また、視聴者がコンテンツ視聴時に見逃しをしてしまった際に、どのような内容を見逃してしまったのかを容易に知ることができる。
【００９４】
さらに、視聴者に対し、再生されたコンテンツにおける見逃した区間の積算時間や重要度を示すことで、もう一度見直した方がよいかを判断するための材料を提供できる。
【００９５】
また、再視聴時のダイジェスト再生において、見逃した区間をダイジェスト作成に活用することによって、ダイジェスト再生をしながらも見逃した区間はしっかり見直すことができる効率の良い再視聴が可能になる。つまり、一度目の視聴の際に得た見逃し情報とコンテンツ解析情報を一度目の再生時には見直しの判断材料として利用し、二度目の再生時には効率的なダイジェスト映像の作成に利用する。
【００９６】
例えば、断片的ではあっても一度視聴をしたコンテンツ全体をもう一度視聴するのは大変効率が悪い。また、見逃し期間の検出によってコンテンツの見逃した期間を検出したとしても、コンテンツの見逃した期間のみを見てもストーリー（話の筋）やコンテンツの流れの前後関係がわからなければ再度見たところで意味が通じない可能性が高い。そこで、以前視聴した際のコンテンツ解析結果を用いて見逃していない期間のコンテンツはダイジェスト再生しつつ、見逃した期間を集中的に再生する処理をすることで、効率的な再生が実現する。
【００９７】
なお、上述した情報処理装置で行われる一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。また、これらの処理を実行する機能はハードウェアとソフトウェアの組み合わせによっても実現できることは言うまでもない。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで各種の機能を実行することが可能な、例えば汎用のコンピュータなどに、プログラム記録媒体からインストールされる。
【００９８】
図１５は、上述した一連の処理をプログラムにより実行するコンピュータの構成例を示すブロック図である。このコンピュータ１０１は、例えば一連の処理を実行するために高性能化した専用コンピュータの他、一定の性能を備えるパーソナルコンピュータなどでもよい。
【００９９】
コンピュータ３０１のＣＰＵ（Central Processing Unit）１１１は、ＲＯＭ（Read Only Memory）１１２、または記録部１１８に記録されているプログラムに従って、上記一連の処理の他、各種の処理を実行する。ＲＡＭ（Random Access Memory）１１３には、ＣＰＵ１１１が実行するプログラムやデータなどが適宜記憶される。これらのＣＰＵ１１１、ＲＯＭ１１２、およびＲＡＭ１１３は、バス１１４により相互に接続されている。
【０１００】
ＣＰＵ１１１にはまた、バス１１４を介して入出力インタフェース１１５が接続されている。入出力インタフェース１１５には、キーボード、マウス、マイクロホンなどよりなる入力部１１６、ディスプレイ、スピーカなどよりなる出力部１１７が接続されている。ＣＰＵ１１１は、入力部１１６から入力される指令に対応して各種の処理を実行する。そして、ＣＰＵ１１１は、処理の結果を出力部１１７に出力する。
【０１０１】
入出力インタフェース１１５に接続されている記録部１１８は、例えばハードディスクからなり、ＣＰＵ１１１が実行するプログラムや各種のデータを記録する。
【０１０２】
通信部１１９は、インターネットやローカルエリアネットワークなどのネットワークを介して外部の装置と通信する。また通信部１１９を介してプログラムを取得し、記録部１１８に記録してもよい。
【０１０３】
入出力インタフェース１１５に接続されているドライブ１２０は、磁気ディスク、光ディスク、光磁気ディスク、あるいは半導体メモリなどのリムーバブルメディア１３１が装着されたとき、それらを駆動し、そこに記録されているプログラムやデータなどを取得する。取得されたプログラムやデータは、必要に応じて記録部１１８に転送され、記録される。
【０１０４】
コンピュータにインストールされ、コンピュータによって実行可能な状態とされるプログラムを格納するプログラム記録媒体は、図１５に示すように、リムーバブルメディア１３１によりパッケージメディアとして提供される。リムーバブルメディア１３１としては、磁気ディスク（フレキシブルディスクを含む）、光ディスク（ＣＤ−ＲＯＭ（Compact Disc - Read Only Memory），ＤＶＤ（Digital Versatile Disc），光磁気ディスクを含む）、もしくは半導体メモリなどを適用することができる。あるいは、プログラム記録媒体は、プログラムが一時的もしくは永続的に格納（記録）されるＲＯＭ１１２や、記録部３１８を構成するハードディスクなどにより構成される。
【０１０５】
このプログラム記録媒体へのプログラムの格納は、必要に応じてルータ、モデムなどのインタフェースである通信部１１９を介して、ローカルエリアネットワーク(LAN：Local Area Network)、インターネット、デジタル衛星放送といった、有線または無線の通信媒体を利用して行われる。
【０１０６】
なお、本明細書において、プログラム記録媒体に格納されるプログラムを記述する処理ステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理（例えば、並列処理あるいはオブジェクトによる処理）をも含むものである。
【０１０７】
また、プログラムは、一つのコンピュータにより処理されるものであってもよいし、複数のコンピュータによって分散処理されるものであってもよい。さらに、プログラムは、遠方のコンピュータに転送されて実行されるものであってもよい。
【０１０８】
さらに、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
【図面の簡単な説明】
【０１０９】
【図１】本発明の第１の実施の形態に係るシステムの概要を示す構成図である。
【図２】カメラを用いて視聴者の顔の向き、もしくは、視線を検出する場合の説明図である。
【図３】外部機器を利用して視聴者の顔の向き、もしくは、頭の位置を検出する場合の説明図である。
【図４】椅子などを利用して視聴者の向きを検出する場合の説明図である。
【図５】入力装置などを用いて視聴者が視聴状態を直接指示する場合の説明図である。
【図６】固定された家具等を使用することによって視聴者の見逃しを検知する場合の説明図である。
【図７】本発明の第１の実施の形態に係る提示処理部の内部構成の例を示すブロック図である。
【図８】本発明の第１の実施の形態に係る見逃し検出処理のフローチャートである。
【図９】本発明の第１の実施の形態に係る見逃しが発生した時間の表示例を示した図である。
【図１０】本発明の第１の実施の形態に係る所定時間前までのコンテンツ解析結果と見逃しが発生した時間の表示例を示した図である。
【図１１】本発明の第１の実施の形態に係るコンテンツを視聴した全区間におけるコンテンツ解析結果と見逃しが発生した区間、および、代表画像の表示例を示した図である。
【図１２】本発明の第１の実施の形態に係るダイジェスト再生処理のフローチャートである。
【図１３】本発明の第１の実施の形態に係るダイジェスト作成例を示す図である。
【図１４】本発明の第２の実施の形態に係るダイジェスト作成例を示す図である。
【図１５】パーソナルコンピュータの構成の例を示すブロック図である。
【符号の説明】
【０１１０】
１…情報処理装置、２…チューナ、３…蓄積部、４…コンテンツ解析部、５…センサ、６…受信部、７…提示処理部、７Ａ…見逃し情報生成部、７Ｂ…ダイジェスト作成部、７Ｃ…再生処理部、７Ｄ…ＯＳＤ信号生成部、７Ｅ…映像信号合成部、８…表示装置、９…入力装置、１０…視聴者（ユーザ）、１１…カメラ、１２…ヘッドホン、１３…椅子、１４…回転検出部、１５…遠隔操作装置、１６…圧力検出部、２１…（見逃しの）合計時間、２３…盛り上がり度曲線、２４…見逃し区間、２５…ＣＭ区間、３２…コンテンツ内容表示領域、３３…ＣＭ表示領域、３４…代表画像表示領域、３５…盛り上がり度曲線、３６−１，３６−２…見逃し区間、３７−１，３７−２…ＣＭ区間、３８Ａ〜３８Ｉ…静止画、４１…コンテンツ内容表示領域、４２…ＣＭ表示領域、４３…盛り上がり度曲線、４４−１，４４−２…見逃し区間、４６−１，４６−２…ＣＭ区間、４５Ａ−１，４５Ａ−２，４５Ａ−３−１，４５Ａ−３−２…ダイジェスト区間、５１…コンテンツ内容表示領域、５２…ＣＭ表示領域、５３…盛り上がり度曲線、５４−１，５４−２…見逃し区間、５５−１，５５−２…ＣＭ区間、５６−１〜５６−６…チャプターの区間、５６Ａ−１，５６Ａ−４，５６Ａ−６…ダイジェスト区間
【図１】
2009188670.tif 000003
【図２】
2009188670.tif 000004
【図３】
2009188670.tif 000005
【図４】
2009188670.tif 000006
【図５】
2009188670.tif 000007
【図６】
2009188670.tif 000008
【図７】
2009188670.tif 000009
【図８】
2009188670.tif 000010
【図９】
2009188670.tif 000011
【図１０】
2009188670.tif 000012
【図１１】
2009188670.tif 000013
【図１２】
2009188670.tif 000014
【図１３】
2009188670.tif 000015
【図１４】
2009188670.tif 000016
【図１５】
2009188670.tif 000017