(57)【要約】  【課題】  助手席や後部座席に設けられる表示装置において、視聴者の再生中のコンテンツに対する関心度が低下したことを検出して、他のコンテンツの再生などを薦めるコンテンツ一覧メニューを視聴者の状態に応じて表示する。  【解決手段】  視線検出部１０３は、カメラ１０１が撮影した視聴者の顔画像を画像処理し、視聴者がディスプレイを見ているか否かを検出する。関心度生成部１０５は、視聴者がディスプレイ１１３を見ている時間に基づき、現在再生中のコンテンツに対する視聴者の関心度を生成する。メニュー生成部１１１は、コンテンツの再生中に、関心度生成部１０５が出力する関心度が閾値以下になると、コンテンツ情報管理部１０９から視聴者に推奨するコンテンツのタイトルなどを読み出し、コンテンツ一覧メニューを生成する。グラフィック処理部１１２は現在再生中の映像に生成されたコンテンツ一覧メニューをオーバーレイさせて表示する。【選択図】  図２
2005250322.tif 000002
【特許請求の範囲】
【請求項１】
視聴者にコンテンツ及び当該コンテンツに関するコンテンツ情報を表示する画面を有する表示装置であって、
前記コンテンツ及び前記コンテンツ情報を管理するコンテンツ情報管理手段と、
コンテンツを再生する再生手段と、
コンテンツ再生中において前記視聴者の視聴状態を検出する視聴状態検出手段と、
前記コンテンツ情報管理手段が管理する前記コンテンツ情報に基づきコンテンツ選択メニューを生成するメニュー生成手段と、
前記視聴状態検出手段が検出した前記視聴状態に基づき、前記メニュー生成手段において生成されたコンテンツ選択メニューを前記画面に表示するタイミングを決定する決定手段と、
前記決定されたタイミングにおいて、前記コンテンツ選択メニューを前記画面に表示する表示手段とを備える
ことを特徴とする表示装置。
【請求項２】
前記視聴状態検出手段は、さらに、
前記視聴状態として、前記視聴者の視線方向を検出する視線検出部と、
前記視線方向から再生中のコンテンツに対する前記視聴者の関心度を生成する関心度生成部とを備え、
前記決定手段は、前記関心度生成部において生成される前記関心度が閾値以下になる場合において、前記コンテンツ選択メニューを前記表示手段に表示すると決定する
ことを特徴とする請求項１記載の表示装置。
【請求項３】
前記表示装置は、さらに、
前記視線検出部で検出された視線方向より前記画面に視線を向けている視聴時間を検出する視聴時間検出手段を備え、
前記関心度生成部は、前記視聴時間と前記コンテンツの再生時間から前記関心度を生成する
ことを特徴とする請求項２記載の表示装置。
【請求項４】
前記視聴状態検出手段は、さらに、
前記視聴状態として、前記視聴者の発話を検出する発話検出部と、
前記発話の頻度から再生中のコンテンツに対する前記視聴者の関心度を生成する関心度生成部とを備え、
前記決定手段は、前記関心度生成部において検出される前記関心度が閾値以下になる場合において、前記コンテンツ選択メニューを前記表示手段に表示すると決定する
ことを特徴とする請求項１記載の表示装置。
【請求項５】
前記表示装置は、さらに、
前記視聴者の発話時間を検出する発話時間検出手段を備え、
前記関心度生成部は、前記発話時間とコンテンツの再生時間から前記関心度を生成する
ことを特徴とする請求項４記載の表示装置。
【請求項６】
前記表示装置は、さらに、
前記視聴者の属性情報を検出する属性情報検出手段を備え、
前記メニュー生成手段は、前記属性情報検出手段が検出した前記属性情報に基づき、前記コンテンツ情報管理手段が管理する前記コンテンツ情報から、前記コンテンツ選択メニューに含めるコンテンツ情報を選択して前記コンテンツ選択メニューを生成する
ことを特徴とする請求項１記載の表示装置。
【請求項７】
前記属性情報には、前記視聴者の個人情報又はコンテンツのジャンル情報の少なくとも１つが含まれる
ことを特徴とする請求項６記載の表示装置。
【請求項８】
前記表示装置は、さらに、
前記コンテンツ選択メニューを前記表示手段に表示するか否かを切り換える自動表示切り換え手段を備える
ことを特徴とする請求項１記載の表示装置。
【請求項９】
視聴者にコンテンツ及び当該コンテンツに関するコンテンツ情報を表示する画面を有する表示装置に用いる表示方法であって、
前記コンテンツ及び前記コンテンツ情報を管理するコンテンツ情報管理ステップと、
コンテンツを再生する再生ステップと、
コンテンツ再生中において前記視聴者の視聴状態を検出する視聴状態検出ステップと、
前記コンテンツ情報管理ステップにおいて管理する前記コンテンツ情報に基づきコンテンツ選択メニューを生成するメニュー生成ステツプと、
前記視聴状態検出ステップにおいて検出した前記視聴状態に基づき、前記メニュー生成ステップにおいて生成されたコンテンツ選択メニューを前記画面に表示するタイミングを決定する決定ステップと、
前記決定されたタイミングにおいて、前記コンテンツ選択メニューを前記画面に表示する表示ステップとを含む
ことを特徴とする表示方法。
【請求項１０】
視聴者にコンテンツ及び当該コンテンツに関するコンテンツ情報を表示する画面を有する表示装置に用いるプログラムであって、
前記コンテンツ及び前記コンテンツ情報を管理するコンテンツ情報管理ステップと、
コンテンツを再生する再生ステップと、
コンテンツ再生中において前記視聴者の視聴状態を検出する視聴状態検出ステップと、
前記コンテンツ情報管理ステップにおいて管理する前記コンテンツ情報に基づきコンテンツ選択メニューを生成するメニュー生成ステツプと、
前記視聴状態検出ステップにおいて検出した前記視聴状態に基づき、前記メニュー生成ステップにおいて生成されたコンテンツ選択メニューを前記画面に表示するタイミングを決定する決定ステップと、
前記決定されたタイミングにおいて、前記コンテンツ選択メニューを前記画面に表示する表示ステップと
をコンピュータに実行させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、オーディオやビデオ等において、コンテンツ情報を表示する表示装置に関し、特に、視聴者の視聴状態に基づいてコンテンツ情報を表示する表示装置に関するものである。
【背景技術】
【０００２】
従来、テレビ番組の受信機や、オーディオやビデオ等のコンテンツを再生する再生装置においては、電子番組表やコンテンツに含まれる情報をネットワークに接続された情報サーバーなどを利用して取得して、番組名や曲名などのテキスト情報を例えば電子番組表ＥＰＧ（Electric Program Guide）のような形で適宜表示することが知られている。そして、このテキスト情報を参照することにより、利用者はチャンネル選択やコンテンツ選択を容易に行うことができる。
【０００３】
さらに、テレビ番組の受信機において、利用者がリモコンなどで操作することなく画面に番組名の一覧を定期的に表示する装置がある（例えば、特許文献１参照）。この放送番組情報表示装置は、新しい番組の開始時や、番組の終了時、指定した時刻などに、自動的に放送番組の一覧を表示することにより、利用者が効率よく番組を選択することができるようにする。
【特許文献１】特開２００２−３４４８４２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、前記特許文献１に示す放送番組情報表示装置では、視聴者の状態に関わらず定期的に番組一覧が画面に表示されるため、視聴者が番組一覧の表示を不快に感じる場合がある。
本発明は、前記従来の課題を解決するもので、視聴者のコンテンツの視聴状態に合わせて、より適切なタイミングでコンテンツの再生中にコンテンツ情報を表示できる表示装置を提供することを目的とする。
【課題を解決するための手段】
【０００５】
前記従来の課題を解決するために、本発明のコンテンツ再生装置は、［請求項１］。
このため、本構成によれば、視聴状態検出手段においてコンテンツの再生中において視聴者の視聴状態を検出して、この視聴状態に基づいて決定手段においてコンテンツ選択メニュー表示を行うタイミングを決定する。従って、視聴者がコンテンツの再生映像に対して関心度が低下している時など、視聴状態に合わせた適切なタイミングで新たなコンテンツ一覧の表示を行うことができる。
【０００６】
また、本発明に係る表示装置は、［請求項２］又は［請求項４］。
このため、本発明の表示装置の構成によれば、視線検出部において検出される視聴時間、及び発話検出部において検出される発話時間を用いて関心度生成部において視聴者のコンテンツに対する関心度を生成することが可能となる。従って、視聴者の関心度が低下しているときに適宜コンテンツ選択メニュー表示を行うことができる。
【０００７】
尚、前記目的を達成するために、本発明は、表示装置の特徴的な構成手段をステップとして含む表示方法やプログラムとして実現することもできる。そして、そのプログラムは、ＣＤ−ＲＯＭ等の記録媒体や通信ネットワークを介して流通させることもできる。
【発明の効果】
【０００８】
本発明の表示装置によれば、視聴者の視線検出や発話時間の検出を行うことによりコンテンツの視聴状態を検出して、これらに基づき関心度を生成して、視聴者のコンテンツに対する関心度が低下したときにはコンテンツ一覧情報を表示する。従って、コンテンツ一覧の表示を行う際に視聴者に不快感を与えることを防止することができる。
【発明を実施するための最良の形態】
【０００９】
（実施の形態）
以下本発明の実施の形態について、図面を参照しながら説明する。
図１は、本発明に係る表示装置１００が車内で使用される際の外観図である。
表示装置１００は、コンテンツの表示を行うカーナビゲーション装置等の表示画面以外に、視聴者の発話を集音するためのマイク１０１及び視聴者の視線方向を検出するためのカメラ１０２を備える。そして、例えば、表示装置１００の再生ディスプレイは、前部座席の背面に設置され、後部座席にコンテンツの視聴者が座る。
【００１０】
図２は、本発明の実施の形態１における表示装置１００の機能ブロック図を示す。
本発明に係る表示装置１００は、視聴者の視聴状態に合わせてコンテンツ情報一覧表示を行い、視聴者の状態や属性情報を検出するためのカメラ１０１、マイク１０２、視線検出部１０３、発話検出部１０４、関心度生成部１０５、動作検出部１０６、及び個人認証部１０７、コンテンツの管理を行うためのコンテンツ蓄積部１０８、コンテンツ情報管理部１０９、及び制御部１１６、コンテンツの再生を行うための復号化部１１０、メニュー情報の生成を行うためのメニュー生成部１１１、画像等の表示を行うためのグラフィック処理部１１２、ディスプレイ１１３、音の出力を行うスピーカ１１４、視聴者が情報選択を行うための操作入力部１１５を備える。
【００１１】
カメラ１０１は、例えば、運転席上部の天井に設置され、後部座席に座る視聴者を撮影する。カメラ１０１で撮影された映像は、視線検出部１０３や個人認証部１０７に渡される。
マイク１０２は、例えば、前部座席に設置され、後部座席に座る視聴者の発話を集音する。このマイク１０２で集音された情報は発話検出部１０４に出力される。尚、本実施の形態１の説明においては、視聴者の状態や属性を検出するための入力部として、カメラ１０１とマイク１０２を用いて説明を行うが、その他、例えば光電センサーやシートに埋め込んだ感圧センサーなど、他にも様々なセンサーを用いてもよい。また、カメラ１０１又はマイク１０２のいずれか一つであってもよく、他のセンサーと組み合わせた場合にはカメラ１０１とマイク１０２以外のセンサーだけであってもよく、数種類の組み合わせであってもよい。
【００１２】
視線検出部１０３は、カメラ１０１が撮影した視聴者の映像を解析し、視聴者の視線方向を検出して関心度生成部１０５に出力する。
発話検出部１０４は、マイク１０２が集音した音を解析して視聴者の発話を検出し、視聴者が発話しているか否かを示す信号となる発話検出信号を関心度生成部１０５に出力する。
【００１３】
関心度生成部１０５は、視聴者の視線方向と発話状況から、再生中のコンテンツに対する視聴者の関心度を生成して出力する。尚、本実施の形態１において関心度生成部１０５は、視聴者の視線方向や発話の頻度から関心度を生成するものとして説明を行うが、本発明に係る表示装置の関心度の指標はこれに限定されるものではなく、例えば、睡眠、あくび、表情などを検出し、そこから関心度を生成してもよい。
【００１４】
動作検出部１０６は、カメラ１０１が撮影した視聴者の映像を解析し、視聴者の動作が記憶しているジェスチャーであるか否かを検出して、検出したジェスチャー内容を出力する。このジェスチャーとしては例えば「手を振る」等である。
個人認証部１０７は、カメラ１０１が撮影した視聴者の映像を解析し、視聴者が登録されている人物と同一であるか否かを検出して、検出した人物の識別子をメニュー生成部１１１に出力する。尚、本実施の形態１においては、視聴者の属性として個人認証部１０７により個人を特定するものとして説明を行うが、カメラ１０１の撮影画像やマイク１０２が集音した音声から、年齢や性別などを検出し、メニュー生成部１１１はその検出結果に基づいて識別子を生成するようにしてもよい。
【００１５】
コンテンツ蓄積部１０８は、録画したテレビ番組や音楽などのコンテンツデータを記憶しているハードディスク等である。
コンテンツ情報管理部１０９は、コンテンツ蓄積部１０８に蓄積されているコンテンツのタイトルやジャンルなどのコンテンツ情報を取得して記憶し、これらの情報をメニュー生成部１１１に出力する。
【００１６】
復号化部１１０は、コンテンツ蓄積部１０８に蓄積されているコンテンツを復号化し、映像信号と音声信号を出力する再生部である。
メニュー生成部１１１は、コンテンツ情報管理部１０９に蓄積されているコンテンツ情報から、コンテンツのタイトルなどを含むコンテンツ一覧メニューを生成する。尚、このコンテンツ一覧メニューは後述の図３において例示する。
【００１７】
グラフィック処理部１１２は、コンテンツメニューの画面データを生成し、復号化部１１０が出力する映像信号にオーバーレイさせて、ディスプレイ１１３に出力する処理を行う。ディスプレイ１１３は、グラフィック処理部１１２が出力する映像信号とメニュー画面を表示する。スピーカ１１４は、復号化部１１０が出力する音声信号を音声にして出力する。
【００１８】
操作入力部１１５は、複数のボタンを有し、メニュー選択など視聴者の操作を受け付けて、操作信号を制御部１１６に出力する。具体的にはこの操作入力部１１５は、リモコン等となる。
制御部１１６は、復号化部１１０に対する再生制御や、メニュー生成部１１１に対するメニュー表示制御、コンテンツ蓄積部１０８に対するコンテンツ選択制御を行い、また、メニュー生成部１１１からメニュー内容や、コンテンツ情報管理部１０９からコンテンツ情報を取得する。
【００１９】
図３は、表示装置１００のディスプレイ１１３に表示されるコンテンツ一覧メニューの一例を示す参考図である。
図３（ａ）においては、録画順にコンテンツ蓄積部１０８に記録されているテレビ番組コンテンツ一覧が表示されている画面を表示している。また、図３（ｂ）においては、個人認証部１０７において認証された個人情報を用いて好みのジャンルのコンテンツが表示されている画面を表示する。
【００２０】
そして、視聴者は、このメニュー画面を介して、リモコン等の操作入力部１１５を用いてコンテンツを選択すると、制御部１１６は再生中のコンテンツを停止し、選択されたコンテンツの再生を開始する。
また、視聴者がメニュー中の操作入力部１１５を用いて「再生を停止する」を選択すると、制御部１１６は再生中のコンテンツを停止する。また、視聴者がメニュー中の「今後このメニューを表示しない」を選択すると、制御部１１６はメニュー生成部１１１に、関心度生成部１０５における関心度の低下や動作検出部１０６における所定のジェスチャーによるコンテンツ一覧メニュー表示を行わないよう制御する。
【００２１】
また、操作入力部１１５は、例えば「自動メニュー表示切換」専用のボタン部を操作入力部１１５に備え、視聴者がこのボタン部を介して「自動メニュー表示オフ」の設定を行うと、制御部１１６はメニュー生成部１１１に対してメニュー表示を行わないように制御する。
【００２２】
尚、本実施の形態では、コンテンツ情報表示装置１００において再生されるコンテンツは、コンテンツ蓄積部１０８に蓄積されているコンテンツとして説明を行うが、これに限定されるものではなく、ＤＶＤ−Ｖｉｄｅｏ等の光ディスクに記録されたコンテンツや、メモリーカードに記録されたコンテンツ、テレビ放送、ネットワーク上のコンテンツサーバに記録されたコンテンツなどであってもよい。そして、この際においては、これらのコンテンツの情報を用いて、メニュー生成部１１１がメニュー画面を生成することとなる。
【００２３】
図４は、視線検出部１０３において検出する視線情報に基づいて、表示装置１００の関心度生成部１０５において関心度を生成する際の動作手順を示すフローチャートである。
最初に、カメラ１０１が撮影した視聴者の映像信号が視線検出部１０３に送られる（Ｓ４０１）。
【００２４】
そして、視線検出部１０３は視聴者の画像から、視聴者の目、鼻、口、及び目の中の瞳の位置を検出し、これらの位置から視聴者の視線方向を生成し、視聴者がディスプレイ１１３を見ているか否かを示す視線方向信号を生成して関心度生成部１０５に出力する（Ｓ４０２）。尚、視線検出部１０３が視聴者の視線方向からディスプレイ１１３を見ているか否かを判定するために、表示装置１００を車内に設置した後、視線検出部１０３にディスプレイ１１３を見ている人物の画像と、ディスプレイ１１３を見ていない人物の画像を入力し、ディスプレイ１１３を見ている人物の視線方向の範囲を設定する必要がある。
【００２５】
次に、関心度生成部１０５は、既定の時間前から現時点までの間の、視聴者がディスプレイ１１３を見ていない時間が既定の時間に占める割合から関心度を生成する（Ｓ４０３）。この関心度生成部１０５における関心度の値は、例えば百分率で表示され、視聴者がディスプレイ１１３を見ていない時間の割合が大きいほど、関心度は小さい値となる。
【００２６】
そして、関心度生成部１０５は、生成した関心度をメニュー生成部１１１に出力し（Ｓ４０４）、関心度生成部１０５における一連の関心度生成の処理を終了する。
【００２７】
図５は、発話検出部１０４における視聴者の発話検出に基づいて、表示装置１００の関心度生成部１０５において関心度を生成する際の動作手順を示すフローチャートである。
最初に、マイク１０２が集音した音声が音声信号として発話検出部１０４に送られる（Ｓ５０１）。
【００２８】
次に、発話検出部１０４は、入力された音声信号から、人の声の周波数帯におけるレベル値を測定し、そのレベル値が既定の値以上であるか否かに基づいて、視聴者が発話しているか否かを示す信号となる発話検出信号を関心度生成部１０５に出力する（Ｓ５０２）。
【００２９】
また、関心度生成部１０５は、上述した視線検出部１０３における視線検出と同様に、既定の時間前から現時点までの間の、視聴者が発話している時間が既定の時間に占める割合から関心度を生成する（Ｓ５０３）。すなわち、発話時間の総計とコンテンツ再生時間とを検出して発話時間の割合を求める。尚、この場合は、関心度の値は、視聴者が発話している時間の割合が大きくなるほど小さい値となる。
【００３０】
そして、関心度生成部１０５において生成された関心度は、メニュー生成部１１１に出力される（Ｓ３０４）。尚、ここで関心度生成部１０５は、視聴者の発話から生成した関心度と、視聴者の視線から生成した関心度は、メニュー生成部１１１が区別できるような形式で出力する。
【００３１】
図６は、本発明に係る表示装置１００の関心度生成部１０５において生成される関心度を説明するための図である。
【００３２】
図６（ａ）は、視線検出部１０３における視線検出時間を用いて関心度生成部１０５において関心度を生成する場合であり、関心度は下記の（数１）において示される。ここで視線検出時間Ｙとは視聴者がディスプレイを見ている時間である。図６（ｂ）は、再生期間を限定して視線検出部１０３における視線検出時間を用いて関心度生成部１０５において関心度を生成する場合である。
【００３３】
【数１】
2005250322.tif 000003
そして、この数式を用いて、関心度生成部１０５においては、例えば、コンテンツ一覧メニュー表示の閾値が３０％に設定されている場合において、コンテンツの再生時間が４０分、視線検出時間が１２分と検出される場合において、メニュー生成部１１１は視聴者の再生中のコンテンツに対する関心度が低下しているものと判断し、コンテンツ一覧メニューを表示すると判断する。尚、この閾値は視聴者設定、初期設定等で入力される。
【００３４】
尚、関心度を生成する際における設定する再生時間を過去の５〜１０分の期間に設定することもできる。このために、視聴者の現時点での関心度の検出をより的確に行うことが可能となる。
【００３５】
次に、動作検出部１０６において視聴者のジェスチャーを検出する動作について説明する。
図７は、動作検出部１０６において視聴者のジェスチャーを検出する際の動作手順を示すフローチャートである。
最初に、カメラ１０１が撮影した視聴者の映像信号が動作検出部１０６に出力される（Ｓ７０１）。
次に、視線検出部１０３は視聴者の画像から、視聴者の目、口、頭、手、視線方向を検出し、これらの動きから視聴者のジェスチャーを検出する（Ｓ７０２）。
【００３６】
そして、動作検出部１０６には予め、数種類のジェスチャーが設定されており、動作検出部１０６は、検出した視聴者の動作が、設定されているジェスチャーのいずれかと一致しているか否かを判断する（Ｓ７０３）。そして、一致している場合においては（Ｓ７０３でＹ）、動作検出部１０６は該当するジェスチャーを示すジェスチャー識別子をメニュー生成部１１１に出力する。これらのジェスチャーの例としては、「片手を振る」、「首を横に振る」、「まばたきをする」等である。
【００３７】
次に、以上の動作により関心度生成部１０５において生成される関心度、又は動作検出部１０６において検出されるジェスチャー識別子がメニュー生成部１１１に入力されたときの、メニュー生成部１１１の動作手順について図８に示すフローチャートを用いて説明する。
【００３８】
最初に、関心度生成部１０５から、視線方向に基づく視聴者の関心度がメニュー生成部１１１に入力されると（Ｓ８０１でＹ）、メニュー生成部１１１は、関心度の値が既定の値以下であるか否かを判定する（Ｓ８０２）。
【００３９】
次に、メニュー生成部は、関心度の値が既定の値以下である場合において（Ｓ８０２でＹ）、コンテンツ一覧メニューの生成を行う（Ｓ８０３）。
尚、メニュー生成部１１１は、コンテンツ一覧メニューの生成を行う際には、まず個人認証部１０７が出力した視聴者の識別子に対応付けられているジャンルを抽出してから行うことも考え得る。この場合において、人物の識別子とジャンルの対応付けは、個人認証部１０７に視聴者の登録を行った後、その視聴者の好みのジャンルが選択されているかによって行われる。例えば、メニュー生成部１１１は、視聴者の識別子に対応付けられているジャンルがあれば、そのジャンルのコンテンツ情報をコンテンツ情報管理部１０９から読み出し、コンテンツ一覧メニューを生成する。視聴者の識別子に対応付けられているジャンルがなければ、コンテンツ情報管理部１０９から、録画日の新しい順にコンテンツ情報を読み出し、コンテンツ一覧メニューを作成する。また、視聴者の発話に基づく視聴者の関心度がメニュー生成部１１１に入力された場合も、視線方向による関心度の値が入力された場合と同じ動作でメニューを作成するのは言うまでもない。
【００４０】
また、動作検出部１０６において検出された視聴者のジェスチャーが「コンテンツメニュー表示」を示すジェスチャーである場合は、メニュー生成部１１１は関心度の値の判定以外の同じ動作でコンテンツ一覧メニューを作成する。
【００４１】
最後に、メニュー生成部１１１は、生成したコンテンツ一覧メニューの画面データをグラフィック処理部１１２に出力する（Ｓ８０４）。グラフィック処理部１１２は、メニューの画面データからメニュー画像を作成し、再生中のコンテンツにオーバーレイして、ディスプレイ１１３に映像信号を出力する。
【００４２】
以上の説明のように、本発明に係る表示装置１００は、視線検出部１０３において視聴者の視線を検出し、発話検出部１０４において視聴者の発話を検出し、こららの情報に基づいて関心度生成部１０５において再生中のコンテンツに対する視聴者の関心度を生成する。そして、メニュー生成部１１１において関心度が閾値以下となると判断される場合においてコンテンツ一覧メニューの表示が行われる。
【００４３】
従って、本発明に係る表示装置１００は、視聴者の視聴状態に合わせてコンテンツのメニュー一覧表示を行うことができ、視聴者がコンテンツ一覧メニュー表示を不快に感じることを軽減できる。
【００４４】
尚、上記の説明においては、メニュー生成部１１１がメニューの生成を行うか否かを判定する際に、視聴者の視線に基づく関心度と、視聴者の発話に基づく関心度と、視聴者のジェスチャーとを独立して扱い判定を行うように説明したが、本発明はこれに限定されるものではなく、視聴者の視線に基づく関心度と、視聴者の発話に基づく関心度を組み合わせて判定するなど、複数の要素を組み合わせて判定してもよい。
【００４５】
また、関心度生成部１０５が生成した関心度の値が小さくなると、メニュー生成部１１１がコンテンツ一覧メニューを表示するようにしたが、コンテンツ一覧メニューを表示せずに自動的に、再生コンテンツの停止、再生コンテンツの変更、テレビチャンネルの変更、電源断などの動作を行ってもよい。尚、これらの設定は視聴者が行えるようにしてもよい。
【００４６】
また、メニュー生成部１１１は、コンテンツ一覧メニューの表示後、視聴者が既定の時間以上操作しない場合に、同様の動作を行うようにしてもよい。
さらに、メニュー生成部１１１は、動作検出部１０６において視聴者の「コンテンツメニュー表示」を示すジェスチャーが検出された場合にメニューを作成して表示するが、コンテンツの再生制御や音量制御など、メニューの表示以外の制御がジェスチャーで行えるようにしてもよい。
【００４７】
また、本実施の形態においては表示装置１００の適用例として車内を用いて説明したが、これに限定されるものではなく、例えば、飛行機や家庭内などで用いることができるのは言うまでもない。
【産業上の利用可能性】
【００４８】
本発明に係るコンテンツ情報表示装置は、コンテンツを表示する画面を有する表示装置に用いることができ、例えば、カーナビゲーション装置、ＡＶ機器、コンピュータに適用することができる。
【図面の簡単な説明】
【００４９】
【図１】本発明に係る表示装置が車内で使用される際の外観図である。
【図２】本発明の実施の形態１における表示装置の機能ブロック図である。
【図３】表示装置のディスプレイに表示されるコンテンツ一覧メニューの一例を示す参考図である。
【図４】視線検出部において検出する視線情報に基づいて、表示装置の関心度生成部において関心度を生成する際の動作手順を示すフローチャートである。
【図５】発話検出部における視聴者の発話検出に基づいて、表示装置の関心度生成部において関心度を生成する際の動作手順を示すフローチャートである。
【図６】本発明に係る表示装置の関心度生成部において生成される関心度を説明するための図である。
【図７】動作検出部において視聴者のジェスチャーを検出する際の動作手順を示すフローチャートである。
【図８】関心度生成部において生成される関心度、又は動作検出部において検出されるジェスチャー識別子がメニュー生成部に入力されたときの、メニュー生成部の動作手順について示すフローチャートである。
【符号の説明】
【００５０】
１００  表示装置
１０１  カメラ
１０２  マイク
１０３  視線検出部
１０４  発話検出部
１０５  関心度生成部
１０６  動作検出部
１０７  個人認証部
１０８  コンテンツ蓄積部
１０９  コンテンツ情報管理部
１１０  復号化部
１１１  メニュー生成部
１１２  グラフィック処理部
１１３  ディスプレイ
１１４  スピーカー
１１５  操作入力部
１１６  制御部
【図１】
2005250322.tif 000004
【図２】
2005250322.tif 000005
【図３】
2005250322.tif 000006
【図４】
2005250322.tif 000007
【図５】
2005250322.tif 000008
【図６】
2005250322.tif 000009
【図７】
2005250322.tif 000010
【図８】
2005250322.tif 000011
【手続補正書】
【提出日】平成16年12月3日(2004.12.3)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】０００５
【補正方法】変更
【補正の内容】
【０００５】
前記従来の課題を解決するために、本発明の表示装置は、視聴者にコンテンツ及び当該コンテンツに関するコンテンツ情報を表示する画面を有する表示装置であって、前記コンテンツ及び前記コンテンツ情報を管理するコンテンツ情報管理手段と、コンテンツを再生する再生手段と、コンテンツ再生中において前記視聴者の視聴状態を検出する視聴状態検出手段と、前記コンテンツ情報管理手段が管理する前記コンテンツ情報に基づきコンテンツ選択メニューを生成するメニュー生成手段と、前記視聴状態検出手段が検出した前記視聴状態に基づき、前記メニュー生成手段において生成されたコンテンツ選択メニューを前記画面に表示するタイミングを決定する決定手段と、前記決定されたタイミングにおいて、前記コンテンツ選択メニューを前記画面に表示する表示手段とを備えることを特徴とする。
このため、本構成によれば、視聴状態検出手段においてコンテンツの再生中において視聴者の視聴状態を検出して、この視聴状態に基づいて決定手段においてコンテンツ選択メニュー表示を行うタイミングを決定する。従って、視聴者がコンテンツの再生映像に対して関心度が低下している時など、視聴状態に合わせた適切なタイミングで新たなコンテンツ一覧の表示を行うことができる。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００６
【補正方法】変更
【補正の内容】
【０００６】
また、本発明に係る表示装置の前記視聴状態検出手段は、さらに、前記視聴状態として、前記視聴者の視線方向を検出する視線検出部と、前記視線方向から再生中のコンテンツに対する前記視聴者の関心度を生成する関心度生成部とを備え、前記決定手段は、前記関心度生成部において生成される前記関心度が閾値以下になる場合において、前記コンテンツ選択メニューを前記表示手段に表示すると決定することを特徴とする。
また、前記視聴状態検出手段は、さらに、前記視聴状態として、前記視聴者の発話を検出する発話検出部と、前記発話の頻度から再生中のコンテンツに対する前記視聴者の関心度を生成する関心度生成部とを備え、前記決定手段は、前記関心度生成部において検出される前記関心度が閾値以下になる場合において、前記コンテンツ選択メニューを前記表示手段に表示すると決定することを特徴とする。
このため、本発明の表示装置の構成によれば、視線検出部において検出される視聴時間、及び発話検出部において検出される発話時間を用いて関心度生成部において視聴者のコンテンツに対する関心度を生成することが可能となる。従って、視聴者の関心度が低下しているときに適宜コンテンツ選択メニュー表示を行うことができる。