(57)【要約】【課題】ユーザに不快感を与えることなく、ユーザが映像表示装置を注視しているかどうかに基づいて、映像表示装置の消費電力を効果的に抑制する。【解決手段】ディスプレイを有する映像表示装置は、ユーザの映像を撮影する撮像装置と、前記撮影されたユーザの映像に基づいて、前記映像表示装置に対するユーザの注視の有無を判定する注視有無判定部と、ユーザの位置、及び、前記判定された注視の有無に基づいて、ユーザの状態を判定する状態判定部と、前記判定されたユーザの状態に応じて、前記映像表示装置の消費電力を制御する省電力制御部と、を備える。前記省電力制御部は、注視の有無が判定可能な位置にユーザがいて前記映像表示装置を注視していない状態において、前記ディスプレイのバックライトの消費電力を低減し、注視の有無が判定できない位置にユーザがいる場合に、前記バックライトを点灯させておく。【選択図】図２
2011239029.tif 000002
【特許請求の範囲】
【請求項１】
ディスプレイを有する映像表示装置であって、
ユーザの映像を撮影する撮像装置と、
前記撮影されたユーザの映像に基づいて、前記映像表示装置に対するユーザの注視の有無を判定する注視有無判定部と、
ユーザの位置、及び、前記判定された注視の有無に基づいて、ユーザの状態を判定する状態判定部と、
前記判定されたユーザの状態に応じて、前記映像表示装置の消費電力を制御する省電力制御部と、を備え、
前記省電力制御部は、注視の有無が判定可能な位置にユーザがいて前記映像表示装置を注視していない状態において、前記ディスプレイのバックライトの消費電力を低減し、
注視の有無が判定できない位置にユーザがいる状態において、前記バックライトを点灯させておくことを特徴とする映像表示装置。
【請求項２】
前記注視有無判定部は、注視の有無が判定できない位置にユーザがいる場合に、注視の有無を判定しないことを特徴とする請求項１記載の映像表示装置。
【請求項３】
前記状態判定部は、前記撮像装置によって撮影されたユーザの過去の映像から判定されたユーザの状態に応じて、前記ユーザの位置と前記判定された注視の有無の一方を使用して判定することを特徴とする請求項１記載の映像表示装置。
【請求項４】
前記省電力制御部は、前記ユーザの状態に応じて前記バックライトの消費電力を低減させた場合に、前記ユーザの状態を前記ディスプレイに表示することを特徴とする請求項１記載の映像表示装置。
【請求項５】
前記映像表示装置に対する距離を示す距離画像を取得する距離センサを備え、
前記状態判定部は、前記取得された距離画像に基づいて、前記ユーザの位置を取得することを特徴とする請求項１に記載の映像表示装置。
【請求項６】
前記撮像装置によって撮影された映像、又は前記距離センサによって取得された距離画像に基づいて、ユーザの特定の行動を認識するジェスチャ認識部を備え、
前記省電力制御部が前記バックライトの消費電力を低減しており、且つ、前記ジェスチャ認識部が前記特定の行動を認識した場合に、前記省電力制御部は、前記バックライトの状態を消費電力を低減する前の状態に戻すことを特徴とする請求項５記載の映像表示装置。
【請求項７】
前記省電力制御部は、認識可能な特定の行動の内容を前記ディスプレイに表示させることを特徴とする請求項６記載の映像表示装置。
【請求項８】
ユーザの有無を感知する人感センサをさらに備え、
前記状態判定部は、ユーザの有無、ユーザの位置、及び、前記映像表示装置に対するユーザの注視の有無に基づいて、前記ユーザの状態を判定することを特徴とする請求項１に記載の映像表示装置。
【請求項９】
前記撮影されたユーザの映像からユーザを識別するユーザ識別部をさらに備え、
前記状態判定部は、ユーザ毎に状態を判定し、
前記省電力制御部は、前記判定されたユーザ毎の状態に応じてユーザ毎に制御モードを設定し、前記設定された制御モードに応じて前記映像表示装置の消費電力を制御することを特徴とする請求項１に記載の映像表示装置。
【請求項１０】
前記ユーザの映像に基づいて、ユーザの周辺環境が注視の有無を判定可能な環境であるか判定する環境認識部をさらに備え、
ユーザの周辺環境が注視の有無を判定可能な環境である場合に、前記省電力制御部は、注視の有無が判定可能な位置にユーザがいて前記映像表示装置を注視していない状態において、前記バックライトの消費電力を低減することを特徴とする請求項１に記載の映像表示装置。
【請求項１１】
前記省電力制御部は、注視の有無が判定可能な位置にユーザがいて前記映像表示装置を注視していない状態において、前記バックライトの輝度を低くすることによって消費電力を低減させ、
前記省電力制御部は、注視の有無が判定できない位置にユーザがいる状態において、前記バックライトを所定時間所定の輝度で点灯させておいた後に、前記バックライトの輝度を前記所定の輝度より低くすることによって消費電力を低減させることを特徴とする請求項１に記載の映像表示装置。
【請求項１２】
ディスプレイを有する映像表示装置の消費電力を制御する省電力制御装置であって、
ユーザの映像を撮影する撮像装置と、
前記撮影されたユーザの映像に基づいて、前記映像表示装置に対するユーザの注視の有無を判定する注視有無判定部と、
ユーザの位置、及び、前記判定された注視の有無に基づいて、ユーザの状態を判定する状態判定部と、
前記判定されたユーザの状態に応じて、前記映像表示装置の消費電力を制御する命令を生成する省電力制御部と、
前記映像表示装置の消費電力を制御する命令を出力する出力部と、を備え、
前記省電力制御部は、注視の有無が判定可能な位置にユーザがいて前記映像表示装置を注視していない状態において、前記ディスプレイのバックライトの消費電力を低減する命令を生成し、
注視の有無が判定できない位置にユーザがいる状態において、前記バックライトを点灯させておく命令を生成することを特徴とする省電力制御装置。
【請求項１３】
ディスプレイを有する映像表示装置における省電力方法であって、
ユーザの映像を撮影するステップと、
前記撮影されたユーザの映像に基づいて、前記映像表示装置に対するユーザの注視の有無を判定する注視有無判定ステップと、
ユーザの位置、及び、前記判定された注視の有無に基づいて、ユーザの状態を判定する状態判定ステップと、
前記判定されたユーザの状態に応じて、前記映像表示装置の消費電力を制御する省電力制御ステップと、を備え、
前記省電力制御ステップにおいて、注視の有無が判定可能な位置にユーザがいて前記映像表示装置を注視していない状態において、前記ディスプレイのバックライトの消費電力を低減するように制御し、
注視の有無が判定できない位置にユーザがいる状態において、前記バックライトを点灯させておくように制御することを特徴とする省電力方法。
【請求項１４】
記録装置を備える映像表示装置であって、
ユーザの映像を撮影する撮像装置と、
前記ユーザの映像からユーザの顔を検出する顔検出部と、
前記記録装置に記録されている番組コンテンツが再生されている場合、前記顔検出部が検出したユーザの顔の画像からユーザ毎に視聴履歴のデータを生成し、前記視聴履歴のデータを前記番組コンテンツと関連付けて記録する視聴履歴生成部と、を備える映像表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像を表示する映像表示装置に関し、特に映像表示に要する電力を低減する映像表示装置／省電力制御装置に関する。
【背景技術】
【０００２】
従来のテレビジョン受像機（映像表示装置）は、自動ドアなどに使われている人感センサを備え、画面の前にユーザがいるかどうかを判別して電源をオンオフする消費電力低減機能を有する。特許文献１は、人感センサによって観測したユーザの状態に基づいて、テレビジョン（ＴＶ）受像機の消費電力を抑制することを開示する。また、特許文献２は、生体センサ等によって観測したユーザの状態に基づいて、ＴＶ受像機の映像復号化回路の動作を制御し、副次的に電力を低減することを開示する。
【０００３】
しかし、特許文献１、２に開示されている方式では、省電力効果が十分得られないという問題がある。特許文献１のＴＶ受像機は、人感センサのみを備えており、ＴＶ受像機の前にユーザがいるかどうかにのみ依存して電力を低減する。このため、ユーザが人感センサから離れた場所（例えば、ダイニングやキッチンスペース）からＴＶ受像機を見ている場合に、意図せず電源がオフになる可能性がある。また、窓からの太陽光（赤外線等）による人感センサの誤動作によって電源が常にオン状態に維持される可能性がある。ユーザがソファで眠っている場合も電源が常にオン状態に維持される可能性がある。特許文献２のＴＶ受像機は、生体センサ等によって観測したユーザの状態に基づいて再生される映像の品質を変化させ、副次的に消費電力を低減させるだけである。
【０００４】
また、一般的なユーザのＴＶ視聴状態では必ずしもＴＶ受像機の前に座っているとは限らない。さらに、ユーザは座っていても常にはＴＶ受像機を注視しておらず、別の何かをしながら視聴することがある。ＴＶ視聴におけるこの「ながら視聴」（非注視状態での視聴）の時間割合は、６５％を超えているという報告もある。従って、消費電力低減に必要なことは、ＴＶ受像機周辺でのユーザの有無の判定ではなく、ユーザがＴＶ受像機を注視しているかを観測することである。さらに、消費電力低減に必要なことは、ユーザがＴＶ受像機を注視していない場合にユーザに不快感を与えずにＴＶ受像機の表示に要する電力を削減することである。なお、特許文献３は、ユーザがＴＶ受像機を注視しているかを判定するための具体的な方法を開示する。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００８−２４４９１７号公報
【特許文献２】特開２００４−３６２１４５号公報
【特許文献３】特開２００７−２８６９９５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
上記の問題に鑑みて、本発明は、ユーザに不快感を与えることなく、ユーザが映像表示装置を注視しているかどうかに基づいて映像表示装置の消費電力を効果的に抑制することを目的とする。また、ユーザごとの視聴履歴により録画番組を簡便に管理して、消費電力を抑制することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の代表的な一例を示せば以下の通りである。すなわち、パネルディスプレイを有する映像表示装置であって、ユーザの映像を撮影するカメラと、前記撮影されたユーザの映像に基づいて、前記映像表示装置に対するユーザの注視の有無を判定する注視有無判定部と、ユーザの位置、及び、前記判定された注視の有無に基づいて、ユーザの状態を判定する状態判定部と、前記判定されたユーザの状態に応じて、前記映像表示装置の消費電力を制御する省電力制御部と、を備え、前記省電力制御部は、注視の有無が判定可能な位置にユーザがいて前記映像表示装置を注視していない状態において、前記パネルディスプレイのバックライトの消費電力を低減し、注視の有無が判定できない位置にユーザがいる状態において、前記バックライトを点灯させておくことを特徴とする映像表示装置である。
【発明の効果】
【０００８】
本発明の第一実施形態によると、ユーザに不快感を与えることなく、ユーザが映像表示装置を注視しているかどうかに基づいて、映像表示装置の消費電力を効果的に抑制することができる。
【図面の簡単な説明】
【０００９】
【図１】第一実施形態に係るＴＶ受像機（映像表示装置）を示す斜視図である。
【図２】第一実施形態に係るＴＶ受像機の概略的な構成を示すブロック図である。
【図３】第一実施形態に係るユーザ状態認識部の概略的な構成を示すブロック図である。
【図４】（ａ）ユーザがいない場合の距離画像の一例を示す図である。（ｂ）ユーザがいる場合の距離画像の一例を示す図である。（ｃ）距離センサの画素のマトリックスの一例を示す図である。
【図５】第一実施形態に係るユーザ状態判定の一例を示すフローチャートである。
【図６】第一実施形態に係る省電力制御部の概略的な構成を示すブロック図である。
【図７】第一実施形態に係る省電力制御部が実行する制御モード切替えの遷移フローを示す図である。
【図８】第一実施形態に係る省電力制御部の制御命令を制御モード毎に定めるテーブルである。
【図９】（ａ）所定エリア内注視モードにおけるパネルディスプレイの表示状況を例示する図である。（ｂ）所定エリア外在地モードにおけるパネルディスプレイの表示状況を例示する図である。（ｃ）所定エリア内非注視モードにおけるパネルディスプレイの表示状況を例示する図である。
【図１０】第二実施形態に係る所定エリア外在地モードの表示状況を例示する図である。
【図１１】第三実施形態に係るＴＶ受像機の概略的な構成を示すブロック図である。
【図１２】第三実施形態に係る注視状態認識部の概略的な構成を示すブロック図である。
【図１３】第三実施形態に係る人感センサの観測可能エリアを示す図である。
【図１４】第四実施形態に係るモード設定画面の一例を示す図である。
【図１５】第五実施形態に係るＴＶ制御装置の概略的な構成を示すブロック図である。
【図１６】第六実施形態に係るＴＶ受像機の概略的な構成を示すブロック図である。
【図１７】第七実施形態に係るＴＶ受像機の概略的な構成を示すブロック図である。
【図１８】第七実施形態に係る視聴履歴の一例を示すテーブルである。
【図１９】第七実施形態に係る、パネルディスプレイに表示された視聴履歴の一例を示す図である。
【発明を実施するための最良の形態】
【００１０】
［第一実施形態］
図１は、テレビジョン受像機（単にＴＶ受像機とも呼ばれる）を示す斜視図である。ＴＶ受像機１００は、映像表示装置の一例として示されている。映像表示は、ＴＶ受像機に対するユーザ（視聴者）の注視状態に応じて切り替えられ、消費電力が低減される。
【００１１】
ＴＶ受像機１００は、映像を表示するパネルディスプレイ２００と、音声を出力するスピーカ５００を備える。本実施形態において、パネルディスプレイ２００は液晶ディスプレイであるが、これに限定されるものではない。ＴＶ受像機１００は、アンテナ９００から得られる放送波、インターネット１０００から得られる配信映像や、記録装置６００に録画された映像を再生する。記録装置６００は、ＨＤＤ(Hard Disk Drive)又はＳＳＤ(Solid State Disk)から成る。
【００１２】
ユーザは、リモコン（リモートコントローラ）３００などのユーザインターフェースを使って、テレビ受像機１００を操作する。テレビ受像機１００の操作として、電源のオンオフ、音量ボリュームの調整、チャンネルの切替などがある。リモコン３００からの赤外線信号は、リモコン信号入力部４００で受信され、これらの操作が実行される。ユーザは、オプション的な機器としてＷｉ−Ｆｉ等の無線ＬＡＮ機能を備えた携帯電話機１１００を使って、テレビ受像機１００を操作してもよい。携帯電話機１１００の操作指令は、無線ＬＡＮインターフェイス１２００を通じて、ＴＶ受像機１００に入力される。
【００１３】
カメラ７００は、ユーザのＴＶ注視状態を観測する手段である。カメラ７００の個数は、注視を判定するアルゴリズムに依存して変わる。カメラ７００は、一つでもよいし、複数あってもよい。
【００１４】
カメラ７００は、ユーザの映像（又は画像）を取得するために用いられる撮像装置である。ユーザ映像（特に顔の映像）をＴＶ受像機内部で認識処理することで、ＴＶ受像機１００に対する注視の有無が判定され、省電力制御が可能となる。後述のように、顔画像が検出できるか否かや顔画像から顔の向きを検出することにより、ユーザがＴＶ受像機１００を注視しているか否かが判断できる。カメラ（撮像装置）７００は、レンズとＣＭＯＳイメージセンサを備える小型のものでよい。
【００１５】
距離センサ８００は、ユーザのＴＶ受像機１００に対する位置とユーザの有無を観測する手段である。距離センサ８００は、Time-of-Flight（ＴＯＦ）法を用いて距離を計測して、距離画像を取得する距離画像センサデバイスが好ましい。このような距離画像センサデバイスは、例えば、特開２００２−２２４２６号公報、特開２００４−２９４４２０号公報、米国特許第６，３２３，９４２号明細書に記載されている。距離画像センサデバイスは、一般的には、光源（ＬＥＤ等）と、光源からの光（例えば赤外線）を検出する画素（検出素子）からなる２次元センサアレイ（ＣＣＤ、ＣＭＯＳ等）と、２次元センサアレイに光を結像するレンズからなる。画素に入る反射光を生じる物体と画素との間の距離が、光が光源からこの画素に到達するまでの時間から求められる。距離センサ８００から得られた距離情報をＴＶ受像機内部で処理することで、ユーザの有無を観測し、ユーザの位置を計測することが可能となる。
【００１６】
なお、距離センサ８００は、２台のカメラを並べたステレオカメラでもよい。例えば、カメラ７００の他にもう一台カメラを用意し、カメラを２つ並べることによってユーザとＴＶ受像機１００との距離を三角測量に基づくステレオカメラの原理から測定することができる。なお、２台のカメラを使用すると広い視野のユーザ映像を取得できる。又は、距離センサ８００の代わりにカメラ７００一台のみを代用して、カメラ７００で取得した映像中におけるユーザ映像の位置と大きさから、ユーザの有無やＴＶ受像機１００に対するユーザのおよその位置を計測することもできる。この場合、例えば、カメラ７００で取得した過去のフレーム（ユーザがいない場合のフレーム）と現フレームとの差分からユーザ映像を取得できる。
【００１７】
図２は、ＴＶ受像機（映像表示装置）１００の概略的な構成を示すブロック図である。
【００１８】
ＴＶ受像機１００は、一般的なＴＶ受像機の基本機能部分に加え、ユーザの状態（ユーザ状態）を観測するための手段と、観測されたユーザ状態に基づいて省電力制御を行うための手段から構成される。
【００１９】
ＴＶ受像機１００の基本機能部分は、ＴＶ制御部１１０、映像音声出力部１２０、パネルディスプレイ２００、パネルディスプレイ制御部２１０、リモコン信号入力部４００、スピーカ５００、及び記録装置６００を備える。ＴＶ制御部１１０は、ＴＶ受像機１００全体を制御する。例えば、ＴＶ制御部１１０は、リモコン３００からリモコン信号入力部４００を経由して入力される操作指示に基づき電源をオンオフする。また、例えば、ＴＶ制御部１１０は、放送波、インターネット配信映像、または記録装置６００上の録画映像など様々な映像ソースを選択し、スピーカ５００から出力される音声のボリュームを調整する。映像音声出力部１２０は、選択された映像ソースの符号化された映像ストリームを復号化して、非圧縮の映像信号と音声信号に変換する。映像信号は、パネルディスプレイ制御部２１０とパネルディスプレイ２００を通して出力される。音声信号は、スピーカ５００を通して出力される。
【００２０】
ユーザの状態を取得するための手段は、カメラ７００、距離センサ８００、及びユーザ状態認識部７２０を備える。カメラ７００によって撮像したユーザの映像と、距離センサ８００から得られたセンサ情報から、ユーザ状態認識部７２０で認識処理を行って、ユーザ状態を判定する。
【００２１】
省電力制御を行うための手段は、省電力制御部７３０を備える。省電力制御部７３０は、判定されたユーザ状態に基づいて省電力制御を行う。省電力制御部７３０は、ユーザ状態認識部７２０から得られたユーザ状態や、ジェスチャ認識部７４０からのジェスチャ情報に基づいて、パネルディスプレイ制御部２１０や映像音声出力部１２０に制御命令を発行し、ＴＶ受像機１００全体の省電力制御を行う。なお、パネルディスプレイ制御部２１０と映像音声出力部１２０を省電力制御部に含めてもよい。
【００２２】
ジェスチャ認識部７４０は、オプションで設けられるものであり、無くてもよい。ジェスチャ認識部７４０は、距離センサ８００で得られた距離画像から、公知の方法によってユーザの１つまたは複数パターンのジェスチャ（特定行動）の有無を認識する。ジェスチャ認識部７４０は、ジェスチャを認識したらジェスチャの有無の情報を省電力制御部７３０に出力する。これにより、ユーザ状態だけでなくジェスチャによっても電力制御が可能となる。ジェスチャ認識部７４０は、カメラ７００で得られた画像情報から、ユーザの一つまたは複数パターンのジェスチャ（特定行動）の有無を認識してもよい。
【００２３】
なお、例えば、ＴＶ受像機１００の上述の各部、又は各部のいくつかをまとめたものは、ＣＰＵ（中央演算処理装置）がメモリに格納されたプログラムを実行することによってその機能を発揮する。
【００２４】
図３は、ユーザ状態認識部７２０の構成を示すブロック図である。ユーザ状態認識部７２０は、制御部７２１、顔検出部７２２、顔／視線角度算出部７２３、注視位置算出部７２４、ＴＶ注視有無判定部７２５、ユーザ位置判定部７２６、ユーザ状態判定部７２７、及びユーザ識別部７２８を備える。ユーザ識別部７２８は、オプションで設けられるものであり無くてもよい。ユーザ状態認識部７２０は、ＴＶ制御部１１０からの制御信号の他、カメラ７００からの映像信号と、距離センサ８００からの距離情報とを受け取る。ユーザ状態認識部７２０は、省電力制御部７３０に対して制御信号としてユーザ状態情報を出力する。
【００２５】
ユーザ位置判定部７２６は、距離センサ８００から得られた距離情報（又は距離画像）に基づいて、ユーザ（視聴者）の有無と、ユーザのＴＶ受像機に対する位置を判定する。ユーザ位置判定部７２６は、（距離センサ８００の観測可能エリア内において）ユーザがいると判定する場合には、ユーザの位置情報（三次元座標）をユーザ状態判定部７２７へ出力する。また、このユーザ位置情報を顔検出部７２２に送付する。これにより、顔検出部７２２は、ユーザのいる周辺位置に対してのみ、顔検出処理を行い、処理負荷を低減できるとともに検出精度を向上できる。さらに、ユーザ位置判定部７２６は、ユーザの有無を制御部７２１に対して出力する。これにより、ユーザがいないと判定する場合には制御部７２１から顔検出部７２２に処理停止の信号を送り、映像信号の入力や顔検出自体を停止する。これにより、顔検出部７２２の動作による消費電力を低減することができる。
【００２６】
なお、距離センサ８００としてステレオカメラ等のカメラを代用する場合には、ユーザ位置判定部７２６は、カメラからの映像に基づいて、ユーザ（視聴者）の有無と、ユーザのＴＶ受像機に対する位置を判定してよい。
【００２７】
顔検出部７２２は、カメラ７００から入力された映像信号（画像信号）からユーザの顔領域を検出し、顔位置情報Ｄ１を顔／視線角度算出部７２３とユーザ識別部７２８へ出力する。なお、顔位置情報Ｄ１は、顔の器官（目、鼻等）の位置情報を含む。顔／視線角度算出部７２３は、入力された顔位置情報Ｄ１と映像信号から顔または視線の方向角度Ｄ３を算出し、注視位置算出部７２４へ出力する。顔／視線角度算出部７２３は、顔／視線の方向角度を算出するため、例えば、上記の特許文献３（特開２００７−２８６９９５号公報）に記載された方法を使用できる。
【００２８】
注視位置算出部７２４は、ユーザの顔／視線の方向角度Ｄ３とユーザの位置と距離の情報に基づいて、パネルディスプレイ２００が存在する面内での注視場所Ｄ４を算出し、ＴＶ注視有無判定部７２５へ出力する。ＴＶ注視有無判定部７２５は、上記面内での所定範囲（ＴＶ注視と判定できる範囲）と注視場所Ｄ４を比較する。ＴＶ注視有無判定部７２５は、注視場所が所定範囲内である場合、ユーザがＴＶ受像機１００を注視していると判定し、ＴＶ注視有フラグをユーザ状態判定部７２７へ出力する。ＴＶ注視有無判定部７２５は、注視場所が所定範囲外である場合、ユーザがＴＶ受像機１００を注視していないと判定し、ＴＶ注視無しフラグをユーザ状態判定部７２７へ出力する。
【００２９】
なお、ＴＶ注視有無判定部７２５は、顔検出部７２２が顔を検出できた場合に、顔がＴＶ受像機１００の方を向いているため、ユーザがＴＶ受像機１００を注視していると判定してもよい。この場合、顔／視線角度算出部７２３と注視位置算出部７２４とを省略できる。また、ＴＶ注視有無判定部７２５は、顔／視線角度算出部７２３が算出した顔または視線の方向角度Ｄ３が所定角度より小さい場合に、ユーザがＴＶ受像機１００を注視していると判定してもよい。この場合、注視位置算出部７２４を省略できる。
【００３０】
ユーザ状態判定部７２７では、注視の有無、ユーザ位置とユーザの有無からユーザ状態を判定し、現在のユーザ状態の情報を省電力制御部７３０に出力する。
【００３１】
なお、上記のユーザ状態判定動作は基本的に全てカメラのフレームレート（＝３０ＦＰＳ）で動作する。
【００３２】
ユーザ識別部７２８は、顔検出部７２２から入力された顔位置情報Ｄ１からユーザを識別するための特徴（例えば、特徴ベクトル）を算出し、過去に抽出したユーザの特徴と比較して、ユーザを認識する。ユーザ識別部７２８は、ユーザの認識結果Ｄ２を顔／視線角度算出部７２３に送出する。これにより、ユーザ毎の過去の視聴履歴をまとめたり、ユーザ毎の注視判定パラメータを自動的に調整できるようになる。
【００３３】
図４（ａ）（ｂ）は、距離センサ８００から得られる距離情報を距離画像として例示する。図４（ａ）（ｂ）は、概略的な距離画像を示している。実際の距離画像は、距離画像中の物体の距離センサ８００からの距離を画素ごとに画素値（濃度値又は階調値）で示したものである。なお、距離センサ８００において、ｘ、ｙ方向のマトリックス（図４（ｃ））状に配置された画素毎に、距離値が得られる。距離センサ８００の距離画像は、カメラで得られる画像に比べて、背景部分と人物部分で各画素値（距離値）に差が表れる。このため、距離画像に基づいて、ユーザ位置判定部７２６は、容易に人物（ユーザ）の有無が判定できる。
【００３４】
例えば、あらかじめユーザがいない状態の距離画像を過去のフレームとして保持しておき（図４（ａ））、ユーザ位置判定部７２６は、過去のフレームと現フレームの距離画像（図４（ｂ））との差分を求め、差分が一定値以上となる領域の面積や形状によって人物の有無を判定できる。また、ユーザ位置判定部７２６は、あらかじめ参照データとして用意した人のシルエット形状パターンを距離画像内でマッチング等によって探すことによって、人物の有無を判定してもよい。ユーザ位置判定部７２６は、人物（ユーザ）を検出したら、人物部分の各画素の距離値からその人物の３次元位置を取得する。
【００３５】
図５のフローチャートは、ユーザ状態判定部７２７における判定処理の一例を示す。ユーザ状態判定部７２７は、ＴＶ注視有無判定部７２５から入力された注視有無フラグとユーザ位置判定部７２６から入力されたユーザの有無情報とユーザ位置情報に基づいて、ユーザ状態を判定する。
【００３６】
ステップＳ６０において、ＴＶ注視有無判定部７２５からの注視有無フラグ、及び、ユーザ位置判定部７２６からのユーザの有無情報と位置情報が読み込まれる。
【００３７】
ステップＳ６１において、ユーザの有無情報に基づいてユーザの有無が判定される。ユーザの有無情報からユーザがいないと判定できる場合、ユーザ状態は「不在状態」と判定され、処理は終了する。ユーザがいる場合は、ルーチンはステップＳ６２に移行する。
【００３８】
ステップＳ６２において、ユーザ位置情報に基づいて、ユーザの位置が所定エリア内であるか判定される。所定エリア（又は所定の位置範囲）は、ユーザの注視の有無を判定できる位置範囲として、予め定められてもよいし、ユーザにより適宜設定されてもよい。ユーザの位置が所定エリア外である場合、ユーザ状態は「所定エリア外在地状態」と判定されて処理が終了する。ユーザの位置が所定エリア内である場合、ルーチンはステップＳ６３に移行する。
【００３９】
ステップＳ６３において、注視有無フラグがＯＮかＯＦＦかが判定される。注視有無フラグがＯＮである場合、ユーザ状態は「所定エリア内注視状態」であると判定される。注視有無フラグがＯＦＦである場合、ユーザ状態は「所定エリア内非注視状態」であると判定される。
【００４０】
以上のステップＳ６０からＳ６３により、ユーザ状態は四つの状態に判別される。
【００４１】
カメラ７００で撮影された過去のフレームに対するユーザ状態の判定結果（過去の判定結果）に応じて、現フレーム以降の処理は、二つのセンサ（カメラと距離センサ）の一つだけを動作させてもよい。例えば、過去のフレームから判定したユーザ状態が「所定エリア内注視状態」であれば、現フレームでもユーザが所定エリア内にいる可能性が高いのでカメラのみを用いて現在のユーザ状態が判定され、距離センサ８００からの情報の処理は停止する。ただし、現フレームで、前のフレームと違う判定結果が得られた場合、次のフレームに対するユーザ状態の判定処理において、二つのセンサを動作させる。このようにして、判定処理の負荷を抑制し、消費電力を低減することができる。
【００４２】
図６は、省電力制御部７３０の構成を示すブロック図である。省電力制御部７３０は、制御部７３１、パネル制御命令生成部７３２、及び、映像音声出力制御命令生成部７３３を備える。省電力制御部７３０には、ＴＶ制御部１１０からの制御命令とユーザ状態認識部７２０からユーザ状態に関する情報、ジェスチャ認識部７４０からジェスチャに関する情報が入力される。省電力制御部７３０は、移行すべき電力低減モードを選択する。省電力制御部７３０は、選択した電力低減モードに応じて、パネルディスプレイ制御部２１０にパネル制御命令を、映像音声出力制御部１２０に映像音声出力制御命令を出力する。
【００４３】
パネル制御命令生成部７３２は、制御部７３１から得られたパネル制御信号に応じて、パネルディスプレイ２００のバックライト２０５の点灯、消灯、又は輝度を制御する命令を生成し、パネルディスプレイ制御部２１０に送信する。
【００４４】
映像音声出力制御命令生成部７３３は、制御部７３１から得られた映像音声出力制御信号に応じて、ＴＶ受像機１００が出力する映像と音声を制御する映像音声出力制御部１２０に映像音声出力制御命令を出力する。
【００４５】
図７は、省電力制御部７３０の制御部７３１が実行する制御モード切替えのフローチャートである。制御部７３１は、省電力制御を行うため、ユーザ状態認識部７２０で得られた四つのユーザ状態に対応して、「所定エリア内注視モード」（Ｍ８１）、「所定エリア外在地モード」（Ｍ８２）、「所定エリア内非注視モード」（Ｍ８３）、「不在モード」（Ｍ８４）の四つの制御モードを選択する。所定エリア内注視状態、所定エリア外在地状態、所定エリア内非注視状態、不在状態のそれぞれに対応して、所定エリア内注視モード、所定エリア外在地モード、所定エリア内非視聴注視モード、不在モードが選択される。制御部７３１は、選択したモードに応じた制御信号を出力する。
【００４６】
ただし、各モードはバックライト２０５を点灯させる必要性に関してレベル分けされており、レベルの高い方から「所定エリア内注視モード」、「所定エリア外在地モード」、「所定エリア内非注視モード」、「不在モード」の順になっている。バックライト２０５を点灯させる必要性の高いレベルのモードから低いレベルのモードへ遷移する前に、カウンタにより設定される所定の待ち時間が設けられている。制御部７３１へ入力されるユーザ状態が、低いレベルのモードに対応する状態に切り替わった場合には、切り替わった状態が所定の継続時間（所定の待ち時間）続いた後、この低いレベルのモードに遷移する。これにより、パネルディスプレイ２００のバックライト２０５は、誤って消灯されなくなる。
【００４７】
一方、ユーザ状態が、より高いレベルのモードに対応する状態に切替った場合、制御モードは、すぐにこのより高いレベルのモードに遷移する。これにより、ユーザが視聴を始めた場合や所定エリアに入った場合、パネルディスプレイ２００のバックライト２０５はすぐに点灯できる。
【００４８】
図７において、カウンタＡには、制御モードが「所定エリア外在地モード」へより高いレベルのモードから遷移するために要する「所定エリア外在地状態」の継続時間が設定される。カウンタＢには、「所定エリア内非注視モード」へより高いレベルのモードから遷移するために要する「所定エリア内非注視状態」の継続時間が設定される。カウンタＣには、「不在モード」へより高いレベルのモードから遷移するために要する「不在状態」の継続時間が設定される。
【００４９】
図８に、制御部７３１の制御モード毎に制御命令を定めるテーブルの一例を示す。制御部７３１は、このテーブルに応じて、パネル制御命令生成部７３２にパネル制御信号を、映像音声出力制御命令生成部７３３に映像音声出力制御信号を発生させる。テーブルは、メモリに格納されている。
【００５０】
図９（ａ）に示すように、ユーザがＴＶを注視している「所定エリア内注視モード」において、パネル制御命令によって、パネルディスプレイ２００のバックライト２０５が点灯し、映像音声出力制御命令によって、映像音声が再生される。
【００５１】
図９（ｂ）に示すように、ユーザが所定エリア外にいる「所定エリア外在地モード」において、パネル制御命令により、通常通りパネルディスプレイ２００のバックライト２０５が点灯される。しかし、所定時間より長く「所定エリア外在地モード」が続いたらバックライト２０５は消灯される（即ち、輝度がゼロになる）。なお、バックライト消灯前に、映像音声出力制御命令により、所定時間経過後にバックライト２０５が消灯する旨の表示をする。
【００５２】
バックライト消灯中には、ユーザは所定エリア外にいるためにバックライト２０５が消灯している旨の表示をする。この表示を行う場合には、公知の部分制御バックライト（例えば、特開２００４−２１２５０３号公報参照）を用いて、パネルディスプレイの表示箇所以外の部分（少なくとも一部）でバックライトを消灯してよい。ただし、映像音声出力制御命令により映像と音声は通常通り再生させ、「所定エリア内注視モード」が選択されるとすぐにパネルディスプレイ２００を通常表示に復帰できるようにする。また、ユーザは遠くにいるため、映像音声出力制御命令で、音量を自動的にあげてもよい。なお、バックライト２０５は完全に消灯せずに、バックライト２０５の輝度を小さくして、消費電力を低減してもよい。
【００５３】
「所定エリア内非注視モード」において、パネル制御命令により、バックライト２０５が点灯中なら徐々に消灯させる。図９（ｃ）に示すように、映像音声出力制御命令により、パネルディスプレイ２００は、電力節約率やユーザ状態、省エネのためにバックライト２０５が消灯している旨を表示し、音声はそのまま出力される。この表示によって、ユーザのエコ意識を高めることができる。なお、この表示を行う場合には、部分制御バックライトを用いて、表示箇所以外の部分でバックライトを消灯するようにしてよい。なお、バックライト２０５は完全に消灯せずに、バックライト２０５の輝度を小さくし、消費電力を低減してもよい。
【００５４】
「不在モード」において、パネル制御命令は、パネルディスプレイを消灯し、映像音声出力制御命令は、映像・音声の再生を停止し、省エネ中の表示をする。一定時間以上、不在状態が続いたら、パネル制御命令と映像音声出力制御命令は、ＴＶ受像機１００をスタンバイ状態にしてもよい。
【００５５】
このように、ユーザが所定エリア内でＴＶを注視している場合は、映像と音声を出力する。ユーザが所定エリア内でＴＶを注視していない場合には、パネルディスプレイ２００のバックライト２０５が消灯して消費電力が低減される。テレビ全体の消費電力におけるパネルディスプレイの消費電力の割合は、一般的に約８０％であり、テレビ視聴における「ながら視聴」の時間割合が６５％である。従って、ＴＶ全体の消費電力の内、最大約５０％を削減できる可能性がある。一方、現在市販されている顔認識機能付きビデオカメラの消費電力は、１ワット程度であるため、ユーザの注視状態の検出に要する電力は非常に小さい。
【００５６】
一方、ユーザが所定エリア外にいるときは、注視／非注視の判定ができないため、通常通り映像を出力する。また、パネルディスプレイ２００は、ユーザに所定範囲外で視聴している状態である旨を知らせ、所定時間以上その状態が続いたらパネルディスプレイのバックライト２０５を消灯して消費電力が低減されてもよい。これにより、所定エリア外でユーザがＴＶを見ていると映像が消えてしまうという不快感をユーザに与えることなく、テレビを見ている時間の大半を占める所定エリア内での視聴において電力低減効果を得られる。
【００５７】
なお、本実施形態において、パネルディスプレイ２００はバックライトを有する液晶パネルディスプレイであるとして説明したが、パネルディスプレイ２００が、有機ＥＬディスプレイやプラズマディスプレイの場合には、平面上に配置される発光素子の集まりをバックライトとして取り扱い、本実施形態を適用できる。
【００５８】
−作用効果−
第一実施形態によれば、省電力制御部７３０は、注視の有無が判定可能な位置にユーザがいて映像表示装置を注視していない場合に、パネルディスプレイ２００のバックライト２０５の消費電力を低減する。省電力制御部７３０は、注視の有無が判定できない位置にユーザがいる場合に、バックライト２０５を点灯させておく。これにより、ユーザに不快感を与えることなく、ユーザの注視に基づき映像表示装置（ＴＶ受像機）の消費電力が低減される。
【００５９】
ＴＶ注視有無判定部７２５は、注視の有無が判定できない位置範囲にユーザがいる場合には、注視の有無を判定しない。これにより、判定処理に要する電力が削減できる。
【００６０】
ユーザ状態判定部７２７は、カメラ７００（撮像装置）が撮影した過去のフレーム（映像）におけるユーザの状態に応じて、ユーザの位置と注視の有無の一方を使用する。これにより、判定処理に要する電力が削減できる。
【００６１】
省電力制御部７３０は、ユーザの状態に応じてバックライト２０５の消費電力を低減させた場合に、ユーザの状態をパネルディスプレイ２００に表示する。これにより、ユーザのストレスや不快感を低減できる。
【００６２】
映像表示装置は、映像表示装置に対する距離を示す距離画像を取得する距離センサ８００を備え、ユーザ状態判定部７２７は、距離画像に基づいてユーザの位置を取得する。これにより、ユーザの正確な位置に基づいて、ユーザ状態を精度よく判定できる。
【００６３】
省電力制御部７３０は、注視の有無の判定が可能な位置範囲にユーザがいてユーザが映像表示装置を注視していない場合、バックライト２０５の輝度を小さくして消費電力を低減させる。一方、省電力制御部７３０は、注視の有無が判定できない位置範囲にユーザがいる場合に、バックライト２０５を所定時間所定の輝度で点灯させておいた後に、バックライト２０５の輝度を前記所定の輝度より小さくして消費電力を低減させる。これにより、カメラ７００から遠く離れ、注視の有無が判定できない場合においても、ユーザに不快感を与えずに電力低減を行うことが可能となる。ユーザが一定距離以上離れている場合には、ユーザはカメラ７００の映像中に小さく写るため注視の有無判定を行うことが困難となる。また、ユーザがカメラ７００の画角外の位置にいる場合には、注視の有無判定ができない。このような場合に、バックライト２０５の輝度を小さくするとユーザの視聴を妨げてしまう。一方、常にバックライト２０５の輝度を維持していると、消費電力が低減できない。本実施形態では、カメラから遠く離れた位置や、カメラ７００の画角外の位置で映像表示装置を視聴している場合にも、ユーザに不快感を与えずに消費電力を低減できる。
【００６４】
［第二実施形態］
本発明の第二実施形態について、図１０を参照して説明する。第二実施形態は、パネルディスプレイ２００が（表示部分を除いて）消灯している場合に、消灯状態を点灯状態に復帰させる方法に関する。図１０は、制御部７３１における制御モードが「所定エリア外在地モード」である場合の画面表示の一例である。
【００６５】
パネルディスプレイ２００の状態表示部１００１に、消灯している理由が表示される。さらに、消灯から復帰する方法として特定ジェスチャ（特定の行動）を行うことを促す表示がジェスチャ指示部１００２に表示される。状態表示部１００１とジェスチャ指示部１００２とにのみ表示することは、表示箇所だけバックライトを点灯させる部分制御バックライトを用いて行われてよい。ユーザは所定エリア外にいるため、ユーザの注視／非注視状態の判別ができない。しかし、ユーザの比較的大きな特定の行動がジェスチャとして認識されることによって、パネルディスプレイ２００が全箇所で点灯し、ユーザはＴＶ受像機１００を視聴可能になる。
【００６６】
第二実施形態の処理の流れを、図２を参照して説明する。ジェスチャ認識部７４０は、特定ジェスチャを認識し、省電力制御部７３０に認識結果を出力する。省電力制御部７３０は、ジェスチャ認識部７４０から特定ジェスチャがあったことを示すジェスチャ情報を受け取ることによって、一旦制御モードをリセットし、パネルディスプレイ２００のバックライト２０５を点灯状態に戻す。以降は、また通常の「視聴エリア外在地モード」に遷移するため、同モードのまま所定時間が経過したらパネルディスプレイ２００の状態表示部１００１とジェスチャ指示部１００２以外の部分を消灯する。
【００６７】
ユーザが家庭のキッチンなどＴＶ受像機１００から遠く離れている位置から「ながら視聴」をしている場合、通常はパネルディスプレイ２００のバックライト２０５を（状態表示部１００１とジェスチャ指示部１００２を除いて）消灯し電力を低減できる。ユーザが視聴したい場合に、ＴＶ受像機１００に近づかなくともバックライト２０５を点灯状態に戻し、ユーザはＴＶ受像機１００を所定時間視聴することができる。
【００６８】
このように、第二実施形態によると、映像表示装置（ＴＶ受像機）は、カメラ７００によって撮影された映像、又は距離センサ８００によって取得された距離画像に基づいてユーザの特定の行動を認識するジェスチャ認識部７４０を備える。省電力制御部７３０は、（例えば、消灯によって）バックライト２０５の消費電力を低減している場合において、ジェスチャ認識部７４０が特定の行動を認識したら、バックライト２０５の状態を消費電力を低減する前の状態に戻す。これにより、ユーザが映像表示装置から離れた位置にいても、必要あれば瞬時にパネルディスプレイ２００に映像を表示させることができる。省電力制御部７３０は、認識可能な特定の行動の内容をパネルディスプレイ２００に表示させるので、予めユーザに特定の行動を知らせておくことができる。
【００６９】
［第三実施形態］
本発明の第三実施形態について、図１１から図１３を参照して説明する。第一実施形態では、距離センサ８００によってユーザの有無が検出された。しかし、第三実施形態では、図１１のようにテレビ受像機１００に搭載された人感センサ７１０によってユーザの有無が検出される。他の構成は、第一実施形態と同じである。人感センサ７１０は、所定温度以上の温度（ユーザの体温）により発せられる赤外線を検出する赤外線検出センサ（熱感知センサ）でよい。なお、人感センサ７１０の個数は、注視を判定するアルゴリズムに依存して変わる。人感センサ７１０は、一つでもよいし、複数あってもよい。
【００７０】
第三実施形態では、ユーザ状態を取得するための手段は、カメラ７００、人感センサ７１０、距離センサ８００、ユーザ状態認識部７２０から構成される。ユーザ状態認識部７２０は、カメラ７００によって撮像したユーザの映像と、人感センサ７１０から得られた人の有無の情報と、距離センサ８００から得られた距離情報から、ユーザ状態を判定する。図１２のように、ユーザ状態認識部７２０は、ＴＶ制御部１１０からの制御信号の他、カメラ７００からの映像信号と、距離センサ８００からの距離画像信号と、人感センサ７１０からの検出信号を受け取る。
【００７１】
ユーザ状態認識部７２０は、ユーザ有無判定部７２９を備える。ユーザ有無判定部７２９は、人感センサ７１０からの信号に基づいて、所定温度以上の温度（人の体温）又はその温度を有する領域の動きによって、ユーザの有無を判定する。ユーザ状態認識部７２０は、ユーザがいない場合には、制御部７２１に信号を送り、注視有無判定部７２５、ユーザ位置判定部７２６における判定処理を止めることもできる。
【００７２】
ユーザ状態判定部７２７は、ＴＶ注視有無判定部７２５から入力された注視有無フラグと、ユーザ有無判定部７２９から入力されたユーザの有無の情報や、ユーザ位置判定部７２６から入力されたユーザ位置情報に基づいて、ユーザ状態を判定する。図５のフローチャートのステップＳ６１において、ユーザ有無判定部７２９からのユーザの有無情報に基づいてユーザの有無が判定される。
【００７３】
図１３は、カメラ７００、距離センサ８００に加えて、人感センサ７１０を用いてユーザ状態を取得する際、各センサの観測可能エリアを示す。各センサの観測可能エリアは、人感センサ７１０、距離センサ８００、カメラ７００の順に広い。特に、人感センサ７１０は、画像を取得しないために広い角度で赤外線を検出してユーザを観測できる。距離センサ８００、カメラ７００は、取得画像のレンズ収差を抑えるため画角は過大にはできない。人感センサ７１０を用いることで、より広い範囲にユーザがいる場合でも、省電力制御部７３０における「所定エリア外在地モード」を適用できる。
【００７４】
このように、第三実施形態によると、映像表示装置（ＴＶ受像機）は、ユーザの有無を感知する人感センサ７１０をさらに備える。ユーザ状態判定部は、ユーザの有無、ユーザの位置、及び、映像表示装置に対する注視の有無に基づいて、より広い位置範囲においてユーザ状態を判定できる。
【００７５】
［第四実施形態］
本発明の第四実施形態について図１４を用いて説明する。第四実施形態において、省電力制御部７３０の制御モードについての設定がユーザ毎に行われる。他の構成は、第一実施形態と同じである。
【００７６】
図１４は、モード設定画面１２００の一例である。モード設定画面１２００により、ユーザは、省電力制御部７３０の制御モードに対して、実際に消灯するか、各ユーザ状態がどれくらい続いたら消灯するかを設定することができる。
【００７７】
モード設定画面１２００は、図２の映像音声出力制御部１２０で作成されパネルディスプレイ２００に表示される。ユーザは、リモコン３００を用いて各設定を行い、設定情報はリモコン信号入力部４００を通じてＴＶ制御部１１０に入力される。ＴＶ制御部１１０は、入力された設定情報に基づいて、ユーザ状態認識部７２０や省電力制御部７３０に制御信号を発行し、各部における設定を変更する。
【００７８】
例えば、図１４で「よそ見による消灯」をオフに設定した場合は、ユーザ状態認識部７２０の処理は停止され、消灯時間を設定した場合には図７のモード遷移に関してカウンタＢの待ち時間が設定した消灯時間に変更される。「エリア外視聴時消灯」をオフにした場合は、ユーザ状態認識部７２０の処理は停止され、消灯時間を設定した場合には図７のモード遷移に関してカウンタＡの待ち時間が設定した消灯時間に変更される。「不在時消灯」をオフにした場合は、ユーザ状態認識部７２０の処理は停止され、消灯時間を設定した場合には図７のモード遷移に関してカウンタＣの待ち時間が設定した消灯時間に変更される。
【００７９】
ユーザは、モード設定画面１２００の「よそ見判定エリア設定」において、リモコン３００を使用して、ステップＳ６２の「所定エリア外在地状態」に関する判定に使用する所定エリアを設定できる。また、ユーザは、モード設定画面１２００の「よそ見検出感度」として、ＴＶ注視有無判定部７２５が注視有無の判定に使用する顔又は視線の所定角度（注視判定パラメータ）を設定できる。
【００８０】
モード設定画面１２００で設定行うユーザは、ユーザ識別部７２８が識別するか、ユーザがリモコンで設定する。モード設定画面１２００での設定内容は、ユーザ毎の参照テーブルとしてメモリに保存され、必要に応じて参照される。
【００８１】
このように、第四実施形態によると、映像表示装置（ＴＶ受像機）は、ユーザの映像からユーザを識別するユーザ識別部を備える。ユーザ状態判定部は、ユーザ毎にユーザ状態を判定し、省電力制御部は、ユーザ毎のユーザ状態に応じてユーザ毎に制御モードを設定する。これにより、各ユーザの所望する態様で、各ユーザに不快感を与えずに消費電力低減を行うことが可能となる。
【００８２】
［第五実施形態］
本発明の第五実施形態について、図１５を参照して説明する。第五実施形態は、ユーザ状態を判定し、判定されたユーザ状態に応じてテレビ受像機を制御するＴＶ制御装置１３００に関する。
【００８３】
ＴＶ制御装置１３００は、外付けのカメラユニット、またはＴＶ受像機１３３０に内蔵可能なモジュールとして提供される。ＴＶ制御装置１３００は、カメラ７００、距離センサ８００、ユーザ状態認識部７２０、省電力制御部７３０、入出力部１３１０、及びモジュール制御部１３２０を備える。人感センサ７１０、ジェスチャ認識部７４０はオプションで設けるものであり省略してよい。
【００８４】
ＴＶ受像機１３３０は、第一実施形態のＴＶ受像機１００中の対応する構成と同じ機能を有する、ＴＶ制御部１１０、映像音声出力部１２０、パネルディスプレイ２００、パネルディスプレイ制御部２１０、リモコン信号入力部４００、スピーカ５００、及び記録装置６００を備える。
【００８５】
ＴＶ制御装置１３００の入出力部１３１０は、ＵＳＢ（Universal Serial Bus）などで構成され、ＴＶ受像機１３３０からの制御信号を受け取り、モジュール制御部１３２０に出力する。また、入出力部１３１０は、省電力制御部７３０から、ユーザ状態に応じたＴＶ受像機１３３０に対する制御信号を受け取り、それをＴＶ受像機１３３０に出力する。ＴＶ受像機１３３０に対する制御信号としては、パネルディスプレイ制御部２１０へのパネルディスプレイ制御命令と、映像音声出力制御部１２０への映像音声出力制御命令とがある。
【００８６】
モジュール制御部１３２０は、入出力部１３１０を通して受け取ったＴＶ受像機１３３０からの制御信号に基づいて、ユーザ状態認識部７２０、省電力制御部７３０、及びジェスチャ認識部７４０を制御する。例えば、モジュール制御部１３２０は、ＴＶ受像機１３３０の制御信号から、ＴＶ受像機１３３０がモード設定画面１２００を表示している場合に、省電力制御部７３０の省電力制御を停止してもよい。
【００８７】
このように、第五実施形態によると、独立した外付けのユニットまたは内蔵モジュールとしてＴＶ制御装置１３００が提供できるので、映像表示装置（ＴＶ受像機）にユーザに不快感を与えない省電力機能を簡便に持たせることができる。
【００８８】
［第六実施形態］
本発明の第六実施形態について図１６を参照して説明する。第六実施形態では、図１１のＴＶ受像機に、環境認識部７５０が追加されている。なお、人感センサ７１０、ジェスチャ認識部７４０はオプションで設けるものであり省略してよい。
【００８９】
環境認識部７５０では、カメラ７００の映像を入力として受け取る。カメラ７００から受け取った画像を画像処理することによって、ＴＶ受像機の周辺環境が注視状態認識を行う上で好ましくない環境にあるか判定する。ここでいう好ましくない環境とは、例えば周辺環境が非常に暗い状態、逆光状態など、カメラ７００の映像にコントラストが生じない状態であり、映像の輝度値などから、これらの状態が判定できる。
【００９０】
好ましくない環境である場合、環境認識部７５０は、省電力制御を行わないように省電力制御部７３０に制御信号を出力する。この制御信号を受け取った省電力制御部７３０は、注視状態に応じた省電力制御を停止する。また、省電力制御部７３０は、注視状態判定が行えない状態である旨を映像音声出力制御部１２０を通してパネルディスプレイ２００に出力する。なお、環境認識部７５０では、距離センサ８００の距離情報を入力として受け取り、距離値に異常があった場合などに、ＴＶ受像機の周辺環境が注視状態認識を行う上で好ましくない環境あると判定してもよい。
【００９１】
このように、第六実施形態によると、映像表示装置（ＴＶ受像機）は、ユーザの映像に基づいて、ユーザの周辺環境が注視の有無を判定可能な環境であるかどうかを判定する環境認識部７５０を備える。ユーザの周辺環境が注視の有無を判定可能な環境である場合に、省電力制御部７３０は、バックライト２０５の消費電力を低減する。このため、注視状態の認識が困難な場合に、誤った省電力制御が行われることを抑制できる。
【００９２】
［第七実施形態］
本発明の第七実施形態について図１７を参照して説明する。第七実施形態では、図１１に示すＴＶ受像機に、視聴履歴生成部１５００が追加されている。なお、人感センサ７１０、ジェスチャ認識部７４０はオプションで設けるものであり省略してよい。第七実施形態は、ユーザごとの視聴履歴によって録画番組を簡便に管理することを目的とする。
【００９３】
視聴履歴生成部１５００は、記録装置６００に記録されている番組コンテンツをユーザが視聴しているかどうかを判定する。ユーザが番組コンテンツを視聴している場合、視聴履歴生成部１５００は、ユーザ状態認識部７２０の顔検出部７２２が検出したユーザの顔の画像から視聴履歴のデータを生成し、視聴履歴のデータを記録装置６００に記録されているその番組コンテンツに関連付けて記録する。ユーザ状態認識部７２０は、顔検出部７２２により、カメラ７００から得られるユーザの映像情報から視聴したユーザの顔を検出し、顔の画像データを視聴履歴生成部１５００に送出する。
【００９４】
視聴履歴生成部１５００は、以下の（i）−（iv）に示すいずれかの条件が成立したときに、ユーザが番組コンテンツを視聴していると判定して、その顔を記録する。
（i）リモコン４００の再生ボタンが押された場合に、ユーザが視聴していると判定して、検出した顔が記録される。
（ii）一定時間以上再生後、リモコン４００の停止ボタンが押された場合に、ユーザが視聴していると判定して、検出した顔が記録される。
（iii）番組コンテンツが一定時間（割合）以上再生された場合に、ユーザが視聴していると判定して、検出した顔が記録される。
（iv）再生している番組コンテンツの記録時間に対してユーザの注視時間が一定割合以上になった場合に、ユーザが視聴していると判定して、検出した顔が記録される。（ユーザの注視の有無は、ユーザ状態認識部７２０のＴＶ注視有無判定部７２５が判定できる。）
また、視聴履歴生成部１５００は、番組録画または録画予約を行った際にも、そのときに検出されたユーザの顔画像を番組録画または録画予約した人の顔として記録装置６００に記録してもよい。番組録画または録画予約は、例えば、リモコン４００その他のユーザインターフェースを介して行える。
【００９５】
上記の判定条件をクリアした際に、ユーザの顔が見つからなかった場合は、視聴履歴を記録しなくてもよい。また、上記の条件が成立し視聴履歴が記録された際には、映像音声出力制御部１２０の制御により、スピーカ５０は記録したことを知らせる音を発し、パネルディスプレイ２００は視聴履歴が記録された旨を表示する。
【００９６】
図１８は、記録装置６００に記録される視聴履歴の一例を示すテーブルである。番組を記録した際に映像と共に記録されるさまざまな番組情報とともに、複数の視聴履歴が記録される。
【００９７】
番組情報とは、番組名や記録した時間、番組のチャンネル番号、ジャンルなどである。記録装置６００は、番組情報とともに、視聴した人物の顔画像、視聴時刻、録画番組を停止した位置、視聴時間などを視聴履歴として記録する。停止位置が記録されるため、再度記録した番組コンテンツを再生する際に前回の停止位置から再生することが可能となる。これにより無駄なコンテンツ再生が行われず、消費電力を低減できる。さらに、ユーザはコンテンツをどこまで見終わったかがわかる。
【００９８】
図１９は、記録装置６００に記録している視聴履歴が、録画番組一覧として、パネルディスプレイ２００に表示された例を示す。録画者の顔画像を表示することで、ユーザは誰が録画した番組かがわかる。ユーザの顔画像と停止位置を表示することで誰がどこまで視聴したかをユーザが録画番組一覧で把握できる。これは、ユーザが録画番組を消すか否かの判断を助ける。また、顔画像を使って明確に複数の視聴履歴が管理できる。別のユーザが途中まで視聴していた番組が新たに再生された場合でも、別のユーザの視聴履歴情報を消すことなく、新たな視聴履歴を記録しておくことが可能となる。
【００９９】
このように、第七実施形態によると、映像表示装置（ＴＶ受像機）は、ユーザの映像を撮影するカメラ７００と、ユーザの映像からユーザの顔を検出する顔検出部７２２と、記録装置６００に記録されている番組コンテンツが再生されている場合、顔検出部７２２が検出したユーザの顔の画像からユーザ毎に視聴履歴のデータを生成し、視聴履歴のデータを番組コンテンツと関連付けて記録する視聴履歴生成部１５００と、を備える。これにより、簡便に録画番組の管理ができる。
【０１００】
本発明は上記の実施の形態に限定されずに、その技術的な思想の範囲内において種々の変更がなしうることは明白である。
【符号の説明】
【０１０１】
１００  ＴＶ受像機（映像表示装置）
１１０  ＴＶ制御部
１２０  映像音声出力部
２００  パネルディスプレイ
２０５  バックライト
２１０  パネルディスプレイ制御部
７００  カメラ（撮像装置）
７１０  人感センサ
７２０  ユーザ状態認識部
７２２  顔検出部
７２４  注視位置算出部
７２５  注視有無判定部
７２６  ユーザ位置判定部
７２７  ユーザ状態判定部
７３０  省電力制御部
８００  距離センサ
【図１】
2011239029.tif 000003
【図２】
2011239029.tif 000004
【図３】
2011239029.tif 000005
【図５】
2011239029.tif 000006
【図６】
2011239029.tif 000007
【図７】
2011239029.tif 000008
【図８】
2011239029.tif 000009
【図９】
2011239029.tif 000010
【図１０】
2011239029.tif 000011
【図１１】
2011239029.tif 000012
【図１２】
2011239029.tif 000013
【図１３】
2011239029.tif 000014
【図１４】
2011239029.tif 000015
【図１５】
2011239029.tif 000016
【図１６】
2011239029.tif 000017
【図１７】
2011239029.tif 000018
【図１８】
2011239029.tif 000019
【図１９】
2011239029.tif 000020
【図４】
2011239029.tif 000021