(57)【要約】【課題】映像を見ているユーザの利便性を向上させる。【解決手段】表示部１４は映像を表示する。カメラ１１は、表示部１４に表示される映像を見ているユーザを撮像する。処理部１３は、カメラ１１により撮影された画像を解析してユーザが睡眠状態にあるか否か判定し、睡眠状態にあると判定したとき特定の処理を実行する。例えば、ユーザが睡眠状態に入ったと推測される時点の映像データの再生位置を記録する。また、ユーザが睡眠状態に入ったと推測される時点から、放送番組の映像を録画する。【選択図】図２
2014143561.tif 000002
【特許請求の範囲】
【請求項１】
映像を表示する表示部と、
前記表示部に表示される映像を見ているユーザを撮像するための撮像部と、
前記撮像部により撮像された画像を解析して前記ユーザが睡眠状態にあるか否か判定し、睡眠状態にあると判定したとき特定の処理を実行する処理部と、
を備えることを特徴とする表示装置。
【請求項２】
前記処理部は、前記特定の処理として前記ユーザが睡眠状態に入ったと推測される時点の映像データの再生位置を記録することを特徴とする請求項１に記載の表示装置。
【請求項３】
前記表示部は、放送されている映像を表示し、
前記処理部は、前記特定の処理として前記ユーザが睡眠状態に入ったと推測される時点から、前記映像を録画することを特徴とする請求項１に記載の表示装置。
【請求項４】
前記処理部は、前記特定の処理として前記ユーザが睡眠状態に入ったと推測される場合、前記表示部の電源をオフまたは前記表示部をスリープさせることを特徴とする請求項１に記載の表示装置。
【請求項５】
前記処理部は、前記撮像部により撮像された画像内に複数のユーザが存在する場合にて、全てのユーザが睡眠状態にあると判定した場合、前記表示部の電源をオフまたは前記表示部をスリープさせることを特徴とする請求項１から４のいずれかに記載の表示装置。
【請求項６】
映像を表示する表示部と、
前記表示部に表示される映像を見ているユーザを撮像するための撮像部と、
前記撮像部により撮像された画像を解析して前記ユーザが睡眠状態にあるか否か判定し、睡眠状態にあると判定したとき特定の処理を実行する処理部と、
を備えることを特徴とする表示システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、テレビ番組、パッケージコンテンツ等の映像を表示する表示装置および表示システムに関する。
【背景技術】
【０００２】
テレビ番組、ＤＶＤ／ＢＤコンテンツ等を視聴中に寝てしまうことがある。テレビ番組の場合は途中から見逃すことになる。コンテンツ鑑賞の場合は見逃すことにはならないが、後から視聴できなかった部分の再生箇所をシークする必要がある。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−２５３９８１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
本発明はこうした状況に鑑みなされたものであり、その目的は、映像を見ているユーザの利便性を向上させる技術を提供することにある。
【課題を解決するための手段】
【０００５】
上記課題を解決するために、本発明のある態様の表示装置は、映像を表示する表示部と、表示部に表示される映像を見ているユーザを撮像するための撮像部と、撮像部により撮像された画像を解析してユーザが睡眠状態にあるか否か判定し、睡眠状態にあると判定したとき特定の処理を実行する処理部と、を備える。
【０００６】
なお、以上の構成要素の任意の組み合わせ、本発明の表現を方法、装置、システム、記録媒体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。
【発明の効果】
【０００７】
本発明によれば、映像を見ているユーザの利便性を向上させることができる。
【図面の簡単な説明】
【０００８】
【図１】本発明の実施の形態に係る表示装置および表示システムの構成例を示す図である。
【図２】本発明の実施の形態に係る表示装置および表示システムのハードウェア機能ブロックを示す図である。
【図３】本発明の実施の形態に係る表示装置および表示システムの実施例１を説明するための機能ブロック図である。
【図４】実施例１に係る表示装置および表示システムの動作を説明するためのフローチャートである。
【図５】実施例１の変形例に係る表示装置および表示システムの動作を説明するためのフローチャートである。
【図６】本発明の実施の形態に係る表示装置および表示システムの実施例２を説明するための機能ブロック図である。
【図７】実施例２に係る表示装置および表示システムの動作を説明するためのフローチャートである。
【図８】実施例２の変形例に係る表示装置および表示システムの動作を説明するためのフローチャートである。
【図９】本発明の実施の形態に係る表示装置および表示システムを車両用のリアモニタに適用する例を説明するための図である。
【発明を実施するための形態】
【０００９】
図１は、本発明の実施の形態に係る表示装置１０及び表示システム１００の構成例を示す図である。表示システム１００は表示装置１０及び記録再生装置２０を備える。本構成例では表示装置１０としてテレビ、記録再生装置２０としてブルーレイレコーダを用いる例を想定する。テレビとブルーレイレコーダは、例えば、ＨＤＭＩ（登録商標）ケーブルにより接続される。
【００１０】
表示装置１０はカメラ１１を備える。カメラ１１は、表示装置１０に表示される映像を見ているユーザ（視聴者）を撮影するためのカメラである。カメラ１１はベゼル内に埋め込まれるように設置される。上辺のベゼルの中央付近に設置すると、広範囲のユーザ存在エリアを撮影できる。また下辺ではなく上辺のベゼルに設置することにより、障害物により視野が遮られる可能性を低下させることができる。なお、このカメラ１１の設置方法は一例であり、他の設置方法でもよい。例えば、フレームの外に外付けで設置してもよい。
【００１１】
図２は、本発明の実施の形態に係る表示装置１０及び表示システム１００のハードウェア機能ブロックを示す図である。表示装置１０はカメラ１１、チューナ１２、処理部１３、表示部１４を備える。カメラ１１は、ＣＭＯＳイメージセンサ又はＣＣＤイメージセンサ等の固体撮像素子を備える。固体撮像素子は、撮像した画像を処理部１３に出力する。チューナ１２はテレビ放送を受信し、受信した映像信号および音声信号を処理部１３に出力する。処理部１３は表示装置１０全体を制御する。処理部１３の具体的な処理は後述する。表示部１４は液晶ディスプレイ、プラズマディスプレイ又は有機ＥＬディスプレイを備え、処理部１３から供給される画像データを表示する。
【００１２】
記録再生装置２０は処理部２１および記録媒体２２を備える。処理部２１は記録再生装置２０全体を制御する。処理部２１の具体的な処理は後述する。記録媒体２２は、ハードディスク、ＳＳＤ（Solid State Drive）、ブルーレイディスク、ＤＶＤディスク、メモリカード（例えば、ＳＤメモリカード、ＵＳＢメモリ）の少なくとも一つが該当する。ブルーレイディスク、ＤＶＤディスクは着脱自在である。なお一般的な記録再生装置２０は、テレビチューナを搭載しているが、図２では省略して描いている。
【００１３】
図３は、本発明の実施の形態に係る表示装置１０及び表示システム１００の実施例１を説明するための機能ブロック図である。実施例１では表示システム１００のレジューム機能に注目する。実施例１の処理は、ブルーレイディスク、ＤＶＤディスク等に記録されたパッケージコンテンツの視聴中、またはハードディスク等に録画された放送番組の視聴中に発動される。
【００１４】
実施例１に係る表示装置１０の処理部１３は、画像解析部１３１、睡眠状態検出部１３２、レジューム位置決定部１３３、電源管理部１３４を備える。処理部１３の構成は、ハードウェア的には、任意のコンピュータのプロセッサ、メモリ、その他のＬＳＩで実現でき、ソフトウェア的にはメモリにロードされたプログラムなどによって実現されるが、ここではそれらの連携によって実現される機能ブロックを描いている。したがって、これらの機能ブロックがハードウェアのみ、ソフトウェアのみ、またはそれらの組み合わせによっていろいろな形で実現できることは、当業者には理解されるところである。
【００１５】
画像解析部１３１は、カメラ１１の固体撮像素子により撮像された画像を解析する。睡眠状態検出部１３２は画像解析結果をもとに、画像に写っている視聴者が睡眠状態にあるか否か判定する。この判定処理には周知の顔表情認識技術を用いることができる。例えば、顔器官の特徴点を抽出して表情を認識する。睡眠状態検出部１３２は、視聴者の目が閉じた状態が一定期間以上継続した場合、眠っている状態と判定する。また視聴者の顔が一定期間以上、俯いている場合、眠っている状態と判定する。睡眠状態検出部１３２は、視聴者が睡眠状態に入ったことを検出するとレジューム位置決定部１３３及び電源管理部１３４に通知する。
【００１６】
レジューム位置決定部１３３は、視聴者が睡眠状態に入ったと推測される時点の再生位置を特定する。その再生位置は、レジューム位置決定部１３３により睡眠状態に突入と判定された時点の再生位置であってもよいし、その位置から一定時間（例えば、１分）遡った位置であってもよい。レジューム位置決定部１３３は、特定した再生位置を記録再生装置２０の処理部２１及び電源管理部１３４に通知する。電源管理部１３４はレジューム位置決定部１３３から通知を受けると、表示装置１０をスリープ状態に遷移するか、電源をシャットダウンする。
【００１７】
実施例１に係る記録再生装置２０の処理部２１は、レジューム位置取得部２１１、再生制御部２１２、レジューム位置書込部２１３、電源管理部２１４を備える。処理部２１の構成も、ハードウェアのみ、ソフトウェアのみ、またはそれらの組み合わせによっていろいろな形で実現できる。
【００１８】
レジューム位置取得部２１１は、レジューム位置決定部１３３から通知される再生位置を取得する。再生制御部２１２は、レジューム位置取得部２１１により再生位置が取得されると、コンテンツ再生を終了する。レジューム位置書込部２１３は、再生されていたコンテンツファイルの所定の領域に、通知されてきた再生位置をレジューム位置として記録する。当該コンテンツファイルが次回再生される場合、当該レジューム位置が読み出され、再生制御部２１２は当該レジューム位置から再生を開始する。電源管理部２１４は、レジューム位置の記録が終了すると記録再生装置２０をスリープ状態に遷移するか、電源をシャットダウンする。
【００１９】
図４は、実施例１に係る表示装置１０及び表示システム１００の動作を説明するためのフローチャートである。画像解析部１３１は、カメラ１１により撮影された画像を解析する（Ｓ１０）。睡眠状態検出部１３２は画像に写っている視聴者が睡眠状態であるか否か判定する（Ｓ１１）。睡眠状態と判定した場合（Ｓ１１のＹ）、電源管理部１３４は視聴者に省電力モードへの移行を告知する（Ｓ１２）。例えば、表示部１４に「３０秒後に省電力モードに移行します。（はい）、（いいえ）」などといったメッセージを表示させる。
【００２０】
視聴者がリモートコントローラに、省電力モードへの移行を拒否する操作を実行した場合（Ｓ１３のＹ）、ステップＳ１１に戻る。省電力モードへの移行を拒否する操作を実行しなかった場合（Ｓ１３のＮ）、レジューム位置決定部１３３は、記録再生装置２０の記録媒体２２に記録されたコンテンツの再生中であるか否か判定する（Ｓ１４）。再生中の場合（Ｓ１４のＹ）、レジューム位置決定部１３３は、視聴者が睡眠状態に入ったと推測される時点の再生位置を特定し、レジューム位置書込部２１３は、その再生位置を記録媒体２２に記録する（Ｓ１５）。再生中でない場合（Ｓ１４のＮ）、ステップＳ１５をスキップする。電源管理部１３４は、レジューム位置が記録された後、表示装置１０を省電力モードへ移行させる（Ｓ１７）。
【００２１】
以上説明したように実施例１によれば、コンテンツの視聴中に寝てしまった場合にて、次回再生時に寝てしまった時点からコンテンツを再生できる。従って視聴者は次回再生時に、寝てしまった時点の再生位置をシークする必要がなく、視聴者の利便性を高めることができる。また視聴者が寝た後、表示装置１０を省電力モードへ移行させることにより表示装置１０の消費電力を低減できる。
【００２２】
図５は、実施例１の変形例に係る表示装置１０及び表示システム１００の動作を説明するためのフローチャートである。当該変形例では複数の視聴者が存在する場合の例である。図５のフローチャートのステップＳ１０〜ステップＳ１５までの処理は、図４のフローチャートのステップＳ１０〜ステップＳ１５までの処理と同様であるため、その説明を適宜省略する。なお図５のステップＳ１１では、画像に写っている複数の視聴者のうち一人でも睡眠状態にあれば条件充足となる。
【００２３】
記録媒体２２にレジューム位置が記録された後（Ｓ１５）、画像解析部１３１は他に起きている視聴者が存在するか否か判定する（Ｓ１６）。存在する場合（Ｓ１６のＹ）、ステップＳ１１に戻り、ステップＳ１１〜ステップＳ１５までの処理を繰り返す。従って複数の視聴者が時間差をおいて睡眠状態に入った場合、それぞれの睡眠状態に入った時点のレジューム位置データが生成されることになる。全ての視聴者が睡眠状態にある場合（Ｓ１６のＮ）、電源管理部１３４は、表示装置１０を省電力モードへ移行させる（Ｓ１７）。
【００２４】
以上説明したように実施例１の変形例によれば、複数の視聴者がコンテンツを視聴している場合、それぞれの視聴者の寝た時点のレジューム位置を記録することにより、全ての視聴者の利便性を高めることができる。また起きている視聴者が存在する時点で、表示装置１０がスリープしてしまうことを防止できる。
【００２５】
図６は、本発明の実施の形態に係る表示装置１０及び表示システム１００の実施例２を説明するための機能ブロック図である。実施例２では表示システム１００の録画機能に注目する。実施例２の処理は、放送されているテレビ番組の視聴中に発動される。
【００２６】
実施例２に係る表示装置１０の処理部１３は、画像解析部１３１、睡眠状態検出部１３２、電源管理部１３４、画像メモリ１３５、録画制御部１３６を備える。以下、実施例１と重複する説明は適宜省略する。
【００２７】
画像メモリ１３５は、受信されたテレビ放送番組の映像／音声データを一時記憶する。画像メモリ１３５はリングバッファ状に構成され、現在から一定期間過去までの映像／音声データを記憶する。例えば、直近３分間分の映像／音声データを常時記憶する。
【００２８】
睡眠状態検出部１３２は、視聴者が睡眠状態に入ったことを検出すると録画制御部１３６及び電源管理部１３４に通知する。録画制御部１３６は、視聴者が睡眠状態に入ったと推測される時点から、放送番組の録画を開始するよう制御する。録画制御部１３６は、受信された放送番組の映像／音声データを記録再生装置２０に転送して、記録媒体２２に録画するよう指示する。その際、録画制御部１３６は、視聴者が睡眠状態に入ったと判定された時点において、画像メモリ１３５に記憶された最も過去の映像／音声データから録画するよう制御することができる。電源管理部１３４は録画が開始される際、表示部１４に画面表示を終了させる。また電源管理部１３４は録画中の番組が終了すると、表示装置１０全体をスリープ状態に遷移するか、表示装置１０全体の電源をシャットダウンする。
【００２９】
なお録画制御部１３６は、放送番組のジャンルによって放送番組を録画するかしないか使い分けてもよい。例えば、視聴者が睡眠状態に入った時点の番組がドラマ、映画、スポーツ中継であれば録画するが、ニュース、バラエティであれば録画しないといった設定が考えられる。
【００３０】
実施例２に係る記録再生装置２０の処理部２１は、電源管理部２１４、録画部２１５を備える。録画部２１５は、録画制御部１３６から録画指示および録画データを受信すると録画データを記録媒体２２に記録する。電源管理部２１４は、録画が終了すると記録再生装置２０をスリープ状態に遷移するか、電源をシャットダウンする。
【００３１】
図７は、実施例２に係る表示装置１０及び表示システム１００の動作を説明するためのフローチャートである。画像解析部１３１は、カメラ１１により撮影された画像を解析する（Ｓ２０）。睡眠状態検出部１３２は画像に写っている視聴者が睡眠状態であるか否か判定する（Ｓ２１）。睡眠状態と判定した場合（Ｓ２１のＹ）、電源管理部１３４は視聴者に省電力モードへの移行を告知する（Ｓ２２）。
【００３２】
視聴者が省電力モードへの移行を拒否する操作を実行した場合（Ｓ２３のＹ）、ステップＳ２１に戻る。省電力モードへの移行を拒否する操作を実行しなかった場合（Ｓ２３のＮ）、録画制御部１３６は、テレビ放送番組の映像を表示部１４に表示中であるか否か判定する（Ｓ２４）。表示中の場合（Ｓ２４のＹ）、録画制御部１３６は、視聴者が睡眠状態に入ったと推測される時点から記録再生装置２０に放送番組の録画を開始させる（Ｓ２６）。録画が開始されると電源管理部１３４は、画面表示を終了させる（Ｓ２７）。電源管理部１３４は、放送番組が終了すると（Ｓ２８のＹ）、表示装置１０全体を省電力モードへ移行させる（Ｓ２９）。テレビ放送番組の映像の表示中でない場合（Ｓ２４のＮ）、ステップＳ２６、Ｓ２７をスキップする。
【００３３】
以上説明したように実施例２によれば、放送番組の視聴中に寝てしまった場合にて、寝てしまった以降の番組部分を録画する。これにより、見逃してしまった部分を後に視聴することができ、視聴者の利便性を高めることができる。また録画開始時に表示部１４を、番組の終了後、表示装置１０全体を省電力モードへ移行させることにより表示装置１０の消費電力を低減できる。
【００３４】
図８は、実施例２の変形例に係る表示装置１０及び表示システム１００の動作を説明するためのフローチャートである。当該変形例は上述の睡眠検出時の録画制御が発動する視聴者を、特定の視聴者に限定する例である。当該変形例では睡眠状態検出部１３２の図示しない顔登録メモリに、上述の録画制御を発動すべき視聴者の顔画像を登録する。この顔画像はカメラ１１により撮影できる。
【００３５】
図８のフローチャートのステップＳ２０〜ステップＳ２４までの処理は、図７のフローチャートのステップＳ２０〜ステップＳ２４までの処理と同様であるため、その説明を適宜省略する。
【００３６】
視聴者が睡眠状態に入った時点でテレビ放送番組の映像が表示部１４に表示されている場合（Ｓ２４のＹ）、睡眠状態検出部１３２は、睡眠状態に入った視聴者が、顔画像メモリに登録されている視聴者であるか否か判定する（Ｓ２５）。登録されている視聴者である場合（Ｓ２５のＹ）、録画制御部１３６は、視聴者が睡眠状態に入ったと推測される時点から記録再生装置２０に放送番組の録画を開始させる（Ｓ２６）。録画が開始されると電源管理部１３４は、画面表示を終了させる（Ｓ２７）。電源管理部１３４は、放送番組が終了すると（Ｓ２８のＹ）、表示装置１０全体を省電力モードへ移行させる（Ｓ２９）。テレビ放送番組の映像の表示中でない場合（Ｓ２４のＮ）、ステップＳ２５、Ｓ２６、Ｓ２７をスキップする。
【００３７】
以上説明したように実施例２の変形例によれば、上述の録画制御が発動する視聴者を限定することにより、不要な録画を抑制できる。例えば普段あまり訪問しない客人の録画データは不要である。不要な録画データは記録媒体２２の容量を圧迫する要因となる。本変形例によれば、睡眠検出時の録画制御による記録媒体２２の容量圧迫を抑制できる。また自己が視聴しない他人の録画データを削除する手間をなくすことができる。
【００３８】
以上、本発明を実施の形態をもとに説明した。こられ実施の形態は例示であり、それらの各構成要素や各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。
【００３９】
これまで実施の形態に係る表示システム１００の構成例としてテレビとレコーダの組み合わせを例に説明した。表示システム１００の別の構成例としてハードディスク内蔵の録画機能付きテレビであってもよい。即ち、表示装置１０単体であってもよい。
【００４０】
実施の形態に係る表示装置１０及び表示システム１００は、的確なタイミングで省電力モードへ移行できるため、省電力化が要求される車載用途に適している。近年、車両に搭載される電装品の数および消費電力が増大しており電装品の省電力化が要求されている。実施の形態に係る表示装置１０及び表示システム１００は、カーナビゲーションシステムやディスプレイオーディオにおける本体とディスプレイにも適用可能である。さらに近年、後部座席に乗車している人向けのリアモニタが普及してきている。
【００４１】
図９は、本発明の実施の形態に係る表示装置１０及び表示システム１００を車載用のリアモニタに適用する例を説明するための図である。表示装置１０としてのリアモニタは、例えば図９に示すように前部座席シート２００のヘッドレストの裏側に設置される。リアモニタは、ダッシュボード上またはダッシュボード内に設置されたカーナビゲーションシステム又はディスプレイオーディオに接続される。
【００４２】
上述のテレビがリアモニタに、上述のレコーダがカーナビゲーションシステム又はディスプレイオーディオに読み替えることにより、図１〜図８の説明がそのままあてはまる。前部座席の運転者は、後部座席の同乗者が寝ているか否か判断することが難しい。従って後部座席の同乗者が寝ていても、リアモニタの電源がオンのままになっていることがある。この点、本実施の形態によればカメラ１１により撮影された画像をもとにリアモニタの電源をオフできるため、より効率的な電源管理が可能である。リアモニタの消費電力を低減できれば、車載バッテリ（通常、１２Ｖ出力の鉛バッテリ）の劣化抑制にもつながる。
【００４３】
なお後部座席に乗車している人の表情検出精度を上げるために以下のような制御が実行されてもよい。夜間時は車両内が暗くなるため表情を上手く撮影できない場合がある。これに対し、カメラ１１の近傍に補助光照射部を設け、乗車している人に向けて補助光を照射してもよい。また夜間時は露光時間を長くしてもよい。さらに撮像素子の感度を上げてもよい。
【００４４】
また車両走行時はカメラ１１も振動を受ける。従って撮影された画像がぶれる場合がある。カーナビゲーションシステムはジャイロセンサを搭載している。処理部１３の図示しない画像補正部は、当該ジャイロセンサから出力される角速度信号をもとに、撮影された画像の振れを打ち消すように補正してもよい。
【００４５】
さらに実施の形態に係る表示装置１０及び表示システム１００は、テレビや車載ディスプレイに限らずスマートフォン、タブレット、ノート型ＰＣ、デスクトップ型ＰＣにも適用可能である。例えば、スマートフォンでワンセグメント放送を視聴時、ユーザが睡眠状態に入ると視聴中の番組の録画を開始する。また実施の形態に係る表示装置１０及び表示システム１００は、飛行機や長距離バスに設置されるプライベートモニタにも適用可能である。
【符号の説明】
【００４６】
１００  表示システム、  １０  表示装置、  １１  カメラ、  １２  チューナ、  １３  処理部、  １４  表示部、  １３１  画像解析部、  １３２  睡眠状態検出部、  １３３  レジューム位置決定部、  １３４  電源管理部、  １３５  画像メモリ、  １３６  録画制御部、  ２０  記録再生装置、  ２１  処理部、  ２１１  レジューム位置取得部、  ２１２  再生制御部、  ２１３  レジューム位置書込部、  ２１４  電源管理部、  ２１５  録画部、  ２２  記録媒体、  ２００  シート。
【図１】
2014143561.tif 000003
【図２】
2014143561.tif 000004
【図３】
2014143561.tif 000005
【図４】
2014143561.tif 000006
【図５】
2014143561.tif 000007
【図６】
2014143561.tif 000008
【図７】
2014143561.tif 000009
【図８】
2014143561.tif 000010
【図９】
2014143561.tif 000011