(57)【要約】【課題】オペレータに違和感を持たせない表示画面のＯＮ／ＯＦＦ制御を行う表示装置を提供する。【解決手段】オペレータを撮影する撮影手段と、撮影手段により撮影された画像に基づき、オペレータの視線方向の検出を行う視線検出部と、表示画面のＯＮ／ＯＦＦの制御を行う表示制御部と、バックライトのＯＮ／ＯＦＦの制御を行うバックライト制御部と、を有し、視線検出部は、オペレータが表示画面の方向を向いていると判断したときに、表示制御部により表示画面をＯＮ状態にし、バックライト制御部によりバックライトをＯＮ状態にする。【選択図】図１
2011048179.tif 000002
【特許請求の範囲】
【請求項１】
オペレータを撮影する撮影手段と、
前記撮影手段により撮影された画像に基づき、前記オペレータの視線方向の検出を行う視線検出部と、
表示画面のＯＮ／ＯＦＦの制御を行う表示制御部と、
バックライトのＯＮ／ＯＦＦの制御を行うバックライト制御部と、を有し、
前記視線検出部は、前記オペレータが前記表示画面の方向を向いていると判断したときに、前記表示制御部により前記表示画面をＯＮ状態にし、前記バックライト制御部によりバックライトをＯＮ状態にすることを特徴とする表示装置。
【請求項２】
前記撮影手段により撮影された画像を、前記オペレータの特徴を抽出し易い画像データに変換する画像処理部を有し、
前記視線検出部は、前記画像処理部により変換された画像データに基づき、前記オペレータの視線方向の検出を行うことを特徴とする請求項１に記載の表示装置。
【請求項３】
前記撮影手段による撮影が所定の時間間隔により行われるように制御するタイミング制御部を有することを特徴とする請求項１または２に記載の表示装置。
【請求項４】
前記画像処理部により変換された画像データに基づき、前記オペレータの両目の間隔を解析し、前記オペレータの視線の動く方向を予測する視線動向予測部を有し、
前記視線動向予測部は、前記オペレータが前記表示画面の方向を向きつつあると判断したときに、前記表示制御部により前記表示画面をＯＮ状態にし、前記バックライト制御部によりバックライトをＯＮ状態にすることを特徴とする請求項２または３に記載の表示装置。
【請求項５】
前記画像処理部により変換された画像データに基づき、前記オペレータの動作と姿勢を解析することにより、前記オペレータの視線の動く方向を予測する姿勢動向予測部を有し、
前記姿勢動向予測部は、前記オペレータが前記表示画面の方向を向きつつあると判断したときに、前記表示制御部により前記表示画面をＯＮ状態にし、前記バックライト制御部によりバックライトをＯＮ状態にすることを特徴とする請求項２から４のいずれか１項に記載の表示装置。
【請求項６】
前記撮影手段は、複数であり、
前記画像処理部は、複数であり、
当該複数の画像処理部それぞれは、当該複数の撮影手段それぞれの撮影した画像を、前記オペレータの特徴を抽出し易い画像データに変換し、
前記視線検出部は、当該複数の画像処理部により変換された画像データに基づき、前記オペレータの視線方向の検出を行うことを特徴とする請求項１から３のいずれか１項に記載の表示装置。
【請求項７】
予めオペレータの画像を登録する画像登録処理部と、
前記撮影手段により撮影されたオペレータの画像が前記画像登録処理部に登録されているかを照合する照合処理部と、を有し、
前記視線検出部は、前記照合処理部により前記オペレータが前記画像登録処理部に登録されていると判定され、かつ、前記オペレータが前記表示画面の方向を向いていると判断したときにのみ、前記表示制御部により前記表示画面をＯＮ状態にし、前記バックライト制御部によりバックライトをＯＮ状態にすることを特徴とする請求項１から３のいずれか１項に記載の表示装置。
【請求項８】
前記視線検出部は、前記照合処理部により前記オペレータが前記画像登録処理部に登録されていると判定され、かつ、前記オペレータが前記表示画面を見られる場所にいると判断したときにのみ、前記表示制御部により前記表示画面をＯＮ状態にし、前記バックライト制御部によりバックライトをＯＮ状態にすることを特徴とする請求項７に記載の表示装置。
【請求項９】
前記視線検出部は、前記オペレータが前記表示画面の方向を向いていないと判断した後、一定の時間が経過してから、前記表示制御部により前記表示画面をＯＦＦ状態にし、前記バックライト制御部によりバックライトをＯＦＦ状態にすることを特徴とする請求項１から８のいずれか１項に記載の表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示画面のＯＮ／ＯＦＦ制御を自動で行う表示装置に関する。
【背景技術】
【０００２】
近年、コピー機などの画像形成装置は、オペレータからの操作入力を受けるタッチパネルなどを用いた表示画面を備えている。しかし、オペレータは、この表示画面を常に見ながら作業を行うわけでない。特に、コピー機などでは、表示画面を必要とするのは、印刷設定のときだけであるため、作業中のほとんどの時間、オペレータは表示画面を必要としない。省電力などを考えると、表示画面の表示は、オペレータが必要とするときだけ行えば良い。
【０００３】
そこで、特許文献１では、カメラを使用してオペレータの視線を解析することにより、オペレータが表示画面をみているかどうかを判断し、オペレータが表示画面を見ているかどうかに従い、表示画面の明るさの増減を行う方法が開示されている。
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１に開示された方法は、所定時間より長い間、オペレータの視線が対象位置に留まったときに、表示画面の明るさを制御するものである。この方式を適用し、表示画面のＯＮ／ＯＦＦ制御を行うと、オペレータが画面を見てから暫くしてから表示状態がＯＮになることになる。これでは、オペレータが画面を見てから表示がＯＮになるまでに時間差が生じ、オペレータが違和感を持ってしまうことになる。
【０００５】
そこで本発明は、上記問題点に鑑みてなされたもので、オペレータに違和感を持たせない表示画面のＯＮ／ＯＦＦ制御を行う表示装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するため、本発明における表示装置は、オペレータを撮影する撮影手段と、前記撮影手段により撮影された画像に基づき、前記オペレータの視線方向の検出を行う視線検出部と、表示画面のＯＮ／ＯＦＦの制御を行う表示制御部と、バックライトのＯＮ／ＯＦＦの制御を行うバックライト制御部と、を有し、前記視線検出部は、前記オペレータが前記表示画面の方向を向いていると判断したときに、前記表示制御部により前記表示画面をＯＮ状態にし、前記バックライト制御部によりバックライトをＯＮ状態にすることを特徴とする。
【発明の効果】
【０００７】
本発明により、オペレータに違和感を持たせない表示画面のＯＮ／ＯＦＦ制御を行うことができる。
【図面の簡単な説明】
【０００８】
【図１】本発明の実施形態に係る表示装置の構成を示す図である。
【図２】本発明の実施形態に係る表示装置の構成を示す図である。
【図３】本発明の実施形態に係る表示装置の構成を示す図である。
【図４】本発明の実施形態に係る表示装置の構成を示す図である。
【図５】本発明の実施形態に係る表示装置の構成を示す図である。
【発明を実施するための形態】
【０００９】
次に、発明を実施するための形態について図面を参照して詳細に説明する。
【００１０】
図１は、本発明の実施形態に係る表示装置の構成を示す図である。デジタルカメラ１とタイミング制御部２と画像処理部３と視線検出部４と表示制御部５と表示部６とバックライト制御部７とバックライト部８とにより構成される。
【００１１】
デジタルカメラ１は、表示部６の表示画面周囲を撮影する撮影手段である。例えば、デジタルカメラ１は、主に前面を撮影するようにすると良い。タイミング制御部２は、タイマ割込み等により、デジタルカメラ１が所定の時間間隔で撮影するようにデジタルカメラ１を制御する。この所定の時間間隔は、２００ｍｓぐらいにすると良い。この２００ｍｓは、人間の動作速度に対して十分に速い時間間隔である。
【００１２】
画像処理部３は、デジタルカメラ１により撮影された画像を処理し、撮影されたオペレータの特徴を抽出し易い画像データに変換する。例えば、顔面と頭髪部を区別しやすいようにコントラストを強調すると良い。
【００１３】
視線検出部４は、画像処理部３により変換された画像データにより、オペレータがデジタルカメラ１に対してどの方向を向いているかを検出する。例えば、公知のパターン認識の技術を応用し、口、鼻、目などの主要部位を抽出し、この主要部位の位置関係から顔の向きを判断する。このように、オペレータの大まかな姿勢（顔の向き）を判断する。そして、例えば、オペレータの両方の目を検出できれば、オペレータが表示画面の方向を向いていると判断する。そして、オペレータが表示画面方向を向いていると判断したときに、表示制御部５とバックライト制御部７に表示をＯＮにする信号を送る。
【００１４】
表示制御部５は、視線検出部４から表示ＯＮの信号を受け取ると、表示部６の表示画面をＯＮ状態にする。同様に、バックライト制御部７は、視線検出部４から表示ＯＮの信号を受け取ると、バックライト部８をＯＮ状態にする。
【００１５】
このようにすることにより、必要な時間帯だけ表示がＯＮ状態となり、省エネ効果がある。また、オペレータが操作画面を見てから表示をＯＮ状態にする制御ではないので、画面のＯＮ／ＯＦＦ制御によりＯＮ状態になるタイミングとオペレータが画面を見るタイミングとのずれによるチラツキなどのオペレータの違和感を解消することができる。
【００１６】
オペレータの視線が画面から外れた後、一定の時間が経過してから表示部６とバックライト部８とをＯＦＦ状態にすると良い。このようにすることにより、画面のＯＮ／ＯＦＦ制御とオペレータが画面を見るタイミングとのずれによるチラツキなどのオペレータの違和感を解消することができる。
【００１７】
オペレータの視線が画面から外れたことの判断は、視線検出部４が行うようにすると良い。例えば、視線検出部４は、オペレータの両方の目が検出できなくなったときを、オペレータの視線が画面から外れたと判断するようにすると良い。そして、この判断をした後、一定の時間が経過してから、表示制御部５とバックライト制御部７に表示をＯＦＦにする信号を送るようにすると良い。
【００１８】
図２は、本発明の実施形態に係る表示装置の構成を示す図である。図２の構成は、図１の構成の視線検出部４を視線動向予測部２１に変更したものである。
【００１９】
視線動向予測部２１は、画像処理部３により変換された画像データを用い、オペレータの視線が画面方向に向いてきていることを判断する。例えば、視線検出部４と同様に、オペレータの視線が画面を全く見ていない状況から、オペレータの大まかな姿勢（顔の向き）を判断した後、オペレータの目を検出できてからは、さらに、この検出された両方の目の間の間隔を検出する。この両目の間の間隔が徐々に広がっているときは、オペレータの視線が画面方向を向きつつあると判断する。このようにすることにより、オペレータが画面を見ようとする状況を予測することができる。そして、オペレータが表示画面方向を向きつつあると判断したときに、表示制御部５とバックライト制御部７に表示をＯＮにする信号を送る。
【００２０】
この構成においても、必要な時間帯だけ表示がＯＮ状態となり、省エネ効果があり、ＯＮ状態になるタイミングとオペレータが画面を見るタイミングとのずれによるチラツキなどのオペレータの違和感を解消することができる。
【００２１】
図３は、本発明の実施形態に係る表示装置の構成を示す図である。図３の構成は、図１の構成のデジタルカメラ１を複数（Ｎ台）のデジタルカメラ１１、１２、・・・、１Ｎにし、これに合わせ、図１の構成における画像処理部３を複数（Ｎ個）の画像処理部３１、３２、・・・、３Ｎにしたものである。
【００２２】
この構成において、タイミング制御部２は、タイマ割込み等により、所定の時間間隔で撮影するように複数のデジタルカメラ１１、１２、・・・、１Ｎを制御する。画像処理部３１、３２、・・・、３Ｎは対応するデジタルカメラ１１、１２、・・・、１Ｎの撮影した画像をそれぞれ処理し、撮影されたオペレータの特徴を抽出し易い画像データに変換する。画像処理部は、複数でなく１つだけにし、この１つの画像処理部によりすべてのデジタルカメラ１１、１２、・・・、１Ｎにより撮影された画像の処理を行うようにしても良い。
【００２３】
このように、デジタルカメラを複数にすることにより、オペレータのあらゆる姿勢に対して、確実に頭部の向きを検出できるようになる。この複数のデジタルカメラは、互いの死角を補完し合う画像を撮影できる位置に配置する。この構成により、より確実にオペレータの視線を検知することができるようになる。よって、ＯＮ状態になるタイミングとオペレータが画面を見るタイミングとのずれによるチラツキなどのオペレータの違和感をより解消することができる。
【００２４】
さらに、複数のデジタルカメラを使用することにより、オペレータの頭部の向きが完全に画面から外れたことを検知することができるようになる。そこで、オペレータの頭部の向きが完全に操作画面から外れてから、一定時限後にＯＦＦ状態に移行する様に制御すれば、画面のＯＮ／ＯＦＦ制御とオペレータが画面を見るタイミングのずれによるチラツキなどのオペレータの違和感をより解消できるようになる。
【００２５】
図４は、本発明の実施形態に係る表示装置の構成を示す図である。図４の構成は、図１の構成の視線検出部４を姿勢動向予測部４１に変更したものである。
【００２６】
姿勢動向予測部４１は、画像処理部３により変換された画像データを用い、オペレータの動作や姿勢を解析し、オペレータの視線が画面方向に向いてきていることを判断する。姿勢動向予測部４１は、オペレータの頭部だけでなく、例えば、「立ち上がる」、「歩く」などの動作から、オペレータが将来、画面を見ることを予測する。そして、オペレータが表示画面方向を向きつつあると判断したときに、表示制御部５とバックライト制御部７に表示をＯＮにする信号を送る。
【００２７】
このようにすることにより、オペレータの頭部の向きだけではなく、姿勢動向予測部４１が「立ち上がる」「歩く」などの動作から、オペレータが画面を将来、見ることを予測して、バックライト及び表示部の制御をＯＮ状態にするので、画面のＯＮ／ＯＦＦ制御によるＯＮ制御のタイミングとオペレータが画面を見るタイミングとのずれによるチラツキなどのオペレータの違和感をより解消できるようになる。
【００２８】
図５は、本発明の実施形態に係る表示装置の構成を示す図である。図５の構成は、図１の構成に、画像登録処理部５１と照合処理部５２を加えたものである。
【００２９】
画像登録処理部５１には、オペレータを、あらかじめ、顔や身体の特徴をデジタルカメラ１により撮影した画像が登録されている。
【００３０】
照合処理部５２は、タイミング制御部２により制御されたデジタルカメラ１により撮影され、画像処理部３により変換された画像データに写っているオペレータの画像が、画像登録処理部５１に登録された画像の中にあるときに、このオペレータは登録されたオペレータであると判定する。
【００３１】
視線検出部４は、図１の構成の際と同様に、オペレータが表示画面の方向を向いていると判断し、この構成では、オペレータが表示画面の方向を向いており、さらに、このオペレータが登録されたオペレータであると照合処理部５２により判定されたときにだけ、表示制御部５とバックライト制御部７に表示をＯＮにする信号を送るようにする。
【００３２】
このようにすることにより、特定のオペレータが操作画面を見ようとするときだけ、バックライト及び表示部の制御をＯＮ状態にすることができる。よって、セキュリティーを確保することができるようになる。
【００３３】
また、照合処理部５２により、画像データに写っているオペレータの画像が、登録されたオペレータであると判定されたときに、このオペレータの向きに関わらず、表示制御部５とバックライト制御部７に表示をＯＮにする信号が送られるようしても良い。
【００３４】
このようにすることにより、特定のオペレータが画面を見られる場所にいるときにだけ、バックライト及び表示部の制御をＯＮ状態にできるため、セキュリティーを確保することができ、かつ、画面のＯＮ／ＯＦＦ制御によるＯＮ制御のタイミングとオペレータが画面を見るタイミングとのずれによるチラツキなどのオペレータの違和感を解消できる。
【００３５】
以上、本発明の好適な実施の形態により本発明を説明した。ここでは特定の具体例を示して本発明を説明したが、特許請求の範囲に定義された本発明の広範囲な趣旨および範囲から逸脱することなく、これら具体例に様々な修正および変更が可能である。
【００３６】
また、本発明における表示装置は、前記撮影手段により撮影された画像を、前記オペレータの特徴を抽出し易い画像データに変換する画像処理部を有し、前記視線検出部は、前記画像処理部により変換された画像データに基づき、前記オペレータの視線方向の検出を行うようにしても良い。
【００３７】
また、本発明における表示装置は、前記撮影手段による撮影が所定の時間間隔により行われるように制御するタイミング制御部を有するようにしても良い。
【００３８】
また、本発明における表示装置は、前記画像処理部により変換された画像データに基づき、前記オペレータの両目の間隔を解析し、前記オペレータの視線の動く方向を予測する視線動向予測部を有し、前記視線動向予測部は、前記オペレータが前記表示画面の方向を向きつつあると判断したときに、前記表示制御部により前記表示画面をＯＮ状態にし、前記バックライト制御部によりバックライトをＯＮ状態にするようにしても良い。
【００３９】
また、本発明における表示装置は、前記画像処理部により変換された画像データに基づき、前記オペレータの動作と姿勢を解析することにより、前記オペレータの視線の動く方向を予測する姿勢動向予測部を有し、前記姿勢動向予測部は、前記オペレータが前記表示画面の方向を向きつつあると判断したときに、前記表示制御部により前記表示画面をＯＮ状態にし、前記バックライト制御部によりバックライトをＯＮ状態にするようにしても良い。
【００４０】
また、本発明における表示装置は、前記撮影手段は、複数であり、前記画像処理部は、複数であり、当該複数の画像処理部それぞれは、当該複数の撮影手段それぞれの撮影した画像を、前記オペレータの特徴を抽出し易い画像データに変換し、前記視線検出部は、当該複数の画像処理部により変換された画像データに基づき、前記オペレータの視線方向の検出を行うようにしても良い。
【００４１】
また、本発明における表示装置は、予めオペレータの画像を登録する画像登録処理部と、前記撮影手段により撮影されたオペレータの画像が前記画像登録処理部に登録されているかを照合する照合処理部と、を有し、前記視線検出部は、前記照合処理部により前記オペレータが前記画像登録処理部に登録されていると判定され、かつ、前記オペレータが前記表示画面の方向を向いていると判断したときにのみ、前記表示制御部により前記表示画面をＯＮ状態にし、前記バックライト制御部によりバックライトをＯＮ状態にするようにしても良い。
【００４２】
また、本発明における表示装置は、前記視線検出部は、前記照合処理部により前記オペレータが前記画像登録処理部に登録されていると判定され、かつ、前記オペレータが前記表示画面を見られる場所にいると判断したときにのみ、前記表示制御部により前記表示画面をＯＮ状態にし、前記バックライト制御部によりバックライトをＯＮ状態にするようにしても良い。
【００４３】
また、本発明における表示装置は、前記視線検出部は、前記オペレータが前記表示画面の方向を向いていないと判断した後、一定の時間が経過してから、前記表示制御部により前記表示画面をＯＦＦ状態にし、前記バックライト制御部によりバックライトをＯＦＦ状態にするようにしても良い。
【符号の説明】
【００４４】
１    デジタルカメラ
２    タイミング制御部
３    画像処理部
４    視線検出部
５    表示制御部
６    表示部
７    バックライト制御部
８    バックライト部
１１    デジタルカメラ
１２    デジタルカメラ
１Ｎ    デジタルカメラ
２１    視線動向部
３１    画像処理部
３２    画像処理部
３Ｎ    画像処理部
４１    姿勢動向部
５１    画像登録処理部
５２    照合処理部
【先行技術文献】
【特許文献】
【００４５】
【特許文献１】特開２００６−２１９０００号公報
【図１】
2011048179.tif 000003
【図２】
2011048179.tif 000004
【図３】
2011048179.tif 000005
【図４】
2011048179.tif 000006
【図５】
2011048179.tif 000007