(57)【要約】【課題】  操作部などによって、情報の表示が影響を受けることなく、瞬読性の高い情報表示を行うことが可能な操作情報表示装置を提供する。【解決手段】  使用者６が操作する操作部５の操作に関する情報を表示する表示部２と、表示部２を制御する制御部３とを備えた操作情報表示装置１において、使用者６の視線が操作部５に近接したか否かを検出する視線検出手段４を備え、制御部３は、視線検出手段４からの情報に基づいて使用者６の視線が操作部５に近接したと判断した場合に、操作部５に関する情報を表示部２に表示することによって、操作部５に関する情報を表示部２に表示するものである。【選択図】図２
2018081411.tif 000002
【特許請求の範囲】
【請求項１】
使用者が操作する操作部の操作に関する情報を表示する表示部と、前記表示部を制御する制御部とを備えた操作情報表示装置において、前記使用者の視線が前記操作部に近接したか否かを検出する視線検出手段を備え、前記制御部は、前記視線検出手段からの情報に基づいて前記使用者の視線が前記操作部に近接したと判断した場合に、前記操作部に関する情報を前記表示部に表示することを特徴とする操作情報表示装置。
【請求項２】
前記表示部は、透過型の頭部装着型表示器であり、前記頭部装着型表示器を用いて前記操作部に関する情報を前記操作部および／またはその近傍に重畳表示させることを特徴とする請求項１に記載の操作情報表示装置。
【請求項３】
前記視線検出手段は、前記使用者の視線を撮像する視線撮像手段と、周辺を撮像する周辺撮像手段と、からなり、前記制御部は、前記視線撮像手段と前記周辺撮像手段からの情報に基づいて、前記使用者の視線が前記操作部に近接したと判断することを特徴とする請求項１に記載の操作情報表示装置。
【請求項４】
前記操作部に対する前記使用者の一部の位置を検出する非接触判定手段４を備え、前記制御部は、前記非接触判定手段４からの情報に基づいて、前記使用者の一部が前記操作部に近接したと判断することを特徴とする請求項１に記載の操作情報表示装置。
【請求項５】
前記操作部に対する前記使用者の一部の位置を検出する接触判定手段を備え、前記制御部は、前記接触判定手段からの情報に基づいて、前記使用者の一部が前記操作部に接したと判断することを特徴とする請求項１に記載の操作情報表示装置。
【請求項６】
使用者が操作する操作部の操作に関する情報を表示部に表示する操作情報表示方法において、前記使用者の視線が前記操作部に近接したか否かを検出する視線検出手段からの情報に基づいて前記使用者の視線が前記操作部に近接したと判断した場合に、前記操作部に関する情報を前記表示部に表示することを特徴とする操作情報表示方法。
【請求項７】
操作情報表示装置のコンピュータに、使用者の視線が操作部に近接したか否かを検出した情報に基づいて前記使用者が前記操作部に近接したと判断した場合に、前記操作部に関する情報を表示部に表示させる制御部として機能させることを特徴とする操作情報表示プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、操作情報表示装置、操作情報表示方法および操作情報表示プログラムに関し、特に、車両の機器を操作する操作部に関する情報を表示する操作情報表示装置、操作情報表示方法および操作情報表示プログラムに関する。
【背景技術】
【０００２】
従来の操作情報表示装置は、操作に関する情報を表示するタッチパネル部と、タッチパネル部の周囲を囲むように配置され、回転可能なダイヤル操作部とを備えている。例えば、タッチパネル部により、風量調節と温度調節とを選択し、その選択された操作をダイヤル操作部により操作する。これにより、車両用操作装置は、操作感がよく、かつ、誤操作を防止でき、構造の簡素化や省スペース化が図れる（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１５−０９３４９３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
従来の操作情報表示装置は、操作に関する情報を表示するタッチパネル部の設置位置がダイヤル操作部の内側であるため、ダイヤル操作部のサイズに起因してタッチパネル部の表示画面サイズが小さくなることによって、必要な情報を表示する際に瞬読性が芳しくないという問題点があった。
【０００５】
そこで本発明は、操作部などによって情報の表示が影響を受けることなく、瞬読性の高い情報表示を行うことが可能な操作情報表示装置、操作情報表示方法および操作情報表示プログラムを提供することにある。
【課題を解決するための手段】
【０００６】
本発明の操作情報表示装置は、使用者が操作する操作部の操作に関する情報を表示する表示部と、前記表示部を制御する制御部とを備えた操作情報表示装置において、前記使用者の視線が前記操作部に近接したか否かを検出する視線検出手段と、前記制御部は、前記視線検出手段からの情報に基づいて前記使用者の視線が前記操作部に近接したと判断した場合に、前記操作部に関する情報を前記表示部に表示するものである。
【０００７】
また、操作情報表示方法は、使用者が操作する操作部の操作に関する情報を表示部に表示する操作情報表示方法において、前記使用者の視線が前記操作部に近接したか否かを検出する視線検出手段からの情報に基づいて前記使用者の視線が前記操作部に近接したと判断した場合に、前記操作部に関する情報を前記表示部に表示するものである。
【０００８】
また、操作情報表示プログラムは、操作情報表示装置のコンピュータに、使用者の視線が操作部に近接したか否かを検出した情報に基づいて前記使用者が前記操作部に近接したと判断した場合に、前記操作部に関する情報を前記表示部に表示させる制御部として機能させるものである。
【発明の効果】
【０００９】
本発明は、操作部などによって、情報の表示が影響を受けることなく、瞬読性の高い情報表示を行うことが可能な操作情報表示装置、操作情報表示方法および操作情報表示プログラムを提供することができる。
【図面の簡単な説明】
【００１０】
【図１】本発明の実施形態の操作情報表示装置を示す概略図。
【図２】同実施形態の電気的構成を示すブロック図。
【図３】同実施形態の処理を示すフローチャート。
【図４】同実施形態の表示例を示す図。
【図５】同実施形態の頭部装着型表示器の説明図。
【発明を実施するための形態】
【００１１】
本発明の実施形態を添付図に基づいて以下に説明する。
【００１２】
以下、本発明に係る実施形態について図面を参照して説明する。なお、本発明は下記の実施形態（図面の内容も含む。）によって限定されるものではない。下記の実施形態に変更（構成要素の削除も含む）を加えることができるのはもちろんである。また、以下の説明では、本発明の理解を容易にするために、公知の技術的事項の説明を適宜省略する。
【００１３】
本実施形態では、操作情報表示装置１は、車両の操作部の操作情報を表示するものを例示している。
【００１４】
操作情報表示装置１は、表示部２と、制御部３と、視線検出手段４と、から構成されている。なお、図１中、５は、車両Ｖに搭載した機器を操作する操作部である。６は、車両Ｖを運転する運転者で、本発明の操作情報表示装置１の使用者である。７は、車両Ｖに搭載した機器の表示器である。
【００１５】
表示部２は、ヘッドマウントディスプレイと呼ばれる頭部装着型表示器である。本実施形態のヘッドマウントディスプレイは、眼鏡型のヘッドマウントディスプレイであり、透過するレンズに映像を投影し、使用者６にその映像を視認させる透過型の表示部２である。表示部２は、使用者６が操作する操作部５の操作に関する情報を表示するものである。操作部５の操作に関する情報とは、操作部５で操作できる機能の情報、操作部５の操作説明の情報、操作部５の対象を示す情報などである。
【００１６】
制御部３は、例えばマイクロコンピュータなどのコンピュータからなり、制御部３が実行する処理（操作情報表示装置１全体の制御など）を実際に行うＣＰＵ（Central  Processing  Unit）と、ＣＰＵのメインメモリとして機能するＲＡＭ（Random  Access  Memory）と、制御部３に後述の処理などを実行させる各種プログラムを記憶するＲＯＭ（Read  Only  Memory）と、制御部３に入出力される情報（信号）をＣＰＵ用にデジタル変換したり出力用にアナログ変換したりする各種変換器と、を備える。制御部３は、ＣＰＵに加えて、制御部３が行う処理の一部をＣＰＵに代わって実行するための各種専用回路（例えば、画像処理回路など）を備えても良い。なお、本発明の操作情報表示プログラムは、前記ＲＯＭに含まれている。
【００１７】
制御部３は、視線検出手段４から出力される信号などの情報に基づいて使用者６が操作部５に近接したと判断した場合に、操作部５に関する情報を表示部２に表示する。
【００１８】
制御部３は、操作部５の状態や操作情報を受け、操作部５の操作階層や操作内容に基づいて、表示内容を操作情報表示装置１に送信する。
【００１９】
視線検出手段４は、使用者６が操作部５に近接したか否かを検出するものであり、視線撮像手段４１と、周辺撮像手段４２と、視線方向算出手段４３と、から構成されている。
【００２０】
視線撮像手段４１は、使用者６の視線を撮像するものであり、本実施形態では、視線撮像手段４１は、赤外線照射部４１ａと赤外線撮像部４１ｂとで構成されており、眼鏡型のヘッドマウントディスプレイに装着されている。赤外線照射部４１ａは、赤外線を照射するものであり、使用者６（特に、眼球）に向けて赤外線を照射するものであり、赤外線撮像部４１ｂは、赤外線照射部４１ａが照射した赤外線が、使用者６（特に、眼球）で反射した赤外線を撮像するものである。
【００２１】
周辺撮像手段４２は、眼鏡型のヘッドマウントディスプレイに装着されており、使用者６の正面を含めた周辺を撮像するものである。周辺撮像手段４２は、夜間などの暗い状況を考慮し、赤外線を撮像するカメラである。
【００２２】
視線方向算出手段４３は、例えば、視線方向算出手段４３が実行する処理（視線方向の算出など）を実際に行うＣＰＵと、ＣＰＵのメインメモリとして機能するＲＡＭと、視線方向算出手段４３に後述の処理などを実行させる各種プログラムを記憶するＲＯＭ、視線方向算出手段４３に入出力される情報（信号）をＣＰＵ用にデジタル変換したり出力用にアナログ変換したりする各種変換器と、を備える。
【００２３】
視線方向算出手段４３は、視線撮像手段４１と周辺撮像手段４２によって撮像された画像を用いて使用者６の視線がどこを見ているかを判断するものである。
【００２４】
非接触判定手段４４は、例えば、赤外光を用いたモーションセンサであり、操作部５およびその周辺に設置されており、操作部５に対する使用者６の指の位置を検出するものである。非接触判定手段４４は、操作情報表示装置１の制御部３と無線通信手段によって接続されており、使用者６が操作部５に近づいたか否かの判断を行い、所定の信号を制御部３に送る。
【００２５】
操作部５は、車両Ｖに搭載されたオーディオ機器や空調機器を操作する複数のスイッチで構成されている。操作部５の上段は、前記オーディオ機器を操作する操作部であり、左側の二つの操作部は、押しボタンスイッチ５ａ１、５ａ２であり、右側の操作部は、押し操作と回転操作が可能なノブ５ａ３である。操作部５の下段は、空調機器を操作する操作部５ｂである。前記空調機器を操作する操作部５ｂは、押しボタンスイッチである。
【００２６】
なお、５ｃは、操作部５を制御する操作制御部であり、操作部５の操作によって前記オーディオ機器や前記空調機器を制御するものである。操作制御部５ｃは、例えば、操作制御部５ｃが実行する処理（視線方向の算出など）を実際に行うＣＰＵと、ＣＰＵのメインメモリとして機能するＲＡＭと、操作制御部５ｃに処理などを実行させる各種プログラムを記憶するＲＯＭ、操作制御部５ｃに入出力される情報（信号）をＣＰＵ用にデジタル変換したり出力用にアナログ変換したりする各種変換器と、操作情報表示装置１の制御部３とを接続する図示しない無線通信部などを備える。
【００２７】
表示器７は、液晶表示器などで構成されており、例えば、オーディオ機器の機能を備えたナビゲーション装置の表示器であり、オーディオや現在地の地図などを表示するものである。
【００２８】
次に、図３、図４を用いて操作情報表示装置１の表示方法について説明する。
【００２９】
本実施形態では、使用者６の視線が回転可能なノブ５ａ３に近接したと判断した場合を例に挙げて説明する。
【００３０】
ステップＳ１において、制御部３は、視線検出手段４の視線撮像手段４１と周辺撮像手段４２とで撮像した各画像から視線方向算出手段４３の算出結果に基づいて、使用者６の視線が操作部５に近接したか否かを判断する。近接したと判断した場合、ステップＳ２へ進み、近接していないと判断した場合、ステップＳ１へ戻る。本実施形態では、制御部３は、使用者６の視線がノブ５ａ３に近接したと判断し、ステップＳ２へ進む。
【００３１】
ステップＳ２において、制御部３は、非接触判定手段４４の算出結果に基づいて、使用者６の指の位置を検出する。近接したと判断した場合、ステップＳ３へ進み、近接していないと判断した場合、ステップＳ１へ戻る。本実施形態では、制御部３は、ノブ５ａ３に近接したと判断し、ステップＳ３へ進む。
【００３２】
ステップＳ３において、制御部３は、視線検出手段４で検出した操作部５のノブ５ａ３に関する情報があるか否かを判断する。この判断に際し、制御部３は、操作制御部５ｃと通信し、現在の操作部５の状態で、操作部５に関する情報があると判断した場合、ステップＳ４へ進み、操作部５に関する情報がないと判断した場合、ステップＳ１へ戻る。本実施形態では、制御部３は、操作部５に関する情報があると判断し、ステップＳ４へ進む。この時、操作部５に関する情報に基づいて、対応する画像データを制御部３の前記ＲＯＭなどから読み出し、前記ＲＡＭに記憶させる。なお、前記対応する画像データは、操作部５の操作制御部５ｃに記憶しておいてもよい。
【００３３】
ステップＳ４において、制御部３は、操作部５に関する情報を表示部２に表示させる。図４で示すように、図４（Ａ）の操作部５および／またはその近傍になにも表示していない状態から、図４（Ｂ）の操作部５および／またはその近傍に操作部５に関する情報を重畳表示する。使用者６は、操作部５に関する情報を操作部５および／またはその近傍に重畳表示された映像を視認することができる。本実施形態では、オーディオ機器の操作に関する表示であり、図４（Ｂ）で示すように、ノブ５ａ３に「操作停止」画像Ｐ１を表示し、ノブ５ａ３の近傍で、ノブ５ａ３の真下に「音量」画像Ｐ２、続いて、時計回りに、「頭出し（戻り）」画像Ｐ３、「早送り（戻り）」画像Ｐ４、「早送り（進む）」画像Ｐ５、「頭出し（進む）」画像Ｐ６を表示する。また、ノブ５ａ３の近傍には、現在操作している楽曲のジャケット画像Ｐ７を表示する。なお、このジャケット画像Ｐ７は、制御部３や操作部５の操作制御部５ｃ以外の記憶部、例えば、図示しないオーディオ機器の記憶部から読み出すことで表示できる。
【００３４】
以上、使用者６が操作する操作部５の操作に関する情報を表示する表示部２と、表示部２を制御する制御部３とを備えた操作情報表示装置１において、使用者６の視線が操作部５に近接したか否かを検出する視線検出手段４を備え、制御部３は、視線検出手段４からの情報に基づいて使用者６の視線が操作部５に近接したと判断した場合に、操作部５に関する情報を表示部２に表示することによって、操作部５に関する情報を表示部２に表示することによって、瞬読性の高い情報表示が可能な操作情報表示装置１を提供することができる。
【００３５】
また、表示部２は、透過型の頭部装着型表示器であり、頭部装着型表示器を用いて操作部５に関する情報を操作部５および／またはその近傍に重畳表示させることによって、より瞬読性の高い情報表示が可能な操作情報表示装置１を提供することができる。
【００３６】
また、視線検出手段４は、使用者６の視線を撮像する視線撮像手段４１と、周辺を撮像する周辺撮像手段４２と、からなり、制御部３は、視線撮像手段４１と周辺撮像手段４２からの情報に基づいて、使用者６の視線が操作部５に近接したと判断することによって、使用者６の視線を良好に検出することができ、瞬読性の高い情報表示が可能な操作情報表示装置１を提供することができる。
【００３７】
また、操作部５に対する使用者６の一部の位置を検出する非接触判定手段４４を備え、制御部３は、非接触判定手段４４からの情報に基づいて、使用者６の一部が操作部５に近接したと判断することによって、使用者６の動きをより精度良く検出することができ、瞬読性の高い情報表示が可能な操作情報表示装置１を提供することができる。
【００３８】
使用者６が操作する操作部５の操作に関する情報を表示部２に表示する操作情報表示方法において、使用者６の視線が操作部５に近接したか否かを検出する視線検出手段４からの情報に基づいて使用者６の視線が操作部５に近接したと判断した場合に、操作部５に関する情報を表示部２に表示することによって、瞬読性の高い情報表示が可能な操作情報表示方法を提供することができる。
【００３９】
操作情報表示装置１のコンピュータに、使用者６の視線が操作部５に近接したか否かを検出した情報に基づいて使用者６が操作部５に近接したと判断した場合に、操作部５に関する情報を表示部２に表示させる制御部３として機能させることによって、瞬読性の高い情報表示が可能な操作情報表示プログラムを提供することができる。
【００４０】
なお、前記実施形態では、制御部３は、非接触判定手段４４からの情報に基づいて、使用者６が操作部５に近接したと判断していたが、非接触判定手段４４を設けず、視線検出手段４のみで、使用者６が操作部５に近接したと判断してもよい。
【００４１】
なお、前記実施形態では、制御部３は、非接触判定手段４４からの情報に基づいて、使用者６が操作部５に近接したと判断していたが、非接触判定手段４４に代えて、操作部５にタッチパネルなどの接触判定手段を設け、使用者６が操作部５に接したか否かを判断してもよい。
【符号の説明】
【００４２】
１      操作情報表示装置
２      表示部
３      制御部
４      視線検出手段
５      操作部
５ｃ    操作制御部
６      使用者
７      表示器
４１      視線撮像手段
４１ａ    赤外線照射部
４１ｂ    赤外線撮像部
４２      周辺撮像手段
４３      視線方向算出手段
４４      非接触判定手段
Ｖ      車両
【図１】
2018081411.tif 000003
【図２】
2018081411.tif 000004
【図３】
2018081411.tif 000005
【図４】
2018081411.tif 000006
【図５】
2018081411.tif 000007