(57)【要約】【課題】運転中においても安全に操作対象を操作することができる表示装置を提供する。【解決手段】表示装置の一例であるＨＵＤ装置１０は、車両の前方風景と重なる虚像としてユーザに視認される重畳画像を表示する。ＨＵＤ装置１０は、重畳画像の表示制御を行う表示制御部３１ａと、車両内の座標空間におけるユーザの手の位置を示す操作用座標を特定する特定部３１ｂと、座標空間における範囲であって、車両内の所定機器と対応して設定された範囲を示す機器特定テーブルＴを記憶する記憶部３２と、を備える。表示制御部３１ａは、機器特定テーブルＴが示す範囲内に操作用座標が所定期間以上含まれている場合には、所定機器の操作を行うためのメニュー画像を重畳画像の表示領域内に表示する。【選択図】図３
2020131901.tif 000002
【特許請求の範囲】
【請求項１】
車両の前方風景と重なる虚像としてユーザに視認される重畳画像を表示する表示装置であって、
前記重畳画像の表示制御を行う表示制御部と、
前記車両内の座標空間におけるユーザの手の位置を示す操作用座標を特定する特定部と、
前記座標空間における範囲であって、前記車両内の所定機器と対応して設定された範囲を示す範囲情報を記憶する記憶部と、を備え、
前記表示制御部は、前記範囲情報が示す範囲内に前記操作用座標が所定期間以上含まれている場合には、前記所定機器の操作を行うためのメニュー画像を前記重畳画像の表示領域内に表示する、
表示装置。
【請求項２】
前記メニュー画像は、前記所定機器に対する操作の内容を示す操作内容画像を含み、
前記特定部は、前記操作用座標に基づいて前記手の高さを特定し、
前記表示制御部は、
前記操作内容画像として、ユーザから見て上下方向に沿うとともに、前記所定機器に対する操作の内容を互いに異なる詳細度で示す複数の階層画像を表示可能であり、
前記特定部によって特定された前記手の高さに応じて、前記複数の階層画像のいずれかを選択可能に表示する、
請求項１に記載の表示装置。
【請求項３】
前記操作内容画像は、複数あり、前記所定機器に対する操作として、互いに異なる内容の操作が可能であることを示す第１操作内容画像と第２操作内容画像と、を含み、
前記複数の階層画像は、前記第１操作内容画像と前記第２操作内容画像との各々に対応して設けられ、
前記特定部は、前記操作用座標に基づき、前記第１操作内容画像と前記第２操作内容画像とのいずれかを選択するための操作であり、予め設定された選択操作がなされたことを特定し、
前記表示制御部は、前記第１操作内容画像と前記第２操作内容画像とのうち、前記選択操作によって選択された対象に応じた前記複数の階層画像を表示する、
請求項２に記載の表示装置。
【請求項４】
前記所定機器は、複数あり、
前記記憶部は、複数の前記所定機器の各々と対応した前記範囲情報を記憶する、
請求項１乃至３のいずれか１項に記載の表示装置。
【請求項５】
複数の前記所定機器は、第１機器と、第２機器とを含み、
前記特定部は、前記操作用座標として、前記手が第１の態様である場合の第１操作用座標と、前記手が第２の態様である場合の第２操作用座標とを特定可能であり、
前記表示制御部は、
前記範囲情報が示す範囲内に前記第１操作用座標が所定期間以上含まれている場合には、前記メニュー画像として、前記第１機器の操作を行うための画像を表示し、
前記範囲情報が示す範囲内に前記第２操作用座標が所定期間以上含まれている場合には、前記メニュー画像として、前記第２機器の操作を行うための画像を表示する、
請求項４に記載の表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示装置に関する。
【背景技術】
【０００２】
従来の表示装置として、特許文献１には、ジェスチャ動作に基づいて操作可能な複数の機器に含まれる画像表示装置が開示されている。特許文献１に開示された技術は、制御装置が検出したジェスチャ動作に基づいて、操作対象の機器を特定するとともに特定した機器に対しての操作制御を可能とする。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特表２０１７−５１６２４２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１に開示された技術では、操作したい機器をジェスチャ動作によって容易に特定できるものの、特定した機器をさらにジャスチャー動作によって操作する場合には、ユーザは当該機器自体（例えば当該機器に表示されたメニュー）を視認する必要がある。ところで、近年、車両内のシステムにおいてもユーザにより操作可能な機器が増加傾向にある。しかしながら、特許文献１に開示された技術を単に車両内のシステムに適用しただけでは、例えば車両の運転者であるユーザが操作したい機器自体を視認しなければならなくなり、運転者の視線が運転中に注視すべき車両の前方風景から逸れやすいという事態が生じてしまう。
【０００５】
本発明は、上記実情に鑑みてなされたものであり、運転中においても安全に操作対象を操作することができる表示装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明に係る表示装置は、
車両の前方風景と重なる虚像としてユーザに視認される重畳画像を表示する表示装置であって、
前記重畳画像の表示制御を行う表示制御部と、
前記車両内の座標空間におけるユーザの手の位置を示す操作用座標を特定する特定部と、
前記座標空間における範囲であって、前記車両内の所定機器と対応して設定された範囲を示す範囲情報を記憶する記憶部と、を備え、
前記表示制御部は、前記範囲情報が示す範囲内に前記操作用座標が所定期間以上含まれている場合には、前記所定機器の操作を行うためのメニュー画像を前記重畳画像の表示領域内に表示する。
【発明の効果】
【０００７】
本発明によれば、運転中においても安全に操作対象を操作することができる。
【図面の簡単な説明】
【０００８】
【図１】本発明の一実施形態に係るヘッドアップディスプレイ（ＨＵＤ）装置の車両への搭載態様を説明するための図である。
【図２】ＨＵＤ装置による虚像の表示態様などを説明するための図である。
【図３】車両用表示システムのブロック図である。
【図４】操作用表示制御処理の一例を示すフローチャートである。
【図５】メニュー画像の一例を示す図である。
【図６】（ａ）及び（ｂ）は、メニュー画像の一例を示す図である。
【図７】（ａ）及び（ｂ）は、メニュー画像の一例を示す図である。
【発明を実施するための形態】
【０００９】
本発明の一実施形態に係る表示装置について図面を参照して説明する。
【００１０】
本実施形態に係る表示装置は、図３に示す車両用表示システム１００に含まれるＨＵＤ（Head-Up Display）装置１０である。ＨＵＤ装置１０は、図１に示すように、車両１のダッシュボード２の内部に設けられ、車両１に関する情報（以下、車両情報と言う。）だけでなく、車両情報以外の情報も統合的にユーザ５に報知する。なお、車両情報は、車両１自体の情報だけでなく、車両１の運行に関連した車両１の外部の情報も含む。
【００１１】
車両用表示システム１００は、車両１内において構成されるシステムであり、ＨＵＤ装置１０と、第１機器４１、第２機器４２及び第３機器４３（以下、纏めて「複数の機器」とも言う。）と、ユーザ５の手５ａ（図２参照）の位置を検出するための構成である検出部５０と、を備える。
【００１２】
ＨＵＤ装置１０は、図１に示すように、フロントガラス４に向けて表示光Ｌを射出する。フロントガラス４で反射した表示光Ｌは、ユーザ５側へと向かう。ユーザ５は、視点をアイボックスＥ内におくことで、フロントガラス４の前方に、表示光Ｌが表す画像を虚像Ｖとして視認することができる。つまり、ＨＵＤ装置１０は、フロントガラス４の前方位置に虚像Ｖを表示する。これにより、ユーザ５は、虚像Ｖを前方風景と重畳させて観察することができる。
【００１３】
ＨＵＤ装置１０は、図３に示す表示部２０及び制御装置３０と、図示しない反射部とを備える。
【００１４】
表示部２０は、制御装置３０の制御により、虚像Ｖとしてユーザ５に視認される重畳画像を表示する。表示部２０は、例えば、ＴＦＴ（Thin Film Transistor）型のＬＣＤ（Liquid Crystal Display）や、ＬＣＤを背後から照明するバックライト等を有する。バックライトは、例えばＬＥＤ（Light Emitting Diode）から構成されている。表示部２０は、制御装置３０の制御の下で、バックライトに照明されたＬＣＤが画像を表示することにより表示光Ｌを生成する。生成した表示光Ｌは、反射部で反射した後に、フロントガラス４に向けて射出される。反射部は、例えば、折り返しミラーと凹面鏡の二枚の鏡から構成される。折り返しミラーは、表示部２０から射出された表示光Ｌを折り返して凹面鏡へと向かわせる。凹面鏡は、折り返しミラーからの表示光Ｌを拡大しつつ、フロントガラス４に向けて反射させる。これにより、ユーザ５に視認される虚像Ｖは、表示部２０に表示されている画像が拡大されたものとなる。なお、反射部を構成する鏡の枚数は設計に応じて任意に変更可能である。
【００１５】
なお、以下では、虚像Ｖとしてユーザ５に視認される画像を表示部２０が表示することを「重畳画像を表示する」とも言う。また、制御装置３０が表示部２０の表示制御を行うことを「重畳画像の表示制御を行う」とも言う。また、表示部２０は、重畳画像を表示することができれば、ＬＣＤを用いたものに限られず、ＯＬＥＤ（Organic Light Emitting Diodes）、ＤＭＤ（Digital Micro mirror Device）、ＬＣＯＳ（Liquid Crystal On Silicon）などの表示デバイスを用いたものであってもよい。
【００１６】
制御装置３０は、ＨＵＤ装置１０の全体動作を制御するマイクロコンピュータからなり、制御部３１と、記憶部３２とを備える。また、制御装置３０は、図示しない構成として、駆動回路や、車両１内の各種システムと通信を行うための入出力回路を備える。
【００１７】
記憶部３２は、動作プログラムや各種の画像データを予め記憶するＲＯＭ（Read Only Memory）や、各種の演算結果などを一時的に記憶するＲＡＭ（Random Access Memory）等から構成されている。特に、ＲＯＭには、後述する操作用表示制御処理を行うための動作プログラム、機器特定テーブルＴ、ジェスチャパターンデータＧなどの各種固定データが予め記憶されている。
【００１８】
制御部３１は、ＲＯＭに記憶された動作プログラムを実行するＣＰＵ（Central Processing Unit）と、ＣＰＵと協働して画像処理を実行するＧＤＣ（Graphics Display Controller）とを備える。ＧＤＣは、例えば、ＧＰＵ（Graphics Processing Unit）、ＦＰＧＡ（Field-Programmable Gate Array）、ＡＳＩＣ（Application Specific Integrated Circuit）等から構成されている。なお、制御装置３０や制御部３１の構成は、以下に説明する機能を充足する限りにおいては任意である。
【００１９】
制御部３１は、表示部２０を駆動制御する。例えば、制御部３１は、ＣＰＵで表示部２０のバックライトを駆動制御し、ＣＰＵと協働して動作するＧＤＣで表示部２０のＬＣＤを駆動制御する。制御部３１のＣＰＵは、ＧＤＣと協働して、ＲＯＭに記憶された各種の画像データに基づき、重畳画像の制御を行う。ＧＤＣは、ＣＰＵからの表示制御指令に基づき、表示部２０の表示動作の制御内容を決定する。ＧＤＣは、表示部２０に表示する１画面を構成するために必要な画像パーツデータをＲＯＭから読み込み、ＲＡＭへ転送する。また、ＧＤＣは、ＲＡＭを使って、画像パーツデータやＨＵＤ装置１０の外部から通信により受け取った各種の画像データを元に、１画面分の絵データを作成する。そして、ＧＤＣは、ＲＡＭで１画面分の絵データを画像の更新タイミングに合わせて、表示部２０に転送する。これにより、表示部２０に虚像Ｖとしてユーザ５に視認される重畳画像が表示される。また、虚像Ｖとして視認される画像を構成する各画像には予めレイヤーが割り当てられており、制御部３１は、各画像の個別の表示制御が可能となっている。
【００２０】
制御部３１は、機能部として、上記のように重畳画像の表示制御を行う表示制御部３１ａと、後述のように手５ａの位置やジェスチャ動作を特定する特定部３１ｂとを備える。一例として、表示制御部３１ａはＧＤＣにより実現され、特定部３１ｂはＣＰＵにより実現されるが、以下に説明する機能を充足する限りにおいて各々の構成は任意である。なお、本明細書における「手」とは、人体の肩から先にある部分を言い、指や掌はもちろん、肘なども含む。
【００２１】
表示制御部３１ａは、虚像Ｖの表示領域内におけるコンテンツ画像（図５〜図７に示す後述のメニュー画像Ｍなど）の表示位置と、コンテンツ画像の表示距離とを制御する。なお、図２で虚像Ｖが示している枠は、虚像Ｖの表示領域を示し、コンテンツ画像は、当該表示領域内に虚像として視認される画像である。これは、虚像Ｖとしてユーザ５に視認される重畳画像を表示する表示部２０において、当該重畳画像の表示領域内にコンテンツ画像が表示されることと同義である。
【００２２】
表示位置の制御とは、ユーザ５から見て、虚像Ｖの表示領域内における任意の位置に画像が表示されるように表示制御部３１ａが表示部２０を制御することである。また、表示距離の制御とは、ユーザ５から見て、コンテンツ画像が車両１からどのくらい前方に表示されるかの制御である。つまり、表示距離の制御とは、車両１の前方に所定距離向かった位置にコンテンツ画像が視認されるように表示制御部３１ａが表示部２０を制御することである。表示距離の制御については、制御部３１が虚像Ｖの表示領域内におけるコンテンツ画像を、奥行きを持たせた態様で表示制御可能であることにより実現される。例えば、当該奥行きを持たせた態様でコンテンツ画像を表示するには、記憶部３２のＲＯＭに予め３Ｄ画像データを格納しておき、予め定められた車両１からの前方距離に基づいて、遠近法（例えば、一点透視図法）を用いてコンテンツ画像を描画制御する。また、表示部２０の表示面（ＬＣＤの表示面や、ＤＭＤやＬＣＯＳを用いた場合にはスクリーン）を傾けて配置することにより、虚像Ｖが表示される仮想面（表示部２０の表示面に対応する面）を車両１の上下方向に対して前方に傾けて設定することでコンテンツ画像に奥行きを持たせてもよい。この場合、ユーザ５の視点から視認させたい像の前記仮想面への射影を考慮して、表示制御部３１ａは、コンテンツ画像を奥行きを持たせた態様で描画制御すればよい。ユーザ５の視点位置として、制御部３１は、ＲＯＭ内に予め格納した想定される視点位置を用いてもよいし、ユーザ５の視点位置を検出する視点検出部（図示せず）からの視線情報を用いてもよい。
【００２３】
この実施形態では、上記のようにコンテンツ画像の表示位置と表示距離とを制御可能であることにより、表示制御部３１ａは、虚像Ｖの表示領域内に、図５等に示すメニュー画像Ｍを表示可能となっている。メニュー画像Ｍは、特定部３１ｂがメニュー表示動作を特定したことに応じて表示制御部３１ａにより表示される。特定部３１ｂの機能やメニュー画像Ｍについては、後述する。
【００２４】
制御部３１は、第１機器４１、第２機器４２、第３機器４３、及び検出部５０の各々と通信を行う。当該通信としては、例えば、ＣＡＮ（Controller Area Network）、Ｅｔｈｅｒｎｅｔ、ＭＯＳＴ（Media Oriented Systems Transport）、ＬＶＤＳ（Low Voltage Differential Signaling）などの通信方式が適用可能である。
【００２５】
第１機器４１は、例えば、車両１に搭載されたエア・コンディショナー（エアコン）装置の操作機器である。エアコン装置は、図示しないコンプレッサにより圧縮された冷媒を利用して車両１の室内温度を調整する。エアコン装置の操作機器としての第１機器４１は、図２に示すように、ダッシュボード２に設けられており、ステアリングホイール３の左側に位置している。
【００２６】
第２機器４２は、例えば、車両１に搭載されたカーナビゲーション（カーナビ）装置である。カーナビ装置は、人工衛星などから受信したＧＰＳ（Global Positioning System）信号に基づいて車両１の位置を算出するＧＰＳコントローラを含む。カーナビ装置は、地図データを記憶する記憶部を有し、ＧＰＳコントローラからの位置情報に基づいて、現在位置近傍の地図データを記憶部から読み出し、ユーザ５により設定された目的地までの案内経路を決定する。そして、カーナビ装置は、現在の車両１の位置や決定した案内経路に関する情報を制御部３１に出力する。また、カーナビ装置は、地図データを参照することにより、車両１の前方の施設の名称・種類や、施設と車両１との距離などを示す情報を制御部３１に出力する。カーナビ装置は、これらの各種情報を経路案内情報として、制御部３１に出力する。カーナビ装置としての第２機器４２は、図２に示すように、ダッシュボード２に設けられており、第１機器４１の上方に位置している。
【００２７】
第３機器４３は、例えば、車両１に搭載された計器である。計器は、指針式のアナログ計器部や、ＴＦＴ型のＬＣＤなどから構成されるデジタル表示部を備え、車速、エンジン回転数、総走行距離、区間走行距離などの車両１に関する計測量を報知する。つまり、計器は、スピードメータ、タコメータ、オドメータ、トリップメータ等の各種表示が可能となっている。計器としての第３機器４３は、図２に示すように、ダッシュボード２に設けられており、ユーザ５から見てステアリングホイール３の前方に位置している。
【００２８】
検出部５０は、車両１内に設けられ、ユーザ５の手５ａの位置を検出する。検出部５０は、例えば、手５ａを撮像し、撮像画像を取得する撮像手段（例えばステレオカメラ）と、撮像画像データの画像処理を行う画像処理部とを有して構成される。検出部５０は、例えばパターンマッチング法などの公知の画像解析法により撮像画像における手５ａの領域を特定し、特定した手５ａの領域における代表位置（例えば、当該領域の重心）の位置を算出する。ここで、算出される位置は、予め車両１内に設定された三次元の座標空間（Ｘ，Ｙ，Ｚ）における手５ａの位置を示す座標（以下、操作用座標と呼ぶ。）であり、検出部５０は、操作用座標（当該座標を示すデータ）を制御部３１に送信する。
【００２９】
また、検出部５０は、手５ａを特定する際に、手５ａが左手であるか右手であるかも特定する。検出部５０は、手５ａが左手であると特定した場合には、操作用座標として左手の代表位置を示す第１操作用座標を制御部３１に送信する。また、検出部５０は、手５ａが右手であると特定した場合には、操作用座標として右手の代表位置を示す第２操作用座標を制御部３１に送信する。なお、検出部５０は、掌や甲の向きや、指（例えば人差し指）が突き出された格好となっているか等、手５ａの姿勢や態様も特定可能であってもよい。
【００３０】
なお、検出部５０は、パターンマッチング法でなく、他の公知の画像解析法を用いて、手５ａの領域を特定してもよい。例えば、検出部５０は、ＨＯＧ（Histogram of Oriented Gradients）、ＳＩＦＴ（Scale-Invariant Feature Transform）、ＬＢＰ（Local Binary Pattern）、Ｈａａｒ−Ｌｉｋｅなどの特徴量を算出し、算出した特徴量に基づき、手５ａの領域を特定してもよい。また、検出部５０が手５ａを検出するための構成は、可視光カメラに限られず、赤外線カメラ、電波式センサなどの他の公知の構成であってもよい。
【００３１】
また、車両用表示システム１００は、図示しない構成として、第１機器４１〜第３機器４３の各々や車両１の各部を制御するＥＣＵ（Electronic Control Unit）を備えている。例えば、制御部３１は、ユーザ５による室温調整操作を受け付けた場合には、第１機器４１やエアコン装置を制御するＥＣＵに当該操作内容に示す信号を出力し、これに応じてＥＣＵはエアコン装置を制御する。また、制御部３１は、ユーザ５による目的地設定操作を受け付けた場合には、カーナビ装置としての第２機器４２を制御するＥＣＵに当該操作内容を示す信号を出力し、これに応じてＥＣＵはカーナビ装置を制御する。また、制御部３１は、ユーザ５による車両情報確認操作を受け付けた場合には、計器としての第３機器４３を制御するＥＣＵに当該操作内容を示す信号を出力し、これに応じてＥＣＵは計器の表示モードを切り替えるなどの制御を行う。また、計器のＥＣＵは、車両１に搭載された各種のセンサから、車速、エンジン回転数、警告情報（燃料低下、エンジン油圧異常、タイヤ空気圧異常など）を取得し、計器の表示制御を行う。
【００３２】
ここからは、手５ａの位置やジェスチャ動作を特定する特定部３１ｂやメニュー画像Ｍについて説明する。特定部３１ｂは、検出部５０からユーザ５の手５ａを示す操作用座標を取得し、操作用座標を特定する。そして、特定部３１ｂは、操作用座標と記憶部３２に記憶された機器特定テーブルＴとに基づいて、ユーザ５が複数の機器のうち、どの機器を操作しようとしているのかを特定する。
【００３３】
ここで、図３に模式的に示す機器特定テーブルＴについて説明する。機器特定テーブルＴは、車両１内に設定された三次元の座標空間（Ｘ，Ｙ，Ｚ）における範囲と、操作態様の機器とが対応して構成されている。当該範囲は、例えば、車両１内に設定された座標空間において互いに異なる４点を結んで得られる任意の三次元空間である。図示例の機器特定テーブルＴは、範囲Ｒ１が第１機器４１と対応し、範囲Ｒ２が第２機器４２と対応し、範囲Ｒ３が第３機器４３と対応して構成されている。なお、三次元空間としての範囲Ｒ１〜Ｒ３の各々は任意に設定可能であるが、範囲Ｒ１は第１機器４１の近傍に設定され、範囲Ｒ２は第２機器４２の近傍に設定され、範囲Ｒ３は第３機器４３の近傍に設定されるといったように、ある範囲と当該範囲に対応する機器との間に位置的な関連性を持たせることが好ましい。こうすれば、ユーザ５が直感的に後述の機器選択動作を行うことができる。
【００３４】
また、機器特定テーブルＴにおいて、各範囲Ｒ１〜Ｒ３は、左手と右手のいずれかと対応して設定されている。図示例の機器特定テーブルＴは、範囲Ｒ１及び範囲Ｒ２が左手と対応し、範囲Ｒ３が右手と対応して構成されている。
【００３５】
特定部３１ｂは、検出部５０から左手の代表位置を示す第１操作用座標を取得すると、機器特定テーブルＴを参照し、第１操作用座標が左手に対応する範囲Ｒ１又は範囲Ｒ２に、予め設定した所定期間（例えば、数秒）以上含まれているかを判別する。例えば、範囲Ｒ１に第１操作用座標が所定期間含まれている場合には、特定部３１ｂは、範囲Ｒ１に対応する第１機器４１を選択する動作（以下、機器選択動作と呼ぶ）がユーザ５によってなされたと特定する。このようにして、制御部３１は、特定部３１ｂの機能によって第１機器４１に対する機器選択動作を特定すると、表示制御部３１ａの機能によって第１機器４１の操作を行うためのメニュー画像Ｍを虚像Ｖの表示領域内に表示する。
【００３６】
また、特定部３１ｂは、検出部５０から右手の代表位置を示す第２操作用座標を取得すると、機器特定テーブルＴを参照し、第２操作用座標が右手に対応する範囲Ｒ３に、予め設定した所定期間（例えば、数秒）以上含まれているかを判別する。例えば、範囲Ｒ３に第２操作用座標が所定期間含まれている場合には、特定部３１ｂは、範囲Ｒ３に対応する第３機器４３に対する機器選動作がユーザ５によってなされたと特定する。このようにして、制御部３１は、特定部３１ｂの機能によって第３機器４３に対する機器選択動作を特定すると、表示制御部３１ａの機能によって第３機器４３の操作を行うためのメニュー画像Ｍを虚像Ｖの表示領域内に表示する。
【００３７】
つまり、この実施形態においては、複数の機器毎に設定された三次元空間の範囲内に、ユーザ５が手５ａを概ね静止させることで、操作対象の機器を選択する機器選択動作を行うことができる。また、機器選択動作がなされると、選択された機器のメニュー画像Ｍが表示制御部３１ａによって表示されるため、この機器選択動作はメニュー表示動作であるとも言える。
【００３８】
メニュー画像Ｍは、複数の機器のうち、ユーザ５による機器選択動作によって選択された所定機器の操作を行うための画像であり、所定機器に対して可能な操作の内容を示す複数の操作用画像を備えて構成される。複数の操作用画像は、互いに異なる操作内容を示す。また、任意の操作用画像が表示される際には、操作用画像は、操作の内容を互いに異なる詳細度で示す複数の階層画像を有して構成される。以下に具体例を説明する。
【００３９】
図５は、後述のようにエアコン装置の操作機器として構成される第１機器４１が選択された場合に表示されるメニュー画像Ｍの構成例を示す（図６、図７も同様）。図５に示すメニュー画像Ｍは、第１機器４１に対して可能な操作の内容として、温度調整に関する操作内容を示す第１操作用画像ＭＡと、風量調整に関する操作内容を示す第２操作用画像ＭＢと、風向き調整に関する操作内容を示す第３操作用画像ＭＣとを備えて構成されている。各操作用画像は、上下方向（ユーザ５から見ての上下方向）に延びる帯状をなし、図５における左側から右側に向かって、第１操作用画像ＭＡ、第２操作用画像ＭＢ、第３操作用画像ＭＣの順で並んで配置されている。
【００４０】
第１操作用画像ＭＡは、「温度」という項目を示す項目画像としての第１階層画像Ａ１と、冷房か暖房かを切り替える操作が可能であることを示す第２階層画像Ａ２と、設定温度の調整操作が可能であることを示す第３階層画像Ａ３とが、上下方向に沿って配列されることで構成されている。このように複数の階層画像を有する第１操作用画像ＭＡにおいては、下方に位置する階層画像ほど温度調整に関する詳細な操作を示す。
【００４１】
第２操作用画像ＭＢは、「風量」という項目を示す項目画像としての第１階層画像Ｂ１と、風量の強弱調整操作が可能であることを示す第２階層画像Ｂ２とが、上下方向に沿って配列されることで構成されている。図示例の第２操作用画像ＭＢは、第１操作用画像ＭＡより少ない、２つの階層画像から構成されているが、第２操作用画像ＭＢにおいても、下方に位置する階層画像ほど風量調整に関する詳細な操作を示すことには変わりがない。
【００４２】
第３操作用画像ＭＣは、「風向き」という項目を示す項目画像としての第１階層画像Ｃ１と、風向きの選択操作が可能であることを示す第２階層画像Ｃ２とが、上下方向に沿って配列されることで構成されている。図示例の第３操作用画像ＭＣは、第１操作用画像ＭＡより少ない、２つの階層画像から構成されているが、第３操作用画像ＭＣにおいても、下方に位置する階層画像ほど風量調整に関する詳細な操作を示すことには変わりがない。
【００４３】
以上のようにメニュー画像Ｍが表示されると、特定部３１ｂは、操作用座標と、記憶部３２に予め記憶されたジェスチャパターンデータＧとに基づいてジェスチャ動作を特定する。
【００４４】
ジェスチャパターンデータＧは、行われているジェスチャ動作を特定するために必要となるデータであり、複数のジェスチャ動作のパターンと、複数のパターンの各々に関連付けられた操作内容とから構成されている。なお、複数のパターンの各々は、時系列で取得される複数の操作用座標に基づいて特定可能な手５ａの動き（軌跡）や手５ａの格好を示す特徴量と対応して予め設定されている。なお、特定部３１ｂによるジェスチャ動作の特定手法は、目的に応じて任意であり、例えば、ＮＮ法（Nearest Neighbor algorithm）、ｋ-ＮＮ法（k-Nearest Neighbor algorithm）等の公知の手法や、パターンマッチングなどの公知の画像認識手法を用いればよい。
【００４５】
ジェスチャ動作のパターンとしては、（ｉ）メニュー画像Ｍにおける項目画像を選択するための項目選択動作や、（ｉｉ）メニュー画像Ｍにおける階層画像を選択するための階層選択動作や、（ｉｉｉ）任意の階層画像において選択対象の機器の設定を変更するための設定動作などのパターンが予め設けられている。
【００４６】
項目選択動作は、例えば、手５ａを予め定められた高さ範囲内で保ったまま左右方向に移動させる動作である。制御部３１は、特定部３１ｂの機能によって操作用座標とジェスチャパターンデータＧとに基づいて項目選択動作を特定すると、手５ａの左右方向の動きに合わせて、カーソルＣ（カーソルを示す画像）を、項目画像のいずれかが選択されていることを報知可能な態様で表示させる。
【００４７】
階層選択動作は、例えば、ユーザ５が手５ａを上下方向に移動させることで、予め定められた高さ範囲内に手５ａを位置させる動作である。予めＲＯＭに設定された高さ範囲としては、例えば、ユーザ５の頭部付近、胸部付近、腰付近の各範囲が設定されている。ここで、図５及び図６に示すメニュー画像Ｍを参照して、階層選択動作の一例について説明する。制御部３１は、手５ａの高さが頭部付近であると特定すると、図５に示すように、項目画像としての第１階層画像Ａ１をカーソルＣで選択された状態とする（第１階層画像Ａ１を選択表示する）。また、制御部３１は、手５ａの高さが胸部付近であると特定すると、図６（ａ）に示すように、第２階層画像Ａ２をカーソルＣで選択された状態とする。また、制御部３１は、手５ａの高さが腰部付近であると特定すると、図６（ｂ）に示すように、第３階層画像Ａ３をカーソルＣで選択された状態とする。このようにして、制御部３１は、特定部３１ｂの機能によって操作用座標とジェスチャパターンデータＧとに基づいて階層選択動作を特定すると、手５ａの上下方向の動きに合わせて、カーソルＣを、階層画像のいずれかが選択されていることを報知可能な態様で表示させる。
【００４８】
なお、第１階層画像Ｂ１及び第２階層画像Ｂ２の２階層で構成される第２操作用画像ＭＢにおける階層選択動作では、制御部３１は、手５ａの高さが頭部付近であると特定すると、項目画像としての第１階層画像Ｂ１をカーソルＣで選択された状態とし、手５ａの高さが胸部付近又は腰部付近であると特定すると、第２階層画像Ｂ２をカーソルＣで選択された状態とする。第３操作用画像ＭＣにおける階層選択動作も同様である。
【００４９】
設定動作は、例えば、任意の階層画像が選択された後に、指を左右方向に移動させる動作である。制御部３１は、特定部３１ｂの機能によって操作用座標とジェスチャパターンデータＧとに基づいて設定動作を特定すると、指の左右方向の動きに合わせて、選択対象の機器に対する各種の設定変更を受け付ける。以下、操作用表示制御処理の説明とともに、各種のジェスチャ動作について具体的に説明する。
【００５０】
（操作用表示制御処理）
ここからは、制御部３１が実行する操作用表示制御処理について、主に図４を参照して説明する。操作用表示制御処理は、例えば、ＨＵＤ装置１０の起動中において継続して実行される。ＨＵＤ装置１０は、例えば、車両１のイグニッションのオンに伴い起動する。
【００５１】
まず、制御部３１は、検出部５０から操作用座標を取得する（ステップＳ１）。なお、以上では、検出部５０が算出した操作用座標を制御部３１が取得する例を示したが、制御部３１が操作用座標を算出してもよい。この場合、制御部３１は、検出部５０から取得した撮像画像データに基づいて、上述と同様の手法で画像解析を実行し、操作用座標を算出すればよい。つまり、制御部３１が操作用座標を特定することができれば、制御部３１及び検出部５０の各々で行う処理は任意である。
【００５２】
続いて、制御部３１は、ステップＳ１で取得した操作用座標が、記憶部３２に記憶された機器特定テーブルＴに設定された範囲内に、予め定めた所定期間（例えば数秒）以上含まれているか否かを判別する（ステップＳ２）。操作用座標が機器特定テーブルＴに設定された範囲内に所定期間以上含まれている場合（ステップＳ２；Ｙｅｓ）、制御部３１は、機器特定テーブルＴに設定された範囲に対応した機器を特定する（ステップＳ３）。
例えば、ステップＳ１で取得した操作用座標が左手の代表位置を示す第１操作用座標であり、第１操作用座標が、機器特定テーブルＴに設定された範囲Ｒ１に含まれていた場合、制御部３１は、第１機器４１を操作対象の機器として特定する。また、ステップＳ１で取得した操作用座標が左手の代表位置を示す第１操作用座標であり、第１操作用座標が、機器特定テーブルＴに設定された範囲Ｒ２に含まれていた場合、制御部３１は、第２機器４２を操作対象の機器として特定する。また、ステップＳ１で取得した操作用座標が右手の代表位置を示す第２操作用座標であり、第２操作用座標が、機器特定テーブルＴに設定された範囲Ｒ３に含まれていた場合、制御部３１は、第３機器４３を操作対象の機器として特定する。なお、操作用座標が機器特定テーブルＴに設定された範囲内に所定期間以上含まれていない場合（ステップＳ２；Ｎｏ）、制御部３１は、処理をステップＳ１に戻す。
【００５３】
ステップＳ３で操作対象の機器を特定すると、制御部３１は、当該機器の操作を行うためのメニュー画像Ｍを虚像Ｖの表示領域内に表示する（ステップＳ４）。このようにして、複数の機器毎に設定された三次元空間の範囲内に手５ａを概ね静止させる機器選択動作及びメニュー表示動作が、制御部３１によって特定される。
【００５４】
なお、以下では、メニュー画像Ｍとして、図５に示すように、第１機器４１の操作を行うためのメニュー画像Ｍが表示される場合について説明する。また、メニュー画像Ｍの初回表示時には、カーソルＣは、図５に示すように、「温度」という項目を示す項目画像としての第１階層画像Ａ１を選択している状態であるとする。
【００５５】
続いて、制御部３１は、ジェスチャ動作が特定されたか否かを判別する（ステップＳ５）。例えば、制御部３１は、ステップＳ１で取得した操作用座標から手５ａの動きを特定するとともに、特定した手５ａの動きが、ジェスチャパターンデータＧに設定されたジェスチャ動作のパターンに当てはまる場合には、ジェスチャ動作を特定できたと判別する。ジェスチャ動作が特定されない場合（ステップＳ５；Ｎｏ）、制御部３１は、処理をステップＳ１に戻す。
【００５６】
ジェスチャ動作が特定された場合（ステップＳ５；Ｙｅｓ）、制御部３１は、ジェスチャ動作が項目選択動作であるか否かを判別する（ステップＳ６）。ジェスチャ動作が項目選択動作である場合（ステップＳ６；Ｙｅｓ）、つまり、ユーザ５が予め定められた高さ範囲内で保ったまま手５ａを左右方向に動かす動作を特定した場合、制御部３１は、特定した動作に応じてカーソルＣ（カーソルを示す画像）を左右方向に移動させることで、項目画像のいずれかが選択されていることを報知可能な態様でカーソルＣを表示する（ステップＳ７）。
図５に示すように、カーソルＣが「温度」という項目を示す項目画像としての第１階層画像Ａ１を選択している状態から、ユーザ５が手５ａを頭上付近の高さで保ったまま右方向に移動させていくと、移動に応じて、「風量」という項目を示す項目画像としての第１階層画像Ｂ１や、「風向き」という項目を示す項目画像としての第１階層画像Ｃ１がカーソルＣによって選択された状態となる。
【００５７】
なお、項目選択動作は、カーソルＣが項目画像よりの下位の階層画像を選択している状態においても受け付けられ、制御部３１は、項目選択動作に応じたカーソルＣによる選択表示を行うことが可能である。例えば、図６（ａ）に示すように第２階層画像Ａ２がカーソルＣによって選択されている状態や、図６（ｂ）に示すように第３階層画像Ａ３がカーソルＣによって選択されている状態から、ユーザ５が手５ａを胸や腰の付近の高さで保ったまま右方向に移動させていくと、移動に応じて、図７（ａ）に示すように、第２操作用画像ＭＢにおける第２階層画像Ｂ２がカーソルＣによって選択された状態となったり、図７（ｂ）に示すように、第３操作用画像ＭＣにおける第２階層画像Ｃ２がカーソルＣによって選択された状態となったりする。
【００５８】
また、所定の項目画像や階層画像がカーソルＣによって選択された場合には、制御部３１は、選択された項目画像や階層画像が含まれる操作用画像を、他の操作用画像よりも強調して表示する。これにより、選択された機器に対して、現在、どのような操作を行おうとしているのかをユーザ５に報知することができる。
図５や図６（ａ）及び（ｂ）は、第１操作用画像ＭＡを構成する画像のいずれかがカーソルＣによって選択されている際に、第１操作用画像ＭＡを、第２操作用画像ＭＢ及び第３操作用画像ＭＣよりも強調表示した例である。また、図７（ａ）は、第２操作用画像ＭＢを構成する画像のいずれかがカーソルＣによって選択されている際に、第２操作用画像ＭＢを、第１操作用画像ＭＡ及び第３操作用画像ＭＣよりも強調表示した例である。また、図７（ｂ）は、第３操作用画像ＭＣを構成する画像のいずれかがカーソルＣによって選択されている際に、第３操作用画像ＭＣを、第１操作用画像ＭＡ及び第２操作用画像ＭＢよりも強調表示した例である。なお、強調表示の態様は任意であり、例えば、強調表示がされていない画像よりも輝度や彩度を高くしたり、強調表示がされていない画像にはない背景画像を付したりすればよい。
【００５９】
ステップＳ６でＮｏと判別した場合や、ステップＳ７の処理後、制御部３１は、ジェスチャ動作が階層選択動作であるか否かを判別する（ステップＳ８）。ジェスチャ動作が階層選択動作である場合（ステップＳ８；Ｙｅｓ）、つまり、ステップＳ１で取得した操作用座標によって示される手５ａの高さが、予め定められた、頭部付近、胸付近、腰付近のいずれかの高さ範囲に含まれる場合、当該高さ範囲に応じた階層画像をカーソルＣで選択表示する（ステップＳ９）。
例えば、図５、図６（ａ）及び（ｂ）に示すように、第１操作用画像Ｍ１が強調表示されている状態で説明すれば、手５ａが頭部付近であると特定すると、制御部３１は、図５に示すように、項目画像としての第１階層画像Ａ１をカーソルＣによって選択表示する。また、手５ａが胸部付近であると特定すると、制御部３１は、図６（ａ）に示すように、第２階層画像Ａ２をカーソルＣによって選択表示する。また、手５ａが腰部付近であると特定すると、制御部３１は、図６（ｂ）に示すように、第３階層画像Ａ３をカーソルＣによって選択表示する。
【００６０】
ステップＳ８でＮｏと判別した場合や、ステップＳ９の処理後、制御部３１は、ジェスチャ動作が設定動作であるか否かを判別する（ステップＳ１０）。ジェスチャ動作が設定動作である場合（ステップＳ１０；Ｙｅｓ）、制御部３１は、設定動作に応じた画像を表示する（ステップＳ１１）。
【００６１】
例えば、図６（ａ）に示すように、冷房か暖房かを切り替える操作が可能であることを示す第２階層画像Ａ２がカーソルＣによって選択されている状態において、指を左右方向に移動させると、移動に応じて、冷房を示す「ＣＯＯＬ」と、暖房を示す「ＨＯＴ」とのいずれかが設定用カーソルＣＡ２によって選択された状態となる。
【００６２】
また、図６（ｂ）に示すように、設定温度の調整操作が可能であることを示す第３階層画像Ａ３がカーソルＣによって選択されている状態において、指を左右方向に移動させると、移動に応じて、設定用カーソルＣＡ３が左右方向に移動するとともに、エアコン装置における設定温度を示す画像（図示例では「２４℃」）が変更される。図６（ｂ）に示す例は、左右方向に延びるバーグラフにおける設定用カーソルＣＡ３の位置において設定温度を報知する画像表示例である。
【００６３】
また、図７（ａ）に示すように、風量の強弱調整操作が可能であることを示す第２階層画像Ｂ２がカーソルＣによって選択されている状態において、指を左右方向に移動させると、移動に応じて、設定用カーソルＣＢ２が左右方向に移動するとともに、エアコン装置における風量を示す画像（図示例では「風量３」）が変更される。図７（ａ）に示す例は、左右方向に延びるバーグラフにおける設定用カーソルＣＢ２の位置において風量を報知する画像表示例である。
【００６４】
また、図７（ｂ）に示すように、風向きの選択操作が可能であることを示す第２階層画像Ｃ２がカーソルＣによって選択されている状態において、指を左右方向に移動させると、エアコン装置における風向きを示す画像が、図示例の「足元」から、図示しない「標準」、「フロントガラス」などに変更される。なお、風向きを示す画像は、文字を示す画像に限らず、アイコンを示す画像であってもよい。
【００６５】
なお、制御部３１は、設定操作を受け付けると、上記に例示した表示制御とともに、第１機器４１やエアコン装置を制御するＥＣＵに設定操作の内容に示す信号を出力し、これに応じてＥＣＵはエアコン装置を制御する。
【００６６】
ステップＳ１０でＮｏと判別した場合や、ステップＳ１１の処理後、制御部３１は、処理をステップＳ１に戻す。なお、項目画像がカーソルＣによって選択表示されている場合は、設定すべき対象が選択されていない状態であるため、設定動作を特定したとしても、制御部３１は、ステップＳ１に処理を戻す。また、階層画像が選択された状態（ステップＳ９）から、ジェスチャ動作として所定の決定操作を受け付けたことを条件に、制御部３１は、ステップＳ１０の判別処理を実行するようにしてもよい。例えば、決定操作は、予め定めた座標空間内で指をタップするように動かす動作や、手５ａの姿勢を変更する動作（手５ａを裏返す動作など）であればよい。こうすれば、ユーザ５が設定動作を行う際に、制御部３１が、設定動作以外の項目選択動作や階層選択動作を誤検出してしまうことを抑制することができる。
【００６７】
また、メニュー画像Ｍを消去する動作は、メニュー画像Ｍが表示されている際においてメニュー表示動作と同じ動作を行うことや、予め設定された他の動作（予め定めた座標空間内において、手５ａで所定のジェスチャを行うなど）であればよい。そして、メニュー画像Ｍが表示されている場合において、制御部３１は、このようなメニュー画像Ｍを消去する動作を特定した際に、メニュー画像Ｍを消去すればよい。なお、メニュー画像Ｍが一度消去された後に、再表示される場合には、消去される直前の状態のメニュー画像Ｍを復帰させることが好ましい。例えば、図６（ａ）に示すように第２階層画像Ａ２がカーソルＣで選択されている状態においてメニュー画像Ｍが消去された後に、制御部３１がメニュー表示動作を受け付けた場合には、図５に示す状態ではなく、図６（ａ）に示す状態のメニュー画像Ｍを表示するようにしてもよい。
【００６８】
また、以上では、メニュー画像Ｍとして、第１機器４１の操作を行うためのメニュー画像Ｍが表示される場合について説明したが、第２機器４２や第３機器４３の操作を行うためのメニュー画像Ｍも同様に構成すればよい。例えば、カーナビ装置として構成される第２機器４２の操作を行うためのメニュー画像Ｍは、項目画像として「目的地設定」、「表示切替」（例えば、ノースアップかヘディングアップかの切替え操作が可能であることを示す項目）、「ナビ開始／停止」などの項目を設け、各々に下位の階層画像を設けて、メニュー画像Ｍを構成すればよい。また、計器として構成される第３機器４３の操作を行うためのメニュー画像Ｍは、「表示モード切替え」、「警告情報確認」、「整備履歴」などの項目を設け、各々に下位の階層画像を設けて、メニュー画像Ｍを構成すればよい。制御部３１は、以上の操作用表示制御処理を、例えば車両１のイグニッションがオフされるまで継続して実行する。
【００６９】
なお、本発明は以上の実施形態及び図面によって限定されるものではない。本発明の要旨を変更しない範囲で、適宜、変更（構成要素の削除も含む）を加えることが可能である。
【００７０】
表示光Ｌの投射対象は、フロントガラス４に限定されず、板状のハーフミラー、ホログラム素子等により構成されるコンバイナであってもよい。また、以上に説明した虚像Ｖを表示する表示装置としては、ＨＵＤ装置１０に限られない。表示装置は、車両１のユーザ５の頭部に装着されるヘッドマウントディスプレイ（ＨＭＤ：Head Mounted Display）として構成されてもよい。つまり、表示装置は、車両１に搭載されているものに限られず、車両１で使用されるものであればよい。
【００７１】
また、複数の機器は２つ以上あればよく、検出部は複数の機器の各々に設けられればよい。また。複数の機器の種類は、上記例に限られず任意であり、オーディオプレイヤーやメディアプレイヤーなどを含んで構成してもよい。
【００７２】
また、メニュー表示動作を行う際の手５ａの格好や姿勢は任意である。手５ａを開いている場合などの特定の格好である場合にのみ、制御部３１がメニュー表示動作を受け付ける構成を採用してもよい。また、設定動作やメニュー消去動作の各々に、どのようなジャスチャー動作を設定するかも、目的に応じて任意である。
【００７３】
また、以上では、左手と右手とで機器選択動作によって選択可能な機器を異ならせることができる例を示したが、これに限られない。例えば、左手か右手に関わらず、手５ａが第１の態様（例えば、手５ａを開いた状態）の場合と、手５ａが第１の態様とは異なる第２の態様（例えば、手５ａを握った状態）の場合とで、機器選択動作によって選択可能な機器を異ならせてもよい。
【００７４】
また、操作用画像を構成する階層画像のいずれかが選択されていることを報知することができれば、カーソルＣの画像の表示態様（色、形、大きさ等）は任意である。例えば、制御部３１は、カーソルＣを用いずに、選択された状態の階層画像を強調表示すること（例えば、色を変える、文字や線を太く表示する、所定のエフェクトを施すなど）で選択されていることを報知する選択表示を行ってもよい。
【００７５】
以上の例では、メニュー画像Ｍを表示する際に、各操作用画像（第１操作用画像ＭＡ、第２操作用画像ＭＢ、第３操作用画像ＭＣ）を構成する複数の階層画像の全てを表示する例を示したが、これに限られない。例えば、第１操作用画像ＭＡを構成する階層画像のいずれかが選択された状態である場合には、第２操作用画像ＭＢ及び第３操作用画像ＭＣの項目画像よりも下位の階層画像（第２階層画像Ｂ２，Ｃ２）を非表示としてもよい。また、操作用画像の個数は任意であり、操作用画像を構成する階層画像も２つ以上あれば任意である。
【００７６】
また、操作用表示制御処理を構成する処理手順の追加、削除、変更も、目的を達成することができる限りにおいては任意である。例えば、検出部５０及び制御部３１の少なくともいずれかの機能によって、手５ａが所定期間以上静止していると特定した後に、手５ａの代表位置を示す操作用座標を算出してもよい。そして、制御部３１は、このように算出した操作用座標と、機器特定テーブルＴとに基づき、操作対象の機器を特定するとともに、当該機器に対応するメニュー画像Ｍを表示してもよい。いずれにせよ、制御部３１は、機器特定テーブルＴに設定された範囲内に操作用座標が所定期間以上含まれている場合には、メニュー画像Ｍを虚像Ｖの表示領域内に表示することになる。
【００７７】
（１）以上に説明した表示装置の一例であるＨＵＤ装置１０は、車両１の前方風景と重なる虚像Ｖとしてユーザ５に視認される重畳画像を表示する。ＨＵＤ装置１０は、重畳画像の表示制御を行う表示制御部３１ａと、車両１内の座標空間におけるユーザ５の手５ａの位置を示す操作用座標を特定する特定部３１ｂと、座標空間における範囲であって、車両１内の所定機器と対応して設定された範囲を示す範囲情報（例えば、機器特定テーブルＴ）を記憶する記憶部３２と、を備える。表示制御部３１ａは、範囲情報が示す範囲内に操作用座標が所定期間以上含まれている場合には、所定機器の操作を行うためのメニュー画像Ｍを重畳画像の表示領域内に表示する。
この構成により、車両１の前方風景に重畳して表示される虚像Ｖの表示領域内にメニュー画像Ｍを表示することができるため、ユーザ５は前方風景を視認しつつ、車両１の運転中においても安全に操作対象を操作することができる。
【００７８】
（２）また、メニュー画像Ｍは、所定機器に対する操作の内容を示す操作内容画像（例えば、第１操作用画像ＭＡ）を含む。特定部３１ｂは、操作用座標に基づいて手５ａの高さを特定する。表示制御部３１ａは、操作内容画像として、ユーザ５から見て上下方向に沿うとともに、所定機器に対する操作の内容を互いに異なる詳細度で示す複数の階層画像（例えば、第１〜第３階層画像Ａ１〜Ａ３）を表示可能であり、特定部３１ｂによって特定された手５ａの高さに応じて、複数の階層画像のいずれかを選択可能に表示する。
この構成により、簡単な操作で下位の階層画像を選択することができる。
【００７９】
（３）また、操作内容画像は、複数あり、所定機器に対する操作として、互いに異なる内容の操作が可能であることを示す第１操作内容画像と第２操作内容画像と（例えば、第１操作用画像ＭＡ、第２操作用画像ＭＢ及び第３操作用画像ＭＣのうち、任意の２つの画像）、を含む。複数の階層画像は、第１操作内容画像と第２操作内容画像との各々に対応して設けられている。特定部３１ｂは、操作用座標に基づき、第１操作内容画像と第２操作内容画像とのいずれかを選択するための操作であり、予め設定された選択操作（例えば、項目選択動作）がなされたことを特定する。表示制御部３１ａは、第１操作内容画像と第２操作内容画像とのうち、選択操作によって選択された対象に応じた複数の階層画像を表示する。
この構成により、簡単な操作で、所定の機器に対して行うことが可能な操作の種別を切り替えることができる。
【００８０】
（４）また、所定機器は、複数あり、記憶部３２は、複数の所定機器の各々と対応した範囲情報を記憶する。
この構成により、複数の機器毎に設定された三次元空間の範囲内に手５ａを概ね静止させることで機器選択動作（操作）が可能となる。
【００８１】
（５）また、複数の所定機器は、第１機器と、第２機器とを含む。特定部３１ｂは、操作用座標として、手５ａが第１の態様である場合（例えば左手である場合）の第１操作用座標と、手５ａが第２の態様である場合（例えば右手である場合）の第２操作用座標とを特定可能である。表示制御部３１ａは、範囲情報が示す範囲内に第１操作用座標が所定期間以上含まれている場合には、メニュー画像Ｍとして、第１機器の操作を行うための画像を表示し、範囲情報が示す範囲内に第２操作用座標が所定期間以上含まれている場合には、メニュー画像として、第２機器の操作を行うための画像を表示する。
この構成により、多種多様な機器選択動作（操作）が可能となる。
【００８２】
以上の説明では、本発明の理解を容易にするために、公知の技術的事項の説明を適宜省略した。
【符号の説明】
【００８３】
１００…車両用表示システム
１０…ＨＵＤ装置
２０…表示部
３０…制御装置
３１…制御部、３１ａ…表示制御部、３１ｂ…特定部
３２…記憶部
Ｔ…機器特定テーブル、Ｇ…ジェスチャパターンデータ
４１…第１機器、４２…第２機器、４３…第３機器
５０…検出部
１…車両、２…ダッシュボード、３…ステアリングホイール、４…フロントガラス
５…ユーザ、５ａ…手
Ｅ…アイボックス、Ｌ…表示光、Ｖ…虚像
Ｍ…メニュー画像、Ｃ…カーソル
ＭＡ…第１操作用画像、ＭＢ…第２操作用画像、ＭＣ…第３操作用画像
Ａ１，Ｂ１，Ｃ１…第１階層画像
Ａ２，Ｂ２，Ｃ２…第２階層画像
Ａ３…第３階層画像
【図１】
2020131901.tif 000003
【図２】
2020131901.tif 000004
【図３】
2020131901.tif 000005
【図４】
2020131901.tif 000006
【図５】
2020131901.tif 000007
【図６】
2020131901.tif 000008
【図７】
2020131901.tif 000009