(57)【要約】      （修正有）【課題】ドライバーディストラクションを低減可能な車両用の表示入力装置を提供する。【解決手段】車両に係わる情報を表示領域３０に表示する機能に加えて、操作メニューを操作する入力を受け付ける機能を有する。運転者の手指Ｆによるジェスチャーを検出するジェスチャー検出器７４及び入力変換部と、視線検出エリア５０内に運転者の視線が向けられているか否かを判定する視線検出器７２及び視線変換部とを備えている。視線検出エリア内に視線が向けられていない場合のジェスチャーは、例えば操作メニューにて複数の選択項目のいずれかを選択する選択操作とされる。一方で、視線検出エリア５０内に視線が向けられた場合のジェスチャーは、選択された選択項目の内容を変更する変更操作とされる。【選択図】図４
2015191310.tif 000002
【特許請求の範囲】
【請求項１】
車両に搭載され、前記車両に係わる情報を表示領域（３０）に表示し、操作メニューの操作が前記車両の運転者によって入力される車両用表示入力装置であって、
前記運転者の手（Ｆ）によるジェスチャーを検出するジェスチャー検出手段（７４，７５，２８９）と、
前記表示領域の少なくとも一部を含むよう予め規定された視線検出エリア（５０）内に、前記運転者の視線が向けられているか否かを判定する判定手段（８２）と、
前記視線検出エリア内に前記視線が向けられているか否かの前記判定手段の判定に基づいて、前記操作メニューに規定された複数の操作のうちで前記ジェスチャーを関連付ける操作を切り替える制御手段（８０，２８０）と、
を備えることを特徴とする車両用表示入力装置。
【請求項２】
前記操作メニューが複数階層に構成された車両用表示入力装置であって、
前記制御手段は、前記視線検出エリア内に前記視線が向けられていない場合に、前記操作メニューの上位層に設けられた複数の選択項目のいずれかを選択する選択操作に前記ジェスチャーを関連付け、前記視線検出エリア内に前記視線が向けられたことに基づいて、前記上位層にて選択された前記選択項目の内容を変更する下位層での変更操作に前記ジェスチャーを関連付けることを特徴とする請求項１に記載の車両用表示入力装置。
【請求項３】
前記判定手段は、
二つの前記視線検出エリアを異なる位置に規定し、
二つの前記視線検出エリアのうち一方である第一視線検出エリア（５０ｒ）内に前記視線が向けられているか否かを判定する第一判定部（Ｓ１０１）、及び二つの前記視線検出エリアのうち他方である第二視線検出エリア（５０ｌ）内に前記視線が向けられているか否かを判定する第二判定部（Ｓ１０２）、を有することを特徴とする請求項２に記載の車両用表示入力装置。
【請求項４】
前記制御手段は、
前記第一視線検出エリア内に前記視線が向けられたことに基づき、前記選択項目に設定された設定値を増加させる増加変更操作に前記ジェスチャーを関連付け、
前記第二視線検出エリア内に前記視線が向けられたことに基づき、前記選択項目に設定された設定値を減少させる減少変更操作に前記ジェスチャーを関連付けることを特徴とする請求項３に記載の車両用表示入力装置。
【請求項５】
前記第一視線検出エリア及び前記第二視線検出エリアは、前記表示領域の水平方向（ＨＤ）に並ぶ配置で規定されることを特徴とする請求項３又は４に記載の車両用表示入力装置。
【請求項６】
前記第一視線検出エリア及び前記第二視線検出エリアは、互いに離れた位置に規定されることを特徴とする請求項３〜５のいずれか一項に記載の車両用表示入力装置。
【請求項７】
前記表示領域には、前記視線検出エリア内に位置し、当該視線検出エリア内に前記視線が向けられた場合の前記変更操作の内容を表示する内容表示部（３２，３３）、が形成されることを特徴とする請求項２〜６のいずれか一項に記載の車両用表示入力装置。
【請求項８】
前記制御手段は、前記視線検出エリア内に前記視線が向けられたことに基づいて、前記ジェスチャーを前記変更操作に関連付ける制御を予め規定された時間継続することを特徴とする請求項２〜７のいずれか一項に記載の車両用表示入力装置。
【請求項９】
前記表示領域は、前記視線検出エリアから外れて位置し、前記上位層にて選択されている前記選択項目を通知するメニュー表示部（３４）、を有することを特徴とする請求項２〜８のいずれか一項に記載の車両用表示入力装置。
【請求項１０】
前記視線検出エリア内に位置し、当該視線検出エリア内に前記視線が向けられたことに基づいて発光する発光領域（３６，３７）、をさらに備えることを特徴とする請求項１〜９のいずれか一項に記載の車両用表示入力装置。
【請求項１１】
前記ジェスチャー検出手段は、前記車両に設けられたステアリング（１１０）のリム部（１１１）を含むよう予め規定されたジェスチャー検出エリア（ＧＳＡ）内での前記ジェスチャーを検出することを特徴とする請求項１〜１０のいずれか一項に記載の車両用表示入力装置。
【請求項１２】
前記運転者の前記視線を検出する視線検出手段（７２，７３，２８５）と、
前記視線検出手段によって前記視線が検出されているか否かを通知する視線検出インジケータ（３８）と、をさらに備えることを特徴とする請求項１〜１１のいずれか一項に記載の車両用表示入力装置。
【請求項１３】
前記ジェスチャー検出手段によって前記運転者の手が検出されているか否かを通知するジェスチャー検出インジケータ（３９）、をさらに備えることを特徴とする請求項１〜１２のいずれか一項に記載の車両用表示入力装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、車両に搭載され、車両に係わる情報を表示領域に表示し、車両の運転者によって操作が入力される車両用表示入力装置に関する。
【背景技術】
【０００２】
一般に、入力装置に設定された操作メニューでは、複数の選択項目のいずれかを選択する選択操作や、その選択を確定して選択項目の内容を具体的に変更する変更操作といった複数の操作が必要とされる。このような複数の操作が規定された操作メニューを有する構成として、例えば特許文献１には、二種類のジェスチャーを検出可能な操作入力装置が開示されている。この操作入力装置では、第一の種類のジェスチャーにより、操作モードの選択操作が行われる。そして、第二の種類のジェスチャーにより、選択された操作モードでのパラメータの変更操作が行われる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−１３５４３９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
さて、特許文献１の構成では、運転者が行う二種類のジェスチャーは、操作入力装置によって判別される必要があるため、それぞれ複雑な手の動作となってしまう。そのため、ステアリングを握ったままジェスチャーを行うことが難しくなり、運転者は、長い時間ステアリングから手を離さなければならない。加えて、複雑な二種類のジェスチャーを行うことに運転者の意識が向けられてしまいうことで、ジェスチャー実施に伴った運転への注意力低下が生じ易かった。
【０００５】
本発明は、以上説明した問題に鑑みてなされたものであって、その目的は、運転中の操作入力に伴った運転者の注意力低下、所謂ドライバーディストラクションを低減可能な車両用表示入力装置を提供することである。
【課題を解決するための手段】
【０００６】
上記目的を達成するために、第１の発明は、車両に搭載され、車両に係わる情報を表示領域に表示し、複数階層に構成された操作メニューの操作が車両の運転者によって入力される車両用表示入力装置であって、表示領域の少なくとも一部を含むよう予め規定された視線検出エリア内に、運転者の視線が向けられているか否かを判定する判定手段と、運転者の手によるジェスチャーを検出する検出手段と、視線検出エリア内に視線が向けられていない場合に、操作メニューの上位層に設けられた複数の選択項目を選択する選択操作にジェスチャーを関連付け、視線検出エリア内に視線が向けられた場合に、上位層にて選択された選択項目の設定を変更する下位層での変更操作にジェスチャーを関連付ける制御手段と、を備える車両用表示入力装置とする。
【０００７】
この発明では、視線検出エリア内に視線が向けられているか否かに基づいて、運転者の手によるジェスチャーと関連付けられる操作メニューの操作が、複数のうちで切り替えられる。故に運転者は、視線移動との組み合わせにより、簡単なジェスチャーによって、複数の操作を行うことができる。以上によれば、ステアリングを握ったままでのジェスチャーの実施が可能となり、且つ、ジェスチャーの実施に伴う運転への集中低下も抑制される。
【０００８】
したがって、運転中における操作の入力に伴ったドライバーディストラクションを低減可能な車両用表示入力装置が実現される。
【０００９】
加えて、第２の発明は、操作メニューが複数階層に構成された車両用表示入力装置であって、制御手段は、視線検出エリア内に視線が向けられていない場合に、操作メニューの上位層に設けられた複数の選択項目のいずれかを選択する選択操作にジェスチャーを関連付け、視線検出エリア内に視線が向けられたことに基づいて、上位層にて選択された選択項目の内容を変更する下位層での変更操作にジェスチャーを関連付けることを特徴とする。
【００１０】
この発明によれば、選択項目を選択する選択操作から選択項目の設定を変更する変更操作への切り替えが、視線検出エリア内への視線の移動に基づいて行われる。故に運転者は、簡単なジェスチャーによって、一連の選択操作及び変更操作の両方を行うことができる。したがって、ドライバーディストラクションのいっそうの低減が可能となる。
【００１１】
尚、上記括弧内の参照番号は、本発明の理解を容易にすべく、後述する実施形態における具体的な構成との対応関係の一例を示すものにすぎず、本発明の範囲を何ら制限するものではない。
【図面の簡単な説明】
【００１２】
【図１】本発明の第一実施形態による車両用表示入力装置が車両に搭載された状態を示す車内の斜視図である。
【図２】表示入力装置の正面図である。
【図３】表示入力装置の電気的構成を示すブロック図である。
【図４】表示入力装置、ステアリング、及び運転者の手指の位置関係と、左右の視線検出エリアの配置を示す図である。
【図５】表示入力装置、ステアリング、及び運転者の手指の位置関係と、検出対象エリア及びジェスチャー検出エリアの配置を示す図である。
【図６】選択操作を行った場合の表示入力装置の動作を順に示す図である。
【図７】変更操作を行った場合の表示入力装置の動作を順に示す図である。
【図８】視線移動及びジェスチャーを組み合わせた一連の操作入力を実現するために制御部によって実施される処理を示すフローチャートである。
【図９】第二実施形態による表示入力システムの電気的構成を示すブロック図である。
【発明を実施するための形態】
【００１３】
以下、本発明の複数の実施形態を図面に基づいて説明する。尚、各実施形態において対応する構成要素には同一の符号を付すことにより、重複する説明を省略する場合がある。各実施形態において構成の一部分のみを説明している場合、当該構成の他の部分については、先行して説明した他の実施形態の構成を適用することができる。また、各実施形態の説明において明示している構成の組み合わせばかりではなく、特に組み合わせに支障が生じなければ、明示していなくても複数の実施形態の構成同士を部分的に組み合わせることができる。そして、複数の実施形態及び変形例に記述された構成同士の明示されていない組み合わせも、以下の説明によって開示されているものとする。
【００１４】
（第一実施形態）
図１及び図２に示す本発明の第一実施形態による表示入力装置１００は、車両に搭載され、車両に係る各種の情報を表示によって運転者に提供する車両用の表示装置である。加えて表示入力装置１００は、車両に搭載された例えばナビゲーション装置のような車載機器１４０への操作を受け付ける車両用の入力装置の機能を備えている。表示入力装置１００は、図１に示すインスツルメントパネル１２０のメータフード１２１内に、図２に示す正面側を運転席に向けた姿勢で収容されている。
【００１５】
表示入力装置１００において情報が表示される表示領域３０は、中央表示部３１、右表示部３２、左表示部３３、及び投影表示部３４等によって構成されている。加えて表示入力装置１００には、右発光領域３６、左発光領域３７、視線検出インジケータ３８、及びジェスチャー検出インジケータ３９が設けられている。尚、以下の説明では、静止状態にある車両において重力に沿う方向を下方向ＤＤとし、下方向ＤＤとは反対の方向を上方向ＵＤとする。加えて、重力の方向と実質直交し、中央表示部３１の表示面に沿う方向を水平方向ＨＤとする。
【００１６】
中央表示部３１は、表示入力装置１００の中央に位置している。中央表示部３１は、円環状の加飾リング２８によって囲まれた円形状に形成されている。中央表示部３１は、右表示部３２及び左表示部３３によって水平方向ＨＤの両側から挟まれている。中央表示部３１は、中央表示器２１によって形成されており、種々の情報画像を表示する。中央表示部３１には、例えば車両の走行速度等が画像によって指針表示される。
【００１７】
右表示部３２は、運転者からの見かけ上にて、中央表示部３１に対し水平方向ＨＤの右側に位置している。右表示部３２は、部分的に欠損した円形状に形成されている。右表示部３２の外径は、中央表示部３１の外径よりも小さくされている。右表示部３２は、右発光領域３６及び加飾リング２８によって外周側を囲まれている。右表示部３２は、右表示器２２によって形成されており、種々の情報画像を表示する。右表示部３２には、例えば燃料の残量及び水温等が画像によって指針表示される。
【００１８】
左表示部３３は、運転者からの見かけ上にて、中央表示部３１に対し水平方向ＨＤの左側であって、中央表示部３１を挟んで右表示部３２の反対側に位置している。左表示部３３の外径は、右表示部３２の外径と実質的に同一である。左表示部３３は、左発光領域３７及び加飾リング２８によって外周側を囲まれている。左表示部３３は、左表示器２３によって形成されており、種々の情報画像を表示する。左表示部３３には、例えば車両に搭載された走行用の機関における出力軸の回転速度が画像によって指針表示される。
【００１９】
投影表示部３４は、運転者からの見かけ上にて、中央表示部３１の上方向ＵＤに位置している。投影表示部３４は、後述するスモークカバー４１に、水平方向ＨＤを長手とする矩形形状に規定されている。投影表示部３４には、後述するプロジェクタ６０（図５参照）によって表示像３５の光が投影される。例えばナビゲーション装置に設定された目的地への経路案内が、表示像３５として投影表示部３４に表示される。
【００２０】
右発光領域３６は、右発光リング２６によって右表示部３２を囲む途切れた環状に形成されている。左発光領域３７は、左発光リング２７によって左表示部３３を囲む途切れた環状に形成されている。右発光リング２６及び左発光リング２７は、アクリル樹脂等の無色透明な樹脂の板材によって形成されている。右発光リング２６及び左発光リング２７は、右発光領域３６及び左発光領域３７である発光面を概ね均一に発光させることができる。
【００２１】
視線検出インジケータ３８及びジェスチャー検出インジケータ３９は、加飾リング２８に形成された円形状の透光部である。各インジケータ３８，３９は、中央表示部３１の中心よりも下方向ＤＤに位置し、水平方向ＨＤに並んでいる。各インジケータ３８，３９は、光を透過することにより発光する。各インジケータ３８，３９は、複数の発光色にて発光することができる。
【００２２】
次に、表示入力装置１００の構成を図３〜図５に基づいて説明する。表示入力装置１００は、中央表示器２１、右表示器２２、左表示器２３、プロジェクタ６０、視線検出器７２、ジェスチャー検出器７４、入出力回路７０、及び各光源７６〜７９を備えている。加えて表示入力装置１００は、これらの構成を収容する筐体４０を備えている。
【００２３】
中央表示器２１、右表示器２２、及び左表示器２３はそれぞれ、例えばThin Film Transistor（ＴＦＴ）方式のディスプレイパネルと、ディスプレイパネルを透過照明するバックライト等とを有する液晶ディスプレイである。ディスプレイパネルによって形成される表示面には、複数の画素が配列されている。表示面に描画されるカラー画像がバックライトによって透過照明されることにより、各表示器２１〜２３は、種々の情報画像をカラー表示することができる。各表示器２１〜２３は、制御部８０に接続されており、制御部８０から出力される映像信号に基づいて各画素を駆動することで、各表示部３１〜３３に一連の情報画像を映像として表示する。
【００２４】
プロジェクタ６０は、多数のマイクロミラーを有するデジタルマイクロデバイス（ＤＭＤ）、及びＤＭＤに向けて光を投射する投射光源を有するDigital Light Processing（ＤＬＰ：登録商標）方式の投影器である。プロジェクタ６０は、制御部８０に接続されており、制御部８０から出力される映像信号に基づいて、ＤＭＤに設けられた多数のマイクロミラーの姿勢を制御する。投射光源から投射された光は、姿勢を制御されたＤＭＤに反射されることにより、表示像３５（図２参照）を映し出す光となって投影表示部３４に投影される。以上によって投影表示部３４には、一連の表示像３５が映像として表示される。
【００２５】
視線検出器７２は、運転者の視線を検出するセンサユニットである。視線検出器７２は、近赤外線を放射する発光素子、及び近赤外線を含む波長域の光を電気信号に変換する撮像素子等によって構成されている。視線検出器７２は、中央表示部３１の下方向ＤＤに位置している（図２も参照）。視線検出器７２は、運転席に着座した運転者の顔面が位置すると想定される範囲を、検出対象エリアＳＴＡ（図５参照）に含むような姿勢で筐体４０に保持されている。発光素子は、検出対象エリアＳＴＡに向けて近赤外線を照射する。発光素子から照射された近赤外線の一部は、運転者の顔面等により撮像素子に向けて反射される。撮像素子は、反射光を電気信号に変換することにより、運転者の目を含む範囲を撮影した近赤外画像を逐次生成する。視線検出器７２は、撮像素子によって生成された近赤外画像を、逐次入出力回路７０へと出力する。
【００２６】
ジェスチャー検出器７４は、運転者の手指Ｆによるジェスチャーを検出するセンサユニットである。ジェスチャー検出器７４は、右表示部３２を挟んで中央表示部３１の反対側に位置している。ジェスチャー検出器７４は、予め規定されたジェスチャー検出エリアＧＳＡ（図５参照）内でのジェスチャーを検出できる。ジェスチャー検出エリアＧＳＡは、車両に設けられたステアリング１１０のリム部１１１を含むよう規定されている。
【００２７】
ジェスチャー検出器７４は、近赤外線を放射する発光素子、及び近赤外線を検出する受光素子等によって構成されている。発光素子は、ジェスチャー検出エリアＧＳＡを含む範囲に向けて、近赤外線を照射する。発光素子から照射された近赤外線の一部は、運転者の手指Ｆ及びステアリング１１０等により、受光素子に向けて反射される。受光素子は、当該受光素子に到達する反射光の強弱を示す検出信号を生成する。ジェスチャー検出器７４は、検出素子によって生成された検出信号を、入出力回路７０へと出力する。
【００２８】
入出力回路７０は、視線変換部７３、入力変換部７５、光源駆動部８１、映像出力部７１、及び制御部８０を有している。
【００２９】
視線変換部７３は、視線検出器７２から取得した近赤外画像を画像解析することにより、運転者の視点の位置と視線の方向とを算出する演算部である。具体的に視線変換部７３は、近赤外画像から、運転者の眼球の位置を特定する。加えて視線変換部７３は、眼球及びその周辺領域を切り出した画像から、眼球に映り込んだ発光素子の反射像（プルキニエ像）の位置と、瞳孔の位置とを検出する。プルキニエ像の位置は、視線の向きを変えたとしても、実質変化しない。一方で、瞳孔の位置は、視線の向きを変えることによって変化する。故に、プルキニエ像及び瞳孔の相対位置関係から、視線変換部７３は、視線の向きを算出することができる。視線変換部７３は、視線検出器７２によって視線が検出されているか否かを示す状態情報と、特定した眼球の位置（視点位置）を示す情報と、視線の向きを示す情報とを、制御部８０に逐次出力する。
【００３０】
入力変換部７５は、ジェスチャー検出器７４から入力される検出信号を解析することにより、運転者の手指Ｆがジェスチャー検出エリアＧＳＡに有るか否か、及び運転者の手指Ｆによるジェスチャーが行われたか否か、を判定する。具体的に入力変換部７５は、ステアリング１１０を握りつつ手指Ｆの指先を振るような動作を、運転者のジェスチャーとして検出する。入力変換部７５は、ジェスチャー検出器７４によって手指Ｆが検出されているか否かを示す状態情報を、制御部８０に出力する。加えて入力変換部７５は、手指Ｆの指先を振ることによって生じる波形の変化が検出信号から抽出された場合に、ジェスチャーが行われた旨の情報を、制御部８０に出力する。
【００３１】
光源駆動部８１は、各光源７６〜７９と接続されている。光源駆動部８１は、制御部８０から取得する制御信号に基づいて、各光源７６〜７９に印加する電流を制御する。映像出力部７１は、各表示器２１〜２３及びプロジェクタ６０と接続されている。映像出力部７１は、制御部８０から取得する制御信号に基づいて、各表示器２１〜２３に表示される画像及びプロジェクタ６０から投影される表示像の元画像を描画する。そして映像出力部７１は、描画した画像の画像データを各表示器２１〜２３及びプロジェクタ６０に出力する。
【００３２】
制御部８０は、プログラムによって作動するマイクロコンピュータ、及び車内Local Area Network（ＬＡＮ）１３０との間で通信を行うインターフェース等によって構成されている。制御部８０は、ナビゲーション装置等の車載機器１４０から車内ＬＡＮ１３０へ出力された車両の情報を取得する。加えて制御部８０は、運転者の視線方向及びジャスチャーの実施に係わる各種の情報を、視線変換部７３及び入力変換部７５から取得する。制御部８０は、取得した情報に基づいて、映像出力部７１及び光源駆動部８１に出力する制御信号を生成する。
【００３３】
制御部８０は、プログラムの実行により、判定ブロック８２を機能ブロックとして有する。判定ブロック８２は、視線変換部７３から取得する視点位置及び視線の向きを示す情報に基づき、視線の到達位置を算出する。加えて判定ブロック８２は、予め規定された視線検出エリア５０内に運転者の視線が向けられているか否かを判定する。
【００３４】
視線検出エリア５０は、中央表示部３１の表示面に沿って規定された仮想面であり、表示領域３０の少なくとも一部を含むよう規定されている。表示入力装置１００では、右視線検出エリア５０ｒ及び左視線検出エリア５０ｌという二つの視線検出エリア５０が、互いに異なる位置に規定されている。右視線検出エリア５０ｒ及び左視線検出エリア５０ｌは、表示領域の水平方向ＨＤに並ぶ配置で規定される。右視線検出エリア５０ｒ及び左視線検出エリア５０ｌは、水平方向ＨＤにおいて互いに離れた位置に規定されている。
【００３５】
以上の右視線検出エリア５０ｒ内には、右表示部３２及び右発光領域３６が位置している。また、左視線検出エリア５０ｌ内には、左表示部３３及び左発光領域３７が位置している。一方で、投影表示部３４、視線検出インジケータ３８、及びジェスチャー検出インジケータ３９は、右視線検出エリア５０ｒ及び左視線検出エリア５０ｌの両方から外れた位置に設けられている。
【００３６】
各光源７６〜７９は、それぞれ発光ダイオード等の発光素子を組み合わせることによって構成されている。各光源７６〜７９は、光源駆動部８１に接続されており、制御部８０によって発光を制御されている。
【００３７】
右リング光源７６は、右発光リング２６に光を入射させることにより、右発光領域３６を発光させる。光源駆動部８１から右リング光源７６への電流の印加は、運転者の視線が右視線検出エリア５０ｒ内に向けられることによって開始される。以上により、右発光領域３６は、右視線検出エリア５０ｒ内への視線が検知されたことを、運転者に通知できる。
【００３８】
左リング光源７７は、左発光リング２７に光を入射させることにより、左発光領域３７を発光させる。光源駆動部８１から左リング光源７７への電流の印加は、運転者の視線が左視線検出エリア５０ｌ内に向けられることによって開始される。以上により、左発光領域３７は、左視線検出エリア５０ｌ内への視線が検知されたことを、運転者に通知できる。
【００３９】
視線インジケータ光源７８は、視線検出インジケータ３８に向けて光を照射することにより、当該インジケータ３８を発光表示させる。視線インジケータ光源７８は、視線検出器７２及び視線変換部７３によって視線が検出されることにより、緑色に発光する。一方で、視線が検出されていない状態では、視線インジケータ光源７８は、橙色に発光する。以上により、視線検出インジケータ３８は、視線の検出（トラッキング）が正常に行われているか否かを、発光色によって運転者に通知できる。
【００４０】
ジェスチャーインジケータ光源７９は、ジェスチャー検出インジケータ３９に向けて光を照射することにより、当該インジケータ３９を発光表示させる。ジェスチャーインジケータ光源７９は、ジェスチャー検出器７４及び入力変換部７５によって手指Ｆが検出されることにより、緑色に発光する。一方で、手指Ｆの検出されていない状態では、ジェスチャーインジケータ光源７９は、橙色に発光する。これにより、ジェスチャー検出インジケータ３９は、手指Ｆの検出が正常に行われているか否かを、発光色によって運転者に通知できる。尚、視線インジケータ光源７８及びジェスチャーインジケータ光源７９の発光色は、適宜変更可能である。また、これらの光源７８，７９の光源色は、互いに異なっていてもよい。
【００４１】
図４及び図５に示す筐体４０は、樹脂材料等により、開口を有する容器状に形成されている。筐体４０は、各表示器２１〜２３及びプロジェクタ６０等を保持している。筐体４０の開口には、スモークカバー４１が取り付けられている。スモークカバー４１は、透光性の樹脂材料によって、湾曲した板状に形成されている。スモークカバー４１には、投影表示部３４が形成されている。スモークカバー４１は、筐体４０の開口を物理的に塞ぐことにより、筐体４０内への塵及び埃等の侵入を防止している。
【００４２】
次に、表示入力装置１００に設定された操作メニューの操作方法を、図６及び図７に基づいて説明する。操作メニューは、表示入力装置１００及び各車載機器１４０（図３参照）等を操作するグラフィックユーザーインタフェースに設定された選択肢の集合である。操作メニューは、複数階層に構成されており、上位層に設けられた複数の選択項目のいずれかが選択されることにより、選択された選択項目の設定を具体的に変更する下位層に移行する。尚、図６及び図７では、運転者が視線を向けている注視点の位置は、目を模したアイコンによって図示されている。加えて、各表示部の表示を見易くするために、ステアリング１１０の図示は、省略されている。
【００４３】
図６は、運転者の視線が右視線検出エリア５０ｒ及び左視線検出エリア５０ｌのいずれにも向けられていない場合を示している。この場合、制御部８０（図３参照）は、検出された手指Ｆの指先によるジェスチャーを、選択中の選択項目を順に切り替える上位層での選択操作に関連付ける。また、指先のジェスチャーによって選択中の選択項目が切り替えられると、表示モードの変更によって投影表示部３４、右表示部３２、及び左表示部３３の各表示内容が、合わせて切り替えられる。
【００４４】
具体的に、図６Ａに示す通常表示モードでは、右表示部３２には燃料計及び水温計が表示され、左表示部３３にはタコメータが表示される。加えて投影表示部３４には、オドメータが表示される。以上の通常表示モードにおいてジェスチャーが行われると、図６Ｂに示すエアコン操作モードに切り替えられる。
【００４５】
エアコン操作モードでは、車両に搭載された空調機器が操作の対象とされ、当該空調機器に設定された設定温度が選択項目とされる。そして、投影表示部３４には、選択項目である設定温度の現在値、及び「ａｉｒ−ｃｏｎ」という文字が表示される。また、右表示部３２及び左表示部３３には、エアコン操作モードでの変更操作の内容が表示される。詳記すると、右表示部３２には、設定温度の上昇（増加）を示す画像が表示される。さらに、左表示部３３には設定温度の下降（減少）を示す画像が表示される。以上のエアコン操作モードにおいてジャスチャーが行われると、図６Ｃに示すオーディオ操作モードに切り替えられる。
【００４６】
オーディオ操作モードでは、車両に搭載されたオーディオ機器が操作の対象とされ、当該オーディオ機器にて再生中の楽曲のトラック番号が選択項目とされる。そして、投影表示部３４には、選択項目であるトラック番号の現在値、及び「Ａｕｄｉｏ」という文字が表示される。また、右表示部３２には、トラック番号の送り（増加）を示す画像が表示される。さらに、左表示部３３にはトラック番号の戻し（減少）を示す画像が表示される。以上のオーディオ操作モードにおいてジャスチャーが行われると、図６Ｄに示すマップ操作モードに切り替えられる。
【００４７】
マップ操作モードでは、ナビゲーション装置が操作の対象とされ、当該ナビゲーション装置に表示される地図のスケールが選択項目とされる。そして、投影表示部３４には、選択項目であるスケールの現在値、及び「Ｎａｖｉ」という文字が表示される。また、右表示部３２には、広域の地図に変更する旨を示す画像が表示される。さらに、左表示部３３には、詳細な地図に変更する旨を示す画像が表示される。以上のマップ操作モードにおいてジャスチャーが行われると、図６Ａに示す通常表示モードに切り替えられる。
【００４８】
図７は、エアコン操作モード（図６Ｂ参照）において、運転者の視線が右視線検出エリア５０ｒ又は左視線検出エリア５０ｌに向けられた場合を示している。この場合、制御部８０（図３参照）は、検出された手指Ｆの指先によるジェスチャーを、設定温度の設定値を変更する下位層での変更操作に関連付ける。加えて、手指Ｆの指先のジェスチャーによって設定温度が変更されると、投影表示部３４の表示される数値も、合わせて変更される。
【００４９】
具体的に、図７Ａに示すように、運転者の視線が右視線検出エリア５０ｒ内に向けられると、右発光領域３６が発光し（ドットにて図示する）、設定温度を上げる増加変更操作が可能となる。こうした状態下、手指Ｆによるジェスチャーが行われると、図７Ｂに示すように、設定温度が引き上げられる。
【００５０】
加えて、図７Ｂに示すように、運転者の視線が左視線検出エリア５０ｌ内に向けられると、左発光領域３７が発光し（ドットにて図示する）、設定温度を下げる減少変更操作が可能となる。こうした状態下、手指Ｆによるジェスチャーが行われると、図７Ｃに示すように、設定温度が引き下げられる。そして、手指Ｆによるジェスチャーがさらに実施されることにより、図７Ｄに示すように、設定温度はさらに引き下げられる。運転者の視線が各視線検出エリア５０ｒ，５０ｌの両方から外された後も、ジェスチャーによる減少変更操作か可能な状態は、予め規定された所定時間だけ継続される。
【００５１】
図６Ｃに示すオーディオ操作モードにおいて、右視線検出エリア５０ｒ又は左視線検出エリア５０ｌに運転者の視線が向けられた場合では、手指Ｆによるジェスチャーは、再生中のトラック番号を変更する下位層での変更操作に関連付けられる。具体的に、運転者の視線が右視線検出エリア５０ｒ内に向けられると、再生するトラック番号を繰り上げる増加変更操作が可能となる。一方で、運転者の視線が左視線検出エリア５０ｌ内に向けられると、再生するトラック番号を繰り下げる減少変更操作が可能となる。
【００５２】
図６Ｄに示すマップ操作モードにおいて、右視線検出エリア５０ｒ又は左視線検出エリア５０ｌに運転者の視線が向けられた場合では、手指Ｆによるジェスチャーは、地図のスケールを変更する下位層での変更操作に関連付けられる。具体的に、運転者の視線が右視線検出エリア５０ｒ内に向けられると、地図のスケールを大きくする増加変更操作が可能となる。この増加変更操作により、縮尺の小さい広域の地図が表示されるようになる。一方で、運転者の視線が左視線検出エリア５０ｌ内に向けられると、地図のスケールを小さくする減少変更操作が可能となる。この減少変更操作により、縮尺の大きい詳細な地図が表示されるようになる。
【００５３】
以上説明した表示入力装置１００の操作入力を実現するために、制御部８０によって実施される処理を、図８に基づき、図３〜図５を参照しつつ説明する。図８に示す処理は、車両のアクセサリ電源がオン状態とされ、車両の電源回路から表示入力装置１００へと電力の供給が開始されることにより、制御部８０によって開始される。この処理は、アクセサリ電源がオフ状態とされるまで、制御部８０によって繰り返し実施される。
【００５４】
Ｓ１０１では、判定ブロック８２によって右視線検出エリア５０ｒ内に視線が向けられているか否かを判定する。Ｓ１０１にて、右視線検出エリア５０ｒ内に視線が向けられていると肯定判定をした場合には、Ｓ１０５に進む。一方で、Ｓ１０１にて、右視線検出エリア５０ｒ内に視線が向けられていないと否定判定をした場合には、Ｓ１０２に進む。
【００５５】
Ｓ１０２では、判定ブロック８２によって左視線検出エリア５０ｌ内に視線が向けられているか否かを判定する。Ｓ１０２にて、左視線検出エリア５０ｌ内に視線が向けられていると肯定判定をした場合には、Ｓ１１１に進む。一方で、Ｓ１０２にて、左視線検出エリア５０ｌ内に視線が向けられていないと否定判定をした場合には、Ｓ１０３に進む。以上のＳ１０１及びＳ１０２の否定判定により、ジェスチャーは、選択操作に関連付けられるようになる。これにより、運転者は、複数の選択項目のいずれかを選択できる。
【００５６】
Ｓ１０３では、手指Ｆの指先によるジェスチャーの検出が有ったか否かを判定する。Ｓ１０３にて、ジェスチャーの検出が無い旨の否定判定をした場合には、Ｓ１０４をスキップすることにより、１０１に戻る。一方で、Ｓ１０３にて、ジェスチャーが検出された旨の肯定判定をした場合には、Ｓ１０４に進む。Ｓ１０４では、指先によるジェスチャーを選択操作に関連付け、選択状態にある選択項目を切り替える。加えて、各表示部３２〜３４の表示を切り替え後の選択項目に対応した内容に変更し、Ｓ１０１に戻る。
【００５７】
Ｓ１０１の肯定判定に基づくＳ１０５以降の処理では、指先によるジェスチャーは、増加変更操作に関連付けられる。Ｓ１０５では、光源駆動部８１から右リング光源７６への電流の印加を開始させることにより、右発光領域３６の発光を開始させ、Ｓ１０６に進む。Ｓ１０６では、Ｓ１０３と同様に、ジェスチャー検出が有ったか否かを判定する。Ｓ１０６にて否定判定をした場合には、Ｓ１０７及びＳ１０８をスキップし、Ｓ１０９に進む。一方で、Ｓ１０６にて肯定判定をした場合には、Ｓ１０７に進む。
【００５８】
Ｓ１０７では、車載機器１４０の設定変更を指示する指示信号を車内ＬＡＮ１３０に出力する出力処理を実施し、Ｓ１０８に進む。Ｓ１０７の出力処理では、設定温度の上昇を空調機器に指示する指示命令、再生曲の送りをオーディオ機器に指示する指示命令、及び地図のスケール拡大をナビゲーション装置に指示する指示命令等が出力される。
【００５９】
Ｓ１０８では、投影表示部３４の表示を変更し、Ｓ１０９に進む。このＳ１０８により、操作対象である車載機器１４０に設定された現在の設定値が投影表示部３４に表示されるようになる。Ｓ１０９では、Ｓ１０１の肯定判定によってジェスチャーが増加変更操作に関連付けられてから、所定の時間が経過したか否かを判定する。Ｓ１０９にて否定判定をした場合には、Ｓ１０６に戻り、ジェスチャーの入力の受け付けを継続する。所定時間の経過によりＳ１０９にて肯定判定をした場合には、Ｓ１１０に進む。Ｓ１１０では、Ｓ１０５にて開始した右リング光源７６への電流の印加を停止することにより、右発光領域３６を消灯させ、Ｓ１０１に戻る。
【００６０】
Ｓ１０２の肯定判定に基づくＳ１１１以降の処理では、指先によるジェスチャーは、減少変更操作に関連付けられる。Ｓ１１１では、光源駆動部８１から左リング光源７７への電流の印加を開始させることにより、左発光領域３７の発光を開始させ、Ｓ１１２に進む。Ｓ１１２では、Ｓ１０３及びＳ１０６と同様に、ジェスチャーの検出が有ったか否かを判定する。Ｓ１１２にて否定判定をした場合には、Ｓ１１３及びＳ１１４をスキップし、Ｓ１１５に進む。一方で、Ｓ１１２にて肯定判定をした場合には、Ｓ１１３に進む。
【００６１】
Ｓ１１３では、Ｓ１０７と同様に、車載機器１４０の設定変更を指示する指示信号を車内ＬＡＮ１３０に出力する出力処理を実施し、Ｓ１１４に進む。Ｓ１１３の出力処理では、設定温度の下降を空調機器に指示する指示命令、再生曲の戻しをオーディオ機器に指示する指示命令、及び地図のスケール縮小をナビゲーション装置に指示する指示命令等が出力される。
【００６２】
Ｓ１１４では、投影表示部３４の表示を変更し、Ｓ１１５に進む。このＳ１１４により、操作対象である車載機器１４０に設定された現在の設定値が投影表示部３４に表示されるようになる。Ｓ１１５では、Ｓ１０２の肯定判定によってジェスチャーが減少変更操作に関連付けられてから、所定の時間が経過したか否かを判定する。Ｓ１１５にて否定判定をした場合には、Ｓ１１２に戻り、ジェスチャーの入力の受け付けを継続する。所定時間の経過によりＳ１１５にて肯定判定をした場合には、Ｓ１１６に進む。Ｓ１１６では、Ｓ１１１にて開始した左リング光源７７への電流の印加を停止することにより、左発光領域３７を消灯させ、Ｓ１０１に戻る。
【００６３】
ここまで説明した第一実施形態では、視線検出エリア５０内に視線が向けられているか否かに基づいて、運転者の手指Ｆによるジェスチャーと関連付けられる操作が、複数のうちで切り替えられる。故に、運転者は、視線移動との組み合わせにより、手指Ｆの指先を振るという一つの簡単なジェスチャーによって、複数の操作を行うことができる。以上によれば、ステアリング１１０を握ったままでのジェスチャーの実施が可能となり、且つ、ジェスチャーの実施に伴う運転への集中低下も抑制される。したがって、運転中における操作の入力に伴ったドライバーディストラクションが低減可能となる。
【００６４】
加えて第一実施形態では、選択操作から変更操作への切り替えが、視線検出エリア５０内への視線の移動に基づいて行われる。故に運転者は、手指Ｆによる簡単なジェスチャーによって、一連の選択操作及び変更操作の両方を行うことができる。したがって、ドライバーディストラクションのいっそうの低減が可能となる。
【００６５】
また第一実施形態では、右視線検出エリア５０ｒ及び左視線検出エリア５０ｌは、それぞれ右表示器２２及び左表示器２３を含むよう規定されている。故に、各視線検出エリア５０ｒ，５０ｌは、センターコンソール及びセンタークラスタ等よりも、前景の近くに位置し得る。その結果、選択操作から変更操作へと移行するため、いずれかの視線検出エリア５０内に視線を一旦移動させる動作は、センターコンソール及びセンタークラスタ等に設けられたスイッチ類を目視にて確認するような視線移動の動作よりも、短時間で完了し得る。こうして、前景から視線を外す時間が短縮されることにより、運転者は、運転中に変更操作を行ったとしても、運転への集中を容易に維持できる。
【００６６】
さらに第一実施形態では、二つの視線検出エリア５０が規定されている。故に、一方の右視線検出エリア５０ｒ内に視線が向けられた場合と、他方の左視線検出エリア５０ｌ内に視線が向けられた場合とで、同一のジェスチャーを、互いに異なる二つの変更操作に関連付けることが可能となる。その結果、下位層における変更操作の操作性向上が実現される。
【００６７】
加えて第一実施形態では、右視線検出エリア５０ｒ内に視線が向けられた場合と、左視線検出エリア５０ｌ内に視線が向けられた場合とで、同一のジェスチャーが、逆の作動となる変更操作に関連付けられている。故に、運転者は、二つの視線検出エリア５０ｒ，５０ｌ間での視線移動により、設定温度等を所望の設定値に速やかに調整することができる。したがって、下位層における変更操作の操作性は、いっそう向上可能となる。
【００６８】
また第一実施形態のように、二つの視線検出エリア５０ｒ，５０ｌが水平方向ＨＤに並ぶ構成であれば、運転者は、水平方向ＨＤへの視線移動により、ジェスチャーと関連付けられる変更操作を切り替えることができる。その結果、下位層における変更操作の操作性は、さらに向上する。
【００６９】
さらに第一実施形態では、二つの視線検出エリア５０ｒ，５０ｌは、互いに離れて位置している。そのため、運転者が視線を右視線検出エリア５０ｒに向けているつもりでも、左視線検出エリア５０ｌ内で視線が検出されてしまう事態、又はその逆の事態は、生じ難くなる。以上によれば、運転者の視線移動の誤検知を低減し、視線移動による変更操作の切り替えを明確に生じさせることが可能となる。その結果、下位層における変更操作の操作性は、さらに高いものとなる。
【００７０】
加えて第一実施形態では、各変更操作の内容を表示する右表示器２２及び左表示器２３が、各視線検出エリア５０ｒ，５０ｌ内に位置している。故に、運転者は、右視線検出エリア５０ｒに視線を移動させる動作に合わせて、右表示器２２の表示内容を視認し得る。同様に、運転者は、左視線検出エリア５０ｌに視線を移動させる動作に合わせて、左表示器２３の表示内容を視認し得る。以上によれば、運転者は、関連付けられる変更操作の内容を認識したうえで、ジェスチャーを開始することができる。こうして、運転者の運転への集中を削ぎ難い、ユーザフレンドリーな表示入力装置１００が実現される。
【００７１】
また第一実施形態では、各視線検出エリア５０ｒ，５０ｌ内に一旦視線を移動させれば、変更操作の可能な状態が、所定の時間継続される。以上によれば、運転者は、変更操作を継続している間、視線検出エリア５０内に視線を留めておく必要が無くなる。その結果、運転者は、視線検出エリア内に一旦移動させた視線を、速やかに前景に戻すことができる。以上によれば、前景から視線を外したことに起因する運転への集中低下は、僅かとなる。
【００７２】
さらに第一実施形態では、選択状態にある選択項目が、二つの視線検出エリア５０から外れて位置する投影表示部３４によって通知される。故に、投影表示部３４の視認によって選択状態にある選択項目を確認した場合でも、ジェスチャーは、変更操作に関連付けられない。故に運転者は、所望の選択項目が選択状態にあるか否かを確認したうえで、下位層での変更操作に移行できる。
【００７３】
加えて第一実施形態では、各視線検出エリア５０ｒ，５０ｌ内に位置する各発光領域３６，３７によって、当該各エリア５０ｒ，５０ｌ内への視線移動が、運転者に明示される。その結果、運転者は、ジェスチャーが変更操作に関連付けられる状態となったことを確認したうえで、手指Ｆの動作を開始できる。以上のように、各発光領域３６，３７の発光により、ジェスチャーを開始しようとする運転者に安心感を与えることで、表示入力装置１００のユーザインターフェースは、いっそうユーザフレンドリーとなる。
【００７４】
また第一実施形態では、ジェスチャー検出エリアＧＳＡが、ステアリング１１０のリム部１１１を含むよう規定されている。故に、ステアリング１１０を把持したままのジェスチャーであっても、ジェスチャー検出器７４及び入力変換部７５は、確実に検出し得る。以上のように、ジェスチャーの検出精度が高められることにより、運転者は、運転への集中を削がれることなく、一連の選択操作及び変更操作を円滑に入力できる。
【００７５】
さらに第一実施形態によれば、視線検出器７２及び視線変換部７３による視線検出が正常に行われているか否かが、視線検出インジケータ３８によって運転者に通知される。同様に、ジェスチャー検出器７４及び入力変換部７５によるジェスチャー検出が正常に行われているか否かが、ジェスチャー検出インジケータ３９によって運転者に通知される。以上によれば、運転者は、視線検出及びジェスチャー検出が正しく実施されていることを確認したうえで、安心して視線移動及びジェスチャーを組み合わせた操作入力を行うことができる。
【００７６】
加えて第一実施形態における各インジケータ３８，３９は、二つの視線検出エリア５０から外れた位置に設けられている。そのため、各インジケータ３８，３９の状態を視認したとしても、選択操作から変更操作への移行は、生じない。故に運転者は、視線検出及びジェスチャー検出の状態確認したうえで、すみやかに選択項目の選択操作を開始することができる。
【００７７】
尚、第一実施形態において、右表示部３２及び左表示部３３が特許請求の範囲に記載の「内容表示部」に相当し、投影表示部３４が特許請求の範囲に記載の「メニュー表示部」に相当する。また、右発光領域３６及び左発光領域３７が特許請求の範囲に記載の「発光領域」に相当し、視線検出器７２及び視線変換部７３が特許請求の範囲に記載の「視線検出手段」に相当する。さらに、ジェスチャー検出器７４及び入力変換部７５が特許請求の範囲に記載の「ジェスチャー検出手段」に相当し、制御部８０が特許請求の範囲に記載の「制御手段」に相当し、判定ブロック８２が特許請求の範囲に記載の「判定手段」に相当する。加えて、表示入力装置１００が特許請求の範囲に記載の「車両用表示入力装置」に相当し右視線検出エリア５０ｒが特許請求の範囲に記載の「第一視線検出エリア」に相当し、左視線検出エリア５０ｌが特許請求の範囲に記載の「第二視線検出エリア」に相当する。そして、ステップＳ１０１が特許請求の範囲に記載の「第一判定部」に相当し、ステップＳ１０２が特許請求の範囲に記載の「第二判定部」に相当する。
【００７８】
（第二実施形態）
図９に示す本発明の第二実施形態は、第一実施形態の変形例である。第二実施形態による車両の表示入力システム２００は、第一実施形態による表示入力装置１００（図３参照）と同様のユーザインターフェースの機能を備えている。表示入力システム２００は、コンビネーションメータ２１０、ドライバーステータスモニタ（ＤＳＭ）２８５、ジェスチャー認識モニタ２８９、及び制御ユニット２８０等を組み合わせることによって構成されている。
【００７９】
コンビネーションメータ２１０は、メータフード１２１（図１参照）内に収容される車両用の表示装置である。コンビネーションメータ２１０は、第一実施形態と実質同一の映像出力部７１、各光源７６〜７９、及び光源駆動部８１と、表示器２２０及び表示制御部２１１とを有している。
【００８０】
表示器２２０は、第一実施形態の各表示器２１〜２３（図３参照）に相当するカラー表示可能な液晶ディスプレイである。表示制御部２１１は、プログラムによって作動するマイクロコンピュータ、車内ＬＡＮ１３０との間で通信を行うインターフェース、制御ユニット２８０との間で通信を行うインターフェース等によって構成されている。表示制御部２１１は、車内ＬＡＮ１３０及び制御ユニット２８０から取得した各種の情報に基づいて制御信号を生成し、生成した制御信号を光源駆動部８１及び映像出力部７１等に出力することにより、表示器２２０の表示及び各光源７６〜７９の発光を制御する。
【００８１】
ＤＳＭ２８５は、運転者の顔の向きや瞼の動きから、脇見や眠気を検知する運転支援装置である。ＤＳＭ２８５は、例えばステアリングポストの上面に載置されている。ＤＳＭ２８５は、第一実施形態と実質同一の視線検出器７２及び視線変換部７３を有している。ＤＳＭ２８５は、視線検出器７２によって視線が検出されているか否かを示す状態情報と、特定した視点位置を示す情報と、視線の向きを示す情報とを、制御ユニット２８０に逐次出力する。
【００８２】
ジェスチャー認識モニタ２８９は、運転者の手指Ｆ（図４参照）によるジェスチャーを認識するための装置である。ジェスチャー認識モニタ２８９は、水平方向ＨＤ（図２参照）においてコンビネーションメータ２１０と並ぶ配置にて、インスツルメントパネル１２０（図１参照）に取り付けられている。ジェスチャー認識モニタ２８９は、第一実施形態と実質同一のジェスチャー検出器７４及び入力変換部７５を有している。ジェスチャー認識モニタ２８９は、ジェスチャー検出器７４によって手指Ｆが検出されているか否かを示す状態情報と、ジェスチャーが行われた旨の情報とを、制御ユニット２８０に出力する。
【００８３】
制御ユニット２８０は、プログラムによって作動するマイクロコンピュータと、コンビネーションメータ２１０、ＤＳＭ２８５、ジェスチャー認識モニタ２８９、及び車内ＬＡＮ１３０との間で通信を行う複数のインターフェース等によって構成されている。制御ユニット２８０は、プログラムの実行により、第一実施形態と実質同一の判定ブロック８２を機能ブロックとして有する。制御ユニット２８０は、運転者の視線方向及びジャスチャーの実施に係わる各種の情報を、ＤＳＭ２８５及びジェスチャー認識モニタ２８９から取得する。そして制御ユニット２８０は、取得した情報に基づいて生成した制御信号を、表示制御部２１１及び車内ＬＡＮ１３０に出力することで、コンビネーションメータ２１０の表示及び車載機器１４０の設定値を制御する。
【００８４】
ここまで説明した第二実施形態のように、複数の構成の組み合わせによって構築された表示入力システム２００であっても、視線移動及びジェスチャーを組み合わせた操作入力が実現される。故に、運転者は、手指Ｆ（図４参照）の指先を振るという一つの簡単なジェスチャーによって、選択操作及び変更操作の両方を行うことができる。その結果、表示入力装置１００（図３参照）と同様のドライバーディストラクションの低減効果が発揮される。
【００８５】
尚、第二実施形態において、ＤＳＭ２８５が特許請求の範囲に記載の「視線検出手段」に相当し、ジェスチャー認識モニタ２８９が特許請求の範囲に記載の「ジェスチャー検出手段」に相当する。また、制御ユニット２８０が特許請求の範囲に記載の「制御手段」に相当し、表示入力システム２００が特許請求の範囲に記載の「車両用表示入力装置」に相当する。
【００８６】
（他の実施形態）
以上、本発明による複数の実施形態について説明したが、本発明は、上記実施形態に限定して解釈されるものではなく、本発明の要旨を逸脱しない範囲内において種々の実施形態及び組み合わせに適用することができる。
【００８７】
上記実施形態では、視線検出エリア外に視線が向けられている場合のジェスチャーは選択操作に関連付けられ、視線検出エリア内に視線が向けられている場合のジェスチャーは変更操作に関連付けられていた。しかし、視線移動に基づいてジェスチャーと関連付けられる操作は、操作メニューの構成に応じて適宜変更可能である。例えば、視線検出エリア内に視線が向けられている場合のジェスチャーが選択操作とされ、視線検出エリア外に視線が向けられている場合のジェスチャーが変更操作とされてもよい。加えて、操作メニューが複数階層に構成されていない形態においては、例えば、視線検出エリア内に視線が向けられている場合のジェスチャーが増加変更操作とされ、視線検出エリア外に視線が向けられている場合のジェスチャーが減少変更操作とされてもよい。
【００８８】
上記実施形態では、二つの視線検出エリアが水平方向ＨＤに並ぶ配置で規定されていたが、視線検出エリアは、一つであってもよく、又は三つ以上であってもよい。加えて、視線検出エリアの形状及び配置は、当該視線検出エリア内に表示領域の少なくとも一部が含まれるのであれば、適宜変更可能である。
【００８９】
上記実施形態では、上位層での選択操作により、エアコン操作モード、オーディオ操作モード、及びマップ操作モードが、順に切り替えられる設定であった。しかし、これら以外の表示モードが設定されていてもよい。例えば、別のエアコン操作モードとして、空調機器に設定された風量を選択項目とした表示モードが追加可能である。さらに別のエアコン操作モードとして、空調機器に設定された冷風又は温風の吹き出し口を選択項目とした表示モードが追加可能である。
【００９０】
また、別のオーディオ操作モードとして、オーディオ機器に設定された音量を選択項目とした表示モードが追加可能である。或いは、車両に搭載された携帯電話の着信時の操作を選択項目とした表示モードも追加可能である。この着信操作モードでは、運転者は、右視線検出エリア内に視線を向けてジェスチャーを実施することにより、通話を開始できる。一方で運転者は、左視線検出エリア内に視線を向けてジェスチャーを実施することにより、着信を保留できる。
【００９１】
上記実施形態では、右視線検出エリア内に視線が向けられた場合にジェスチャーは、増加変更操作に関連付けられていた。しかし、右視線検出エリア内に視線を向けた場合のジェスチャーは、減少変更操作に関連付けられてもよい。この場合、左視線検出エリア内に視線を向けた場合のジェスチャーは、増加変更操作に関連付けられる。
【００９２】
上記実施形態では、手指Ｆの指先を振るジェスチャーが検出されていたが、ジェスチャー検出器及び入力変換部によって検出されるジェスチャーは、上述の動作に限定されない。ステアリングを把持しつつ実施可能な種々のジェスチャーが、ジェスチャー検出器及び入力変換部の検出対象として設定できる。
【００９３】
上記実施形態では、設定温度及びトラック番号といった設定項目の現在の値を表示することにより、投影表示部は、選択状態にある選択項目を運転者に通知していた。しかし、選択状態にある選択項目を運転者に通知できれば、投影表示部の表示内容は、上述の内容に限定されない。例えば、エアコン操作モードであれば、「温度設定」といった文字表示により、選択項目が直接的に明示されていてもよい。
【００９４】
上記実施形態では、視線検出エリア内への視線移動により、変更操作の可能な状態が所定時間維持された。こうした所定時間は、適宜変更可能であり、例えば５秒程度であってもよく、１０秒以上であってもよい。さらに、視線検出エリアから視線が外されたことに基づいて、変更操作から選択操作への切り替えが即座に実施されてもよい。
【００９５】
上記実施形態では、右視線検出エリアに視線が向けられた後、左視線検出エリアに視線が移動した場合、ジェスチャーに関連付けられる操作は、増加変更操作から減少変更操作へと即座に切り替えられていた。しかし、こうした切り替え制御は、行われなくてもよい。その結果、増加変更操作への関連付けが一旦開始された後では、所定時間の経過までは、減少変更操作への関連付けが実施されなくてもよい。
【００９６】
上記実施形態では、左右の発光領域を発光させることにより、左右の視線検出エリア内における視線検出が、運転者に通知されていた。こうした発光領域の形状及び発光色等は、適宜変更可能である。また、こうした発光領域は、省略されていてもよい。こうした形態では、視線検出エリア内での視線検出は、左右の表示部の背景色の変更又は点滅等によって運転者に通知されることが望ましい。
【００９７】
上記実施形態では、ジェスチャー及び視線の各検出が正常に行われているか否かが、各インジケータの発光色の変化によって運転者に通知されていた。しかし、ジェスチャー検出及び視線検出の状態情報を、例えば中央表示部又は投影表示部等に表示する形態であれば、上述の各インジケータは、省略されてもよい。
【００９８】
上記実施形態におけるジェスチャー検出は、近赤外線を用いたジェスチャー検出器を用いて行われていた。こうしたジェスチャーを検出するための構成及び制御は、適宜変更可能である。例えば、ステアリングに設けた静電容量センサによって、リム部近傍の指先の動きが検出されてもよい。
【００９９】
上記実施形態では、ジェスチャー検出器は、右手によるジェスチャーを主な検出対象としていた。しかし、ジェスチャー検出器の配置変更により、左手によるジェスチャーが、主な検出対象とされてもよい。さらに、複数のジェスチャー検出器を用いることにより、右手によるジェスチャーと左手によるジェスチャーが、共に検出対象とされてもよい。
【０１００】
上記実施形態では、近赤外線カメラによって撮影した近赤外画像を用いて、視点位置及び視線の方向を算出することにより、運転者の注視点位置が割り出されていた。こうした視線を検出するための構成及び制御は、適宜変更可能である。さらに、視線を検出する構成が、ジェスチャーを検出する構成を兼ねていてもよい。
【０１０１】
上記実施形態において、プログラムを実行した制御部又は制御ユニットにより提供されていた「制御手段」及び「判定ブロック」等の機能は、上述の構成と異なるハードウェア及びソフトウェア、或いはこれらの組み合わせによって提供されてよい。例えば、ＤＳＭに設けられた制御回路により、「判定ブロック」等の機能が提供されてよい。さらに、プログラムによらないで所定の機能を果たす回路により、上述の機能が提供されてよい。
【符号の説明】
【０１０２】
３０  表示領域、３２  右表示部（内容表示部）、３３  左表示部（内容表示部）、３４  投影表示部（メニュー表示部）、３６  右発光領域（発光領域）、３７  左発光領域（発光領域）、３８  視線検出インジケータ、３９  ジェスチャー検出インジケータ、５０  視線検出エリア、５０ｒ  右視線検出エリア（第一視線検出エリア）、５０ｌ  左視線検出エリア（第二視線検出エリア）、７２  視線検出器（視線検出手段）、７３  視線変換部（視線検出手段）、７４  ジェスチャー検出器（ジェスチャー検出手段）、７５  入力変換部（ジェスチャー検出手段）、８０  制御部（制御手段）、２８０  制御ユニット（制御手段）、８２  判定ブロック（判定手段）、２８５  ドライバーステータスモニタ（視線検出手段）、２８９  ジェスチャー認識モニタ（ジェスチャー検出手段）、１００  表示入力装置（車両用表示入力装置）、２００  表示入力システム（車両用表示入力装置）、１１０  ステアリング、１１１  リム部、Ｆ  手指（手）、ＧＳＡ  ジェスチャー検出エリア、ＨＤ  水平方向
【図１】
2015191310.tif 000003
【図２】
2015191310.tif 000004
【図３】
2015191310.tif 000005
【図４】
2015191310.tif 000006
【図５】
2015191310.tif 000007
【図６】
2015191310.tif 000008
【図７】
2015191310.tif 000009
【図８】
2015191310.tif 000010
【図９】
2015191310.tif 000011