(57)【特許請求の範囲】
【請求項１】
車両（１０）に搭載されて前記車両（１０）の乗員（１００）が操作可能な複数の車載機器（２０）と、
前記乗員（１００）の視線方向又は顔向きに基づいて前記乗員（１００）の注視方向を検出する注視方向検出手段（７０）と、
前記乗員（１００）により操作可能に前記車載機器（２０）とは異なる場所に設けられる操作手段（１８）と
を備える車載機器操作装置（１２）であって、さらに、
前記車両（１０）の車幅方向及び該車幅方向と交差する上下方向にそれぞれ複数配置されている前記複数の車載機器（２０）が前記車幅方向において所定領域ごとに区切られた複数の車載機器群の中から、前記注視方向検出手段（７０）により検出された前記注視方向に基づいて、いずれかの車載機器群を特定する車載機器特定手段（７２、７４）と、
前記車載機器特定手段（７２、７４）により特定された前記車載機器群を報知する報知手段（２６ａ〜２６ｅ）と
を備え、
前記操作手段（１８）は、前記車載機器群のうち前記上下方向における前記車載機器（２０）を選択可能な上下方向選択手段（３０、３２、３４）を有し、
前記車載機器特定手段（７２、７４）は、前記注視方向検出手段（７０）により検出された前記注視方向に基づいて前記車載機器群を特定すると共に、該車載機器群が特定された状態で前記上下方向選択手段（３０、３２、３４）が操作された場合に、該上下方向選択手段（３０、３２、３４）により選択された上下方向に基づいて前記特定された車載機器群のうちいずれかの車載機器（２０）を特定し、
前記報知手段（２６ａ〜２６ｅ）は、それぞれの前記所定領域の幅と同等の幅を有し、前記車両（１０）のインストルメントパネル（５９）において前記車幅方向に並べて配置されている
ことを特徴とする車載機器操作装置（１２）。
【請求項２】
車両（１０）に搭載されて前記車両（１０）の乗員（１００）が操作可能な複数の車載機器（２０）と、
前記乗員（１００）の視線方向又は顔向きに基づいて前記乗員（１００）の注視方向を検出する注視方向検出手段（７０）と、
前記注視方向検出手段（７０）により検出された前記注視方向に基づいて前記複数の車載機器（２０）のうちいずれかの車載機器（２０）を特定する車載機器特定手段（７２、７４）と、
前記乗員（１００）により操作可能に前記車載機器（２０）とは異なる場所に設けられる操作手段（１８）と
を備える車載機器操作装置（１２）であって、
前記複数の車載機器（２０）は、前記車両（１０）の車幅方向及び該車幅方向と交差する上下方向にそれぞれ複数配置されていると共に、前記車幅方向において所定領域ごとに区切った複数の車載機器群に区分されており、
前記操作手段（１８）は、前記車載機器群のうち前記上下方向における前記車載機器（２０）を選択可能な上下方向選択手段（３０、３２、３４）を有し、
前記車載機器特定手段（７２、７４）は、前記注視方向検出手段（７０）により検出された前記注視方向に基づいて前記車載機器群を特定すると共に、該車載機器群が特定された状態で前記上下方向選択手段（３０、３２、３４）が操作された場合に、該上下方向選択手段（３０、３２、３４）により選択された上下方向に基づいて前記特定された車載機器群のうちいずれかの車載機器（２０）を特定する
ことを特徴とする車載機器操作装置（１２）。
【請求項３】
請求項１又は２記載の車載機器操作装置（１２）において、
前記上下方向選択手段（３０、３２、３４）は、選択可能な前記上下方向のそれぞれに対応して割り当てられた個別の操作スイッチ（３０、３２、３４）により構成される
ことを特徴とする車載機器操作装置（１２）。
【請求項４】
請求項１〜３のいずれか１項に記載の車載機器操作装置（１２）において、
前記上下方向選択手段（３０、３２、３４）は、前記車載機器特定手段（７２、７４）により前記車載機器（２０）が特定された状態において、当該特定された車載機器（２０）に対する特定の操作入力を行うための操作入力手段を兼ねる
ことを特徴とする車載機器操作装置（１２）。
【請求項５】
請求項１〜４のいずれか１項に記載の車載機器操作装置（１２）において、
前記注視方向検出手段（７０）は、
前記乗員（１００）を含む画像を撮像可能に前記車両（１０）の室内に設けられる撮像手段（１４）と、
前記撮像手段（１４）により撮像された前記画像に基づいて前記車幅方向における前記乗員（１００）の顔向き角度を検出する顔向き角度検出手段（７０）と
を備え、
前記顔向き角度検出手段（７０）により検出された前記顔向き角度に基づいて前記乗員（１００）の注視方向を検出する
ことを特徴とする車載機器操作装置（１２）。
【請求項６】
請求項１〜５のいずれか１項に記載の車載機器操作装置（１２）において、
前記上下方向選択手段（３０、３２、３４）は、前記車両（１０）のステアリングホイール（１６）に設けられる十字スイッチ（１８）として構成されると共に、前記選択可能な上下方向が前記ステアリングホイール（１６）の正面視における前記十字スイッチ（１８）の上下方向に対応して割り当てられる
ことを特徴とする車載機器操作装置（１２）。
【請求項７】
請求項１〜６のいずれか１項に記載の車載機器操作装置（１２）において、
前記車載機器特定手段（７２、７４）により特定された前記車載機器群を表示する表示手段（２６ａ〜２６ｅ、１２６ａ〜１２６ｄ）が、前記車載機器群ごとに設けられている
ことを特徴とする車載機器操作装置（１２）。
【請求項８】
車両（１０）に搭載されて前記車両（１０）の乗員（１００）が操作可能な複数の車載機器（２０）と、
前記乗員（１００）の視線方向又は顔向きに基づいて前記乗員（１００）の注視方向を検出する注視方向検出手段（７０）と、
前記車両（１０）の車幅方向及び該車幅方向と交差する上下方向にそれぞれ複数配置されている前記複数の車載機器（２０）が前記車幅方向において所定領域ごとに区切られた複数の車載機器群の中から、前記注視方向検出手段（７０）により検出された前記注視方向に基づいて、いずれかの車載機器群を特定する車載機器特定手段（７２、７４）と、
前記車載機器特定手段（７２、７４）により特定された前記車載機器群を報知する報知手段（２６ａ〜２６ｅ）と
を備え、
前記報知手段（２６ａ〜２６ｅ）は、それぞれの前記所定領域の幅と同等の幅を有し、前記車両（１０）のインストルメントパネル（５９）において前記車幅方向に並べて配置されている
ことを特徴とする報知装置（１２）。
【請求項９】
請求項８記載の報知装置（１２）において、
前記所定領域の境界線は、前記車載機器特定手段（７２、７４）により前記車載機器群が特定されていなくても前記報知手段（２６ａ〜２６ｅ）が報知する
ことを特徴とする報知装置（１２）。
【請求項１０】
請求項８又は９記載の報知装置（１２）において、
前記車載機器（２０）とは異なる場所において前記乗員（１００）により操作可能に設けられる操作手段（１８）を備え、
前記操作手段（１８）は、前記車載機器群のうち前記上下方向における前記車載機器（２０）を選択可能な上下方向選択手段（３０、３２、３４）を有し、
前記車載機器特定手段（７２、７４）は、前記注視方向検出手段（７０）により検出された前記注視方向に基づいて前記車載機器群を特定すると共に、該車載機器群が特定された状態で前記上下方向選択手段（３０、３２、３４）により選択された上下方向に基づいて前記特定された車載機器群のうちいずれかの車載機器（２０）を特定し、
前記報知手段（２６ａ〜２６ｅ）は、前記車載機器特定手段（７２、７４）によって特定された前記車載機器（２０）によって報知方法が変更される
ことを特徴とする報知装置（１２）。
【請求項１１】
請求項８〜１０のいずれか１項に記載の報知装置（１２）において、
前記報知手段（２６ａ〜２６ｅ）は、前記幅を調整できる
ことを特徴とする報知装置（１２）。
【請求項１２】
車両（１０）において車幅方向に配置された複数の車載機器（２０）と、
乗員（１００）の視線方向及び顔向きの少なくとも一方に基づいて前記車幅方向における前記乗員（１００）の注視方向を検出する注視方向検出部（７０）と、
前記複数の車載機器（２０）から前記注視方向に対応する１つ以上の前記車載機器（２０）を特定する車載機器特定部（７２、７４）と、
前記注視方向の検出可能範囲であり且つ前記車幅方向において前記複数の車載機器（２０）に応じて設定された複数の注視可能領域のうち、検出された前記注視方向又は特定された前記１つ以上の車載機器（２０）に対応する注視可能領域を視覚的に報知する報知部（２２）と
を備え、
前記報知部（２２）は、フロントウィンドウ（１１）の下部若しくは上部又はそれらの周囲において前記複数の注視可能領域ごとに前記車幅方向に沿って連続的又は断続的に設けられて、隣り合う注視可能領域の境界を示す複数のインジケータ（２６ａ〜２６ｅ）を有する
ことを特徴とする報知装置（１２）。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、乗員の注視方向等を用いて複数の車載機器を操作可能とする車載機器操作装置及び車両の乗員等の注視方向を報知する報知装置に関する。
【背景技術】
【０００２】
特開２０１０−１０５４１７号公報（以下「ＪＰ ２０１０−１０５４１７ Ａ」という。）には、車両の運転者が注視する車載機器２１をステアリングホイール５０に設けられた操作入力手段２８により操作可能とする技術が開示されている（要約）。【０００３】
米国特許出願公開第２０１０／０３２４７７９号公報（以下「ＵＳ ２０１０／０３２４７７９ Ａ１」という。）には、乗員が操作することを意図する車載機器（サイドミラー２１、ルームミラー２２、ナビゲーションシステム２３、車載電話２４、エア吹出し口２５、メーターパネル２６）を乗員の視線Ｌにより選択し、共通のステアリングスイッチ１６により操作する装置が示されている（要約）。ＵＳ ２０１０／０３２４７７９ Ａ１では、視線Ｌが指向する車載機器が操作可能であることをパイロットランプ２１ａ、２２ａ、２３ａ、２４ａ、２５ａ、２６ａを介して乗員に報知する（要約及び図１）。
【発明の概要】
【０００４】
ＪＰ ２０１０−１０５４１７ Ａでは、運転者が注視している車載機器２１を特定する必要があるが、例えば、オーディオ機器とエアコンディショナのように車載機器２１が近接して配置されている場合、車載機器２１の識別において誤判定を生じる可能性があり、システムの信頼性が確保できないおそれがある。また、判定精度を確保するためには高精度の画像処理が必要となるため、高解像度のカメラや高性能の演算装置等を用いる必要があり、高コストになるという問題がある。
【０００５】
ＵＳ ２０１０／０３２４７７９ Ａ１において、乗員は、視線Ｌをどの方向にまで向ければ操作を意図する車載機器が選択されるのかを理解することができない。また、乗員が当該車載機器に対して視線Ｌを真っ直ぐに向けているのにパイロットランプ２１ａ、２２ａ、２３ａ、２４ａ、２５ａ、２６ａが点灯しない場合、乗員は、どのように対処すればパイロットランプ２１ａ、２２ａ、２３ａ、２４ａ、２５ａ、２６ａを点灯させることができるのかを知ることができない。
【０００６】
この発明はこのような課題を考慮してなされたものであり、操作対象の車載機器の誤判定を防止すると共に、コストを低減可能な車載機器操作装置を提供することを目的とする。
【０００７】
また、この発明の別の目的は、注視方向による操作対象機器の特定を容易に行うことができるようにすると共に、装置側が検出した注視方向を、乗員等の操作者が認識することが可能な報知装置を提供することである。
【０００８】
この発明に係る車載機器操作装置は、車両に搭載されて前記車両の乗員が操作可能な複数の車載機器と、前記乗員の視線方向又は顔向きに基づいて前記乗員の注視方向を検出する注視方向検出手段と、前記注視方向検出手段により検出された前記注視方向に基づいて前記複数の車載機器のうちいずれかの車載機器を特定する車載機器特定手段と、前記乗員により操作可能に前記車載機器とは異なる場所に設けられる操作手段とを備えるものであって、前記複数の車載機器は、前記車両の車幅方向及び該車幅方向と交差する上下方向にそれぞれ複数配置されていると共に、前記車幅方向において所定領域ごとに区切った複数の車載機器群に区分されており、前記操作手段は、前記車載機器群のうち前記上下方向における前記車載機器を選択可能な上下方向選択手段を有し、前記車載機器特定手段は、前記注視方向検出手段により検出された前記注視方向に基づいて前記車載機器群を特定すると共に、該車載機器群が特定された状態で前記上下方向選択手段が操作された場合に、該上下方向選択手段により選択された上下方向に基づいて前記特定された車載機器群のうちいずれかの車載機器を特定することを特徴とする。
【０００９】
この発明によれば、乗員の注視方向に基づいて車幅方向の車載機器群を特定すると共に、特定した車載機器群のうちいずれかの車載機器を上下方向選択手段の操作により特定する。従って、乗員は、特定すべきいずれかの車載機器そのものを注視する必要は無く、特定すべきいずれかの車載機器が存在する車載機器群の方向（車幅方向）に視線又は顔を向けるだけでよくなる。このため、車両前方への注意を阻害する要因を低減することが可能になると共に、操作対象の車載機器の誤判定を防止することが可能となる。また、車載機器毎の注視判定が不要となるため、高精度な視線／顔向き検知技術を必要としなくなる。従って、装置全体での高コスト化を防止することが可能となる。
【００１０】
前記上下方向選択手段は、選択可能な前記上下方向のそれぞれに対応して割り当てられた個別の操作スイッチにより構成してもよい。これにより、選択可能な上下方向（＝１つの車載機器群に存在する車載機器の数）に対応して個別の操作スイッチが設けられるため、機器選択のための操作時間を短縮することが可能になると共に、操作対象機器を確実に選択することが可能となる。このため、利便性を向上することができる。
【００１１】
前記上下方向選択手段は、前記車載機器特定手段により前記車載機器が特定された状態において、当該特定された車載機器に対する特定の操作入力を行うための操作入力手段を兼ねてもよい。これにより、上下方向選択手段（例えば、機器選択用スイッチ）と操作入力手段（例えば、機器操作用スイッチ)とを共用化することにより操作手段の配置スペース及びコストを低減することが可能となる。また、ブラインド操作の容易化を図ることが可能となる。
【００１２】
前記注視方向検出手段は、前記乗員を含む画像を撮像可能に前記車両の室内に設けられる撮像手段と、前記撮像手段により撮像された前記画像に基づいて前記車幅方向における前記乗員の顔向き角度を検出する顔向き角度検出手段とを備え、前記顔向き角度検出手段により検出された前記顔向き角度に基づいて前記乗員の注視方向を検出してもよい。これにより、車幅方向の顔向き角度を画像処理から求めれば良いため、瞳孔の輝点検出等を用いる視線検知を行うための高精度な画像処理や赤外発光ダイオード（ＬＥＤ）等のデバイスが不要となり、より一層の低コスト化を図ることが可能となる。
【００１３】
前記上下方向選択手段は、前記車両のステアリングホイールに設けられる十字スイッチとして構成されると共に、前記選択可能な上下方向が前記ステアリングホイールの正面視における前記十字スイッチの上下方向に対応して割り当てられてもよい。このような十字スイッチを用いることによりステアリングホイールから手を離さずに車載機器を操作可能であるため利便性が向上する。加えて、選択可能な方向が十字キーの上下位置に対応しているため、より直感的に車載機器を選択することができ、ブラインド操作の更なる容易化を図ることが可能となる。
【００１４】
前記車載機器特定手段により特定された前記車載機器群を表示する表示手段が、前記車載機器群ごとに設けられてもよい。これにより、車載機器群を特定する精度を確保（車両の状態と乗員の認識とのずれを防止）しつつ、車載機器全てに対応するように表示手段を設ける場合に比べて低コスト化を図ることができる。
【００１５】
この発明に係る報知装置は、車両に搭載されて前記車両の乗員が操作可能な複数の車載機器と、前記乗員の視線方向又は顔向きに基づいて前記乗員の注視方向を検出する注視方向検出手段と、前記車両の車幅方向及び該車幅方向と交差する上下方向にそれぞれ複数配置されている前記複数の車載機器が前記車幅方向において所定領域ごとに区切られた複数の車載機器群の中から、前記注視方向検出手段により検出された前記注視方向に基づいて、いずれかの車載機器群を特定する車載機器特定手段と、前記車載機器特定手段により特定された前記車載機器群を報知する報知手段とを備え、前記報知手段は、それぞれの前記所定領域の幅と同等の幅を有し、前記車両のインストルメントパネルにおいて前記車幅方向に並べて配置されていることを特徴とする。
【００１６】
この発明によれば、車幅方向における複数の車載機器群のうち乗員の注視方向に基づいて特定されたものを、報知手段を用いて報知する。報知手段は、車幅方向において各車載機器群に対応する所定領域の幅と同等の幅を有し、インストルメントパネルにおいて車幅方向に並べて配置されている。従って、乗員は、所定領域の境界及び幅を視覚的に認識すると共に、特定されている車載機器群の切り替わりを認識することが可能となり、最小限の視線又は顔向きの変化で車幅方向における車載機器の特定を容易に行うことが可能となる。
【００１７】
また、乗員が意図している注視方向と、報知装置が検出した注視方向との間にずれが生じている場合でも、検出した注視方向を報知する報知手段が存在することにより、乗員は当該ずれを認識し、注視方向を適宜調整することが可能となる。
【００１８】
さらに、乗員の視線方向又は顔向きを車幅方向における車載機器群の特定のみに用いる場合（例えば、上下方向の特定は、別の選択装置を用いる場合）、視線方向又は顔向きの検出は、車幅方向のみでよくなる。これにより、車幅方向以外の方向（例えば、上下方向）における視線方向又は顔向きの検出を不要とすることができ、視線方向又は顔向きの検出処理を軽減することなどが可能となる。
【００１９】
前記所定領域の境界線は、前記車載機器特定手段により前記車載機器群が特定されていなくても前記報知手段が報知してもよい。これにより、乗員が確実に境界線を理解でき、どの幅領域に視線又は顔向きを変化させれば、特定の車載機器群を選択できるかを理解することが可能となる。
【００２０】
前記報知装置は、さらに、前記車載機器とは異なる場所において前記乗員により操作可能に設けられる操作手段を備え、前記操作手段は、前記車載機器群のうち前記上下方向における前記車載機器を選択可能な上下方向選択手段を有し、前記車載機器特定手段は、前記注視方向検出手段により検出された前記注視方向に基づいて前記車載機器群を特定すると共に、該車載機器群が特定された状態で前記上下方向選択手段により選択された上下方向に基づいて前記特定された車載機器群のうちいずれかの車載機器を特定し、前記報知手段は、前記車載機器特定手段によって特定された前記車載機器によって報知方法が変更されてもよい。これにより、乗員は、１つの車載機器群の中でいずれの車載機器が選択されているかを直ぐに理解することができる。
【００２１】
前記報知手段は、前記幅を調整可能であってもよい。これにより、注視方向検出手段により検出される注視方向と実際の注視方向がずれていたとしても調整することができ、実際の注視方向に沿った違和感のない注視方向の検出が可能となる。
【００２２】
この発明に係る報知装置は、車両において車幅方向に配置された複数の車載機器と、前記乗員の視線方向及び顔向きの少なくとも一方に基づいて前記車幅方向における前記乗員の注視方向を検出する注視方向検出部と、前記複数の車載機器から前記注視方向に対応する１つ以上の前記車載機器を特定する車載機器特定部と、前記注視方向の検出可能範囲であり且つ前記車幅方向において前記複数の車載機器に応じて設定された複数の注視可能領域のうち、検出された前記注視方向又は特定された前記１つ以上の車載機器に対応する注視可能領域を視覚的に報知する報知部とを備え、前記報知部は、フロントウィンドウの下部若しくは上部又はそれらの周囲において前記複数の注視可能領域ごとに前記車幅方向に沿って連続的又は断続的に設けられて、隣り合う注視可能領域の境界を示す複数のインジケータを有することを特徴とする。
【００２３】
この発明によれば、検出された注視方向又は特定された１つ以上の車載機器に対応する注視可能領域を視覚的に報知する複数のインジケータを備える。当該複数のインジケータは、フロントウィンドウの下部若しくは上部又はそれらの周囲において複数の注視可能領域ごとに車幅方向に沿って連続的又は断続的に設けられて、隣り合う注視可能領域の境界を示す。従って、乗員は、注視可能領域の境界及び幅を視覚的に認識すると共に、選択されている注視可能領域の切り替わりを認識することが可能となり、最小限の視線又は顔向きの変化で車幅方向における車載機器の特定を確実に行うことが可能となる。
【００２４】
また、乗員が意図している注視方向と、報知装置が検出した注視方向との間にずれが生じている場合でも、検出した注視方向を視覚的に示す複数のインジケータが存在することにより、乗員は当該ずれを認識し、注視方向を適宜調整することが可能となる。
【００２５】
さらに、乗員の視線方向又は顔向きを車幅方向における１つ以上の車載機器の特定のみに用いる場合（例えば、上下方向の特定は、別の選択装置を用いる場合）、視線方向又は顔向きの検出は、車幅方向のみでよくなる。これにより、車幅方向以外の方向（例えば、上下方向）における視線方向又は顔向きの検出を不要とすることができ、視線方向又は顔向きの検出処理を軽減することなどが可能となる。
【図面の簡単な説明】
【００２６】
【図１】この発明の一実施形態に係る車載機器操作装置（報知装置）を搭載した車両の全体ブロック図である。
【図２】前記車両のフロントウィンドウ周辺の外観図である。
【図３】前記車両のステアリングホイールの外観正面図である。
【図４】前記車両のドアミラーの外観斜視図である。
【図５】前記フロントウィンドウ周辺を５つの領域に区切った状態を示す図である。
【図６Ａ】オーディオ装置の音量を変える場合の運転者の第１動作例を示す図である。
【図６Ｂ】前記オーディオ装置の音量を変える場合の運転者の第２動作例を示す図である。
【図６Ｃ】前記オーディオ装置の音量を変える場合の運転者の第３動作例を示す図である。
【図７Ａ】ヘッドアップディスプレイ（ＨＵＤ）を表示し、車速や燃費を確認する場合の運転者の第１動作例を示す図である。
【図７Ｂ】前記ＨＵＤを表示し、車速や燃費を確認する場合の運転者の第２動作例を示す図である。
【図７Ｃ】前記ＨＵＤを表示し、車速や燃費を確認する場合の運転者の第３動作例を示す図である。
【図８Ａ】助手席側ウィンドウを開閉する場合の運転者の第１動作例を示す図である。
【図８Ｂ】前記助手席側ウィンドウを開閉する場合の運転者の第２動作例を示す図である。
【図８Ｃ】前記助手席側ウィンドウを開閉する場合の運転者の第３動作例を示す図である。
【図９】各車載機器の選択方法と操作方法の一覧を表示する図である。
【図１０】各機能のボタン割当一覧を表示する図である。
【図１１】インジケータ間の境界線を調整すると共に、各車載機器を選択又は操作するフローチャートである。
【図１２】前記境界線の調整前後の様子を示す説明図である。
【図１３】境界線調整開始処理（図１１のＳ４）のフローチャートである。
【図１４】前記境界線の調整の開始前から開始に至る際の表示器の状態変化の一例を示す図である。
【図１５】境界線調整処理（図１１のＳ５）のフローチャートである。
【図１６】前記境界線の調整方法を説明する図である。
【図１７】前記境界線の調整中から調整終了時に致る際の前記表示器の状態変化の一例を示す図である。
【図１８】通常処理（図１１のＳ６）のフローチャートである。
【図１９Ａ】注視方向の検出が正常に行われている状態の一例を示す図である。
【図１９Ｂ】注視方向の検出ができない状態の一例を示す図である。
【図１９Ｃ】注視方向の検出が誤って行われている状態の一例を示す図である。
【図２０】前記ＥＣＵが操作対象機器を選択するフローチャートである。
【図２１】運転者の注視方向が中央方向である場合に操作対象機器を選択するフローチャートである。
【図２２】運転者の注視方向が正面方向である場合に操作対象機器を選択するフローチャートである。
【図２３】運転者の注視方向が右方向である場合に操作対象機器を選択するフローチャートである。
【図２４】運転者の注視方向が左方向である場合に操作対象機器を選択するフローチャートである。
【図２５】前記ＥＣＵが操作対象機器を操作するフローチャートである。
【図２６】ナビゲーション装置の操作を行うフローチャートである。
【図２７】オーディオ装置の操作を行うフローチャートである。
【図２８】エアコンディショナの操作を行うフローチャートである。
【図２９】ＨＵＤの操作を行うフローチャートである。
【図３０】ハザードランプの操作を行うフローチャートである。
【図３１】運転者用のシートの操作を行うフローチャートである。
【図３２】後方ライトの操作を行うフローチャートである。
【図３３】運転席側ウィンドウの操作を行うフローチャートである。
【図３４】助手席側ウィンドウの操作を行うフローチャートである。
【図３５】図５の変形例として、フロントウィンドウ周辺を３つの領域に区切った状態を示す図である。
【図３６】前記実施形態におけるインジケータの代わりにパイロットランプを用いた構成を示す図である。
【発明を実施するための形態】
【００２７】
１．全体的な構成の説明
［１−１．全体構成］
図１は、この発明の一実施形態に係る車載機器操作装置１２（以下「操作装置１２」ともいう。）を搭載した車両１０の全体ブロック図である。図２は、車両１０のフロントウィンドウ１１周辺の外観図である。図１及び図２に示すように、操作装置１２は、乗員カメラ１４と、ステアリングホイール１６に設けられた十字キー１８と、複数の車載機器２０と、注視方向表示器２２（以下「表示器２２」ともいう。）と、電子制御装置２４（以下「ＥＣＵ２４」という。）とを有する。図２からもわかるように、本実施形態の車両１０は、いわゆる右ハンドル車である。代わりに、左ハンドル車であっても同様の構成を採用することができる。
【００２８】
［１−２．乗員カメラ１４］
図２に示すように、乗員カメラ１４は、図示しないステアリングコラムにおいて運転者の正面に設置され、運転者の顔の画像（以下「顔画像」という。）を取得する。乗員カメラ１４の位置は、これに限らず、例えば、バックミラー２５（図２）の周辺に配置してもよい。また、乗員カメラ１４は、単一の方向から撮像するものに限らず、複数の方向から撮像するもの（いわゆるステレオカメラ）であってもよい。
【００２９】
［１−３．十字キー１８］
運転者は、十字キー１８を用いて操作対象となる車載機器２０（以下「操作対象機器」という。）の特定及び特定した車載機器２０の操作入力を行うことができる。図３に示すように、十字キー１８は、中央ボタン３０、上ボタン３２、下ボタン３４、左ボタン３６及び右ボタン３８を有する。なお、図２における十字キー１８は、拡大して表示されている。十字キー１８の操作方法については、後述する。
【００３０】
［１−４．複数の車載機器２０］
本実施形態において、複数の車載機器２０（図１）には、ナビゲーション装置４０と、オーディオ装置４２と、エアコンディショナ４４と、ヘッドアップディスプレイ４６（以下「ＨＵＤ４６」という。）と、ハザードランプ４８と、運転者用のシート５０と、ドアミラー５２と、後方ライト５４と、運転席側ウィンドウ５６と、助手席側ウィンドウ５８とが含まれる。
【００３１】
図４に示すように、後方ライト５４はドアミラー５２下部にある発光ダイオード（ＬＥＤ）で車両１０の側面後方を照らすものである。
【００３２】
［１−５．注視方向表示器２２］
図２に示すように、表示器２２は、フロントウィンドウ１１の下部周辺においてインストルメントパネル５９に設けられている。後述するように、表示器２２は、別の位置に設けることもできる。また、表示器２２は、車幅方向における運転者（乗員）の注視方向を示す複数の注視方向インジケータ２６ａ〜２６ｅ（以下「インジケータ２６ａ〜２６ｅ」といい、「インジケータ２６」と総称する。）を有する。各インジケータ２６ａ〜２６ｅは、例えば、発光ダイオード（ＬＥＤ）等の照明装置から構成される。或いは、ＨＵＤ４６を表示器２２に対応する位置にも設けることで、ＨＵＤ４６により各インジケータ２６ａ〜２６ｅを構成することもできる。さらに、各インジケータ２６ａ〜２６ｅは、複数の色（例えば、青、緑、黄及び赤）を表示可能であるが、単色のみの表示であってもよい。
【００３３】
本実施形態では、運転者の注視方向に対応するインジケータ２６ａ〜２６ｅのいずれかが点灯し、その他のインジケータ２６ａ〜２６ｅは消灯する。このため、運転者は、操作装置１２が検出した注視方向を把握することができる。
【００３４】
また、隣り合うインジケータ２６ａ〜２６ｅの間には、境界線２８ａ〜２８ｄ（以下「境界線２８」と総称する。）（図１４参照）が配置される。本実施形態において、境界線２８ａ〜２８ｄは、インジケータ２６ａ〜２６ｅと同様、例えば、ＬＥＤ等の照明装置から構成される。換言すると、表示器２２全体でＬＥＤ等の照明素子を複数並べたものを、インジケータ２６ａ〜２６ｅ及び境界線２８ａ〜２８ｄとして用いることができる。なお、境界線２８ａ〜２８ｄ自体は発光させない構成、又は境界線２８ａ〜２８ｄを設けない構成も可能である。
【００３５】
［１−６．ＥＣＵ２４］
ＥＣＵ２４は、車載機器操作装置１２（本実施形態では、特に、各車載機器２０）を制御するものであり、図１に示すように、入出力装置６０、演算装置６２及び記憶装置６４を備える。演算装置６２は、注視方向検出機能７０と、車載機器群特定機能７２と、個別車載機器特定機能７４と、車載機器制御機能７６とを備える。
【００３６】
本実施形態では、これらの機能７０、７２、７４、７６を用いることにより、各車載機器２０を簡易に制御することができる。すなわち、運転者は、操作対象とする車載機器２０（以下「操作対象機器」という。）が存在する車幅方向に視線又は顔を向けると共に、十字キー１８を操作することにより、操作対象機器を制御することが可能である。なお、後述するように、その他の方法により操作対象機器を特定及び制御することもできる。
【００３７】
注視方向検出機能７０は、運転者（乗員）の顔向き及び視線方向（眼球向き）の少なくとも一方に基づいて、運転者の注視方向を検出する機能である。車載機器群特定機能７２は、注視方向検出機能７０により検出した注視方向に存在する車載機器群（グループＡ〜Ｄ）を特定する機能である。個別車載機器特定機能７４は、車載機器群特定機能７２に特定された車載機器群に含まれる複数の車載機器２０の中から運転者の操作に応じて操作対象機器を特定する機能である。車載機器制御機能７６は、個別車載機器特定機能７４により特定された操作対象機器を、運転者の操作入力に応じて制御する機能である。
【００３８】
２．本実施形態の制御の概要
上記のように、本実施形態では、運転者は、操作対象機器が存在する車幅方向に視線又は顔を向けると共に、十字キー１８を操作することにより、操作対象機器を制御することが可能である。
【００３９】
当該制御を実現するため、本実施形態では、まず乗員カメラ１４が撮像した運転者の顔画像に基づいて顔向き及び視線方向を検出し、これらに基づいて車幅方向における注視方向を判定する。その後、十字キー１８の操作に基づいて高さ方向（上下方向）を特定する。これにより、操作対象機器を特定する。
【００４０】
本実施形態において、車幅方向における注視方向としては、図５に示す５つの方向を設定している。すなわち、フロントウィンドウ１１周辺を５つの領域Ａ１〜Ａ５に区切っている。より具体的には、中央方向の領域Ａ１、正面方向の領域Ａ２、右方向の領域Ａ３、左方向の領域Ａ４及びその他の方向の領域Ａ５である。これらの各方向（グループＡ〜Ｄ）に対し、各車載機器２０が割り当てられている。
【００４１】
中央方向の領域Ａ１には、ナビゲーション装置４０、オーディオ装置４２及びエアコンディショナ４４（グループＡ）が割り当てられている。なお、図５等において、「ナビ」は「ナビゲーション装置」を意味し、「オーディオ」は「オーディオ装置」を意味し、「エアコン」は「エアコンディショナ」を意味する。
【００４２】
正面方向の領域Ａ２には、ＨＵＤ４６、ハザードランプ４８及びシート５０（グループＢ）が割り当てられている。なお、図５等において、「ハザード」は「ハザードランプ」を意味する。右方向の領域Ａ３には、ドアミラー５２、後方ライト５４及び運転席側ウィンドウ５６（グループＣ）が割り当てられ、左方向の領域Ａ４には、ドアミラー５２、後方ライト５４及び助手席側ウィンドウ５８（グループＤ）が割り当てられている。その他の方向の領域Ａ５には何らの車載機器２０も割り当てられていない。なお、本実施形態では、左右のドアミラー５２は同時に展開及び格納させる。また、左右の後方ライト５４は同時に操作する。
【００４３】
ＥＣＵ２４（注視方向検出機能７０）は、乗員カメラ１４からの顔画像に基づき、顔向き及び視線方向（眼球の相対位置）を検出し、これらを用いて運転者の注視方向を判定する。注視方向の判定は、顔向き又は視線方向の一方のみから行うこともできる。そして、ＥＣＵ２４（車載機器群特定機能７２）は、判定した注視方向に基づいて車載機器群（グループＡ〜Ｄ）を特定する。次いで、十字キー１８のうち押し下げられたボタン（ボタン３０、３２、３４、３６、３８のいずれか）に応じて、操作対象機器を特定する。その後、十字キー１８の操作に応じて操作対象機器を操作する。
【００４４】
３．本実施形態における操作対象機器の選択方法と動作例
［３−１．オーディオ装置４２の音量を変える場合］
図６Ａ〜図６Ｃは、オーディオ装置４２の音量を変える場合の運転者１００の第１〜第３動作例を示す。まず、図６Ａに示すように、運転者１００は、５つの領域Ａ１〜Ａ５のうち、オーディオ装置４２のある領域Ａ１（中央方向）を見る又は顔を向ける。これにより、ＥＣＵ２４は、後述する注視方向判定技術を用いて車載機器群（グループＡ）を特定する。なお、図６Ａ中の矢印Ｘは、運転者１００の注視方向を示している（その他の図においても同様である。）。また、ＥＣＵ２４は、判定した注視方向Ｘ｛又は特定した車載機器群（グループＡ）｝に対応するインジケータ２６ａを点灯させる。この段階では、注視方向Ｘが変化すると点灯するインジケータ２６ａ〜２６ｅも切り替わり、インジケータ２６ａ〜２６ｅは操作対象機器が特定されていないことを示す色（例えば、緑色）で点灯する。
【００４５】
図６Ｂにおいて、運転者１００は、各車載機器２０の位置関係（上から、ナビゲーション装置４０、オーディオ装置４２及びエアコンディショナ４４）に対応した位置にある十字キー１８を押し下げ、操作対象機器を決定する。すなわち、十字キー１８のうちオーディオ装置４２に対応するのは中央ボタン３０なので、運転者１００は、中央ボタン３０を押し下げる。これにより、グループＡが選択され、その後の注視方向Ｘにかかわらず中央のインジケータ２６ａが点灯し続ける。また、インジケータ２６ａの色は、選択した操作対象機器に応じて変化する。例えば、ナビゲーション装置４０は青色、オーディオ装置４２は黄色、エアコンディショナ４４は赤色とする。従って、オーディオ装置４２が選択された場合、インジケータ２６ａは黄色で表示される。
【００４６】
図６Ｃにおいて、運転者１００は、十字キー１８を操作することで、オーディオ装置４２の音量を調整する。すなわち、上ボタン３２を押す度に音量レベルが１増加し、下ボタン３４を押す度に音量レベルが１減少する。この際、運転者１００は、対象領域（グループＡに対応する中央方向の領域Ａ１）や車載機器２０（ここでは、オーディオ装置４２）を見る必要はなく、前方を見ながらでも操作対象機器（オーディオ装置４２）の操作が可能である。オーディオ装置４２を操作している間は、オーディオ装置４２に対応するインジケータ２６ａが、オーディオ装置４２に対応する色（黄色）で点灯し続ける。オーディオ装置４２の操作を終了するには、中央ボタン３０を押し下げる。オーディオ装置４２の操作が終了すると、新たに検出された注視方向Ｘに応じたインジケータ２６ａ〜２６ｅが緑色（操作対象機器が特定されていないことを示す色）で点灯する。
【００４７】
［３−２．ＨＵＤ４６を表示し、車速や燃費を確認する場合］
図７Ａ〜図７Ｃは、ＨＵＤ４６を表示し、車速や燃費を確認する場合の運転者１００の第１〜第３動作例を示す。まず、図７Ａに示すように、運転者１００は、５つの領域Ａ１〜Ａ５のうち、ＨＵＤ４６のある領域Ａ２（正面方向）を見る又は顔を向ける。これにより、ＥＣＵ２４は、注視方向判定技術を用いて車載機器群Ｂ（グループＢ）を特定する。また、ＥＣＵ２４は、判定した注視方向Ｘ｛又は特定した車載機器群（グループＢ）｝に対応するインジケータ２６ｂを緑色（操作対象機器が特定されていないことを示す色）で点灯させる。
【００４８】
図７Ｂにおいて、運転者１００は、各車載機器２０の位置関係（上から、ＨＵＤ４６、ハザードランプ４８及びシート５０）に対応した位置にある十字キー１８を押し下げ、操作対象機器を決定する。すなわち、十字キー１８のうちＨＵＤ４６に対応するのは上ボタン３２なので、運転者１００は、上ボタン３２を押し下げる。これにより、その後の注視方向Ｘにかかわらず正面のインジケータ２６ｂが点灯し続ける。また、インジケータ２６ｂの色は、選択した操作対象機器に対応する色となる。例えば、ＨＵＤ４６は青色、ハザードランプ４８は黄色、シート５０は赤色とする。従って、ＨＵＤ４６が選択された場合、インジケータ２６ｂは青色で表示される。
【００４９】
図７Ｃにおいて、運転者１００は、十字キー１８を操作することで、ＨＵＤ４６の表示を切り替える。すなわち、上ボタン３２を押す度に、ＨＵＤ４６の表示が、車速１１０→走行距離１１２→燃費１１４→車速１１０の順に切り替わる。反対に、下ボタン３４を押す度に、ＨＵＤ４６の表示が、車速１１０→燃費１１４→走行距離１１２→車速１１０の順に切り替わる。車速１１０、走行距離１１２及び燃費１１４以外の表示（例えば、ガソリン量、バッテリの残容量又は走行可能距離）を行ってもよい。この際、運転者１００は、対象領域（グループＢに対応する正面方向の領域Ａ２）や車載機器２０（ここでは、ＨＵＤ４６）を見る必要はなく、前方を見ながらでもＨＵＤ４６の操作が可能である。
【００５０】
また、ＨＵＤ４６を操作している間は、ＨＵＤ４６に対応するインジケータ２６ｂが、ＨＵＤ４６に対応する色（青色）で点灯し続ける。ＨＵＤ４６の操作を終了するには、中央ボタン３０を押し下げる。ＨＵＤ４６の操作が終了すると、新たに検出された注視方向Ｘに応じたインジケータ２６ａ〜２６ｅが緑色（操作対象機器が特定されていないことを示す色）で点灯する。
【００５１】
［３−３．助手席側ウィンドウ５８を開閉する場合］
図８Ａ〜図８Ｃは、助手席側ウィンドウ５８を開閉する場合の運転者１００の第１〜第３動作例を示す。まず、図８Ａに示すように、運転者１００は、５つの領域Ａ１〜Ａ５のうち、助手席側ウィンドウ５８のある領域Ａ４（左方向）を見る又は顔を向ける。これにより、注視方向判定技術を用いて車載機器群Ｄ（グループＤ）を特定する。また、ＥＣＵ２４は、判定した注視方向Ｘ｛又は特定した車載機器群（グループＤ）｝に対応するインジケータ２６ｄを緑色（操作対象機器が特定されていないことを示す色）で点灯させる。
【００５２】
図８Ｂにおいて、運転者１００は、各車載機器２０の位置関係（上から、ドアミラー５２、後方ライト５４及び助手席側ウィンドウ５８）に対応した位置にある十字キー１８を押し下げ、操作対象機器を決定する。すなわち、十字キー１８のうち助手席側ウィンドウ５８に対応するのは上ボタン３２及び下ボタン３４なので、運転者１００は、上ボタン３２又は下ボタン３４を押し下げる。これにより、その後の注視方向Ｘにかかわらず左側のインジケータ２６ｄが点灯し続ける。また、インジケータ２６ｄの色は、選択した操作対象機器に対応する色となる。例えば、ドアミラー５２は青色、後方ライト５４は黄色、助手席側ウィンドウ５８は赤色とする。従って、助手席側ウィンドウ５８が選択された場合、インジケータ２６ｄは赤色で表示される。
【００５３】
なお、ドアミラー５２及び後方ライト５４の位置関係は上下に存在するが、助手席側ウィンドウ５８については基準位置をどこに置くかにより、ドアミラー５２及び後方ライト５４との上下関係が逆転する。ここでは、助手席側ウィンドウ５８の図示しない駆動部の位置を基準としたが、別の場所を基準位置とすることもできる。これに伴い、ドアミラー５２、後方ライト５４及び助手席側ウィンドウ５８と各ボタンの対応関係は変更してもよい。但し、通常、ドアミラー５２の展開及び格納が略水平方向に行われるのに対し、助手席側ウィンドウ５８の開閉が略垂直方向に行われるため、それぞれの可動方向を考慮すると、ドアミラー５２に左ボタン３６及び右ボタン３８を割り当て、助手席側ウィンドウ５８に上ボタン３２及び下ボタン３４を割り当てる方が直感的な操作を行い易い。
【００５４】
図８Ｃにおいて、運転者１００は、十字キー１８を操作することで、助手席側ウィンドウ５８を開閉する。すなわち、下ボタン３４を押す度に、助手席側ウィンドウ５８が開き、上ボタン３２を押す度に、助手席側ウィンドウ５８が閉じる。この際、運転者１００は、車載機器２０（ここでは、助手席側ウィンドウ５８）を見る必要はなく、前方を見ながらでも操作対象機器（助手席側ウィンドウ５８）の操作が可能である。
【００５５】
また、助手席側ウィンドウ５８を操作している間は、助手席側ウィンドウ５８に対応するインジケータ２６ｄが、助手席側ウィンドウ５８に対応する色（赤色）で点灯し続ける。助手席側ウィンドウ５８の操作を終了するには、中央ボタン３０を押し下げる。助手席側ウィンドウ５８の操作が終了すると、新たに検出された注視方向Ｘに応じたインジケータ２６ａ〜２６ｅが緑色（操作対象機器が特定されていないことを示す色）で点灯する。
【００５６】
４．車載機器２０の選択方法と動作方法のまとめ
図９は、各車載機器２０の選択方法と操作方法の一覧を表示し、図１０は、各機能のボタン割当一覧を表示する。運転者１００は、図９及び図１０に沿った操作をすることにより、操作対象機器を簡易に操作することができる。
【００５７】
５．具体的なフローチャート
［５−１．全体フロー］
図１１は、各インジケータ２６ａ〜２６ｅ間の境界線２８ａ〜２８ｄを調整すると共に、各車載機器２０を選択又は操作するフローチャートである。ステップＳ１において、ＥＣＵ２４は、乗員カメラ１４が取得した運転者１００の顔画像に基づいて運転者１００の注視方向Ｘを検出する。
【００５８】
ステップＳ２において、ＥＣＵ２４は、各インジケータ２６ａ〜２６ｅの境界線２８ａ〜２８ｄを調整中であるか否かを判定する。具体的には、ＥＣＵ２４は、境界線２８ａ〜２８ｄを調整中であるか否かを示すフラグＦＬＧが１であるか否かを判定する。フラグＦＬＧは、０であるとき、境界線２８ａ〜２８ｄを調整中でないことを示し、１であるとき、境界線２８ａ〜２８ｄを調整中であることを示す。
【００５９】
境界線２８ａ〜２８ｄを調整中でない場合（Ｓ２：ＮＯ）、ステップＳ３において、ＥＣＵ２４は、境界線２８ａ〜２８ｄの調整を開始するか否かを判定する。具体的には、ＥＣＵ２４は、中央ボタン３０が所定時間（例えば、２〜５秒間の範囲におけるいずれかの時間）長押しされたか否かを判定する。境界線２８ａ〜２８ｄの調整を開始する場合（Ｓ３：ＹＥＳ）、ステップＳ４において、ＥＣＵ２４は、境界線調整開始処理を実行する。境界線２８ａ〜２８ｄの調整を開始しない場合（Ｓ３：ＮＯ）、ステップＳ６において、ＥＣＵ２４は、通常処理を実行する。
【００６０】
ステップＳ２において、境界線２８ａ〜２８ｄを調整中である場合（Ｓ２：ＹＥＳ）、ステップＳ５において、ＥＣＵ２４は、境界線調整処理を実行する。
【００６１】
［５−２．運転者１００の注視方向Ｘの検知（図１１のＳ１）］
運転者１００の視線方向の検知は、例えば、ＪＰ ２０１０−１０５４１７ Ａに記載の方法を用いて行うことができる（例えば、段落［００１４］〜［００１６］参照）。
【００６２】
運転者の顔向きの検知は、例えば、次のような方法により行うことができる。すなわち、ＥＣＵ２４（注視方向検出機能７０）は、乗員カメラ１４から出力された顔画像に基づき、顔中心位置と、左右の顔端位置を検出する。そして、これらの検出結果に基づき、例えば、人の顔をシリンダ形状に近似して顔向きを算出する（シリンダ法）。なお、ここでの顔向きは、広義の意味で用いられており、頭の正面側のみならずその他の部分（例えば、後頭部）を含んでもよい。
【００６３】
［５−３．境界線２８ａ〜２８ｄの調整（図１１のＳ４、Ｓ５）］
（５−３−１．概要）
図１２は、境界線２８ａ〜２８ｄの調整前後の様子を示す説明図である。図１２に示すように、本実施形態では、境界線２８ａ〜２８ｄを調整することにより、インジケータ２６ａ〜２６ｅの位置を調整することが可能である。この際、境界線２８ａ〜２８ｄの調整を行っても、各領域Ａ１〜Ａ５の位置はそのままの状態で各領域Ａ１〜Ａ５と各インジケータ２６ａ〜２６ｅとが対応付けられる。従って、境界線２８ａ〜２８ｄの調整により、操作装置１２が検出した注視方向Ｘと、運転者１００が意図する注視方向Ｘとの間にずれが生じている場合であっても、実際の注視方向Ｘに沿った違和感のない注視方向Ｘの検出が可能となる。
【００６４】
（５−３−２．境界線調整開始処理）
図１３は、境界線調整開始処理（図１１のＳ４）のフローチャートである。図１４は、境界線２８ａ〜２８ｄの調整の開始前から開始に至る際の表示器２２の状態変化の一例を示す図である。
【００６５】
図１３のステップＳ１１において、ＥＣＵ２４は、フラグＦＬＧに１を設定する。上記のように、フラグＦＬＧが１であるとき、境界線２８ａ〜２８ｄの調整中であることを示す。
【００６６】
ステップＳ１２において、ＥＣＵ２４は、運転者１００の注視方向Ｘにかかわらず、中央のインジケータ２６ａを、通常の表示色（例えば、緑色）とは異なる色（例えば、青色）に変化させて点灯させる（図１４参照）。なお、本実施形態において、ＥＣＵ２４は、車載機器群（グループＡ〜Ｄ）を特定していない場合でも境界線２８ａ〜２８ｄを点灯させる。
【００６７】
ステップＳ１３において、ＥＣＵ２４は、車両１０の進行方向に向かって左端の境界線２８ｃを強調表示する。ここでの強調表示としては、例えば、通常の表示色（例えば、青色）とは異なる色（例えば、黄色）に変化させて点灯することができる。或いは、境界線２８ｃの幅を通常時よりも太くしてもよい。或いは、境界線２８ｃの輝度を通常時よりも高くすることもできる。もちろん、これらの強調方法を併用することも可能である。
【００６８】
（５−３−３．境界線調整処理）
図１５は、境界線調整処理（図１１のＳ５）のフローチャートである。図１６は、境界線２８ａ〜２８ｄの調整方法を説明する図である。図１７は、境界線２８ａ〜２８ｄの調整中から調整終了時に致る際の表示器２２の状態変化の一例を示す図である。
【００６９】
ステップＳ２１において、ＥＣＵ２４は、十字キー１８のうち押し下げられたボタンが中央ボタン３０、上ボタン３２、下ボタン３４、左ボタン３６又は右ボタン３８のいずれであるかを判定する。
【００７０】
押し下げられたボタンが上ボタン３２又は下ボタン３４である場合、ステップＳ２２において、ＥＣＵ２４は、調整する境界線２８ａ〜２８ｄを選択する。すなわち、上ボタン３２が押し下げられている場合、調整対象の境界線２８ａ〜２８ｄを右方向に切り替える（図１６参照）。例えば、調整対象の境界線２８ａ〜２８ｄが左端の境界線２８ｃであるときに上ボタン３２を押し下げると、その右側の境界線２８ｄが選択される。下ボタン３４が押し下げられている場合、調整対象の境界線２８ａ〜２８ｄを左方向に切り替える。例えば、調整対象の境界線２８ａ〜２８ｄが左端の境界線２８ｃであるときに下ボタン３４を押し下げると、その左側には境界線２８ａ〜２８ｄが存在しないため、右端の境界線２８ｂが選択される。
【００７１】
押し下げられたボタンが左ボタン３６又は右ボタン３８である場合、ステップＳ２３において、ＥＣＵ２４は、調整対象の境界線２８ａ〜２８ｄの位置を調整する。すなわち、左ボタン３６が押し下げられている場合、調整対象の境界線２８ａ〜２８ｄを左に１単位ずつずらす（図１６参照）。右ボタン３８が押し下げられている場合、調整対象の境界線２８ａ〜２８ｄを右に１単位ずつずらす。なお、図１６に示すように、各境界線２８ａ〜２８ｄには、調整可能範囲が存在する。このため、調整可能範囲を超えるように各境界線２８ａ〜２８ｄをずらすことはできない。
【００７２】
押し下げられたボタンが中央ボタン３０である場合、ステップＳ２４において、ＥＣＵ２４は、注視方向Ｘに応じたインジケータ２６ａ〜２６ｅを通常の表示色（緑色）に戻して点灯させると共に、ステップＳ２５において、ＥＣＵ２４は、調整対象の境界線２８ａ〜２８ｄの強調表示を終了する（図１７参照）。ステップＳ２６において、ＥＣＵ２４は、フラグＦＬＧに０を設定する。上記のように、フラグＦＬＧが０であるとき、境界線２８ａ〜２８ｄの調整を行っていないことを示す。
【００７３】
［５−４．通常処理（図１１のＳ６）の全体］
図１８は、通常処理（図１１のＳ６）のフローチャートである。ステップＳ３１において、ＥＣＵ２４は、図１１のステップＳ１において、注視方向Ｘを検出できているか否かを判定する。注視方向Ｘを検出できている場合（Ｓ３１：ＹＥＳ）、ステップＳ３２において、ＥＣＵ２４は、注視方向Ｘに対応するインジケータ２６ａ〜２６ｅを点灯させる。注視方向Ｘを検出できていない場合（Ｓ３１：ＮＯ）、ステップＳ３３において、ＥＣＵ２４は、各インジケータ２６ａ〜２６ｅを消灯させる。
【００７４】
図１９Ａ〜図１９Ｃは、インジケータ２６ａ〜２６ｅの点灯又は消灯に伴う効果を説明する第１〜第３説明図である。図１９Ａに示すように、運転者１００の注視方向Ｘと点灯するインジケータ２６ａとが対応している場合、運転者１００は、注視方向Ｘによる車載機器群の選択が正常に行われていることを知ることができる。
【００７５】
図１９Ｂに示すように、運転者１００が、例えば、サングラス８０をしていることにより視線方向が検出できず、また、マスク８２をしていることにより顔向きが検出できず、その結果、運転者１００の注視方向Ｘが検出できない場合、いずれのインジケータ２６ａ〜２６ｅも点灯しない。このため、運転者１００は、注視方向Ｘの検出ができていないことを知ることができる。従って、運転者１００は、サングラス８０又はマスク８２を外す必要性を認識することが可能となる。
【００７６】
図１９Ｃに示すように、運転者１００の注視方向Ｘと点灯するインジケータ２６ｂとが対応していない場合、運転者１００は、注視方向Ｘによる車載機器群の選択が誤って行われていることを知ることができる。この場合、運転者１００は、上述した境界線２８ａ〜２８ｄの調整を行うべきこと又は自己の注視方向Ｘを修正すべきこと（図１９Ｃの場合、より左側を向くべきこと）を認識することが可能となる。
【００７７】
図１８に戻り、ステップＳ３４において、ＥＣＵ２４は、十字キー１８のいずれかのボタンが押し下げられたか否かを判定する。いずれのボタンも押し下げられていない場合（Ｓ３４：ＮＯ）、今回の処理を終える。いずれかのボタンが押し下げられた場合（Ｓ３４：ＹＥＳ）、ステップＳ３５において、ＥＣＵ２４は、現在、操作対象機器が選択中であるか否かを判定する。操作対象機器が選択中でない場合（Ｓ３５：ＮＯ）、ステップＳ３６において、ＥＣＵ２４は、図１１のステップＳ１において、注視方向Ｘを検出できているか否かを判定する。注視方向Ｘを検出できている場合（Ｓ３６：ＹＥＳ）、ステップＳ３７において、ＥＣＵ２４は、運転者１００による操作に応じて操作対象機器を選択する。注視方向Ｘを検出できていない場合（Ｓ３６：ＮＯ）、今回の処理を終える。
【００７８】
ステップＳ３５において操作対象機器が選択中である場合（Ｓ３５：ＹＥＳ）、ステップＳ３８において、ＥＣＵ２４は、操作対象機器に応じて点灯するインジケータ２６ａ〜２６ｅ及びその色を設定する。ステップＳ３９において、ＥＣＵ２４は、運転者１００による操作に応じて操作対象機器を操作する。
【００７９】
［５−５．操作対象機器の選択（図１８のＳ３７）］
（５−５−１．概要）
図２０は、ＥＣＵ２４が操作対象機器を選択するフローチャート（図１８のＳ３７の詳細）である。ステップＳ１１１において、ＥＣＵ２４は、図１１のステップＳ１で特定した運転者１００の注視方向Ｘが、中央、正面、右、左又はその他のいずれであるかを確認する。
【００８０】
運転者１００の注視方向Ｘが中央方向（領域Ａ１）である場合、ステップＳ１１２において、ＥＣＵ２４は、中央方向の車載機器群、すなわち、ナビゲーション装置４０、オーディオ装置４２及びエアコンディショナ４４からなるグループＡを特定し、グループＡの中から操作対象機器を選択する。
【００８１】
運転者１００の注視方向Ｘが正面方向（領域Ａ２）である場合、ステップＳ１１３において、ＥＣＵ２４は、正面方向の車載機器群、すなわち、ＨＵＤ４６、ハザードランプ４８及びシート５０からなるグループＢを特定し、グループＢの中から操作対象機器を選択する。
【００８２】
運転者１００の注視方向Ｘが右方向（領域Ａ３）である場合、ステップＳ１１４において、ＥＣＵ２４は、右方向の車載機器群、すなわち、ドアミラー５２、後方ライト５４及び運転席側ウィンドウ５６からなるグループＣを特定し、グループＣの中から操作対象機器を選択する。
【００８３】
運転者１００の注視方向Ｘが左方向（領域Ａ４）である場合、ステップＳ１１５において、ＥＣＵ２４は、左方向の車載機器群、すなわち、ドアミラー５２、後方ライト５４及び助手席側ウィンドウ５８からなるグループＤを特定し、グループＤの中から操作対象機器を選択する。
【００８４】
運転者１００の注視方向Ｘがその他の方向（領域Ａ５）である場合、ＥＣＵ２４は、いずれの車載機器２０も選択せずに今回の処理を終える。
【００８５】
（５−５−２．中央方向）
図２１は、運転者１００の注視方向Ｘが中央方向（領域Ａ１）である場合に操作対象機器を選択するフローチャート（図２０のＳ１１２の詳細）である。ステップＳ１２１において、ＥＣＵ２４は、十字キー１８のうち押し下げられたボタンが中央ボタン３０、上ボタン３２、下ボタン３４又はその他のいずれであるかを判定する。
【００８６】
押し下げられたボタンが上ボタン３２である場合、ステップＳ１２２において、ＥＣＵ２４は、ナビゲーション装置４０を選択し、中央のインジケータ２６ａを点灯させる。続くステップＳ１２３において、ＥＣＵ２４は、ナビゲーション装置４０を操作対象機器として設定する。
【００８７】
押し下げられたボタンが中央ボタン３０である場合、ステップＳ１２４において、ＥＣＵ２４は、オーディオ装置４２を選択し、中央のインジケータ２６ａを点灯させる。続くステップＳ１２５において、ＥＣＵ２４は、オーディオ装置４２を操作対象機器として設定する。
【００８８】
押し下げられたボタンが下ボタン３４である場合、ステップＳ１２６において、ＥＣＵ２４は、エアコンディショナ４４を選択し、中央のインジケータ２６ａを点灯させる。続くステップＳ１２７において、ＥＣＵ２４は、エアコンディショナ４４を操作対象機器として設定する。
【００８９】
押し下げられたボタンが上ボタン３２、中央ボタン３０及び下ボタン３４のいずれでもない場合、ＥＣＵ２４は、今回の処理を終える。
【００９０】
（５−５−３．正面方向）
図２２は、運転者１００の注視方向Ｘが正面方向（領域Ａ２）である場合に操作対象機器を選択するフローチャート（図２０のＳ１１３の詳細）である。ステップＳ１３１において、ＥＣＵ２４は、十字キー１８のうち押し下げられたボタンが中央ボタン３０、上ボタン３２、下ボタン３４又はその他のいずれであるかを判定する。
【００９１】
押し下げられたボタンが上ボタン３２である場合、ステップＳ１３２において、ＥＣＵ２４は、ＨＵＤ４６を選択し、正面のインジケータ２６ｂを点灯させる。続くステップＳ１３３において、ＥＣＵ２４は、ＨＵＤ４６をオンにする。これにより、フロントウィンドウ１１にＨＵＤ４６が表示される。ステップＳ１３４において、ＥＣＵ２４は、ＨＵＤ４６を操作対象機器として設定する。
【００９２】
押し下げられたボタンが中央ボタン３０である場合、ステップＳ１３５において、ＥＣＵ２４は、ハザードランプ４８を選択し、正面のインジケータ２６ｂを点灯させる。続くステップＳ１３６において、ＥＣＵ２４は、ハザードランプ４８を点滅させる。ステップＳ１３７において、ＥＣＵ２４は、ハザードランプ４８を操作対象機器として設定する。
【００９３】
押し下げられたボタンが下ボタン３４である場合、ステップＳ１３８において、ＥＣＵ２４は、シート５０を選択し、正面のインジケータ２６ｂを点灯させる。続くステップＳ１３９において、ＥＣＵ２４は、シート５０を操作対象機器として設定する。
【００９４】
押し下げられたボタンが上ボタン３２、中央ボタン３０及び下ボタン３４のいずれでもない場合、ＥＣＵ２４は、今回の処理を終える。
【００９５】
（５−５−４．右方向）
図２３は、運転者１００の注視方向Ｘが右方向（領域Ａ３）である場合に操作対象機器を選択するフローチャート（図２０のＳ１１４の詳細）である。ステップＳ１４１において、ＥＣＵ２４は、十字キー１８のうち押し下げられたボタンが中央ボタン３０、上ボタン３２、下ボタン３４、左ボタン３６又は右ボタン３８のいずれであるかを判定する。
【００９６】
押し下げられたボタンが上ボタン３２又は下ボタン３４である場合、ステップＳ１４２において、ＥＣＵ２４は、運転席側ウィンドウ５６を選択し、右側のインジケータ２６ｃを点灯させる。続くステップＳ１４３において、ＥＣＵ２４は、運転席側ウィンドウ５６を開閉する。すなわち、下ボタン３４が押し下げられている場合、運転席側ウィンドウ５６を開き、上ボタン３２が押し下げられている場合、運転席側ウィンドウ５６を閉じる。ステップＳ１４４において、ＥＣＵ２４は、運転席側ウィンドウ５６を操作対象機器として設定する。
【００９７】
押し下げられたボタンが左ボタン３６である場合、ステップＳ１４５において、ＥＣＵ２４は、ドアミラー５２の状態（展開又は格納）を確認する。ドアミラー５２が格納状態である場合、今回の処理を終える。ドアミラー５２が展開状態である場合、ステップＳ１４６において、ＥＣＵ２４は、左右両方のドアミラー５２を選択し、右側のインジケータ２６ｃを点灯させる。
【００９８】
ステップＳ１４７において、ＥＣＵ２４は、左右のドアミラー５２を格納する。ステップＳ１４８において、ＥＣＵ２４は、左右のドアミラー５２を選択して、右側のインジケータ２６ｃを消灯する。
【００９９】
押し下げられたボタンが右ボタン３８である場合、ステップＳ１４９において、ＥＣＵ２４は、ドアミラー５２の状態（展開又は格納）を確認する。ドアミラー５２が展開状態である場合、今回の処理を終える。ドアミラー５２が格納状態である場合、ステップＳ１５０において、ＥＣＵ２４は、左右両方のドアミラー５２を選択し、右側のインジケータ２６ｃを点灯させる。
【０１００】
ステップＳ１５１において、ＥＣＵ２４は、左右のドアミラー５２を展開する。ステップＳ１５２において、ＥＣＵ２４は、左右のドアミラー５２を選択して、右側のインジケータ２６ｃを消灯する。
【０１０１】
押し下げられたボタンが中央ボタン３０である場合、ステップＳ１５３において、ＥＣＵ２４は、後方ライト５４を選択し、右側のインジケータ２６ｃを点灯させる。続くステップＳ１５４において、ＥＣＵ２４は、後方ライト５４を点灯させる。ステップＳ１５５において、後方ライト５４を操作対象機器として設定する。
【０１０２】
（５−５−５．左方向）
図２４は、運転者１００の注視方向Ｘが左方向（領域Ａ４）である場合に操作対象機器を選択するフローチャート（図２０のＳ１１５の詳細）である。ステップＳ１６１において、ＥＣＵ２４は、十字キー１８のうち押し下げられたボタンが上ボタン３２、中央ボタン３０、下ボタン３４、右ボタン３８又は左ボタン３６のいずれであるかを判定する。
【０１０３】
押し下げられたボタンが上ボタン３２又は下ボタン３４である場合、ステップＳ１６２において、ＥＣＵ２４は、助手席側ウィンドウ５８を選択し、左側のインジケータ２６ｄを点灯させる。続くステップＳ１６３において、ＥＣＵ２４は、助手席側ウィンドウ５８を開閉する。すなわち、下ボタン３４が押し下げられている場合、助手席側ウィンドウ５８を開き、上ボタン３２が押し下げられている場合、助手席側ウィンドウ５８を閉じる。ステップＳ１６４において、ＥＣＵ２４は、助手席側ウィンドウ５８を操作対象機器として設定する。
【０１０４】
押し下げられたボタンが左ボタン３６である場合、ステップＳ１６５において、ＥＣＵ２４は、ドアミラー５２の状態（展開又は格納）を確認する。ドアミラー５２が展開状態である場合、今回の処理を終える。ドアミラー５２が格納状態である場合、ステップＳ１６６において、ＥＣＵ２４は、左右両方のドアミラー５２を選択し、左側のインジケータ２６ｄを点灯させる。
【０１０５】
ステップＳ１６７において、ＥＣＵ２４は、左右のドアミラー５２を展開する。ステップＳ１６８において、ＥＣＵ２４は、左右のドアミラー５２を選択して、左側のインジケータ２６ｄを消灯する。
【０１０６】
押し下げられたボタンが右ボタン３８である場合、ステップＳ１６９において、ＥＣＵ２４は、ドアミラー５２の状態（展開又は格納）を確認する。ドアミラー５２が格納状態である場合、今回の処理を終える。ドアミラー５２が展開状態である場合、ステップＳ１７０において、ＥＣＵ２４は、左右のドアミラー５２を選択し、左側のインジケータ２６ｄを点灯させる。
【０１０７】
ステップＳ１７１において、ＥＣＵ２４は、左右のドアミラー５２を格納する。ステップＳ１７２において、ＥＣＵ２４は、左右のドアミラー５２を選択して、左側のインジケータ２６ｄを消灯する。
【０１０８】
押し下げられたボタンが中央ボタン３０である場合、ステップＳ１７３において、ＥＣＵ２４は、後方ライト５４を選択し、左側のインジケータ２６ｄを点灯させる。続くステップＳ１７４において、ＥＣＵ２４は、後方ライト５４を点灯させる。ステップＳ１７５において、後方ライト５４を操作対象機器として設定する。
【０１０９】
［５−６．操作対象機器の操作（図１８のＳ３９）］
（５−６−１．概要）
図２５は、ＥＣＵ２４が操作対象機器を操作するフローチャート（図１８のＳ３９の詳細）である。ステップＳ１８１において、ＥＣＵ２４は、図１８のステップＳ３７により選択中の操作対象機器を確認する。選択中の操作対象機器がナビゲーション装置４０である場合、ステップＳ１８２において、ＥＣＵ２４は、ナビゲーション装置４０の操作を行う。選択中の操作対象機器がオーディオ装置４２である場合、ステップＳ１８３において、ＥＣＵ２４は、オーディオ装置４２の操作を行う。選択中の操作対象機器がエアコンディショナ４４である場合、ステップＳ１８４において、ＥＣＵ２４は、エアコンディショナ４４の操作を行う。
【０１１０】
選択中の操作対象機器がＨＵＤ４６である場合、ステップＳ１８５において、ＥＣＵ２４は、ＨＵＤ４６の操作を行う。選択中の操作対象機器がハザードランプ４８である場合、ステップＳ１８６において、ＥＣＵ２４は、ハザードランプ４８の操作を行う。選択中の操作対象機器がシート５０である場合、ステップＳ１８７において、ＥＣＵ２４は、シート５０の操作を行う。選択中の操作対象機器が後方ライト５４である場合、ステップＳ１８８において、ＥＣＵ２４は、後方ライト５４の操作を行う。選択中の操作対象機器が運転席側ウィンドウ５６である場合、ステップＳ１８９において、ＥＣＵ２４は、運転席側ウィンドウ５６の操作を行う。選択中の操作対象機器が助手席側ウィンドウ５８である場合、ステップＳ１９０において、ＥＣＵ２４は、助手席側ウィンドウ５８の操作を行う。
【０１１１】
（５−６−２．ナビゲーション装置４０の操作）
図２６は、ナビゲーション装置４０の操作を行うフローチャート（図２５のＳ１８２の詳細）である。ステップＳ２０１において、ＥＣＵ２４は、十字キー１８のうち押し下げられたボタンが中央ボタン３０、上ボタン３２、下ボタン３４、左ボタン３６又は右ボタン３８のいずれであるかを判定する。
【０１１２】
押し下げられたボタンが上ボタン３２又は下ボタン３４である場合、ステップＳ２０２において、ＥＣＵ２４は、ナビゲーション装置４０の表示の縮尺を変更する。すなわち、上ボタン３２が押し下げられている場合、縮尺を拡大し、下ボタン３４が押し下げられている場合、縮尺を縮小する。
【０１１３】
押し下げられたボタンが左ボタン３６又は右ボタン３８である場合、ステップＳ２０３において、ＥＣＵ２４は、ナビゲーション装置４０の表示方向を切り替える。すなわち、左ボタン３６が押し下げられた場合、表示方向を北向きとし、右ボタン３８が押し下げられた場合、表示方向を車両１０の進行方向とする。
【０１１４】
押し下げられたボタンが中央ボタン３０である場合、ステップＳ２０４において、ＥＣＵ２４は、中央のインジケータ２６ａを消灯させる。続くステップＳ２０５において、ＥＣＵ２４は、操作対象機器の選択を終了する。
【０１１５】
（５−６−３．オーディオ装置４２の操作）
図２７は、オーディオ装置４２の操作を行うフローチャート（図２５のＳ１８３の詳細）である。ステップＳ２１１において、ＥＣＵ２４は、十字キー１８のうち押し下げられたボタンが中央ボタン３０、上ボタン３２、下ボタン３４、左ボタン３６又は右ボタン３８のいずれであるかを判定する。
【０１１６】
押し下げられたボタンが上ボタン３２又は下ボタン３４である場合、ステップＳ２１２において、ＥＣＵ２４は、オーディオ装置４２の音量を調整する。すなわち、上ボタン３２が押し下げられている場合、音量を増大させ、下ボタン３４が押し下げられている場合、音量を減少させる。
【０１１７】
押し下げられたボタンが左ボタン３６又は右ボタン３８である場合、ステップＳ２１３において、ＥＣＵ２４は、オーディオ装置４２の選曲又は選局を切り替える。すなわち、左ボタン３６が押し下げられている場合、前の楽曲又は前の放送局に切り替え、右ボタン３８が押し下げられている場合、次の楽曲又は次の放送局に切り替える。
【０１１８】
押し下げられたボタンが中央ボタン３０である場合、ステップＳ２１４において、ＥＣＵ２４は、中央のインジケータ２６ａを消灯させる。続くステップＳ２１５において、ＥＣＵ２４は、操作対象機器の選択を終了する。
【０１１９】
（５−６−４．エアコンディショナ４４の操作）
図２８は、エアコンディショナ４４の操作を行うフローチャート（図２５のＳ１８４の詳細）である。ステップＳ２２１において、ＥＣＵ２４は、十字キー１８のうち押し下げられたボタンが中央ボタン３０、上ボタン３２、下ボタン３４、左ボタン３６又は右ボタン３８のいずれであるかを判定する。
【０１２０】
押し下げられたボタンが上ボタン３２又は下ボタン３４である場合、ステップＳ２２２において、ＥＣＵ２４は、エアコンディショナ４４の設定温度を調整する。すなわち、上ボタン３２が押し下げられている場合、設定温度を増加させ、下ボタン３４が押し下げられている場合、設定温度を減少させる。
【０１２１】
押し下げられたボタンが左ボタン３６又は右ボタン３８である場合、ステップＳ２２３において、ＥＣＵ２４は、エアコンディショナ４４の設定風量を調整する。すなわち、左ボタン３６が押し下げられている場合、設定風量を減少させ、右ボタン３８が押し下げられている場合、設定風量を増加させる。
【０１２２】
押し下げられたボタンが中央ボタン３０である場合、ステップＳ２２４において、ＥＣＵ２４は、中央のインジケータ２６ａを消灯させる。続くステップＳ２２５において、ＥＣＵ２４は、操作対象機器の選択を終了する。
【０１２３】
（５−６−５．ＨＵＤ４６の操作）
図２９は、ＨＵＤ４６の操作を行うフローチャート（図２５のＳ１８５の詳細）である。ステップＳ２３１において、ＥＣＵ２４は、十字キー１８のうち押し下げられたボタンが中央ボタン３０、上ボタン３２、下ボタン３４又はその他のいずれであるかを判定する。
【０１２４】
押し下げられたボタンが上ボタン３２又は下ボタン３４である場合、ステップＳ２３２において、ＥＣＵ２４は、ＨＵＤ４６の表示情報を切り替える。例えば、上ボタン３２が押し下げられている場合、車速１１０→走行距離１１２→燃費１１４→車速１１０→走行距離１１２、、、のように表示情報を切り替える（図７Ｃ参照）。下ボタン３４が押し下げられている場合、車速１１０→燃費１１４→走行距離１１２→車速１１０→燃費１１４、、、のように表示情報を切り替える。
【０１２５】
押し下げられたボタンが中央ボタン３０である場合、ステップＳ２３３において、ＥＣＵ２４は、正面のインジケータ２６ｂを消灯させる。続くステップＳ２３４において、ＥＣＵ２４は、ＨＵＤ４６をオフにする。ステップＳ２３５において、ＥＣＵ２４は、操作対象機器の選択を終了する。
【０１２６】
押し下げられたボタンがその他のボタン（左ボタン３６又は右ボタン３８）である場合、そのまま今回の処理を終える。
【０１２７】
（５−６−６．ハザードランプ４８の操作）
図３０は、ハザードランプ４８の操作を行うフローチャート（図２５のＳ１８６の詳細）である。ステップＳ２４１において、ＥＣＵ２４は、十字キー１８のうち押し下げられたボタンが中央ボタン３０又はその他のボタンのいずれであるかを判定する。
【０１２８】
押し下げられたボタンが中央ボタン３０である場合、ステップＳ２４２において、ＥＣＵ２４は、ハザードランプ４８を消灯する。続くステップＳ２４３において、ＥＣＵ２４は、正面のインジケータ２６ｂを消灯させる。ステップＳ２４４において、ＥＣＵ２４は、操作対象機器の選択を終了する。
【０１２９】
押し下げられたボタンがその他のボタン（上ボタン３２、下ボタン３４、左ボタン３６又は右ボタン３８）である場合、そのまま今回の処理を終える。
【０１３０】
（５−６−７．シート５０の操作）
図３１は、運転者１００用のシート５０の操作を行うフローチャート（図２５のＳ１８７の詳細）である。ステップＳ２５１において、ＥＣＵ２４は、十字キー１８のうち押し下げられたボタンが中央ボタン３０、上ボタン３２、下ボタン３４、左ボタン３６又は右ボタン３８のいずれであるかを判定する。
【０１３１】
押し下げられたボタンが上ボタン３２又は下ボタン３４である場合、ステップＳ２５２において、ＥＣＵ２４は、シート５０の前後スライド調整を行う。すなわち、上ボタン３２が押し下げられている場合、シート５０を前進させ、下ボタン３４が押し下げられている場合、シート５０を後退させる。
【０１３２】
押し下げられたボタンが左ボタン３６又は右ボタン３８である場合、ステップＳ２５３において、ＥＣＵ２４は、シート５０のリクライニング角度を調整する。すなわち、左ボタン３６が押し下げられている場合、リクライニング角度を減少させ、右ボタン３８が押し下げられている場合、リクライニング角度を増大させる。
【０１３３】
押し下げられたボタンが中央ボタン３０である場合、ステップＳ２５４において、ＥＣＵ２４は、正面のインジケータ２６ｂを消灯させる。続くステップＳ２５５において、ＥＣＵ２４は、操作対象機器の選択を終了する。
【０１３４】
（５−６−８．後方ライト５４の操作）
図３２は、後方ライト５４の操作を行うフローチャート（図２５のＳ１８８の詳細）ある。ステップＳ２６１において、ＥＣＵ２４は、十字キー１８のうち押し下げられたボタンが中央ボタン３０又はその他のボタンのいずれであるかを判定する。
【０１３５】
押し下げられたボタンが中央ボタン３０である場合、ステップＳ２６２において、ＥＣＵ２４は、後方ライト５４を消灯させる。続くステップＳ２６３において、ＥＣＵ２４は、点灯中の右側又は左側のインジケータ２６ｃ、２６ｄを消灯させる。続くステップＳ２６４において、ＥＣＵ２４は、操作対象機器の選択を終了する。
【０１３６】
押し下げられたボタンがその他のボタン（上ボタン３２、下ボタン３４、左ボタン３６又は右ボタン３８）である場合、そのまま今回の処理を終える。
【０１３７】
（５−６−９．運転席側ウィンドウ５６の操作）
図３３は、運転席側ウィンドウ５６の操作を行うフローチャート（図２５のＳ１８９の詳細）である。ステップＳ２７１において、ＥＣＵ２４は、十字キー１８のうち押し下げられたボタンが中央ボタン３０、上ボタン３２、下ボタン３４又はその他のボタンのいずれであるかを判定する。
【０１３８】
押し下げられたボタンが上ボタン３２又は下ボタン３４である場合、ステップＳ２７２において、ＥＣＵ２４は、運転席側ウィンドウ５６を開閉する。すなわち、下ボタン３４が押し下げられている場合、運転席側ウィンドウ５６を開き、上ボタン３２が押し下げられている場合、運転席側ウィンドウ５６を閉じる。
【０１３９】
押し下げられたボタンが中央ボタン３０である場合、ステップＳ２７３において、ＥＣＵ２４は、右側のインジケータ２６ｃを消灯させる。続くステップＳ２７４において、ＥＣＵ２４は、操作対象機器の選択を終了する。
【０１４０】
押し下げられたボタンがその他のボタン（左ボタン３６又は右ボタン３８）である場合、そのまま今回の処理を終える。
【０１４１】
（５−６−１０．助手席側ウィンドウ５８の操作）
図３４は、助手席側ウィンドウ５８の操作を行うフローチャート（図２５のＳ１９０の詳細）である。ステップＳ２８１において、ＥＣＵ２４は、十字キー１８のうち押し下げられたボタンが中央ボタン３０、上ボタン３２、下ボタン３４又はその他のボタンのいずれであるかを判定する。
【０１４２】
押し下げられたボタンが上ボタン３２又は下ボタン３４である場合、ステップＳ２８２において、ＥＣＵ２４は、助手席側ウィンドウ５８を開閉する。すなわち、下ボタン３４が押し下げられている場合、助手席側ウィンドウ５８を開き、上ボタン３２が押し下げられている場合、助手席側ウィンドウ５８を閉じる。
【０１４３】
押し下げられたボタンが中央ボタン３０である場合、ステップＳ２８３において、ＥＣＵ２４は、左側のインジケータ２６ｄを消灯させる。続くステップＳ２８４において、ＥＣＵ２４は、操作対象機器の選択を終了する。
【０１４４】
押し下げられたボタンがその他のボタン（左ボタン３６又は右ボタン３８）である場合、そのまま今回の処理を終える。
【０１４５】
６．本実施形態の効果
以上説明したように、本実施形態によれば、運転者１００（乗員）の注視方向Ｘに基づいて車幅方向の車載機器群（グループＡ〜Ｄ）を特定すると共に、特定した車載機器群のうちいずれかの車載機器２０を十字キー１８の操作により特定する。従って、運転者は、特定すべきいずれかの車載機器２０そのものを注視する必要は無く、特定すべきいずれかの車載機器２０が存在する車載機器群の方向（車幅方向）に視線又は顔を向けるだけでよくなる。このため、車両１０の前方への注意を阻害する要因を低減することが可能になると共に、操作対象機器の誤判定を防止することが可能となる。また、各車載機器２０に対する注視判定が不要となるため、高精度な視線／顔向き検知技術を必要としなくなる。従って、操作装置１２全体での高コスト化を防止することが可能となる。
【０１４６】
本実施形態において、十字キー１８は、選択可能な上下方向のそれぞれに対応して割り当てられた上ボタン３２、下ボタン３４及び中央ボタン３０を備える。これにより、選択可能な上下方向（＝１つの車載機器群に存在する車載機器２０の数）に対応して上ボタン３２、下ボタン３４及び中央ボタン３０が設けられるため、操作対象機器選択のための操作時間を短縮することが可能になると共に、操作対象機器を確実に選択することが可能となる。このため、利便性を向上することができる。
【０１４７】
本実施形態において、十字キー１８は、運転者１００の注視方向Ｘの検出及び十字キー１８の操作により操作対象機器が特定された状態において、当該操作対象機器に対する特定の操作入力を行うための操作入力手段を兼ねる。これにより、上下方向選択手段（例えば、機器選択用スイッチ）と操作入力手段(例えば、機器操作用スイッチ)とを共用化することにより操作手段の配置スペース及びコストを低減することが可能となる。また、ブラインド操作の容易化を図ることが可能となる。
【０１４８】
本実施形態において、ＥＣＵ２４は、乗員カメラ１４による取得画像に基づいて車幅方向における運転者１００の顔向き角度を検出し、当該顔向き角度に基づいて運転者１００の注視方向Ｘを検出する。これにより、車幅方向の顔向き角度を画像処理から求めれば良いため、瞳孔の輝点検出等を用いる視線検知を行うための高精度な画像処理や赤外ＬＥＤ等のデバイスが不要となり、より一層の低コスト化を図ることが可能となる。
【０１４９】
本実施形態では、特定された車載機器群（グループＡ〜Ｄ）における個別の車載機器２０の選択は、ステアリングホイール１６に設けられた十字キー１８により行われると共に、各車載機器群において車載機器２０を選択する上下方向は、十字キー１８の上下方向（上ボタン３２、下ボタン３４及び中央ボタン３０）に対応して割り当てられる。このような十字キー１８を用いることによりステアリングホイール１６から手を離さずに車載機器２０を操作可能であるため利便性が向上する。加えて、選択可能な方向が十字キー１８の上下位置に対応しているため、より直感的に車載機器２０を選択することができ、ブラインド操作の更なる容易化を図ることが可能となる。
【０１５０】
本実施形態では、運転者１００の注視方向Ｘに伴って特定された車載機器群（グループＡ〜Ｄ）を表示するインジケータ２６ａ〜２６ｄが、車載機器群（グループＡ〜Ｄ）ごとに設けられている。これにより、車載機器群を特定する精度を確保（車両１０の状態と運転者１００の認識とのずれを防止）しつつ、車載機器２０全てに対応するようにインジケータ２６を設ける場合に比べて低コスト化を図ることができる。
【０１５１】
本実施形態によれば、車幅方向における複数の車載機器群（グループＡ〜Ｄ）のうち運転者１００の注視方向Ｘに基づいて特定されたものを、インジケータ２６ａ〜２６ｅを用いて報知する。少なくともインジケータ２６ａ、２６ｂ、２６ｅは、車幅方向において各車載機器群（グループＡ、Ｂ）に対応する領域Ａ１、Ａ２、Ａ５の幅と同等の幅を有し、インストルメントパネル５９に車幅方向に並べて配置されている。従って、運転者１００は、領域Ａ１〜Ａ５の境界及び幅を視覚的に認識すると共に、特定されている車載機器群の切り替わりを認識することが可能となり、最小限の視線又は顔向きの変化で車幅方向における車載機器２０の特定を確実に行うことが可能となる。
【０１５２】
また、運転者１００が意図している注視方向Ｘと、操作装置１２が検出した注視方向Ｘとの間にずれが生じている場合でも、検出した注視方向Ｘを報知するインジケータ２６ａ〜２６ｅが存在することにより、運転者１００は当該ずれを認識し、注視方向Ｘを適宜調整することが可能となる。
【０１５３】
さらに、本実施形態では、運転者１００の視線方向又は顔向きを車幅方向における車載機器群（グループＡ〜Ｄ）の特定のみに用いるため、視線方向又は顔向きの検出は、車幅方向のみでよくなる。これにより、車幅方向以外の方向（例えば、上下方向）における視線方向又は顔向きの検出を不要とすることでき、視線方向又は顔向きの検出処理を軽減することなどが可能となる。
【０１５４】
本実施形態では、領域Ａ１〜Ａ５（インジケータ２６ａ〜２６ｅ）の境界線２８ａ〜２８ｄは、ＥＣＵ２４（車載機器群特定機能７２）により車載機器群（グループＡ〜Ｄ）が特定されていなくても表示器２２が報知する。これにより、運転者１００が確実に境界線２８ａ〜２８ｄを理解でき、どの幅領域に視線又は顔向きを変化させれば、特定の車載機器群を選択できるかを理解することが可能となる。
【０１５５】
本実施形態では、操作装置１２は、車載機器２０とは異なる場所において運転者１００により操作可能に設けられる十字キー１８を備え、ＥＣＵ２４（個別車載機器特定機能７４）は、検出した注視方向Ｘに基づいて車載機器群（グループＡ〜Ｄ）を特定すると共に、該車載機器群が特定された状態で十字キー１８により選択された方向に基づいて、特定された車載機器群のうちいずれかの車載機器２０を特定し、インジケータ２６ａ〜２６ｅは、個別車載機器特定機能７４によって特定された車載機器２０によって表示色が変更される。これにより、運転者１００は、１つの車載機器群の中でいずれの車載機器２０が選択されているかを直ぐに理解することができる。
【０１５６】
本実施形態において、インジケータ２６ａ〜２６ｅは、それらの幅を調整できる。これにより、注視方向検出機能７０により検出される注視方向Ｘと実際の注視方向Ｘがずれていたとしても調整することができ、実際の注視方向Ｘに沿った違和感のない注視方向Ｘの検出が可能となる。
【０１５７】
本実施形態によれば、検出された注視方向Ｘ又は特定された車載機器群（グループＡ〜Ｄ）に対応する領域Ａ１〜Ａ５を視覚的に報知する複数のインジケータ２６ａ〜２６ｅを備える。各インジケータ２６ａ〜２６ｅは、フロントウィンドウ１１の下部の周囲において領域Ａ１〜Ａ５ごとに車幅方向に沿って連続的に設けられて、隣り合う領域Ａ１〜Ａ５の境界を示す。従って、運転者１００は、領域Ａ１〜Ａ５の境界及び幅を視覚的に認識すると共に、選択されている領域Ａ１〜Ａ５の切り替わりを認識することが可能となり、最小限の視線又は顔向きの変化で車幅方向における車載機器２０の特定を確実に行うことが可能となる。
【０１５８】
また、運転者１００が意図している注視方向Ｘと、操作装置１２が検出した注視方向Ｘとの間にずれが生じている場合でも、検出した注視方向Ｘを視覚的に示す複数のインジケータ２６ａ〜２６ｅが存在することにより、運転者１００は当該ずれを認識し、注視方向Ｘを適宜調整することが可能となる。
【０１５９】
７．変形例
なお、この発明は、上記実施形態に限らず、この明細書の記載内容に基づき、種々の構成を採り得ることはもちろんである。例えば、以下の構成を採用することができる。
【０１６０】
［７−１．搭載対象］
上記実施形態では、操作装置１２を車両１０に搭載したが、これに限らず、別の対象に搭載してもよい。例えば、操作装置１２を船舶や航空機等の移動体に用いることもできる。また、移動体に限らず、対象者の注視方向を特定することを要する装置であれば、その他の装置であってもよい。
【０１６１】
［７−２．注視方向の検出］
注視方向Ｘの検出対象としての乗員は、運転者１００に限らず、その他の乗員（助手席に座っている乗員、後部座席に座っている乗員等）であってもよい。
【０１６２】
上記実施形態では、フロントウィンドウ１１周辺を５つの領域Ａ１〜Ａ５に区切ったが（図５）、領域の数は、これに限らない。例えば、図３５のように、フロントウィンドウ１１周辺を３つの領域Ａ１１〜Ａ１３に区切ることもできる。
【０１６３】
［７−３．操作対象機器の特定］
上記実施形態では、車両１０の車幅方向の特定を注視方向Ｘに基づいて行い、車両１０の高さ方向の特定を十字キー１８の操作により行ったが、インジケータ２６ａ〜２６ｅを用いて注視方向Ｘを報知する観点からすれば、これに限らない。例えば、車両１０の高さ方向の特定を注視方向Ｘ（顔向き及び視線方向の少なくとも一方）に基づいて行うこともできる。或いは、高さ方向に含まれる車載機器２０を１つのみ設定し、車幅方向の特定に伴って車載機器２０を特定するようにすることもできる。或いは、インジケータ２６ａ〜２６ｅを上下方向に配置し、上下方向における注視方向Ｘをインジケータ２６ａ〜２６ｅにより報知することも可能である。
【０１６４】
上記実施形態では、図１１、図１８、図２０〜図２４のフローチャートを用いて操作対象機器を特定したが、車両１０の車幅方向において車載機器群（グループＡ〜Ｄ）を特定すると共に、車両１０の高さ方向において操作対象機器を特定する観点からすれば、操作対象機器の特定方法は、これに限らない。例えば、図１８のフローチャートでは、ステップＳ３４において十字キー１８においていずれかのボタンが押し下げられたか否かを判定しているが、当該判定は省略すること（例えば、図２０のステップＳ１１１と組み合わせること）もできる。また、図２１〜図２４のフローチャートでは、選択した操作対象機器に対応させてインジケータ２６ａ〜２６ｄを点灯させたが、インジケータ２６ａ〜２６ｄを点灯させなくてもよい。
【０１６５】
［７−４．操作手段］
上記実施形態では、操作対象機器を特定するために運転者１００（乗員）が操作する手段（操作手段）として、十字キー１８を用いたが、車載機器群（グループＡ〜Ｄ）において上下方向に配置されている車載機器２０を特定又は選択する観点からすれば、これに限らない。例えば、上記実施形態の十字キー１８は、中央ボタン３０、上ボタン３２、下ボタン３４、左ボタン３６及び右ボタン３８を有していたが、上ボタン３２及び下ボタン３４のみの構成又は中央ボタン３０、上ボタン３２及び下ボタン３４のみの構成であってもよい。或いは、各ボタンが連結されている構成（例えば、ＪＰ ２０１０−１０５４１７ Ａの図４に示されるような十字ボタン）であってもよい。また、上記実施形態の十字キー１８の各ボタンは、いわゆるプッシュ式スイッチの類であったが（図３参照）、スライドスイッチ、レバースイッチ等その他の種類のスイッチであってもよい。
【０１６６】
上記実施形態では、十字キー１８が、車載機器群（グループＡ〜Ｄ）において操作対象機器を特定するための手段（操作手段）と、特定した操作対象機器を操作するための手段（操作入力手段）との両方を兼ねていたが、特定した操作対象機器を操作するための手段は別に設けることもできる。
【０１６７】
上記実施形態では、十字キー１８をステアリングホイール１６に設けたが、十字キー１８を設ける位置は、これに限らない。例えば、ステアリングコラムやインスツルメントパネルのいずれかの位置に設けることもできる。
【０１６８】
［７−５．車載機器２０及び車載機器群］
上記実施形態では、複数の車載機器２０として、ナビゲーション装置４０、オーディオ装置４２、エアコンディショナ４４、ＨＵＤ４６、ハザードランプ４８、シート５０、ドアミラー５２、後方ライト５４、運転席側ウィンドウ５６及び助手席側ウィンドウ５８を挙げたが、車載機器２０の選択の観点からすれば、車両１０の乗員が操作可能な複数の車載機器が上下方向に配置された車載機器群（グループ）が車幅方向に複数配置されていれば、これに限らない。
【０１６９】
また、必ずしも複数の車載機器群（グループ）が車幅方向に存在している必要はなく、少なくとも１つの車載機器群が車幅方向の特定領域に配置されている構成にも本発明を適用可能である。換言すると、本発明は、車幅方向における車載機器群の特定を乗員の注視方向に基づいて特定し、且つ特定された車載機器群における車載機器２０の特定を操作手段に行うものであれば適用可能であるため、複数の車載機器２０を含む車載機器群は１つ以上あればよい。さらに、１つの車載機器群を車幅方向に設け、車幅方向に単一の車載機器２０を別途配置する構成も可能である。
【０１７０】
或いは、選択されている車載機器群又は個別の車載機器２０を報知する観点からすれば、車両１０の乗員が操作可能な複数の車載機器が車幅方向に配置されていれば、これに限らない。この場合、各領域Ａ１〜Ａ５に配置される車載機器は１つであってもよい。
【０１７１】
［７−６．注視方向表示器２２（インジケータ２６ａ〜２６ｅ）］
上記実施形態では、表示器２２（インジケータ２６ａ〜２６ｅ）は、フロントウィンドウ１１の下部周辺においてインストルメントパネル５９に設けたが、フロントウィンドウ１１の下部若しくは上部又はそれらの周囲に設けられるのであれば、これに限らない。例えば、表示器２２（インジケータ２６ａ〜２６ｅ）をフロントウィンドウ１１の上部に設けることもできる。また、ＨＵＤ４６の領域をより広げた状態であれば、表示器２２（インジケータ２６ａ〜２６ｅ）をＨＵＤ４６の一部として構成することもできる。
【０１７２】
上記実施形態では、各インジケータ２６ａ〜２６ｅは、車幅方向に連続的に点灯するものであったが、隣り合う領域Ａ１〜Ａ５の境界を示す観点からすれば、断続的に（その一部が点灯しない状態で）設けられてもよい。
【０１７３】
上記実施形態では、操作対象機器が選択されていない場合、注視方向Ｘに対応するインジケータ２６ａ〜２６ｅのみを点灯させ、その他のインジケータ２６ａ〜２６ｅを消灯させていたが、これに限らず、全てのインジケータ２６ａ〜２６ｅを点灯させ、注視方向Ｘに対応するインジケータ２６ａ〜２６ｅのみを異なる色で表示してもよい。
【０１７４】
上記実施形態では、領域Ａ１〜Ａ５の全てに対応させてインジケータ２６ａ〜２６ｅを設けたが、選択されている領域を報知する観点からすれば、２つ以上のインジケータ２６ａ〜２６ｅが設けられていれば、これに限らない。
【０１７５】
上記実施形態では、インジケータ２６ａ〜２６ｅにより車載機器２０の選択を報知する方法として、インジケータ２６ａ〜２６ｅの色を変化させたが、これに限らず、例えば、インジケータ２６ａ〜２６ｅの点滅パターンのバリエーションにより車載機器２０の選択を報知してもよい。或いは、ナビゲーション装置４０からの音声出力により車載機器２０の選択を報知することもできる。もちろんこれらの組合せであってもよい。
【０１７６】
上記実施形態では、インジケータ２６ａ〜２６ｅの表示を途切れなく行っていたが、操作対象機器の選択を開始するための所定の操作又は設定が行われたときのみインジケータ２６ａ〜２６ｅによる表示を行うこともできる。また、当該所定の操作又は設定を行うためのボタン等の部位を設けてもよい。
【０１７７】
上記実施形態では、インジケータ２６ａ〜２６ｅを有する注視方向表示器２２を用いたが、車載機器２０の選択処理に着目した場合、その他の表示器又は点灯部を設けてもよい。例えば、図３６に示すように、領域Ａ１〜Ａ４に対応させて４つのパイロットランプ１２６ａ〜１２６ｄを設けることができる。すなわち、中央に設けられたパイロットランプ１２６ａと、正面に設けられたパイロットランプ１２６ｂと、右側に設けられたパイロットランプ１２６ｃと、左側に設けられたパイロットランプ１２６ｄとを設け、これらのパイロットランプ１２６ａ〜１２６ｄを複数の車載機器群Ａ〜Ｄ（グループＡ〜Ｄ）に対応させる。そして、これらのパイロットランプ１２６ａ〜１２６ｄを用いて、インジケータ２６ａ〜２６ｅと同様、検出した注視方向Ｘ（又はこれに対応する領域Ａ１〜Ａ４）や十字キー１８の操作状態を通知してもよい。
【０１７８】
或いは、車載機器２０を選択する観点に着目すれば、低コスト化や煩わしさ低減のためインジケータ２６ａ〜２６ｄ及びパイロットランプ１２６ａ〜１２６ｄを設けない構成や、現在操作可能な状態にある車載機器を瞬時に把握できるようにするため車載機器２０毎にインジケータ２６ａ〜２６ｄ又はパイロットランプ１２６ａ〜１２６ｄを設ける構成も可能である。
【図１】
0005554879.tif 000002
【図２】
0005554879.tif 000003
【図３】
0005554879.tif 000004
【図４】
0005554879.tif 000005
【図５】
0005554879.tif 000006
【図６Ａ】
0005554879.tif 000007
【図６Ｂ】
0005554879.tif 000008
【図６Ｃ】
0005554879.tif 000009
【図７Ａ】
0005554879.tif 000010
【図７Ｂ】
0005554879.tif 000011
【図７Ｃ】
0005554879.tif 000012
【図８Ａ】
0005554879.tif 000013
【図８Ｂ】
0005554879.tif 000014
【図８Ｃ】
0005554879.tif 000015
【図９】
0005554879.tif 000016
【図１０】
0005554879.tif 000017
【図１１】
0005554879.tif 000018
【図１２】
0005554879.tif 000019
【図１３】
0005554879.tif 000020
【図１４】
0005554879.tif 000021
【図１５】
0005554879.tif 000022
【図１６】
0005554879.tif 000023
【図１７】
0005554879.tif 000024
【図１８】
0005554879.tif 000025
【図１９Ａ】
0005554879.tif 000026
【図１９Ｂ】
0005554879.tif 000027
【図１９Ｃ】
0005554879.tif 000028
【図２０】
0005554879.tif 000029
【図２１】
0005554879.tif 000030
【図２２】
0005554879.tif 000031
【図２３】
0005554879.tif 000032
【図２４】
0005554879.tif 000033
【図２５】
0005554879.tif 000034
【図２６】
0005554879.tif 000035
【図２７】
0005554879.tif 000036
【図２８】
0005554879.tif 000037
【図２９】
0005554879.tif 000038
【図３０】
0005554879.tif 000039
【図３１】
0005554879.tif 000040
【図３２】
0005554879.tif 000041
【図３３】
0005554879.tif 000042
【図３４】
0005554879.tif 000043
【図３５】
0005554879.tif 000044
【図３６】
0005554879.tif 000045