(57)【特許請求の範囲】
【請求項１】
検出対象者の視線を検出する視線検出手段と、
画像を表示する表示画面を備えた表示手段と、
前記視線検出手段による検出結果に基づいて、前記検出対象者の視線上に前記表示画面が位置しているか否かを判断する第１視線位置判断手段と、
前記検出対象者の視線上に前記表示画面が位置していると前記第１視線位置判断手段により判断された場合に、前記表示画面上において前記検出対象者の視線と前記表示画面とが交差する位置に、前記検出対象者の視線検出結果であることを示す予め設定された第１検出結果画像を表示する第１表示制御手段と、
前記第１表示制御手段による前記第１検出結果画像の表示後に、前記視線検出手段による検出結果に基づいて、前記検出対象者の視線が移動したか否かを判断する第１視線移動検出手段と、
前記検出対象者の視線が移動したと前記第１視線移動検出手段により判断された場合に、前記第１表示制御手段の動作を禁止する第１禁止手段とを備える
ことを特徴とする視線検出装置。
【請求項２】
前記検出対象者の視線が移動したと前記第１視線移動検出手段により判断された場合に、この時点で、前記表示画面上における前記検出対象者の視線と前記表示画面とが交差する位置に、前記検出対象者の視線検出結果であることを示す予め設定された第２検出結果画像を表示する第２表示制御手段を備える
ことを特徴とする請求項１に記載の視線検出装置。
【請求項３】
前記第２表示制御手段による前記第２検出結果画像の表示開始から予め設定された表示終了判定時間が経過した場合に、前記第２表示制御手段の動作を禁止する第２禁止手段と、
前記第２表示制御手段による前記第２検出結果画像の表示開始から前記表示終了判定時間が経過した場合に、前記第１禁止手段による前記第１表示制御手段の動作の禁止を解除する第１解除手段とを備える
ことを特徴とする請求項２に記載の視線検出装置。
【請求項４】
前記第２表示制御手段は、
前記第２検出結果画像を、前記第１検出結果画像と異なる態様で表示する
ことを特徴とする請求項２または請求項３に記載の視線検出装置。
【請求項５】
前記視線検出手段による検出結果に基づいて、前記表示画面の周囲を覆うように予め設定された画面外表示可能領域が前記検出対象者の視線上に位置しているか否かを判断する第２視線位置判断手段と、
前記検出対象者の視線上に前記画面外表示可能領域が位置していると前記第２視線位置判断手段により判断された場合に、前記表示画面の外周端縁のうち、前記検出対象者の視線と前記画面外表示可能領域とが交差する位置に近い箇所として設定された位置に、前記検出対象者の視線検出結果であることを示す予め設定された第３検出結果画像を表示する第３表示制御手段と、
前記第３表示制御手段による前記第３検出結果画像の表示後に、前記表示画面内において、前記第３検出結果画像が表示されている位置を挟んで前記画面外表示可能領域と反対側となる位置に、前記検出対象者の視線上に前記表示画面が位置するように前記検出対象者の視線を誘導するための誘導用画像を表示する誘導表示制御手段とを備える
ことを特徴とする請求項１〜請求項４の何れか１項に記載の視線検出装置。
【請求項６】
前記第１表示制御手段は、
前記第１検出結果画像を、時間経過とともに視覚的に変化する態様で表示する
ことを特徴とする請求項１〜請求項５の何れか１項に記載の視線検出装置。
【請求項７】
前記第１表示制御手段は、
前記第１検出結果画像の表示位置を中心として、前記視線検出手段による視線検出の誤差の許容範囲を示す画像を表示する
ことを特徴とする請求項１〜請求項６の何れか１項に記載の視線検出装置。
【請求項８】
前記第２表示制御手段は、
前記第２検出結果画像の表示位置を中心として、前記視線検出手段による視線検出の誤差の許容範囲を示す画像を表示する
ことを特徴とする請求項２〜請求項４の何れか１項に記載の視線検出装置。
【請求項９】
当該視線検出装置は車両に搭載され、
前記車両が走行中である場合には、前記第１視線位置判断手段の動作を禁止する第３禁止手段を備える
ことを特徴とする請求項１〜請求項８の何れか１項に記載の視線検出装置。
【請求項１０】
予め設定された外部操作が行われると、前記第１視線位置判断手段の動作を禁止する第４禁止手段を備える
ことを特徴とする請求項１〜請求項９の何れか１項に記載の視線検出装置。
【請求項１１】
前記視線検出手段による検出結果に基づいて、前記検出対象者の視線が、前記表示画面を含むように予め設定された表示判定領域内で停留している時間を計測する停留時間計測手段と、
前記停留時間計測手段により計測された停留時間が、予め設定された判定禁止時間未満である場合に、前記第１視線位置判断手段の動作を禁止する第５禁止手段を備える
ことを特徴とする請求項１〜請求項１０の何れか１項に記載の視線検出装置。
【請求項１２】
検出対象者の視線を検出する視線検出手順と、
前記視線検出手順による検出結果に基づいて、前記検出対象者の視線上に、画像を表示する表示手段の表示画面が位置しているか否かを判断する第１視線位置判断手順と、
前記検出対象者の視線上に前記表示画面が位置していると前記第１視線位置判断手順により判断された場合に、前記表示画面上において前記検出対象者の視線と前記表示画面とが交差する位置に、前記検出対象者の視線検出結果であることを示す予め設定された第１検出結果画像を表示する第１表示制御手順と、
前記第１表示制御手順による前記第１検出結果画像の表示後に、前記視線検出手順による検出結果に基づいて、前記検出対象者の視線が移動したか否かを判断する第１視線移動検出手順と、
前記検出対象者の視線が移動したと前記第１視線移動検出手順により判断された場合に、前記第１表示制御手順の動作を禁止する第１禁止手順と、
前記検出対象者の視線が移動したと前記第１視線移動検出手順により判断された場合に、この時点で、前記表示画面上における前記検出対象者の視線と前記表示画面とが交差する位置に、前記検出対象者の視線検出結果であることを示す予め設定された第２検出結果画像を表示する第２表示制御手順とを備える
ことを特徴とする視線検出方法。
【請求項１３】
前記視線検出手順による検出結果に基づいて、前記表示画面の周囲を覆うように予め設定された画面外表示可能領域が前記検出対象者の視線上に位置しているか否かを判断する第２視線位置判断手順と、
前記検出対象者の視線上に前記画面外表示可能領域が位置していると前記第２視線位置判断手順により判断された場合に、前記表示画面の外周端縁のうち、前記検出対象者の視線と前記画面外表示可能領域とが交差する位置に近い箇所として設定された位置に、前記検出対象者の視線検出結果であることを示す予め設定された第３検出結果画像を表示する第３表示制御手順と、
前記第３表示制御手順による前記第３検出結果画像の表示後に、前記表示画面内において、前記第３検出結果画像が表示されている位置を挟んで前記画面外表示可能領域と反対側となる位置に、前記検出対象者の視線上に前記表示画面が位置するように前記検出対象者の視線を誘導するための誘導用画像を表示する誘導表示制御手順とを備える
ことを特徴とする請求項１２に記載の視線検出方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、視線を検出する視線検出装置および視線検出方法に関する。
【背景技術】
【０００２】
従来、車両の運転者の運転を支援するために、車両の運転者の視線を検出する技術が知られている。例えば、車両走行中に運転者の視線を検出することにより、運転者が脇見運転をしているか否かを判定し、脇見運転をしている場合には警報音を出力する技術がある（例えば、特許文献１を参照）。
【０００３】
なお、視線を検出するには、検出された視線の方向と実際の視線の方向との間に大きなズレが生じるのを抑制するために、所定の実行条件が成立するとキャリブレーションを実行する必要がある。例えば、運転者が注視している物体の位置を特定できた場合（例えば、運転者が車室内の操作スイッチを操作した場合には、運転者はこの操作スイッチを注視していると判断することができる。）に、検出された視線の方向に、運転者が注視している物体が位置するように、視線の検出方法を補正する手法が知られている（例えば、特許文献２，３を参照）。
【０００４】
また、運転者がキャリブレーション開始操作を行うと、所定の位置に注視用画像が表示され、検出された視線の方向に注視用画像が位置するように、視線の検出方法を補正する手法が知られている（例えば、特許文献４を参照）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０１０−３９９３３号公報
【特許文献２】特開平９−２３８９０５号公報
【特許文献３】特開２００９−１５５３３号公報
【特許文献４】特開平７−３５５４３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
上記特許文献２，３に記載の技術では、キャリブレーションが行われているか否かを運転者が意識することなくキャリブレーションを実行することができる。しかし、換言すると、運転者は、キャリブレーションが行われたか否かを判断することができない。さらに、運転者は、現状の視線検出結果の精度についても知ることができない。このため、運転者は、視線検出装置による検出結果が正常であるか否かを判断することができず、視線検出装置の検出結果に対して不安感、不快感、不信感を抱いてしまうおそれがある。
【０００７】
例えば、視線検出装置が搭載された車両の運転者が変更された場合において、運転者が正面を注視しているのにもかかわらず脇見運転の警報音の出力が頻発すると、その原因が、新たな運転者に対応したキャリブレーションが実行されていないためであるのか、視線検出装置が故障しているためであるのかを判断することができず、運転者は上記の不安感等を抱いてしまう。
【０００８】
一方、特許文献４に記載の技術では、運転者は、キャリブレーションが行われたか否かを知ることができるが、現状の視線検出結果の精度については知ることができない。このため、特許文献４に記載の技術においても、運転者は上記の不安感等を抱いてしまうおそれがある。
【０００９】
本発明は、こうした問題に鑑みてなされたものであり、視線検出装置の検出精度を容易に確認することができる技術を提供することを目的とする。
【課題を解決するための手段】
【００１０】
上記目的を達成するためになされた請求項１に記載の視線検出装置では、まず視線検出手段が、検出対象者の視線を検出し、その後に第１視線位置判断手段が、視線検出手段による検出結果に基づいて、検出対象者の視線上に、画像を表示する表示手段の表示画面が位置しているか否かを判断する。そして第１表示制御手段が、検出対象者の視線上に表示画面が位置していると第１視線位置判断手段により判断された場合に、表示画面上において検出対象者の視線と表示画面とが交差する位置に、検出対象者の視線検出結果であることを示す予め設定された第１検出結果画像を表示する。
【００１１】
このように構成された視線検出装置では、視線検出手段による検出結果に基づいて、検出対象者が表示画面を見ていると判断した場合に、表示画面上において検出対象者の視線の位置に第１検出結果画像を表示する。このため、検出対象者が表示画面を見ているときに、検出対象者の視線検出結果が表示画面に表示される可能性が高い。そして、検出対象者が表示画面を見ているときに第１検出結果画像が表示されると、検出対象者は、自身が現時点で実際に見ている表示画面上の位置と、第１検出結果画像が表示されている表示画面上の位置とを比較することができる。このため、検出対象者は、視線検出装置の検出精度を容易に確認することができる。これにより、視線検出装置の使用者が視線検出装置の検出結果に対して不安感等を抱いてしまうような状況の発生を抑制することができる。
【００１２】
また、請求項１に記載の視線検出装置では、第１視線移動検出手段が、第１表示制御手段による第１検出結果画像の表示後に、視線検出手段による検出結果に基づいて、検出対象者の視線が移動したか否かを判断し、第１禁止手段が、検出対象者の視線が移動したと第１視線移動検出手段により判断された場合に、第１表示制御手段の動作を禁止する。
【００１３】
ここで、検出対象者が表示画面を見ているときに第１検出結果画像が表示画面に表示されると、表示画面を見ている検出対象者は、この第１検出結果画像を見ようとして第１検出結果画像の位置に視線を移動しようとする。このため、第１検出結果画像の表示後の視線移動は、検出対象者が第１検出結果画像の表示に反応したためであると判断することができる。
【００１４】
すなわち、請求項１に記載の視線検出装置では、検出対象者が第１検出結果画像の表示を認識した後に、第１検出結果画像を表示画面から消去する。このため、検出対象者が第１検出結果画像の表示を認識したにもかかわらず、第１検出結果画像が表示画面上に無駄に表示され続けてしまうということをなくすことができる。
【００１５】
また、請求項１に記載の視線検出装置において、請求項２に記載のように、第２表示制御手段が、検出対象者の視線が移動したと第１視線移動検出手段により判断された場合に、この時点で、表示画面上における検出対象者の視線と表示画面とが交差する位置に、検出対象者の視線検出結果であることを示す予め設定された第２検出結果画像を表示するようにしてもよい。
【００１６】
すなわち、請求項２に記載の視線検出装置では、検出対象者が視線検出結果を示す画像を確認しようと視線を移動させると、視線検出結果を示す画像の表示位置を固定する。このため、検出対象者が視線検出結果を示す第１検出結果画像を確認しようと視線を移動させると、それに応じて、第１検出結果画像も移動してしまい、視線検出結果を示す画像を検出対象者が注視することができないという状況の発生を抑制することができる。これにより、検出対象者は、視線検出結果を示す画像の表示位置を中心視野で確実に確認することができる。
【００１７】
また、請求項２に記載の視線検出装置において、請求項３に記載のように、第２禁止手段が、第２表示制御手段による第２検出結果画像の表示開始から予め設定された表示終了判定時間が経過した場合に、第２表示制御手段の動作を禁止し、第１解除手段が、第２表示制御手段による第２検出結果画像の表示開始から表示終了判定時間が経過した場合に、第１禁止手段による第１表示制御手段の動作の禁止を解除するようにするとよい。
【００１８】
すなわち、請求項３に記載の視線検出装置では、第２検出結果画像の表示開始から表示終了判定時間が経過した後に、第２検出結果画像を表示画面から消去する。このため、検出対象者が第２検出結果画像の表示を認識したにもかかわらず、第２検出結果画像が表示画面上に無駄に表示され続けてしまうということをなくすことができる。さらに、請求項４に記載の視線検出装置では、第２検出結果画像の表示開始から表示終了判定時間が経過した後に、視線検出手段による検出結果に基づいて第１検出結果画像を表示する制御を行う。このため、検出対象者は、視線検出装置の精度を、別の時点で再確認することができる。
【００１９】
また、請求項２または請求項３に記載の視線検出装置において、請求項４に記載のように、第２表示制御手段は、第２検出結果画像を、第１検出結果画像と異なる態様で表示するようにしてもよい。これにより、検出対象者は、視線検出結果を示すために表示画面に現在表示されている画像が、検出対象者の視線移動に応じて移動する第１検出結果画像であるのか、検出対象者の視線移動によって移動せず固定して表示される第２検出結果画像であるかを、画像の表示態様によって判別することができる。
【００２０】
また、請求項１〜請求項４の何れか１項に記載の視線検出装置において、請求項５に記載のように、第２視線位置判断手段が、視線検出手段による検出結果に基づいて、表示画面の周囲を覆うように予め設定された画面外表示可能領域が検出対象者の視線上に位置しているか否かを判断し、第３表示制御手段が、検出対象者の視線上に画面外表示可能領域が位置していると第２視線位置判断手段により判断された場合に、表示画面の外周端縁のうち、検出対象者の視線と画面外表示可能領域とが交差する位置に近い箇所として設定された位置に、検出対象者の視線検出結果であることを示す予め設定された第３検出結果画像を表示する。そして誘導表示制御手段が、第３表示制御手段による第３検出結果画像の表示後に、表示画面内において、第３検出結果画像が表示されている位置を挟んで画面外表示可能領域と反対側となる位置に、検出対象者の視線上に表示画面が位置するように検出対象者の視線を誘導するための誘導用画像を表示する。
【００２１】
すなわち、請求項５に記載の視線検出装置では、検出対象者の視線検出結果が表示画面の周囲に設定されている画面外表示可能領域内に位置している場合に、表示画面の外周端縁のうち、この視線位置に近い位置に第３検出結果画像を表示し、その後、表示画面に誘導用画像を表示することにより、検出対象者の視線検出結果が表示画面内に位置するように、検出対象者の視線を誘導する。なお、誘導用画像は、第３検出結果画像を挟んで、画面外表示可能領域と反対側となる位置に表示されるため、検出対象者が誘導用画像を見ようとすれば、その視線は、表示画面内に向かって移動することになる。
【００２２】
これにより、視線検出手段による検出結果に基づいた視線の位置を示す画像を表示画面に表示することができるようになり、検出対象者は、自身が現時点で実際に見ている表示画面上の位置と、視線検出結果に基づいた表示画面上の視線の位置とを比較することができようになる。
【００２３】
ところで、検出対象者が実際に見ている表示画面上の位置と第１検出結果画像が表示されている表示画面上の位置とが異なるときに第１検出結果画像が表示されると、検出対象者は、周辺視野で第１検出結果画像を認識することになる場合がある。
【００２４】
このため、請求項１〜請求項５の何れか１項に記載の視線検出装置において、請求項６に記載のように、第１表示制御手段は、第１検出結果画像を、時間経過とともに視覚的に変化する態様で表示するようにしてもよい。検出対象者にとって周辺視野となる位置に第１検出結果画像が表示された場合に、第１検出結果画像が時間経過とともに視覚的に変化しない態様で表示される場合よりも、検出対象者が第１検出結果画像に気付き易くなるからである。
【００２５】
なお、時間経過とともに視覚的に変化する態様として、例えば、点滅、大きさ変化、色変化、形変化、輝度変化などが挙げられる。
また、請求項１〜請求項６の何れか１項に記載の視線検出装置において、請求項７に記載のように、第１表示制御手段は、第１検出結果画像の表示位置を中心として、視線検出手段による視線検出の誤差の許容範囲を示す画像を表示するようにしてもよいし、請求項２〜請求項４の何れか１項に記載の視線検出装置において、請求項８に記載のように、第２表示制御手段は、第２検出結果画像の表示位置を中心として、視線検出手段による視線検出の誤差の許容範囲を示す画像を表示するようにしてもよい。
【００２６】
これにより、検出対象者は、自身が現時点で実際に見ている表示画面上の位置が、第１検出結果画像または第２検出結果画像の表示位置を中心とした上記許容範囲内に含まれているか否かを確認することができる。このため、上記許容範囲内に含まれている場合には、視線検出手段による視線検出の誤差は許容範囲であり、上記許容範囲内に含まれていない場合には、視線検出の誤差は許容範囲外であると、検出対象者自身で判断することができる。
【００２７】
また、請求項１〜請求項８の何れか１項に記載の視線検出装置において、当該視線検出装置は車両に搭載されている場合には、請求項９に記載のように、第３禁止手段が、車両が走行中である場合には、第１視線位置判断手段の動作を禁止するようにするとよい。
【００２８】
すなわち、請求項９に記載の視線検出装置では、車両が停止しているときに、視線検出結果を表示画面に表示する制御が行われる。これにより、車両の運転者は、表示画面を注視しても安全な状態で視線検出結果を確認することができる。
【００２９】
また、請求項１〜請求項９の何れか１項に記載の視線検出装置において、請求項１０に記載のように、第４禁止手段が、予め設定された外部操作が行われると、第１視線位置判断手段の動作を禁止するようにしてもよい。
【００３０】
すなわち、請求項１０に記載の視線検出装置では、外部操作が行われると、視線検出結果を表示画面に表示する制御が行われなくなる。このため、視線検出結果を確認する必要がないと検出対象者が考えている場合にも視線検出結果が表示画面に表示されることによる不快感を視線検出装置の使用者に与えることがなくなる。
【００３１】
また、請求項１〜請求項１０の何れか１項に記載の視線検出装置において、請求項１１に記載のように、停留時間計測手段が、視線検出手段による検出結果に基づいて、検出対象者の視線が、表示画面を含むように予め設定された表示判定領域内で停留している時間を計測し、第５禁止手段が、停留時間計測手段により計測された停留時間が、予め設定された判定禁止時間未満である場合に、第１視線位置判断手段の動作を禁止するようにしてもよい。
【００３２】
すなわち、請求項１１に記載の視線検出装置では、検出対象者が表示判定領域内を判定禁止時間以上注視すると、視線検出手段による検出結果に基づいて第１検出結果画像を表示する制御を行う。これにより、視線検出結果を確認したいと検出対象者が考えたときに、上記の外部操作を行うことなく、表示判定領域内を注視するという簡便な動作で、視線検出結果が表示画面に表示されるようにすることができる。
【００３３】
また、請求項１２に記載の視線検出方法では、まず視線検出手順で、検出対象者の視線を検出し、その後に第１視線位置判断手順で、視線検出手順による検出結果に基づいて、検出対象者の視線上に、画像を表示する表示手段の表示画面が位置しているか否かを判断する。そして第１表示制御手順で、検出対象者の視線上に表示画面が位置していると第１視線位置判断手順により判断された場合に、表示画面上において検出対象者の視線と表示画面とが交差する位置に、検出対象者の視線検出結果であることを示す予め設定された第１検出結果画像を表示する。
【００３４】
この視線検出方法は、請求項１に記載の視線検出装置にて実行される方法であり、当該方法を実行することで、請求項１に記載の視線検出装置と同様の効果を得ることができる。
【００３５】
また、請求項１２に記載の視線検出方法では、第１視線移動検出手順で、第１表示制御手順による第１検出結果画像の表示後に、視線検出手順による検出結果に基づいて、検出対象者の視線が移動したか否かを判断し、第１禁止手順で、検出対象者の視線が移動したと第１視線移動検出手順により判断された場合に、第１表示制御手順の動作を禁止し、さらに第２表示制御手順で、検出対象者の視線が移動したと第１視線移動検出手順により判断された場合に、この時点で、表示画面上において検出対象者の視線と表示画面とが交差する位置に、検出対象者の視線検出結果であることを示す予め設定された第２検出結果画像を表示する。
【００３６】
この視線検出方法は、請求項２に記載の視線検出装置にて実行される方法であり、当該方法を実行することで、請求項２に記載の視線検出装置と同様の効果を得ることができる。
【００３７】
また、請求項１２に記載の視線検出方法において、請求項１３に記載のように、第２視線位置判断手順で、視線検出手順による検出結果に基づいて、表示画面の周囲を覆うように予め設定された画面外表示可能領域が検出対象者の視線上に位置しているか否かを判断し、第３表示制御手順で、検出対象者の視線上に画面外表示可能領域が位置していると第２視線位置判断手順により判断された場合に、表示画面の外周端縁のうち、検出対象者の視線と画面外表示可能領域とが交差する位置に近い箇所として設定された位置に、検出対象者の視線検出結果であることを示す予め設定された第３検出結果画像を表示し、さらに誘導表示制御手順で、第３表示制御手順による第３検出結果画像の表示後に、表示画面内において、第３検出結果画像が表示されている位置を挟んで画面外表示可能領域と反対側となる位置に、検出対象者の視線上に表示画面が位置するように検出対象者の視線を誘導するための誘導用画像を表示するようにしてもよい。
【００３８】
この視線検出方法は、請求項５に記載の視線検出装置にて実行される方法であり、当該方法を実行することで、請求項５に記載の視線検出装置と同様の効果を得ることができる。
【図面の簡単な説明】
【００３９】
【図１】視線検出装置１の構成、及び視線検出装置１が接続された車内ＬＡＮ２の概略構成を示すブロック図である。
【図２】第１実施形態の脇見警報処理を示すフローチャートである。
【図３】第１実施形態における視線検出結果の表示を説明する図である。
【図４】第２実施形態の脇見警報処理の前半部分を示すフローチャートである。
【図５】第２実施形態の脇見警報処理の後半部分を示すフローチャートである。
【図６】画面外表示可能領域ＲＤを示す図である。
【図７】第２実施形態における視線検出結果の表示を説明する図である。
【図８】第２実施形態における視線誘導表示を説明する図である。
【図９】第３実施形態の脇見警報処理を示すフローチャートである。
【図１０】第４実施形態の脇見警報処理を示すフローチャートである。
【図１１】表示判定領域ＲＪを示す図である。
【発明を実施するための形態】
【００４０】
（第１実施形態）
以下に本発明の第１実施形態について図面とともに説明する。
図１は、本実施形態の視線検出装置１の構成、及び視線検出装置１が接続された車内ＬＡＮ２の概略構成を示すブロック図である。
【００４１】
図１に示すように、視線検出装置１は、車両に搭載され、車内ＬＡＮ２を介してエンジンＥＣＵ３、変速機ＥＣＵ４、ブレーキＥＣＵ５、ステアリングＥＣＵ６をはじめとする各種ＥＣＵやナビゲーション装置７などの車載機器と接続されている。
【００４２】
このうちエンジンＥＣＵ３は、少なくとも、運転者のアクセルペダルの踏込量に応じたアクセル開度を検出するアクセル開度センサ１１からの検出信号に基づいて、エンジンの回転を制御するように構成されている。
【００４３】
また変速機ＥＣＵ４は、少なくとも、運転者が操作するシフトレバー（不図示）の操作位置（Ｐ，Ｒ，ＮＤ，１ｓｔ，２ｎｄ等）を検出するシフトスイッチ１２からの検出信号や、アクセル開度センサ１１からの検出信号や、車速を検出する車速センサ１３からの検出信号に基づいて、自動変速機（不図示）の変速比を車両の運転状態に応じて変化させる制御等を実行するように構成されている。
【００４４】
またブレーキＥＣＵ５は、少なくとも、運転者のブレーキペダル操作に応じてブレーキ油を圧送するマスタシリンダの油圧からブレーキ操作量を検出するマスタシリンダ圧センサ（不図示）や、車速センサ１３からの検出信号に基づいて、ＡＢＳ制御やトラクション制御等を実行するように構成されている。
【００４５】
またステアリングＥＣＵ６は、少なくとも、ドライバのステアリング操作時における前輪の操舵角を検出する操舵角センサ１４からの検出信号に基づいて、操舵輪の舵角変更時のアシスト力を発生させるパワーステアリング制御を実行するように構成されている。
【００４６】
またナビゲーション装置７は、ＧＰＳ（Global Positioning System）アンテナ（不図示）を介して受信したＧＰＳ信号等に基づいて車両の現在位置を検出し、現在地から目的地までの経路案内等を実行する制御や、表示画面ＤＰ（図３を参照）の周辺に設置されて運転者により操作されるナビスイッチ１５からの信号に基づいて、画像表示を切り換えたりする制御等を実行するように構成されている。なおナビスイッチ１５は、車両の現在地を表示させる場合に操作される現在地スイッチ（不図示）や、地図表示を拡大または縮小させる場合に操作される広域／詳細スイッチ（不図示）などから構成される。
【００４７】
そして、これらＥＣＵ３〜６及びナビゲーション装置７等にて検出される各種車両情報（アクセル開度、シフト位置、車速、操舵角など）は、車内ＬＡＮ２を介して相互に任意に送受信できるようにされている。
【００４８】
また視線検出装置１は、車両に搭載され、図１に示すように、運転席及びその周辺を連続して撮影するカメラ２１と、カメラ２１により撮影された画像のデータを一時的に記憶する画像キャプチャーボード２２と、各種のガイド音声等を出力するための音声出力部２３と、各種データを記憶するデータ記憶装置２４と、車内ＬＡＮ２を介して他の装置と各種車両情報等をやりとりする車内ＬＡＮ通信部２５と、上述した画像キャプチャーボード２２、データ記憶装置２４及び車内ＬＡＮ通信部２５からの入力に応じて各種処理を実行し、音声出力部２３及び車内ＬＡＮ通信部２５を制御する制御部２６とを備えている。
【００４９】
このように構成された視線検出装置１において、制御部２６は、運転者の視線の検出結果に基づいて脇見警報を行う脇見警報処理を実行する。
ここで、視線検出装置１の制御部２６が実行する脇見警報処理の手順を、図２を用いて説明する。図２は脇見警報処理を示すフローチャートである。この脇見警報処理は、制御部２６が起動（電源オン）している間に繰り返し実行される処理である。
【００５０】
この脇見警報処理が実行されると、制御部２６は、まずＳ１０にて、カメラ２１による撮影を行い、画像データを取得する。そしてＳ２０にて、Ｓ１０で取得した画像データを用いて、運転者の眼の視線を検出する。なお本実施形態では、視線の検出のために、例えば、「Takahiro Ishikawa, Simon Baker, Iain Matthews, and Takeo Kanade, "Passive Driver Gaze Tracking with Active Appearance Models," Proceedings of the 11th World Congress on Intelligent Transportation Systems, October, 2004.」に記載の手法を用いている。
【００５１】
その後Ｓ３０にて、車速センサ１３の検出結果に基づいて、視線検出装置１を搭載した車両（以下、自車両という）が停止しているか否かを判断する。ここで、自車両が停止していない場合には（Ｓ３０：ＮＯ）、Ｓ４０にて、Ｓ２０での視線検出結果に基づいて、運転者が脇見をしているか否かを判断する。ここで、運転者が脇見をしていない場合には（Ｓ４０：ＮＯ）、脇見警報処理を一旦終了する。一方、運転者が脇見をしている場合には（Ｓ４０：ＹＥＳ）、Ｓ５０にて、脇見をしていることを示す音声を音声出力部２３に出力させて、脇見警報処理を一旦終了する。
【００５２】
またＳ３０にて、自車両が停止していると判断した場合には（Ｓ３０：ＹＥＳ）、Ｓ６０にて、Ｓ２０での視線検出結果に基づいて、運転者の視線（以下、運転者視線という）がナビゲーション装置の表示画面ＤＰ（図３を参照。以下、ナビ表示画面ＤＰともいう）内に位置しているか否かを判断する。
【００５３】
ここで、運転者視線がナビ表示画面ＤＰ内に位置していない場合には（Ｓ６０：ＮＯ）、脇見警報処理を一旦終了する。一方、運転者視線がナビ表示画面ＤＰ内に位置している場合には（Ｓ６０：ＹＥＳ）、Ｓ７０にて、ナビ表示画面ＤＰ内における運転者視線の位置に一致した位置に、運転者視線が位置していることを示す画像ＧＳ（以下、視線位置指示画像ＧＳという）をナビ表示画面ＤＰに表示する（図３を参照）とともに、Ｓ８０にて、視線検出装置１にて許容される視線検出誤差の範囲を示す画像ＧＥ（以下、許容誤差指示画像ＧＥという）をナビ表示画面ＤＰに表示して（図３を参照）、脇見警報処理を一旦終了する。なお、本実施形態では、許容誤差指示画像ＧＥとして、視線位置指示画像ＧＳを中心として視線の角度を５度移動させた場合におけるナビ表示画面ＤＰ上の移動距離に対応する円が設定されている。
【００５４】
このように構成された視線検出装置１では、まず運転者の視線を検出し（Ｓ２０）、その後に、視線検出結果に基づいて、運転者の視線上にナビ表示画面ＤＰが位置しているか否かを判断する（Ｓ６０）。そして、運転者の視線上にナビ表示画面ＤＰが位置している場合に（Ｓ６０：ＹＥＳ）、ナビ表示画面ＤＰ上において運転者の視線とナビ表示画面ＤＰとが交差する位置に、運転者の視線検出結果であることを示す視線位置指示画像ＧＳを表示する（Ｓ７０）。
【００５５】
したがって、運転者がナビ表示画面ＤＰを見ているときに、運転者の視線検出結果がナビ表示画面ＤＰに表示される可能性が高い。そして、運転者がナビ表示画面ＤＰを見ているときに視線位置指示画像ＧＳが表示されると、運転者は、自身が現時点で実際に見ている表示画面上の位置（図３の注視位置ＰＬを参照）と、視線位置指示画像ＧＳが表示されている表示画面上の位置とを比較することができる。このため、運転者は、視線検出装置１の検出精度を容易に確認することができる。これにより、運転者が視線検出装置１の検出結果に対して不安感等を抱いてしまうような状況の発生を抑制することができる。
【００５６】
また、視線位置指示画像ＧＳの表示位置を中心として、視線検出装置１にて許容される視線検出誤差の範囲を示す許容誤差指示画像ＧＥが表示される（Ｓ８０）。これにより、運転者は、自身が現時点で実際に見ているナビ表示画面ＤＰ上の位置（図３の注視位置ＰＬを参照）が、視線位置指示画像ＧＳの表示位置を中心とした許容範囲内に含まれているか否かを確認することができる。このため、上記許容範囲内に含まれている場合には、視線検出の誤差は許容範囲であり、上記許容範囲内に含まれていない場合には、視線検出の誤差は許容範囲外であると、運転者自身で判断することができる。
【００５７】
また、自車両が停止しているときに（Ｓ３０：ＹＥＳ）、視線検出結果をナビ表示画面ＤＰに表示する制御が行われる（Ｓ７０）。これにより、車両の運転者は、ナビ表示画面ＤＰを注視しても安全な状態で視線検出結果を確認することができる。
【００５８】
以上説明した実施形態において、Ｓ２０の処理は本発明における視線検出手段および視線検出手順、ナビ表示画面ＤＰは本発明における表示画面、ナビゲーション装置７は本発明における表示手段、Ｓ６０の処理は本発明における第１視線位置判断手段および第１視線位置判断手順、Ｓ７０，８０の処理は本発明における第１表示制御手段および第１表示制御手順、視線位置指示画像ＧＳは本発明における第１検出結果画像、Ｓ３０の処理は本発明における第３禁止手段である。
【００５９】
（第２実施形態）
以下に本発明の第２実施形態について図面とともに説明する。なお、第２実施形態では、第１実施形態と異なる部分のみを説明する。
【００６０】
第２実施形態における視線検出装置１は、脇見警報処理が変更された点以外は第１実施形態と同じである。
次に、第２実施形態の脇見警報処理手順を図４，５を用いて説明する。図４は第２実施形態の脇見警報処理の前半部分、図５は脇見警報処理の後半部分を示すフローチャートである。
【００６１】
図４，５に示すように、第２実施形態の脇見警報処理が第１実施形態と異なるのは、Ｓ７０〜Ｓ８０の処理が省略されて、Ｓ５５及びＳ１１０〜Ｓ３３０の処理が追加された点である。
【００６２】
すなわち、Ｓ５０の処理が終了した場合、または運転者視線がナビ表示画面ＤＰ内に位置していないとＳ６０にて判断された場合には（Ｓ６０：ＮＯ）、Ｓ１１０にて、点滅表示フラグＦ１、固定表示フラグＦ２、画面縁表示フラグＦ３、及び誘導表示フラグＦ４をクリアして、脇見警報処理を一旦終了する。なお、以下の説明において、フラグをセットするとは、そのフラグの値を１にすることを示し、フラグをクリアするとは、そのフラグの値を０にすることを示す。
【００６３】
またＳ３０にて、自車両が停止していると判断した場合には（Ｓ３０：ＹＥＳ）、Ｓ５５にて、運転者視線が画面外表示可能領域ＲＤ内に位置しているか否かを判断する。画面外表示可能領域ＲＤは、ナビ表示画面ＤＰの周囲においてナビ表示画面ＤＰと同一平面上に予め設定された領域である（図６を参照）。
【００６４】
ここで、運転者視線が画面外表示可能領域ＲＤ内に位置してない場合には（Ｓ５５：ＮＯ）、Ｓ６０に移行する。そしてＳ６０にて、運転者視線がナビ表示画面ＤＰ内に位置していると判断した場合には（Ｓ６０：ＹＥＳ）、Ｓ１２０にて、点滅表示フラグＦ１と固定表示フラグＦ２がともにクリアされているか否かを判断する。ここで、点滅表示フラグＦ１と固定表示フラグＦ２がともにクリアされている場合には（Ｓ１２０：ＹＥＳ）、Ｓ１３０にて、ナビ表示画面ＤＰ内における運転者視線の位置に一致した位置に視線位置指示画像ＧＳをナビ表示画面ＤＰに例えば緑色で点滅表示し（図７（ａ）を参照）、さらにＳ１４０にて、点滅表示フラグＦ１をセットするとともに点滅表示フラグＦ１以外のフラグＦ２，Ｆ３，Ｆ４をクリアして、脇見警報処理を一旦終了する。
【００６５】
一方、点滅表示フラグＦ１または固定表示フラグＦ２の何れかがセットされている場合には（Ｓ１２０：ＮＯ）、Ｓ１５０にて、点滅表示フラグＦ１がセットされているか否かを判断する。ここで、点滅表示フラグＦ１がセットされている場合には（Ｓ１５０：ＹＥＳ）、Ｓ１６０にて、Ｓ１３０の処理で視線位置指示画像ＧＳの点滅表示を開始してから視線がナビ表示画面ＤＰ上において、予め設定された固定表示判定距離Ｌ１ｔｈ以上移動したか否かを判断する。なお、本実施形態では、固定表示判定距離Ｌ１ｔｈは、人間の中心視野角（約２度）に対応する移動距離に設定されている。
【００６６】
ここで、視線の移動距離が固定表示判定距離Ｌ１ｔｈ未満である場合には（Ｓ１６０：ＮＯ）、Ｓ１７０にて、Ｓ１３０と同様にして視線位置指示画像ＧＳを点滅表示する。一方、視線の移動距離が固定表示判定距離Ｌ１ｔｈ以上である場合には（Ｓ１６０：ＹＥＳ）、Ｓ１８０にて、現在の表示位置で固定して視線位置指示画像ＧＳを表示する（図７（ｂ）を参照）とともに、Ｓ１９０にて、視線位置指示画像ＧＳを緑色で点灯表示し、さらにＳ２００にて、固定表示フラグＦ２をセットするとともに点滅表示フラグＦ２以外のフラグＦ１，Ｆ３，Ｆ４をクリアして、脇見警報処理を一旦終了する。
【００６７】
またＳ１５０にて、点滅表示フラグＦ１がクリアされている場合には（Ｓ１５０：ＮＯ）、固定表示フラグＦ２がセットされていると判断して、Ｓ２１０にて、Ｓ１８０の処理で視線位置指示画像ＧＳの固定表示を開始してから、予め設定された固定解除判定時間Ｔ１ｔｈが経過したか否かを判断する。ここで、固定表示の開始から固定解除判定時間Ｔ１ｔｈが経過していない場合には（Ｓ２１０：ＮＯ）、Ｓ２２０にて、Ｓ１８０と同様にして視線位置指示画像ＧＳを固定表示するとともに、Ｓ２３０にて、Ｓ１９０と同様にして視線位置指示画像ＧＳを点灯表示して、脇見警報処理を一旦終了する。
【００６８】
一方、固定表示の開始から固定解除判定時間Ｔ１ｔｈが経過した場合には（Ｓ２１０：ＹＥＳ）、Ｓ２４０にて、点滅表示フラグＦ１、固定表示フラグＦ２、画面縁表示フラグＦ３、及び誘導表示フラグＦ４をクリアして、脇見警報処理を一旦終了する。
【００６９】
またＳ５５にて、運転者視線が画面外表示可能領域ＲＤ内に位置している場合には（Ｓ５５：ＹＥＳ）、Ｓ２５０にて、画面縁表示フラグＦ３と誘導表示フラグＦ４がともにクリアされているか否かを判断する。ここで、画面縁表示フラグＦ３と誘導表示フラグＦ４がともにクリアされている場合には（Ｓ２５０：ＹＥＳ）、Ｓ２６０にて、画面外表示可能領域ＲＤ内における運転者視線の位置（図８（ａ）の視線位置ＰＳを参照）に最も近いナビ表示画面ＤＰの位置（すなわち、ナビ表示画面ＤＰの端縁部）に、視線位置指示画像ＧＳを例えば赤色で点滅表示し（図８（ａ）を参照）、さらにＳ２７０にて、画面縁表示フラグＦ３をセットするとともに画面縁表示フラグＦ３以外のフラグＦ１，Ｆ２，Ｆ４をクリアして、脇見警報処理を一旦終了する。
【００７０】
一方、画面縁表示フラグＦ３または誘導表示フラグＦ４の何れかがセットされている場合には（Ｓ２５０：ＮＯ）、Ｓ２８０にて、画面縁表示フラグＦ３がセットされているか否かを判断する。ここで、画面縁表示フラグＦ３がセットされている場合には（Ｓ２８０：ＹＥＳ）、Ｓ２９０にて、Ｓ２６０の処理で視線位置指示画像ＧＳの点滅表示を開始してから、視線が画面外表示可能領域ＲＤ上において予め設定された誘導表示判定距離Ｌ２ｔｈ以上移動したか否かを判断する。なお、本実施形態では、誘導表示判定距離Ｌ２ｔｈは、人間の中心視野角（約２度）に対応する移動距離に設定されている。
【００７１】
ここで、視線の移動距離が誘導表示判定距離Ｌ２ｔｈ未満である場合には（Ｓ２９０：ＮＯ）、Ｓ３００にて、Ｓ２６０と同様にして視線位置指示画像ＧＳを点滅表示する。一方、視線の移動距離が誘導表示判定距離Ｌ２ｔｈ以上である場合には（Ｓ２９０：ＹＥＳ）、Ｓ３１０にて、視線誘導画像ＧＧを青色で点灯表示する（図８（ｂ）を参照）。なお、視線誘導画像ＧＧの表示位置は、Ｓ２６０の処理で表示された視線位置指示画像ＧＳの表示位置を挟んで、画面外表示可能領域ＲＤと反対側となる位置である。その後Ｓ３２０にて、誘導表示フラグＦ４をセットするとともに誘導表示フラグＦ４以外のフラグＦ１，Ｆ２，Ｆ３をクリアして、脇見警報処理を一旦終了する。
【００７２】
またＳ２８０にて、画面縁表示フラグＦ３がクリアされている場合には（Ｓ２８０：ＮＯ）、誘導表示フラグＦ４がセットされていると判断して、Ｓ３３０にて、Ｓ３１０と同様にして視線誘導画像ＧＧを点灯表示して、脇見警報処理を一旦終了する。
【００７３】
このように構成された視線検出装置１では、まず運転者の視線を検出し（Ｓ２０）、その後に、視線検出結果に基づいて、運転者の視線上にナビ表示画面ＤＰが位置しているか否かを判断する（Ｓ６０）。そして、運転者の視線上にナビ表示画面ＤＰが位置している場合に（Ｓ６０：ＹＥＳ）、ナビ表示画面ＤＰ上において運転者の視線とナビ表示画面ＤＰとが交差する位置に、運転者の視線検出結果であることを示す視線位置指示画像ＧＳを点滅表示する（Ｓ１３０）。その後、視線検出結果に基づいて、運転者の視線が移動したか否かを判断し（Ｓ１６０）、運転者の視線が移動した場合に（Ｓ１６０：ＹＥＳ）、視線位置指示画像ＧＳの点滅表示が中止される（Ｓ２００，Ｓ１５０）。
【００７４】
ここで、運転者がナビ表示画面ＤＰを見ているときに視線位置指示画像ＧＳがナビ表示画面ＤＰに表示されると、ナビ表示画面ＤＰを見ている運転者は、この視線位置指示画像ＧＳを見ようとして視線位置指示画像ＧＳの位置に視線を移動しようとする。このため、視線位置指示画像ＧＳの表示後の視線移動は、運転者が視線位置指示画像ＧＳの表示に反応したためであると判断することができる。したがって、運転者が視線位置指示画像ＧＳの点滅表示を認識したにもかかわらず、視線位置指示画像ＧＳがナビ表示画面ＤＰ上に無駄に点滅表示され続けてしまうということをなくすことができる。
【００７５】
また、運転者の視線が移動した場合に（Ｓ１６０：ＹＥＳ）、この時点で、ナビ表示画面ＤＰ上において運転者の視線とナビ表示画面ＤＰとが交差する位置に、視線位置指示画像ＧＳを点灯表示する（Ｓ１８０，Ｓ１９０）。
【００７６】
すなわち、運転者が視線位置指示画像ＧＳを確認しようと視線を移動させると、視線位置指示画像ＧＳの表示位置を固定する。このため、運転者が視線位置指示画像ＧＳを確認しようと視線を移動させると、それに応じて、視線位置指示画像ＧＳも移動してしまい、視線位置指示画像ＧＳを運転者が注視することができないという状況の発生を抑制することができる。これにより、運転者は、視線位置指示画像ＧＳを示す画像の表示位置を中心視野で確実に確認することができる。
【００７７】
また、視線位置指示画像ＧＳの固定表示開始から固定解除判定時間Ｔ１ｔｈが経過した場合に（Ｓ２１０：ＹＥＳ）、視線位置指示画像ＧＳの固定表示は中止される（Ｓ２４０，Ｓ１２０）。このため、運転者が視線位置指示画像ＧＳの固定表示を認識したにもかかわらず、視線位置指示画像ＧＳがナビ表示画面ＤＰ上に無駄に表示され続けてしまうということをなくすことができる。
【００７８】
さらに、視線位置指示画像ＧＳの固定表示開始から固定解除判定時間Ｔ１ｔｈが経過した場合に（Ｓ２１０：ＹＥＳ）、運転者の視線上にナビ表示画面ＤＰが位置している場合に視線位置指示画像ＧＳを点滅表示する制御が行われる（Ｓ２４０，Ｓ１２０，Ｓ１３０）。このため、運転者は、視線検出装置１の精度を、別の時点で再確認することができる。
【００７９】
また、視線位置指示画像ＧＳの点滅表示は、時間経過とともに視覚的に変化する態様での表示であるため、運転者にとって周辺視野となる位置に視線位置指示画像ＧＳが表示された場合に、視線位置指示画像ＧＳが時間経過とともに視覚的に変化しない態様で表示される場合よりも、運転者が視線位置指示画像ＧＳに気付き易くなる。
【００８０】
また、視線位置指示画像ＧＳが点滅して表示された後に、運転者の視線が移動すると、視線位置指示画像ＧＳは点灯して表示される。すなわち、運転者の視線移動の前後で表示態様が異なる。このため、運転者は、視線検出結果を示すためにナビ表示画面ＤＰに現在表示されている視線位置指示画像ＧＳが、運転者の視線移動に応じて移動する画像であるのか、運転者の視線移動によって移動せず固定して表示される画像であるかを、視線位置指示画像ＧＳの表示態様によって判別することができる。
【００８１】
また、視線検出装置１では、視線検出結果に基づいて、ナビ表示画面ＤＰの周囲を覆うように予め設定された画面外表示可能領域ＲＤが運転者の視線上に位置しているか否かを判断し（Ｓ５５）、画面外表示可能領域ＲＤが運転者の視線上に位置している場合に（Ｓ５５：ＹＥＳ）、ナビ表示画面ＤＰの外周端縁のうち、運転者の視線と画面外表示可能領域ＲＤとが交差する位置に近い箇所として設定された位置に、視線位置指示画像ＧＳを例えば赤色で点滅表示する（Ｓ２６０）。そして、視線位置指示画像ＧＳを赤色で点滅表示した後に、ナビ表示画面ＤＰ内において、視線位置指示画像ＧＳが表示されている位置を挟んで画面外表示可能領域ＲＤと反対側となる位置に、視線誘導画像ＧＧを表示する（Ｓ３１０）。なお、視線誘導画像ＧＧは、視線位置指示画像ＧＳを挟んで、画面外表示可能領域ＲＤと反対側となる位置に表示されるため、運転者が視線誘導画像ＧＧを見ようとすれば、その視線は、ナビ表示画面ＤＰ内に向かって移動することになる。
【００８２】
これにより、視線検出結果に基づいた視線の位置を示す画像をナビ表示画面ＤＰに表示することができるようになり、運転者は、自身が現時点で実際に見ている表示画面上の位置と、視線検出結果に基づいたナビ表示画面ＤＰ上の視線の位置とを比較することができようになる。
【００８３】
以上説明した実施形態において、Ｓ１６０の処理は本発明における第１視線移動検出手段および第１視線移動検出手順、Ｓ１５０およびＳ２００の処理は本発明における第１禁止手段および第１禁止手順、Ｓ１８０およびＳ１９０の処理は本発明における第２表示制御手段および第２表示制御手順、Ｓ１２０とＳ２１０とＳ２４０の処理は本発明における第２禁止手段、Ｓ１２０とＳ２１０とＳ２４０の処理は本発明における第１解除手段、緑色で点滅表示する視線位置指示画像ＧＳは本発明における第１検出結果画像、緑色で点灯表示する視線位置指示画像ＧＳは本発明における第２検出結果画像、固定解除判定時間Ｔ１ｔｈは本発明における表示終了判定時間である。
【００８４】
また、Ｓ５５の処理は本発明における第２視線位置判断手段および第２視線位置判断手順、Ｓ２６０の処理は本発明における第３表示制御手段および第３表示制御手順、Ｓ３１０の処理は本発明における誘導表示制御手段および誘導表示制御手順、赤色で点滅表示する視線位置指示画像ＧＳは本発明における第３検出結果画像、視線誘導画像ＧＧは本発明における誘導用画像である。
【００８５】
（第３実施形態）
以下に本発明の第３実施形態について図面とともに説明する。なお、第３実施形態では、第１実施形態と異なる部分のみを説明する。
【００８６】
第３実施形態における視線検出装置１は、視線検出結果を表示させる場合に操作される視線検出表示スイッチ（不図示）がナビスイッチ１５に追加された点と、脇見警報処理が変更された点以外は第１実施形態と同じである。
【００８７】
次に、第３実施形態の脇見警報処理手順を図９を用いて説明する。図９は第３実施形態の脇見警報処理を示すフローチャートである。
図９に示すように、第３実施形態の脇見警報処理が第１実施形態と異なるのは、Ｓ３２の処理が追加された点である。
【００８８】
すなわち、Ｓ３０にて、自車両が停止していると判断した場合には（Ｓ３０：ＹＥＳ）、Ｓ３２にて、視線検出表示スイッチがオンであるか否かを判断する。ここで、視線検出表示スイッチがオンである場合には（Ｓ３２：ＹＥＳ）、Ｓ６０に移行する。一方、視線検出表示スイッチがオフである場合には（Ｓ３２：ＮＯ）、Ｓ４０に移行する。
【００８９】
このように構成された視線検出装置１では、視線検出表示スイッチをオフにする操作が行われると（Ｓ３２：ＮＯ）、視線検出結果をナビ表示画面ＤＰに表示する制御が行われなくなる。このため、視線検出結果を確認する必要がないと運転者が考えている場合にも視線検出結果がナビ表示画面ＤＰに表示されることによる不快感を視線検出装置１の使用者（運転者）に与えることがなくなる。
【００９０】
以上説明した実施形態において、Ｓ３２の処理は本発明における第４禁止手段である。
（第４実施形態）
以下に本発明の第４実施形態について図面とともに説明する。なお、第４実施形態では、第１実施形態と異なる部分のみを説明する。
【００９１】
第４実施形態における視線検出装置１は、脇見警報処理が変更された点以外は第１実施形態と同じである。
次に、第４実施形態の脇見警報処理手順を図１０を用いて説明する。図１０は第４実施形態の脇見警報処理を示すフローチャートである。
【００９２】
図１０に示すように、第４実施形態の脇見警報処理が第１実施形態と異なるのは、Ｓ３４，Ｓ３６，Ｓ３８の処理が追加された点である。
すなわち、Ｓ３０にて、自車両が停止していると判断した場合には（Ｓ３０：ＹＥＳ）、Ｓ３４にて、運転者視線が表示判定領域ＲＪ内に位置しているか否かを判断する。表示判定領域ＲＪは、ナビ表示画面ＤＰとナビ表示画面ＤＰの周囲とにおいて、ナビ表示画面ＤＰと同一平面上に予め設定された領域である（図１１を参照）。本実施形態では、視線検出装置１の視線検出誤差を考慮して、ナビ表示画面ＤＰの中心部ＤＰＣを中心としてナビ表示画面ＤＰの４倍の面積を有する矩形領域を表示判定領域ＲＪに設定している。
【００９３】
ここで、運転者視線が表示判定領域ＲＪ内に位置してない場合には（Ｓ３４：ＮＯ）、Ｓ４０に移行する。一方、運転者視線が表示判定領域ＲＪ内に位置している場合には（Ｓ３４：ＹＥＳ）、Ｓ３６にて、運転者視線が表示判定領域ＲＪ内で停留し続けている時間（以下、視線停留時間という）を計測する。
【００９４】
そしてＳ３８にて、視線停留時間が、予め設定された結果表示判定時間Ｔ２ｔｈ以上であるか否かを判断する。ここで、視線停留時間が結果表示判定時間Ｔ２ｔｈ未満である場合には（Ｓ３８：ＮＯ）、Ｓ４０に移行する。一方、視線停留時間が結果表示判定時間Ｔ２ｔｈ以上である場合には（Ｓ３８：ＹＥＳ）、Ｓ６０に移行する。
【００９５】
このように構成された視線検出装置１では、視線検出結果に基づいて、運転者の視線が、ナビ表示画面ＤＰを含むように予め設定された表示判定領域ＲＪ内で停留している時間（視線停留時間）を計測し（Ｓ３４，Ｓ３６）、視線停留時間が結果表示判定時間Ｔ２ｔｈ以上である場合に（Ｓ３８：ＹＥＳ）、視線検出結果をナビ表示画面ＤＰに表示する制御が行われる（Ｓ７０）。
【００９６】
これにより、視線検出結果を確認したいと運転者が考えたときに、上記第３実施形態における視線検出表示スイッチをオンにする操作を行うことなく、表示判定領域ＲＪ内を注視するという簡便な動作で、視線検出結果がナビ表示画面ＤＰに表示されるようにすることができる。
【００９７】
以上説明した実施形態において、Ｓ３４及びＳ３６の処理は本発明における停留時間計測手段、Ｓ３８の処理は本発明における第５禁止手段、結果表示判定時間Ｔ２ｔｈは本発明における判定禁止時間である。
【００９８】
以上、本発明の一実施形態について説明したが、本発明は上記実施形態に限定されるものではなく、本発明の技術的範囲に属する限り種々の形態を採ることができる。
例えば上記実施形態においては、自車両が停止していることを、視線検出結果をナビ表示画面ＤＰに表示するための条件とするものを示したが、これに限られるものではなく、例えば、ＩＧスイッチがオンされたとき、すなわち車両出発時であることを、上記表示条件としてもよい。さらに、サイドブレーキの実施の有無を上記表示条件に追加してもよい。
【００９９】
また上記第１実施形態においては、許容誤差指示画像ＧＥを表示することによって、視線検出結果が許容誤差以内であるか否かを運転者自身で判断することができるようにしたものを示した。しかし、運転者が例えばナビスイッチ１５を操作しているときには、運転者はナビスイッチ１５を注視していると見做すことができる。このため、ナビスイッチ１５を操作しているときの運転者の視線検出結果に基づく視線位置とナビスイッチ１５の位置とを視線検出装置１が比較することによって、視線検出結果が許容誤差以内であるか否かを視線検出装置１が判断するようにしてもよい。そして、視線検出結果が許容誤差以内でないと視線検出装置１が判断した場合に、その旨を運転者に報知するようにするとよい。
【０１００】
また上記第１実施形態においては、視線位置指示画像ＧＳの表示位置を中心として、視線検出装置１にて許容される視線検出誤差の範囲を示す許容誤差指示画像ＧＥを表示するものを示した。しかし上記第２実施形態において、点滅表示している視線位置指示画像ＧＳを中心とした許容誤差指示画像ＧＥ、或いは点灯表示している視線位置指示画像ＧＳを中心とした許容誤差指示画像ＧＥを表示するようにしてもよい。
【０１０１】
また上記第２実施形態においては、視線誘導画像ＧＧを表示することによって、運転者の視線をナビ表示画面ＤＰに誘導するものを示した。しかし、視線誘導画像ＧＧを表示した後に運転者の視線が移動したにもかかわらず、運転者の視線がナビ表示画面ＤＰ内に位置していない場合には、視線検出のキャリブレーションを実施する必要がある旨、或いは視線検出の誤差が大きい旨を運転者に報知するようにするとよい。
【０１０２】
また、運転者が所定の操作（例えば、ナビスイッチ１５の操作）をすることにより、視線検出のキャリブレーションが実施されるようにしてもよい。
また上記実施形態においては、運転者の視線検出結果をナビ表示画面ＤＰに表示するものを示した。しかし、視線検出結果を表示する画面はナビ表示画面ＤＰに限定されるものではなく、例えば、メータ内のマルチディスプレイ、ヘッドアップディスプレイ（ＨＵＤ）等に表示するようにしてもよい。
【０１０３】
また、視線検出結果を複数の表示画面に表示できるようにして、運転者の顔向きに応じて、視線検出装置１が、視線検出結果を表示する画面を選択するようにしてもよい。
また、視線位置指示画像ＧＳとして点滅表示するものを示したが、それに限定されるものではなく、例えば、時間経過とともに色を変化させてもよく、また、形や大きさ、輝度を変化させてもよい。更にはそれらの中から複数を組合せてもよい。
【０１０４】
また、運転者が、視線位置指示画像ＧＳの表示態様を選択できるようにしてもよい。
【符号の説明】
【０１０５】
１…視線検出装置、２…車内ＬＡＮ、３…エンジンＥＣＵ、４…変速機ＥＣＵ、５…ブレーキＥＣＵ、６…ステアリングＥＣＵ、７…ナビゲーション装置、１１…アクセル開度センサ、１２…シフトスイッチ、１３…車速センサ、１４…操舵角センサ、１５…ナビスイッチ、２１…カメラ、２２…画像キャプチャーボード、２３…音声出力部、２４…データ記憶装置、２５…車内ＬＡＮ通信部、２６…制御部
【図１】
0005278461.tif 000002
【図２】
0005278461.tif 000003
【図４】
0005278461.tif 000004
【図５】
0005278461.tif 000005
【図６】
0005278461.tif 000006
【図９】
0005278461.tif 000007
【図１０】
0005278461.tif 000008
【図１１】
0005278461.tif 000009
【図３】
0005278461.tif 000010
【図７】
0005278461.tif 000011
【図８】
0005278461.tif 000012