(57)【要約】【課題】脇見運転と判断された場合に、その脇見の視線の方向に対応して光により警告することで、運転に支障になることなく確実に運転者に脇見運転である通知することを可能とした脇見運転警報装置及びその関連技術を提供すること。【解決方法】自動車の運転者の画像情報により脇見を検出する脇見検出部と、前記脇見検出部により検出した情報を用いて前記運転者の状態を判断する状態判断部と、前記状態判断部により脇見と判断した方向に脇見運転であることを通知する通知部を備え、前記状態判断部は、左右上下のいずれかの脇見であることを判定し、前記通知部は、前記状態判断部による判定結果より所定の光機器を制御する。【選択図】図１
2018190342.tif 000002
【特許請求の範囲】
【請求項１】
自動車の運転者の画像情報により脇見を検出する脇見検出部と、
前記脇見検出部により検出した情報を用いて前記運転者の状態を判断する状態判断部と、
前記状態判断部により脇見と判断した方向に脇見運転であることを通知する通知部を備え、
前記状態判断部は、左右上下のいずれかの脇見であることを判定し、前記通知部は、前記状態判断部による判定結果より所定の光機器を制御することを特徴とする脇見運転警報装置。
【請求項２】
前記状態判断部は、運転者の視線および／または頭部が前方方向に対して所定の角度の範囲外であることを判断することを特徴とする請求項１記載の脇見運転警報装置。
【請求項３】
前記通知部は、運転者の前方方向に対して所定の視野の範囲にある光機器を制御することを特徴とする請求項１または請求項２記載の脇見運転警報装置。
【請求項４】
前記状態判断部は、運転者の視線が前方に対して１５度以上の角度で左右何れにあるか判断することを特徴とする請求項１〜請求項３のいずれか１記載の脇見運転警報装置。
【請求項５】
前記脇見判断部は、運転者の視線が前方方向に対して１０度以上の角度で上下何れにあるか判断することを特徴とする請求項１〜請求項４のいずれか１記載の脇見運転警報装置。
【請求項６】
前記状態判断部は、所定の範囲外の視線が第１の所定時間が継続したことをもって脇見と判断することを特徴とする請求項１〜請求項５のいずれか１記載の脇見運転警報装置。
【請求項７】
前記通知部は、運転者の視野に対して少なくとも１つの光機器にて通知することを特徴とする請求項１〜請求項６のいずれか１記載の脇見運転警報装置。
【請求項８】
前記通知部は、左右いずれか又は両方の窓面、フロント面の少なくとも１箇所の所定の領域に設けられたバックライトを制御することを特徴とする請求項１〜請求項７のいずれか１記載の脇見運転警報装置。
【請求項９】
前記通知部は、光源の輝度および／または色調を制御するものであることを特徴とする請求項１〜請求項８のいずれか１記載の脇見運転警報装置。
【請求項１０】
前記通知部は、光源制御に点滅制御を含むことを特徴とする請求項１〜請求項９のいずれか１記載の脇見運転警報装置。
【請求項１１】
前記通知部は、脇見と判断されてから、前記第１の所定時間よりも長い第２の所定時間が継続した場合に過度な脇見として通知の仕方を変えて光機器の制御を行うことを特徴とする請求項６〜請求項１０のいずれか１記載の脇見運転警報装置。
【請求項１２】
自動車に搭載される脇見運転警報システムであって、
前記自動車の運転者の画像情報により脇見を検出する脇見検出手段と、
前記脇見検出手段により検出した情報を用いて前記運転者の状態を判断する状態判断手段と、
前記状態判断手段により脇見と判断した方向に脇見運転であることを通知する通知手段を備え、
前記状態判断手段は、左右上下のいずれかの脇見であることを判定し、前記通知手段は、判定結果より所定の光機器を制御することを特徴とする脇見運転警報システム。
【請求項１３】
前記脇見判断手段は、運転者の視線および／または頭部が前方に対して所定の角度の範囲外であることを判断することを特徴とする請求項１２記載の脇見運転警報システム。
【請求項１４】
前記通知手段は、運転者の頭部予定位置の前方に対して所定の視野範囲にある光機器を制御することを特徴とする請求項１２または請求項１３記載の脇見運転警報システム。
【請求項１５】
前記状態判断手段は、脇見検出から第１の所定時間が継続したことをもって脇見と判断することを特徴とする請求項１２〜請求項１４のいずれか１記載の脇見運転警報システム。
【請求項１６】
前記通知手段は、運転者の視野対して少なくとも１つの光源にて通知することを特徴とする請求項１２〜請求項１５のいずれか１記載の脇見運転警報システム。
【請求項１７】
前記通知手段は、左右いずれか又は両方の窓面、フロント面の少なくとも１箇所の所定の領域に設けられたバックライトを制御することを特徴とする請求項１２〜請求項１６のいずれか１記載の脇見運転警報システム。
【請求項１８】
前記通知手段は、光機器の輝度および／または色調を制御するものであることを特徴とする請求項１２〜請求項１７のいずれか１記載の脇見運転警報システム。
【請求項１９】
前記通知手段は、光機器制御に点滅制御を含むことを特徴とする請求項１２〜請求項１８のいずれか１記載の脇見運転警報システム。
【請求項２０】
前記通知手段は、脇見と判断されてから、前記第１の所定時間よりも長い第２の所定時間が継続した場合に過度な脇見として通知の仕方を変えた光機器制御を行うことを特徴とする請求項１５〜請求項１９のいずれか１記載の脇見運転警報システム。
【請求項２１】
自動車の運転者の画像情報により脇見を検出する脇見検出ステップと、
前記脇見検出ステップにより検出した情報を用いて前記運転者の状態を判断する状態判断ステップと、
前記状態判断ステップにより脇見と判断した方向に脇見運転であることを通知する通知ステップを備え、
前記状態判断ステップは、左右上下のいずれかの脇見であることを判定し、
前記通知ステップは、所定の光機器を制御することを特徴とする脇見運転の警報方法。
【請求項２２】
自動車の運転者の画像情報により脇見を検出する脇見検出ステップと、
前記脇見検出ステップにより検出した情報を用いて前記運転者の状態を判断する状態判断ステップと、
前記状態判断ステップにより脇見と判断した方向に脇見運転であることを通知する通知ステップを備え、
前記状態判断ステップは、左右上下のいずれかの脇見であることを判定し、前記通知ステップは、所定の光機器を制御することを特徴とする脇見運転の警報方法をコンピュータに実現させるプログラム。
【請求項２３】
自動車の運転者の画像情報により脇見を検出する脇見検出ステップと、
前記脇見検出ステップにより検出した情報を用いて前記運転者の状態を判断する状態判断ステップと、
前記状態判断ステップにより脇見と判断した方向に脇見運転であることを通知する通知ステップを備え、
前記状態判断ステップは、左右上下のいずれかの脇見であることを判定し、前記通知ステップは、所定の光機器を制御することを特徴とする脇見運転の警報方法をコンピュータに実現させるプログラムを格納した、コンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、車両の運転者の状態を検知し、脇見と判定された場合に、車室内に配置された光を発する装置を利用して注意を促す脇見運転警報装置に関する。
【背景技術】
【０００２】
従来、車両の走行における各種情報を取得し、運転者に対して運転の補助を行うことで車両事故を防止する車両制御装置等の提案が行われている。
【０００３】
例えば、特許文献１には、脇見運転や居眠り運転は自動車事故の直接的な原因となるとし、脇見運転であればスピーカから警告音を発するのみで対応できるとして、特に、運転者が居眠りをしている場合に覚醒させる技術が示されている。覚醒を促す手段としては、音声、振動、車内灯等の例示がある。
【０００４】
また、特許文献２に開示された運転者監視装置では、運転者の顔に投影した輝点パターンにより運転者の顔の傾きを求め、運転者が危険な状態にあるか否かを判定し、警告として警報音を鳴らすことが示されている。
【０００５】
なお、次の先行技術文献の中で、非特許文献１乃至３は、本発明の実施形態の説明の中で参照しているものである。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００５−６２９１１号公報
【特許文献１】特開平１０−９６０号公報
【非特許文献】
【０００７】
【非特許文献１】平成２５年度（本報告）タカタ財団助成研究論文「ドライバーによる事故要因の定量的メカニズムの解明」、［ｏｎｌｉｎｅ］、［平成２８年９月２１日検索］、インターネット＜ｈｔｔｐ:／／ｗｗｗ.ｔａｋａｔａｆｏｕｎｄ.ｏｒ.ｊｐ／ｓｕｐｐｏｒｔ／ａｒｔｉｃｌｅｓ／ｐｄｆ／１４０７０３＿０３．ｐｄｆ＞
【非特許文献２】平成２０年２月修士論文「運転状況を考慮した脇見状態推定手法」、［ｏｎｌｉｎｅ］、［平成２８年９月２１日検索］、インターネット＜ｈｔｔｐ：／／ｒｅｐｏｓｉｔｏｒｙ．ｄｌ．ｉｔｃ．ｕ−ｔｏｋｙｏ．ａｃ．ｊｐ／ｄｓｐａｃｅ／ｂｉｔｓｔｒｅａｍ／２２６１／２８８０９／１／４８０６６４４０.ｐｄｆ＞
【非特許文献３】第３０回計画学研究発表会「高速道路工事規制区間における運転者の前方不注視と走行環境・車両挙動との関連性分析」、［ｏｎｌｉｎｅ］、［平成２８年９月２１日検索］、インターネット＜ｈｔｔｐ:／／ｗｗｗ.ｃｉｖｉｌ.ｅｎｇ.ｏｓａｋａ−ｕ.ａｃ.ｊｐ／ｐｌａｎ／ｉｍａｇｅ／ｐｄｆ／２００８＿ｋｅｉｋａｋｕ６.ｐｄｆ＞
【発明の概要】
【発明が解決しようとする課題】
【０００８】
従来の技術としては、何れにしても、運転者の顔の傾き等を基に脇見や居眠りを判断し、音声や振動等、運転者に物理的に働きかける方法によるものであった。また、車内灯の点灯による場合であっても、運転者の視野、視角に入らなければ、警告や覚醒への効果は少ない。
【０００９】
即ち、車内灯は一般的に車室内の中央の天井部に設置されているので、光は、運転者からすれば、頭上しかも背後から放射されたものとなる。このため、運転者の視界に光源が存在するものとなっておらず、点灯状態の制御（例えば、点滅）を行ったとしても車室内の壁面等を反射して間接的に光量の変化をもって伝達されることになる。従って、反射光を利用するにしても、その反射吸収にともなう光の減衰や、窓ガラス等による反射においては運転者の窓外に注視による気が付き難い等の問題もある。
【００１０】
かかる問題を解決するために、本発明は、脇見運転と判断された場合に、その脇見の視線の方向に対応して光により警告することで、運転に支障になることなく確実に運転者に脇見運転である通知することを可能とした脇見運転警報装置及びその関連技術を提供することを目的とする。
【課題を解決するための手段】
【００１１】
上記の目的を達成するために、本発明は、自動車の運転者の画像情報により脇見を検出する脇見検出部と、上記脇見検出部により検出した情報を用いて上記運転者の状態を判断する状態判断部と、上記状態判断部により脇見と判断した方向に脇見運転であることを通知する通知部を備え、上記状態判断部は、左右上下のいずれかの脇見であることを判定し、上記通知部は、上記状態判断部による判定結果より所定の光機器を制御することを特徴とする脇見運転警報装置を提供するものである。
【００１２】
また、本発明は、上記状態判断部は、運転者の視線および／または頭部が前方方向に対して所定の角度の範囲外であることを判断することを特徴とする。
【００１３】
また、本発明は、上記通知部は、運転者の前方方向に対して所定の視野の範囲にある光機器を制御することを特徴とする。
【００１４】
また、本発明は、上記状態判断部は、運転者の視線が前方に対して１５度以上の角度で左右何れにあるか判断することを特徴とする。
【００１５】
また、本発明は、上記脇見判断部は、運転者の視線が前方方向に対して１０度以上の角度で上下何れにあるか判断することを特徴とする。
【００１６】
また、本発明は、上記状態判断部は、所定の範囲外の視線が第１の所定時間が継続したことをもって脇見と判断することを特徴とする。
【００１７】
また、本発明は、上記通知部は、運転者の視野に対して少なくとも１つの光機器にて通知することを特徴とする。
【００１８】
また、本発明は、上記通知部は、左右いずれか又は両方の窓面、フロント面の少なくとも１箇所の所定の領域に設けられたバックライトを制御することを特徴とする。
【００１９】
また、本発明は、上記通知部は、光源の輝度および／または色調を制御するものであることを特徴とする。
【００２０】
また、本発明は、上記通知部は、光源制御に点滅制御を含むことを特徴とする。
【００２１】
また、本発明は、上記通知部は、上記状態判断部にて脇見と判断されてから、上記第１の所定時間よりも長い第２の所定時間が継続した場合に過度な脇見として通知の仕方を変えて光機器の制御を行うことを特徴とする。
【００２２】
本発明によれば、脇見運転と判断された場合に、その脇見の視線方向に対し光学的な通知手段により通知するようにしたもので、警報機能としてより確実に通知することができる。また、脇見が左右、上下の何れであっても、運転者の視野に入るよう光機器（光源）が配置されていればよく、サイドミラー、バックミラー、窓枠、ドアフレーム等、既存物の利用あるいは併設可能であり、簡便に対応することができる。
【００２３】
また、光機器の光源の点灯、点滅の他に、輝度および／または色調を変える制御により、光機器からの光を背景色に対して、より鮮明とすることができ、認識し易くできる。
【００２４】
また、脇見と判断されてから、所定時間よりもさらに長い時間が継続した場合には、過度な脇見として、通知の仕方を変えて光機器の制御を行うことができ、警告度を高めることができる。
【００２５】
また、本発明は、自動車に搭載される脇見運転警報システムであって、上記自動車の運転者の画像情報により脇見を検出する脇見検出手段と、上記脇見検出手段により検出した情報を用いて上記運転者の状態を判断する状態判断手段と、上記状態判断手段により脇見と判断した方向に脇見運転であることを通知する通知手段を備え、上記状態判断手段は、左右上下のいずれかの脇見であることを判定し、上記通知手段は、上記状態判断手段による判定結果より所定の光機器を制御することを特徴とする脇見運転警報システムを提供するものである。
【００２６】
また、本発明は、上記脇見判断手段は、運転者の視線および／または頭部が前方に対して所定の角度の範囲外であることを判断することを特徴とする。
【００２７】
また、本発明は、上記通知手段は、運転者の頭部予定位置の前方に対して所定の視野範囲にある光機器を制御することを特徴とする。
【００２８】
また、本発明は、上記状態判断手段は、脇見検出から第１の所定時間が継続したことをもって脇見と判断することを特徴とする。
【００２９】
また、本発明は、上記通知手段は、運転者の視野対して少なくとも１つの光源にて通知することを特徴とする。
【００３０】
また、本発明は、上記通知手段は、左右いずれか又は両方の窓面、フロント面の少なくとも１箇所の所定の領域に設けられたバックライトを制御することを特徴とする。
【００３１】
また、本発明は、上記通知手段は、光源の輝度および／または色調を制御するものであることを特徴とする。
【００３２】
また、本発明は、上記通知手段は、光機器制御に点滅制御を含むことを特徴とする。
【００３３】
また、本発明は、上記通知手段は、脇見と判断されてから、上記第１の所定時間よりも長い第２の所定時間が継続した場合に過度な脇見として通知の仕方を変えた光機器制御を行うことを特徴とする。
【００３４】
本発明によれば、脇見運転と判断された場合に、その脇見の視線方向に対し光学的な通知手段により通知するようにしたもので、警報機能としてより確実に通知することができる。また、脇見が左右、上下の何れであっても、運転者の視野に入るよう光機器（光源）が配置されていればよく、サイドミラー、バックミラー、窓枠、ドアフレーム等、既存物の利用あるいは併設可能であり、簡便に対応することができる。
【００３５】
また、本発明は、自動車の運転者の画像情報により脇見を検出する脇見検出ステップと、上記脇見検出ステップにより検出した情報を用いて上記運転者の状態を判断する状態判断ステップと、上記状態判断ステップにより脇見と判断した方向に脇見運転であることを通知する通知ステップを備え、上記状態判断ステップは、左右上下のいずれかの脇見であることを判定し、上記通知ステップは、所定の光機器を制御することを特徴とする脇見運転の警報方法を提供するものである。
【００３６】
本発明によれば、脇見運転に対して光を用いて運転者の視角に入るように警告する機能を実現できる。
【００３７】
また、本発明は、自動車の運転者の画像情報により脇見を検出する脇見検出ステップと、上記脇見検出ステップにより検出した情報を用いて上記運転者の状態を判断する状態判断ステップと、上記状態判断ステップにより脇見と判断した方向に脇見運転であることを通知する通知ステップを備え、上記状態判断ステップは、左右上下のいずれかの脇見であることを判定し、上記通知ステップは、所定の光機器を制御することを特徴とする脇見運転の警報方法をコンピュータに実現させるプログラムを提供するものである。
【００３８】
本発明によれば、脇見運転に対して光を用いて運転者の視角に入るように警告する機能を実現できるので、自動車の他の機器を制御する制御装置にインストールすることにより、経済的に脇見運転警報システムを構築することができる。
【００３９】
また、本発明は、自動車の運転者の画像情報により脇見を検出する脇見検出ステップと、上記脇見検出ステップにより検出した情報を用いて上記運転者の状態を判断する状態判断ステップと、上記状態判断ステップにより脇見と判断した方向に脇見運転であることを通知する通知ステップを備え、上記状態判断ステップは、左右上下のいずれかの脇見であることを判定し、上記通知ステップは、所定の光機器を制御することを特徴とする脇見運転の警報方法をコンピュータに実現させるプログラムを格納した、コンピュータ読み取り可能な記録媒体を提供するものである。
【００４０】
本発明によれば、脇見運転に対して簡便に警告できる機能を記憶媒体として提供することにより、自動車の他の機器を制御する制御装置にインストールすることにより、経済的に脇見運転警報システムを構築することができる。
【発明の効果】
【００４１】
本発明によれば、脇見運転と判断された場合に、その脇見の視線方向に対し光学的な通知手段により通知するようにしたもので、警報機能としてより確実に通知することができる。また、脇見が左右、上下の何れであっても、運転者の視野に入るよう光機器（光源）が配置されていればよく、サイドミラー、バックミラー、窓枠、ドアフレーム等、既存物の利用あるいは併設可能であり、簡便に対応することができる。
【００４２】
また、光機器の光源の点灯、点滅の他に、輝度および／または色調を変える制御により、光機器からの光を背景色に対して、より鮮明とでき、認識し易くできる。
【００４３】
また、脇見と判断されてから、所定時間よりもさらに長い時間が継続した場合には、過度な脇見として、通知の仕方を変えて光機器の制御を行うことができ、警告度を高めることができる。この場合にも、点滅間隔や、輝度変更、色調変更等、段階に応じて、警報、警告度を強めていくことが可能になる。さらには、運転者の脇見運転が検知された場合に、輝度および／または色調が制御される光機器により、視覚的に確実に運転者に警告を伝達することができる。
【図面の簡単な説明】
【００４４】
【図１】本発明の一実施形態に係る脇見運転警報装置の構成図である。
【図２】本発明の一実施形態に係る運転者の前方及び水平（左右）方向の視線と視野角との関係を説明する説明図である。
【図３】本発明の一実施形態に係る運転者の前方及び垂直（上下）方向の視線と視野角との関係を説明する説明図である。
【図４】本発明の一実施形態に係る脇見運転と光による警報との関係を説明する説明図である。
【図５】本発明の一実施形態に係る車内の前方方向に対する脇見運転と光による警報との関係を説明する説明図である。
【図６】本発明の一実施形態に係る脇見運転警報装置を説明するシステム構成図である。
【図７】本発明の一実施形態に係る脇見運転警報装置における警報機器の制御フロー図である。
【図８】本発明の一実施形態に係る脇見運転警報装置における警報解除の制御フロー図である。
【図９】本発明の一実施形態に係る脇見運転警報装置における警報システムの初期設定の制御フロー図である。
【発明を実施するための形態】
【００４５】
本発明の脇見運転警報装置としての基本的な構成としては、車両の運転中に運転者の視線および／または頭部が、前方に対して左右方向あるいは上下方向に所定時間継続している場合に危険の可能性があるとして光により警報することにある。その警報の仕方として、脇見に対し光学的な通知手段により通知するようにしたもので、以下、図面を参照して、本発明の実施形態について説明する。
【００４６】
図１は、本発明の一実施形態に係る脇見運転警報装置の構成図である。図１において、１は脇見運転警報装置、２は脇見運転警報装置１に入力する頭部情報や視線等の画像情報である。画像情報２は、車内前方等に設置されるカメラ等の撮像情報による。
【００４７】
脇見運転警報装置１は、脇見検出部１１、脇見の状態判断部１２、警報通知部１３等からなる。状態判断部１２は、運転者の視線の左右方向および／または上下方向の判定処理部１２１を含み、また、警報通知部１３は光機器へ指示制御する処理部１３１を含む。
【００４８】
また、画像情報２は、運転者の頭部の位置情報や視線方向を含み、運転者の近傍に設けられるカメラ等による運転者の顔を撮像し得られた画像情報である。また、画像情報から視線方向を得ることもできる。この画像処理による視線検出の方法としては、不可視光（あるいは運転に影響しない範囲での可視光であってもよい）による照明光の眼球（角膜、網膜）による反射の像を抽出して視線を検出するものや、目の虹彩を抽出して視線を検出するものなど公知の技術を用いればよい。
【００４９】
受信入力されるこの画像情報２により、例えば、運転者の視線／頭部が、前方に対して左右、上下に何度の方向にあるか、その角度を脇見検出部１１にて検出する。以下、視線として説明するが、頭部であっても同様である。
【００５０】
この検出した角度情報を状態判断部１２にて左右、上下の判定処理（１２１）を行う。例えば、非特許文献１および非特許文献２を参酌するに、前方に対する左方向あるいは右方向に２０度乃至１５度以上離れた場合を脇見の始まりと考えてよい。その視線での継続時間（あるいは注視時間）が所定時間を経過したら脇見と判断でき、例えば、特許文献２で「高速道路を走行している場合、２秒以上のよそ見は、非常に危険である」との記載がみられる通りであるが、また、非特許文献３においても、高速道路を走行している場合には２秒以上のよそ見は過度の脇見として非常に危険であると考えられている。よって、所定時間としては、２秒あるいは安全面からそれより短い１．５秒等以上の継続をもって脇見状態であると判断する。
【００５１】
また、同様に、前方に対する上方向あるいは下方向に１５度あるいは１０度以上離れ、その視線での継続時間（注視時間）が所定時間、例えば、２秒あるいはそれより短い１．５秒等以上の継続をもって脇見状態であると判断する。
【００５２】
なお、前方に対する視線の方向としては、実際には３次元空間で、左上方、左下方、右上方、右下方等のベクトル方向となるが、これらの視線は、左右および／または上下方向に分解できるので、左／右方向に○○度、上／下方向に△△度の組合せによる判定でよい。
【００５３】
状態判断部１２にて脇見運転であると判断すると、警報通知部１３にて脇見方向に設置された光機器（光源）へ点灯／点滅等の指示制御（１３１）する。
【００５４】
従って、脇見運転中の運転者においては、その脇見方向の視線に対し、所定の範囲にある光機器からの光を受けることになる。この仕組みの詳細は後述する。
【００５５】
なお、図１において、脇見運転警報装置１と画像情報２を得る撮像装置とを別装置とし、画像情報２を得て脇見判断を行う構成を示したが、これに限定されるものではなく、例えば、脇見運転警報装置１内に画像情報２を得る撮像装置を含めて構成したものであってもよい。
【００５６】
また、脇見運転警報装置１からの指示制御により各光機器（後述する）が制御される例を示したが、各光機器を含め脇見運転警報装置１としてもよい。
【００５７】
また、先に説明の画像情報２に代えて、公知の脇見検出装置等を用いて、運転者の視線が前方に対して左右、上下に何度の方向にあるか、その角度情報を直接受信するようにしてもよい。また、画像解析により、前方方向に対して、眼球中心位置と角膜中心位置の各情報を受信するようにし、脇見運転警報装置１にて眼球、角膜の各中心軸と前方方向軸等により算出し判定するようにしてもよい。
【００５８】
図２は、本発明の一実施形態に係る運転者の前方及び水平（左右）方向の視線と視野角との関係を説明する説明図である。図２において、運転者の水平方向軸ａ１、前方方向軸ａ２の全体の視野に対し、前方に対する右視線の脇見判断の基準となる軸ａ３、前方に対する左視線の脇見判断の基準となる軸ａ４とし、前方方向軸ａ２から右基準軸ａ３、左基準軸ａ４の各角度ｂ１、ｂ２が運転中の前方方向の通常の視野角とする。
【００５９】
この所定の角度ｂ１、ｂ２を越えて運転者の視線が左右何れかの水平方向軸ａ１側へ移動し、その状態が所定時間を経過しても継続している場合に脇見運転の可能性が高く、脇見運転として警報通知を行うことになる。
【００６０】
この左右の脇見と判定される角度として、先の非特許文献を参酌すると、より安全サイドを考慮した例としては右１５度、左１５度以上とし、この角度以上の状態で例えば１．５秒以上継続した場合には脇見運転とする。
【００６１】
図３は、本発明の一実施形態に係る運転者の前方及び垂直（上下）方向の視線と視野角との関係を説明する説明図である。図３において、運転者の垂直方向軸ａ５、前方方向軸ａ２の全体の視野に対し、前方に対する上視線の脇見判断の基準となる軸ａ６、前方に対する下視線の脇見判断の基準となる軸ａ７とし、前方方向軸ａ２から上基準軸ａ６、下基準軸ａ７の各角度ｂ５、ｂ６が運転中の前方方向の通常の視野角とする。
【００６２】
この所定の角度ｂ５、ｂ６を越えて運転者の視線が上下何れかの垂直方向軸ａ５側へ移動し、その状態が所定時間を経過しても継続している場合に脇見運転の可能性が高く、脇見運転として警報通知を行うことになる。
【００６３】
この上下の脇見と判定される角度として、先の非特許文献を参酌すると、より安全サイドを考慮した例としては上１０度、下１０度以上とし、この角度以上の状態で例えば１．５秒以上継続した場合には脇見運転とする。
【００６４】
なお、脇見運転とする左右、上下の基準となる角度数値や、継続時間の数値は、一例を示すものであり、絶対的なものではなく、また、無事故を保障するものでもない。従って、実際の運用における事故防止の観点から許容範囲を定められることになる。
【００６５】
本発明では、運転中における運転者の視線が、左右上下の所定基準軸から外れ、その状態が所定時間継続したことをもって脇見運転と判断した際に、光によって警告することにある。
【００６６】
即ち、図２の水平方向に対しては、左右の基準軸ａ３、ａ４を越えた水平方向軸ａ１とのなす角度ｂ３、ｂ４内が脇見と判断される範囲となる。また、図３の垂直方向に対しては、上下の基準軸ａ６、ａ７を越えた垂直方向軸ａ５となす角度ｂ７、ｂ８内が脇見と判断される範囲となる。
【００６７】
従って、脇見と判断された範囲の角度ｂ３、ｂ４、ｂ７、ｂ８の何れかに対応して認識できるように警告用の光機器を配置すればよいことがわかる。この光機器の配置について、図４および図５を用いて以下説明する。
【００６８】
図４は、本発明の一実施形態に係る脇見運転と光による警報との関係を説明する説明図である。また、図５は、本発明の一実施形態に係る車内の前方方向に対する脇見運転と光による警報との関係を説明する説明図である。
【００６９】
図４において、図２と同じ符号は同じものを示し、水平方向軸ａ１と基準軸ａ３とで形成される角度ｂ３内に脇見となる視線が入った場合には、運転者の視界としては、右サイドミラー３２、図５に示す車内としては、右ドアフレーム３７１、右窓枠３６１、右窓３９２が光機器の設置部分となる。
【００７０】
また、図４において、水平方向軸ａ１と基準軸ａ４とで形成される角度ｂ４内に脇見となる視線が入った場合には、運転者の視界としては、左サイドミラー３３、図５に示す車内としては、左ドアフレーム３７２、左窓枠３６２、左窓３９３が光機器の設置部分となる。
【００７１】
また、図３において説明したように、垂直方向軸ａ５と基準軸ａ６とで形成される角度ｂ７内、あるいは、垂直方向軸ａ５と基準軸ａ７とで形成される角度ｂ８内に脇見となる視線が入った場合には、上方の脇見であれば、図４、図５に示すバックミラー３４が光機器の設置部分となる。また、運転者の視野に入る室内灯３５を利用することもできる。
【００７２】
また、下方の脇見であれば、図４、図５に示すセンターコンソール３１やナビゲーション装置３８が光機器の設置部分となる。
【００７３】
光機器としては、光学素子（例えばＬＥＤ）を、各サイドミラー３２、３３のフレーム、各ドアフレーム３７１，３７２、各窓枠３６１，３６２、バックミラー３４のフレーム、センターコンソール３１等を用いて埋め込むことでよい。また、ナビゲーション装置３８の画面を用いて点灯／点滅させることでよい。また、サイドミラー３２，３３や各窓３９２，３９３、バックミラー３４のガラス材を利用してバックライトとして光らせるようにしてもよい。なお、各機器に発光手段がもともと備えられているのであれば、それを用いてもよい。例えば、フットランプ等を利用できる。
【００７４】
また、左右方向の脇見や上下方向の脇見において、前面のフロントガラス３９１を用いることでもよい。この場合、フロントガラスの左右および上下のガラス周辺に光学素子（例えばＬＥＤ）を埋め込むことや、バックライトを用いることでもよい。脇見の視線方向に対応したフロントガラスの一部を光らすことでもよい。
【００７５】
また、光機器の光源の点灯、点滅の他に、輝度および／または色調を変えることができるものを使用してもよい。この場合、通知部１３は、点灯、点滅制御の他に、輝度制御や、色調制御をおこなうことになる。警報通知の際に、輝度選択や色調選択により、光機器からの光を背景色に対して、より鮮明とすることができ、認識し易くなる。
【００７６】
また、脇見と判断されてから、所定時間よりもさらに長い時間が継続した場合には、過度な脇見として、通知の仕方を変えて光機器の制御を行うことができる。
【００７７】
この場合にも、点滅間隔や、輝度変更、色調変更等、段階に応じて、警報、警告度を強めていくことが可能になる。
【００７８】
以上に説明した運転者の脇見と判定される視線の方向と光機器との対応関係については、運転者の視野（視界）を考慮にいれて、光を認識することができればよいので、角度ｂ３、ｂ４、ｂ７、ｂ８の範囲内に限らず、その近傍や範囲外であっても視野に入れる範囲に光機器が設置されればよい。即ち、運転者の視野に入る範囲で警報できればよく、必ずしも、角度ｂ３、ｂ４、ｂ７、ｂ８内に光機器を設置しなければならないということではない。
【００７９】
例えば、運転者が脇見をしたと判断されたときであっても、運転者は、前方方向から、左９０度から右９０度のいずれかの範囲内に視線があることに変わりなく、左側を見ている場合には少なくとも１つの左側光機器が、右側を見ている場合には少なくとも１つの右側光機器があれば、視野内に入ることになる。
【００８０】
ここで、運転者は、左右４５度ずつの視野範囲があるとすると、左側に脇見をしたときに左４５度から左９０度の範囲内に左側光源が配置されていればよく、視線が左側９０度以内であれば確実に光源を視界に含めることができる。また、右側に脇見したときも、右４５度から右９０度の範囲内に右側光源が配置されていればよく、視線が右側９０度以内であれば確実に光源を視界に含めることができる。
【００８１】
このように、脇見をしたとしても、左側光源または右側光源が運転者の視界に含まれる確率が高い。また、光機器としてその光源の輝度および／または色味を制御することで、さらに、車室内の部品による反射経路を経由せず直接的に運転手の目に光を到達させることができ、運転者に警告を伝達する機能を増すことができる。
【００８２】
これら光機器の配置としては、車内空間において既存の機器として設置可能であり、運転者の運転の支障になることなく安全性を高めることができる。
【００８３】
このことは上下方向についてもいえる。上下方向に略３０度ずつの視界範囲があるとすると、光機器の光源をその範囲内に含めることができる。
【００８４】
例えば、運転者は、上下方向に約３０度ずつの視界範囲があるとすると、上側６０度以上に視線を向けることがあると、水平方向に配置された光源からの光は視野外となる。その意味では、上側６０度以上にも光源を配置することで、上側９０度に視線を向けたとしても、光源を視界の範囲内に含めることができることになる。この場合には、フロントガラスの上方や、室内灯あるいは天井への配置も有効となる。
【００８５】
同様に、下側６０度以下に視線を向けると、水平方向に配置された光源が視界から外れるおそれがある。この点、下側６０度以下にも光源を配置することで、下側９０度に視線を向けたとしても、光源を視界の範囲内に含めることが出来る。この場合であっても、センターコンソール等を利用することができる。
【００８６】
図６は、本発明の一実施形態に係る脇見運転警報装置を説明するシステム構成図である。図６において、脇見運転警報装置は、装置全体の制御をつかさどるプログラム制御により処理部ＣＰＵ６１、プログラム、制御データ等を格納するメモリＭＭ６２、外部からの起動、初期設定や指示入力等を行うための操作部Ｋｅｙ６３、画像情報等あるいは視線情報等のやり取りをする入出力インタフェース部Ｉ／ＯＩＦ６４、左右のサイドミラー３２，３３に設置の光機器への指示制御を行うインタフェース部６５１、コンソール３１に設置の光機器への指示制御を行うインタフェース部６５２、バックミラー３４に設置の光機器への指示制御を行うインタフェース部６５３、室内灯３５に設置の光機器への指示制御を行うインタフェース部６５４、左右の窓枠３６に設置の光機器への指示制御を行うインタフェース部６５５、左右のドアフレーム３７に設置の光機器への指示制御を行うインタフェース部６５６、ナビゲーション装置３８に設置の光機器への指示制御を行うインタフェース部６５７、フロントガラス／左右のサイドガラス等に設置のバックライト等への指示制御を行うインタフェース部６５８等から構成される。
【００８７】
かかる脇見運転警報装置により、本発明の脇見運転における光による警報処理について、図７、図８、図９の制御フロー図により以下説明する。
【００８８】
図７は、本発明の一実施形態に係る脇見運転警報装置における警報機器の制御フロー図である。図７において、運転者の画像情報あるいは視線情報を受信し（Ｓ１１）、受信した視線情報をもとに、視線の状態を判断する（Ｓ１２）。
【００８９】
この視線状態の判断としては、先に説明したように、 画像情報に代えて前方方向に対して視線の角度情報、継続時間等の情報を得る場合には、脇見運転であるか否かの判定と、その脇見の方向、即ち、左右、上下方向の何れの脇見であるかを判断する。
【００９０】
また、運転者の画像情報２により、前方方向に対しての眼球中心位置と角膜中心位置の各情報を受信する場合には、この状態判断処理（Ｓ１２）にて、眼球、角膜の各中心軸と前方方向軸等により三角法を用いて算出し視線方向が脇見の角度範囲に入るか否か判定する。なお、視線情報に代えて頭部の傾向き情報であってもよい。
【００９１】
脇見か否かの判断結果により、左右方向か上下方向かにより分岐（Ｓ１３）する。前方方向に対し左右方向の脇見の場合には、左右の何れかの脇見により分岐（Ｓ１４）を経て、右方向の脇見である場合には、右側の光機器の光源に点灯／点滅等の指示制御を行う（Ｓ１５）。即ち、右サイドミラー３２、右ドアフレーム３７１、右窓枠３６１、右窓３９２等の光機器の制御を行う。
【００９２】
また、左方向の脇見である場合には、左側の光機器の光源に点灯／点滅等の指示制御を行う（Ｓ１６）。即ち、左サイドミラー３３、左ドアフレーム３７２、左窓枠３６２、左窓３９３等の光機器の制御を行う。
【００９３】
また、分岐（Ｓ１３）において、上下方向の脇見である場合には、上下の何れかの脇見により分岐（Ｓ１７）を経て、上方向の脇見である場合には、上側の光機器の光源に点灯／点滅等の指示制御を行う（Ｓ１８）。即ち、バックミラー３４等、光機器の制御を行う。
【００９４】
また、下方向の脇見である場合には、下側の光機器の光源に点灯／点滅等の指示制御を行う（Ｓ１９）。即ち、センターコンソール３１やナビゲーション装置３８等、光機器の制御を行う。
【００９５】
なお、図７においては、左右方向と上下方向との判断分岐により各光機器の制御を行うことを示したが、右上、右下、左上、左下等の３次元空間にまたがっての脇見もある。この場合は、上下、左右に分解して考えることができ、図示省略しているが、左右の処理制御と上下の処理制御を重複して繰り返すことで各光機器の制御ができる。
【００９６】
図８は、本発明の一実施形態に係る脇見運転警報装置における警報解除の制御フロー図である。図８においては、視線が前方方向の所定の範囲に復帰し、脇見運転でないと判断した場合には、各光機器の状態をリセット（復帰）させる。
【００９７】
即ち、脇見の状態であるとして判断処理し、所定の光機器の制御中において、脇見状態からの復帰監視を行う（Ｓ２１）。脇見状態でないと判断された場合、分岐（Ｓ２２）を経て、警報リセットの指示制御を行う（Ｓ２３）。なお、図８に示す復帰処理は、システムからの定期的な割り込み処理にて起動されてもよく、あるいは、先の図７における脇見情報の受信処理にて起動を受けてもよい。
【００９８】
図９は、本発明の一実施形態に係る脇見運転警報装置における警報システムの初期設定の制御フロー図である。この制御は、運転停止や装置自体の停止する場合等、脇見に関係しない状態となった場合に対する警報処理を意図している。なお、エンジンの駆動制御すなわちオン／オフ制御に連動させてもよい。
【００９９】
図９において、脇見運転警報装置の本体に対し、リセット指示入力の有無を監視（Ｓ３１）する。リセット指示があると、分岐（Ｓ３２）を介して、警報リセットの指示制御を行う（Ｓ３３）。即ち、各光機器への点灯／点滅等の制御が解除される。
【０１００】
上記説明の中で、図２、図４、図５に示した運転席として右ハンドル設置の例で説明したが、図示例に限定されるものではなく、左ハンドル設置の車両であっても同様である。
【０１０１】
また、脇見であるとの判定に、運転者の視線の方向と継続時間を用いたが、視線の方向に代えて運転者の頭の動きや顔の向きから判断するようにしてもよい。
【０１０２】
また、本発明では、運転者の視線方向に対し、その視野に入るように光をもって注意を促すようにしたものであるが、さらに、この光による警報に併せて音声や振動等、他の警報手段を組合せてもよい。
【０１０３】
以上説明した各実施形態は、本発明の理解のために例示されたものであり、本発明は、これら実施形態に限定されず、特許請求の範囲の記載によって定義される。また、本発明の技術思想から離れるものでない限り、特許請求の範囲に記載の構成と均等であるものも本発明の保護の範囲に含まれるものである。
【産業上の利用可能性】
【０１０４】
本発明によれば、脇見運転と判断された場合に、その脇見の視線の方向に対応した光機器を用いて光により警告することで、運転に支障になることなく確実に運転者に脇見運転である通知することを可能とし、また、光機器としては車内装置等を利用してあるいは併設して制御することができ、運転における安全性を高めるとともに経済的に実現ができるので、車両設備に適用して経済効果大とできる。
【符号の説明】
【０１０５】
１…脇見運転警報装置
１１…脇見検出部
１２…状態判断部
１３…警報通知部
２…画像情報
３１…コンソール
３２、３３…サイドミラー
３４…バックミラー
３５…室内灯
３６、３６１、３６２…窓枠
３７，３７１，３７２…ドアフレーム
３８…ナビゲーション装置
３９１…フロントガラス
３９２，３９３…窓
６１…処理部
６２…メモリ
６３…操作部
６４…入出力インタフェース部
６５１〜６５８…インタフェース部
ａ１…水平方向軸
ａ２…前方方向軸
ａ３…右基準軸
ａ４…左基準軸
ａ５…垂直方向軸
ａ６、ａ７…上下の基準軸
ｂ１、ｂ２、ｂ３、ｂ４、ｂ５、ｂ６、ｂ７、ｂ８…角度
【図１】
2018190342.tif 000003
【図２】
2018190342.tif 000004
【図３】
2018190342.tif 000005
【図４】
2018190342.tif 000006
【図５】
2018190342.tif 000007
【図６】
2018190342.tif 000008
【図７】
2018190342.tif 000009
【図８】
2018190342.tif 000010
【図９】
2018190342.tif 000011