(57)【要約】【課題】乗員の副次行動など、従来とは異なる指標に基づいて覚醒度（眠気）を検知する乗員の状態判定システムと、この検知結果に基づいて警告を発生させる警告装置する装置を提供する。【解決手段】乗員を撮影するカメラ５と、カメラ５の撮影データに基づいて副次行動の動作程度を検知し、覚醒度を判定する判定ユニット６とを有する乗員の状態判定システム。さらにステアリングホイール１の把持状況を検知する把持センサ２，３と、センサ２，３の検知データに基づいて乗員の覚醒度を判定する判定ユニット６とを有する乗員の状態判定システム。判定ユニット６の判定結果に基づいて警告器７を作動させる。【選択図】図２
2019109677.tif 000002
【特許請求の範囲】
【請求項１】
乗員を撮影する撮影手段と、撮影手段の撮影データに基づいて副次行動の動作程度を検知し、覚醒度を判定する判定手段と
を有する乗員の状態判定システム。
【請求項２】
前記副次行動は、乗員の口の動き頻度、首振り頻度、頭又は頭を含む上半身の動きの激しさの少なくとも１つである請求項１に記載の乗員の状態判定システム。
【請求項３】
前記判定手段は、乗員の手が顔周辺に位置していることに基づいて覚醒度の判定を行うことを特徴とする請求項１に記載の乗員の状態判定システム。
【請求項４】
前記判定手段は、乗員の顔が基準位置外に位置することに基づいて覚醒度の判定を行うことを特徴とする請求項１に記載の乗員の状態判定システム。
【請求項５】
ステアリングホイールの把持状況の検知手段をさらに備え、
前記判定手段は、前記撮影データに基づく副次行動の動作程度と前記把持状況とに基づいて、乗員の覚醒度を判定することを特徴とする請求項１〜４のいずれかの乗員の状態判定システム。
【請求項６】
ステアリングホイールの把持状況の検知手段と、
この検知手段の検知データに基づいて乗員の覚醒度を判定する判定手段と
を有する乗員の状態判定システム。
【請求項７】
前記検知データは、所定頻度以上のステアリングホイールの握離頻度である請求項５又は６に記載の乗員の状態判定システム。
【請求項８】
前記検知データは、所定時間以上のステアリングホイールからの手の離反時間である請求項５又は６に記載の乗員の状態判定システム。
【請求項９】
請求項１〜８のいずれかに記載の乗員の状態判定システムと、この乗員の状態判定システムの判定結果に基づいて警告を発生させる警告手段とを有する警告装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、自動車等の運転者等の乗員の覚醒度を検知する乗員の状態判定システムと、その判定結果に基づいて警告を与える警告装置とに関する。
【背景技術】
【０００２】
自動車の運転者の覚醒度（例えば覚醒度が低下した状態である眠気）を検知するための装置として、運転者の心拍センサを利用するもの（特許文献１〜３）や、運転者の顔面のカメラ撮像データから求められる白目面積や瞳孔面積、まばたき頻度に基づくもの（特許文献４〜６）などがある。
【０００３】
さらに、運転者の意識レベル低下を検出するには、PERCLOSという手法もある。PERCLOS（Percent  of  the  time  eyelids  are  closed）とは、アメリカ道路交通安全局に認可された、運転者の疲労度を測定する手段で、目を閉じている時間割合を表すものである。(D.F.Dinges,M.Mallis,G.Maislin,and  J.W.Powell.Evaluationof  techniques  for  ocular  measurement  as  an  index  of  fatigue  and  the  basis  foralertness  management.Department  of  Transportation  Highway  Safety  publication808  762,April,1998.)
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平７−３２７９４１号公報
【特許文献２】特開平８−１５０１２８号公報
【特許文献３】特開平８−１９６６３６号公報
【特許文献４】特開平１１−１７５８９５号公報
【特許文献５】特開２０１５−５３２７４３号公報
【特許文献６】特開２００８−２４６０１３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明は、乗員の副次行動など、従来とは異なる指標に基づいて覚醒度（眠気）を検知する乗員の状態判定システムと、この判定システムの判定結果に基づいて警告を発生させる警告装置する装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の一態様の乗員の状態判定システムは、乗員を撮影する撮影手段と、撮影手段の撮影データに基づいて副次行動の動作程度を検知し、覚醒度を判定する判定手段とを有する。
【０００７】
本発明の一態様では、前記副次行動は、乗員の口の動き頻度、首振り頻度、頭又は頭を含む上半身の動きの激しさの少なくとも１つである。
【０００８】
本発明の一態様では、前記判定手段は、乗員の手が顔周辺に位置していることに基づいて覚醒度の判定を行う。
【０００９】
本発明の一態様では、前記判定手段は、乗員の顔が基準位置外に位置することに基づいて覚醒度の判定を行う。
【００１０】
本発明の一態様の乗員の状態判定システムは、ステアリングホイールの把持状況の検知手段をさらに備え、前記判定手段は、前記撮影データに基づく副次行動の動作程度と前記把持状況とに基づいて、乗員の覚醒度を判定する。
【００１１】
本発明の一態様の乗員の状態判定システムは、ステアリングホイールの把持状況の検知手段と、この検知手段の検知データに基づいて乗員の覚醒度を判定する判定手段とを有する。
【００１２】
本発明の一態様では、前記検知データは、所定頻度以上のステアリングホイールの握離頻度である。本発明の一態様では、前記検知データは、所定時間以上のステアリングホイールからの手の離反時間である。
【００１３】
本発明の一態様の警告装置は、本発明の乗員の状態判定システムと、この乗員の状態判定システムの判定結果に基づいて警告を発生させる警告手段とを有する。
【発明の効果】
【００１４】
本発明によると、副次行動やステアリングホイールの把持状況など従来とは異なる指標を利用して乗員覚醒度を判定する。
【００１５】
この副次行動やステアリングホイール保持状況に基づく覚醒度検知と、他の覚醒度検知手段とを併用することにより、精度のよい覚醒度検知が可能となる。
【図面の簡単な説明】
【００１６】
【図１】実施の形態を示す車内の説明図である。
【図２】実施の形態を示すブロック図である。
【図３】実施の形態を示すフローチャートである。
【発明を実施するための形態】
【００１７】
以下、図１〜３を参照して実施の形態について説明する。
【００１８】
図１の通り、ステアリングホイール１の左側部分に運転者の左手による把持を検知するための左手用把持センサ２が設けられ、右側部分に右手用把持センサ３が設けられている。また、ルームミラー４はハーフミラーとなっており、その背後側に、運転者の顔又は頭を含む上半身を撮影するためのＣＣＤカメラ５が設けられている。ＣＣＤカメラ５の取付位置はこれに限定されない。
【００１９】
図２の通り、各センサ２，３及びカメラ５の検知データはそれぞれ覚醒度判定ユニット６に入力されており、該覚醒度判定ユニット６から警告器７に動作信号が送られる。
【００２０】
この覚醒度判定ユニット６では、図３の通り、まずセンサ２，３の検知信号に基づいて、運転者がステアリングホイール１を片手のみで把持しているかどうかを判断する。片手把持の場合、把持していない手は休んでいるか何か作業をしている可能性が考えられる。
【００２１】
そこで、次に、カメラ５の撮影データに基づいて、運転者の顔認識状態を確認する。顔認識状態が不安定時（顔の一部または全体が認識されない）または手が顔周辺に位置していることが検知された場合に副次行動が行われていると判断し、副次行動推定値をカウントする（例えば１回の副次行動の度にメモリに１を加算する。）。例えば、運転者がステアリングホイール１を片手のみで把持し、もう一方の手で顔を擦るなどの副次行動をとると、顔の一部が認識されなくなるので、カウントアップする。
【００２２】
ある一定時間内に副次行動推定カウントが閾値以上となったときに、覚醒度が低下している、即ちドライバーが眠気を感じていると判断し、警告器７を作動させ、ドライバーへの注意喚起を行う。例えば、ステアリングホイールに設けたバイブレータを作動させたり、警告音を発生させたり、空調（例えば、顔面に向けて冷風を吹き出す）や覚醒性香り成分の放散で覚醒を促す。
【００２３】
図２では、覚醒度判定ユニット６はセンサ２，３とカメラ５からのデータによって判定を行っているが、さらに、従来の技術である、ＰＥＲＣＬＯＳ、連続運転時間、運転者の閉眼度やまばたき回数や割合、ステアリングホイールの操舵パターン検知、ふらつき検知を組み合わせることによって、更に精度良く覚醒低下状態を検出することができる。
【００２４】
本発明では、上記の手の把持検知を行うためのセンサ２，３の検知データに基づいて副次行動を検知し、覚醒度低下を判定してもよい。
【００２５】
例えば、覚醒度判定ユニットによって、ある一定時間の間に運転者がステアリングホイールを握った回数及び時間を記録し、一定時間中にステアリングホイールを握ったり離したりする握離回数や手を離している離反時間が閾値を超えた場合に、副次行動が頻繁に行われていると判定し、覚醒度低下状態と判定する。
【００２６】
また、カメラ５の検知データに基づいて副次行動を検知し、覚醒度低下を判定してもよい。例えば、カメラ５の検知データに基づいて、運転者の顔の向き、目の瞬きを検出する。そして、運転中の運転者の顔向き移動や、顔向き検知ロスト（顔が検知されない状態）が一定時間中に頻繁に発生した場合に、副次行動が行われていると判定し、覚醒度低下状態と判定する。
【００２７】
これらの場合もさらに、従来の技術である、ＰＥＲＣＬＯＳ、連続運転時間・運転者の閉眼度やまばたき回数や割合、ステアリングホイールの操舵パターン検知、ふらつき検知を組み合わせることによって、更に精度良く覚醒低下状態を検出することができる。
【００２８】
検知する副次行動としては、例えば口を頻繁に動かす行動、首を振る行動（首を前後左右に傾けたり、ひねったりする行動）、頭又は頭を含めた上半身を激しく（例えば所定速度以上で）動かす行動であってもよい。
【００２９】
上記説明は本発明の一例であり、本発明は上記以外の形態とされてもよい。
【符号の説明】
【００３０】
１  ステアリングホイール
２  左手用把持センサ
３  右手用把持センサ
４  ルームミラー
５  ＣＣＤカメラ
【図１】
2019109677.tif 000003
【図２】
2019109677.tif 000004
【図３】
2019109677.tif 000005