(57)【要約】【課題】ユーザによる確認が必要な対象の確認をユーザに適切に促す。【解決手段】  確認状態検出部１０４は、顔方向検出部１０２により検出されたユーザの顔の向き、または、視線方向検出部１０３により検出されたユーザの視線の向きに基づいて、要確認対象特定部１０１により特定されたユーザによる確認が必要な要確認対象をユーザが確認したか否かを検出する。通知制御部１０５は、ユーザにより要確認対象が確認されていない場合、要確認対象の確認が必要な状況を通知し、ユーザにより要確認対象が確認された場合、要確認対象の確認が必要な状況の通知を制限するように通知部を制御する。本発明は、自動車の速度を監視する監視装置に適用することができる。【選択図】図３
2007094618.tif 000002
【特許請求の範囲】
【請求項１】
ユーザの確認が必要な対象である要確認対象を特定する特定手段と、
前記ユーザの顔または視線の向きを検出する方向検出手段と、
検出された前記顔または視線の向きに基づいて、前記ユーザが前記要確認対象を確認したか否かを検出する確認検出手段と、
前記ユーザが前記要確認対象を確認したことが検出されていない場合、前記要確認対象の確認が必要な状況を通知し、前記ユーザが前記要確認対象を確認したことが検出された場合、前記要確認対象の確認が必要な状況の通知を制限するように前記ユーザへの通知を制御する通知制御手段と
を含む通知制御装置。
【請求項２】
前記確認検出手段は、前記ユーザが前記要確認対象の方向を見る時間または回数に基づいて、前記ユーザが前記要確認対象を確認したか否かを検出する
請求項１に記載の通知制御装置。
【請求項３】
前記通知制御手段は、通知の中止、停止もしくは遅延、通知頻度の低減、または、通知方法もしくは通知内容の変更により前記ユーザへの通知を制限する
請求項１に記載の通知制御装置。
【請求項４】
前記特定手段は、前記ユーザが運転する車の速度が適正速度を超過している場合、前記車の速度計である前記要確認対象を特定し、
前記確認検出手段は、前記ユーザが前記速度計を確認したか否かを検出し、
前記通知制御手段は、前記ユーザが前記速度計を確認したことが検出されていない場合、前記車の速度が適正速度を超過している状況を通知し、前記ユーザが前記速度計を確認したことが検出された場合、前記車の速度が適正速度を超過している状況の通知を制限するように前記ユーザへの通知を制御する
請求項１に記載の通知制御装置。
【請求項５】
ユーザの確認が必要な対象である要確認対象を特定し、
前記ユーザの顔または視線の向きを検出し、
検出された前記顔または視線の向きに基づいて、前記ユーザが前記要確認対象を確認したか否かを検出し、
前記ユーザが前記要確認対象を確認したことが検出されていない場合、前記要確認対象の確認が必要な状況を通知し、前記ユーザが前記要確認対象を確認したことが検出された場合、前記要確認対象の確認が必要な状況の通知を制限するように前記ユーザへの通知を制御する
ステップを含む通知制御方法。
【請求項６】
ユーザの確認が必要な対象である要確認対象を特定する特定ステップと、
前記ユーザの顔または視線の向きを検出する方向検出ステップと、
検出された前記顔または視線の向きに基づいて、前記ユーザが前記要確認対象を確認したか否かを検出する確認検出ステップと、
前記ユーザが前記要確認対象を確認したことが検出されていない場合、前記要確認対象の確認が必要な状況を通知し、前記ユーザが前記要確認対象を確認したことが検出された場合、前記要確認対象の確認が必要な状況の通知を制限するように前記ユーザへの通知を制御する通知制御ステップと
を含む処理をコンピュータに実行させるプログラム。
【請求項７】
請求項６に記載のプログラムが記録されている記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、通知制御装置および方法、記録媒体、並びに、プログラムに関し、特に、ユーザによる確認が必要な対象の確認をユーザに適切に促すことができるようにした通知制御装置および方法、記録媒体、並びに、プログラムに関する。
【背景技術】
【０００２】
従来、車両の前方の道路のカーブの半径を検出し、カーブに進入する際の自動車の速度に応じて、警報を発生することが提案されている（例えば、特許文献１参照）。
【０００３】
また、従来、自車両の周辺状況と、自車両の位置や速度を考慮して、運転者の注意力の最適な配分を算出し、最適な配分と運転者の視線や顔の動きから検出された実際の注意力の配分とを比較して、注意力が不足している場合、注意力の配分を最適にするように通知することが提案されている（例えば、特許文献２参照）
【０００４】
【特許文献１】特開平８−１９４８８９号公報
【特許文献２】特開２００４−１７８３６７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１に記載の発明では、運転者がスピードメータを確認して、車速を認識していても、車速に応じて、無条件に警報が発せ続けられるため、運転者に煩わしさを感じさせてしまう場合がある。
【０００６】
また、特許文献２に記載の発明では、自動車の運転中には様々な変動要因があり、また適切な注意力の配分には個人差があるため、最適な注意力の配分を算出することは困難である。また、不必要に注意が促されたり、必要な注意が促されないなど、必ずしも適切に運転者に注意を促すことができるとは限らない。さらに、注意力の配分を検出するために必ず所定の時間を要してしまうため、緊急性を要する事態を通知する用途には適さない。
【０００７】
本発明は、このような状況に鑑みてなされたものであり、ユーザによる確認が必要な対象の確認をユーザに適切に促すようにするものである。
【課題を解決するための手段】
【０００８】
本発明の一側面の通知制御装置は、ユーザの確認が必要な対象である要確認対象を特定する特定手段と、前記ユーザの顔または視線の向きを検出する方向検出手段と、検出された前記顔または視線の向きに基づいて、前記ユーザが前記要確認対象を確認したか否かを検出する確認検出手段と、前記ユーザが前記要確認対象を確認したことが検出されていない場合、前記要確認対象の確認が必要な状況を通知し、前記ユーザが前記要確認対象を確認したことが検出された場合、前記要確認対象の確認が必要な状況の通知を制限するように前記ユーザへの通知を制御する通知制御手段とを含む。
【０００９】
本発明の一側面の通知制御装置においては、ユーザの確認が必要な対象である要確認対象が特定され、前記ユーザの顔または視線の向きを検出する方向検出手段と、検出された前記顔または視線の向きに基づいて、前記ユーザが前記要確認対象を確認したか否かが検出され、確認検出手段と、前記ユーザが前記要確認対象を確認したことが検出されていない場合、前記要確認対象の確認が必要な状況を通知し、前記ユーザが前記要確認対象を確認したことが検出された場合、前記要確認対象の確認が必要な状況の通知を制限するように前記ユーザへの通知が制御される。
【００１０】
従って、ユーザによる確認が必要な対象をユーザが確認したか否かを検出することができる。また、ユーザによる確認が必要な対象の確認をユーザに適切に促すようにすることができる。
【００１１】
この方向検出手段、確認検出手段、通知制御手段は、例えば、CPUにより構成される。また、この方向検出手段は、例えば、顔または視線の向きを検出する専用の装置により構成するようにすることもできる。
【００１２】
ユーザへの通知は、例えば、メッセージの表示または音声による出力、アラーム音の鳴動、LEDまたはランプなどの点灯または点滅などにより行われる。
【００１３】
前記確認検出手段には、前記ユーザが前記要確認対象の方向を見る時間または回数に基づいて、前記ユーザが前記要確認対象を確認したか否かを検出させるようにすることができる。
【００１４】
前記通知手段には、通知の中止、停止もしくは遅延、通知頻度の低減、または、通知方法もしくは通知内容の変更により前記ユーザへの通知を制限させるようにすることができる。
【００１５】
前記特定手段には、前記ユーザが運転する車の速度が適正速度を超過している場合、前記車の速度計である前記要確認対象を特定させ、前記確認検出手段には、前記ユーザが前記速度計を確認したか否かを検出させ、前記通知手段には、前記ユーザが前記速度計を確認したことが検出されていない場合、前記車の速度が適正速度を超過している状況を通知し、前記ユーザが前記速度計を確認したことが検出された場合、前記車の速度が適正速度を超過している状況の通知を制限するように前記ユーザへの通知を制御させるようにすることができる。
【００１６】
本発明の一側面の通知制御方法またはプログラムは、ユーザの確認が必要な対象である要確認対象を特定する特定ステップと、前記ユーザの顔または視線の向きを検出する方向検出ステップと、検出された前記顔または視線の向きに基づいて、前記ユーザが前記要確認対象を確認したか否かを検出する確認検出ステップと、前記ユーザが前記要確認対象を確認したことが検出されていない場合、前記要確認対象の確認が必要な状況を通知し、前記ユーザが前記要確認対象を確認したことが検出された場合、前記要確認対象の確認が必要な状況の通知を制限するように前記ユーザへの通知を制御する通知制御ステップとを含む。
【００１７】
本発明の一側面の通知制御方法またはプログラムにおいては、ユーザの確認が必要な対象である要確認対象が特定され、前記ユーザの顔または視線の向きを検出する方向検出手段と、検出された前記顔または視線の向きに基づいて、前記ユーザが前記要確認対象を確認したか否かが検出され、確認検出手段と、前記ユーザが前記要確認対象を確認したことが検出されていない場合、前記要確認対象の確認が必要な状況を通知し、前記ユーザが前記要確認対象を確認したことが検出された場合、前記要確認対象の確認が必要な状況の通知を制限するように前記ユーザへの通知が制御される。
【００１８】
従って、ユーザによる確認が必要な対象をユーザが確認したか否かを検出することができる。また、ユーザによる確認が必要な対象の確認をユーザに適切に促すようにすることができる。
【００１９】
この特定ステップは、例えば、ユーザの確認が必要な対象である要確認対象をＣＰＵにより特定する特定ステップにより構成され、この方向検出ステップは、例えば、前記ユーザの顔または視線の向きをＣＰＵにより検出する方向検出ステップにより構成され、この通知制御ステップは、例えば、前記ユーザが前記要確認対象を確認したことが検出されていない場合、前記要確認対象の確認が必要な状況を通知し、前記ユーザが前記要確認対象を確認したことが検出された場合、前記要確認対象の確認が必要な状況の通知を制限するようにＣＰＵにより前記ユーザへの通知を制御する通知制御ステップにより構成される。
【発明の効果】
【００２０】
以上のように、本発明の一側面によれば、ユーザによる確認が必要な対象をユーザが確認したか否かを検出することができる。また、本発明の一側面によれば、ユーザによる確認が必要な対象の確認をユーザに適切に促すようにすることができる。
【発明を実施するための最良の形態】
【００２１】
以下、図を参照して、本発明の実施の形態について説明する。
【００２２】
図１は、本発明を適用した監視装置の一実施の形態を示すブロック図である。監視装置１は、カメラ１１−１乃至１１−ｎ、画像入力部１２、メモリ１３、センサ部１４、情報入力部１５、制御部１６、および、通知部１７を含むように構成される。
【００２３】
カメラ１１−１乃至１１−ｎは、例えば、CCD（Charge Coupled Device）撮像素子、CMOS（Complementary Metal Oxide Semiconductor）撮像素子、または、対数変換型撮像素子（例えば、HDRC（High Dynamic Range CMOS（Complementary Metal Oxide Semiconductor））（登録商標））などを用いたカメラとされ、撮影した画像データを画像入力部１２に出力する。カメラ１１−１乃至１１−ｎのうち少なくとも１台は、ユーザの顔または視線の向きを検出するためにユーザの顔を撮影するように設置される。また、カメラ１１−１乃至１１−ｎは、ユーザが危険やトラブルなどを回避したり、必要な情報を取得したりするために撮影する必要がある場所を撮影できる位置に設置される。
【００２４】
なお、以下、カメラ１１−１乃至１１−ｎを個々に区別する必要がない場合、単にカメラ１１と称する。
【００２５】
画像入力部１２は、カメラ１１から出力される画像データをメモリ１３に記憶させる。
【００２６】
センサ部１４は、各種のセンサにより構成され、必要に応じて設けられる。センサ部１４を構成する各種のセンサは、検出結果を示すセンサデータを制御部１６に供給する。
【００２７】
例えば、監視装置１が自動車に設けられる場合、明るさを検出する照度センサ、温度を検出する温度センサ、湿度を検出する湿度センサ、風速を検出する風速センサ、気圧を検出する気圧センサ、降雨量を検出する降雨量センサなど、自動車の周囲の気候や環境を検出するセンサ、または、自動車の傾きや振動を検出する加速度センサ、自動車の速度を検出する速度センサ、自動車の周囲のものの有無または状態を検出する物体センサ、自動車の周囲のものとの距離を検出する距離センサなど、自動車または自動車の周囲のものの有無、状態、位置などを検出するセンサなどがセンサ部１４に設けられる。
【００２８】
情報入力部１５は、カメラ１１により撮影される画像およびセンサ部１４により取得されるセンサデータから取得できる情報以外の情報を外部から取得し、取得した情報（以下、外部情報とも称する）を制御部１６に供給する。
【００２９】
例えば、監視装置１が自動車に設けられる場合、自動車の速度、エンジンの回転数、シフトポジション、燃料の残量、各種部品の異常など、自動車の制御装置から出力される自動車の状態を示す情報、事故、故障車もしくは火災などの発生、通行もしくは車線規制、渋滞情報、緊急通知などVICS（Vehicle Information and Communication System）などを利用して取得される道路交通情報、または、ナビゲーションシステムなどを利用して取得される地図情報などが情報入力部１５に入力される。
【００３０】
制御部１６は、メモリ１３に記憶されている画像データを取得する。制御部１６は、画像データ、センサデータ、または、外部情報に基づいて、危険やトラブルなどを回避したり、必要な情報を取得するために、ユーザによる確認が必要な対象である要確認対象を特定する。
【００３１】
図２は、監視装置１が設けられた自動車を運転者５１が運転している場合に特定される要確認対象の例を示す図である。なお、図内の左方向が、自動車の進行方向（前方方向）とされる。
【００３２】
例えば、画像データまたはセンサデータなどに基づいて、自動車の進行方向にオブジェクト５２（例えば、人物、障害物など）が検出された場合、オブジェクト５２が要確認対象に特定される。また、例えば、画像データまたはセンサデータなどに基づいて、自動車の後方に、他の自動車が急接近していることが検出された場合、後方の確認が必要となるため、左ドアミラー５４、右ドアミラー５５、または、ルームミラー５６が要確認対象に特定される。
【００３３】
さらに、例えば、自動車の制御装置などから入力される外部情報に基づいて、自動車のバックギアが入ったことが検出された場合、自動車を安全に後退させるために後方を確認する必要があるため、ルームミラー５６、図示せぬリアガラス、後方モニタ装置などが要確認対象に特定される。また、この場合、画像データまたはセンサデータなどに基づいて、自動車の後方にオブジェクト５３が検出されたとき、オブジェクト５３が要確認対象に特定される。さらに、例えば、自動車の始動時にバックギアが入っている場合、運転者の意図に反して自動車が後退することを防止するために、シフトポジションが表示されるコンビネーションメータ５７が要確認対象に特定される。
【００３４】
また、例えば、外部情報に基づいて、自動車が左または右に車線変更しようとしていることが検出された場合、安全に車線変更するために確認が必要な左ドアミラー５４または右ドアミラー５５が要確認対象に特定される。さらに、例えば、外部情報に基づいて、自動車の速度が危険な領域に突入していることが検出された場合、スピードメータを含むコンビネーションメータ５７が要確認対象に特定される。また、例えば、外部情報に基づいて、自動車の燃料の残量が所定の量以下になっていることが検出された場合、燃料計を含むコンビネーションメータ５７が要確認対象に特定される。さらに、例えば、外部情報に基づいて、故障やその予兆など車両の異常が検出された場合、車両の異常を通知する異常表示部５９が要確認対象に特定される。
【００３５】
また、VICSなどを利用して、事故、故障車または火災などの発生、通行または車線規制、渋滞情報、緊急通知などの情報が取得された場合、取得した情報を表示する装置（例えば、カーナビゲーションシステム５８）が要確認対象に特定される。
【００３６】
また、制御部１６は、図３を参照して後述するように、スピーカ、アラームなどの音声出力装置、LCD（Liquid Crystal Display）などの表示装置、または、LED（Light Emitting Diode）、ランプなどの発光装置などにより構成される通知部１７を制御して、要確認対象の確認が必要な状況を通知し、ユーザに要確認対象を確認するように促す。また、例えば、監視装置１が自動車に設けられる場合、制御部１６が、ステアリングホイール（ハンドル）の動きを重くするようにパワーステアリングを制御させたり、ごく短時間ブレーキを作動させたりする指示を示す情報を自動車の制御装置に出力し、自動車本体の動きを制御させることにより、運転者に要確認対象の確認が必要な状況を通知するようにしてもよい。
【００３７】
さらに、制御部１６は、カメラ１１により撮影された画像データに基づいて、ユーザの顔または視線の向きを検出し、ユーザが要確認対象を確認したか否かを検出する。制御部１６は、ユーザが要確認対象を確認したことを検出した場合、通知部１７による要確認対象の確認が必要な状況の通知を制限させる。
【００３８】
図３は、制御部１６が所定のプログラムを実行することにより実現される機能の構成の例を示すブロック図である。制御部１６がプログラムを実行することにより、要確認対象特定部１０１、顔方向検出部１０２、視線方向検出部１０３、確認状態検出部１０４、および、通知制御部１０５を含む機能が実現される。
【００３９】
要確認対象特定部１０１は、カメラ１１により撮影された画像データをメモリ１３から取得する。また、要確認対象特定部１０１は、センサ部１４から出力される各種のセンサデータを取得する。さらに、要確認対象特定部１０１は、外部から入力される各種の外部情報を、情報入力部１５を介して取得する。要確認対象特定部１０１は、画像データ、センサデータ、または、外部情報に基づいて、ユーザの確認が必要な対象である要確認対象を特定する。要確認対象特定部１０１は、特定した要確認対象の位置、種類など要確認対象に関する情報を、顔方向検出部１０２、視線方向検出部１０３、確認状態検出部１０４および通知制御部１０５に供給する。
【００４０】
また、要確認対象特定部１０１は、画像データ、センサデータ、または、外部情報に基づいて、特定した要確認対象の確認が不要になったことを検出した場合、要確認対象の確認が不要になったことを示す情報を、顔方向検出部１０２、視線方向検出部１０３、確認状態検出部１０４および通知制御部１０５に供給する。
【００４１】
顔方向検出部１０２は、カメラ１１により撮影された画像データのうち、ユーザの顔が撮影された画像データをメモリ１３から取得する。顔方向検出部１０２は、取得した画像データに基づいて、ユーザの顔の向きを検出する。なお、顔方向検出部１０２が顔の向きを検出する手法は、特定の手法に限定されるものではなく、顔の向きをより迅速かつ正確に検出できる手法が望ましい。顔方向検出部１０２は、検出したユーザの顔の向きを示す情報を確認状態検出部１０４に供給する。
【００４２】
視線方向検出部１０３は、カメラ１１により撮影された画像データのうち、ユーザの顔が撮影された画像データをメモリ１３から取得する。視線方向検出部１０３は、取得した画像データに基づいて、ユーザの視線の向きを検出する。なお、視線方向検出部１０３が視線の向きを検出する手法は、特定の手法に限定されるものではなく、視線の向きをより迅速かつ正確に検出できる手法が望ましい。視線方向検出部１０３は、検出したユーザの視線の向きを示す情報を確認状態検出部１０４に供給する。
【００４３】
なお、顔方向検出部１０２または視線方向検出部１０３のどちらか一方を監視装置１に設けるようにしてもよい。この場合、視線方向検出部１０３を設けて、ユーザの視線の向きを検出するようにした方が、ユーザが要確認対象を確認したか否かをより正確に検出することができる。
【００４４】
また、予め要確認対象に特定される可能性がある対象が分かっており、かつ、ユーザが各対象を注視する場合の顔または視線の向きがほぼ一定である場合、ユーザがカメラ１１を直視した場合の画像データの特徴、および、ユーザが各対象を注視したときの画像データの特徴（例えば、ユーザの顔または顔の各部の位置や形状など）を示す情報を予め登録しておき、その情報に基づいて、要確認対象を確認したか否かを検出するようにしてもよい。そうすることにより、顔または視線の向きのいずれを用いるようにした場合でも、ユーザが要確認対象を確認したか否かを検出する精度が向上する。
【００４５】
さらに、人の顔を撮影した画像データに基づいて顔または視線の向きを検出する場合、カメラのレンズを直視する場合の顔または視線の向きが最も高い精度で検出される。従って、予め要確認対象に特定される可能性がある対象が分かっており、かつ、ユーザが各対象を注視する場合の顔または視線の向きがほぼ一定である場合、各対象をユーザが注視したときに、カメラ１１のレンズがユーザの視線の位置により近くなるように（カメラ１１のレンズをユーザが直視した状態により近くなるように）カメラ１１を設置するようにしてもよい。こうすることにより、ユーザが各対象に顔または視線を向けたことがより精度高く検出されるようになり、ユーザが要確認対象を確認したか否かを検出する精度が向上する。
【００４６】
例えば、図２を参照して上述した例において、左ドアミラー５４、右ドアミラー５５、ルームミラー５６、コンビネーションメータ５７、カーナビゲーションシステム５８、および、異常検出部５９が予め要確認対象に特定される可能性があることが分かっており、運転者は運転中ほぼ同じ状態で各対象を注視するため、各対象を注視する場合の顔または視線の向きはほぼ一定である。従って、運転者が運転席から左ドアミラー５４、右ドアミラー５５、ルームミラー５６、コンビネーションメータ５７、カーナビゲーションシステム５８、または、異常検出部５９を注視した場合に、カメラ１１のレンズがユーザの視線の位置により近くなるようにカメラ１１をそれぞれ設置することにより、ユーザが要確認対象である左ドアミラー５４、右ドアミラー５５、ルームミラー５６、コンビネーションメータ５７、カーナビゲーションシステム５８、または、異常検出部５９を確認したか否かを検出する精度が向上する。
【００４７】
確認状態検出部１０４は、ユーザの顔または視線の向きを示す情報に基づいて、要確認対象特定部１０１により特定された要確認対象をユーザが確認したか否かを検出する。確認状態検出部１０４は、検出結果を示す情報を、要確認対象特定部１０１、顔方向検出部１０２、視線方向検出部１０３または通知制御部１０５に供給する。
【００４８】
通知制御部１０５は、通知部１７を制御して、要確認対象の確認が必要な状況をユーザに通知し、要確認対象を確認するように促す。また、通知制御部１０５は、ユーザにより要確認対象が確認されたことが確認状態検出部１０４により検出された場合、通知部１７による要確認対象の確認が必要な状況の通知を制限する。
【００４９】
次に、図４のフローチャートを参照して、監視装置１により実行される監視処理を説明する。なお、この処理は、例えば、監視装置１の図示せぬ入力部を介して、監視処理の開始の指令がユーザにより制御部１６に入力されたとき開始される。
【００５０】
ステップＳ１において、要確認対象特定部１０１は、ユーザの確認が必要な対象を特定する。具体的には、要確認対象特定部１０１は、メモリ１３から取得した画像データ、センサ部１４から供給されるセンサデータ、または、情報入力部１５を介して、外部から入力される外部情報に基づいて、ユーザの確認が必要な対象、すなわち、要確認対象を特定する。
【００５１】
ステップＳ２において、要確認対象特定部１０１は、ステップＳ１の処理の結果に基づいて、要確認対象が存在するか否かを判定する。要確認対象が存在すると判定された場合、処理はステップＳ３に進む。
【００５２】
ステップＳ３において、顔方向検出部１０２または視線方向検出部１０３は、顔または視線の向きの検出を開始する。具体的には、要確認対象特定部１０１は、特定した要確認対象の位置、種類など特定した要確認対象に関する情報を、顔方向検出部１０２、視線方向検出部１０３、確認状態検出部１０４および通知制御部１０５に供給する。
【００５３】
監視装置１に顔方向検出部１０２が設けられている場合、顔方向検出部１０２は、メモリ１３に記憶されているユーザの顔を撮影した画像データに基づいて、ユーザの顔の向きの検出を開始する。顔方向検出部１０２は、ユーザの顔の向きを示す情報の確認状態検出部１０４への供給を開始する。
【００５４】
また、監視装置１に視線方向検出部１０３が設けられている場合、視線方向検出部１０３は、メモリ１３に記憶されているユーザの顔を撮影した画像データに基づいて、ユーザの視線の向きの検出を開始する。視線方向検出部１０３は、ユーザの視線の向きを示す情報の確認状態検出部１０４への供給を開始する。
【００５５】
ステップＳ４において、確認状態検出部１０４は、ユーザが要確認対象を確認したか否かを判定する。具体的には、確認状態検出部１０４は、顔方向検出部１０２により検出されたユーザの顔の向き、または、視線方向検出部１０３により検出されたユーザの視線の向きに基づいて、ユーザが要確認対象を所定の時間以上見たか否かを検出する。確認状態検出部１０４は、ユーザがまだ要確対象を所定の時間以上見たことを検出していない場合、ユーザが要確認対象を確認していないと判定し、処理はステップＳ５に進む。
【００５６】
なお、確認状態検出部１０４は、要確認対象を確認の有無の判定に用いる確認時間（ユーザが要確認対象を見る時間）を要確認対象の位置や種類などに応じて適切な時間に設定する。また、例えば、天候や周囲の明るさなどに応じて、確認時間を変更するようにしてもよい。さらに、例えば、ユーザが要確認対象を見る状態の違いに応じて（例えば、顔または視線を動かしながら見たり、顔または視線をほぼ固定したまま見たり、視線のほぼ中心に要確認対象が位置する状態で見たり、視線の中心から外れた位置に要確認対象が位置する状態で見たりするなどの違いに応じて）、確認時間を変更するようにしてもよい。
【００５７】
ステップＳ５において、確認状態検出部１０４は、要確認対象が特定されてから所定の時間が経過したか否かを判定する。要確認対象が特定されてから所定の時間が経過していないと判定された場合、処理はステップＳ４に戻り、ステップＳ４において、ユーザが要確認対象を確認したと判定されるか、ステップＳ５において、要確認対象が特定されてから所定の時間が経過したと判定されるまで、ステップＳ４およびＳ５の処理が繰返し実行される。
【００５８】
ステップＳ５において、要確認対象が特定されてから所定の時間が経過したと判定された場合、すなわち、要確認対象がユーザにより確認されないまま所定の時間が経過した場合、処理はステップＳ６に進む。
【００５９】
なお、確認状態検出部１０４は、要確認対象が特定されてから、後述するステップＳ６において通知を開始するまでの時間を、確認の緊急度、要確認対象の位置や種類などに応じて適切な時間に設定する。
【００６０】
ステップＳ６において、通知部１７は、通知を開始する。具体的には、確認状態検出部１０４は、ユーザが要確認対象を確認していないことを示す情報を通知制御部１０５に供給する。通知部１７は、通知制御部１０５の制御の基に、要確認対象の確認が必要な状況のユーザへの通知を開始する。
【００６１】
例えば、監視装置１が自動車に設けられている場合、通知部１７は、「前方に障害物を発見しました」「制限速度を○○キロ超過しています」「○○m前方で事故が発生しています」など要確認対象の確認が必要な状況が発生したことを通知するメッセージの表示または音声による出力を行う。また、例えば、通知部１７は、「前方を確認してください」「カーナビゲーションシステムで事故情報を確認してください」など要確認対象の確認が必要なことを通知するメッセージの表示または音声による出力を行う。さらに、例えば、通知部１７は、メッセージの表示または音声による出力の代わりに、アラーム音を鳴動したり、LEDまたはランプなどを点灯または点滅したりして、要確認対象の確認が必要な状況を通知するようにしてもよい。
【００６２】
ステップＳ７において、ステップＳ４の処理と同様に、ユーザが要確認対象を確認したか否かが判定される。ユーザが要確認対象を確認していないと判定された場合、処理はステップＳ８に進む。
【００６３】
ステップＳ８において、要確認対象特定部１０１は、要確認対象の確認が必要な状況が継続しているか否かを判定する。具体的には、要確認対象特定部１０１は、メモリ１３から取得した画像データ、センサ部１４から供給されるセンサデータ、または、情報入力部１５を介して外部から入力される外部情報に基づいて、先に特定した要確認対象の確認が必要な状況が継続しているか否かを判定する。要確認対象の確認が必要な状況が継続していると判定された場合、ステップＳ７に戻る。その後、ステップＳ７において、ユーザが要確認対象を確認したと判定されるか、ステップＳ８において、要確認対象の確認が必要な状況が終了したと判定されるまで、ステップＳ７およびＳ８の処理が繰返し実行される。
【００６４】
ステップＳ８において、要確認対象の確認が必要な状況が終了したと判定された場合、すなわち、要確認対象の確認が必要な状況が解消された場合、処理はステップＳ９に進む。
【００６５】
ステップＳ９において、通知部１７は、通知を停止する。具体的には、要確認対象特定部１０１は、要確認対象の確認が不要になったことを示す情報を、顔方向検出部１０２、視線方向検出部１０３、確認状態検出部１０４および通知制御部１０５に供給する。通知部１７は、通知制御部１０５の制御の基に、ステップＳ６において開始した通知を停止する。その後、処理はステップＳ１１に進む。
【００６６】
ステップＳ４またはステップＳ７において、確認状態検出部１０４は、顔方向検出部１０２により検出されたユーザの顔の向き、または、視線方向検出部１０３により検出されたユーザの視線の向きに基づいて、ユーザが要確認対象を所定の時間以上見たこと検出した場合、ユーザが要確認対象を確認したと判定し、処理はステップＳ１０に進む。
【００６７】
なお、必要に応じて、ユーザが要確認対象を所定の回数以上見たことを検出した場合、ユーザが要確認対象を確認したと判定するようにしてもよい。この場合、要確認対象の位置や種類、天候や周囲の明るさ、ユーザが要確認対象を見る状態の違いなどに応じて、判定基準となる回数が適切な値に設定される。
【００６８】
ステップＳ１０において、通知制御部１０５は、通知を制限する。具体的には、確認状態検出部１０４は、ユーザが要確認対象を確認したことを示す情報を、要確認対象特定部１０１、顔方向検出部１０２、視線方向検出部１０３および通知制御部１０５に供給する。通知制御部１０５は、要確認対象の確認が必要な状況の通地を制御する。例えば、要確認対象の確認が必要な状況の通知が中止、停止もしくは遅延されたり、通知する頻度が低減されたり、または、通知するレベルを下げるように通知方法もしくは通知内容が変更される（例えば、通知表現が緩やかにされたり、通知音量が下げられる）。
【００６９】
なお、通知制御部１０５は、要確認対象の確認が必要な状況が終了した時点で、通知を停止する。
【００７０】
ステップＳ１１において、顔方向検出部１０２または視線方向検出部１０３は、顔または視線の向きの検出を停止する。
【００７１】
ステップＳ２において、要確認対象が存在しないと判定された場合、ステップＳ３乃至Ｓ１１の処理はスキップされ、処理はステップＳ１２に進む。
【００７２】
ステップＳ１２において、制御部１６は、監視を継続するか否かを判定する。監視を継続すると判定された場合、処理はステップＳ１に戻り、ステップＳ１２において監視を終了すると判定されるまで、ステップＳ１乃至Ｓ１２の処理が繰返し実行される。
【００７３】
ステップＳ１２において、監視を終了すると判定された場合、例えば、監視装置１の図示せぬ入力部を介して、監視処理の終了の指令がユーザにより制御部１６に入力された場合、監視処理は終了する。
【００７４】
このように、確認が必要な対象（要確認対象）を確認するという必要な動作をするだけで通知が制限され、要確認対象を確認したにも関わらず、確認前と同じ通知が継続されたり、不要な通知が行われたりすることがなくなるので、ユーザに煩わしさを感じさせずにすむようになる。
【００７５】
また、ユーザは、通知を制限させるために要確認対象を確認することにより、要確認対象を確認するという必要な動作が習慣づけられるようになる。
【００７６】
さらに、設定の変更などを行わなくても、ユーザの要確認対象を認識したり、確認したりする能力に応じた通知を行うことができる。
【００７７】
なお、図４のフローチャートでは、説明を簡単にするために、要確認対象が特定されてから、ユーザへの通知が停止または制限されるまで、新たな要確認対象が特定されないような処理の流れとしたが、実際には、要確認対象が特定されている場合に、新たな要確認対象が特定されるような処理が行われる。
【００７８】
次に、図５乃至図９を参照して、監視装置１を自動車の速度の超過を監視する用途に用いる場合の例について説明する。
【００７９】
自動車の速度の超過を監視する用途に用いる場合、監視装置１に設けられるカメラは、図５に示されるカメラ１１の１台のみとされる。また、カメラ１１は、運転者１５１が、自動車１５２の運転席１５３に座り、ハンドル１５４を握って運転している状態において、カメラ１１の撮影領域Ａ内に運転者１５１の顔が含まれ、かつ、運転者１５１が運転席１５３の前方の図示せぬスピードメータを注視した場合に、カメラ１１のレンズが運転者１５１の視線の位置により近くなるように、スピードメータの付近に設置される。また、運転者１５１の運転中の視野Ｖ内に、図示せぬスピードメータは含まれないものとする。
【００８０】
図６は、図３の制御部１６により実現される機能の構成の例をより詳細に示すブロック図である。なお、図中、図３と対応する部分については同じ符号を付してあり、処理が同じ部分に関しては、その説明は繰り返しになるので省略する。
【００８１】
図６に示される機能ブロックは、図３に示される機能ブロックと同様に、要確認対象特定部１０１、顔方向検出部１０２、視線方向検出部１０３、確認状態検出部１０４、および、通知制御部１０５を含むように構成され、さらに、要確認対象特定部１０１は、適正速度設定部２０１および車速監視部２０２を含むように構成されている。
【００８２】
適正速度設定部２０１は、カメラ１１により撮影された画像データをメモリ１３から取得する。また、適正速度設定部２０１は、センサ部１４により出力される各種のセンサデータを取得する。さらに、適正速度設定部２０１は、外部から入力される各種の外部情報を、情報入力部１５を介して取得する。適正速度設定部２０１は、画像データ、センサデータ、または、外部情報に基づいて、自動車の適正速度を設定する。
【００８３】
例えば、適正速度設定部２０１は、情報入力部１５を介して、自動車に設けられているカーナビゲーションシステムから取得した地図データから、これから走行する道路の曲率半径を得て、曲率半径に基づいて適正速度を設定する。
【００８４】
また、例えば、適正速度設定部２０１は、情報入力部１５を介して、VICSなどから取得した道路交通情報に示される速度規制情報や渋滞情報などに基づいて、適正速度を設定する。
【００８５】
さらに、例えば、適正速度設定部２０１は、制限速度標識を撮影した画像データに示されている制限速度を読み取り、読み取った制限速度に基づいて、適正速度を設定する。
【００８６】
また、例えば、適正速度設定部２０１は、センサ部１４から供給されるセンサデータにより求められる天候、気温、路面状況などに基づいて、適正速度を設定する。
【００８７】
なお、上述した適正速度の設定方法は、その一例であり、他の方法により適正速度を設定するようにしてもよい。また、上述した設定方法を複数組み合わせるようにしてもよい。
【００８８】
適正速度設定部２０１は、設定した適正速度を示す情報を車速監視部２０２に供給する。
【００８９】
車速監視部２０２は、情報入力部１５を介して、自動車の制御装置から車速情報を取得する。車速監視部２０２は、現在の車速が適正速度内であるか否かを監視し、適正速度を超過している場合、自動車のスピードメータを要確認対象として特定する。車速監視部２０２は、スピードメータを要確認対象に特定したことを示す情報を、顔方向検出部１０２、視線方向検出部１０３、確認状態検出部１０４、および、通知制御部１０５に供給する。また、車速監視部２０２は、要確認対象であるスピードメータをユーザが確認したか否かの検出結果を示す情報を、確認状態検出部１０４から取得する。また、車速監視部２０２は、車速が適正速度を超過した状態から適正速度内になったことを検出した場合、車速が適正速度内になったことを示す情報を、顔方向検出部１０２、視線方向検出部１０３、確認状態検出部１０４および通知制御部１０５に供給する。
【００９０】
次に、図７のフローチャートを参照して、監視装置１を自動車の速度の超過を監視する用途に用いる場合の監視処理を説明する。なお、この処理は、例えば、監視装置１の図示せぬ入力部を介して、監視処理の開始の指令がユーザにより制御部１６に入力されたとき開始される。
【００９１】
ステップＳ３１において、適正速度設定部２０１は、適正速度の設定を開始する。具体的には、適正速度設定部２０１は、要確認対象特定部１０１は、メモリ１３から取得した画像データ、センサ部１４から供給されるセンサデータ、または、情報入力部１５を介して、外部から入力される外部情報に基づいて、自動車の適正速度の設定を開始する。適正速度設定部２０１は、設定した適正速度を示す情報の車速監視部２０２への供給を開始する。
【００９２】
ステップＳ３２において、車速監視部２０２は、車速の監視を開始する。具体的には、車速監視部２０２は、情報入力部１５を介して取得される車速情報に示される現在の車速が、適正速度設定部２０１により設定された適正速度内であるか否かの監視を開始する。
【００９３】
ステップＳ３３において、車速監視部２０２は、車速が適正速度を超過しているか否かを判定し、車速が適正速度を超過していると判定した場合、処理はステップＳ３４に進む。
【００９４】
ステップＳ３４において、車速監視部２０２は、スピードメータを要確認対象として特定する。車速監視部２０２は、スピードメータを要確認対象に特定したことを示す情報を、顔方向検出部１０２、視線方向検出部１０３、確認状態検出部１０４、および、通知制御部１０５に供給する。
【００９５】
ステップＳ３５において、上述した図４のステップＳ３の処理と同様に、顔または視線の向きの検出が開始される。
【００９６】
ここで、運転者の顔がスピードメータの方向を向いているか否かを検出する方法の一例を説明する。図８は、運転者がスピードメータを見ている場合に、スピードメータ付近に設置されたカメラ１１により撮影された画像データの例を示し、図９は、運転者がスピードメータを見ずに運転している場合に、スピードメータ付近に設置されたカメラ１１により撮影された画像データの例を示している。顔方向検出部１０２は、画像認識の手法を用いて、画像データ内の運転者の顔の右眼の黒目の部分の中心点Ｐ１、左眼の黒目の部分の中心点Ｐ２、および、口の中心点Ｐ３を検出する。そして、顔方向検出部１０２は、点Ｐ１乃至Ｐ３を結ぶ三角形の形状を求める。例えば、顔方向検出部１０２は、運転者がスピードメータを見た場合の点Ｐ１乃至Ｐ３を結ぶ三角形の形状を予め記憶しておき、監視処理の実行中に画像データから検出された点Ｐ１乃至Ｐ３を結ぶ三角形の形状と比較することにより、運転者の顔がスピードメータの方向を向いているか、または、スピードメータ以外の方向を向いているかを検出する。
【００９７】
ステップＳ３６において、確認状態検出部１０４は、運転者がスピードメータを確認したか否かを判定する。具体的には、確認状態検出部１０４は、顔方向検出部１０２により検出されたユーザの顔の向き、または、視線方向検出部１０３により検出されたユーザの視線の向きに基づいて、運転者がスピードメータを所定の時間（例えば、0.5秒）以上見たか否かを検出する。確認状態検出部１０４は、運転者がスピードメータを所定の時間以上見たことを検出していない場合、運転者がスピードメータを確認していないと判定し、処理はステップＳ３７に進む。
【００９８】
ステップＳ３７において、確認状態検出部１０４は、要確認対象が特定されてから所定の時間が経過したか否かを判定する。スピードメータである要確認対象が特定されてから、すなわち、車速が適正速度を超過してから所定の時間（例えば、１０秒）が経過していないと判定された場合、処理はステップＳ３６に戻る。その後、ステップＳ３６において、運転者がスピードメータを確認したと判定されるか、ステップＳ３７において、要確認対象が特定されてから所定の時間が経過したと判定されるまで、ステップＳ３６およびＳ３７の処理が繰返し実行される。
【００９９】
ステップＳ３７において、スピードメータである要確認対象が特定されてから所定の時間が経過したと判定された場合、処理はステップＳ３８に進む。
【０１００】
ステップＳ３８において、通知部１７は、速度超過の通知を開始する。具体的には、確認状態検出部１０４は、ユーザが要確認対象を確認していないことを示す情報を通知制御部１０５に供給する。通知部１７は、通知制御部１０５の制御の基に、例えば、「適正速度を○○キロ超過しています」といったメッセージの表示あるいは音声による出力、または、適正速度を超過したことを示すアラームの鳴動を開始する。
【０１０１】
ステップＳ３９において、ステップＳ３６の処理と同様に、運転者がスピードメータを確認したか否かが判定される。運転者がスピードメータを確認していないと判定された場合、処理はステップＳ４０に進む。
【０１０２】
ステップＳ４０において、車速監視部２０２は、車速がまだ適正速度を超過しているか否かを判定する。車速がまだ適正速度を超過していると判定された場合、処理はステップＳ３９に戻る。その後、ステップＳ３９において、運転者がスピードメータを確認したと判定されるか、ステップＳ４０において、車速が適正速度内になったと判定されるまで、ステップＳ３９およびＳ４０の処理が繰返し実行される。
【０１０３】
ステップＳ４０において、車速が適正速度内になったと判定された場合、処理はステップＳ４１に進む。
【０１０４】
ステップＳ４１において、通知部１７は、速度超過の通知を停止する。具体的には、車速監視部２０２は、車速が適正速度内になったことを示す情報を、顔方向検出部１０２、視線方向検出部１０３、確認状態検出部１０４および通知制御部１０５に供給する。通知部１７は、通知制御部１０５の制御の基に、ステップＳ３８において開始した速度超過の通知を停止する。その後、処理はステップＳ４３に進む。
【０１０５】
ステップＳ３６またはＳ３９において、確認状態検出部１０４は、運転者がスピードメータを所定の時間以上見たことを検出した場合、運転者がスピードメータを確認したと判定し、処理はステップＳ４２に進む。
【０１０６】
ステップＳ４２において、通知制御部１０５は、速度超過の通知を制限する。具体的には、確認状態検出部１０４は、運転者がスピードメータを確認したことを示す情報を、要確認対象特定部１０１、顔方向検出部１０２、視線方向検出部１０３および通知制御部１０５に供給する。通知制御部１０５は、速度超過の通知を制限する。
【０１０７】
例えば、通知が中止または停止されたり、通知の開始が遅延されたり、いったん車速が適正速度内になるまで通知しないように制限されたりする。また、例えば、通知音声の音量を下げたり、通知表示の輝度を下げたり、通知表示の大きさを小さくするなど、ユーザに通知する度合い（レベル）が制限される。
【０１０８】
ステップＳ４３において、上述した図４のステップＳ１１の処理と同様に、顔または視線の向きの検出が停止される。
【０１０９】
ステップＳ３３において、車速が適正速度内であると判定された場合、ステップＳ３４乃至Ｓ４３の処理はスキップされ、処理はステップＳ４４に進む。
【０１１０】
ステップ４４において、上述した図４のステップＳ１２の処理と同様に、監視を継続するか否かが判定される。監視を継続すると判定された場合、処理はステップＳ３３に戻り、ステップＳ４４において、監視を終了すると判定されるまで、ステップＳ３３乃至Ｓ４４の処理が繰返し実行される。
【０１１１】
ステップＳ４４において、監視を終了すると判定された場合、監視処理は終了する。
【０１１２】
このように、スピードメータを確認するという必要な動作をするだけで、速度超過の通知が制限されるので、例えば、適正速度を超過していることを確認した上で安全であると認識して運転しているにも関わらず、確認前と同じ通知が継続されることがなくなり、運転者に煩わしさを感じさせることが防止される。
【０１１３】
また、スピードメータを確認することにより速度超過の通知が制限されるので、適正速度を超過した場合に運転者がスピードメータを確実に確認するようになる。例えば、高速道路のIC（インターチェンジ）において、高速道路から降りて料金所に向かう場合、運転者は、速度感覚が麻痺しているため、制限速度を大きく超過する場合が多いが、速度超過の通知の開始に伴い、スピードメータを確認することにより、速度感覚を元に戻すことができる。
【０１１４】
さらに、適正速度を超過している場合、スピードメータを確認しない限り、確実に速度超過が通知されるので、安全性が向上し、事故が発生するリスクを軽減することができる。
【０１１５】
なお、ステップＳ３７において、要確認対象が特定されてから所定の時間が経過したか否かを判定する代わりに、要確認対象が特定されてから自動車が所定の距離を進んだか否かを判定するようにしてもよい。
【０１１６】
また、ステップＳ４２において、速度超過の通知が制限された後、車速が適正速度を超過した状態がさらに所定の時間継続した場合、通知の制限を解除して、元の通知に戻すようにしてもよい。
【０１１７】
以上のように、ユーザの確認が必要な対象である要確認対象を特定し、ユーザの顔または視線の向きを検出し、検出された顔または視線の向きに基づいて、ユーザが要確認対象を確認したか否かを検出し、ユーザが要確認対象を確認したことが検出されていない場合、要確認対象の確認が必要な状況を通知し、ユーザが要確認対象を確認したことが検出された場合、要確認対象の確認が必要な状況の通知を制限するようにユーザへの通知を制御する場合には、ユーザによる確認が必要な対象をユーザが確認したか否かを検出することができる。また、ユーザによる確認が必要な対象の確認をユーザに適切に促すようにすることができる。
【０１１８】
なお、本発明は、上述した車速を監視する装置以外にも、例えば、ユーザによる視認が必要な対象の確認を促すための通知、警告、警報などを行う装置に適用することができる。
【０１１９】
上述した一連の処理は、ハードウエアにより実行させることもできるし、ソフトウエアにより実行させることもできる。一連の処理をソフトウエアにより実行させる場合には、そのソフトウエアを構成するプログラムが、専用のハードウエアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、プログラム記録媒体からインストールされる。
【０１２０】
図１０は、上述した一連の処理をプログラムにより実行するパーソナルコンピュータの構成の例を示すブロック図である。CPU（Central Processing Unit）９０１は、ROM（Read Only Memory）９０２、または記録部９０８に記憶されているプログラムに従って各種の処理を実行する。RAM（Random Access Memory）９０３には、CPU９０１が実行するプログラムやデータなどが適宜記憶される。これらのCPU９０１、ROM９０２、およびRAM９０３は、バス９０４により相互に接続されている。
【０１２１】
CPU９０１にはまた、バス９０４を介して入出力インターフェース９０５が接続されている。入出力インターフェース９０５には、キーボード、マウス、マイクロホンなどよりなる入力部９０６、ディスプレイ、スピーカなどよりなる出力部９０７が接続されている。CPU９０１は、入力部９０６から入力される指令に対応して各種の処理を実行する。そして、CPU９０１は、処理の結果を出力部９０７に出力する。
【０１２２】
入出力インターフェース９０５に接続されている記録部９０８は、例えばハードディスクからなり、CPU９０１が実行するプログラムや各種のデータを記憶する。通信部９０９は、インターネットやローカルエリアネットワークなどのネットワークを介して外部の装置と通信する。
【０１２３】
また、通信部９０９を介してプログラムを取得し、記録部９０８に記憶してもよい。
【０１２４】
入出力インターフェース９０５に接続されているドライブ９１０は、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどのリムーバブルメディア９１１が装着されたとき、それらを駆動し、そこに記録されているプログラムやデータなどを取得する。取得されたプログラムやデータは、必要に応じて記録部９０８に転送され、記憶される。
【０１２５】
コンピュータにインストールされ、コンピュータによって実行可能な状態とされるプログラムを格納するプログラム記録媒体は、図１０に示すように、磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM(Compact Disc-Read Only Memory),DVD(Digital Versatile Disc)を含む）、光磁気ディスク、もしくは半導体メモリなどよりなるパッケージメディアであるリムーバブルメディア９１１、または、プログラムが一時的もしくは永続的に格納されるROM９０２や、記録部９０８を構成するハードディスクなどにより構成される。プログラム記録媒体へのプログラムの格納は、必要に応じてルータ、モデムなどのインターフェースである通信部９０９を介して、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の通信媒体を利用して行われる。
【０１２６】
なお、本明細書において、プログラム記録媒体に格納されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【０１２７】
さらに、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
【図面の簡単な説明】
【０１２８】
【図１】本発明を適用した監視装置の一実施の形態を示すブロック図である。
【図２】要確認対象の例を示す図である。
【図３】図１の制御部により実現される機能の構成の例を示すブロック図である。
【図４】図１の監視装置の監視処理を説明するためのフローチャートである。
【図５】図１のカメラの設置例を示す図である。
【図６】図１の制御部により実現される機能の構成の他の例を示すブロック図である。
【図７】図１の監視装置の監視処理の他の例を説明するためのフローチャートである。
【図８】顔の向きを検出する方法を説明するための図である。
【図９】顔の向きを検出する方法を説明するための図である。
【図１０】パーソナルコンピュータの構成の例を示すブロック図である。
【符号の説明】
【０１２９】
１  監視装置
１１  カメラ
１２  画像入力部
１４  センサ部
１５  情報入力部
１６  制御部
１７  通知部
１０１  要確認対象特定部（特定手段）
１０２  顔方向検出部（方向検出手段）
１０３  視線方向検出部（方向検出手段）
１０４  確認状態検出部（確認検出手段）
１０５  通知制御部（通知制御手段）
２０１  適正速度設定部
２０２  車速監視部
９０１  CPU
９０２  ROM
９０３  RAM
９０８  記録部
９１０  ドライブ
９１１  リムーバブルメディア
【図１】
2007094618.tif 000003
【図２】
2007094618.tif 000004
【図３】
2007094618.tif 000005
【図４】
2007094618.tif 000006
【図５】
2007094618.tif 000007
【図６】
2007094618.tif 000008
【図７】
2007094618.tif 000009
【図８】
2007094618.tif 000010
【図９】
2007094618.tif 000011
【図１０】
2007094618.tif 000012