(57)【要約】【課題】運転者が確認補助機器のみを見て運転することを防止する。【解決手段】顔方向検出部１０１は、カメラにより撮影された運転者の顔の画像に基づいて、運転者の顔の向きを検出する。車両が後進方向のギアに設定されている場合、状態検出部１０３が、運転者の顔が、カーナビゲーション装置またはルームミラーの方向を所定の間継続して向いている状態を検出したとき、表示制御部１０４および音声出力制御部１０５は、車両の後方を直接目視して確認するように促す警告を行うように、カーナビゲーション装置またはルームミラーおよび音声出力部を制御する。本発明は車両の運転を支援する運転支援装置に適用することができる。【選択図】図６
2007233795.tif 000002
【特許請求の範囲】
【請求項１】
運転者の顔または視線の向きを検出する方向検出手段と、
前記運転者の顔または視線が、車両の周囲の状況の確認を補助する機器である確認補助機器の方向を所定の間継続して向いているかを検出する状態検出手段と、
前記運転者の顔または視線が前記確認補助機器の方向を所定の間継続して向いている場合、前記車両の周囲を直接目視して確認するように促す警告を行うように制御する警告制御手段と
を含む監視装置。
【請求項２】
前記確認補助機器は、前記車両の後方の確認を補助する機器であり、
前記状態検出手段は、前記車両が後進する状態である場合、前記運転者の顔または視線が前記確認補助機器の方向を所定の間継続して向いているかを検出する
請求項１に記載の監視装置。
【請求項３】
前記警告制御手段は、前記確認補助機器に設けられている発光手段の点灯または点滅による警告を行うように制御する
請求項１に記載の監視装置。
【請求項４】
前記警告制御手段は、前記確認補助機器にメッセージを表示させることによる警告を行うように制御する
請求項１に記載の監視装置。
【請求項５】
前記警告制御手段は、音声メッセージによる警告を行うように制御する
請求項１に記載の監視装置。
【請求項６】
運転者の顔または視線の向きを検出する方向検出ステップと、
前記運転者の顔または視線が、車両の周囲の状況の確認を補助する機器である確認補助機器の方向を所定の間継続して向いているかを検出する状態検出ステップと、
前記運転者の顔または視線が前記確認補助機器の方向を所定の間継続して向いている場合、前記車両の周囲を直接目視して確認するように促す警告を行うように制御する警告制御ステップと
を含む監視方法。
【請求項７】
運転者の顔または視線の向きを検出する方向検出ステップと、
前記運転者の顔または視線が、車両の周囲の状況の確認を補助する機器である確認補助機器の方向を所定の間継続して向いているかを検出する状態検出ステップと、
前記運転者の顔または視線が前記確認補助機器の方向を所定の間継続して向いている場合、前記車両の周囲を直接目視して確認するように促す警告を行うように制御する警告制御ステップと
を含む処理をコンピュータに実行させるプログラム。
【請求項８】
請求項７に記載のプログラムが記録されている記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、監視装置および方法、記録媒体、並びに、プログラムに関し、特に、運転者が、車両の周囲の状況の確認を補助する機器のみを見て運転することを防止することができるようにした監視装置および方法、記録媒体、並びに、プログラムに関する。
【背景技術】
【０００２】
従来、例えば、ルームミラーなど、車両の周囲の状況の確認を補助する機器（以下、確認補助機器と称する）が、車両に設けられている。また、近年、運転席から見ることが困難な場所を車両に設けられたカメラにより撮影し、撮影した画像を車両内に設けられたモニタに表示する確認補助機器の普及が進んでいる。運転者は、確認補助機器を利用することにより、運転席から確認することが困難な場所を容易に確認することができる。
【０００３】
また、そのような確認補助機器の一つとして、車両の後部に設けられたリアカメラにより撮影された車両の後部の映像を左右逆転させた反転映像を、後部座席の乗員用のリアモニタに、車両のリアウインドウの外縁部付近に配置された後部ミラーに向けて表示させる後方視界表示装置が提案されている（例えば、特許文献１参照）。
【０００４】
【特許文献１】特開２００４−２７４３３１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、確認補助機器は、あくまで、車両の周囲の確認を補助するためのものであり、周囲の状況を直接目視して確認せずに、確認補助機器のみを見て運転することは大変危険である。
【０００６】
本発明は、このような状況に鑑みてなされたものであり、運転者が確認補助機器のみを見て運転することを防止するようにするものである。
【課題を解決するための手段】
【０００７】
本発明の一側面の監視装置は、運転者の顔または視線の向きを検出する方向検出手段と、運転者の顔または視線が、車両の周囲の状況の確認を補助する機器である確認補助機器の方向を所定の間継続して向いているかを検出する状態検出手段と、運転者の顔または視線が確認補助機器の方向を所定の間継続して向いている場合、車両の周囲を直接目視して確認するように促す警告を行うように制御する警告制御手段とを備える。
【０００８】
本発明の一側面の監視装置においては、運転者の顔または視線の向きが検出され、運転者の顔または視線が、車両の周囲の状況の確認を補助する機器である確認補助機器の方向を所定の間継続して向いているかが検出され、運転者の顔または視線が確認補助機器の方向を所定の間継続して向いている場合、車両の周囲を直接目視して確認するように促す警告を行うように制御される。
【０００９】
従って、運転者が、確認補助機器を見ているかを検出することができる。また、運転者が、確認補助機器のみを見て運転することを防止することができる。
【００１０】
この方向検出手段、状態検出手段、警告制御手段は、例えば、CPU（Central Processing Unit）により構成される。
【００１１】
この確認補助機器は、車両の後方の確認を補助する機器であるようにすることができ、この状態検出手段には、車両が後進する状態である場合、運転者の顔または視線が確認補助機器の方向を所定の間継続して向いているかを検出させることができる。
【００１２】
これにより、車両が後進する状態である場合、運転者が、車両の後方を確認するための確認補助機器のみを見て運転することを防止することができる。
【００１３】
この警告制御手段には、確認補助機器に設けられている発光手段の点灯または点滅による警告を行うように制御させることができる。
【００１４】
これにより、運転者の視覚に訴えるように警告が行われ、確実に運転者に警告が伝達される。
【００１５】
この警告制御手段には、確認補助機器にメッセージを表示させることによる警告を行うように制御させることができる。
【００１６】
これにより、運転者に、警告する内容を明確に伝達することができる。
【００１７】
この警告制御手段には、音声メッセージによる警告を行うように制御させることができる。
【００１８】
これにより、運転者の視覚に訴えるように警告が行われ、確実に運転者に警告が伝達される。
【００１９】
本発明の一側面の監視方法、プログラム、または、記録媒体に記録されているプログラムは、運転者の顔または視線の向きを検出する方向検出ステップと、運転者の顔または視線が、車両の周囲の状況の確認を補助する機器である確認補助機器の方向を所定の間継続して向いているかを検出する状態検出ステップと、運転者の顔または視線が確認補助機器の方向を所定の間継続して向いている場合、車両の周囲を直接目視して確認するように促す警告を行うように制御する警告制御ステップとを含む。
【００２０】
本発明の一側面の監視方法、プログラム、または、記録媒体に記録されているプログラムにおいては、運転者の顔または視線の向きが検出され、運転者の顔または視線が、車両の周囲の状況の確認を補助する機器である確認補助機器の方向を所定の間継続して向いているかが検出され、運転者の顔または視線が確認補助機器の方向を所定の間継続して向いている場合、車両の周囲を直接目視して確認するように促す警告を行うように制御される。
【００２１】
従って、運転者が、確認補助機器を見ているかを検出することができる。また、運転者が、確認補助機器のみを見て運転することを防止することができる。
【００２２】
この方向検出ステップは、例えば、運転者の顔または視線の向きをCPUにより検出する方向検出ステップにより構成され、この状態検出ステップは、例えば、運転者の顔または視線が、車両の周囲の状況の確認を補助する機器である確認補助機器の方向を所定の間継続して向いているかをCPUにより検出する状態検出ステップにより構成され、この警告制御ステップは、例えば、運転者の顔または視線が確認補助機器の方向を所定の間継続して向いている場合、車両の周囲を直接目視して確認するように促す警告を行うようにCPUにより制御する警告制御ステップにより構成される。
【発明の効果】
【００２３】
以上のように、本発明の一側面によれば、運転者が、車両の周囲の状況の確認を補助する機器を見ているかを検出することができる。特に、本発明の一側面によれば、運転者が、車両の周囲の状況の確認を補助する機器のみを見て運転することを防止することができる。
【発明を実施するための最良の形態】
【００２４】
以下、図を参照して、本発明の実施の形態について説明する。
【００２５】
図１は、本発明を適用した監視システムの一実施の形態を示すブロック図である。監視システム１は、カメラ１１−１，１１−２、および、監視装置１２を含むように構成される。また、監視装置１２は、画像入力部２１、メモリ２２、監視部２３、および、音声出力部２４を含むように構成される。
【００２６】
カメラ１１−１，１１−２は、例えば、CCD（Charge Coupled Device）撮像素子、CMOS（Complementary Metal Oxide Semiconductor）撮像素子、または、対数変換型撮像素子（例えば、HDRC（High Dynamic Range CMOS（Complementary Metal Oxide Semiconductor））（登録商標））などを用いたカメラにより構成され、撮影した画像を画像入力部２１に出力する。
【００２７】
ここで、図２乃至図５を参照して、カメラ１１−１，１１−２の設置位置の例を説明する。
【００２８】
図２は、監視システム１が設けられている車両５１の前側を車両５１の左方向から見た場合におけるカメラ１１−１，１１−２の設置位置の例を模式的に示す図である。また、図３および図４は、カーナビゲーション装置２とカメラ１１−１の位置関係を模式的に示すとともに、カーナビゲーション装置２に表示される画面の例を示す図である。さらに、図５は、ルームミラー３とカメラ１１−２の位置関係を模式的に示す図である。
【００２９】
図２に示されるように、カーナビゲーション装置２は、車両５１内の図示せぬダッシュボード内であって、車両５１の横方向において、ほぼ中央、すなわち、運転者５２が運転席５３に座り、ステアリングホイール５４を握って運転している状態において、運転者５２から見て前方左斜め下方向の位置に設置されている。
【００３０】
また、図２乃至図４に示されるように、カメラ１１−１は、カメラ１１−１の撮影領域Ａ１内に運転者５２の顔が含まれ、運転者５２がカーナビゲーション装置２の画面を見た場合、運転者５２の顔をほぼ正面から撮影できる位置に設置されている。具体的には、例えば、カメラ１１−１は、カーナビゲーション装置２の画面を見た場合の運転者５２の視線の位置に近い位置である、カーナビゲーション装置２の上部であって、カーナビゲーション装置２の上辺のほぼ中央付近に設置されている。人の顔を撮影した画像に基づいて顔または視線の向きを検出する場合、カメラのレンズを直視する場合の顔または視線の向きが最も高い精度で検出される。従って、カメラ１１−１を上述した位置に設置することにより、運転者５２がカーナビゲーション装置２の方向に顔または視線を向けたかを精度良く検出することができる。
【００３１】
図３および図４に示されるように、カーナビゲーション装置２の右上隅付近には、運転者５２に注意を促す場合に点灯または点滅するランプ６１が設けられている。カーナビゲーション装置２の画面には、ウインドウ６２が表示されるとともに、カーナビゲーション装置２の操作を行うためのボタン、スイッチ、ガイダンスなどが表示される操作ウインドウ６３−１，６３−２が、ウインドウ６２の左右に隣接して表示される。
【００３２】
また、カーナビゲーション装置２は、目的地までの走行経路を案内するナビゲーション機能の他に、後方モニタ機能およびブラインドモニタ機能などを提供する。後方モニタ機能とは、例えば、図３に示されるように、車両５１の後方に設置された図示せぬカメラにより撮影された車両５１の後方の画像をウインドウ６２内に表示するとともに、現在の位置から車両５１が後退した場合の車両５１の位置を示すガイド線７１などを車両５１の後方の画像に重畳して表示することにより、車両５１の後方の状況の確認を補助する機能である。図３の例においては、ガイド線７１とともに、車両５１の後方の路面上の駐車枠７２がウインドウ６２内に表示されており、ウインドウ６２内の画像を適宜確認することにより、駐車枠７２内に車両５１を駐車させることが容易になる。
【００３３】
また、ブラインドコーナーモニタ機能とは、例えば、図４に示されるように、車両５１の前端のバンパー付近に設置された図示せぬカメラにより撮影された、運転席から見ることが困難である、車両５１の左方向の画像８１、右方向の画像８２、および、車両前方の直下の画像８３をウインドウ６２内に表示することにより、見通しの悪い交差点やT字路などにおいて、左右から接近してくる車両、自転車、および、通行人などの確認を補助する機能である。
【００３４】
図２および図５に示されるように、ルームミラー３は、車両５１の車室内の天井９２のほぼ前端であって、車両５１の横方向において、ほぼ中央、すなわち、運転者５２が運転席５３に座り、ステアリングホイール５４を握って運転している状態において、運転者５２から見て前方左斜め上方向の位置に設置されている。カメラ１１−２は、カメラ１１−２の撮影領域Ａ２内に運転者５２の顔が含まれ、運転者５２がルームミラー３を見た場合、運転者５２の顔をほぼ正面から撮影できる位置に設置されている。具体的には、カメラ１１−２は、ルームミラー３を見た場合における運転者５２の視線の位置に近い位置である、ルームミラー３の上部であって、ルームミラー３の上辺のほぼ中央付近に設置されている。カメラ１１−１と同様の理由により、カメラ１１−２を上述した位置に設置することにより、運転者５２がルームミラー３の方向に顔または視線を向けたかを精度よく検出することができる。
【００３５】
また、ルームミラー３の右上隅には、運転者５２に注意を促す場合に点灯または点滅するランプ９１が設けられている。
【００３６】
図１に戻り、監視装置１２は、運転者が、周囲の状況を直接目視して確認せずに、確認補助機器のみを見て運転していないかを監視し、必要に応じて、運転者に対して警告を行う。
【００３７】
監視装置１２の画像入力部２１は、カメラ１１から出力される画像をメモリ２２に記憶させる。
【００３８】
監視部２３は、監視システム１が設けられている車両の各種の状態を示す情報を、トランスミッション制御装置など車両の動作を制御する装置から取得する。監視部２３は、車両の状態に応じて、メモリ２２に記憶されている画像を取得し、取得した画像に基づいて、運転者が、周囲の状況を直接目視して確認せずに、確認補助機器のみを見て運転していないかを監視する。監視部２３は、運転者が、確認補助機器のみを見て運転している状態を検出した場合、運転者に車両の周囲の状況を直接目視して確認するように促すために、運転者が見ている確認補助機器であるカーナビゲーション装置２のランプ６１またはルームミラー３のランプ９１を点滅させたり、カーナビゲーション装置２のウインドウ６２内に警告メッセージを表示させたり、音声出力部２４から音声メッセージや警告音などを出力させる。
【００３９】
音声出力部２４は、例えば、スピーカ、アラームなどの音声出力装置により構成され、監視部２３の制御の基に、音声メッセージや警告音などを出力する。
【００４０】
図６は、監視部２３の機能的構成を示す図である。監視部２３は、顔方向検出部１０１、視線方向検出部１０２、状態検出部１０３、表示制御部１０４、および、音声出力制御部１０５により構成される。
【００４１】
顔方向検出部１０１は、カメラ１１−１またはカメラ１１−２により撮影され、メモリ２２に記憶されている画像に基づいて、運転者の顔の向きを検出し、運転者の顔がカーナビゲーション装置２またはルームミラー３の方向を向いているかを検出する。なお、顔方向検出部１０１が顔の向きを検出する手法は、特定の手法に限定されるものではなく、顔の向きをより迅速かつ正確に検出できる手法が望ましい。顔方向検出部１０１は、運転者の顔が、カーナビゲーション装置２またはルームミラー３の方向を向いているかを示す情報を状態検出部１０３に供給する。
【００４２】
視線方向検出部１０２は、カメラ１１−１またはカメラ１１−２により撮影され、メモリ２２に記憶されている画像に基づいて、運転者の視線の向きを検出し、運転者の視線がカーナビゲーション装置２またはルームミラー３の方向を向いているかを検出する。なお、視線方向検出部１０２が視線の向きを検出する手法は、特定の手法に限定されるものではなく、視線の向きをより迅速かつ正確に検出できる手法が望ましい。視線方向検出部１０２は、運転者の視線が、カーナビゲーション装置２またはルームミラー３の方向を向いているかを示す情報を状態検出部１０３に供給する。
【００４３】
状態検出部１０３は、監視システム１が設けられている車両の各種の状態を示す情報を、車両の動作を制御する装置から取得する。状態検出部１０３は、車両の状態に応じて、顔方向検出部１０１または視線方向検出部１０２からの検出結果に基づいて、運転者の顔または視線が、カーナビゲーション装置２またはルームミラー３の方向を所定の間継続して向いているかを検出する。状態検出部１０３は、検出結果を示す情報を表示制御部１０４および音声出力制御部１０５に供給する。
【００４４】
表示制御部１０４は、図７を参照して後述するように、状態検出部１０３からの検出結果に基づいて、車両の周囲を直接目視して確認するように促す警告を行うようにカーナビゲーション装置２またはルームミラー３を制御する。
【００４５】
音声出力制御部１０５は、図７を参照して後述するように、状態検出部１０３からの検出結果に基づいて、車両の周囲を直接目視して確認するように促す警告を行うように音声出力部２４を制御する。
【００４６】
次に、図７のフローチャートを参照して、監視システム１により実行される監視処理を説明する。なお、この処理は、例えば、監視システム１が設けられている車両のエンジンが始動されたとき開始される。
【００４７】
ステップＳ１において、状態検出部１０３は、後進方向のギアに設定されているかを判定する。状態検出部１０３が、監視システム１が設けられている車両の図示せぬトランスミッション制御装置からの情報に基づいて、車両のトランスミッションのギアが後進方向のギアに設定されていると判定した場合、すなわち、車両が後進する状態である場合、処理はステップＳ２に進む。
【００４８】
ステップＳ２において、顔方向検出部１０１は、運転者の顔の画像を取得する。具体的には、カメラ１１−１，１１−２は、撮影した画像、すなわち、運転者の顔を含む画像を画像入力部２１に供給する。画像入力部２１は、取得した画像をメモリ２２に記憶させる。顔方向検出部１０１は、メモリ２２に記憶された画像を取得する。
【００４９】
ステップＳ３において、顔方向検出部１０１は、運転者の顔の向きを検出する。具体的には、顔方向検出部１０１は、所定の手法に基づいて、運転者の顔が、カーナビゲーション装置２またはルームミラー３、すなわち、確認補助機器の方向を向いているかを検出する。
【００５０】
ここで、運転者の顔がカーナビゲーション装置２の方向を向いているかを検出する方法の一例を説明する。図８は、運転者がカーナビゲーション装置２を見ている場合にカメラ１１−１により撮影された画像の例を示し、図９は、運転者が車両の前方を見て運転している場合にカメラ１１−１により撮影された画像の例を示している。顔方向検出部１０１は、画像認識の手法を用いて、カメラ１１−１により撮影された画像内の、運転者の顔の右眼の黒目の部分の中心点Ｐ１、左眼の黒目の部分の中心点Ｐ２、および、口の中心点Ｐ３を検出する。なお、口の中心点Ｐ３は、例えば、左右の口角を結ぶ線分の中点とされる。
【００５１】
顔方向検出部１０１は、運転者の顔がカーナビゲーション装置２の方向を向いている場合の点Ｐ１乃至Ｐ３を結ぶ三角形の形状（以下、基準形状と称する）を予め記憶しておき、監視処理中に検出した点Ｐ１乃至Ｐ３を結ぶ三角形の形状を基準形状と比較する。顔方向検出部１０１は、検出した三角形の形状と基準形状の類似度に基づいて、運転者の顔がカーナビゲーション装置２の方向を向いているかを検出する。
【００５２】
なお、運転者の顔がルームミラー３の方向を向いているかについても同様に、カメラ１１−２により撮影された画像に基づいて検出される三角形の形状と、運転者の顔がルームミラー３の方向を向いている場合の基準形状とを比較することにより検出される。
【００５３】
顔方向検出部１０１は、検出結果を示す情報を状態検出部１０３に供給する。
【００５４】
ステップＳ４において、状態検出部１０３は、警告中であるかを判定する。警告中でないと判定された場合、処理はステップＳ５に進む。
【００５５】
ステップＳ５において、状態検出部１０３は、運転者が確認補助機器の方向を所定の間継続して見ているかを判定する。具体的には、状態検出部１０３は、例えば、顔方向検出部１０１からの検出結果に基づいて、運転者の顔が確認補助機器であるカーナビゲーション装置２またはルームミラー３の方向を向いている状態が、所定の時間（例えば、１０秒間）継続したことを検出した場合、運転者が確認補助機器の方向を所定の間継続して見ていると判定し、処理はステップＳ６に進む。
【００５６】
あるいは、状態検出部１０３は、例えば、顔方向検出部１０１からの検出結果、および、車両のエンジンなどを制御する図示せぬ動力制御装置からの情報に基づいて、運転者の顔が確認補助機器であるカーナビゲーション装置２またはルームミラー３の方向を向いている状態が、車両が所定の距離を走行する間、換言すれば、車輪が所定の回数回転する間、継続したことを検出した場合、運転者が確認補助機器の方向を所定の間継続して見ていると判定し、処理はステップＳ６に進む。
【００５７】
ステップＳ６において、表示制御部１０４および音声出力制御部１０５は、警告を開始させる。具体的には、状態検出部１０３は、運転者が所定の間継続して見ている確認補助機器を示す情報を表示制御部１０４および音声出力制御部１０５に供給する。表示制御部１０４は、カーナビゲーション装置２またはルームミラー３のうち運転者が見ている確認補助機器に、警告の開始を指示する情報を供給する。
【００５８】
例えば、運転者が、車両の後方の状況の確認を補助する後方モニタ機能を提供するカーナビゲーション装置２の方向を見ている場合、表示制御部１０４は、警告の開始を指示する情報をカーナビゲーション装置２に供給する。カーナビゲーション装置２は、ランプ６１を点灯または点滅させるとともに、図１０に示されるように、例えば、「車両の後方を直接確認してください」といった警告メッセージ１５１を、ウインドウ６２に表示されている車両の後方の画像に重畳させて表示することにより、運転者に車両の後方を直接目視して確認するように促す。
【００５９】
また、例えば、運転者が、車両の後方の状況の確認を補助するルームミラー３の方向を見ている場合、表示制御部１０４は、警告の開始を指示する情報をルームミラー３に供給する。ルームミラー３は、ランプ９１を点灯または点滅させることにより、運転者に車両の後方を直接目視して確認するように促す。
【００６０】
また、音声出力制御部１０５は、音声メッセージの出力の開始を指示する情報を音声出力部２４に供給する。音声出力部２４は、例えば、「車両の後方を直接確認してください」といった音声メッセージを出力することにより、運転者に車両の後方を直接目視して確認するように促す。
【００６１】
その後、処理はステップＳ９に進む。
【００６２】
ステップＳ５において、運転者が確認補助機器の方向を所定の間継続して見ていないと判定された場合、ステップＳ６の処理はスキップされ、運転者への警告は開始されずに、処理はステップＳ９に進む。
【００６３】
ステップＳ４において、警告中でないと判定された場合、処理はステップＳ７に進む。
【００６４】
ステップＳ７において、状態検出部１０３は、運転者が確認補助機器の方向と異なる方向を見たかを判定する。具体的には、状態検出部１０３は、顔方向検出部１０１からの検出結果に基づいて、運転者の顔が、カーナビゲーション装置２およびルームミラー３のうち、現在警告を行っている確認補助機器の方向を向いていない状態が所定の時間（例えば、１秒間）継続したことを検出した場合、運転者が確認補助機器の方向と異なる方向を見たと判定し、処理はステップＳ８に進む。
【００６５】
ステップＳ８において、表示制御部１０４および音声出力制御部１０５は、警告を解除させる。具体的には、状態検出部１０３は、運転者が、現在警告を行っている確認補助機器の方向と異なる方向を向いたことを示す情報を表示制御部１０４および音声出力制御部１０５に供給する。表示制御部１０４は、カーナビゲーション装置２およびルームミラー３のうち、現在警告を行っている確認補助機器に、警告の解除を指示する情報を供給する。
【００６６】
カーナビゲーション装置２が警告を行っている場合、カーナビゲーション装置２は、ランプ６１を消灯させ、ウインドウ６２内の警告メッセージ１５１の表示を終了させる。また、ルームミラー３が警告を行っている場合、ルームミラー３は、ランプ９１を消灯させる。
【００６７】
音声出力制御部１０５は、音声メッセージの出力の終了を指示する情報を音声出力部２４に供給し、音声出力部２４は、音声メッセージの出力を終了する。
【００６８】
その後、処理はステップＳ９に進む。
【００６９】
ステップＳ７において、運転者が確認補助機器の方向と異なる方向を見ていないと判定された場合、すなわち、運転者が、警告を行っている確認補助機器の方向を継続して見ている場合、ステップＳ８の処理はスキップされ、運転者への警告が継続したまま、処理はステップＳ９に進む。
【００７０】
ステップＳ９において、状態検出部１０３は、車両の図示せぬ動力制御装置からの情報に基づいて、エンジンが停止されたかを判定する。エンジンが停止されていないと判定された場合、処理はステップＳ１に戻り、ステップＳ９において、エンジンが停止されたと判定されるまで、ステップＳ１乃至Ｓ９の処理が繰り返し実行される。
【００７１】
ステップＳ９において、エンジンが停止されたと判定された場合、監視処理は終了する。
【００７２】
このように、運転者が、周囲の状況を直接目視して確認せずに、確認補助機器のみを見て運転している場合、運転者に周囲の状況を直接目視して確認するように促すことにより、運転者が確認補助機器のみを見て運転することが防止される。また、運転者が見ている確認補助機器により、運転者の視覚に訴えるように警告が行われるとともに、音声メッセージにより、運転者の聴覚に訴えるように警告が行われるので、確実に運転者に警告が伝達される。
【００７３】
なお、以上の説明では、運転者の顔の向きに基づいて、運転者が確認補助機器の方向を所定の間見ているかを検出するようにしたが、視線方向検出部１０２により検出された運転者の視線の向き、または、運転者の顔の向きおよび視線の向きの両方に基づいて、運転者が確認補助機器の方向を所定の間見ているかを検出するようにしてもよい。
【００７４】
また、以上の説明では、確認補助機器の例として、カーナビゲーション装置２およびルームミラー３を例に挙げたが、その他の確認補助機器を継続して見ている場合についても、同様の処理に、運転者に対して警告を行うことが可能である。
【００７５】
また、以上の説明では、後進方向のギアに設定された場合のみ監視を行うようにしたが、ギアの設定に関わらず、運転者が所定の間確認補助機器を見ていることが検出された場合、常に運転者に対して警告を行うようにしてもよい。
【００７６】
さらに、ランプ６１およびランプ９１の代わりに、LED（Light Emitting Diode）などの他の発光手段を用いるようにしてもよい。
【００７７】
なお、本発明は、例えば、車両の運転を支援する運転支援装置に適用することができる。
【００７８】
上述した一連の処理は、ハードウエアにより実行させることもできるし、ソフトウエアにより実行させることもできる。一連の処理をソフトウエアにより実行させる場合には、そのソフトウエアを構成するプログラムが、専用のハードウエアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、プログラム記録媒体からインストールされる。
【００７９】
図１１は、上述した一連の処理をプログラムにより実行するパーソナルコンピュータの構成の例を示すブロック図である。CPU（Central Processing Unit）２０１は、ROM（Read Only Memory）２０２、または記録部２０８に記憶されているプログラムに従って各種の処理を実行する。RAM（Random Access Memory）２０３には、CPU２０１が実行するプログラムやデータなどが適宜記憶される。これらのCPU２０１、ROM２０２、およびRAM２０３は、バス２０４により相互に接続されている。
【００８０】
CPU２０１にはまた、バス２０４を介して入出力インタフェース２０５が接続されている。入出力インタフェース２０５には、キーボード、マウス、マイクロホンなどよりなる入力部２０６、ディスプレイ、スピーカなどよりなる出力部２０７が接続されている。CPU２０１は、入力部２０６から入力される指令に対応して各種の処理を実行する。そして、CPU２０１は、処理の結果を出力部２０７に出力する。
【００８１】
入出力インタフェース２０５に接続されている記録部２０８は、例えばハードディスクからなり、CPU２０１が実行するプログラムや各種のデータを記憶する。通信部２０９は、インターネットやローカルエリアネットワークなどのネットワークを介して外部の装置と通信する。
【００８２】
また、通信部２０９を介してプログラムを取得し、記録部２０８に記憶してもよい。
【００８３】
入出力インタフェース２０５に接続されているドライブ２１０は、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどのリムーバブルメディア２１１が装着されたとき、それらを駆動し、そこに記録されているプログラムやデータなどを取得する。取得されたプログラムやデータは、必要に応じて記録部２０８に転送され、記憶される。
【００８４】
コンピュータにインストールされ、コンピュータによって実行可能な状態とされるプログラムを格納するプログラム記録媒体は、図１１に示すように、磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM(Compact Disc-Read Only Memory),DVD(Digital Versatile Disc)を含む）、光磁気ディスク、もしくは半導体メモリなどよりなるパッケージメディアであるリムーバブルメディア２１１、または、プログラムが一時的もしくは永続的に格納されるROM２０２や、記録部２０８を構成するハードディスクなどにより構成される。プログラム記録媒体へのプログラムの格納は、必要に応じてルータ、モデムなどのインタフェースである通信部２０９を介して、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の通信媒体を利用して行われる。
【００８５】
なお、本明細書において、プログラム記録媒体に格納されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【００８６】
また、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。
【００８７】
さらに、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
【図面の簡単な説明】
【００８８】
【図１】本発明を適用した監視システムの一実施の形態の構成を示すブロック図である。
【図２】カメラの設置位置の例を模式的に示す図である。
【図３】カーナビゲーション装置とカメラの位置関係を模式的に示すとともに、カーナビゲーション装置に表示される画面の例を示す図である。
【図４】カーナビゲーション装置とカメラの位置関係を模式的に示すとともに、カーナビゲーション装置に表示される画面の他の例を示す図である。
【図５】ルームミラーとカメラの位置関係を模式的に示す図である。
【図６】図１の監視部の機能的構成を示すブロック図である。
【図７】図１の監視システムの監視処理を説明するためのフローチャートである。
【図８】顔の向きを検出する方法を説明するための図である。
【図９】顔の向きを検出する方法を説明するための図である。
【図１０】警告メッセージの表示の例を示す図である。
【図１１】パーソナルコンピュータの構成の例を示すブロック図である。
【符号の説明】
【００８９】
１  監視システム
２  カーナビゲーション装置
３  ルームミラー
１１  カメラ
１２  監視装置
２３  監視部
２４  音声出力部
５１  車両
５２  運転者
６１  ランプ
６２  ウインドウ
９１  ランプ
１０１  顔方向検出部
１０２  視線方向検出部
１０３  状態検出部
１０４  表示制御部
１０５  音声出力制御部
２０１  CPU
２０２  ROM
２０３  RAM
２０８  記録部
２１０  ドライブ
２１１  リムーバブルメディア
【図１】
2007233795.tif 000003
【図２】
2007233795.tif 000004
【図３】
2007233795.tif 000005
【図４】
2007233795.tif 000006
【図５】
2007233795.tif 000007
【図６】
2007233795.tif 000008
【図７】
2007233795.tif 000009
【図８】
2007233795.tif 000010
【図９】
2007233795.tif 000011
【図１０】
2007233795.tif 000012
【図１１】
2007233795.tif 000013