(57)【要約】【課題】車両に搭載し逐次路面の表面状態が変化し得る車両の前方路面については路面状態を正確に検出できないという課題があった。【解決手段】ヘッドライト３０が点灯される夜間における車両１００の前方の路面Ｒの路面状態（乾燥状態もしくは湿潤状態）を検出する際に、撮像部２０にて撮像した水平偏光画像（もしくは垂直偏光画像）における画像輝度に基づいた検出を行い、この画像輝度が輝度に対する閾値以上と判別された時（画像輝度が輝度に対する閾値より小さい場合は湿潤状態と判別する。）、垂直偏光画像および水平偏光画像が有する偏光特性に基づく偏光比強度による判別を行い、同偏光比強度が強度に対する閾値以上であると判別した時に、路面状態を湿潤状態と判別することによって（偏光比強度が強度に対する閾値より小さい場合は乾燥状態と判別する。）、路面状態の高精度の検出を実現する。【選択図】  図９
2004301708.tif 000002
【特許請求の範囲】
【請求項１】
前方路面を撮像可能に車両に設置され、ヘッドライトによって照射された同前方路面の垂直偏光画像および水平偏光画像を撮像する画像撮像手段と、
上記撮像された垂直偏光画像もしくは水平偏光画像の画像輝度および同垂直偏光画像と水平偏光画像の偏光比強度を取得する画像情報取得手段と、
上記取得した画像輝度が所定の輝度に対する閾値より小さいか否かを判別し、同輝度に対する閾値より小さいと判別した場合に上記前方路面を湿潤状態と検出し、同輝度に対する閾値以上であると判別した場合に上記取得した偏光比強度が所定の強度に対する閾値以上であるか否かを判別し、同強度に対する閾値以上であると判別した場合に、上記前方路面を湿潤状態と検出し、同強度に対する閾値より小さいと判別した場合に上記前方路面を乾燥状態と検出する路面状態検出手段とを具備することを特徴とする車両用路面状態検出装置。
【請求項２】
上記ヘッドライトの点灯強度を取得する点灯強度取得手段を有し、上記路面状態検出手段は、点灯強度の上昇に略対応させて上記の輝度に対する閾値を増加させる対応関係に基づき同取得した点灯強度に応じて上記輝度に対する閾値を変化させることを特徴とする上記請求項１に記載の車両用路面状態検出装置。
【請求項３】
ヘッドライトにて照射される前方路面の路面状態を検出する車両用路面状態検出方法であって、
前方路面を撮像可能に車両に設置された画像撮像手段に上記ヘッドライトによって照射された同前方路面の垂直偏光画像および水平偏光画像を撮像させる画像撮像工程と、
上記撮像された垂直偏光画像もしくは水平偏光画像の画像輝度および同垂直偏光画像と水平偏光画像の偏光比強度を取得する画像情報取得工程と、
上記取得した画像輝度が所定の輝度に対する閾値より小さいか否かを判別し、同輝度に対する閾値より小さいと判別した場合に上記前方路面を湿潤状態と検出し、同輝度に対する閾値以上であると判別した場合に上記取得した偏光比強度が所定の強度に対する閾値以上であるか否かを判別し、同強度に対する閾値以上であると判別した場合に、上記前方路面を湿潤状態と検出し、同強度に対する閾値より小さいと判別した場合に上記前方路面を乾燥状態と検出する路面状態検出工程とを具備することを特徴とする車両用路面状態検出方法。
【請求項４】
ヘッドライトにて照射される前方路面の路面状態を検出する機能をコンピュータにて実現可能にする車両用路面状態検出装置の制御プログラムであって、
前方路面を撮像可能に車両に設置された画像撮像手段に上記ヘッドライトによって照射された同前方路面の垂直偏光画像および水平偏光画像を撮像させる画像撮像機能と、
上記撮像された垂直偏光画像もしくは水平偏光画像の画像輝度および同垂直偏光画像と水平偏光画像の偏光比強度を取得する画像情報取得機能と、
上記取得した画像輝度が所定の輝度に対する閾値より小さいか否かを判別し、同輝度に対する閾値より小さいと判別した場合に上記前方路面を湿潤状態と検出し、同輝度に対する閾値以上であると判別した場合に上記取得した偏光比強度が所定の強度に対する閾値以上であるか否かを判別し、同強度に対する閾値以上であると判別した場合に、上記前方路面を湿潤状態と検出し、同強度に対する閾値より小さいと判別した場合に上記前方路面を乾燥状態と検出する路面状態検出機能とを具備することを特徴とする車両用路面状態検出装置の制御プログラム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、車両用路面状態検出装置、車両用路面状態検出方法および車両用路面状態検出装置の制御プログラムに関し、特に、夜間における車両の前方路面の路面状態を検出する車両用路面状態検出装置、車両用路面状態検出方法および車両用路面状態検出装置の制御プログラムに関する。
【０００２】
【従来の技術】
従来、この種の路面状態検出装置は、カメラにて路面画像を撮像し、同路面画像に基づいてこのカメラのレンズに入る路面の反射光の強さを計測し、同路面の光沢を測る。このとき、乾燥状態の路面は、表面が拡散面となり光沢が弱くなり、また、路面画像の領域内で光沢の強さはほぼ同一になる。一方、湿潤状態の路面は、表面が半鏡面状態となり光沢が強くなり、路面画像の領域内で光沢にムラが発生する。この特性の相異を判別するために、路面画像の映像信号をＲＧＢ値に変換し、このＲＧＢ値のＲＧＢ空間における広がりに基づいて路面状態を検出する。すなわち、ＲＧＢ空間におけるＲＧＢ値の分布の広がりが小さい場合は、路面画像の領域内における光沢の強さがほぼ同一であると判別し、路面が乾燥状態であると検出する。一方、ＲＧＢ空間におけるＲＧＢ値の分布の広がりが大きい場合は、路面画像の領域内における光沢にムラがあると判別し、路面が湿潤状態であると検出する（例えば、非特許文献１を参照。）。
【０００３】
【非特許文献１】
第１回ＩＴＳシンポジュウム２００２
２００２年１２月１５日（一橋記念講堂）発表論文
「画像式路面凍結検知装置における路面状態判別精度の考察」
【０００４】
【発明が解決しようとする課題】
上述した従来の路面状態検出装置は、予め規定した乾燥時におけるＲＧＢ空間におけるＲＧＢ値の分布と、湿潤時におけるＲＧＢ空間におけるＲＧＢ値の分布とに基づいて路面状態を検出する。すなわち、この従来の路面状態検出装置の撮像する路面は定点であり、この定点の路面について予め規定したＲＧＢ値の分布に基づいて路面状態を検出する。
従って、路面状態に依存しない環境の変化によってＲＧＢ値が変動した場合、この変動によって路面状態を誤検出してしまう。例えば、この路面状態検出装置を車両に搭載して夜間走行を行う場合、路面はヘッドライトの照射光による反射光によって支配的に照らし出される場合もあるし、ヘッドライトの照射光に街路灯などの外光が加わり、これらによる反射光によって照らし出される場合もある。すなわち、路面の光沢を示すＲＧＢ値が路面状態以外の要因で変化する。これにより路面状態を正確に検出することができないという課題がある。
【０００５】
本発明は、上記課題にかんがみてなされたもので、夜間において車両の前方路面の路面状態を精度良く検出することが可能な車両用路面状態検出装置、車両用路面状態検出方法および車両用路面状態検出装置の制御プログラムの提供を目的とする。
【０００６】
【課題を解決するための手段】
上記目的を達成するため、請求項１にかかる発明は、前方路面を撮像可能に車両に設置され、ヘッドライトによって照射された同前方路面の垂直偏光画像および水平偏光画像を撮像する画像撮像手段と、上記撮像された垂直偏光画像もしくは水平偏光画像の画像輝度および同垂直偏光画像と水平偏光画像の偏光比強度を取得する画像情報取得手段と、上記取得した画像輝度が所定の輝度に対する閾値より小さいか否かを判別し、同輝度に対する閾値より小さいと判別した場合に上記前方路面を湿潤状態と検出し、同輝度に対する閾値以上であると判別した場合に上記取得した偏光比強度が所定の強度に対する閾値以上であるか否かを判別し、同強度に対する閾値以上であると判別した場合に、上記前方路面を湿潤状態と検出し、同強度に対する閾値より小さいと判別した場合に上記前方路面を乾燥状態と検出する路面状態検出手段とを具備する構成としてある。
【０００７】
上記のように構成した請求項１にかかる発明においては、前方路面を撮像可能に車両に設置した画像撮像手段によってヘッドライトによって照射された同前方路面の垂直偏光画像および水平偏光画像を撮像する。ここで、画像情報取得手段は、垂直偏光画像および水平偏光画像が撮像されると、この垂直偏光画像もしくは水平偏光画像の画像輝度を取得するとともに、当該垂直偏光画像と水平偏光画像の偏光比強度を取得する。このとき、路面状態検出手段は、画像情報取得手段の取得した画像輝度が所定の輝度に対する閾値より小さいか否かを判別し、同輝度に対する閾値より小さいと判別した場合は前方路面を湿潤状態と検出する。一方、画像輝度が同輝度に対する閾値以上であると判別した場合、路面状態検出手段では、さらに取得した偏光比強度が所定の強度に対する閾値以上であるか否かを判別する。そして、この偏光比強度が同強度に対する閾値以上であると判別した場合は前方路面を湿潤状態と検出し、同強度に対する閾値より小さいと判別した場合は前方路面を乾燥状態と検出する。
【０００８】
つまり、ヘッドライトにて路面を照らし出したとき路面が乾燥状態であれば、ヘッドライトの照射光の反射光は、表面が凹凸面（粗面）の路面で乱反射する。一方、路面が湿潤状態であれば、ヘッドライトの照射光の反射光のうちほとんどは表面が鏡面の路面にて車両前方側に向かって反射する。従って、画像撮像手段が撮像したこの反射光に基づく路面画像の画像輝度は、路面が乾燥状態であるほど高くなる。このため、この画像輝度が輝度に対する閾値（路面状態が湿潤状態であると判別可能な輝度値を規定した閾値）より小さい場合は、路面が湿潤状態であると検出することができる。
【０００９】
しかし、夜間走行においてはヘッドライトの照射が支配的な場合もあるし、ヘッドライトの照射に街路灯などの施設照明が加わる場合もある。
このとき、かかる街路灯の外光によって画像輝度が増加してしまい、本来的には路面が湿潤状態であるにも関わらず、当該画像輝度が上記の輝度に対する閾値以上となり湿潤状態ではないと検出されることがあり得る。ここで、街路灯の外光が湿潤状態の路面（鏡面）で反射したとき、反射光に偏光特性が備わる。すなわち、路面が乾燥状態の場合は、画像撮像手段が入射する光の垂直偏光成分の強度と水平偏光成分の強度とはほぼ同等になる。一方、路面が湿潤状態の場合は垂直偏光成分の強度が水平偏光成分の強度より相対的に大きくなる。従って、垂直偏光成分と水平偏光成分に基づいて取得できる偏光比強度（垂直偏光成分の強度／水平偏光成分の強度）は、路面が湿潤状態であるほど大きくなる。
【００１０】
この偏光特性を利用し、画像輝度が輝度に対する閾値以上であると判別された場合に、取得した偏光比強度が強度に対する閾値（路面状態が湿潤状態であると判別可能な偏光比強度値を規定した閾値）以上であるか否かを判別し、偏光比強度が強度に対する閾値以上であると判別した場合には路面状態が湿潤状態であると検出し、強度に対する閾値より小さいと判別した場合には路面状態が乾燥状態であると検出する。これによって、取得した画像輝度に街路灯などの施設照明の外光による輝度が入り込んでいる場合においても、路面状態が湿潤状態であるか、乾燥状態であるかを精度良く検出することが可能になる。
【００１１】
なお、ヘッドライトはビームの位置によって路面を照らし出す度合いが異なってくるため、路面状態の判断基準となる画像輝度もこのヘッドライトの点灯強度によって変化してくる。このとき、ヘッドライトの点灯強度に応じて画像輝度の比較対象である閾値を変化させると、より精度良く路面状態を検出することが可能となり好適である。
【００１２】
そこで、請求項２にかかる発明は、上記請求項１に記載の車両用路面状態検出装置において、上記ヘッドライトの点灯強度を取得する点灯強度取得手段を有し、上記路面状態検出手段は、点灯強度の上昇に略対応させて上記の輝度に対する閾値を増加させる対応関係に基づき同取得した点灯強度に応じて上記輝度に対する閾値を変化させる構成としてある。
上記のように構成した請求項２にかかる発明においては、点灯強度取得手段にてヘッドライトの点灯強度を取得する。かかる場合、路面状態検出手段は点灯強度の上昇に略対応させて上記輝度に対する閾値を増加させる対応関係に基づき、上述した路面状態を検出するための輝度に対する閾値を点灯強度取得手段が取得した点灯強度に応じて変化させる。
【００１３】
ここで、上述してきたヘッドライトにて照射される前方路面の路面状態を検出する車両用路面状態検出装置は、ヘッドライトにて照射される前方路面の路面状態を検出する手順を提示した方法としても成立することは言うまでもない。
そこで、請求項３にかかる発明においては、ヘッドライトにて照射される前方路面の路面状態を検出する車両用路面状態検出方法であって、前方路面を撮像可能に車両に設置された画像撮像手段に上記ヘッドライトによって照射された同前方路面の垂直偏光画像および水平偏光画像を撮像させる画像撮像工程と、上記撮像された垂直偏光画像もしくは水平偏光画像の画像輝度および同垂直偏光画像と水平偏光画像の偏光比強度を取得する画像情報取得工程と、上記取得した画像輝度が所定の輝度に対する閾値より小さいか否かを判別し、同輝度に対する閾値より小さいと判別した場合に上記前方路面を湿潤状態と検出し、同輝度に対する閾値以上であると判別した場合に上記取得した偏光比強度が所定の強度に対する閾値以上であるか否かを判別し、同強度に対する閾値以上であると判別した場合に、上記前方路面を湿潤状態と検出し、同強度に対する閾値より小さいと判別した場合に上記前方路面を乾燥状態と検出する路面状態検出工程とを具備する構成とする。
必ずしも実体のある車両用路面状態検出装置に限らず、車両用路面状態検出方法としても有効であることに相違はない。
【００１４】
また、ヘッドライトにて照射される前方路面の路面状態を検出する方法および装置は、上述した車両用路面状態検出装置単独で実現される場合もあるし、ある機器に組み込まれた状態で利用されることもあるなど、発明の思想としては各種の態様を含むものであり、ソフトウェアであったりハードウェアであったりするなど、適宜変更可能である。発明の思想の具現化例として路面状態検出装置を制御するソフトウェアとなる場合には、当該ハードウェアやソフトウェアの記録媒体としても発明は成立する。
【００１５】
その一例として請求項４にかかる発明においては、ヘッドライトにて照射される前方路面の路面状態を検出する機能をコンピュータにて実現可能にする車両用路面状態検出装置の制御プログラムであって、前方路面を撮像可能に車両に設置された画像撮像手段に上記ヘッドライトによって照射された同前方路面の垂直偏光画像および水平偏光画像を撮像させる画像撮像機能と、上記撮像された垂直偏光画像もしくは水平偏光画像の画像輝度および同垂直偏光画像と水平偏光画像の偏光比強度を取得する画像情報取得機能と、上記取得した画像輝度が所定の輝度に対する閾値より小さいか否かを判別し、同輝度に対する閾値より小さいと判別した場合に上記前方路面を湿潤状態と検出し、同輝度に対する閾値以上であると判別した場合に上記取得した偏光比強度が所定の強度に対する閾値以上であるか否かを判別し、同強度に対する閾値以上であると判別した場合に、上記前方路面を湿潤状態と検出し、同強度に対する閾値より小さいと判別した場合に上記前方路面を乾燥状態と検出する路面状態検出機能とを具備する構成としてある。
すなわち、発明をコンピュータにて実現可能にするプログラムによって形成しても良い。むろん、そのソフトウェアの記録媒体は、磁気記録媒体であっても良いし、光磁気記録媒体であっても良いし、今後開発されるいかなる記録媒体においても全く同様に考えることができる。
【００１６】
また、一次複製品、二次複製品などの複製段階については全く問う余地も無く同様である。その他、供給方法として通信回線を利用して行う場合でも本発明が利用されていることには変わりないし、半導体チップに書き込まれたようなものであっても同様である。さらに、一部がソフトウェアであって、一部がハードウェアで実現されている場合においても発明の思想において全く異なるものではなく、一部を記録媒体上に記録しておいて必要に応じて適宜読み込まれているような形態のものとしてあっても良い。
【００１７】
【発明の効果】
以上説明したように本発明は、取得した画像輝度に街路灯などの施設照明の外光による輝度が入り込んでいる場合においても、路面状態が湿潤状態であるか、乾燥状態であるかを精度良く検出することが可能な車両用路面状態検出装置を提供することができる。
また、請求項２にかかる発明によれば、ヘッドライトの点灯強度に対応して適切な路面状態の検出を行うことが可能になる。
さらに、請求項３にかかる発明によれば、取得した画像輝度に街路灯などの施設照明の外光による輝度が入り込んでいる場合においても、路面状態が湿潤状態であるか、乾燥状態であるかを精度良く検出することが可能な車両用路面状態検出方法を提供することができる。
さらに、請求項４にかかる発明によれば、取得した画像輝度に街路灯などの施設照明の外光による輝度が入り込んでいる場合においても、路面状態が湿潤状態であるか、乾燥状態であるかを精度良く検出することが可能な車両用路面状態検出装置の制御プログラムを提供することができる。
【００１８】
【発明の実施の形態】
ここでは、下記の順序に従って本発明の実施形態について説明する。
（１）車両用路面状態検出装置の構成：
（２）前方路面の画像特性：
（３）路面状態検出処理の処理内容：
（４）変形例：
（５）まとめ：
【００１９】
（１）車両用路面状態検出装置の構成：
図１は、本発明にかかる車両用路面状態検出装置の構成を示したブロック構成図である。同図において、車両用路面状態検出装置１０は、内部にＣＰＵ１１を有し、同ＣＰＵ１１はバスラインを介して接続されたフレームメモリ１３と、ＲＯＭ１４と、ＲＡＭ１５と、ユーザインターフェース部１６と、Ｉ／Ｏ１７とを制御可能になっており、ＣＰＵ１１はＲＯＭ１４に格納されている所定機能を実現可能にする制御プログラムをＲＡＭ１５をワークエリアとして使用しつつ実行可能になっている。ここで、フレームメモリ１３にはアナログデータをデジタルデータに変換する機能を有するＡＤ変換器１２を介して撮像部２０が接続されている。この撮像部２０は車両の前方路面を撮像可能に設置されている。
【００２０】
撮像部２０にて撮像されたアナログデータの画像は、ＡＤ変換器１２にてデジタルデータに変換されるとともに、フレームメモリ１３によって取り込まれる。本実施形態では上述したように撮像部２０にて車両前方の路面を撮像する。また、本実施形態においては後述するとおり、撮像部２０にて車両の前方路面の垂直偏光画像と水平偏光画像を撮像し、この垂直偏光画像および水平偏光画像の偏光特性を利用して路面状態を検出する。このとき、垂直偏光画像の輝度情報に基づいた垂直偏光成分の強度と、水平偏光画像の輝度情報に基づいた水平偏光成分の強度とから取得される偏光比強度（垂直偏光成分の強度／水平偏光成分の強度）に基づいて路面状態を検出する。ユーザインターフェース部１６は車載テレビ等とのインターフェースであり検出した結果を同車載テレビに表示することによって運転者に通知可能になっている。また、Ｉ／Ｏ１７はヘッドライト３０に接続されており、ヘッドライト３０の点灯／消灯を示す信号や、ヘッドライト３０の点灯強度（ロービーム、ハイビームなど）を示す信号を入出力するインターフェースである。
【００２１】
図２は、上述した撮像部２０の構成を示したブロック構成図である。
同図において、撮像部２０は上述したとおり車両の前方路面を撮像する。このとき、路面から入射する視野像の垂直偏光画像および水平偏光画像を撮像する。このように、垂直偏光画像および水平偏光画像を撮像するために、同撮像部２０には、１：１の透過性を備えるハーフミラーボックス２１と、ミラー２２と、垂直偏光フィルタ２３と、水平偏光フィルタ２４と、垂直偏光フィルタ２３を介して視野像を撮像するＣＣＤ２５と、水平偏光フィルタ２４を介して視野像を撮像するＣＣＤ２６と、フィールドメモリ２７と、フィールドメモリ２８とを有する構成となっている。
【００２２】
ここで、撮像部２０に入力される視野像は、ハーフミラーボックス２１を通過してミラー２２で反射し、垂直偏光フィルタ２３を介してＣＣＤ２５に結像して垂直偏光画像を形成し、ハーフミラーボックス２１を透過し、水平偏光フィルタ２４を介してＣＣＤ２６に結像して水平偏光画像を形成する。そして、このように形成された垂直偏光画像はフィールドメモリ２７に格納される。また、水平偏光画像はフィールドメモリ２８に格納される。このフィールドメモリ２７，２８に格納された垂直偏光画像および水平偏光画像はＡＤ変換器１２を介してフレームメモリ１６に転送し、一旦格納させる。
【００２３】
本実施形態における撮像部２０では、上述のとおり、入射する視野像をハーフミラーボックス２１によって２つに分岐させることによって、垂直偏光画像および水平偏光画像を撮像することが可能な構成を採用した。むろん、垂直偏光画像および水平偏光画像を撮像する構成は、これに限定されるものではなく、例えば、垂直偏光フィルタを装着したＣＣＤと、水平偏光フィルタを装着したＣＣＤとによって個別に視野像を入射することにより、垂直偏光画像および水平偏光画像を撮像する構成を採用しても良い。また、これらに限定されるものでもなく、垂直偏光画像および水平偏光画像を撮像することが可能な構成であれば適宜選択可能である。
【００２４】
かかる構成において、本実施形態では点灯されたヘッドライト３０によって照射された車両の前方路面を撮像部２０にて撮像し、撮像した垂直偏光画像および水平偏光画像に基づいて同前方路面の路面状態（乾燥状態もしくは湿潤状態）を検出する手法について説明する。このとき、垂直偏光画像および水平偏光画像は、撮像部２０に入射する光に基づいて撮像されることになる。ここで、夜間走行時において撮像部２０に入射される光は、ヘッドライト３０の照射光に基づいた反射光に依存する場合（ヘッドライト３０の照射が支配的な場合）と、ヘッドライト３０の照射光に基づいた反射光に加えて街路灯などの施設照明に存在する場合との２つのパターンが勘案できる。そこで、先ず最初にヘッドライト３０の照射光に基づいた反射光に依存する場合について説明する。
【００２５】
（２）前方路面の画像特性：
図３は、路面が乾燥状態の場合におけるヘッドライト３０の照射光の反射状態を模式的に示した模式図である。
同図において、車両１００には前方の路面Ｒを照射可能にヘッドライト３０が設置されているとともに、この照射された路面Ｒを撮像可能な位置に撮像部２０が設置されている。ヘッドライト３０が点灯されると、同ヘッドライト３０の照射光Ｌ１は、路面Ｒに対して所定の入射角度にて照射される。路面Ｒが乾燥状態の場合、その表面は凹凸面（粗面）になっている。これにより、ヘッドライト３０の照射光Ｌ１の反射光Ｌ２は、路面Ｒにて乱反射される。従って、反射光Ｌ２の成分は、車両１００の前方側に向かうものもあるし、車両側に戻ってくるものもある。このとき、撮像部２０は乱反射により車両側に戻ってきた反射光Ｌ２を入射し、この反射光Ｌ２に基づいた垂直偏光画像および水平偏光画像を撮像する。一方、路面Ｒが湿潤状態の場合は、当該路面Ｒの凹凸面（粗面）に水が溜まり、表面が鏡面となる。次に、このときの照射光Ｌ１の反射について説明する。
【００２６】
図４は、路面が湿潤状態の場合におけるヘッドライト３０の照射光の反射状態を模式的に示した模式図である。
同図において、ヘッドライト３０から照射される照射光Ｌ１の路面Ｒに対する入射角度は、車両１００の前方側に対し路面Ｒの照射範囲を大きくとるために小さく設定されている。このとき、湿潤状態に起因して路面Ｒの表面が鏡面を形成している場合においては入射角度が小さい照射光Ｌ１の反射光Ｌ２のほとんどが車両１００の前方側に向かってしまうことになる。従って、撮像部２０が入射する反射光Ｌ２は微弱ものとなる。かかる場合、撮像部２０はこの微弱な反射光Ｌ２に基づいた垂直偏光画像および水平偏光画像を撮像することになる。
【００２７】
このように路面Ｒの路面状態（乾燥状態もしくは湿潤状態）に応じて撮像部２０に入射される反射光Ｌ２の強度は異なる。従って、乾燥状態において撮像された垂直偏光画像もしくは水平偏光画像の画像輝度と、湿潤状態において撮像された垂直偏光画像および水平偏光画像の画像輝度とは大きく異なってくる。すなわち、路面Ｒが乾燥状態の場合は画像輝度が高くなり、路面Ｒが湿潤状態の場合は画像輝度が低くなる。本実施形態では予め所定の輝度に対する閾値を規定しておき、画像輝度がこの輝度に対する閾値以上の場合に照射光Ｌ１が路面Ｒで乱反射していると判断し、路面状態を乾燥状態であると検出する。一方、画像輝度がこの輝度に対する閾値より小さい場合に照射光Ｌ１の反射光Ｌ２のほとんどが車両１００の前方側に反射してしまっていると判断し、路面状態を湿潤状態であると検出する。この検出機能は後述する路面状態検出処理にて実現される。
【００２８】
このように夜間走行時においてヘッドライト３０の照射が支配的な状況においては、ヘッドライト３０の照射光Ｌ１の路面Ｒにおける反射光Ｌ２に基づいて撮像される垂直偏光画像もしくは水平偏光画像の画像輝度により路面状態（乾燥状態もしくは湿潤状態）を検出することが可能になる。一方、ヘッドライト３０の照射に加えて街路灯などの施設照明が加わった場合、この加わった街路灯などの施設照明により撮像部２０に入射される光は強くなる。すなわち、垂直偏光画像もしくは水平偏光画像の画像輝度は上昇する。従って、路面状態が湿潤状態であっても、この街路灯などの施設照明のため、画像輝度が上昇してしまい、上述した輝度に対する閾値以上になり、路面状態が乾燥状態であると誤検出してしまう。ここで、路面Ｒが湿潤状態の場合、街路灯などの施設照明の反射光は、偏光特性を示すことが知られている。従って、撮像部２０が撮像した垂直偏光画像および水平偏光画像の偏光特性に基づいて路面状態が乾燥状態であるか湿潤状態であるかを検出することが可能になる。次に、ヘッドライト３０の照射に加えて街路灯などの施設照明が存在する場合について説明する。
【００２９】
図５は、路面が乾燥状態の場合におけるヘッドライト３０の照射光および街路灯の外光の反射状態を模式的に示した模式図である。
同図においては、施設照明として街路灯４０が路面Ｒを照射している状態を示している。上述したように路面Ｒが乾燥状態のとき表面は凹凸面（粗面）になっているので、街路灯４０が照射する外光Ｌ３の反射光Ｌ４は当該路面Ｒにて乱反射される。従って、反射光Ｌ４の成分は、車両１００の前方側に向かうものもあるし、車両側に向かうものもある。このとき、撮像部２０は乱反射により車両側に戻ってきた上述した照射光Ｌ１の反射光Ｌ２および外光Ｌ３の反射光Ｌ４を入射し、この反射光Ｌ２，Ｌ４に基づいた垂直偏光画像および水平偏光画像を撮像する。
【００３０】
図６は、路面が乾燥状態の場合における街路灯４０の外光Ｌ３の偏光特性を模式的に示した模式図である。
同図において、路面Ｒが乾燥状態の場合は、撮像部２０に入射される光は路面Ｒの凹凸面（粗面）に反射したものとなる。このように粗面における反射は乱反射が支配的となり、反射光は偏光特性を示さず、垂直偏光成分および水平偏光成分の反射率はほぼ等しくなる。すなわち、撮像部２０の垂直偏光フィルタ２３にて抽出される垂直偏光成分Ｓ１の反射光である垂直偏光成分Ｓ１１の強度と、水平偏光フィルタ２４にて抽出される水平偏光成分Ｓ２の反射光である水平偏光成分Ｓ２１の強度とを比較すると、ほぼ同等の強度となる。
【００３１】
図７は、路面が湿潤状態の場合におけるヘッドライト３０の照射光および街路灯の外光の反射状態を模式的に示した模式図である。
同図においては、施設照明として街路灯４０が路面Ｒを照射している状態を示している。上述したように路面Ｒが湿潤状態のとき表面は鏡面になっている。このとき、街路灯４０が照射する外光Ｌ３の反射光Ｌ４は、当該路面Ｒにて反射する際に偏光特性を示すことになる。次に、この偏光特性について説明する。図８は、路面が湿潤状態の場合における街路灯４０の外光Ｌ３の偏光特性を模式的に示した模式図である。同図において、撮像部２０に入射される光はこの鏡面にて反射したものとなり、反射光は偏光特性を示す。
【００３２】
このとき、水平偏光成分の反射率は、垂直偏光成分の反射率に比べて小さくなる。すなわち、撮像部２０の垂直偏光フィルタ２３にて抽出される垂直偏光成分Ｓ１の反射光である垂直偏光成分Ｓ１２の強度と、水平偏光フィルタ２４にて抽出される水平偏光成分Ｓ２の反射光である水平偏光成分Ｓ２２の強度とを比較すると、垂直偏光成分Ｓ１２の強度の方が相対的に強くなる。従って、この垂直偏光成分と水平偏光成分の強度にて規定される偏光比強度（垂直偏光成分／水平偏光偏光成分）は乾燥状態に比べて大きくなる。以上より、この偏光比強度に基づいて路面状態を検出することが可能になる。かかる検出機能も次に説明する路面状態検出処理にて実現される。
【００３３】
（３）路面状態検出処理の処理内容：
図９は、ＣＰＵ１１にて実行される路面状態検出処理の処理内容を示したフローチャートである。
同図において、先ず最初に撮像部２０に視野像の垂直偏光画像および水平偏光画像を撮像させる（ステップＳ１０５）。次に、水平偏光画像（もしくは垂直偏光画像）の画像輝度を取得する（ステップＳ１１０）。この画像輝度は水平偏光画像（もしくは垂直偏光画像）を構成する各画素の輝度値に基づいて算出する。ここで、この取得した画像輝度が上記した所定の輝度に対する閾値以上であるか否かを判別し（ステップＳ１１５）、同判別にて画像輝度が輝度に対する閾値以上と判別すると、垂直偏光成分および水平偏光成分の強度を算出するとともに（ステップＳ１２０）、偏光比強度を算出する（ステップＳ１２５）。そして、この算出した偏光比強度が所定の強度に対する閾値以上であるか否かを判別し（ステップＳ１３０）、同判別にて偏光比強度が強度に対する閾値より小さいと判別すると、路面Ｒの路面状態を乾燥状態とする（ステップＳ１３５）。
【００３４】
一方、ステップＳ１１５にて画像輝度が輝度に対する閾値より小さいと判別した場合およびステップＳ１３０にて偏光比強度が強度に対する閾値以上と判別した場合は、路面Ｒの路面状態を湿潤状態と検出する（ステップＳ１４０）。以上のように路面状態を検出すると、ユーザインターフェース部１６の制御を介して当該検出された各路面状態を車載テレビに表示し、運転者において視認可能に通知する（ステップＳ１４５）。むろん、この通知は車載テレビに表示する態様に限定されず、スピーカから音のみで通知しても良いし、フロントパネルに配置されたランプなどの発光手段にて通知しても良い。このとき路面状態、例えば湿潤度合いに従って音量もしくは発光色を変化させればより好ましい。
【００３５】
図１０は、上述した路面状態検出処理の検証結果を示した図である。
同図においては、横軸に時系列のサンプルポイントを規定し、縦軸に偏光比強度および路面輝度を規定してあり、夜間フィールドにおいて収集したデータに基づいて抽出した路面Ｒについての画像輝度および偏光比強度の時間推移を示している。ここで、折れ線グラフＧ１はサンプルポイントにおける路面輝度の変化を示しており、折れ線グラフＧ２はサンプルポイントにおける偏光比強度の変化を示している。一方、帯グラフＧ３は上段（真値）と下段（検出結果）とから構成されている。この上段（真値）は目視により検出した実際の路面状況を示している。また、下段（検出結果）は本実施形態にかかる路面状態検出処理によって検出した路面状態の検出結果を示しており、湿潤状態と検出したサンプルポイントを黒で示し、乾燥状態と検出したサンプルポイントを白で示している。一方、反転（湿潤状態の場合は白反転、乾燥状態の場合は黒反転）しているサンプルポイントは誤検出を示している。
【００３６】
また、図１１は目視により判定した実際の路面状態と、本実施形態にかかる路面状態検出処理の検出結果を比較し、その一致度合いによって算出した検出精度を示している。同図において、目視により判定した実際の路面状態が乾燥状態であるサンプルポイントは６７個であり、これに対して本実施形態にかかる路面状態検出処理ではこの６７個のサンプルポイントのうち６３個を乾燥状態であると検出している（正解数）。すなわち、正解率は９４．０％である。一方、目視により判定した実際の路面状態が湿潤状態であるサンプルポイントは９１個であり、これに対して本実施形態にかかる路面状態検出処理ではこの９１個のサンプルポイントのうち８５個を湿潤状態であると検出している（正解数）。すなわち、正解率は９３．４％である。このように、目視による実際の路面状態と、本実施形態にかかる路面状態検出処理の処理結果による路面状態とでは、多少のオーバーラップが存在するものの良好な結果が得られており、本実施形態による夜間における路面状態検出手法は、その有効性が検証された。
【００３７】
ここで、上述した実施形態においては、路面状態検出処理にて先ず最初に画像輝度に基づいた判別を行い、その後に偏光比強度による判別を行う手法を採用し、より高精度な路面状態の検出を実現可能にした。図１０から分かるとおり、輝度に対する閾値に対する折れ線グラフＧ１の変動を考察すると、画像輝度による判別のみであっても、路面状態の概略的な傾向を把握することが可能である。従って、上述した路面状態検出処理におけるステップＳ１１５にて画像輝度が輝度に対する閾値以上の場合に路面状態を乾燥状態と判別し、画像輝度が輝度に対する閾値より小さい場合に路面状態を湿潤状態と判別するようにしても精度は上述した手法よりは低下するものの、路面状態検出処理の処理構成を簡素化でき、処理の高速化を図ることが可能になるという点で有用となり得る。
【００３８】
（４）変形例：
上述した実施形態では輝度に対する閾値を固定した。一方、ヘッドライト３０の照射は段階的に設定が変更され得る。例えば、ロービームの設定の場合もあるし、ハイビームの設定の場合もある。このように設定が異なれば、ヘッドライト３０が照射する照射光Ｌ１による反射光Ｌ２の強度が異なってくる。従って、輝度閾値が固定であると、この反射強度の相異に対応できない場合が発生し得る。そこで、この変形例ではヘッドライト３０の設定に応じて輝度に対する閾値の設定を変える手法を採用する。図１２は、かかる機能を実現する際にＣＰＵ１１にて実行される輝度閾値設定処理の処理内容を示したフローチャートである。
【００３９】
同図において、先ず最初にＩ／Ｏ１７を介してヘッドライト３０の点灯強度（ロービーム設定もしくはハイビーム設定）を取得する（ステップＳ２０５）。次に、この取得した点灯強度がロービーム設定であるか否かを判別する（ステップＳ２１０）。点灯強度がロービーム設定であると判別した場合は、ＲＯＭ１４に格納されている通常の輝度に対する閾値データを読み出す（ステップＳ２１５）。一方、点灯強度がハイビーム設定であると判別した場合は、ＲＯＭ１４に格納されているハイビーム用の輝度に対する閾値データを読み出す（ステップＳ２２０）。そして、読み出した輝度に対する閾値データを上述した路面状態検出処理に使用する閾値として設定する（ステップＳ２２５）。このようにヘッドライト３０の点灯強度の変化に応じて画像輝度を判別するための輝度閾値を可変することによって、ヘッドライトの経年変化を含む点灯強度の変化に追従可能なより高精度の路面状態の検出を実現することを可能にする。
【００４０】
（５）まとめ：
このように、ヘッドライト３０が点灯される夜間における車両１００の前方の路面Ｒの路面状態（乾燥状態もしくは湿潤状態）を検出する際に、第１段階として撮像部２０にて撮像した水平偏光画像（もしくは垂直偏光画像）における画像輝度に基づいた検出を行い、この画像輝度が輝度に対する閾値以上と判別されたとき（画像輝度が輝度に対する閾値より小さい場合は湿潤状態と判別する。）、第２段階として同垂直偏光画像および水平偏光画像が有する偏光特性に基づく偏光比強度による判別を行い、この偏光比強度が強度に対する閾値以上であると判別したときに路面状態を湿潤状態と判別することによって（偏光比強度が偏光比閾値より小さい場合は乾燥状態と判別する。）、当該路面状態の高精度の検出を実現することを可能にする。
【図面の簡単な説明】
【図１】本発明にかかる車両用路面状態検出装置の構成を示したブロック構成図である。
【図２】撮像部の構成を示したブロック構成図である。
【図３】路面が乾燥状態の場合におけるヘッドライトの照射光の反射状態を模式的に示した模式図である。
【図４】路面が湿潤状態の場合におけるヘッドライトの照射光の反射状態を模式的に示した模式図である。
【図５】路面が乾燥状態の場合におけるヘッドライト図の照射光および街路灯の外光の反射状態を模式的に示した模式図である。
【図６】路面が乾燥状態の場合における街路灯の外光の偏光特性を模式的に示した模式図である。
【図７】路面が湿潤状態の場合におけるヘッドライトの照射光および街路灯の外光の反射状態を模式的に示した模式図である。
【図８】路面が湿潤状態の場合における街路灯の外光の偏光特性を模式的に示した模式図である。
【図９】路面状態検出処理の処理内容を示したフローチャートである。
【図１０】路面状態検出処理の検証結果を示した図である。
【図１１】路面状態検出処理の検証結果の精度について検証した結果を示した図である。
【図１２】輝度閾値設定処理の処理内容を示したフローチャートである。
【符号の説明】
１０…車両用路面状態検出装置
１１…ＣＰＵ
１２…ＡＤ変換器
１３…フレームメモリ
１４…ＲＯＭ
１５…ＲＡＭ
１６…ユーザインターフェース部
２０…撮像部
２１…ハーフミラーボックス
２２…ミラー
２３…垂直偏光フィルタ
２４…水平偏光フィルタ
２５…ＣＣＤ
２６…ＣＣＤ
２７…フィールドメモリ
２８…フィールドメモリ
【図１】
2004301708.tif 000003
【図２】
2004301708.tif 000004
【図３】
2004301708.tif 000005
【図４】
2004301708.tif 000006
【図５】
2004301708.tif 000007
【図６】
2004301708.tif 000008
【図７】
2004301708.tif 000009
【図８】
2004301708.tif 000010
【図９】
2004301708.tif 000011
【図１０】
2004301708.tif 000012
【図１１】
2004301708.tif 000013
【図１２】
2004301708.tif 000014