(57)【特許請求の範囲】
【請求項１】
光源が光源光を照射する照射期間中に光透過性部材を経由して受光手段により受光される受光量に基づいて、該光透過性部材に付着する付着物を検出する付着物検出処理を実行し、該付着物検出処理の検出結果を出力する付着物検出処理手段を備えた付着物検出装置において、
前記付着物検出処理手段は、前記光源が光源光を照射しない非照射期間中に前記受光手段により受光される受光量に応じて、該非照射期間の後に前記光源が光源光を照射する予定の予定照射期間に対応する付着物検出処理を実行するか否かを決定し、照射期間の前又は後の非照射期間中に前記受光手段により受光される受光量を用いずに、該照射期間中に前記受光手段により受光される受光量を用いて前記付着物検出処理を実行することを特徴とする付着物検出装置。
【請求項２】
請求項１に記載の付着物検出装置において、
前記光源から光源光を照射させるか否かの制御を行う光源制御手段を有し、
前記光源制御手段は、前記予定照射期間中は前記光源から光源光を照射させない制御を行うことを特徴とする付着物検出装置。
【請求項３】
光源が光源光を照射する照射期間中に光透過性部材を経由して受光手段により受光される受光量に基づいて、該光透過性部材に付着する付着物を検出する付着物検出処理を実行し、該付着物検出処理の検出結果を出力する付着物検出処理手段を備えた付着物検出装置において、
前記付着物検出処理手段は、前記光源が光源光を照射しない非照射期間中に前記受光手段により受光される受光量に応じて、該非照射期間の前又は後の照射期間に対応する付着物検出処理の検出結果を出力するか否かを決定し、照射期間の前又は後の非照射期間中に前記受光手段により受光される受光量を用いずに、該照射期間中に前記受光手段により受光される受光量を用いて前記付着物検出処理を実行することを特徴とする付着物検出装置。
【請求項４】
請求項１乃至３のいずれか１項に記載の付着物検出装置において、
前記付着物検出処理手段は、前記非照射期間中に前記受光手段により受光される受光量が所定の閾値を超えるとき、前記予定照射期間に対応する付着物検出処理を実行しない決定、又は、該非照射期間の前又は後の照射期間に対応する付着物検出処理の検出結果を出力しない決定を行うことを特徴とする付着物検出装置。
【請求項５】
請求項１乃至４のいずれか１項に記載の付着物検出装置において、
前記光源は、特定の波長帯をもつ光源光を照射するものであり、
前記受光手段は、前記特定の波長帯を通過させるが該特定の波長帯から外れた波長帯を通過させない波長選択フィルタを介して受光するものであることを特徴とする付着物検出装置。
【請求項６】
付着物検出装置により検出した付着物の検出結果に基づいて、移動体に搭載された所定の機器を制御する移動体機器制御手段を備えた移動体機器制御システムにおいて、
前記付着物検出装置として、請求項１乃至５のいずれか１項に記載の付着物検出装置を用いることを特徴とする移動体機器制御システム。
【請求項７】
請求項１乃至５のいずれか１項に記載の付着物検出装置のコンピュータを機能させる付着物検出用プログラムであって、
前記コンピュータを前記付着物検出処理手段として機能させることを特徴とする付着物検出用プログラム。
【請求項８】
光源が光源光を照射する照射期間中に光透過性部材を経由して受光手段により受光される受光量に基づいて、該光透過性部材に付着する付着物を検出する付着物検出処理を実行し、該付着物検出処理の検出結果を出力する付着物検出方法において、
前記光源が光源光を照射しない非照射期間中に前記受光手段により受光される受光量に応じて、該非照射期間の後に前記光源が光源光を照射する予定の予定照射期間に対応する付着物検出処理を実行するか否かを決定し、照射期間の前又は後の非照射期間中に前記受光手段により受光される受光量を用いずに、該照射期間中に前記受光手段により受光される受光量を用いて前記付着物検出処理を実行することを特徴とする付着物検出方法。
【請求項９】
光源が光源光を照射する照射期間中に光透過性部材を経由して受光手段により受光される受光量に基づいて、該光透過性部材に付着する付着物を検出する付着物検出処理を実行し、該付着物検出処理の検出結果を出力する付着物検出方法において、
前記光源が光源光を照射しない非照射期間中に前記受光手段により受光される受光量に応じて、該非照射期間の前又は後の照射期間に対応する付着物検出処理の検出結果を出力するか否かを決定し、照射期間の前又は後の非照射期間中に前記受光手段により受光される受光量を用いずに、該照射期間中に前記受光手段により受光される受光量を用いて前記付着物検出処理を実行することを特徴とする付着物検出方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、付着物検出装置、移動体機器制御システム、付着物検出用プログラム及び付着物検出方法に関するものである。
【背景技術】
【０００２】
従来、光源からの光源光を光透過性部材に照射し、その光透過性部材を経由して受光手段により受光される受光量に基づいて、その光透過性部材に付着する付着物を検出する付着物検出装置が知られている。
【０００３】
例えば、特許文献１には、光源が照射した光源光によって照明された自動車のフロントガラスからの反射光を画像センサの雨滴検出領域で受光して撮像し、フロントガラス上に付着している雨滴を検出する雨滴検出装置が開示されている。この雨滴検出装置は、雨滴の検出精度を低下させる光源光以外の外乱光の影響を抑制するため、光源の点灯時（照明期間中）に撮像した点灯時画像と、光源の消灯時（非照明期間中）に撮像した消灯時画像との差分情報に基づいて雨滴を検出する。消灯時画像は外乱光のみを映し出すものであるため、点灯時画像から消灯時画像を差し引いて得られる差分情報は、点灯時画像から外乱光成分を除外したものとなる。特許文献１には、このような差分情報に基づいて雨滴検出を行うことにより、外乱光の影響を抑制した雨滴検出処理が可能となる旨が記載されている。
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところが、このような差分情報に基づいて雨滴等の付着物の検出処理を行う場合でも、外乱光の影響を完全に取り除くことはできない。差分情報中における外乱光成分の残存量は、付着物検出の誤差の大きさに影響を与えることになる。しかも、この残存量は、撮像状況等によって全く異なり、大きなバラツキをもつ。そのため、付着物の検出結果にも大きなバラツキが生じ、その検出結果を利用する後段の処理で付着物の検出結果のバラツキにより様々な支障を来すおそれがある。
【０００５】
なお、この課題は、光源が光源光を照射する照射期間中に光透過性部材を経由して受光手段により受光される受光量に基づいて、その光透過性部材に付着する付着物を検出する付着物検出処理を実行する付着物検出装置であれば生じ得るものである。したがって、上述した差分情報を用いて付着物検出処理を行う場合に限らず、照射期間中に受光手段で受光される受光量のみを用いて付着物検出処理を実行する場合でも、上述した課題が生じ得る。
【課題を解決するための手段】
【０００６】
上述した課題を解決するために、本発明は、光源が光源光を照射する照射期間中に光透過性部材を経由して受光手段により受光される受光量に基づいて、該光透過性部材に付着する付着物を検出する付着物検出処理を実行し、該付着物検出処理の検出結果を出力する付着物検出処理手段を備えた付着物検出装置において、前記付着物検出処理手段は、前記光源が光源光を照射しない非照射期間中に前記受光手段により受光される受光量に応じて、該非照射期間の後に前記光源が光源光を照射する予定の予定照射期間に対応する付着物検出処理を実行するか否かを決定し、照射期間の前又は後の非照射期間中に前記受光手段により受光される受光量を用いずに、該照射期間中に前記受光手段により受光される受光量を用いて前記付着物検出処理を実行することを特徴とする。
【発明の効果】
【０００７】
本発明によれば、付着物の検出結果を利用する後段の処理で支障を来す事態を抑制できるという優れた効果が奏される。
【図面の簡単な説明】
【０００８】
【図１】実施形態１における移動体機器制御システムの概略構成を示す模式図である。
【図２】同移動体機器制御システムにおける撮像ユニットの概略構成を示す模式図である。
【図３】同撮像ユニットに設けられる撮像部の概略構成を示す説明図である。
【図４】フロントガラスの外壁面上の雨滴に撮像レンズの焦点が合っている場合における、雨滴検出用の撮像画像データである赤外光画像データを示す説明図である。
【図５】無限遠に焦点が合っている場合における、雨滴検出用の撮像画像データである赤外光画像データを示す説明図である。
【図６】雨滴検出用画像領域に対応する光学フィルタ部分に配置されるフィルタの一例を示す説明図である。
【図７】雨滴検出用画像領域に対応する光学フィルタ部分に配置されるフィルタの他の例を示す説明図である。
【図８】（ａ）は、同光学フィルタの断面図であり、（ｂ）は同光学フィルタの画像センサ側の正面図である。
【図９】撮像画像データの画像例を示す説明図である。
【図１０】実施形態１における撮像部の詳細を示す説明図である。
【図１１】同撮像部を構成する光学フィルタと画像センサとを光透過方向に対して直交する方向から見たときの模式拡大図である。
【図１２】雨滴が付着している状態の実験結果を示す図である。
【図１３】雨滴が付着していない状態の実験結果を示す図である。
【図１４】実施形態１において、雨滴量が異なる雨滴検出用画像領域の状態を示す拡大図である。
【図１５】実施形態１における撮像動作の一例を簡易的に示したタイミングチャートである。
【図１６】（ａ）は、センシング用フレームにおける、ローリングシャッタ方式によるデータ読み出しタイミングと露光期間の関係を説明する説明図である。（ｂ）は、雨滴検出用フレームにおける、ローリングシャッタ方式によるデータ読み出しタイミングと露光期間の関係を説明する説明図である。
【図１７】雨滴検出用フレームにおけるライン読出信号と光源の発光タイミングとの関係の一例を示すタイミングチャートである。
【図１８】各ラインの露光期間内における光源の発光時期の一例を示す説明図である。
【図１９】各ラインの露光期間内における光源の発光時期の他の例を示す説明図である。
【図２０】実験例において、光源がＯＮであるときの外乱光が含まれる雨滴検出用画像領域の画像例を示すものである。
【図２１】実験例において、光源がＯＮであるときの外乱光が含まれない雨滴検出用画像領域の画像例を示すものである。
【図２２】図２０に示す画像例において光源光が映し出されている画像部分を拡大した図である。
【図２３】実施形態１における雨滴検出処理のフローチャートである。
【図２４】変形例１における雨滴検出処理のフローチャートである。
【図２５】変形例２における撮像動作及び光源の点灯制御の一例を簡易的に示したタイミングチャートである。
【図２６】変形例２における雨滴検出処理のフローチャートである。
【図２７】変形例２においてグローバルシャッタ方式を採用した場合の例を示す説明図である。
【図２８】実施形態２における撮像ユニットの概略構成を示す模式図である。
【図２９】実施形態２において、雨滴量が異なる雨滴検出用画像領域の状態を示す拡大図である。
【発明を実施するための形態】
【０００９】
〔実施形態１〕
以下、本発明に係る付着物検出装置を適用した移動体機器制御システムの一実施形態（以下、本実施形態を「実施形態１」という。）について説明する。
なお、本発明に係る付着物検出装置は、移動体機器制御システムに限らず、例えば、光透過性部材に付着する付着物を検出するその他のシステムにも適用できる。
【００１０】
図１は、本実施形態１における移動体機器制御システムの概略構成を示す模式図である。
移動体機器制御システムは、移動体である自動車などの自車両１００に搭載された撮像装置で撮像した撮像画像を利用して、ヘッドランプの配光制御、ワイパーの駆動制御、その他の車載機器の制御を行うものである。
【００１１】
本実施形態１の移動体機器制御システムは、図１に示すように、撮像部を有する撮像ユニット１０１と、画像解析ユニット１０２と、車両走行制御ユニット１０８と、ワイパー制御ユニット１０６と、ヘッドランプ制御ユニット１０３とを主に備えている。ここで、車両走行制御ユニット１０８、ワイパー制御ユニット１０６、ヘッドランプ制御ユニット１０３は、自車両１００に搭載されている各種車載機器を制御する制御部として機能する。
【００１２】
本実施形態１の移動体機器制御システムに設けられる撮像部は、撮像ユニット１０１に設けられており、走行する自車両１００の進行方向前方領域を撮像領域として撮像するものであり、例えば、自車両１００のフロントガラス１０５のルームミラー付近に設置される。撮像ユニット１０１の撮像部で撮像された撮像画像データは、画像解析ユニット１０２に入力される。
【００１３】
画像解析ユニット１０２は、撮像部から送信されてくる撮像画像データを解析し、自車両１００の前方に存在する他車両の位置、方角、距離を算出したり、フロントガラス１０５に付着する雨滴や付着物などの付着物を検出したり、撮像領域内に存在する路面上の白線（区画線）等の検出対象物を検出したり、雨量を算出したりする。他車両の検出では、他車両のテールランプを識別することで自車両１００と同じ進行方向へ進行する先行車両を検出し、他車両のヘッドランプを識別することで自車両１００とは反対方向へ進行する対向車両を検出する。
【００１４】
画像解析ユニット１０２の算出結果は、ヘッドランプ制御ユニット１０３に送られる。ヘッドランプ制御ユニット１０３は、例えば、画像解析ユニット１０２が算出した距離データから、自車両１００の車載機器であるヘッドランプ１０４を制御する制御信号を生成する。具体的には、例えば、先行車両や対向車両の運転者の目に自車両１００のヘッドランプの強い光が入射するのを避けて他車両の運転者の幻惑防止を行いつつ、自車両１００の運転者の視界確保を実現できるように、ヘッドランプ１０４のハイビームおよびロービームの切り替えを制御したり、ヘッドランプ１０４の部分的な遮光制御を行ったりする。
【００１５】
画像解析ユニット１０２の算出結果は、ワイパー制御ユニット１０６にも送られる。ワイパー制御ユニット１０６は、自車両１００の車載機器であるワイパー１０７を制御して、自車両１００のフロントガラス１０５に付着した雨滴や付着物などの付着物を除去する。ワイパー制御ユニット１０６は、画像解析ユニット１０２が検出した付着物検出結果を受けて、ワイパー１０７を制御する制御信号を生成する。ワイパー制御ユニット１０６により生成された制御信号がワイパー１０７に送られると、自車両１００の運転者の視界を確保するべく、ワイパー１０７を稼動させる。
【００１６】
また、画像解析ユニット１０２の算出結果は、車両走行制御ユニット１０８にも送られる。車両走行制御ユニット１０８は、画像解析ユニット１０２が検出した白線検出結果に基づいて、白線によって区画されている車線領域から自車両１００が外れている場合等に、自車両１００の運転者へ警告を報知したり、自車両１００のハンドルやブレーキを制御したりするなどの車線維持制御を行う。
【００１７】
図２は、撮像ユニット１０１の概略構成を示す模式図である。
図３は、撮像ユニット１０１に設けられる撮像部２００の概略構成を示す説明図である。
撮像ユニット１０１は、撮像部２００と、光源２０２と、これらを収容する撮像ケース２０１とから構成されている。撮像ユニット１０１は自車両１００のフロントガラス１０５の内壁面側に設置される。撮像部２００は、図３に示すように、撮像レンズ２０４と、光学フィルタ２０５と、画像センサ２０６とから構成されている。光源２０２は、フロントガラス１０５に向けて光を照射し、その光がフロントガラス１０５の外壁面で反射したときにその反射光が撮像部２００へ入射するように配置されている。
【００１８】
本実施形態１において、光源２０２は、フロントガラス１０５の外壁面に付着した付着物（以下、付着物が雨滴である場合を例に挙げて説明する。）を検出するためのものである。フロントガラス１０５の外壁面に雨滴２０３が付着している場合、光源２０２から照射された光は、フロントガラス１０５の外壁面と外気との界面で反射し、その反射光が撮像部２００へ入射する。このような撮像部２００の撮像画像データから、フロントガラス１０５に付着する雨滴２０３の検出を行う。
【００１９】
また、本実施形態１において、撮像ユニット１０１は、図２に示すとおり、撮像部２００や光源２０２を、フロントガラス１０５とともに撮像ケース２０１で覆っている。このように撮像ケース２０１で覆うことにより、フロントガラス１０５の内壁面が曇るような状況であっても、撮像ユニット１０１で覆われたフロントガラス１０５が曇ってしまう事態を抑制できる。よって、フロントガラス１０５の曇りによって画像解析ユニット１０２が誤解析するような事態を抑制でき、画像解析ユニット１０２の解析結果に基づく各種制御動作を適切に行うことができる。
【００２０】
ただし、フロントガラス１０５の曇りを撮像部２００の撮像画像データから検出して、例えば自車両１００の空調設備を制御する場合には、撮像部２００に対向するフロントガラス１０５の部分が他の部分と同じ状況となるように、撮像ケース２０１の一部に空気の流れる通路を形成してもよい。
【００２１】
ここで、本実施形態１では、撮像レンズ２０４の焦点位置は、無限遠又は無限遠とフロントガラス１０５との間に設定している。これにより、フロントガラス１０５上に付着した雨滴２０３の検出を行う場合だけでなく、先行車両や対向車両の検出や白線の検出を行う場合にも、撮像部２００の撮像画像データから適切な情報を取得することができる。
【００２２】
例えば、フロントガラス１０５上に付着した雨滴２０３の検出を行う場合、撮像画像データ上の雨滴画像の形状は円形状であることが多いので、撮像画像データ上の雨滴候補画像が円形状であるかどうかを判断してその雨滴候補画像が雨滴画像であると識別する形状認識処理を行う。このような形状認識処理を行う場合、フロントガラス１０５の外壁面上の雨滴２０３に撮像レンズ２０４の焦点が合っているよりも、上述したように無限遠又は無限遠とフロントガラス１０５との間に焦点が合っている方が、多少ピンボケして、雨滴の形状認識率（円形状）が高くなり、雨滴検出性能が高い。
【００２３】
図４は、フロントガラス１０５の外壁面上の雨滴２０３に撮像レンズ２０４の焦点が合っている場合における、雨滴検出用の撮像画像データである赤外光画像データを示す説明図である。
図５は、無限遠に焦点が合っている場合における、雨滴検出用の撮像画像データである赤外光画像データを示す説明図である。
フロントガラス１０５の外壁面上の雨滴２０３に撮像レンズ２０４の焦点が合っている場合、図４に示すように、雨滴に映り込んだ背景画像２０３ａまでが撮像される。このような背景画像２０３ａは雨滴２０３の誤検出の原因となる。また、図４に示すように雨滴の一部２０３ｂだけ弓状等に輝度が大きくなる場合があり、その大輝度部分の形状すなわち雨滴画像の形状は太陽光の方向や街灯の位置などによって変化する。このような種々変化する雨滴画像の形状を形状認識処理で対応するためには処理負荷が大きく、また認識精度の低下を招く。
【００２４】
これに対し、無限遠に焦点が合っている場合には、図５に示すように、多少のピンボケが発生する。そのため、背景画像２０３ａの映り込みが撮像画像データに反映されず、雨滴２０３の誤検出が軽減される。また、多少のピンボケが発生することで、太陽光の方向や街灯の位置などによって雨滴画像の形状が変化する度合いが小さくなり、雨滴画像の形状は常に略円形状となる。よって、雨滴２０３の形状認識処理の負荷が小さく、また認識精度も高い。
【００２５】
ただし、無限遠に焦点が合っている場合、遠方を走行する先行車両のテールランプを識別する際に、画像センサ２０６上のテールランプの光を受光する受光素子が１個程度になることがある。この場合、詳しくは後述するが、テールランプの光がテールランプ色（赤色）を受光する赤色用受光素子に受光されないおそれがあり、その際にはテールランプを認識できず、先行車両の検出ができない。このような不具合を回避しようとする場合には、撮像レンズ２０４の焦点を無限遠よりも手前に合わせることが好ましい。これにより、遠方を走行する先行車両のテールランプがピンボケするので、テールランプの光を受光する受光素子の数を増やすことができ、テールランプの認識精度が上がり先行車両の検出精度が向上する。
【００２６】
撮像ユニット１０１の光源２０２には、発光ダイオード（ＬＥＤ）や半導体レーザ（ＬＤ）などを用いることができる。また、光源２０２の発光波長は、例えば可視光や赤外光を用いることができる。ただし、光源２０２の光で対向車両の運転者や歩行者等を眩惑するのを回避する場合には、可視光よりも波長が長くて画像センサ２０６の受光感度がおよぶ範囲の波長、例えば８００ｎｍ以上１０００ｎｍ以下の赤外光領域の波長を選択するのが好ましい。本実施形態１の光源２０２は、赤外光領域の波長を有する光を照射するものである。
【００２７】
ここで、フロントガラス１０５で反射した光源２０２からの赤外波長光を撮像部２００で撮像する際、撮像部２００の画像センサ２０６では、光源２０２からの赤外波長光のほか、例えば太陽光などの赤外波長光を含む大光量の外乱光も受光される。よって、光源２０２からの赤外波長光をこのような大光量の外乱光と区別するためには、光源２０２の発光量を外乱光よりも十分に大きくする必要があるが、このような大発光量の光源２０２を用いることは困難である場合が多い。
【００２８】
そこで、本実施形態１においては、例えば、図６に示すように光源２０２の発光波長よりも短い波長の光をカットするようなカットフィルタか、もしくは、図７に示すように透過率のピークが光源２０２の発光波長とほぼ一致したバンドパスフィルタを介して、光源２０２からの光を画像センサ２０６で受光するように構成する。これにより、光源２０２の発光波長以外の光を除去して受光できるので、画像センサ２０６で受光される光源２０２からの光量は、外乱光に対して相対的に大きくなる。その結果、大発光量の光源２０２でなくても、光源２０２からの光を外乱光と区別することが可能となる。
【００２９】
ただし、本実施形態１においては、撮像画像データから、フロントガラス１０５上の雨滴２０３を検出するだけでなく、先行車両や対向車両の検出や白線の検出も行う。そのため、撮像画像全体について光源２０２が照射する赤外波長光以外の波長帯を除去してしまうと、先行車両や対向車両の検出や白線の検出に必要な波長帯の光を画像センサ２０６で受光できず、これらの検出に支障をきたす。
【００３０】
そこで、本実施形態１では、撮像画像データの画像領域を、フロントガラス１０５上の雨滴２０３を検出するための雨滴検出用画像領域と、先行車両や対向車両の検出や白線の検出を行うための車両検出用画像領域とに区分し、雨滴検出用画像領域に対応する部分についてのみ光源２０２が照射する赤外波長光以外の波長帯を除去するフィルタ（以下、「雨滴検出用フィルタ」という場合もある。）を、光学フィルタ２０５に配置している。すなわち、雨滴検出用画像領域は、撮像領域のうち、雨滴検出用フィルタが存在する領域を撮像した撮像画像データの領域である。また、車両検出用画像領域は、撮像領域のうち、雨滴検出用フィルタが存在しない領域を撮像した撮像画像データの領域である。
【００３１】
図８（ａ）は、光学フィルタ２０５の断面図である。
本実施形態１の光学フィルタ２０５は、図８（ａ）に示すように、基板２２１の撮像レンズ側２０５ａの面には、赤外光および可視光相当を透過する分光フィルタ層２２４が形成されている。また、基板２２１の画像センサ側２０５ｂの面には、偏光フィルタ層２２２、ＳＯＧ（Ｓｐｉｎ  Ｏｎ  Ｇｌａｓｓ）層２２３、雨滴検出用フィルタである赤外光透過フィルタ２１２が順に形成されている。
【００３２】
このようにフィルタ層を光学フィルタ２０５の基板２２１の両面に形成することにより、光学フィルタ２０５の反りを抑制することが可能となる。基板２２１の片側面の面にだけ多層膜を形成すると応力がかかり、反りが生じる。しかしながら、図８（ａ）のように基板２２１の両面に多層膜を形成した場合は、応力の効果が相殺されるため、反りを抑制することができる。
【００３３】
ここで、基板２２１は、可視光域に対して透明な材料、例えば、ガラス、サファイア、水晶などで構成することができる。本実施形態１では、ガラス、特に、安価で、また耐久性もある石英（屈折率１．４６）やテンパックスガラス（屈折率１．５１）を基板２２１の材料として用いる。
【００３４】
また、基板２２１の光学フィルタ２０５ａ側の面に形成された分光フィルタ層２２４は、波長範囲４００ｎｍ〜６７０ｎｍのいわゆる可視光領域と、波長範囲９４０〜９７０ｎｍの赤外光領域の双方を透過するフィルタである。なお、可視光領域は車両周辺情報を検出するのに用い、赤外光領域は雨滴を検出するために用いる。また、分光フィルタ層２２４は、波長７００〜９４０ｎｍの範囲の光を透過しない（透過率５％以下が望ましい）。これは、この波長範囲を取り込んだ場合、得られる画像データは全体的に赤くなってしまい、テールランプの赤色を示す部分などを抽出することが困難となることがある。そこで、赤外光をカットする特性をもつフィルタを形成してやれば、外乱となる他の色の光を除去できるため、例えばテールランプの検出精度を向上させることができる。
【００３５】
また、光学フィルタ２０５ｂ側の面に形成された偏光フィルタ層２２２は、Ｓ偏光成分をカットし、Ｐ偏光成分のみを透過するフィルタである。この偏光フィルタ層２２２により、外乱要因や不要反射光（映りこみ光）をカットすることができる。
【００３６】
本実施形態１では、偏光フィルタ層２２２は、ワイヤグリッド偏光子で形成されている。ワイヤグリッドは、アルミなどの金属で構成された導電体線が特定のピッチで格子状に配列してなるものであり、そのピッチが入射光（例えば、可視光の波長４００ｎｍから８００ｎｍ）に比べてかなり小さいピッチ（例えば、２分の１以下）であれば、導電体線に対して平行に振動する電場ベクトル成分の光をほとんど反射し、導電体線に対して垂直な電場ベクトル成分の光をほとんど透過させるため、単一偏光を作り出す偏光子として使用できる。
【００３７】
なお、ワイヤグリッド偏光子においては、金属ワイヤ断面積が増加すると、消光比が増加すること、更に周期幅に対する所定の幅以上の金属ワイヤでは透過率が減少する。また、金属ワイヤの長手方向に直交する断面形状がテーパ形状であると、広い帯域において透過率、偏光度の波長分散性が少なく、高消光比特性を示す。ワイヤグリッドの断面構造において溝方向の偏光方向の光が入射したときは遮光し、溝と直交する方向の偏光方向の光が入射したときは透過する。
【００３８】
本実施形態１では、偏光フィルタ層２２２の偏光子として、ワイヤグリッド構造を用いているため、以下のような利点がある。すなわち、ワイヤグリッド構造は、よく知られる半導体プロセス、すなわちアルミ薄膜を蒸着した後にパターニングを行いメタルエッチングなどの手法によりワイヤグリッドのサブ波長凹凸構造を形成すればよい。よって、撮像素子の画素サイズ相当（数ミクロンレベル）で偏光子の方向を調整することが可能であるため、本実施例のような画素単位で透過偏光軸が選択できる。また、ワイヤグリッド構造は上述のとおり、アルミなどの金属で作製されるため、耐熱性に優れ、車載用途には好適である。偏光フィルタ層の詳細は、例えば、特開２０１４−３２１７４号公報等に記載されている。
【００３９】
図８（ｂ）は、光学フィルタ２０５の画像センサ側の正面図である。
図９は、撮像画像データの画像例を示す説明図である。
光学フィルタ２０５は、図８（ｂ）に示すように、車両検出用画像領域２１３である撮像画像中央部（撮像領域の高さ２／４に相当する部分）に対応する箇所に配置される領域２１１と、雨滴検出用画像領域２１４である撮像画像上部（撮像領域高さ１／４に相当する部分）及び撮像画像下部（撮像領域高さ１／４に相当する部分）に対応する箇所に配置される赤外光透過フィルタ２１２とに、領域分割されている。赤外光透過フィルタ２１２には、図６に示したカットフィルタや図７に示したバンドパスフィルタを用いる。
【００４０】
対向車両のヘッドランプ及び先行車両のテールランプ並びに白線の画像は、主に撮像画像上下方向中央部に存在することが多く、撮像画像下部には自車両前方の直近路面の画像が存在し、撮像画像上部には自車両前方の空の画像が存在するのが通常である。よって、対向車両のヘッドランプ及び先行車両のテールランプ並びに白線の識別に必要な情報は撮像画像中央部に集中しており、その識別において撮像画像下部や上部の情報はあまり重要でない。よって、単一の撮像画像データから、対向車両や先行車両あるいは白線の検出と雨滴の検出とを両立して行う場合には、図９に示すように、撮像画像下部と上部を雨滴検出用画像領域２１４とし、残りの撮像画像中央部を車両検出用画像領域２１３とし、これに対応して赤外光透過フィルタ２１２を設けるのが好適である。
【００４１】
ただし、本実施形態１においては、撮像画像上部を雨滴検出用画像領域２１４とし、残りの撮像画像中央部及び下部を車両検出用画像領域２１３とする。これは、後述するように、雨滴検出用の撮像フレームのフレーム時間を短くするのに好適だからである。
【００４２】
撮像部２００の撮像方向を下方へ傾けていくと、撮像領域内の下部に自車両のボンネットが入り込んでくる場合がある。この場合、自車両のボンネットで反射した太陽光や先行車両のテールランプなどが外乱光となり、これが撮像画像データに含まれることで対向車両のヘッドランプ及び先行車両のテールランプ並びに白線の誤識別の原因となる。このような場合でも、本実施形態１では、撮像画像下部に対応する箇所に図６に示したカットフィルタや図７に示したバンドパスフィルタが配置されているので、ボンネットで反射した太陽光や先行車両のテールランプなどの外乱光が除去される。よって、対向車両のヘッドランプ及び先行車両のテールランプ並びに白線の識別精度が向上する。
【００４３】
図１０は、本実施形態１における撮像部２００の詳細を示す説明図である。
この撮像部２００は、主に、撮像レンズ２０４と、光学フィルタ２０５と、受光素子が２次元配置された画素アレイを有する画像センサ２０６を含んだセンサ基板２０７と、センサ基板２０７から出力されるアナログ電気信号（画像センサ２０６上の各受光素子が受光した受光量）をデジタル電気信号に変換した撮像画像データを生成して出力する信号処理部２０８とから構成されている。被写体（識別対象物）を含む撮像領域からの光は、撮像レンズ２０４を通り、光学フィルタ２０５を透過して、画像センサ２０６でその光強度に応じた電気信号に変換される。信号処理部２０８では、画像センサ２０６から出力される電気信号（アナログ信号）が入力されると、その電気信号から、撮像画像データとして、画像センサ２０６上における各画素の明るさ（輝度）を示すデジタル信号を、画像の水平・垂直同期信号とともに後段のユニットへ出力する。
【００４４】
図１１は、光学フィルタ２０５と画像センサ２０６とを光透過方向に対して直交する方向から見たときの模式拡大図である。
画像センサ２０６は、ＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）やＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）などを用いた受光素子であり、画素ごとにフォトダイオード２０６Ａを用いている。フォトダイオード２０６Ａは、画素ごとに２次元的にアレイ配置されており、フォトダイオード２０６Ａの集光効率を上げるために、各フォトダイオード２０６Ａの入射側にはマイクロレンズ２０６Ｂが設けられている。この画像センサ２０６がワイヤボンディングなどの手法によりＰＷＢ（Ｐｒｉｎｔｅｄ  Ｗｉｒｉｎｇ  Ｂｏａｒｄ）に接合されてセンサ基板２０７が形成されている。
【００４５】
画像センサ２０６の露光方式としては、全受光素子で同時に受光（同時露光）して各受光素子の信号を読み出すグローバルシャッタ方式や、所定の受光素子ラインごとに順次受光（ライン露光）して各受光素子の信号を読み出すローリングシャッタ方式を採用することができる。本実施形態１ではローリングシャッタ方式を採用する例について説明する。
【００４６】
光学フィルタ２０５と画像センサ２０６はＵＶ接着剤で接合してもよいし、撮影に用いる有効画素範囲外をスペーサなどで支持した状態で有効画素外の四辺領域でＵＶ接着や熱圧着してやればよい。光学フィルタ２０５と画像センサ２０６を密着接合することにより、雨滴検出用画像領域２１４と車両検出用画像領域２１３の境界が明確になり、雨滴有無の判別精度が上げられる。
【００４７】
次に、本実施形態１による、ワイパー１０７やウォッシャーを制御するための付着物検出が可能である。ここで、付着物とは、雨滴であるが、この他、鳥の糞、隣接車両からの跳ねてきた路面上の水しぶきなどを含めることもできる。
【００４８】
光源２０２は、雨滴と空気の境界面のいずれかの面での反射光が撮像されるように、フロントガラス１０５への入射角度が設定される。雨滴からの反射光が最も強くなるレイアウトは、フロントガラス１０５面の法線に対して撮像部２００の光軸と略反対側の位置に設置された場合、および撮像部２００の光軸とほぼ同じ光軸となるように配置した場合であり、反射光が最も小さいのはフロントガラス１０５の法線と光源の光軸がほぼ一致した場合である。
【００４９】
なお、光源２０２は、赤外光透過フィルタ２１２の領域にのみ照射するように配置することができる。これにより、車両検出用画像領域からのノイズ成分を回避することができる。また、光源２０２を複数設けてもよい。この場合は、偏光フィルタ層２２２の各領域の偏光子パタンは、複数の光源２０２のうち偏光子パタンへの入射光量が最も大きい光源がフロントガラス１０５へ向かって出射する光の光軸と、撮像レンズの光軸との２つの光軸で形成される面に対して平行な偏光成分のみを透過するように設定される。
【００５０】
光源２０２の発光方法としては、連続発光（ＣＷ発光ともいう。）の他、特定のタイミングでパルス発光させてもよい。発光のタイミングと撮影のタイミングとを同期することにより、外乱光による影響をより減少させることができる。また、複数の光源２０２を設置した場合には、複数の光源２０２を同時に発光させてもよいし、順次発光させてもよい。順次発光させた場合は、その発光のタイミングと撮影のタイミングとを同期することにより、外乱光による影響をより減少させることができる。
【００５１】
ここで、発明者らが撮影した実験結果を図１２、図１３に示す。
図１２は雨滴が付着している状態の実験結果を示す図である。
図１３は雨滴が付着していない状態の実験結果を示す図である。
なお、この実験結果を示す図は、画像領域の下部が雨滴検出用画像領域となっている例である。
【００５２】
図１４は、雨滴量が異なる雨滴検出用画像領域の状態を示す拡大図である。
図１４に示す撮影画像の輝度の標準偏差値を計算すると、それぞれ、左の画像から、２０、２７、３９となり、輝度の標準偏差値と雨量との間には相関があることがわかる。このため、本実施形態１では、画像解析ユニット１０２において、雨滴検出用画像領域の撮像画像から、輝度の標準偏差値に関する値を算出し、この標準偏差値に基づき、雨量の測定を行っている。なお、標準偏差に代えて分散値を用いてもよい。
【００５３】
次に、本実施形態１における撮像部２００の撮像動作について説明する。
本実施形態１の撮像部２００は、自車両１００の前方領域からの光を受光して前方領域に存在する物体（他車両、白線、路面、人物、障害物等）を認識するための物体認識用画像を取得するための物体認識用フレームと、光源２０２からの光を照射してフロントガラス上の雨滴を検出するための雨滴検出用画像を取得するための雨滴検出用フレームとを個別に撮像する。具体的には、物体認識用フレームを複数枚撮像するたびに１枚の雨滴検出用フレームを撮像するという一連の撮像動作を繰り返し行う。
【００５４】
図１５は、本実施形態１における撮像動作の一例を簡易的に示したタイミングチャートである。
図１５には、フレーム同期信号、ライン読出信号、フレーム番号、露光期間が同じ時間軸にそって並べて表示されている。露光期間については、縦軸方向が受光素子ラインの位置に対応している。画像センサ２０６の各受光素子の受光量は、ライン読出信号に合わせて受光素子ラインごとに読み出されて出力される。
【００５５】
図１６（ａ）は、センシング用フレームにおける、ローリングシャッタ方式によるデータ読み出しタイミングと露光期間の関係を説明する説明図である。
図１６（ｂ）は、雨滴検出用フレームにおける、ローリングシャッタ方式によるデータ読み出しタイミングと露光期間の関係を説明する説明図である。
本実施形態１は、ローリングシャッタ方式を採用しており、センシング用フレームでは、図１６（ａ）に示すように、画像センサ２０６の受光素子ライン・・・，Ｎ，Ｎ＋１，Ｎ＋２，・・・ごとのライン読出信号（水平同期信号）の各タイミングを基準にして、設定された露光時間に応じた受光開始時間が受光素子ラインごとに異なる。雨滴検出用フレームでも、図１６（ｂ）に示すように、画像センサ２０６の受光素子ライン・・・，Ｍ，Ｍ＋１，Ｍ＋２，・・・ごとのライン読出信号（水平同期信号）の各タイミングを基準にして、設定された露光時間に応じた受光開始時間が受光素子ラインごとに異なる。
【００５６】
フレーム番号Ｂ０の撮像フレームは、車線維持制御（ＬＤＷ：Lane Departure Warning）に用いられるセンシング用フレームである。この撮像フレームＢ０は、撮像動作時の露光時間が所定の時間範囲内で自動露光制御される自動露光フレームである。したがって、例えば、昼間のように明るい環境下であれば短い露光時間が設定され、夜間のように暗い環境下であれば長い露光時間が設定される。
【００５７】
フレーム番号Ａ１の撮像フレームは、ヘッドランプの配光制御（ＡＨＢ：Auto High Beam）に用いられるセンシング用フレームである。この撮像フレームＡ１は、撮像動作時の露光時間が固定である固定露光フレームである。
【００５８】
フレーム番号Ｂ２の撮像フレームは、衝突回避制御（ＦＣＷ：Front Collision Warning）に用いられるセンシング用フレームである。この撮像フレームＢ２は、撮像動作時の露光時間が所定の時間範囲内で自動露光制御される自動露光フレームである。
【００５９】
フレーム番号Ａ３の撮像フレームは、第２フレーム目の撮像フレームと同様、ヘッドランプの配光制御に用いられるセンシング用フレームで、撮像動作時の露光時間が固定である固定露光フレームである。
【００６０】
フレーム番号Ｒ４の撮像フレームは、ワイパーの駆動制御等に用いられる雨滴検出用フレームである。この撮像フレームＲ４は、撮像動作時の露光時間がごく短時間に固定された固定露光フレームである。雨滴検出用画像領域２１４の画像を取得するための１つの雨滴検出用フレームは、光源２０２からの比較的強い光を受光することから、画像センサ２０６の信号が飽和してしまうのを防ぐために、光源２０２からの照明光以外の外乱光の影響を小さくするために、なるべく露光時間を短くするのが好ましい。また、光源２０２からの光量はほぼ一定であることから、固定露光時間とすることができる。
【００６１】
本実施形態１においては、センシング用フレームＢ０〜Ａ３の撮像を所定回数（例えば７回）繰り返した後に１回の雨滴検出用フレームＲ４の撮像を行うという撮像動作を繰り返し実行する。
【００６２】
次に、本実施形態１における光源２０２の発光制御について説明する。
雨滴検出用フレームＲ４で撮像する撮像画像は、雨滴検出用画像領域のみで十分であるため、雨滴検出用フレームＲ４で読み出すデータは、雨滴検出用画像領域に対応するライン分、すなわち、撮像画像の上部に対応するライン分だけでよい。そのため、光源２０２で光を照射すべき期間も、雨滴検出用画像領域に対応するラインの露光期間だけでよい。
【００６３】
光源２０２から光が照射されている期間は、その光が車両検出用画像領域に対応する画像センサ部分にも入射し、車両検出用画像領域の外乱光となり得る。よって、雨滴検出用画像領域に対応するラインの露光期間だけ光源２０２から光を照射するように光源２０２を発光制御すれば、雨滴検出用フレームＲ４のフレーム時間を短くしても、光源２０２からの光がその前後に位置するセンシング用フレームＡ３，Ｂ０の外乱光となることはない。
【００６４】
図１７は、雨滴検出用フレームＲ４におけるライン読出信号と光源２０２の発光タイミングとの関係の一例を示すタイミングチャートである。
雨滴検出用フレームＲ４で雨滴検出用画像領域に対応するライン分の露光期間は、常に光源２０２を発光させるように制御してもよい。この場合、雨滴検出用画像領域に対応する全ラインについて、光源２０２が発光している状態のデータが取得できる。ただし、この場合、光源２０２からの光以外の外乱光が画像センサ２０６に入射する状況だと、その外乱光成分の誤差が含まれたデータとなる。
【００６５】
本実施形態１においては、１つの雨滴検出用フレームＲ４で雨滴検出用画像領域に対応するライン分の露光期間中に、光源２０２がＯＮとＯＦＦする期間が少なくとも１回ずつ存在するように、光源２０２を発光制御する。本実施形態１では、１ラインごとに光源２０２がＯＮ／ＯＦＦするように光源２０２を発光制御する。なお、例えば２ラインごとに光源２０２がＯＮ／ＯＦＦするように光源２０２を発光制御するようにしてもよい。各ラインの露光期間内における光源２０２の発光時期は、図１８に示すように各ラインの露光期間の最初の時期であってもよいし、図１９に示すように各ラインの露光期間の最後の時期であってもよい。
【００６６】
次に、本発明者らが行った実験例について説明する。
本実験例では、本実施形態１のように１ラインごとに光源２０２がＯＮ／ＯＦＦするように光源２０２を発光制御して雨滴検出が適切に実施できるかどうかを確認する。
【００６７】
図２０は、光源２０２がＯＮであるときの外乱光が含まれる雨滴検出用画像領域の画像例を示すものである。
図２１は、光源２０２がＯＮであるときの外乱光が含まれない雨滴検出用画像領域の画像例を示すものである。
図２２は、図２０に示す画像例において光源光が映し出されている画像部分を拡大した図である。
図２２に示すように、光源２０２のＯＮ／ＯＦＦに応じて１ラインごとに高いコントラストが得られていることがわかる。
【００６８】
光源２０２をＯＦＦにした状態にあっては、光源２０２からの光が受光されないため、外乱光成分のみが存在している。しかし、光源２０２をＯＮにした状態におけるライン毎の画素値の総和から、光源２０２をＯＦＦにした状態におけるライン毎の画素値の総和を差し引いたとしても、除去しきれない外乱光成分は残存してしまう。      
【００６９】
差分値をとっても外乱光成分が残存してしまう理由は、光源２０２がＯＮのときのラインと光源２０２がＯＦＦのときのラインとでは画像センサ上の位置が異なるため、両ラインの画素値総和にそれぞれ含まれる外乱光成分が、異なる位置で受光された外乱光の成分となるからである。特に、図２０に示すような強い外乱光が画像センサ上に局所的に入射した場合、画像センサ上における外乱光のスポット内の光量分布は、スポット中心付近ではおおよそ一様であるが、スポット周辺部では、その周辺に近づくほど光量が小さくなるという光量勾配をもつ。そのため、外乱光のスポット周辺部では、光源２０２がＯＮのときの外乱光の光量と光源２０２がＯＦＦのときの外乱光の光量との間の差が大きいものとなる。その結果、外乱光のスポット周辺部に対応するラインでは、差分値をとっても除去しきれない外乱光成分が多く残存する。
【００７０】
なお、グローバルシャッタ方式を用いた場合であっても、差分値をとっても外乱光成分が残存してしまう。なぜなら、グローバルシャッタ方式で撮像される点灯時画像及び消灯時画像は、互いに異なる撮像フレームで撮像されるので、両画像間には撮像タイミングには、少なくともフレーム時間分の時間差がある。外乱光は、一般に、僅かな時間でも刻々と変化するため、点灯時画像及び消灯時画像の撮像タイミングの時間差の期間中に外乱光が変化し得る。この場合、点灯時画像に含まれる外乱光成分と、消灯時画像に含まれる外乱光成分とは一致しないため、差分情報中には、その不一致分の外乱光成分が残存することになる。
【００７１】
このように、差分値をとっても外乱光成分が多く残存してしまう場合があると、外乱光成分が除去されていることを前提とした雨滴検出処理において検出誤差を生じさせる。なお、差分画像中における外乱光成分の残存量は、雨滴等の付着物の検出誤差の大きさに影響を与えるが、差分画像中における外乱光成分の残存量がおおよそ一定の範囲内で安定していれば、付着物検出の誤差の大きさもおおよそ一定の範囲内で安定する。このような場合には、その検出結果を利用する雨滴検出処理では、予め一定の誤差が生じていることを前提に処理することが可能なので、処理結果に支障を来すような事態は生じない。しかしながら、差分画像中における外乱光成分の残存量は、撮像状況等によって全く異なり、大きなバラツキをもつ。そのため、雨滴等の付着物の検出結果にも大きなバラツキが生じるので、その検出結果を利用する雨滴検出処理では、予め一定の誤差が生じているという前提で処理することができず、雨滴検出結果のバラツキによって様々な支障を来すおそれがある。そこで、本実施形態においては、次のような雨滴検出処理を行う。
【００７２】
図２３は、本実施形態１における雨滴検出処理のフローチャートである。
画像解析ユニット１０２は、図１７に示したように、雨滴検出用フレームＲ４におけるライン読出信号と光源２０２の発光タイミングとの同期をとりながら、雨滴検出用フレームＲ４の撮像処理を行う（Ｓ１）。これにより、例えば、図２０に示したように、光源２０２の点灯時のラインと消灯時のラインとが上下方向に交互に並んだ雨滴検出用画像領域の画像を得ることができる。これにより、光源点灯時のラインからなる点灯時画像と、光源消灯時のラインからなる消灯時画像とを、１つの撮像フレームで撮像することができる。なお、ここでは、点灯時ラインと消灯時ラインとが１つずつ交互に並ぶように光源２０２を制御しているが、これに限らず、例えば、複数の点灯時ラインごとに１つの消灯時ラインが入るように光源２０２を制御してもよい。
【００７３】
次に、画像解析ユニット１０２は、光源消灯時のラインからなる消灯時画像の画素値の総和（消灯時画素値総和）を算出する（Ｓ２）。そして、算出した消灯時画素値総和が所定の外乱判定閾値を超えているかどうかを判定する（Ｓ３）。なお、ここでは、強い外乱光が入ってきているかどうかを、画素値の総和を用いて判断するが、強い外乱光が入ってきているかどうかを判断できる情報であれば、これに限られない。
【００７４】
このとき、外乱判定閾値を超えていなければ（Ｓ３のＮｏ）、通常どおり、各光源点灯時のラインとこれに隣接する光源消灯時のラインとの画素値差分をとった点灯・消灯差分画像を作成する（Ｓ４）。このようにして作成された点灯・消灯差分画像のデータは、メモリに保存される。その後、画像解析ユニット１０２は、前回にメモリに保存した点灯・消灯差分画像のデータを読み出し、前回の点灯・消灯差分画像と今回の点灯・消灯差分画像との差分をとった時差分画像を作成する（Ｓ５）。
【００７５】
本実施形態において、この時差分画像において規定値以上の画素値をもつ画像領域は、当該２つの点灯・消灯差分画像間における前回の点灯・消灯差分画像の作成時と今回の点灯・消灯差分画像の作成時との間に雨滴が付着した箇所である。このような時差分画像の画素値から雨滴を検出する方法によれば、光源２０２による照明範囲内に照度ムラが存在していても、両画像間における同一箇所については光源による照度は同一なので、雨滴２０３の検出精度に対する照度ムラの影響が少ない。よって、高い検出精度で雨滴２０３を検出することが可能である。
【００７６】
本実施形態においては、上述したように、光源２０２からの光のうち、雨滴２０３が付着しているフロントガラス１０５上の付着領域に入射する光は撮像部２００に入射し、雨滴２０３が付着していない非付着領域に入射した光は撮像部２００に入射しない。したがって、雨滴２０３を映し出す雨滴画像は、雨滴検出用画像領域２１４上において高輝度な画像として映し出される。したがって、雨滴２０３を映し出す雨滴画像領域は、時差分画像において大きな画素値をもつことになる。
【００７７】
そこで、画像解析ユニット１０２は、時差分画像中から所定の規定値を超える画素値をもった画像領域を抽出し、抽出された画像領域を、雨滴２０３が映し出された雨滴画像領域の候補領域として特定する。具体的には、まず、時差分画像の画素値を所定の規定値と比較することにより２値化処理を行う。この２値化処理では、例えば、所定の規定値以上の画素値をもつ画素に「１」、そうでない画素に「０」を割り振ることで、２値化画像を作成する。次に、この２値化画像において、「１」が割り振られた画素が近接している場合には、それらを１つの画像領域として認識するラベリング処理を実施する。これによって、時差分画像の画素値が大きい近接した複数の画素の集合が、１つの画像領域として抽出される。
【００７８】
次に、このようにして特定される雨滴画像領域の候補領域に対し、形状識別処理を行って雨滴画像領域を特定する。撮像画像上の雨滴画像の形状は円形状であることが多いので、抽出した雨滴画像領域の候補領域が円形状であるかどうかの形状識別処理を行い、その結果から雨滴画像領域を特定する。そして、このようにして特定された雨滴画像領域の数をカウントした結果を雨滴量として算出する（Ｓ６）。
【００７９】
画像解析ユニット１０２は、算出した雨滴量のデータをワイパー制御ユニット１０６へ出力する（Ｓ７）。ワイパー制御ユニット１０６は、例えば、この雨滴量の算出結果が所定の条件（例えば、連続して作成された２０個の時差分画像について、いずれも雨滴量のカウント値が１０以上であるという条件）を満たしたときに、ワイパー１０７の駆動制御やウォッシャー液の吐出制御を行う。
【００８０】
一方で、上述した消灯時画素値総和が外乱判定閾値を超えている場合（Ｓ３のＹｅｓ）、画像解析ユニット１０２は、今回の雨滴検出処理を終了し、雨滴量を算出しない。これは次の理由による。
【００８１】
光源消灯時のラインからなる消灯時画像は、光源２０２からの光源光以外の外乱光のみを撮像した画像であるため、その消灯時画素値総和が外乱判定閾値を超えているときは、強い外乱光が撮像部に入射している状況である。このような状況下では、本実施形態のようにローリングシャッタ方式によりラインごとに光源２０２の点灯、消灯を切り替えて雨滴検出用画像領域の画像を撮像する場合、上述したように、強い外乱光のスポット周辺部に対応するラインで外乱光成分が消灯時画素値総和中に多く含まれてしまう。そのため、点灯・消灯差分画像の画素値が外乱光成分の分だけ本来よりも高く算出されてしまう。そうすると、時差分画像の画素値も本来より高く算出される結果、雨滴量の誤算出を引き起こし、雨が降っていないのにワイパーが駆動してしまうなどの不具合を引き起こすおそれがある。
【００８２】
本実施形態１では、消灯時画素値総和が外乱判定閾値を超えているような強い外乱光が入射する状況では、雨滴量を算出しないので、このような不具合を引き起こすことはない。
【００８３】
また、本実施形態１においては、強い外乱光が継続して入ってくるような状況だと、雨滴量の算出を行わない期間が継続するおそれがあるので、仮にこの期間に雨が降り始めると、雨が降っているのにワイパーが駆動しないというような不具合が生じることも考えられる。しかしながら、本実施形態１のようにフロントガラス１０５を介して自車両前方を撮像する場合において、消灯時画素値総和が外乱判定閾値を超えるような強い外乱光は、直射日光や直射日光が自車両のボンネット等で反射した反射光などの太陽光であることがほとんどである。太陽光による強い外乱光が入るのは、晴れの日であり、通常は雨が降っていない状況なので、仮に強い外乱光が継続して入ってきて雨滴量の算出を行わない期間が継続しても、その期間には雨が降っていない蓋然性が高く、雨滴検出ができなくても実害がない。
【００８４】
本実施形態１では、消灯時画素値総和が外乱判定閾値を超えていると判定されたら（Ｓ３のＹｅｓ）、雨滴量を算出するための処理（Ｓ４〜Ｓ６）を行わないという制御を実施するが、そのように判定されたときの制御はこれに限られない。例えば、消灯時画素値総和が外乱判定閾値を超えていると判定されたとき（Ｓ３のＹｅｓ）、雨滴量を算出するための処理（Ｓ４〜Ｓ６）は行うが、その雨滴量の算出結果をワイパー制御ユニットへ出力しないという制御を実施してもよい。この場合でも、雨滴量の誤算出に起因した不具合を引き起こすのを防止できる。
【００８５】
また、本実施形態１では、消灯時画素値総和が外乱判定閾値を超えていると判定されたときの雨滴量の算出結果は、ワイパー制御ユニットにおいて全く利用されないが、信頼度を落として利用するようにしてもよい。例えば、画像解析ユニット１０２は、消灯時画素値総和が多いほど雨滴量の算出結果に対する信頼度が低くなるように、各雨滴量算出結果に対して信頼度を設定する。そして、各雨滴量算出結果をワイパー制御ユニットへ出力する際、その信頼度とともに雨滴量算出結果を出力する。そして、ワイパー制御ユニットでは、その信頼度の高低に応じて、その雨滴量算出結果がワイパー制御に与える影響度を変えることで、消灯時画素値総和が外乱判定閾値を超えているときの雨滴量算出結果を全く利用しない場合よりも、適切なワイパー制御が可能となる場合がある。
【００８６】
また、本実施形態１では、雨滴量の算出に際し、前回の点灯・消灯差分画像と今回の点灯・消灯差分画像との差分である時差分画像を用いているが、必ずしも時差分画像を用いる必要はない。例えば、今回の点灯・消灯差分画像中から所定の規定値を超える画素値をもった画像領域を抽出し、抽出された画像領域を、雨滴２０３が映し出された雨滴画像領域の候補領域として特定する。そして、このようにして特定される雨滴画像領域の候補領域に対し、形状識別処理を行って雨滴画像領域を特定したうえで、特定した雨滴画像領域の数をカウントし、その結果を雨滴量として算出する。
【００８７】
なお、雨滴検出処理の方法は、公知のものを広く利用することができるので、本実施形態１のものには限定されない。例えば、より簡易な雨滴検出処理としては、今回の点灯・消灯差分画像の画像値の総和が所定の閾値以上であるか否かを判定するだけでもよい。この場合、点灯・消灯差分画像の画像値の総和が所定の閾値以上であると判定されたときには、雨滴量はワイパーを駆動させる規定量を超えていると判断して、ワイパー制御ユニットがワイパーを駆動するという制御が可能となる。
【００８８】
〔変形例１〕
次に、本実施形態１における雨滴検出処理の一変形例について説明する。
上述した実施形態１では、点灯時のラインと消灯時のラインとの画素値差分をとった点灯・消灯差分画像を利用して雨滴検出処理を行っているが、本変形例１では、消灯時のラインを用いずに点灯時のラインだけを用いた点灯時画像を利用して雨滴検出処理を行う。
【００８９】
図２４は、本変形例１における雨滴検出処理のフローチャートである。
本変形例１においても、画像解析ユニット１０２は、雨滴検出用フレームＲ４におけるライン読出信号と光源２０２の発光タイミングとの同期をとりながら、雨滴検出用フレームＲ４の撮像処理を行い（Ｓ１）、消灯時画素値総和を算出する（Ｓ２）。そして、本変形例では、消灯時画素値総和が外乱判定閾値を超えていないと判定されたとき（Ｓ３のＮｏ）に行う雨滴量を算出する処理のために、画像解析ユニット１０２は、各光源点灯時ラインについて、ライン毎の画素値総和（点灯時のライン別画素値総和）を算出する（Ｓ１１）。
【００９０】
次に、画像解析ユニット１０２は、各点灯時のライン別画素値総和と所定の閾値とを比較し、閾値を超えているラインの数を特定し、特定したライン数を雨滴量として算出する（Ｓ１２）。そして、画像解析ユニット１０２は、算出した雨滴量のデータをワイパー制御ユニット１０６へ出力する（Ｓ７）。ワイパー制御ユニット１０６は、例えば、この雨滴量の算出結果が所定の条件（例えば、連続して作成された２０個の時差分画像について、いずれも雨滴量のカウント値が１０以上であるという条件）を満たしたときに、ワイパー１０７の駆動制御やウォッシャー液の吐出制御を行う。
【００９１】
本変形例１においても、消灯時画素値総和が外乱判定閾値を超えている場合（Ｓ３のＹｅｓ）、画像解析ユニット１０２は、今回の雨滴検出処理を終了し、雨滴量を算出しないので、上述した実施形態１と同様、雨滴量の誤算出に起因した不具合を引き起こすのを防止できる。
【００９２】
なお、本変形例１では、雨滴検出処理の簡素化のために、点灯時のライン別画素値総和が閾値を超えているラインの数を雨滴量として算出しているが、上述した実施形態１のように雨滴画像領域の候補領域を特定し、形状識別処理により雨滴画像領域を特定して雨滴量を算出してもよいし、その他の方法で雨滴量を算出してもよい。
【００９３】
〔変形例２〕
次に、本実施形態１における光源２０２の制御及び雨滴検出処理の一変形例について説明する。
図２５は、本変形例２における撮像動作及び光源２０２の点灯制御の一例を簡易的に示したタイミングチャートである。
図２５には、フレーム同期信号、ライン読出信号、フレーム番号、露光期間のほか、光源２０２の点灯、消灯を制御するＬＥＤ制御信号が、同じ時間軸にそって並べて表示されている。なお、図２５中のフレーム同期信号、ライン読出信号、フレーム番号、露光期間は、上述した実施形態１（図１５）と同様である。
【００９４】
上述した実施形態１では、雨滴検出用フレームＲ４におけるライン読出信号と光源２０２の発光タイミングとの同期をとることで、１つの雨滴検出用フレームＲ４から、光源２０２の点灯時のラインと消灯時のラインとが上下方向に交互に並んだ雨滴検出用画像領域の画像を得ていた。本変形例２では、図２５に示すように、雨滴検出用フレームＲ４の露光期間中は光源２０２を常に点灯させておき、全ラインを点灯時ラインとする。
【００９５】
なお、本変形例２では、雨滴検出用フレームＲ４の露光期間を除いた期間は光源２０２を常に消灯させている。これにより、光源２０２の点灯時間を少なくして省電力化を図るとともに、光源２０２の点灯による他車両の運転者の幻惑防止、光源２０２の点灯による車両検出用画像領域の外乱防止を図ることができる。ただし、雨滴検出用フレームＲ４の露光期間を除いた期間は、必ずしも光源２０２を消灯させなければならないわけではない。
【００９６】
図２６は、本変形例２における雨滴検出処理のフローチャートである。
本変形例２において、強い外乱光が入ってきているかどうかを判定するための消灯時画素値総和は、光源が常時点灯している雨滴検出用フレームＲ４から得ることができないので、光源が消灯しているときの撮像画像データから得る必要がある。例えば、当該雨滴検出用フレームＲ４の前又は後に撮像される別の雨滴検出用フレームＲ４の撮像時に光源を消灯させて得られる雨滴検出用画像領域の画像データから得てもよい。また、当該雨滴検出用フレームＲ４の前又は後に撮像されるセンシングフレームＢ０〜Ａ３の撮像時に光源を消灯させて得られる雨滴検出用画像領域の画像データから得てもよい。
【００９７】
また、例えば、消灯時画素値総和は、雨滴検出用画像領域とは異なる別の画像領域の画像データから得たものであってもよい。この場合、車両検出用画像領域あるいは車両検出用画像領域以外の画像領域から消灯時画素値総和を得ることも可能である。いずれにしても、雨滴検出用画像領域に強い外乱光成分が含まれていることが一定の精度で推定可能であればよい。ただし、消灯時画素値総和を得るための撮像画像データは、雨滴量の算出に用いる雨滴検出用フレームＲ４の撮像時期との時間ズレが少ないものことが望ましい。したがって、本変形例２においては、雨滴量の算出に用いる雨滴検出用フレームＲ４の直前のセンシングフレームＡ３で撮像される雨滴検出用画像領域の画像データから消灯時画素値総和を得ることとしている。
【００９８】
具体的には、画像解析ユニット１０２は、光源２０２を消灯した状態で、センシングフレームＡ３の撮像処理を実行し（Ｓ２１）、これにより得られた撮像画像データから雨滴検出用画像領域の画像データを抽出する（Ｓ２２）。そして、抽出した画像データの画素値の総和を消灯時画素値総和として算出する（Ｓ２３）。
【００９９】
その後、本変形例２では、消灯時画素値総和が外乱判定閾値を超えていないと判定されたら（Ｓ２４のＮｏ）、画像解析ユニット１０２は、次の雨滴検出用フレームＲ４の最初のラインの露光開始タイミングに合わせて、光源２０２を点灯させる（Ｓ２５）。そして、雨滴検出用フレームＲ４の撮像処理を実行して（Ｓ２６）、得られた雨滴検出用画像領域の撮像画像データ（点灯時画像）を撮像部２００から取得したら、画像解析ユニット１０２は、その点灯時画像から雨滴量を算出する（Ｓ２７）。
【０１００】
この点灯時画像からの雨滴量算出は、上述した変形例１と同様、雨滴検出用フレームＲ４の各ライン別画素値総和を算出し、各ライン別画素値総和と所定の閾値とを比較して、閾値を超えているラインの数を特定し、特定したライン数を雨滴量として算出する。もちろん、上述した実施形態１のように雨滴画像領域の候補領域を特定し、形状識別処理により雨滴画像領域を特定して雨滴量を算出してもよいし、その他の方法で雨滴量を算出してもよい。
【０１０１】
本変形例２においても、消灯時画素値総和が外乱判定閾値を超えている場合（Ｓ２４のＹｅｓ）、画像解析ユニット１０２は、今回の雨滴検出処理を終了し、雨滴量を算出しないので、上述した実施形態１と同様、雨滴量の誤算出に起因した不具合を引き起こすのを防止できる。
【０１０２】
しかも、本変形例２においては、センシングフレームＡ３から得た消灯時画素値総和が外乱判定閾値を超えていると判定したら（Ｓ２４のＹｅｓ）、次の雨滴検出用フレームＲ４の撮像処理の際に光源２０２を点灯させない。したがって、光源２０２の点灯時間をより少なく抑えることができ、省電力化を図ることができる。
【０１０３】
なお、本変形例２では、強い外乱光が入ってきているかどうかを判定するための消灯時画素値総和を、雨滴量の算出に用いる雨滴検出用フレームＲ４の直前のセンシングフレームＡ３から得る例であるが、これに限られない。例えば、雨滴量の算出に用いる雨滴検出用フレームＲ４の直後のセンシングフレームＢ０から消灯時画素値総和を得るようにしてもよい。この場合、雨滴検出用フレームＲ４の撮像処理で得られた雨滴検出用画像領域の撮像画像データ（点灯時画像）から雨滴量を算出する処理は常に実行する。そして、直後のセンシングフレームＢ０から得られる消灯時画素値総和が外乱判定閾値を超えていなければ、その雨滴量算出結果をワイパー制御ユニットへ出力し、外乱判定閾値を超えていれば雨滴量算出結果をワイパー制御ユニットへ出力しないという制御を行う。このような制御でも、同様に、雨滴量の誤算出に起因した不具合を引き起こすのを防止できる。
【０１０４】
なお、本変形例２のように、雨滴検出用フレームＲ４の露光期間中は光源２０２を常に点灯させておき、強い外乱光が入ってきているかどうかを判定するための消灯時画素値総和を当該雨滴検出用フレームＲ４とは別の撮像フレームから取得する場合には、ローリングシャッタ方式ではなく、グローバルシャッタ方式でも、同様の結果を得ることができる。
【０１０５】
具体的に説明すると、図２７に示すように、グローバルシャッタ方式を採用する場合には、雨滴検出用フレームＲ４の露光期間中は光源２０２を点灯させ、全画素を同時露光することになる。一方、雨滴検出用フレームＲ４以外の撮像フレームＢ０〜Ａ３の露光期間中は光源２０２を消灯させる。したがって、強い外乱光が入ってきているかどうかを判定するための消灯時画素値総和は、当該雨滴検出用フレームＲ４とは別の撮像フレーム、例えば本変形例２と同様にセンシングフレームＡ３から得ることができる。
【０１０６】
〔実施形態２〕
次に、本発明に係る付着物検出装置を適用した移動体機器制御システムの他の実施形態（以下、本実施形態を「実施形態２」という。）について説明する。
なお、本実施形態２は、撮像ユニット１０１の構成が一部異なる点を除いて、実施形態１（各種変形例を含む。以下同様。）とほぼ同様であるため、以下、実施形態１とは異なる点を中心に説明する。
【０１０７】
図２８は、本実施形態２における撮像ユニット１０１の概略構成を示す模式図である。
本実施形態２の撮像ユニット１０１においては、光源２０２から出射した光は、図２８の光路で示されるように、フロントガラス１０５の内壁面に設けられた反射偏向部材としてのプリズム２３０に入射することにより、フロントガラス１０５の外壁面上で全反射して撮像レンズ２０４に入射し、センサ基板２０７上の画像センサ２０６で受光される。プリズム２３０は、フロントガラス１０５の屈折率に近い材料で形成されているため、光源２０２から出射した光がフロントガラス１０５の外壁面上で全反射する条件を作り出すのが容易である。なお、詳細は、特開２０１４‐３２１７４号公報等に開示されている。
【０１０８】
一方、フロントガラス１０５の外壁面に雨滴が付着した箇所においては、光源２０２から出射した光がフロントガラス１０５の外壁面を透過するため、画像センサ２０６で受光されることはない。上述した実施形態１では、光源２０２から出射した光がフロントガラス１０５の外壁面を透過する一方、フロントガラス１０５の外壁面に雨滴が付着した箇所ではその雨滴内部で乱反射した光が画像センサ２０６で受光される。
【０１０９】
したがって、本実施形態２においては、上述した実施形態１の雨滴検出用画像領域の画像を反転させたような画像が得られることになる。すなわち、上述した実施形態１では、図１４に示したように、雨滴付着箇所の輝度が高い画像が得られるのに対し、本実施形態２では、図２９に示すように、雨滴付着箇所の輝度が低い画像が得られる。したがって、上述した実施形態では、画素値の総和が大きいほど雨量が多いという関係になるが、本実施形態２においては、画素値の総和が小さいほど雨量が多いという関係になる。
【０１１０】
以上、上述した実施形態１及び２の移動体機器制御システムで実行される各種処理は、ハードウェアで実現することができる他、ソフトウェアで実現することもできる。ソフトウェアで実現する場合、各種処理を実現するためにコンピュータを機能させるプログラムは、ＲＯＭ等に予め組み込まれて提供される。また、プログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｋ）等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。また、プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、プログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。
【０１１１】
以上に説明したものは一例であり、次の態様毎に特有の効果を奏する。
（態様Ａ）
光源２０２が光源光を照射する照射期間中にフロントガラス１０５等の光透過性部材を経由して画像センサ２０６等の受光手段により受光される受光量に基づいて、該光透過性部材に付着する雨滴等の付着物を検出する付着物検出処理（Ｓ２６〜Ｓ２７）を実行し、該付着物検出処理の検出結果を出力する画像解析ユニット１０２等の付着物検出処理手段を備えた付着物検出装置において、前記付着物検出処理手段は、前記光源が光源光を照射しないセンシングフレームＡ３の露光期間等の非照射期間中に前記受光手段により受光される受光量（消灯時画素値総和）に応じて、該非照射期間の後に前記光源が光源光を照射する予定の雨滴検出用フレームＲ４の露光期間等の予定照射期間に対応する付着物検出処理を実行するか否かを決定することを特徴とする。
上述したとおり、強い外乱光が受光手段に入射するときに付着物検出処理の結果に対する外乱光成分の影響度合いが大きいものとなる。ここで、非照射期間中に受光手段により受光される受光量はすべて外乱光に起因するものである。よって、非照射期間中に前記受光手段により受光される受光量から、どの程度の強い外乱光が受光手段に受光されているかを把握することが可能である。したがって、非照射期間中に受光手段により受光される受光量から、その非照射期間の後に光源が光源光を照射する予定の予定照射期間中にどの程度の強い外乱光が受光手段に受光されるかを推測できる。本態様によれば、このようにして推測される予定照射期間中の外乱光が、当該予定照射期間に対応する付着物検出処理の結果に対して許容範囲を超える影響を与えるほど強い外乱光である場合、その付着物検出処理を実行しないという制御が可能である。このような制御により、後段の処理や制御（ワイパー制御等）に利用される付着物検出処理の検出結果のうち、強い外乱光によって精度が低くなっている検出結果については、後段の処理や制御に利用されなくなる。すなわち、後段の処理や制御に利用される検出結果の精度バラツキは小さくなる。その結果、検出結果の精度バラツキが大きいことに起因して後段の処理で引き起こされる不具合を抑制することができる。
【０１１２】
（態様Ｂ）
前記態様Ａにおいて、前記光源から光源光を照射させるか否かの制御を行う画像解析ユニット１０２等の光源制御手段を有し、前記光源制御手段は、前記予定照射期間中は前記光源から光源光を照射させない制御を行うことを特徴とする。
これによれば、光源の点灯時間を少なくして省電力化を図ることができる。
【０１１３】
（態様Ｃ）
光源２０２が光源光を照射する照射期間中にフロントガラス１０５等の光透過性部材を経由して画像センサ２０６等の受光手段により受光される受光量に基づいて、該光透過性部材に付着する雨滴等の付着物を検出する付着物検出処理を実行し、該付着物検出処理の検出結果を出力する画像解析ユニット１０２等の付着物検出処理手段を備えた付着物検出装置において、前記付着物検出処理手段は、前記光源が光源光を照射しない非照射期間中に前記受光手段により受光される受光量（消灯時画素値総和）に応じて、該非照射期間の前又は後の照射期間に対応する付着物検出処理の検出結果を出力するか否かを決定することを特徴とする。
これによれば、後段の処理や制御（ワイパー制御等）に利用される付着物検出処理の検出結果のうち、強い外乱光によって精度が低くなっている検出結果については、後段の処理や制御に利用されなくなる。すなわち、後段の処理や制御に利用される検出結果の精度バラツキは小さくなる。その結果、検出結果の精度バラツキが大きいことに起因して後段の処理で引き起こされる不具合を抑制することができる。
【０１１４】
（態様Ｄ）
前記態様Ａ〜Ｃのいずれかの態様において、前記付着物検出処理手段は、前記非照射期間中に前記受光手段により受光される受光量（消灯時画素値総和）が外乱判定閾値等の所定の閾値を超えるとき、前記予定照射期間に対応する付着物検出処理を実行しない決定、又は、該非照射期間の前又は後の照射期間に対応する付着物検出処理の検出結果を出力しない決定を行うことを特徴とする。
これによれば、所定の閾値を適宜設定することにより、付着物検出処理の結果に対して許容範囲を超える影響を与えるほど強い外乱光を適切に検出することができる。
【０１１５】
（態様Ｅ）
光源２０２が光源光を照射する照射期間中にフロントガラス１０５等の光透過性部材を経由して画像センサ２０６等の受光手段により受光される受光量に基づいて、該光透過性部材に付着する雨滴等の付着物を検出する付着物検出処理を実行し、該付着物検出処理の検出結果を出力する画像解析ユニット１０２等の付着物検出処理手段を備えた付着物検出装置において、前記付着物検出処理手段は、前記光源が光源光を照射しない非照射期間中に前記受光手段により受光される受光量が多いほど、該非照射期間の前又は後の照射期間に対応する付着物検出処理の検出結果の信頼度を低く設定し、設定した信頼度を該検出結果とともに出力することを特徴とする。
これによれば、付着物の検出結果が後段の処理や制御において、信頼度の高低に応じて検出結果の影響度合いを変化されるなどの対処が可能となる。これにより、強い外乱光によって精度が低くなっている検出結果を後段の処理や制御で全く利用しない場合と比較して、後段の処理や制御をより適切に実行することが可能となる。
【０１１６】
（態様Ｆ）
前記態様Ａ〜Ｅのいずれかの態様において、前記付着物検出処理手段は、照射期間の前又は後の非照射期間中に前記受光手段により受光される受光量を用いず、該照射期間中に前記受光手段により受光される受光量を用いて前記付着物検出処理を実行することを特徴とする。
これによれば、いわゆる点灯時と消灯時の差分をとる演算が不要であり、より簡易な付着物検出処理を実現できる。
【０１１７】
（態様Ｇ）
前記態様Ａ〜Ｅのいずれかの態様において、前記付着物検出処理手段は、照射期間の前又は後の非照射期間中に前記受光手段により受光される受光量と該照射期間中に前記受光手段により受光される受光量との差分情報に基づいて前記付着物検出処理を実行することを特徴とする。
これによれば、ある程度の外乱光成分が除外された差分情報に基づいて付着物検出処理を実行するので、外乱光の影響が少ない付着物の検出結果を得ることが可能である。
【０１１８】
（態様Ｈ）
前記態様Ａ〜Ｇのいずれかの態様において、前記光源は、赤外波長帯等の特定の波長帯をもつ光源光を照射するものであり、前記受光手段は、前記特定の波長帯を通過させるが該特定の波長帯から外れた波長帯を通過させない雨滴検出用フィルタ等の波長選択フィルタを介して受光するものであることを特徴とする。
これによれば、受光手段へ入射する外乱光を減らすことができるので、より外乱光の影響が少ない付着物の検出結果を得ることが可能である。また、このような波長選択フィルタを介して受光することで、上述したような強い外乱光が受光手段に入る頻度が少なくなる。その結果、予定照射期間に対応する付着物検出処理を実行しない決定や、付着物検出処理の検出結果を出力しない決定や、信頼度の低い検出結果の出力の頻度を抑えることができる。
【０１１９】
（態様Ｉ）
付着物検出装置により検出した付着物の検出結果に基づいて、自車両１００等の移動体に搭載されたワイパー１０７等の所定の機器を制御するワイパー制御ユニット１０６等の移動体機器制御手段を備えた移動体機器制御システムにおいて、前記付着物検出装置として、前記態様Ａ〜Ｈのいずれかの態様に係る付着物検出装置を用いることを特徴とする。
これによれば、より適切な機器制御が可能となる。
【０１２０】
（態様Ｊ）
前記態様Ａ〜Ｈのいずれかの態様に係る付着物検出装置のコンピュータを機能させる付着物検出用プログラムであって、前記コンピュータを前記付着物検出処理手段として機能させることを特徴とする。
これによれば、付着物の検出結果を利用する後段の処理で支障を来す事態を抑制できる。
【０１２１】
（態様Ｋ）
光源が光源光を照射する照射期間中に光透過性部材を経由して受光手段により受光される受光量に基づいて、該光透過性部材に付着する付着物を検出する付着物検出処理を実行し、該付着物検出処理の検出結果を出力する付着物検出方法において、前記光源が光源光を照射しない非照射期間中に前記受光手段により受光される受光量に応じて、該非照射期間の後に前記光源が光源光を照射する予定の予定照射期間に対応する付着物検出処理を実行するか否かを決定することを特徴とする。
これによれば、付着物の検出結果を利用する後段の処理で支障を来す事態を抑制できる。
【０１２２】
（態様Ｌ）
光源が光源光を照射する照射期間中に光透過性部材を経由して受光手段により受光される受光量に基づいて、該光透過性部材に付着する付着物を検出する付着物検出処理を実行し、該付着物検出処理の検出結果を出力する付着物検出方法において、前記光源が光源光を照射しない非照射期間中に前記受光手段により受光される受光量に応じて、該非照射期間の前又は後の照射期間に対応する付着物検出処理の検出結果を出力するか否かを決定することを特徴とする。
これによれば、付着物の検出結果を利用する後段の処理で支障を来す事態を抑制できる。
【０１２３】
（態様Ｍ）
光源が光源光を照射する照射期間中に光透過性部材を経由して受光手段により受光される受光量に基づいて、該光透過性部材に付着する付着物を検出する付着物検出処理を実行し、該付着物検出処理の検出結果を出力する付着物検出方法において、前記光源が光源光を照射しない非照射期間中に前記受光手段により受光される受光量が多いほど、該非照射期間の前又は後の照射期間に対応する付着物検出処理の検出結果の信頼度を低く設定し、設定した信頼度を該検出結果とともに出力することを特徴とする。
これによれば、付着物の検出結果を利用する後段の処理で支障を来す事態を抑制できる。
【符号の説明】
【０１２４】
１００  自車両
１０１  撮像ユニット
１０２  画像解析ユニット
１０５  フロントガラス
１０６  ワイパー制御ユニット
１０７  ワイパー
２００  撮像部
２０２  光源
２０３  雨滴
２０５  光学フィルタ
２０６  画像センサ
２０７  センサ基板
２０８  信号処理部
２１３  車両検出用画像領域
２１４  雨滴検出用画像領域
【先行技術文献】
【特許文献】
【０１２５】
【特許文献１】特開２０１４−３２１７４号公報
【図１】
0006566308.tif 000002
【図２】
0006566308.tif 000003
【図３】
0006566308.tif 000004
【図４】
0006566308.tif 000005
【図５】
0006566308.tif 000006
【図６】
0006566308.tif 000007
【図７】
0006566308.tif 000008
【図８】
0006566308.tif 000009
【図９】
0006566308.tif 000010
【図１０】
0006566308.tif 000011
【図１１】
0006566308.tif 000012
【図１２】
0006566308.tif 000013
【図１３】
0006566308.tif 000014
【図１４】
0006566308.tif 000015
【図１５】
0006566308.tif 000016
【図１６】
0006566308.tif 000017
【図１７】
0006566308.tif 000018
【図１８】
0006566308.tif 000019
【図１９】
0006566308.tif 000020
【図２０】
0006566308.tif 000021
【図２１】
0006566308.tif 000022
【図２２】
0006566308.tif 000023
【図２３】
0006566308.tif 000024
【図２４】
0006566308.tif 000025
【図２５】
0006566308.tif 000026
【図２６】
0006566308.tif 000027
【図２７】
0006566308.tif 000028
【図２８】
0006566308.tif 000029
【図２９】
0006566308.tif 000030