(57)【要約】【課題】プリズム等の特殊な光学系を用いることなしに、外乱光の影響を受けない画像が得られ、透光体に付着した異物の有無や、数、大きさ、位置などが計測できる異物検出計測装置を提供する。【解決手段】車室外にカメラ１を、車室内に反射手段４を配置し、フロントガラス３に付着し外部風景の映り込んだ雨滴２を図形６とともに撮影し、得られた画像を情報処理手段５により画像補正処理および計測処理を行うことによって、雨滴２を検出し、数、大きさ、位置などを計測する構成とする。【選択図】図１
2007127595.tif 000002
【特許請求の範囲】
【請求項１】
透光体に付着した雨滴、油滴、その他の異物を撮影するための撮像手段と、前記撮像手段により撮影された画像を処理する情報処理手段とを有する異物検出計測装置において、
前記撮像手段は、前記透光体の前記異物の付着した面側で該透光体からの光を受けられる位置に配置され、
前記透光体に対して前記撮像手段とは反対側の面に配置され、該透光体からの透過光を反射させる反射手段を有することを特徴とする異物検出計測装置。
【請求項２】
請求項１に記載の異物検出計測装置において、
前記撮像手段の視線方向と前記透光体とがなす角度は、前記異物に外界情報が映り込む角度であることを特徴とする異物検出計測装置。
【請求項３】
請求項１に記載の異物検出計測装置において、
前記反射手段は、前記透光体面上の異物との差異が検知できる部材であることを特徴とする異物検出計測装置。
【請求項４】
請求項３に記載の異物検出計測装置において、
前記部材は、白色部材もしくは白色面光源部材であることを特徴とする異物検出計測装置。
【請求項５】
請求項１に記載の異物検出計測装置において、
前記情報処理手段は、範囲指定手段を用いることを特徴とする異物検出計測装置。
【請求項６】
請求項５に記載の異物検出計測装置において、
前記範囲指定手段は、平面図形であることを特徴とする異物検出計測装置。
【請求項７】
請求項６に記載の異物検出計測装置において、
前記平面図形は、線分の交点を中心とする正円もしくは楕円を頂点に配する正方形であることを特徴とする異物検出計測装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、異物検出計測装置に関し、特に車両のフロントガラスの異物検出計測装置に関する。
【背景技術】
【０００２】
近年、車両設備の自動化が進んでおり、その１つに自動でワイパを作動させる技術がある。自動でワイパを作動させるためには、車両のフロントガラスで雨滴の有無を検出するための検出装置が必要である。また、ワイパの作動速度を制御するためには、雨滴の量を計測するための計測装置も必要となる。
【０００３】
従来、車両のフロントガラスに付着した雨滴の数や大きさを検出し、計測したい場合、薄膜などを用い抵抗値、容量値の変化を見る方法や、発光部と受光部を備え、雨滴の付着で光量の変化を見る光学式がある。
【０００４】
ここで、図６を用いて従来の光学式の異物検出装置の構成を説明する。
【０００５】
１ａは撮像手段であり、７ａは発光手段である。２ａは雨滴、３ａは車両のフロントガラスであり、雨滴２ａはフロントガラス３ａに付着した状態である。ここで、撮像手段１ａおよび発光手段７ａは、雨滴２ａがフロントガラス３ａに付着した面とは反対の面側、すなわち、車室内に配置される。
【０００６】
このような構成において、発光手段７ａから発光された光がフロントガラス３によって反射され、その反射光が撮像手段１ａにより撮影される。撮像手段１ａにより撮影された画像は、情報処理手段５ａで画像処理され、その画像に基づいて雨滴の有無や量が計測される。
【０００７】
また、このような従来の異物検出装置にプリズム状の集光手段を配置することによって、フロントガラスに付着した雨滴や汚れなどの異物を検出する精度を向上させたものがある（例えば、特許文献１参照）。
【特許文献１】特許第３６４１２５０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００８】
しかしながら、従来の異物検出装置においては、いずれもフロントガラスの一部を見ており、広い範囲で雨滴等の異物を検知することは難しく、どのくらいの大きさの異物がどのくらいの数付着しているのかを計測することはできない。また、特許文献１に記載の異物検出装置では、複雑な光学系を用いる必要があり、異物の有無や大きさ、数を雨滴に限定して測定する目的で使用すると、雨滴以外の汚れやフロントガラスの傷も含めて検出してしまう恐れがある。
【０００９】
また図６に示すように、車室内にカメラを配置した構成では、カメラが車室外に向けられているため、昼夜、西日、トンネル等の外乱光が異物の検出や計測に大きな影響を与える。例えば、図７に示す写真のように、カメラの撮影範囲に空のような一様な背景が含まれている場合、フロントガラスを通して見る車室外の風景と、フロントガラスに付着した異物である雨滴との差異がなく検知できない。そこでこの雨滴を検知しやすくするために、車室内もしくは車室外に照明を設置しカメラで撮影した写真を図８、図９に示す。図８、図９ともに、多少雨滴は検知しやすくなるが、雨滴以外の汚れや傷あるいはフロントガラス自体の反射によるハレーションが生じ、その結果雨滴検出には適さない画像となる。
【００１０】
本発明は、以上の点に鑑みてなされたものであり、プリズム等の特殊な光学系を用いることなしに、外乱光の影響を受けない画像が得られ、フロントガラス等の透光体に付着した異物の検出や、数、大きさ、位置などが計測できる異物検出計測装置を提供することを目的とする。
【課題を解決するための手段】
【００１１】
この発明は下記の構成を備えることにより上記課題を解決できるものである。
【００１２】
（１）透光体に付着した雨滴、油滴、その他の異物を撮影するための撮像手段と、前記撮像手段により撮影された画像を処理する情報処理手段とを有する異物検出計測装置において、前記撮像手段は、前記透光体の前記異物の付着した面側で該透光体からの光を受けられる位置に配置され、前記透光体に対して前記撮像手段とは反対側の面に配置され、該透光体からの透過光を反射させる反射手段を有することを特徴とする異物検出計測装置。
【００１３】
（２）前記（１）に記載の異物検出計測装置において、前記撮像手段の視線方向と前記透光体とがなす角度は、前記異物に外界情報が映り込む角度であることを特徴とする異物検出計測装置。
【００１４】
（３）前記（１）に記載の異物検出計測装置において、前記反射手段は、前記透光体面上の異物との差異が検知できる部材であることを特徴とする異物検出計測装置。
【００１５】
（４）前記（３）に記載の異物検出計測装置において、前記部材は、白色部材もしくは白色面光源部材であることを特徴とする異物検出計測装置。
【００１６】
（５）前記（１）に記載の異物検出計測装置において、前記情報処理手段は、範囲指定手段を用いることを特徴とする異物検出計測装置。
【００１７】
（６）前記（５）に記載の異物検出計測装置において、前記範囲指定手段は、平面図形であることを特徴とする異物検出計測装置。
【００１８】
（７）前記（６）に記載の異物検出計測装置において、前記平面図形は、線分の交点を中心とする正円もしくは楕円を頂点に配する正方形であることを特徴とする異物検出計測装置。
【発明の効果】
【００１９】
本発明によれば、プリズム等の特殊な光学系を用いることなく、撮像手段と反射手段だけで雨滴の検知が可能である。この撮像手段ではフロントガラスと反射手段を撮影するため、車室外の環境（西日、対向車のライト、トンネル、その他の外乱光など）に左右されずに計測が可能である。
【００２０】
また、情報処理手段において範囲指定手段を用いることにより、雨滴の有無だけでなく、数、大きさ、位置などがリアルタイムに計測可能である。
【００２１】
さらに、カメラのレンズや位置を変えることにより、測定範囲を任意の位置、大きさに設定できる。
【発明を実施するための最良の形態】
【００２２】
図１は本実施例の異物検出計測装置の構成を示す図で、車両のフロントガラスに設置したときの断面図ある。
【００２３】
１は撮像手段であるカメラ、２は異物である雨滴、３は透光体としての車両のフロントガラスである。雨滴２はフロントガラス３に付着した状態である。本発明の異物検出計測装置では、カメラ１はフロントガラス３の雨滴２の付着した面側、すなわち車室外に配置され、フロントガラス３に付着した雨滴２を斜め上方より撮影する。カメラ１は、ＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅｓ）カメラやＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）カメラ等の、撮影した画像をデジタルデータとして出力可能なものや、アナログデジタル変換によりデジタルデータが得られるアナログカメラ等である。また、カメラ１のレンズは、測定したい範囲を十分撮影できる画角を持つもので、かつ防水加工されたものである。
【００２４】
４は反射手段であり、フロントガラス３に対してカメラ１とは反対側の面、すなわち車室内の面であって、ドライバーの視界を確保できる位置に配置される。また、反射手段４は白紙や白板などの白色部材もしくは白色面光源部材を配置することにより構成される。異物である雨滴２は鏡もしくはプリズムのような役割を果たし、その表面には周囲の風景（外界情報に相当）が映り込んでいる。本発明ではこの現象を利用し雨滴２を精度よく検知するために反射手段４を配置する。反射手段４には、日光や街灯等の外光がある状況では白紙や白板などの白色部材を、また外光のない状況では白色面光源部材を用いる。
【００２５】
５は情報処理手段であり、例えば処理部や記憶部、入出力部、表示部を備えた情報処理装置等である。情報処理手段５では、カメラ１で撮影した画像の画像補正処理と、画像補正処理により抽出された雨滴から大きさ、数、位置等を測定する計測処理とを行う。
【実施例】
【００２６】
図２は、本発明の異物検出計測装置を用いて雨滴２の付着したフロントガラス３を撮影した写真を示す図である。
【００２７】
図２では、車室外の風景が雨滴２に映り込んでいるが、反射手段４により雨滴２の背景が白くなっており、雨滴２を検知しやすくなっている。このように、雨滴２に映り込んだ周囲の風景（以下、外部風景とする）と反射手段４との差異により雨滴２が検出できる。雨滴２に映り込む外部風景は道路予壁面などが大部分であり、反射手段４と同程度の白い外部風景でない限り、雨滴２の検出は可能である。
【００２８】
本実施例のカメラ１の撮影画像は俯瞰画像であるため、ピントが合う範囲で計測可能である。また撮影画像が俯瞰画像であることから、正確な雨滴の大きさを計測するために、撮影画像に対してアフィン変換等による画像補正を行う。
【００２９】
ここで、情報処理手段５における画像補正処理と雨滴２の計測処理について説明する。
【００３０】
図３は本実施例の情報処理手段５において画像補正処理に用いる範囲指定手段としての平面図形である図形６を示した図である。
【００３１】
図形６は正方形であり、その頂点には２辺の交点を中心とする正円もしくは楕円（以下、単に円とする）が配される。円の半径は任意であるが、円の内部は反射手段４や雨滴２との差異が大きくなる色で塗りつぶす。本実施例では、白色部材もしくは白色面光源部材を用いた反射手段４との明度差が大きい黒とする（以下、この黒い円を黒丸とする）。この図形６を用いて、計測範囲を指定する。
【００３２】
まず、図形６をフロントガラス３の計測範囲に配置し撮影する。
【００３３】
図４（ａ）は撮影した計測範囲および雨滴を示す模式図で、雨滴は１つしか図示していないが、実際は多数存在する。
【００３４】
撮影した画像を用い、４つの黒丸を２値化、形状処理等で認識し、黒丸の座標を求める（図４（ａ）のｐ１，ｐ２，ｐ３，ｐ４）。この４点の座標（ｐ１，ｐ２，ｐ３，ｐ４）が正方形の頂点となるようにアフィン変換を行う。図４（ｂ）はアフィン変換後の撮影範囲を示した模式図であり、アフィン変換後の黒丸の座標はＰ１，Ｐ２，Ｐ３，Ｐ４である。
【００３５】
アフィン変換を行ったあと、さらにシェーディング補正、平滑化、鮮明化、２値化、ラベリング等の画像補正処理を行い、外部風景の映り込んだ雨滴２を抽出する。
【００３６】
次に計測処理により雨滴の実際の大きさを算出する。まず、アフィン変換を行った正方形の一辺のピクセル数を求め（図４（ｂ）参照）、この値と既知である図形６の辺の長さ（図３参照）とから実際の雨滴の大きさを求める。
【００３７】
例えば計測範囲、すなわち図形６の正方形の一辺がｐ  ｍｍで、アフィン変換後の正方形の一辺が画像上でＰ  ｐｉｘｅｌであるとき、Ｘ  ｐｉｘｅｌの雨滴の大きさをＬ  ｍｍとすると、雨滴の大きさＬ  ｍｍは、
Ｌ＝ｐＸ／Ｐ                式（１）
から求められる。
【００３８】
図２の雨滴を観察すると、雨滴２のように、下部には外部風景が映り込んでおり、上部には反射手段４が映り込んでいるものがある。このような外部風景の映り込みと、雨滴２を通して見える反射手段４との割合は、カメラ１の視線方向とフロントガラス３とのなす角度θ、すなわち俯角θにより決まる（図１参照）。俯角θが大きいときは外部風景が雨滴２に効果的に映り込まないため、この俯角θは約１５〜４０度が最適である。
【００３９】
雨滴２に最適に映り込んだ外部風景は、その雨滴２の形状を十分映し出しており、映り込んだ外部風景の横方向の幅を雨滴２の大きさとみなし計測する。
【００４０】
ここで、図２に対して、このような画像補正処理および計測処理を行い得られた結果を図５に示す。なお、雨滴の一部が計測範囲（図５の６ａ）からはみ出すものについては計測しない。
【００４１】
このようにして得られた計測結果を用いて、例えば情報処理手段５の表示部に大きさ別に色分けして表示すると、大きさ、数、位置を視覚的に捉えることができる。
【００４２】
なお、雨滴２に映り込む外部風景が、例えばセンターラインのような白いラインであった場合、センターラインの部分は反射手段４との差異がないため、１つの雨滴が２つの雨滴として検知される。このような場合、検知された雨滴は特異な形状を示すため、一定の形状基準を設けることにより、特異な形状を示す雨滴を抽出することは可能である。抽出された特異な形状の雨滴に対しては、適切な画像補正処理を行うことにより、本来の雨滴の形状に復元することができる。このように、外部風景が雨滴を分割してしまうような場合においても、雨滴の検出、計測が可能である。
【００４３】
ところで、情報処理手段５で画像補正処理のアフィン変換（ｐ１，ｐ２，ｐ３，ｐ４→Ｐ１，Ｐ２，Ｐ３，Ｐ４：図４参照）を行うときに図形６を用いた。ここで、アフィン変換時に用いた数値を情報処理手段５の記憶部に記憶しておくことにより、角度θが一定である条件下で本発明の異物検出計測装置を使用する場合においては、以降図形６を配置する必要はない。
【００４４】
このように、図形６はカメラ１を初めて設置するときや、カメラ１の配置を変えたときすなわち角度θを変化させたときに用いるようにすればよい。
【００４５】
また、本発明の異物検出計測装置において、単位時間あたりのカメラ１による撮影回数を多くすることにより、異物が付着した時間を情報処理手段５の記憶部に記録することも可能である。このようにして得られたデータ（異物の大きさ、数、位置、付着時間）の記録を蓄積することにより、蓄積データを他の異物検出計測装置の動作検証に利用することができる。
【００４６】
また、本発明を特に雨滴検出計測用とするとき、ワイパのオン／オフや作動速度の調節などの自動制御に利用できる。この場合、フロントガラスに対し、どのくらいの大きさの雨滴がどのくらいの数、どのくらいの時間付着するとドライバーが負担に感じるのかを人間工学に基づき定量的に計測し、それを閾値としてワイパを制御する。
【００４７】
なお、情報処理手段５における画像補正処理の処理速度を高速にすることで、異物の変化をリアルタイムに測定することもできる。
【産業上の利用可能性】
【００４８】
雨滴検知センサとして利用できるだけでなく、雨滴検知センサの動作検証や検査にも利用可能である。さらに、ガラスに付着した水滴や油滴等の計測用途にも利用可能である。
【図面の簡単な説明】
【００４９】
【図１】本実施例の異物検出計測装置を車両のフロントガラスに設置したときの断面図
【図２】本実施例の異物検出計測装置によりフロントガラスを撮影した写真を示す図
【図３】情報処理手段５の画像補正処理におけるアフィン変換に用いる図形を示す図
【図４】（ａ）はアフィン変換前の計測範囲および雨滴を示す模式図、（ｂ）はアフィン変換後の計測範囲および雨滴を示す模式図
【図５】図２に画像補正処理と計測処理を行い得られた結果を示す図
【図６】従来例の異物検出装置を車両のフロントガラスに設置したときの断面図
【図７】従来例の異物検出装置でフロントガラスを撮影した写真を示す図
【図８】従来例の異物検出装置で照明を用いてフロントガラスを撮影した写真を示す図
【図９】従来例の異物検出装置で照明を用いてフロントガラスを撮影した写真を示す図
【符号の説明】
【００５０】
１  カメラ（撮影手段に相当）
２  雨滴（異物に相当）
３  フロントガラス（透光体に相当）
４  反射手段
５  情報処理手段
６  図形（範囲指定手段に相当）
【図１】
2007127595.tif 000003
【図３】
2007127595.tif 000004
【図４】
2007127595.tif 000005
【図６】
2007127595.tif 000006
【図２】
2007127595.tif 000007
【図５】
2007127595.tif 000008
【図７】
2007127595.tif 000009
【図８】
2007127595.tif 000010
【図９】
2007127595.tif 000011