(57)【特許請求の範囲】
【請求項１】
目下のトラフィックシーンの画像を、可視スペクトルの範囲外で反応するカメラによって撮影し、
前記画像を車内の光学系表示装置を用いて可視スペクトルで再現する形式の、特に夜間や悪天候または霧等の時の、車両における視界を改善する方法において、
カメラ（２）によって撮影されたトラフィックシーンに含まれる対象のタイプを自動的に識別し、
タイプに応じて識別された対象を、該対象が昼光下で有している典型的な輝度および／または色に相応する、輝度および／または色で前記光学系表示装置（６）に表示することを特徴とする、車両における視界を改善する方法。
【請求項２】
目下のトラフィックシーンの画像を撮影する、可視スペクトルの範囲外で反応するカメラと、
前記撮影画像を可視スペクトルで再現する、車内の光学系表示装置と、を有する形式の、特に夜間や悪天候または霧等の時の、車両における視界を改善する装置において、
カメラ（２）によって撮影されたトラフィックシーンに含まれている対象のタイプを識別する装置（８）と、
タイプに応じて識別された対象を、該対象が昼光の下で有している典型的な輝度および／または色に相応する、輝度および／または色で光学系表示装置（６）に再現する装置（１０，４）とを有することを特徴とする、車両における視界を改善する装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、目下のトラフィックシーンの画像を、可視スペクトルの範囲外で反応するカメラによって撮影し、この画像を車内の光学系表示装置を用いて可視スペクトルで再現する形式の、特に夜間や悪天候または霧等の時の、車両における視界を改善する方法および装置に関する。
【０００２】
【従来の技術】
ＤＥ４００７６４６から、通常のヘッドライトの他に２つの赤外線照射装置を付加的に有する車両用オプトエレクトロニクスシステムが公知である。この赤外線照射装置は、近赤外線で発光するレーザーダイオードを光源として用いる。目下のトラフィックシーンのビデオ画像を撮影するためのＣＣＤカメラは、車両のルーフ領域に配置されている。このビデオ画像は、液晶ディスプレイでドライバに表示されるか、またはフロントガラスに投影される。これらの表示画像には、付加的な情報が含まれているが、それらの情報は、特に夜間や悪天候および霧の場合にはドライバ自身の肉眼のみでは視認できないか、またはかろうじて視認できても過度な疲労を伴う。
【０００３】
このＣＣＤカメラは通常、専らもしくはほとんど赤外線で反応し、画像を伝送する。この画像内で複数の対象が、赤外線におけるその輝度によってあらわれ、それらの輝度は遠赤外線または近赤外線での撮影に応じて、多かれ少なかれこれらの対象の温度に依存する。ドライバがそれらの対象を相互により良く区別することができるように、異なる輝度に異なる色を割り当て、それをカラーモニタに表示することができる。このような技術は、例えばＪＰ０８１２７２８６Ａ１から公知である。この種の「熱画像」は、実質的に不変のスペクトル分布で可視スペクトルにシフトされた、赤外線画像シーンに相当する。
【０００４】
ＪＰ０６１２１３２５Ａ１では、種々異なる多数のスペクトル領域で反応するカメラが用いられている。各スペクトル領域には、それぞれの色が割り当てられ、相応する画像部分がその色でカラーモニタに表示される。
【０００５】
しかし全ての公知システムでは、ドライバはトラフィックシーンを疑似輝度ないしは疑似カラーでしか視認できない。このような表示方法には一般的に慣れていなく、馴染みが薄い。とりわけ遠赤外線での撮影画像には馴染んでいない。このシステムに慣れているドライバさえも、疑似輝度ないしは疑似カラーで表示された情報を処理するのには、可視スペクトル領域で得られた画像情報を処理するのよりも労力を要する。
【０００６】
【発明が解決しようとする課題】
本発明の課題は、可視スペクトルの範囲外で撮影されたトラフィックシーンの画像をドライバがより良く認知できるように改善することである。
【０００７】
【課題を解決するための手段】
前記の課題は、カメラによって撮影されたトラフィックシーンに含まれる対象のタイプを自動的に識別し、タイプに応じて識別された対象を、該対象が昼光下で有している典型的な輝度および／または色に相応する、輝度および／または色で前記光学系表示装置に表示することによって、またそれに対応する装置によって解決される。
【０００８】
【発明の実施の形態】
本発明により改善された画像は夜間、トンネル内または霧等の悪天候等の太陽光が少ない、または太陽光が無い状況でドライバを支援する。この画像は、ドライバに価値の高い情報をドライバの慣れ親しんだ形態で与える。
【０００９】
【実施例】
本発明の別の特徴部分および利点を、以下で図面に基づき詳細に説明する。図面には、車両における視界を改善する装置の主要な構成素子が示されている。
【００１０】
装置は画像センサとしてカメラ２を有している。このカメラは車両のルーフ領域に、走行方向に展開するトラフィックシーンを撮影するように配置されている。カメラ２は可視スペクトルの領域外で反応する。すなわち、車両固有の赤外線照射装置によって近赤外線もしくは、残光の有効利用による遠赤外線で反応するか、または車両固有の紫外線照射装置によって生成される紫外線光に対して反応する。
【００１１】
カメラ２によって送出されたビデオ画像は、この実施例では「白黒」である。すなわちこれは反応スペクトルに亘って加算、または平均化された輝度値を有する撮影画像である。
【００１２】
カメラ２のビデオ信号は、色発生器４に供給される。この色発生器４は従来技術ではビデオ画像の異なる輝度値に、車内の光学系表示装置６を駆動制御する所定のＲＧＢ値を割り当てる。この表示装置はビデオ画像をドライバに疑似カラーで示す。
【００１３】
当該明細書で示すように、少なくともビデオ画像の部分でのＲＧＢ値の割り当ては、画像輝度のみに依存して行われるのではなく、付加的にまたは専ら、画像内の対象のタイプに依存する。これはカメラ２のビデオ信号が、識別およびクラス分け装置８にも供給されることで行われる。この装置は、予め定められた出現パターンに相応する対象を追ってトラフィックシーンをサーチする。本発明の適用分野において重要な対象とは、例えば車両、人、動物、道、森、草地等である。識別およびクラス分けを行う上で基準になる情報は、例えば輪郭や、相対的な輝度および構造である。
【００１４】
この種の対象が識別された場合、識別およびクラス分け装置８は、対象に関する情報、殊にそのタイプ、輪郭およびビデオ画像内での位置を色整合装置１０に供給する。色整合装置１０は対象に、メモリ１２に記憶されているコンテキスト情報に基づき、対象が昼光下で有している典型的な色を割り当てる。さらに色整合装置１０は色発生器４を制御して、対象を典型的な色で、かつ適切な相対輝度で光学系表示装置６に再現する。記憶されているコンテクキスト情報は例えば、「草地は夏には緑色である」とか「路面の舗装は通常は灰色である」等である。一般的に当てはまる法則がない場合、例えば車両の色や人の服装の色等の場合には任意の色を選択し、事前に設定することができる。人の場合には、有利には肌色とコントラストを成す色が設定される。
【００１５】
識別、クラス分け、色整合に、センサ１４または別の情報源から供給される、さらに別の情報を使用することができる。これらの情報源は、外気温度計、時計、雨滴センサ等の、いずれにせよ車両に存在する可能性の高いものである。例えば、雨滴センサが雨が降っていることを示すと、路面は光学系表示装置６で乾燥時より暗く表示され、よりリアルになる。また車両用ナビゲーションシステムが、現在、ほぼ森の領域を通過しているという情報を供給すると、このような情報によって相応の画像領域のリアルなクラス分け、および再現が容易に行われる。
【００１６】
簡易な「白黒」カメラ２の変わりに「多色性の」ＩＲカメラ（赤外線カメラ）を使用することによって、識別の正確性を高め、よりリアルにすることができる。このＩＲカメラは、各画素毎に異なる波長の強度を供給する。すなわち多かれ少なかれ、より詳細になされたスペクトル分布が得られる。識別された対象の、所定の日中時刻と天候でのもとで測定されたスペクトル分布がその後、色整合装置１０によって、記憶された経験値に基づいて昼光スペクトルに換算し直される。すなわち対象が、昼光下での輝度と色にできるだけ近い輝度および色を有するスペクトルに換算し直される。
【００１７】
撮影された画像内の相対的な全ての対象を相応に処理することによって、ドライバは夜間でも、周辺状況を慣れている形式で光学系表示装置６に見ることができる。しかもこの画像には与えられた状況では、全く識別することができないか、またはそれ自体の識別すら困難であるような詳細さえも含まれる。
【００１８】
光学系表示装置６は、計器盤上方のディスプレイで合っても、またヘッドアップディスプレの様式に応じてフロントガラス領域に画像を写すためのプロジェクタであってもよい。
【００１９】
光学系表示装置６は、必ずしもカラーでなくともよく、白黒の光学系表示装置を上述の、赤外線画像を太陽光の下での画像のように再現する原理に従って駆動制御することもできる。これは対象の再現輝度だけを適切に変化させることで行われる。
【００２０】
幅広く展開されたフラットディスプレイをさらに使用できる場合には、フロントガラスを完全にディスプレイによって光学系表示装置６として使用することもできる。これはスイッチオフされた状態では透明でなくてはならない。フロントガラスを完全に光学系表示装置として使用する場合、周辺状況は、夜間には１対１でフロントガラス全体のディスプレイに表示される。その結果、ドライバは日中に走行しているような印象を受ける。前述した赤外線画像中の対象の識別、クラス分け、および色整合は、このような使用を可能にするのに充分に正確で、かつリアルなものとみなされる。
【図面の簡単な説明】
【図１】車両でのシーンを改善する装置の主要な構成
【符号の説明】
２  カメラ
４  色発生器
６  光学系表示装置
８  識別およびクラス分け装置
１０  色整合装置
１２  メモリ
１４  センサ
【図１】
0003839350.tif 000002