(57)【特許請求の範囲】
【請求項１】
暗い場合に車両の周辺部を可視化するための方法において、
周辺部のカラーの視覚画像が、視覚スペクトル領域内で感知可能な視覚カメラ（１０１）によりデジタルデータとして提供され、周辺部の赤外画像が、赤外スペクトル領域内で感知可能な赤外カメラ（１０２）によりデジタルデータとして提供され、
視覚カメラ（１０１）の光学系が第１光学軸線を有し、赤外カメラ（１０２）の光学系が第２光学軸線を有し、これらの軸線が平行に互いにずらされていて、それらのカメラが同時に車両の周辺部のほとんど同部分を提供し、
画像内の像欠陥を排除するために視覚画像用の校正パラメータ（１０７）を使用して標準化された視覚画像と、画像内の像欠陥を排除するために赤外画像用の校正パラメータ（１０８）を使用して標準化された赤外画像とが、歪みのない融合画面をもたらすための適合パラメータ（１０９）を使用のもと、これらの画像のデジタルデータの処理により一致するように重ねられ、視覚画像と赤外画像から成る画像ペアが提供され、
それらの視覚画像と赤外画像の互いに対応する画素又は画素領域が、これらの画素情報の平均値形成のもと、これらのデジタルデータの処理により融合されて描写されること
を特徴とする方法。
【請求項２】
前記の画素情報が、画素又は画素領域の輝度値又は色値又は輝度値と色値であることを特徴とする、請求項１に記載の方法。
【請求項３】
前記の平均値形成において、視覚画像と赤外画像の前記の画素情報に対して重み付けが行われることを特徴とする、請求項２に記載の方法。
【請求項４】
前記の重み付けが、融合画面の部分領域のために又は融合画面の全領域のために行われることを特徴とする、請求項３に記載の方法。
【請求項５】
前記の重み付けが、運転者により手動で調節されることを特徴とする、請求項３又は４に記載の方法。
【請求項６】
前記の重み付けが、自動的に検出される車両の走行状況に依存し、視覚画像と赤外画像を融合するための融合装置（１０６）により調節されることを特徴とする、請求項３又は４に記載の方法。
【請求項７】
前記の走行状況に依存する調節が、天候状況、又は先行車両に対する間隔、又は市街地走行や幹線道路走行や高速道路走行をしていることに基づくものであることを特徴とする、請求項６に記載の方法。
【請求項８】
車両の現在のポジションが、車両ナビゲーションシステムにより自動的に検出され、市街地走行や幹線道路走行や高速道路走行がそのポジションによって検出されることを特徴とする、請求項７に記載の方法。
【請求項９】
前記の走行状況に依存する調節が、車両の現在の周辺の明るさに基づくものであることを特徴とする、請求項６に記載の方法。
【請求項１０】
前記の走行状況に依存する調節が、車両の速度、又は車両の加速度、又は車両の操舵角度、又は減光ライト或いは上向きライトの稼動に基づくものであることを特徴とする、請求項６に記載の方法。
【請求項１１】
暗い間、車両の周辺部を可視化するための装置（１００）において、この装置が、請求項１〜１０のいずれか一項に記載の方法を実施することを特徴とする装置。
【請求項１２】
視覚カメラ（１０１）と、赤外カメラ（１０２）と、視覚カメラ（１０１）により提供された車両の周辺部の一部分の視覚画像内の像欠陥を排除するための第１標準化装置（１０３）と、赤外カメラ（１０２）により提供された車両の周辺部の一部分の赤外画像内の像欠陥を排除するための第２標準化装置（１０４）と、視覚画像と赤外画像から成る画像ペアを生成するための指向装置（１０５）と、これらの画像ペアを、画素ごとに又は画素領域ごとにこれらの画素情報の平均値形成のもと融合する融合装置（１０６）とが設けられていることを特徴とする、請求項１１に記載の装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、該当する独立特許請求項の前提部（所謂おいて部）による、車両の周辺部（周辺状況）を可視化するための方法及び装置、並びにその装置を校正するための校正装置に関する。
【背景技術】
【０００２】
特許文献１から車両用の暗視システムが知られている。このシステムは、赤外画像を生成する赤外カメラを有し、その赤外画像は、車両の周辺部の一部分において人物及び物体から出る熱放射を示す。またこの赤外画像は、ヘッドアップディスプレイを介し、ウインドシールドの下部に投影され、それにより運転者に対して可視とされる。
【０００３】
赤外画像内の人物及び物体を、運転者の前にある交通状況であって視覚的にウインドシールドを通じて認識することのできる交通状況に割り当てることは、運転者により成されなくてはならない。このことは、特にその周知のシステムが想定されている暗さのもとでは困難で多くの場合にはむしろ不可能であり、その理由は、赤外画像が、運転者には視覚的に認識され得ない人物及び物体を示すためである。従って、赤外画像内だけで認識可能な人物及び物体をより正確にポジション決定することは、通常は不可能であり、危険にも運転者の気をそらすことになる。
【０００４】
【特許文献１】ＤＥ６９５０６１７４Ｔ２
【発明の開示】
【発明が解決しようとする課題】
【０００５】
本発明の課題は、主として、車両の周辺部を可視化するための改善された方法及び装置を提示することにあり、特に暗視システムを改善することである。
【課題を解決するための手段】
【０００６】
本発明の課題は、方法として並びに装置として、対応する独立特許請求項に記載された措置により解決される。本発明の有利な構成は、それらに割り当てられている従属特許請求項に記載されている。
【０００７】
本発明の本質的な第１観点は、車両の周辺部のほとんど同じ部分における視覚的（可視的な）な画像（以降では視覚画像（可視画像）と称す）と赤外的な画像（以降では赤外画像と称す）との組み合わせ（コンビネーション）つまり累積（オーバーラップ）を表示つまり可視化することにある。同一光景の異なるスペクトル領域の画像を累積又は融合することにより、従来技術の既述の短所がほとんど排除される。
【０００８】
本発明の本質的な第２観点は、両方のスペクトル部分（視覚部分と赤外部分）を各々の視覚画像と赤外画像の融合時に具体的な走行状況に依存して互いの割合で重み付けすることにある。重み付けの第１の極端な場合、融合により得られた画面はほとんど視覚情報だけを有し、通常の場合には視覚情報と赤外情報から成る累積を有し、重み付けの第２の極端な場合、融合により得られた画面はほとんど赤外情報だけを有する。
【０００９】
例えば幹線道路上で間隔測定システムにより先行車両が認識されると、これは例えば周知のレーダ支援式ＡＣＣシステム（オートマチック・クルーズ・コントロール）によってであるが、本発明の実施形態では、その車両を両方のスペクトル部分の融合時に走行周辺部に対して際立たせることが意図されていて、その結果、その車両は融合画面内で周辺部に対してより明確に現れる。このことは、例えば、両方のスペクトル部分の重み付けが走行周辺部に比べて重要な領域のために変更されることによって行われる；この例では、直接的に先行する車両を示す融合画面の画面部分である。昼間では例えば視覚情報が赤外情報に比べてより高く重み付けられ、それにより融合画面内ではより明確に有効とされ得て、それに対して暗い場合にはその反対に重み付けが成される。
【００１０】
良好に照明されている地域を車両が走行する場合、本発明の別の実施形態では選択的に又は追加的に、視覚部分つまり視覚情報を赤外部分つまり赤外情報に比べてより高く重み付けすることが意図されている。暗い幹線道路及び／又は高速道路において重み付けは選択的に又は追加的に前記のものとは反対に行われ、その結果、赤外情報つまり赤外部分が融合画面内で視覚部分に比べてより明確に現れる。
【００１１】
選択的に又は追加的に本発明の他の実施形態では、暗い幹線道路及び／又は高速道路において、より遠くに離れた対象の赤外情報を、その視覚情報に比べ、車両からさほど遠くに離れていない対象と区別し、融合時にそのより高い重み付けにより際立たせることが意図されている。場合により、運転者に対してディスプレイ上に提供された融合画面は、近距離領域では視覚情報がより多くの部分を占め、遠距離領域では赤外情報がより多くの部分を占め得る。
【００１２】
雨天、霧、又は湿った車道の場合、赤外経路の利用性つまり赤外情報の利用性は通常条件に比べて制限されている。そのような天候状況の際には恐らく制限されてのみ使用可能な赤外情報によって融合画面が悪化することに対抗するために、選択的に又は追加的に、視覚部分を赤外部分に比べて増加させる、即ち融合画面内の両方のスペクトル部分の重み付けを視覚情報の方向に適切に変更することが意図されている。
【００１３】
前記の天候条件を認識するために車両には特に雨センサ又は霧センサが設けられ得る。同様に、特にフォグランプのようにどの車両ランプがスイッチオンされているかが評価され得る。しかしこれらの情報は、車両内に設けられているダイナミック・ナビゲーションシステムによっても提供され得て、このシステム内には、車両の現在の滞在場所のために又は特に予期的にであるが計画された走行ルートのための動的な交通状況或いは天候状況が伝達され得る。この伝達は移動無線通信網又は車両・車両・通信により行われ得る。
【００１４】
選択的に又は追加的に本発明の実施形態では、運転者が融合画面内の両方のスペクトル部分の互いの重み付けを手動で調節し得て、それにより運転者の要求と特別な状況が最適に適合され得るということが意図されている。視覚情報から赤外情報への描写の連続的な移行、及び、赤外情報から視覚情報への描写の連続的な移行が、本発明の実施形態において意図されている。このことは、運転者に対し、スペクトル部分間の移動により、視覚情報と赤外情報との間の関連と、走行周辺部の融合画面に対する影響とを、より容易に且つ迅速に、交通状況のより迅速で且つ信頼性のある認識の意味で有益に使用することを可能にする。
【００１５】
他の実施形態では、運転者に対し、選択的に又は追加的に、この運転者に適していると思われる融合画面を選択するために多数の融合画面が提供され、この際、選択のために提供されている融合画面は、視覚情報から赤外情報への関与部分の割合において異なっている。特に視覚部分から赤外部分への異なる重み付けが融合時に行われている。
【００１６】
本発明に従う暗視システムの具体的な構成において、視覚カメラ又は第１センサつまりその光学系は第１光学軸線を有し、赤外カメラ又は第２光学センサつまりその光学系は第２光学軸線を有し、これらの軸線は空間的に互いにずれている。それによりこれらのカメラつまりセンサは、少なくとも部分的に車両の周辺部の異なる部分、即ち第１部分と第２部分を検知する。これらの部分は更に距離に依存する。自明であるが、本発明に従い、感度が異なる波長を網羅する２つよりも多くの赤外カメラつまり赤外センサが設けられ得て、それらによって提供された車両周辺部のデジタル画像が累積つまり融合され得る。
【００１７】
運転者に提示するためのほとんど歪みのない融合画面を得るために本発明の実施形態では、既に提供された第１部分と既に提供された第２部分が全体的に又は部分的に累積装置つまり融合装置により画素ごとに及び／又は領域ごとに累積つまり融合されることが意図されている。融合画面の提供のために、第１部分及び／又は第２部分及び／又は融合画面、つまり直接的な又は処理されたそれらのデジタルデータは、少なくとも１つの適合パラメータにより適合される。
【００１８】
距離に依存するこの又はこれらのパラメータは好ましくは本発明に従うカメラシステム又はセンサシステムつまり暗視システムの校正時にカメラつまりセンサと校正装置との間の少なくとも２つの距離範囲つまり間隔範囲のために検出される。本質的な目的は、その又はそれらの適合パラメータを、画面の累積つまり融合時に発生する対象の融合画面が、該当する距離範囲において、特に不明画面や２重画面から免れているようにほとんど歪みがないように調節することである。この又はこれらの適合パラメータは、本発明に従い、特には少なくとも１つの記録パラメータ又は変換パラメータである。類似するパラメータは、例えばデジタル画像システムの記録（レジストレーション）従って行われた２画面の累積から周知である。走行状況つまり距離に依存するこの又はこれらの適合パラメータは好ましくは校正時に車両内のデータメモリ内に記憶される。
【００１９】
本発明の有利な実施形態では第１距離範囲が市街地走行に典型的な走行状況に対応し、特にほぼ１５ｍから７５ｍまでの距離範囲である。
【００２０】
選択的に又は追加的に第２距離範囲は幹線道路走行に典型的な走行状況に対応し、特にほぼ３０ｍから１５０ｍまでの距離範囲である。
【００２１】
選択的に又は追加的に第３距離範囲は高速道路走行に典型的な走行状況に対応し、特にほぼ５０ｍから２５０ｍまでの距離範囲である。
【００２２】
距離に依存する又は距離範囲に依存する前記の適合パラメータに対して選択的に又は追加的に、走行状況に依存する別の適合パラメータも、特に前記の目的をもって検出され得る。この際、例えば、太陽が低く位置する時、霧の時、日暮れ時、又は暗い時などのような走行のために適切な適合パラメータに係るものである。
【００２３】
本発明の他の本質的な観点は、車両の現在の走行状況を自動的に検出し、現在の走行状況つまり周辺部状況に対応して特に校正により獲得されて車両内に記憶されている１つの又は複数の適合パラメータを、本発明に従う指向装置による使用又は累積装置つまり融合装置による使用のために提供することにある。累積装置つまり融合装置は、デジタルデータの形式で存在する視覚画像と赤外画像における画素ごとの及び／又は領域ごとの累積つまり融合を実施し、この際、距離に依存する１つの又は複数の適合パラメータは、赤外画像及び／又は視覚画像及び／又は融合画面に対し、好ましくはほとんど歪みのない及び／又は不明画面のない周辺部の融合画像が運転者に提供されるように影響を及ぼす。
【００２４】
前記の自動検出に対して選択的に又は追加的に本発明の実施形態では、運転車が、自分に適していると思われ、特に校正により獲得されて車両内に記憶されている適合パラメータを、本発明に従う指向装置による使用又は累積装置つまり融合装置による使用のために選択することが意図されている。つまり運転者には、例えば、市街地走行に典型的な走行状況、幹線道路走行に典型的な走行状況、高速道路走行に典型的な走行状況、及び／又は、場合により他の走行状況のための１つの又は複数の適合パラメータが選択のために提供され得て、これは例えば手動の選択可能性や音声入力の形式をもってである。それにより運転者は、車両内にある車両ナビゲーションシステムを用いなくても、ほとんど歪みのないつまり２重画面のない融合画面を自らもたらす状況にある。それにより更に運転者には、場合により自動選択を無視する可能性も開かれている。同様に運転者には、例えばこの運転者の車両から２０ｍに至るまでの距離のようなこの運転者の車両の更に近い周辺部を融合画面内で歪みなく描写させる１つの又は複数の適合パラメータを選択する可能性が提供され得る。この選択は、運転者により、例えば運転者が暗闇で自分のガレージに入ってゆき融合画面内の赤外情報を介して茂みの後方に妨害物が待ち伏せているか否かを知りたい場合に行われる。
【００２５】
本発明の有利な実施形態では車両の現在のポジションが、車両ナビゲーションシステム、特に衛星ナビゲーションシステムにより決定される。このポジションに基づき、車両内にあるナビゲーションシステムにより、デジタル地図データとの比較により、特に市街地道路や幹線道路や高速道路のような対応する道路分類つまり走行状況が自動的に検出される。このような車両ナビゲーションシステムは今日では既に多数の車両においてルートガイドなどの目的のために設けられていて、大きな手間を用いることなく、車両の周辺部による融合された画像の、走行状況及び周辺部に依存する自動的な前記の最適化のために利用される。
【００２６】
選択的に又は追加的に本発明の他の実施形態では走行状況が特に車両速度及び／又は減光ライト或いは上向きライトの稼動及び／又は車両加速度及び／又は明るさ（輝度）及び／又は霧のような少なくとも１つの走行動的値に基づいて検出される。これらの情報は、より大きな手間を必要とすることなく、今日の車両では既にそれらのボードネットワークにより全体的に又は部分的に使用可能とされている。
【００２７】
本発明の有利な実施形態ではカラーの視覚画像が赤外画像と融合つまり組み合わせ又は累積される。白黒の視覚画像と異なり、先行車両の赤色のブレーキランプや、赤信号や、カラーの交通標識などのような視覚画像の色情報を含んでいる融合された画面が発生する。融合された画面内の色情報は、対応的に装備されている車両の運転者に対し、融合された画面内に描写される交通状況の迅速なオリエンテーションと認識を容易にする。更に色情報はカラーの警告表示（赤信号など）を見逃してしまう危険性を減少させる。
【００２８】
まとめると、異なるスペクトル領域のための周辺部の画面つまり光景の画面が、各々、特に各々使用されている光学系の像欠陥に基づく赤外画像或いは視覚画像の歪みのような妨害影響から解放される。このことは好ましくはデジタル化された画面を準備するための周知の措置によりソフトウェア的に行われる。妨害影響がほとんど取り除かれた画面つまりそれらのデジタル画面データは好ましくはデジタル画面処理により互いに指向されつまり重ねられ、その結果、赤外画像と視覚画像から成るほとんど同時同所の画面ペアつまりそれらのデジタルデータが存在することになる。このことは、本発明に従い、歪みのない融合画面をもたらすための、距離に依存する及び／又は走行状況に依存する少なくとも１つの適合パラメータを使用して行われる。デジタル画面処理のために使用されるソフトウェアとハードウェアは、好ましくは、画面の互いに相対的な、移動（スライド）、回転（ローテーション）、拡大縮小（スケーリング）を可能とする。この準備により、異なるスペクトル領域からの画面の累積つまり融合のための後続のハードウェア手間が、同時同所の画面ペアの十分なリアルタイム処理にも拘らず、低コストで最適化され得る。
【００２９】
本発明の有利な実施形態に従い、各々同じ画面再生率を有する赤外画像と視覚画像は好ましくはこれらのスペクトル領域のための１つの又は２つのカメラ又はセンサにより生成される。それにより特に簡単に赤外画像と視覚画像から同時の画面ペアが生成され得て、このことは、ほとんどリアルタイムである両方の画像の本発明に従う後続の累積つまり融合のためのソフトウェア手間とハードウェア手間を多大に減少させる。画面ペアの処理速度が増加する；画像の中間記憶のための半導体メモリは最小化される。
【００３０】
本発明の有利な実施形態では赤外画像が人物及び物体から放出された赤外放射線つまり熱放射線を示し、これはほぼ８μｍから１４μｍまでの波長領域内に位置する。好ましくはＩＲカメラ又はＩＲセンサが使用され、これはほぼ８μｍから１０μｍまでの領域内で感知可能である。従って有利にも車両周辺部のための赤外放射器つまりその種の照明器（典型的にはほぼ８００ｎｍから２.５μｍまでの波長領域である）が省略され得る。周知のように各々赤外照明器を有している対向車両の交互の眩惑作用は発生しない。本発明に従う赤外画像は同様に赤外照明器の到達距離に制限されるものではない。
【発明を実施するための最良の形態】
【００３１】
次に実施形態に基づき本発明を更に詳細に説明する。
【実施例１】
【００３２】
図１にブロック・ダイヤグラムとして描かれている本発明に従う装置つまり暗視システム（夜間視認システム）１００は、視覚スペクトル領域（可視スペクトル領域）内で撮影する電子的なここでは所謂視覚カメラ（可視カメラ）１０１、例えばＣＣＤセンサと、ほぼ８μｍから１０μｍまでの赤外スペクトル領域内で感知可能な電子的な赤外カメラ１０２、例えばＩＲセンサと、第１標準化装置１０３と、第２標準化装置１０４と、指向装置１０５と、累積装置つまり融合装置１０６とを有する。視覚カメラ１０１はカラーの視覚画像（可視画像）を提供する。
【００３３】
カメラ１０１及び１０２の光学軸線は好ましくは互いに平行に指向されていて、それにより視差誤差が最小化され得て、またそれらの光学軸線は好ましくは近傍に並んで位置し、それにより位置ずれ誤差が最小化される。両方のカメラ又はセンサの画像平面は好ましくは互いに平行に且つ光学軸線に対して垂直に指向され、近傍に並んで位置している。両方のカメラつまりセンサの感光性センサ面は好ましくは互いに相対的に捩れてもなく傾いてもなく、互いにほとんど平行に配設されている。更に両方のカメラ又はセンサは好ましくは同じ開口角度を有する。これらの措置により、それらのカメラ又はセンサが異なるスペクトル領域の画像を提供することが達成され得て、これらの画像は、ほとんど周辺部の同部分を示し、相対的に互いに且つ実際の状況に対して捩られていないものである。それにより、両方の画像から融合される画面を準備するための画像処理に必要な手間、従ってハードウェア手間とソフトウェア手間が明らかに減少され得る。
【００３４】
カメラの光学表面は好ましくは疎水性コーティングされていて、ヘッドライト洗浄に関して既に通常であるように好ましくはその洗浄のために高圧ノズルなどが設けられている。両方のカメラは好ましくは共通のハウジング内に取り付けられている（組み立てやすさ、車両軸線に対する共通の指向付け、カメラ同士の光学パラメータにずれがない）。カメラのハウジングには好ましくは固定具が配設されていて、これらの固定具は車両又は車両内において振動の少ないカメラの稼動を保証する。カメラの稼動のために作動電圧用の接続部が設けられている。カメラの作動電圧は、例えば１２ボルト及び／又は４２ボルトのような各々の車内電源電圧に柔軟に適合可能であるべきである。カメラの電子装置とセンサを損傷から保護するために、作動電圧ブランチ内には好ましくは過負荷保護装置及び極性混合防止装置が組み込まれている。カメラ又はセンサにより発生されたビデオ信号の出力（スペクトル領域で別個に又は既に融合されて）は規格に対応されるべきである（例えば、ＮＴＳＣ、ＰＡＬ、ＳＥＣＡＭ、又は独自の規格）。デジタル／アナログ変換器として、現存する半導体要素が使用され得る。カメラ又はセンサは、走行周辺部の可視化のために、車両の前側、車両の後側、車両の横側に装着され得る。
【００３５】
次に、暗視システムつまり装置１００の校正について詳細に説明する。校正のためには本発明に従う校正装置（非図示）が使用される。この校正装置は複数の白熱電球を有し、これらの白熱電球は好ましくは碁盤目状に配設されている。これらの白熱電球は、熱放射線も視覚的に可視の放射線も放出することにより傑出する。好ましくは、複数の白熱電球を備えたプレートなどが両方のカメラつまりセンサ１０１及び１０２の前方の様々な間隔範囲に相前後して配設される。間隔範囲とは、周辺部に依存する又は走行状況に依存する典型的な間隔範囲のことであり、このことについては以降で詳細に説明する。
【００３６】
カメラ１０１及び１０２の前方にある校正装置は、好ましくは暗い周辺部に配設されていて熱源の近くには配設されてなく、視覚カメラ１０１では（所謂）視覚画像が生成され、この視覚画像は、人間の目が見るように、碁盤目状に配設されている白熱電球を示す。更に校正装置は赤外カメラ１０２内で熱画像を生成させ、この熱画像は同様に白熱電球の配置構成を示す。典型的には視覚画像も所謂赤外画像も、特に光学的な像欠陥などに基づき、各々の画像の縁に歪みを示す。周知の方式で視覚画像内の歪みつまり像欠陥は第１標準化装置１０３によりほとんど排除される。周知の方式で赤外画像内の歪みつまり像欠陥は第２標準化装置１０４によりほとんど排除される。標準化即ち欠陥排除は、好ましくは、視覚画像のための校正パラメータ１０７を使用し、赤外画像のための校正パラメータ１０８を使用し、画像のデジタルデータにおける周知のソフトウェア的な措置（デジタル画像処理）により行われる。
【００３７】
標準化されたつまりノイズなどをほとんど取り除いた画像、つまりそのデジタルデータは、デジタル画像処理において周知の記録過程（レジストレーション過程）により、記録パラメータ１０９を使用して指向装置１０５により互いに指向される。指向過程では好ましくは画像の１つが不変のままであり、他の画像のための基準として用いられる。第２画像は、大きさと位置に関し、第１画像に対して相対的にほとんど同対象の画像が発生するように変更される。
【００３８】
つまり、標準化された画像は、融合された画面内で同一の対象がほとんど同じ位置でほとんど同じ大きさで発生するように互いに相対的に指向される。この前処理ステップが実行されないと、異なるカメラ形状やカメラずれに基づき影画面又は２重画面が発生する。このことは、融合された画面内で１つの対象が２つの個所で異なった大きさで発生することを意味する。観察者は、そのような画面により、オリエンテーションが提供されるというよりもむしろ困惑されてしまう。
【００３９】
画素に正確な又は領域に正確な融合を周辺部つまり走行状況に依存して最適化するためには、先ず、市街地走行に典型的な走行状況のための第１記録過程が実施される。このために校正装置とカメラ１０１及び１０２との間の間隔は例えばほぼ１５ｍから７５ｍまでの範囲内で変更され、この間隔範囲のために適切な１つの又は複数の記録パラメータが検出されて記憶される。それに対応し、幹線道路に典型的な走行状況、即ち例えばほぼ３０ｍから１５０ｍまでの範囲のための第２記録過程が実施される。それに対応して最後に、高速道路に典型的な走行状況、即ち例えばほぼ５０ｍから２５０ｍまでの範囲内のための第３記録過程が実施される。
【００４０】
車両ナビゲーションシステム（非図示）により提供される現在のポジションデータを使用し、デジタル地図データに基づくシステムにより、特に市街地道路や幹線道路や高速道路のような、車両のポジションに対応する道路分類つまり走行状況が検出される。特に暗い場合、走行状況に対応し且つ車両内に校正過程時に記憶された記録パラメータつまり適合パラメータが累積装置つまり指向装置１０５により走行状況に適した画像の指向付けのために使用される。つまり、該当する走行状況のために融合された画面内において特に影画面や２重画面や不明画面はほとんど回避される。
【００４１】
選択的に又は追加的に車両の現在の走行状況が少なくとも１つの走行動的値に基づいて検出される。１つの又は複数の走行動的値に割り当てられ且つ車両内に記憶されている記録パラメータつまり適合パラメータは、本発明に従い、累積装置つまり指向装置１０５により走行状況に適した画像の指向付けのために使用される。この措置によっても、該当する走行状況のために融合された画面内において特に影画面や２重画面や不明画面がほとんど回避される。車両の走行動的値とは、特に、車両の速度や、減光ライト又は上向きライトのスイッチオンや、車両の正加速度又は負加速度などに係るものである。
【００４２】
標準化された画像の上記の指向付けは３つのステップに分割され得る：移動（スライド）、回転（ローテーション）、拡大縮小（スケーリング）である。実際には、回転、拡大縮小、移動の順番が質的に最善の結果を提供することが分かっている。これらのステップの順番は、通常、可換性つまり交換可能ではないので、これらのステップの順番が校正時及び本発明に従う暗視システムの後続する稼動時に同一であることが考慮されるべきである。場合により暗視システムの校正ソフトウェア及び／又は稼動ソフトウェアが対応的に構成されなくてはならない。
【００４３】
互いに指向された画像は、累積装置つまり融合装置１０６内でそれらのデジタルデータの処理によりソフトウェア的に累積つまり融合される。視覚画像と赤外画像から成る同時同所つまり同対象の各画面ペアから、融合された又は累積された画面が生成され、この画面は、車両の運転者に対し、好ましくは車両内のカラーモニタ上に描写される。
【００４４】
視覚画像と赤外画像から成る同時同所の画面ペアの融合は、好ましくは、両方の画面からの互いに対応する個々の画素ペアを基礎にし、又は、両方の画像からの複数の画素を使用して行われる。このことは、どの解像度が望まれているのか及び／又はデジタル画像処理のためにどの計算能力が使用可能であるのかに特に対応する。説明した前処理された画像はそれらの画面データのデジタル処理により累積されて表示される。結果から見て、この過程は、同一の光景又は走行周辺部のフィルム又はスライドを重ね合わせることとほぼ比較され得る。このことは、計算技術的に、つまりデジタル画面処理時には、特に、各々の画像内の画素の輝度（明るさ）を考慮し、視覚画像及び／又は赤外画像内に含まれている色情報を考慮し、画素情報の平均値形成により達成される。このことは必ずしも画素ごとに行われる必要はなく、両方の画像内の同時同所の画素領域のための平均値形成によっても行われ得る。
【００４５】
更に、平均値形成時に赤外画像内の画素情報を視覚画像内の同時同所の画素情報に対して異なって重み付けすることは有意義であり得る。この異なる重み付けは、例えば、昼光に依存し、及び／又は、天候に依存し、及び／又は、自動車のヘッドライト光に依存し、及び／又は、視覚画像内の色に依存して行われ得る；それにより例えば赤信号が融合画面内で特に明確に認識可能であるということが達成され得る。更に重み付けは、例えば前景と背景との間の差のように、融合画面の部分領域のために又は全融合画面のために車両の運転者により手動で変更可能であり得る。
【００４６】
この処理により個々の画面領域が特に際立たされ得る。それにより例えば運転者の確実な案内を達成するために車両の直接的な走行領域がより強く強調され得る。
【００４７】
暗さが増すと平均値形成時には赤外情報の重み付けが視覚情報に比べて増加され得る。減光ライトがスイッチオンされている場合、赤外情報の重み付けは、視覚情報に対し、スイッチオンされている上向きライトに比べて増加され得る。
【００４８】
同様に各々の画像内の１つの領域の情報量は重み付けを同時に決定し得る。視覚画像の同時同所の１つの領域内の情報量は、例えば赤外画像の同じ領域内の情報量よりも明らかに多く、それにより、このことを平均値形成時に視覚情報のより高い重み付けにより考慮することは有意義であり得る。
【００４９】
既に説明したように、カメラつまりセンサにより生成される画像は、歪みを除いた状態で対象に忠実に指向されるために前処理されなくてはならない。コストのかかるメモリを節約するために、ソフトウェア・アルゴリズムは好ましくは画素ごとにカメラ１０１及び１０２のセンサ情報にアクセスする。
【００５０】
図１に描かれているデジタル画面処理のための装置は、全体的に又は部分的に、ソフトウェア被制御式の１つの又は複数のデジタルプロセッサであり、これらのデジタルプロセッサは好ましくはリアルタイムのデジタル画面処理のために最適化されたものである。また同様にソフトウェア被制御式の１つの又は複数のＰＣプロセッサを低コストで使用することも想定可能であり、これは、それらの処理速度が視覚情報と赤外情報を伴う融合画像を提供するために画像の十分なリアルタイム処理を可能とする場合にである。
【図面の簡単な説明】
【００５１】
【図１】車両の周辺部の一部分を可視化するための本発明に従う装置のブロック・ダイヤグラム、或いは、暗視システムを示す図で、これに基づき可視化のための本発明に従う方法が説明される。
【符号の説明】
【００５２】
１００    暗視システム
１０１    視覚カメラ
１０２    赤外カメラ
１０３    第１標準化装置
１０４    第２標準化装置
１０５    指向装置
１０６    融合装置
１０７    校正パラメータ
１０８    校正パラメータ
１０９    記録パラメータ
【図１】
0004491453.tif 000002