(57)【要約】      （修正有）【課題】車両から落ちる雪に関係する偽のアラートの数を低減する。【解決手段】方法６００は、シーンの熱画像のストリーム中で、シーン中の静止前景物体を検出したことに応答して、候補アラートをトリガするＳ６０２ことと、背景強度に関して検出された静止前景物体の強度を評価するＳ６０４ことと、検出された静止前景物体の強度が背景強度を上回ることに応答して、候補アラートを実際のアラートに変換するＳ６０６ことと、を備える。【選択図】図２
2020078046.tif 000002
【特許請求の範囲】
【請求項１】
ビデオ監視動作においてアラートを変換するための方法（６００）であって、前記方法（６００）は、
シーンの熱画像のストリーム中で、前記シーン中の静止前景物体を検出したことに応答して、候補アラートをトリガする（Ｓ６０２）ことと、
背景強度に関して前記検出された静止前景物体（２２０、３２０、４２０）の強度を評価する（Ｓ６０４）ことと、
前記検出された静止前景物体（２２０、３２０、４２０）の前記強度が前記背景強度を上回ることに応答して、前記候補アラートを実際のアラートに変換する（Ｓ６０６）ことと、
前記検出された静止前景物体（２２０、３２０、４２０）の前記強度が前記背景強度に等しいかまたはそれよりも低いことに応答して、前記検出された静止前景物体（２２０、３２０、４２０）を備える前記シーンのエリア（２１６、３１６、４１６）に属するピクセルにおける強度の乱れの測度を計算する（Ｓ６０８）ことであって、乱れの前記測度が、前記検出された静止前景物体（２２０、３２０、４２０）が散乱している度合いを示す、測度を計算する（Ｓ６０８）ことと、
乱れの前記測度が乱れしきい値を上回ることに応答して、前記候補アラートを廃棄されるアラートに変換する（Ｓ６１０）ことと
を備える方法（６００）。
【請求項２】
乱れの前記測度が前記乱れしきい値に等しいかまたはそれを下回ることに応答して、前記候補アラートを実際のアラートに変換する（Ｓ６１２）ことをさらに備える、請求項１に記載の方法（６００）。
【請求項３】
前記背景強度が、
熱画像の前記ストリーム中の少なくとも１つの熱画像（２００、３００、４００）の部分（１１０、１１２、１１４）における強度、
参照熱画像（１００）の部分（１１０、１１２、１１４）における強度、
所定の強度
のうちの１つまたは複数に基づく、請求項１または２に記載の方法（６００）。
【請求項４】
乱れの前記測度が、
前記検出された静止前景物体（２２０、３２０、４２０）の強度の変動、
前記検出された静止前景物体（２２０、３２０、４２０）におけるエッジの数、
前記検出された静止前景物体（２２０、３２０、４２０）におけるエッジの強さ
のうちの１つまたは複数に基づく、請求項１から３のいずれか一項に記載の方法（６００）。
【請求項５】
前記乱れしきい値が、
熱画像の前記ストリーム中の少なくとも１つの熱画像（２００、３００、４００）の部分（１１０、１１２、１１４）における乱れの測度、
参照熱画像（１００）の部分（１１０、１１２、１１４）における乱れの測度、
乱れの所定の測度
のうちの１つまたは複数に基づく、請求項１から４のいずれか一項に記載の方法（６００）。
【請求項６】
前記シーンの熱画像の前記ストリーム中で、静止前景物体を検出する行為が、
前記シーンの熱画像の前記ストリーム中で、前記シーン中の前景物体を検出する（Ｓ８０２）ことと、
熱画像の前記ストリーム中の熱画像のシーケンスについて、前記検出された前景物体の前記シーン中の位置を決定する（Ｓ８０４）ことと、
前記検出された前景物体の前記シーン中の前記位置が熱画像の前記ストリーム中の熱画像の前記シーケンスについて一定であることに応答して、前記検出された前景物体を静止前景物体（２２０、３２０、４２０）として分類する（Ｓ８０６）こととを備える、請求項１から５のいずれか一項に記載の方法。
【請求項７】
前記シーンの熱画像の前記ストリーム中で、前景物体を検出する（Ｓ８０２）前記行為が、
前記シーンの熱画像の前記ストリーム中で、前記シーン中の変化を検出する（Ｓ８１０）ことと、
前記シーン中の前記変化のソースを決定する（Ｓ８１２）ことと、
前記シーン中の前記変化の前記ソースが前景物体であることに応答して、前記シーン中の前記変化の前記ソースを検出された前景物体として分類する（Ｓ８１４）こととを備える、請求項６に記載の方法。
【請求項８】
ビデオ監視動作においてアラートを変換するように設定されたデバイス（７３０）であって、前記デバイスは、
シーンの熱画像のストリーム中で、前記シーン中の静止前景物体を検出し、それに応答して候補アラートをトリガするように設定された物体検出機能（７４２）と、
背景強度に関して前記検出された静止前景物体（２２０、３２０、４２０）の強度を評価することと、
前記検出された静止前景物体（２２０、３２０、４２０）の前記強度が前記背景強度を上回ることに応答して、前記候補アラートを実際のアラートに変換することと、
前記検出された静止前景物体（２２０、３２０、４２０）の前記強度が、前記背景強度に等しいかまたはそれよりも低いことに応答して、前記検出された静止前景物体（２２０、３２０、４２０）を備える前記シーンのエリア（２１６、３１６、４１６）に属するピクセルにおける強度の乱れの測度を計算することであって、乱れの前記測度が、前記検出された静止前景物体（２２０、３２０、４２０）が散乱している度合いを示す、測度を計算することと、
乱れの前記測度が乱れしきい値を上回ることに応答して、前記候補アラートを廃棄されるアラートに変換することと
を行うように設定された候補アラート評価機能（７４４）と
を備える制御回路（７４０）を有する、デバイス（７３０）。
【請求項９】
前記候補アラート評価機能（７４４）が、乱れの前記測度が前記乱れしきい値に等しいかまたはそれを下回ることに応答して、前記候補アラートを実際のアラートに変換するようにさらに設定された、請求項８に記載のデバイス（７３０）。
【請求項１０】
前記物体検出機能（７４２）が、シーンの熱画像のストリーム中で、
前記シーン中の前景物体を検出することと、
熱画像の前記ストリーム中の熱画像のシーケンスについて、前記検出された前景物体の位置を決定することと、
前記検出された前景物体の前記位置が熱画像の前記ストリーム中の熱画像の前記シーケンスについて一定であることに応答して、前記前景物体を静止前景物体（２２０、３２０、４２０）として分類することと
を行うように設定されることによって、前記シーン中の静止前景物体（２２０、３２０、４２０）を検出するように設定された、請求項８または９に記載のデバイス（７３０）。
【請求項１１】
前記物体検出機能（７４２）が、
前記シーン中の変化を検出することと、
前記シーン中の前記変化のソースを決定することと、
前記シーン中の前記変化の前記ソースが前景物体であることに応答して、前記シーン中の前記変化の前記ソースを検出された前景物体として分類することと
を行うようにさらに設定されることによって、前記シーン中の前景物体を検出するように設定された、請求項１０に記載のデバイス（７３０）。
【請求項１２】
アラート弁別器（７３０）が、前記シーンの熱画像の前記ストリームを収集するように設定された熱ビデオカメラ（７００）中に備えられた、請求項８から１１のいずれか一項に記載のデバイス（７３０）。
【請求項１３】
処理機能を有するデバイス上で実行されたときに、請求項１から７のいずれか一項に記載の方法（６００）を実装するための命令を記憶した非一時的コンピュータ可読記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ビデオ監視動作においてアラートを変換するための方法、およびビデオ監視動作においてアラートを変換するように設定されたアラート弁別器に関する。
【背景技術】
【０００２】
熱カメラは、多くの異なる用途のために広く使用されている。たとえば、熱カメラは、交通のビデオ監視がますます重要な用途になりつつある状況において、ビデオ監視における自動検出および認識のために使用され得る。交通を監視するそのようなシステムは、一般に、いくつかを挙げると、事故、火災、車両、人間、または落下した積荷など、いくつかの事象を検出するときに、自動アラートトリガリングが可能である。これらのアラートトリガは一般にいくつかの方法で実装され、偽のアラートの数を低減することが重要である。
【０００３】
処理が困難な偽のアラートは、交通トンネルの内側で車両から落ちる雪である。そのような事象は、一般に、たとえば、落下した積荷または停止した車両として、誤って識別される。オペレータは、その場合、これらの偽のアラートを検査しなければならず、多数の偽のアラートがある場合、実際のアラートはオペレータにとって目立たなくなる。したがって、偽のアラートは、安全上のリスクだけでなく、コストの増加の原因である。
【０００４】
したがって、車両から落ちる雪に関係する偽のアラートの数を低減する必要がある。
【発明の概要】
【０００５】
上記に鑑みて、本発明的概念の目的は、ビデオ監視動作においてアラートを変換するための方法およびアラート弁別器を提供することである。
【０００６】
当技術分野における上記で特定された不備および欠点のうちの１つまたは複数を単独でまたは任意の組合せで緩和、軽減または除去し、少なくとも上述の問題を解決することが目的である。
【０００７】
第１の態様によれば、上記および他の目的は、ビデオ監視動作においてアラートを変換するための方法によって達成される。本方法は、シーンの熱画像のストリーム中で、シーン中の静止前景物体を検出したことに応答して、候補アラートをトリガすることと、背景強度に関して検出された静止前景物体の強度を評価することと、検出された静止前景物体の強度が背景強度を上回ることに応答して、候補アラートを実際のアラートに変換することとを備える。
【０００８】
本方法によって、候補アラートが雪に関係しないと決定することによって、候補アラートを実際のアラートに変換することが可能である。さらに、候補アラートの実際のアラートへの変換は検出された静止前景物体の強度に基づくので、偽のアラームの量を低減することが可能であり得る。
【０００９】
用語「候補アラート」は、実際のアラートまたは廃棄されるアラートに変換され得る一時的アラートとして解釈されるべきである。
【００１０】
用語「熱画像」は、物体によって放出される赤外線エネルギーの量を表す画像として解釈されるべきである。
【００１１】
用語「静止前景物体」は、背景との観測可能な差があり、時間の所与の範囲内で動かないまたは静止しているような、最近シーンに入った物体として解釈されるべきである。したがって、移動している物体は、本出願のコンテキスト内では静止前景物体ではない。
【００１２】
用語「実際のアラート」は、オペレータに中継されるアラートとして解釈されるべきである。
【００１３】
当業者は、熱画像における強度が温度に関係し得ることを理解している。たとえば、検出された静止前景物体の強度は検出された静止前景物体の温度に関係し得、背景強度は背景温度に関係し得る。
【００１４】
本方法によれば、シーンの熱画像のストリーム中で、シーン中の静止前景物体を検出したことに応答して、候補アラートがトリガされる。シーン中の静止前景物体は、物体検出機能を使用して検出され得る。物体検出機能はソフトウェア実装および／またはハードウェア実装され得る。
【００１５】
候補アラートをトリガする利点は、静止している検出された前景物体に関する追加の情報が、候補アラートを実際のアラートまたは廃棄されるアラートに変換する前に評価され得ることである。
【００１６】
本方法によれば、検出された静止前景物体の強度が背景強度に関して評価される。検出された静止前景物体の強度は複数の異なる様式で決定され得る。たとえば、検出された静止前景物体の強度は、検出された静止前景物体を備える画像のエリア中のピクセルの強度の加重平均または加重メジアンに基づき得る。検出された静止前景物体の強度は、検出された静止前景物体を備える画像のエリア中のピクセルのピーク強度に基づき得る。検出された静止前景物体の強度は、検出された静止前景物体の温度に関係し得る。背景強度は背景の温度に関係し得る。したがって、検出された静止前景物体の温度は、候補アラートを実際のアラートまたは廃棄されるアラートに変換する前に、背景温度に関して評価され得る。
【００１７】
背景強度に関して検出された静止前景物体の強度を評価する利点は、検出された静止前景物体がそれの強度に基づいて背景から分離され得ることである。
【００１８】
本方法によれば、検出された静止前景物体の強度が背景強度を上回ることに応答して、候補アラートが実際のアラートに変換される。したがって、検出された静止前景物体の強度が背景強度よりも高い場合、候補アラートは実際のアラートに変換される。実際のアラートはオペレータに送信または中継され得る。オペレータは、監視システムを操作する人であり得る。実際のアラートは、オペレータに送信される前に他のアラートシステムにおいて処理され得ることを理解されたい。たとえば、実際のアラートは実際のアラートの優先度に従ってソートされ得る。
【００１９】
検出された静止前景物体の強度が背景強度を上回ることに応答して、候補アラートを実際のアラートに変換することの利点は、検出された静止前景物体が、本方法によって検出されたオペレータ行為を必要とする静止前景物体であり得ることである。たとえば、検出された静止前景物体は、交通トンネルから除去されなければならない、停止した車両であり得る。
【００２０】
本方法は、検出された静止前景物体の強度が背景強度に等しいかまたはそれよりも低いことに応答して、検出された静止前景物体を備えるシーンのエリアに属するピクセルにおける強度の乱れの測度を計算することと、乱れの測度が乱れしきい値を上回ることに応答して、候補アラートを廃棄されるアラートに変換することとをさらに備え得る。
【００２１】
用語「ピクセル」は、画像検出器中のピクセルとしてではなく、熱画像中のピクセルとして解釈されるべきである。
【００２２】
用語「廃棄されるアラート」は、オペレータに送信または中継されないアラートとして解釈されるべきである。したがって、アラートは廃棄されるか、または廃棄されるべきである。
【００２３】
本方法によれば、検出された静止前景物体を備えるシーンのエリアに属するピクセルにおける強度の乱れの測度は、検出された静止前景物体の強度が背景強度に等しいかまたはそれよりも低いことに応答して計算される。
【００２４】
上記で説明したように、検出された静止前景物体の強度および背景強度は温度に関係し得る。そのような場合、検出された静止前景物体を備えるシーンのエリアに属するピクセルにおける温度の乱れの測度は、検出された静止前景物体の温度が背景温度に等しいかまたはそれよりも低いことに応答して計算され得る。
【００２５】
ピクセルにおける強度の乱れの測度は、ピクセルにおける強度の変動の度合いに関係し得る。したがって、強度が温度に関係する場合、乱れの測度は温度の乱れの測度であり得る。ピクセルにおける温度の乱れの測度は、ピクセルにおける温度の変動に関係し得る。
【００２６】
たとえば、検出された静止前景物体が散乱している場合、検出された静止前景物体を備えるシーンのエリアに属するピクセルは、背景強度と検出された静止前景物体の強度の両方に関係する強度を有し得る。したがって、散乱している検出された静止前景物体を備えるシーンのエリアに属するピクセルにおける変動は、検出された静止前景物体が散乱していない場合よりも高くなり得る。
【００２７】
本方法によれば、乱れの測度が乱れしきい値を上回ることに応答して、候補アラートが廃棄されるアラートに変換される。言い換えれば、検出された静止前景物体を備えるエリアに属するピクセルにおける強度または温度の乱れの測度が乱れしきい値を上回る場合、候補アラートは廃棄されるアラートに変換され得る。乱れしきい値は所定の乱れしきい値または動的乱れしきい値であり得る。
【００２８】
乱れの測度が乱れしきい値を上回ることに応答して、候補アラートを廃棄されるアラートに変換することの利点は、オペレータの行為を必要としない静止前景物体が検出され得たことである。乱れの測度が乱れしきい値を上回ることに応答して、候補アラートを廃棄されるアラートに変換することのさらなる利点は、オペレータがアラートされず、したがって、偽のアラームに関係する経済コストを低減し得ることである。乱れの測度が乱れしきい値を上回ることに応答して、候補アラートを廃棄されるアラートに変換することのさらなる利点は、オペレータが、オペレータのいかなる行為をも必要としない検出された静止前景物体に関係するアラームを検査しなければならないことに気を散らされないことであり得る。
【００２９】
たとえば、検出された静止前景物体が、交通トンネル中の車両から落ちた散乱している雪である場合、検出された静止前景物体の強度は背景強度よりも低くなり得る。この例では、背景強度は交通トンネルの内側の温度に関係し得、検出された静止前景物体の強度は検出された静止前景物体の温度に関係し得る。したがって、雪は交通トンネルよりも低い温度を有し得る。雪は、車両から落ちた後に散乱し、検出された静止前景物体を備えるエリアに属するピクセルは、背景強度と検出された静止前景物体の強度とに関係する強度を有し得る。言い換えれば、散乱している雪を備えるエリアに属するピクセルは、雪と交通トンネルとに関係する強度を有し得る。固体の連続物体を備えるエリアは、背景強度に関連するより少ないピクセルを備え得るので、散乱している雪は、したがって、固体の連続物体の場合よりも高いピクセルにおける強度の乱れの測度を有し得る。したがって、検出された静止前景物体が散乱している雪である例では、候補アラートは廃棄されるアラートに変換され、したがってオペレータに送信または中継されない。
【００３０】
したがって、本方法の利点は、交通トンネル中の車両から落ちる雪に関係する候補アラートが廃棄されるアラートに変換され得、したがって、偽のアラームの数および／または偽のアラームに関係するコストを低減し得ることである。
【００３１】
本方法は、乱れの測度が乱れしきい値に等しいかまたは乱れしきい値を下回ることに応答して、候補アラートを実際のアラートに変換することをさらに備え得る。言い換えれば、検出された静止前景物体を備えるエリアに属するピクセルにおける強度または温度の乱れの測度が乱れしきい値を下回る場合、候補アラートは実際のアラートに変換され得る。
【００３２】
たとえば、検出された静止前景物体が前に例示された固体の連続物体である場合、乱れの測度は乱れしきい値に等しいかまたはそれを下回り得る。そのような場合、候補アラートは実際のアラートに変換される。そのような固体の連続物体の例は、車両から落ちるときに割れずに散乱しなかった氷のブロックであり得る。
【００３３】
乱れの測度が乱れしきい値に等しいかまたはそれを下回ることに応答して、候補アラートを実際のアラートに変換することの利点は、背景強度を下回る強度を有する固体の連続物体が、背景強度を下回る強度を有する散乱している物体から区別され得ることである。言い換えれば、背景強度を下回る強度を有する、分散した／散乱した破片をもつ割れた物体は、背景強度を下回る強度を有する完全なまたは割れていない物体から区別され得る。
【００３４】
背景強度は、熱画像のストリーム中の少なくとも１つの熱画像の部分における強度、参照熱画像の部分における強度、および所定の強度のうちの１つまたは複数に基づき得る。
【００３５】
背景強度は動的に更新され得る。背景強度は定期的に更新され得る。たとえば、背景強度は５分ごとに更新され得る。熱画像はいくつかの部分において分割され得、各部分は背景強度を有し得ることを理解されたい。言い換えれば、熱画像中の異なる部分は異なる背景強度を有し得る。
【００３６】
本方法によれば、背景強度は、熱画像のストリーム中の少なくとも１つの熱画像の部分における強度に基づき得る。背景強度は、熱画像のストリーム中の少なくとも１つの熱画像の部分中のピクセルの強度の加重平均および／または加重メジアンであり得る。背景強度が熱画像のストリーム中の２つ以上の熱画像に基づく場合、背景強度は前記２つ以上の熱画像の加重平均に基づき得る。たとえば、得られた平均化された熱画像は、２つ以上の熱画像の加重平均として作成され得る。２つ以上の熱画像の加重平均における画像重みは、より古い熱画像がより最近の熱画像よりも加重平均にあまり寄与しないような、各熱画像の寿命に基づき得る。言い換えれば、背景強度は、得られた平均化された熱画像の部分における強度に基づき得る。
【００３７】
本方法によれば、背景強度は、参照熱画像の部分における強度に基づき得る。
【００３８】
背景強度は、参照熱画像の部分中のピクセルの強度の加重平均および／または加重メジアンであり得る。参照熱画像は、熱画像のストリーム中の前の熱画像であり得る。参照熱画像は、熱画像のストリーム中の２つ以上の熱画像に基づき得る。たとえば、参照熱画像は、熱画像のストリーム中の２つ以上の熱画像の加重平均であり得る。２つ以上の熱画像の加重平均は、参照熱画像中の各ピクセルが前記２つ以上の熱画像中の対応するピクセルの加重平均であるように作成され得る。前記２つ以上の熱画像の加重平均における画像重みは、より古い熱画像がより最近の熱画像よりも加重平均にあまり寄与しないような、各熱画像の寿命に基づき得る。
【００３９】
本方法によれば、背景強度は所定の強度に基づき得る。
【００４０】
所定の強度は最小しきい値強度であり得る。所定の強度は最大しきい値強度であり得る。所定の強度はフォールバック強度であり得る。
【００４１】
背景強度は、熱画像のストリーム中の少なくとも１つの熱画像の部分における強度、参照熱画像の部分における強度、および／または所定の強度の組合せに基づき得ることを理解されたい。たとえば、熱画像のストリーム中の少なくとも１つの熱画像の部分における強度、および／または参照熱画像の部分における強度に基づく背景強度が、所定の強度よりも低い背景強度を生じる場合、背景強度は所定の強度にセットされ得る。言い換えれば、所定の強度は、それより下では背景強度がセットされ得ない最小しきい値強度である。所定の強度は、対応する様式で最大しきい値強度であり得ることを理解されたい。さらに、熱画像のストリーム中の少なくとも１つの熱画像の部分における強度および／または参照熱画像の部分における強度に背景強度を基づかせることが不可能である場合、所定の強度はフォールバック強度であり得る。
【００４２】
乱れの測度は、検出された静止前景物体の強度の変動、検出された静止前景物体におけるエッジの数、および検出された静止前景物体におけるエッジの強さのうちの１つまたは複数に基づき得る。検出された静止前景物体の強度の変動は、強度エントロピー、強度における雑音、および／または強度勾配に基づき得る。たとえば、検出された静止前景物体を備えるエリアに属するピクセルにおける強度の変動は、検出された静止前景物体を備えるエリアに属するピクセルにおける強度のエントロピーに基づき得る。検出された静止前景物体におけるエッジの数および／または強さは、熱画像のストリーム中の少なくとも１つの熱画像から抽出された特徴であり得る。乱れの測度は、したがって、検出された静止前景物体におけるエッジの数および／または強さに基づき得る。
【００４３】
乱れしきい値は、熱画像のストリーム中の少なくとも１つの熱画像の部分における乱れの測度、参照熱画像の部分における乱れの測度、および乱れの所定の測度のうちの１つまたは複数に基づき得る。乱れしきい値は、熱画像のストリーム中の前の熱画像の部分における乱れの測度に基づき得る。乱れしきい値は、熱画像のストリーム中の前の熱画像の部分における乱れの測度の加重平均および／または加重メジアンに基づき得る。たとえば、加重平均および／または加重メジアンにおける画像重みは、より古い熱画像がより新しい熱画像よりも加重平均および／または加重メジアンにおいてあまり重要ではないような、熱画像の寿命に基づき得る。乱れしきい値は定期的に更新され得る。乱れしきい値は動的に更新され得る。たとえば、乱れしきい値は５分ごとに更新され得る。熱画像はいくつかの部分において分割され得ること、および各部分は乱れしきい値を有し得ることを理解されたい。言い換えれば、熱画像中の異なる部分は異なる乱れしきい値を有し得る。
【００４４】
参照熱画像、２つ以上の熱画像の加重平均および／または加重メジアンは、このコンテキストでは、前に説明したのと同じ様式で決定され得ることを理解されたい。
【００４５】
シーンの熱画像のストリーム中で、静止前景物体を検出する行為は、シーンの熱画像のストリーム中で、シーン中の前景物体を検出することと、熱画像のストリーム中の熱画像のシーケンスについて、検出された前景物体のシーン中の位置を決定することと、検出された前景物体のシーン中の位置が熱画像のストリーム中の熱画像のシーケンスについて一定であることに応答して、検出された前景物体を静止前景物体として分類することとを備え得る。言い換えれば、検出された前景物体のシーン中の位置は、熱画像のストリーム中の熱画像のシーケンスについて決定され得、位置が一定である場合、検出された前景物体は静止しているものとして分類される。
【００４６】
用語「熱画像のストリーム中の熱画像のシーケンス」は、熱画像のストリーム中の２つ以上の熱画像として解釈されるべきである。
【００４７】
前景物体は、熱画像のストリーム中の熱画像と熱画像のストリーム中の参照熱画像および／または前の熱画像との比較に基づいて検出され得る。
【００４８】
熱画像のストリーム中の熱画像のシーケンスは後続の熱画像のシーケンスであり得る。熱画像のストリーム中の熱画像のシーケンスは連続的な熱画像のシーケンスであり得る。言い換えれば、熱画像のシーケンスは連続的であり得るが、代替的に非連続的であり得る。
【００４９】
検出された前景物体の位置は、熱画像のシーケンス中の各熱画像中の検出された前景物体を備えるエリアに基づき得る。たとえば、位置は、検出された前景物体を備えるエリアの中心または加重中心であり得る。加重中心の重みは、検出された前景物体を備えるエリアに関連するピクセルの強度に基づき得る。
【００５０】
検出された前景物体の位置が一定でない場合、検出された前景物体は非静止前景物体として分類され得る。位置は所定の範囲内で一定であり得ることを理解されたい。言い換えれば、前景物体の位置は、所定の範囲内で変化し得、依然として静止前景物体として分類され得る。
【００５１】
熱画像のストリーム中の熱画像のシーケンスについて検出された前景物体の位置を決定することの利点は、移動している前景物体が無視され得ることである。たとえば、停止することなしにシーンを通って移動している車は、候補アラートをトリガするべきではない。
【００５２】
シーンの熱画像のストリーム中で前景物体を検出する行為は、シーンの熱画像のストリーム中で、シーン中の変化を検出することと、シーン中のソースの変化を決定することと、シーン中の変化のソースが前景物体であることに応答して、シーン中のソースの変化を検出された前景物体として分類することとを備え得る。
【００５３】
シーン中の変化はシーン中の動きに関係し得る。シーン中の変化はシーン中に現れる物体に関係し得る。たとえば、それは、シーンに入る車、または車両から落ちる物体に関係し得る。
【００５４】
シーン中の変化のソースは、シーン中の動きに関係する物体であり得る。たとえば、それは、シーンに入る車、または車両から落ちる物体であり得る。
【００５５】
変化のソースは、前景物体であるか前景物体でないのいずれかとして決定され得る。決定は変化のソースのサイズに基づき得る。決定は、変化のソースのサイズとしきい値サイズとの比較に基づき得る。たとえば、変化のソースが車である場合、それのサイズはしきい値サイズよりも大きくなり得、変化のソースは、その場合、前景物体として決定され得る。さらなる例として、変化のソースが鳥である場合、それのサイズはしきい値サイズよりも小さくなり得、変化のソースは、その場合、前景物体でないとして決定され得る。
【００５６】
シーン中の変化がシーン中の動きに関係する場合、決定はシーン中の動きの速度に基づき得る。たとえば、動きの速度はしきい値速度と比較され得る。
【００５７】
シーン中の変化のソースを決定することの利点は、変化のソースの追加の特徴が前景物体の分類において使用され得ることである。たとえば、ソース、たとえば車のサイズおよび速度は、前景物体を分類するときに使用され得る。
【００５８】
第２の態様によれば、ビデオ監視動作においてアラートを変換するように設定されたアラート弁別器が提供される。制御回路を有するデバイスは、シーンの熱画像のストリーム中で、シーン中の静止前景物体を検出し、それに応答して候補アラートをトリガするように設定された物体検出機能と、背景強度に関して検出された静止前景物体の強度を評価することと、検出された物体の強度が背景強度を上回ることに応答して、候補アラートを実際のアラートに変換することとを行うように設定された候補アラート評価機能とを備える。
【００５９】
アラート弁別器は、シーンの熱画像のストリームを受信するようにさらに設定され得る。アラート弁別器は、シーンの熱画像のストリームをキャプチャするようにさらに設定され得る。言い換えれば、アラート弁別器は、熱ビデオカメラ中に接続され得るか、または備えられ得る。アラート弁別器は、ワイヤードまたはワイヤレス接続を介して、直接または間接的に熱ビデオカメラに接続され得る。アラート弁別器は、熱画像のストリームが記憶されるコンピュータ可読媒体から熱画像のストリームを受信するようにさらに設定され得る。
【００６０】
物体検出機能はソフトウェアまたはハードウェア実装され得る。候補アラート評価機能はソフトウェアまたはハードウェア実装され得る。
【００６１】
アラート弁別器は、実際のアラートをオペレータに送信または中継するようにさらに設定され得る。
【００６２】
前に説明した方法の上述の特徴および利点は、適用可能なとき、この第２の態様にも当てはまる。過度の反復を回避するために、上記を参照されたい。
【００６３】
候補アラート評価機能は、検出された静止前景物体の強度が背景強度に等しいかまたはそれよりも低いことに応答して、検出された静止前景物体を備えるシーンのエリアに属するピクセルにおける強度の乱れの測度を計算し、乱れの測度が乱れしきい値を上回ることに応答して、候補アラートを廃棄されるアラートに変換するようにさらに設定され得る。
【００６４】
候補アラート評価機能は、前に説明したような様式でシーンのエリアに属するピクセルにおける強度の乱れの測度を計算し得る。
【００６５】
候補アラート評価機能は、乱れの測度が乱れしきい値に等しいかまたはそれを下回ることに応答して、候補アラートを実際のアラートに変換するようにさらに設定され得る。
【００６６】
物体検出機能は、シーン中の前景物体を検出し、熱画像のストリーム中の熱画像のシーケンスについて、検出された前景物体の位置を決定し、検出された前景物体の位置が熱画像のストリーム中の熱画像のシーケンスについて一定であることに応答して、前景物体を静止前景物体として分類するように設定されることによって、シーンの熱画像のストリーム中で、シーン中の静止前景物体を検出するように設定され得る。
【００６７】
物体検出機能は、さらに、シーン中の変化を検出し、シーン中の変化のソースを決定し、シーン中の変化のソースが前景物体であることに応答して、シーン中の変化のソースを検出された前景物体として分類するように設定されることによって、シーン中の前景物体を検出するように設定され得る。
【００６８】
アラート弁別器は、シーンの熱画像のストリームを収集するように設定された熱ビデオカメラ中に備えられ得る。
【００６９】
第３の態様によれば、処理機能を有するデバイス上で実行されたときに、本方法を実装するための命令を記憶した非一時的コンピュータ可読記憶媒体が提供される。
【００７０】
本方法の上述の特徴は、適用可能なとき、この第３の態様にも当てはまる。過度の反復を回避するために、上記を参照されたい。
【００７１】
本開示の利用可能性のさらなる範囲は、以下で与えられる発明を実施するための形態から明らかになろう。しかしながら、発明を実施するための形態および具体例は、本発明的概念の好ましい変形態を示すが、本発明を実施するための形態から発明的概念の範囲内の様々な変更および改変が当業者に明らかになるので、単に例として与えられることを理解されたい。
【００７２】
したがって、そのような方法およびシステムは変動し得るので、この発明的概念は、説明された方法の特定のステップまたは説明されたシステムの構成部分に限定されないことを理解されたい。また、本明細書で使用する用語は、特定の実施形態のみについて説明する目的であり、限定的なものではないことを理解されたい。本明細書および添付の請求項で使用する際、冠詞「ａ」、「ａｎ」、「ｔｈｅ」、および「ｓａｉｄ」は、コンテキストが別段に明示的に規定しない限り、要素のうちの１つまたは複数があることを意味するものであることに留意されなければならない。したがって、たとえば、「ａ  ｕｎｉｔ（ある１つのユニット）」または「ｔｈｅ  ｕｎｉｔ（そのユニット）」への言及は、いくつかのデバイスなどを含み得る。さらに、単語「を備える」、「を含む」、「を含んでいる」および同様の用語は他の要素またはステップを除外しない。
【００７３】
次に、発明的概念の変形態を示す添付の図面に関して、本発明的概念の上記および他の態様についてより詳細に説明する。図は、発明的概念を特定の変形態に限定するものと考えられるべきではなく、代わりに、それらは発明的概念を説明し、理解するために使用される。
【００７４】
図に示されているように、層および領域のサイズは、説明の目的のために誇張されており、したがって、本発明的概念の実施形態の一般的な構造を示すために与えられる。全体にわたって同様の参照番号は同様の要素を指す。
【図面の簡単な説明】
【００７５】
【図１Ａ】シーンを示す参照熱画像を示す図である。
【図１Ｂ】静止した車を備えるシーンを示す熱画像を示す図である。
【図１Ｃ】散乱した雪を備えるシーンを示す熱画像を示す図である。
【図１Ｄ】氷の固体の連続ブロックを備えるシーンを示す熱画像を示す図である。
【図２】候補アラートを変換するための方法のブロック方式を示す図である。
【図３】熱ビデオカメラを示す図である。
【図４】静止前景物体を検出するための方法のブロック方式を示す図である。
【発明を実施するための形態】
【００７６】
次に、発明的概念の現在好ましい変形態が示されている添付の図面を参照しながら、本発明的概念について以下でより十分に説明する。本発明的概念は、しかしながら、多くの異なる形式で実装され得、本明細書に記載された変形態に限定されると解釈されるべきでない。むしろ、これらの変形態は、徹底性および完全性のために与えられ、本発明的概念の範囲を当業者に十分に伝達する。
【００７７】
次に、図１Ａ〜図１Ｄを参照しながら、ビデオ監視動作において本方法について例示する。当業者は、熱画像中の物体の強度が物体の温度に関係し得ることに気づく。
【００７８】
図１Ａは、シーンを示す参照熱画像１００を示す。図１Ａ〜図１Ｄに示された例において、シーンは交通トンネルである。図１Ａにおいて、交通トンネルは空であり、図１Ｂ〜図１Ｄにおいて、異なる静止前景物体２２０、３２０、４２０が存在する。異なる静止前景物体２２０、３２０、４２０を検出する方法について図４に関して説明する。
【００７９】
図１Ａに示された例において、道路１０２および交通トンネルへの入口１０４が見られる。図１Ａに示された参照熱画像１００は、熱画像のストリーム中の２つ以上の熱画像に基づくが、それは、代替的に熱画像のストリーム中の単一の熱画像であり得る。この例における参照熱画像１００は熱画像のストリーム中のいくつかの熱画像の加重平均である。この場合、加重平均における、より古い熱画像の画像重みは、加重平均における、より最近の熱画像の画像重みよりも小さい。言い換えれば、より古い熱画像は、より最近の熱画像よりも加重平均にあまり寄与しない。参照熱画像１００は、この例では定期的に更新される。たとえば、熱画像のストリーム中の新しい熱画像は５分ごとに加重平均に加算される。ストリーム中の新しい熱画像は、それを加重平均に加算する前に評価され得ることを理解されたい。たとえば、参照熱画像１００と新しい熱画像との間の強度差に応じて、新しい熱画像は加重平均に含まれるか、またはそこから除外され得る。参照熱画像１００は代替的に動的に更新され得る。たとえば、参照熱画像１００は、参照熱画像１００の寿命、および／または熱画像のストリーム中の熱画像における強度に応じて更新され得る。
【００８０】
参照熱画像１００において、いくつかの部分１１０、１１２、１１４が見られる。背景強度は、第１の部分１１０、第２の部分１１２、および第３の部分１１４に基づき得る。この具体例において、背景強度は第１の部分１１０に基づくが、等しく第２の部分１１２または第３の部分１１４に基づき得る。第１の部分１１０、第２の部分１１２、および第３の部分１１４は異なる背景強度を有し得る。したがって、シーンの異なる部分は、参照熱画像１００の異なる部分に基づく異なる背景強度と比較され得る。交通トンネルにおいて、図１Ａに示されているように、背景強度は一般に均一である。言い換えれば、第１の部分１１０、第２の部分１１２、および第３の部分１１４における背景強度は一般に均一である。
【００８１】
背景強度は、第１の部分１１０、第２の部分１１２、および／または第３の部分１１４の組合せなど、２つ以上の部分に基づき得ることを理解されたい。
【００８２】
図１Ａに示された例において、参照熱画像１００は定期的に更新されるので、背景強度は定期的に更新される。背景強度は代替的に動的に更新され得る。
【００８３】
この例では、背景強度は、第１の部分１１０中のピクセルの強度値のメジアンである。したがって、背景は加重メジアンであり、部分重量は、第１の部分１１０に関連するすべてのピクセルについて等しい。代替的に、背景強度は加重平均であり得る。背景強度は、第１の部分１１０、第２の部分１１２、および第３の部分１１４中のピクセルの強度の加重平均またはメジアンであり得、各それぞれの部分１１０、１１２、１１４に異なる重みが与えられることを理解されたい。
【００８４】
上記説明は、背景強度が熱画像のストリーム中の少なくとも１つの画像に基づく場合に適用可能であることを理解されたい。さらに、背景強度は所定の強度にセットされ得る。
【００８５】
代替として、背景強度は上記の説明の組合せに基づき得る。たとえば、所定の強度は下限しきい値であり得、それより下では背景強度はセットされ得ない。したがって、背景強度は参照熱画像１００に基づき得、背景強度が所定の強度よりも低い強度値にセットされるべき場合、背景強度は代わりに所定の強度にセットされる。
【００８６】
図１Ｂは、最近シーンに入った静止した車２２０を備える交通トンネルを示す熱画像２００を示す。したがって、本出願のコンテキスト内では、静止した車２２０は静止前景物体である。この例では、静止した車２２０は、ソフトウェア実装された物体検出機能を使用して検出される。しかしながら、物体検出機能はハードウェア実装され得る。静止した車２２０を検出すると、候補アラートがトリガされる。
【００８７】
図１Ｂに示された例において、静止した車２２０を備える第１のエリア２１６が可視化される。第１のエリア２１６は物体検出機能によって決定され得る。静止した車２２０が検出された後、静止した車２２０の強度が背景強度に対して評価される。静止した車２２０の強度は、この例では、第１のエリア２１６に属するピクセルの強度のメジアンである。言い換えれば、静止した車２２０の強度は、ピクセルの重みがすべてのピクセルについて１である加重メジアンである。しかしながら、静止した車２２０の強度はいくつかの異なる方法で決定され得る。たとえば、それは第１のエリア２１６に属するピクセルのピーク強度であり得るか、または第１のエリア２１６に属するピクセルの強度の加重平均であり得る。図１Ｂに示された例における静止した車２２０の強度は背景強度よりも高いことが分かる。
【００８８】
静止した車２２０の強度が背景強度よりも高いことが分かるので、候補アラートは実際のアラートに変換される。実際のアラートは、次いでオペレータに送信または中継され得る。オペレータはビデオ監視動作における人であり得る。
【００８９】
図１Ｃは、最近シーンに入った散乱した雪３２０を備える交通トンネルを示す熱画像３００を示す。したがって、本出願のコンテキスト内では、散乱した雪３２０は静止前景物体である。図１Ｂおよび静止した車２２０に関する説明と同様に、物体検出機能は散乱した雪３２０を検出し、候補アラートがトリガされる。物体検出機能はまた、散乱した雪３２０を備える第２のエリア３１６を識別する。しかしながら、図１Ｃに示されたケースにおいて、検出された静止前景物体、すなわち散乱した雪３２０の強度は背景強度よりも低い。この場合、第２のエリア３１６に属するピクセルにおける強度における乱れの測度が計算される。乱れの測度は、第２のエリア３１６における強度の変動、第２のエリア３１６におけるエッジの数、および第２のエリア３１６におけるエッジの強さのうちの１つまたは複数に基づき得る。図１Ｃに示された具体例において、乱れの測度は、第２のエリア３１６に属するピクセルにおける強度の変動に基づく。より詳細には、乱れの測度は、第２のエリア３１６に属するピクセルにおける強度におけるエントロピーに基づく。乱れの測度がそれに基づき得る、ピクセルにおける強度の変動の他の例は、強度における雑音および強度勾配である。乱れ測度は、他の例では、第２のエリア３１６におけるエッジの数および／または強度に基づき得る。乱れの測度は、第２のエリア３１６における強度における変動、第２のエリア３１６におけるエッジの数、第２のエリア３１６におけるエッジの強さのうちの１つまたは複数に基づき得ることを理解されたい。
【００９０】
図１Ｃに見られるように、第２のエリア３１６は、散乱した雪３２０と道路１０２の一部の両方を備える。したがって、第２のエリア３１６に属するピクセルにおける強度は、検出された静止前景物体、すなわち散乱した雪３２０と、背景強度、すなわち道路１０２の両方に関係する。したがって、第２のエリア３１６に属するピクセルにおける強度の変動は、散乱した雪３２０と背景強度との間の強度の差、ならびに散乱した雪３２０と第２のエリア３１６における背景強度とに関連するピクセルの数に関係する。図１Ｃに示された例において、乱れの測度は乱れしきい値を上回ることが分かる。本明細書で説明した例の乱れしきい値は、図１Ａに示された参照熱画像１００の第１の部分１１０における乱れの測度に基づく。異なる例において、乱れしきい値は、参照熱画像１００中の第２の部分１１２および第３の部分１１４など、２つ以上の部分における乱れの測度の平均であり得る。乱れしきい値の他の例は、熱画像のストリーム中の少なくとも１つの熱画像の部分における乱れの測度、および乱れの所定の測度である。乱れしきい値は、熱画像のストリーム中の少なくとも１つの熱画像の部分における乱れの測度、参照熱画像１００の部分における乱れの測度、および所定の乱れしきい値のうちの１つまたは複数に基づき得ることを理解されたい。たとえば、所定の乱れしきい値は、それを下回って／それを上回ってには乱れしきい値がセットされ得ない、下限／上限乱れしきい値であり得る。言い換えれば、乱れしきい値が非常に低い／高い値に動的に更新される場合、所定の乱れしきい値が代わりに使用され得る。また、乱れしきい値が、たとえば参照熱画像１００中の部分１１０、１１２、１１４から決定されることができない場合、所定のしきい値は乱れしきい値として使用され得る。
【００９１】
したがって、散乱した雪３２０に対してトリガされる候補アラートは廃棄されるアラートに変換される。したがって、廃棄されるアラートは、オペレータに送信または中継されず、オペレータは、今度は、散乱した雪３２０に関係するアラームを調査する必要がない。
【００９２】
図１Ｄは、最近シーンに入った、氷の固体の連続ブロック４２０を備える交通トンネルを示す熱画像４００を示す。したがって、本出願のコンテキスト内では、氷の固体の連続ブロック４２０は静止前景物体である。図１Ｂおよび図１Ｃに関する説明と同様に、物体検出機能は氷の固体の連続ブロック４２０を検出し、候補アラートがトリガされる。物体検出機能はまた、氷の固体の連続ブロック４２０を備える第３のエリア４１６を識別する。図１Ｃに示された例と同様に、検出された静止前景物体、すなわち氷の固体の連続ブロック４２０の強度は背景強度よりも低く、第３のエリア４１６に属するピクセルにおける強度における乱れの測度は、図１Ｃにおいて第２のエリア３１６に関して説明したように、対応する様式で計算される。図１Ｄにおいて見られるように、第３のエリア４１６は、氷の固体の連続ブロック４２０と、道路１０２の一部とを備える。図１Ｃにおける第２のエリア３１６と比較して、図１Ｄにおける第３のエリア４１６中の検出された静止前景物体に対する道路１０２に関連するピクセルの数はより小さい。言い換えれば、第２のエリア３１６中の散乱した雪３２０に関連するピクセルの数に対する第２のエリア３１６中の道路１０２に関連するピクセルの数は、第３のエリア４１６中の氷の固体の連続ブロック４２０に関連するピクセルの数に対する第３のエリア４１６中の道路１０２に関連するピクセルの数よりも高い。したがって、散乱した雪３２０に関連するピクセルおよび氷の固体の連続ブロック４２０に関連するピクセルが同様の強度を有する場合、第２のエリア３１６の乱れの測度は第３のエリア４１６の乱れの測度よりも高い。
【００９３】
図１Ｄに示された例において、乱れの測度はしきい値強度を下回り、候補アラートは実際のアラートに変換される。したがって、オペレータは、熱画像４００中に示されたシーン中の氷の固体の連続ブロック４２０の存在に対してアラートされる。
【００９４】
次に、図２をさらに参照しながら、候補アラートを変換するための方法６００について説明する。
【００９５】
方法６００は、シーンの熱画像のストリーム中で、シーン中の静止前景物体２２０、３２０、４２０を検出したことに応答して、候補アラートをトリガするＳ６０２ことを備える。図１Ｂ〜図１Ｃに関して説明したのと同様に、静止前景物体２２０、３２０、４２０はソフトウェア実装された物体検出機能を使用して検出されるが、それはハードウェア実装され得る。物体検出機能はソフトウェア実装とハードウェア実装との組合せであり得ることを理解されたい。静止前景物体２２０、３２０、４２０は、たとえば、図１Ｂにおける静止した車２２０、図１Ｃにおける散乱した雪３２０、または図１Ｄにおける氷の固体の連続ブロック４２０であり得る。
【００９６】
方法６００は、背景強度に関して検出された静止前景物体２２０、３２０、４２０の強度を評価するＳ６０４ことをさらに備える。背景強度は、図１Ａに関して説明したのと同様の様式で決定され、更新され得る。
【００９７】
検出された静止前景物体２２０、３２０、４２０の強度が、図１Ｂにおける静止した車２２０の場合など、背景強度を上回る場合、方法６００は、候補アラートを実際のアラートに変換するＳ６０６ことをさらに備える。
【００９８】
検出された静止前景物体２２０、３２０、４２０の強度が、図１Ｃにおける散乱した雪３２０および図１Ｄにおける氷の固体の連続ブロック４２０の場合など、背景強度を下回る場合、方法６００は、検出された静止前景物体２２０、３２０、４２０を備えるシーンのエリア２１６、３１６、４１６に属するピクセルにおける強度における乱れの測度を計算するＳ６０８ことさらに備える。乱れの測度および乱れしきい値は、図１Ｃに関して説明したのと同様の様式で決定され得る。
【００９９】
検出された静止前景物体２２０、３２０、４２０を備えるシーンのエリア２１６、３１６、４１６に属するピクセルにおける強度における乱れの測度が、図１Ｃにおける散乱した雪３２０の場合など、乱れしきい値を上回る場合、方法６００は、候補アラートを廃棄されるアラートに変換するＳ６１０ことをさらに備える。
【０１００】
検出された静止前景物体２２０、３２０、４２０を備えるシーンのエリア２１６、３１６、４１６に属するピクセルにおける強度における乱れの測度が、氷の固体の連続ブロック４２０の場合など、乱れしきい値を下回る場合、方法６００は、候補アラートを実際のアラートに変換するＳ６１２ことをさらに備える。
【０１０１】
次に、図３をさらに参照しながら、シーンの熱画像のストリームを収集するように設定された熱ビデオカメラ７００について説明する。シーンは、図１Ａ〜図１Ｄのうちのいずれか１つに示されたシーンであり得る。熱ビデオカメラ７００は、カメラ対物レンズ７１０とカメラケーシング７２０とを備える。カメラ対物レンズ７１０は、シーンを熱画像センサー７２２上にイメージングし、それによってシーンの熱画像のストリームを収集するように設定される。
【０１０２】
熱ビデオカメラ７００は、データバス７２４とアラート弁別器７３０とをさらに備える。熱画像センサー７２２およびアラート弁別器７３０はデータバス７２４を介して通信するように構成される。したがって、熱画像センサー７２２によって収集された熱画像のストリームはデータバス７２４を介してアラート弁別器７３０に送信される。熱ビデオカメラ７００は、ビデオ符号化およびメモリのための専用ハードウェアなど、追加の構成要素を備え得る。
【０１０３】
アラート弁別器７３０は制御回路７４０を備える。制御回路７４０は、物体検出機能７４２と候補アラート評価機能７４４とを備える。
【０１０４】
物体検出機能７４２は、シーンの熱画像のストリーム中で、シーン中の静止前景物体２２０、３２０、４２０を検出し、それに応答して候補アラートをトリガするように設定される。
【０１０５】
この例における物体検出機能７４２は、シーン中の前景物体を検出するように設定されることによって、シーン中の静止前景物体を検出する。シーン中の前景物体は複数の異なる様式で検出され得る。シーン中の前景物体の検出の例として、物体検出機能７４２は、シーン中の変化を検出するようにさらに設定される。この例における物体検出機能７４２は、次いで、シーン中の変化のソースを決定するようにさらに設定され、シーン中の変化のソースが前景物体であることに応答して、シーン中の変化のソースを検出された前景物体として分類する。物体検出機能７４２は、この例では、熱画像のストリーム中の熱画像のシーケンス中の検出された前景物体の位置を決定するように設定される。検出された前景物体の位置が熱画像のストリーム中の熱画像のシーケンス中で一定であることに応答して、物体検出機能７４２は前景物体を静止前景物体２２０、３２０、４２０として分類するように設定される。
【０１０６】
候補アラートは候補アラート評価機能７４４に通信される。
【０１０７】
候補アラート評価機能７４４は、検出された静止前景物体２２０、３２０、４２０の強度を背景強度に関して評価し、検出された静止前景物体２２０、３２０、４２０の強度が、図１Ｂにおける静止した車２２０の場合など、背景強度に等しいかまたはそれを上回ることに応答して、候補アラートを実際のアラートに変換するように設定される。背景強度は、図１Ａに関して説明したのと同様の様式で決定され、更新され得る。
【０１０８】
この具体例における候補アラート評価機能７４４は、検出された静止前景物体２２０、３２０、４２０の強度が背景強度に等しいかまたはそれよりも低いことに応答して、検出された静止前景物体２２０、３２０、４２０を備えるシーンのエリア２１６、３１６、４１６に属するピクセルにおける強度における乱れの測度を計算するようにさらに設定される。乱れの測度は、図１Ｃに関して説明したのと同様の様式で決定され得る。
【０１０９】
乱れの測度が乱れしきい値を上回る場合、熱ビデオカメラ７００が図１Ｃに示された散乱した雪３２０を備えるシーンを監視する場合がそうであるように、この例における候補アラート評価機能７４４は、候補アラートを廃棄されるアラートに変換するようにさらに設定される。乱れしきい値は、図１Ｃに関して説明したのと同様の様式で決定され得る。
【０１１０】
乱れの測度が乱れしきい値を下回る場合、熱ビデオカメラ７００が図１Ｄに示された氷の固体の連続ブロック４２０を備えるシーンを監視する場合がそうであるように、この例における候補アラート評価機能７４４は、実際のアラートに候補アラートを変換するようにさらに設定される。
【０１１１】
図４は、静止前景物体２２０、３２０、４２０を検出するための方法８００のブロック方式である。方法８００は、熱画像のストリーム中で、シーン中の前景物体を検出するＳ８０２ことを備える。前景物体は複数の異なる様式で検出され得る。この具体例において、前景物体は、シーンの熱画像のストリーム中で、シーン中の変化を検出するＳ８１０ことによって検出される。シーン中の変化は、たとえば、シーン中の動き、またはシーン中に現れる物体に関係し得る。
【０１１２】
前景物体は、シーン中の変化のソースを決定するＳ８１２ことによってさらに検出される。シーン中の変化ソースは、シーン中の動きに関係する物体であり得る。
【０１１３】
前景物体は、変化のソースを分類するＳ８１４ことによってさらに検出される。変化のソースが前景物体であるとして分類されるＳ８１４場合、方法８００は前景物体を検出している。代替的に、変化のソースが前景物体でないとして分類されるＳ８１４場合、方法８００は前景物体を検出していない。
【０１１４】
前景物体がシーン中で検出されたＳ８０２場合、熱画像のストリーム中の熱画像のシーケンスについて、検出された前景物体のシーン中の位置が決定されるＳ８０４。言い換えれば、検出された前景物体の位置が追跡される。この具体例において、検出された前景物体の位置は、熱画像のストリーム中の連続した熱画像のシーケンス中で追跡される。検出された前景物体は、次いで前景物体の位置の変化に応じて分類される。位置が一定である場合、検出された前景物体は静止前景物体２２０、３２０、４２０として分類されるＳ８０６。代替的に、位置が一定でない場合、検出された前景物体は非静止前景物体として分類されるＳ８０８。
【０１１５】
例として、図１Ｂに示された熱画像２００中の前景物体を検出することは、車が交通トンネルに入る際に、シーン中の変化を検出するＳ８１０ことによって行われ得る。次いで、変化のソースが車であるとして決定されるＳ８１２。次いで、変化のソース、すなわちこの例では車が分類されるＳ８１４。この場合、変化のソースのサイズはしきい値サイズと比較され、車は前景物体として分類される。変化のソースの他の分類Ｓ８１４は、たとえば、変化のソースの速度を評価することなど、異なる行為を備え得る。図１Ｂにおける車２２０は、シーンに入った後に停止しているので、熱画像のストリーム中の熱画像のシーケンスにおける車２２０の位置は一定である。図１Ｂにおける車のシーン中の位置は、この例では、静止した車２２０を備えるエリア２１６に関連するピクセルの加重中心に基づく。前景物体の位置を決定する複数の異なる方法があることを理解されたい。方法８００は、したがって、車を静止前景物体２２０として分類するＳ８０６。車が停止しなかった場合、それの位置は一定ではなく、方法８００は、したがって、車を非静止前景物体として分類するＳ８０８であろう。方法８００は、図１Ｃおよび図１Ｄにおいて同様に表示される熱画像３００、４００に適用され得ること、および散乱した雪３２０および氷の固体の連続したブロック４２０が検出され、静止前景物体３２０、４２０として分類されるであろうことを理解されたい。
【０１１６】
当業者は、本発明的概念が上記で説明した好ましい変形態に決して限定されないことに気づく。反対に、添付の特許請求の範囲の範囲内で多くの変更および変形が可能である。
【０１１７】
たとえば、参照熱画像は、本明細書で例示されるように、加重平均の代わりに、熱画像のストリーム中のいくつかの熱画像の加重メジアンまたは加重和であり得る。
【０１１８】
たとえば、背景強度および／または乱れしきい値は、検出された静止前景物体を備える部分に対応する参照熱画像中の部分に基づき得る。
【０１１９】
さらに、図面、開示、および添付の特許請求の範囲の研究から、開示された変形態の変形は、クレームされる発明を実施する際に当業者によって理解され、実施され得る。
【符号の説明】
【０１２０】
１００  参照熱画像
１０２  道路
１０４  入口
１１０  第１の部分
１１２  第２の部分
１１４  第３の部分
２００  熱画像
２１６  第１のエリア
２２０  車
３００  熱画像
３１６  第２のエリア
３２０  雪
４００  熱画像
４１６  第３のエリア
４２０  氷の固体の連続ブロック
７００  熱ビデオカメラ
７１０  カメラ対物レンズ
７２０  カメラケーシング
７２２  熱画像センサー
７２４  データバス
７３０  アラート弁別器
７４０  制御回路
７４２  物体検出機能
７４４  候補アラート評価機能
【図１Ａ】
2020078046.tif 000003
【図１Ｂ】
2020078046.tif 000004
【図１Ｃ】
2020078046.tif 000005
【図１Ｄ】
2020078046.tif 000006
【図２】
2020078046.tif 000007
【図３】
2020078046.tif 000008
【図４】
2020078046.tif 000009
【外国語明細書】
2020078046000001.pdf
2020078046000002.pdf
2020078046000003.pdf
2020078046000004.pdf