(57)【特許請求の範囲】
【請求項１】
撮像装置から入力された画像の変化を判別するための画像処理装置であって、
（１）撮像手段から入力された画像から複数の周波数成分を抽出する抽出手段と、
（２）前記抽出された各周波数成分から夫々のエッジ量を算出するエッジ量算出手段と、
（３）前記算出された各周波数成分のエッジ量から夫々のエッジ量比率を算出する比率算出手段と、
（４）前記撮像手段から入力された基準画像の前記各周波数のエッジ量比率と判定対象となる判定画像の前記各周波数のエッジ量比率とを比較し、両各周波数のエッジ量比率の変化を検出する比率変化検出手段と、
（５）前記比率変化検出手段にて検出した各周波数のエッジ量比率の変化に基づいて判定画像と基準画像との変化を判別する判定手段と、
を備えたことを特徴とする画像処理装置。
【請求項２】
前記（５）の判定手段が、各周波数のエッジ量比率の変化のうち、絶対値での最大値に基づいて判定画像と基準画像との変化を判別するものである請求項１に記載の画像処理装置。
【請求項３】
前記画像処理装置が、更に前記撮像手段から入力された画像を複数の領域に分割する手段を有するとともに、前記（１）〜（５）の手段は各領域の画像ごとにそれぞれの処理を行うように構成され、かつ、
（６）前記（５）の判定手段から判定出力が送出された領域の数を算出し、該領域の数に基づいて判定画像と基準画像との変化を判別し出力する出力手段、
をも具備した請求項１又は２に記載の画像処理装置。
【請求項４】
撮影した画像から移動体を検出する移動体監視装置であって、
（１）撮像手段から入力された画像から複数の周波数成分を抽出する抽出手段と、
（２）前記抽出された各周波数成分から夫々のエッジ量を算出するエッジ量算出手段と、
（３）前記算出された各周波数成分のエッジ量から夫々のエッジ量比率を算出する比率算出手段と、
（４）前記撮像手段から入力された基準画像の前記各周波数のエッジ量比率と判定対象となる判定画像の前記各周波数のエッジ量比率とを比較し、両各周波数のエッジ量比率の変化を検出する比率変化検出手段と、
（５）前記比率変化検出手段にて検出した各周波数のエッジ量比率の変化が所定の閾値を越えるか否かを判定する判定手段と、
を備えることを特徴とする移動体監視装置。
【請求項５】
前記（５）の所定の閾値が環境による画像変動とその他の変動とを区別する第一の閾値又は移動体による画像変動とその他の変動とを区別する前記第一の閾値より大きい第二の閾値である請求項４に記載の移動体監視装置。
【請求項６】
前記（５）の判定手段が、前記比率変化検出手段にて検出した比率の変化が環境による画像変動とその他の変動とを区別する第一の閾値、及び、移動体による画像変動とその他の変動とを区別する第一の閾値より大きい第二の閾値を越えるか否かを判定し、かつ、第一の閾値を越えないとき移動体の判定出力の送出を禁止し、第二の閾値を越えるとき移動体の判定出力を送出する判定手段である請求項４に記載の移動体監視装置。
【請求項７】
前記（５）の判定手段が、更に輝度のヒストグラム変化及びエッジ増減率の少なくとも１つが所定の閾値を越えるか否かを判定する手段を有し、輝度のヒストグラム変化及びエッジ増減率の少なくとも１つが所定の閾値を越えかつ前記比率変化検出手段にて検出した比率の変化が前記第一の閾値を越える場合にも判定出力を送出するものである請求項６に記載の移動体監視装置。
【請求項８】
前記（５）の判定手段が、各周波数のエッジ量比率の変化のうち、絶対値での最大値に基づいて判定するものである請求項４〜７のいずれかに記載の移動体監視装置。
【請求項９】
前記画像処理装置が、更に前記撮像手段から入力された画像を複数の領域に分割する手段を有するとともに、前記（１）〜（５）の手段は各領域の画像ごとにそれぞれの処理を行うように構成され、かつ、
（６）前記（５）の判定手段から判定出力が送出された領域の数を算出し、該領域の数が予め定めた所定の数を越えたときに移動体検出出力を送出する出力手段、
をも具備したことを特徴とする請求項４〜８のいずれかに記載の移動体監視装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、例えばコンビニエンスストア、百貨店、ビル等への不審者の侵入や侵入物体等を画像処理により検知する画像処理装置及び移動体監視装置に関する。特に、照明変動、太陽光の日周変動、影の出入などにより画像に現れる変化と侵入者等による変化とを効率よく区別する画像処理装置及び移動体監視装置に関する。
【０００２】
【従来の技術】
従来、背景等の基準画像と被監視体等の判定画像との差分演算をすることにより変化領域を抽出し、この抽出された変化領域の面積や形状等から侵入者等を検出する画像処理装置が知られている。かかる画像処理装置は、画像全体が急激に変化した場合は、照明変動として侵入者と区別していた。すなわち、基準画像と判定画像との差分演算の結果、画像の全面に輝度変化が現れると、照明変動であると判断するものであった。また、変化領域におけるエッジ量があまり変化していない場合に照明変動であると判断するものも知られている。
【０００３】
【発明が解決しようとする課題】
しかし、入力される画像のエッジ量、すなわち特定周波数の画像におけるエッジ量は、蛍光灯のフリッカーや太陽光を雲が遮る場合、監視カメラの自動露光制御などにより、変動する。このエッジ量の変動は、侵入者等によるエッジ量の変動と区別がつきにくい場合がしばしば発生する。
【０００４】
このため、従来の画像処理装置では、侵入者等を確実に検知できる判定閾値を設定すると、蛍光灯のフリッカー等を侵入者等であると誤って検知してしまい、他方、蛍光灯のフリッカー等を確実に検知しない判定閾値を設定すると、侵入者等を検知できない場合が生じていた。特に、画像を複数のブロックに分割して判定するような場合、スポット光による部分的な変動との区別が極めて困難であった。
【０００５】
以下、これら従来技術を図示して、補足説明をする。
【０００６】
図８は、従来技術の基準画像の輝度ヒストグラム分布であって、同図（Ａ）は照明が明るいとき、同図（Ｂ）は暗くなったときの分布を示している。
【０００７】
この基準画像では、輝度変化があまりない、例えば模様の少ない壁のような背景画像であって、照明が明るい状態から少し暗くなると、ヒストグラム分布は、図（Ｂ）にみられるように閾値Ｔ１近傍における画素数の分布が大きく変化してしまう。しかし、この変化をとらえ被監視体を判定しようとすると、この変化が照明の明暗に起因するものであるにも拘わらず、侵入者によっても同様の傾向の変化が生じるため、この変化からは侵入者に起因したものか照明変化によるものかの判定が極めて困難である。なお、Ｔ２〜Ｔ３は他の輝度閾値である。
【０００８】
また、図９は、これまた従来技術の所定周波数のエッジ情報に基づく判定方式であって、同図（Ａ）は画像を示し、同図（Ｂ）はこの画像におけるエッジ強度に関し、太い点線は照明が明るいとき、実線は暗くなったときの所定周波数におけるエッジ強度を示している。
【０００９】
この判定方式では、エッジ領域の保存則、いわゆるエッジ強度が細い点線（図（Ｂ）に図示）以上の画素をエッジ領域、点線以下を非エッジ領域と定めて判定するものである。この方式によると、照明が明るくなるとエッジが強くなると共に太くなる。これにより、エッジとして認識していなかった所に新たなエッジが出現することになる。したがって、一定以上エッジ領域が増えると常に異常と判定され誤動作の要因となっていた。
【００１０】
したがって、このようにヒストグラム変化や周波数のエッジを使ったエッジ量の増減率による判定方式では、蛍光灯のフリッカーや太陽光の雲による遮り等の比較的小さな明るさ変動が存在する際に判定しようとすると、侵入者によるものか照明変化によるものかの判定が困難であった。
【００１１】
そこで、本発明は、侵入者等と蛍光灯のフリッカーや雲による遮り等とを効率的に区別し得る画像処理装置及び移動体監視装置を提供することにある。
【００１２】
【課題を解決するための手段】
本発明の発明者等は、蛍光灯のフリッカー、太陽光の日周変動、影、光、カメラの自動露光制御などによる背景画像の変化と侵入者等による画像変化とについて種々実験を重ねた結果、蛍光灯のフリッカー、太陽光の日周変動、影、光、カメラの自動露光制御などにより、画像の輝度値は変化するが、画像から複数の周波数成分を抽出した際の各周波数に現れるエッジ量の比率はほとんど変化せず、一方、侵入者等の移動体により、画像の輝度値は変化するとともに、複数の周波数成分に現れるエッジ量の比率も変化することを見出し、本発明を完成するにいたったものである。
【００１３】
本発明の第１の態様によれば、撮像装置から入力された画像の変化を判別するための画像処理装置であって、
（１）撮像手段から入力された画像から複数の周波数成分を抽出する抽出手段と、
（２）前記抽出された各周波数成分から夫々のエッジ量を算出するエッジ量算出手段と、
（３）前記算出された各周波数成分のエッジ量から夫々のエッジ量比率を算出する比率算出手段と、
（４）前記撮像手段から入力された基準画像の前記各周波数のエッジ量比率と判定対象となる判定画像の前記各周波数のエッジ量比率とを比較し、両各周波数のエッジ量比率の変化を検出する比率変化検出手段と、
（５）前記比率変化検出手段にて検出した各周波数のエッジ量比率の変化に基づいて判定画像と基準画像との変化を判別する判定手段と、
を備えたことを特徴とする画像処理装置が提供される。
【００１４】
かかる構成によれば、基準画像のエッジ量比率から判定画像のエッジ量比率が変化したことを検出することにより、照明の影響を受けずに判定画像が基準画像からどのように変化しているかを判定できるようになる。
【００１５】
また、本発明の第２の態様によれば、前記第１の態様において、前記（５）の判定手段が、各周波数のエッジ量比率の変化のうち、絶対値での最大値に基づいて判定画像と基準画像との変化を判別するものである画像処理装置が提供される。かかる構成によれば、判定結果の精度が向上するために、より照明の影響を受けずに判定画像が基準画像からどのように変化しているかが判定できるようになる。
【００１６】
さらに、本発明の第３の態様によれば、前記第１又は第２の態様において、前記画像処理装置が、更に前記撮像手段から入力された画像を複数の領域に分割する手段を有するとともに、前記（１）〜（５）の手段は各領域の画像ごとにそれぞれの処理を行うように構成され、かつ、
（６）前記（５）の判定手段から判定出力が送出された領域の数を算出し、該領域の数に基づいて判定画像と基準画像との変化を判別し出力する出力手段、
をも具備した画像処理装置が提供される。
【００１７】
かかる構成によれば、少なくとも領域毎に照明の影響を受けずに判定画像が基準画像から変化していることが判定できるので、画像の中の変化している部分を判定する精度が向上する。
【００１８】
また、本発明の別の第１及び第２の態様によれば、撮影した画像から移動体を検出する移動体監視装置であって、
（１）撮像手段から入力された画像から複数の周波数成分を抽出する抽出手段と、
（２）前記抽出された各周波数成分から夫々のエッジ量を算出するエッジ量算出手段と、
（３）前記算出された各周波数成分のエッジ量から夫々のエッジ量比率を算出する比率算出手段と、
（４）前記撮像手段から入力された基準画像の前記各周波数のエッジ量比率と判定対象となる判定画像の前記各周波数のエッジ量比率とを比較し、両各周波数のエッジ量比率の変化を検出する比率変化検出手段と、
（５）前記比率変化検出手段にて検出した各周波数のエッジ量比率の変化が移動体による画像変動とその他の変動とを区別する閾値を越えるか否かを判定する判定手段と、
を備える移動体監視装置、及び、
該移動体監視装置における前記（５）の閾値が前記比率変化検出手段にて検出した比率の変化が環境による画像変動とその他の変動とを区別する第一の閾値又は移動体による画像変動とその他の変動とを区別する前記第１の閾値よりも大きい第２の閾値である移動体監視装置が提供される。
【００１９】
かかる構成によれば、蛍光灯のフリッカー、太陽光、影などの環境変動があっても基準画像のエッジ量比率と判定画像のエッジ量比率はほとんど変化しないことから、環境変化による画像変化と移動体による画像変化とを誤って判定することがなくなる。
【００２０】
また、本発明の別の第３の態様によれば、前記別の第１の態様において、前記（５）の判定手段が、前記比率変化検出手段にて検出した比率の変化が環境による画像変動とその他の変動とを区別する第一の閾値、及び、移動体による画像変動とその他の変動とを区別する第一の閾値より大きい第二の閾値を越えるか否かを判定し、かつ、第一の閾値を越えないとき移動体の判定出力の送出を禁止し、第二の閾値を越えるとき移動体の判定出力を送出する判定手段である移動体監視装置が提供される。
【００２１】
かかる構成によれば、基準画像のエッジ量比率と判定画像のエッジ量比率がほとんど変化していない場合には環境変動によるものと判定することで移動体の誤った検出を防止することができるとともに、基準画像のエッジ量比率と判定画像のエッジ量比率との差から精度良く移動体を検出することが可能となる。
【００２２】
さらに、本発明の別の第４の態様によれば、前記別の第３の態様において、前記（５）の判定手段が、更に輝度のヒストグラム変化及びエッジ増減率の少なくとも１つが所定の閾値を越えるか否かを判定する手段を有し、輝度のヒストグラム変化及びエッジ増減率の少なくとも１つが所定の閾値を越える場合にも判定出力を送出する移動体監視装置が提供される。
【００２３】
かかる構成によれば、輝度のヒストグラム変化及びエッジ増減率からも移動体の存在を判定しえるので、移動体が存在しているにも拘わらず存在していないとする重大な誤判定が少なくなる。
【００２４】
また、本発明の別の第５の態様によれば、前記別の第１〜第４の態様において、前記（５）の判定手段が、各周波数のエッジ量比率の変化のうち、絶対値での最大値に基づいて判定する移動体監視装置が提供される。かかる構成によれば、判定結果の精度が向上するために、より照明の影響を受けずに移動体の判定ができるようになる。
【００２５】
また、本発明の別の第６の態様によれば、前記別の第１〜第４のいずれかの態様において、前記画像処理装置が、更に前記撮像手段から入力された画像を複数の領域に分割する手段を有するとともに、前記（１）〜（５）の手段は各領域の画像ごとにそれぞれの処理を行うように構成され、かつ、
（６）前記（５）の判定手段から判定出力が送出された領域の数を算出し、該領域の数に基づいて移動体検出出力を送出する出力手段、
をも具備した移動体監視装置が提供される。
【００２６】
かかる構成によれば、少なくとも領域毎に照明の影響を受けずに判定画像が基準画像から変化していることが判定できるので、判定結果の精度が向上するために、より照明の影響を受けずに移動体の判定ができるようになる。
【００２７】
【発明の実施の形態】
以下、本発明の実施形態を図を参照して説明する。なお、本発明はこれに限定されるものでない。
【００２８】
図１は、本発明の監視システムの全体構成を示し、図２は、図１における監視カメラ本体の構成図、図３は、図２の移動体検出手段２３のブロック図である。
【００２９】
この監視システムは、監視を必要とする場所に適宜設置された複数の監視カメラ本体１、これら監視カメラ本体１はケーブルで接続され、これら監視カメラ本体１から送られてくる映像を録画/再生、あるいは警報信号等を送出するコントローラ２、映像を監視するモニタ３、及び映像を監視し異常状態を検知した際に警報等の音声を送出するスピーカ４からなる。この監視システムは、各監視カメラ本体１に侵入者等の移動体を検知する移動体検知手段（後述）が搭載されている。
【００３０】
各監視カメラ本体１は、被監視体を撮像する撮像部１０、この撮像部１０からの信号を入力し所定の信号処理を行うと共に撮像部１０の焦点及び露光制御等を行う制御部２０、この制御部２０で処理された信号に基づき画像等を表示する表示部３０、遠隔地へモニタあるいは調整用信号を送出するモニタＩ/Ｆ４０、同様に撮影した画像を圧縮等のデータ処理し遠隔地へ送信する通信Ｉ/Ｆ５０、及び画像データ等を記憶する記憶部６０とからなる。このうち撮像部１０は、レンズと撮像素子からなり、制御部２０は、信号増幅手段２１、表示/出力手段２２、移動体検出手段２３、及び通信手段２４からなる。
【００３１】
図２において、通信Ｉ/Ｆ５０から出ている矢印を持った実線は、ＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）であって矢印は信号の送受信を示している。このＬＡＮは、ディージーチェーンに接続され、コントローラ２又は他のカメラへ各種制御信号及び画像データの伝送を行う。
【００３２】
制御部２０における移動体検出手段２３は、背景等の基準画像及び被監視体の判定画像を取込む画像入力手段２３０、画像領域を所定のブロック、例えば８×８のブロックに分割する領域分割手段２３１、各画像から複数の周波数成分、例えば４つの周波数成分をフィルタリングにより抽出する抽出手段２３２、抽出された各周波数成分からフィルタリングによりエッジ量を算出するエッジ量算出手段２３３、各周波数成分のエッジ量からエッジ量の比率を算出する比率算出手段２３４、算出した基準画像のエッジ量比率値を記憶する基準比率記憶手段２３５を備え、更に基準画像におけるエッジ量比率と判定画像におけるエッジ量比率値とを比較し、所定の閾値を越えるか否かを判定する判定手段２３６、及びこの判定手段２３６の結果に基づいて、所定の出力を送出する出力手段２３７からなる。
【００３３】
かかる移動体検知手段２３は、先ず、基準画像及び判定画像が画像入力手段２３０に取込まれ、これらの画像は領域分割手段２３１により８×８のブロックに分割され、各ブロック画像から４つの周波数成分が抽出手段２３２により抽出される。次いで、エッジ量算出手段２３３により基準画像及び判定画像の各周波数成分におけるエッジ量が算出され、続いて比率算出手段２３４により各周波数成分におけるエッジ量の比率が算出される。そして、判定手段２３６により、各周波数成分における判定画像エッジ量比率と基準比率記憶手段２３５に記憶されている各周波数成分における基準画像エッジ量比率とが比較され、その比較差分が所定の閾値と比較され、所定の出力が出力手段２３７から送出される。
【００３４】
本発明者等の各種実験によると、画像から複数の周波数成分を抽出した際の各周波数に現れるエッジ量の比率は、
（１）蛍光灯のフリッカー、太陽光の日周変動、影、光、カメラの自動露光制御などにより、画像の輝度値が変化するにも拘わらず、前記エッジ量の比率はほとんど変化しない、
（２）侵入者等の移動体により、画像の輝度値が変化するとともに、前記エッジ量の比率も変化する、
ことが見出された。
【００３５】
たとえば、図７（ａ）〜（ｄ）は、ある１つの領域の４つの周波数Ａ〜Ｄ成分のエッジ強度が画像が明るいときと暗いときとでどのように変化したかの一実験例を示す図であり、点線は明るいときのエッジ強度、実線は暗いときのエッジ強度を示す。表１は、その実験結果を纏めたものであって、照明が明るい時、暗い時におけるエッジ量及びエッジ量の比率を４つの周波数成分Ａ〜Ｄについて求めた結果を示している。この表に基づき、明るい時と暗い時におけるエッジ量比率の差を算出すると、周波数Ａにおいては１．１％、周波数Ｂは０．７％、周波数Ｃは０．９％、周波数Ｄは０．８％となっている。この結果から、背景画像のみのエッジ量比率の差分は、最も変化している周波数でも１％強程度と極めて少ない値となっていることがわかる。
【表１】
0003933453.tif 000002
以下、このエッジ量比率変化を利用し、侵入者等と蛍光灯のフリッカーとを識別して検知する方法を図４、図５のプログラムフロー図を用いて説明する。
【００３６】
プログラムをスタートさせ、先ず、ステップＳ１１で領域分割手段２３１により画像を８×８のブロックに分割する領域アドレスを設定する。次いで、ステップＳ１２で抽出手段２３２に時刻ｔ−１における基準（背景）画像が取込まれ、ステップＳ１３で前記領域アドレスにしたがって分割されたブロック毎（以下、単に「ブロック毎」という。）に輝度ヒストグラムを４つに分割し、分布Ｂ１〜Ｂ４の画素数が算出され、背景データとして記憶される。その際、ヒストグラムが図６に示すような分布をしている場合、４つの分布Ｂ１〜Ｂ４における分布画素数がほぼ同じになるように輝度閾値Ｔ１、Ｔ２、Ｔ３が決められ、Ｔ１、Ｔ２、Ｔ３が記憶される。なお、分布Ｂ１〜Ｂ４の分布画素数は、照明状態によって変化するので、照明が変化した時、又はタイマーで定期的に計算をし直して、分布Ｂ１〜Ｂ４における分布画素数が等しくなるよう輝度閾値Ｔ１、Ｔ２、Ｔ３が変更される。
【００３７】
ステップＳ１４において時刻ｔにおける判定対象の画像が抽出手段２３２に取込まれ、ステップＳ１５で、ブロック毎に輝度閾値Ｔ１、Ｔ２、Ｔ３にて区分された分布画素数Ｂ１、Ｂ２、Ｂ３、Ｂ４が算出され、ステップＳ１６で、各ブロックのヒストグラム変化画素数Ｈが以下の計算式により前回データ（時刻：ｔ−１）と比較して求められる。
Ｈ=（abs（B1ｔ−B1t-1）＋abs（B2ｔ−B2t-1）＋abs（B3ｔ−B3t-1）＋abs（B4ｔ−B4t-1））/２
なお、absは絶対値を示す記号である。
また、今回のデータと前回のデータとの比較だけでなく、今回と前々回、今回と前前々回との比較を行って、最も大きな変化をヒストグラム変化Ｈとしても良い。比較回数が多いほどゆっくりとした移動物体の検知が可能となる。
ステップＳ１７において、この値Ｈが全画面においてヒストグラム変化が所定値、例えば３０％以上の画素で発生したとき、照明異常と判定される。
【００３８】
照明異常と判定された場合は、フローの最初に戻りステップＳ１２の基準画像の取込みから始め、各ブロックのヒストグラム変化を算出して、この異常照明の変化に対応される。
【００３９】
異常照明でないと判断された場合は、ステップＳ１８において、所定の判定休止期間、例えば６回判定を休止する。この判定休止期間６回は、本来異常照明が検出された場合には、以下に説明するように、前前々回のデータ（時刻：ｔ−３）を使用しているために、３回の判定休止で済むが、照明変化が落ち着くまでの余裕を持たせこの回数休止する。
【００４０】
ステップＳ１９で、ブロック毎に各周波数におけるエッジ量が算出されるが、ブロック毎に８種類の周波数成分を選定し、うち４種類を使用する。このように選定した理由はハード的な制限からであり、４種類に限定されるものではない。
【００４１】
本実施形態では、４種類のカットオフ周波数Ａ、Ｂ、Ｃ、Ｄが、例えば周波数の高い順に８種類のうちから１つ置きに４種類Ａ、Ｂ、Ｃ、Ｄが選定されている。時刻t、t−１、t−２、t−３で各周波数Ａ〜Ｄにおけるエッジ量Ｅａ、Ｅｂ、Ｅｃ、Ｅｄが算出され、その結果は表２のとおりとなる。
【表２】
0003933453.tif 000003
ステップＳ２０で、各周波数Ａ〜Ｄのエッジ量比ａ、ｂ、ｃ、ｄが算出される。その算出方法は、例えば周波数Ａについて示せば、そのエッジ量比率は以下の計算式により各時刻ｔ、ｔ−１、ｔ−２、ｔ−３でのエッジ比率が求められる。
【００４２】
ａ＝Ｅａ/(Ｅａ+Ｅｂ+Ｅｃ+Ｅｄ)
また、他の周波数Ｂ、Ｃ、Ｄにおけるエッジ量の比率ｂ、ｃ、ｄも同様にして算出される。その結果は、表３のとおりとなる。
【表３】
0003933453.tif 000004
ステップＳ２１では、ブロック毎に周波数Ａのエッジ量Ｅａの増減率Ｅが以下の計算式で算出される。
Ｅ＝abs(Eaｔ-Eat-1)/Max（Eaｔ，Eat-1）
なお、Maxはそれに続く括弧内の数値のうち最も大きい数値を示す。また、このエッジ量の増減率は、周波数Ａでなくともよい。ここでもヒストグラム変化算出と同じ様に、上式の今回と前回、今回と前々回、今回と前前々回を比較し、最も変化の大きいものをエッジ増減率Ｅとしても良い。
【００４３】
ステップＳ２２で、ブロック毎にエッジ周波数比率の最大変化値Ｆが算出される。この算出は、実際はゆっくり移動する物体を検出するため、下記の算出式により、前前々回（時刻：ｔ−３）、前々回（時刻：ｔ−２）、前回（時刻：ｔ−１）の３回に分けて最大変化値Ｆが求められる。
【００４４】
前回との比較：
Ｆ１＝Max(abs(at-at-1),abs(bt-bt-1),abs(ct-ct-1),abs(dt-dt-1))
前々回との比較：
Ｆ２＝Max(abs(at-at-2),abs(bt-bt-2),abs(ct-ct-2),abs(dt-dt-2))
前前々回との比較：
Ｆ３＝Max(abs(at-at-3),abs(bt-bt-3),abs(ct-ct-3),abs(dt-dt-3))
そして、最終的には３回分の値Ｆ１〜Ｆ３から最大値が求められる。
Ｆ＝ Max（Ｆ１，Ｆ２，Ｆ３）
【００４５】
ステップＳ２３では、ステップＳ２２で算出されたブロック毎のＦと所定の閾値との比較がなされ、ブロック毎の検知状態が判定される。この判定は、図５のサブプログラムフローに基づいて行われる。すなわち、この判定は全てのブロック６４個（８×８ブロック）について、個別に識別番号ｋ＝１〜６４を付与して次のようにして行われる。
【００４６】
先ずステップＳ２３１で、ブロックｋのステップＳ２２で算出されたエッジ周波数比率の最大変化値ＦＫがエッジ周波数比率変化抑制閾値ＦＴ（第一の閾値）より大きいか否かが判定される。
【００４７】
ＦＫ≦ＦＴの場合は、ヒストグラム分布変動やエッジ量増減が大きくても、照明変化によって変動したものと判断し、そしてステップＳ２３３を介して、全部のブロックについてこの判定が終了していなければ（ｋ＜６４）ステップＳ２３１へ戻って次のブロックの判定を継続し、全部のブロックについての判定が終了している場合（ｋ≧６４のとき）には次のステップＳ２４へ進む。
【００４８】
なお、ここではエッジ周波数比率変化抑制閾値ＦＴは一定値として処理を行ったが、エッジ周波数比率変化は背景エッジ量により明るさの変化の影響度合いがわずかに異なり、背景エッジ量が非常に少ない時と多い時は照明環境が変動しても各周波数のエッジ量の比率にあまり変化はないが、ほどほどに背景エッジ量があると照明変動の影響を受けやすいので、前記エッジ周波数比率変化抑制閾値ＦＴは背景エッジ量によって変えても良い。
【００４９】
また、ＦＫ＞ＦＴの場合は、ステップＳ２３２において、ステップＳ１６で算出されたヒストグラム変化画素数Ｈｋとその所定の閾値Ｈｔｈとの大小、ステップＳ２１で算出されたエッジ量の増減率Ｅｋとその所定の閾値Ｅｔｈとの大小、及び、ステップＳ２２で算出されたエッジ周波数比率の最大変化値Ｆｋとその所定の閾値Ｆｔｈ（第２の閾値）との大小が判定され、
Ｆｔｈ≧Ｆｋ＞ＦＴのとき、
Ｈｋ＞Ｈｔｈ又はＥｋ＞Ｅｔｈである場合には、ブロックｋの画像は何らかの異常状態にあると判定し、検知ブロック数をインクリメント（＋１）してステップＳ２３３へ進み、
Ｈｋ≦Ｈｔｈ及びＥｋ≦Ｅｔｈである場合には、ヒストグラム変化もエッジ量変化も認められなく、しかもエッジ周波数比率変化も中途半端な範囲であるので、ノイズ等何らかの他の要因によるものと判断してそのままステップＳ２３３へ進み、
Ｆｋ＞Ｆｔｈの場合には、Ｈｋ及びＥｋの値の如何に拘わらず、ブロックｋの画像は何らかの異常状態にあると判定し、検知ブロック数をインクリメント（＋１）してステップＳ２３３へ進み、全てのブロックについて判断が終了していなければ（ｋ＜６４）再度ステップＳ２３１に戻って次のブロックの判断を継続し、全てのブロックについての判断が終了した場合（ｋ≧６４の場合）には次のステップＳ２４へ進む。
【００５０】
なお、Ｈｔｈはブロック毎の輝度のヒストグラム変化画素数の閾値、Ｅｔｈはブロック毎の各周波数におけるエッジ量の増減率の閾値であり、それぞれ実験的に誤判定が少なくなるように選択・設定され、また、Ｆｔｈは、ブロック毎のエッジ周波数比率変化の第二の閾値であって、エッジ周波数比率変化抑制閾値ＦＴよりも大きい範囲で実験的に誤判定が少なくなるように選択・設定される。また、本発明では述べなかったが各ブロック毎に違う感度を設定することも可能である。
【００５１】
次いで、ステップＳ２４で、前記検知ブロック数が所定の閾値と比較され、この閾値を越える検知ブロック数があると、ステップＳ２５において、コントローラ２へ異常が通報され、モニタ３にその旨を表示するとともにスピーカ４で警報音を発するようになされる。
【００５２】
また、ステップＳ２６において、ステップＳ１５で算出されたブロック毎のヒストグラム分布画素数Ｂ１〜Ｂ４、ステップＳ２１で算出されたブロック毎のエッジ量増減率Ｅａ、及び、ステップＳ２０で算出されたエッジ量の比率ａ、ｂ、ｃ、ｄについて、時刻ｔのデータを前回のデータとし、前回のデータを前々回のデータとし、前々回データを前前々回データとして記憶する。
【００５３】
そして、ステップ２７において、予め定めたヒストグラム輝度閾値更新時間を経過したか否かを判断し、この時間を超えていた場合には、ステップＳ１２に戻って新たに取込んだ画像を基に輝度閾値Ｔ１、Ｔ２、Ｔ３を更新して基準画像データとして取り込み、また、前記時間を超えていない場合には、ステップＳ１４で再度判定すべき画像を取り込んで、上記と同様の判定を繰り返す。
【００５４】
この更新は、朝日あるいは夕焼け時に、徐々に明るくなるあるいは徐々に暗くなるような状態の際に、この明暗の変化によりＢ１、Ｂ２、Ｂ３、Ｂ４の画素数が変わってしまう可能性があるので、これらの画素数がほぼ同じになるように輝度閾値Ｔ１、Ｔ２、Ｔ３を一定間隔で変えて背景データの入れ換えを行うものである。
【００５５】
なお、上記の具体例では、各ブロックの異常を判定するためのパラメータとして、エッジ周波数比率の最大変化値Ｆｋを使用したが、これは判定精度を向上させるためであり、ブロック毎の各周波数エッジ量の比率ａ、ｂ、ｃ及びｄをそのまま判定に使用することもできる。
【００５６】
また、上記の具体例では、各ブロックの異常を判定するためのパラメータとして、エッジ周波数比率の最大変化値Ｆｋのみでなく、輝度ヒストグラム変化画素数Ｈｋ及びエッジ量の増減率Ｅｋをも使用したが、これは侵入者検知に際し、少なくとも侵入者があった場合にそれを見逃すことがないようにするためであり、単にエッジ周波数比率の最大変化値Ｆｋとエッジ周波数比率変化の第２の閾値Ｆｔｈとの大小に基づいてブロック毎の異常を検知することもできる。
【００５７】
さらに、上記の具体例では、画像を８×８＝６４個のブロックに分割して各ブロックの異常を判定し、その異常と判定された検知ブロックの数から画像全体の異常について判定する例について記載したが、画像全体を１つのブロックとして異常を検知することもでき、その場合は画素数ｋ＝１として処理してエッジ周波数比率変化Ｆが上記第２の閾値Ｆｔｈを越えているか否かを判定すればよい。
【００５８】
【発明の効果】
本発明によれば、以下の効果を奏する。
【００５９】
第１及び第２の発明によれば、基準画像のエッジ量比率から判定画像のエッジ量比率が変化したことを検出することにより、照明の影響を受けずに判定画像が基準画像から変化していることが判定できるようになる。
【００６０】
また、第３の発明によれば、少なくとも領域毎に照明の影響を受けずに判定画像が基準画像から変化していることが判定できるので、画像の中の移動している部分を判定する精度が向上する。
【００６１】
また、第４及び第５の発明によれば、蛍光灯のフリッカー、太陽光、影などの環境変動があっても基準画像のエッジ量比率と判定画像のエッジ量比率はほとんど変化しないことから、環境変化による画像変化と移動体による画像変化とを誤って判定することがなくなる。
【００６２】
また、第６の発明によれば、基準画像のエッジ量比率と判定画像のエッジ量比率がほとんど変化していない場合には環境変動によるものと判定することで移動体の誤った検出を防止することができるとともに、基準画像のエッジ量比率と判定画像のエッジ量比率との差から精度良く移動体を検出することが可能となる。
【００６３】
さらに、第７の発明によれば、輝度のヒストグラム変化及びエッジ増減率からも移動体の存在を判定しえるので、移動体が存在しているにも拘わらず存在していないとする重大な誤判定が少なくなり、第８の発明によれば、判定結果の精度が向上するために、より照明の影響を受けずに移動体の判定ができるようになり、第９の発明によれば、少なくとも領域毎に照明の影響を受けずに判定画像が基準画像から変化していることが判定できるので、より照明の影響を受けずに移動体の判定ができるようになる。
【図面の簡単な説明】
【図１】  本発明の監視システムの全体構成図である。
【図２】  図１における監視カメラの構成図である。
【図３】  図２の移動体検出手段の構成を示すブロック図である。
【図４】  図２の移動体検出手段によって実行されるエッジ周波数変化による侵入者検知フローチャートである。
【図５】  図４のブロック毎の検知状態を判定するフローチャートである。
【図６】  図４に関連する画像を説明する輝度ヒストグラム図である。
【図７】  図４に関連し抽出される周波数成分を例示した図である。
【図８】  背景が一様で輝度変化があまりないブロックにおいて、明るさが変わった場合のヒストグラム変化を説明する図であり、（Ａ）は明るい場合、（Ｂ）は暗い場合を示す。
【図９】  あるブロックの所定周波数でのエッジ強度が明るいときと暗いときとでどのように変化するかを説明する図であり、（Ａ）は画像を表し、（Ｂ）はその画像の特定ブロックの所定周波数におけるエッジ強度を示す図である。
【符号の説明】
１・・・・・監視カメラ
１０・・・・撮像手段
２０・・・・制御手段
２１・・・・信号増幅手段
２３・・・・移動体検出手段
２３０・・・画像入力手段
２３１・・・領域分割手段
２３２・・・抽出手段
２３３・・・エッジ量算出手段
２３４・・・比率算出手段
２３５・・・基準比率記憶手段
２３６・・・判定手段
２３７・・・出力手段
【図１】
0003933453.tif 000005
【図２】
0003933453.tif 000006
【図３】
0003933453.tif 000007
【図４】
0003933453.tif 000008
【図５】
0003933453.tif 000009
【図６】
0003933453.tif 000010
【図７】
0003933453.tif 000011
【図８】
0003933453.tif 000012
【図９】
0003933453.tif 000013