(57)【要約】【課題】カメラ画像から不審者を自動的に検知する。【解決手段】不審者検知装置は、撮影手段と、撮影手段によって撮影された画像から人物を抽出する画像解析手段と、抽出された人物の行動特徴量を所定時間おきに算出し、行動特徴量の度数分布を求める度数分布解析手段と、前記度数分布解析手段によって求められた行動特徴量の度数分布に基づいて、抽出された人物が不審者であるか否かを判定する判定手段と、を備える。行動特徴量としては、移動速度、移動方向の変動量、所定の対象物との間の距離、頭の高さを例示できる。正常行動と不審行動についての行動特徴量度数分布をあらかじめ記憶しておき、これと画像から得られた行動特徴量度数分布を比較することで不審者を検知する。あるいは、画像から得られた行動特徴量度数分布のばらつきに基づいて不審者を検知することもできる。【選択図】図１
2013088870.tif 000002
【特許請求の範囲】
【請求項１】
撮影手段と、
撮影手段によって撮影された画像から人物を抽出する画像解析手段と、
抽出された人物の行動特徴量を所定時間おきに算出し、行動特徴量の度数分布を求める度数分布解析手段と、
前記度数分布解析手段によって求められた行動特徴量の度数分布に基づいて、抽出された人物が不審者であるか否かを判定する判定手段と、
を備える不審者検知装置。
【請求項２】
前記度数分布解析手段は、所定時間おきに、直近の所定期間内における行動特徴量の度数分布を求め、
前記判定手段は、直近の所定期間内における行動特徴量の度数分布に基づいて、抽出された人物が不審者であるか否かを判定する、
請求項１に記載の不審者検知装置。
【請求項３】
不審な行動の行動特徴量の度数分布をあらかじめ記憶する不審行動記憶手段を更に備え、
前記判定手段は、前記度数分布解析手段によって求められた行動特徴量の度数分布が前記不審行動記憶手段に記憶された度数分布と一致する場合に、抽出された人物が不審者であると判定する、
請求項１または２に記載の不審者検知装置。
【請求項４】
正常な行動の行動特徴量の度数分布をあらかじめ記憶する正常行動記憶手段をさらに備え、
前記判定手段は、前記度数分布解析手段によって求められた行動特徴量の度数分布と前記正常行動記憶手段に記憶された度数分布とのずれが所定の基準以上である場合に、抽出された人物が不審者であると判定する、
請求項１または２に記載の不審者検知装置。
【請求項５】
前記度数分布解析手段によって求められた複数の行動特徴量の度数分布同士を比較し、これら複数の行動特徴量の度数分布をいくつかのグループにグループ分けする類型化手段をさらに備える、
請求項１から４のいずれかに記載の不審者検知装置。
【請求項６】
前記類型化手段は、グループ分けされた各グループを代表する度数分布を求め、
前記判定手段は、前記度数分布解析手段によって求められた行動特徴量の度数分布が、前記各グループを代表する度数分布のいずれと最も良く一致するかよって、抽出された人物が不審者であるか否かを判定する、
請求項５に記載の不審者検知装置。
【請求項７】
前記行動特徴量は移動速度である、請求項１から６のいずれかに記載の不審者検知装置。
【請求項８】
前記行動特徴量は移動方向の変動量である、請求項１から６のいずれかに記載の不審者検知装置。
【請求項９】
前記行動特徴量は所定の対象物との間の距離である、請求項１から６のいずれかに記載の不審者検知装置。
【請求項１０】
前記行動特徴量は頭の高さの変動量である、請求項１から６のいずれかに記載の不審者検知装置。
【請求項１１】
前記度数分布解析手段は、撮影手段によって撮影された画像から、抽出された人物の頭部を検出して、検出された頭部の位置に基づいて行動特徴量を算出する、
請求項１から１０のいずれかに記載の不審者検知装置。
【請求項１２】
画像から人物を抽出する画像解析ステップと、
抽出された人物の行動特徴量を所定時間おきに算出し、行動特徴量の度数分布を求める度数分布解析ステップと、
前記度数分布解析ステップにおいて求められた行動特徴量の度数分布に基づいて、抽出された人物が不審者であるか否かを判定する判定ステップと、
を含む不審者検知方法。
【請求項１３】
前記度数分布解析ステップでは、所定時間おきに、直近の所定期間内における行動特徴量の度数分布を求め、
前記判定ステップで、直近の所定期間内における行動特徴量の度数分布に基づいて、抽出された人物が不審者であるか否かを判定する、
請求項１２に記載の不審者検知方法。
【請求項１４】
不審な行動の行動特徴量の度数分布をあらかじめ記憶する不審行動記憶ステップを更に含み、
前記判定ステップでは、前記度数分布解析ステップにおいて求められた行動特徴量の度数分布が前記不審行動記憶ステップにおいて記憶された度数分布と一致する場合に、抽出された人物が不審者であると判定する、
請求項１２または１３に記載の不審者検知方法。
【請求項１５】
正常な行動の行動特徴量の度数分布をあらかじめ記憶する正常行動記憶ステップをさらに含み、
前記判定ステップは、前記度数分布解析ステップにおいて求められた行動特徴量の度数分布と前記正常行動記憶ステップにおいて記憶された度数分布とのずれが所定の基準以上である場合に、抽出された人物が不審者であると判定する、
請求項１２または１３に記載の不審者検知方法。
【請求項１６】
前記度数分布解析ステップにおいて求められた複数の行動特徴量の度数分布同士を比較し、これら複数の行動特徴量の度数分布をいくつかのグループにグループ分けする類型化ステップをさらに含む、
請求項１２から１５のいずれかに記載の不審者検知方法。
【請求項１７】
前記類型化ステップでは、グループ分けされた各グループを代表する度数分布を求め、
前記判定ステップでは、前記度数分布解析ステップにおいて求められた行動特徴量の度数分布が、前記各グループを代表する度数分布のいずれと最も良く一致するかによって、抽出された人物が不審者であるか否かを判定する、
請求項１６に記載の不審者検知方法。
【請求項１８】
前記行動特徴量は移動速度である、請求項１２から１７のいずれかに記載の不審者検知方法。
【請求項１９】
前記行動特徴量は移動方向の変動量の変動量である、請求項１２から１７のいずれかに記載の不審者検知方法。
【請求項２０】
前記行動特徴量は所定の対象物との間の距離である、請求項１２から１７のいずれかに記載の不審者検知方法。
【請求項２１】
前記行動特徴量は頭の高さである、請求項１２から１７のいずれかに記載の不審者検知方法。
【請求項２２】
前記度数分布解析ステップでは、画像から抽出された人物の頭部を検出して、検出された頭部の位置に基づいて行動特徴量を算出する、
請求項１２から２１のいずれかに記載の不審者検知方法。
【請求項２３】
画像取得手段と演算手段を備えるコンピュータに対して、請求項１２から２２のいずれかに記載の不審者検知方法を実行させるためのコンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、不審者を検知するための技術に関する
【背景技術】
【０００２】
従来、犯罪などを防止するために、不審者を検知する監視システムが研究・開発されている。特に監視カメラによって得られる画像から、人間による目視無しに、自動的に不審者を検知することが望まれている。
【０００３】
たとえば、特許文献１では、施設内で内部者と不審者を判別するために以下の手法が開示されている。すなわち、カメラで撮影した画像から人の移動軌跡を求め、この移動軌跡を移動の速さ（ｖ）と方向変位角（θ）とに分解し、単位時間毎のｖ・ｃｏｓθの平均値を動作要素指標として算出し、動作要素指標値が閾値以下であれば不審者であると判定する。
【０００４】
また、特許文献２では、車両用の防犯装置として、カメラで撮影した画像から人の足を検出し、足の向きと車両からの距離に基づいて不審者を検知することが開示されている。具体的には、車両の方向に足を向けている時間および車両近傍に位置する時間に基づいて、不審者を検知することが開示されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特許２００５−２７５９１２号公報
【特許文献２】特開２００９−１３７４３４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１の方法では、移動のみが行われるような場所では比較的適切に機能すると考えられるが、その他の状況においては、正常者を誤って不審者と判断したり、逆に不審者を正常者と判断したりといった誤検知が避けられない。
【０００７】
また、特許文献２の方法では、足などの特定部位に対して特定の動作を不審行動と定義するため、この特定部位を検出する必要がある。つまり、この特定部位が検出されない場合には不審者検知が実行できず、検出機会が減ってしまう。
【０００８】
本発明は、より適切に不審者を検知することを目的とする。
【課題を解決するための手段】
【０００９】
上記の課題を解決するために、本発明に係る不審者検知装置は、撮影手段と、撮影手段によって撮影された画像から人物を抽出する画像解析手段と、抽出された人物の行動特徴量を所定時間おきに算出し、行動特徴量の度数分布を求める度数分布解析手段と、前記度数分布解析手段によって求められた行動特徴量の度数分布に基づいて、抽出された人物が不審者であるか否かを判定する判定手段と、を備える。
【００１０】
ここで、行動特徴量としては、移動速度、移動方向の変動量、所定の対象物との間の距離、頭の高さの変動量、あるいはこれらの組合せを例として挙げることができる。これらの行動特徴量は、画像から人間の頭部を検出し、その位置の時間変化から求めることができる。なお、行動特徴量は上記以外にも、例えば、手や足の向きや動きなどを採用するこ
ともできる。行動特徴量の検出方法は、行動特徴量の定義に応じてそれぞれ適切な方法を採用することが好ましい。
【００１１】
また、本発明において、度数分布解析手段は、所定時間おきに、直近の所定期間内における行動特徴量の度数分布を求め、判定手段は、直近の所定期間内における行動特徴量の度数分布に基づいて、抽出された人物が不審者であるか否か判定することが好ましい。
【００１２】
このような構成によれば、行動特徴量の度数分布のばらつきを基準にすることで、不審者を判断することができる。一般に、正常者の行動では行動特徴量の度数分布にばらつきが小さいのに対して、不審者の行動は行動特徴量の度数分布にばらつきが大きい。したがって、行動特徴量の度数分布を参照することで、画像から抽出された人物が不審者であるか否か判断できる。
【００１３】
また、本発明において、判定手段による行動特徴量の度数分布に基づく不審者の判定は、具体的には以下の方法によって判断することができる。
【００１４】
例えば、不審な行動の行動特徴量の度数分布を不審行動記憶手段にあらかじめ記憶しておき、画像から求められた行動特徴量の度数分布が不審行動の度数分布と一致する場合に、抽出された人物を不審者であると判定することができる。
【００１５】
また、正常な行動の行動特徴量の度数分布を正常行動記憶手段にあらかじめ記憶しておき、画像から求められた行動特徴量の度数分布と正常行動の度数分布とのずれが所定の基準以上である場合に、抽出された人物を不審者であると判定することができる。
【００１６】
また、正常行動と異常行動の両方についての度数分布をあらかじめ記憶しておき、画像から求められた行動特徴量の度数分布がどの行動と最も良く一致するかを判定し、異常行動の度数分布と最も良く一致する場合に、抽出された人物を不審者であると判定することができる。
【００１７】
また、異常行動や正常行動の行動特徴量の度数分布をあらかじめ保持することなく、画像から求められた行動特徴量が所定の基準（たとえば、ばらつきが大きい、所定値以上または以下の度数が基準より大きい、など）を満たす場合に、抽出された人物を不審者であると判定することができる。
【００１８】
また本発明において、度数分布解析手段によって求められた行動特徴量の度数分布を、いくつかのグループにグループ分けする類型化手段を備えることも好ましい。度数分布解析手段によって求められた行動特徴量の度数分布同士を比較し、その一致度を算出することで、一致度の高い度数分布同士を１つのグループとすることができる。このような類型化手段によって、不審者検知装置が実際に運用中に得られる様々行動パターンを類型化することができる。
【００１９】
また本発明において、類型化手段によってグループ分けされた各グループを代表する度数分布を求め、この代表的な度数分布を用いて、抽出された人物が不審者であるか否かを判定することも好ましい。すなわち、類型化手段によって得られる各グループを代表する度数分布を、上述の不審者行動記憶手段に記憶する不審行動の行動特徴量の度数分布もしくは、正常行動記憶手段に記憶する正常行動の行動特徴量の度数分布として用いることが好ましい。なお、類型化手段によって類型化された各グループが不審行動であるか正常行動であるかは、グループ内の各行動についての上記判定手段による判定結果に基づいて決定しても良いし、その他の判定アルゴリズムに従って判断しても良いし、人間が判断しても良い。このように、様々な行動パターンを数多く取り込むことにより、あらかじめ記憶
しておく行動特徴量をより的確でかつ信頼性を向上させることができる。
【００２０】
なお、本発明は、上記手段の少なくとも一部を有する不審者検知装置として捉えることができる。また、本発明は、上記処理の少なくとも一部を含む不審者検知方法、およびこの方法を実行するプログラムとして捉えることもできる。上記手段および処理の各々は可能な限り互いに組み合わせて本発明を構成することができる。
【発明の効果】
【００２１】
本発明によれば、適切に不審者を検知することができる。
【図面の簡単な説明】
【００２２】
【図１】第１の実施形態にかかる車両防犯装置の構成を示す図である。
【図２】行動特徴量である移動速度および移動方向の変位量の算出方法を説明する図である。
【図３】行動特徴量の度数分布の算出方法を説明する図である。
【図４】あらかじめ格納される所定の行動パターンの行動特徴量の度数分布である。（Ａ）（Ｂ）は正常行動の行動特徴量度数分布であり、（Ｃ）は不審行動の行動特徴量度数分布である。
【図５】監視カメラによって撮影される人物の行動パターンの例である。
【図６】本実施形態にかかる車両防犯装置が行う処理の流れを示すフローチャートである。
【図７】第２の実施形態にかかる車両防犯装置の構成を示す図である。
【図８】第２の実施形態における行動パターンの類型化処理の流れを示すフローチャートである。
【発明を実施するための形態】
【００２３】
以下に図面を参照して、この発明の好適な実施の形態を例示的に詳しく説明する。
【００２４】
（第１の実施形態）
第１の実施形態は車両に搭載される、車両用防犯装置である。本実施形態にかかる車両用防犯装置は、車両に搭載されたカメラを用いて車両周辺の人物を撮影し、コンピュータ（ＥＣＵ）が画像処理を行うことで不審者の検知を行い、警報を鳴らしたりする。
【００２５】
［構成］
図１Ａは、本実施形態にかかる車両防犯装置の機能構成を示すブロック図である。車載カメラ２ａ〜２ｄは、図１Ｂに示すように車両前方・側方・後方を視野とする広角カメラである。これら４台のカメラにより車両周囲の全方向を撮影範囲とする。もちろん、カメラの台数は４台に限られる必要はなく、より多くても少なくてもかまわない。
【００２６】
車両防犯装置は、不審者検知ＥＣＵを備える。ＥＣＵは、ＣＰＵ、ＲＯＭ、ＲＡＭ、バックアップＲＡＭ、センサ・アクチュエータとの入出力インタフェースを備える電子制御ユニット（コンピュータ）である。ＲＯＭに格納されたプログラム（不審者検知プログラム）をＣＰＵが実行することで、不審者検知ＥＣＵは、画像取得部３、人物検出部４、行動特徴量算出部５、不審者判定部６、正常行動特徴量データベース７、異常行動特徴量データベース８などの各機能部として動作する。
【００２７】
画像取得部３は、車載カメラ２ａ〜２ｄから定期的に画像を取得する。人物検出部４は、画像取得部３が取得した画像から人物を検出する。画像から人物を検出するためには任意の従来技術を用いれば良く、例えば、画像から人物の輪郭（胴体、頭部など）を検出したり、顔を検出したりすることによって行える。
【００２８】
行動特徴量算出部５は、検出された人物の行動特徴量を所定の間隔（例えば、０．５秒）おきに算出する。本実施形態において算出する行動特徴量は、移動速度、移動方向の変動量、車両との間の距離、頭の高さの変動量の４つとする。もちろん、行動特徴量としてこれら以外のものを採用してもかまわない。例えば、手や足の向きや、手や足の動きなどを採用することができる。
【００２９】
行動特徴量算出部５は、各行動特徴量を以下のようにして求める。移動速度は、人物の位置（水平位置）を画像から算出して、位置の変位から算出する。人物の位置は、画像から人物を検出することによって求めることができる。なお、人物の水平位置を求めるためには、車載カメラ２が俯瞰画像を撮影可能であるか、ステレオ画像（立体画像）が撮影可能であることが好ましい。図２に示すように、時刻ｔ０，ｔ１，ｔ２において人物が位置２００，２０１，２０２にいる場合、時刻ｔ１における移動速度は、位置２０１と位置２００の間の距離ｓ１を、時刻差ｔ１−ｔ０で割った値として求めることができる。
【００３０】
移動方向の変位量も移動速度と同様に、人物の位置の変位から算出する。図２の例では、時刻ｔ１における移動方向は位置２００と位置２０１を結ぶ方向であり、時刻ｔ２における移動方向は位置２０１と位置２０２を結ぶ方向である。したがって、時刻ｔ２における移動方向の変動量は図２に示す角度θ２として算出することができる。なお、各時刻における移動方向の算出を直近の２つの時刻における位置のみから行うものとして説明したが、より多くの時刻における位置から移動方向を算出してもかまわない。
【００３１】
車両との間の距離は、人物の位置と車両の位置とを検出することで求められる。また、頭の高さの変動量は、画像から頭部を検出し、前回の検出結果との差を算出することで求められる。なお、水平高さを検出するためには、カメラの撮影方向がほぼ水平であるか、カメラがステレオ画像を撮影可能であることが好ましい。
【００３２】
なお、ここで求めている行動特徴量は、移動速度および車両との距離は絶対値として求めており、移動方向および頭の高さは変動量として求めている。しかし、いずれの行動特徴量も絶対値で求めても変動量として求めてもかまわない。
【００３３】
行動特徴量算出部５は、上記のように定期的に行動特徴量を算出し、直近の所定期間内における行動特徴量の度数分布を求める。図３は、行動特徴量の度数分布を求める方法を概念的に説明する図である。行動特徴量は上記のように定期的（例えば０．５秒おき）に算出される。一例として、度数分布は、現在時刻から所定の計数期間内（例えば１０秒以内）の行動特徴量の値から求められる。度数分布の算出は、行動特徴量が算出されるたびに行ってもかまわないが、より長い時間間隔（例えば５秒）で行われてもかまわない。なお、度数分布を算出する対象とする計数期間の長さや、度数分布を算出する間隔などは、全ての行動特徴量について同じにする必要はなく、行動特徴量に応じて異なる値とすることも好ましい。また、度数分布のビン幅は行動特徴量に応じて適宜設定すればよい。
【００３４】
正常行動特徴量ＤＢ（データベース）７には、正常な行動（不審ではない行動）についての行動特徴量の度数分布があらかじめ記憶される。どのような行動を正常とみなすかは監視の対象によっても異なるが、本実施形態においては、例えば、車両の横をまっすぐ通り過ぎる、車両を回り込むように移動する、などを挙げることができる。このような正常な行動について、行動特徴量算出部５が行うのと同等の処理によって行動特徴量およびその度数分布の算出を行って、正常行動特徴量ＤＢ７に格納する。
【００３５】
図４Ａおよび図４Ｂに、上記２つの行動パターンについての度数分布の例を示してある。なお、１つの行動についても度数分布は時間の経過とともに変わるものであり、また、
たとえば「車両脇を直進」という正常行動であっても種々のパターンが考えられる。したがって、正常行動特徴量ＤＢ７にはより多くの度数分布が格納されており、図４に示した度数分布は一例に過ぎない。図４Ａ，Ｂから、正常行動の一般的な傾向が分かる。車両脇を直進する正常行動（図４Ａ）では、移動速度はある程度一定であり、方向変動量はほぼ０、車両との距離はほぼ一定または時間とともに変化し、頭の高さはほぼ一定である。同様に、車両を回り込む正常行動（図４Ｂ）では、移動速度はある程度一定であり、方向変動量は０以外の値をとることが多く、車両との距離もある程度一定であり、頭の高さもほぼ一定である。このように、正常行動においては、行動特徴量の度数分布は、狭い範囲でピークをとる（ばらつきが少ない）ことが多い。
【００３６】
異常行動特徴量ＤＢ８には、同様に、異常な行動（不審な行動）についての行動特徴量の度数分布があらかじめ記憶される。どのような行動を異常とみなすかは監視に対象によっても異なるが、本実施形態においては、例えば、車内ののぞき込み、車上荒らし、などを挙げることができる。このような異常行動な行動について、行動特徴量算出部５が行うのと同等の処理によって行動特徴量およびその度数分布の算出を行って、異常行動特徴量ＤＢ８に格納する。
【００３７】
図４Ｃに、「車内のぞき込み」についての度数分布の例を示してある。図に示すように、この行動では、移動速度・方向変動量・頭の高さの変動量にばらつきが大きく、車両との距離が近いことが分かる。不審な行動では、車両近辺で種々な動作が行われると考えられるため、車両との距離は比較的短距離にピークがあり、その他の行動特徴量については目立ったピークがなくばらつきが大きくなる傾向にある。
【００３８】
正常行動特徴量ＤＢ７および異常行動特徴量ＤＢ８に格納される度数分布は、例えば、実際の行動を車載カメラによって撮影し、行動特徴量算出部５が算出することで作成することができる。あるいは、画像を用いることなく、開発者が直接度数分布を作成してもかまわない。
【００３９】
不審者判定部６は、行動特徴量算出部５が撮影画像から算出した行動特徴量の度数分布と、あらかじめデータベースに格納された正常行動および異常行動の度数分布とから、画像から抽出された人物の行動が不審行動であるか否か判定する。具体的には、不審者判定部６は、行動特徴量算出部５が算出した行動特徴量の度数分布が、あらかじめデータベースに格納されている度数分布のどの行動パターンと最も一致するかを判断する。この判断は、相関係数を用いる方法や、ニューラルネットワークを用いる手法などによって実現可能である。なお、本実施形態では、行動特徴量として移動速度・移動方向の変動量・車両との距離・頭の高さの変動を採用しているため、個々の行動特徴量の度数分布があらかじめ格納されている行動の度数分布と一致するか求め、それらの一致度を総合して、あらかじめ格納されている度数分布のどの行動と最も良く一致するかを判定しても良い。そして、最も良く一致する行動が異常行動である場合には、画像から抽出された人物を不審者であると判定する。逆に、最も良く一致する行動が正常行動である場合には、画像から抽出された人物を正常者であると判定する。
【００４０】
本実施形態においては、４つの行動特徴量の度数分布を用いて不審な行動を検出している。ここで、１つまたは複数の項目について行動特徴量が取得できない場合も考えられる。このように一部の行動特徴量が欠損している場合であっても、画像から抽出された人物の行動特徴量の度数分布が、あらかじめ記憶されている不審行動の度数分布と一定以上の確からしさを持って推定できる場合には、画像から抽出された人物を不審者であると判断しても良い。
【００４１】
不審者判定部６は、行動特徴量の度数分布のみに基づいて不審者を検知する必要はない
。すなわち、度数分布以外の要素に基づいて不審者を検知しても良い。例えば、車両に対する接近時間が閾値よりも大きいことを不審者検知の条件として加えることも好ましい。短時間しか車両に接近していないのであれば、行動特徴量にばらつきが大きかったとしても不審者と判断する必要はないためである。
【００４２】
また、車両の所有者が不審者であると検出されてしまわないように、スマートキーＥＣＵ９が車両のスマートキーの存在を認識している場合には、不審者判定部６は不審者検出処理を行わない。すなわち、不審者判定部６は、スマートキーの存在を検出できない場合に、不審者検出処理を開始するように構成されることが好ましい。
【００４３】
不審者判定部６は、不審者を検出した場合には、スピーカー１０、ホーン１１、照明１２，外部通信部１３等の手段を用いて、警告を発したり、警備会社や所有者に対して通知を行う。
【００４４】
［動作例］
次に、図５に示すように不審者が車両に接近した場合を例に、本実施形態にかかる車両防犯装置の動作の流れを説明する。図５Ａは、車載カメラから検出された人物の移動の軌跡が示されている。黒丸は、等間隔の時間を表しており、したがって黒丸が接近しているほど移動速度が遅いことを意味する。なお、ここでの不審者の行動は、車両に対して近づいて、方向転換をして運転座席側に行き、運転座席付近で歩みを止めて車内をのぞき込んだりしゃがんだりした後に、車両から遠ざかるというものを想定する。もちろん、このような行動パターンは想定されるもののうちのごく一部であり、実際にはより多くの行動パターンを想定する必要があることはいうまでもない。
【００４５】
このような場合を例にとって、本実施形態にかかる車両防犯装置が行う処理の流れを図６のフローチャートを参照しつつ説明する。車両防犯装置は、スマートキーを認識しなくなったり、あるいは明示的に起動の指示が与えられたタイミングで、車両周辺を監視する車載カメラ２を起動する（Ｓ２）。画像取得部３が車載カメラ２から画像を取得し、人物検出部４が画像から人物を検出する（Ｓ４）。行動特徴量算出部５は、定期的（例えば、０．５秒おき）に、行動特徴量として、移動速度、移動方向の変位量、車両との距離、および頭の高さの変動を算出する（Ｓ６）。また、行動特徴量算出部５は、行動特徴量算出の時間間隔よりも長い間隔（例えば５秒）おきに、直近の所定期間（例えば１０秒）内における行動特徴量の度数分布を算出する（Ｓ８）。
【００４６】
図５Ａに示すような行動が検出された場合には、行動特徴量算出部５が算出する行動特徴量は図５Ｂに示すようになる。ここでの対象人物の行動は、車両に直進で接近する、車両付近で方向転換する、車内を物色する、車両から遠ざかる、という大きく４つの段階に分類できる。車両に直進で接近する第一の段階では、移動速度や頭の高さや移動方向はほぼ一定であり、車両との距離は徐々に近づく。車両付近で方向転換する第二の段階では、移動速度や頭の高さや車両との距離はほぼ一定であるが、移動方向が徐々に変化する。車内を物色している第三の段階では、移動速度は小さくなり、頭の高さが大きく変化し、車両との距離が小さい値で一定し、移動方向も小刻みに変化する。車両から離れる第四の段階では、第一の段階と同様に、移動速度や頭の高さや移動方向はほぼ一定であり、車両との距離は徐々に遠ざかる。
【００４７】
行動特徴量算出部５は、上記のような行動特徴量の度数分布を算出する。そして、不審者判定部６が、算出された度数分布が、正常行動特徴量ＤＢ７または異常行動特徴量ＤＢ８に格納されている行動パターンに応じた行動特徴量の度数分布（図４参照）のいずれと最も良く一致するかを判定する（Ｓ１０）。最も良く一致する行動パターンが、不審行動である（異常行動特徴量ＤＢ８に格納されたものである）場合（Ｓ１２−ＹＥＳ）には、
警報システムや警戒システムを起動する（Ｓ１４）。一方、最も良く一致する行動パターンが正常行動である（正常行動特徴量ＤＢ７に格納されたものである）場合（Ｓ１２−ＮＯ）には、何もしない。
【００４８】
図５Ａに示した行動を対象人物がとる場合、車両に接近する第一の段階の行動は、車両の脇を直進する行動の度数分布（図４Ａ）と最も良く一致する。したがって、第一の段階では、対象人物の行動は正常であると判断される。車両付近で方向転換する第二の段階の行動は、車両を回り込む行動の度数分布（図４Ｂ）と最も良く一致する。したがって、第二の段階でも、対象人物の行動は正常であると判断される。車内を物色する第三の段階行動は、車内をのぞき込んだりする行動の度数分布（図４Ｃ）と最も良く一致する。この行動は異常行動であるため、この時点で対象人物は不審者であると判断され、警報が発せられる。なお、車両から遠ざかる第四の行動は、車両脇を直進する行動の度数分布（図４Ａ）と最も良く一致し、正常行動であると判断される。この際、警報システムは引き続き作動させておいても良いし、一定時間以上異常行動を検出しなければ警報システムを停止させるようにしても良い。
【００４９】
［本実施形態の作用・効果］
本実施形態においては、複数の動作（行動特徴量）についての度数分布の組合せによって、不審行動を判別している。このように複数の動作を複合的に考慮して不審な行動を判別しているため、より的確な不審行動判断できる。例えば、一つのみの動作（例えば、足の向き）に注目して不審行動を定義した場合、足を検出できなければ不審行動検出が行えないし、足の動作さえ正常であればその他の行動が不審であっても不審行動検出が行えない。本実施形態では、複数の動作を複合的に判断しているため、一部の行動特徴量が取得できない場合であっても、不審者を検出できる。
【００５０】
（第２の実施形態）
第１の実施形態では、正常行動特徴量ＤＢ７および異常行動特徴量ＤＢ８に記憶される行動特徴量の度数分布は、固定的なものであった。現実には様々な行動パターンが考えられる。本実施形態では、車両防犯装置が実際に稼働している際にカメラ等によって得られる行動に基づいて、正常行動特徴量ＤＢ７および異常行動特徴量ＤＢ８に記憶する行動特徴量の度数分布を作成する。これにより、様々な行動パターンを自動学習して学習結果を取り込むようにする。
【００５１】
図７は本実施形態にかかる車両防犯装置の機能構成を示すブロック図である。第１の実施形態との相違点は、不審者検知ＥＣＵの機能として、行動特徴量類型化部１４が付加されている点である。以下、第１の実施形態との相違点を主に説明する。
【００５２】
行動特徴量類型化部１４は、車載カメラによって撮影され行動特徴量算出部５によって求められた複数の行動特徴量の度数分布を、いくつかのグループにグループ分けし、各グループを代表する度数分布を求め、求められた代表的な度数分布を正常行動特徴量ＤＢ７あるいは異常行動特徴量ＤＢ８に記憶する行動特徴量として採用する。なおそのために、行動特徴量算出部５が求めた行動特徴量の度数分布は破棄せずに記憶しておく必要がある。
【００５３】
図８は、行動特徴量類型化部１４が行う処理の流れを示すフローチャートである。図８のフローチャートに示す処理は、行動特徴量算出部５によって新しく行動特徴量の度数分布を求められる度に実行されても良いし、所定数の行動特徴量の度数分布が求められる度に実行されても良いし、定期的あるいはシステム停止時など任意のタイミングで実行されて良い。
【００５４】
まず、行動特徴量類型化部１４は、既に求められている行動特徴量の度数分布同士の類似度を算出する（Ｓ２０）。このように、システム運用中に得られた実際の行動の度数分布同士を比較する。例えば、既に１００種類の実際の行動の度数分布が得られている場合には、これら１００種類の度数分布から任意の２個の度数分布の比較を行う。度数分布同士の比較（一致度の算出）は、第１の実施形態における処理と同様である。
【００５５】
次に、行動特徴量類型化部１４は、比較結果の一致の度合いの強弱を基に、一致度の高い行動の度数分布同士を集めることにより、既に求められている行動を複数のグループに分類する（Ｓ２２）。なお、グループ数は、あらかじめ定められた数であっても良いし、求められている行動特徴量の数に応じて決定しても良いし、行動特徴量の類似度に応じて動的に決定されても良い。このように度数分布の一致度が高い行動同士を集めることで、行動を分類（類型化）する。例えば、４つのグループに分類されたとすると、これら４グループ内のある１つのグループに属する行動度数分布は、互いに類似する度数分布を持つことになる。具体的には、あるグループに属する行動分布は行動パターンが直進であるものが多く、別のグループに属する行動分布は行動パターンが方向転換であるものが多くなる。
【００５６】
行動特徴量類型化部１４は、各グループについて、グループを代表する度数分布を算出する（Ｓ２４）。代表的な度数分布は、そのグループに属する全度数分布の平均であっても良いし、そのグループ内のある１つの度数分布であっても良い。
【００５７】
このようにして算出された、各グループの代表的な度数分布は、正常行動特徴量ＤＢ７あるいは異常行動特徴量ＤＢ８に格納され（Ｓ２６）、以降の不審行動検出において参考にされる。なお、類型化された各グループの行動が正常行動であるか異常行動であるかは、不審者判定部６による判定結果に基づいて判断することができる。すなわち、そのグループに属する行動の多くが不審行動と判定されている場合は、そのグループは不審行動のグループであると判断できる。逆に、そのグループに属する行動の多くが正常行動と判定されている場合は、そのグループは正常行動のグループであると判断できる。
【００５８】
本実施形態では、システム運用中に取得される様々な行動パターンの行動特徴量の度数分布を取り込んで類型化することで、正常行動あるいは異常行動として記憶しておく度数分布（行動パターン）をより的確かつ信頼度の高いものとすることができる。これにより、不審判定の精度を上げることが可能である共に、どのような不審行動が取られたのかという不審状況の詳細な解析も可能となる。
【００５９】
なお上記の説明では、類型化処理による異常行動および正常行動の学習処理がシステム運用中に行われる場合を説明した。しかしながら、上記の類型化処理は、異常行動特徴量ＤＢ８や正常行動特徴量ＤＢ７を作成する目的で、製品出荷前に行うことも可能である。この場合、グループ分けおよび代表的な行動特徴量の算出までを行動特徴量類型化部１４が行い、各グループの行動パターンが異常行動であるか正常行動であるかを人間（開発者）が判断することもできる。
【００６０】
（変形例）
上記の実施形態では、車両用の防犯装置として、車載カメラと車載のコンピュータによって不審者を検出する構成を例として説明した。しかしながら、具体的な装置の配置方法は種々の変形が考えられる。例えば、車載カメラで撮影した画像を、車両外部のコンピュータに送信して、そのコンピュータが不審者の検出処理を行っても良い。また逆に、車載カメラ以外のカメラが撮影した画像を車載コンピュータに送信して、車載コンピュータが不審者の検出処理を行っても良い。また、車両防犯装置を全て車両の外部に設けても良い。例えば、駐車場にカメラとコンピュータを設置し、駐車場内に駐車されている車両を監
視するようにしても良い。
【００６１】
また、本発明の不審者検知装置が検出対象とする不審行動は、車両に対するものに限定される必要はない。例えば、建物に対する侵入者を検出したり、施設内での移動者を監視対象としたり、任意の行動を不審行動として検出するようにしても良い。
【００６２】
上記の説明においては、不審な行動の行動特徴量の度数分布と、正常な行動の行動特徴量の度数分布をあらかじめ記憶しておき、カメラ画像から抽出された行動の行動特徴量の度数分布が、どの行動パターンに最も良く一致するか否かで、不審行動か正常行動かを判断していた。しかしながら、その他の方法によって不審行動を判断することができる。
【００６３】
例えば、あらかじめ記憶しておく行動パターンは、異常行動のみとしても良い。そして、カメラ画像から抽出された行動の行動特徴量の度数分布が、記憶されている不審な行動パターンの行動特徴量の度数分布と、基準値以上の確からしさをもって一致する場合には、不審行動と判断することができる。
【００６４】
逆に、あらかじめ記憶しておく行動パターンは、正常行動のみとしても良い。そして、カメラ画像から抽出された行動の行動特徴量の度数分布が、記憶されている正常な行動パターンのいずれとも基準値以上のずれがある場合に、不審行動と判断することができる。
【００６５】
また、正常行動や不審行動の行動特徴量の度数分布をあらかじめ記憶することなく、画像から算出される行動特徴量の度数分布のみから、行動が正常であるか不審であるかを判断しても良い。図４に示したように、正常行動の場合には行動特徴量の度数分布は、狭い範囲でピークをとり、不審行動の場合には行動特徴量の度数分布は、なだらかなピークをとる傾向にある。したがって、カメラ画像から抽出された行動の行動特徴量の度数分布のばらつき（分散）が所定の基準値以上である場合に、不審行動であると判断することもできる。この場合は、監視対象（例えば車両）との距離が接近している時間が長いなどというその他の条件も合わせて考慮して、不審行動の判断を行うことが好ましい。
【００６６】
また、上記の説明では直近の所定期間における行動特徴量の度数分布が異常行動であるか正常行動であるかを判断して、不審者判定を行っている。しかしながら、行動の時系列遷移を参照して不審者判定を行っても良い。例えば、行動Ａ（度数分布Ａ）あるいは行動Ｂ（度数分布Ｂ）を単独で検出しただけでは不審とは判定しないが、行動Ａの後に行動Ｂ（度数分布Ｂ）が検出された場合に不審行動であると判定しても良い。２つの行動の遷移だけでなく、より多くの行動の遷移を検出した場合に不審と判定しても良い。
【符号の説明】
【００６７】
２  車載カメラ
３  画像取得部
４  人物検出部
５  行動特徴量算出部
６  不審者判定部
７  正常行動特徴量データベース
８  異常行動特徴量データベース
【図１】
2013088870.tif 000003
【図２】
2013088870.tif 000004
【図３】
2013088870.tif 000005
【図４】
2013088870.tif 000006
【図５】
2013088870.tif 000007
【図６】
2013088870.tif 000008
【図７】
2013088870.tif 000009
【図８】
2013088870.tif 000010