【手続補正書】
【提出日】平成18年2月9日(2006.2.9)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】特許請求の範囲
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】  監視対象の複数の画像情報を外部から連続的に受取る画像受取手段と、
前記画像受取手段によって受取った画像情報から顔領域が検出されれば人物画像であると判断する人物画像判断手段と、
前記人物画像判断手段が人物画像であると判断した前記顔領域を、所定の手法で評価して評価値を出力する顔領域評価手段と、
前記顔領域評価手段により出力された評価値に基づいて、前記複数の画像情報から所定数の前記画像情報を選択し出力する画像情報選択手段と、を有することを特徴とする顔画像監視システム。
【請求項２】  監視対象の複数の画像情報を外部から連続的に受取る画像受取手段と、
前記画像受取手段によって受取った画像情報から顔領域が検出されれば人物画像であると判断する人物画像判断手段と、
前記人物画像判断手段が人物画像であると判断した前記顔領域について人物の顔の方向を検出し、この顔方向に基づき評価値を出力する顔方向評価手段と、
前記顔方向評価手段により出力された評価値に基づいて、前記複数の画像情報から所定数の前記画像情報を選択し出力する画像情報選択手段と、を有することを特徴とする顔画像監視システム。
【請求項３】  監視対象の複数の画像情報を外部から連続的に受取る画像受取手段と、
前記画像受取手段によって受取った画像情報から顔領域が検出されれば人物画像であると判断する人物画像判断手段と、
前記人物画像判断手段が人物画像であると判断した前記顔領域について顔の面積を検出し、この顔面積に基づき評価値を出力する顔面積評価手段と、
前記顔面積評価手段により出力された評価値に基づいて、前記複数の画像情報から所定数の前記画像情報を選択し出力する画像情報選択手段と、を有することを特徴とする顔画像監視システム。
【請求項４】  監視対象の複数の画像情報を外部から連続的に受取る画像受取手段と、
前記画像受取手段によって受取った画像情報から顔領域が検出されれば人物画像であると判断する人物画像判断手段と、
前記人物画像判断手段が人物画像であると判断した前記顔領域について顔画像のコントラストを検出し、この顔画像コントラストに基づき評価値を出力する顔画像コントラスト評価手段と、
前記顔画像コントラスト評価手段により出力された評価値に基づいて、前記複数の画像情報から所定数の前記画像情報を選択し出力する画像情報選択手段と、を有することを特徴とする顔画像監視システム。
【請求項５】  監視対象の複数の画像情報を外部から連続的に受取る画像受取手段と、
前記画像受取手段によって受取った画像情報から顔領域が検出されれば人物画像であると判断する人物画像判断手段と、
前記人物画像判断手段が人物画像であると判断した前記顔領域について顔画像の肌色の鮮明度を検出し、この顔画像肌色鮮明度に基づき評価値を出力する顔画像肌色鮮明度評価手段と、
前記顔画像肌色鮮明度評価手段により出力された評価値に基づいて、前記複数の画像情報から所定数の前記画像情報を選択し出力する画像情報選択手段と、を有することを特徴とする顔画像監視システム。
【請求項６】  監視対象の複数の画像情報を外部から連続的に受取る画像受取手段と、
前記画像受取手段によって受取った画像情報から顔領域が検出されれば人物画像であると判断する人物画像判断手段と、
前記人物画像判断手段が人物画像であると判断した前記顔領域について顔画像の表情を検出し、この顔画像表情に基づき評価値を出力する顔画像表情評価手段と、
前記顔画像表情評価手段により出力された評価値に基づいて、前記複数の画像情報から所定数の前記画像情報を選択し出力する画像情報選択手段と、を有することを特徴とする顔画像監視システム。
【請求項７】  監視対象の複数の画像情報を外部から連続的に受取る画像受取手段と、
前記画像受取手段によって受取った画像情報から顔領域が検出されれば人物画像であると判断する人物画像判断手段と、
前記人物画像判断手段が人物画像であると判断したとき、人物画像として判断された画像中に人物が何人いるかに基づいて、前記画像情報の評価値を出力する人数評価手段と、
前記人数評価手段により出力された評価値に基づいて、前記複数の画像情報から所定数の前記画像情報を選択し出力する画像情報選択手段と、を有することを特徴とする顔画像監視システム。
【請求項８】  監視対象の複数の画像情報を外部から連続的に受取る画像受取手段と、
前記画像受取手段によって受取った画像情報から顔領域が検出されれば人物画像であると判断する人物画像判断手段と、
前記人物画像判断手段が人物画像であると判断した画像情報に人物画像の全身が示されている割合に基づいて、評価値を出力する全身性評価手段と、
前記全身性評価手段により出力された評価値に基づいて、前記複数の画像情報から所定数の前記画像情報を選択し出力する画像情報選択手段と、を有することを特徴とする顔画像監視システム。
【請求項９】  監視対象の複数の画像情報を外部から連続的に受取る画像受取手段と、
前記画像受取手段によって受取った画像情報から顔領域が検出されれば人物画像であると判断する人物画像判断手段と、
前記人物画像判断手段が人物画像であると判断した前記顔領域について人物の顔の方向を検出し、選択される所定数の画像情報ができるだけ多様な顔方向のものとなるべく、前記複数の画像情報から所定数の前記画像情報を選択し出力する画像情報選択手段と、を有することを特徴とする顔画像監視システム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００４
【補正方法】変更
【補正の内容】
【０００４】
【発明が解決しようとする課題】
しかしながら上記した各々の監視システムでは、以下のようにそれぞれ問題を有している。つまり、第１の監視システムでは、監視員が常時この監視画像をモニタしていなければならならず、人件費がシステムのコストとして非常に負担となるという問題がある。第２の監視システムでは、一定時間ごとに録画されるだけなので、人物のいない無意味な画像が多く記録されるため、記憶容量の不足や、必要画像の検索の困難性などが問題としてある。又更に第３の監視システムでは、人物のいる画像のみが得られるが、それが必ずしも後からの監視画像の確認に適切な画像だけではないという問題がある。
本発明は、ＩＴＶカメラ等からの撮影画像から監視に必要な画像だけを出力することで、より効率的な監視処理を実現する顔画像監視システムを提供することを目的とする。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００５
【補正方法】変更
【補正の内容】
【０００５】
【課題を解決するための手段】
本発明は、監視対象の複数の画像情報を外部から連続的に受取る画像受取手段と、前記画像受取手段によって受取った画像情報中の移動物体を検出する移動物体検出手段と、前記移動物体検出手段が前記移動物体を検出したとき、その移動物体画像情報から顔領域が検出されればこの移動物体を人物画像であると判断する人物画像判断手段と、前記人物画像判断手段が人物画像であると判断した前記移動物体の前記顔領域を、所定の手法で評価して評価値を出力する顔領域評価手段と、前記顔領域評価手段により出力された評価値に基づいて、前記移動物体が含まれる前記複数の画像情報から所定数の前記画像情報を選択し出力する画像情報選択手段とを有することを特徴とする顔画像監視システムである。
本発明は上記した構成により、従来のように全ての移動物体を監視対象とするのではなく、移動物体から顔領域を検出し顔領域を色々な方法で評価しこの評価結果に基づいて、監視対象として選択し出力するものである。これにより、人物判定に重要な人間の顔を非常に効率よく監視することが可能となる。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００６
【補正方法】変更
【補正の内容】
【０００６】
又本発明は、監視対象の複数の画像情報を外部から連続的に受取る画像受取手段と、前記画像受取手段によって受取った画像情報中の移動物体を検出する移動物体検出手段と、前記移動物体検出手段が前記移動物体を検出したとき、その移動物体画像情報から顔領域が検出されればこの移動物体を人物画像であると判断する人物画像判断手段と、前記人物画像判断手段が人物画像であると判断した前記移動物体の前記顔領域について人物の顔の方向を検出し、この顔方向に基づき評価値を出力する顔方向評価手段と、前記顔方向評価手段により出力された評価値に基づいて、前記移動物体が含まれる前記複数の画像情報から所定数の前記画像情報を選択し出力する画像情報選択手段と、を有することを特徴とする顔画像監視システムである。  
本発明は上記した構成により、全ての顔画像を選択出力するのではなく、顔の方向を検出し、例えば人物判定により有効な正面の顔画像を中心に選択出力することで、顔画像監視に非常に有効な顔画像を自動検出することが可能となる。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】変更
【補正の内容】
【０００７】
又本発明は、監視対象の複数の画像情報を外部から連続的に受取る画像受取手段と、前記画像受取手段によって受取った画像情報中の移動物体を検出する移動物体検出手段と、前記移動物体検出手段が前記移動物体を検出したとき、その移動物体画像情報から顔領域が検出されればこの移動物体を人物画像であると判断する人物画像判断手段と、前記人物画像判断手段が人物画像であると判断した前記移動物体の前記顔領域について顔の面積を検出し、この顔面積に基づき評価値を出力する顔面積評価手段と、前記顔面積評価手段により出力された評価値に基づいて、前記移動物体が含まれる前記複数の画像情報から所定数の前記画像情報を選択し出力する画像情報選択手段と、を有することを特徴とする顔画像監視システムである。
本発明は上記構成により、全ての顔画像を抽出するのではなく、例えば顔面積が比較的大きい、顔画像監視に有効な画像のみを選択出力することにより、より効率的な顔監視処理を実現することができる。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
又本発明は、監視対象の複数の画像情報を外部から連続的に受取る画像受取手段と、前記画像受取手段によって受取った画像情報中の移動物体を検出する移動物体検出手段と、前記移動物体検出手段が前記移動物体を検出したとき、その移動物体画像情報から顔領域が検出されればこの移動物体を人物画像であると判断する人物画像判断手段と、前記人物画像判断手段が人物画像であると判断した前記移動物体の前記顔領域について顔画像のコントラストを検出し、この顔画像コントラストに基づき評価値を出力する顔画像コントラスト評価手段と、前記顔画像コントラスト評価手段により出力された評価値に基づいて、前記移動物体が含まれる前記複数の画像情報から所定数の前記画像情報を選択し出力する画像情報選択手段と、を有することを特徴とする顔画像監視システムである。  
本発明は上記した構成により、全ての顔画像を選択出力するわけではなく、顔監視に有効なコントラストの高い顔画像を優先的に選択出力することにより、より効率的な顔監視処理を実現することができる。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
又本発明は、監視対象の複数の画像情報を外部から連続的に受取る画像受取手段と、前記画像受取手段によって受取った画像情報中の移動物体を検出する移動物体検出手段と、前記移動物体検出手段が前記移動物体を検出したとき、その移動物体画像情報から顔領域が検出されればこの移動物体を人物画像であると判断する人物画像判断手段と、前記人物画像判断手段が人物画像であると判断した前記移動物体の前記顔領域について顔画像の肌色の鮮明度を検出し、この顔画像肌色鮮明度に基づき評価値を出力する顔画像肌色鮮明度評価手段と、前記顔画像肌色鮮明度評価手段により出力された評価値に基づいて、前記移動物体が含まれる前記複数の画像情報から所定数の前記画像情報を選択し出力する画像情報選択手段と、を有することを特徴とする顔画像監視システムである。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
又本発明は、監視対象の複数の画像情報を外部から連続的に受取る画像受取手段と、前記画像受取手段によって受取った画像情報中の移動物体を検出する移動物体検出手段と、前記移動物体検出手段が前記移動物体を検出したとき、その移動物体画像情報から顔領域が検出されればこの移動物体を人物画像であると判断する人物画像判断手段と、前記人物画像判断手段が人物画像であると判断した前記移動物体の前記顔領域について顔画像の表情を検出し、この顔画像表情に基づき評価値を出力する顔画像表情評価手段と、前記顔画像表情評価手段により出力された評価値に基づいて、前記移動物体が含まれる前記複数の画像情報から所定数の前記画像情報を選択し出力する画像情報選択手段とを有することを特徴とする顔画像監視システムである。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
又本発明は、監視対象の複数の画像情報を外部から連続的に受取る画像受取手段と、前記画像受取手段によって受取った画像情報中の移動物体を検出する移動物体検出手段と、前記移動物体検出手段が前記移動物体を検出したとき、その移動物体画像情報から顔領域が検出されればこの移動物体を人物画像であると判断する人物画像判断手段と、前記人物画像判断手段が人物画像であると判断したとき、人物画像として判断された移動物体が画像中に幾つあるかに基づいて、前記移動物体を含む前記画像情報の評価値を出力する人数評価手段と、前記人数評価手段により出力された評価値に基づいて、前記移動物体が含まれる前記複数の画像情報から所定数の前記画像情報を選択し出力する画像情報選択手段とを有することを特徴とする顔画像監視システムである。  
本発明は上記した構成により、移動物体の個体数を検出することにより、例えば、一人の人物の画像を優先的に選択出力したり、又複数人物の画像を優先的に選択出力したりすることが可能となる。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正の内容】
【００１２】
又本発明は、監視対象の複数の画像情報を外部から連続的に受取る画像受取手段と、前記画像受取手段によって受取った画像情報中の移動物体を検出する移動物体検出手段と、前記移動物体検出手段が前記移動物体を検出したとき、その移動物体画像情報から顔領域が検出されればこの移動物体を人物画像であると判断する人物画像判断手段と、前記人物画像判断手段が人物画像であると判断した前記移動物体中の人物画像の全身が示されている割合に基づいて、評価値を出力する全身性評価手段と、前記全身性評価手段により出力された評価値に基づいて、前記移動物体が含まれる前記複数の画像情報から所定数の前記画像情報を選択し出力する画像情報選択手段とを有することを特徴とする顔画像監視システムである。  
本発明は上記した構成により、顔画像と全身画像との比率等を考慮することにより、人物の顔だけでなく人物の全身を含めた画像を優先的に選択出力することが可能となる。  
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００１３
【補正方法】削除
【補正の内容】
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００１４
【補正方法】変更
【補正の内容】
【００１４】
又本発明は、監視対象の複数の画像情報を外部から連続的に受取る画像受取手段と、前記画像受取手段によって受取った画像情報中の移動物体を検出する移動物体検出手段と、前記移動物体検出手段が前記移動物体を検出したとき、その移動物体画像情報から顔領域が検出されればこの移動物体を人物画像であると判断する人物画像判断手段と、前記人物画像判断手段が人物画像であると判断した前記顔領域について人物の顔の方向を検出し、選択される所定数の画像情報ができるだけ多様な顔方向のものとなるべく、前記複数の画像情報から所定数の前記画像情報を選択し出力する画像情報選択手段と、を有することを特徴とする顔画像監視システムである。
本発明は上記した構成により、選択された画像の顔方向が単調とならないように顔の方向の多様性を評価値として設け、これにより色々な方向の顔画像を選択出力するものである。これにより、監視対象の人物の人相について、より詳細な情報を収集することが可能となる。
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】００１５
【補正方法】削除
【補正の内容】
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】００７２
【補正方法】変更
【補正の内容】
【００７２】
【発明の効果】
以上詳述したようにこの発明によれば、監視画像の顔の向きなどを認識することで、より監視画像として適切な画像のみを選択して出力することができる。