(57)【特許請求の範囲】
【請求項１】
複数の場所にそれぞれ設置され、あらかじめ登録されている人物の固有の生体特徴情報を利用して本人確認を行なう複数の生体照合端末装置と、この複数の生体照合端末装置とそれぞれ通信回線を介して接続された生体照合管理装置とから構成され、
前記生体照合端末装置は、
認識対象となる人物の固有の生体特徴情報を取得する生体特徴取得手段と、
あらかじめ登録されている人物の固有の生体特徴情報を記憶している第１の登録情報記憶手段と、
前記生体特徴取得手段により取得された生体特徴情報と前記第１の登録情報記憶手段に記憶されている生体特徴情報とを照合することにより、当該人物は登録されている人物であるか否かを判定する照合手段と、
前記生体特徴取得手段により取得された生体特徴情報を前記生体照合管理装置に送信する送信手段とを具備し、
前記生体照合管理装置は、
前記生体照合端末装置の送信手段により送信された生体特徴情報を受信する第１の受信手段と、
前記生体照合端末装置の第１の登録情報記憶手段に記憶されている人物の固有の生体特徴情報と同等の人物の固有の生体特徴情報を記憶している第２の登録情報記憶手段と、
前記第１の受信手段により受信した生体特徴情報と前記第２の登録情報記憶手段に記憶されている生体特徴情報とに基づき新たな生体特徴情報を生成する生体特徴情報管理手段と、
この生体特徴情報管理手段により生成された新たな生体特徴情報を、前記第１の受信手段により受信した生体特徴情報を送信した生体照合端末装置と同じ配信グループであるとあらかじめ設定された生体照合端末装置に対してだけ配信する配信手段とを具備し、
前記生体照合端末装置は、
前記生体照合管理装置の配信手段により配信された新たな生体特徴情報を受信する第２の受信手段と、
この第２の受信手段により受信した新たな生体特徴情報を前記第１の登録情報記憶手段に記憶する手段とをさらに具備したことを特徴とする人物認識システム。
【請求項２】
複数の場所にそれぞれ設置され、あらかじめ登録されている人物の固有の生体特徴情報を利用して本人確認を行なう複数の生体照合端末装置と、この複数の生体照合端末装置とそれぞれ通信回線を介して接続された生体照合管理装置とから構成され、
前記生体照合端末装置は、
認識対象となる人物の固有の生体特徴情報を取得する生体特徴取得手段と、
あらかじめ登録されている人物の固有の生体特徴情報を記憶している登録情報記憶手段と、
前記生体特徴取得手段により取得された生体特徴情報と前記登録情報記憶手段に記憶されている生体特徴情報とを照合することにより、当該人物は登録されている人物であるか否かを判定する照合手段と、
前記生体特徴取得手段により取得された生体特徴情報と前記登録情報記憶手段に記憶されている生体特徴情報とに基づき新たな生体特徴情報を生成する生体特徴情報管理手段と、
この生体特徴情報管理手段により生成された新たな生体特徴情報を前記生体照合管理装置に送信する送信手段とを具備し、
前記生体照合管理装置は、
前記生体照合端末装置の送信手段により送信された新たな生体特徴情報を受信する第１の受信手段と、
この第１の受信手段により受信した新たな生体特徴情報を、前記第１の受信手段により受信した新たな生体特徴情報を送信した生体照合端末装置と同じ配信グループであるとあらかじめ設定された生体照合端末装置に対してだけ配信する配信手段とを具備し、
前記生体照合端末装置は、
前記生体照合管理装置の配信手段により配信された新たな生体特徴情報を受信する第２の受信手段と、
この第２の受信手段により受信した新たな生体特徴情報を前記登録情報記憶手段に記憶する手段とをさらに具備したことを特徴とする人物認識システム。
【請求項３】
複数の場所にそれぞれ設置され、あらかじめ登録されている人物の固有の生体特徴情報を利用して本人確認を行なう複数の生体照合端末装置と、この複数の生体照合端末装置とそれぞれ通信回線を介して接続された生体照合管理装置とから構成され、
前記生体照合端末装置は、
認識対象となる人物の固有の生体特徴情報を取得する生体特徴取得手段と、
あらかじめ登録されている人物の固有の生体特徴情報を記憶している登録情報記憶手段と、
前記生体特徴取得手段により取得された生体特徴情報と前記登録情報記憶手段に記憶されている生体特徴情報とを照合することにより、当該人物は登録されている人物であるか否かを判定する照合手段と、
必要に応じて前記生体特徴取得手段により取得された生体特徴情報を前記生体照合管理装置に送信する送信手段とを具備し、
前記生体照合管理装置は、
前記生体照合端末装置の送信手段により送信された生体特徴情報を受信する第１の受信手段と、
この第１の受信手段により受信した生体特徴情報を前記生体照合端末装置に対して配信する配信手段とを具備し、
前記生体照合端末装置は、
前記生体照合管理装置の配信手段により配信された生体特徴情報を受信する第２の受信手段と、
この第２の受信手段により受信した生体特徴情報と前記登録情報記憶手段に記憶されている生体特徴情報との類似度を求め、この求めた類似度があらかじめ定められた閾値以上であった場合、前記第２の受信手段により受信した生体特徴情報と前記登録情報記憶手段に記憶されている生体特徴情報とに基づき新たな生体特徴情報を生成し、この生成した新たな生体特徴情報に基づき前記登録情報記憶手段内の生体特徴情報を更新する生体特徴情報管理手段とをさらに具備したことを特徴とする人物認識システム。
【請求項４】
前記配信手段は、前記第１の受信手段により受信した生体特徴情報を送信した生体照合端末装置を除いた残りの生体照合端末装置に対して配信することを特徴とする請求項３記載の人物認識システム。
【請求項５】
前記生体特徴情報は人物の顔の特徴情報であることを特徴とする請求項１〜請求項３のいずれか１つに記載の人物認識システム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、たとえば、複数の場所にそれぞれ設置され、あらかじめ登録されている人物の固有の生体特徴情報を利用して本人確認を行なう複数の生体照合端末装置（クライアント）と、この複数の生体照合端末装置とそれぞれネットワークを介して接続された生体照合管理装置（サーバ）とから構成され、複数地点での照合が可能な人物認識システムに関する。
【０００２】
【従来の技術】
従来、この種のネットワーク対応型の照合を想定した人物認識システムにあっては、一度登録された生体特徴情報をネットワークで接続された複数の生体照合端末装置へ配信するか、あるいは、ＩＣカードなどの記録媒体を介して複数の生体照合端末装置に生体特徴情報を受け渡し、本人の照合を行なっている。
【０００３】
【発明が解決しようとする課題】
ネットワークで接続されて複数地点での照合が可能な人物認識システムにおいて、生体照合端末装置の設置環境によっては、登録された生体特徴情報とは異なる傾向のある生体特徴情報が入力される可能性があり、そのような状態においては正しく照合を行なえない可能性がある。
【０００４】
たとえば、人物の顔の特徴情報を利用する人物認識システムにおいては、生体照合端末装置の設置場所における照明環境の違いなどによって、入力される生体特徴情報が変わってしまうことから、場所によって正しく認識できたり認識できなかったりという状態になることがある。
【０００５】
そこで、本発明は、生体照合端末装置の設置環境によらず、常に安定した認識性能での本人確認を行なうことが可能となる人物認識システムを提供することを目的とする。
【０００６】
【課題を解決するための手段】
本発明の人物認識システムは、複数の場所にそれぞれ設置され、あらかじめ登録されている人物の固有の生体特徴情報を利用して本人確認を行なう複数の生体照合端末装置と、この複数の生体照合端末装置とそれぞれ通信回線を介して接続された生体照合管理装置とから構成され、前記生体照合端末装置は、認識対象となる人物の固有の生体特徴情報を取得する生体特徴取得手段と、あらかじめ登録されている人物の固有の生体特徴情報を記憶している第１の登録情報記憶手段と、前記生体特徴取得手段により取得された生体特徴情報と前記第１の登録情報記憶手段に記憶されている生体特徴情報とを照合することにより、当該人物は登録されている人物であるか否かを判定する照合手段と、前記生体特徴取得手段により取得された生体特徴情報を前記生体照合管理装置に送信する送信手段とを具備し、前記生体照合管理装置は、前記生体照合端末装置の送信手段により送信された生体特徴情報を受信する第１の受信手段と、前記生体照合端末装置の第１の登録情報記憶手段に記憶されている人物の固有の生体特徴情報と同等の人物の固有の生体特徴情報を記憶している第２の登録情報記憶手段と、前記第１の受信手段により受信した生体特徴情報と前記第２の登録情報記憶手段に記憶されている生体特徴情報とに基づき新たな生体特徴情報を生成する生体特徴情報管理手段と、この生体特徴情報管理手段により生成された新たな生体特徴情報を、前記第１の受信手段により受信した生体特徴情報を送信した生体照合端末装置と同じ配信グループであるとあらかじめ設定された生体照合端末装置に対してだけ配信する配信手段とを具備し、前記生体照合端末装置は、前記生体照合管理装置の配信手段により配信された新たな生体特徴情報を受信する第２の受信手段と、この第２の受信手段により受信した新たな生体特徴情報を前記第１の登録情報記憶手段に記憶する手段とをさらに具備している。
【０００７】
【発明の実施の形態】
以下、本発明の実施の形態について図面を参照して説明する。
なお、本発明は、利用する生体特徴情報を限定せず、色々な生体特徴情報（顔、指紋、虹彩など）に対して適応が可能であるが、本実施の形態においては、生体特徴情報として顔の特徴情報を用いた場合を例にあげて説明を行なう。本実施の形態においては、入力された側の顔の特徴情報を「入力特徴情報」、あらかじめ登録されている顔の特徴情報を「登録特徴情報」と記述している。「登録特徴情報」はいわゆる「辞書」に相当する。
【０００８】
まず、第１の実施の形態について説明する。
図１は、第１の実施の形態に係る人物認識システムの構成を概略的に示すものである。この人物認識システムは、複数の場所にそれぞれ設置され、あらかじめ登録されている人物の固有の顔特徴情報を利用して本人確認を行なう複数の生体照合端末装置としての顔照合端末装置１０、この複数の顔照合端末装置１０とそれぞれ通信回線としてのネットワーク回線２０を介して接続された生体照合管理装置としての顔特徴情報管理サーバ３０とから構成されている。
【０００９】
顔照合端末装置１０は、認識対象となる人物Ｍの顔画像を撮像して入力する生体特徴取得手段としてのカメラ１００、カメラ１００から入力された顔画像から人物固有の入力特徴情報（顔特徴情報）を取得する生体特徴取得手段としての顔特徴取得部１０１、あらかじめ登録されている人物の登録特徴情報（顔特徴情報）を記憶（保存）しておく登録情報記憶手段としての登録情報記憶部１０２、顔特徴取得部１０１から得られた入力特徴情報と登録情報記憶部１０２内の登録特徴情報とを照合することにより、あらかじめ登録されている人物であるか否かを判定する照合手段としての照合部１０３、照合部１０３の判定結果に応じて所定の出力を行なう出力手段としての出力部１０４、および、顔特徴情報管理サーバ３０との通信（送受信）を行なう送信および受信手段としての通信部１０５から構成され、人物Ｍの顔を認識して登録者であるかどうかを判定し、登録者であればなんらかの操作を許可するといった制御を行なうようになっている。
【００１０】
顔特徴情報管理サーバ３０は、各顔照合端末装置１０から送信される各種情報を受信したり、各顔照合端末装置１０へ各種情報を配信（送信）したりする配信（送信）および受信手段としての通信部１０６、各顔照合端末装置１０と同等の登録特徴情報を記憶する登録情報記憶手段としての登録情報記憶部１０７、および、顔照合端末装置１０から得られる各種情報と登録情報記憶部１０７内の登録特徴情報から、新たな登録特徴情報を計算（生成）する生体特徴情報管理手段としての管理部１０８から構成され、各顔照合端末装置１０から送られてきた各種情報を管理し、各顔照合端末装置１０に適した特徴情報などを配信するようになっている。
【００１１】
以下、各部について詳細に説明する。
カメラ１００は、認識対象としての人物Ｍの顔画像を撮像して入力するものであり、たとえば、ＣＣＤセンサなどの撮像素子を用いたテレビジョンカメラから構成されている。
【００１２】
顔照合端末装置１０の顔特徴取得部１０１は、カメラ１００から入力された画像において、人物の顔を検出して入力特徴情報を抽出（取得）する。検出方法は、たとえば、文献（福井和広、山口修：「形状抽出とパターン照合の組合せによる顔特徴点抽出」、電子情報通信学会論文誌（Ｄ），ｖｏｌ．Ｊ８０−Ｄ−II，Ｎｏ．８，ｐｐ２１７０−２１７７（１９９７））などの方法を用いることで、精度の高い顔の検出が実現可能である。この場合、あらかじめ用意されたテンプレートを画像中を移動させながら相関値を求めることにより、最も高い相関値を持った場所を顔領域とする。その他に、固有空間法や部分空間法を利用した顔抽出法などの顔検出手段でもよいが、本実施の形態においては、特定サイズに切り出した顔領域画像を入力特徴情報とすることとする。
【００１３】
顔照合端末装置１０の登録情報記憶部１０２は、あらかじめシステム全体で利用を許可された人物の登録特徴情報を顔特徴情報管理サーバ３０から受信して保存しておくものである。登録する情報としては、入力された顔画像、抽出した特徴量、部分空間、部分空間を構成するための固有ベクトル、相関行列、登録の際の時刻、日時、場所などの状況情報、暗証番号、ＩＤ番号などの個人情報といったものがあげられ、必要に応じて記憶しておくことが可能とするが、本実施の形態においては、顔特徴取得部１０１で取得された顔切出し画像をＫＬ展開によって固有空間に変換して得られたベクトル情報を保存するものとし、この情報を登録特徴情報として扱う。
【００１４】
顔照合端末装置１０の照合部１０３は、顔特徴取得部１０１で取得された入力特徴情報をＫＬ展開して得られたベクトル情報と、登録情報記憶部１０２に保存されている登録特徴情報とを照合することで、現在カメラ１００の前にいる人物Ｍがあらかじめ登録されている人物かどうかを判定する。この判定方法としては、ＩＤカードやテンキー入力を利用して特定された登録特徴情報と一致するかどうかの１対１照合と、全登録者または一部の登録特徴情報と総当りで一致判定を行ない、１つでも一致する登録特徴情報があれば登録者と判定するという１対Ｎ照合の両方が利用可能である。
【００１５】
具体的な認識方法は、文献（山口修、福井和広、前田賢一：「動画像を用いた顔認識システム」、信学技報ＰＲＭＵ９７−５０），ｐｐ１７−２３，１９９７−０６）にある相互部分空間法を用いることで実現可能である。この方法では、あらかじめ蓄えられた登録特徴情報の中の認識データも、入力されるデータも部分空間として表現され、２つの部分空間のなす「角度」を類似度として定義する。ここで入力される部分空間を入力部分空間という。入力データ列に対して同様に相関行列Ｃｉｎを求め、
Ｃｉｎ＝ΦｉｎΛｉｎΦｉｎＴ
と対角化し、固有ベクトルΦｉｎを求める。２つのΦｉｎ，Φｄで表される部分空間の部分空間間類似度（０．０〜１．０）を求め、これを認識するための類似度とする。本実施の形態においては、この方法以外にも登録されている登録特徴情報の種類によってニューラルネットや単純類似度でも実現可能である。
【００１６】
顔照合端末装置１０の出力部１０４は、照合部１０３の判定結果に応じて接続機器の制御や画面表示、音声出力、警報を鳴らすといった所定の出力動作を行なう。たとえば、電子錠制御器に接続された状態であれば登録者と判定されたときに開錠信号を送ることや、未登録者が来た場合のみ管理者に音声や画像で通知をするといったことが可能である。
【００１７】
顔照合端末装置１０の通信部１０５は、カメラ１００から入力された顔画像、および、照合部１０３の判定結果と顔特徴取得部１０１で取得された入力特徴情報の外にも、図示しない入力手段により入力されたＩＤ番号やパスワード、当該顔照合端末装置１０のＩＤ番号といった各種情報を顔特徴情報管理サーバ３０に送信することが可能である。なお、通信手段としては、イーサーネットやシリアルケーブル接続など、一般的に利用されている機器を利用することで実現される。また、通信内容は、必要に応じて暗号化処理をすることも可能とする。
【００１８】
顔特徴情報管理サーバ３０の通信部１０６は、各顔照合端末装置１０から送られてくる入力特徴情報や入力された顔画像、ＩＤ番号や端末ＩＤ番号といったものを受信するとともに、必要に応じて各顔照合端末装置１０への配信を行なうことができる。
【００１９】
顔特徴情報管理サーバ３０の登録情報記憶部１０７は、配信グループ単位で登録特徴情報を管理する。配信テーブルの内容によって最高、顔照合端末装置１０の設置台数分のグループまで拡張できるようにしておく。また、顔照合端末装置１０の故障時などのときには、顔特徴情報管理サーバ３０で管理している登録特徴情報を送信することによって、後で情報を復元することを可能としている。
【００２０】
顔特徴情報管理サーバ３０の管理部１０８は、通信部１０６によって受信された入力特徴情報を受取り、必要に応じて登録済の登録特徴情報の一部または全てを再計算することによって書換え、書換えた結果を通信部１０６を用いて各顔照合端末装置１０へ配信させることも行なう。この際、書換えた結果をどの顔照合端末装置１０に反映させるかどうかは、図２に示すような配信テーブルの設定情報を基に判断する。
【００２１】
図２の例では、顔照合端末装置１０が６台接続された状態であって、顔照合端末装置Ａ〜Ｃまでが配信グループ「１」、顔照合端末装置Ｄと顔照合端末装置Ｅが配信グループ「２」、顔照合端末装置Ｆは配信グループ「３」と設定されている。
【００２２】
この場合、同じ配信グループに所属する顔照合端末装置同士では登録特徴情報を共有化するように設定されていることになり、顔照合端末装置Ａからの入力特徴情報によって登録されていた登録特徴情報が書換えられた場合、その書換えられた登録特徴情報を配信するのは同じ配信グループに属する顔照合端末装置Ａ，Ｂ，Ｃだけに送られることになる。違う配信グループである顔照合端末装置Ｄ，Ｅ，Ｆには配信されない。これは、設置場所の照明環境が類似しており、登録特徴情報を共有可能であると判定された配信グループのみに配信を行なうことを目的としたものである。
【００２３】
ただし、新規に人物を登録する場合や、人物の登録情報を削除する場合には、全ての顔照合端末装置１０の登録特徴情報を追加、削除するものとする。また、同じ配信グループにするかどうかの設定については、管理者が手動で設定することも可能であるが、登録情報に変化があった場合や、定期的な処理において登録されている登録情報間の類似性を計算し、あらかじめ設定された閾値よりも類似していると判定された場合には、同じ配信グループにしたり、同一配信グループ内での類似度スコアのばらつきがあらかじめ設定されている閾値よりも大きいと判定された場合には、違う配信グループに分割するといったことを行なうことも可能とする。
【００２４】
以下、具体的に新規登録、照合、登録情報更新、登録情報削除の処理の流れを説明する。
まず、新規登録処理の流れについて説明する。新規登録処理時においては、専用の登録用端末装置が存在しても構わないが、機能的に同等で構わないため、本実施の形態においては、顔照合端末装置１０から新規登録が行なえるものとする。実際の配信情報とその流れを図３に示す。
【００２５】
新規登録処理時には、顔照合端末装置１０において、図示しないキーボードなどの入力手段により登録者（人物Ｍ）のＩＤ番号、名前やメガネの有無など必要に応じた属性情報を入力するとともに、カメラ１００による人物Ｍの顔画像の収集によって、顔特徴取得部１０１で入力特徴情報を取得し、これら取得したＩＤ番号や属性情報および入力特徴情報を通信部１０５により顔特徴情報管理サーバ３０に送信する。
【００２６】
顔特徴情報管理サーバ３０では、顔照合端末装置１０から送信されたＩＤ番号や属性情報および入力特徴情報を通信部１０６により受信し、管理部１０８において、この受信した入力特徴情報から登録特徴情報を計算（生成）し、この計算した登録特徴情報を、受信したＩＤ番号や属性情報とともに登録情報記憶部１０７の全配信グループの中に追加記憶するとともに、全ての顔照合端末装置１０に対して上記計算した登録特徴情報をＩＤ番号や属性情報とともに配信する。
【００２７】
各顔照合端末装置１０は、顔特徴情報管理サーバ３０から送信された登録特徴情報およびＩＤ番号や属性情報を通信部１０５により受信し、照合部１０３において、この受信した登録特徴情報およびＩＤ番号や属性情報を登録情報記憶部１０２に追加記憶し、以降その人物の照合を可能な状態とする。
【００２８】
次に、照合処理の流れについて説明する。照合処理時には、顔照合端末装置１０の照合部１０３において、カメラ１００と顔特徴取得部１０１により取得された入力特徴情報を、登録情報記憶部１０２に記憶されている登録特徴情報とを照合することにより、当該人物Ｍは登録者であるかどうかを判定し、その判定結果を出力部１０４に送る。
【００２９】
なお、本実施の形態では、顔照合端末装置１０内の登録情報記憶部１０２に記憶されている登録特徴情報を用いて照合したが、取得した入力特徴情報を顔特徴情報管理サーバ３０に送信して、顔特徴情報管理サーバ３０内の登録情報記憶部１０７に記憶されている登録特徴情報と照合させることや（サーバ側での照合）、顔照合端末装置１０内には通常、登録特徴情報（登録情報記憶部１０２）をもたず、照合開始時に必要に応じて顔特徴情報管理サーバ３０の登録情報記憶部１０７内にある登録特徴情報をダウンロードして照合を行なうといったことも可能とする。
【００３０】
次に、初期登録、あるいは、前回の更新から一定の期間が経過した場合や、顔の経年変化や髪型、メガネの変更など、あらかじめ登録されている登録特徴情報を置き換える、または、一部を修正すべきだと判断されたなどといった登録情報更新処理の流れについて説明する。実際に配信される情報とその流れを図４に示す。
【００３１】
登録情報更新処理時には、ＩＤ番号とパスワードの入力などといった確実に本人であるといった確認を済んだ後に、辞書更新通知、登録者のＩＤ番号、利用する顔照合端末装置１０のＩＤ番号（端末ＩＤ番号）、カメラ１００と顔特徴取得部１０１により取得された入力特徴情報を通信部１０５により顔特徴情報管理サーバ３０に対して送信する。
【００３２】
顔特徴情報管理サーバ３０では、顔照合端末装置１０から送信される各情報を通信部１０６により受信し、管理部１０８において、受信した端末ＩＤ番号が所属する配信グループの登録特徴情報を処理対象とし、その中に含まれる登録者のＩＤ番号の登録特徴情報の一部または全てを受信した入力特徴情報の結果をふまえて書換えることとする。たとえば、登録特徴情報に加算する、平均をとる、完全に置き換えるといったことを行なうことにより、新たな登録特徴情報を生成する。
【００３３】
こうして管理部１０８において生成された新たな登録特徴情報は、通信部１０６により、図２に示した配信テーブルの設定内容に基づき、該当する配信グループに所属する顔照合端末装置１０に対してのみ配信される。この場合、別の配信グループに所属する顔照合端末装置１０には、この登録特徴情報の配信は行なわれない。
【００３４】
顔照合端末装置１０では、顔特徴情報管理サーバ３０から配信された新たな登録特徴情報を通信部１０５により受信し、照合部１０３において、登録情報記憶部１０２内の対応する登録特徴情報を、この受信した新たな登録特徴情報に更新し、以降その人物の照合を可能な状態とする。
【００３５】
次に、削除処理の流れについて説明する。実際に配信される情報とその流れを図５に示す。特定の人物の登録情報を削除したい場合などには、削除したい人物のＩＤ番号を顔照合端末装置１０（または、顔特徴情報管理サーバ３０でもよい）から入力し、この入力したＩＤ番号を含む削除通知を、通信部１０５により、顔特徴情報管理サーバ３０に送信し、顔特徴情報管理サーバ３０から全ての顔照合端末装置１０に対して当該削除通知を配信する。
【００３６】
各顔照合端末装置１０では、通信部１０５により、顔特徴情報管理サーバ３０からの削除通知を受信し、照合部１０３により、この受信した削除通知内のＩＤ番号に該当する登録特徴情報を、登録情報記憶部１０２内から削除する。また、顔特徴情報管理サーバ３０では、管理部１０８により、登録情報記憶部１０７内に管理している全配信グループ分の登録特徴情報の中から、顔照合端末装置１０から削除通知依頼のあったＩＤ番号に相当する登録特徴情報を削除する。
【００３７】
以上のような処理によって、各顔照合端末装置１０の設置場所にあわせて個別に、あるいは、共有化された登録特徴情報を利用して照合を行なうことのできる人物認識システムを実現することができる。
【００３８】
次に、第２の実施の形態について説明する。
図６は、第２の実施の形態に係る人物認識システムの構成を概略的に示すものである。第２の実施の形態は、前述した第１の実施の形態に対し、各顔照合端末装置１０において、顔特徴取得部１０１から得られる入力特徴情報と登録情報記憶部１０２内の登録特徴情報から、新たな登録特徴情報を計算（生成）する生体特徴情報管理手段としての管理部１０９が追加された点が異なり、その他は基本的には第１の実施の形態と同様であるので、詳細な説明は省略する。
【００３９】
顔特徴情報管理サーバ３０の管理部１０８は、通信部１０６によって受信された登録特徴情報を受取り、図２に示すような配信テーブルの設定情報を基に各顔照合端末装置１０へ配信する。なお、専用の登録用端末装置が別途設置されている場合や、顔特徴情報管理サーバ３０で登録、削除などを行なうなどといった場合を想定して、第１の実施の形態と同様に顔特徴情報管理サーバ３０内で登録特徴情報の書換えを行なわせることも可能であるが、顔照合端末装置１０を利用したときの場合には登録特徴情報の再計算などは行なわない。
【００４０】
以下、具体的に新規登録、照合、登録情報更新、登録情報削除の処理の流れを説明する。
まず、新規登録処理の流れについて説明する。新規登録処理時においては、専用の登録用端末装置が存在しても構わないが、機能的に同等で構わないため、本実施の形態においては、顔照合端末装置１０から新規登録が行なえるものとする。実際の配信情報とその流れを図７に示す。
【００４１】
新規登録処理時には、顔照合端末装置１０において、図示しないキーボードなどの入力手段により登録者（人物Ｍ）のＩＤ番号、名前やメガネの有無など必要に応じた属性情報を入力するとともに、カメラ１００による人物Ｍの顔画像の収集によって、顔特徴取得部１０１で入力特徴情報を取得した後、管理部１０９において、この取得した入力特徴情報により登録特徴情報を計算（生成）する。そして、入力されたＩＤ番号や属性情報および生成した登録特徴情報を通信部１０５により顔特徴情報管理サーバ３０に送信する。
【００４２】
顔特徴情報管理サーバ３０では、顔照合端末装置１０から送信されたＩＤ番号や属性情報および登録特徴情報を通信部１０６により受信し、管理部１０８において、この受信した登録特徴情報をＩＤ番号や属性情報とともに登録情報記憶部１０７の全配信グループの中に追加記憶するとともに、全ての顔照合端末装置１０に対して上記受信した登録特徴情報をＩＤ番号や属性情報とともに配信する。
【００４３】
各顔照合端末装置１０は、顔特徴情報管理サーバ３０から送信された登録特徴情報およびＩＤ番号や属性情報を通信部１０５により受信し、管理部１０９において、この受信した登録特徴情報およびＩＤ番号や属性情報を登録情報記憶部１０２に追加記憶し、以降その人物の照合を可能な状態とする。
【００４４】
照合処理の流れでは、顔特徴情報管理サーバ３０との通信が発生しないため第１の実施の形態と同様であり、ここでは説明を省略する。
【００４５】
次に、初期登録、あるいは、前回の更新から一定の期間が経過した場合や、顔の経年変化や髪型、メガネの変更など、あらかじめ登録されている登録特徴情報を置き換える、または、一部を修正すべきだと判断されたなどといった登録情報更新処理の流れについて説明する。実際に配信される情報とその流れを図８に示す。
【００４６】
登録情報更新処理時には、ＩＤ番号とパスワードの入力などといった確実に本人であるといった確認を済んだ後、管理部１０９において、顔特徴取得部１０１で取得した入力特徴情報と登録情報記憶部１０２内の登録特徴情報の一部または全ての登録特徴情報を利用し、新たな登録特徴情報を計算（生成）する。たとえば、登録特徴情報に加算する、平均をとる、完全に置き換えるといったことを行なうことにより、新たに入力された顔特徴情報を登録特徴情報に反映させる。
【００４７】
こうして、新たな登録特徴情報を生成すると、辞書更新通知、登録者のＩＤ番号、端末ＩＤ番号、生成した新たな登録特徴情報を、通信部１０５により顔特徴情報管理サーバ３０に対して送信する。顔特徴情報管理サーバ３０では、顔照合端末装置１０から送信される各情報を通信部１０６により受信し、管理部１０８において、受信した端末ＩＤ番号が所属する配信グループの登録特徴情報を処理対象とし、その中に含まれる登録者のＩＤ番号の登録特徴情報を、受信した新たな登録特徴情報に書換えるとともに、当該新たな登録特徴情報を、通信部１０６により、図２に示した配信テーブルの設定内容に基づき、該当する配信グループに所属する顔照合端末装置１０に対してのみ配信される。この場合、別の配信グループに所属する顔照合端末装置１０には、この登録特徴情報の配信は行なわれない。
【００４８】
顔照合端末装置１０では、顔特徴情報管理サーバ３０から配信された新たな登録特徴情報を通信部１０５により受信し、管理部１０９において、登録情報記憶部１０２内の対応する登録特徴情報を、この受信した新たな登録特徴情報に更新し、以降その人物の照合を可能な状態とする。
【００４９】
次に、削除処理の流れについて説明する。実際に配信される情報とその流れを図９に示す。特定の人物の登録情報を削除したい場合などには、削除したい人物のＩＤ番号を顔照合端末装置１０（または、顔特徴情報管理サーバ３０でもよい）から入力し、この入力したＩＤ番号を含む削除通知を、通信部１０５により、顔特徴情報管理サーバ３０に送信し、顔特徴情報管理サーバ３０から全ての顔照合端末装置１０に対して当該削除通知を配信する。
【００５０】
各顔照合端末装置１０では、通信部１０５により、顔特徴情報管理サーバ３０からの削除通知を受信し、管理部１０９により、この受信した削除通知内のＩＤ番号に該当する登録特徴情報を、登録情報記憶部１０２内から削除する。また、顔特徴情報管理サーバ３０では、管理部１０８により、登録情報記憶部１０７内に管理している全配信グループ分の登録特徴情報の中から、顔照合端末装置１０から削除通知依頼のあったＩＤ番号に相当する登録特徴情報を削除する。
【００５１】
以上のような処理によって、各顔照合端末装置１０の設置場所にあわせて個別に、あるいは、共有化された登録特徴情報を利用して照合を行なうことのできる人物認識システムを実現することができる。
【００５２】
次に、第３の実施の形態について説明する。
第３の実施の形態に係るシステム構成や基本的な動作等は前述した第２の実施の形態と同様であるため詳細な説明は省略し、以下、異なる部分について詳細に説明する。
【００５３】
顔照合端末装置１０の管理部１０９は、登録から一定期間が経過していることや、本人との類似度の分布などの条件にあわせ、必要によっては顔特徴取得部１０１から得られる入力特徴情報と登録情報記憶部１０２内の登録特徴情報とから新たな登録特徴情報を計算することを可能とする。
【００５４】
また、顔照合端末装置１０による更新要求以外にも、他の顔照合端末装置１０で更新要求が発生した場合に、顔特徴情報管理サーバ３０を介して配信された入力特徴情報と現在当該顔照合端末装置１０の登録情報記憶部１０２に保存されている登録特徴情報との類似度を評価し、あらかじめ設定される閾値よりも高い、あるいは、低いといった基準に合わせて登録特徴情報の一部または全ての書換え作業を行なう。
【００５５】
顔特徴情報管理サーバ３０の管理部１０８は、通信部１０６によって受信された登録特徴情報を受取り、この受取った登録特徴情報を全ての顔照合端末装置１０へ配信する。なお、専用の登録用端末装置が別途設置されている場合や、顔特徴情報管理サーバ３０で登録、削除などを行なうなどといった場合を想定して、第１の実施の形態と同様に顔特徴情報管理サーバ３０内で登録特徴情報の書換えを行なわせることも可能であるが、本実施の形態においては、登録特徴情報の再計算などは行なわずに、単に登録情報記憶部１０７にバックアップをしておくにとどめる。
【００５６】
以下、具体的に新規登録、照合、登録情報更新、登録情報削除の処理の流れを説明する。
まず、新規登録処理の流れについて説明する。新規登録処理時においては、専用の登録用端末装置が存在しても構わないが、機能的に同等で構わないため、本実施の形態においては、顔照合端末装置１０から新規登録が行なえるものとする。実際の配信情報とその流れを図１０に示す。
【００５７】
新規登録処理時には、顔照合端末装置１０において、図示しないキーボードなどの入力手段により登録者（人物Ｍ）のＩＤ番号、名前やメガネの有無など必要に応じた属性情報を入力するとともに、カメラ１００による人物Ｍの顔画像の収集によって、顔特徴取得部１０１で入力特徴情報を取得した後、管理部１０９において、この取得した入力特徴情報により登録特徴情報を計算する。そして、入力されたＩＤ番号や属性情報および生成した登録特徴情報を通信部１０５により顔特徴情報管理サーバ３０に送信する。
【００５８】
顔特徴情報管理サーバ３０では、顔照合端末装置１０から送信されたＩＤ番号や属性情報および登録特徴情報を通信部１０６により受信し、管理部１０８において、この受信した登録特徴情報をＩＤ番号や属性情報とともに登録情報記憶部１０７の全配信グループの中に追加記憶するとともに、全ての顔照合端末装置１０に対して上記受信した登録特徴情報をＩＤ番号や属性情報とともに配信する。
【００５９】
各顔照合端末装置１０は、顔特徴情報管理サーバ３０から送信された登録特徴情報およびＩＤ番号や属性情報を通信部１０５により受信し、管理部１０９において、この受信した登録特徴情報およびＩＤ番号や属性情報を登録情報記憶部１０２に追加記憶し、以降その人物の照合を可能な状態とする。
【００６０】
照合処理の流れでは、顔特徴情報管理サーバ３０との通信が発生しないため第１の実施の形態と同様であり、ここでは説明を省略する。
【００６１】
次に、初期登録、あるいは、前回の更新から一定の期間が経過した場合や、顔の経年変化や髪型、メガネの変更など、あらかじめ登録されている登録特徴情報を置き換える、または、一部を修正すべきだと判断されたなどといった登録情報更新処理の流れについて説明する。実際に配信される情報とその流れを図１１に示す。
【００６２】
登録情報更新処理時には、ＩＤ番号とパスワードの入力などといった確実に本人であるといった確認を済んだ後、管理部１０９において、顔特徴取得部１０１で取得した入力特徴情報と登録情報記憶部１０２内の登録特徴情報の一部または全ての登録特徴情報を利用し、新たな登録特徴情報を計算する。たとえば、登録特徴情報に加算する、平均をとる、完全に置き換えるといったことを行なうことにより、新たに入力された顔特徴情報を登録特徴情報に反映させる。
【００６３】
こうして、新たな登録特徴情報を生成すると、辞書更新通知、登録者のＩＤ番号、端末ＩＤ番号、取得した入力特徴情報、生成した新たな登録特徴情報を、通信部１０５により顔特徴情報管理サーバ３０に対して送信する。顔特徴情報管理サーバ３０では、顔照合端末装置１０から送信される各情報を通信部１０６により受信し、管理部１０８において、受信した新たな登録特徴情報を登録情報記憶部１０７内の全ての配信グループの登録特徴情報に対して追加登録するとともに、受信した入力特徴情報を、通信部１０６により、全ての顔照合端末装置１０に対して配信する。
【００６４】
顔照合端末装置１０では、顔特徴情報管理サーバ３０から配信された入力特徴情報を通信部１０５により受信し、管理部１０９において、この受信した入力特徴特徴情報と登録情報記憶部１０２内の登録特徴情報との類似度を計算し、このの計算した類似度があらかじめ定められた閾値以上であった場合、受信した入力特徴特徴情報と登録情報記憶部１０２内の登録特徴情報とにより新たな登録特徴情報を計算し、登録情報記憶部１０２内の対応する登録特徴情報を、この計算した新たな登録特徴情報に更新し、以降その人物の照合を可能な状態とする。
【００６５】
なお、ここで利用する閾値を高めに設定することで、各顔照合端末装置１０で管理する登録特徴情報が個別管理に近づき、逆に閾値を低くすることで、各顔照合端末装置１０で管理する登録特徴情報が同一のものを利用するようになる。この閾値は、計算される類似度の傾向によって自動的に設定しても構わないし、管理者が手動で設定しても構わない。
【００６６】
次に、削除処理の流れについて説明する。実際に配信される情報とその流れを図１２に示す。特定の人物の登録情報を削除したい場合などには、削除したい人物のＩＤ番号を顔照合端末装置１０（または、顔特徴情報管理サーバ３０でもよい）から入力し、この入力したＩＤ番号を含む削除通知を、通信部１０５により、顔特徴情報管理サーバ３０に送信し、顔特徴情報管理サーバ３０から全ての顔照合端末装置１０に対して当該削除通知を配信する。
【００６７】
各顔照合端末装置１０では、通信部１０５により、顔特徴情報管理サーバ３０からの削除通知を受信し、管理部１０９により、この受信した削除通知内のＩＤ番号に該当する登録特徴情報を、登録情報記憶部１０２内から削除する。また、顔特徴情報管理サーバ３０では、管理部１０８により、登録情報記憶部１０７内に管理している全配信グループ分の登録特徴情報の中から、顔照合端末装置１０から削除通知依頼のあったＩＤ番号に相当する登録特徴情報を削除する。
【００６８】
以上のような処理によって、各顔照合端末装置１０の設置場所にあわせて個別に、あるいは、共有化された登録特徴情報を利用して照合を行なうことのできる人物認識システムを実現することができる。
【００６９】
以上説明したように、上記実施の形態によれば、あらかじめ登録される人物の顔特徴情報（登録特徴情報）を、実際に照合を行なう各顔照合端末装置それぞれの設置環境に合わせて個別に記憶しておくことにより、各顔照合端末装置の設置場所によって本人と照合され易い、され難いといったことが発生しにくくすることが可能となる。
【００７０】
また、複数設置されている顔照合端末装置の中でも、入力される顔特徴情報（入力特徴情報）が非常に類似している顔照合端末装置間においては、登録されている顔特徴情報を共有化することによって、顔特徴情報の学習効果を増やすことが可能となる。一方で、入力される顔特徴情報が極端に変化し易い顔照合端末装置間は顔特徴情報を別々に管理することによって、傾向の異なる顔特徴情報が入力されても、お互い影響を受けないようにすることが可能となる。
【００７１】
これらのように、登録している顔特徴情報を共有するかどうかは、顔特徴情報管理サーバにおける配信テーブルで管理し、自動または手動で設定することが可能であり、顔照合端末装置の設置後に設置環境が変わった場合にも、速やかに対応することが可能となる。
【００７２】
たとえば、顔の特徴情報を利用した人物認識システムにおいては、照明環境が極端に異なる顔照合端末装置同士で同一の顔特徴情報（辞書）を利用すると、正しく顔の特徴情報が得られずに認識精度が著しく低下してしまうといった問題があるが、顔照合端末装置の設置環境にあった顔特徴情報（辞書）を個別に管理することにより、安定した認識精度を確保することが可能となる。
一方で、非常に類似した照明環境の場合には、同一の顔特徴情報（辞書）を利用することで、お互いの学習情報を共有することが可能となる。
【００７３】
このように、顔照合端末装置における照明環境の違いによって同一の顔特徴情報を利用するかどうかを、顔特徴情報管理サーバにおける配信テーブルの情報によって臨機応変に変更することが可能であり、システム全体として安定した認識精度を確保することが可能となる。
【００７４】
【発明の効果】
以上詳述したように本発明によれば、生体照合端末装置の設置環境によらず、常に安定した認識性能での本人確認を行なうことが可能となる人物認識システムを提供できる。
【図面の簡単な説明】
【図１】本発明の第１の実施の形態に係る人物認識システムの構成を概略的に示すブロック図。
【図２】第１の実施の形態の顔特徴情報管理サーバにおける配信テーブルの一例を示す説明図。
【図３】第１の実施の形態における新規登録処理時の配信例を示す説明図。
【図４】第１の実施の形態における登録情報更新処理時の配信例を示す説明図。
【図５】第１の実施の形態における登録情報削除処理時の配信例を示す説明図。
【図６】本発明の第２の実施の形態に係る人物認識システムの構成を概略的に示すブロック図。
【図７】第２の実施の形態における新規登録処理時の配信例を示す説明図。
【図８】第２の実施の形態における登録情報更新処理時の配信例を示す説明図。
【図９】第２の実施の形態における登録情報削除処理時の配信例を示す説明図。
【図１０】第３の実施の形態における新規登録処理時の配信例を示す説明図。
【図１１】第３の実施の形態における登録情報更新処理時の配信例を示す説明図。
【図１２】第３の実施の形態における登録情報削除処理時の配信例を示す説明図。
【符号の説明】
１０…顔照合端末装置（生体照合端末装置）、２０…ネットワーク回線（通信回線）、３０…顔特徴情報管理サーバ（生体照合管理装置）、Ｍ…人物、１００…カメラ（生体特徴取得手段）、１０１…顔特徴取得部（生体特徴取得手段）、１０２…登録情報記憶部（登録情報記憶手段）、１０３…照合部（照合手段）、１０４…出力部（出力手段）、１０５…通信部（送信および受信手段）、１０６…通信部（配信および受信手段）、１０７…登録情報記憶部（登録情報記憶手段）、１０８，１０９…管理部（生体特徴情報管理手段）。
【図１】
0004157322.tif 000002
【図２】
0004157322.tif 000003
【図３】
0004157322.tif 000004
【図４】
0004157322.tif 000005
【図５】
0004157322.tif 000006
【図６】
0004157322.tif 000007
【図７】
0004157322.tif 000008
【図８】
0004157322.tif 000009
【図９】
0004157322.tif 000010
【図１０】
0004157322.tif 000011
【図１１】
0004157322.tif 000012
【図１２】
0004157322.tif 000013