(57)【要約】【課題】不特定多数の人物を対象として登録、認証を効率的に実行することのできる登録システムおよび登録方法を提供する。【解決手段】  登録に同意する登録対象者についての情報を顔画像とともに登録する登録部１５ｂと、登録に同意していない未登録者についての情報を顔画像とともに登録する仮登録部１５ｃと、撮像装置で撮影される人物の動画像から顔画像を抽出する顔画像抽出部１５ｅと、抽出された顔画像に基づいてその人物が既に登録されていることを認証する認証部１５ｄと、前記撮影された人物についての情報を履歴情報として登録する履歴登録部１５ｆとを備え、前記仮登録部は、前記認証部で認証されなかったときは、前記撮影された人物を未登録者として登録する登録システムである。【選択図】  図２
2008250755.tif 000002
【特許請求の範囲】
【請求項１】
登録に同意する登録対象者についての情報を顔画像とともに登録する登録部と、
登録に同意していない未登録者についての情報を顔画像とともに登録する仮登録部と、
撮像装置で撮影される人物の動画像から顔画像を抽出する顔画像抽出部と、
抽出された顔画像に基づいてその人物が既に登録されていることを認証する認証部と、
前記撮影された人物についての情報を履歴情報として登録する履歴登録部とを備え、
前記仮登録部は、
前記認証部で認証されなかったときは、前記撮影された人物を未登録者として登録することを特徴とする登録システム。
【請求項２】
前記登録システムに入力される顔画像に基づいて、該顔画像に類似する登録者についての情報を検索する検索部を更に備えたことを特徴とする請求項１に記載の登録システム。
【請求項３】
前記顔画像抽出部は、前記動画像に複数の人物が撮影されているときは、それぞれの人物について顔画像を抽出することを特徴とする請求項１に記載の登録システム。
【請求項４】
前記履歴登録部は、前記人物が撮影された場所、時間を更に登録することを特徴とする請求項１に記載の登録システム。
【請求項５】
前記登録部が登録した登録対象者と前記仮登録部が登録した未登録者が同一であるときは、前記仮登録部が登録した情報を取り消すと共に、前記履歴登録部が登録した前記未登録者に関する履歴情報を前記登録対象者に関する履歴情報に変更する登録変更部を更に備えたことを特徴とする請求項１に記載の登録システム。
【請求項６】
登録に同意する登録対象者についての情報を顔画像とともに登録する登録ステップと、
登録に同意していない未登録者についての情報を顔画像とともに登録する仮登録ステップと、
撮像装置で撮影される人物の動画像から顔画像を抽出する顔画像抽出ステップと、
抽出された顔画像に基づいてその人物が既に登録されていることを認証する認証ステップと、
前記撮影された人物についての情報を履歴情報として登録する履歴登録ステップとを備え、
前記仮登録ステップでは、前記認証ステップで認証されなかったときは、前記撮影された人物を未登録者として登録すること
を特徴とする登録方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、不特定多数の人物を対象として登録、認証を効率的に実行することのできる登録システムおよび登録方法に関する。
【背景技術】
【０００２】
従来、個人の情報を登録するシステムが知られている。このシステムでは、事前に個人の顔画像を登録しておくことで、登録された顔画像を元に人物を検索し照会することができる。そしてこのシステムによって当該個人を認証することが可能となる。  
しかし、このシステムの機能を利用するためには、当該個人は予め登録されていなければならない。そのため、不特定多数の人物を対象として当該人物が登録されているかどうかを迅速に認証する場合などでは適用することが困難である。
【０００３】
そこで不特定多数の人物を対象として、その人物を検索する装置が提案されている。この装置では、人物を撮影した動画像を、人物の構成に応じてシーンを検索して再生する（例えば、特許文献１参照）。
【特許文献１】特開２００５−１０１９０６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
この技術を利用すると、不特定多数の人物から特定の個人を検索することは可能となるが、その個人について柔軟に登録処理を行い、またその登録情報に基づいて効率的に認証を行うなど、不特定多数の人物を対象とした登録、認証に適用するには不十分である。
【０００５】
本発明はこのような事情に鑑みてなされたものであって、不特定多数の人物を対象として登録、認証を効率的に実行することのできる登録システムおよび登録方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するための本発明に係る登録システムは、登録に同意する登録対象者についての情報を顔画像とともに登録する登録部と、登録に同意していない未登録者についての情報を顔画像とともに登録する仮登録部と、撮像装置で撮影される人物の動画像から顔画像を抽出する顔画像抽出部と、抽出された顔画像に基づいてその人物が既に登録されていることを認証する認証部と、前記撮影された人物についての情報を履歴情報として登録する履歴登録部とを備え、前記仮登録部は、前記認証部で認証されなかったときは、前記撮影された人物を未登録者として登録する。
【０００７】
また本発明に係る登録方法は、登録に同意する登録対象者についての情報を顔画像とともに登録する登録ステップと、登録に同意していない未登録者についての情報を顔画像とともに登録する仮登録ステップと、撮像装置で撮影される人物の動画像から顔画像を抽出する顔画像抽出ステップと、抽出された顔画像に基づいてその人物が既に登録されていることを認証する認証ステップと、前記撮影された人物についての情報を履歴情報として登録する履歴登録ステップとを備え、前記仮登録ステップでは、前記認証ステップで認証されなかったときは、前記撮影された人物を未登録者として登録する。
【発明の効果】
【０００８】
本発明の登録システム及び登録方法によれば、不特定多数の人物を対象として登録、認証を効率的に実行することができる。
【発明を実施するための最良の形態】
【０００９】
〔第１の実施の形態〕  
以下、本発明を実施する場合の形態について図面を参照して説明する。
【００１０】
図１は、本発明の一実施形態である登録システムの構成を示す図である。
【００１１】
本登録システムは、登録装置１と複数の撮像装置２ａ、・・・、２ｎとで構成されている。撮像装置２は、例えば、建物の内部の適宜の場所に複数設置されて、それぞれの場所において動画像、静止画像を撮影する。登録装置１は、予め入力された個人情報を登録し管理すると共に、撮影された画像に基づいて抽出した人物について管理する。  
ここで、登録装置１と撮像装置２とは直接接続しても良く、通信回線（不図示）を介して接続しても良い。通信回線とは広く情報の送受信に用いられる経路のことで、導電線、光ファイバなどの有線を用いた通信に限られず、光、音波、電波などを用いた無線通信も含まれる。
【００１２】
図２は、登録装置１の構成を示す図である。  
登録装置１は、処理装置１０、カメラインターフェース１１及び入出力装置１２を備えている。カメラインターフェース１１は、撮像装置２からの画像を処理装置１０に受け渡すための情報インターフェースである。入出力装置１２は、処理装置１０に対して指示を入力するとともに、処理装置１０からの情報を表示する。
【００１３】
そして、処理装置１０には、処理部１５とデータ部１６が設けられている。  
処理部１５は、入出力インターフェース部１５ａ、登録処理部１５ｂ、仮登録処理部１５ｃ、検索処理部１５ｄ、画像収集処理部１５ｅ、履歴処理部１５ｆ及び登録変更処理部１５ｇを備えている。
【００１４】
入出力インターフェース部１５ａは、カメラインターフェース１１、及び入出力装置１２との間で各種情報交換を実施するためのインターフェースである。  
登録処理部１５ｂは、登録対象者毎に個人情報と顔写真とを関連付けてＤＢ（データベース）に記憶する。仮登録処理部１５ｃは、未登録者毎に顔写真と関連情報とをＤＢに記憶する。検索処理部１５ｄは、撮像装置２から入力された画像の人物が登録されているかどうかを調べる。画像収集処理部１５ｅは、撮像装置２から入力された画像から顔画像を抽出する。履歴処理部１５ｆは、撮像装置２から入力された画像の人物の履歴情報を生成してその情報をＤＢに記憶する。登録変更処理部１５ｇは、未登録者を登録者に変更する処理を実行する。
【００１５】
データ部１６は、登録ＤＢ（データベース）１６ａ、未登録ＤＢ１６ｂ、及び履歴ＤＢ１６ｃを備えている。登録ＤＢ１６ａには、登録対象者毎に個人情報と顔写真とが関連付けて記憶される。未登録ＤＢ１６ｂには、未登録者毎に個人情報と顔写真とが関連付けて記憶される。履歴ＤＢ１６ｃには、撮像装置２から入力された画像の人物の履歴情報が記憶される。
【００１６】
図３は、第１の実施の形態に係る登録システムを用いた登録処理の動作を示すフロー図である。
【００１７】
正規の手続きで事前に登録を行うときは、ステップＳ０１において、撮像装置２がその登録対象者の動画像を撮影する。ここで、撮像装置２は、例えば、専用の撮影場所に設けるなどして登録対象者の顔を明瞭に撮影できるようにすることが望ましい。但し、証明写真の撮影などのように型に収まった姿勢で撮影する必要はない。
【００１８】
撮影された画像は、処理装置１０に送られる。ステップＳ０２において、画像収集処理部１５ｅは、撮影された画像からその人物の顔画像を抽出する。このとき、その人物の特徴が良く表されているような画像を抽出する。例えば、正面を向いて眼が開いている画像を優先して動画像から抽出する。抽出する顔画像は１つに限られず、複数の顔画像を抽出するものであっても良い。なお、顔画像の抽出に際しては、公知の顔抽出技術を適用することができる。
【００１９】
ステップＳ０３において、登録処理部１５ｂは、抽出した顔画像と登録対象者に関する個人情報とをデータ部１６の登録ＤＢ１６ａに記憶する。個人情報は、名前、年齢、住所、職業など登録対象者を特定する情報であり、この登録システムの操作者が入出力装置１２から入力する。なお、登録処理部１５ｂは、登録に際してはユニークな登録ＩＤを生成する。
【００２０】
また上述の登録手続きにおいて、撮像装置２が登録対象者の静止画を撮影しても良く、さらに、不図示の画像入力装置を介して予め撮影された登録対象者の顔画像を読み込むようにしても良い。
【００２１】
続いて、図４を参照しつつ、第１の実施の形態に係る登録システムの認証処理動作について説明する。なお、以下には本登録システムを会社内のセキュリティシステムに適用した例について説明する。
【００２２】
会社に訪問者があった場合、ステップＳ１１において、撮像装置２がその訪問者の動画を撮影する。ここで、撮像装置２は、例えば、入り口のゲートに設けるなどして訪問者の顔を明瞭に撮影できるようにすることが望ましい。
【００２３】
撮影された動画は、処理装置１０に送られる。ステップＳ１２において、画像収集処理部１５ｅは、動画像から人物を特定してその人物の顔画像を抽出する。このとき、その人物の特徴が良く表されているような画像を抽出する。例えば、正面を向いて眼が開いている画像を優先して動画像から抽出する。抽出する顔画像は１つに限られず、複数の顔画像を抽出するものであっても良い。なお、顔画像の抽出に際しては、公知の顔抽出技術を適用することができる。
【００２４】
ステップＳ１３において、検索処理部１５ｄは、抽出した顔画像に基づいて、当該人物が登録者かどうかを調べる。検索処理部１５ｄは、抽出した顔画像を登録ＤＢ１６ａに記憶されている顔画像と照合する。この照合においては、公知の顔認証技術を用いることができる。
【００２５】
照合結果、登録者として認証されなかったときは、ステップＳ１４において、更に検索処理部１５ｄは、抽出した顔画像を未登録ＤＢ１６ｂに記憶されている顔写真と照合する。そして、照合結果、未登録ＤＢ１６ｂに記憶されていなかったときは、ステップＳ１５において、仮登録処理部１５ｃが、その人物を未登録ＤＢ１６ｂに登録する。即ち、仮登録処理部１５ｃは未登録ＤＢ１６ｂに、抽出した顔画像と関連情報を記憶する。関連情報には、撮影された日時、撮影場所などが含まれる。但し、その訪問者の個人情報はブランクである。
【００２６】
一方、照合結果、登録者として認証されたときは、ステップＳ１６において、登録者に対する所定の処理が実行される。  
例えば、撮像装置２が執務室の入り口に配置されている場合、登録者の入室を許可するためその執務室は開錠される。しかし、登録者でなければ、施錠の状態を継続する、あるいは未許可エリアへの侵入が発生したとして警報を出すこともできる。
【００２７】
上述の動作によれば、撮像装置２が人物を撮影して画像収集処理部１５ｅが顔画像を抽出したときは、その人物に関する情報は必ず登録ＤＢ１６ａあるいは未登録ＤＢ１６ｂに登録される。そこで、履歴処理部１５ｆが、当該人物についての履歴情報を履歴ＤＢ１６ｃに記憶する。履歴情報としては、当該人物を特定する情報、その人物が撮影された日時、場所などである。この結果、履歴ＤＢ１６ｃを検索することにより、ある人物が何時、どの場所で撮影されたかを時系列情報として取り出すことができる。
【００２８】
図５は、第１の実施の形態に係る登録システムの他の認証処理動作を示す図である。
【００２９】
ステップＳ２０において、撮像装置２が複数の訪問者を撮影していた場合、上述の各処理部によってそれぞれの訪問者について顔画像が切り出されて検索と照合が行われる。またステップＳ２１において、別の撮像装置２が別の複数の訪問者を撮影していた場合、それぞれの訪問者について顔画像が切り出されて検索と照合が行われる。  
このように複数人が撮影されているケースであっても、同一人物であることの認証が得られるため、それぞれの訪問者について履歴を得ることができる。
【００３０】
次に、未登録者を登録者に変更する方法を図６を参照しつつ説明する。  
例えば、未登録者がその会社にとって登録者として扱われるべき立場になり、新たに登録が行われた場合、図３に示す手順で正規の登録処理が行われる。この登録処理に続いて、図６に示す変更処理が実行される。
【００３１】
登録変更処理部１５ｇは、ステップＳ２５において、新たに登録された登録者の顔画像を取り出す。そして、未登録ＤＢを検索して、その顔画像と類似する顔画像をもつ未登録者を調べる。  
該当する未登録者が存在したときは、その未登録者に関するデータを未登録ＤＢ１６ｂから削除する。そして、履歴ＤＢ１６ｃを検索して、その未登録者の履歴情報を登録者の履歴情報に書き換える。
【００３２】
以上説明した実施の形態では、本システムを会社のセキュリティシステムとして適用したが、本発明はこの実施の形態に限定されず種々の形態で適用され得る。
【００３３】
例えば、本システムをデパートの監視カメラに使用することができる。このシステムを利用すると、顧客の通行ルート履歴、リピート情報などを容易に把握することができる。また、この情報を販売情報とリンクすることにより、例えば、効果的な販売レイアウトの策定に利用することができる。
【００３４】
また、本システムでは顔を認証できる全ての人物を検索対象として管理している。従って、写真などの情報から登録者、未登録者を問わずに検索することができる。そして、履歴ＤＢ１６ｃを検索することにより当該人物を撮影した撮像装置とその時間帯を特定することができる。この結果、特定された撮像装置２の記録映像から所要の人物映像を効率的に検索することができる。
【００３５】
なお、上述の実施の形態で説明した各機能は、ハードウエアを用いて構成しても良く、また、ソフトウエアを用いて各機能を記載したプログラムをコンピュータに読み込ませて実現しても良い。また、各機能は、適宜ソフトウエア、ハードウエアのいずれかを選択して構成するものであっても良い。
【００３６】
更に、各機能は図示しない記録媒体に格納したプログラムをコンピュータに読み込ませることで実現させることもできる。ここで本実施の形態における記録媒体は、プログラムを記録でき、かつコンピュータが読み取り可能な記録媒体であれば、その記録形式は何れの形態であってもよい。
【００３７】
なお、この発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に亘る構成要素を適宜組み合せてもよい。
【図面の簡単な説明】
【００３８】
【図１】本発明の一実施形態である登録システムの構成を示す図。
【図２】登録装置の構成を示す図。
【図３】本発明の一実施形態に係る登録システムを用いた登録処理の動作を示すフロー図。
【図４】本発明の一実施形態に係る登録システムの認証処理動作を示す図。
【図５】本発明の一実施形態に係る登録システムの他の認証処理動作を示す図。
【図６】本発明の一実施形態に係る登録システムの変更処理動作を示す図。
【符号の説明】
【００３９】
１…登録装置、２…撮像装置、１０…処理装置、１５…処理部、１５ｂ…登録処理部、１５ｃ…仮登録処理部、１５ｄ…検索処理部、１５ｅ…画像収集処理部、１５ｆ…履歴処理部、１５ｇ…登録変更処理部、１６…データ部、１６ａ…登録ＤＢ、１６ｂ…未登録ＤＢ、１６ｃ…履歴ＤＢ。
【図１】
2008250755.tif 000003
【図２】
2008250755.tif 000004
【図３】
2008250755.tif 000005
【図４】
2008250755.tif 000006
【図５】
2008250755.tif 000007
【図６】
2008250755.tif 000008