(57)【要約】      （修正有）【課題】施設内において不正利用者の検知を効率的に支援できる。【解決手段】少なくとも１つのカメラＣＭ１とサーバＳ１とが互いに通信可能に接続された人物監視システム１００であって、サーバＳ１は、所定の事象を検知すると通過を規制するゲートＧＴ１からの所定の事象の検知情報の受信に基づいて、ゲートＧＴ１を含む撮像エリアを撮像する第１カメラＣＭ１に、所定の事象の発生時のゲートＧＴ１付近の人物の顔画像を要求する。第１カメラＣＭ１は、所定の事象の発生時のゲートＧＴ１付近の人物を撮像し、人物の撮像画像から人物の顔が映る範囲を切り出した顔画像をサーバＳ１に送信する。サーバＳ１は、顔画像に基づく警報情報を出力するとともに、顔画像をデータベース４３ａに登録する。【選択図】図１
2020198475.tif 000002
【特許請求の範囲】
【請求項１】
少なくとも１つのカメラとサーバとが互いに通信可能に接続された人物監視システムであって、
前記サーバは、
所定の事象を検知すると通過を規制するゲートからの前記所定の事象の検知情報の受信に基づいて、前記ゲートを含む撮像エリアを撮像する第１カメラに、前記所定の事象の発生時の前記ゲート付近の人物の顔画像を要求し、
前記第１カメラは、
前記所定の事象の発生時の前記ゲート付近の人物を撮像し、
前記人物の撮像画像から前記人物の顔が映る範囲を切り出した顔画像を前記サーバに送信し、
前記サーバは、
前記顔画像に基づく警報情報を出力するとともに、前記顔画像をデータベースに登録する、
人物監視システム。
【請求項２】
前記サーバは、
予め前記データベースに登録された複数の犯罪者のそれぞれの顔画像の中で一致する顔画像が存在するか否かを照合し、
前記複数の犯罪者のいずれとも一致しないと判定した場合に、前記照合に用いた顔画像に基づく警報情報を出力する、
請求項１に記載の人物監視システム。
【請求項３】
前記サーバは、
前記警報情報の出力後、前記第１カメラから受信した撮像画像に基づいて、前記照合に用いた顔画像と一致する人物を検知すると、前記顔画像と前記データベースに既登録の対応する同一人物の顔画像とを対応付けた警報情報を出力する、
請求項２に記載の人物監視システム。
【請求項４】
前記サーバは、
前記警報情報の出力後、前記第１カメラの設置場所とは異なる場所を撮像する第２カメラから受信した撮像画像に基づいて、前記照合に用いた顔画像と一致する人物を検知すると、前記顔画像と前記データベースに既登録の対応する同一人物の顔画像とを対応付けた警報情報を出力する、
請求項２に記載の人物監視システム。
【請求項５】
前記サーバは、
識別情報を有する通過物が前記ゲートの通過時に無効化されていない旨の検知に基づく前記検知情報を受信する、
請求項１に記載の人物監視システム。
【請求項６】
前記サーバは、
通過物の通過を許可する年齢層情報を有する前記検知情報を受信し、
前記第１カメラからの前記人物が映る撮像画像に基づいて、その人物の年齢を解析し、
前記人物の年齢の解析結果が前記通過物の通過を許可する前記年齢層情報に含まれない場合に、前記受信された前記検知情報に含まれる前記年齢層情報と前記人物の年齢層情報とを照合する、
請求項２に記載の人物監視システム。
【請求項７】
少なくとも１つのカメラとサーバとが互いに通信可能に接続された人物監視システムであって、
所定の事象を検知すると通過を規制するゲートからの前記所定の事象の検知情報の受信に基づいて、前記ゲートを含む撮像エリアを撮像する第１カメラに、前記所定の事象の発生時の前記ゲート付近の人物の顔画像を要求し、
前記所定の事象の発生時の前記ゲート付近の人物を撮像し、
前記人物の撮像画像から前記人物の顔が映る範囲を切り出した顔画像を前記サーバに送信し、
前記顔画像に基づく警報情報を出力するとともに、前記顔画像をデータベースに登録する、
人物監視方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、人物監視システムおよび人物監視方法に関する。
【背景技術】
【０００２】
特許文献１には、自動改札機を通過しようとする利用者を撮像するカメラと、自動改札機に設置され、利用者の人物属性に応じた利用条件が設けられた乗車券から、利用条件を示す情報を読み取る読取部と、カメラによって撮像された画像から、利用者の人物属性を推定する属性推定部と、属性推定部によって推定された人物属性を示す情報と、読み取り部によって読み取られた利用条件を示す情報とに基づいて、乗車券を利用した利用者が利用条件を満たすか否かを判定する利用条件判定部と、を備える改札監視システムが知られている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１７−５４３５５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１には、乗車券の不正利用を自動改札機の通過時に判定するため、不正利用を抑制することが可能である。しかし、現場（例えば、商品の万引きあるいは入場時のゲートの不正通過等の事象が発生した現場）から人物が逃走した場合には、その人物が同様な事象を起こさない限りその人物を捕獲できなかった。さらに、店員あるいは警備員がその人物を捕獲した場合であっても、その人物が初犯か否か（つまり、不正常習犯か否か）を判別することができず、通報または注意などの速やかな対処を行うことができなかった。
【０００５】
本開示は、上述した従来の事情に鑑みて案出され、施設内において不正利用者の検知を効率的に支援できる人物監視システムおよび人物監視方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本開示は、少なくとも１つのカメラとサーバとが互いに通信可能に接続された人物監視システムであって、前記サーバは、所定の事象を検知すると通過を規制するゲートからの前記所定の事象の検知情報の受信に基づいて、前記ゲートを含む撮像エリアを撮像する第１カメラに、前記所定の事象の発生時の前記ゲート付近の人物の顔画像を要求し、前記第１カメラは、前記所定の事象の発生時の前記ゲート付近の人物を撮像し、前記人物の撮像画像から前記人物の顔が映る範囲を切り出した顔画像を前記サーバに送信し、前記サーバは、前記顔画像に基づく警報情報を出力するとともに、前記顔画像をデータベースに登録する、人物監視システムを提供する。
【０００７】
また、本開示は、少なくとも１つのカメラとサーバとが互いに通信可能に接続された人物監視システムであって、所定の事象を検知すると通過を規制するゲートからの前記所定の事象の検知情報の受信に基づいて、前記ゲートを含む撮像エリアを撮像する第１カメラに、前記所定の事象の発生時の前記ゲート付近の人物の顔画像を要求し、前記所定の事象の発生時の前記ゲート付近の人物を撮像し、前記人物の撮像画像から前記人物の顔が映る範囲を切り出した顔画像を前記サーバに送信し、前記顔画像に基づく警報情報を出力するとともに、前記顔画像をデータベースに登録する、人物監視方法を提供する。
【発明の効果】
【０００８】
本開示によれば、施設内において不正利用者の検知を効率的に支援できる。
【図面の簡単な説明】
【０００９】
【図１】実施の形態１に係る人物監視システムの内部構成例を示すブロック図
【図２】実施の形態１に係る人物監視システムの施設内における内部構成例を示すブロック図
【図３】実施の形態１に係る人物監視システムの動作手順例を示すシーケンス図
【図４】検索結果画面の表示の一例を示す図
【図５Ａ】警報情報（初犯）の一例を示す図
【図５Ｂ】警報情報（再犯）の一例を示す図
【図６】実施の形態１に係る人物監視システムの動作手順例を示すシーケンス図
【図７】実施の形態２に係る人物監視システムの内部構成例を示すブロック図
【図８】実施の形態２に係る人物監視システムの動作手順例を示すシーケンス図
【発明を実施するための形態】
【００１０】
（実施の形態１の内容に至る経緯）
特許文献１には、乗車券に設けられた人物の利用条件と、カメラによって撮像された撮像画像に基づいて推定された自動改札機を通過する人物の人物属性（例えば、性別、年齢など）とを用いて利用条件を満たすか否かを判定し、乗車券の不正利用を抑制する改札監視システムがある。この改札監視システムは、自動改札機において不正利用を判定することにより、乗車券の不正利用の発生を抑制することができる。しかし、上述した改札監視システムは、現場（例えば、商品の万引きあるいは入場時のゲートの不正通過等の事象が発生した現場）から人物が逃走した場合には、再犯に至るまでその人物を捕獲できなかった。さらに、改札監視システムでは、乗車券の不正利用の抑制を目的としているため、店員あるいは警備員がその人物を捕獲した場合であっても、その人物が初犯か否か（つまり、不正常習犯か否か）を判別することができず、また通報または注意などの速やかな対処を行うことができなかった。
【００１１】
そこで、以下の各種の実施の形態においては、施設内において不正利用者の検知を効率的に支援できる人物監視システムおよび人物監視方法の例を説明する。
【００１２】
以下、適宜図面を参照しながら、本開示に係る人物監視システムおよび人物監視方法の構成および作用を具体的に開示した実施の形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になることを避け、当業者の理解を容易にするためである。なお、添付図面及び以下の説明は、当業者が本開示を十分に理解するために提供されるものであって、これらにより特許請求の範囲に記載の主題を限定することは意図されていない。
【００１３】
（実施の形態１）
図１は、実施の形態１に係る人物監視システム１００の内部構成例を示すブロック図である。人物監視システム１００は、例えば１つの施設あるいは複数の施設のそれぞれに亘って、万引きなどの不正を行う人物を監視するためのシステムである。人物監視システム１００は、複数のゲートＧＴ１Ａ，ＧＴ１Ｂ，…と、複数のゲートＧＴ１Ａ，ＧＴ１Ｂ，…のそれぞれを管理する複数のゲート管理装置ＧＴＭ１Ａ，ＧＴＭ１Ｂ，…のそれぞれと、複数のゲートＧＴ１Ａ，ＧＴ１Ｂ，…のそれぞれを撮像エリアに含んで撮像する複数のカメラＣＭ１Ａ，ＣＭ１Ｂ，…のそれぞれを備える複数の施設１Ａ，１Ｂ，…のそれぞれと、複数のネットワークＮＷ１，ＮＷ２のそれぞれと、サーバＳ１と、レコーダＲＤ１と、クライアント端末Ｐ１と、を含んで構成される。
【００１４】
複数の施設１Ａ，…のそれぞれは、同一の運営会社または管理会社が所有または運営する施設であり、例えば、コンビニなどの店舗、大型施設、複合商業施設、複合商業施設内に設けられた複数の会社のそれぞれによって運営される各店舗、駅などである。複数の施設１Ａ，…のそれぞれは、複数のゲートＧＴ１Ａ，…のそれぞれと、複数のゲート管理装置ＧＴＭ１Ａ，ＧＴＭ１Ｂ，…のそれぞれと、複数のカメラＣＭ１Ａ，…のそれぞれと、を含んで構成される。
【００１５】
複数のゲートＧＴ１Ａ，…のそれぞれは、施設の出入り口、店舗の出入り口などに設置され、商品に備えられた万引き防犯を目的とするタグ（例えば、ＩＣタグ、防犯タグなど）を検知する。なお、複数のゲートＧＴ１Ａ，…のそれぞれは、音響磁気方式、電波方式、磁気方式または自鳴方式のいずれであってもよい。タグは、レジにおける精算処理によって無効化される。
【００１６】
複数のゲートＧＴ１Ａ，…のそれぞれは、商品に備えられ、無効化されていないタグを検知したことを示す情報を複数のゲート管理装置ＧＴＭ１Ａ，…のそれぞれに出力する。なお、タグは、例えばＩＣタグのように商品に関する情報を記憶できないタグ、防犯タグのように商品の個々を識別可能な情報を記憶可能なタグのいずれであってもよい。複数のゲートＧＴ１Ａ，…のそれぞれは、タグが商品の個々を識別可能な情報を記憶している場合、この情報を検知して複数のゲート管理装置ＧＴＭ１Ａ，…のそれぞれに出力してもよい。
【００１７】
複数のゲート管理装置ＧＴＭ１Ａ，…のそれぞれは、ネットワークＮＷ１を介して、サーバＳ１と通信可能に接続される。複数のゲート管理装置ＧＴＭ１Ａ，…のそれぞれは、複数のゲートＧＴ１Ａ，…のそれぞれから入力された情報に基づいて、検知された時間、場所などの情報と、タグに記憶された商品に関する情報とを万引きの発生を示す検知情報として、ネットワークＮＷ１を介してサーバＳ１に送信する。
【００１８】
複数のカメラＣＭ１Ａ，…のそれぞれは、ネットワークＮＷ１を介して、サーバＳ１と通信可能に接続される。複数のカメラＣＭ１Ａ，…のそれぞれは、複数のゲートＧＴ１Ａ，…のそれぞれの付近に設置され、複数のゲートＧＴ１Ａ，…のうち少なくとも１つのゲートを含む撮像エリアを撮像する。複数のカメラＣＭ１Ａ，…のそれぞれは、複数のゲートＧＴ１Ａ，…のそれぞれを通過する人物を撮像する。複数のカメラＣＭ１Ａ，…のそれぞれは、撮像された撮像画像に映る人物のうち、人物の顔が映る範囲を切り出した顔画像を、ネットワークＮＷ１を介して、サーバＳ１に送信する。
【００１９】
なお、複数のカメラＣＭ１Ａ，…のそれぞれは、１つのカメラで複数のゲートのそれぞれを撮像してもよい。さらに、複数のカメラＣＭ１Ａ，…のそれぞれは、複数複数のゲートＧＴ１Ａ，…のそれぞれを撮像する複数のカメラのそれぞれだけでなく、他の場所を撮像する複数のカメラのそれぞれと、を含んでよい。また、他の場所を撮像する複数のカメラのそれぞれは、人物の顔画像を切り出し処理しない撮像画像そのものを、ネットワークＮＷ１を介して、サーバＳ１に送信してもよい。これにより、人物監視システム１００は、施設が複数の出入り口のそれぞれを備える複合商業施設であっても、万引きした人物が逃走した場合であっても複数の他のカメラのそれぞれによって撮像された撮像画像に基づいて、その人物を追跡できる。また、人物が万引き現場あるいは施設から逃走した場合であっても、人物監視システム１００は、例えば後日再度万引きを行った際にその人物を常習犯（つまり、初犯ではない）として管理者に通知することができ、他店舗および他の施設において万引きを行った際にも同様に管理者に通知することができる。
【００２０】
なお、上述した図１に示す施設の数は、１つであってよい。また、図１における施設１Ａは、複数のゲートＧＴ１Ａ，ＧＴ１Ｂ，…のそれぞれと、複数のゲート管理装置ＧＴＭ１Ａ，ＧＴＭ１Ｂ，…のそれぞれと、複数のカメラＣＭ１Ａ，ＣＭ１Ｂ，…のそれぞれと、を含んで構成されるが、ゲート、ゲート管理装置およびカメラの数はそれぞれ１つずつであってよいし、カメラの数はゲートおよびゲート管理装置の数と一致しなくてよい。
【００２１】
複数のネットワークＮＷ１，ＮＷ２のそれぞれは、有線ネットワークである。ネットワークＮＷ１は、複数の施設１Ａ，…のそれぞれ、およびサーバＳ１との間で通信可能に接続される。ネットワークＮＷ２は、サーバＳ１およびクライアント端末Ｐ１との間で通信可能に接続される。
【００２２】
サーバＳ１は、万引きを行った人物が初犯か常習犯かを判定して、クライアント端末Ｐ１に警報情報を出力する。サーバＳ１は、通信部４０と、プロセッサ４１と、メモリ４２と、記憶部４３と、を含んで構成される。
【００２３】
通信部４０は、ネットワークＮＷ１を介して複数の施設１Ａ，…のそれぞれに備えられた複数のゲート管理装置ＧＴＭ１Ａ，…のそれぞれ、および複数のカメラＣＭ１Ａ，…のそれぞれとの間で通信可能に接続される。通信部４０は、複数のゲート管理装置ＧＴＭ１Ａ，…のそれぞれから検知情報を受信し、複数のカメラＣＭ１Ａ，…のそれぞれから顔画像または撮像画像を受信する。また、通信部４０は、ネットワークＮＷ２を介してクライアント端末Ｐ１との間で通信可能に接続される。通信部４０は、サーバＳ１によって生成された警報情報をクライアント端末Ｐ１に送信する。
【００２４】
プロセッサ４１は、例えばＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  ｕｎｉｔ）またはＦＰＧＡ（Ｆｉｅｌｄ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）を用いて構成されて、メモリ４２と協働して、各種の処理および制御を行う。具体的には、プロセッサ４１はメモリ４２に保持されたプログラムおよびデータを参照し、そのプログラムを実行することにより、各部の機能を実現する。各部は、人物検索部４１ａおよび人物照合部４１ｂである。各部の機能は、例えば、複数のカメラＣＭ１Ａ，…のそれぞれから受信された人物の顔画像をブラックリストＤＢ４３ａに記憶された複数の顔画像のそれぞれを検索し、照合する機能、人物の顔画像に基づいて、その人物の過去の万引き情報を万引き情報ＤＢ４３ｂから検索して抽出する機能などである。
【００２５】
また、プロセッサ４１は、複数のゲート管理装置ＧＴＭ１Ａ，…のそれぞれから受信された検知情報を万引き情報ＤＢ４３ｂに記憶し、複数のカメラＣＭ１Ａ，…のそれぞれから受信された人物の顔画像および人物を撮像したカメラの情報をブラックリストＤＢ４３ａに記憶する。なお、検知情報、人物の顔画像およびカメラの情報は、関連付けられてブラックリストＤＢ４３ａおよび万引き情報ＤＢ４３ｂのそれぞれに記憶される。
【００２６】
人物検索部４１ａは、複数のゲート管理装置ＧＴＭ１Ａ，…のそれぞれから万引きが発生した検知情報を受信する。人物検索部４１ａは、検知情報に基づいて万引きを検知したゲートを撮像するカメラから受信された人物の顔画像から特徴点を抽出し、ブラックリストＤＢ４３ａに記憶された複数の人物の顔画像あるいは撮像画像のうち、類似する特徴点を有する人物の顔画像あるいは撮像画像を検索する。人物検索部４１ａは、検索結果を人物照合部４１ｂに出力する。
【００２７】
人物照合部４１ｂは、人物検索部４１ａから入力された検索結果に基づいて、万引きを行った人物の顔画像と検索結果とを照合する。人物照合部４１ｂは、照合した結果、万引きを行った人物の顔画像が検索結果として抽出された撮像画像にない場合、初犯であると判定し、顔画像を用いて警報情報（図５Ａ参照）と、万引きが発生したことを示すアラート情報とを生成する。また、人物照合部４１ｂは、照合した結果、万引きを行った人物の顔画像が検索結果として抽出された撮像画像にある場合、２回目以降の常習犯であると判定し、顔画像と検索結果とを用いて警報情報（図５Ｂ参照）と、万引きが発生したことを示すアラート情報とを生成する。サーバＳ１は、生成されたアラート情報および警報情報を、ネットワークＮＷ２を介してクライアント端末Ｐ１に送信する。これにより、クライアントは、万引きを行った人物が初犯か否か（つまり、常習犯か否か）を一目で判断することができる。
【００２８】
メモリ４２は、例えばプロセッサ４１の各処理を実行する際に用いられるワークメモリとしてのＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）と、プロセッサ４１の動作を規定したプログラムおよびデータを格納するＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）とを有する。ＲＡＭには、プロセッサ４１により生成あるいは取得されたデータもしくは情報が一時的に保存される。ＲＯＭには、プロセッサ４１の動作を規定するプログラムが書き込まれている。
【００２９】
記憶部４３は、例えばハードディスク（ＨＤＤ：Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）またはソリッドステートドライブ（ＳＳＤ：Ｓｏｌｉｄ  Ｓｔａｔｅ  Ｄｒｉｖｅ）を用いて構成される。記憶部４３は、複数のゲート管理装置ＧＴＭ１Ａ，…のそれぞれから受信された検知情報、万引きをした人物を撮像したカメラに関する情報（例えば、カメラの設置場所、人物を撮像した撮像時間など）を万引き情報ＤＢ４３ｂに記憶する。また、記憶部４３は、人物（犯罪者）の顔画像および撮像画像をブラックリストＤＢ４３ａに記憶する。なお、記憶部４３は、ブラックリストＤＢ４３ａおよび万引き情報ＤＢ４３ｂのそれぞれに記憶された各情報を関連付けて記憶する。これにより、人物監視システム１００は、人物の過去の万引き情報の履歴を抽出することができ、これらの情報に基づいてその人物が初犯か否か（つまり、常習犯か否か）を判定することができる。
【００３０】
レコーダＲＤ１は、例えばハードディスク（ＨＤＤ）またはソリッドステートドライブ（ＳＳＤ）を用いて構成される。レコーダＲＤ１は、ネットワークＮＷ１を介して複数のカメラＣＭ１Ａ，…のそれぞれとの間で通信可能に接続され、ネットワークＮＷ２を介してクライアント端末Ｐ１との間で通信可能に接続される。レコーダＲＤ１は、複数のカメラＣＭ１Ａ，…のそれぞれから受信された撮像画像（撮像映像）を記憶する。レコーダＲＤ１は、クライアントの操作に基づいて、記憶した複数の撮像画像のそれぞれのうち指定された撮像画像をクライアント端末Ｐ１に送信する。
【００３１】
クライアント端末Ｐ１は、例えば複数の施設１Ａ，…を管理するクライアント（つまり、管理者）により使用されるＰＣ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ）である。クライアント端末Ｐ１は、ネットワークＮＷ１を介してレコーダＲＤ１との間で通信可能に接続され、ネットワークＮＷ２を介してサーバＳ１との間で通信可能に接続される。クライアント端末Ｐ１は、通信部６０と、プロセッサ６１と、メモリ６２と、操作部６３と、表示部６４と、記憶部６５と、を含んで構成される。
【００３２】
なお、クライアント端末Ｐ１は、上述したＰＣに限らず、例えばスマートフォン、タブレット端末、ＰＤＡ（Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ａｓｓｉｓｔａｔ）などの通信機能を有するコンピュータであってよい。クライアント端末Ｐ１は、無線通信機能を有する場合には、ネットワークＮＷ２との間にさらなる無線ネットワークを介して通信してよい。この場合の無線ネットワークは、例えば無線ＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、無線ＷＡＮ（Ｗｉｄｅ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、４Ｇ（第４世代移動通信システム）、ＬＴＥ（Ｌｏｎｇ  Ｔｅｒｍ  Ｅｖｏｌｕｔｉｏｎ）、ＬＴＥ−Ａｄｖａｎｃｅｄ、５Ｇ（第５世代移動通信方式）、Ｗｉ−ｆｉ（登録商標）、またはＷｉＧｉｇ（Ｗｉｒｅｌｅｓｓ  Ｇｉｇａｂｉｔ）などである。また、クライアント端末Ｐ１は、１つに限らず複数あってよい。
【００３３】
通信部６０は、ネットワークＮＷ２を介してサーバＳ１およびレコーダＲＤ１との間で通信可能に接続される。通信部６０は、サーバＳ１から警報情報を受信する。
【００３４】
プロセッサ６１は、例えばＣＰＵまたはＦＰＧＡを用いて構成されて、メモリ６２と協働して、各種の処理および制御を行う。具体的には、プロセッサ６１はメモリ６２に保持されたプログラムおよびデータを参照し、そのプログラムを実行することにより、各部の機能を実現する。各部の機能は、例えばクライアントの入力操作に基づく撮像画像を要求する制御信号を生成する機能、サーバＳ１から受信された警報情報を表示部６４に表示する機能などである。
【００３５】
また、プロセッサ６１は、サーバＳ１から受信されたアラート情報に基づいて、クライアントに対するアラート通知を実行する。なお、アラート通知の方法は、表示部６４に表示されてよいし、図５Ａおよび図５Ｂに示す警告灯を点灯させてよい。さらにアラート通知の方法は、スピーカ（不図示）から出力される音声による通知であってよい。プロセッサ６１は、サーバＳ１から受信された警報情報を表示部６４に表示させる。これにより、人物監視システム１００は、視覚的または聴覚的に万引きの発生をクライアントに通知することができる。さらに、クライアントは、表示部６４に表示される警報情報に基づいて、万引きを行った人物が初犯であるか否か（つまり、常習犯であるか否か）をすぐさま判別することができる。
【００３６】
さらにプロセッサ６１は、操作部６３から受け付けられたクライアントによる検索キーの入力に基づいて、サーバＳ１における記憶部４３に記憶された情報の検索および検索結果の取得、あるいはレコーダＲＤ１に記憶された撮像画像（撮像映像）の情報の検索および検索結果の取得を実行する。取得されたこれらの情報は、表示部６４に表示され、記憶部６５に記憶される。
【００３７】
メモリ６２は、例えばプロセッサ６１の各処理を実行する際に用いられるワークメモリとしてのＲＡＭと、プロセッサ６１の動作を規定したプログラムおよびデータを格納するＲＯＭとを有する。ＲＡＭには、プロセッサ６１により生成あるいは取得されたデータもしくは情報が一時的に保存される。ＲＯＭには、プロセッサ６１の動作を規定するプログラムが書き込まれている。
【００３８】
記憶部６５は、例えばハードディスク（ＨＤＤ）またはソリッドステートドライブ（ＳＳＤ）を用いて構成される。記憶部６５は、サーバＳ１から受信されたアラーム情報および警報情報を記憶する。記憶部６５は、クライアントの入力操作に基づいてサーバＳ１から受信された検索結果またはレコーダＲＤ１から受信された撮像画像を記憶する。また、記憶部６５は、クライアントの入力操作に関する履歴情報を記憶してよい。
【００３９】
操作部６３は、クライアントの入力操作を検出するユーザインターフェース（ＵＩ：Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ）であり、マウス、キーボードまたはタッチパネルなどを用いて構成される。操作部６３は、クライアントの入力操作に基づく信号をプロセッサ６１に出力する。操作部６３は、例えば、クライアントが確認したいと考えている所定のカメラの撮像画像（撮像映像）を、その日付、時間、場所（例えば、施設の情報など）およびカメラに関する情報などの検索キーの入力を受け付ける。
【００４０】
表示部６４は、例えばＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）または有機ＥＬ（Ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ）などのディスプレイを用いて構成され、サーバＳ１から受信された警報情報およびレコーダＲＤ１から受信された撮像画像（撮像映像）のデータを表示する。また、表示部６４は、例えばスピーカ（不図示）を用いて構成されてよく、アラート通知を音声出力する。
【００４１】
記憶部６５は、例えばハードディスク（ＨＤＤ）またはソリッドステートドライブ（ＳＳＤ）を用いて構成される。記憶部６５は、サーバＳ１から受信されたアラート通知および警報情報と、レコーダＲＤ１から受信された撮像画像（撮像映像）などを記憶する。
【００４２】
以下、複数の施設１Ａ，１Ｂ，…のそれぞれの内部構成について、図２を参照して説明する。図２は、実施の形態１に係る人物監視システム１００の施設内における内部構成例を示すブロック図である。複数の施設１Ａ，１Ｂ，…のそれぞれの内部構成は、同一の構成を備え、図２においては施設１Ａの内部構成例について説明する。なお、複数の施設１Ａ，１Ｂ，…のそれぞれの内部構成は、各種構成（例えば、ゲート、ゲート管理装置、カメラなど）の数が異なってよい。同様に、以下の図２の説明において、複数のゲートＧＴ１Ａ，ＧＴ１Ｂ，…のそれぞれ、複数のゲート管理装置ＧＴＭ１Ａ，ＧＴＭ１Ｂ，…のそれぞれおよび複数のカメラＣＭ１Ａ，ＣＭ１Ｂ，…のそれぞれについて、ゲートＧＴ１Ａ、ゲート管理装置ＧＴＭ１ＡおよびカメラＣＭ１Ａの内部構成例について説明する。
【００４３】
ゲートＧＴ１Ａは、商品に備えられ、無効化されていないタグ（つまり、未精算の商品）を検知する。ゲートＧＴ１Ａは、通信部１０と、プロセッサ１１と、メモリ１２と、検知部１３と、を含んで構成される。
【００４４】
通信部１０は、ゲート管理装置ＧＴＭ１Ａとの間で通信可能に接続される。通信部１０は、タグの検知と、検知部１３によって検出された商品に関する情報とをゲート管理装置ＧＴＭ１Ａに送信する。なお、商品に関する情報は、必須の情報ではない。
【００４５】
プロセッサ１１は、例えばＣＰＵまたはＦＰＧＡを用いて構成されて、メモリ１２と協働して、各種の処理および制御を行う。具体的には、プロセッサ１１はメモリ１２に保持されたプログラムおよびデータを参照し、そのプログラムを実行することにより、各部の機能を実現する。各部の機能は、例えば、タグを検出する機能、検知されたタグに記憶された商品に関する情報などを検出する機能などである。
【００４６】
メモリ１２は、例えばプロセッサ１１の各処理を実行する際に用いられるワークメモリとしてのＲＡＭと、プロセッサ１１の動作を規定したプログラムおよびデータを格納するＲＯＭとを有する。ＲＡＭには、プロセッサ１１により生成あるいは取得されたデータもしくは情報が一時的に保存される。ＲＯＭには、プロセッサ１１の動作を規定するプログラムが書き込まれている。
【００４７】
検知部１３は、ゲートＧＴ１Ａを通過するタグのうち、無効化されていないタグおよびタグに記憶された商品に関する情報を検知する。検知部１３は、タグを検知したことを示す信号をゲート管理装置ＧＴＭ１Ａに出力する。
【００４８】
ゲート管理装置ＧＴＭ１Ａは、ゲートＧＴ１Ａとの間で通信可能に接続される。また、ゲート管理装置ＧＴＭ１Ａは、サーバＳ１との間でゲートＧＴ１Ａから受信された信号に基づいて、万引きの発生を示す検知情報（例えば、日付、時間、ゲートの識別番号など）を、ネットワークＮＷ１を介してサーバＳ１に送信する。ゲート管理装置ＧＴＭ１Ａは、通信部２０と、プロセッサ２１と、メモリ２２と、を含んで構成される。
【００４９】
通信部２０は、ゲートＧＴ１Ａとの間で通信可能に接続される。また、通信部２０は、ネットワークＮＷ１を介して、サーバＳ１との間で通信可能に接続される。通信部２０は、検知情報をサーバＳ１に送信する。
【００５０】
プロセッサ２１は、例えばＣＰＵまたはＦＰＧＡを用いて構成されて、メモリ２２と協働して、各種の処理および制御を行う。具体的には、プロセッサ２１はメモリ２２に保持されたプログラムおよびデータを参照し、そのプログラムを実行することにより、各部の機能を実現する。各部の機能は、例えば万引きの発生を示す検知情報（例えば、日付、時間、ゲートの識別番号など）を生成する機能である。
【００５１】
メモリ２２は、例えばプロセッサ２１の各処理を実行する際に用いられるワークメモリとしてのＲＡＭと、プロセッサ２１の動作を規定したプログラムおよびデータを格納するＲＯＭとを有する。ＲＡＭには、プロセッサ２１により生成あるいは取得されたデータもしくは情報が一時的に保存される。ＲＯＭには、プロセッサ２１の動作を規定するプログラムが書き込まれている。また、メモリ２２は、生成された検知情報を記憶してもよい。
【００５２】
カメラＣＭ１Ａは、ネットワークＮＷ１を介してサーバＳ１およびレコーダＲＤ１との間で通信可能に接続される。カメラＣＭ１Ａは、ゲートＧＴ１Ａあるいは施設１Ａ内の任意の場所を撮像可能に設置され、撮像した万引きを行った人物の顔画像または撮像画像（撮像映像）を送信する。カメラＣＭ１Ａは、通信部３０と、プロセッサ３１と、メモリ３２と、撮像部３３と、を含んで構成される。
【００５３】
通信部３０は、ネットワークＮＷ１を介して、サーバＳ１およびレコーダＲＤ１との間で通信可能に接続される。通信部２０は、撮像した万引きを行った人物の顔画像または撮像画像（撮像映像）をサーバＳ１およびレコーダＲＤ１に送信する。
【００５４】
プロセッサ３１は、例えばＣＰＵまたはＦＰＧＡを用いて構成されて、メモリ３２と協働して、各種の処理および制御を行う。具体的には、プロセッサ３１はメモリ３２に保持されたプログラムおよびデータを参照し、そのプログラムを実行することにより、各部の機能を実現する。各部の機能は、例えば撮像画像から人物の顔画像を切り出す機能である。
【００５５】
メモリ３２は、例えばプロセッサ３１の各処理を実行する際に用いられるワークメモリとしてのＲＡＭと、プロセッサ３１の動作を規定したプログラムおよびデータを格納するＲＯＭとを有する。ＲＡＭには、プロセッサ３１により生成あるいは取得されたデータもしくは情報が一時的に保存される。ＲＯＭには、プロセッサ３１の動作を規定するプログラムが書き込まれている。
【００５６】
撮像部３３は、少なくともレンズ１８とイメージセンサ（不図示）とを有して構成される。イメージセンサは、例えばＣＣＤ（Ｃｈａｒｇｅｄ−Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）またはＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）の固体撮像素子であり、撮像面に結像した光学像を電気信号に変換する。撮像部３３は、カメラＣＭ１Ａの電源がオンである間、撮像によって得られた撮像画像（撮像映像）を常時レコーダＲＤ１に送信する。また、撮像部３３は、カメラＣＭ１Ａの電源がオンである間、撮像によって得られた撮像画像あるいは撮像画像に映る人物の顔画像を切り出して、サーバＳ１に送信する。なお、撮像部３３は、カメラＣＭ１ＡがゲートＧＴ１Ａ以外を撮像する場合には、人物の顔画像の切り出し機能を有していなくてよい。
【００５７】
図３は、実施の形態１に係る人物監視システム１００の動作手順例を示すシーケンス図である。なお、図３の説明においては、施設１ＡにおけるゲートＧＴ１Ａ、ゲート管理装置ＧＴＭ１ＡおよびカメラＣＭ１Ａのそれぞれの動作手順について説明する。
【００５８】
ゲートＧＴ１Ａは、ゲートＧＴ１Ａを通過する人物から無効化されていないタグ（つまり、万引き情報）を検知する（Ｔ１）。
【００５９】
ゲートＧＴ１Ａは、無効化されていないタグに商品に関する情報などの記憶されている場合には、タグに記憶された情報を抽出して、万引きの発生を示す万引き情報を生成する。ゲートＧＴ１Ａは、生成した万引き情報をゲート管理装置ＧＴＭ１Ａに送信する（Ｔ２）。
【００６０】
ゲート管理装置ＧＴＭ１Ａは、受信された万引き情報に、さらに万引きを検知した日付、時間、場所あるいはゲートＧＴ１Ａに関する情報（例えば、ゲートごとに付与された識別番号など）を追加した万引き情報（検知情報）を生成し、ネットワークＮＷ１を介してサーバＳ１に送信する（Ｔ３）。
【００６１】
サーバＳ１は、ゲート管理装置ＧＴＭ１から受信された万引き情報（検知情報）に基づいて、カメラＣＭ１Ａに万引きを行った人物の顔画像を要求する制御信号を送信する（Ｔ４）。
【００６２】
カメラＣＭ１Ａは、サーバＳ１から受信された制御信号に基づいて、万引きを検知したゲートＧＴ１Ａを撮像した撮像画像から、人物の顔画像の切り出し処理を実行する（Ｔ５）。
【００６３】
カメラＣＭ１Ａは、切り出した顔画像を、ネットワークＮＷ１を介してサーバＳ１に送信する（Ｔ６）。
【００６４】
サーバＳ１は、受信された顔画像を記憶された過去に万引きを行った複数の人物のそれぞれの顔画像あるいは撮像画像を記憶するブラックリストＤＢ４３ａに出力する（Ｔ７）。
【００６５】
ブラックリストＤＢ４３ａは、入力された顔画像を万引き情報（検出情報）と関連付けて登録（記憶）する（Ｔ８）。
【００６６】
サーバＳ１は、ブラックリストＤＢ４３ａに記憶され、過去に万引きを行った複数の人物のそれぞれの顔画像あるいは撮像画像と、カメラＣＭ１Ａから受信された顔画像とを照合する。サーバＳ１は、照合結果に基づいて、受信された顔画像と同一人物の顔画像あるいは撮像画像が記憶されていない場合は、万引きが発生したことを示すアラート通知と、万引きを行った人物が初犯であることを示す警報情報とを生成する。サーバＳ１は、アラート通知および警報情報（つまり、万引き情報）を、ネットワークＮＷ２を介してクライアント端末Ｐ１に送信する（Ｔ９）。
【００６７】
また、サーバＳ１は、カメラＣＭ１Ａに万引きを実行した人物を撮像した際には人物の顔画像を切り出して送信する制御を実行させる。なお、このような制御は、カメラＣＭ１Ａに限らず、他のゲートを撮像するカメラあるいはゲート以外の場所を撮像するカメラに対しても同様に実行される。
【００６８】
クライアント端末Ｐ１は、受信された万引き情報に基づいてアラート通知を行い、警報情報を表示する（Ｔ１０）。
【００６９】
カメラＣＭ１Ａは、撮像された撮像画像において以前万引きを行った人物を再度撮像したことを検知した場合には、人物の顔画像の切り出し処理を実行する（Ｔ１１）。なお、人物の検知は、人物が再度万引きを行ったか否かに関わらず実行されてよい。
【００７０】
カメラＣＭ１Ａは、切り出した人物の顔画像を、ネットワークＮＷ１を介してサーバＳ１に送信する（Ｔ１２）。
【００７１】
サーバＳ１は、受信された顔画像に対する顔照合を要求する（Ｔ１３）。具体的には、人物検索部４１ａは、受信された顔画像に基づいて、記憶部４３のうちブラックリストＤＢ４３ａに記憶された複数の人物のそれぞれの顔画像あるいは撮像画像の中から同一人物を検索する。
【００７２】
サーバＳ１は、受信された顔画像と検索により得られた顔画像あるいは撮像画像とに基づく顔照合を実行する（Ｔ１４）。具体的には、人物照合部４１ｂは、受信された顔画像と人物検索部４１ａによる検索結果とに基づいて、受信された顔画像と人物検索部４１ａによる検索結果とが同一人物か否かを照合して判定する。
【００７３】
サーバＳ１は、ブラックリストＤＢ４３ａに記憶された複数の人物のそれぞれの顔画像あるいは撮像画像のうち、顔画像の人物と同一人物の顔画像あるいは撮像画像を照合結果として出力する（Ｔ１５）。
【００７４】
サーバＳ１は、照合結果に基づいて、受信された顔画像の人物が初犯ではない（つまり、常習犯）と判定し、万引きが発生したことを示すアラート通知と、万引きを行った人物が常習犯であることを示す警報情報とからなる万引き情報を生成する。サーバＳ１は、生成された万引き情報を、ネットワークＮＷ２を介してクライアント端末Ｐ１に送信する（Ｔ１６）。
【００７５】
クライアント端末Ｐ１は、受信された万引き情報に基づいて万引き発生のアラート通知を行い、警報情報を表示する（Ｔ１７）。
【００７６】
以降、実施の形態１に係る人物監視システム１００は、ブラックリストＤＢ４３ａに記憶された人物の検知を繰り返して実行し、検知された人物の情報をクライアント端末Ｐ１に表示させ、施設内において不正利用者の検知を効率的に支援できる。これにより、クライアントは、万引き常習犯を効率よく監視することができる。
【００７７】
図４は、検索結果画面Ｓｒ３の表示の一例を示す図である。図４に示す検索結果は、クライアントによって入力された検索キーに基づいて、サーバＳ１のブラックリストＤＢ４３ａに記憶された顔画像を検索した検索結果画面Ｓｒ３の一例を示す。
【００７８】
検索結果画面Ｓｒ３は、表示部６４に表示される。なお、検索結果画面Ｓｒ３の左側に示す検索条件は、クライアントの入力操作により各項目について条件が設定される。項目Ｄｔ０は、検索したい日時を所定の期間で設定できる。項目Ｆｃ０は、検索したい顔画像をドラックまたはアップロードすることにより設定できる。項目Ｃｍ０は、検索したいカメラごとに付与された識別情報を設定できる。なお、図４に示すカメラごとに付与された識別情報は、チェックボックスとして選択可能となっているが、これに限らず、例えば施設あるいはフロアごとにまとめて選択可能であってよい。クライアント端末Ｐ１は、クライアントにより条件を設定され、検索ボタンＲｓ０を選択されると、検索条件をサーバＳ１に送信する。
【００７９】
また、検索結果画面Ｓｒ３の右側には、検索結果が表示される。日時Ｄｔ１は、カメラによって顔画像が撮像された日時が表示され。なお、日時Ｄｔ１は、カメラごとの識別情報とともに表示されてよい。複数の顔画像のそれぞれＲｓ１は、日時Ｄｔ１に所定のカメラによって撮像された顔画像のそれぞれが表示される。複数の顔画像のそれぞれＲｓ２は、日時Ｄｔ１に撮像された複数の顔画像のそれぞれＲｓ１に対する照合結果を示す。名前Ｎｍ１は、ブラックリストＤＢ４３ａあるいは万引き情報ＤＢ４３ｂに記憶され、複数の顔画像のそれぞれＲｓ２に表示された人物の名前である。なお、名前Ｎｍ１は、特定されている場合のみ表示される。
【００８０】
人物管理情報ボタンＩｎ０は、万引きを行った人物に関する履歴情報（例えば、その人物が行ったこれまでの万引きの履歴情報）を検索および管理するためのボタンである。これにより、クライアントは、複数の人物のそれぞれのうち、万引き回数が多いあるいは万引きによる損害額が大きい要注意人物などを管理してよい。
【００８１】
なお、上述した複数の検索項目のそれぞれおよび複数の検索結果のそれぞれの配置および表示方法は、これに限らない。例えば、複数の検索項目のそれぞれと複数の検索結果のそれぞれは、タブごとに分けられて表示されてよい。
【００８２】
図５Ａおよび図５Ｂを参照して、サーバＳ１によって生成されるアラート通知および警報情報について説明する。図５Ａは、警報情報（初犯）の一例を示す図である。図５Ｂは、警報情報（再犯）の一例を示す図である。各警報情報のそれぞれは、クライアント端末Ｐ１の表示部６４に表示される。
【００８３】
複数の警告灯Ａｒ１，Ａｒ２のそれぞれは、クライアント端末Ｐ１が設置された同室内に設置され、アラート通知の受信に基づいて点灯する。なお、複数の警告灯Ａｒ１，Ａｒ２のそれぞれは、１つであっても複数であってもよい。また、複数の警告灯Ａｒ１，Ａｒ２のそれぞれは、アラート通知が初犯を示す通知か否かに基づいて、点灯する色が異なってもよい。これにより、クライアントは、複数の警告灯Ａｒ１，Ａｒ２のそれぞれの色に基づいて、万引きの発生およびその人物が万引きの常習犯か否かを視覚的に判別することができる。
【００８４】
警報情報画面Ｓｒ１１、その人物による万引きが初犯である場合に表示される。事案内容Ａｎ１は、発生した事象の内容が表示され、例えば万引きの場合には「万引きアラート」、入場券あるいは乗車券などの不正利用の場合には「不正入場アラート」などが表示される。また、事象情報Ｄｔ２は、万引きを検知した日付および時刻、万引きを検知したゲートの識別番号および場所などが表示される。なお、事象情報Ｄｔ２は、これに限らず、万引きを行った人物を撮像したカメラの識別情報および場所であってよい。画像表示領域ＦＣ１は、万引きを検知した際にカメラによって撮像された人物の顔画像である。また、画像表示領域ＦＣ０には、万引きを行った人物と同一人物であり、ブラックリストＤＢ４３ａに登録（記憶）された顔画像が表示される。画像表示領域ＦＣ０は、その人物による万引きが初犯である場合には何も表示されない。
【００８５】
警報情報画面Ｓｒ１２は、その人物による万引きが初犯である場合に表示される。事案内容Ａｎ２は、発生した事象の内容が表示され、例えば万引きの場合には「万引きアラート」、入場券あるいは乗車券などの不正利用の場合には「不正入場アラート」などが表示される。また、事象情報Ｄｔ３は、万引きを検知した日付および時刻、万引きを検知したゲートの識別番号および場所などが表示される。なお、事象情報Ｄｔ３は、これに限らず、万引きを行った人物を撮像したカメラの識別情報および場所であってよい。画像表示領域ＦＣ３は、万引きを検知した際にカメラによって撮像された人物の顔画像である。また、画像表示領域ＦＣ２には、万引きを行った人物と同一人物であり、ブラックリストＤＢ４３ａに登録（記憶）された顔画像が表示される。
【００８６】
図６は、実施の形態１に係る人物監視システム１００の動作手順例を示すシーケンス図である。なお、図６の説明においては、施設１ＡにおけるゲートＧＴ１Ａ、ゲート管理装置ＧＴＭ１Ａ、カメラＣＭ１ＡおよびカメラＣＭ２Ａのそれぞれの動作手順について説明する。なお、図６におけるステップＴ１〜Ｔ１０は、図３に示す人物監視システム１００の動作手順例と同一のステップであるので、同一の番号を付すことでその説明を省略する。なお、図６に示す他のカメラＣＭ２Ａは、カメラＣＭ１Ａとは異なる他の施設に設置されたカメラとして人物監視システム１００の動作手順例を説明するが、カメラＣＭ１Ａと同一施設内に設置されてよい。
【００８７】
他のカメラＣＭ２Ａは、カメラＣＭ１Ａとは異なる他の施設のゲートあるいは任意の位置に設置されたカメラであり、ステップＴ１の処理において検知された万引きを行った人物を撮像画像から検知し、顔画像の切り出し処理を実行する（Ｔ２１）。なお、ステップＴ２１の処理は、万引きを行った人物が再度万引きを行った場合だけでなく、例えばその人物が他の施設に入店した場合あるいは他の施設を移動中に他のカメラＣＭ２Ａによって撮像され、検知されてもよい。
【００８８】
他のカメラＣＭ２Ａは、万引きを行った人物の顔画像を、ネットワークＮＷ１を介してサーバＳ１に送信する（Ｔ２２）。
【００８９】
サーバＳ１は、受信された顔画像に対する顔照合を要求する（Ｔ２３）。具体的には、人物検索部４１ａは、受信された顔画像に基づいて、記憶部４３のうちブラックリストＤＢ４３ａに記憶された複数の人物のそれぞれの顔画像あるいは撮像画像の中から同一人物を検索する。
【００９０】
サーバＳ１は、受信された顔画像と検索により得られた顔画像あるいは撮像画像とに基づく顔照合を実行する（Ｔ２４）。具体的には、人物照合部４１ｂは、受信された顔画像と人物検索部４１ａによる検索結果とに基づいて、受信された顔画像と人物検索部４１ａによる検索結果とが同一人物か否かを照合して判定する。
【００９１】
サーバＳ１は、ブラックリストＤＢ４３ａに記憶された複数の人物のそれぞれの顔画像あるいは撮像画像のうち、顔画像の人物と同一人物の顔画像あるいは撮像画像を照合結果として出力する（Ｔ２５）。
【００９２】
サーバＳ１は、照合結果に基づいて、受信された顔画像の人物が初犯ではない（つまり、常習犯）と判定し、万引きが発生したことを示すアラート通知と、万引きを行った人物が常習犯であることを示す警報情報とからなる万引き情報を生成する。サーバＳ１は、万引き情報を、ネットワークＮＷ２を介してクライアント端末Ｐ１に送信する（Ｔ２６）。
【００９３】
クライアント端末Ｐ１は、受信された万引き情報に基づいて万引き発生のアラート通知を行い、警報情報を表示する（Ｔ２７）。
【００９４】
以降、実施の形態１に係る人物監視システム１００は、ブラックリストＤＢ４３ａに記憶された人物の検知を繰り返して実行し、検知された人物の情報をクライアント端末Ｐ１に表示させ、施設内において不正利用者の検知を効率的に支援できる。これにより、クライアントは、万引き常習犯を効率よく監視することができる。
【００９５】
実施の形態１に係る人物監視システム１００は、少なくとも１つのカメラＣＭ１ＡとサーバＳ１とが互いに通信可能に接続され、サーバＳ１は、所定の事象（例えば、万引き、乗車券あるいは入場券の不正利用など）を検知すると通過を規制するゲートＧＴ１Ａからの所定の事象の検知情報の受信に基づいて、ゲートＧＴ１Ａを含む撮像エリアを撮像する第１カメラＣＭ１Ａに、所定の事象の発生時の前記ゲートＧＴ１Ａ付近の人物の顔画像を要求する。第１カメラＣＭ１Ａは、所定の事象の発生時のゲートＧＴ１Ａ付近の人物を撮像し、人物の撮像画像から人物の顔が映る範囲を切り出した顔画像をサーバＳ１に送信する。サーバＳ１は、顔画像に基づく警報情報を出力するとともに、顔画像をデータベースの一例としてのブラックリストＤＢ４３ａに登録する。
【００９６】
これにより、実施の形態１に係る人物監視システム１００は、所定の事象を検知し、通過を規制するゲートＧＴ１Ａからの所定の事象の検知情報の受信に基づいて、所定の事象の発生時の前記ゲートＧＴ１Ａ付近の人物の顔画像を受信し、顔画像に基づく警報情報を出力できるとともに、顔画像をブラックリストＤＢ４３ａに登録できる。したがって、人物監視システム１００は、施設内において不正利用者の検知を効率的に支援できる。
【００９７】
また、実施の形態１に係る人物監視システム１００におけるサーバＳ１は、予めブラックリストＤＢ４３ａに登録された複数の犯罪者のそれぞれの顔画像の中で一致する顔画像が存在するか否かを照合し、複数の犯罪者のいずれとも一致しないと判定した場合に、照合に用いた顔画像に基づく警報情報を出力する。これにより、人物監視システム１００は、照合に用いた顔画像の人物（犯罪者）による犯行が、初犯であるか否かを判定することができる。したがって、人物監視システム１００は、施設内において不正利用者の検知を効率的に支援できる。
【００９８】
また、実施の形態１に係る人物監視システム１００におけるサーバＳ１は、警報情報の出力後、第１カメラＣＭ１Ａから受信した撮像画像に基づいて、照合に用いた顔画像と一致する人物を検知すると、顔画像とブラックリストＤＢ４３ａに既登録の対応する同一人物の顔画像とを対応付けた警報情報を出力する。これにより、人物監視システム１００，２００のそれぞれは、照合に用いた顔画像の人物（犯罪者）が常習犯であるか否かを判定することができる。したがって、人物監視システム１００は、施設内において不正利用者の検知を効率的に支援できる。
【００９９】
また、実施の形態１に係る人物監視システム１００におけるサーバＳ１は、警報情報の出力後、第１カメラＣＭ１Ａの設置場所とは異なる場所を撮像する第２カメラＣＭ１Ｂから受信した撮像画像に基づいて、照合に用いた顔画像と一致する人物を検知すると、顔画像とブラックリストＤＢ４３ａに既登録の対応する同一人物の顔画像とを対応付けた警報情報を出力する。これにより、人物監視システム１００は、照合に用いた顔画像の人物（犯罪者）が常習犯であるか否かを判定することができる。したがって、人物監視システム１００，２００のそれぞれは、施設内において不正利用者の検知を効率的に支援できる。
【０１００】
また、実施の形態１に係る人物監視システム１００におけるサーバＳ１は、識別情報を有する通過物がゲートＧＴ１Ａの通過時に無効化されていない旨の検知に基づく検知情報を受信する。これにより、人物監視システム１００は、検知情報を受信に基づいて万引きの発生を検知することができる。したがって、人物監視システム１００は、施設内において不正利用者の検知を効率的に支援できる。
【０１０１】
（実施の形態２）
実施の形態１では、施設内において発生した万引きを検知して、万引きを行った人物を監視する場合を示した。実施の形態２では、人物が例えば年齢を偽るなどして、人物の年齢、性別などの属性情報あるいは利用条件に応じて料金あるいはサービスなどを不正利用する場合について説明する。また、実施の形態２では、わかりやすいように交通機関の利用に使用される乗車券または遊園地の入場券などを例に挙げて説明する。
【０１０２】
図７は、実施の形態２に係る人物監視システム２００の内部構成例を示すブロック図である。実施の形態２に係る人物監視システム２００の内部構成例は、実施の形態１に係る人物監視システム１００の内部構成とほぼ同一の構成を有する。実施の形態１と同一の構成要素については同一の符号を用いることで、その説明を省略する。
【０１０３】
実施の形態２に係る複数の施設１Ａ，…のそれぞれは、同一の運営会社または管理会社が所有し、入場許可が必要な施設（例えば、駅、遊園地など）である。
【０１０４】
実施の形態２に係る複数のゲートＧＴ１Ａ，…のそれぞれは、例えば交通機関の利用に使用される乗車券または遊園地の入場券などに設定された入場情報を検出する。入場情報は、複数のゲートＧＴ１Ａ，…のそれぞれを通過する人物の属性情報（例えば、性別，年齢，子ども，高齢者など）と、その人物によって設定された利用条件（例えば、交通機関の利用における乗車区間，乗車料金に対する追加料金が必要な座席，入場料金に対する追加料金が必要なサービスの利用を受けるための情報など）とを有する。なお、利用条件は、人物の属性情報に依存して自動的に決定される場合には省略されてよい。
【０１０５】
実施の形態２に係る複数のゲート管理装置ＧＴＭ１Ａ，…のそれぞれは、複数のゲートＧＴ１Ａ，…のそれぞれによって検出された入場情報から人物の属性情報と利用条件とを分析し、ネットワークＮＷ１を介してサーバＳ１に送信する。
【０１０６】
実施の形態２に係るサーバＳ１は、複数のゲート管理装置ＧＴＭ１Ａ，…のそれぞれから入場情報を受信し、その入場情報が検出された複数のゲートＧＴ１Ａ，…のそれぞれを撮像する複数のカメラＣＭ１Ａ，…のそれぞれからその入場情報を使用した人物の顔画像を受信する。
【０１０７】
実施の形態２に係るプロセッサ４１は、人物検索部４１ａと、人物照合部４１ｂと、属性情報抽出部４１ｃと、を含んで構成される。プロセッサ４１は、複数のカメラＣＭ１Ａ，…のそれぞれから受信された人物の顔画像と、ブラックリストＤＢ４３ａに記憶された複数の人物の顔画像のそれぞれとを照合する。さらに、プロセッサ４１は、複数のカメラＣＭ１Ａ，…のそれぞれから受信された人物の顔画像から人物の属性情報を推定して抽出し、抽出された顔画像に基づく属性情報と、入場情報に設定された属性情報とを照合する。プロセッサ４１は、これらの照合結果に基づいて、警報情報を生成する。
【０１０８】
属性情報抽出部４１ｃは、複数のカメラＣＭ１Ａ，…のそれぞれから受信された人物の顔画像からその人物の属性情報（例えば、性別、年齢など）を推定して、抽出する。属性情報抽出部４１ｃは、抽出されたその人物の属性情報を人物検索部４１ａおよび人物照合部４１ｂに出力する。
【０１０９】
人物検索部４１ａは、複数のゲート管理装置ＧＴＭ１Ａ，…のそれぞれから検知された入場情報と属性情報抽出部４１ｃによって入力された人物の顔画像に基づく属性情報とが一致しない場合、複数のカメラＣＭ１Ａ，…のそれぞれから受信された人物の顔画像をブラックリストＤＢ４３ａに記憶された複数の人物の顔画像のそれぞれから検索する。人物検索部４１ａは、検索結果を人物照合部４１ｂに出力する。
【０１１０】
人物照合部４１ｂは、人物検索部４１ａから入力された検索結果（複数のカメラＣＭ１Ａ，…のそれぞれから受信された人物の顔画像と類似する特徴点を有する顔画像あるいは撮像画像）と複数のカメラＣＭ１Ａ，…のそれぞれから受信された人物の顔画像とを照合する。また、人物照合部４１ｂは、複数のカメラＣＭ１Ａ，…のそれぞれから受信された人物の顔画像から人物の属性情報を抽出し、抽出された顔画像に基づく属性情報と、入場情報に設定された属性情報とを照合する。人物照合部４１ｂは、これらの照合結果に基づいて警報情報を生成する。人物照合部４１ｂは、生成された警報情報を、ネットワークＮＷ２を介してクライアント端末Ｐ１に送信する。
【０１１１】
実施の形態２に係る記憶部４３は、ブラックリストＤＢ４３ａと、入場情報ＤＢ４３ｃと、を含んで構成される。記憶部４３は、複数のゲート管理装置ＧＴＭ１Ａ，…のそれぞれから受信された入場情報、不正入場した人物を撮像したカメラに関する情報（例えば、カメラの設置場所、人物を撮像した撮像時間など）を入場情報ＤＢ４３ｃに記憶する。なお。入場情報ＤＢ４３ｃに記憶される情報は、不正入場された際の入場情報に限らず、正常に入場された入場情報も同様に記憶されてよい。また、記憶部４３は、人物の顔画像および撮像画像と、人物の顔画像に基づく属性情報とをブラックリストＤＢ４３ａに記憶する。なお、記憶部４３は、ブラックリストＤＢ４３ａおよび入場情報ＤＢ４３ｃのそれぞれに記憶された各情報を関連付けて記憶する。これにより、人物監視システム１００は、人物の過去の不正入場情報の履歴を抽出することができ、これらの情報に基づいてその人物が初犯か否か（つまり、常習犯か否か）を判定することができる。
【０１１２】
実施の形態２に係る操作部６３は、さらに人物の属性情報に関する検索項目および入場情報に関する検索項目が入力可能である。人物の属性情報に関する検索項目は、例えば性別、年齢などであり、さらに髪型、メガネあるいはバッグなどの装飾品を検索可能であってよい。入場情報に関する検索項目は、例えば座席、乗車区間、利用サービス、料金、オプション情報などである。なお、上述した人物の属性情報に関する検索項目および入場情報に関する検索項目の例は、これに限らず、画像から抽出可能な情報あるいは乗車券などに設定可能な情報であってよい。
【０１１３】
図８は、実施の形態２に係る人物監視システム２００の動作手順例を示すシーケンス図である。なお、図８の説明においては、施設１ＡにおけるゲートＧＴ１Ａ、ゲート管理装置ＧＴＭ１Ａ、カメラＣＭ１ＡおよびカメラＣＭ２Ａのそれぞれの動作手順について説明する。
【０１１４】
ゲートＧＴ１Ａは、人物の通過に基づいて、入場情報を検知する（Ｔ３１）。
【０１１５】
ゲートＧＴ１Ａは、検知された入場情報をゲート管理装置ＧＴＭ１Ａに送信する（Ｔ３２）。
【０１１６】
ゲート管理装置ＧＴＭ１Ａは、受信された入場情報に、人物の属性情報と利用条件とを分析し、ネットワークＮＷ１を介してサーバＳ１に送信する（Ｔ３３）。
【０１１７】
サーバＳ１は、ゲート管理装置ＧＴＭ１から受信された入場情報に基づいて、その入場情報を使用して施設１Ａに入場した人物の顔画像を要求する制御信号をカメラＣＭ１Ａに送信する（Ｔ３４）。
【０１１８】
カメラＣＭ１Ａは、サーバＳ１から受信された制御信号に基づいて、その入場情報を使用して施設１Ａに入場した人物が映る撮像画像から人物の顔画像の切り出し処理を実行する（Ｔ３５）。
【０１１９】
カメラＣＭ１Ａは、切り出した顔画像を、ネットワークＮＷ１を介してサーバＳ１に送信する（Ｔ３６）。
【０１２０】
サーバＳ１は、受信された顔画像に基づいて、その人物の属性情報（例えば、性別、年齢など）を推定する（Ｔ３７）。
【０１２１】
サーバＳ１は、推定された顔画像に基づく属性情報（推定結果）と、入場情報に設定された属性情報とを比較して、不正入場であるか否かを判定する（Ｔ３８）。
【０１２２】
サーバＳ１は、ステップＴ３８の処理において不正入場であると判定した場合には、人物の顔画像をブラックリストＤＢ４３ａに出力する（Ｔ３９）。
【０１２３】
ブラックリストＤＢ４３ａは、サーバＳ１から入力された人物の顔画像を登録する（Ｔ４０）。
【０１２４】
サーバＳ１は、ステップＴ３８の処理において不正入場であると判定した場合には、ブラックリストＤＢ４３ａに記憶され、過去に不正入場を行った複数の人物のそれぞれの顔画像あるいは撮像画像と、カメラＣＭ１Ａから受信された顔画像とを照合する。サーバＳ１は、照合結果に基づいて、受信された顔画像と同一人物の顔画像あるいは撮像画像が記憶されていない場合は、不正入場が発生したことを示すアラート通知と、不正入場を行った人物が初犯であることを示す警報情報とからなる不正検知情報を生成する。サーバＳ１は、生成された不正検知情報を、ネットワークＮＷ２を介してクライアント端末Ｐ１に送信する（Ｔ４１）。
【０１２５】
また、サーバＳ１は、カメラＣＭ１Ａに不正入場を行った人物を撮像した際には人物の顔画像を切り出して送信する制御を実行させる。なお、このような制御は、カメラＣＭ１Ａに限らず、他のゲートを撮像するカメラあるいはゲート以外の場所を撮像するカメラに対しても同様に実行される。
【０１２６】
クライアント端末Ｐ１は、受信された不正検知情報に基づいて不正入場発生のアラート通知を行い、不正検知情報を表示する（Ｔ４２）。
【０１２７】
他のカメラＣＭ２Ａは、カメラＣＭ１Ａとは異なる他の施設のゲートあるいは任意の位置に設置されたカメラであり、ステップＴ３１の処理において検知された不正入場を行った人物を撮像画像から検知し、顔画像の切り出し処理を実行する（Ｔ４３）。なお、ステップＴ４３の処理は、不正入場を行った人物が再度不正入場を行った場合だけでなく、例えばその人物が他の施設に入店した場合あるいは他の施設を移動中に他のカメラＣＭ２Ａによって撮像され、検知されてもよい。
【０１２８】
他のカメラＣＭ２Ａは、不正入場を行った人物の顔画像を、ネットワークＮＷ１を介してサーバＳ１に送信する（Ｔ４４）。
【０１２９】
サーバＳ１は、受信された顔画像に対する顔照合を要求する（Ｔ４５）。具体的には、人物検索部４１ａは、受信された顔画像に基づいて、記憶部４３のうちブラックリストＤＢ４３ａに記憶された複数の人物のそれぞれの顔画像あるいは撮像画像の中から同一人物を検索する。
【０１３０】
サーバＳ１は、受信された顔画像と検索により得られた顔画像あるいは撮像画像とに基づく顔照合を実行する（Ｔ４６）。具体的には、人物照合部４１ｂは、受信された顔画像と人物検索部４１ａによる検索結果とに基づいて、受信された顔画像と人物検索部４１ａによる検索結果とが同一人物か否かを照合して判定する。
【０１３１】
サーバＳ１は、ブラックリストＤＢ４３ａに記憶された複数の人物のそれぞれの顔画像あるいは撮像画像のうち、顔画像の人物と同一人物の顔画像あるいは撮像画像を照合結果として出力する（Ｔ４７）。
【０１３２】
サーバＳ１は、照合結果に基づいて、受信された顔画像の人物が初犯ではない（つまり、常習犯）と判定し、不正入場が発生したことを示す不正アラート通知と、不正入場を行った人物が常習犯であることを示す不正検知情報（警報情報）とを生成する。サーバＳ１は、アラート通知および不正検知情報（警報情報）を、ネットワークＮＷ２を介してクライアント端末Ｐ１に送信する（Ｔ４８）。
【０１３３】
クライアント端末Ｐ１は、受信された不正検知情報に基づいて不正アラート通知を行い、警報情報を表示する（Ｔ４９）。
【０１３４】
以降、実施の形態２に係る人物監視システム２００は、ブラックリストＤＢ４３ａに記憶された人物の検知を繰り返して実行し、検知された人物の情報をクライアント端末Ｐ１に表示させ、施設内において不正利用者の検知を効率的に支援できる。これにより、クライアントは、不正入場常習犯を効率よく監視することができる。
【０１３５】
実施の形態２に係る人物監視システム２００は、少なくとも１つのカメラＣＭ１ＡとサーバＳ１とが互いに通信可能に接続され、サーバＳ１は、所定の事象（例えば、乗車券あるいは入場券の不正利用など）を検知すると通過を規制するゲートＧＴ１Ａからの所定の事象の検知情報の受信に基づいて、ゲートＧＴ１Ａを含む撮像エリアを撮像する第１カメラＣＭ１Ａに、所定の事象の発生時の前記ゲートＧＴ１Ａ付近の人物の顔画像を要求する。第１カメラＣＭ１Ａは、所定の事象の発生時のゲートＧＴ１Ａ付近の人物を撮像し、人物の撮像画像から人物の顔が映る範囲を切り出した顔画像をサーバＳ１に送信する。サーバＳ１は、顔画像に基づく警報情報を出力するとともに、顔画像をデータベースの一例としてのブラックリストＤＢ４３ａに登録する。
【０１３６】
これにより、実施の形態２に係る人物監視システム２００は、所定の事象を検知し、通過を規制するゲートＧＴ１Ａからの所定の事象の検知情報の受信に基づいて、所定の事象の発生時の前記ゲートＧＴ１Ａ付近の人物の顔画像を受信し、顔画像に基づく警報情報を出力できるとともに、顔画像をブラックリストＤＢ４３ａに登録できる。したがって、人物監視システム２００は、施設内において不正利用者の検知を効率的に支援できる。
【０１３７】
また、実施の形態２に係る人物監視システム２００におけるサーバＳ１は、予めデータベースの一例としてのブラックリストＤＢ４３ａに登録された複数の犯罪者のそれぞれの顔画像の中で一致する顔画像が存在するか否かを照合し、複数の犯罪者のいずれとも一致しないと判定した場合に、照合に用いた顔画像に基づく警報情報を出力する。これにより、人物監視システム２００は、照合に用いた顔画像の人物（犯罪者）による犯行が、初犯であるか否かを判定することができる。したがって、人物監視システム２００は、施設内において不正利用者の検知を効率的に支援できる。
【０１３８】
また、実施の形態２に係る人物監視システム２００におけるサーバＳ１は、警報情報の出力後、第１カメラＣＭ１Ａから受信した撮像画像に基づいて、照合に用いた顔画像と一致する人物を検知すると、顔画像とブラックリストＤＢ４３ａに既登録の対応する同一人物の顔画像とを対応付けた警報情報を出力する。これにより、人物監視システム２００は、照合に用いた顔画像の人物（犯罪者）が常習犯であるか否かを判定することができる。したがって、人物監視システム２００は、施設内において不正利用者の検知を効率的に支援できる。
【０１３９】
また、実施の形態２に係る人物監視システム２００におけるサーバＳ１は、警報情報の出力後、第１カメラＣＭ１Ａの設置場所とは異なる場所を撮像する第２カメラＣＭ１Ｂから受信した撮像画像に基づいて、照合に用いた顔画像と一致する人物を検知すると、顔画像とブラックリストＤＢ４３ａに既登録の対応する同一人物の顔画像とを対応付けた警報情報を出力する。これにより、人物監視システム２００は、照合に用いた顔画像の人物（犯罪者）が常習犯であるか否かを判定することができる。したがって、人物監視システム２００は、施設内において不正利用者の検知を効率的に支援できる。
【０１４０】
また、実施の形態２に係る人物監視システム２００におけるサーバＳ１は、通過物の通過を許可する年齢層情報の一例としての利用条件を有する検知情報を受信し、第１カメラＣＭ１Ａからの人物が映る撮像画像に基づいて、その人物の年齢を解析し、人物の年齢の解析結果（つまり、人物の属性情報）が通過物の通過を許可する利用情報に含まれない場合に、受信された検知情報に含まれる利用条件と人物の属性情報とを照合する。これにより、人物監視システム２００は、利用条件と人物の属性情報との不一致に基づいて、通過物の不正利用を検知することができる。したがって、人物監視システム２００は、施設内において不正利用者の検知を効率的に支援できる。
【０１４１】
以上、添付図面を参照しながら各種の実施の形態について説明したが、本開示はかかる例に限定されない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例、修正例、置換例、付加例、削除例、均等例に想到し得ることは明らかであり、それらについても本開示の技術的範囲に属すると了解される。また、発明の趣旨を逸脱しない範囲において、上述した各種の実施の形態における各構成要素を任意に組み合わせてもよい。
【産業上の利用可能性】
【０１４２】
本開示は、人物監視システムおよび人物監視方法の提示において、施設内において不正利用者の検知を効率的に支援できる人物監視システムおよび人物監視方法の提示として有用である。
【符号の説明】
【０１４３】
１Ａ，１Ｂ  施設
１０，２０，３０，４０，６０  通信部
１１，２１，３１，４１，６１  プロセッサ
１２，２２，３２，４２，６２  メモリ
１３  検知部
３３  撮像部
４３  記憶部
４３ａ  ブラックリストＤＢ
４３ｂ  万引き情報ＤＢ
４３ｃ  入場情報ＤＢ
６３  操作部
６４  表示部
６５  記憶部
ＧＴ１Ａ，ＧＴ１Ｂ  ゲート
ＧＴＭ１Ａ，ＧＴＭ１Ｂ  ゲート管理装置
ＣＭ１Ａ，ＣＭ１Ｂ  カメラ
ＮＷ１，ＮＷ２  ネットワーク
Ｓ１  サーバ
ＲＤ１  レコーダ
Ｐ１  クライアント端末
Ｓｒ３  検索結果画面
Ｓｒ１１，Ｓｒ１２  警報情報画面
Ａｒ１，Ａｒ２  警告灯
【図１】
2020198475.tif 000003
【図２】
2020198475.tif 000004
【図３】
2020198475.tif 000005
【図４】
2020198475.tif 000006
【図５Ａ】
2020198475.tif 000007
【図５Ｂ】
2020198475.tif 000008
【図６】
2020198475.tif 000009
【図７】
2020198475.tif 000010
【図８】
2020198475.tif 000011