(57)【要約】【課題】撮像されたカードの使用者と記憶部に記憶されている人物の画像とを照合してカード情報と人物の画像とを紐付ける。【解決手段】駅改札に設けられた改札撮像部と、外部サーバから受信した人物の画像と改札撮像部が撮像した改札画像とに基づいて、人物を照合する第１の突合せ部と、改札画像と、改札画像を撮像した改札撮像部が設けられた駅改札から受信した改札情報と、駅改札を入退場したときのカード情報とに基づいて、人物を検知する第３の突合せ部と、改札画像と改札情報とカード情報とを紐付けして記憶部に蓄積する紐付け部と、を備える。【選択図】  図３
2019046053.tif 000002
【特許請求の範囲】
【請求項１】
駅改札に設けられた改札撮像部と、
外部サーバから受信した人物の画像と前記改札撮像部が撮像した改札画像とに基づいて、前記人物を照合する第１の突合せ部と、
前記改札画像と、前記改札画像を撮像した前記改札撮像部が設けられた前記駅改札から受信した改札情報と、前記駅改札を入退場したときのカード情報とに基づいて、前記人物を検知する第３の突合せ部と、
前記改札画像と前記改札情報と前記カード情報とを紐付けして記憶部に蓄積する紐付け部と、
を備えることを特徴とする監視システム。
【請求項２】
前記駅改札以外の構内に設けられた構内撮像部と、
前記外部サーバから受信した人物の画像と前記構内撮像部が撮像した構内画像とに基づいて、前記人物を照合する第２の突合せ部と、を備え、
前記紐付け部は、前記構内画像をさらに紐付けして前記記憶部に蓄積する、
ことを特徴とする請求項１に記載の監視システム。
【請求項３】
前記第１の突合せ部は、前記人物の顔以外の外見に関する特徴に基づいて、前記人物を照合する、
ことを特徴とする請求項１に記載の監視システム。
【請求項４】
前記第２の突合せ部は、前記人物の顔以外の外見に関する特徴に基づいて、前記人物を照合する、
ことを特徴とする請求項２に記載の監視システム。
【請求項５】
外部サーバから受信した人物の画像と、駅改札に設けられた改札撮像部が撮像した改札画像とに基づいて、前記人物を照合する第１の突合せを行い、
前記改札画像と、前記改札画像を撮像した前記改札撮像部が設けられた前記駅改札から受信した改札情報と、前記駅改札を入退場したときのカード情報とに基づいて、前記人物を検知し、
前記改札画像と前記改札情報と前記カード情報とを紐付けして記憶部に蓄積する、
ことを特徴とする監視方法。
【請求項６】
前記外部サーバから受信した人物の画像と、前記駅改札以外の構内に設けられた構内撮像部が撮像した構内画像とに基づいて、前記人物を照合する第２の突合せを行い、
前記紐付けにおいて、前記構内画像をさらに紐付けして前記記憶部に蓄積する、
ことを特徴とする請求項５に記載の監視方法。
【請求項７】
前記第１の突合せにおいて、前記人物の顔以外の外見に関する特徴に基づいて、前記人物を照合する、
ことを特徴とする請求項５に記載の監視方法。
【請求項８】
前記第２の突合せにおいて、前記人物の顔以外の外見に関する特徴に基づいて、前記人物を照合する、
ことを特徴とする請求項６に記載の監視方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、監視システム、監視方法に関する。
【背景技術】
【０００２】
従来から、人物を撮像して監視する様々な技術が開発されている。例えば、特許文献１には、ゲート装置と、該ゲート装置を通過する人物を撮影する撮影装置とを有するゲートシステムであって、ゲート装置を通過する人物が所有する券を改札したときの券情報を取得する券情報取得手段と、撮影装置によりゲート装置を通過する人物を撮影する画像撮影手段と、画像撮影手段により撮影された画像情報から人物の属性情報を検出する属性情報検出手段と、券情報取得手段により取得された券情報と属性情報検出手段により検出された属性情報とを紐付ける紐付け手段とを有するゲートシステムが開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１１−０１８３００号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１に記載の技術には、撮影されたICカードの使用者とDB（Data Base）等の記憶部に記憶されている人物の画像とを照合する構成については開示されていない。すなわち、撮像されたカードの使用者と記憶部に記憶されている人物の画像とを照合してカード情報と人物の画像とを紐付けることはできない。
【０００５】
本発明は、撮像されたカードの使用者と記憶部に記憶されている人物の画像とを照合してカード情報と人物の画像とを紐付けることが可能な監視システム、監視方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明にかかる監視システムは、駅改札に設けられた改札撮像部と、外部サーバから受信した人物の画像と前記改札撮像部が撮像した改札画像とに基づいて、前記人物を照合する第１の突合せ部と、前記改札画像と、前記改札画像を撮像した前記改札撮像部が設けられた前記駅改札から受信した改札情報と、前記駅改札を入退場したときのカード情報とに基づいて、前記人物を検知する第３の突合せ部と、前記改札画像と前記改札情報と前記カード情報とを紐付けして記憶部に蓄積する紐付け部と、を備えることを特徴とする監視システムとして構成される。
また、本発明は、上記監視システムで用いられる監視方法としても把握される。
【発明の効果】
【０００７】
本発明によれば、撮像されたカードの使用者と記憶部に記憶されている人物の画像とを照合してカード情報と人物の画像とを紐付けることが可能となる。
【図面の簡単な説明】
【０００８】
【図１】監視カメラシステムの代表的なシステム構成を示す図である。
【図２】中央サーバおよび駅システムの機能構成を示す図である。
【図３】中央サーバ、駅システム、及び画像DB間の処理シーケンスを示す図である。
【図４】中央サーバの処理フローを示す図である。
【図５】カメラ受信画像データの例を示す図である。
【図６】改札情報の例を示す図である。
【図７】ICカード情報の例を示す図である。
【発明を実施するための形態】
【０００９】
以下、実施例を、図面を用いて詳細に説明する。
【実施例１】
【００１０】
図１は、本実施例における監視カメラシステム１０００の代表的なシステム構成を示す図である。監視カメラシステム１０００は、中央サーバ１０１と画像DBサーバ１０２と、駅サーバ１０３と、がネットワークＮを介して接続されている。
【００１１】
中央サーバ１０１は、複数の駅サーバ１０３を管理するサーバであり、必要に応じて画像DBサーバ１０２にアクセスし、種々の演算を行う。中央サーバ１０１の詳細は、図２で後述する。
【００１２】
画像DBサーバ１０２は、検索対象である画像群を格納するシステム外部のDBサーバである。図１の例では、前述の通り、画像DBサーバ１０２が中央サーバ１０１とネットワークＮを介して接続されている。以下では、画像DBサーバ１０２が指名手配犯の顔画像を格納し、画像DBサーバ１０２が警察システム内に設けられている前提で説明しているが、中央サーバ１０１に備えられていてもよい。図３−図５で後述する処理により、駅に入場する、又は駅から退場するユーザの顔画像をクエリ画像として記憶されている画像DBサーバ１０２内の画像群から指名手配犯の画像を検索するシーンに適用可能となる。
【００１３】
上記のように画像DBサーバ１０２を中央サーバ内に記憶した場合は、警察システムから所定の画像群を駅管理会社に預託する場合等に有効である。
【００１４】
駅サーバ１０３は、駅ごとに設置されるサーバであり、駅サーバ１０３が設置される駅を管理するとともに、中央サーバ１０１に集約する情報を収集する。駅サーバ１０３の詳細は図２で後述する。
【００１５】
図２は、中央サーバ１０１および駅サーバ１０３の機能構成を示す図である。図２に示すように、中央サーバ１０１は、記憶部２０１と、第１の突合せ部２０２と、第２の突合せ部２０３と、第３の突合せ部２０４と、通知部２０５と、紐付部２０６とを有して構成されている。また、駅サーバ１０３は、改札管理部１０３１と、構内管理部１０３２とを有して構成されている。まず、中央サーバ１０１について説明する。
【００１６】
記憶部２０１は、ハードウェアとしては、例えば、ＨＤＤ（Hard Disk Drive）等の記憶装置から構成され、警察受信画像２０１１と、カメラ受信画像データ２０１２と、カード情報２０１３と、検知済み画像２０１４と、通知情報２０１５と、改札情報２０１６とを記憶する。
【００１７】
警察受信画像２０１１は、警察システムから受信した画像データである。カメラ受信画像データ２０１２は、改札カメラ部１０４が撮像した改札画像や構内カメラ部１０６が撮像した構内画像を含む画像データである。カメラ受信画像データ２０１２の例については図５を用いて後述する。カード情報２０１３は、駅改札を入退場したときのICカードの履歴を含むデータである。カード情報２０１３の例については、図７を用いて後述する。検知済み画像２０１４は、改札画像や構内画像のうち、犯人と推定される人物が検知された画像データである。通知情報２０１５は、検知済み画像２０１４や検知済み画像２０１４に含まれる犯人と推定される人物のカード情報２０１３や個人情報を含むデータである。改札情報２０１６は、利用者がICカードにより入退場した駅改札の履歴を含むデータである。改札情報２０１６の例については、図６を用いて後述する。
【００１８】
第１の突合せ部２０２は、警察受信画像２０１１とカメラ受信画像データ２０１２に含まれる改札画像とを突き合せて犯人と推定される人物を照合する処理を行う。突き合せ方法についての詳細は図３、４で後述する。
【００１９】
第２の突合せ部２０３は、警察受信画像２０１１とカメラ受信画像データ２０１２に含まれる構内画像とを突き合せて犯人と推定される人物を照合する処理を行う。突き合せ方法についての詳細は図３、４で後述する。
【００２０】
第３の突合せ部２０４は、第１の突合せ部２０２、第２の突合せ部２０３において犯人が推定された場合に、カメラ受信画像データ２０１２に含まれる改札画像とカード情報２０１３とを突き合せて犯人と推定される人物を照合する処理を行う。突き合せ方法についての詳細は図３で後述する。
【００２１】
通知部２０５は、第１の突合せ部２０２、第２の突合せ部２０３、第３の突合せ部２０４において犯人が推定された場合に、駅サーバ１０３および画像DBサーバ１０２に、通知情報２０１５を送信する。
【００２２】
紐付部２０６は、記憶部２０１で記憶している警察受信画像とカメラ受信画像データとICカード情報と改札情報との紐付を行う。
駅サーバ１０３は、図２に示すように、改札管理部１０３１と、構内管理部２０３２とを有している。改札管理部１０３１は、駅改札ゲートや駅改札周辺の機器を管理する。改札管理部１０３１は、駅改札付近に備えられ、駅改札およびその周辺を撮像する改札カメラ部１０４と、駅改札ゲートに備えられ、接触または非接触により利用者のICカードに記録されている情報を読み取るICカード読み取り部１０５とを有している。
【００２３】
構内管理部１０３２は、改札管理部１０３１以外の駅構内周辺の機器を管理する。構内管理部１０３２は、改札カメラ部１０４以外の場所に設けられ、駅構内周辺を撮像する構内カメラ部１０６を有している。駅改札以外の場所として、例えば、駅改札内にあるホーム付近や、駅改札外にある券売機付近が挙げられる。駅改札外のコンコースやコンコースに並ぶ店舗付近等、これら以外の場所に構内カメラ部１０６が設けられていてもよい。また、改札カメラ部１０４は、例えば、ホームとホームとを接続する階段や廊下等、改札内のうちホーム以外の場所に設けられていてもよい。
【００２４】
図３は、中央サーバ１０１、駅サーバ１０３、及び画像DBサーバ１０２間の処理シーケンスを示す図である。
S３０１処理では、画像DBサーバ１０２は、中央サーバ１０１に指名手配犯の画像を１日１回、１週間に１回等に定期処理として行う。中央サーバ１０１は、画像DBサーバ１０２から受信した画像を警察受信画像として記憶部２０１に記憶する。
【００２５】
S３０２処理では、駅サーバ１０３は、改札カメラ部１０４が撮像した改札画像及び構内カメラ部１０６が撮像した構内画像を中央サーバ１０１に送信する。中央サーバ１０１は、駅サーバ１０３から受信した画像をカメラ受信画像として記憶部２０１に記憶する。
【００２６】
S３０３処理では、駅サーバ１０３は、駅改札を入退場したときにICカード読み取り部２０５が読み取った利用者のICカードに記録されているICカード情報、利用者がICカードにより入退場した駅改札に記憶されている改札情報２０１６を、中央サーバ１０１に送信する。中央サーバ１０１は、駅サーバ１０３から受信した情報を、それぞれ、ICカード情報２０１３、改札情報２０１６として記憶部２０１に記憶する。ICカード情報２０１３、改札情報２０１６から、利用客のICカードＩＤ、改札ＩＤ、改札通過時の時刻を把握することができる。
【００２７】
S３０４処理では、中央サーバ１０１の第１の突合せ部２０２が、記憶部２０１に格納している警察受信画像及び検知済み画像と、カメラ受信画像の中から改札カメラ部１０４が撮像した改札画像とを照合する処理を数秒間に１回定期処理として行う。S３０４処理の詳細については図４で後述する。
【００２８】
S３０５処理では、中央サーバ１０１の第２の突合せ部２０３が、記憶部２０１に格納している警察受信画像及び検知済み画像と、カメラ受信画像の中から構内カメラ部１０６が撮像した構内画像とを照合する処理を数秒間に１回定期処理として行う。S３０５処理の詳細については図４で後述する。
【００２９】
S３０６処理は、S３０４処理が成功した時に実施する。中央サーバ１０１の第３の突合せ部２０４が、検知済み画像２０１４とカード情報２０１３の紐づけを実施する。例えば、第３の突合せ部２０４は、検知済み画像２０１４の撮影時刻５０５と、検知済み画像２０１４を撮像した改札カメラ部１０４が備えられた駅改札を識別するための改札ＩＤとが一致するエントリを改札情報２０１６から検索し、紐づけ部２１０が、これらの情報を該当するエントリのICカードIDと紐づけ、通知情報２０１５に格納する。
【００３０】
また、第３の突合せ部２０４は、前記ICカードIDと一致するIDをICカード情報２０１３から検索し、紐づけ部２１０が、該当するエントリに名前等個人情報が登録されていた場合、これらの情報を紐づけ、通知情報２０１５に格納する。通知情報２０１５は、カメラ受信画像データの中で検知済み画像を含むエントリと警察受信画像とを対応付けた情報である。具体的な内容については後述する。
【００３１】
本処理により、事前にICカードに顔写真を登録していなくとも、指名手配犯とＩＣカードの紐づけを実施することが可能となる。例えば指名手配犯で名前が判明していない、写真が無く似顔絵、外国国籍で名前がわからない、といった状態でも犯人の検知が可能となる。これにより指名手配犯の乗降駅をはじめ、ＩＣカードを使った購買品、またその位置を特定することができるため、指名手配犯の足取りや生活パターンを把握することが可能となる。また、もし使用されたＩＣカードに指名手配犯の個人情報が登録されていればその情報を得ることができ、オートチャージ等に加入していた場合銀行口座情報等も把握できる。もし指名手配犯以外の個人情報が登録されていたとしても、その人物から指名手配犯につながる可能性もあり得る。
【００３２】
例えば、S３０５処理で、中央サーバ１０１の第２の突合せ部２０３が、指名手配犯を含む警察受信画像と、図５に示すカメラ受信画像データ２０１２のエントリ#２の人物を含むカメラ受信画像とを照合した結果、指名手配犯の人物とカメラ受信画像の人物が一致したと判定したとする。この場合、第２の突合せ部２０３は、当該エントリに含まれる改札IDであるEB1と撮像時刻である10：05：01をキーとして図６に示す改札情報２０１６にアクセスし、これらの改札IDおよび撮像時刻と同じ改札IDおよび入場時刻または退場時刻を含むエントリを検索し、検索したエントリに含まれるICカードIDであるA00002を読み取る。これにより、EB1により識別される駅改札を、ICカードIDがA00002であるICカードを所持した人物が通過したことがわかる。ここで、紐付け部２０６が、前記指名手配犯を含む警察受信画像、前記判定したカメラ受信画像、及び前記ICカードIDA00002を紐づけて記憶部２０１に蓄積する。
【００３３】
更に、紐付け部２０６は、ICカード情報２０１３から検索されたICカードIDであるA00002をキーにして図７に示すICカード情報２０１３にアクセスし、そのICカードIDを含むエントリを検索し、検索したエントリに含まれる名前であるXXXXを、前記紐づけた情報に更に紐づける。
【００３４】
最後に、紐付け部２０６は、前記紐づけた情報を通知情報２０１５に格納する。この時、仮に名前XXXXが登録されていなかったとしても、紐付けられているカメラ受信画像とICカード情報から、名前XXXXと推定される人物の顔及びICカードID  A00002を紐づけることができることが特徴である。
【００３５】
S３０７処理は、S３０４処理もしくはS３０５処理が成功した時に実施する。中央サーバ１０１の通知部２０５は、駅サーバ１０３に通知情報２０１５に格納している指名手配犯発見の通知を送信する。
【００３６】
S３０８処理は、S３０４処理もしくはS３０５処理が成功した時に実施する。中央サーバ１０１の通知部２０５は、画像ＤＢサーバ１０２に通知情報２０１５に格納している指名手配犯発見の通知を送信する。
【００３７】
図３について、例えば駅Aの構内カメラ部１０３２により指名手配犯が撮像され、その後、駅Aの改札を通り乗車したケースを考える。このケースではまず、指名手配犯が構内カメラ部１０３２により撮像され、S３０５処理でその人物が照合され、検知されたとする。第２の突合せ部２０３は、この時に検知した画像を検知済み画像２０１４として記憶部２０１に登録する。これにより、次回以降の指名手配犯の画像サンプルが増え、指名手配犯発見の可能性が上がる。また、検知済み画像に当日身に着けている衣類等が映っていた場合、指名手配犯発見に向けた有力な情報となり、指名手配犯発見の可能性が上がる。その後、S３０７処理及びS３０８処理を通じて、指名手配犯が駅構内で検知されたことが駅Aの駅サーバ１０３及び画像DBサーバ１０２へ通知される。
【００３８】
その後、定期的に呼び出されるS３０４処理で、指名手配犯が改札通過時に改札カメラ部１０４により撮像された場合、第２の突合せ部２０３は、そのときのカメラ受信画像と、S３０１処理で受信した指名手配犯を含む警察受信画像及び前記S３０５処理で保存した過去の検知済み画像とを照合し、S３０４で撮像されたカメラ受信画像に含まれる人物が、警察受信画像及び検知済み画像に含まれる人物であることを検知する。
【００３９】
次に、紐付け部２０６は、S３０６処理で、S３０４処理で照合に用いられた改札通過時の指名手配犯を含む警察受信画像とカメラ受信画像と検知済み画像とを、改札情報２０１６およびICカード情報２０１３に記憶されているID等の個人情報に紐づける。これにより、指名手配犯画像を含む警察受信画像とカメラ受信画像と検知済み画像と、ICカード情報２０１３に記憶されているICカードと改札情報２０１６とを紐づけることができる。もし当該ICカードに名前や生年月日等も登録されていればそれらの情報も指名手配犯画像と結び付けることができる。その後、通知部２０５は、S３０７処理で駅Aに設置されている駅サーバ１０３に指名手配犯情報を通知する。また、通知部２０５は、S３０８処理で画像DBサーバ１０２へ指名手配犯情報を通知する。
【００４０】
また別の使い方として、駅構内の犯罪があった場合にも応用可能である。以下では、駅構内の場合について説明しているが、改札付近で犯罪が生じた場合も同様に考えることができる。
【００４１】
例えば、一昨日時点では無実であった人物ZZが昨夜酒に酔い、駅員に暴行を加え逃亡したとする。この場合、暴行があった駅に設置されている駅サーバ１０３の構内カメラ部１０６が駅構内を撮像している。したがって、改札管理部１０３１は、暴行が行われた時刻に構内カメラ部１０６により撮像された画像を駅サーバ１０３の表示部に表示する。当該表示により、暴行を受けた駅員がその画像を確認する。駅サーバ１０３は、入力装置から人物ZZを特定できた旨の入力を受け付けると、その人物ZZが撮像された時刻とその画像とを検知済み画像として中央サーバ１０１に送信する。中央サーバ１０１の第２の突合せ部２０３は、駅サーバ１０３から受信した検知済み画像を検知済み画像２０１４として記憶部２０１に記憶するとともに、記憶部２０１に記憶されているカメラ受信画像データ２０１２の中から、同じ人物ZZが撮像された画像を抽出する。
【００４２】
人物の特定方法については、例えば、人物の顔や服装などの特徴の一致度が所定の閾値（例えば、９０％）以上であれば当該人物であると判定する等、種々の方法を用いることができる。この例の場合、暴行を起こした駅の昨夜のカメラ画像及び昨夜の周辺駅のカメラ画像と、駅サーバ１０３から受信した検知済み画像とを照合すればよい。
【００４３】
第２の突合せ部２０３により人物ZZが検知できれば、その人物ZZが使用したICカードの足取りが確認できる。例えば、第２の突合せ部２０３は、検知済み画像に含まれる時刻をキーにして図６に示す改札情報２０１６にアクセスし、改札情報２０１６の中からその時刻と同じ入場時刻または退場時刻を含むエントリを検索し、検索したエントリに含まれるICカードIDを読み取る。
【００４４】
あるいは、第２の突合せ部２０３は、検知済み画像に含まれる時刻をキーにして図７に示すICカード情報２０１３にアクセスし、ICカード情報２０１３の中からその時刻と同じ入場時刻または退場時刻を含むエントリを検索し、検索したエントリに含まれるIDを読み取る。このように、第２の突合せ部２０３が、人物ZZが検知されたとき（この例では暴行されたとき）の画像が撮像された時刻をキーにして、当該人物の入退場履歴を追跡することができるため、その足取りを確認することができる。
【００４５】
また、ICカードに個人情報が登録されていれば、その人物の個人情報も把握することが可能である。この様に、改札通過した時点では犯罪者を検知することができなかった場合でも、その後の足取りを確認することにより、その犯人を検知することが可能である。また、改札通過時点で犯罪者を検知することができなかった場合、マスク等の変装をしていない可能性があり、検知しやすい可能性を期待できる。
【００４６】
あるいは、集団的犯罪組織に対しても応用可能である。例えば、第２の突合せ部２０３は、上記の手法により複数の指名手配犯の過去の足取りを検知し、もし同時刻に同駅で、複数の指名手配犯のそれぞれが乗降していたことがわかればそれらの人物は共に行動していた可能性が高く、またもし彼らが特定の駅で頻繁に降りていればアジト等である可能性がある。この様な使い方によりテロリスト等集団的に行動する犯罪組織の検挙に貢献できる。
【００４７】
図４は、中央サーバ１０１の処理フローを示す図であり、S３０４及びS３０５の詳細を示す図である。本処理により、受信カメラ画像と、警察受信画像及び検知済み画像とを照合する。
【００４８】
S４０１では、第１の突合せ部２０２、第２の突合せ部２０３は、画像DBサーバ１０２から受信した犯人画像を含む警察受信画像及び検知済み画像を、それぞれ、改札画像、構内画像と照合する。検知済み画像２０１４は、当日検知した画像であり、犯人の顔や服装が当日のものとなっているため、照合精度が向上する。もちろん、検知済み画像にさらに過去の画像を含めてもよい。このためもし指名手配犯が改札通過時はマスクを着用する等顔を隠したとしても、服装等の顔以外の外見に関する特徴情報から紐付が可能となる。また、事前に犯人画像がICカードに登録されている必要が無いため、もし過去のＩＣカード利用のデータが残されていれば指名手配犯が過去にどの様な駅で乗降したか、どの様な物を購入したか等、過去の足取りを把握することが可能となる。また、ICカード以外にも個人IDが特定できる端末に対する紐付も可能である。
【００４９】
S４０２では、第１の突合せ部２０２、第２の突合せ部２０３は、照合結果の合否を判定し、成功であれば４０３へ、失敗であれば４０４へ遷移する。
【００５０】
S４０３では、第１の突合せ部２０２、第２の突合せ部２０３は、検知した内容を記憶する。
【００５１】
S４０４では、第１の突合せ部２０２、第２の突合せ部２０３は、演算対象の全画像を確認済みかの合否を判定し、成功であれば処理終了、失敗であれば４０１へ遷移する。
【００５２】
図５は、カメラ受信画像データ２０１２の例を示す図である。カメラ受信画像データ２０１２は、改札画像に関するデータと、構内画像に関するデータとを含む。
【００５３】
図５に示すように、カメラ受信画像データ２０１２は、エントリを識別するための項番５０１、改札カメラ部１０４または構内カメラ部１０６を識別するためのカメラＩＤ５０２、駅改札を識別するための改札ＩＤ５０３、駅改札が設置されている駅を示す設置駅５０４、改札カメラ部１０４または構内カメラ部１０６が画像を撮像した時刻を示す撮影時刻５０５、改札カメラ部１０４または構内カメラ部１０６により撮像された画像を示す撮影画像５０６を含む。
【００５４】
第１の突合せ部２０２、第２の突合せ部２０３は、それぞれ、駅サーバ１０３から受信した改札画像、構内画像を、カメラ受信画像データ２０１２の撮影画像５０６として記憶する。また、第１の突合せ部２０２、第２の突合せ部２０３は、それぞれ、改札画像、構内画像とともに受信したカメラＩＤ５０２、改札ＩＤ５０３、設置駅５０４、撮影時刻５０５、撮影画像５０６を、記憶した撮影画像５０６と同じエントリに記憶する。
【００５５】
図５では、例えば、B駅に設置された改札カメラ部１０４のカメラIDがK152であり、その改札カメラ部１０４は、改札IDがEB1により識別される駅改札付近に設置されていることがわかる。また、当該改札カメラ部１０４は、ある日の10：05：01に、撮像画像ΩAを撮像したことがわかる。このように、第１の突合せ部２０２、第２の突合せ部２０３は、駅サーバ１０３から受信したカメラ受信画像とともに、これらの情報を履歴形式で蓄積してカメラ受信画像データ２０１２に記憶する。なお、#1や#4のエントリでは改札IDが記録されていない。その理由は、これらのエントリは構内カメラ部１０６により撮像されたカメラ受信画像であるためである。
【００５６】
図６は、改札情報２０１６の例を示す図である。図６に示すように、改札情報２０１６は、駅改札を識別するための改札ID６０１、利用者がその駅改札から入場したときの時刻を示す入場時刻６０２、利用者がその駅改札から退場したときの時刻を示す退場時刻６０３、入退場したときに使用されたICカードを識別するためのICカードID６０４を含む。
【００５７】
図６では、例えば、ICカードIDがA00002で識別されるICカードを所持した利用者が、10：05：01に、EB1で識別される駅改札から入場したことを示している。また、例えば、ICカードIDがA83194で識別されるICカードを所持した利用者が、10：05：00に、EB2で識別される駅改札から入場したことを示している。
【００５８】
図７は、ICカード情報２０１３の例を示す図である。  
図７に示すように、ICカード情報２０１３は、エントリを識別するための項番７０１、ICカードを識別するためのＩＤ７０２、そのICカードの所有者を示す名前７０３、そのICカードを用いて入場された駅を示す入場駅７０４、その入場された駅に設けられた駅改札のうち入場した駅改札を示す入場改札７０５、その駅改札から入場した時刻を示す入場時刻７０６、そのICカードを用いて退場された駅を示す退場駅７０７、その退場された駅に設けられた駅改札のうち退場した駅改札を示す退場改札７０８、その駅改札から退場した時刻を示す退場時刻７０９を含む。
【００５９】
図７では、例えば、IDがA00001で識別されるICカードの所有者は登録がなく、A駅の駅改札EA4から15：30：33に入場し、C駅の改札SJ2から16：30：12に退場したことを示している。また、IDがA00002で識別されるICカードの所有者はXXXXであり、B駅の駅改札EB1から10：05：01に入場し、現時点で未退場であり、いずれかの駅構内にいることがわかる。
【００６０】
このように、本システムでは、撮影された画像を検索クエリ画像として画像DBサーバ内を検索、照合する手段と、当該検索、照合でヒットした画像DBサーバ内の画像とICカード情報とを紐付けているため、撮像されたカードの使用者と記憶部に記憶されている人物の画像とを照合してカード情報と人物の画像とを紐付けることができる。
【符号の説明】
【００６１】
１０１：中央サーバ  １０２：画像DBサーバ  １０３：駅サーバ  ２０１：記憶部２０５：通知部  ２０６：紐付部  １０４：改札カメラ部  １０５：ICカード読取部  １０６：構内カメラ部
【図１】
2019046053.tif 000003
【図２】
2019046053.tif 000004
【図３】
2019046053.tif 000005
【図４】
2019046053.tif 000006
【図５】
2019046053.tif 000007
【図６】
2019046053.tif 000008
【図７】
2019046053.tif 000009