(57)【要約】【課題】入退室する意思の無い人の入退室を効果的に抑制し、セキュリティの向上を図る。【解決手段】入退管理システム５では、顔認証サーバ３０と入退管理サーバ５０とが通信可能に接続される。顔認証サーバ３０は、会議室１６０のドア１６１の付近に位置する人物ｈｍを撮像する顔認証カメラ１０撮像画像に基づいて、人物ｈｍがドア１６１の方を向いているか否かを検出し、その検出結果を入退管理サーバ５０に送る。入退管理サーバ５０は、顔認証サーバ３０から送られた検出結果に基づいて、人物ｈｍがドア１６１の方を向いていることが検出された場合、人物ｈｍが会議室１６０への入室または退出が許可された者であるか否かの判定結果に従って、ドア１６１の電気錠１６８を施錠または解錠に制御する。【選択図】図１
2019219721.tif 000002
【特許請求の範囲】
【請求項１】
顔認証装置と入退管理装置とが通信可能に接続された入退室認証システムであって、
前記顔認証装置は、
管理対象エリアの入り口の付近に位置する人を撮像するカメラの撮像画像に基づいて、前記人が前記入り口を向いているか否かを検出し、その検出結果を前記入退管理装置に送り、
前記入退管理装置は、
前記顔認証装置から送られた前記検出結果に基づいて、前記人が前記入り口を向いていることが検出された場合、前記人が前記管理対象エリアへの入室または退出が許可された者であるか否かの判定結果に従って、前記入り口の開閉状態を制御する、
入退室認証システム。
【請求項２】
前記顔認証装置は、
前記カメラの撮像画像の中から前記人の顔画像を検出し、その検出された前記人の顔画像が前記入り口を向いているか否かを検出する、
請求項１に記載の入退室認証システム。
【請求項３】
前記顔認証装置は、
前記カメラの撮像画像の中から前記人の顔画像を検出し、その検出された前記顔画像の中の視線が前記入り口を向いているか否かを検出する、
請求項１に記載の入退室認証システム。
【請求項４】
前記顔認証装置は、
前記カメラの撮像画像内に設定された顔検出エリアに前記人が入ったことの検出に応じて、前記人の顔画像の検出を開始する、
請求項２または３に記載の入退室認証システム。
【請求項５】
前記顔検出エリアは、前記入り口から所定の距離の範囲内に設定される、
請求項４に記載の入退室認証システム。
【請求項６】
前記顔検出エリアは、さらに、前記カメラの撮像画像において現れる人の一人分サイズを有する、
請求項５に記載の入退室認証システム。
【請求項７】
前記カメラは、前記入り口と前記入り口に近づく人との両方が画角内に含まれる位置に配置される、
請求項１に記載の入退室認証システム。
【請求項８】
前記カメラは、前記入り口に近づく人が画角内に含まれる位置に配置される、
請求項１に記載の入退室認証システム。
【請求項９】
顔認証装置と入退管理装置とが通信可能に接続された入退室認証システムを用いた入退室認証方法であって、
前記顔認証装置は、
管理対象エリアの入り口の付近に位置する人を撮像するカメラの撮像画像に基づいて、前記人が前記入り口を向いているか否かを検出し、その検出結果を前記入退管理装置に送り、
前記入退管理装置は、
前記顔認証装置から送られた前記検出結果に基づいて、前記人が前記入り口を向いていることが検出された場合、前記人が前記管理対象エリアへの入室または退出が許可された者であるか否かの判定結果に従って、前記入り口の開閉状態を制御する、
入退室認証方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、入り口の開閉を認証する入退室認証システムおよび入退室認証方法に関する。
【背景技術】
【０００２】
特許文献１では、管理対象エリアの入り口に位置する人が所持する端末から無線により取得されたＩＤ情報に基づいて、入り口に位置する人が管理対象エリアへの進入権限を有する人であるか否かを判定する、ＩＤ認証を行うＩＤ認証部と、入り口を所定の位置から撮影した撮影画像に所定の大きさの顔画像が含まれるか否かを示す、顔情報を取得する顔情報取得部と、ＩＤ認証の結果および顔情報に基づいて、入り口の開閉状態を制御する扉制御部、を有する入退管理装置が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１７−８６３８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１では、カメラにより撮影された撮影画像に対して人の顔画像の占める大きさが所定値以上であることを条件として、管理対象エリアへの入室のためのＩＤカードのＩＤ情報の取得およびＩＤ認証が行われる。しかし、特許文献１の構成では、人の顔の向きもしくは視線方向は考慮されていない。このため、例えば入退室する意思の無い人が管理対象エリアの入り口付近を通過した場合、撮影画像に対してその通過した人の顔画像の占める大きさが所定値以上であれば、ＩＤ認証の結果によっては管理対象エリアに入室でき、望まれない人の入室が可能となる点でセキュリティの劣化が生じる可能性があった。
【０００５】
本開示は、上述した従来の状況に鑑みて案出され、入退室する意思の無い人の入退室を効果的に抑制し、セキュリティの向上を図る入退室認証システムおよび入退室認証方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本開示は、顔認証装置と入退管理装置とが通信可能に接続された入退室認証システムであって、前記顔認証装置は、管理対象エリアの入り口の付近に位置する人を撮像するカメラの撮像画像に基づいて、前記人が前記入り口を向いているか否かを検出し、その検出結果を前記入退管理装置に送り、前記入退管理装置は、前記顔認証装置から送られた前記検出結果に基づいて、前記人が前記入り口を向いていることが検出された場合、前記人が前記管理対象エリアへの入室または退出が許可された者であるか否かの判定結果に従って、前記入り口の開閉状態を制御する、入退室認証システムを提供する。
【０００７】
また、本開示は、顔認証装置と入退管理装置とが通信可能に接続された入退室認証システムを用いた入退室認証方法であって、前記顔認証装置は、管理対象エリアの入り口の付近に位置する人を撮像するカメラの撮像画像に基づいて、前記人が前記入り口を向いているか否かを検出し、その検出結果を前記入退管理装置に送り、前記入退管理装置は、前記顔認証装置から送られた前記検出結果に基づいて、前記人が前記入り口を向いていることが検出された場合、前記人が前記管理対象エリアへの入室または退出が許可された者であるか否かの判定結果に従って、前記入り口の開閉状態を制御する、入退室認証方法を提供する。
【発明の効果】
【０００８】
本開示によれば、入退室する意思の無い人の入退室を効果的に抑制でき、セキュリティの向上を図ることができる。
【図面の簡単な説明】
【０００９】
【図１】実施の形態１に係る入退管理システムが設置された施設の内部を示す図
【図２】入退管理システムの構成例を示す図
【図３】顔認証サーバおよび入退管理サーバのハードウェア構成例を示す図
【図４】ドアの側方からの撮像画像においてドア領域および顔検出エリアが設定される設定画面を示す図
【図５】ドアの正面方向からの撮像画像においてドア領域および顔検出エリアが設定される設定画面を示す図
【図６】入退管理システムにおける設定動作を示すシーケンス図
【図７】入退管理システムにおける運用時の動作を示すシーケンス図
【図８】顔認証カメラの画角が広角に設定された場合、ドアの前を通る複数の人物に対する動作状況を示す図
【図９】顔認証カメラの画角が狭角に設定された場合、ドアの前を通る複数の人物に対する動作状況を示す図
【図１０】顔認証カメラが２台設置された場合、ドアの前を通る複数の人物に対する動作状況を示す図
【図１１】実施の形態２の入退管理システムにおける運用時の動作を示すシーケンス図
【発明を実施するための形態】
【００１０】
以下、適宜図面を参照しながら、本開示に係る入退室認証システムおよび入退室認証方法を具体的に開示した実施の形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。なお、添付図面および以下の説明は、当業者が本開示を十分に理解するために提供されるのであって、これらにより特許請求の範囲に記載の主題を限定することは意図されていない。
【００１１】
以下の各実施の形態では、本開示に係る入退室認証システムの一例として、施設等の内部で会議室に入室する際または退室する際の認証を行う入退管理システム５を例示して説明する。
【００１２】
（実施の形態１）
図１は、実施の形態１に係る入退管理システム５が設置された施設２００の内部を示す図である。施設２００は、例えば多くの会議室が用意されている公共施設である。施設２００の内部には、多くの人が通行する幅の広い通路１３０が設けられる。通路１３０の一方の側壁には、複数の窓１３１が配備される。通路１３０の他方の側壁には、会議室１５０，１６０，１７０の正面が設けられる。各会議室１５０，１６０，１７０の正面には、それぞれ室内に通じるドア１５１，１６１，１７１が設置される。図１では、複数（例えば３つ）の会議室を示すが、１つの会議室だけでもよい。
【００１３】
各ドア１５１，１６１，１７１は、それぞれ施錠（ロック）または解錠（アンロック）の状態に切替可能な電気錠１５８，１６８，１７８が設けられる。電気錠が施錠の状態に切り替えられると、ドアが閉扉して施錠される。電気錠が解錠の状態に切り替えられると、ドアが開扉して解錠される。
【００１４】
各ドア１５１，１６１，１７１には、それぞれカードリーダ１５５，１６５，１７５が設けられる。カードリーダ１５５，１６５，１７５は、人物ｈｍが所持するカードｃｄとの間で非接触通信を行い、カードｃｄに記録されたカード情報（例えば、識別情報であるＩＤ情報）を読み取る。ドア１５１，１６１前の通路１３０の天井あるいは柱には、それぞれ顔認証カメラ１０が設置される。また、ドア１７１の上部には、顔認証カメラ１０が設置される。
【００１５】
施設２００内の会議室１５０，１６０，１７０の裏側には、監視室１８０が設けられる。監視室１８０の内部には、顔認証サーバ３０、入退管理サーバ５０およびＰＣ（Personal Computer）７０が置かれる。
【００１６】
図２は、入退管理システム５の構成例を示す図である。３つの会議室１５０，１６０，１７０における入退室の管理は、同じである。ここでは、会議室１６０について主に説明するが、顔認証カメラ１０の設置箇所が会議室によって異なるので、必要に応じて他の会議室１５０、１７０についても説明する。
【００１７】
入退管理システム５は、ネットワークＮＷを介して接続される、顔認証カメラ１０、顔認証サーバ３０、入退管理サーバ５０、およびＰＣ７０を含む構成である。顔認証カメラ１０は、一例として、通路１３０に立設した柱１３０ｚの側壁に設置される。この顔認証カメラ１０は、通路１３０を通行する人物ｈｍの顔を含む画像を被写体として撮像する。実施の形態１では、顔認証カメラ１０は、画像を常時撮像し、ＰＣ７０および顔認証サーバ３０に撮像画像を繰り返し送信する常時撮像カメラである。なお、顔認証カメラは、人物が顔検出エリアに入った時にだけ撮像する人感検知センサ付きの感応式カメラであってもよい。また、ここでは、顔認証カメラは、固定カメラであるが、パンチルトズーム処理が可能なＰＴＺ（Pan Tilt Zoom）カメラであってもよい。
【００１８】
顔認証サーバ３０は、顔認証カメラ１０から送信される撮像画像を基に、通路１３０を通行する人物ｈｍの顔情報（顔の特徴量、顔の向き、視線の方向等）を検知する。入退管理サーバ５０は、ドア１６１に向かう人物を認証し、ドア１６１の開閉を制御する。ＰＣ７０は、ドア領域および顔検出エリアを設定する。
【００１９】
また、入退管理システム５は、カードリーダ１６５、カードｃｄおよび電気錠１６８を含む。カードリーダ１６５および電気錠１６８は、入退管理サーバ５０に接続される。カードリーダ１６５は、人物が所持するカードｃｄとの間で非接触通信を行う。電気錠１６８は、ドア１６１を自動で開閉し、ドア１６１を施錠または解錠する。
【００２０】
図３は、顔認証サーバ３０および入退管理サーバ５０のハードウェア構成例を示す図である。顔認証サーバ３０は、顔検出部３１、顔方向・視線検出部３２、顔情報蓄積部３３、顔照合部３４、および通信部３５を有する。
【００２１】
顔検出部３１は、顔認証カメラ１０による撮像画像に映る人物の顔画像を検出する。顔検出部３１は、撮像画像（つまり、リアルタイムに撮像されている現状のライブ画像）に含まれる、顔の中の目、眉毛、鼻、口等の各特徴点の位置、特徴点間の距離等を基に、顔画像と判断する。
【００２２】
顔方向・視線検出部３２は、検出された人物の顔の向きおよび視線の方向を検出する。顔の向きを検出する方法は、従来、種々提案されている。一例として、顔方向・視線検出部３２は、顔の向き（顔方向）を推定する場合、例えば顔が正面を向いている場合の目、鼻、口等の特徴点の位置座標を元に回転行列を演算し、回転行列後の位置座標と顔画像に含まれる目、鼻、口等の特徴点の位置座標とを比較し、近似している場合、回転行列に対応する顔の角度（ピッチ角、ロール角、ヨー角）を決定する。また、別の一例として、顔方向・視線検出部３２は、顔の向きを推定する場合、顔画像に対し肌色検出処理を行い、正面を向いている顔画像の肌色領域の重心と、所定の方向を向いている顔画像の肌色領域の重心とのずれ量を算出し、このずれ量から顔方向を決定する。
【００２３】
また、視線の方向は、視線検出の技術を用いて行われる。視線検出は、目の動きを検出することにより行われる。目の動きは、目の動かない箇所（目頭、目尻等）の位置（基準点）に対する目の動く箇所（虹彩等）の位置で特定される。例えば、右目の虹彩が目頭から離れ、目尻に近い場合、人物が右側を見ていると判断される。同様に、左目の虹彩が目頭から離れ、目尻に近い場合、人物が左側を見ていると判断される。また、目の動きは、目に赤外線を照射して得られる角膜反射を基準点とし、角膜反射と瞳孔との位置関係から検出されてもよい。
【００２４】
顔情報蓄積部３３は、人物の顔情報、例えば施設２００で働く従業員の顔情報を蓄積する。顔情報は、顔画像および顔の特徴量を含む。顔画像は、同じ人物における、正面の顔画像、左右の顔画像を含む。顔の特徴量は、目、鼻、口等の位置関係、眼鏡の有無、頭髪の有無等を含む。また、顔情報蓄積部３３は、顔の向きがドアの方向である場合の人物の顔情報、および視線の方向がドアの方向である場合の人物の視線情報を蓄積する。
【００２５】
顔方向・視線検出部３２は、顔情報蓄積部３３に蓄積された顔情報を基に、顔検出部３１で検出された顔の向きがドア１６１の方向であるか否かを判定する。また、顔方向・視線検出部３２は、顔情報蓄積部３３に蓄積された視線情報を基に、顔検出部３１で検出された視線の方向がドア１６１の方向であるか否かを判定する。顔方向・視線検出部３２は、顔方向と視線の方向との両方がドアの方向で揃っている場合、ドアの方向を向いていると判定してもよいし、いずれか一方がドアの方向である場合、ドアの方向を向いていると判定してもよい。ここでは、いずれか一方がドアの方向である場合、顔方向・視線検出部３２は、ドアの方向を向いていると判定する。
【００２６】
また、顔の向きは、人物の顔の向きが１回検出された場合に限らず、所定回数以上検出された場合に初めて検出されたとしてもよい。また、顔の向きが所定時間以上、継続して検出された場合に初めて検出されたとしてもよい。つまり、顔の向きの度合いが大きい場合に、顔の向きが検出されるとしてもよい。これにより、人物がチラッとドアの方を見る、いわゆるチラ見を、入退の意思と捉えてしまう誤判断を防止できる。視線においても同様である。
【００２７】
顔検出部３１で検出された顔の向きがドア１６１の方向である場合、または、顔検出部３１で検出された視線の方向がドア１６１の方向である場合、顔照合部３４は、顔検出部３１で検出された顔の顔情報と、顔情報蓄積部３３に蓄積されている顔情報とを照合する。例えば、顔検出部３１は、撮像画像（つまり、リアルタイムに撮像されている現状のライブ画像）に含まれる、顔の中の目、眉毛、鼻、口等の各特徴点の位置、特徴点間の距離等を基に、顔画像と判断し、この顔画像の部分を撮像画像から切り出す。顔照合部３４は、この切り出した顔画像と顔情報蓄積部３３に登録されている各人物の顔画像（テンプレート）とを照合するテンプレートマッチングを行う。顔照合部３４は、切り出した顔画像における各特徴点の位置、特徴点間の距離等の特徴量と、登録されている顔画像の対応する特徴量とを比較して類似度を算出し、類似度が閾値を超える場合、顔画像が一致したと判断する、顔認証を行う。
【００２８】
なお、顔照合部３４は、人工知能（ＡＩ：Artificial Intelligent）を用いて顔認証を行ってもよい。この場合、顔照合部３４を構成するプロセッサは、各人物の顔画像を教師データとして蓄積する。プロセッサは、上述した教師データを用いて、人工知能を用いたディープラーニング等の機械学習を行い、学習モデルを形成するニューラルネットワークの中間層のニューロンの数や重み付け係数を更新し、学習済みモデルを構築する。プロセッサは、この学習済みモデルを利用し、顔認証カメラによる撮像画像を入力し、撮像画像に映る人物の顔画像の認証を行い、認証結果を出力してもよい。
【００２９】
顔照合部３４は、顔照合の結果、顔画像が一致した場合、通信部３５およびネットワークＮＷを介して、入退管理サーバ５０の電気錠制御部５１に許可信号を送信する。電気錠制御部５1は、顔照合部３４からの許可信号を受信すると、電気錠１６８を解錠し、ドア１６１を自動で開く。なお、顔照合部３４は、顔照合の結果、顔画像が不一致である場合、許可信号を送信しない。従って、電気錠１６８は、解錠されず、ドア１６１は閉じたままである。
【００３０】
通信部３５は、有線または無線でネットワークＮＷに接続され、ネットワークＮＷを介して、入退管理サーバ５０、顔認証カメラ１０およびＰＣ７０と通信を行う。なお、通信部３５は、ネットワークＮＷを介することなく、入退管理サーバ５０、顔認証カメラ１０またはＰＣ７０と直接に接続され、これらと通信を行ってもよい。
【００３１】
入退管理サーバ５０は、電気錠制御部５１、通信部５２、カードリーダ通信部５３、ＩＤ位置検出部５４、ＩＤ情報蓄積部５５、ＩＤ認証部５６およびＩＤ情報設定部５７を有する。
【００３２】
電気錠制御部５１は、電気錠１６８を駆動し、電気錠１６８によるドア１６１の開閉を制御する。通信部５２は、有線または無線でネットワークＮＷに接続され、顔認証サーバ３０と通信を行う。なお、通信部５２は、ネットワークＮＷを介することなく、直接に顔認証サーバ３０と接続され、顔認証サーバ３０と通信を行ってもよい。
【００３３】
カードリーダ通信部５３は、カードリーダ１６５との間で非接触通信を行い、カードリーダ１６５で読み取られたカード情報を取得する。カードリーダ１６５は、人物が所持するカードｃｄとの間で近距離無線通信方式を用いて非接触通信を行う。近距離無線通信方式として、例えばＢｌｕｅｔｏｏｔｈ（登録商標）、Ｆｅｌｉｃａ（登録商標）等を用いてもよい。なお、カードリーダ１６５は、非接触通信の方式に限らず、カードｃｄに接触した状態（つまり、接触式通信）でカードｃｄに記録された情報を読み取る方式であってもよい。
【００３４】
ＩＤ位置検出部５４は、カードリーダ通信部５３で取得したカード情報に含まれる、ＩＤ情報を検出する。ＩＤ情報は、カードｃｄに登録されている人物を識別する情報を含む。なお、ＩＤ位置検出部５４は、ＩＤ情報だけでなく、カードリーダ１６５の位置情報（例えば、カードリーダ１６５が配置されたドアの識別情報）を、カードリーダ通信部５３で取得したカード情報から検出してもよい。
【００３５】
ＩＤ情報蓄積部５５は、多くの人物のＩＤ情報および各人物に関する情報を対応付けて蓄積する。例えば、人物として、施設２００内の従業員等が挙げられる。
【００３６】
ＩＤ認証部５６は、ＩＤ位置検出部５４によって検出されたＩＤ情報と、ＩＤ情報蓄積部５５に蓄積されているＩＤ情報とを照合し、照合の結果、ＩＤ認証が是認された（ＯＫである）場合、許可信号を電気錠制御部５１に出力する。電気錠制御部５1は、ＩＤ認証部５６から許可信号を受信すると、電気錠１６８を解錠し、ドア１６１を自動で開く。なお、ＩＤ認証部５６は、照合の結果、ＩＤ認証が否認された（ＮＧである）場合、許可信号を送信しない。従って、電気錠１６８は、解錠されず、ドア１６１は閉じたままである。
【００３７】
ＩＤ情報設定部５７は、運用者等による操作を受け付け、人物のＩＤ情報および人物に関する情報を設定し、ＩＤ情報蓄積部５５に登録する。
【００３８】
ここでは、顔照合により人物を認証する場合と、ＩＤ認証により人物を確認する場合との２つの運用が可能である。顔照合により人物を認証する場合、処理に時間を要するが、本人か否かの認証精度が高く、セキュリティが向上する。一方、ＩＤ認証により人物を確認する場合、カードに記録されている情報の人物がカードを所持する人物と異なる場合も想定されるが、処理に要する時間は短くなる。実施の形態１では、顔照合により人物を認証する場合を示し、実施の形態２では、ＩＤ認証により人物を確認する場合を示す。なお、顔照合により人物を認証する場合と、ＩＤ認証により人物を確認する場合とを併用してもよい。これにより、セキュリティをより一層向上できる。
【００３９】
図４は、ドア１６１の側方からの撮像画像ＧＺ１においてドア領域ＤＡ１および顔検出エリアＳＡ１が設定される設定画面ＧＭ１を示す図である。設定画面ＧＭ１は、運用者等によって操作されるＰＣ７０に表示される。設定画面ＧＭ１には、撮像画像ＧＺ１、設定ボタンｂｔ１、および削除ボタンｂｔ２が表示される。会議室１６０の場合、撮像画像ＧＺ１は、通路１３０の柱１３０ｚに設置された顔認証カメラ１０によって撮像され、ドア１６１を含むドア前方を側方から視たライブ画像である。ドア１６１は、左右にスライドして開閉するスライドドアである。ドア１６１の横には、カードリーダ１６５が取り付けられている。撮像画像ＧＺ１には、ドア１６１に近付く人物ｈｍが映っている。
【００４０】
設定ボタンｂｔ１は、ドア領域ＤＡ１および顔検出エリアＳＡ１の設定を開始する際、また、設定したドア領域ＤＡ１および顔検出エリアＳＡ１を保存する際、運用者等によって押下される。削除ボタンｂｔ２は、既に設定されているドア領域ＤＡ１および顔検出エリアＳＡ１、あるいは設定途中のドア領域ＤＡ１および顔検出エリアＳＡ１を消去する際、運用者等によって押下される。
【００４１】
運用者は、マウス操作によるカーソルＫｓを用いて、撮像画像ＧＺ１に含まれる、ドア１６１を囲むように、ドア領域ＤＡ１を設定する。設定画面ＧＭ１には、設定されたドア領域ＤＡ１が赤色の点線枠で描画される。ドア領域ＤＡ１が設定されると、ＰＣ７０は、ドア１６１から所定の距離の範囲内、例えばドア１６１の正面から３ｍの範囲内に、顔検出エリアＳＡ１を自動で設定する。運用者は、自動設定された顔検出エリアＳＡ１をカーソルＫｓで編集してもよい。設定画面ＧＭ１には、設定された顔検出エリアＳＡ１が青色の点線枠で描画される。
【００４２】
ここでは、運用者がドア領域ＤＡ１を設定したが、ＰＣ７０が撮像画像ＧＺ１に含まれるドア画像を画像処理により検出し、検出したドア画像を囲むように、ドア領域ＤＡ１を設定してもよい。ＰＣ７０は、ドア領域ＤＡ１が設定されると、ドア位置に対し所定の範囲を顔検出エリアとして自動で設定したが、運用者が顔検出エリアＳＡ１を設定してもよい。顔検出エリアは、人物を検出し、人物の高さを中心に所定の範囲に設定されてもよい。例えば、人物の高さの１／２以上の領域を顔検出エリアに設定してもよい。顔検出エリアは、矩形の領域に設定されたが、任意の形状に設定されてもよい。顔検出エリアは、１つに限らず、複数設定されてもよい。
【００４３】
図５は、ドア１６１の正面方向からの撮像画像ＧＺ２においてドア領域ＤＡ２および顔検出エリアＳＡ２が設定される設定画面を示す図である。会議室１７０の場合、撮像画像ＧＺ２は、ドア１６１の上方に設置された顔認証カメラ１０によって撮像され、ドア前方を正面から視たライブ画像である。撮像画像ＧＺ２には、ドア１６１に走りながら近付く人物ｈｍが映っている。撮像画像ＧＺ２には、ドア１６１が映っていない。この場合、運用者は、マウス操作によるカーソルＫｓを用いて、ドアが設置されている方向を指定する。例えば、ドアが設置されている方向の画面位置でマウスをドラッグしたり、ダブルクリックしたりする操作で指定する。ドア領域ＤＡ２が設定されると、設定画面ＧＭ２には、ドア領域ＤＡ２が赤色の点線枠で描画される。ドア領域ＤＡ２が設定されると、ＰＣ７０は、ドア１６１から所定の距離の範囲内、例えばドア１６１の正面から３ｍの範囲内に、顔検出エリアＳＡ２を自動で設定する。運用者は、自動設定された顔検出エリアＳＡ２をカーソルＫｓで編集してもよい。 設定画面ＧＭ２には、設定された顔検出エリアＳＡ２が青色の点線枠で描画される。
【００４４】
なお、設定画面ＧＭ１の場合と同様、ＰＣ７０は、ドア領域ＤＡ２が設定されると、ドア位置に対し所定の範囲を顔検出エリアとして自動で設定したが、運用者が顔検出エリアＳＡ２を設定してもよい。顔検出エリアは、人物を検出し、人物の高さを中心に所定の範囲に設定されてもよい。例えば、人物の高さの１／２以上の領域を顔検出エリアに設定してもよい。顔検出エリアは、矩形の領域に設定されたが、楕円形や多角形等の任意の形状に設定されてもよい。顔検出エリアは、１つに限らず、複数設定されてもよい。
【００４５】
次に、実施の形態１に係る入退管理システム５の動作手順を、図６を参照して説明する。
【００４６】
図６は、入退管理システム５における設定動作を示すシーケンス図である。
【００４７】
図６において、顔認証カメラ１０は、ドア付近を常時撮像し、撮像画像をＰＣ７０に送信する（Ｔ１）。ＰＣ７０は、顔認証カメラ１０による撮像画像を受信し、受信した撮像画像を画面に表示する。ＰＣ７０は、画面に表示された撮像画像に対し、ドア領域を設定するための、運用者による操作を受け付ける（Ｔ２）。
【００４８】
ＰＣ７０は、運用者によって設定されたドア領域を基に、顔検出エリアを自動設定する。ＰＣ７０は、ドア領域、およびドア領域に伴って設定された顔検出エリアを含む情報を顔認証サーバ３０に送信する（Ｔ３）。顔認証サーバ３０の通信部３５は、ＰＣ７０からドア領域および顔検出エリアの情報を受信すると、顔情報蓄積部３３に保存する。
【００４９】
図７は、入退管理システム５における運用時の動作を示すシーケンス図である。顔認証カメラ１０は、通路１３０を通行する人物ｈｍを撮像する（Ｔ１１）。顔認証カメラ１０は、撮像画像を顔認証サーバ３０の顔検出部３１に送信する（Ｔ１２）。顔検出部３１は、撮像画像に含まれる顔画像を検出し、この顔情報（顔画像を含む）を顔方向・視線検出部３２に通知する（Ｔ１３）。顔方向・視線検出部３２は、顔情報を基に、顔の向き（顔方向）および視線の方向を判定する。つまり、顔方向がドアの方向であるか、または視線の方向がドアの方向であるか否かを判定する。顔方向または視線方向がドアの方向である場合、顔方向・視線検出部３２は、顔方向または視線の方向の判定結果を顔照合部３４に送信する（Ｔ１４）。
【００５０】
顔照合部３４は、顔検出部３１で検出された顔画像と、顔情報蓄積部３３に蓄積されている人物の顔情報（顔画像、顔の特徴量等）とを照合する（Ｔ１５）。手順Ｔ１２〜Ｔ１５の処理は、顔検出エリアに人物がいる間、繰り返される。
【００５１】
顔照合部３４は、照合がＯＫである場合、通信部３５およびネットワークＮＷを介して、入退管理サーバ５０に許可信号（開扉制御情報）を送信する（Ｔ１６）。
【００５２】
入退管理サーバ５０の通信部５２は、顔認証サーバ３０から開扉制御情報を受信する。通信部５２は、開扉制御情報を電気錠制御部５１に送信する。電気錠制御部５１は、電気錠１６８を解錠し、ドア１６１を開扉する（Ｔ１７）。これにより、ドア１６１は自動で開く。
【００５３】
図８は、顔認証カメラ１０の画角が広角に設定された場合、ドア１６１の前を通る複数の人物に対する動作状況を示す図である。なお、図８では、説明を分かり易くするために、ドア１６１や顔認証カメラ１０の位置は、模式的に描かれている。なお、図９、図１０においても同様である。通路１３０の上方に設置された顔認証カメラ１０は、ドア１６１の前を通行する３人の人物ｈｍ４〜ｈｍ６とドア１６１とを画角内に含むように撮像する。この場合、３人の人物ｈｍ４〜ｈｍ６の中で先頭に位置する人物ｈｍ４は、ドア１６１に顔を向けているが、残りの２人の人物ｈｍ５，ｈｍ６は、ドア１６１ではない別の方向を向いている。入退管理システム５は、先頭の人物ｈｍ４がドア１６１に顔を向けているとして、ドア１６１を自動で開けるように動作する。従って、入退管理システム５は、先頭の人物ｈｍ４だけの入退室を可能にドア１６１の開錠を制御可能であり、人物ｈｍ５，ｈｍ６の入退室をできないようにドア１６１の開錠を禁止する。
【００５４】
図９は、顔認証カメラ１０の画角が狭角に設定された場合、ドア１６１の前を通る複数の人物に対する動作状況を示す図である。顔認証カメラ１０は、ドア１６１の前を通行する３人の人物ｈｍ４〜ｈｍ６のうち、先頭の人物ｈｍ４だけ（人物ｈｍの一人分サイズ）を撮像する。先頭に位置する人物ｈｍ４は、ドア１６１に顔を向けているが、残りの２人の人物ｈｍ５，ｈｍ６は、ドア１６１ではない別の方向を向いている。この場合、入退管理システム５は、先頭の人物ｈｍ４がドア１６１に顔を向けているとして、ドア１６１を自動で開けるように動作する。実施の形態１では、顔認証カメラ１０の画角が広角あるいは挟角のいずれでも、入退管理システム５によりドア１６１が開錠可能に制御される時間は、一人分の人物が通過可能な時間である。先頭の人物ｈｍ４が通過すると、ドア１６１は閉扉する。つまり、入退管理システム５は、次の人物ｈｍ５が顔認証カメラ１０によって撮像され、顔の向きがドア１６１に向いていると判定されるまで、ドア１６１を閉扉している。従って、顔をドアに向けることなく、共連れで入室しようとする人物ｈｍ５，ｈｍ６の行動を阻止できる。なお、人物ｈｍ５，ｈｍ６がそれぞれドア１６１に顔を向けていると判定された場合、入退管理システム５は、それぞれにおいてドア１６１を開ける。
【００５５】
図１０は、顔認証カメラ１０が２台設置された場合、ドア１６１の前を通る複数の人物ｈｍ４〜ｈｍ６に対する動作状況を示す図である。この場合、後方の顔認証カメラ１０は、人物ｈｍを背後から撮像可能である。例えば、先頭にいる人物ｈｍ４の背後に不適格者である人物ｈｍ７がいる場合を想定する。この場合、後方の顔認証カメラ１０は、背後にいる人物ｈｍ７を撮像可能である。従って、共連れで入退しようとする人物ｈｍ７を見つけて追尾することも可能となる。
【００５６】
以上により、実施の形態１に係る入退管理システム５では、顔認証サーバ３０（顔認証装置の一例）と入退管理サーバ５０（入退管理装置の一例）とが通信可能に接続される。顔認証サーバ３０は、会議室１６０（管理対象エリアの一例）のドア１６１（入り口の一例）の付近に位置する人物ｈｍ（人の一例）を撮像する顔認証カメラ１０の撮像画像に基づいて、人物ｈｍがドア１６１の方を向いているか否かを検出し、その検出結果を入退管理サーバ５０に送る。入退管理サーバ５０は、顔認証サーバ３０から送られた検出結果に基づいて、人物ｈｍがドア１６１の方を向いていることが検出された場合、人物ｈｍが会議室１６０への入室または退出が許可された者であるか否かの判定結果に従って、ドア１６１の電気錠１６８を施錠または解錠（開閉状態の一例）を制御する。
【００５７】
これにより、入退管理システム５は、入退室する意思の無い人の入退室を効果的に抑制できるので、部外者の侵入等を無くすことができてセキュリティの向上を図ることができる。また、入退管理システム５によれば、顔照合により人物を認証するので、入退室する意思のある本人（例えば従業員）である可能性が高く、高いセキュリティを確保できる。
【００５８】
また、顔認証サーバ３０は、顔認証カメラ１０の撮像画像の中から人物ｈｍの顔画像を検出し、その検出された人物ｈｍの顔画像がドア１６１を向いているか否かを検出する。これにより、入退管理システム５によれば、通行人の中から入退室の意思のある人物を適正に選別できる。従って、入退管理システム５によれば、むやみにドアを解錠して開けてしまう機会が減る。また、入退管理システム５によれば、顔をむけるしぐさは、入退室の意思のある人が行う自然な所作であるので、入退室の意思を無理に示すよう仕向けることを不要にできる。
【００５９】
また、顔認証サーバ３０は、顔認証カメラ１０の撮像画像の中から人物ｈｍの顔画像を検出し、その検出された顔画像の中の視線がドア１６１を向いているか否かを検出する。これにより、入退管理システム５によれば、顔をドアに向けることなく目だけをドアに向けるしぐさをする人物をはじいてしまうことなく、適正に対応できる。また、入退管理システム５によれば、顔を大きく向ける所作をしなくても簡便に意思を伝達できる。
【００６０】
また、顔認証サーバ３０は、顔認証カメラ１０の撮像画像内に設定された顔検出エリアＳＡ１に人物ｈｍが入ったことの検出に応じて、人物ｈｍの顔画像の検出を開始する。これにより、入退管理システム５によれば、入退の意思のある人物が顔を向けると想定される領域に顔検出エリアを設定することで、顔検出エリア外の人物を対象から外すことができる。従って、入退管理システム５によれば、処理の負荷を軽減できる。また、入退管理システム５によれば、顔検出エリアに人物ｈｍが入ったタイミングで顔検出を行うことで、入退室の意思のある人物を高精度に選別できる。
【００６１】
また、顔検出エリアＳＡ１は、ドア１６１から所定の距離の範囲内に設定される。これにより、入退管理システム５によれば、例えばドア１６１に対して顔検出エリアを適正に設定できる。
【００６２】
また、顔検出エリアＳＡ１は、顔認証カメラ１０の撮像画像において現れる人物ｈｍの一人分サイズを有する。これにより、入退管理システム５によれば、仲間が連れ立って通行する、いわゆる共連れがある場合でも、個々の人物を選別できる。従って、入退管理システム５によれば、共連れに見せかけて入退しようとする悪意のある人物を排除できる。
【００６３】
また、顔認証カメラ１０は、ドア１６１と、ドア１６１に近づく人物ｈｍとの両方が画角内に含まれる位置に配置される。これにより、入退管理システム５によれば、ドア１６１に対して側方に顔認証カメラ１０を配置できる。また、顔認証カメラ１０は、入退室の意思のある人物を確実に撮像できる。運用者は、撮像画像を見て、ドアに向かう人物が入退の意思のある人物であるか否かを個別に確認できる。
【００６４】
また、顔認証カメラ１０は、ドア１６１に近づく人物ｈｍが画角内に含まれる位置に配置される。これにより、入退管理システム５によれば、ドア１６１に顔認証カメラ１０を取り付けることができる。また、入退管理システム５によれば、撮像画像に映る人物の顔を正面から捉えることができる。従って、入退管理システム５によれば、誤検知を減らし、顔検出の精度を高めることができる。
【００６５】
（実施の形態２）
実施の形態１では、顔照合により人物を認証する場合を示した。実施の形態２では、ＩＤ認証により人物を確認する場合を示す。実施の形態２に係る入退管理システムは、実施の形態１とほぼ同一の構成を有する。実施の形態１と同一の構成要素については同一の符号を用いることで、その説明を省略する。
【００６６】
図１１は、実施の形態２の入退管理システム５における運用時の動作を示すシーケンス図である。手順Ｔ１２〜Ｔ１３における動作は、実施の形態１と同様であるため、重複する内容の説明は簡略化または省略し、異なる内容について説明する。
【００６７】
顔方向・視線検出部３２は、顔方向または視線の方向がドア１６１の方向である場合、顔方向・視線情報を、通信部３５およびネットワークＮＷを介して、入退管理サーバ５０に送信する（Ｔ２１）。この場合、顔照合部３４は、顔方向・視線情報をそのまま通信部３５に通過させる。入退管理サーバ５０の通信部５２は、顔方向・視線情報をＩＤ認証部５６に通知する。
【００６８】
ＩＤ認証部５６は、ＩＤ位置検出部５４によって検出されたＩＤ情報と、ＩＤ情報蓄積部５５に蓄積されているＩＤ情報とを照合し、ＩＤ認証を行う（Ｔ２２）。照合の結果、ＩＤ認証がＯＫである場合、ＩＤ認証部５６は、許可信号（開扉制御情報）を電気錠制御部５１に出力する（Ｔ２３）。電気錠制御部５１は、ＩＤ認証部５６から開扉制御情報を受信すると、電気錠１６８を解錠し、ドア１６１を開扉する（Ｔ２４）。これにより、ドア１６１は、自動で開く。
【００６９】
このように、実施の形態２に係る入退管理システムでは、人物が所持するカードｃｄに記憶されたＩＤ情報（識別情報の一例）を読み取ることで、ＩＤ認証により人物を速やかに確認できる。また、実施の形態２に係る入退管理システム５によれば、誤検知が起こりにくい。
【００７０】
以上、図面を参照しながら各種の実施の形態について説明したが、本開示はかかる例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例、修正例、置換例、付加例、削除例、均等例に想到し得ることは明らかであり、それらについても当然に本開示の技術的範囲に属するものと了解される。また、発明の趣旨を逸脱しない範囲において、上述した各種の実施の形態における各構成要素を任意に組み合わせてもよい。
【００７１】
例えば、上述した実施の形態１，２では、施設内の室（会議室）に出入りするためのドアの開閉を示したが、施設の正面玄関に、あるいは広場や公園等の場所に出入りするためのゲートの開閉についても、本開示は同様に適用可能である。
【産業上の利用可能性】
【００７２】
本開示は、入退室する意思の無い人の入退室を効果的に抑制し、セキュリティの向上を図る入退室認証システムおよび入退室認証方法として有用である。
【符号の説明】
【００７３】
５  入退管理システム
１０  顔認証カメラ
３０  顔認証サーバ
３１  顔検出部
３２  顔方向・視線検出部
３３  顔情報蓄積部
３４  顔照合部
３５  通信部
５０  入退管理サーバ
５１  電気錠制御部
５２  通信部
５３  カードリーダ通信部
５４  ＩＤ位置検出部
５５  ＩＤ情報蓄積部
５６  ＩＤ認証部
５７  ＩＤ情報設定部
７０  ＰＣ
１６１  ドア
１６５  カードリーダ
１６８  電気錠
【図１】
2019219721.tif 000003
【図２】
2019219721.tif 000004
【図３】
2019219721.tif 000005
【図４】
2019219721.tif 000006
【図５】
2019219721.tif 000007
【図６】
2019219721.tif 000008
【図７】
2019219721.tif 000009
【図８】
2019219721.tif 000010
【図９】
2019219721.tif 000011
【図１０】
2019219721.tif 000012
【図１１】
2019219721.tif 000013