(57)【要約】【課題】  認証対象者が両手に荷物を持ったままでも認証が可能とし、認証時間の短縮化、作業効率の向上を図る  【解決手段】  （１）顔画像を予め記憶する記憶手段と、（２）所定エリアを撮影可能なカメラと、（３）所定エリアを通過する人を検知可能な第１のセンサと、（４）所定エリア内であって、第１のセンサよりもカメラに近いエリアを通過する人を検知可能な第２のセンサと、（５）第１のセンサが通過を検知し、次に第２のセンサが通過を検知した場合に、カメラが撮影している画像中から顔画像を認識する顔認識手段と、（６）顔認識手段が認識した顔画像と予め登録されている顔画像との類似度が閾値以上であるかを判定する顔認証手段と、（７）顔認識手段が認識した顔画像と予め登録されている顔画像との類似度が閾値以上であると判定されない場合に、作動する警報手段とを備えることにある。【選択図】    図１
2006221378.tif 000002
【特許請求の範囲】
【請求項１】
顔画像を予め記憶する記憶手段と、
所定エリアを撮影可能なカメラと、
前記所定エリアを通過する人を検知可能な第１のセンサと、
前記所定エリア内であって、前記第１のセンサよりも前記カメラに近いエリアを通過する人を検知可能な第２のセンサと、
前記第１のセンサが通過を検知し、次に前記第２のセンサが通過を検知した場合に、前記カメラが撮影している画像中から顔画像を認識する顔認識手段と、
前記顔認識手段が認識した顔画像と予め記憶されている顔画像との類似度が閾値以上であるかを判定する顔認証手段と、
前記認識手段が認識した顔画像と予め登録されている顔画像との類似度が閾値以上であると前記認証手段によって判定されない場合に、作動する警報手段とを備えることを特徴とする顔認証を利用した警報システム。
【請求項２】
前記第１のセンサが通過を検知し、次に前記第２のセンサが通過を検知した時刻と、前記時刻に前記カメラが撮影した動画像と、前記時刻に前記顔認識手段が顔と認識した顔画像と、前記時刻に前記顔認証手段が行った判定の結果とを関連づけて記憶する記憶手段をさらに備えることを特徴とする請求項１に記載の顔認証を利用した警報システム。
【請求項３】
顔画像を予め記憶手段に記憶するステップ、
カメラが所定エリアを継続的に撮影し、第１のセンサが前記エリアを通過する人を検知し、第２のセンサが前記エリア内であって、前記第１のセンサよりも前記カメラに近いエリアを通過する人を検知した場合に、前記カメラが撮影している画像中から認識手段が顔画像を認識するステップ、
前記顔認識手段が認識した顔画像と予め記憶されている顔画像との類似度が閾値以上であるかを顔認証手段が判定するステップ、
前記顔認識手段が認識した顔画像と予め登録されている顔画像との類似度が閾値以上であると前記顔認証手段によって判定されない場合に、警報手段が作動するステップを含むことを特徴とする顔認証を利用した警報方法。
【請求項４】
前記第１のセンサが通過を検知し、次に前記第２のセンサが通過を検知した時刻と、前記時刻に前記カメラが撮影した動画像と、前記時刻に前記顔認識手段が顔と認識した顔画像と、前記時刻に前記顔認証手段が行った判定の結果とを関連づけて記憶するステップをさらに含むことを特徴とする請求項３に記載の顔認証を利用した警報方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、監視カメラを用いて所定の場所への入室を監視し、不審者を検知したら不審者の入室に対して警報を発動するためのシステム及び方法に関する。
【背景技術】
【０００２】
従来、顔、指紋、掌紋などの生体情報を用いて、認証対象者が登録者であるかどうかを認証する個人認証装置があった。そして、個人認証装置は、所定の場所へ入室しようとする人を監視するシステムに適用されている（例えば、特許文献１参照）。
【特許文献１】特開２００４−４６６９７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかし、指紋、掌紋を認証判断に用いると認証対象者は指又は手を指紋又は掌紋読み取り装置にかざさなければならない。このため、認証対象者が両手を使って荷物を持っている場合には、その荷物を一旦、置かなければならなかった。
【課題を解決するための手段】
【０００４】
本発明の第１の特徴は、（１）所定エリアを撮影可能なカメラと、（２）所定エリアを通過する人を検知可能な第１のセンサと、（３）所定エリア内であって、第１のセンサよりもカメラに近いエリアを通過する人を検知可能な第２のセンサと、（４）第１のセンサが通過を検知し、次に第２のセンサが通過を検知した場合に、カメラが撮影している画像中から顔画像を認識する顔認識手段と、（５）顔認識手段が認識した顔画像と予め記憶されている顔画像との類似度が閾値以上であるかを判定する顔認証手段と、（６）顔認識手段が認識した顔画像と予め登録されている顔画像との類似度が閾値以上であると顔認証手段によって判定されない場合に、作動する警報手段とを備えることにある。センサとしては例えば赤外線センサが使用可能であり、熱型センサでも光型センサでも良い。
【０００５】
本発明の第２の特徴は、第１のセンサが通過を検知し、次に第２のセンサが通過を検知した時刻と、前記時刻にカメラが撮影した動画像と、前記時刻に顔認識手段が顔と認識した画像と、前記時刻に顔認証手段が行った判定の結果とを関連づけて記憶する記憶手段をさらに備えることにある。
【発明の効果】
【０００６】
本発明の第１の特徴によれば、第１のセンサ、第２のセンサという順番に各センサが人の通過を検知した場合に、カメラが撮影している画像中から顔画像を識別し、さらに識別された顔画像と予め登録されている顔画像との類似度を調べ、類似度が閾値以上であると判定された場合を除き、警報手段が作動させられる。このため、認証対象者が両手に荷物を持ったままでも認証が可能となり、他の認証方式と比較して認証時間の短縮化、作業効率の向上を図ることができる。
【０００７】
本発明の第２の特徴によれば、第１のセンサ、第２のセンサという順番に各センサが人の通過を検知した場合に、その日時と、その時に撮影された動画像と、その動画像中から識別・抽出された顔画像と、及びその顔画像について顔認証手段が行った判定の結果とが関連づけて記憶される。「関連づけて記憶」とは、例えばこれら日時等を表示するテキストデータと動画像ファイル、顔画像ファイルとがハイパーリンクによって結びつけられ、表示画面上に表示されたテキスト又は顔画像（適宜、「顔インデックス」と言う。）をポインティングデバイスを用いてクリック等することによってリンクされている動画像ファイルが再生されることを意味する。
【発明を実施するための最良の形態】
【０００８】
以下に図面に基づいて、本発明を実施するための最良の形態を説明する。なお、以下の説明は、単なる例示に過ぎず、本発明の技術的範囲は以下の説明に限定されるものではない。
【０００９】
図１は、本実施の形態に係る警報システムの構成を示す全体概略図である。図１に示すように、警報システム１００は、第１のセンサ１０１、第２のセンサ１０３、制御部１０５、ライト１０７、スピーカ１０９、表示手段１１１、顔認識手段１１３、顔認証手段１１５、記憶手段１１７、及びカメラ（撮影手段）１１９を備える。警報システム１００はさらに予め顔画像を登録する際に使用するパーソナルコンピュータ（ＰＣ）１２１を備えることが好ましい。第１のセンサ１０１、第２のセンサ１０３、ライト１０７、スピーカ１０９、表示手段１１１、顔認識手段１１３、顔認証手段１１５、記憶手段１１７、及びカメラ（撮影手段）１１９等は制御部１０５の制御の下で後述する機能を発揮する。
【００１０】
図２は、本実施の形態に係る警報システムにおける第１のセンサ、第２のセンサ、カメラの相対的な位置関係などを示す図である。図２に示す例では、搬入口と搬出口の双方の室内側（カメラ１１９が設置されている側）を検知対象エリアとするように、第１のセンサ１０１と第２のセンサ１０３とが設置されている。第１のセンサ１０１が搬出入口に近い側、第２のセンサ１０３がカメラ１１９に近い側にそれぞれ設置されている。第１のセンサ１０１ａと１０１ｂとの間を誰かが通過し、第１のセンサ１０１ａと１０１ｂとの間の赤外線が遮断されると第１のセンサ１０１は人の通過を検知する。同様に、第２のセンサ１０３ａと１０３ｂとの間を誰かが通過し、第２のセンサ１０３ａと１０３ｂとの間の赤外線が遮断されると第２のセンサ１０３は人の通過を検知する。カメラ１１９ａと１１９ｂは搬入口を監視し、カメラ１１９ｃと１１９ｄは搬出口を監視する。そして、搬入口から約１．５ｍの位置で入室者に対する認証が完了するものとする。
【００１１】
顔認識手段１１３は、カメラ１１９によって撮影された映像中から顔映像を探しだし、出力する。
【００１２】
顔認証手段１１５は、顔認識手段１１３が認識した顔画像と、既に登録されている顔画像との類似度が閾値以上であるかを判定することによって、入室者が既に登録されている人か否かを判断する。
【００１３】
ライト１０７は、顔認証手段１１５が入室者を既に登録されている人であると判断しなかった場合に、作動する。例えば、入室者が登録者であると判断されなかった場合は赤色回転灯が作動する。なお、本実施の態様では、入室者が登録者であると判断された場合は青色回転灯が作動するものとする。
【００１４】
スピーカ１０９も、顔認証手段１１５が入室者を既に登録されている人であると判断しなかった場合に、作動する。例えば、入室者が登録者であると判断されなかった場合はブザー音を出力する。
【００１５】
表示手段１１１は、例えば、カメラ１１９によって撮影されている動画像をリアルタイムで表示する第１の表示エリアと、直近の入室者の顔画像をインデックス表示する第２のエリアと、何者かが入室した日時及び入室者が登録者又は未登録者のいずれか（ステータス）を表示する第３の表示エリアとを備える。
【００１６】
記憶手段１１７は、第１のセンサ１０１が人の通過を検知し、次に第２のセンサ１０３が人の通過を検知した場合、つまり人が入ってきたことを検知した場合、その日時と、入ってきた者が登録者か未登録者かという認証手段１１５の判断結果（ステータス）と、入ってきた者を撮影した動画像と、その動画像中から抽出された顔画像とを関連付けて記憶する。
【００１７】
図３は、本実施の形態に係る警報システムにおける処理の一例を示すフローチャートである。図３に示すように、まず第１のセンサ１０１が人（又は物）の通過を検知し（ステップＳ１１１）、次に第２のセンサ１０３も同様に人（又は物）の通過を検知したら（ステップＳ１１３）、顔認識手段１１３はカメラ１１９が撮影している動画像中から人の顔を識別し抽出しようとする（ステップＳ１１５）。顔認識手段１１３が動画像中から顔を認識できた場合（ステップＳ１１７でＹＥＳの場合）、顔認識手段１１３は顔と識別した画像を抽出し出力する。顔認識手段１１３が顔と識別した画像を出力した場合、顔認証手段１１５は出力された顔画像と予め記憶手段１１７に記憶されている顔画像との類似度が閾値以上か否かを判断する（ステップＳ１１９）。顔認証手段１１５が２つの顔画像の類似度が閾値以上であると判断した場合、つまり顔認証がされた場合（ステップＳ１２１でＹＥＳの場合）、警報は発動しない（ステップＳ１２３）。例えば、ライト１０７は青色回転灯が作動し、スピーカ１０９は音を出力しない。なお、スピーカ１０９から、予め記憶手段１１７に記憶されている認証時用の音声ファイルの再生音、例えば「認証されました」などのメッセージを出力するとしても良い。
【００１８】
一方、入室者がサングラスやマスクで顔の一部を覆い隠していた、背中を向けて後ろ向きに入室して来たなどの理由によって、顔認識手段１１３が顔を認識できなかった場合（ステップＳ１１７でＮＯの場合）、又は顔認識手段１１３が顔と識別して出力した画像を、顔認証手段１１５が認証しなかった場合（ステップＳ１２１でＮＯの場合）、警報が発動する（ステップＳ１２５）。例えば、ライト１０７は赤色回転灯が作動し、スピーカ１０９からはブザー音が出力される。なお、スピーカ１０９から、予め記憶手段１１７に記憶されている非認証時用の音声ファイルの再生音、例えば「認証されませんでした」などのメッセージを出力するとしても良い。
【００１９】
さらに、記憶手段１１７は、顔認証手段１１５が認証又は非認証をした日時と、その認証又は非認証の結果（ステータス）と、認証又は非認証の判断対象となった顔画像（顔インデックス）と、その顔画像の抽出元である動画像（その日時にカメラ１１９が撮影した動画像）を関連付けて記憶する（ステップＳ１２７）。日時等の関連付けられた情報は、いずれも表示手段１１１上にて確認可能であることが好ましい。
【００２０】
図４は、本実施の形態に係る警報システムにおける日時、ステータス、顔画像及び動画像の表示例を示す。例えば、表示手段１１１の表示画面１１１０は、カメラ１１９によって撮影されている動画像をリアルタイムで表示する第１の表示エリア（ＬＩＶＥ画面表示エリア）１１１１と、直近の入室者の顔画像をインデックス表示する第２のエリア（顔インデックス表示エリア）１１１２と、何者かが入室した日時及び入室者が登録者又は未登録者のいずれか（ステータス）を表示する第３の表示エリア１１１３とを備える。
【００２１】
図４の例では、第３の表示エリア１１１３には
日  時                ステータス
2005.2.1.10:00:00〜10:00:03    未登録者
2005.2.1.10:00:05〜10:00:07    登録者
2005.2.1.10:00:09〜10:00:11    未登録者
と表示されている。未登録者の日時、ステータスについては、注意喚起のため赤色などで表示されることが好ましい。
【００２２】
表示画面１１１０にはマウスなどのポインティングデバイスによって移動可能なポインタが表示され、かかるポインタを用いて例えば「2005.2.1.10:00:00〜10:00:03    未登録者」をクリックすると、「2005.2.1.10:00:00〜10:00:03」にカメラ１１９が撮影し、記憶手段１１７に記憶されている動画像ファイルが再生され、ＬＩＶＥ画面表示エリア１１１１に表示されることが好ましい。
【００２３】
同様に、ポインタを用いて顔インデックス表示エリア１１１２に表示されている顔画像をクリックすると、クリックされた顔画像に関連付けて記憶手段１１７に記憶されている動画像ファイルが再生され、ＬＩＶＥ画面表示エリア１１１１に表示されることが好ましい。
【００２４】
上記の如く、本実施の形態によれば、第１のセンサ１０１が人の通過を検知し、次に第２のセンサ１０３が人の通過を検知すると、カメラ１１９が撮影した画像中から顔認識手段１１３が人の顔画像を認識・抽出し、さらにその顔画像と予め登録されている顔画像との類似度が閾値以上であるかを顔認証手段１１５が判断する。顔認証手段１１５が、２つの顔画像の類似度が閾値以上であると判断した場合、つまり入室者を予め登録されている人と判断した場合は、ライト１０７は青色回転灯が作動し、スピーカ１０９から音は出力されない。一方、顔認証手段１１５が、２つの顔画像の類似度が閾値以上であると判断しなかった場合、つまり入室者を予め登録されている人と判断しなかった場合は、ライト１０７は赤色回転灯が作動し、スピーカ１０９からブザー音が出力される。
【００２５】
図５は、第１のセンサ、第２のセンサの取り付け位置に関する別態様を示す。図５に示す例では、第１のセンサ１２５を入口近くの天井に設置し、第２のセンサ１２７を第１のセンサ１２５よりもカメラ１１９寄りの天井に設置する。
【図面の簡単な説明】
【００２６】
【図１】本実施の形態に係る警報システムの構成を示す全体概略図である。
【図２】本実施の形態に係る警報システムにおける第１のセンサ、第２のセンサ、カメラの相対的な位置関係などを示す図である。
【図３】本実施の形態に係る警報システムにおける処理の一例を示すフローチャートである。
【図４】本実施の形態に係る警報システムにおける日時、ステータス、動画像及び静止画像（顔インデックス）の表示例を示す図である。
【図５】第１のセンサ、第２のセンサの取り付け位置に関する別態様を示す図である。
【符号の説明】
【００２７】
１０１…第１のセンサ  １０３…第２のセンサ  １０５…制御部
１０７…ライト        １０９…スピーカ      １１１…表示手段
１１３…顔認識手段    １１５…顔認証手段    １１７…記憶手段
１１９…カメラ        １２１…ＰＣ          １２３…ＬＡＮ
【図１】
2006221378.tif 000003
【図２】
2006221378.tif 000004
【図３】
2006221378.tif 000005
【図４】
2006221378.tif 000006
【図５】
2006221378.tif 000007