(57)【特許請求の範囲】
【請求項１】
建物の出入口に設けられ、該建物の出入口近くに存在する人物の位置を検知する人物位置検知部と、
前記人物位置検知部が位置を検知した人物に第１識別子を設定する第１識別子設定部と、
前記人物位置検知部が検知する領域に存在する人物の顔を撮影する撮影部と、
前記撮影部が撮影した画像上の人物の顔から当該人物を特定すると共に前記画像上の人物の顔の位置に基づいて第２識別子を設定することにより、特定した人物に第２識別子を対応させる第２識別子設定部と、
前記第１識別子設定部が設定した第１識別子と前記第２識別子設定部が設定した第２識別子とを対応付けることにより特定された人物に第１識別子を対応させ、第２識別子設定部で特定された人物の位置を前記人物位置検知部で検知して、特定された人物の前記建物への入退場を判定する入退場判定部と、
を備えた入退場管理システム。
【請求項２】
前記第１識別子設定部は、前記人物位置検知部が検知した人物のうち左右方向での所定の端部に位置する人物から順に前記第１識別子を設定し、
前記第２識別子設定部は、前記撮影部が撮影した画像内の左右方向での前記所定の端部に位置する人物から順に前記第２識別子を設定し、
前記入退場判定部は、設定された順が同じ前記第１識別子と前記第２識別子とを対応付ける請求項１に記載の入退場管理システム。
【請求項３】
前記第２識別子設定部が特定した人物に前記建物の関係者が含まれる場合には、前記建物内を撮影する室内撮影部の撮影をオフにし、前記第２識別子設定部が特定した人物に前記建物の関係者が含まれない場合には前記室内撮影部の撮影をオンにする室内撮影制御部と、
をさらに含む請求項１又は２に記載の入退場管理システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、入退場管理システムに関する。
【背景技術】
【０００２】
建物内に出入りする人物を画像から識別する入退場管理システムが実用化され用いられている。特許文献１には、撮影画像から建物に出入りする可能性がある入退場予定者を含む入退場候補者数を計数すると共に入退場候補者が入退場した後の画像から未入退場者数を計数し、入退場予定者数と入退場候補者数との差が、未入退場者数を超えているか否かによって不正入場の有無を判定する入退場管理装置の発明が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１０−２１１５１０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１に記載の入退場管理装置は、入退場者数及び不正入場者数を画像から把握できるものの、入退場者の各々を認証し、識別することを考慮していないという問題点があった。
【０００５】
本発明は、上記事実を考慮して成されたもので、建物の入退場者を特定し、特定した入退場者の位置を把握できる入退場管理システムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するための請求項１の発明は、建物の出入口に設けられ、該建物の出入口近くに存在する人物の位置を検知する人物位置検知部と、前記人物位置検知部が位置を検知した人物に第１識別子を設定する第１識別子設定部と、前記人物位置検知部が検知する領域に存在する人物の顔を撮影する撮影部と、前記撮影部が撮影した画像上の人物の顔から当該人物を特定すると共に前記画像上の人物の顔の位置に基づいて第２識別子を設定することにより、特定した人物に第２識別子を対応させる第２識別子設定部と、前記第１識別子設定部が設定した第１識別子と前記第２識別子設定部が設定した第２識別子とを対応付けることにより特定された人物に第１識別子を対応させ、第２識別子設定部で特定された人物の位置を前記人物位置検知部で検知して、特定された人物の前記建物への入退場を判定する入退場判定部と、を備えている。
【０００７】
請求項１に記載の発明によれば、第１識別子設定部が設定した第１識別子と第２識別子設定部が設定した第２識別子とを対応付けている。かかる対応付けにより特定された人物に人物位置検知部に係る第１識別子を対応させることができ、人物位置検知部によって、第２識別子設定部で特定された人物の位置を検知することが可能となる。
【０００８】
請求項２の発明は、請求項１に記載の発明において、前記第１位置特定部は、前記人物位置検知部が検知した人物のうち左右方向での所定の端部に位置する人物から順に前記第１識別子を設定し、前記第２位置特定部は、前記撮影部が撮影した画像内の左右方向での前記所定の端部に位置する人物から順に前記第２識別子を設定し、前記入退場判定部は、設定された順が同じ前記第１識別子と前記第２識別子とを対応付ける。
【０００９】
請求項２に記載の発明によれば、第１識別子設定部及び第２識別子設定部で第１識別子及び第２識別子の各々を同じ順序で設定することにより、第１識別子及び第２識別子との対応付けが容易になる。
【００１０】
請求項３に記載の発明は、請求項１又は２に記載の発明において、前記第２識別子設定部が特定した人物に前記建物の関係者が含まれる場合には、前記建物内を撮影する室内撮影部の撮影をオフにし、前記第２識別子設定部が特定した人物に前記建物の関係者が含まれない場合には前記室内撮影部の撮影をオンにする。
【００１１】
請求項３に記載の発明によれば、画像から特定した人物が建物の関係者か否かによって、建物内の監視カメラの動作を適宜制御することができる。
【発明の効果】
【００１２】
以上説明したように、請求項１に記載の発明は、人物の位置の検知に係る第１識別子と、人物の特定に係る第２識別子とを対応付けることにより、特定された人物の位置の変化を把握できる。その結果、建物の入退場者を特定し、特定した入退場者の位置を把握できる。
【００１３】
請求項２に記載の発明によれば、人物の位置の検知に係る第１識別子と、人物の特定に係る第２識別子とを対応付けることにより、特定された人物の位置の変化を把握できる。その結果、建物の入退場者を特定し、特定した入退場者の位置を把握できる。
【００１４】
請求項３に記載の発明によれば、建物内の人物の特定により、監視カメラを適切に制御することができる。
【図面の簡単な説明】
【００１５】
【図１】本発明の実施の形態に係る入退場管理システムの一例を示す概略図である。
【図２】玄関を屋外側から見た概略図である。
【図３】本発明の実施の形態に係る入退場管理システムにおける宅内コントローラの概略構成を示すブロック図である。
【図４】屋内位置検出センサ、屋外位置検出センサ、屋内顔認証カメラの動作の一例を示した概略図である。
【図５】本発明の実施の形態に係る入退場管理システムの動作の一例を示したシーケンス図である。
【図６】本発明の実施の形態に係る入退場管理システムの監視認証処理の一例を示すフローチャートである。
【発明を実施するための形態】
【００１６】
以下、図面を参照して本発明の実施の形態の一例を詳細に説明する。図１は、本実施の形態に係る入退場管理システム１０の一例を示す概略図である。図１に示したように、本実施の形態に係る入退場管理システム１０は、玄関５４に設けられたドア５２の上方の屋内側及び屋外側には、人物の位置を検知するための屋内位置検出センサ５８Ａ及び屋外位置検出センサ５８Ｂが各々設けられている。
【００１７】
屋内位置検出センサ５８Ａ及び屋外位置検出センサ５８Ｂは、例えば、レーザーを照射して、玄関５４のドア５２付近に存在する人物の位置を検知するためのセンサであり、屋内位置検出センサ５８Ａは玄関５４付近の屋内にいる人物の位置を、屋外位置検出センサ５８Ｂは玄関５４付近の屋外に居る人物の位置を各々検知する。
【００１８】
屋内位置検出センサ５８Ａ及び屋外位置検出センサ５８Ｂは各々照射したレーザーの位相と、物体で反射されて屋内位置検出センサ５８Ａ及び屋外位置検出センサ５８Ｂに各々戻ってきたレーザーの位相との位相差を検出する。屋内位置検出センサ５８Ａ及び屋外位置検出センサ５８Ｂの制御装置である宅内コントローラ３０は、屋内位置検出センサ５８Ａ及び屋外位置検出センサ５８Ｂが検出した位相差に基づいて、検知した対象物の位置、さらには対象物の大きさ等を把握することができる。そして、検知した対象物の大きさによって、当該対象物が人物か又は犬猫等の動物であるかを判定することができる。また、屋内位置検出センサ５８Ａ及び屋外位置検出センサ５８Ｂは、レーザー以外にも、ミリ波レーダー等のセンサを用いてもよい。
【００１９】
ドア５２の側方には、ドア５２に接近してきた人物の顔を撮影する屋内顔認証カメラ５６Ａ及び屋外顔認証カメラ５６Ｂが設けられている。屋内顔認証カメラ５６Ａは、玄関５４の屋内側に設けられ、建物の奥からドア５２に近づいてくる人物の顔を撮影する。屋外顔認証カメラ５６Ｂは、玄関５４の屋外側に設けられ、屋外からドア５２に近づいてくる人物の顔を撮影する。
【００２０】
屋内顔認証カメラ５６Ａは屋内位置検出センサ５８Ａが検知する領域に存在する人物の顔を、屋外顔認証カメラ５６Ｂは屋外位置検出センサ５８Ｂが検知する領域に存在する人物の顔を、各々撮影するように設置される。
【００２１】
屋内顔認証カメラ５６Ａ及び屋外顔認証カメラ５６Ｂは、常時撮影を継続し、屋内顔認証カメラ５６Ａ及び屋外顔認証カメラ５６Ｂの制御装置である宅内コントローラ３０は撮影画像から人物の顔を検出した場合に、人物の顔認証を行う。または、屋内顔認証カメラ５６Ａ及び屋外顔認証カメラ５６Ｂの各々に人物が発する赤外線を検知する人感センサを設け、当該人感センサが人物を検知した場合に、当該人物の顔を撮影し、撮影した画像で人物の顔認証をするようにしてもよい。
【００２２】
人物の顔を識別することによる認証（顔認証）は、種々の方式がある。本実施の形態では、鼻、眉、目、口、頬等の顔器官の顔面での配置パターンから、当該人物が居住者等の建物に入ることが許可されている者として入退場管理システム１０に登録された登録者か否かを判定する。
【００２３】
また、建物の屋内には、在室している人物の動向を撮影可能な宅内カメラ６０が建物の内壁４０等に設けられており、宅内カメラ６０は、制御装置である宅内コントローラ３０によって制御される。また、建物の屋内には、人物の存否及び当該人物の建物内での位置を検知する宅内位置検出センサ６２が設けられている。
【００２４】
宅内位置検出センサ６２は、例えば、レーザーを照射して、人物の存否及び当該人物の位置を検知するためのセンサであるが、ミリ波レーダーを応用したセンサでもよい。
【００２５】
図２は、玄関５４を屋外側から見た概略図である。図２に示したように、屋外位置検出センサ５８Ｂはドア５２の上方に設けられ、ドア５２に近づいてきた人物にレーザーを照射して当該人物の位置を検知する。また、屋外顔認証カメラ５６Ｂはドア５２の左側方に設けられ、屋外側からドア５２に近づいてくる人物の顔を撮影する。
【００２６】
図３は、本実施の形態に係る入退場管理システム１０における宅内コントローラ３０の概略構成を示すブロック図である。宅内コントローラ３０は、ＣＰＵ（Central Processing Unit）１２と、ＨＤＤ（Hard Disk Drive）１４と、ＲＡＭ（Random Access Memory）１６と、ネットワークＩ／Ｆ部１８と、ＲＯＭ（Read Only Memory）２０とを含む。また、宅内コントローラ３０は表示部２２と、操作入力部２４と、バス２６とを含んでおり、情報を入力する端末と情報を表示する端末との機能を有している。
【００２７】
ＣＰＵ１２は、宅内コントローラ３０の全体の動作を司るものである。ＨＤＤ１４は各カメラの制御のプログラム、画像処理のプログラム、顔認証のプログラム、ＯＳ（Operating System）及び各プログラムの実行に供するデータ等が記録される不揮発性の記憶装置である。また、ＨＤＤ１４には、建物の居住者の顔認証のためのデータも記憶される。建物の居住者の顔認証のためのデータは、具体的には、当該居住者の鼻、眉、目、口、頬等の顔器官の顔面での配置パターンである。ＲＡＭ１６は、ＯＳ、プログラム又はデータが展開される揮発性の記憶装置である。ネットワークＩ／Ｆ部１８は、ネットワークに接続するためのものであり、ＮＩＣ（Network Interface Card）やそのドライバで構成される。ＲＯＭ２０は、宅内コントローラ３０の起動時に動作するブートプログラムなどが記憶されている不揮発性の記憶装置である。表示部２２は、入退場管理システム１０に関する情報をユーザに表示するものである。操作入力部２４は、ユーザが入退場管理システム１０の操作や情報を入力する際に用いられるものであり、一例としてタッチパネル、キーボード等の入力装置及びトラックボール、ペンタブレット若しくはマウス等のポインティングデバイスが含まれる。バス２６は、情報のやりとりが行われる際に使用される。
【００２８】
表示部２２には、各カメラが撮影した画像が表示される。例えば、屋内顔認証カメラ５６Ａの画像であれば、表示部２２の画面上に認証する対象の人物の顔の画像を表示させる。
【００２９】
図４は、屋内位置検出センサ５８Ａ、屋外位置検出センサ５８Ｂ、屋内顔認証カメラ５６Ａの動作の一例を示した概略図である。図４のシチュエーション１では、建物の奥から玄関５４に近づいてきた３人の人物を屋内位置検出センサ５８Ａが検知し、宅内コントローラ３０は、人物の位置関係に基づいて各人物にＩＤを設定する。ＩＤ付与の態様は様々であるが、一例として、屋内位置検出センサ５８Ａに対して左端に位置する人物から右側に位置する人物へ順にＩＤ（１）、ＩＤ（２）、ＩＤ（３）のＩＤを設定する。又は、屋内位置検出センサ５８Ａに対して右端に位置する人物から左側に位置する人物へ順にＩＤ（１）、ＩＤ（２）、ＩＤ（３）のＩＤを設定してもよい。
【００３０】
屋内顔認証カメラ５６Ａは屋内位置検出センサ５８Ａが検知した人物の顔を撮影する。宅内コントローラ３０は、屋内顔認証カメラ５６Ａが撮影した人物の顔認証を行うことにより当該人物を特定すると共に、画像の左端に位置する人物から順にＩＤを設定して、顔認証により特定した人物にＩＤを対応させる。
【００３１】
本実施の形態では、画像の右端に位置する人物から順にＩＤを設定してもよいが、ＩＤを設定する順序は、前述の屋内位置検出センサ５８Ａの場合と同様にする。すなわち、屋内位置検出センサ５８Ａが検知した人物のうち左端の人物から順にＩＤを設定したのであれば、屋内顔認証カメラ５６Ａが撮影した画像内の左端に位置する人物から順にＩＤを設定する。
【００３２】
そして、屋内位置検出センサ５８Ａの検知結果に基づいて設定したＩＤと、屋内顔認証カメラ５６Ａが撮影した画像に基づいて設定したＩＤとを対応付ける。本実施の形態では、設定された順が同じＩＤ同士を対応付ける。例えば、屋内位置検出センサ５８Ａに対して左端に位置する人物から右側に位置する人物へ順にＩＤ（１）、ＩＤ（２）、ＩＤ（３）のＩＤを設定し、屋内顔認証カメラ５６Ａが撮影した画像の左端に位置する人物から右側に位置する人物へ順にＩＤ（１）、ＩＤ（２）、ＩＤ（３）のＩＤを設定した場合は、ＩＤ（１）同士、ＩＤ（２）同士、ＩＤ（３）同士を各々対応付ける。
【００３３】
上述のＩＤ同士の対応付けにより、屋内顔認証カメラ５６Ａが撮影した画像から特定された人物に屋内位置検出センサ５８Ａの検知結果に基づいて設定したＩＤを対応させることができ、さらには屋内位置検出センサ５８Ａによって、特定された人物の位置を検知することができる。
【００３４】
ＩＤ同士の対応付けが完了すると、宅内コントローラ３０は、顔認証の結果から、在宅者は家族Ａ（ＩＤ（１））、家族Ｂ（ＩＤ（２））、及び家族以外のその他（ＩＤ（３））の計３名であることを記憶する。
【００３５】
図４のシチュエーション２は、家族Ｂ（ＩＤ（２））とその他（ＩＤ（３））とが外出する状況であり、玄関５４の外に出た家族Ｂ（ＩＤ（２））とその他（ＩＤ（３））とが屋外位置検出センサ５８Ｂに検知される。屋内顔認証カメラ５６Ａは家族Ａ（ＩＤ（１））のみを撮影し、宅内コントローラ３０は、在宅者は家族Ａ（ＩＤ（１））であることを記憶する。
【００３６】
図４のシチュエーション３は、家族Ａ（ＩＤ（１））が建物奥の宅内に戻る状況である。屋内位置検出センサ５８Ａは遠ざかりつつある家族Ａ（ＩＤ（１））を検知し、屋内顔認証カメラ５６Ａは家族Ａ（ＩＤ（１））のみを撮影している。宅内コントローラ３０は、在宅者は家族Ａ（ＩＤ（１））であることを記憶する。
【００３７】
図５は、本実施の形態に係る入退場管理システム１０の動作の一例を示したシーケンス図である。屋内顔認証カメラ５６Ａ及び屋外顔認証カメラ５６Ｂを制御する宅内コントローラ３０内の（１）人物特定部は、撮影画像から人物の顔認証を行い、当該人物が認証登録されている家族であるか等の人物の特定を行う。
【００３８】
屋内位置検出センサ５８Ａ及び屋外位置検出センサ５８Ｂを制御する宅内コントローラ３０内の（３）第２位置特定部は、各センサが検知した物体の２次元位置を特定する。ドア５２の上方に設けられ、俯瞰するように下方へレーザーを照射する屋内位置検出センサ５８Ａ及び屋外位置検出センサ５８Ｂは、検知対象である物体の平面上での位置、例えば物体の左右又は前後の位置を相対的に検知する。本実施の形態では、各センサが検知した平面上での物体の位置を２次元位置と定義する。
【００３９】
屋内顔認証カメラ５６Ａ及び屋外顔認証カメラ５６Ｂを制御する宅内コントローラ３０内の（２）第１位置特定部は、画像内の左右方向の位置を特定し、位置を特定した人物の左から順にＩＤを設定する。このＩＤの設定により、上述のように画像から特定された人物がＩＤで管理される。
【００４０】
屋内位置検出センサ５８Ａ及び屋外位置検出センサ５８Ｂを制御する宅内コントローラ３０内の（３）第２位置特定部は、２次元位置を特定した物体の左から順にＩＤを設定する。
【００４１】
続いて宅内コントローラ３０の（４）人物位置特定部では、（２）第１位置特定部及び（３）第２位置特定部が各々設定したＩＤ同士を紐付け、特定された人物の位置を把握する。
【００４２】
（４）人物位置特定部は、在宅の人数と人物とを判定するために、各ＩＤの人物の動き及び位置から外出又は在宅を判断する。そして、在宅する人物及びその人数を判定する。
【００４３】
（４）人物位置特定部は、図６を用いて後述する制御に基づいて、宅内カメラ６０の制御を行う。
【００４４】
図６は、本実施の形態に係る入退場管理システム１０の監視認証処理の一例を示すフローチャートである。ステップ６００では、宅内位置検出センサ６２が建物内に人物を検知した場合は１人以上の在宅あり、建物内に人物を検知しない場合には留守であると判定し、留守と判定した場合には、ステップ６０２で保安のために宅内カメラ６０の撮影をオンにして処理をリターンする。
【００４５】
ステップ６００で在宅者が居ると判定した場合には、ステップ６０４で在宅している人物を特定し、在宅者が家族以外の者の場合には、ステップ６０６で保安のために宅内カメラ６０の撮影をオンにして処理をリターンする。
【００４６】
ステップ６０４で、在宅者に家族が含まれるが、家族以外の者も居る場合には、ステップ６０８で親等の保護者が居るか否かを判定する。ステップ６０８で否定判定の場合には、ステップ６１０で保安のために宅内カメラ６０の撮影をオンにして処理をリターンする。
【００４７】
ステップ６０８で肯定判定の場合には、ステップ６１２で宅内カメラ６０の撮影をオフにして処理をリターンする。
【００４８】
ステップ６０４で在宅者が家族のみであると判定した場合には、ステップ６１４で親等の保護者が居るか否かを判定する。ステップ６１４で肯定判定の場合には、ステップ６１６で宅内カメラ６０の撮影をオフにして処理をリターンする。
【００４９】
ステップ６１４で否定判定の場合には、ステップ６１８で保安のために子供を見守る子ども見守り設定がオンか否かを判定し、肯定判定の場合には、ステップ６２０で宅内カメラ６０の撮影をオンにして処理をリターンする。ステップ６１８で否定判定の場合には、ステップ６２２で宅内カメラ６０の撮影をオフにして処理をリターンする。
【００５０】
以上説明したように、本実施の形態によれば、画像から建物の入退場者を特定すると共に、画像から特定した人物にＩＤを設定する。さらに、レーザーセンサ等で位置を検知した人物に別途ＩＤを設定すると共に、前述の画像から設定したＩＤと対応付けることにより、特定した人物の位置をレーザーセンサ等で検知可能とすることにより、特定の入退場者の位置を把握できる入退場管理システムを提供することができる。
【００５１】
なお、本実施の形態では、玄関の屋内側と屋外側に各々センサ及びカメラを設けたが、例えば、屋内側にのみセンサ及びカメラを設け、玄関の屋内側での人物の動向から、建物への入退室を把握するようにしてもよい。
【００５２】
また、本実施の形態では、宅内カメラ６０による顔認証によって在宅する人物の特定を行い、宅内位置検出センサ６２によって、在宅する人物の位置の変化を検知してもよい。
【符号の説明】
【００５３】
１０   入退場管理システム
１２   ＣＰＵ
１４   ＨＤＤ
１６   ＲＡＭ
１８   ネットワークＩ／Ｆ部
２０   ＲＯＭ
２２   表示部
２４   操作入力部
２６   バス
３０   宅内コントローラ
４０   内壁
５２   ドア
５４   玄関
５６Ａ 屋内顔認証カメラ
５６Ｂ 屋外顔認証カメラ
５８Ａ 屋内位置検出センサ
５８Ｂ 屋外位置検出センサ
６０   宅内カメラ
６２   宅内位置検出センサ
【図１】
0006364371.tif 000002
【図２】
0006364371.tif 000003
【図３】
0006364371.tif 000004
【図４】
0006364371.tif 000005
【図５】
0006364371.tif 000006
【図６】
0006364371.tif 000007