Source: https://patents.google.com/patent/JP2007241402A/en
Timestamp: 2019-09-17 19:28:11
Document Index: 691109051

Matched Legal Cases: ['art 101', 'art 102', 'art 103', 'art 104', 'art 105', 'art 103', 'art 104', 'art 102', 'art 103', 'art 105', 'art 104']

JP2007241402A - Pretense decision device in face authentication and face authentication device using it - Google Patents
Pretense decision device in face authentication and face authentication device using it Download PDF
JP2007241402A
JP2007241402A JP2006059403A JP2006059403A JP2007241402A JP 2007241402 A JP2007241402 A JP 2007241402A JP 2006059403 A JP2006059403 A JP 2006059403A JP 2006059403 A JP2006059403 A JP 2006059403A JP 2007241402 A JP2007241402 A JP 2007241402A
JP2006059403A
Naofumi Nakazawa
直文 中澤
2006-03-06 Application filed by Sharp Corp, シャープ株式会社 filed Critical Sharp Corp
2006-03-06 Priority to JP2006059403A priority Critical patent/JP2007241402A/en
2007-09-20 Publication of JP2007241402A publication Critical patent/JP2007241402A/en
<P>PROBLEM TO BE SOLVED: To provide a high-accuracy face authentication device with a simple structure capable of deciding and preventing pretense by a photograph. <P>SOLUTION: This face authentication device has: a photographing part 101, a face recognition part 102, a distance measurement part 103, a pretense decision part 104, and a face recognition part 105. The distance measurement part 103 is a portion measuring a distance to a photographic subject. The pretense decision part 104 decides the pretense on the basis of presence/absence of a distance difference to at least two positions having large unevenness on the basis of information from the face recognition part 102 and the distance measurement part 103. The face recognition part 105 performs face recognition about an image checked with the pretense by the pretense decision part 104. <P>COPYRIGHT: (C)2007,JPO&INPIT
本発明は、顔認証装置に関し、顔認証におけるなりすまし対策に関する。 The present invention relates to a face authentication device, and more measures impersonation in face authentication.
撮像技術や情報処理技術の発達に伴い、顔に基づく認証技術（以下、「顔認証」と称する。）が注目され、種々の提案がなされてきている。 With the development of imaging technology and information processing technology, authentication technology (hereinafter, "Face Recognition" and referred.) Based on the face is attention, various proposals have been made. 従来の顔認証におけるなりすまし対策技術としては、特許文献１、特許文献２、特許文献３などが挙げられる。 As a countermeasure technique spoofing of the conventional face authentication, Patent Document 1, Patent Document 2, and the like Patent Document 3.
特許文献１から３までは、複数の照明を顔に当てた場合のそれぞれの照明に関する違いに基づく顔認証を行うものである。 Patent Documents 1 to 3 is used to perform face authentication based upon differences for each of the illumination in the case of applying a plurality of illumination on the face. 特許文献２も、複数の照明を顔に当ててその違いで防止する技術である。 Patent Document 2 is also a technique for preventing at the difference against a plurality of illumination on the face. 例えば、顔の右側から照明を当てた場合と顔の左から照明を当てた場合とでは、本物の顔が立体的であることに起因して、影の出来方に違いが生じる。 For example, in the case addressed the illumination from the left of the case and face that rely on lighting from the right side of the face, due to the real face is a three-dimensional, makes a difference in how to be a shadow. 一方、写真の場合には、本物の顔の場合のような影が発生しないため、両者の違いを解析することでなりすましの防止を行う。 On the other hand, in the case of photos, because the shadow, such as in the case of a real face does not occur, do the prevention of spoofing by analyzing the differences between the two. その他、この文献には、以下の技術が記載されている。 Additional, this document, the following techniques have been described.
１）モーションプロセッサーという装置を用いて、奥行き情報を得て、顔が立体的かどうか判断し、なりすまし防止を行う方法。 1) using a device called a motion processor, a method of obtaining depth information, the face is determined whether stereoscopic performs spoofing prevention. 尚、モーションプロセッサーとは、非特許文献１に記載されるように、赤外線の反射で画面全体の奥行きパターンを濃淡の差として捕らえるものである。 Note that the motion processor, as described in Non-Patent Document 1, is intended to capture the entire depth pattern screen as the difference shading by the reflection of infrared radiation.
２）２つの視差のある映像から顔が立体的かどうか判断し、なりすまし防止を行う方法。 2) two faces from an image with parallax to determine whether steric, how to do spoofing prevention.
３）ＣＲＴなどに映された映像によるなりすまし防止のため、ＣＲＴに発生するフリッカーを検出する方法。 3) to prevent spoofing due to projected video CRT, a method of detecting the flicker generated in the CRT.
４）予め正面でない方向を向いた画像で認証用データを作成しておくことで、なりすましに利用されることが多い正面顔写真によるなりすましを防止する方法。 4) advance by the front non image oriented you create the authentication data, a method of preventing spoofing by frontal face photos are often utilized to spoofing.
特許文献３は、顔までの距離と特徴点間の距離から顔の大きさを推測することで防止する方法を開示する。 Patent Document 3 discloses a method of preventing by estimating the size of the face from the distance between the distance and the feature point to the face.
特開２００１−３３８２９６号公報 JP 2001-338296 JP 特開２００３−１７８３０６号公報 JP 2003-178306 JP 特開２００５−１３５２７１号公報 JP 2005-135271 JP
上記のように、顔認証においては、写真によるなりすまし、特に、正面顔写真等を利用したなりすましを防止することが重要である。 As described above, in the face authentication, spoofing-with-picture, in particular, it is important to prevent spoofing using frontal face photograph or the like. しかしながら、特許文献１，２のような複数の照明を用いる技術では、装置が大掛かりになり、また決まった場所などで使用しないと照明条件が再現できないという問題がある。 However, the technique of using a plurality of lighting, such as in Patent Documents 1 and 2, apparatus becomes large-scale, there is a problem that the lighting conditions without using such or in fixed locations can not be reproduced.
特許文献２のモーションプロセッサーを利用して得られる奥行き情報を用いる技術では、専用の装置を必要とし、なおかつ、顔全体の奥行きパターンを判断するため処理の負担が大きくなるという問題がある。 In the technique using the depth information obtained using the motion processor of Patent Document 2 requires a dedicated device, yet, there is a problem that the processing load for determining the overall depth pattern face becomes large. また、２つの視差のある映像から顔が立体的かどうか判断する技術ではカメラが複数必要となり、あるいは、複数の視差のある画像を１つのカメラに取り込む装置が必要となり、装置が大掛かりになるという問題がある。 Further, as the camera is a technology that face from pictures of two parallax to determine whether steric becomes more necessary or captures an image having a plurality of parallax on a single camera device is required, the apparatus is large-scale There's a problem. また、フリッカーを検出する技術では、ＣＲＴなどのフリッカーの発生するものに対してのみ有効な方法であり、写真などによるなりすましには対応できないという問題がある。 The technique of detecting the flicker, is only effective method against which flickers like CRT, the spoofing due photograph there is a problem that can not be handled. さらに、予め正面でない方向を向いた画像で認証する従来技術では、あまり正面とはかけはなれた方向を向いての認証は特徴点の抽出精度が落ち、認証精度の低下につながる。 Furthermore, in the prior art to be authenticated by the image facing a direction that is not pre-front, so opposite to authenticate a direction far from the front fallen accuracy of extracting feature points, it leads to a decrease in the authentication accuracy. また、自分がどの向きで認証したかを忘れた場合には認証自体がされないという問題がある。 In addition, there is a problem that it is not the authentication itself if you forget whether to authenticate yourself in any direction.
特許文献３の顔の大きさを推測する技術では、顔の大きさと同じ写真が用いられた場合などになりすましを防止することが難しいという問題がある。 In the technique to infer the size of the face of the Patent Document 3, it is difficult to prevent spoofing or the like if the same photograph was used as the size of the face.
本発明は、写真によるなりすましを防止することができる簡単な構造で精度の良い顔認証装置を提供することを目的とする。 The present invention aims to provide an accurate face authentication apparatus with a simple structure capable of preventing spoofing-with-picture.
本発明の一観点によれば、撮像部により撮像される被認識者の顔に基づいて顔認証を行う顔認証装置と関連付けされるなりすまし判定装置であって、前記撮像された画像をもとに被認証者の顔の認識を行う顔認識部と、被認証者の顔の任意の位置までの距離を測定する距離測定部と、顔認識結果と距離測定結果とに基づいて、なりすまし判定を行うなりすまし判定部と、を備えることを特徴とするなりすまし判定装置が提供される。 According to one aspect of the present invention, there is provided a spoofing determination device is associated with the face authentication device that performs face authentication based on the face of the perceiver, which is captured by the imaging unit, based on the captured image a face recognition unit for recognizing the face of the person to be authenticated, a distance measuring unit for measuring a distance to an arbitrary position of the face of the person to be authenticated, based on the result of the face recognition result and the distance measuring performs spoofing determination a spoofing determination unit, spoofing determination apparatus comprising: a is provided.
顔認識部は、顔認証に使える程度の画像であるか否かの判断を兼ねる。 Face recognition unit also serves as a determination of whether an image of being able to operate in face authentication. 顔認識をした結果を参照して任意の位置までの距離を測定し、その距離が妥当であるかどうかにより、実際の顔であるかあるいは平面的な写真によるなりすましであるかを判定することができる。 Referring the results of face recognition to measure the distance to an arbitrary position, depending on whether the distance is appropriate, it is possible to determine whether there are spoofing by actual face a is or planar Photos it can.
前記なりすまし判定部は、前記距離測定部により測定された被認証者の顔の任意の位置のうち凹凸の大きい少なくとも２つの位置までの第１の距離と第２の距離との測定結果において前記第１の距離と前記第２の距離との間の距離差の有無に基づいて、距離差がある場合になりすましであると判定することが好ましい。 The spoofing determination unit is configured in the measurement result of the first distance and the second distance to the at least two positions larger irregularities of the arbitrary position of the face of the person to be authenticated, which is measured by the distance measuring unit first based on the presence or absence of the distance difference between the first distance and said second distance, it is preferable to determine that it is masquerading when there is a distance difference. 前記２つの位置までの第１の距離と第２の距離との距離差に関して、なりすましとは判断しないための許容範囲を予め記憶しておく記憶部と、該記憶部の記憶に基づいて実際の測定値である距離差が前記許容範囲内に入っている場合に、なりすましではないと判定することも可能である。 Respect to the distance difference between the first distance and the second distance to the two positions, a storage unit which stores in advance an allowable range for not determining the spoofing, real based on storing the storage unit If the distance difference is a measurement value falls within the allowable range, it is possible to determine not the spoofing.
本発明の他の観点によれば、撮像部により撮像される被認識者の顔に基づいて顔認証を行う顔認証装置と関連付けされるなりすまし判定装置であって、前記撮像された画像をもとに被認証者の顔の認識を行う顔認識部と、認識に基づいて、顔の範囲を決定するとともに、該顔の範囲から背景となる範囲を選択し決定する顔・背景範囲決定部と、認識した画像をもとに、顔までの距離と、背景の位置までの距離と、を測定する距離測定部と、顔認識結果と距離測定結果とに基づいて、なりすまし判定を行うなりすまし判定部と、を備えることを特徴とするなりすまし判定装置が提供される。 According to another aspect of the present invention, based on a spoofing determination device is associated with the face authentication device that performs face authentication based on the face of the perceiver, the captured image captured by the imaging unit a face recognition unit for recognizing the face of the person to be authenticated, based on the recognition, along with determining the scope of the face, and face-background area determination unit that determines to select the range of the background from the scope of said pigment, based on the recognized image, and the distance to the face, a distance measuring unit that measures a distance to the position of the background, and based on the result of the face recognition result and the distance measurement, a determination unit spoofing performs spoofing determination , spoofing determination apparatus comprising: a is provided.
前記距離測定部は、電磁波を装置から測定する箇所の数だけ、測定場所に向かって照射し、その反射を観測することにより行われるのが好ましい。 Said distance measuring unit, the number of places for measuring the electromagnetic wave from the device, is irradiated towards the measurement site it is preferably carried out by observing the reflection.
光学系を含む撮像部を有していれば、前記距離測定部として、前記光学系を物理的に動かして、測定する箇所の数だけコントラストの高い合焦位置を求めることにより行うこともできる。 If an image pickup unit including an optical system, as the distance measuring unit, wherein physically moving the optical system, can be performed by obtaining a high focusing position number of only the contrast of a portion to be measured. 前記距離測定部としてカメラのオートフォーカス機構を用いることができる。 It can be used an autofocus mechanism of a camera as the distance measuring unit.
上記のなりすまし判定装置と、該なりすまし判定装置によるなりすましチェックがされた画像について、撮影された顔と、あらかじめ記憶されている顔と、を比較して、同じであるかどうかの顔認証を行う顔認証部と、により顔認証装置を構成することができる。 And the spoofing determination device, spoofing the check image by the spoofing determination unit, a face which performs the photographed face, and the face stored in advance, compares, whether the face authentication whether the same an authentication unit, makes it possible to configure the face authentication apparatus.
本発明の別の観点によれば、認証用の画像を取得するステップと、取得した画像をもとに顔認識を行うステップと、おおよその顔の範囲を画定しておき、その顔の範囲内において認識した画面上の第１の位置を参照しながら、装置から被認証者の顔の実際の第１の位置までの距離を計測するステップと、装置から被認証者の顔の前記第１の距離とは異なる第２の位置までの距離を計測するステップと、前記第１の距離と前記第２の距離とを比較し、その差分の有無またはその差分が予め規定されている範囲内であるかにより、写真によるなりすましであるか否かを判定するステップと、撮影された顔と、あらかじめ記憶されている顔と、を比較して、同じであるかどうかにより顔認証を行うステップと、を有する顔認証方法が提供される。 According to another aspect of the present invention, a step of acquiring an image for authentication, leave defining and performing face recognition on the basis of the acquired image, the range of the approximate face, in the range of the face with reference to the first position on the recognized window in, device from the step of measuring the distance to the actual first position of the face of the person to be authenticated, device from the face of the person to be authenticated the first a step of measuring a distance to a second different position of the distance, comparing the second distance and the first distance, the presence or the difference of the difference is within the range specified in advance Kaniyori, determining whether a spoofing-with-picture, and photographed face, compares the face stored in advance, and a step of performing face authentication by determining whether the same, the face authentication method has are provided.
また、認証用の画像を取得するステップと、取得した画像をもとに顔認識を行うステップと、おおよその顔の範囲を画定しておき、その顔の範囲内において認識した画面上の第１の位置を参照しながら、装置から被認証者の顔の実際の第１の位置までの距離を計測するステップと、装置から被認証者の顔の範囲とは異なる背景部分までの第２の位置までの距離を計測するステップと、前記第１の距離と前記第２の距離とを比較し、その差分の有無またはその差分が予め規定されている範囲内であるかにより、写真によるなりすましであるか否かを判定するステップと、撮影された顔と、あらかじめ記憶されている顔と、を比較して、同じであるかどうかにより顔認証を行うステップと、を有する顔認証方法が提供される。 Further, acquiring an image for authentication, a step of performing face recognition on the basis of the acquired image, advance to define the scope of the approximate face, first on the screen recognized within the scope of the face with reference to the position, the second position until a different background portion is a step of measuring the distance to the actual first position of the face of the person to be authenticated from the device, the range of the face of the person to be authenticated from the device a step of measuring the distance to, comparing the second distance and the first distance, by either the presence or absence or the difference of the difference is within the range specified in advance, it is spoofing-with-picture and whether the determining whether the captured face, compared with the face stored in advance, the face authentication method comprising the steps of: performing face authentication by determining whether the same are provided .
本発明によれば、カメラの既存の測距機能、オートフォーカス機構を利用することで大掛かりな装置も必要なく写真によるなりすましを防止できる。 According to the present invention, the existing ranging function of the camera, the impersonation by the large-scale equipment need not photograph by using the auto-focus mechanism can be prevented. また、顔の大きさと同じ写真を用いられた場合にも問題なく対応できる。 Further, it corresponds without problems when used the same photo as the size of the face.
また、顔認識をした結果をもとに装置からの距離を測定する場合に、測定箇所の数および測定場所を任意に指定することができることで、測定箇所及び数を限定したときよりも、なりすましを行うことが困難になる。 When measuring the distance from the device based on the result of face recognition, by the number and measuring the location of the measurement point can be arbitrarily designated, than when only the measurement points and number, spoofing it becomes difficult to carry out.
以下、本発明の第１の実施の形態によるなりすまし判定機能およびそれを用いた顔認証装置について図面を参照しながら説明を行う。 Following description with reference to the drawings first impersonation according to an embodiment of determining function and face authentication apparatus using the same of the present invention. 図１は本実施の形態による顔認証機器の一構成例を示す図である。 Figure 1 is a diagram showing a configuration example of a face authentication device according to the present embodiment. 図１に示すように、本実施の形態による顔認証機器は、撮像部（１０１）と、顔認識部（１０２）と、距離測定部（１０３）と、なりすまし判定部（１０４）と、顔認証部（１０５）と、を有している。 As shown in FIG. 1, the face authentication device according to this embodiment, the imaging unit (101), the face recognition unit (102), the distance measuring section (103), spoofing determination unit (104), the face authentication It has parts (105), the.
撮像部（１０１）は、顔認証用の画像を撮影する機能を有しており、顔を撮影することができれば、ビデオやカメラに利用されている種々の撮影装置と同様の構成により実現可能である。 The imaging unit (101) has a function of photographing the image for face authentication, if it is possible to photograph the face, can be realized by the same configuration with various imaging devices are utilized in a video or camera is there. 顔認識部（１０２）は、撮像部（１０１）から送られてきた顔を含む画像の処理を行い、顔に関する様々な情報を取り出す部分である。 Face recognition unit (102) performs processing of an image including the face sent from the imaging unit (101) is a portion to take out a variety of information relating to a face. 顔の情報としては、例えば、目、口、鼻などの部分的な情報と、顔全体としての特徴点を示す情報などが挙げられる。 The information of the face, for example, eyes, mouth, and partial information, such as the nose, and information indicating the feature point of the whole face.
距離測定部（１０３）は、被写体までの距離を測定する部分であり、例えば、カメラのオートフォーカスの機能（測距機能）をそのまま使用することが可能である。 Distance measuring unit (103) is a portion for measuring the distance to an object, for example, functions of the camera autofocus (ranging function) can be used as it is. オートフォーカスに、被写体に赤外線や超音波を照射しその反射を検出する「アクティブ方式」を用いている場合は、赤外線照射部と受光部、あるいは超音波発信部と受信機等をセットとして使用することができる。 Autofocus, the case of using the "active method" for detecting the irradiating reflected infrared rays or ultrasonic waves to the object is used as the light receiving portion infrared irradiation unit, or an ultrasonic wave transmission unit and the receiver such as a set be able to. 一方、オートフォーカスに、画像が最もくっきり見えるときにピントがあったと判断する「コントラスト検出方式」を用いている場合には、撮像部（１０１）の入力画像を使用することができる。 On the other hand, the autofocus images is determined that there is focus when most clearly seen in the case of using the "contrast detection method", can use the input image of the imaging unit (101).
なりすまし判定部（１０４）は、顔認識部（１０２）と距離測定部（１０３）とからの情報をもとに、なりすましの判定を行う。 Spoofing determination unit (104), based on the information of the color face recognition unit (102) a distance measuring unit (103), a determination is spoofing. 顔認証部（１０５）は、なりすまし判定部（１０４）によるなりすましチェックがされた画像について、顔認証を行う。 Face authentication unit (105), for spoofing determination unit (104) by spoofing check image, performs face authentication. 図４は、撮影画像から顔認識を行い、顔の異なる２つのポイントまでの距離を測り、その結果をもとになりすましチェックを行う処理の手順を示すフローチャート図である。 4 performs face recognition from the captured image, measure the distance to two points of different faces is a flowchart showing the steps in the process of checking spoofing based on the results. ここでは、図２に示すように、例えば顔の中の目の位置と鼻の位置との２点について、装置からの距離ａ、ｂを測るものとする。 Here, as shown in FIG. 2, for example, the two points and the eye position and the nose position in the face, and a measure of the distance a, b from the device. ２点としては、顔の凹凸等に基づく距離に差がある箇所であれば顔のどの部分の組み合わせを用いてもよい。 The two points may be a combination of any part of the face as long as the point where the difference in distance based on the unevenness of the face.
横から見た図２の右図からもわかるように、鼻までの距離ｂと目までの距離ａとでは、鼻の方が前に出ているため、鼻までの距離ｂの方が短いことがわかる。 As can be seen from the right of FIG 2 as viewed from the side, at the distance a to the distance b and eyes to nose, since the direction of the nose is out in front, it towards the distance b to the nose is short It is seen. 適宜、図１等を参照しながら説明を行う。 As appropriate, it will be described with reference to FIG. 1 and the like. 処理を開始すると（ステップ４０１）、まず、撮像部（１０１）から認証用の画像を取得する（ステップ４０２）。 When the processing is started (step 401) first obtains an image for authentication from the imaging unit (101) (step 402). 取得した画像をもとに顔認識を行う（ステップ４０３）。 The acquired image performs face recognition on the basis of (step 403). 顔認識とは、実際に顔が映っているかどうかを判断する処理である。 The face recognition is a process to determine whether or not actually reflected in the face. この処理において、もし、顔が写っていない、あるいは、認識するのに適していない顔の画像だった場合には（Ｎｏ）、認識ができない（ステップ４０９）ため、処理を終了する（ステップ４１１）。 In this process, if the face is not photographed, or when it was an image of a face which is not suitable for recognition (No), it can not recognize (step 409) for, the process ends (step 411) .
一方、ステップ４０３の認識が成功した場合（Ｙｅｓ）にはおおよその顔の範囲を画定しておき、その顔の範囲内において認識した画面上の目の位置を参照しながら、装置から被認証者の実際の目までの距離を計測する（ステップ４０４）。 On the other hand, if the recognition of step 403 is successful advance to define the approximate range of face to (Yes), with reference to the position of the eyes on the recognized screens within the scope of the face, the person to be authenticated from the device measuring the distance to the actual eye (step 404). ここでの計測方法については、先に述べた「アクティブ方式」、「コントラスト検出方式」等が利用可能であるが、装置から被写体までの距離が遠い場合には「コントラスト検出方法」よりも「アクティブ方式」の方が高精度である。 For the measurement methods herein, previously noted "active method", but "contrast detection method" and the like are available, "active than the" contrast detection method "when the distance from the device to the subject is long If the system "is a high precision. 次に、装置から被認証者の実際の鼻の位置までの距離を計測する（ステップ４０５）。 Next, to measure the distance to the actual position of the nose of the person to be authenticated from the apparatus (step 405). この距離を測定する場合に、「アクティブ方式」ならば、赤外線や超音波が装置から測定する箇所の数だけ、測定場所に向かって照射される。 When measuring this distance, if "active method", infrared rays or ultrasonic waves to the number of points to be measured from the device, it is irradiated towards the measurement location. ここでは、２箇所の測定を例にして説明しているため、２回照射が行われる。 Here, since the measurement of two points is described as an example, two times the irradiation is carried out. また、「コントラスト検出方式」であれば、物理的にレンズを動かしてコントラストの高い位置（ピントが合っている位置）を求める動作が測定する箇所の数だけ行われる。 Further, if "contrast detection method", physically moving the lens seek high position contrast (focus matching are located) operation is performed by the number of points to be measured. 目の位置と鼻の位置とは、例えば、一般的な顔における目の位置と鼻の位置とを予め記憶しておき、その位置からある誤差範囲を加えた位置にあると推定することができる。 The eye position and the nose position, for example, common face stored in advance and eye position and the nose position in can be estimated to be in a position obtained by adding the error range from the position . あるいは、認識基準となる顔の画像データを記憶しておき、その画像データに基づいて目と鼻との位置を決定しても良い。 Alternatively, stores the image data of the face to be recognized criteria, it may be determined the positions of the eyes and nose on the basis of the image data.
次いで、目までの距離ａが鼻までの距離ｂよりも長いかどうか判断する（ステップ４０６）。 Then, the distance a to the eye to determine if longer than the distance b to the nose (step 406). 目までの距離ａが鼻までの距離ｂよりも長くない場合には（Ｎｏ）、なりすましチェックにおいて問題が生じたものとして（ステップ４１０）、顔認証へ移行せず処理を終了する（ステップ４１１）。 If the distance a to the eye is not longer than the distance b to the nose (No), as have problems in spoof check (step 410), the process ends without migrating to the face authentication (step 411) .
目までの距離ａが鼻までの距離ｂよりも長い場合には（Ｙｅｓ）、なりすましチェックＯＫ（ステップ４０７）とし、顔認証処理へ移行する（ステップ４０８）。 If the distance a to the eye is longer than the distance b to the nose as (Yes), spoofing check OK (step 407), the process proceeds to the face authentication process (Step 408). 顔認証処理は、周知の技術を用いて行うことができる。 Face recognition processing can be performed using well known techniques. すなわち、撮影された顔と、あらかじめ認証装置に記憶されている顔と、を比較して、同じであるかどうかにより顔認証を行えばよい。 That is, the photographed face, it compares the face stored in advance in the authentication device, and may be carried out face authentication by determining whether the same.
目までの距離ａが鼻までの距離ｂよりも長いかどうか判断の処理（ステップ４０６）において、本実施の形態においては、装置から目までの距離ａと装置から鼻までの距離ｂとのどちらまでの距離が長いかだけを判断条件としているが、顔認識の時に顔の大きさなどの情報を得て、目までの距離と鼻までの距離の差の範囲を予測しておき、この予測の範囲内になっているかどうかにより、なりすましか否かを判断する方法を用いてもよい。 In the distance a to the eye treatment long whether determination than the distance b to the nose (step 406), in this embodiment, both the distance a and the device from the device to the eye and the distance b to the nose Although the distance to have a long or only determination conditions, to obtain information such as the size of the face when the face recognition in advance to predict the range of the difference in distance to the distance and the nose to the eye, this prediction by whether it is within the scope of, a method may be used for determining whether spoofing. 例えば、顔の長さが一般的に３０ｃｍ程度であり、目と鼻との凹凸の差が５ｃｍであれば、その比は６：１である。 For example, it is usually about 30cm in length of the face, if 5cm difference of unevenness of the eyes and nose, the ratio is 6: 1. 従って、６：１を含むある範囲、例えば、１０：１〜３：１までを、実際の顔であると判断できる範囲とするなどの方法を用いることができる。 Thus, 6: a range comprising 1, for example, 10: 1 to 3: up to 1, it is possible to use a method such as a range that can be determined that the actual face.
例えば、なりすましの手法として「写真によるなりすまし」がある。 For example, there is a "spoofing-with-picture" as a method of spoofing. 「写真によるなりすまし」の場合、上記の手順例において、目までの距離ａが鼻までの距離ｂよりも長いかどうか判断する（ステップ４０６）ステップで、写真は平面であるためａとｂとが同じ距離またはある範囲内となり、なりすましチェックでエラー判定とすることができる。 For "spoofing-with-picture", the example of the procedure, the distance a to the eye to determine if longer than the distance b to the nose (step 406) step, the photograph and the a and b for a plan it is the same distance or within a certain range, it can be an error determined by spoofing check.
次に、本発明の第２の実施の形態による顔認証技術について図面を参照しながら説明を行う。 Next, a description with reference to the drawings face authentication technique according to the second embodiment of the present invention. 図５は、撮影画像から顔認識を行い、顔と背景との２つのポイントまでの距離を測り、その結果をもとに、なりすましチェックを行う手順例を示すフローチャート図である。 Figure 5 performs face recognition from the captured image, measure the distance to two points of the face and the background, based on the result, a flow chart illustrating an exemplary procedure for performing spoofing check. ここでは、図３に示すように、顔と背景との２つのポイントについて装置からの距離を測るものとする。 Here, as shown in FIG. 3, it is assumed to measure the distance from the device for the two points of the face and the background. 一般的な認証においては、顔までの距離の方が背景までの距離よりも短いため、それを前提にして説明を行う。 In a general certification, for those of the distance to the face is shorter than the distance to the background, a description will be to do it on the premise. 図１、図３を適宜参照しながら説明を行う。 Figure 1 will be described with reference to FIG. 3 as appropriate.
処理を開始すると（ステップ５０１）、まず、撮像部（１０１）から認証用の画像を取得する（ステップ５０２）。 When the processing is started (step 501) first obtains an image for authentication from the imaging unit (101) (step 502). 取得した画像をもとに顔であるかどうかの顔認識を行う（ステップ５０３）。 The acquired image made as to whether face recognition is a face to the original (step 503). もし、顔が写っていないか、或いは、認識するのに適していない画像だった場合（Ｎｏ）、認識ができない（ステップ５１１）として処理を終了する（ステップ５１３）。 If either does not appear face, or, if it was an image that is not suitable for recognition (No), the processing ends as it can not recognize (step 511) (step 513).
認識が成功した場合には（Ｙｅｓ）、入力した画像から顔の範囲を決定する（ステップ５０４）。 If the recognition is successful determining (Yes), the range of the input image of a face (step 504). そして、顔の範囲から背景となる部分を選択し決定する（ステップ５０５）。 Then, selecting and determining the portion to be the background from the scope of the face (step 505). 背景となる部分についてはどこを選んでもよいが、例えば顔の範囲の左右の横の部分、頭の上の部分などを選ぶことができる。 But may choose Where is the portion serving as a background, it is possible to select, for example, next to the part of the left and right of the range of the face, such as the upper part of the head.
次に、認識した画面上の顔の位置をもとに、装置から顔までの距離を計測する（ステップ５０６）。 Next, based on the position of the face on the recognition screen, to measure the distance from the device to the face (step 506). 次に、装置から背景の位置までの距離を計測する（ステップ５０７）。 Next, to measure the distance from the device to the position of the background (step 507). これらの距離を測定する場合に、「アクティブ方式」であれば赤外線や超音波が装置から測定場所に向かって照射される。 When measuring these distances, infrared or ultrasound if "active method" is emitted toward the measurement site from the device. ここでは、顔と背景とに向かって２回照射が行われるものとする。 Here, it is assumed that two irradiation is made to the face and the background. また、「コントラスト検出方式」であれば、物理的にレンズを動かしてコントラストの高い位置（ピントが合っている位置）を求める動作が顔と背景とに対して行われる。 Further, if "contrast detection method", physically moving the lens seek high position contrast (focus matching are located) operation is performed on the face and the background.
そして、顔までの距離ａ'が背景までの距離ｂ'よりも短いかどうかを判断する（ステップ５０８）。 The distance a to the face 'the distance b to the background' to determine whether shorter than (step 508). 顔までの距離ａ'が背景までの距離ｂ'よりも短くない場合には（Ｎｏ）、なりすましチェックで問題がおきたとし（ステップ５１２）、顔認証処理へ移行せず処理を終了する（ステップ５１３）。 If the distance to the face a 'is the distance b to the background' not shorter than (No), the problem exists in spoof check (step 512), the process ends without migrating to the face authentication process (Step 513). 顔までの距離ａ'が背景までの距離ｂ'よりも短い場合には（Ｙｅｓ）、なりすましチェックＯＫ（ステップ５０９）とし、顔認証処理へ移行する（ステップ５１０）。 If the distance to the face a 'is the distance b to the background' shorter than the (Yes), spoofing check OK (step 509), the process proceeds to the face authentication process (Step 510). 顔認証処理は、第１の実施の形態と同様に周知の技術を用いて行うことができる。 Face recognition processing can be performed using techniques well known as in the first embodiment.
以上に説明したように、本実施の形態によれば、写真によるなりすましを防止できる。 As described above, according to this embodiment can prevent spoofing by photographs. その際、画像入力手段である撮像部に、オートフォーカス機構を持つカメラを持つことで、カメラの既存のオートフォーカス機構を利用することで大掛かりな装置も必要なく写真によるなりすましを防止できる。 At that time, the imaging unit as an image input unit, by having a camera with an auto-focus mechanism, spoofing-with-picture even without large apparatus by utilizing the existing auto-focus mechanism of a camera can be prevented. また、顔認識をした結果をもとに装置からの距離を測定する場合に、測定箇所の数および測定場所を任意に指定することにより、測定箇所及び数を限定したときよりも、なりすましを行うことが防止することができる。 When measuring the distance from the device based on the result of face recognition, by arbitrarily specify the number and measuring the location of the measurement point, than when only the measurement points and number, performs spoofing can it be prevented.
本発明は、顔認証装置のなりすまし防止機能として利用可能である。 The present invention can be used as a spoofing protection of the face authentication apparatus.
本発明の実施の形態によるなりすまし判定機能付顔認証装置の一構成例を示す機能ブロック図である。 It is a functional block diagram showing a configuration example of a spoofing determination function with face authentication apparatus according to an embodiment of the present invention. 目の位置と鼻の位置の２点について装置からの距離を測ることを説明する図である。 It is a diagram for explaining that measure the distance from the device for two points eye position and the nose position. 顔と背景の２つのポイントについて装置からの距離を測ることを説明する図である。 It is a diagram for explaining that measure the distance from the device for the two points of the face and the background. 撮影画像から顔認識を行い、顔の異なる２つのポイントまでの距離を測り、その結果をもとになりすましチェックを行う手順を示したフローチャート図である。 Performs face recognition from the captured image, measure the distance to two points with different faces, it is a flowchart showing a procedure for checking spoofing based on the results. 撮影画像から顔認識を行い、顔と背景の２つのポイントまでの距離を測り、その結果をもとになりすましチェックを行う手順を示したフローチャート図である。 Performs face recognition from the captured image, measure the distance to two points of the face and the background is a flowchart showing a procedure for checking spoofing based on the results.
１０１ 撮像部１０２ 顔認識部１０３ 距離測定部１０４ なりすまし判定部１０５ 顔認証部 101 imaging unit 102 face recognition unit 103 distance measuring unit 104 spoofing determination unit 105 face authentication unit
a 目の位置 Position of a second
b 鼻の位置 Position of b nose
a' 顔 a 'face
b' 背景 b 'background
撮像部により撮像される被認識者の顔に基づいて顔認証を行う顔認証装置と関連付けされるなりすまし判定装置であって、 A spoofing determination device is associated with the face authentication device that performs face authentication based on the face of the perceiver imaged by the imaging unit,
前記撮像された画像をもとに被認証者の顔の認識を行う顔認識部と、 A face recognition unit for recognizing the face of the person to be authenticated on the basis of the captured image,
被認証者の顔の任意の位置までの距離を測定する距離測定部と、 A distance measuring unit for measuring a distance to an arbitrary position of the face of the person to be authenticated,
顔認識結果と距離測定結果とに基づいて、なりすまし判定を行うなりすまし判定部とを備えることを特徴とするなりすまし判定装置。 Based on the results face recognition result and the distance measurement, spoofing determination device, comprising a determining unit spoofing performs spoofing determination.
前記なりすまし判定部は、前記距離測定部により測定された被認証者の顔の任意の位置のうち凹凸の大きい少なくとも２つの位置までの第１の距離と第２の距離との測定結果において前記第１の距離と前記第２の距離との間の距離差の有無に基づいて、距離差がある場合になりすましであると判定することを特徴とする請求項１に記載のなりすまし判定装置。 The spoofing determination unit is configured in the measurement result of the first distance and the second distance to the at least two positions larger irregularities of the arbitrary position of the face of the person to be authenticated, which is measured by the distance measuring unit first based on the presence or absence of the distance difference between the first distance and said second distance, spoofing determination apparatus according to claim 1, characterized in that determined that spoofing when there is a distance difference.
前記２つの位置までの第１の距離と第２の距離との距離差に関して、なりすましとは判断しないための許容範囲を予め記憶しておく記憶部と、該記憶部の記憶に基づいて実際の測定値である距離差が前記許容範囲内に入っている場合に、なりすましではないと判定することを特徴とする請求項２に記載のなりすまし判定装置。 Respect to the distance difference between the first distance and the second distance to the two positions, a storage unit which stores in advance an allowable range for not determining the spoofing, real based on storing the storage unit If the distance difference is a measurement value falls within the allowable range, spoofing determination device according to claim 2, wherein determining that not the spoofing.
前記第１の距離は、被験者の鼻までの距離であり、前記第２の距離は被験者の鼻以外の顔の部分までの距離であることを特徴とする請求項２または３に記載のなりすまし判定装置。 The first distance is the distance to the nose of the subject, the second distance is spoofing determination according to claim 2 or 3, characterized in that the distance to the portion of the face other than the subject's nose apparatus.
認識に基づいて、顔の範囲を決定するとともに、該顔の範囲から背景となる範囲を選択し決定する顔・背景範囲決定部と、 Based on the recognition, along with determining the scope of the face, and face-background area determination unit that determines to select the range of the background from the scope of said pigment,
認識した画像をもとに、顔までの距離と、背景の位置までの距離と、を測定する距離測定部と、 Based on the recognized image, a distance measuring unit that measures the distance to the face, and the distance to the position of the background, and
顔認識結果と距離測定結果とに基づいて、なりすまし判定を行うなりすまし判定部と を備えることを特徴とするなりすまし判定装置。 Based on the results face recognition result and the distance measurement, spoofing determination device, comprising a determining unit spoofing performs spoofing determination.
前記なりすまし判定部は、前記距離測定部により測定された顔までの距離と、背景の位置までの距離と、の間の距離差の有無に基づいて、距離差がある場合になりすましであると判定することを特徴とする請求項５に記載のなりすまし判定装置。 It determines that the spoofing determination unit includes a distance to a face is measured by the distance measuring unit, based on the presence or absence of the distance difference between the distance to the position of the background is spoofed when there is a distance difference spoofing determination apparatus according to claim 5, characterized in that the.
顔認識をした結果をもとに装置からの距離を測定する場合に、測定箇所の数および測定場所を任意に指定することができる操作部を有することを特徴とする請求項１から６までのいずれか１項に記載のなりすまし判定装置。 When measuring the distance from the device based on the result of face recognition, the number and measuring the location of the measurement point from claim 1, characterized in that it comprises an operating portion capable of arbitrarily specifying to 6 spoofing determination apparatus according to any one.
前記距離測定部は、電磁波を装置から測定する箇所の数だけ、測定場所に向かって照射し、その反射を観測することにより行われることを特徴とする請求項１から７までのいずれか１項に記載のなりすまし判定装置。 Said distance measuring unit, the number of places for measuring the electromagnetic wave from the device, is irradiated towards the measurement location, any one of claims 1, characterized in that it is carried out by observing the reflection up to 7 spoofing determination apparatus according to.
光学系を含む撮像部を有し、 An image pickup unit including an optical system,
前記距離測定部は、前記光学系を物理的に動かして、測定する箇所の数だけコントラストの高い合焦位置を求めることにより行われることを特徴とする請求項１から７までのいずれか１項に記載のなりすまし判定装置。 Said distance measuring unit, the move the optical system physically, any one of be performed by obtaining a high focusing position number of only the contrast of a portion measured from claim 1, wherein up to 7 spoofing determination apparatus according to.
前記距離測定部としてカメラのオートフォーカス機構を用いることを特徴とする請求項１から７までのいずれか１項に記載のなりすまし判定装置。 Spoofing determination apparatus according to any one of claims 1 to 7, which comprises using an auto-focus mechanism of a camera as the distance measuring unit.
請求項１から１０までのいずれか１項に記載のなりすまし判定装置と、 A spoofing determination device according to any one of claims 1 to 10,
該なりすまし判定装置によるなりすましチェックがされた画像について、撮影された顔と、あらかじめ記憶されている顔と、を比較して、同じであるかどうかにより顔認証を行う顔認証部と、を有することを特徴とする顔認証装置。 For the spoofing determination device according spoofing image check is, to have a shot face, compares the face stored in advance, and a face authentication unit that performs face authentication by determining whether the same, the face authentication apparatus according to claim.
認証用の画像を取得するステップと、 Acquiring an image for authentication,
取得した画像をもとに顔認識を行うステップと、 Performing a face recognition based on the acquired image,
おおよその顔の範囲を画定しておき、その顔の範囲内において認識した画面上の第１の位置を参照しながら、装置から被認証者の顔の実際の第１の位置までの距離を計測するステップと、 Leave define the scope of the approximate face, with reference to the first position on the recognized screens within the scope of the face, measure the distance to the actual first position of the face of the person to be authenticated from the device the method comprising the steps of,
装置から被認証者の顔の前記第１の距離とは異なる第２の位置までの距離を計測するステップと、 A step of measuring a distance to a second different position from the device and the first distance of the face of the person to be authenticated,
前記第１の距離と前記第２の距離とを比較し、その差分の有無またはその差分が予め規定されている範囲内であるかにより、写真によるなりすましであるか否かを判定するステップと、 Wherein comparing the first distance and the second distance, by the either the presence or absence or the difference of the difference is within the range specified in advance, and determining whether or not spoofing-with-picture,
撮影された顔と、あらかじめ記憶されている顔と、を比較して、同じであるかどうかにより顔認証を行うステップとを有する顔認証方法。 A photographed face, compares the face stored in advance, the face authentication method comprising the steps of performing face authentication by determining whether the same.
装置から被認証者の顔の範囲とは異なる背景部分までの第２の位置までの距離を計測するステップと、 A step of measuring a distance to a second position to different background portion ranges from the apparatus of the face of the person to be authenticated,
請求項１２または１３に記載のステップをコンピュータに実行させるためのプログラム。 Program for executing the steps according to the computer to claim 12 or 13.
JP2006059403A 2006-03-06 2006-03-06 Pretense decision device in face authentication and face authentication device using it Pending JP2007241402A (en)
JP2006059403A JP2007241402A (en) 2006-03-06 2006-03-06 Pretense decision device in face authentication and face authentication device using it
JP2007241402A true JP2007241402A (en) 2007-09-20
ID=38586920
JP2006059403A Pending JP2007241402A (en) 2006-03-06 2006-03-06 Pretense decision device in face authentication and face authentication device using it
JP (1) JP2007241402A (en)
JP2007304801A (en) * 2006-05-10 2007-11-22 Nec Corp Solidity authenticating method, solidity authenticating apparatus, and solidity authenticating program
WO2009110323A1 (en) * 2008-03-03 2009-09-11 日本電気株式会社 Living body judgment system, method for judging living body and program for judging living body
JP2012069133A (en) * 2011-10-24 2012-04-05 Nec Corp Solidity authenticating method, solidity authenticating apparatus, and solidity authenticating program
EP2624209A1 (en) * 2011-12-26 2013-08-07 Kabushiki Kaisha Toshiba Position coordinate detecting device, a position coordinate detecting method, and electronic device
US9977949B2 (en) 2015-10-27 2018-05-22 Kabushiki Kaisha Toshiba Impersonation detector
KR102007842B1 (en) * 2013-01-22 2019-08-06 엘지전자 주식회사 Digital device and method of identifying an image thereof
2006-03-06 JP JP2006059403A patent/JP2007241402A/en active Pending
JPWO2010134200A1 (en) * 2009-05-22 2012-11-08 株式会社東芝 Image processing apparatus, method and program
KR100790223B1 (en) 2008-01-02 Face authentication apparatus and control method thereof, electronic device having the same, control program of the same, and recording medium on which said control program is recorded