(57)【要約】【課題】認証パスワードの漏洩を防止しつつ、認証精度の向上を実現する仕組みを提供する。【解決手段】登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における複数の登録特徴点の動きに係る登録時系列データを記憶する記憶メモリ１３３５ａと、認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における複数の認証特徴点の動きに係る認証時系列データを取得する特徴点時系列データ取得部１３４４と、特徴点時系列データ取得部１３４４で取得した認証時系列データと記憶メモリ１３３５ａに記憶されている登録時系列データとの差異度を算出し、当該差異度に基づいて認証対象者の認証処理を行う認証処理部１３４５を備える。【選択図】図２
2015018547.tif 000002
【特許請求の範囲】
【請求項１】
登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの登録特徴点について当該４つの登録特徴点のうちの異なる２組の登録特徴点間の距離に係る２つの登録口唇特徴と前記４つの登録特徴点により定まる菱形における４つの角度に係る４つの登録口唇特徴とを合わせた６つの登録口唇特徴に係る６つの登録時系列データを記憶する記憶手段と、
認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの認証特徴点について当該４つの認証特徴点のうちの異なる２組の認証特徴点間の距離に係る２つの認証口唇特徴と前記４つの認証特徴点により定まる菱形における４つの角度に係る４つの認証口唇特徴とを合わせた６つの認証口唇特徴に係る６つの認証時系列データを取得する取得手段と、
前記取得手段で取得した６つの認証時系列データと前記記憶手段に記憶されている６つの登録時系列データとの差異度を算出し、当該差異度に基づいて前記認証対象者の認証処理を行う認証処理手段と、
を有することを特徴とする認証処理装置。
【請求項２】
前記記憶手段に記憶されている６つの登録時系列データは、前記４つの登録特徴点として、前記認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における上唇の点、下唇の点、左端の点及び右端の点を用いたものであり、
前記取得手段で取得した６つの認証時系列データは、前記４つの認証特徴点として、前記認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における上唇の点、下唇の点、左端の点及び右端の点を用いたものであることを特徴とする請求項１に記載の認証処理装置。
【請求項３】
前記記憶手段に記憶されている６つの登録時系列データは、前記認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における前記上唇の点と前記下唇の点との距離に関する第１の登録時系列データと、前記認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における前記左端の点と前記右端の点との距離に関する第２の登録時系列データと、当該左端の点と当該右端の点とを結ぶ直線と当該左端の点または当該右端の点と当該上唇の点とを結ぶ直線とのなす角度に関する第３の登録時系列データと、当該左端の点と当該右端の点とを結ぶ直線と当該左端の点または当該右端の点と当該下唇の点とを結ぶ直線とのなす角度に関する第４の登録時系列データと、当該上唇の点と当該下唇の点とを結ぶ直線と当該左端の点または当該右端の点と当該上唇の点とを結ぶ直線とのなす角度に関する第５の登録時系列データと、当該上唇の点と当該下唇の点とを結ぶ直線と当該左端の点または当該右端の点と当該下唇の点とを結ぶ直線とのなす角度に関する第６の登録時系列データであり、
前記取得手段で取得した６つの認証時系列データは、前記認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における前記上唇の点と前記下唇の点との距離に関する第１の認証時系列データと、前記認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における前記左端の点と前記右端の点との距離に関する第２の認証時系列データと、当該左端の点と当該右端の点とを結ぶ直線と当該左端の点または当該右端の点と当該上唇の点とを結ぶ直線とのなす角度に関する第３の認証時系列データと、当該左端の点と当該右端の点とを結ぶ直線と当該左端の点または当該右端の点と当該下唇の点とを結ぶ直線とのなす角度に関する第４の認証時系列データと、当該上唇の点と当該下唇の点とを結ぶ直線と当該左端の点または当該右端の点と当該上唇の点とを結ぶ直線とのなす角度に関する第５の認証時系列データと、当該上唇の点と当該下唇の点とを結ぶ直線と当該左端の点または当該右端の点と当該下唇の点とを結ぶ直線とのなす角度に関する第６の認証時系列データであり、
前記認証処理手段は、前記取得手段で取得した前記第１の認証時系列データと前記記憶手段に記憶されている前記第１の登録時系列データとの第１の差異度を算出し、前記取得手段で取得した前記第２の認証時系列データと前記記憶手段に記憶されている前記第２の登録時系列データとの第２の差異度を算出し、前記取得手段で取得した前記第３の認証時系列データと前記記憶手段に記憶されている前記第３の登録時系列データとの第３の差異度を算出し、前記取得手段で取得した前記第４の認証時系列データと前記記憶手段に記憶されている前記第４の登録時系列データとの第４の差異度を算出し、前記取得手段で取得した前記第５の認証時系列データと前記記憶手段に記憶されている前記第５の登録時系列データとの第５の差異度を算出し、前記取得手段で取得した前記第６の認証時系列データと前記記憶手段に記憶されている前記第６の登録時系列データとの第６の差異度を算出して、前記第１〜第６の差異度に基づいて前記認証対象者の認証処理を行うことを特徴とする請求項２に記載の認証処理装置。
【請求項４】
前記認証処理手段は、前記第１〜第６の差異度を乗算した乗算結果と閾値とを比較し、前記乗算結果が前記閾値以下である場合に、前記認証対象者の認証を許可することを特徴とする請求項３に記載の認証処理装置。
【請求項５】
登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの登録特徴点について当該４つの登録特徴点のうちの異なる２組の登録特徴点間の距離に係る２つの登録口唇特徴のうちの１つの登録口唇特徴と前記４つの登録特徴点により定まる菱形における４つの角度に係る４つの登録口唇特徴とを合わせた５つの登録口唇特徴に係る５つの登録時系列データを記憶する記憶手段と、
認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの認証特徴点について当該４つの認証特徴点のうちの異なる２組の認証特徴点間の距離に係る２つの認証口唇特徴のうちの前記１つの登録口唇特徴に対応する１つの認証口唇特徴と前記４つの認証特徴点により定まる菱形における４つの角度に係る４つの認証口唇特徴とを合わせた５つの認証口唇特徴に係る５つの認証時系列データを取得する取得手段と、
前記取得手段で取得した５つの認証時系列データと前記記憶手段に記憶されている５つの登録時系列データとの差異度を算出し、当該差異度に基づいて前記認証対象者の認証処理を行う認証処理手段と、
を有することを特徴とする認証処理装置。
【請求項６】
登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの登録特徴点について当該４つの登録特徴点のうちの異なる２組の登録特徴点間の距離に係る２つの登録口唇特徴と前記４つの登録特徴点により定まる菱形における４つの角度に係る４つの登録口唇特徴のうちの３つの登録口唇特徴とを合わせた５つの登録口唇特徴に係る５つの登録時系列データを記憶する記憶手段と、
認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの認証特徴点について当該４つの認証特徴点のうちの異なる２組の認証特徴点間の距離に係る２つの認証口唇特徴と前記４つの認証特徴点により定まる菱形における４つの角度に係る４つの認証口唇特徴のうちの前記３つの登録口唇特徴に対応する３つの認証口唇特徴とを合わせた５つの認証口唇特徴に係る５つの認証時系列データを取得する取得手段と、
前記取得手段で取得した５つの認証時系列データと前記記憶手段に記憶されている５つの登録時系列データとの差異度を算出し、当該差異度に基づいて前記認証対象者の認証処理を行う認証処理手段と、
を有することを特徴とする認証処理装置。
【請求項７】
登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの登録特徴点について当該４つの登録特徴点のうちの異なる２組の登録特徴点間の距離に係る２つの登録口唇特徴に係る２つの登録時系列データを記憶する記憶手段と、
認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの認証特徴点について当該４つの認証特徴点のうちの異なる２組の認証特徴点間の距離に係る２つの認証口唇特徴に係る２つの認証時系列データを取得する取得手段と、
前記取得手段で取得した２つの認証時系列データと前記記憶手段に記憶されている２つの登録時系列データとの差異度を算出し、当該差異度に基づいて前記認証対象者の認証処理を行う認証処理手段と、
を有することを特徴とする認証処理装置。
【請求項８】
登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの登録特徴点について当該４つの登録特徴点により定まる菱形における４つの角度に係る４つの登録口唇特徴に係る４つの登録時系列データを記憶する記憶手段と、
認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの認証特徴点について当該４つの認証特徴点により定まる菱形における４つの角度に係る４つの認証口唇特徴に係る４つの認証時系列データを取得する取得手段と、
前記取得手段で取得した４つの認証時系列データと前記記憶手段に記憶されている４つの登録時系列データとの差異度を算出し、当該差異度に基づいて前記認証対象者の認証処理を行う認証処理手段と、
を有することを特徴とする認証処理装置。
【請求項９】
前記認証登録者および前記認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇の動きを動画像として撮影する撮影手段と、
前記動画像における口唇の傾きを補正する補正手段と、
を更に有し、
前記記憶手段は、前記認証登録者が自身の認証パスワードを発声せずに口パクした際に前記撮影手段により撮影された動画像であって前記補正手段により口唇の傾きが補正された動画像における口唇の前記４つの登録特徴点の動きに係る前記登録時系列データを記憶し、
前記取得手段は、前記認証対象者が自身の認証パスワードを発声せずに口パクした際に前記撮影手段により撮影された動画像であって前記補正手段により口唇の傾きが補正された動画像における口唇の前記４つの認証特徴点の動きに係る前記認証時系列データを取得することを特徴とする請求項１乃至８のいずれか１項に記載の認証処理装置。
【請求項１０】
前記撮影手段として赤外線カメラを用い、
前記赤外線カメラは、暗箱内に設置されており、当該暗箱の挿入口から挿入された口唇の動きを動画像として撮影することを特徴とする請求項９に記載の認証処理装置。
【請求項１１】
前記認証処理手段は、ＤＰマッチングを用いて前記差異度を算出することを特徴とする請求項１乃至１０のいずれか１項に記載の認証処理装置。
【請求項１２】
登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの登録特徴点について当該４つの登録特徴点のうちの異なる２組の登録特徴点間の距離に係る２つの登録口唇特徴と前記４つの登録特徴点により定まる菱形における４つの角度に係る４つの登録口唇特徴とを合わせた６つの登録口唇特徴に係る６つの登録時系列データを記憶手段に記憶する記憶ステップと、
認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの認証特徴点について当該４つの認証特徴点のうちの異なる２組の認証特徴点間の距離に係る２つの認証口唇特徴と前記４つの認証特徴点により定まる菱形における４つの角度に係る４つの認証口唇特徴とを合わせた６つの認証口唇特徴に係る６つの認証時系列データを取得する取得ステップと、
前記取得ステップで取得した６つの認証時系列データと前記記憶手段に記憶されている６つの登録時系列データとの差異度を算出し、当該差異度に基づいて前記認証対象者の認証処理を行う認証処理ステップと、
を有することを特徴とする認証処理方法。
【請求項１３】
登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの登録特徴点について当該４つの登録特徴点のうちの異なる２組の登録特徴点間の距離に係る２つの登録口唇特徴のうちの１つの登録口唇特徴と前記４つの登録特徴点により定まる菱形における４つの角度に係る４つの登録口唇特徴とを合わせた５つの登録口唇特徴に係る５つの登録時系列データを記憶手段に記憶する記憶ステップと、
認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの認証特徴点について当該４つの認証特徴点のうちの異なる２組の認証特徴点間の距離に係る２つの認証口唇特徴のうちの前記１つの登録口唇特徴に対応する１つの認証口唇特徴と前記４つの認証特徴点により定まる菱形における４つの角度に係る４つの認証口唇特徴とを合わせた５つの認証口唇特徴に係る５つの認証時系列データを取得する取得ステップと、
前記取得ステップで取得した５つの認証時系列データと前記記憶手段に記憶されている５つの登録時系列データとの差異度を算出し、当該差異度に基づいて前記認証対象者の認証処理を行う認証処理ステップと、
を有することを特徴とする認証処理方法。
【請求項１４】
登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの登録特徴点について当該４つの登録特徴点のうちの異なる２組の登録特徴点間の距離に係る２つの登録口唇特徴と前記４つの登録特徴点により定まる菱形における４つの角度に係る４つの登録口唇特徴のうちの３つの登録口唇特徴とを合わせた５つの登録口唇特徴に係る５つの登録時系列データを記憶手段に記憶する記憶ステップと、
認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの認証特徴点について当該４つの認証特徴点のうちの異なる２組の認証特徴点間の距離に係る２つの認証口唇特徴と前記４つの認証特徴点により定まる菱形における４つの角度に係る４つの認証口唇特徴のうちの前記３つの登録口唇特徴に対応する３つの認証口唇特徴とを合わせた５つの認証口唇特徴に係る５つの認証時系列データを取得する取得ステップと、
前記取得ステップで取得した５つの認証時系列データと前記記憶手段に記憶されている５つの登録時系列データとの差異度を算出し、当該差異度に基づいて前記認証対象者の認証処理を行う認証処理ステップと、
を有することを特徴とする認証処理方法。
【請求項１５】
登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの登録特徴点について当該４つの登録特徴点のうちの異なる２組の登録特徴点間の距離に係る２つの登録口唇特徴に係る２つの登録時系列データを記憶手段に記憶する記憶ステップと、
認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの認証特徴点について当該４つの認証特徴点のうちの異なる２組の認証特徴点間の距離に係る２つの認証口唇特徴に係る２つの認証時系列データを取得する取得ステップと、
前記取得ステップで取得した２つの認証時系列データと前記記憶手段に記憶されている２つの登録時系列データとの差異度を算出し、当該差異度に基づいて前記認証対象者の認証処理を行う認証処理ステップと、
を有することを特徴とする認証処理方法。
【請求項１６】
登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの登録特徴点について当該４つの登録特徴点により定まる菱形における４つの角度に係る４つの登録口唇特徴に係る４つの登録時系列データを記憶手段に記憶する記憶ステップと、
認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの認証特徴点について当該４つの認証特徴点により定まる菱形における４つの角度に係る４つの認証口唇特徴に係る４つの認証時系列データを取得する取得ステップと、
前記取得ステップで取得した４つの認証時系列データと前記記憶手段に記憶されている４つの登録時系列データとの差異度を算出し、当該差異度に基づいて前記認証対象者の認証処理を行う認証処理ステップと、
を有することを特徴とする認証処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、認証対象者の個人認証を行う認証処理装置及び認証処理方法に関するものである。
【背景技術】
【０００２】
近年、人間の身体的特徴や行動的特徴の情報を用いて個人認証を行うバイオメトリクス認証が普及してきている。そして、このようなバイオメトリクス認証の一種として、音声認証がある（例えば、下記の特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００２−２４４６９７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述した音声認証は、環境音の影響を受けやすく、その認証精度の低下が懸念されるという問題があった。また、上述した音声認証では、認証対象者が発声を行うため、認証パスワードの漏洩が懸念されるという問題（更には正常に発話が行えない人は認証が行えないという問題）があった。
【０００５】
本発明は、このような問題点に鑑みてなされたものであり、認証パスワードの漏洩を防止しつつ、認証精度の向上を実現する仕組みを提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の認証処理装置は、登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの登録特徴点について当該４つの登録特徴点のうちの異なる２組の登録特徴点間の距離に係る２つの登録口唇特徴と前記４つの登録特徴点により定まる菱形における４つの角度に係る４つの登録口唇特徴とを合わせた６つの登録口唇特徴に係る６つの登録時系列データを記憶する記憶手段と、認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの認証特徴点について当該４つの認証特徴点のうちの異なる２組の認証特徴点間の距離に係る２つの認証口唇特徴と前記４つの認証特徴点により定まる菱形における４つの角度に係る４つの認証口唇特徴とを合わせた６つの認証口唇特徴に係る６つの認証時系列データを取得する取得手段と、前記取得手段で取得した６つの認証時系列データと前記記憶手段に記憶されている６つの登録時系列データとの差異度を算出し、当該差異度に基づいて前記認証対象者の認証処理を行う認証処理手段と、を有する。
本発明の認証処理装置における他の態様は、登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの登録特徴点について当該４つの登録特徴点のうちの異なる２組の登録特徴点間の距離に係る２つの登録口唇特徴のうちの１つの登録口唇特徴と前記４つの登録特徴点により定まる菱形における４つの角度に係る４つの登録口唇特徴とを合わせた５つの登録口唇特徴に係る５つの登録時系列データを記憶する記憶手段と、認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの認証特徴点について当該４つの認証特徴点のうちの異なる２組の認証特徴点間の距離に係る２つの認証口唇特徴のうちの前記１つの登録口唇特徴に対応する１つの認証口唇特徴と前記４つの認証特徴点により定まる菱形における４つの角度に係る４つの認証口唇特徴とを合わせた５つの認証口唇特徴に係る５つの認証時系列データを取得する取得手段と、前記取得手段で取得した５つの認証時系列データと前記記憶手段に記憶されている５つの登録時系列データとの差異度を算出し、当該差異度に基づいて前記認証対象者の認証処理を行う認証処理手段と、を有する。
また、本発明の認証処理装置におけるその他の態様は、登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの登録特徴点について当該４つの登録特徴点のうちの異なる２組の登録特徴点間の距離に係る２つの登録口唇特徴と前記４つの登録特徴点により定まる菱形における４つの角度に係る４つの登録口唇特徴のうちの３つの登録口唇特徴とを合わせた５つの登録口唇特徴に係る５つの登録時系列データを記憶する記憶手段と、認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの認証特徴点について当該４つの認証特徴点のうちの異なる２組の認証特徴点間の距離に係る２つの認証口唇特徴と前記４つの認証特徴点により定まる菱形における４つの角度に係る４つの認証口唇特徴のうちの前記３つの登録口唇特徴に対応する３つの認証口唇特徴とを合わせた５つの認証口唇特徴に係る５つの認証時系列データを取得する取得手段と、前記取得手段で取得した５つの認証時系列データと前記記憶手段に記憶されている５つの登録時系列データとの差異度を算出し、当該差異度に基づいて前記認証対象者の認証処理を行う認証処理手段と、を有する。
また、本発明の認証処理装置におけるその他の態様は、登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの登録特徴点について当該４つの登録特徴点のうちの異なる２組の登録特徴点間の距離に係る２つの登録口唇特徴に係る２つの登録時系列データを記憶する記憶手段と、認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの認証特徴点について当該４つの認証特徴点のうちの異なる２組の認証特徴点間の距離に係る２つの認証口唇特徴に係る２つの認証時系列データを取得する取得手段と、前記取得手段で取得した２つの認証時系列データと前記記憶手段に記憶されている２つの登録時系列データとの差異度を算出し、当該差異度に基づいて前記認証対象者の認証処理を行う認証処理手段と、を有する。
また、本発明の認証処理装置におけるその他の態様は、登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの登録特徴点について当該４つの登録特徴点により定まる菱形における４つの角度に係る４つの登録口唇特徴に係る４つの登録時系列データを記憶する記憶手段と、認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの認証特徴点について当該４つの認証特徴点により定まる菱形における４つの角度に係る４つの認証口唇特徴に係る４つの認証時系列データを取得する取得手段と、前記取得手段で取得した４つの認証時系列データと前記記憶手段に記憶されている４つの登録時系列データとの差異度を算出し、当該差異度に基づいて前記認証対象者の認証処理を行う認証処理手段と、を有する。
【０００７】
本発明の認証処理方法は、登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの登録特徴点について当該４つの登録特徴点のうちの異なる２組の登録特徴点間の距離に係る２つの登録口唇特徴と前記４つの登録特徴点により定まる菱形における４つの角度に係る４つの登録口唇特徴とを合わせた６つの登録口唇特徴に係る６つの登録時系列データを記憶手段に記憶する記憶ステップと、認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの認証特徴点について当該４つの認証特徴点のうちの異なる２組の認証特徴点間の距離に係る２つの認証口唇特徴と前記４つの認証特徴点により定まる菱形における４つの角度に係る４つの認証口唇特徴とを合わせた６つの認証口唇特徴に係る６つの認証時系列データを取得する取得ステップと、前記取得ステップで取得した６つの認証時系列データと前記記憶手段に記憶されている６つの登録時系列データとの差異度を算出し、当該差異度に基づいて前記認証対象者の認証処理を行う認証処理ステップと、を有する。
本発明の認証処理方法における他の態様は、登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの登録特徴点について当該４つの登録特徴点のうちの異なる２組の登録特徴点間の距離に係る２つの登録口唇特徴のうちの１つの登録口唇特徴と前記４つの登録特徴点により定まる菱形における４つの角度に係る４つの登録口唇特徴とを合わせた５つの登録口唇特徴に係る５つの登録時系列データを記憶手段に記憶する記憶ステップと、認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの認証特徴点について当該４つの認証特徴点のうちの異なる２組の認証特徴点間の距離に係る２つの認証口唇特徴のうちの前記１つの登録口唇特徴に対応する１つの認証口唇特徴と前記４つの認証特徴点により定まる菱形における４つの角度に係る４つの認証口唇特徴とを合わせた５つの認証口唇特徴に係る５つの認証時系列データを取得する取得ステップと、前記取得ステップで取得した５つの認証時系列データと前記記憶手段に記憶されている５つの登録時系列データとの差異度を算出し、当該差異度に基づいて前記認証対象者の認証処理を行う認証処理ステップと、を有する。
また、本発明の認証処理方法におけるその他の態様は、登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの登録特徴点について当該４つの登録特徴点のうちの異なる２組の登録特徴点間の距離に係る２つの登録口唇特徴と前記４つの登録特徴点により定まる菱形における４つの角度に係る４つの登録口唇特徴のうちの３つの登録口唇特徴とを合わせた５つの登録口唇特徴に係る５つの登録時系列データを記憶手段に記憶する記憶ステップと、認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの認証特徴点について当該４つの認証特徴点のうちの異なる２組の認証特徴点間の距離に係る２つの認証口唇特徴と前記４つの認証特徴点により定まる菱形における４つの角度に係る４つの認証口唇特徴のうちの前記３つの登録口唇特徴に対応する３つの認証口唇特徴とを合わせた５つの認証口唇特徴に係る５つの認証時系列データを取得する取得ステップと、前記取得ステップで取得した５つの認証時系列データと前記記憶手段に記憶されている５つの登録時系列データとの差異度を算出し、当該差異度に基づいて前記認証対象者の認証処理を行う認証処理ステップと、を有する。
また、本発明の認証処理方法におけるその他の態様は、登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの登録特徴点について当該４つの登録特徴点のうちの異なる２組の登録特徴点間の距離に係る２つの登録口唇特徴に係る２つの登録時系列データを記憶手段に記憶する記憶ステップと、認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの認証特徴点について当該４つの認証特徴点のうちの異なる２組の認証特徴点間の距離に係る２つの認証口唇特徴に係る２つの認証時系列データを取得する取得ステップと、前記取得ステップで取得した２つの認証時系列データと前記記憶手段に記憶されている２つの登録時系列データとの差異度を算出し、当該差異度に基づいて前記認証対象者の認証処理を行う認証処理ステップと、を有する。
また、本発明の認証処理方法におけるその他の態様は、登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの登録特徴点について当該４つの登録特徴点により定まる菱形における４つの角度に係る４つの登録口唇特徴に係る４つの登録時系列データを記憶手段に記憶する記憶ステップと、認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における４つの特徴点である４つの認証特徴点について当該４つの認証特徴点により定まる菱形における４つの角度に係る４つの認証口唇特徴に係る４つの認証時系列データを取得する取得ステップと、前記取得ステップで取得した４つの認証時系列データと前記記憶手段に記憶されている４つの登録時系列データとの差異度を算出し、当該差異度に基づいて前記認証対象者の認証処理を行う認証処理ステップと、を有する。
【発明の効果】
【０００８】
本発明によれば、認証パスワードの漏洩を防止しつつ、認証精度の向上を実現することができる。
【図面の簡単な説明】
【０００９】
【図１】本発明の第１の実施形態に係る認証処理装置の外観の一例を示す模式図である。
【図２】本発明の第１の実施形態に係る認証処理装置の機能構成の一例を示す模式図である。
【図３−１】本発明の第１の実施形態に係る認証処理装置による認証処理方法の処理手順の一例を示すフローチャートである。
【図３−２】図３−１に引き続き、本発明の第１の実施形態に係る認証処理装置による認証処理方法の処理手順の一例を示すフローチャートである。
【図４】本発明の第１の実施形態に係る認証処理装置の口領域抽出部による口領域抽出処理の一例を説明するための図である。
【図５】本発明の第１の実施形態に係る認証処理装置の口唇傾き補正部による口唇傾き補正処理の一例を説明するための図である。
【図６】本発明の第１の実施形態に係る認証処理装置の特徴点配置部による特徴点配置処理の一例を説明するための図である。
【図７】本発明の第１の実施形態に係る認証処理装置の特徴点時系列データ取得部による各特徴点の追跡処理の一例を説明するための図である。
【図８】本発明の第１の実施形態に係る認証処理装置の特徴点時系列データ取得部による各特徴点に係る時系列データ取得処理の一例を説明するための図である。
【図９】本発明の第１の実施形態に係る認証処理装置の認証処理部による差異度の算出処理の一例を説明するための図である。
【図１０−１】本発明の第２の実施形態に係る認証処理装置の外観の一例を示す模式図である。
【図１０−２】本発明の第２の実施形態に係る認証処理装置の外観の他の一例を示す模式図である。
【図１１】本発明の第３の実施形態を示し、６つの時系列データのうちの１つの時系列データを用いなかった場合（即ち、５つの時系列データを用いた場合）の認証精度の検証実験の結果を示す図である。
【図１２】本発明の第４の実施形態を示し、距離に関する時系列データ及び角度に関する時系列データの６つの時系列データを用いた場合、距離に関する時系列データのみを用いた場合、及び、角度に関する時系列データのみを用いた場合の認証精度の検証実験の結果を示す図である。
【発明を実施するための形態】
【００１０】
以下に、図面を参照しながら、本発明を実施するための形態（実施形態）について説明する。
【００１１】
（第１の実施形態）
図１は、本発明の第１の実施形態に係る認証処理装置の外観の一例を示す模式図である。
図１に示すように、本実施形態に係る認証処理装置１００は、撮影装置１１０と、操作入力装置１２０と、情報処理装置１３０と、表示装置１４０と、電気錠装置１５０を有して構成されている。
【００１２】
撮影装置１１０は、情報処理装置１３０による制御に基づいて、認証登録者や認証対象者（２００）が自身の認証パスワードを発声せずに口パク（リップシンク）した際の口唇２１０の動きを動画像として撮影する装置である。本実施形態においては、例えば、撮影装置１１０として、デジタルビデオカメラを用いるものとするが、他の撮影装置を用いることも可能である。
【００１３】
操作入力装置１２０は、例えばセキュリティ管理者等の操作者が情報処理装置１３０に対して情報の入力を行う際に操作されるものである。この操作入力装置１２０は、例えば、キーボード１２０ａや、ポインティング・デバイスであるマウス１２０ｂを具備して構成されている。
【００１４】
情報処理装置１３０は、認証処理装置１００における動作を統括的に制御するものである。
【００１５】
表示装置１４０は、情報処理装置１３０による制御に基づいて、撮影装置１１０で撮影された画像を表示したり、各種の情報を表示したりする。
【００１６】
電気錠装置１５０は、情報処理装置１３０による制御に基づいて、例えば、ドア等の施錠／解錠を行うものである。
【００１７】
図２は、本発明の第１の実施形態に係る認証処理装置の機能構成の一例を示す模式図である。ここで、図２において、図１と同様の構成については、同じ符号を付しており、その詳細な説明は省略する。
【００１８】
情報処理装置１３０は、モード設定部１３１、画像受信部１３２、登録部１３３、及び、認証部１３４の各機能構成を有している。
本実施形態においては、例えば、情報処理装置１３０のＣＰＵ及びＲＯＭ内に記録されているプログラムから、モード設定部１３１が構成される。また、例えば、情報処理装置１３０のＣＰＵ及びＲＯＭ内に記録されているプログラム並びに通信インタフェースから、画像受信部１３２が構成される。また、例えば、情報処理装置１３０のＣＰＵ及びＲＯＭ内に記録されているプログラム並びに外部メモリから、登録部１３３、認証部１３４が構成される。
【００１９】
モード設定部１３１は、例えば、操作入力装置１２０からの操作入力に基づいて、認証処理装置１００における動作モードを設定する処理を行う。ここで、本実施形態では、「登録モード」と「認証モード」の２つの動作モードが設定可能であるものとする。
【００２０】
画像受信部１３２は、撮影装置１１０により撮影された、認証登録者や認証対象者（２００）の口唇２１０の動きに係る動画像を受信する処理を行う。
【００２１】
登録部１３３は、モード設定部１３１により「登録モード」が設定された際に、認証登録者の登録処理を行う。
具体的に、登録部１３３は、口領域抽出部１３３１、口唇傾き補正部１３３２、特徴点配置部１３３３、特徴点時系列データ取得部１３３４、及び、特徴点時系列データ記憶部１３３５の各機能構成を有している。また、特徴点時系列データ記憶部１３３５は、記憶メモリ１３３５ａを含んでいる。
【００２２】
登録部１３３の口領域抽出部１３３１は、画像受信部１３２で受信した、認証登録者（２００）の口唇２１０の動きに係る動画像において、口領域を抽出する処理を行う。
【００２３】
登録部１３３の口唇傾き補正部１３３２は、口領域抽出部１３３１で抽出した画像（動画像の各フレーム）において口唇の傾きを補正する処理を行う。
【００２４】
登録部１３３の特徴点配置部１３３３は、口唇について複数の登録特徴点を配置する処理を行う。
具体的に、本実施形態においては、特徴点配置部１３３３は、複数の登録特徴点として、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における上唇の点、下唇の点、左端の点及び右端の点の合計４つの登録特徴点を配置する処理を行う。
【００２５】
登録部１３３の特徴点時系列データ取得部１３３４は、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における複数の登録特徴点の動きに係る登録時系列データを取得する処理を行う。
具体的に、本実施形態においては、特徴点時系列データ取得部１３３４は、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における前記４つの登録特徴点について当該４つの登録特徴点のうちの異なる２組の登録特徴点間の距離に係る２つの登録口唇特徴と前記４つの登録特徴点により定まる菱形における４つの角度に係る４つの登録口唇特徴とを合わせた６つの登録口唇特徴に係る６つの登録時系列データを取得する処理を行う。より具体的に、本実施形態においては、特徴点時系列データ取得部１３３４は、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における上唇の点と下唇の点との距離に関する第１の登録時系列データと、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における左端の点と右端の点との距離に関する第２の登録時系列データと、当該左端の点と当該右端の点とを結ぶ直線と当該左端の点または当該右端の点と当該上唇の点とを結ぶ直線とのなす角度に関する第３の登録時系列データと、当該左端の点と当該右端の点とを結ぶ直線と当該左端の点または当該右端の点と当該下唇の点とを結ぶ直線とのなす角度に関する第４の登録時系列データと、当該上唇の点と当該下唇の点とを結ぶ直線と当該左端の点または当該右端の点と当該上唇の点とを結ぶ直線とのなす角度に関する第５の登録時系列データと、当該上唇の点と当該下唇の点とを結ぶ直線と当該左端の点または当該右端の点と当該下唇の点とを結ぶ直線とのなす角度に関する第６の登録時系列データとを含む登録時系列データを取得する処理を行う。
【００２６】
登録部１３３の特徴点時系列データ記憶部１３３５は、特徴点時系列データ取得部１３３４で取得した登録時系列データ（即ち、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における複数の登録特徴点（具体的に、本実施形態では、上唇の点、下唇の点、左端の点及び右端の点の合計４つの登録特徴点）の動きに係る登録時系列データ）を記憶メモリ１３３５ａに記憶して登録する処理を行う。具体的に、本実施形態においては、特徴点時系列データ記憶部１３３５は、特徴点時系列データ取得部１３３４で取得した第１の登録時系列データ〜第６の登録時系列データを含む登録時系列データを記憶メモリ１３３５ａに記憶して登録する処理を行う。
【００２７】
認証部１３４は、モード設定部１３１により「認証モード」が設定された際に、認証対象者の認証処理を行う。
具体的に、認証部１３４は、口領域抽出部１３４１、口唇傾き補正部１３４２、特徴点配置部１３４３、特徴点時系列データ取得部１３４４、及び、認証処理部１３４５の各機能構成を有している。
【００２８】
認証部１３４の口領域抽出部１３４１は、画像受信部１３２で受信した、認証対象者（２００）の口唇２１０の動きに係る動画像において、口領域を抽出する処理を行う。
【００２９】
認証部１３４の口唇傾き補正部１３４２は、口領域抽出部１３４１で抽出した画像（動画像の各フレーム）において口唇の傾きを補正する処理を行う。
【００３０】
認証部１３４の特徴点配置部１３４３は、口唇について複数の認証特徴点を配置する処理を行う。
具体的に、本実施形態においては、特徴点配置部１３４３は、複数の認証特徴点として、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における上唇の点、下唇の点、左端の点及び右端の点の合計４つの認証特徴点を配置する処理を行う。
【００３１】
認証部１３４の特徴点時系列データ取得部１３４４は、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における複数の認証特徴点の動きに係る認証時系列データを取得する処理を行う。
具体的に、本実施形態においては、特徴点時系列データ取得部１３４４は、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における前記４つの認証特徴点について当該４つの認証特徴点のうちの異なる２組の認証特徴点間の距離に係る２つの認証口唇特徴と前記４つの認証特徴点により定まる菱形における４つの角度に係る４つの認証口唇特徴とを合わせた６つの認証口唇特徴に係る６つの認証時系列データを取得する処理を行う。より具体的に、本実施形態においては、特徴点時系列データ取得部１３４４は、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における上唇の点と下唇の点との距離に関する第１の認証時系列データと、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における左端の点と右端の点との距離に関する第２の認証時系列データと、当該左端の点と当該右端の点とを結ぶ直線と当該左端の点または当該右端の点と当該上唇の点とを結ぶ直線とのなす角度に関する第３の認証時系列データと、当該左端の点と当該右端の点とを結ぶ直線と当該左端の点または当該右端の点と当該下唇の点とを結ぶ直線とのなす角度に関する第４の認証時系列データと、当該上唇の点と当該下唇の点とを結ぶ直線と当該左端の点または当該右端の点と当該上唇の点とを結ぶ直線とのなす角度に関する第５の認証時系列データと、当該上唇の点と当該下唇の点とを結ぶ直線と当該左端の点または当該右端の点と当該下唇の点とを結ぶ直線とのなす角度に関する第６の認証時系列データとを含む認証時系列データを取得する処理を行う。
【００３２】
認証部１３４の認証処理部１３４５は、特徴点時系列データ取得部１３４４で取得した認証時系列データと記憶メモリ１３３５ａに記憶されている登録時系列データとの差異度を算出し、当該差異度に基づいて認証対象者の認証処理を行う。
具体的に、本実施形態においては、認証処理部１３４５は、特徴点時系列データ取得部１３４４で取得した上述の６つの認証時系列データと記憶メモリ１３３５ａに記憶されている上述の６つの登録時系列データとの差異度を算出し、当該差異度に基づいて認証対象者の認証処理を行う。より具体的に、本実施形態においては、認証処理部１３４５は、特徴点時系列データ取得部１３４４で取得した第１の認証時系列データと記憶メモリ１３３５ａに記憶されている第１の登録時系列データとの第１の差異度を算出し、特徴点時系列データ取得部１３４４で取得した第２の認証時系列データと記憶メモリ１３３５ａに記憶されている第２の登録時系列データとの第２の差異度を算出し、特徴点時系列データ取得部１３４４で取得した第３の認証時系列データと記憶メモリ１３３５ａに記憶されている第３の登録時系列データとの第３の差異度を算出し、特徴点時系列データ取得部１３４４で取得した第４の認証時系列データと記憶メモリ１３３５ａに記憶されている第４の登録時系列データとの第４の差異度を算出し、特徴点時系列データ取得部１３４４で取得した第５の認証時系列データと記憶メモリ１３３５ａに記憶されている第５の登録時系列データとの第５の差異度を算出し、特徴点時系列データ取得部１３４４で取得した第６の認証時系列データと記憶メモリ１３３５ａに記憶されている第６の登録時系列データとの第６の差異度を算出して、第１〜第６の差異度に基づいて認証対象者の認証処理を行う。より詳細に、認証処理部１３４５は、第１〜第６の差異度をＤＰ（Ｄｙｎａｍｉｃ  Ｐｒｏｇｒａｍｍｉｎｇ）マッチングを用いて算出する。また、認証処理部１３４５は、第１〜第６の差異度を乗算した乗算結果と予め定められている閾値とを比較し、前記乗算結果が前記閾値以下である場合には認証対象者の認証を許可する処理を行い、前記乗算結果が前記閾値よりも大きい場合には認証対象者の認証を不許可とする処理を行う。例えば、認証処理部１３４５は、認証対象者の認証を許可する処理として、電気錠装置１５０の解錠を行う処理を行い、認証対象者の認証を不許可とする処理として、電気錠装置１５０の施錠を行う処理を行う。さらに、認証処理部１３４５は、必要に応じて、認証処理の結果を、表示装置１４０に表示する処理を行う。
【００３３】
次に、認証処理装置１００による認証処理方法の処理手順の一例について説明を行う。
【００３４】
図３−１は、本発明の第１の実施形態に係る認証処理装置による認証処理方法の処理手順の一例を示すフローチャートである。
【００３５】
図３−１の処理が開始されると、まず、ステップＳ１０１において、モード設定部１３１は、設定されている動作モードが「登録モード」であるか否かを判断する。
【００３６】
ステップＳ１０１の判断の結果、設定されている動作モードが「登録モード」でない（本実施形態の場合には「認証モード」である）場合には、図３−２に示すフローチャートに遷移する。
【００３７】
一方、ステップＳ１０１の判断の結果、設定されている動作モードが「登録モード」である場合には、ステップＳ１０２に進む。
ステップＳ１０２に進むと、撮影装置１１０は、情報処理装置１３０による制御に基づいて、認証登録者（２００）が自身の認証パスワードを発声せずに口パクした際の口唇２１０の動きを動画像として撮影する処理を行う。
【００３８】
続いて、ステップＳ１０３において、画像受信部１３２は、ステップＳ１０２で撮影された動画像（認証登録者（２００）が自身の認証パスワードを発声せずに口パクした際の口唇２１０の動きに係る動画像）を受信する処理を行う。
【００３９】
続いて、ステップＳ１０４において、登録部１３３の口領域抽出部１３３１は、ステップＳ１０３で受信した、認証登録者（２００）の口唇２１０の動きに係る動画像において、口領域を抽出する処理を行う。ここで、ステップＳ１０４の具体例について、図４を用いて説明する。
【００４０】
図４は、本発明の第１の実施形態に係る認証処理装置の口領域抽出部による口領域抽出処理の一例を説明するための図である。
図４に示す画像４００は、例えば、撮影装置１１０により撮影された動画像の１フレームである。そして、例えば、登録部１３３の口領域抽出部１３３１は、まず、画像４００から鼻の穴の位置に基づいて鼻領域４０１を検出し、当該鼻領域４０１に基づいてその下方に位置する口領域４０２を抽出する。
【００４１】
ここで、再び、図３−１の説明に戻る。
図３−１のステップＳ１０４の処理が終了すると、ステップＳ１０５に進む。
ステップＳ１０５に進むと、登録部１３３の口唇傾き補正部１３３２は、口領域抽出部１３３１で抽出した画像（動画像の各フレーム）において口唇の傾きを補正する処理を行う。ここで、ステップＳ１０５の具体例について、図５を用いて説明する。
【００４２】
図５は、本発明の第１の実施形態に係る認証処理装置の口唇傾き補正部による口唇傾き補正処理の一例を説明するための図である。
図５（ａ）に示す画像は、例えば、登録部１３３の口領域抽出部１３３１により抽出された口領域の画像である。そして、例えば、登録部１３３の口唇傾き補正部１３３２は、まず、図５（ａ）に示す画像を明度値で二値化処理して図５（ｂ）に示す二値化画像を生成し、図５（ｃ）に示すように、当該二値化画像の白色領域に基づいて口端の２点を結ぶ直線５００を得る。その後、直線５００が画像の水平方向に対して水平になるように、図５（ａ）に示す口唇を回転させて口唇の傾きを補正し、図５（ｄ）に示す画像を得る。
【００４３】
ここで、再び、図３−１の説明に戻る。
図３−１のステップＳ１０５の処理が終了すると、ステップＳ１０６に進む。
ステップＳ１０６に進むと、登録部１３３の特徴点配置部１３３３は、口唇について複数の登録特徴点を配置する処理を行う。ここで、ステップＳ１０６の具体例について、図６を用いて説明する。
【００４４】
図６は、本発明の第１の実施形態に係る認証処理装置の特徴点配置部による特徴点配置処理の一例を説明するための図である。
本実施形態においては、図６に示すように、登録部１３３の特徴点配置部１３３３は、口唇における複数の登録特徴点として、口唇における上唇の点６０１、下唇の点６０２、左端の点６０３及び右端の点６０４の合計４つの登録特徴点を配置する処理を行う。具体的に、本実施形態においては、上唇の点６０１は、例えば、分離度によるエッジ強調を用いることで口唇のエッジを強調し、このエッジに動的輪郭モデルのｓｎａｋｅｓを収束させることで取得される。また、下唇の点６０２は、例えば、抽出された口領域のＬａｂ表色系のａ値を使用し、大津の二値化処理により口唇クラス・肌クラスに分割し、口唇クラスの最下点として取得される。また、左端の点６０３及び右端の点６０４は、例えば、明度値について二値化処理することで、その最も左端及び右端の点として取得される。
【００４５】
ここで、再び、図３−１の説明に戻る。
図３−１のステップＳ１０６の処理が終了すると、ステップＳ１０７に進む。
ステップＳ１０７に進むと、登録部１３３の特徴点時系列データ取得部１３３４は、ステップＳ１０６で配置した各登録特徴点を追跡し、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における複数の登録特徴点の動きに係る登録時系列データを取得する処理を行う。ここで、ステップＳ１０７の具体例について、図７〜図９を用いて説明する。
【００４６】
図７は、本発明の第１の実施形態に係る認証処理装置の特徴点時系列データ取得部による各特徴点の追跡処理の一例を説明するための図である。
図７（ａ）に示す画像は、例えば、撮影装置１１０により撮影された動画像の初期のフレームにおける口領域の画像である。また、図７（ｂ）に示す画像は、例えば、撮影装置１１０により撮影された動画像のｔ枚目（ｔ≧２）のフレームにおける口領域の画像である。ここで、登録部１３３の特徴点時系列データ取得部１３３４は、上唇の点６０１については、図７（ａ）に示す上唇の点６０１−１から図７（ｂ）に示す上唇の点６０１−２のように追跡し、下唇の点６０２については、図７（ａ）に示す下唇の点６０２−１から図７（ｂ）に示す下唇の点６０２−２のように追跡し、左端の点６０３については、図７（ａ）に示す左端の点６０３−１から図７（ｂ）に示す左端の点６０３−２のように追跡し、右端の点６０４については、図７（ａ）に示す右端の点６０４−１から図７（ｂ）に示す右端の点６０４−２のように追跡する。
この際、例えば、上唇の点６０１については、図７（ａ）に示す初期のフレームにおいて上唇の点６０１−１の周辺をテンプレートとして切り出しておき、テンプレートマッチングを利用することで追跡を行う。また、例えば、下唇の点６０２については、配置の場合と同様に、抽出された口領域のＬａｂ表色系のａ値を使用し、大津の二値化処理により口唇クラス・肌クラスに分割し、口唇クラスの最下点を取得することで追跡を行う。また、例えば、左端の点６０３及び右端の点６０４は、配置の場合と同様に、明度値について二値化処理を行って、その最も左端及び右端の点を取得することで追跡を行う。
【００４７】
図８は、本発明の第１の実施形態に係る認証処理装置の特徴点時系列データ取得部による各特徴点に係る時系列データ取得処理の一例を説明するための図である。
図８において、図８（ａ）及び図８（ｃ）は図７（ａ）に相当する画像であり、図８（ｂ）は図７（ｂ）に相当する画像である。
具体的に、本実施形態においては、特徴点時系列データ取得部１３３４は、図８（ａ）〜図８（ｃ）に示すように（認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における）上唇の点６０１と下唇の点６０２との距離８０１に関する第１の登録時系列データと、図８（ａ）〜図８（ｃ）に示すように（認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における）左端の点６０３と右端の点６０４との距離８０２に関する第２の登録時系列データと、図８（ｃ）に示すように左端の点６０３と右端の点６０４とを結ぶ直線と左端の点６０３または右端の点６０４と上唇の点６０１とを結ぶ直線とのなす角度８０３に関する第３の登録時系列データと、図８（ｃ）に示すように左端の点６０３と右端の点６０４とを結ぶ直線と左端の点６０３または右端の点６０４と下唇の点６０２とを結ぶ直線とのなす角度８０４に関する第４の登録時系列データと、図８（ｃ）に示すように上唇の点６０１と下唇の点６０２とを結ぶ直線と左端の点６０３または右端の点６０４と上唇の点６０１とを結ぶ直線とのなす角度８０５に関する第５の登録時系列データと、図８（ｃ）に示すように上唇の点６０１と下唇の点６０２とを結ぶ直線と左端の点６０３または右端の点６０４と下唇の点６０２とを結ぶ直線とのなす角度８０６に関する第６の登録時系列データとを含む登録時系列データを取得する処理を行う。
【００４８】
ここで、特徴点時系列データ取得部１３３４は、例えば、後述する図９（ａ）に示すような６つの登録時系列データを取得する処理を行う。図９（ａ）において、「距離上下」は、図８（ａ）〜図８（ｃ）に示す距離８０１に関する第１の登録時系列データであり、「距離左右」は、図８（ａ）〜図８（ｃ）に示す距離８０２に関する第２の登録時系列データであり、「角度横上」は、図８（ｃ）に示す角度８０３に関する第３の登録時系列データであり、「角度横下」は、図８（ｃ）に示す角度８０４に関する第４の登録時系列データであり、「角度縦上」は、図８（ｃ）に示す角度８０５に関する第５の登録時系列データであり、「角度縦下」は、図８（ｃ）に示す角度８０６に関する第６の登録時系列データである。
【００４９】
ここで、再び、図３−１の説明に戻る。
図３−１のステップＳ１０７の処理が終了すると、ステップＳ１０８に進む。
ステップＳ１０８に進むと、登録部１３３の特徴点時系列データ記憶部１３３５は、ステップＳ１０７で取得した登録時系列データ（即ち、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における複数の登録特徴点の動きに係る登録時系列データ）を記憶メモリ１３３５ａに記憶して登録する処理を行う。具体的に、本実施形態においては、特徴点時系列データ記憶部１３３５は、特徴点時系列データ取得部１３３４で取得した第１の登録時系列データ〜第６の登録時系列データを含む登録時系列データを記憶メモリ１３３５ａに記憶して登録する処理を行う。
【００５０】
ステップＳ１０８の処理が終了すると、図３−１に示すフローチャートの処理を終了する。なお、認証登録者が複数存在する場合には、各認証登録者ごとに図３−１に示すフローチャートの処理が行われて、各認証登録者ごとに自身の認証パスワードを発声せずに口パクした際の口唇における複数の登録特徴点の動きに係る登録時系列データが記憶メモリ１３３５ａに記憶されて登録されることになる。
【００５１】
上述したように、図３−１のステップＳ１０１の判断の結果、設定されている動作モードが「登録モード」でない（本実施形態の場合には「認証モード」である）場合には、図３−２に示すフローチャートに遷移する。
ここで、図３−２は、図３−１に引き続き、本発明の第１の実施形態に係る認証処理装置による認証処理方法の処理手順の一例を示すフローチャートである。
【００５２】
図３−２に示す認証モードに遷移すると、まず、ステップＳ２０１において、撮影装置１１０は、情報処理装置１３０による制御に基づいて、認証対象者（２００）が自身の認証パスワードを発声せずに口パクした際の口唇２１０の動きを動画像として撮影する処理を行う。
【００５３】
続いて、ステップＳ２０２において、画像受信部１３２は、ステップＳ２０１で撮影された動画像（認証対象者（２００）が自身の認証パスワードを発声せずに口パクした際の口唇２１０の動きに係る動画像）を受信する処理を行う。
【００５４】
続いて、ステップＳ２０３において、認証部１３４の口領域抽出部１３４１は、ステップＳ２０２で受信した、認証対象者（２００）の口唇２１０の動きに係る動画像において、口領域を抽出する処理を行う。このステップＳ２０３の具体的な処理の内容は、図３−１のステップＳ１０４において図４を用いて説明した処理と同様である。
【００５５】
続いて、ステップＳ２０４において、認証部１３４の口唇傾き補正部１３４２は、口領域抽出部１３４１で抽出した画像（動画像の各フレーム）において口唇の傾きを補正する処理を行う。このステップＳ２０４の具体的な処理の内容は、図３−１のステップＳ１０５において図５を用いて説明した処理と同様である。
【００５６】
続いて、ステップＳ２０５において、認証部１３４の特徴点配置部１３４３は、口唇について複数の認証特徴点を配置する処理を行う。このステップＳ２０５の具体的な処理の内容は、図３−１のステップＳ１０６において図６を用いて説明した処理と同様である。即ち、本実施形態においては、特徴点配置部１３４３は、複数の認証特徴点として、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における上唇の点、下唇の点、左端の点及び右端の点の合計４つの認証特徴点を配置する処理を行う。
【００５７】
続いて、ステップＳ２０６において、認証部１３４の特徴点時系列データ取得部１３４４は、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における複数の認証特徴点の動きに係る認証時系列データを取得する処理を行う。このステップＳ２０６の具体的な処理の内容は、図３−１のステップＳ１０７において図７及び図８を用いて説明した処理と同様である。即ち、本実施形態においては、特徴点時系列データ取得部１３４４は、図８（ａ）〜図８（ｃ）に示すように（認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における）上唇の点６０１と下唇の点６０２との距離８０１に関する第１の認証時系列データと、図８（ａ）〜図８（ｃ）に示すように（認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における）左端の点６０３と右端の点６０４との距離８０２に関する第２の認証時系列データと、図８（ｃ）に示すように左端の点６０３と右端の点６０４とを結ぶ直線と左端の点６０３または右端の点６０４と上唇の点６０１とを結ぶ直線とのなす角度８０３に関する第３の認証時系列データと、図８（ｃ）に示すように左端の点６０３と右端の点６０４とを結ぶ直線と左端の点６０３または右端の点６０４と下唇の点６０２とを結ぶ直線とのなす角度８０４に関する第４の認証時系列データと、図８（ｃ）に示すように上唇の点６０１と下唇の点６０２とを結ぶ直線と左端の点６０３または右端の点６０４と上唇の点６０１とを結ぶ直線とのなす角度８０５に関する第５の認証時系列データと、図８（ｃ）に示すように上唇の点６０１と下唇の点６０２とを結ぶ直線と左端の点６０３または右端の点６０４と下唇の点６０２とを結ぶ直線とのなす角度８０６に関する第６の認証時系列データとを含む認証時系列データを取得する処理を行う。
【００５８】
ここで、特徴点時系列データ取得部１３４４は、例えば、後述する図９（ｂ）に示すような６つの認証時系列データを取得する処理を行う。図９（ｂ）において、「距離上下」は、図８（ａ）〜図８（ｃ）に示す距離８０１に関する第１の認証時系列データであり、「距離左右」は、図８（ａ）〜図８（ｃ）に示す距離８０２に関する第２の認証時系列データであり、「角度横上」は、図８（ｃ）に示す角度８０３に関する第３の認証時系列データであり、「角度横下」は、図８（ｃ）に示す角度８０４に関する第４の認証時系列データであり、「角度縦上」は、図８（ｃ）に示す角度８０５に関する第５の認証時系列データであり、「角度縦下」は、図８（ｃ）に示す角度８０６に関する第６の認証時系列データである。
【００５９】
ここで、再び、図３−２の説明に戻る。
図３−２のステップＳ２０６の処理が終了すると、ステップＳ２０７に進む。
ステップＳ２０７に進むと、認証部１３４の認証処理部１３４５は、ステップＳ２０６で取得した認証時系列データと記憶メモリ１３３５ａに記憶されている登録時系列データとの差異度を算出する処理を行う。
具体的に、本実施形態においては、認証処理部１３４５は、特徴点時系列データ取得部１３４４で取得した第１の認証時系列データと記憶メモリ１３３５ａに記憶されている第１の登録時系列データとの第１の差異度を算出し、特徴点時系列データ取得部１３４４で取得した第２の認証時系列データと記憶メモリ１３３５ａに記憶されている第２の登録時系列データとの第２の差異度を算出し、特徴点時系列データ取得部１３４４で取得した第３の認証時系列データと記憶メモリ１３３５ａに記憶されている第３の登録時系列データとの第３の差異度を算出し、特徴点時系列データ取得部１３４４で取得した第４の認証時系列データと記憶メモリ１３３５ａに記憶されている第４の登録時系列データとの第４の差異度を算出し、特徴点時系列データ取得部１３４４で取得した第５の認証時系列データと記憶メモリ１３３５ａに記憶されている第５の登録時系列データとの第５の差異度を算出し、特徴点時系列データ取得部１３４４で取得した第６の認証時系列データと記憶メモリ１３３５ａに記憶されている第６の登録時系列データとの第６の差異度を算出する。この際、認証処理部１３４５は、第１〜第６の差異度をＤＰマッチングを用いて算出する。ここで、ステップＳ２０７の具体例について、図９を用いて説明する。
【００６０】
図９は、本発明の第１の実施形態に係る認証処理装置の認証処理部による差異度の算出処理の一例を説明するための図である。
図９（ａ）は、記憶メモリ１３３５ａに記憶されている、ある認証登録者の登録時系列データを示している。例えば、図９（ａ）は、ある認証登録者が自身の認証パスワード（本例では「ひらけごま」）を発声せずに口パクした際の口唇２１０における複数の登録特徴点の動きに係る登録時系列データを示している。
図９（ｂ）は、特徴点時系列データ取得部１３４４で取得した、認証対象者の認証時系列データを示している。例えば、図９（ｂ）は、認証対象者が自身の認証パスワード（本例では「あいうえお」）を発声せずに口パクした際の口唇２１０における複数の認証特徴点の動きに係る認証時系列データを示している。
図９（ｃ）は、認証処理部１３４５で算出された、特徴点時系列データ取得部１３４４で取得した認証時系列データと記憶メモリ１３３５ａに記憶されている登録時系列データとの差異度を示している。具体的に、図９（ｃ）には、前記第１の差異度として１．８９６が算出され、前記第２の差異度として６．３６３が算出され、前記第３の差異度として２．５１３が算出され、前記第４の差異度として２．６４９が算出され、前記第５の差異度として２．５０６が算出され、前記第６の差異度として２．６０８が算出されたことを示している。そして、図９（ｃ）には、最終的な差異度として、前記第１〜第６の差異度を乗算した乗算結果である５２４．８７７が算出されたことを示している。
【００６１】
なお、記憶メモリ１３３５ａに、複数の認証登録者における登録時系列データが記憶されている場合には、各認証登録者における登録時系列データごとに特徴点時系列データ取得部１３４４で取得した認証時系列データとの差異度の算出処理が行われる。
【００６２】
ここで、再び、図３−２の説明に戻る。
図３−２のステップＳ２０７の処理が終了すると、ステップＳ２０８に進む。
ステップＳ２０８に進むと、認証部１３４の認証処理部１３４５は、ステップＳ２０７で算出した差異度が予め定められている閾値以下であるか否かを判断する。
ここで、記憶メモリ１３３５ａに、複数の認証登録者における登録時系列データが記憶されている場合においては、例えば、ステップＳ２０７で算出される各認証登録者ごとの差異度のうち、最も値の小さい差異度が閾値以下であるか否かを判断する。
【００６３】
ステップＳ２０８の判断の結果、ステップＳ２０７で算出した差異度が閾値以下である場合には、ステップＳ２０９に進む。
ステップＳ２０９に進むと、認証部１３４の認証処理部１３４５は、認証対象者の認証を許可する処理を行う。例えば、認証処理部１３４５は、認証対象者の認証を許可する処理として、電気錠装置１５０の解錠を行う処理を行って、認証対象者がドア等を開けて入室できるようにする。さらに、認証処理部１３４５は、必要に応じて、認証処理の結果（認証ＯＫである旨）を、表示装置１４０に表示する処理を行う。
その後、図３−２のフローチャートの処理を終了する。
【００６４】
一方、ステップＳ２０８の判断の結果、ステップＳ２０７で算出した差異度が閾値以下でない（即ち、ステップＳ２０７で算出した差異度が閾値よりも大きい）場合には、ステップＳ２１０に進む。
ステップＳ２１０に進むと、認証部１３４の認証処理部１３４５は、認証対象者の認証を不許可とする処理を行う。例えば、認証処理部１３４５は、認証対象者の認証を不許可とする処理として、電気錠装置１５０の施錠を行う（施錠を維持する）処理を行って、認証対象者がドア等を開けることができずに入室できないようにする。さらに、認証処理部１３４５は、必要に応じて、認証処理の結果（認証ＮＧである旨）を、表示装置１４０に表示する処理を行う。
その後、図３−２のフローチャートの処理を終了する。
【００６５】
例えば、本実施形態において、予め定められている閾値が１５であるとすると、図９（ｃ）に示す例では、最終的な差異度が５２４．８７７であるため、この場合は、ステップＳ２０８において差異度は閾値以下でないと判断され（Ｓ２０８／ＮＯ）、ステップＳ２１０において認証不許可処理が行われることになる。
【００６６】
第１の実施形態によれば、認証対象者が自身の認証パスワードを発声せずに口パクすることによって認証処理を行うため、認証パスワードの漏洩を防止することができる。また、認証対象者は、非接触で認証処理を行うことができる。
さらに、第１の実施形態によれば、登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における複数の登録特徴点の動きに係る登録時系列データを記憶手段に記憶しておき、認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における複数の認証特徴点の動きに係る認証時系列データを取得し、当該取得した認証時系列データと記憶手段に記憶されている登録時系列データとの差異度を算出し、当該差異度に基づいて認証対象者の認証処理を行うため、認証対象者のみが知り得る認証パスワードによって認証処理が行えるとともに、認証対象者に固有の口唇の動きによって認証処理が行えるため、認証精度の向上を実現することができる。
【００６７】
（第２の実施形態）
上述した第１の実施形態では、撮影装置１１０として、一般的なデジタルビデオカメラを用いる例を示したが、第２の実施形態では、赤外線カメラ（赤外線ビデオカメラ）を用いる形態である。
【００６８】
図１０−１は、本発明の第２の実施形態に係る認証処理装置の外観の一例を示す模式図である。図１０−１において、図１に示す第１の実施形態に係る認証処理装置の構成と対応する構成には、同じ符号を付している。
【００６９】
図１０−１に示す例では、赤外線カメラ（赤外線ビデオカメラ）である撮影装置１１０は、黒色の暗箱１６０内に設置されており、情報処理装置１３０による制御に基づいて、当該暗箱内に挿入された認証登録者や認証対象者（２００）の顔における口唇２１０の動きを動画像として撮影するものである。ここで、赤外線カメラ（赤外線ビデオカメラ）である撮影装置１１０は、例えば、暗箱１６０の第１の面１６１に備え付けられている。また、図１０−１に示す例では、暗箱１６０には、第２の面１６２に、認証登録者や認証対象者（２００）の顔を挿入するための挿入口１６２ａが設けられている。
【００７０】
図１０−２は、本発明の第２の実施形態に係る認証処理装置の外観の他の一例を示す模式図である。図１０−２において、図１０−１と同様の構成には、同じ符号を付している。
【００７１】
図１０−２に示す例では、赤外線カメラ（赤外線ビデオカメラ）である撮影装置１１０は、黒色の暗箱１６０内に設置されており、情報処理装置１３０による制御に基づいて、当該暗箱内に挿入された認証登録者や認証対象者（２００）の口唇２１０における動きを動画像として撮影するものである。ここで、赤外線カメラ（赤外線ビデオカメラ）である撮影装置１１０は、例えば、暗箱１６０の第１の面１６１に備え付けられている。また、図１０−２に示す例では、暗箱１６０には、第３の面１６３に、認証登録者や認証対象者（２００）の口唇２１０領域を挿入するための挿入口１６３ａが設けられている。
【００７２】
なお、第２の実施形態においては、第１の実施形態における図２〜図９に示す内容については、第１の実施形態と同様に適用可能である。
【００７３】
第２の実施形態によれば、暗箱内に設置された赤外線カメラ（赤外線ビデオカメラ）で、暗箱内に挿入された認証対象者の口唇２１０における動きを動画像として撮影して、認証対象者の認証処理を行うため、認証対象者の口唇２１０の動きを第三者に見られてしまうという事態を回避することができ、第１の実施形態における効果に加えて、より認証パスワードの漏洩を防止することができる。即ち、よりセキュリティ性を向上させることができる。
【００７４】
（第３の実施形態）
上述した第１の実施形態では、登録時に、第１の登録時系列データ〜第６の登録時系列データを記憶メモリ１３３５ａに記憶して登録し、認証時に、第１の認証時系列データ〜第６の認証時系列データを取得し、対応する時系列データごとに当該取得した認証時系列データと記憶メモリ１３３５ａに記憶されている登録時系列データとの差異度を算出し、当該算出した各差異度に基づいて認証対象者の認証処理を行うものであった。即ち、上述した第１の実施形態では、６つの時系列データを用いて認証処理を行うものであった。
【００７５】
そこで、本発明者は、６つの時系列データのうち、１つの時系列データを用いなかった場合（即ち、５つの時系列データを用いた場合）について、その認証精度の検証実験を行った。
【００７６】
図１１は、本発明の第３の実施形態を示し、６つの時系列データのうちの１つの時系列データを用いなかった場合（即ち、５つの時系列データを用いた場合）の認証精度の検証実験の結果を示す図である。図１１に示す検証実験では、認証登録者の認証パスワードが他人に漏洩した場合を想定した検証実験であり、ＦＡＲ（False Acceptance Rate）は、当該他人が認証登録者の認証パスワードを発声せずに口パク（リップシンク）した際の他人受入率（％）を示しており、また、ＦＲＲ（False Rejection Rate）は、当該認証登録者の本人が自身の認証パスワードを発声せずに口パク（リップシンク）した際の本人拒否率（％）を示している。
【００７７】
図１１に示す認証精度の検証実験では、上述した第１の実施形態における６つの時系列データを用いた場合の認証では、ＦＡＲが２．８５％、ＦＲＲが２．９１の結果が得られた。
【００７８】
図１１に示すように、図８（ａ）〜図８（ｃ）に示す距離８０１（距離上下）に関する第１の時系列データを用いなかった場合（即ち、第２〜第６の時系列データを用いた場合）の認証では、ＦＡＲが２．８５％、ＦＲＲが２．９１の結果が得られた。また、図１１には、上述した第１の実施形態における６つの時系列データを用いた場合の認証結果との差異を（  ）に示している。
また、図１１に示すように、図８（ａ）〜図８（ｃ）に示す距離８０２（距離左右）に関する第２の時系列データを用いなかった場合（即ち、第１，第３〜第６の時系列データを用いた場合）の認証では、ＦＡＲが２．６０％、ＦＲＲが１．９４の結果が得られた。
【００７９】
また、図１１に示すように、図８（ｃ）に示す角度８０３（角度横上）に関する第３の時系列データを用いなかった場合（即ち、第１〜第２，第４〜第６の時系列データを用いた場合）の認証では、ＦＡＲが３．０９％、ＦＲＲが２．９１の結果が得られた。
また、図１１に示すように、図８（ｃ）に示す角度８０４（角度横下）に関する第４の時系列データを用いなかった場合（即ち、第１〜第３，第５〜第６の時系列データを用いた場合）の認証では、ＦＡＲが３．０９％、ＦＲＲが２．９１の結果が得られた。
また、図１１に示すように、図８（ｃ）に示す角度８０５（角度縦上）に関する第５の時系列データを用いなかった場合（即ち、第１〜第４，第６の時系列データを用いた場合）の認証では、ＦＡＲが３．０９％、ＦＲＲが２．９１の結果が得られた。
また、図１１に示すように、図８（ｃ）に示す角度８０６（角度縦下）に関する第６の時系列データを用いなかった場合（即ち、第１〜第５の時系列データを用いた場合）の認証では、ＦＡＲが３．０９％、ＦＲＲが２．９１の結果が得られた。
【００８０】
図１１に示す認証精度の検証実験の結果から、距離に関する１つの時系列データを用いなかった場合には、認証精度に変化なし、或いは、認証精度が向上する結果が得られた。
また、図１１に示す認証精度の検証実験の結果から、角度に関する１つの時系列データを用いなかった場合には、認証精度が低下する結果が得られた。
【００８１】
このように、距離に関する１つの時系列データを用いなかった場合、認証精度に変化なし、或いは、認証精度が向上する結果が得られたため、第３の実施形態に係る認証処理装置（更には認証処理方法）として、以下の形態を採用する。
【００８２】
第３の実施形態に係る認証処理装置の外観は、図１に示す第１の実施形態に係る認証処理装置１００の外観と同様とする態様を適用でき、また、図１０−１や図１０−２に示す第２の実施形態に係る認証処理装置の外観と同様とする態様も適用できる。
【００８３】
また、第３の実施形態に係る認証処理装置の機能構成は、図１に示す第１の実施形態に係る認証処理装置１００の機能構成と同様である。また、第３の実施形態に係る認証処理装置による認証処理方法の処理手順は、図３−１及び図３−２に示す第１の実施形態に係る認証処理装置１００による認証処理方法の処理手順と同様である。
したがって、以下の説明では、第１の実施形態と異なる部分についてのみ説明を行う。
【００８４】
具体的に、本実施形態においては、登録部１３３の特徴点時系列データ取得部１３３４は、登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における上述した４つの登録特徴点について当該４つの登録特徴点のうちの異なる２組の登録特徴点間の距離に係る２つの登録口唇特徴のうちの１つの登録口唇特徴（例えば、図８（ａ）〜図８（ｃ）に示す距離８０２（距離左右）に係る登録口唇特徴）と、上述した４つの登録特徴点により定まる菱形における４つの角度に係る４つの登録口唇特徴と、を合わせた５つの登録口唇特徴に係る５つの登録時系列データを取得する処理を行う。即ち、例えば、特徴点時系列データ取得部１３３４は、第１の実施形態で説明した登録時系列データのうち、第１の登録時系列データ、及び、第３〜第６の登録時系列データを取得する処理を行う。
【００８５】
そして、本実施形態においては、登録部１３３の特徴点時系列データ記憶部１３３５は、登録時に、特徴点時系列データ取得部１３３４で取得した５つの登録時系列データ（例えば、第１の登録時系列データ、及び、第３〜第６の登録時系列データ）を記憶メモリ１３３５ａに記憶して登録する処理を行う。
【００８６】
また、本実施形態においては、認証部１３４の特徴点時系列データ取得部１３４４は、認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における上述した４つの認証特徴点について当該４つの認証特徴点のうちの異なる２組の認証特徴点間の距離に係る２つの認証口唇特徴のうちの前記１つの登録口唇特徴に対応する１つの認証口唇特徴（例えば、図８（ａ）〜図８（ｃ）に示す距離８０２（距離左右）に係る登録口唇特徴）と、上述した４つの認証特徴点により定まる菱形における４つの角度に係る４つの認証口唇特徴と、を合わせた５つの認証口唇特徴に係る５つの認証時系列データを取得する処理を行う。
【００８７】
そして、本実施形態においては、認証部１３４の認証処理部１３４５は、認証時に、特徴点時系列データ取得部１３４４で取得した上述の５つの認証時系列データと記憶メモリ１３３５ａに記憶されている上述の５つの登録時系列データとの差異度を算出し、当該差異度に基づいて認証対象者の認証処理を行う。この認証処理部１３４５による具体的な認証処理の内容は、上述した第１の実施形態における認証処理部１３４５による認証処理と同様である。
【００８８】
第３の実施形態によれば、第１の実施形態における効果に加えて、認証精度の向上を実現することができる。
【００８９】
なお、認証精度の向上を実現する観点から考えると、上述したように、４つの特徴点のうちの異なる２組の特徴点間の距離に係る２つの口唇特徴のうちの１つの口唇特徴と、当該４つの特徴点により定まる菱形における４つの角度に係る４つの口唇特徴と、を合わせた５つの口唇特徴に係る５つの時系列データを用いた認証処理を行うことが好適であるが、本実施形態においては、これに限定されるものではない。
【００９０】
例えば、認証精度の向上を実現することは困難であるが、第３の実施形態として、図１１を用いて説明した他の形態、即ち、上述した４つの特徴点のうちの異なる２組の特徴点間の距離に係る２つの口唇特徴と、当該４つの特徴点により定まる菱形における４つの角度に係る４つの口唇特徴のうちの３つの口唇特徴と、を合わせた５つの口唇特徴に係る５つの時系列データを用いた認証処理を行う形態を適用することも可能である。
この場合、登録部１３３の特徴点時系列データ取得部１３３４は、登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における上述した４つの登録特徴点について当該４つの登録特徴点のうちの異なる２組の登録特徴点間の距離に係る２つの登録口唇特徴と、上述した４つの登録特徴点により定まる菱形における４つの角度に係る４つの登録口唇特徴のうちの３つの登録口唇特徴と、を合わせた５つの登録口唇特徴に係る５つの登録時系列データを取得する処理を行う形態を採る。
そして、登録部１３３の特徴点時系列データ記憶部１３３５は、登録時に、特徴点時系列データ取得部１３３４で取得した上述の５つの登録時系列データを記憶メモリ１３３５ａに記憶して登録する処理を行う形態を採る。
また、認証部１３４の特徴点時系列データ取得部１３４４は、認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における上述した４つの認証特徴点について当該４つの認証特徴点のうちの異なる２組の認証特徴点間の距離に係る２つの認証口唇特徴と、上述した４つの認証特徴点により定まる菱形における４つの角度に係る４つの認証口唇特徴のうちの前記３つの登録口唇特徴に対応する３つの認証口唇特徴と、を合わせた５つの認証口唇特徴に係る５つの認証時系列データを取得する処理を行う形態を採る。
そして、認証部１３４の認証処理部１３４５は、認証時に、特徴点時系列データ取得部１３４４で取得した上述の５つの認証時系列データと記憶メモリ１３３５ａに記憶されている上述の５つの登録時系列データとの差異度を算出し、当該差異度に基づいて認証対象者の認証処理を行う形態を採る。
【００９１】
（第４の実施形態）
上述した第１の実施形態では、登録時に、第１の登録時系列データ〜第６の登録時系列データを記憶メモリ１３３５ａに記憶して登録し、認証時に、第１の認証時系列データ〜第６の認証時系列データを取得し、対応する時系列データごとに当該取得した認証時系列データと記憶メモリ１３３５ａに記憶されている登録時系列データとの差異度を算出し、当該算出した各差異度に基づいて認証対象者の認証処理を行うものであった。即ち、上述した第１の実施形態では、６つの時系列データを用いて認証処理を行うものであった。
【００９２】
そこで、本発明者は、６つの時系列データのうち、図８（ａ）〜図８（ｃ）に示す距離８０１及び８０２に関する時系列データのみを用いた場合、並びに、図８（ｃ）に示す角度８０３〜８０６に関する時系列データのみを用いた場合について、その認証精度の検証実験を行った。
【００９３】
図１２は、本発明の第４の実施形態を示し、距離に関する時系列データ及び角度に関する時系列データの６つの時系列データを用いた場合、距離に関する時系列データのみを用いた場合、及び、角度に関する時系列データのみを用いた場合の認証精度の検証実験の結果を示す図である。
【００９４】
図１２において、「なりすまし実験［１］」は、図１１に示す実験と同様に、認証登録者の認証パスワードが他人に漏洩した場合を想定した検証実験である。そして、「なりすまし実験［１］」において、ＦＡＲは、当該他人が認証登録者の認証パスワードを発声せずに口パク（リップシンク）した際の他人受入率（％）を示しており、また、ＦＲＲは、当該認証登録者の本人が自身の認証パスワードを発声せずに口パク（リップシンク）した際の本人拒否率（％）を示している。
【００９５】
図１２に示す「なりすまし実験［１］」において、上述した第１の実施形態における６つの時系列データを用いた場合の認証では、ＦＡＲが２．８５％、ＦＲＲが２．９１の結果が得られた。
また、図１２に示す「なりすまし実験［１］」において、上述した第１の実施形態における距離に関する時系列データ（図８（ａ）〜図８（ｃ）に示す距離８０１及び８０２に関する時系列データ）のみを用いた場合の認証では、ＦＡＲが１５．９８％、ＦＲＲが１４．５６の結果が得られた。
また、図１２に示す「なりすまし実験［１］」において、上述した第１の実施形態における角度に関する時系列データ（図８（ｃ）に示す角度８０３〜８０６に関する時系列データ）のみを用いた場合の認証では、ＦＡＲが２．９７％、ＦＲＲが２．９１の結果が得られた。
【００９６】
図１２において、「なりすまし実験［２］」は、認証登録者の認証パスワードが他人に漏洩していない場合を想定した検証実験である。そして、「なりすまし実験［２］」において、ＦＡＲは、当該他人が認証登録者の認証パスワードとは異なる認証パスワードを発声せずに口パク（リップシンク）した際の他人受入率（％）を示しており、また、ＦＲＲは、当該認証登録者の本人が自身の認証パスワードを発声せずに口パク（リップシンク）した際の本人拒否率（％）を示している。
【００９７】
図１２に示す「なりすまし実験［２］」において、上述した第１の実施形態における６つの時系列データを用いた場合の認証では、ＦＡＲが２．４２％、ＦＲＲが１．９４の結果が得られた。
また、図１２に示す「なりすまし実験［２］」において、上述した第１の実施形態における距離に関する時系列データ（図８（ａ）〜図８（ｃ）に示す距離８０１及び８０２に関する時系列データ）のみを用いた場合の認証では、ＦＡＲが１４．８５％、ＦＲＲが１５．５３の結果が得られた。
また、図１２に示す「なりすまし実験［２］」において、上述した第１の実施形態における角度に関する時系列データ（図８（ｃ）に示す角度８０３〜８０６に関する時系列データ）のみを用いた場合の認証では、ＦＡＲが３．８８％、ＦＲＲが３．８８の結果が得られた。
【００９８】
図１２において、「本人パスワード忘却実験」は、認証登録者が自身の認証パスワードを忘れてしまった場合を想定した検証実験である。そして、「本人パスワード忘却実験」において、ＦＡＲは、当該認証登録者が自身の認証パスワードとは異なる認証パスワードを発声せずに口パク（リップシンク）した際の受入率（％）を示しており、また、ＦＲＲは、当該認証登録者が自身の認証パスワードを発声せずに口パク（リップシンク）した際の拒否率（％）を示している。
【００９９】
図１２に示す「本人パスワード忘却実験」において、上述した第１の実施形態における６つの時系列データを用いた場合の認証では、ＦＡＲが２３．４５％、ＦＲＲが２３．３０の結果が得られた。
また、図１２に示す「本人パスワード忘却実験」において、上述した第１の実施形態における距離に関する時系列データ（図８（ａ）〜図８（ｃ）に示す距離８０１及び８０２に関する時系列データ）のみを用いた場合の認証では、ＦＡＲが１４．８１％、ＦＲＲが２１．３５の結果が得られた。
また、図１２に示す「本人パスワード忘却実験」において、上述した第１の実施形態における角度に関する時系列データ（図８（ｃ）に示す角度８０３〜８０６に関する時系列データ）のみを用いた場合の認証では、ＦＡＲが２９．６３％、ＦＲＲが３３．０１の結果が得られた。
【０１００】
図１２に示す認証精度の検証実験の結果から、「なりすまし実験［１］」では、上述した第１の実施形態における６つの時系列データを用いた場合の認証精度が一番高い結果が得られた。
また、図１２に示す認証精度の検証実験の結果から、「なりすまし実験［２］」では、上述した第１の実施形態における６つの時系列データを用いた場合の認証精度が一番高い結果が得られた。
また、図１２に示す認証精度の検証実験の結果から、「本人パスワード忘却実験」では、上述した第１の実施形態における距離に関する時系列データのみを用いた場合の認証精度が一番高い結果が得られた。即ち、「本人パスワード忘却実験」では、上述した第１の実施形態における距離に関する時系列データのみを用いた場合の方が、上述した第１の実施形態における６つの時系列データを用いた場合よりも、認証精度が高い結果となった。
【０１０１】
このように、「本人パスワード忘却実験」では、上述した第１の実施形態における距離に関する時系列データのみを用いた場合の方が、上述した第１の実施形態における６つの時系列データを用いた場合よりも、認証精度が高い結果が得られたため、第４の実施形態に係る認証処理装置（更には認証処理方法）として、以下の形態を採用する。
【０１０２】
第４の実施形態に係る認証処理装置の外観は、図１に示す第１の実施形態に係る認証処理装置１００の外観と同様とする態様を適用でき、また、図１０−１や図１０−２に示す第２の実施形態に係る認証処理装置の外観と同様とする態様も適用できる。
【０１０３】
また、第４の実施形態に係る認証処理装置の機能構成は、図１に示す第１の実施形態に係る認証処理装置１００の機能構成と同様である。また、第４の実施形態に係る認証処理装置による認証処理方法の処理手順は、図３−１及び図３−２に示す第１の実施形態に係る認証処理装置１００による認証処理方法の処理手順と同様である。
したがって、以下の説明では、第１の実施形態と異なる部分についてのみ説明を行う。
【０１０４】
具体的に、本実施形態においては、登録部１３３の特徴点時系列データ取得部１３３４は、登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における上述した４つの登録特徴点について当該４つの登録特徴点のうちの異なる２組の登録特徴点間の距離に係る２つの登録口唇特徴（図８（ａ）〜図８（ｃ）に示す距離８０１（距離上下）及び距離８０２（距離左右）に係る登録口唇特徴）に係る２つの登録時系列データを取得する処理を行う。即ち、例えば、特徴点時系列データ取得部１３３４は、第１の実施形態で説明した登録時系列データのうち、第１の登録時系列データ及び第２の登録時系列データを取得する処理を行う。
【０１０５】
そして、本実施形態においては、登録部１３３の特徴点時系列データ記憶部１３３５は、登録時に、特徴点時系列データ取得部１３３４で取得した２つの登録時系列データ（第１の登録時系列データ及び第２の登録時系列データ）を記憶メモリ１３３５ａに記憶して登録する処理を行う。
【０１０６】
また、本実施形態においては、認証部１３４の特徴点時系列データ取得部１３４４は、認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における上述した４つの認証特徴点について当該４つの認証特徴点のうちの異なる２組の認証特徴点間の距離に係る２つの認証口唇特徴（図８（ａ）〜図８（ｃ）に示す距離８０１（距離上下）及び距離８０２（距離左右）に係る登録口唇特徴）に係る２つの認証時系列データを取得する処理を行う。
【０１０７】
そして、本実施形態においては、認証部１３４の認証処理部１３４５は、認証時に、特徴点時系列データ取得部１３４４で取得した上述の２つの認証時系列データと記憶メモリ１３３５ａに記憶されている上述の２つの登録時系列データとの差異度を算出し、当該差異度に基づいて認証対象者の認証処理を行う。この認証処理部１３４５による具体的な認証処理の内容は、上述した第１の実施形態における認証処理部１３４５による認証処理と同様である。
【０１０８】
第４の実施形態によれば、第１の実施形態における効果に加えて、認証精度の向上を実現することができる。
【０１０９】
なお、認証精度の向上を実現する観点から考えると、上述したように、４つの特徴点のうちの異なる２組の特徴点間の距離に係る２つの口唇特徴に係る２つの時系列データを用いた認証処理を行うことが好適であるが、本実施形態においては、これに限定されるものではない。
【０１１０】
例えば、認証精度の向上を実現することは困難であるが、第４の実施形態として、図１２を用いて説明した他の形態、即ち、上述した４つの特徴点により定まる菱形における４つの角度に係る４つの口唇特徴に係る４つの時系列データを用いた認証処理を行う形態を適用することも可能である。
この場合、登録部１３３の特徴点時系列データ取得部１３３４は、登録時に、認証登録者が自身の認証パスワードを発声せずに口パクした際の口唇における上述した４つの登録特徴点により定まる菱形における４つの角度に係る４つの登録口唇特徴に係る４つの登録時系列データを取得する処理を行う形態を採る。
そして、登録部１３３の特徴点時系列データ記憶部１３３５は、登録時に、特徴点時系列データ取得部１３３４で取得した上述の４つの登録時系列データを記憶メモリ１３３５ａに記憶して登録する処理を行う形態を採る。
また、認証部１３４の特徴点時系列データ取得部１３４４は、認証時に、認証対象者が自身の認証パスワードを発声せずに口パクした際の口唇における上述した４つの認証特徴点により定まる菱形における４つの角度に係る４つの認証口唇特徴に係る４つの認証時系列データを取得する処理を行う形態を採る。
そして、認証部１３４の認証処理部１３４５は、認証時に、特徴点時系列データ取得部１３４４で取得した上述の４つの認証時系列データと記憶メモリ１３３５ａに記憶されている上述の４つの登録時系列データとの差異度を算出し、当該差異度に基づいて認証対象者の認証処理を行う形態を採る。
【０１１１】
（その他の実施形態）
また、本発明は、以下の処理を実行することによっても実現される。
即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
このプログラム及び当該プログラムを記憶したコンピュータ読み取り可能な記録媒体は、本発明に含まれる。
【０１１２】
なお、上述した本発明の実施形態は、いずれも本発明を実施するにあたっての具体化の例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。即ち、本発明はその技術思想、又はその主要な特徴から逸脱することなく、様々な形で実施することができる。
【符号の説明】
【０１１３】
１００：認証処理装置、１１０：撮影装置、１２０：操作入力装置、１３０：情報処理装置、１３１：モード設定部、１３２：画像受信部、１３３：登録部、１３３１：口領域抽出部、１３３２：口唇傾き補正部、１３３３：特徴点配置部、１３３４：特徴点時系列データ取得部、１３３５：特徴点時系列データ記憶部、１３３５ａ：記憶メモリ、１３４：認証部、１３４１：口領域抽出部、１３４２：口唇傾き補正部、１３４３：特徴点配置部、１３４４：特徴点時系列データ取得部、１３４５：認証処理部、１４０：表示装置、１５０：電気錠装置、２１０：口唇
【図１】
2015018547.tif 000003
【図２】
2015018547.tif 000004
【図３−１】
2015018547.tif 000005
【図３−２】
2015018547.tif 000006
【図４】
2015018547.tif 000007
【図５】
2015018547.tif 000008
【図６】
2015018547.tif 000009
【図７】
2015018547.tif 000010
【図８】
2015018547.tif 000011
【図９】
2015018547.tif 000012
【図１０−１】
2015018547.tif 000013
【図１０−２】
2015018547.tif 000014
【図１１】
2015018547.tif 000015
【図１２】
2015018547.tif 000016