(57)【要約】  被験者の歩行速度に揺らぎがある場合においても、時間分解能と記録時間の両立を図る。虹彩撮像器（４０１〜４０４）は、移動する被験者の虹彩を撮像する。メモリ（５０２）の転送用の記憶領域（５２１〜５２４）には、虹彩撮像器（４０１〜４０４）から映像が書き込まれる。読出し器（５０４）は、転送用の記憶領域（５２１〜５２４）に記憶される映像を、被験者の移動速度に応じたフレーム間隔にて画像処理用の記憶領域（５２５）に読み出す。画像処理部（５０３）は、画像処理用の記憶領域（５２５）に読み出された映像を用いて処理を実行する。
2020170893.tif 000002
【特許請求の範囲】
【請求項１】
同じ視野範囲で互いに異なる位置に配置される複数の虹彩撮像手段と、
前記虹彩撮像手段の視野範囲より広い視野範囲で撮像する全体撮像手段と、
被験者を誘導するための誘導手段と、
前記被験者に光を照らす照明手段と、
前記全体撮像手段の画像を用いて、前記複数の虹彩撮像手段の画像の読み出し、前記誘導手段の映像及び音声の少なくとも一方の提示、及び、前記照明手段の光の照射のうち少なくとも１つを制御する制御手段とを備え、
前記制御手段は、前記虹彩撮像手段から転送用の記憶領域に書き込まれる映像を前記被験者の移動速度に応じたフレーム間隔にて画像処理用の記憶領域に読み出す読出し手段と、前記画像処理用の記憶領域に読み出された映像を用いて処理を実行する画像処理手段とを有する画像処理システム。
【請求項２】
前記制御手段は、前記複数の虹彩撮像手段の画像の読み出しを実施し、
前記制御手段は、前記複数の虹彩撮像手段の画像の読み出しでは、前記全体撮像手段で撮像された映像に基づいて、前記複数の虹彩撮像手段のうち前記被験者の目を撮像できる虹彩撮像手段を特定し、該特定した虹彩撮像手段に前記被験者の目の位置を含む注視領域を設定し、前記特定した虹彩撮像手段から前記注視領域の映像を取得する請求項１に記載の画像処理システム。
【請求項３】
前記転送用の記憶領域には、前記被験者の所定の移動速度に対応した所定のフレームレートで前記映像が書き込まれ、
前記読出し手段は、前記所定の移動速度と前記被験者の移動速度との関係に応じて前記フレーム間隔を決定する請求項１又は２に記載の画像処理システム。
【請求項４】
移動する被験者の虹彩を撮像するための虹彩撮像手段から転送用の記憶領域に書き込まれる映像を前記被験者の移動速度に応じたフレーム間隔にて画像処理用の記憶領域に読み出す読出し手段と、
前記画像処理用の記憶領域に読み出された映像を用いて処理を実行する画像処理手段とを有する画像処理装置。
【請求項５】
前記転送用の記憶領域には、前記被験者の所定の移動速度に対応した所定のフレームレートで前記映像が書き込まれ、
前記読出し手段は、前記所定の移動速度と前記被験者の移動速度との関係に応じて前記フレーム間隔を決定する請求項４に記載の画像処理装置。
【請求項６】
前記読出し手段は、前記所定の移動速度と前記被験者の移動速度との比に基づいて前記フレーム間隔を決定する請求項５に記載の画像処理装置。
【請求項７】
同じ視野範囲で互いに異なる位置に配置される複数の虹彩撮像手段の視野範囲より広い視野範囲で撮像する全体撮像手段の画像を用いて、前記複数の虹彩撮像手段の画像の読み出し、被験者を誘導するための誘導手段の映像及び音声の少なくとも一方の提示、及び、前記被験者に光を照らす照明手段の光の照射のうち少なくとも１つを実施する画像処理方法。
【請求項８】
移動する被験者の虹彩を撮像するための虹彩撮像手段から転送用の記憶領域に書き込まれる映像を前記被験者の移動速度に応じたフレーム間隔にて画像処理用の記憶領域に読み出し、
前記画像処理用の記憶領域に読み出された映像を用いて処理を実行する画像処理方法。
【請求項９】
同じ視野範囲で互いに異なる位置に配置される複数の虹彩撮像手段の視野範囲より広い視野範囲で撮像する全体撮像手段の画像を用いて、前記複数の虹彩撮像手段の画像の読み出し、被験者を誘導するための誘導手段の映像及び音声の少なくとも一方の提示、及び、前記被験者に光を照らす照明手段の光の照射のうち少なくとも１つを実施する処理をコンピュータに実行させるためのプログラムを格納する非一時的なコンピュータ可読媒体。
【請求項１０】
移動する被験者の虹彩を撮像するための虹彩撮像手段から転送用の記憶領域に書き込まれる映像を前記被験者の移動速度に応じたフレーム間隔にて画像処理用の記憶領域に読み出し、
前記画像処理用の記憶領域に読み出された映像を用いて処理を実行する処理をコンピュータに実行させるためのプログラムを格納する非一時的なコンピュータ可読媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、画像処理装置、方法、システム、及びコンピュータ可読媒体に関し、特に特に虹彩を用いる認証の用途に用いられ得る画像処理装置、方法、システム、及びプログラムに関する。
【背景技術】
【０００２】
虹彩を用いる生体認証が知られている。この生体認証では、撮像装置を用いて被験者の虹彩が撮像され、撮像された虹彩のパターンから特徴量が抽出される。被験者を認証する場合、抽出された特徴量とあらかじめデータベースに登録された特徴量とが照合され、照合スコアに基づいて合否が判断される。一方、認証対象の被験者を登録する場合、抽出された特徴量がデータベースに追加される。【０００３】
非特許文献１に記載されるように、瞳孔を取り囲むドーナツ型の組織である虹彩は、非常に複雑なパターンで、人それぞれに固有のものとなる。また、虹彩の撮像においては、被験者の目に近赤外光が照射される。【０００４】
非特許文献２に記載されるように、虹彩の撮像においては、虹彩の半径を１００画素から１４０画素で表現できる解像度で虹彩映像が撮像される。また、被験者の目に照射される近赤外光の波長は７００ｎｍから９００ｎｍとなる。
【先行技術文献】
【非特許文献】
【０００５】
【非特許文献１】細矢、「虹彩による認証システムについて」、生体医工学44(1), page33-39, 2006
【非特許文献２】Daugman, "How Iris Recognition Works," https://www.cl.cam.ac.uk/~jgd1000/irisrecog.pdf
【発明の概要】
【発明が解決しようとする課題】
【０００６】
虹彩の直径は約１ｃｍであり、その半径を１００画素で表現しようとすると、５０μｍ粒度となる。このように、虹彩のパターンは微細なため、被験者と撮像手段との距離が長い、撮像する視野が広い、及び被験者が移動するなど条件で、認証や照合できる品質で虹彩パターンを撮像することが困難である。【０００７】
本開示は、上記事情に鑑み、認証や照合できる品質で虹彩パターンを撮像することが可能な画像処理装置、方法、システム、及びコンピュータ可読媒体を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するために、本開示は、第１の態様として、同じ視野範囲で互いに異なる位置に配置される複数の虹彩撮像手段と、前記虹彩撮像手段の視野範囲より広い視野範囲で撮像する全体撮像手段と、被験者を誘導するための誘導手段と、前記被験者に光を照らす照明手段と、前記全体撮像手段の画像を用いて、前記複数の虹彩撮像手段の画像の読み出し、前記誘導手段の映像及び音声の少なくとも一方の提示、及び、前記照明手段の光の照射のうち少なくとも１つを制御する制御手段とを備え、前記制御手段は、前記虹彩撮像手段から転送用の記憶領域に書き込まれる映像を前記被験者の移動速度に応じたフレーム間隔にて画像処理用の記憶領域に読み出す読出し手段と、前記画像処理用の記憶領域に読み出された映像を用いて処理を実行する画像処理手段とを有する画像処理システムを開示する。【０００９】
本開示は、第２の態様として、移動する被験者の虹彩を撮像するための虹彩撮像手段から転送用の記憶領域に書き込まれる映像を前記被験者の移動速度に応じたフレーム間隔にて画像処理用の記憶領域に読み出す読出し手段と、前記画像処理用の記憶領域に読み出された映像を用いて処理を実行する画像処理手段とを有する画像処理装置を提供する。【００１０】
本開示は、第３の態様として、同じ視野範囲で互いに異なる位置に配置される複数の虹彩撮像手段の視野範囲より広い視野範囲で撮像する全体撮像手段の画像を用いて、前記複数の虹彩撮像手段の画像の読み出し、被験者を誘導するための誘導手段の映像及び音声の少なくとも一方の提示、及び、前記被験者に光を照らす照明手段の光の照射のうち少なくとも１つを実施する画像処理方法を提供する。【００１１】
本開示は、第４の態様として、移動する被験者の虹彩を撮像するための虹彩撮像手段から転送用の記憶領域に書き込まれる映像を前記被験者の移動速度に応じたフレーム間隔にて画像処理用の記憶領域に読み出し、前記画像処理用の記憶領域に読み出された映像を用いて処理を実行する画像処理方法を提供する。【００１２】
本開示は、第５の態様として、同じ視野範囲で互いに異なる位置に配置される複数の虹彩撮像手段の視野範囲より広い視野範囲で撮像する全体撮像手段の画像を用いて、前記複数の虹彩撮像手段の画像の読み出し、被験者を誘導するための誘導手段の映像及び音声の少なくとも一方の提示、及び、前記被験者に光を照らす照明手段の光の照射のうち少なくとも１つを実施する処理をコンピュータに実行させるためのプログラムを格納する非一時的なコンピュータ可読媒体を提供する。【００１３】
本開示は、第６の態様として、移動する被験者の虹彩を撮像するための虹彩撮像手段から転送用の記憶領域に書き込まれる映像を前記被験者の移動速度に応じたフレーム間隔にて画像処理用の記憶領域に読み出し、前記画像処理用の記憶領域に読み出された映像を用いて処理を実行する処理をコンピュータに実行させるためのプログラムを格納する非一時的なコンピュータ可読媒体を提供する。
【発明の効果】
【００１４】
本開示に係る画像処理装置、方法、システム、及びコンピュータ可読媒体は、認証や照合できる品質で虹彩パターンを撮像することができる。
【図面の簡単な説明】
【００１５】
【図１】本開示の第１実施形態に係る画像処理システムを示すブロック図。
【図２】虹彩撮像制御の様子を示す図。
【図３】画像処理システムにおける動作手順を示すフローチャート。
【図４】検討に用いられる制御器の構成を示すブロック図。
【図５】本開示の第２実施形態において用いられる制御器の構成を示すブロック図。
【図６】コンピュータ装置の構成例を示すブロック図。
【発明を実施するための形態】
【００１６】
本開示の実施の形態の説明に先立ち、課題を定量化する。以下では、Automated border control systems（ＡＢＣ）の運用条件などで想定される下記の条件を例として説明する。被験者と撮像手段の距離（被験者とゲートの間の距離）は２ｍであり、水平視野、すなわち被験者１人の両目をカバーできる水平方向の範囲は０．２ｍであるとする。また、垂直視野、すなわち、典型的には男性である背の高い被験者の目から、典型的には女性である背の低い被験者の目までカバーできる垂直方向の範囲は０．４ｍであるとする。また、ゲートに対する被験者の歩行速度（移動速度）は、成人のゆっくりとした歩行速度の平均値、例えば１ｍ／ｓであるとする。
【００１７】
上記運用条件で、画素ピッチ５μｍのイメージセンサ、絞りＦ２で焦点距離２００ｍｍのレンズが用いられることを仮定すると、撮像手段には、後述するように、３２Ｍ画素の高解像度と１００ｆｐｓ（frame per second）の高フレームレートの両方が要求される。
【００１８】
解像度について、撮像装置から２ｍ離れた位置において水平０．２ｍの視野を確保するためには、撮像装置には水平方向に４０００画素（０．２［ｍ］÷５０［μｍ］＝４０００）が必要となる。また、撮像装置から２ｍ離れた位置において垂直０．４ｍの視野を確保するためには、撮像装置には垂直方向に８０００画素（０．４［ｍ］÷５０［μｍ］＝８０００）が必要となる。結果として、撮像装置には３２Ｍ画素の解像度が要求される。
【００１９】
一方、上記レンズが用いられる場合で、許容錯乱円径が０．０３ｍｍの場合、２ｍ先に確保できる被写界深度は約１ｃｍとなる。被験者の歩行速度が１ｍ／ｓの場合、被験者が被写体深度１ｃｍを通過する時間は１［ｃｍ］÷１００［ｃｍ／ｓ］＝０．０１秒である。この場合、歩行する被験者の虹彩が合焦した瞬間０．０１秒を捉えるためには、撮像装置には１００ｆｐｓ（１［秒］÷１００［ｆｐｓ］＝０．０１秒の時間分解能）の性能が要求される。
【００２０】
３２Ｍ画素の高解像度と１００ｆｐｓの高フレームレートを１台で満たせる撮像機器は普及品では存在しない。このため、上記運用条件にて、認証や照合できる品質で虹彩パターンを撮像することが困難である。以上で、課題の定量化の説明を終了する。
【００２１】
以下、図面を参照しつつ、本開示の実施の形態を説明する。図１は、本開示の第１実施形態に係る撮像システムを示す。撮像システムは、全体撮像器１００、誘導器２００、照明器３００、虹彩撮像器４０１〜４０４、及び制御器５００を有する。なお、図１では、虹彩撮像器の数を４台としているが、虹彩撮像器の台数は特に限定されない。虹彩撮像器の数は、カバーしたい視野範囲や、利用できる虹彩撮像器の解像度などに応じて、適宜設定され得る。
【００２２】
全体撮像器（全体撮像手段）１００は、背の高い被験者から背の低い被験者までの全体をカバーできるように、広い視野範囲で被験者を撮像する。全体撮像器１００は、被験者を顔で認証できる解像度を備えていてもよい。
【００２３】
制御器（制御手段）５００は、全体撮像器１００から供給される全体映像を監視し、誘導器（誘導手段）２００、照明器（照明手段）３００、及び複数の虹彩撮像器（虹彩撮像手段）４０１〜４０４を制御する。制御器５００の機能は、ハードウェアで構成することも可能であるが、コンピュータプログラムにより実現することも可能である。制御器５００は、全体撮像器１００から供給される全体映像、又は外部入力に基づいて被験者に対する生体認証の開始を判断する。
【００２４】
制御器５００が実施する制御は、誘導制御、照明制御、及び虹彩撮像制御を含む。制御器５００は、誘導制御では、被験者を誘導するための誘導制御情報を誘導器２００に供給する。誘導器２００は、誘導制御情報に基づいて被験者を誘導する。誘導器２００は、例えばディスプレイやスピーカなどを含む。誘導器２００は、例えば、生体認証を開始することを提示するための映像や音声をディスプレイやスピーカで提示する。また、誘導器２００は、虹彩撮像器に被験者の視線を誘導させるための映像や音声などをディスプレイやスピーカで提示する。
【００２５】
制御器５００は、照明制御では、被験者に照明光を照射するための照明制御情報を照明器３００に供給する。照明器３００は、照明制御情報に基づいて被験者に光（例えば近赤外光）を照射する。照明器３００は、光源であるＬＥＤ（Light Emitting Diode）や同期信号発生器を含む。照明器３００から被験者に照射される光量は、ＬＥＤへの供給電流値、ＬＥＤの点灯時間、及び点灯周期で決定される、照明制御情報は、これらの数値を含む。ＬＥＤを常時点灯させない場合、ＬＥＤの点灯周期は、複数の虹彩撮像器４０１〜４０４のフレームレートと同期される。
【００２６】
制御器５００は、虹彩撮像制御では、全体撮像器１００から供給される全体映像に基づいて、複数の虹彩撮像器４０１〜４０４のうち、被験者の目の領域を好適に撮像できる虹彩撮像器を決定する。また、制御器５００は、決定した虹彩撮像器内で高速に読み出す注視領域の垂直位置を決定する。
【００２７】
図２は、虹彩撮像制御の様子を示す図である。図２を用いて、虹彩撮像制御の詳細を説明する。ここでは、虹彩撮像器４０１〜４０４に、１２Ｍ画素（水平４０００画素、垂直３０００画素）かつ６０ｆｐｓの汎用カメラが使用される場合を想定する。そのようなカメラは、産業用カメラなどで普及品となりつつある。虹彩で認証できる粒度の５０μｍで撮像する場合、各虹彩撮像器の水平視野と垂直視野はそれぞれ０．２ｍ（４０００×５０［μｍ］＝０．２［ｍ］）と０．１５ｍ（３０００×５０［μｍ］＝０．１５［ｍ］）となる。
【００２８】
複数の虹彩撮像器４０１〜４０４は、垂直方向に互いに積み重ねられるように配置される。このとき、複数の虹彩撮像器４０１〜４０４のそれぞれは、隣接する虹彩撮像器との間で映像領域が一部重複するように配置される。虹彩撮像器４０１〜４０４は、例えば隣接する虹彩撮像器間で、映像領域が２．５ｃｍ重複するように配置される。その場合、２ｍ先の合焦位置にて、４台で水平０．２ｍと垂直０．４５ｍ（（０．１５−０．０２５）＋（０．１５−０．０２５−０．０２５）＋（０．１５−０．０２５−０．０２５）＋（０．１５−０．０２５）ｍ）の視野を確保できる。つまり、水平０．２ｍと垂直０．４ｍの要求視野を確保できる。なお、図面と上述した説明により、各虹彩撮像器は同じ視野範囲であり、互いに異なる位置に配置されることが分かる。
【００２９】
各虹彩撮像器のフレームレートが６０ｆｐｓである場合、そのままでは要求フレームレート１００ｆｐｓを満たせない。ここで、産業用カメラなどでは、注視領域モードがある。注視領域モードでは、画面全体ではなく、注視領域として設定された部分領域のみが読み出される。このような注視領域モードを利用することで、フレームレートを高めることができる。
【００３０】
制御器５００は、任意の虹彩撮像器に注視領域を設定し、その虹彩撮像器から注視領域の画像を読み出す。図２の例では、画面半分の水平４０００画素、垂直１５００画素の部分領域が注視領域として設定される例が示されている。この場合、１フレームあたりの画素数が全体の１／２となるため、全画面を読み出す場合のフレームレート６０ｆｐｓの２倍の１２０ｆｐｓにフレームレートを高めることができる。ただし、部分領域の水平視野と垂直視野は、それぞれ０．２ｍと０．７５ｍとなる。なお、人の両目は水平方向に並ぶ。このため、注視領域モードにおいては、両目を撮像できるように、水平ではなく垂直の画素数を削減することが好ましい。
【００３１】
上記した隣接する虹彩撮像器で映像領域が重複する範囲で目領域が撮像されない条件では、目領域を撮像する虹彩撮像器は４台の虹彩撮像器４０１〜４０４のうちの何れか１台のみとなる。また、１２０ｆｐｓで読み出させる条件は、その虹彩撮像器内の部分領域となる。制御器５００は、複数の虹彩撮像器４０１〜４０４のうち目領域を好適に撮像できる虹彩撮像器を推定し、その虹彩撮像器内で高速に読み出す注視領域の垂直位置を推定する。
【００３２】
上記推定は、次に示す方法で実現できる。全体撮像器１００は、被験者を顔で認証できる解像度を有しており、制御器５００は、全体撮像器１００で撮像された全体映像における被験者の目位置を導出する。制御器５００は、全体撮像器１００と各虹彩撮像器のカメラパラメータと配置関係とを用いて、全体映像における被験者の目位置に対応する虹彩撮像器と、その撮像器内で存在する目位置を導出する。注視領域モードを利用することで、水平０．２ｍ及び垂直０．４ｍよりも広い視野と１００ｆｐｓより高い時間分解能とを、汎用カメラを用いて実現できる。
【００３３】
なお、上記した注視領域モードで垂直位置を変更すると、撮像開始までに遅延が発生する。このため、上記の推定においては、被験者が虹彩撮像器の合焦位置である２ｍ先よりも先、例えば３ｍ先で撮像される映像を用いればよい。３ｍ先の被験者を顔で認証できる解像度は２Ｍ画素程度のカメラでも実現可能であり、全体撮像器１００には、虹彩撮像カメラより低いスペックのカメラを利用できる。
【００３４】
制御器５００は、上述した虹彩撮像制御に基づいて、虹彩撮像器４０１〜４０４のそれぞれに虹彩撮像情報を供給する。制御器５００は、被験者の目領域をうつす虹彩撮像器には、注視領域の垂直位置を含む虹彩撮像情報を供給する。制御器５００は、その他の虹彩撮像器については、任意の虹彩撮像情報を供給してもよい。制御器５００は、例えば虹彩映像の総データ量を削減する目的で、虹彩映像の供給停止の情報を含む虹彩撮像情報をその他の虹彩撮像器に供給してもよい。
【００３５】
虹彩撮像器４０１〜４０４は、それぞれ、制御器５００から供給される虹彩撮像情報に基づいて、虹彩映像を制御器５００に供給する。このとき、虹彩撮像器４０１〜４０４は、虹彩撮像情報を用いて制御器５００から設定された注視領域の画像（虹彩映像）を、制御器５００に出力する。虹彩撮像器４０１〜４０４は、注視領域の虹彩映像に対して非可逆圧縮を適用し、圧縮した虹彩映像を制御器５００に出力してもよい。例えば、虹彩撮像器４０１〜４０４は、量子化（画素ごとに圧縮）、予測符号化と量子化（複数の画素の組で圧縮）、又は変換符号化と量子化との組み合わせ（複数の画素の組で圧縮）を用いて、注視領域の虹彩映像を圧縮する。制御器５００は、虹彩撮像器４０１〜４０４から供給される虹彩映像を用いて、背景技術で述べた認証や登録を行う。制御器５００は、次の被験者が存在する場合、あるいは、認証や登録に失敗した場合、次の処理に戻る。
【００３６】
続いて、動作手順を説明する。図３は、撮像システムにおける動作手順を示す。制御器５００は、誘導制御を行い、誘導器２００を用いて被験者を誘導する（ステップＳ１００１）。制御器５００は、照明制御を行い、照明器３００を用いて被験者に赤外光を照射する（ステップＳ１００２）。制御器５００は、上述した虹彩撮像制御を行い、複数の虹彩撮像器４０１〜４０４を用いて撮像された虹彩の画像（虹彩映像）を取得する（ステップＳ１００３）。ステップＳ１００３で取得された虹彩映像は、虹彩認証や登録のために使用される。ステップＳ１００３では、制御器５００は、上述したように、ある被験者に対して虹彩撮像器４０１〜４０４の全てから虹彩映像を得る必要はない。制御器５００は、被験者の目領域を撮像している虹彩撮像器から、虹彩映像を取得する。
【００３７】
制御器５００は、ステップＳ１００３で取得した虹彩映像を用いて虹彩認証を行い、或いは虹彩映像を登録する（ステップＳ１００４）。制御器５００は、次の被験者がいるか否か、或いは再認証若しくは再登録を行うか否かを判断する（ステップＳ１００５）。次の被験者がいる場合、又は再認証若しくは再登録を行うと判断された場合、処理はステップＳ１００１に戻り、誘導制御から処理が実施される。
【００３８】
なお、本実施形態の全体撮像器１００が顔で認証できる解像度を備えており、被験者を顔認証するため特徴量をデータベースに保有しており、かつ、被験者を虹彩認証するための特徴量をデータベースに保有してない場合、本開示に係る装置は、顔認証に基づいて被験者を特定し、抽出したその虹彩の特徴量をデータベースに登録する用途にも使用できる。また、本開示に係る装置は、虹彩撮像制御で得られる目位置情報、又は、虹彩撮像器で得られた虹彩映像を認証若しくは登録する際に得られる目位置情報に基づいて被験者の身長情報を推定し、データベースに登録する用途にも使用できる。さらに、本開示に係る装置は、推定した身長情報を用いて、複数の虹彩撮像器から目領域を好適に撮像できる虹彩撮像器と同撮像器内で高速に読み出す注視領域の垂直位置の決定や校正に用いることができる。
【００３９】
本実施形態では、要求される０．２ｍ×０．４ｍの視野に対応する高解像度と時間分解能０．０１秒に相当する高フレームレートの性能を、汎用カメラの組み合わせで達成できる。結果として、被験者と撮像手段の距離が長い、撮像する視野が広い、及び被験者が移動する条件で、認証や照合できる品質で虹彩パターンを撮像することを容易にした。
【００４０】
次いで、本開示の第２実施形態を説明する。本実施形態に係る画像処理システム全体の構成は、図１に示される第１実施形態に係る画像処理システムの構成と同様でよい。本実施形態において、制御器５００は、画像処理方法を実施する画像処理装置としても機能する。本実施形態では、虹彩撮像器４０１〜４０４と制御器５００との間を高速インタフェースで接続するために、ダイレクトメモリアクセス（ＤＭＡ：Direct Memory Access）転送に対応したボードが利用される。
【００４１】
図４は、検討に用いられる制御器５００を示す。制御器５００は、ＤＭＡ転送に対応したボード５０１１〜５０１４と、画像処理部５０３とを有する。ボード５０１１〜５０１４は、制御器５００のメモリ５０２において転送用として指定された記憶領域５２１〜５２４（以下、ＤＭＡ転送領域とも呼ぶ）に、虹彩撮像器４０１〜４０４から読み出された画像（虹彩映像）を転送する。ＤＭＡ転送では、ＤＭＡ転送領域５２１〜５２４に虹彩映像を高速転送できるものの、ＤＭＡ転送領域の容量には制限がある。画像処理部５０３は、メモリ５０２のＤＭＡ転送領域５２１〜５２４から虹彩映像を読み出し、各種画像処理などを実施する。
【００４２】
ここで、被験者の歩行速度にはゆらぎがあることに着目すると、上述したＤＭＡ転送領域の容量制約に起因して、下記の問題が発生する。各虹彩撮像器を最も速い歩行速度に対応するフレームレートで動作させる場合、単位時間当たりの画像数が増加するため、ＤＭＡ転送領域５２１〜５２４に記録できる虹彩映像の時間は短くなる。この場合、最も遅い歩行速度で歩く被験者が、虹彩撮像器の合焦位置を通過する前に、記録が終了する可能性がある。逆に、各虹彩撮像器を最も遅い歩行速度に対応するフレームレートで動作させる場合、ＤＭＡ転送領域５２１〜５２４に記録できる虹彩映像の時間は長くなる。しかしながら、その場合、虹彩撮像器が、最も速い歩行速度で歩く被験者が合焦位置を通過する瞬間を捉えられない可能性がある。いずれの場合も、認証や登録の失敗となってしまう。
【００４３】
図５は、本実施形態において用いられる制御器５００を示す。制御器５００は、図４に示される制御器５００の構成要素に加えて、読出し器５０４を有する。また、メモリ５０２には、各ボードに対応したＤＭＡ転送領域５２１〜５２４に加えて、ＤＭＡ転送領域とは独立に画像処理用の記憶領域５２５が用意されている。読出し器５０４は、ＤＭＡ転送領域５２１〜５２４の何れかから虹彩映像を読み出し、画像処理用の記憶領域５２５に転送する。このとき、読出し器５０４は、被験者の歩行速度に応じたフレーム間隔で、ＤＭＡ転送領域５２１〜５２４の何れかから虹彩映像を読み出す。画像処理部５０３は、画像処理用の記憶領域５２５から虹彩映像を読み出し、各種画像処理などを実施する。
【００４４】
制御器５００は、例えば、Ｔｉｍｅ  ｏｆ  Ｆｌｉｇｈｔ（ＴｏＦ）などの測距機能を有する全体撮像器１００を利用することによって、被験者との距離情報を時系列で解析し、歩行速度ｖ［ｍ／ｓ］の情報を取得してもよい。被験者の歩行速度の取得手法は、特に限定されない。制御器５００は、例えば、距離センサなどを用いて計測された距離を時系列に解析することで、歩行速度ｖ［ｍ／ｓ］の情報を取得してもよい。
【００４５】
本実施形態において、制御器５００は、最も速い歩行速度ｍａｘｖ［ｍ／ｓ］で歩く被験者が合焦位置を通過する瞬間で捉えられるフレームレートｍａｘｆｐｓ［ｆｐｓ］で、各虹彩撮像器を動作させる。なお、ここでいう「フレームレート」は、注視領域モードでのフレームレートを指す。
【００４６】
制御器５００は、ｍａｘｖと取得された歩行速度ｖとの関係に基づいて、画像処理用のメモリ領域に読み出すＤＭＡ転送領域のフレーム間隔を決定する。単純には、例えば、ｍａｘｖ÷ｖをフレーム間隔として導出し、この値で読出し器５０４に読み出し処理をさせることが考えられる。例えは、歩行速度ｖがｍａｘｖの半分の速度である場合、フレーム間隔は「２」に決定される。この場合、画像処理用の記憶領域５２５に読み出されるフレーム間隔が長くなるため、限られたメモリ領域でも、記録時間を長くすることができる。従って、遅い歩行速度で歩く被験者が合焦位置を通過する前に記録が終了することを防止できる。このとき、歩行速度が遅い分だけ時間分解能が下がっても合焦位置を通過する瞬間も撮像できる。
【００４７】
なお、第１実施形態において説明したように、隣接する虹彩撮像器で映像領域が重複する範囲で目領域が撮像されない条件では、目領域を撮像する虹彩撮像器は４台の虹彩撮像器４０１〜４０４のうちの何れか１台のみとなる。従って、読出し器５０４が書き込み先として使用する画像処理用の記憶領域５２５の容量はカメラ１台分でよい。隣接する虹彩撮像器で映像領域が重複する範囲で目領域が撮像される場合でも、１台の虹彩撮像器で撮像された虹彩映像が使用される場合は、同様に、画像処理用の記憶領域５２５の容量はカメラ１台分でよい。
【００４８】
本実施形態において、制御器５００は、被験者の歩行速度に加えて、合焦位置を通過する瞬間の時間が分かる場合、読出し器５０４のフレーム間隔を制御するのに代えて、合焦位置を通過する瞬間の時間に合わせて撮像開始時刻を制御してもよい。例えば、制御器５００は、遅い歩行速度で歩く被験者が合焦位置を通過する瞬間を記録できるように、虹彩撮像器の読出しの開始時刻を後ろに遅らせてもよい。
【００４９】
本実施形態では、読出し器５０４は、ＤＭＡ転送領域５２１〜５２４に記録される虹彩映像を、被験者の歩行速度に応じたフレーム間隔で画像処理用の記憶領域５２５に転送する。このようにすることで、被験者の歩行速度に揺らぎがある場合においても、限られた記憶領域の制約で、合焦位置を通過する瞬間を捉えるための時間分解能と記録時間の両方を満たすことができる。
【００５０】
なお、図２では、水平４０００画素×垂直１５００画素の部分領域が注視領域として設定される例を示したが、本開示はこれには限定されない。注視領域の形状は矩形には限定されず、また注視領域の数も１つには限定されない。制御器５００は、例えば全体撮像器１００で撮像された全体映像（俯瞰映像）から被験者の右目及び左目の位置を導出し、右目の位置に対応した注視領域と、左目の位置に対応した注視領域とを虹彩撮像器に設定してもよい。その場合、虹彩撮像器は、右目の虹彩映像、及び左目の虹彩映像を制御器５００に供給する。注視領域の形状は、矩形であってもよいし、楕円形であってもよい。制御器５００は、俯瞰映像に代えて、虹彩撮像器が撮像した虹彩映像に基づいて被験者の右目及び左目の位置を導出してもよい。例えば、制御器５００は、図２に示される部分領域を一旦注視領域として設定し、その注視領域の映像から右目及び左目の位置を導出してもよい。その場合、制御器５００は、導出した右目及び左目の位置に基づいて、右目の位置に対応した部分領域と、左目の位置に対応した部分領域とを、それぞれ注視領域として虹彩撮像器に設定してもよい。
【００５１】
上記各実施形態において、制御器５００は、コンピュータ装置として構成され得る。図６は、制御器５００に用いられ得る情報処理装置（コンピュータ装置）の構成例を示す。情報処理装置６００は、制御部（ＣＰＵ：Central Processing Unit）６１０、記憶部６２０、ＲＯＭ（Read Only Memory）６３０、ＲＡＭ（Random Access Memory）６４０、通信インタフェース（ＩＦ：Interface）６５０、及びユーザインタフェース６６０を有する。
【００５２】
通信インタフェース６５０は、有線通信手段又は無線通信手段などを介して、情報処理装置６００と通信ネットワークとを接続するためのインタフェースである。ユーザインタフェース６６０は、例えばディスプレイなどの表示部を含む。また、ユーザインタフェース６６０は、キーボード、マウス、及びタッチパネルなどの入力部を含む。
【００５３】
記憶部６２０は、各種のデータを保持できる補助記憶装置である。記憶部６２０は、必ずしも情報処理装置６００の一部である必要はなく、外部記憶装置であってもよいし、ネットワークを介して情報処理装置６００に接続されたクラウドストレージであってもよい。ＲＯＭ６３０は、不揮発性の記憶装置である。ＲＯＭ６３０には、例えば比較的容量が少ないフラッシュメモリなどの半導体記憶装置が用いられる。ＣＰＵ６１０が実行するプログラムは、記憶部６２０又はＲＯＭ６３０に格納され得る。
【００５４】
上記プログラムは、様々なタイプの非一時的なコンピュータ可読媒体を用いて格納され、情報処理装置６００に供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記憶媒体を含む。非一時的なコンピュータ可読媒体の例は、例えばフレキシブルディスク、磁気テープ、又はハードディスクなどの磁気記録媒体、例えば光磁気ディスクなどの光磁気記録媒体、ＣＤ（compact disc）、又はＤＶＤ（digital versatile disk）などの光ディスク媒体、及び、マスクＲＯＭ、ＰＲＯＭ（programmable ROM）、ＥＰＲＯＭ（erasable PROM）、フラッシュＲＯＭ、又はＲＡＭなどの半導体メモリを含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体を用いてコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバなどの有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
【００５５】
ＲＡＭ６４０は、揮発性の記憶装置である。ＲＡＭ６４０には、ＤＲＡＭ（Dynamic Random Access Memory）又はＳＲＡＭ（Static Random Access Memory）などの各種半導体メモリデバイスが用いられる。ＲＡＭ６４０は、データなどを一時的に格納する内部バッファとして用いられ得る。ＣＰＵ６１０は、記憶部６２０又はＲＯＭ６３０に格納されたプログラムをＲＡＭ６４０に展開し、実行する。ＣＰＵ６１０がプログラムを実行することで、例えば誘導制御、照明制御、及び虹彩撮像制御を含む各種制御が実行される。また、ＣＰＵ６１０がプログラムを実行することで、例えば画像処理部５０３（図５を参照）、及び読出し器５０４の少なくとも一方の機能を含む各種機能が実現される。
【００５６】
以上、本開示の実施形態を詳細に説明したが、本開示は、上記した実施形態に限定されるものではなく、本開示の趣旨を逸脱しない範囲で上記実施形態に対して変更や修正を加えたものも、本開示に含まれる。
【００５７】
この出願は、２０１９年２月１８日に出願された日本出願特願２０１９−０２６９３９を基礎とする優先権を主張し、その開示の全てをここに取り込む。
【符号の説明】
【００５８】
１００：全体撮像器
２００：誘導器
３００：照明器
４０１〜４０４：虹彩撮像器
５００：制御器
５０２：メモリ
５０３：画像処理部
５０４：読出し器
６００：情報処理装置
【図１】
2020170893.tif 000003
【図２】
2020170893.tif 000004
【図３】
2020170893.tif 000005
【図４】
2020170893.tif 000006
【図５】
2020170893.tif 000007
【図６】
2020170893.tif 000008
【手続補正書】
【提出日】令和3年8月12日(2021.8.12)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
同じ視野範囲で互いに異なる位置に配置される複数の虹彩撮像手段と、
前記虹彩撮像手段の視野範囲より広い視野範囲で撮像する全体撮像手段と、
被験者を誘導するための誘導手段と、
前記被験者に光を照らす照明手段と、
前記全体撮像手段の画像を用いて、前記複数の虹彩撮像手段の画像の読み出し、前記誘導手段の映像及び音声の少なくとも一方の提示、及び、前記照明手段の光の照射のうち少なくとも１つを制御する制御手段とを備え、
前記制御手段は、前記虹彩撮像手段から転送用の記憶領域に書き込まれる映像を前記被験者の移動速度に応じたフレーム間隔にて画像処理用の記憶領域に読み出す読出し手段と、前記画像処理用の記憶領域に読み出された映像を用いて処理を実行する画像処理手段とを有する画像処理システム。
【請求項２】
前記制御手段は、前記複数の虹彩撮像手段の画像の読み出しを実施し、
前記制御手段は、前記複数の虹彩撮像手段の画像の読み出しでは、前記全体撮像手段で撮像された映像に基づいて、前記複数の虹彩撮像手段のうち前記被験者の目を撮像できる虹彩撮像手段を特定し、該特定した虹彩撮像手段に前記被験者の目の位置を含む注視領域を設定し、前記特定した虹彩撮像手段から前記注視領域の映像を取得する請求項１に記載の画像処理システム。
【請求項３】
前記転送用の記憶領域には、前記被験者の所定の移動速度に対応した所定のフレームレートで前記映像が書き込まれ、
前記読出し手段は、前記所定の移動速度と前記被験者の移動速度との関係に応じて前記フレーム間隔を決定する請求項１又は２に記載の画像処理システム。
【請求項４】
移動する被験者の虹彩を撮像するための虹彩撮像手段から転送用の記憶領域に書き込まれる映像を前記被験者の移動速度に応じたフレーム間隔にて画像処理用の記憶領域に読み出す読出し手段と、
前記画像処理用の記憶領域に読み出された映像を用いて処理を実行する画像処理手段とを有する画像処理装置。
【請求項５】
前記転送用の記憶領域には、前記被験者の所定の移動速度に対応した所定のフレームレートで前記映像が書き込まれ、
前記読出し手段は、前記所定の移動速度と前記被験者の移動速度との関係に応じて前記フレーム間隔を決定する請求項４に記載の画像処理装置。
【請求項６】
前記読出し手段は、前記所定の移動速度と前記被験者の移動速度との比に基づいて前記フレーム間隔を決定する請求項５に記載の画像処理装置。
【請求項７】
同じ視野範囲で互いに異なる位置に配置される複数の虹彩撮像手段の視野範囲より広い視野範囲で撮像する全体撮像手段の画像を用いて、前記複数の虹彩撮像手段の画像の読み出し、被験者を誘導するための誘導手段の映像及び音声の少なくとも一方の提示、及び、前記被験者に光を照らす照明手段の光の照射のうち少なくとも１つを実施する画像処理方法。
【請求項８】
移動する被験者の虹彩を撮像するための虹彩撮像手段から転送用の記憶領域に書き込まれる映像を前記被験者の移動速度に応じたフレーム間隔にて画像処理用の記憶領域に読み出し、
前記画像処理用の記憶領域に読み出された映像を用いて処理を実行する画像処理方法。
【請求項９】
同じ視野範囲で互いに異なる位置に配置される複数の虹彩撮像手段の視野範囲より広い視野範囲で撮像する全体撮像手段の画像を用いて、前記複数の虹彩撮像手段の画像の読み出し、被験者を誘導するための誘導手段の映像及び音声の少なくとも一方の提示、及び、前記被験者に光を照らす照明手段の光の照射のうち少なくとも１つを実施する処理をコンピュータに実行させるためのプログラム。
【請求項１０】
移動する被験者の虹彩を撮像するための虹彩撮像手段から転送用の記憶領域に書き込まれる映像を前記被験者の移動速度に応じたフレーム間隔にて画像処理用の記憶領域に読み出し、
前記画像処理用の記憶領域に読み出された映像を用いて処理を実行する処理をコンピュータに実行させるためのプログラム。
【国際調査報告】
2020170893.tif 000009
2020170893.tif 000010
2020170893.tif 000011
2020170893.tif 000012