(57)【要約】【課題】撮影部を配置できる位置が限定されている場合において、人物の顔を認識する精度を向上させることが可能な顔認識システム及び顔認識方法を提供する。【解決手段】表示部と、前記表示部に人物の視線を誘導するための表示情報を表示させる表示制御部と、前記表示部の外縁の近傍に設けられ、画像を取得する撮影部と、前記表示情報が前記撮影部の近傍に表示されたタイミングで取得された前記画像に撮像されている人物の顔を認識する認識部と、を備えたことを特徴とする顔認識システム【選択図】図１
2014178920.tif 000002
【特許請求の範囲】
【請求項１】
表示部と、
前記表示部に人物の視線を誘導するための表示情報を表示させる表示制御部と、
前記表示部の外縁の近傍に設けられ、画像を取得する撮影部と、
前記表示情報が前記撮影部の近傍に表示されたタイミングで取得された前記画像に撮像されている人物の顔を認識する認識部と、
を備えたことを特徴とする顔認識システム。
【請求項２】
前記表示制御部は、前記表示情報を、所定の経路に沿って移動するように表示させることで人物の視線を誘導することを特徴とする請求項１に記載の顔認識システム。
【請求項３】
前記撮影部は、前記表示制御部が前記表示情報を表示させる処理に同期して、前記画像を取得することを特徴とする請求項１または２に記載の顔認識システム。
【請求項４】
前記撮影部を複数備え、
前記認識部は、複数の前記撮影部それぞれについて、前記撮影部の近傍に前記表示情報が表示されたタイミングで、当該撮影部で取得された前記画像に撮像されている人物の顔を認識することを特徴とする請求項１〜３のいずれか一項に記載の顔認識システム。
【請求項５】
表示部に人物の視線を誘導する表示情報を表示させるステップと、
前記表示部の縁の近傍に設けられた撮影部により画像を取得するステップと、
前記表示情報が前記撮影部の近傍に表示されたタイミングで取得された前記画像に撮像されている人物の顔を認識するステップと、
を備える顔認識方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、顔認識システム及び顔認識方法に関する。
【背景技術】
【０００２】
近年では、画像解析の技術の発展に伴い、画像に撮像された人物の顔を認識し、認識された顔の画像に基づき、その人物の性別や年齢を推定したり、その人物が注目しているものを推定する技術が実用化されてきている。
【０００３】
例えば、特許文献１には、画像に撮像されている人物の顔の画像を解析して人物の視線方向を特定することで、その人物が注目している広告を推定し、推定結果に基づき広告の効果測定を行う技術が記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８−１１２４０１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
一方で、人物の画像を撮像するための装置（以降では「撮影部」と呼ぶ）を配置できる位置が限定される場合がある。例えば、大画面に広告を表示させて、その広告を見ている顧客の顔を認識するような場合には、撮影部を画面上部に配置し、画面の前方に位置する顧客を撮影する場合がある。このような場合には、顧客を見下ろすように撮影することとなるので、顧客の顔を正面から撮影できず、顧客の顔を正確に認識することが困難である。
【０００６】
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、撮影部を配置できる位置が限定されている場合において、人物の顔を認識する精度を向上させることが可能な、新規かつ改良された顔認識システム及び顔認識方法を提供することにある。
【課題を解決するための手段】
【０００７】
上記課題を解決するために、本発明のある観点によれば、表示部と、前記表示部に人物の視線を誘導するための表示情報を表示させる表示制御部と、前記表示部の外縁の近傍に設けられ、画像を取得する撮影部と、前記表示情報が前記撮影部の近傍に表示されたタイミングで取得された前記画像に撮像されている人物の顔を認識する認識部と、を備えたことを特徴とする顔認識システムが提供される。
【０００８】
前記表示制御部は、前記表示情報を、所定の経路に沿って移動するように表示させることで人物の視線を誘導してもよい。
【０００９】
前記撮影部は、前記表示制御部が前記表示情報を表示させる処理に同期して、前記画像を取得してもよい。
【００１０】
前記撮影部を複数備え、前記認識部は、複数の前記撮影部それぞれについて、前記撮影部の近傍に前記表示情報が表示されたタイミングで、当該撮影部で取得された前記画像に撮像されている人物の顔を認識してもよい。
【００１１】
また、上記課題を解決するために、本発明の別の観点によれば、表示部に人物の視線を誘導する表示情報を表示させるステップと、前記表示部の縁の近傍に設けられた撮影部により画像を取得するステップと、前記表示情報が前記撮影部の近傍に表示されたタイミングで取得された前記画像に撮像されている人物の顔を認識するステップと、を備える顔認識方法が提供される。
【発明の効果】
【００１２】
以上説明したように本発明によれば、撮影部を配置できる位置が限定されている場合において、人物の顔を認識する精度を向上させることが可能な顔認識システム及び顔認識方法を提供することが可能となる。
【図面の簡単な説明】
【００１３】
【図１】本発明の実施形態に係る顔認識システムの外観を示した概略図である。
【図２】本発明の実施形態に係る顔認識システムの構成を示したブロック図である。
【図３】本発明の実施形態に係る顔認識システムの動作を説明するための図である。
【図４】本発明の実施形態に係る顔認識システムの動作を説明するための図である。
【図５】本発明の実施形態に係る顔認識システムの一連の動作を示したフローチャートである。
【図６】本発明の変形例に係る顔認識システムの構成を示したブロック図である。
【図７】本発明の変形例に係る顔認識システムの動作を説明するための図である。
【発明を実施するための形態】
【００１４】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００１５】
［概要］
まず、図１を参照しながら本発明の実施形態に係る顔認識システム１の概要について説明する。図１は、本実施形態に係る顔認識システム１の外観を示した概略図である。図１に示すように、顔認識システム１は、広告などの映像を表示させる表示面２０１を有する表示部２００と、表示面２０１の前面の領域を撮影する撮影部３０１とを含む。
【００１６】
また、表示面２０１の前面に位置する人物の中には、表示面２０１に表示された映像ｖ１００に注目している人物ｕ１と、映像ｖ１００に注目していない人物ｕ２とが含まれることが想定される。本実施形態に係る顔認識システム１は、表示面２０１の前面に位置する人物のうち、映像ｖ１００に注目している人物ｕ１、即ち、表示面２０１側を見ている人物の顔を、撮影部３０１により取得された画像を基に認識する。このように、表示面２０１側を見ている人物の顔を認識することで、顔認識システム１は、映像ｖ１００に注目している人物ｕ１と他の人物ｕ２とを識別したり、映像ｖ１００に注目している人物ｕ１の性別や年齢を推定する。
【００１７】
また、撮影部３０１は、表示部２００の外枠近傍に配置される。例えば、図１に示す例では、撮影部３０１は、表示部２００の上側かつ横方向の端部に配置されている。このような位置に撮影部３０１を設けることで、人物ｕ１が表示面２０１側を見ている状況で、人物ｕ１の視界を阻害せずに表示面２０１の前面の領域を撮影することが可能となる。
【００１８】
一方で、表示部２００の外枠近傍に撮影部３０１を配置した場合には、人物ｕ１の顔を正面から撮影できない場合がある。例えば、図１に示す例のように、撮影部３０１を表示部２００の上側端部近傍に配置した場合には、人物ｕ１を見下ろすように撮影することとなるため、人物ｕ１の顔の認識精度が低下する場合がある。
【００１９】
そこで、本実施形態に係る顔認識システム１では、表示部２００の表示面２０１に表示された映像に注目している人物ｕ１の視線（顔の向き）を誘導し、人物ｕ１が撮影部３０１側を向いているタイミングで顔認識のための画像（以降では、「顔認識用画像」と呼ぶ）を取得する。これにより、顔認識システム１は、人物ｕ１の顔を正面から撮影した画像を取得することが可能となり、撮影部３０１の配置位置に限らず、高い精度で人物ｕ１の顔を認識することが可能となる。
【００２０】
［構成］
次に、図２を参照しながら、本実施形態に係る顔認識システム１の構成について説明する。図２は、本実施形態に係る顔認識システム１の構成を示したブロック図である。図２に示すように、本実施形態に係る顔認識システム１は、表示部２００と、表示制御部２１０と、撮影部３０１と、同期制御部１００と、解析部４００とを含む。また、解析部４００は、顔認識部４０１と、認識結果処理部４０２とを含む。
【００２１】
表示部２００は、所定の表示情報（例えば、表示情報ｖ１００）を表示させるための表示面２０１を備える。所定の表示情報としては、例えば、広告や案内などが挙げられる。
【００２２】
表示制御部２１０は、表示部２００の表示面２０１に所定の表示情報（例えば、表示情報ｖ１００）を表示させる。
【００２３】
また、表示制御部２１０は、後述する同期制御部１００の指示に基づき、視線を誘導するための所定の表示情報ｖ５００を、表示面２０１上の所定の経路ｒ５００に沿って移動するように表示させる。
【００２４】
表示情報ｖ５００は、表示面２０１上に表示される表示情報に注目している人物ｕ１の視線を誘導できるような表示態様で表示されることが望ましい。具体的な一例として、表示制御部２１０は、表示面２０１上に表示される表示情報に注目している人物ｕ１の興味を引くような広告を、表示情報ｖ５００として表示させてもよい。また、表示制御部２１０は、表示情報ｖ５００を表示させている間に、表示面２０１に他の表示情報（例えば、表示情報ｖ１００）を表示させないことで、人物ｕ１の視線を表示情報ｖ５００に誘導してもよい。また、人物ｕ１の視線を誘導できれば、表示情報ｖ５００として表示する内容は限定されない。例えば、表示情報ｖ５００として表示する情報は、絵、写真、またはロゴのような図であってもよいし、人物ｕ１の興味を引くようなフレーズ（文字情報）であってもよい。
【００２５】
また、表示情報ｖ５００を移動させる経路ｒ５００は、表示面２０１上において撮影部３０１の近傍に位置する領域を通過するように、あらかじめ決定されている。このように表示制御部２１０は、表示情報ｖ５００を所定の経路ｒ５００に沿って移動するように表示させることで、表示面２０１に表示されている情報に注目している人物ｕ１の視線を経路ｒ５００に沿って誘導する。このとき経路ｒ５００は、撮影部３０１の近傍を通過するように設定されているため、表示制御部２１０は、人物ｕ１の視線を撮影部３０１の方向に誘導することが可能となる。
【００２６】
撮影部３０１は、表示部２００の外枠近傍に設置され、表示面２０１の前面に位置する領域の画像を取得する。撮影部３０１は、後述する同期制御部１００の指示に基づき、取得した画像を後述する同期制御部１００に出力する。撮影部３０１により取得された画像は、同期制御部１００を介して顔認識部４０１に送信され、顔認識部４０１により画像解析されて、取得された画像に撮像されている人物の顔が認識される。即ち、撮影部３０１は、同期制御部１００の指示に基づき、顔認識用画像を同期制御部１００に出力する。
【００２７】
なお、撮影部３０１としては、静止画を撮影するもの（例えば、カメラ）を用いてもよいし、動画を撮影するもの（例えば、ビデオカメラ）を用いてもよい。撮影部３０１として静止画を撮影するものを用いる場合には、撮影部３０１は、同期制御部１００の指示に基づきシャッターを切り、取得された画像を同期制御部１００に出力する。また、撮影部３０１として動画を撮影するものを用いる場合には、例えば、撮影部３０１は、逐次動画を撮影し、同期制御部１００の指示を受けると、その指示を受けたタイミングの画像を、静止画または所定期間の動画として切り出し、切り出した画像を同期制御部１００に出力する。
【００２８】
同期制御部１００は、表示制御部２１０による視線誘導のための表示情報ｖ５００の表示に係る処理と、撮影部３０１による顔認識用画像の取得に係る処理とを同期させる。具体的には、同期制御部１００は、表示制御部２１０に表示情報ｖ５００を表示させることで、表示面２０１に表示されている情報に注目している人物ｕ１の視線を撮影部３０１の方向に誘導する。そして、同期制御部１００は、人物ｕ１の視線（顔の向き）が撮影部３０１の方向を向いたタイミングで、撮影部３０１に顔認識用画像を取得させる。同期制御部１００は、撮影部３０１に取得させた顔認識用画像を、顔認識部４０１に出力する。なお、この同期制御部１００、表示制御部２１０、及び撮影部３０１により、人物ｕ１の視線を撮影部３０１の方向に誘導し、顔認識用画像を取得する一連の動作の詳細については、「視線誘導及び画像取得の詳細」として別途後述する。
【００２９】
顔認識部４０１は、撮影部３０１で取得された顔認識用画像を同期制御部１００から取得する。顔認識部４０１は、同期制御部１００から取得した顔認識用画像に対して解析処理を施し、取得した顔認識用画像に撮像されている人物の顔を認識する。具体的な一例として、顔認識部４０１は、顔のパーツの相対位置や大きさ、目、鼻、ほお骨、あごなどの形の特徴を検出して、検出結果に基づき画像中から顔の領域を特定するようにしてもよい。なお、取得された画像に撮像されている人物の顔が認識できれば、顔認識のための解析処理の内容は限定されない。例えば、顔認識部４０１は、目の周りや鼻筋の辺りのように陰影に特徴がある部分を検出して、人物の顔を認識してもよい。
【００３０】
顔認識部４０１は、撮影部３０１で取得された顔認識用画像と、この撮影部３０１で取得された顔認識用画像中に撮像されている各人物の顔の領域を示す情報とを認識結果処理部４０２に出力する。
【００３１】
認識結果処理部４０２は、撮影部３０１で取得された顔認識用画像と、この撮影部３０１で取得された顔認識用画像中に撮像されている各人物の顔の領域を示す情報とを顔認識部４０１から取得する。認識結果処理部４０２は、顔の領域を示す情報に基づき、取得した顔認識用画像中から各人物の顔を抽出する。認識結果処理部４０２は、抽出された顔の特徴を解析し、その顔に対応する人物の性別や年齢を推定する。認識結果処理部４０２は、推定結果に基づき画像中に撮像された各人物を、性別や年齢に応じて分類し、各分類に対応する人物の数を集計する。このように、顔が認識された人物を分類し、分類ごとに人物の数を集計することで、例えば、顔認識用画像が取得されたタイミングで、表示面２０１に表示されていた表示情報に着目していた人物の傾向を分析することが可能となる。
【００３２】
［視線誘導及び画像取得の詳細］
次に、図３及び図４を参照しながら、同期制御部１００、表示制御部２１０、及び撮影部３０１により、人物ｕ１の視線を撮影部３０１の方向に誘導し、顔認識用画像を取得する一連の動作の詳細について説明する。図３及び図４は、本実施形態に係る顔認識システム１の動作を説明するための図である。
【００３３】
まず、図３を参照する。同期制御部１００は、所定のタイミングで表示制御部２１０に、表示面２０１の前面に位置する人物の視線を誘導するための表示情報ｖ５００の表示を指示する。同期制御部１００からの指示を受けると、表示制御部２１０は、図３に示すように、表示面２０１の所定の位置に表示情報ｖ５００を表示させる。
【００３４】
表示面２０１に表示情報ｖ５００を表示させると、表示制御部２１０は、表示面２０１上のあらかじめ決められた経路ｒ５００に沿って表示情報ｖ５００を移動させる。このとき、表示制御部２１０は、表示情報ｖ５００が連続的に移動するように表示させてもよいし、表示情報ｖ５００が表示と非表示を繰り返しながら断続的に移動するように表示させてもよい。このように、表示制御部２１０は、表示情報ｖ５００を所定の経路ｒ５００に沿って移動するように表示させることで、表示面２０１に表示される情報に注目している人物ｕ１の視線を経路ｒ５００に沿って誘導する。
【００３５】
表示制御部２１０は、少なくとも、表示面２０１上において撮影部３０１の近傍に位置する所定の領域まで、表示情報ｖ５００を所定の経路ｒ５００に沿って移動させる
【００３６】
次に、図４を参照する。図４は、表示情報ｖ５００が、表示面２０１上における撮影部３０１が設置された位置の近傍に表示された状態を示している。図４に示すように、撮影部３０１の近傍に表示情報ｖ５００が表示されたタイミングで、同期制御部１００は、撮影部３０１に顔認識用画像を取得させる。
【００３７】
なお、同期制御部１００が撮影部３０１の近傍に表示情報ｖ５００が表示されたタイミングを認識できれば、その方法は限定されない。例えば、表示制御部２１０が、撮影部３０１の近傍に表示情報ｖ５００を表示させたタイミングで、撮影部３０１の近傍に表示情報ｖ５００を表示させたことを同期制御部１００に通知してもよい。この場合には、同期制御部１００は、表示制御部２１０から通知を受けたタイミングで、撮影部３０１に画像を取得させればよい。
【００３８】
また、別の一例として、同期制御部１００が、表示制御部２１０による表示情報ｖ５００を表示させる処理と、撮影部３０１による画像取得の処理とを時間同期させてもよい。この場合には、同期制御部１００は、表示情報ｖ５００を撮影部３０１の近傍に表示させるタイミングを表示制御部２１０及び撮影部３０１に通知する。表示制御部２１０は、同期制御部１００から通知されたタイミングで、表示情報ｖ５００が撮影部３０１の近傍に表示されるように、表示情報ｖ５００の動きを制御すればよい。また、撮影部３０１は、同期制御部１００から通知されたタイミングで、画像を取得すればよい。
【００３９】
撮影部３０１の近傍に表示情報ｖ５００が表示されたとき、表示情報ｖ５００により視線が誘導された人物ｕ１は、撮影部３０１の方向を向いていることとなる。換言すると、表示面２０１に表示された表示情報に注目している人物ｕ１が、表示情報ｖ５００により視線が誘導され、撮影部３０１の方向を向いている状態となる。同様に、表示情報ｖ５００により緯線が誘導されなかった人物ｕ２、即ち、表示面２０１に表示された表示情報に注目していない人物ｕ２は、撮影部３０１の方向を向いていないこととなる。
【００４０】
なお、表示面２０１に表示された表示情報に注目している人物ｕ１の視線を誘導できれば、表示面２０１上に表示される表示情報の表示態様は限定されない。例えば、表示制御部２１０は、視線を誘導するための表示情報ｖ５００と、その他の表示情報ｖ１００とを表示面２０１上に表示させてもよい。この場合には、表示制御部２１０は、表示情報ｖ５００をハイライトする等により強調表示させることで、人物ｕ１の視線を、表示情報ｖ１００ではなく表示情報ｖ５００の方に誘導するとよい。
【００４１】
また、表示制御部２１０は、表示情報ｖ１００に関連し、かつ人物ｕ１の興味を引くものと表示情報ｖ５００として表示させてもよい。例えば、表示情報ｖ１００としてある製品の広告を表示させる場合に、表示制御部２１０は、表示情報ｖ１００に表示された製品の発売日や価格等のような、人物ｕ１の興味を引くような情報を表示情報ｖ５００として表示させてもよい。
【００４２】
以上のように、本実施形態に係る顔認識システム１では、表示面２０１に表示された表示情報に注目している人物ｕ１の視線を撮影部３０１の方向に誘導して、撮影部３０１により画像を取得する。このとき、撮影部３０１が取得した顔認識用画像では、撮影部３０１の方を向いた人物の顔が、正面を向いた状態で撮像されている。そのため、表示面２０１に表示された表示情報に注目している人物ｕ１の顔を、高い精度で認識することが可能となる。
【００４３】
また、視線が誘導されていない人物ｕ２の顔は、正面以外の方向を向いた状態で撮像されている可能性が高い。そのため、視線が誘導されていない人物ｕ２、即ち、表示面２０１に表示された表示情報に注目していない人物ｕ２の顔よりも、表示情報に注目している人物ｕ１の顔が高い精度で認識される。これにより、本実施形態に係る顔認識システム１は、画像に撮像されている顔の認識率が高い人物を、表示面２０１に表示された表示情報に注目している人物であると推定することが可能となる。
【００４４】
［処理］
次に、図５を参照しながら、本実施形態に係る顔認識システム１の一連の動作について説明する。図５は、本実施形態に係る顔認識システム１の一連の動作を示したフローチャートである。
【００４５】
（ステップＳ１０１）
同期制御部１００は、所定のタイミングで表示制御部２１０に、表示面２０１の前面に位置する人物の視線を誘導するための表示情報ｖ５００の表示を指示する。同期制御部１００からの指示を受けると、表示制御部２１０は、表示面２０１の所定の位置に表示情報ｖ５００を表示させる（図３参照）。
【００４６】
（ステップＳ１０２）
表示面２０１に表示情報ｖ５００を表示させると、表示制御部２１０は、表示面２０１上のあらかじめ決められた経路ｒ５００に沿って表示情報ｖ５００が移動させる。このとき、表示制御部２１０は、表示情報ｖ５００が連続的に移動するように表示させてもよいし、表示情報ｖ５００が表示と非表示を繰り返しながら断続的に移動するように表示させてもよい。
【００４７】
（ステップＳ１０３）
このように、表示制御部２１０は、表示情報ｖ５００を所定の経路ｒ５００に沿って移動するように表示させることで、表示面２０１に表示される情報に注目している人物ｕ１の視線を経路ｒ５００に沿って誘導する。表示制御部２１０は、少なくとも、表示面２０１上において撮影部３０１の近傍に位置する所定の領域まで、表示情報ｖ５００を所定の経路ｒ５００に沿って移動させる（ステップＳ１０３、Ｎ）。
【００４８】
（ステップＳ１０４）
撮影部３０１の近傍に表示情報ｖ５００が表示されると（ステップＳ１０３、Ｙ）、同期制御部１００は、撮影部３０１に顔認識用画像を取得させる。
【００４９】
なお、同期制御部１００が撮影部３０１の近傍に表示情報ｖ５００が表示されたタイミングを認識できれば、その方法は限定されない。例えば、表示制御部２１０が、撮影部３０１の近傍に表示情報ｖ５００を表示させたタイミングで、撮影部３０１の近傍に表示情報ｖ５００を表示させたことを同期制御部１００に通知してもよい。この場合には、同期制御部１００は、表示制御部２１０から通知を受けたタイミングで、撮影部３０１に画像を取得させればよい。
【００５０】
また、別の一例として、同期制御部１００が、表示制御部２１０による表示情報ｖ５００を表示させる処理と、撮影部３０１による画像取得の処理とを時間同期させてもよい。この場合には、同期制御部１００は、表示情報ｖ５００を撮影部３０１の近傍に表示させるタイミングを表示制御部２１０及び撮影部３０１に通知する。表示制御部２１０は、同期制御部１００から通知されたタイミングで、表示情報ｖ５００が撮影部３０１の近傍に表示されるように、表示情報ｖ５００の動きを制御すればよい。また、撮影部３０１は、同期制御部１００から通知されたタイミングで、画像を取得すればよい。
【００５１】
同期制御部１００は、撮影部３０１に取得させた顔認識用画像を顔認識部４０１に出力する。
【００５２】
（ステップＳ１０５）
顔認識部４０１は、撮影部３０１で取得された顔認識用画像を同期制御部１００から取得する。顔認識部４０１は、同期制御部１００から取得した顔認識用画像に対して解析処理を施し、取得した顔認識用画像に撮像されている人物の顔を認識する。
【００５３】
顔認識部４０１は、撮影部３０１で取得された顔認識用画像と、この撮影部３０１で取得された顔認識用画像中に撮像されている各人物の顔の領域を示す情報とを認識結果処理部４０２に出力する。
【００５４】
認識結果処理部４０２は、撮影部３０１で取得された顔認識用画像と、この撮影部３０１で取得された顔認識用画像中に撮像されている各人物の顔の領域を示す情報とを顔認識部４０１から取得する。認識結果処理部４０２は、顔の領域を示す情報に基づき、取得した顔認識用画像中から各人物の顔を抽出する。認識結果処理部４０２は、抽出された顔の特徴を解析し、その顔に対応する人物の性別や年齢を推定する。認識結果処理部４０２は、推定結果に基づき画像中に撮像された各人物を、性別や年齢に応じて分類し、各分類に対応する人物の数を集計する。このように、顔が認識された人物を分類し、分類ごとに人物の数を集計することで、例えば、顔認識用画像が取得されたタイミングで、表示面２０１に表示されていた表示情報に着目していた人物の傾向を分析することが可能となる。
【００５５】
以上のように、本実施形態に係る顔認識システム１では、表示面２０１に表示された表示情報に注目している人物ｕ１の視線を撮影部３０１の方向に誘導して、撮影部３０１により顔認識用の画像を取得する。これにより、本実施形態に係る顔認識システム１は、撮影部３０１を配置できる位置が限定されていたとしても、表示面２０１に表示された表示情報に注目している人物ｕ１の顔を、高い精度で認識することが可能となる。
【００５６】
また、視線が誘導されていない人物ｕ２の顔は、正面以外の方向を向いた状態で撮像されている可能性が高い。そのため、視線が誘導されていない人物ｕ２、即ち、表示面２０１に表示された表示情報に注目していない人物ｕ２の顔よりも、表示情報に注目している人物ｕ１の顔が高い精度で認識される。これにより、本実施形態に係る顔認識システム１は、画像に撮像されている顔の認識率が高い人物を、表示面２０１に表示された表示情報に注目している人物であると推定することが可能となる。
【００５７】
なお、上述した一連の動作は、顔認識システム１の各構成を動作させる装置のＣＰＵを機能させるためのプログラムによって構成することができる。このプログラムは、その装置にインストールされたＯＳ（Ｏｐｅｒａｔｉｎｇ  Ｓｙｓｔｅｍ）を介して実行されるように構成してもよい。また、このプログラムは、上述した処理を実行する構成が含まれる装置が読み出し可能であれば、記憶される位置は限定されない。例えば、装置の外部から接続される記録媒体にプログラムが格納されていてもよい。この場合には、プログラムが格納された記録媒体を装置に接続することによって、その装置のＣＰＵに当該プログラムを実行させるように構成するとよい。
【００５８】
［変形例］
次に、本発明の変形例に係る顔認識システム１ａについて説明する。上述した実施形態に係る顔認識システム１では、単一の撮影部３０１で取得した画像に基づき、人物ｕ１の顔認識を行っていた。変形例に係る顔認識システム１ａは、撮影部３０１を複数配置し、各撮影部３０１で取得された顔認識用画像に基づき、表示面２０１に表示された表示情報に注目している人物ｕ１の顔を認識する点で、前述の実施形態に係る顔認識システム１と異なる。
【００５９】
以降では、図６を参照しながら、変形例に係る顔認識システム１ａの構成について、上述した実施形態に係る顔認識システム１とは異なる部分に着目して説明する。図６は、変形例に係る顔認識システム１ａの構成を示したブロック図である。なお、上述した実施形態に係る顔認識システム１と同様に動作する構成については詳細な説明は省略するものとする。
【００６０】
図６に示すように、顔認識システム１ａは、複数の撮影部３０１として、撮影部３０１ａ〜３０１ｃを有する。なお、撮影部３０１ａ〜３０１ｃを特に区別する必要が無い場合は、単に「撮影部３０１」と記述するものとする。図６に示す例では、撮影部３０１ａ〜３０１ｃは、表示部２００の外縁近傍のそれぞれ異なる位置に配置され、それぞれが異なる方向から表示面２０１の前面の領域を撮影する。
【００６１】
次に、図７を参照しながら、同期制御部１００、表示制御部２１０、及び撮影部３０１により、人物ｕ１の視線を撮影部３０１の方向に誘導し、顔認識用画像を取得する一連の動作の詳細について説明する。図７は、変形例に係る顔認識システム１ａの動作を説明するための図である。
【００６２】
図７に示すように、変形例に係る顔認識システム１ａでは、表示情報ｖ５００を移動させる経路ｒ５００は、撮影部３０１ａ〜３０１ｃそれぞれの近傍を通過するようにあらかじめ設定されている。例えば、図７に示す例では、表示制御部２１０は、撮影部３０１ａ、３０１ｂ、３０１ｃの順で、各撮影部３０１の近傍を通過するように、あらかじめ設定された経路ｒ５００に沿って表示情報ｖ５００を移動させることとなる。
【００６３】
以下に、図７に示す場合を例に具体的に説明する。同期制御部１００は、所定のタイミングで表示制御部２１０に、表示面２０１の前面に位置する人物の視線を誘導するための表示情報ｖ５００の表示を指示する。同期制御部１００からの指示を受けると、表示制御部２１０は、表示面２０１の所定の位置に表示情報ｖ５００を表示させる。
【００６４】
表示面２０１に表示情報ｖ５００を表示させると、表示制御部２１０は、表示面２０１上のあらかじめ決められた経路ｒ５００に沿って表示情報ｖ５００を移動させる。ここまでの動作は、前述した実施形態に係る顔認識システム１と同様である。
【００６５】
表示情報ｖ５００が、表示面２０１上の撮影部３０１ａの近傍の位置ｖ５００ａに表示されると、同期制御部１００は、撮影部３０１ａに顔認識用画像を取得させる。撮影部３０１ａは、取得した顔認識用画像を同期制御部１００に出力する。
【００６６】
同様にして、表示情報ｖ５００が、表示面２０１上の撮影部３０１ｂの近傍の位置ｖ５００ｂに表示されると、同期制御部１００は、撮影部３０１ｂに顔認識用画像を取得させる。また、表示情報ｖ５００が、表示面２０１上の撮影部３０１ｂの近傍の位置ｖ５００ｃに表示されると、同期制御部１００は、撮影部３０１ｃに顔認識用画像を取得させる。撮影部３０１ｂ及び撮影部３０１ｃそれぞれは、取得した顔認識用画像を同期制御部１００に出力する。
【００６７】
同期制御部１００は、撮影部３０１ａ〜３０１ｃそれぞれに取得させた顔認識用画像を顔認識部４０１に出力する。顔認識部４０１は、撮影部３０１ａ〜３０１ｃのそれぞれで取得された顔認識用画像に対して解析処理を施し、取得した顔認識用画像に撮像されている人物の顔を認識する。なお、以降の処理は、上述した実施形態と同様である。
【００６８】
以上のように、変形例に係る顔認識システム１ａは、撮影部３０１を複数配置し、各撮影部３０１で取得された顔認識用画像に基づき、表示面２０１に表示された表示情報に注目している人物ｕ１の顔を認識する。このように、変形例に係る顔認識システム１ａは、複数の撮影部３０１を使用することで、個々の撮影部３０１が表示面２０１の前面の領域全体を撮影できない場合においても、複数の撮影部３０１で撮影する領域を分担し、各領域の画像を取得することが可能となる。
【００６９】
また、視線が誘導された人物ｕ１の顔を認識する場合においても、複数の撮影部３０１でそれぞれ顔認識用画像を取得することが可能となる。そのため、例えば、人物ｕ１に最も近い撮影部３０１で取得された顔認識用画像を基に、人物ｕ１の顔を認識することで、より高い精度で人物ｕ１の顔を認識することが可能となる。
【００７０】
また、各撮影部３０１が別の角度から顔認識用画像を取得するように配置することも可能である。そのため、顔認識システム１ａは、各撮影部３０１で撮影された顔認識用画像に基づき、画像中の特定の人物ｕ１が、各画像において視線が誘導されているか、即ち、表示面２０１に表示された表示情報に注目しているかを判定することが可能となる。これにより、顔認識システム１ａは、たまたまある撮影部３０１の方向を向いていた人物と、表示情報ｖ５００により視線が誘導されている人物とを区別することが可能となる。即ち、複数の撮影部３０１を使用することで、顔認識システム１ａは、上述した実施形態に係る顔認識システム１よりも、高い精度で、表示面２０１に表示された表示情報に注目している人物を推定することが可能となる。
【００７１】
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
【符号の説明】
【００７２】
１、１ａ  顔認識システム
１００    同期制御部
２００    表示部
２０１    表示面
２１０    表示制御部
３０１、３０１ａ、３０１ｂ、３０１ｃ  撮影部
４００    解析部
４０１    顔認識部
４０２    認識結果処理部
【図１】
2014178920.tif 000003
【図２】
2014178920.tif 000004
【図３】
2014178920.tif 000005
【図４】
2014178920.tif 000006
【図５】
2014178920.tif 000007
【図６】
2014178920.tif 000008
【図７】
2014178920.tif 000009