(57)【要約】【課題】  人間の視線の動きを容易に把握可能な技術を提案する。【解決手段】  照射制御装置１は、光線照射手段１１で、人間の眼球Ｅに近赤外線を照射し、眼球撮像手段１２で、近赤外線が照射された状態の眼球Ｅを撮影し、視線算出手段１３で、撮影した画像に基づいて眼球Ｅの運動量を測定して視線方向を検出する。そして、照射装置駆動制御手段２１で、赤外線照射手段２３による赤外線の照射方向を上記検出した視線方向に変更する。これにより、当該照射制御装置１を頭部に装着した被験者（顧客）の視線方向に赤外線が照射されるため、分析者（接遇者）は、赤外線撮影機能を有するヘッドマウントディスプレイ（ＨＭＤ）３を装着することで、各被験者の視線の動きをリアルタイムに把握できる。【選択図】  図３
2009157634.tif 000002
【特許請求の範囲】
【請求項１】
人間の視線方向を検出する検出手段と、
光を照射し且つその照射方向を変更可能な照射手段と、
前記照射手段による光の照射方向を前記検出した視線方向に変更する変更手段と、
前記検出手段と前記照射手段と前記変更手段とを人間の頭部に装着する装着手段と、
を備えたことを特徴とする照射制御装置。
【請求項２】
前記照射手段は、視線方向の略中心点に可視光線を集束させて照射することを特徴とする請求項１に記載の照射制御装置。
【請求項３】
前記照射手段は、視線方向の略中心点に不可視光線を集束させて照射することを特徴とする請求項１に記載の照射制御装置。
【請求項４】
前記照射手段は、赤外線を照射することを特徴とする請求項３に記載の照射制御装置。
【請求項５】
該照射制御装置を装着した人間に係る情報を示す画像を取得する取得手段を更に備え、
前記照射手段は、前記取得した画像を視線方向の対象物に投影することを特徴とする請求項３又は請求項４に記載の照射制御装置。
【請求項６】
前記取得手段は、該照射制御装置を装着した人間を識別する画像を取得することを特徴とする請求項５に記載の照射制御装置。
【請求項７】
該照射制御装置を装着した人間の生体的な状態を計測する計測手段を更に備え、
前記取得手段は、前記計測した結果を示す画像を取得することを特徴とする請求項５に記載の照射制御装置。
【請求項８】
請求項３乃至請求項７のいずれか１項に記載の照射制御装置と、撮影装置とを備え、
前記撮影装置は、
視線の注目度の分析対象となる対象物を撮影する第１の撮影手段と、
前記対象物に照射された不可視光線を撮影する第２の手段と、
前記撮影した対象物の映像と前記撮影した不可視光線を可視化した映像とを合成する合成手段と、
前記合成した映像を出力する出力手段と、
を備えたことを特徴とする視線分析システム。
【請求項９】
前記撮影装置は、映像を表示する表示手段を更に備え、
前記出力手段は、前記合成した映像を前記表示手段に出力して表示させることを特徴とする請求項８に記載の視線分析システム。
【請求項１０】
前記撮影装置は、映像を記憶する記憶手段を更に備え、
前記出力手段は、前記合成した映像を前記記憶手段に出力して記憶させることを特徴とする請求項８に記載の視線分析システム。
【請求項１１】
不可視光線が照射された時間が閾値を上回る領域を可視化した映像を生成する生成手段を更に備え、
前記合成手段は、前記撮影した対象物の映像と前記生成した映像とを合成することを特徴とする請求項８乃至請求項１０のいずれか１項に記載の視線分析システム。
【請求項１２】
光を照射し且つその照射方向を変更可能な照射手段と、当該照射手段を人間の頭部に装着する装着手段と、を備えた照射制御装置のコンピュータに、
人間の視線方向を検出する検出機能と、
前記照射手段による光の照射方向を前記検出した視線方向に変更する変更機能と、
を実現させるための照射制御プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、照射制御装置、照射制御プログラム、視線分析システムに関する。
【背景技術】
【０００２】
再撮された映像情報であっても、著作権を提示して埋め込むことができ、また、機械的な検索ができる状態にするための発明として、表示面に映像を投射して表示すると共に、前記表示面に表示されている映像上に、光線照射装置により電子透かしを赤外線または紫外線により投射して提示する発明が提案されている（特許文献１参照）。
【０００３】
見ている物体に関連する情報を、ユーザに対して的確に表示するための発明として、ユーザがヘッドマウントディスプレイ（ＨＭＤ）のハーフミラーを介して掲示物を見ると、赤外線照明装置から掲示物に対して照射した赤外線により反射された不可視コードを受光装置で受光し、これに基づいてサーバシステムから得たコンテンツを用いて表示画像を作成し、ＨＭＤの表示装置で掲示物に重ねてユーザに示す発明が提案されている（特許文献２参照）。
【特許文献１】特開２００５−０２６７５９号公報
【特許文献２】特開２００３−２４２１６８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
ショールームなどの或る程度の広さを持った空間において、訪問者や観客が空間内でどのように視線を移動させているかを観察することは、その空間の顧客にとっての良し悪しを評価するためのひとつの重要な手段となりうる。例えば、空間の設計者が意図した通りに顧客が視線を移動しない場合や、視線の移動量自体が非常に大きい場合は、顧客の特性を十分に把握した設計ではなく、無為な視線移動等により顧客を疲れさせるような設計であったと判断することができる。換言すると、顧客の視線移動を分析することで、ショールームなどの空間の設えなどに関する良し悪しの評価を行う材料とすることができる。
【０００５】
また、視線情報を利用することによって、顧客に対する接遇を臨機応変に変化させる手がかりを得ることもできる場合がある。例えば、顧客の視線が１箇所にずっと留まっている場合、すなわち何かを注視している場合は、顧客がその何かに強い関心があるということを示していると考えられ、接遇者はその何かに関する話題を深めることによって顧客の注意をより強く惹きつけることもできる。また、顧客が見てほしい方向に視線を向けていないことを感知した場合は、所望のものを見るよう促すことも可能である。
【０００６】
しかしながら、従来、顧客の眼球の動きとその視線の先にある物体を同時に把握することが極めて難しいため、顧客の視線の動きの把握は、接遇者が接遇している間に感じ取るしかない一過性のものであった。それゆえ、顧客が接遇される空間の良し悪しの評価のための十分な観察・把握を接遇者がその場で行うことは難しく、また、顧客視線を臨機応変な接遇に生かすことは非常に困難であった。また、顧客が複数の場合は困難さは更に増すことも容易に想像できる。
【０００７】
この課題を解決するひとつの手段としては、ビデオカメラで顧客の様子を記録し、後から視線移動や注視対象の分析をする方法があるが、個人情報保護の観点から現実的にはいろいろな問題があり、スムーズな実施は困難であるし、リアルタイム性もない。また、視線検出装置を顧客に装着し、顧客の視線の動きを記録する方法も考えられるが、接遇者は顧客の視線が表示されるディスプレイなどのデバイスを携帯して注意を向けていなければならず、第一の目的である接遇がおろそかになるという問題がある。
また、複数の顧客の視線を分析する場合、各顧客の違いを比較するために、ある対象に対する複数の顧客の視線を一つの画像に重ねることが考えられる。従来の視線計測器で測定する場合、各顧客が見ている視野映像とその視野映像のどこを見ているかという視線座標（個々人が自由に動き回っている視野画像内における座標）の２つを測定し、その測定結果に基づいて複数の顧客の視線を一つの画像に重ねることになるが、視野画像がどの位置からどの方向に撮影しているかを測定することが必要である。ＧＰＳやセンサによって視野画像の撮影位置と方向を検知することも可能であるが、室内にセンサを設置することが必要となる。また、撮影位置と方向に応じた補正など複雑な処理が必要となる。
【０００８】
本発明は、上記従来の事情に鑑みなされたものであり、人間の視線の動きを容易に把握可能な技術を提案することを目的としている。
【課題を解決するための手段】
【０００９】
請求項１の照射制御装置は、人間の視線方向を検出する検出手段と、光を照射し且つその照射方向を変更可能な照射手段と、前記照射手段による光の照射方向を前記検出した視線方向に変更する変更手段と、前記検出手段と前記照射手段と前記変更手段とを人間の頭部に装着する装着手段と、を備えたことを特徴とする。
【００１０】
請求項２の照射制御装置は、請求項１の照射制御装置において、前記照射手段は、視線方向の略中心点に可視光線を集束させて照射することを特徴とする。
【００１１】
請求項３の照射制御装置は、請求項１の照射制御装置において、前記照射手段は、視線方向の略中心点に不可視光線を集束させて照射することを特徴とする。
【００１２】
請求項４の照射制御装置は、請求項３の照射制御装置において、前記照射手段は、赤外線を照射することを特徴とする。
【００１３】
請求項５の照射制御装置は、請求項３又は請求項４の照射制御装置において、該照射制御装置を装着した人間に係る情報を示す画像を取得する取得手段を更に備え、前記照射手段は、前記取得した画像を視線方向の対象物に投影することを特徴とする。
【００１４】
請求項６の照射制御装置は、請求項５の照射制御装置において、前記取得手段は、該照射制御装置を装着した人間を識別する画像を取得することを特徴とする。
【００１５】
請求項７の照射制御装置は、請求項５の照射制御装置において、該照射制御装置を装着した人間の生体的な状態を計測する計測手段を更に備え、前記取得手段は、前記計測した結果を示す画像を取得することを特徴とする。
【００１６】
請求項８の視線分析システムは、請求項３乃至請求項７のいずれか１項の照射制御装置と、撮影装置とを備え、前記撮影装置は、視線の注目度の分析対象となる対象物を撮影する第１の撮影手段と、前記対象物に照射された不可視光線を撮影する第２の撮影手段と、前記撮影した対象物の映像と前記撮影した不可視光線を可視化した映像とを合成する合成手段と、前記合成した映像を出力する出力手段と、を備えたことを特徴とする。
【００１７】
請求項９の視線分析システムは、請求項８の視線分析システムにおいて、前記撮影装置は、映像を表示する表示手段を更に備え、前記出力手段は、前記合成した映像を前記表示手段に出力して表示させることを特徴とする。
【００１８】
請求項１０の視線分析システムは、請求項８の視線分析システムにおいて、前記撮影装置は、映像を記憶する記憶手段を更に備え、前記出力手段は、前記合成した映像を前記記憶手段に出力して記憶させることを特徴とする。
【００１９】
請求項１１の視線分析システムは、請求項８乃至請求項１０のいずれか１項の視線分析システムにおいて、不可視光線が照射された時間が閾値を上回る領域を可視化した映像を生成する生成手段を更に備え、前記合成手段は、前記撮影した対象物の映像と前記生成した映像とを合成することを特徴とする。
【００２０】
請求項１２の照射制御プログラムは、光を照射し且つその照射方向を変更可能な照射手段と、当該照射手段を人間の頭部に装着する装着手段と、を備えた照射制御装置のコンピュータに、人間の視線方向を検出する検出機能と、前記照射手段による光の照射方向を前記検出した視線方向に変更する変更機能と、を実現させることを特徴とする。
【発明の効果】
【００２１】
請求項１の照射制御装置によると、人間の視線方向に光を照射するようにしたため、光の照射先の特定により人間の視線方向を容易に把握できる。
また、例えば照明光を一定範囲に亘って照射することで、人間の視線方向を明るくする照明具の用途に用いることもできる。すなわち、従来の懐中電灯は、人間が光の照射先を意図的に指示する必要があり、また、ヘルメット固定型の照明具は、人間の顔面方向に光が照射されるものの視線方向に照射されるとは限られなかったところ、本発明の照射制御装置によると、これを装着した人間の視線方向を確実に明るくすることができて便利である。
また、各機能手段を人間の頭部に一体的に装着するようにしたため、人間の頭部の向きによらずに確実に視線方向を検出でき、また、視線方向と照射方向との連動も容易に行える。
また、人間の視線方向に光線を照射するようにし、分析対象の対象物を含む空間を撮像装置で撮像することにより、当該対象物に照射された複数の光線の軌跡を画像として記録することが可能となる。つまり、複数の人間に係る視野映像の撮影位置や視野映像の方向を測定する必要がないため、簡便に同一空間に複数の人間の視線（光線）を重ね合わせることができる。
【００２２】
請求項２の照射制御装置によると、これを装着した人間（被験者）の視線方向の略中心点に可視光線が照射されるため、分析者は被験者の視線方向を容易に把握できる。
【００２３】
請求項３の照射制御装置によると、被験者の視線方向の略中心点に不可視光線が照射されるため、その光線によって被験者の意識に影響を与えることがなく、また、分析者は不可視光線を可視化して表示する装置を用いることで被験者の視線方向を把握できる。
【００２４】
請求項４の照射制御装置によると、直進性に優れて遠くまで届く赤外線により、被験者の視線方向に確実に光線を照射することができる。
【００２５】
請求項５の照射制御装置によると、被験者に係る情報を示す画像を被験者の視線方向の対象物に投影するため、被験者の視線方向のみならず当該被験者に係る情報も得ることができる。
【００２６】
請求項６の照射制御装置によると、被験者の視線方向に投影された画像により当該被験者を識別することができる。
【００２７】
請求項７の照射制御装置によると、被験者の視線方向に投影された画像により当該被験者の生態的な状態を把握することができる。
【００２８】
請求項８の視線分析システムによると、視線の注目度の分析対象となる対象物を撮影した映像と当該対象物に照射された不可視光線を可視化した映像とを合成した合成映像が出力されるため、当該対象物のどこに視線が向けられているかを合成映像を一目して把握することができる。
【００２９】
請求項９の視線分析システムによると、合成映像を表示手段に表示させることで、分析者はその場で直ちに視線方向を分析することができる。
【００３０】
請求項１０の視線分析システムによると、合成映像を記憶手段に記憶させることで、分析者は事後的に視線方向を分析することができる。
【００３１】
請求項１１の視線分析システムによると、分析者は被験者の注目を浴びている領域を把握することができる。
【００３２】
請求項１２の照射制御プログラムによると、照射制御装置のコンピュータに、光の照射方向を被験者の視線方向に変更する機能を実現させることができる。
【発明を実施するための最良の形態】
【００３３】
本発明を、以下に例示する実施形態に基づいて具体的に説明する。
図１は、本例に係る視線分析システムの概要を、接遇者が複数の顧客を接遇する場合を例に示している。
各顧客（顧客１、２、…、ｎ）は照射制御装置１を頭部に装着しており、その顧客の視線方向に照射制御装置１から不可視光線（本例では赤外線）Ｒが照射されている。当該赤外線Ｒは、視線方向の略中心点に集束させて照射されており、図中の線分Ｌ１、Ｌ２は、照射された赤外線Ｒの軌跡を示している。
接遇者は赤外線撮影機能を有するヘッドマウントディスプレイ（ＨＭＤ）３を頭部に装着しており、赤外線を可視化した映像を当該ＨＭＤ３により見ることで、各顧客の視線の動きをリアルタイムに把握する。
【００３４】
図２は、本例に係る照射制御装置１の外観を示している。
本例の照射制御装置１は、眼鏡型のフレーム（装着手段）に、視線計測装置１０と赤外線照射装置２０とを備えている。なお、照射制御装置１は、例えばヘルメット型のような他の形状でもよく、人間の頭部に固定的に装着可能であればよい。
【００３５】
図３は、本例に係る照射制御装置１の視線計測装置１０及び赤外線照射装置２０の機能構成を示している。
視線計測装置１０は、人間の眼球Ｅに近赤外線を照射する光線照射手段１１と、眼球Ｅを撮影する眼球撮像手段１２と、撮影した画像に基づいて眼球Ｅの運動量を測定して視線方向を検出する視線算出手段１３とを備えている。ただし、画像処理により視線を計測する場合は近赤外線を照射する手段は必要ない。
【００３６】
赤外線照射装置２０は、赤外線を照射し且つその照射方向を変更可能な赤外線照射手段２３と、赤外線の照射方向を上記検出した視線方向に変更する制御を行う照射装置駆動制御手段２１と、赤外線により対象物に投影される画像の形状を制御する赤外線制御手段２２とを備えている。
なお、本例では、装着に先立って各個人の識別情報を入力させ、赤外線制御手段２２が識別情報に基づいて各個人を識別する識別画像を生成し、赤外線照射手段２３に供給して当該画像を照射方向の対象物に投影させるように制御している。なお、当該画像は装置固有に予め設定された画像であってもよい。また、本例では、２次元バーコードの画像を用いているが、番号・文字列・記号等の画像であってもよく、各個人を識別できればよい。
【００３７】
本例の視線計測装置１０による視線方向の検出方法に瞳孔角膜反射法を用いた実施例について、図４を参照して説明する。
光線照射手段１１から人間の眼球Ｅに近赤外線を照射すると、眼球Ｅの角膜表面にその反射光（プルキニエ像）が現れる。このプルキニエ像は、眼球Ｅが運動しても移動しないため、視線方向を検出する際の基準点Ｅ３として用いる。そして、近赤外線が照射された状態の眼球Ｅを眼球撮像手段１２により撮影し、視線算出手段１３が、画像処理により特定される黒目部分Ｅ１の中心点Ｅ２と基準点（プルキニエ像）Ｅ３とに基づいて眼球Ｅの運動量（中心点Ｅ２の移動量）を測定し、これに基づいて眼球Ｅの運動角度を算出する。この結果、視線の基準方向に対する水平方向及び垂直方向の変動角度を特定でき、視線方向を検出できる。
【００３８】
なお、視線方向の検出は上記方法に限定されず、例えば、強膜反射法によって検出することも可能である。この方法では微小な赤外光を照射して強膜（白目）と角膜（黒目）の反射率の違いで眼球運動を測定する。また、画像処理により顔面上の両黒目の位置を検出することも可能である。この方法では、通常まず鼻を検出し、それを基準とした両黒目の相対位置により視線方向を計算する。
【００３９】
ここで、検出された視線方向に赤外線が照射されるよう赤外線照射手段２３が照射装置駆動制御手段２１により制御されるが、眼球の動きは個人差があるため、視線方向に正しく赤外線が照射されるように赤外線の照射方向を個人毎に予め較正（キャリブレーション）しておく必要がある。
【００４０】
較正は、実空間の或る座標を見たときの眼球位置と、或る座標から別の座標へ移動したときの眼球の運動角度とを測定することで行われる。
具体的には、図５に示すように、較正板Ｃに設けた複数のＬＥＤランプを順番に発光させ、これを一定の間隔（視距離）を置いた位置から目で追ってもらい、その間における視線の移動角度を測定する。例えば、横方向にずらして配置したＬＥＤランプを順に追った場合の視線の移動角度とＬＥＤランプ間の距離と視距離とに基づいて横方向の照射角度を較正し、縦方向にずらして配置したＬＥＤランプを順に追った場合の視線の移動角度とＬＥＤランプ間の距離と視距離とに基づいて縦方向の照射角度を較正する。
なお、較正は上記方法に限定されず、図６に示すように、赤外線照射装置２０に可視光線照射手段を設け、可視光線照射手段により可視光線の方向を変えて照射させるようにし、これを目で追ってもらうことによって実現するようにしてもよい。また、上記較正では、較正時の対象までの奥行きが測定時の対象までの奥行きと異なる場合、検出する視線方向に誤差が生じる可能性がある。その場合、輻輳角（両目の視線）で測定することで誤差を少なくすることが可能である。
【００４１】
図７は、本例の照射制御装置１による視線方向への赤外線照射処理のフローを示している。
視線計測装置１０が、該照射制御装置１を装着した人間（被験者、本例では顧客）の眼球を撮影した画像により眼球運動量を測定し、眼球運動角度を算出して視線方向を検出する（ステップＳ１、Ｓ２）。
そして、照射装置駆動制御手段２１が、視線方向の検出結果に基づいて赤外線照射手段２３による赤外線の照射角度を制御する（ステップＳ３）。また、照射装置駆動制御手段２２が、被験者の識別画像を生成して赤外線照射手段２３に供給する（ステップＳ４）。
この結果、赤外線照射手段２３は、視線方向に赤外線を照射して、その先にある対象物に識別画像を投影する（ステップＳ５）。
分析者（本例では接遇者）は、後述のＨＭＤ３を装着することにより、各被験者のそれぞれの視線の動きを、各被験者を区別しつつリアルタイムに把握できる。
【００４２】
図８は、ＨＭＤ３の基本的な機能構成を例示している。
同図のＨＭＤ３は、入力された映像を表示する表示手段３４と、視線の注目度の分析対象となる対象物を撮影する映像取得手段３１と、当該対象物に照射された不可視光線（本例では赤外線）を撮影する付加情報受光手段３２と、前記撮影した対象物の映像（可視光映像）と前記撮影した赤外線を可視化した映像（赤外線映像）とを合成して表示手段３４に出力する情報合成手段３３とを備えた、人間の頭部に装着可能な表示装置である。
すなわち、映像取得数段３１により撮影した映像、付加情報受光手段３２により撮影した映像とを情報合成手段３３が合成し、表示手段３４に出力して表示させる。
【００４３】
本例の視線分析システムでは、上記のような可視光映像と赤外線映像とを単純に合成するだけでなく、赤外線映像中の被験者の識別画像をデコードして情報を抽出するデコード機能を有し、当該抽出した情報を加味して合成映像を生成するＨＭＤ３を用いている。
【００４４】
図１０は、デコード機能を有するＨＭＤ３の機能構成を示している。
同図のＨＭＤ３は、可視光及び赤外線の像を撮影可能なＣＣＤカメラ（映像取得手段３１及び付加情報受光手段３２）を２つ用いて構成してある。具体的には、赤外線以外（可視光）の通過を阻止する赤外フィルタ４１、この赤外フィルタ４１を通過した対象物の像（すなわち赤外線映像）を撮影するＣＣＤカメラ４２、対象物の像（可視光映像及び赤外線映像）を撮影するＣＣＤカメラ４３、ＣＣＤカメラ４２により撮影した赤外線映像とＣＣＤカメラ４３により撮影した可視光映像及び赤外線映像との差分を検出して赤外線映像を抽出する差分検出手段４４、抽出した赤外線映像中の識別画像を特定し、当該識別画像の位置座標の検出と当該識別画像のデコードによる情報抽出とを行うデコード手段４５、当該識別画像の位置座標及び当該識別画像から抽出した情報（本例では被験者の識別情報）に基づく画像を生成し、ＣＣＤカメラ４２により撮影した可視光映像とを合成する情報合成手段４６、を備えている。
【００４５】
すなわち、本例の視線分析システムでは、２次元バーコードの画像を顧客の識別画像として用いることから、後述するように顧客に係る他の情報を付加的に含めることができるものの、人間の目では各２次元バーコード画像を判別できないために当該画像を可視化したのみでは誰がどこを見ているかまでは把握できないところ、これを人間が容易に判別可能な画像（例えば、異なる色や形状の画像）に変換することで、誰がどこを見ているかについても把握可能にしている。
【００４６】
本例の視線分析システムは、赤外線照射物の撮影結果を記憶する記憶装置５を更に備えている。
図１１は、本例の記憶装置５の機能構成を簡略して示している。
同図の記憶装置５は、デコード機能を有するＨＭＤ３と同様に、カメラ（映像取得手段５１及び付加情報受光手段５２）を２つ備えている。これらカメラは固定的に設置してあり、各カメラにて撮影した映像を情報合成手段５３により合成し、データベース５４に出力して記憶させている。
【００４７】
また、本例では、映像フレーム毎の識別画像の位置座標及び当該識別画像から抽出した情報も付加的にデータベース５４に記憶させている。
この付加的に記憶した情報を用いることで、例えば、図９に示すように、所定フレーム数内の各識別画像の位置情報に沿って描いた識別画像毎の線分Ｌ１、Ｌ２を可視光映像に合成して表示することが可能となり、各顧客の視線の軌跡の分析に供することができる。
また、例えば、可視光映像の各領域毎に、その領域内に各識別画像が投影された時間を計測し、当該時間が閾値を上回る領域を可視化した映像を生成し、これを可視光映像に合成して表示することが可能となり、被験者の注目を集めている領域の分析に供することができる。
【００４８】
なお、記憶装置５に赤外線照射装置５５を設け、上記生成した識別画像毎の線分（各顧客の視線の軌跡）の映像や、識別画像の投影時間が閾値を上回る領域（注目度の高い領域）の映像を、赤外線照射装置５５により撮影対象物に投影するようにしてもよい。
これにより、ＨＭＤ３を装着した接遇者が、各顧客の視線の軌跡や注目度の高い領域をその場で直ちに把握することができる。図１２は、識別画像の投影時間が閾値を上回る領域の映像の投影例を示しており、領域Ｍ１の部分が顧客の注目を集めていることを把握できる。
【００４９】
本例では、“大野健彦、「ＩＭＰＡＣＴ：視線情報の再利用に基づくブラウジング支援法」、インタラクティブシステムとソフトウェアＶＩＩＩ（ＷＩＳＳ２０００）、暦本純一編、近代科学社、２０００、ｐｐ．１３７−１４６”に記載されている計算式を用いて視線注目度を算出している。
具体的には、ある領域において視線の停留点がｎ個存在し、停留点ｆｉの停留時間をｔｉ、ｆｉの位置ベクトルをＦｉとしたときの停留点の移動ベクトルｄｉを、
ｄｉ＝Ｆｉ−Ｆｉ−１
と定める。このとき、ｄｉ＝（ｄｚ、ｄｙ）、領域注目度の初期値をＶ０、領域面積をＳＥとすると、領域注目度Ｖの算出方法は（式１）の通りである。
【数１】
2009157634.tif 000003
また、領域注目度は時間経過と共に減衰し、時間ｕ経過後の領域注目度Ｖは、初期値をＶ０とすると、
Ｖ＝Ｖ０・Ｃｕ
である。ただし、上記各数式において、ＡおよびＣは定数である。
もちろん、他の計算式により視線注目度を算出するようにしてもよい。
【００５０】
本例の視線分析システムでは、図１３に示すように、照射制御装置１から２次元バーコード画像Ｍ２を赤外線Ｒにより照射して投影しているため、顧客の識別情報の他に、当該顧客に係る種々の情報を付加的に２次元バーコード画像Ｍ２に含めることができる。
【００５１】
例えば、図３に破線で示すように、被験者の生体的な状態を計測する生体情報計測手段２５を照射制御装置１に設け、当該計測した結果を赤外線制御手段２２に供給する。そして、赤外線制御手段２２が当該計測した結果の情報を含む２次元バーコード画像を生成し、当該画像を赤外線照射手段２３により照射させる。
【００５２】
生体情報とその主要な計測方法には以下のものがある。
脳波：頭皮上に電極を付着し、脳活動に伴う電位変化を計測する。
心拍：心臓を挟んだ体表面に電極を装着し、心臓の活動に伴う電位変化を計測する。
血圧：血圧計測装置により計測する。
呼吸：呼吸流量を測定し、呼気、吸気量を計測する。
皮膚電気活動：皮膚に電極を装着し、発汗を電気的に計測する。
体温：体温計、もしくはサーモグラフィにより特定の部位の温度を測定する。
筋電図：筋の収縮に伴う活動電位電極によって導出し、計測する。
【００５３】
これまでの説明では、照射制御装置１から視線方向に赤外線を照射する場合について説明してきたが、例えば紫外線等の他の波長域の不可視光線を照射制御装置１から照射するようにしてもよく、その不可視光線の波長に応じた撮影機能をＨＭＤ３や記憶装置５に設ければよい。
【００５４】
また、照射制御装置１から可視光線を照射するようにしてもよい。この場合には、顧客ではなく接遇者が照射制御装置１を装着することで、接遇者の視線方向に可視光が照射されるため、顧客に注目して欲しい点を見ながら説明することで当該点に顧客の視線を集めることができる。
図１４は、照射制御装置１から可視光線を照射する場合の処理フローを示しているが、照射する光線が可視光である以外は赤外線を照射する場合と同じであるため、その説明は割愛する。
また、図１５に示すように、照射制御装置１から照明光を視線方向に一定範囲に亘って照射することで、人間の視線方向を明るくする照明具として用いてもよい。
【００５５】
本例の照射制御装置１は、図１６に示すように、各種演算処理を行うＣＰＵ６１、ＣＰＵ６１の作業領域となるＲＡＭ６２、基本的な制御プログラムを記憶するＲＯＭ６３、利用者からの操作入力を受け付けるための入力インタフェース（Ｉ／Ｆ）６４、本発明に係る各機能を実現するための照射制御プログラム等を記憶するデータ記憶部６５、等のハードウェア資源を有するコンピュータで構成されている。
【００５６】
そして、各ハードウェア資源を用いて本発明に係る照射制御プログラムを実行することで、本発明に係る検出手段（視線算出手段１３）、変更手段（照射装置駆動制御手段２１）、取得手段（赤外線制御手段２２）などを照射制御装置１のコンピュータに実現している。なお、上記の各機能手段は、本例のようなソフトウェア構成により実現する態様に限られず、それぞれ専用のハードウエアモジュールで構成してもよい。
【００５７】
また、本例のＨＭＤ３及び記憶装置５も、照射制御装置１と同様にＣＰＵ、ＲＡＭ、ＲＯＭ等のハードウェア資源を有するコンピュータで構成してあり、各ハードウェア資源を用いて本発明に係るプログラムを実行することで、本発明に係る合成手段（情報合成手段３３、５３）をＨＭＤ３及び記憶装置５のコンピュータに実現しているが、専用のハードウエアモジュールで構成してもよい。
【図面の簡単な説明】
【００５８】
【図１】本発明の一例に係る視線分析システムの概要を示す図である。
【図２】本発明の一例に係る照射制御装置の外観を示す図である。
【図３】本発明の一例に係る照射制御装置の機能構成を示す図である。
【図４】本発明の一例に係る視線方向の検出を説明する図である。
【図５】本発明の一例に係る較正処理を説明する図である。
【図６】本発明の一例に係る較正処理を説明する図である。
【図７】本発明の一例に係る視線方向への赤外線照射処理を説明する図である。
【図８】本発明の一例に係るＨＭＤの機能構成を示す図である。
【図９】本発明の一例に係る赤外線照射物の撮影結果の表示例を示す図である。
【図１０】本発明の一例に係るＨＭＤの機能構成を示す図である。
【図１１】本発明の一例に係る記憶装置の機能構成を示す図である。
【図１２】本発明の一例に係る赤外線照射物の撮影結果の投影例を示す図である。
【図１３】本発明の一例に係る照射制御装置による赤外線の照射例を示す図である。
【図１４】本発明の一例に係る視線方向への可視光照射処理を説明する図である。
【図１５】本発明の一例に係る照射制御装置を照明具に用いる場合を示す図である。
【図１６】本発明の一例に係る照射制御装置のハードウェア構成を示す図である。
【符号の説明】
【００５９】
１：照射制御装置、
３：ヘッドマウントディスプレイ（ＨＭＤ）、
５：記憶装置、
１０：視線計測装置、
２０：赤外線照射装置、
１１：光線照射手段、
１２：眼球撮像手段、
１３：視線算出手段、
２１：照射装置駆動制御手段、
２２：赤外線制御手段、
２３：赤外線照射手段、
２４：生体情報計測手段、
３１、５１：映像取得手段、
３２、５２：付加情報受光手段、
３３、５３、４６：情報合成手段、
３４：表示手段、
４１：赤外フィルタ、
４２、４３：ＣＣＤカメラ、
４４：差分検出手段、
４５：デコード手段、
５４：データベース
【図１】
2009157634.tif 000004
【図２】
2009157634.tif 000005
【図３】
2009157634.tif 000006
【図４】
2009157634.tif 000007
【図５】
2009157634.tif 000008
【図６】
2009157634.tif 000009
【図７】
2009157634.tif 000010
【図８】
2009157634.tif 000011
【図９】
2009157634.tif 000012
【図１０】
2009157634.tif 000013
【図１１】
2009157634.tif 000014
【図１２】
2009157634.tif 000015
【図１３】
2009157634.tif 000016
【図１４】
2009157634.tif 000017
【図１５】
2009157634.tif 000018
【図１６】
2009157634.tif 000019