(57)【要約】【課題】明暗、呼吸及び脈拍の影響を排除した瞳孔径を測定し、視認者の情感をより正確に判定する。【解決手段】基準データ測定部２２は、画面全体の明るさ及び視点の明るさ毎に、基準データとして、基準瞳孔径Ｃsk、呼吸瞳孔径Ｄskt及び脈拍瞳孔径Ｅsktを測定する。測定部２３は、コンテンツの経過時間に対応した基準瞳孔径Ｃsk、呼吸瞳孔径Ｄskt及び脈拍瞳孔径Ｅsktを特定する。測定部２３は、２呼吸時間以上（Ｔ１）の場合、瞳孔径Ｂtを注目瞳孔径Ａ1tに設定し、２脈拍時間以上かつ２呼吸時間未満（Ｔ２）の場合、瞳孔径Ｂtから呼吸瞳孔径Ｄsktを減算して注目瞳孔径Ａ1tを求め、２脈拍未満（Ｔ３）の場合、さらに脈拍瞳孔径Ｅsktを減算して注目瞳孔径Ａ1tを求める。測定部２３は、注目瞳孔径Ａ1tから基準瞳孔径Ｃskを減算して注目分瞳孔径Ａ2tを求め、注目瞳孔径Ａ1t及び注目分瞳孔径Ａ2tを基準瞳孔径Ｃskで除算し、注目度Ｐ1t，Ｐ2tを求める。【選択図】図２
2017057631.tif 000002
【特許請求の範囲】
【請求項１】
ディスプレイに表示されたコンテンツを視認する視認者の瞳孔径に基づいて、前記視認者の情感を判定する視認者情感判定装置において、
第１の画面に所定の基準明暗画面が表示され、第１の画面の明るさと、第１の画面の所定箇所に前記視認者の視点を合わせたときの視点位置の明るさとを変化させた場合に、前記基準明暗画面における第１の画面の明るさと前記視点位置の明るさとの組合せ毎に測定した前記視認者の瞳孔径に基づく前記視認者の瞳孔径に関する基準データを記憶する記憶部と、
前記ディスプレイに前記コンテンツが表示された場合に、前記視認者の瞳孔径を測定し、実測した瞳孔径を得るとともに、前記記憶部に記憶された前記基準データに基づいて、前記コンテンツが表示された前記ディスプレイの明るさ及び前記コンテンツが表示された前記ディスプレイ内の視点位置の明るさに対応する前記基準データを特定し、前記実測した瞳孔径、及び特定した前記基準データに基づいて、前記実測した瞳孔径を補正し、補正後の瞳孔径を得る測定部と、
を備えたことを特徴とする視認者情感判定装置。
【請求項２】
請求項１に記載の視認者情感判定装置において、
前記基準データは、基準データ測定部により測定され、
前記基準データ測定部は、
前記視認者の呼吸周期を１呼吸時間として、２呼吸時間以上の所定の時間間隔を設定し、前記基準明暗画面における第１の画面の明るさと前記視点位置の明るさとの組合せ毎に、前記瞳孔径を前記時間間隔にて移動平均して移動平均後の瞳孔径を求め、前記基準明暗画面が表示された時間にて前記移動平均後の瞳孔径を平均し、基準瞳孔径を求め、前記基準明暗画面における第１の画面の明るさと前記視点位置の明るさとの組合せ毎の前記基準瞳孔径からなる基準明暗反応テーブルを生成する基準明暗反応測定手段を備え、
前記測定部は、
前記基準明暗反応測定手段により生成された基準明暗反応テーブルに基づいて、前記コンテンツが表示された前記ディスプレイの明るさ及び前記コンテンツが表示された前記ディスプレイ内の視点位置の明るさに対応する前記基準瞳孔径を特定する基準瞳孔径等特定手段と、
前記２呼吸時間以上の所定の時間間隔を設定し、前記瞳孔径を前記時間間隔にて移動平均して移動平均後の瞳孔径を求め、前記移動平均後の瞳孔径を注目瞳孔径とし、前記移動平均後の瞳孔径から、前記基準瞳孔径等特定手段により特定された前記基準瞳孔径を減算し、注目分瞳孔径を求める手段と、を備えたことを特徴とする視認者情感判定装置。
【請求項３】
請求項２に記載の視認者情感判定装置において、
前記視認者の呼吸における吸気開始点と排気開始点のタイミングを含む呼吸状態データを測定する解析部を備え、
前記基準データ測定部は、さらに、
前記視認者の呼吸周期を１呼吸時間とし、前記視認者の脈拍周期を１脈拍時間として、２脈拍時間以上かつ２呼吸時間未満の所定の時間間隔を設定し、
前記基準明暗画面における前記第１の画面の明るさと前記視点位置の明るさとの組合せ毎に、前記瞳孔径を前記時間間隔にて移動平均して移動平均後の瞳孔径を求め、
前記基準明暗画面が表示された時間にて前記移動平均後の瞳孔径を平均し、平均値を求め、
前記移動平均後の瞳孔径から前記平均値を減算し、減算結果である呼吸のみの影響を受けた瞳孔径を求め、
前記呼吸のみの影響を受けた瞳孔径の時間変化から、前記解析部により測定された前記呼吸状態データを用いて、吸気開始点及び排気開始点を含む１呼吸周期の時間における呼吸瞳孔径を抽出し、前記基準明暗画面における前記第１の画面の明るさと前記視点位置の明るさとの組合せ毎の前記呼吸瞳孔径からなる基準呼吸反応テーブルを生成する基準呼吸反応測定手段を備え、
前記測定部の基準瞳孔径等特定手段は、
前記基準瞳孔径を特定すると共に、前記基準明暗反応測定手段により生成された基準呼吸反応テーブルに基づいて、前記コンテンツが表示された前記ディスプレイの明るさ及び前記コンテンツが表示され前記ディスプレイ内の視点位置の明るさに対応する前記呼吸瞳孔径を特定し、
前記測定部の注目瞳孔径等算出手段は、
前記２脈拍時間以上かつ２呼吸時間未満の所定の時間間隔を設定し、前記瞳孔径を前記時間間隔にて移動平均して移動平均後の瞳孔径を求め、前記移動平均後の瞳孔径から、前記基準瞳孔径等特定手段により特定された前記呼吸瞳孔径を減算し、注目瞳孔径を求め、さらに、前記基準瞳孔径等特定手段により特定された前記基準瞳孔径を減算し、注目分瞳孔径を求める、ことを特徴とする視認者情感判定装置。
【請求項４】
請求項３に記載の視認者情感判定装置において、
前記解析部は、
前記呼吸状態データに加え、前記視認者の脈拍における脈拍開始点のタイミングを含む脈拍状態データを測定し、
前記基準データ測定部は、さらに、
前記視認者の呼吸周期を１呼吸時間とし、前記視認者の脈拍周期を１脈拍時間として、２脈拍時間以上かつ２呼吸時間未満の所定の時間間隔を設定し、
前記瞳孔径を前記時間間隔にて移動平均して移動平均後の瞳孔径を求め、
前記瞳孔径から前記移動平均後の瞳孔径を減算し、減算結果である脈拍のみの影響を受けた瞳孔径を求め、
前記脈拍のみの影響を受けた瞳孔径の時間変化から、前記解析部により測定された前記脈拍状態データを用いて、脈拍開始点を含む１脈拍周期の時間における脈拍瞳孔径を抽出し、前記基準明暗画面における第１の画面の明るさと前記視点位置の明るさとの組合せ毎の前記脈拍瞳孔径からなる基準脈拍反応テーブルを生成する基準脈拍反応測定手段を備え、
前記測定部の基準瞳孔径等特定手段は、
前記基準瞳孔径及び前記呼吸瞳孔径を特定すると共に、前記基準明暗反応測定手段により生成された基準脈拍反応テーブルに基づいて、前記コンテンツが表示された前記ディスプレイの明るさ及び前記コンテンツが表示された前記ディスプレイの視点位置の明るさに対応する前記脈拍瞳孔径を特定し、
前記測定部の注目瞳孔径等算出手段は、
前記瞳孔径から、前記基準瞳孔径等特定手段により特定された前記脈拍瞳孔径及び前記呼吸瞳孔径を減算し、注目瞳孔径を求め、さらに、前記基準瞳孔径等特定手段により特定された前記基準瞳孔径を減算し、注目分瞳孔径を求めることを特徴とする視認者情感判定装置。
【請求項５】
請求項４に記載の視認者情感判定装置において、
前記測定部は、さらに、
前記基準瞳孔径等特定手段により特定された前記基準瞳孔径と、前記注目瞳孔径等算出手段により求められた前記注目瞳孔径との間の比を算出し、第１の注目度を求め、または、前記基準瞳孔径等特定手段により特定された前記基準瞳孔径と、前記注目瞳孔径等算出手段により求められた前記注目分瞳孔径との間の比を算出し、第２の注目度を求める注目度算出手段、を備えたことを特徴とする視認者情感判定装置。
【請求項６】
請求項５に記載の視認者情感判定装置において、
前記ディスプレイの画面を分割した複数の分割領域が設定され、前記視認者が複数存在する場合に、
前記測定部は、
前記複数の視認者のそれぞれについて、前記ディスプレイに表示されたコンテンツに対する前記第１の注目度を第１のコンテンツ注目度として求め、前記第１のコンテンツ注目度を前記複数の視認者について合計して第１の合計結果を求め、前記第１の合計結果を前記複数の視認者の数で除算することで、前記コンテンツに対する前記視認者１人当たりの注目度を求め、
前記複数の視認者のそれぞれについて、前記分割領域毎に、前記第１の注目度を第１の
領域注目度として求め、前記第１の領域注目度を前記複数の視認者について合計して第２の合計結果を求め、前記第２の合計結果を前記第１の合計結果で除算することで、前記コンテンツに対する前記分割領域毎の注目度の分布を求め、
前記コンテンツに対する前記分割領域毎の注目度の分布を所定時間期間にて積分して前記分割領域毎の合計注目度の分布を求め、前記分割領域毎の合計注目度の分布を前記所定時間期間で除算することで、前記コンテンツに対する単位時間当たりの前記分割領域毎の注目度の分布を求める、ことを特徴とする視認者情感判定装置。
【請求項７】
請求項５に記載の視認者情感判定装置において、
前記ディスプレイに、質問欄及び複数の回答欄を含むアンケートの画面が表示されている場合に、
前記測定部は、
前記質問欄及び前記複数の回答欄のそれぞれに対する前記第１の注目度を所定時間期間にて積分し、前記質問欄及び前記複数の回答欄のそれぞれに対する各欄注目度を求め、
前記質問欄及び前記複数の回答欄のそれぞれに対する前記各欄注目度を合計して第１の合計結果を求め、前記複数の回答欄のそれぞれに対する前記各欄注目度を合計して第２の合計結果を求め、
前記複数の回答欄のそれぞれに対する前記各欄注目度を前記第２の合計結果で除算することで、前記複数の回答欄のそれぞれに対する回答確信率を求め、
前記第１の合計結果を前記所定時間期間で除算することで、前記アンケートについての注目度の高さを求める、ことを特徴とする視認者情感判定装置。
【請求項８】
請求項１に記載の視認者情感判定装置において、
前記基準データのもととなる前記視認者の瞳孔径は、第１の画面に所定の基準明暗画面が前記視認者に対して最初に表示されてから、４０秒以上１０分以下経過した後であって、前記第一の画面の所定の基準明暗画面の変化毎に、１秒以上１分以下後測定されたものである、視認者情感判定装置。
【請求項９】
対象物を視認する視認者の瞳孔径に基づいて、前記視認者の情感を判定する視認者情感判定装置と、前記視認者が視認する前記対象物を含む視認映像全体の明るさ及び前記対象物内の前記視認者の視点位置の明るさを計測する明るさ計測装置と、前記視認映像を撮影する視認映像撮影装置と、を備えた視認者情感判定システムにおいて、
前記視認者情感判定装置は、
前記対象物を含む所定の基準映像の明るさと、前記基準映像内の所定箇所に前記視認者の視点を合わせたときの視点位置の明るさとを複数変化させた場合に、前記基準映像の明るさと前記視点位置の明るさとの組合せ毎に、前記瞳孔径に基づいて、前記視認者の瞳孔径に関する基準データを測定する基準データ測定部と、
前記視認者が前記対象物を視認する場合に、前記基準データ測定部により測定された前記基準映像全体の明るさと前記視点位置の明るさとの組合せ毎の前記基準データに基づいて、前記対象物を含む視認映像全体の明るさ及び前記対象物内の視点位置の明るさに対応する前記基準データを特定し、前記瞳孔径及び前記基準データに基づいて、新たな瞳孔径を測定する測定部と、を備え、
前記明るさ計測装置は、
前記視認映像全体に対応して複数の輝度センサーを配置させた撮像部と、
前記複数の輝度センサーと前記視点位置との関係が定義されたテーブルを用いて、前記複数の輝度センサーのうち、前記視認者が前記対象物を視認したときの前記視点位置に対応する輝度センサーを特定し、当該輝度センサーにて計測された輝度を前記視認者の視点位置の明るさとして出力する視点位置輝度測定部と、を備えたことを特徴とする視認者情感判定システム。
【請求項１０】
ディスプレイに表示されたコンテンツを視認する視認者の瞳孔径に基づいて、前記視認者の情感を判定するプログラムであって、
コンピュータに、
第１の画面に所定の基準明暗画面が表示され、第１の画面の明るさと、第１の画面の所定箇所に前記視認者の視点を合わせたときの視点位置の明るさとを複数変化させた場合に、前記基準明暗画面における第１の画面の明るさと前記視点位置の明るさとの組合せ毎に、測定した前記視認者の瞳孔径に基づいて、前記視認者の瞳孔径に関する基準データを記憶部から読み出させるステップと、
前記ディスプレイに前記コンテンツが表示された場合に、前記基準データに基づいて、前記コンテンツが表示された前記ディスプレイの明るさ及び前記コンテンツが表示された前記ディスプレイの視点位置の明るさに対応する前記基準データを特定させるステップと、
前記ディスプレイに前記コンテンツが表示された場合における、前記視認者の瞳孔径の測定時である実測した瞳孔径に関する情報を受け取り、前記実測した瞳孔径及び特定された前記基準データに基づいて、前記実測した瞳孔径を補正し、補正後の瞳孔径を得るステップと、
を実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、視認者が視認対象を注目すると瞳孔径が拡大することを利用した視認者情感判定装置、視認者情感判定システム及びプログラムに関し、視認対象に対する視認者の瞳孔径を測定する際に、視認対象の明暗並びに視認者の呼吸及び脈拍の影響を排除する技術に関する。
【背景技術】
【０００２】
従来、人がどこを見ているかを判定する技術として、視点位置を測定し、視認対象への視点の滞留時間を算出し、視認対象への注目度を測定していた。この方法では、単に視認対象をぼんやり見ていた場合であっても、視点の滞留時間が長いときには、その視認対象への注目度が高いものと誤った判定がされる。また、視点の滞留は、静止画に対して計測可能であるが、動画に対しては計測が困難であった。【０００３】
このような問題を解決するために、人が視認対象を注目すると瞳孔径が拡大する現象を併用し、視認対象への注目度の高さを判定する技術が知られている（例えば、特許文献１，２を参照）。【０００４】
特許文献１，２の技術では、眼球運動を撮像し、視線の動き、瞳孔径等を測定して視認対象への注目度を測定する。具体的には、視認者毎に、コンテンツに対する明暗反応について、ディスプレイの輝度と瞳孔径の関係を予め測定する。そして、実際のコンテンツを視認したときのディスプレイの輝度を測定し、予め測定した輝度と瞳孔径との関係を参照し、実際に測定した瞳孔径から、その輝度に相当する明暗反応のみによる瞳孔径を差し引く。これにより、ディスプレイに表示されたコンテンツへの注目分に相当する視認者の瞳孔径を、正確に測定することができる。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特許第５４４５９８１号公報
【特許文献２】国際公開第２０１５／０５６７４２号
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、注目度と同様に、瞳孔径は、明るい場所では縮小し、暗い場所では拡大する現象があるが、個人差がある。この個人差を解消するために、基準となる明暗画面（基準明暗画面）を用いて、最も暗い画面を視認したときの瞳孔径と最も明るい画面を視認したときの瞳孔径との間の差を分母とし、実際の視認対象を視認したときの瞳孔径とそれと同じ輝度条件の基準明暗画面を視認したときの瞳孔径との間の差（注目相当分の瞳孔径）を分子とした比によって、注目度のレベルを定めている。【０００７】
この場合、注目度レベルを定める分子の算出において、同一の注目の大きさであっても、暗い画面での注目相当分の瞳孔径と、明るい画面での注目相当分の瞳孔径とが異なることがある。このため、正しく注目度のレベルを表していないこともあり、明暗に共通した正しい注目度を表す手法が必要であった。また、視認者が視認対象に対して退屈してみている場合、注目度の数値がマイナス（−）になることがあり、その数値をアプリケーションの計算にそのまま使用することができないことがある。このため、注目度の数値を正数で扱う必要があった。【０００８】
さらに、瞳孔径は、呼吸及び脈拍により周期的に変化する。このため、視認対象への注目度をより正確に測定するため、瞳孔径を測定する際に、視認対象の明暗、並びに視認者の呼吸及び脈拍の影響を排除することが所望されていた。【０００９】
そこで、本発明は前記課題を解決するためになされたものであり、その目的は、明暗、呼吸及び脈拍の影響を排除した瞳孔径を測定し、視認者の情感をより正確に判定可能な視認者情感判定装置、視認者情感判定システム及びプログラムを提供することにある。
【課題を解決するための手段】
【００１０】
本発明の第１の態様は，視認者情感判定装置に関する。この視認者情感判定装置は，ディスプレイに表示されたコンテンツを視認する視認者の瞳孔径に基づいて、視認者の情感を判定する視認者情感判定装置である。そして，視認者情感判定装置は、記憶部と、測定部とを有する。
記憶部は、第１の画面に所定の基準明暗画面が表示され、第１の画面の明るさと、第１の画面の所定箇所に視認者の視点を合わせたときの視点位置の明るさとを変化させた場合に、基準明暗画面における第１の画面の明るさと視点位置の明るさとの組合せ毎に測定した視認者の瞳孔径に基づく視認者の瞳孔径に関する基準データを記憶する。
測定部は、ディスプレイにコンテンツが表示された場合に、視認者の瞳孔径を測定し、実測した瞳孔径を得るとともに、記憶部に記憶された基準データに基づいて、コンテンツが表示されたディスプレイの明るさ及びコンテンツが表示されたディスプレイ内の視点位置の明るさに対応する基準データを特定し、実測した瞳孔径、及び特定した基準データに基づいて、実測した瞳孔径を補正し、補正後の瞳孔径を得る。【００１１】
上記の視認者情感判定装置の好ましい例は、基準データが、基準データ測定部により測定されるものである。
そして、基準データ測定部は、
視認者の呼吸周期を１呼吸時間として、２呼吸時間以上の所定の時間間隔を設定し、基準明暗画面における第１の画面の明るさと視点位置の明るさとの組合せ毎に、瞳孔径を時間間隔にて移動平均して移動平均後の瞳孔径を求め、基準明暗画面が表示された時間にて移動平均後の瞳孔径を平均し、基準瞳孔径を求め、基準明暗画面における第１の画面の明るさと視点位置の明るさとの組合せ毎の基準瞳孔径からなる基準明暗反応テーブルを生成する基準明暗反応測定手段を備える。
また、測定部は、
基準明暗反応測定手段により生成された基準明暗反応テーブルに基づいて、コンテンツが表示されたディスプレイの明るさ及びコンテンツが表示されたディスプレイ内の視点位置の明るさに対応する基準瞳孔径を特定する基準瞳孔径等特定手段と、
２呼吸時間以上の所定の時間間隔を設定し、瞳孔径を時間間隔にて移動平均して移動平均後の瞳孔径を求め、移動平均後の瞳孔径を注目瞳孔径とし、移動平均後の瞳孔径から、基準瞳孔径等特定手段により特定された基準瞳孔径を減算し、注目分瞳孔径を求める手段と、を備える。【００１２】
上記の視認者情感判定装置の好ましいものは、
視認者の呼吸における吸気開始点と排気開始点のタイミングを含む呼吸状態データを測定する解析部を備え、
基準データ測定部は、さらに、
視認者の呼吸周期を１呼吸時間とし、視認者の脈拍周期を１脈拍時間として、２脈拍時間以上かつ２呼吸時間未満の所定の時間間隔を設定し、
基準明暗画面における第１の画面の明るさと視点位置の明るさとの組合せ毎に、瞳孔径を時間間隔にて移動平均して移動平均後の瞳孔径を求め、
基準明暗画面が表示された時間にて移動平均後の瞳孔径を平均し、平均値を求め、
移動平均後の瞳孔径から平均値を減算し、減算結果である呼吸のみの影響を受けた瞳孔径を求め、
呼吸のみの影響を受けた瞳孔径の時間変化から、解析部により測定された呼吸状態データを用いて、吸気開始点及び排気開始点を含む１呼吸周期の時間における呼吸瞳孔径を抽出し、基準明暗画面における第１の画面の明るさと視点位置の明るさとの組合せ毎の呼吸瞳孔径からなる基準呼吸反応テーブルを生成する基準呼吸反応測定手段を備え、
測定部の基準瞳孔径等特定手段は、
基準瞳孔径を特定すると共に、基準明暗反応測定手段により生成された基準呼吸反応テーブルに基づいて、コンテンツが表示されたディスプレイの明るさ及びコンテンツが表示されディスプレイ内の視点位置の明るさに対応する呼吸瞳孔径を特定し、
測定部の注目瞳孔径等算出手段は、
２脈拍時間以上かつ２呼吸時間未満の所定の時間間隔を設定し、瞳孔径を時間間隔にて移動平均して移動平均後の瞳孔径を求め、移動平均後の瞳孔径から、基準瞳孔径等特定手段により特定された呼吸瞳孔径を減算し、注目瞳孔径を求め、さらに、基準瞳孔径等特定手段により特定された基準瞳孔径を減算し、注目分瞳孔径を求める。【００１３】
上記の視認者情感判定装置の好ましいものは、
解析部は、
呼吸状態データに加え、視認者の脈拍における脈拍開始点のタイミングを含む脈拍状態データを測定し、
基準データ測定部は、さらに、
視認者の呼吸周期を１呼吸時間とし、視認者の脈拍周期を１脈拍時間として、２脈拍時間以上かつ２呼吸時間未満の所定の時間間隔を設定し、
瞳孔径を時間間隔にて移動平均して移動平均後の瞳孔径を求め、
瞳孔径から移動平均後の瞳孔径を減算し、減算結果である脈拍のみの影響を受けた瞳孔径を求め、
脈拍のみの影響を受けた瞳孔径の時間変化から、解析部により測定された脈拍状態データを用いて、脈拍開始点を含む１脈拍周期の時間における脈拍瞳孔径を抽出し、基準明暗画面における第１の画面の明るさと視点位置の明るさとの組合せ毎の脈拍瞳孔径からなる基準脈拍反応テーブルを生成する基準脈拍反応測定手段を備え、
測定部の基準瞳孔径等特定手段は、
基準瞳孔径及び呼吸瞳孔径を特定すると共に、基準明暗反応測定手段により生成された基準脈拍反応テーブルに基づいて、コンテンツが表示されたディスプレイの明るさ及びコンテンツが表示されたディスプレイの視点位置の明るさに対応する脈拍瞳孔径を特定し、
測定部の注目瞳孔径等算出手段は、
瞳孔径から、基準瞳孔径等特定手段により特定された脈拍瞳孔径及び呼吸瞳孔径を減算し、注目瞳孔径を求め、さらに、基準瞳孔径等特定手段により特定された基準瞳孔径を減算し、注目分瞳孔径を求める。【００１４】
視認者情感判定装置の好ましい例は、
測定部が、さらに、
基準瞳孔径等特定手段により特定された基準瞳孔径と、注目瞳孔径等算出手段により求められた注目瞳孔径との間の比を算出し、第１の注目度を求め、または、基準瞳孔径等特定手段により特定された基準瞳孔径と、注目瞳孔径等算出手段により求められた注目分瞳孔径との間の比を算出し、第２の注目度を求める注目度算出手段、を備える。【００１５】
視認者情感判定装置の好ましい例は、
ディスプレイの画面を分割した複数の分割領域が設定され、視認者が複数存在する場合に、
測定部は、
複数の視認者のそれぞれについて、ディスプレイに表示されたコンテンツに対する第１の注目度を第１のコンテンツ注目度として求め、第１のコンテンツ注目度を複数の視認者について合計して第１の合計結果を求め、第１の合計結果を複数の視認者の数で除算することで、コンテンツに対する視認者１人当たりの注目度を求め、
複数の視認者のそれぞれについて、分割領域毎に、第１の注目度を第１の
領域注目度として求め、第１の領域注目度を複数の視認者について合計して第２の合計結果を求め、第２の合計結果を第１の合計結果で除算することで、コンテンツに対する分割領域毎の注目度の分布を求め、
コンテンツに対する分割領域毎の注目度の分布を所定時間期間にて積分して分割領域毎の合計注目度の分布を求め、分割領域毎の合計注目度の分布を所定時間期間で除算することで、コンテンツに対する単位時間当たりの分割領域毎の注目度の分布を求める。【００１６】
視認者情感判定装置の好ましい例は、
ディスプレイに、質問欄及び複数の回答欄を含むアンケートの画面が表示されている場合に、
測定部は、
質問欄及び複数の回答欄のそれぞれに対する第１の注目度を所定時間期間にて積分し、質問欄及び複数の回答欄のそれぞれに対する各欄注目度を求め、
質問欄及び複数の回答欄のそれぞれに対する各欄注目度を合計して第１の合計結果を求め、複数の回答欄のそれぞれに対する各欄注目度を合計して第２の合計結果を求め、
複数の回答欄のそれぞれに対する各欄注目度を第２の合計結果で除算することで、複数の回答欄のそれぞれに対する回答確信率を求め、
第１の合計結果を所定時間期間で除算することで、アンケートについての注目度の高さを求める。【００１７】
視認者情感判定装置の好ましい例は、
基準データのもととなる視認者の瞳孔径は、第１の画面に所定の基準明暗画面が視認者に対して最初に表示されてから、４０秒以上１０分以下経過した後であって、第一の画面の所定の基準明暗画面の変化毎に、１秒以上１分以下後測定されたものである。
瞳孔径を同条件で時間をずらして複数回測定したところ、画面を明るくした直後に測定した瞳孔径や、長時間が経過した後に測定した瞳孔径は、分散（したがって標準偏差）の値が大きく、ばらつきがあった。このため、上記変動の直後に測定した瞳孔径や、長時間が経過した後に測定した瞳孔径の値は、所定期間に測定した瞳孔径に比べて安定性（したがって信ぴょう性）が低い。よって、画面の明るさを変化した後、数秒以上経過した後に瞳孔径を測定することが好ましい。また、第一の画面の基準明暗画面の明るさを変化させる毎に、変化させてから１秒以上１分以下（好ましくは１秒以上１０秒以下、又は２秒以上７秒以下、又は３秒以上６秒以下）経過した後に瞳孔径を測定すると、瞳孔径の変動が小さくなったので好ましい。【００１８】
本発明の第２の態様は、視認者情感判定システムに関する。この視認者情感判定システムは、  対象物を視認する視認者の瞳孔径に基づいて、視認者の情感を判定する視認者情感判定装置と、視認者が視認する対象物を含む視認映像全体の明るさ及び対象物内の視認者の視点位置の明るさを計測する明るさ計測装置と、視認映像を撮影する視認映像撮影装置と、を備えた視認者情感判定システムにおいて、
視認者情感判定装置は、
対象物を含む所定の基準映像の明るさと、基準映像内の所定箇所に視認者の視点を合わせたときの視点位置の明るさとを複数変化させた場合に、基準映像の明るさと視点位置の明るさとの組合せ毎に、瞳孔径に基づいて、視認者の瞳孔径に関する基準データを測定する基準データ測定部と、
視認者が対象物を視認する場合に、基準データ測定部により測定された基準映像全体の明るさと視点位置の明るさとの組合せ毎の基準データに基づいて、対象物を含む視認映像全体の明るさ及び対象物内の視点位置の明るさに対応する基準データを特定し、瞳孔径及び基準データに基づいて、新たな瞳孔径を測定する測定部と、を備え、
明るさ計測装置は、
視認映像全体に対応して複数の輝度センサーを配置させた撮像部と、
複数の輝度センサーと視点位置との関係が定義されたテーブルを用いて、複数の輝度センサーのうち、視認者が対象物を視認したときの視点位置に対応する輝度センサーを特定し、当該輝度センサーにて計測された輝度を視認者の視点位置の明るさとして出力する視点位置輝度測定部と、を備える。【００１９】
本発明の第３の態様は、プログラムに関する。このプログラムは、ディスプレイに表示されたコンテンツを視認する視認者の瞳孔径に基づいて、視認者の情感を判定するプログラムである。そして、このプログラムは、コンピュータに、
第１の画面に所定の基準明暗画面が表示され、第１の画面の明るさと、第１の画面の所定箇所に視認者の視点を合わせたときの視点位置の明るさとを複数変化させた場合に、基準明暗画面における第１の画面の明るさと視点位置の明るさとの組合せ毎に、測定した視認者の瞳孔径に基づいて、視認者の瞳孔径に関する基準データを記憶部から読み出させるステップと、
ディスプレイにコンテンツが表示された場合に、基準データに基づいて、コンテンツが表示されたディスプレイの明るさ及びコンテンツが表示されたディスプレイの視点位置の明るさに対応する基準データを特定させるステップと、
ディスプレイにコンテンツが表示された場合における、視認者の瞳孔径の測定時である実測した瞳孔径に関する情報を受け取り、実測した瞳孔径及び特定された基準データに基づいて、実測した瞳孔径を補正し、補正後の瞳孔径を得るステップと、
を実行させるためのプログラムである。
【発明の効果】
【００２０】
以上のように、本発明によれば、明暗、呼吸及び脈拍の影響を排除した瞳孔径を測定することができ、視認者の情感をより正確に判定することが可能となる。
【図面の簡単な説明】
【００２１】
【図１】本発明の実施形態による視認者情感判定装置を含む視認者情感判定システムの構成例を示す概略図である。
【図２】本発明の実施形態による視認者情感判定装置の構成例を示すブロック図である。
【図３】基準データ測定部の構成例を示すブロック図である。
【図４】測定部の構成例を示すブロック図である。
【図５】実施例１の注目瞳孔径等算出手段の構成例を示すブロック図である。
【図６】実施例２の注目瞳孔径等算出手段の構成例を示すブロック図である。
【図７】実施例３の注目瞳孔径等算出手段の構成例を示すブロック図である。
【図８】基準明暗画面を説明する図である。
【図９】基準明暗反応テーブルの構成例を示す図である。
【図１０】基準呼吸反応テーブルの構成例を示す図である。
【図１１】基準脈拍反応テーブルの構成例を示す図である。
【図１２】視認者情感判定装置の全体処理を示すフローチャートである。
【図１３】基準明暗画面により測定された瞳孔径Ｂtの例を示す図である。
【図１４】図１３において、２呼吸時間以上で移動平均した瞳孔径（呼吸及び脈拍の影響が排除され、明暗の影響を受けた瞳孔径）の例を示す図である。
【図１５】基準明暗画面により測定された瞳孔径Ｂtの例を示す図である。
【図１６】図１５において、２脈拍時間以上２呼吸時間未満で移動平均した瞳孔径（脈拍の影響が排除され、呼吸及び明暗の影響を受けた瞳孔径）の例を示す図である。
【図１７】図１５において、呼吸のみの影響を受けた瞳孔径の変化を示す図である。
【図１８】本発明の実施形態による視認者情感判定装置を含む他の視認者情感判定システムの構成例を示す概略図である。
【図１９】ディスプレイの画面を分割した例を示す図である。
【図２０】２択アンケートの画面例を示す図である。
【図２１】２択アンケートの結果の画面例を示す図である。
【図２２】４択アンケートの画面例を示す図である。
【図２３】４択アンケートの結果の画面例を示す図である。
【図２４】視認対象を視認したときの注目度Ｐ1tによる判定例を示す図である。
【図２５】視認対象を視認したときの注目度Ｐ2tによる判定例を示す図である。
【図２６】視点位置輝度Ｔtを自動測定する第１の例を説明するブロック図である。
【図２７】視点位置輝度Ｔtを自動測定する第２の例を説明するブロック図である。
【図２８】図１８に示した視認者情感判定システムを変形した構成例を示す概略図である。
【図２９】視認映像ａ内の視点位置Ｓt等を説明する図である。
【図３０】明るさ計測装置の構成及び処理を説明する図である。
【発明を実施するための形態】
【００２２】
以下に、本発明を実施するための形態について図面を用いて詳細に説明する。本発明は、明暗、呼吸及び脈拍に反応する瞳孔径を基準データとして予め測定しておき、実際に対象物を視認したときの瞳孔径を、基準データを用いて補正することにより、注目度のみに相当する瞳孔径を測定することを特徴とする。これにより、明暗、呼吸及び脈拍の影響を排除した瞳孔径を測定することができ、視認者の情感をより正確に判定することが可能となる。
【００２３】
〔視認者情感判定システム／ディスプレイに表示されるコンテンツを視認する例〕
まず、本発明の実施形態による視認者情感判定装置を含む視認者情感判定システムについて説明する。この例は、視認者がディスプレイに表示されるコンテンツを視認する場合において、明暗、呼吸及び脈拍の影響を排除した瞳孔径を測定し、注目度を算出し、視認者の情感を判定するものである。
【００２４】
図１は、本発明の実施形態による視認者情感判定装置を含む視認者情感判定システムの構成例を示す概略図である。この視認者情感判定システムは、視認者情感判定装置１、視線及び瞳孔径計測器２、明るさ計測装置３、呼吸波形計４、脈拍波形計５、蓄積装置６、送信装置７及びディスプレイ８を備えて構成される。
第１の画面とディスプレイ（第２の画面）とは同じ表示装置であっても構わない。第１の画面とディスプレイとが同じ表示装置である場合、これらの表示装置の輝度が一致しているのでより精度が高くなる。一方、本発明は、ある場所で基準データを測定し、情感を視認者の職場や自宅で測定するといった用途にも用いられる。すると、例えば、職場において仕事効率が下がる情感を呈した際には、休憩信号を通知するといった用途に用いることができる。また、例えば、鬱病患者に対しては、投薬の必要な場合にのみ投薬を知らせるといったことを行うことができ、鬱病が重篤化することを防止できる。この場合、第１の画面とディスプレイ（第２の画面）とは別の表示装置となりうる。もっとも以下の説明では、簡単のため、第１の画面とディスプレイ（第２の画面）とは同じ表示装置のものを例に説明する。
次に、基準データを得る際には、第１の画面全体の明るさを把握し、それをもとに基準データとしてもよい。一方、第１の画面が部分的に光を発している場合はその部分の明るさを把握し、それをもとに基準データを作成してもよい。
第１の画面の明るさを変化させる場合に、変化のさせ方は段階的（次第に明るくする、又は次第に暗くする）ものであっても構わないし、ランダムに変化させても、ある決まりをもって変化させても構わない。例えば、明るさを、０〜５までの５段階に変化させる場合、０→４→１→５→３→２のように変化させてもよい。また、０→４→１→５→３→２→４のように同じ明るさが複数回起こるようにし、同じ明るさにおける瞳孔径の間の変動を求め、データの信ぴょう性の指標の一つとしてもよい。
なお、本発明の視認者情感判定装置は、あらかじめ基準データを記憶しておき、視認者の瞳孔径を測定した際に記憶した基準データを読み出して、実測した瞳孔径の補正に用い、補正された瞳孔径などに基づいて視認者の情感を判定してもよい。この場合、基準データを記憶する記憶部は、視認者情感判定装置に含まれていてもよいし、視認者情感判定装置の外部に存在してもよい。本発明の視認者情感判定装置は、ウェアラブルデバイスとして実現されてもよい。この場合、ウェアラブルデバイスは、ディスプレイを出力装置として有するコンピュータと情報の授受を行うことができるようにされていればよい。以下では、本発明の視認者情感判定装置が、基準データ測定部を有するものに基づいて説明する。
【００２５】
視認者情感判定装置１は、後述する視線及び瞳孔径計測器２から視認映像ａ及び眼球運動映像ｂを、所定の通信方式にて受信すると共に、送信装置７から明るさデータｃ、呼吸データｄ及び脈拍データｅを、所定の通信方式にて受信する。
【００２６】
視認者情感判定装置１は、ディスプレイ８に基準明暗画面が表示されている状態で、明暗、呼吸及び脈拍に反応する瞳孔径を基準データとして予め測定する。そして、視認者情感判定装置１は、ディスプレイ８に表示されるコンテンツを対象物として、視認者の瞳孔径を測定し、基準データを用いて瞳孔径を補正することで、注目瞳孔径、注目分瞳孔径及び注目度を算出する。そして、視認者情感判定装置１は、注目度に基づいて視認者の情感を判定したり、複数の視認者について統計処理を行い、コンテンツを客観的に評価したりする。視認者情感判定装置１の詳細については後述する。
【００２７】
視線及び瞳孔径計測器２は、視認者がディスプレイ８に表示されたコンテンツを視認しているときに、図示しないカメラにより撮影されたコンテンツの視認映像ａ、及び、視認者の視点位置及び瞳孔径を測定するための視認者の眼球の画像であって、図示しないカメラにより撮影された眼球運動映像ｂを取得する。そして、視線及び瞳孔径計測器２は、視認映像ａ及び眼球運動映像ｂを、所定の通信方式にて視認者情感判定装置１へ送信する。
【００２８】
明るさ計測装置３は、視認者が視認する対象物の明るさを示す明るさデータを計測する機能を備えている。本例では、明るさ計測装置３は、ディスプレイ８の画面全体の輝度及び画面内の所定位置の輝度を計測する。呼吸波形計４は、視認者の呼吸に関する波形（呼吸データ）を計測する機能を備えている。呼吸データには、呼吸について排気の開始及び呼気の開始のタイミングを示すデータが含まれる。脈拍波形計５は、視認者の脈拍に関する波形（脈拍データ）を計測する機能を備えている。脈拍データには、脈拍の開始のタイミングを示すデータが含まれる。
【００２９】
蓄積装置６は、明るさ計測装置３から明るさデータを、呼吸波形計４から呼吸データを、脈拍波形計５から脈拍データをそれぞれ入力して蓄積する。送信装置７は、蓄積装置６により蓄積された各種データを、同期した明るさデータｃ、呼吸データｄ及び脈拍データｅとして、所定の通信方式にて視認者情感判定装置１へ送信する。
【００３０】
ディスプレイ８には、基準データ測定時に、基準明暗画面が表示され、視認者の情感判定時に、所定のコンテンツが表示される。
【００３１】
〔視認者情感判定装置〕
次に、図１に示した視認者情感判定装置１について詳細に説明する。図２は、本発明の実施形態による視認者情感判定装置１の構成例を示すブロック図である。この視認者情感判定装置１は、受信部２０、解析部２１、基準データ測定部２２、測定部２３及び記憶部２４，２５を備えている。
【００３２】
視認者情感判定装置１は、視認者の瞳孔径に影響を与える明暗、呼吸及び脈拍に関する基準データを予め測定する。そして、視認者情感判定装置１は、視認者の情感を判定する際に、コンテンツを視認する視認者の注目瞳孔径を測定し、その注目瞳孔径から基準データを減算することにより、視認者の注目分のみに相当する瞳孔径（注目分瞳孔径）を算出する。
【００３３】
受信部２０は、図１に示した視線及び瞳孔径計測器２、及び送信装置７から、視認映像ａ、眼球運動映像ｂ、明るさデータｃ、呼吸データｄ及び脈拍データｅを、所定の通信方式にて受信し、これらのデータを解析部２１に出力する。
【００３４】
解析部２１は、受信部２０から視認映像ａ、眼球運動映像ｂ、明るさデータｃ、呼吸データｄ及び脈拍データｅを入力し、これらのデータが同期している場合はそのまま記憶部２４に格納し、同期していない場合は当該データに付属する時間データに基づいて同期させ、同期したこれらのデータを記憶部２４に格納する。解析部２１は、視認映像ａ、眼球運動映像ｂ、明るさデータｃ、呼吸データｄ及び脈拍データｅを、受信部２０から入力するか、または記憶部２４から読み出し、同期したこれらのデータに基づいて、以下の処理を行う。
【００３５】
解析部２１は、視認映像ａ及び眼球運動映像ｂに基づいて、コンテンツに対する（ディスプレイ８の画面に対する）視認者の視点位置Ｓtを測定し、眼球運動映像ｂに基づいて、視認者の瞳孔径Ｂtを測定する。視点位置Ｓt及び瞳孔径Ｂtの測定手法は既知であるから、ここでは説明を省略する。
【００３６】
解析部２１は、明るさデータｃが画面全体の明るさを示している場合、これをコンテンツ輝度Ｈtとして扱い、明るさデータｃが視点位置Ｓtの明るさを示している場合、これを視点位置輝度Ｔtとして扱う。具体的には、図１に示した明るさ計測装置３が、操作者により、ディスプレイ８の画面上の所定の視点位置Ｓtに対応する位置の明るさが計測されるように位置決めされている場合、解析部２１は、そのときの明るさデータｃを入力し、これを視点位置輝度Ｔtとして扱う。
【００３７】
コンテンツ視認時において、視認者の視点位置Ｓtを同時に測定することは可能であるが、視点位置輝度Ｔtを同時に測定することが困難な場合があり得る。この場合、視点位置輝度Ｔtは、視点位置Ｓtが測定された後、視認者によるコンテンツの視認とは別のときに、コンテンツを再度表示した状態で測定される。具体的には、視認者情感判定装置１は、コンテンツ視認時に、視点位置Ｓtの座標を測定して記憶部２４に記憶する。そして、視認者情感判定装置１は、コンテンツ視認時と同じコンテンツが再生されている状態において、記憶部２４から視点位置Ｓtの座標を読み出し、その座標に明るさ計測装置３を追尾させることで、解析部２１が視点位置輝度Ｔtを測定する。
【００３８】
解析部２１は、呼吸データｄに基づいて、呼吸周期Ｚ1tを求めると共に、排気の開始及び呼気の開始のタイミングを含む呼吸状態データＺ2tを生成する。また、解析部２１は、脈拍データｅに基づいて、脈拍周期Ｚ3tを求めると共に、脈拍の開始のタイミングを含む脈拍状態データＺ4tを生成する。
【００３９】
ここで、視点位置Ｓt、瞳孔径Ｂt、コンテンツ輝度Ｈt、視点位置輝度Ｔt、呼吸周期Ｚ1t、呼吸状態データＺ2t、脈拍周期Ｚ3t及び脈拍状態データＺ4tにおける「t」は、コンテンツのフレーム番号に対応した経過時間を示す。
【００４０】
解析部２１は、同期した視点位置Ｓt、瞳孔径Ｂt、コンテンツ輝度Ｈt、視点位置輝度Ｔt、呼吸周期Ｚ1t、呼吸状態データＺ2t、脈拍周期Ｚ3t及び脈拍状態データＺ4tを記憶部２４に格納し、必要に応じて、記憶部２４からこれらのデータを読み出す。
【００４１】
基準データ測定時において、解析部２１は、視点位置Ｓt、瞳孔径Ｂt、呼吸周期Ｚ1t、呼吸状態データＺ2t、脈拍周期Ｚ3t及び脈拍状態データＺ4tを基準データ測定部２２に出力する。一方、情感判定時において、解析部２１は、瞳孔径Ｂt、コンテンツ輝度Ｈt、視点位置輝度Ｔt、呼吸周期Ｚ1t、呼吸状態データＺ2t、脈拍周期Ｚ3t及び脈拍状態データＺ4tを測定部２３に出力する。基準データ測定時及び情感判定時は、視認者等により設定される。
【００４２】
基準データ測定部２２は、基準データ測定時に機能し、視認者の瞳孔に関する基準データを測定する。ディスプレイ８に所定の基準明暗画面（画面全体の明るさ及び視点（中央円）の明るさを所定の輝度とした画面）が表示されている状態で、受信部２０が視認映像ａ等を受信し、解析部２１が視点位置Ｓt、瞳孔径Ｂt、呼吸周期Ｚ1t、呼吸状態データＺ2t、脈拍周期Ｚ3t及び脈拍状態データＺ4tを測定等する。
【００４３】
基準データ測定部２２は、解析部２１から、明るさを段階的に変更した基準明暗画面について、これらのデータを入力する。そして、基準データ測定部２２は、基準瞳孔径Ｃsk、呼吸瞳孔径Ｄskt及び脈拍瞳孔径Ｅsktを算出し、これらのデータを記憶部２５に格納することで、基準明暗反応テーブル６０、基準呼吸反応テーブル６１及び基準脈拍反応テーブル６２を生成する。これにより、記憶部２５には、視認者の瞳孔に関する基準データを含む基準明暗反応テーブル６０、基準呼吸反応テーブル６１及び基準脈拍反応テーブル６２が格納される。
【００４４】
ここで、呼吸瞳孔径Ｄsktにおける「t」は、呼吸周期Ｚ1tにおける呼吸状態データＺ2tと同期した経過時間を示し、脈拍瞳孔径Ｅsktにおける「t」は、脈拍周期Ｚ3tにおける脈拍状態データＺ4tと同期した経過時間を示す。呼吸瞳孔径Ｄskt及び脈拍瞳孔径Ｅsktの詳細については後述する。
【００４５】
測定部２３は、情感判定時に機能し、視認者の明暗、呼吸及び脈拍の影響を排除した瞳孔径を測定する。ディスプレイ８に所定のコンテンツが表示されている状態で、受信部２０が視認映像ａ等を受信し、解析部２１が視点位置Ｓt、瞳孔径Ｂt、コンテンツ輝度Ｈt、呼吸周期Ｚ1t、呼吸状態データＺ2t、脈拍周期Ｚ3t及び脈拍状態データＺ4tを測定等し、記憶部２４に格納する。また、解析部２１は、視点位置Ｓtの輝度を示す視点位置輝度Ｔtを測定し、記憶部２４に格納する。そして、解析部２１は、記憶部２４からこれらのデータを読み出し、時間的に同期した瞳孔径Ｂt、コンテンツ輝度Ｈt、視点位置輝度Ｔt、呼吸周期Ｚ1t、呼吸状態データＺ2t、脈拍周期Ｚ3t及び脈拍状態データＺ4tを測定部２３に出力する。
【００４６】
測定部２３は、解析部２１からこれらのデータを入力し、コンテンツ輝度Ｈt及び視点位置輝度Ｔt、並びに記憶部２５に格納された基準明暗反応テーブル６０、基準呼吸反応テーブル６１及び基準脈拍反応テーブル６２に基づいて、コンテンツの経過時間に対応した（瞳孔径Ｂtに対応した）視点位置Ｓtの基準瞳孔径Ｃsk、呼吸瞳孔径Ｄskt及び脈拍瞳孔径Ｅsktを特定する。そして、測定部２３は、瞳孔径Ｂt、基準瞳孔径Ｃsk、呼吸瞳孔径Ｄskt及び脈拍瞳孔径Ｅsktに基づいて、呼吸及び脈拍の影響を排除した注目瞳孔径Ａ1tを算出し、また、明暗、呼吸及び脈拍の影響を排除した注目分瞳孔径Ａ2tを算出する。さらに、測定部２３は、注目瞳孔径Ａ1t、注目分瞳孔径Ａ2t及び基準瞳孔径Ｃskに基づいて、明暗、呼吸及び脈拍の影響を排除し、個人差をなくした注目度Ｐ1t，Ｐ2tを算出する。注目瞳孔径Ａ1t、注目分瞳孔径Ａ2t及び注目度Ｐ1t，Ｐ2tの詳細については後述する。
【００４７】
ここで、注目瞳孔径Ａ1t、注目分瞳孔径Ａ2t及び注目度Ｐ1t，Ｐ2tにおける「t」は、コンテンツのフレーム番号に対応した経過時間を示す。
【００４８】
〔全体フロー〕
次に、図２に示した視認者情感判定装置１の全体処理について説明する。図１２は、視認者情感判定装置１の全体処理を示すフローチャートである。図１２において、ステップＳ１２０１は、基準データ測定時の処理を示し、ステップＳ１２０２〜ステップＳ１２１２は、情感判定時の処理を示す。
【００４９】
まず、基準データ測定部２２は、基準データ測定時に、ディスプレイ８に、所定の画面全体の明るさ及び所定の視点（中央円）の明るさにて基準明暗画面が表示されている状態で、基準データを測定する（ステップＳ１２０１）。後述するように、基準明暗画面として、数段階に画面全体の明るさ及び視点の明るさを変化させた画面を用い、その明るさ毎（画面全体の明るさ及び視点の明るさの組合せ毎）の基準明暗画面に対する基準データがそれぞれ測定される。基準データは、基準瞳孔径Ｃsk、呼吸瞳孔径Ｄskt及び脈拍瞳孔径Ｅsktであり、これらのデータは、基準明暗反応テーブル６０、基準呼吸反応テーブル６１及び基準脈拍反応テーブル６２として記憶部２５に格納される。
【００５０】
測定部２３は、情感判定時に、予め設定された指示に従い、情感を判定するための時間間隔Ｔ１，Ｔ２，Ｔ３を設定し、時間間隔Ｔ１，Ｔ２，Ｔ３に応じた処理へ移行する（ステップＳ１２０２）。時間間隔Ｔ１は、２呼吸時間以上の所定の時間であり、時間間隔Ｔ２は、２脈拍時間以上かつ２呼吸時間未満の所定の時間であり、時間間隔Ｔ３は、２脈拍未満の所定の時間である。Ｔ１＞Ｔ２＞Ｔ３の関係にある。
【００５１】
測定部２３は、ステップＳ１２０２において、時間間隔がＴ１（２呼吸時間以上の時間間隔）である場合（ステップＳ１２０２：Ｔ１）、コンテンツの明るさを示すコンテンツ輝度Ｈt、及び視点位置Ｓtの明るさを示す視点位置輝度Ｔtに基づいて、基準明暗反応テーブル６０から基準瞳孔径Ｃskを特定する（ステップＳ１２０３）。そして、測定部２３は、以下の数式により、コンテンツに対する瞳孔径Ｂt（移動平均後の瞳孔径Ｂt）を注目瞳孔径Ａ1tに設定すると共に、瞳孔径Ｂtから基準瞳孔径Ｃskを減算することで、注目分瞳孔径Ａ2tを求める（ステップＳ１２０４）。
〔数式１〕
Ａ1t＝Ｂt
〔数式２〕
Ａ2t＝Ｂt−Ｃsk＝Ａ1t−Ｃsk
【００５２】
ここで、注目瞳孔径Ａ1tは、視認者のコンテンツに対する注目の程度を示す値（コンテンツ視認時の瞳孔径そのものの値）であり、画面全体の明るさ及び視点位置Ｓtの明るさに応じて異なる基準瞳孔径Ｃskの値が含まれている。前記数式１において、瞳孔径Ｂtは０以下にはならずＢt＞０であるから、注目瞳孔径Ａ1tも０以下にならずＡ1t＞０である。つまり、注目瞳孔径Ａ1tはマイナスにはならない。後述する数式３，５についても同様である。
【００５３】
一方、注目分瞳孔径Ａ2tは、視認者のコンテンツに対する注目分のみの程度を示す値であり、画面全体の明るさ及び視点位置Ｓtの明るさに応じて異なる基準瞳孔径Ｃskの値が削減されている。したがって、注目分瞳孔径Ａ2tは、明暗反応の影響を除去した値であるといえる。
【００５４】
前記数式２において、瞳孔径Ｂtが基準瞳孔径Ｃskより小さい場合、注目分瞳孔径Ａ2tは０未満となりＡ2t＜０であるから、マイナスとなる。瞳孔径Ｂtが基準瞳孔径Ｃskより小さい場合は、視認者が基準データ測定時（基準明暗反応測時）よりも退屈していることを示している。また、瞳孔径Ｂtが基準瞳孔径Ｃskより大きい場合は、視認者が基準データ測定時（基準明暗反応測時）よりも注目していることを示している。後述する数式４，６についても同様である。
【００５５】
また、測定部２３は、ステップＳ１２０２において、時間間隔がＴ２（２脈拍時間以上かつ２呼吸時間未満の時間間隔）である場合（ステップＳ１２０２：Ｔ２）、コンテンツ輝度Ｈt及び視点位置輝度Ｔtに基づいて、基準明暗反応テーブル６０から基準瞳孔径Ｃskを、基準呼吸反応テーブル６１から呼吸瞳孔径Ｄsktをそれぞれ特定する（ステップＳ１２０５、ステップＳ１２０６）。そして、測定部２３は、以下の数式により、移動平均後の瞳孔径Ｂtから呼吸瞳孔径Ｄsktを減算することで、注目瞳孔径Ａ1tを求め、さらに、基準瞳孔径Ｃskを減算することで、注目分瞳孔径Ａ2tを求める（ステップＳ１２０７）。
〔数式３〕
Ａ1t＝Ｂt−Ｄskt
〔数式４〕
Ａ2t＝Ｂt−Ｄskt−Ｃsk＝Ａ1t−Ｃsk
【００５６】
また、測定部２３は、ステップＳ１２０２において、時間間隔がＴ３（２脈拍未満の時間間隔）である場合（ステップＳ１２０２：Ｔ３）、コンテンツ輝度Ｈt及び視点位置輝度Ｔtに基づいて、基準明暗反応テーブル６０から基準瞳孔径Ｃskを、基準呼吸反応テーブル６１から呼吸瞳孔径Ｄsktを、基準脈拍反応テーブル６２から脈拍瞳孔径Ｅsktをそれぞれ特定する（ステップＳ１２０８〜ステップＳ１２１０）。そして、測定部２３は、以下の数式により、移動平均後の瞳孔径Ｂtから脈拍瞳孔径Ｅsktを減算し、その減算結果から呼吸瞳孔径Ｄsktを減算することで、注目瞳孔径Ａ1tを求め、さらに、基準瞳孔径Ｃskを減算することで、注目分瞳孔径Ａ2tを求める（ステップＳ１２１１）。〔数式５〕
Ａ1t＝Ｂt−Ｅskt−Ｄskt
〔数式６〕
Ａ2t＝Ｂt−Ｅskt−Ｄskt−Ｃsk＝Ａ1t−Ｃsk
【００５７】
これにより、ステップＳ１２０４、ステップＳ１２０７及びステップＳ１２１１において、時間間隔Ｔ１，Ｔ２，Ｔ３に応じて、呼吸及び脈拍の影響を排除した注目瞳孔径Ａ1tが算出され、明暗、呼吸及び脈拍の影響を排除した注目分瞳孔径Ａ2tが算出される。
【００５８】
測定部２３は、ステップＳ１２０４、ステップＳ１２０７またはステップＳ１２１１から移行して、以下の数式により、注目瞳孔径Ａ1tを基準瞳孔径Ｃskで除算することで、注目度Ｐ1tを求めると共に、注目分瞳孔径Ａ2tを基準瞳孔径Ｃskで除算することで、注目度
Ｐ2tを算出する（ステップＳ１２１２）。
〔数式７〕
Ｐ1t＝Ａ1t／Ｃsk
〔数式８〕
Ｐ2t＝Ａ2t／Ｃsk＝（Ａ1t−Ｃsk）／Ｃsk＝Ａ1t／Ｃsk−Ｃsk／Ｃsk＝Ｐ1t−１
【００５９】
前記数式８から、以下の数式のとおり、注目度Ｐ1t，Ｐ2tの関係が得られる。
〔数式９〕
Ｐ1t＝Ｐ2t＋１
【００６０】
ここで、前記数式７において、注目瞳孔径Ａ1tは明暗反応の影響を含んでおり、基準瞳孔径Ｃskも、それと同一条件の明暗反応の影響を含んでいる。したがって、注目瞳孔径Ａ1tを基準瞳孔径Ｃskで除算することで求められる注目度Ｐ1tは、明暗反応を除去した値となる。
【００６１】
注目度Ｐ1tは、基準瞳孔径Ｃskに対して注目時の瞳孔径がどの位の大きさかを表す比率である。一方、注目度Ｐ2tは、基準瞳孔径Ｃskに対して注目分のみに相当する瞳孔径の割合である。前述のとおり、注目瞳孔径Ａ1t＞０であるから、注目度Ｐ1t＞０となる。これに対し、注目分瞳孔径Ａ2t＜０となる場合があるから、注目度Ｐ2t＜０となる場合がある。
【００６２】
注目度Ｐ1tは、前記特許文献２において、視聴質等の計算でマイナスの数字を扱うことができない場合に用いることができる。前記数式７から分かるとおり、注目度Ｐ1tの基準値は“１”である。
【００６３】
一方、注目度Ｐ2tの基準値は“０”であり、プラスの場合は、基準データ測定時である平常時よりも注目しており、マイナス場合は、基準データ測定時である平常時よりも退屈していることを示している。したがって、注目度Ｐ2tは、平常時よりも注目しているか否かを判定する場合に利用することができる。
【００６４】
図２４は、視認対象を視認したときの注目度Ｐ1tによる判定例を示す図である。注目度Ｐ1tは、前述のとおり、基準瞳孔径Ｃskに対して注目時の瞳孔径がどの位の大きさかを表す比率であり、言い換えると、情感判定時の瞳孔径Ｂtが、同じ輝度条件における基準データ測定時の基準瞳孔径Ｃskに対して拡大した瞳孔径の倍率を表す。したがって、注目度Ｐ1t＝１は、瞳孔径Ｂtが基準瞳孔径Ｃskと同じであることを示している。
【００６５】
図２４（１）は０＜Ｐ1t＜１の場合を示しており、測定部２３は、視認者がコンテンツを退屈して見ている、と判定する。図２４（２）は、１≦Ｐ1t≦１．５の場合を示しており、測定部２３は、視認者がコンテンツを普通に見ている、と判定する。図２４（３）は、１．５＜Ｐ1t≦２の場合を示しており、測定部２３は、視認者がコンテンツをやや注目して見ている、と判定する。図２４（４）は、２＜Ｐ1tの場合を示しており、測定部２３は、視認者がコンテンツをかなり注目して見ている、と判定する。
【００６６】
図２５は、視認対象を視認したときの注目度Ｐ2tによる判定例を示す図である。注目度Ｐ2tは、前述のとおり、基準瞳孔径Ｃskに対して注目分のみに相当する瞳孔径の割合であり、言い換えると、情感判定時の瞳孔径Ｂtが、同じ輝度条件における基準データ測定時の基準瞳孔径Ｃskに対して拡大した注目分のみの瞳孔径の倍率を表す。したがって、注目度Ｐ2t＝０は、瞳孔径Ｂtが基準瞳孔径Ｃskと同じであることを示している。
【００６７】
図２５（１）は−１＜Ｐ2t＜０の場合を示しており、測定部２３は、視認者がコンテンツを退屈して見ている、と判定する。図２５（２）は、０≦Ｐ2t≦０．５の場合を示しており、測定部２３は、視認者がコンテンツを普通に見ている、と判定する。図２５（３）は、０．５＜Ｐ2t≦１の場合を示しており、測定部２３は、視認者がコンテンツをやや注目して見ている、と判定する。図２５（４）は、１＜Ｐ2tの場合を示しており、測定部２３は、視認者がコンテンツをかなり注目して見ている、と判定する。
【００６８】
このように、図１２のステップＳ１２１２において、時間間隔Ｔ１，Ｔ２，Ｔ３に応じて、明暗、呼吸及び脈拍の影響を排除した注目度Ｐ1t，Ｐ2tが算出される。この注目度Ｐ1t，Ｐ2tは、複数の視認者の間で比較可能な客観的な情報として扱うことができ、コンテンツに対する視認者の情感を精度高く判定することができる。
【００６９】
〔基準データ測定部２２〕
次に、図２に示した基準データ測定部２２について詳細に説明する。図３は、基準データ測定部２２の構成例を示すブロック図である。この基準データ測定部２２は、基準明暗反応測定手段３０、基準呼吸反応測定手段３１及び基準脈拍反応測定手段３２を備えている。
【００７０】
（基準明暗画面）
図８は、基準明暗画面を説明する図である。この基準明暗画面は、基準データ測定部２２が基準データを測定する際に用いられる。一般に、人がテレビ等のディスプレイ８を見ている場合、人間の目の瞳孔径は、ディスプレイ８における画面全体の明るさと、視認者が視認している箇所である視点の明るさとの間の相互作用により変化する。そこで、視認者固有の瞳孔径の明暗反応、呼吸反応及び脈拍反応を示す基準データを予め測定するために、ディスプレイ８に基準明暗画面を表示する。
【００７１】
図８に示すとおり、基準明暗画面は、ディスプレイ８の画面全体を所定の明るさ（輝度）で表示すると共に、ディスプレイ８の中央付近に中央円（直径１ｃｍ〜２ｃｍ）の内部を所定の明るさで表示した画面である。基準データ測定の際には、ディスプレイ８に基準明暗画面を表示し、視認者に中央円の内部を視認させ、そこに視点を置かせる。ディスプレイ８の画面全体の明るさは段階的に変化させ、各段階の画面全体の明るさ毎に、中央円の内部の明るさも段階的に変化させる。
【００７２】
画面全体の段階的な明るさの変化は、最も暗い明るさと最も明るい明るさとを、例えば５段階に、後述する図９〜図１１に示すとおり、０％，２５％，５０％，７５％，１００％で変化させる。また、中央円の内部の段階的な明るさの変化は、画面全体の各段階の明るさにおいて、最も暗い明るさと最も明るい明るさとを、例えば５段階に、後述する図９〜図１１に示すとおり、０％，２５％，５０％，７５％，１００％で変化させる。この場合、中央円の内部の段階的な明るさの変化は、視認者の呼吸周期を１呼吸時間とした場合、２呼吸時間以上である例えば１５秒以上の所定時間毎に変化させる。
【００７３】
尚、画面全体の明るさが次の段階に変化した直後は、視認者の瞳孔径の変化が落ち着くまで、例えば３秒間の慣れ時間を設け、中央円の内部の明るさの変化を、最初の０％の状態で固定とする。後述する図１３のとおり、段階的な明るさを、２回繰り返して変化させる。同じ条件で２回繰り返すのは、第１回目の測定では、視認者がその画面を注目することがあるので、その過度な注目が瞳孔径Ｂtに反映されてしまうからであり、第２回目の測定では、その過度な注目のない精度の高い瞳孔径Ｂtを得ることができるからである。したがって、第２回目の測定で得られた瞳孔径Ｂtを用いて、基準瞳孔径Ｃsk、呼吸瞳孔径Ｄskt及び脈拍瞳孔径Ｅsktが反映された基準明暗反応テーブル６０、基準呼吸反応テーブル６１及び基準脈拍反応テーブル６２が生成される。この場合、１回目の測定では、第２回目の測定よりも、明るさの段階を減らしたり、明るさを段階的に変化させる時間を短縮したりするようにしてもよい。
【００７４】
（基準明暗反応測定手段３０）
図３を参照して、基準明暗反応測定手段３０は、視認者固有の瞳孔径の明暗反応値である基準瞳孔径Ｃskを算出し、基準明暗反応テーブル６０を生成する。具体的には、基準明暗反応測定手段３０は、予め設定された段階的に変化する明るさのうち、今回の測定に用いる（現在時点における）基準明暗画面の画面全体の明るさ及び視点の明るさのデータ（０％，２５％，５０％，７５％，１００％）を入力する。尚、基準明暗反応測定手段３０は、解析部２１から、今回の測定に用いる画面全体の明るさとしてコンテンツ輝度Ｈtを入力し、今回の測定に用いる視点の明るさとして視点位置輝度Ｔtを入力し、これらを段階的なデータ（０％，２５％，５０％，７５％，１００％）に変換するようにしてもよい。
【００７５】
基準明暗反応測定手段３０は、今回の測定に用いる基準明暗画面が表示されている状態で取得された瞳孔径Ｂt、視点位置Ｓt及び呼吸周期Ｚ1tを入力し、視点位置Ｓtが基準明暗画面の中央円の内部に存在することを判断する。そして、基準明暗反応測定手段３０は、呼吸周期Ｚ1tを１呼吸時間として、２呼吸時間以上の時間間隔Ｔ１（例えば１５秒）を設定する。
【００７６】
図１３は、基準明暗画面により測定された瞳孔径Ｂtの例を示す図である。横軸は、基準明暗画面のフレーム番号であり、経過時間を示し、縦軸は、瞳孔径Ｂtを示す。１回目の測定と２回目の測定との間に、前述の慣れ時間が設けられている。図１３に示すとおり、瞳孔径Ｂtは細かく波打っており、この瞳孔径Ｂtには、呼吸及び脈拍の影響を受けた変化が含まれている。
【００７７】
基準明暗反応測定手段３０は、瞳孔径Ｂtを２呼吸時間以上の時間間隔Ｔ１にて移動平均し、その移動平均値の瞳孔径を求める。これにより、瞳孔径Ｂtに対し、脈拍及び呼吸の影響を周期的に受けている瞳孔径の変化を平準化することができ、脈拍及び呼吸の影響を排除することが可能である。移動平均後の瞳孔径は、明暗のみの影響を受けた瞳孔径である。
２呼吸時間以上の時間間隔Ｔ１は，視認者の呼吸周期を１呼吸時間（Ｚｌｔ［秒］）とした場合，ｎＺｌｔ［秒］（ｎは２以上の整数）であることが好ましい。Ｔ１は厳密にＺｌｔの整数倍でなくてもよく，例えば，Ｔ１は，（ｎＺｌｔ−０．１Ｚｌｔ）以上（ｎＺｌｔ+０．１Ｚｌｔ）以下（又は，（ｎＺｌｔ−０．０５Ｚｌｔ）以上（ｎＺｌｔ+０．０５Ｚｌｔ）以下）であってもよい。ｎは，２以上の整数であり，２以上１０以下でもよく，２以上５以下でも，３以上５以下でも，２以上４以下でもよい。
【００７８】
図１４は、図１３において、２呼吸時間以上の時間間隔Ｔ１で移動平均した瞳孔径（呼吸及び脈拍の影響が排除され、明暗の影響を受けた瞳孔径）の例を示す図である。図１４に示すように、移動平均後の瞳孔径は、図１３と異なり滑らかであり、脈拍及び呼吸の影響が排除されていることが分かる。
【００７９】
基準明暗反応測定手段３０は、今回の測定に用いる画面全体の明るさ及び視点の明るさの基準明暗画面が表示されている時間にて、移動平均後の瞳孔径を平均し、平均値を基準瞳孔径Ｃskとして求める。そして、基準明暗反応測定手段３０は、基準瞳孔径Ｃskを記憶部２５に格納し、基準明暗反応テーブル６０を生成する。
【００８０】
ここで、基準瞳孔径Ｃskにおいて、「ｓ」は段階的に変化する視点の明るさの番号を示し、「ｋ」は段階的に変化する画面全体の明るさの番号を示す。基準明暗反応測定手段３０により、段階的に変化する画面全体の明るさ及び視点の明るさの組合せ毎に、基準明暗反応の基準瞳孔径Ｃskが求められる。
【００８１】
図９は、基準明暗反応テーブル６０の構成例を示す図である。基準明暗反応テーブル６０には、段階的に変化する画面全体の明るさ及び視点の明るさの組合せ毎に、基準瞳孔径Ｃskが格納されている。段階的に変化する視点の明るさは、０％（ｓ＝１），２５％（ｓ＝２）、５０％（ｓ＝３），７５％（ｓ=４），１００％（ｓ＝５）であり、段階的に変化する画面全体の明るさは、０％（ｋ＝１），２５％（ｋ＝２）、５０％（ｋ＝３），７５％（ｋ=４），１００％（ｋ＝５）である。
【００８２】
これにより、画面全体の明るさ（ｋ）及び視点の明るさ（ｓ）毎に、視認者固有の瞳孔径の明暗反応値である基準瞳孔径Ｃskが算出され、基準明暗反応テーブル６０が生成される。尚、図９では、画面全体の明るさ及び視点の明るさの組合せにおいて、それぞれの段階を５としたが、本発明は、５段階に限定されるものではなく、任意の段階に適用することができる。後述する図１０及び図１１についても同様である。
【００８３】
（基準呼吸反応測定手段３１）
図３に戻って、基準呼吸反応測定手段３１は、視認者固有の瞳孔径の呼吸反応値である呼吸瞳孔径Ｄsktを算出し、基準呼吸反応テーブル６１を生成する。具体的には、基準呼吸反応測定手段３１は、基準明暗反応測定手段３０と同様に、予め設定された段階的に変化する明るさのうち、今回の測定に用いる基準明暗画面の画面全体の明るさ、及び視点の明るさのデータ（０％，２５％，５０％，７５％，１００％）を入力する。尚、基準呼吸反応測定手段３１は、基準明暗反応測定手段３０と同様に、解析部２１からコンテンツ輝度Ｈt及び視点位置輝度Ｔtを入力し、これらを段階的なデータ（０％，２５％，５０％，７５％，１００％）に変換するようにしてもよい。
【００８４】
基準呼吸反応測定手段３１は、今回の測定に用いる基準明暗画面が表示されている状態で取得された瞳孔径Ｂt、視点位置Ｓt、呼吸周期Ｚ1t、呼吸状態データＺ2t及び脈拍周期Ｚ3tを入力し、視点位置Ｓtが基準明暗画面の中央円の内部に存在することを判断する。そして、基準呼吸反応測定手段３１は、呼吸周期Ｚ1tを１呼吸時間とし、脈拍周期Ｚ3tを１脈拍時間として、２脈拍時間以上かつ２呼吸時間未満の時間間隔Ｔ２を設定する。
２脈拍時間以上かつ２呼吸時間未満の所定の時間間隔Ｔ２は，呼吸周期を１呼吸時間（Ｚｌｔ［秒］）とし，脈拍周期を１脈拍時間（Ｚ３ｔ）とすると，Ｔ２は，（ｍＺ1ｔ−αＺ３ｔ）以上（ｍＺｌｔ+αＺ３ｔ）以下であり，かつ（１−β）Ｚｌｔ以上（１＋β）Ｚｌｔ以下，又は，（２−β）Ｚｌｔ以上２Ｚｌｔ未満としたときに，α及びβの合計が最小となるように設定することが好ましい。このようにすることで，脈拍及び呼吸の変動を抑えることができる。（ｍは２以上の整数、０＜β＜１が好ましい）
【００８５】
図１５は、基準明暗画面により測定された瞳孔径Ｂtの例を示す図であり、図１３と同様の例である。横軸は、基準明暗画面のフレーム番号であり、経過時間を示し、縦軸は、瞳孔径Ｂtを示す。図１５に示すとおり、瞳孔径Ｂtの波形は周期的であり、細かく振動している。この瞳孔径Ｂtには、呼吸及び脈拍の影響を受けた変化が含まれている。つまり、周期的な大きな変動部分には呼吸の影響が反映されており、細かい振動部分には脈拍の影響が反映されている。瞳孔径Ｂtにおける波形の最小値付近の時間位置は、吸気開始点を示し、最大値付近の時間位置は、排気開始点を示している。
【００８６】
基準呼吸反応測定手段３１は、瞳孔径Ｂtを２脈拍時間以上かつ２呼吸時間未満の時間間隔Ｔ２にて移動平均し、その移動平均値の瞳孔径を求める。これにより、瞳孔径Ｂtに対し、脈拍の影響を周期的に受けている瞳孔径の変化を平準化することができ、脈拍の影響を排除することが可能である。移動平均後の瞳孔径は、明暗及び呼吸の影響を受けた瞳孔径である。
【００８７】
図１６は、図１５において、２脈拍時間以上かつ２呼吸時間未満の時間間隔Ｔ２で移動平均した瞳孔径（脈拍の影響が排除され、明暗及び呼吸の影響を受けた瞳孔径）の例を示す図である。図１６に示すように、移動平均後の瞳孔径は、図１５と異なり滑らかであり、脈拍の影響が排除され、呼吸の影響が残されていることが分かる。
【００８８】
基準呼吸反応測定手段３１は、今回の測定に用いる画面全体の明るさ及び視点の明るさの基準明暗画面が表示された時間にて、移動平均後の瞳孔径を平均し、平均値を求める。図１６の例では、平均値は約４ｍｍとなる。そして、基準呼吸反応測定手段３１は、移動平均後の瞳孔径（２脈拍時間以上かつ２呼吸時間未満の時間間隔Ｔ２で移動平均した瞳孔径）から平均値を減算し、減算結果である呼吸のみの影響を受けた瞳孔径を求める。
【００８９】
図１７は、図１５において、呼吸のみの影響を受けた瞳孔径の変化を示す図である。この瞳孔径は、呼吸の吸気及び排気により変化する値を示しており、中央値を０とした場合に、吸気の時点で−０．５ｍｍに縮小し、吸気の時点で＋０．５ｍｍに拡大することを示している。
【００９０】
基準呼吸反応測定手段３１は、呼吸のみの影響を受けた瞳孔径の時間と、呼吸状態データＺ2tとを同期させ、呼吸のみの影響を受けた瞳孔径の時間における吸気開始点及び排気開始点を特定する。そして、基準呼吸反応測定手段３１は、呼吸のみの影響を受けた瞳孔径のうち、吸気開始点及び排気開始点を含む呼吸周期Ｚ1tの１周期の時間における瞳孔径を抽出し、これを平均して呼吸瞳孔径Ｄsktを求める。基準呼吸反応測定手段３１は、呼吸瞳孔径Ｄsktを記憶部２５に格納し、基準呼吸反応テーブル６１を生成する。
【００９１】
ここで、呼吸瞳孔径Ｄsktにおいて、「ｓ」「ｋ」は、前述のとおり、段階的に変化する視点の明るさの番号及び画面全体の明るさの番号を示し、「t」は、呼吸周期Ｚ1tの１周期の時間における経過時間を示す。基準呼吸反応測定手段３１により、段階的に変化する画面全体の明るさ及び視点の明るさの組合せ毎に、基準呼吸反応の呼吸瞳孔径Ｄsktが求められる。
【００９２】
図１０は、基準呼吸反応テーブル６１の構成例を示す図である。基準呼吸反応テーブル６１には、段階的に変化する画面全体の明るさ及び視点の明るさの組合せ毎に、呼吸瞳孔径Ｄsktが格納されている。段階的に変化する画面全体の明るさ及び視点の明るさは、図９と同様である。図１０のとおり、呼吸瞳孔径Ｄsktは、吸気開始点をｔ＝０、排気開始点をｔ＝Ｚ1t／２として、呼吸周期Ｚ1tの１周期の時間における瞳孔径の変化を示す。吸気開始点ｔ＝０のときに呼吸瞳孔径Ｄskt（ｔ＝０）は最小となる。尚、図１０に示す呼吸瞳孔径Ｄsktの時間変化は、実際の特性ではなくイメージを示している。
【００９３】
これにより、画面全体の明るさ（ｋ）及び視点の明るさ（ｓ）毎に、視認者固有の瞳孔径の呼吸反応値である呼吸瞳孔径Ｄsktが算出され、基準呼吸反応テーブル６１が生成される。
【００９４】
（基準脈拍反応測定手段３２）
図３に戻って、基準脈拍反応測定手段３２は、視認者固有の瞳孔径の脈拍反応値である脈拍瞳孔径Ｅsktを算出し、基準脈拍反応テーブル６２を生成する。具体的には、基準脈拍反応測定手段３２は、基準明暗反応測定手段３０及び基準呼吸反応測定手段３１と同様に、予め設定された段階的に変化する明るさのうち、今回の測定に用いる基準明暗画面の画面全体の明るさ及び視点の明るさのデータ（０％，２５％，５０％，７５％，１００％）を入力する。尚、基準脈拍反応測定手段３２は、基準明暗反応測定手段３０及び基準呼吸反応測定手段３１と同様に、解析部２１からコンテンツ輝度Ｈt及び視点位置輝度Ｔtを入力し、これらを段階的なデータ（０％，２５％，５０％，７５％，１００％）に変換するようにしてもよい。
【００９５】
基準脈拍反応測定手段３２は、今回の測定に用いる基準明暗画面が表示されている状態で取得された瞳孔径Ｂt、視点位置Ｓt、呼吸周期Ｚ1t、呼吸状態データＺ2t、脈拍周期Ｚ3t及び脈拍状態データＺ4tを入力し、視点位置Ｓtが基準明暗画面の中央円の内部に存在することを判断する。そして、基準脈拍反応測定手段３２は、呼吸周期Ｚ1tを１呼吸時間とし、脈拍周期Ｚ3tを１脈拍時間として、２脈拍未満の時間間隔Ｔ３を設定し、２脈拍時間以上かつ２呼吸時間未満の時間間隔Ｔ２を設定する。
【００９６】
基準脈拍反応測定手段３２は、瞳孔径Ｂt（図１５を参照）を２脈拍時間以上かつ２呼吸時間未満の時間間隔Ｔ２にて移動平均し、その移動平均値の瞳孔径（図１６を参照）を求める。これにより、瞳孔径Ｂtに対し、脈拍の影響を周期的に受けている瞳孔径の変化を平準化することができ、脈拍の影響を排除することが可能である。移動平均後の瞳孔径は、明暗及び呼吸の影響を受けた瞳孔径である。
【００９７】
基準脈拍反応測定手段３２は、今回の測定に用いる画面全体の明るさ及び視点の明るさの基準明暗画面が表示された時間において、瞳孔径Ｂt（図１５を参照）から移動平均後の瞳孔径（２脈拍時間以上かつ２呼吸時間未満の時間間隔Ｔ２にて移動平均した瞳孔径）（図１６を参照）を減算し、減算結果である脈拍のみの影響を受けた瞳孔径を求める。
【００９８】
基準脈拍反応測定手段３２は、脈拍のみの影響を受けた瞳孔径の時間と、脈拍状態データＺ4tとを同期させ、脈拍のみの影響を受けた瞳孔径の時間における脈拍開始点を特定する。そして、基準脈拍反応測定手段３２は、脈拍のみの影響を受けた瞳孔径のうち、脈拍開始点を含む脈拍周期Ｚ3tの１周期の時間における瞳孔径を抽出し、これを平均して脈拍瞳孔径Ｅsktを求める。基準脈拍反応測定手段３２は、脈拍瞳孔径Ｅsktを記憶部２５に格納し、基準脈拍反応テーブル６２を生成する。
【００９９】
ここで、脈拍瞳孔径Ｅsktにおいて、「ｓ」「ｋ」は、前述のとおり、段階的に変化する視点の明るさの番号及び画面全体の明るさの番号を示し、「t」は、脈拍周期Ｚ3tの１周期の時間における経過時間を示す。基準脈拍反応測定手段３２により、段階的に変化する画面全体の明るさ及び視点の明るさの組合せ毎に、基準脈拍反応の脈拍瞳孔径Ｅsktが求められる。
【０１００】
図１１は、基準脈拍反応テーブル６２の構成例を示す図である。基準脈拍反応テーブル６２には、段階的に変化する画面全体の明るさ及び視点の明るさの組合せ毎に、脈拍瞳孔径Ｅsktが格納されている。段階的に変化する画面全体の明るさ及び視点の明るさは、図９及び図１０と同様である。図１１のとおり、脈拍瞳孔径Ｅsktは、脈拍開始点をｔ＝０、次の脈拍開始点をｔ＝Ｚ3tとして、脈拍周期Ｚ3tの１周期の時間における瞳孔径の変化を示す。脈拍開始点ｔ＝０のときに脈拍瞳孔径Ｅskt（ｔ＝０）は最小となる。尚、図１１に示す脈拍瞳孔径Ｅsktの時間変化は、実際の特性ではなくイメージを示している。
【０１０１】
これにより、画面全体の明るさ（ｋ）及び視点の明るさ（ｓ）毎に、視認者固有の瞳孔径の脈拍反応値である脈拍瞳孔径Ｅsktが算出され、基準脈拍反応テーブル６２が生成される。
【０１０２】
〔測定部２３〕
次に、図２に示した測定部２３について詳細に説明する。図４は、測定部２３の構成例を示すブロック図である。この測定部２３は、基準瞳孔径等特定手段３３、注目瞳孔径等算出手段３４及び注目度算出手段３５を備えている。
【０１０３】
基準瞳孔径等特定手段３３は、情感判定時に、ディスプレイ８に表示されたコンテンツに対し、解析部２１により測定されたコンテンツ輝度Ｈt及び視点位置輝度Ｔtを解析部２１から入力する。コンテンツ輝度Ｈtは、画面全体の輝度であり、視点位置輝度Ｔtは、視点位置Ｓtの輝度である。視点位置輝度Ｔtは、視点位置Ｓtが測定された後、視認者によるコンテンツの視認とは別のときにコンテンツを再度表示した状態で測定される。具体的には、前述のとおり、視認者情感判定装置１は、コンテンツ視認時に、視点位置Ｓtの座標を測定して記憶部２４に記憶しておく。そして、視認者情感判定装置１は、コンテンツ視認時と同じコンテンツが再生させている状態において、記憶部２４から視点位置Ｓtの座標を読み出し、その座標に明るさ計測装置３を追尾させることで、解析部２１が視点位置輝度Ｔtを測定する。
【０１０４】
尚、視点位置輝度Ｔtが、視認者によるコンテンツの視認と同時に測定できる場合、すなわち、コンテンツが表示されたときに瞳孔径Ｂt等と同時に測定できる場合、当該視点位置輝度Ｔtはリアルタイムに測定される。また、画面全体の輝度と視点位置の輝度との間の差がさほどなく、情感の判定を厳密に行うことができない場合、視認者の瞳孔径Ｂtは、画面全体の輝度の影響を大きく受けることから、視点位置の輝度の計測は不要となる。この場合、視点位置輝度Ｔtは、コンテンツ輝度Ｈtと同じ値が用いられる。これは、例えばコンテンツが一般的なテレビ映像または映画の場合に該当する。これに対し、画面全体の輝度と視点位置の輝度との間に差がある場合、例えば、暗闇の中から自動車のヘッドライトが近づいてくるように、極端に画面全体と視点位置の輝度が異なるコンテンツに対しては、視点位置輝度Ｔtを測定する必要がある。
【０１０５】
基準瞳孔径等特定手段３３は、解析部２１から入力したコンテンツ輝度Ｈt及び視点位置輝度Ｔtを、画面全体の明るさの段階を示す割合（％）及び視点の明るさの段階を示す割合（％）に変換する。そして、基準瞳孔径等特定手段３３は、変換した画面全体の明るさ及び視点の明るさの段階を示す割合をキーとして、記憶部２５に格納された基準明暗反応テーブル６０、基準呼吸反応テーブル６１及び基準脈拍反応テーブル６２を検索する。
【０１０６】
基準瞳孔径等特定手段３３は、変換した画面全体の明るさ及び視点の明るさの段階を示す割合に最も近い番号ｋ，ｓを選択し、当該番号ｋ，ｓに対応する基準瞳孔径Ｃsk、呼吸瞳孔径Ｄskt及び脈拍瞳孔径Ｅsktを特定する。
【０１０７】
これにより、コンテンツ輝度Ｈt及び視点位置輝度Ｔtに対応する基準瞳孔径Ｃsk、呼吸瞳孔径Ｄskt及び脈拍瞳孔径Ｅsktが特定される。すなわち、視認者が基準明暗画面を視認しているときの視点位置Ｓtについて、明暗のみの影響を受けた基準瞳孔径Ｃsk、呼吸のみの影響を受けた呼吸瞳孔径Ｄskt、及び脈拍のみの影響を受けた脈拍瞳孔径Ｅsktが特定される。
【０１０８】
尚、基準瞳孔径等特定手段３３は、画面全体の明るさ及び視点の明るさが基準明暗画面の番号ｋ，ｓの段階の中間に位置する場合、対応する隣り合う複数の番号ｋ，ｓを選択し、複数の番号ｋ，ｓに対応するそれぞれの基準瞳孔径Ｃsk、呼吸瞳孔径Ｄskt及び脈拍瞳孔径Ｅsktを数学的に補間計算することで、段階の中間のデータを特定するようにしてもよい。
【０１０９】
基準瞳孔径等特定手段３３は、特定した基準瞳孔径Ｃsk、呼吸瞳孔径Ｄskt及び脈拍瞳孔径Ｅsktを注目瞳孔径等算出手段３４に出力すると共に、特定した基準瞳孔径Ｃskを注目度算出手段３５に出力する。
【０１１０】
注目瞳孔径等算出手段３４は、基準瞳孔径等特定手段３３から、視認者がコンテンツを視認しているときの視点位置Ｓtに対応して特定された基準瞳孔径Ｃsk、呼吸瞳孔径Ｄskt及び脈拍瞳孔径Ｅsktを入力すると共に、解析部２１から瞳孔径Ｂt、呼吸周期Ｚ1t、呼吸状態データＺ2t、脈拍周期Ｚ3t及び脈拍状態データＺ4tを入力する。
【０１１１】
注目瞳孔径等算出手段３４は、予め設定された指示に従い、情感の判定を行うための時間間隔Ｔ１，Ｔ２，Ｔ３を設定し、その時間間隔Ｔ１，Ｔ２，Ｔ３に応じた処理により注目瞳孔径Ａ1t及び注目分瞳孔径Ａ2tを算出し、注目瞳孔径Ａ1t及び注目分瞳孔径Ａ2tを外部へ出力すると共に、注目度算出手段３５に出力する。注目瞳孔径等算出手段３４による時間間隔Ｔ１，Ｔ２，Ｔ３に応じた注目瞳孔径Ａ1t及び注目分瞳孔径Ａ2tの算出処理の詳細については後述する。
【０１１２】
注目度算出手段３５は、注目瞳孔径等算出手段３４から注目瞳孔径Ａ1t及び注目分瞳孔径Ａ2tを入力すると共に、基準瞳孔径等特定手段３３から基準瞳孔径Ｃskを入力する。そして、注目度算出手段３５は、前記数式７，８により、時間tにおける注目度Ｐ1t，Ｐ2tを求める。
【０１１３】
これにより、注目瞳孔径Ａ1t及び注目分瞳孔径Ａ2tは個人差があるのに対し、個人差のない客観的な注目度Ｐ1t，Ｐ2tを求めることができる。
【０１１４】
（実施例１）
次に、図４に示した実施例１の注目瞳孔径等算出手段３４について詳細に説明する。図５は、実施例１の注目瞳孔径等算出手段３４の構成例を示すブロック図である。実施例１は、情感を判定する時間間隔として、２呼吸時間以上の時間間隔Ｔ１が設定された場合の例であり、比較的緩やかに変化する情動を判定するものである。この注目瞳孔径等算出手段３４−１は、移動平均時間設定段４０、移動平均瞳孔径算出段４１及び注目瞳孔径等算出段４２を備えている。
【０１１５】
移動平均時間設定段４０は、解析部２１から呼吸周期Ｚ1tを入力し、呼吸周期Ｚ1tを１呼吸時間として、予め設定された指示に従い、２呼吸時間以上の時間間隔Ｔ１を設定し、当該時間間隔Ｔ１を移動平均時間として扱う。この場合、移動平均時間設定段４０は、基準データ測定部２２により設定された時間間隔Ｔ１と同じ時間を設定するのが望ましい。移動平均時間設定段４０は、移動平均時間（時間間隔Ｔ１）を移動平均瞳孔径算出段４１に出力する。
【０１１６】
移動平均瞳孔径算出段４１は、解析部２１から瞳孔径Ｂtを入力すると共に、移動平均時間設定段４０から移動平均時間（時間間隔Ｔ１）を入力し、瞳孔径Ｂtを移動平均時間（時間間隔Ｔ１）にて移動平均し、その移動平均値の瞳孔径を求める。ここで、説明の都合上、移動平均値の瞳孔径の記号として、解析部２１から入力した瞳孔径Ｂtと同じＢtを用いる。
【０１１７】
これにより、脈拍及び呼吸の影響を周期的に受けている瞳孔径の変化を平準化することができ、脈拍及び呼吸の影響を排除することが可能である。移動平均値の瞳孔径Ｂtは、明暗のみの影響を受けた瞳孔径である。そして、移動平均瞳孔径算出段４１は、移動平均値の瞳孔径Ｂtを注目瞳孔径等算出段４２に出力する。
【０１１８】
注目瞳孔径等算出段４２は、移動平均瞳孔径算出段４１から移動平均値の瞳孔径Ｂtを入力すると共に、基準瞳孔径等特定手段３３から基準瞳孔径Ｃskを入力する。そして、注目瞳孔径等算出段４２は、前記数式１のとおり、移動平均後の瞳孔径Ｂtを注目瞳孔径Ａ1tに設定し（Ａ1t＝Ｂt）、前記数式２のとおり、瞳孔径Ｂtから基準瞳孔径Ｃskを減算することで、注目分瞳孔径Ａ2tを求める（Ａ2t＝Ｂt−Ｃsk）。注目瞳孔径等算出段４２は、注目瞳孔径Ａ1t及び注目分瞳孔径Ａ2tを注目度算出手段３５に出力すると共に外部に出力する。
【０１１９】
このように、移動平均値の瞳孔径Ｂtから基準瞳孔径Ｃskを減算することにより、明暗の影響を排除することができる。
【０１２０】
移動平均後の瞳孔径Ｂtは、視認者がコンテンツを視認しているときの視点位置Ｓtについて、呼吸及び脈拍の影響が排除され、明暗のみの影響を受けた瞳孔径であり、基準瞳孔径Ｃskも、視認者が基準明暗画面を視認しているときの視点位置Ｓtについて、呼吸及び脈拍の影響が排除され、明暗のみの影響を受けた瞳孔径である。したがって、注目分瞳孔径Ａ2tは、明暗、呼吸及び脈拍の影響が排除された瞳孔径となる。
【０１２１】
（実施例２）
次に、図４に示した実施例２の注目瞳孔径等算出手段３４について詳細に説明する。図６は、実施例２の注目瞳孔径等算出手段３４の構成例を示すブロック図である。実施例２は、情感を判定する時間間隔として、２脈拍時間以上かつ２呼吸時間未満の時間間隔Ｔ２が設定された場合の例であり、やや緩やかに変化する情動を判定するものである。この注目瞳孔径等算出手段３４−２は、移動平均時間設定段４３、移動平均瞳孔径算出段４４、呼吸反応除去段４５及び注目瞳孔径等算出段４６を備えている。
【０１２２】
移動平均時間設定段４３は、解析部２１から呼吸周期Ｚ1t及び脈拍周期Ｚ3tを入力し、呼吸周期Ｚ1tを１呼吸時間とし、脈拍周期Ｚ3tを１脈拍時間として、予め設定された指示に従い、２脈拍時間以上かつ２呼吸時間未満の時間間隔Ｔ２を設定し、当該時間間隔Ｔ２を移動平均時間として扱う。この場合、移動平均時間設定段４３は、基準データ測定部２２により設定された時間間隔Ｔ２と同じ時間を設定するのが望ましい。移動平均時間設定段４３は、移動平均時間（時間間隔Ｔ２）を移動平均瞳孔径算出段４４に出力する。
【０１２３】
移動平均瞳孔径算出段４４は、解析部２１から瞳孔径Ｂtを入力すると共に、移動平均時間設定段４３から移動平均時間（時間間隔Ｔ２）を入力し、瞳孔径Ｂtを移動平均時間（時間間隔Ｔ２）にて移動平均し、その移動平均値の瞳孔径Ｂtを求める。そして、移動平均瞳孔径算出段４４は、移動平均値の瞳孔径Ｂtを呼吸反応除去段４５に出力する。
【０１２４】
これにより、脈拍の影響を周期的に受けている瞳孔径の変化を平準化することができ、脈拍の影響を排除することが可能である。移動平均値の瞳孔径Ｂtは、明暗及び呼吸の影響を受けた瞳孔径である。
【０１２５】
呼吸反応除去段４５は、移動平均瞳孔径算出段４４から移動平均値の瞳孔径Ｂtを入力すると共に、解析部２１から呼吸状態データＺ2tを、基準瞳孔径等特定手段３３から呼吸瞳孔径Ｄsktをそれぞれ入力する。
【０１２６】
呼吸反応除去段４５は、移動平均値の瞳孔径Ｂtの時間と、呼吸状態データＺ2tとを同期させ、移動平均値の瞳孔径Ｂtの時間における吸気開始点及び排気開始点を特定する。呼吸反応除去段４５は、移動平均値の瞳孔径Ｂtの時間における吸気開始点及び排気開始点と、呼吸瞳孔径Ｄsktの時間における吸気開始点及び排気開始点とを対応させて、移動平均値の瞳孔径Ｂtから呼吸瞳孔径Ｄsktを減算することで、新たな移動平均値の瞳孔径Ｂt’を求める。呼吸反応除去段４５は、新たな移動平均値の瞳孔径Ｂt’を注目瞳孔径等算出段４６に出力する。
【０１２７】
このように、移動平均値の瞳孔径Ｂtから呼吸瞳孔径Ｄsktを減算することにより、呼吸の影響を排除することができる。
【０１２８】
移動平均値の瞳孔径Ｂtは、視認者がコンテンツを視認しているときの視点位置Ｓtについて、脈拍の影響が排除され、明暗及び呼吸の影響を受けた瞳孔径であり、呼吸瞳孔径Ｄsktは、視認者が基準明暗画面を視認しているときの視点位置Ｓtについて、明暗及び脈拍の影響が排除され、呼吸のみの影響を受けた瞳孔径である。したがって、新たな移動平均値の瞳孔径Ｂt’は、呼吸及び脈拍の影響が排除された瞳孔径となる。
【０１２９】
注目瞳孔径等算出段４６は、呼吸反応除去段４５から移動平均値の瞳孔径Ｂt’を入力すると共に、基準瞳孔径等特定手段３３から基準瞳孔径Ｃskを入力する。そして、注目瞳孔径等算出段４６は、前記数式３のとおり、移動平均後の瞳孔径Ｂt’を注目瞳孔径Ａ1tに設定し（Ａ1t＝Ｂt’＝Ｂt−Ｄskt）、前記数式４のとおり、さらに、基準瞳孔径Ｃskを減算することで、注目分瞳孔径Ａ2tを求める（Ａ2t＝Ｂt’−Ｃsk＝Ｂt−Ｄskt−Ｃsk）。注目瞳孔径等算出段４６は、注目瞳孔径Ａ1t及び注目分瞳孔径Ａ2tを注目度算出手段３５に出力すると共に外部に出力する。
【０１３０】
このように、移動平均値の瞳孔径Ｂt’から基準瞳孔径Ｃskを減算することにより、明暗の影響を排除することができる。
【０１３１】
移動平均値の瞳孔径Ｂt’は、視認者がコンテンツを視認しているときの視点位置Ｓtについて、呼吸及び脈拍の影響が排除され、明暗のみの影響を受けた瞳孔径であり、基準瞳孔径Ｃskも、視認者が基準明暗画面を視認しているときの視点位置Ｓtについて、呼吸及び脈拍の影響が排除され、明暗のみの影響を受けた瞳孔径である。したがって、注目分瞳孔径Ａ2tは、明暗、呼吸及び脈拍の影響が排除された瞳孔径となる。
【０１３２】
（実施例３）
次に、図４に示した実施例３の注目瞳孔径等算出手段３４について詳細に説明する。図７は、実施例３の注目瞳孔径等算出手段３４の構成例を示すブロック図である。実施例３は、情感を判定する時間間隔として、２脈拍時間未満の時間間隔Ｔ３が設定された場合の例であり、比較的短時間に変化する情動を判定するものである。この注目瞳孔径等算出手段３４−３は、移動平均時間設定段４７、移動平均瞳孔径算出段４８、脈拍反応除去段４９、呼吸反応除去段５０及び注目瞳孔径等算出段５１を備えている。
【０１３３】
移動平均時間設定段４７は、解析部２１から呼吸周期Ｚ1t及び脈拍周期Ｚ3tを入力し、呼吸周期Ｚ1tを１呼吸時間とし、脈拍周期Ｚ3tを１脈拍時間として、予め設定された指示に従い、２脈拍時間未満の時間間隔Ｔ３を設定し、この時間間隔Ｔ３を移動平均時間として扱う。移動平均時間設定段４７は、移動平均時間（時間間隔Ｔ３）を移動平均瞳孔径算出段４８に出力する。
【０１３４】
移動平均瞳孔径算出段４８は、解析部２１から瞳孔径Ｂtを入力すると共に、移動平均時間設定段４７から移動平均時間（時間間隔Ｔ３）を入力し、瞳孔径Ｂtを移動平均時間（時間間隔Ｔ３）にて移動平均し、その移動平均値の瞳孔径Ｂtを求める。そして、移動平均瞳孔径算出段４８は、移動平均値の瞳孔径Ｂtを脈拍反応除去段４９に出力する。
【０１３５】
脈拍反応除去段４９は、移動平均瞳孔径算出段４８から移動平均値の瞳孔径Ｂtを入力すると共に、解析部２１から脈拍状態データＺ4tを、基準瞳孔径等特定手段３３から脈拍瞳孔径Ｅsktをそれぞれ入力する。
【０１３６】
脈拍反応除去段４９は、移動平均値の瞳孔径Ｂtの時間と、脈拍状態データＺ4tとを同期させ、移動平均値の瞳孔径Ｂtの時間における脈拍開始点を特定する。脈拍反応除去段４９は、移動平均値の瞳孔径Ｂtの時間における脈拍開始点と、脈拍瞳孔径Ｅsktの時間における脈拍開始点とを対応させて、移動平均値の瞳孔径Ｂtから脈拍瞳孔径Ｅsktを減算することで、新たな移動平均値の瞳孔径Ｂt’を求める。脈拍反応除去段４９は、新たな移動平均値の瞳孔径Ｂt’を呼吸反応除去段５０に出力する。
【０１３７】
このように、移動平均値の瞳孔径Ｂtから脈拍瞳孔径Ｅsktを減算することにより、脈拍の影響を排除することができる。
【０１３８】
移動平均値の瞳孔径Ｂtは、瞳孔径Ｂtと同様に、視認者がコンテンツを視認しているときの視点位置Ｓtについて、明暗、呼吸及び脈拍の影響を受けた瞳孔径であり、脈拍瞳孔径Ｅsktは、視認者が基準明暗画面を視認しているときの視点位置Ｓtについて、明暗及び呼吸の影響が排除され、脈拍のみの影響を受けた瞳孔径である。したがって、新たな移動平均値の瞳孔径Ｂt’は、脈拍の影響が排除され、明暗及び呼吸の影響を受けた瞳孔径となる。
【０１３９】
呼吸反応除去段５０は、脈拍反応除去段４９から移動平均値の瞳孔径Ｂt’を入力すると共に、解析部２１から呼吸状態データＺ2tを、基準瞳孔径等特定手段３３から呼吸瞳孔径Ｄsktをそれぞれ入力する。
【０１４０】
呼吸反応除去段５０は、図６に示した呼吸反応除去段４５と同様の処理を行い、移動平均値の瞳孔径Ｂt’から呼吸瞳孔径Ｄsktを減算することで、新たな移動平均値の瞳孔径Ｂt’’を求める。呼吸反応除去段５０は、新たな移動平均値の瞳孔径Ｂt’’を注目瞳孔径等算出段５１に出力する。
【０１４１】
このように、移動平均値の瞳孔径Ｂt’から呼吸瞳孔径Ｄsktを減算することにより、呼吸の影響を排除することができる。
【０１４２】
移動平均値の瞳孔径Ｂt’は、視認者がコンテンツを視認しているときの視点位置Ｓtについて、脈拍の影響が排除され、明暗及び呼吸の影響を受けた瞳孔径であり、呼吸瞳孔径Ｄsktは、視認者が基準明暗画面を視認しているときの視点位置Ｓtについて、明暗及び脈拍の影響が排除され、呼吸の影響を受けた瞳孔径である。したがって、新たな移動平均値の瞳孔径Ｂt’’は、呼吸及び脈拍の影響が排除され、明暗の影響を受けた瞳孔径となる。
【０１４３】
注目瞳孔径等算出段５１は、呼吸反応除去段５０から移動平均値の瞳孔径Ｂt’’を入力すると共に、基準瞳孔径等特定手段３３から基準瞳孔径Ｃskを入力する。そして、注目瞳孔径等算出段５１は、前記数式５のとおり、移動平均値の瞳孔径Ｂt’’を注目瞳孔径Ａ1tに設定し（Ａ1t＝Ｂt’’＝Ｂt−Ｅskt−Ｄskt）、前記数式６のとおり、さらに、基準瞳孔径Ｃskを減算することで、注目分瞳孔径Ａ2tを求める（Ａ2t＝Ｂt’’−Ｃsk＝Ｂt−Ｅskt−Ｄskt−Ｃsk）。注目瞳孔径等算出段５１は、注目瞳孔径Ａ1t及び注目分瞳孔径Ａ2tを注目度算出手段３５に出力すると共に外部に出力する。
【０１４４】
このように、移動平均後の瞳孔径Ｂt’’を注目瞳孔径Ａ1tに設定することにより、脈拍及び呼吸の影響を排除することができる。また、移動平均値の瞳孔径Ｂt’’から基準瞳孔径Ｃskを減算することにより、明暗の影響を排除することができる。
【０１４５】
移動平均値の瞳孔径Ｂt’’は、視認者がコンテンツを視認しているときの視点位置Ｓtについて、呼吸及び脈拍の影響が排除され、明暗のみの影響を受けた瞳孔径であり、注目瞳孔径Ａ1tとなる。基準瞳孔径Ｃskも、視認者が同一条件の基準明暗画面を視認しているときの視点位置Ｓtについて、呼吸及び脈拍の影響が排除され、明暗のみの影響を受けた瞳孔径である。したがって、注目分瞳孔径Ａ2tは、明暗、呼吸及び脈拍の影響が排除された瞳孔径となる。
【０１４６】
（実施例４／混在型）
次に、図４に示した実施例４の注目瞳孔径等算出手段３４について詳細に説明する。実施例４は、図５に示した実施例１の注目瞳孔径等算出手段３４−１、図６に示した実施例２の注目瞳孔径等算出手段３４−２、及び図７に示した実施例３の注目瞳孔径等算出手段３４−３を混在させた例であり、１つのコンテンツに対し、比較的緩やかに変化する情動を判定したり、やや緩やかに変化する情動を判定したり、比較的短時間に変化する情動を判定したりする。
【０１４７】
注目瞳孔径等算出手段３４は、注目瞳孔径等算出手段３４−１〜３４−３を備える。注目瞳孔径等算出手段３４は、比較的緩やかに変化する情動を判定する場合、注目瞳孔径等算出手段３４−１として機能し、２呼吸時間以上の時間間隔Ｔ１を設定し、呼吸及び脈拍を考慮することなく、注目瞳孔径Ａ1t及び注目分瞳孔径Ａ2tを算出する。また、注目瞳孔径等算出手段３４は、やや緩やかに変化する情動を判定する場合、注目瞳孔径等算出手段３４−２として機能し、２脈拍時間以上かつ２呼吸時間未満の時間間隔Ｔ２を設定し、脈拍を考慮することなく、呼吸を考慮して、注目瞳孔径Ａ1t及び注目分瞳孔径Ａ2tを算出する。また、注目瞳孔径等算出手段３４は、比較的短時間に変化する情動を判定する場合、注目瞳孔径等算出手段３４−３として機能し、呼吸及び脈拍を考慮して、注目瞳孔径Ａ1t及び注目分瞳孔径Ａ2tを算出する。
【０１４８】
以上のように、本発明の実施形態の視認者情感判定装置１によれば、基準データ測定時に、ディスプレイ８に基準明暗画面を表示させ、基準明暗画面の画面全体の明るさ及び視点の明るさを時間経過に伴って数段階に変化させる。基準データ測定部２２は、その明るさ毎に、明暗のみの影響を受けた基準瞳孔径Ｃsk、呼吸のみの影響を受けた呼吸瞳孔径Ｄskt、及び脈拍のみの影響を受けた脈拍瞳孔径Ｅsktを測定する。そして、基準データ測定部２２は、基準明暗反応テーブル６０、基準呼吸反応テーブル６１及び基準脈拍反応テーブル６２を生成する。
【０１４９】
測定部２３は、情感判定時に、ディスプレイ８に所定のコンテンツが表示されている状態で、コンテンツ輝度Ｈt及び視点位置輝度Ｔt、並びに基準明暗反応テーブル６０、基準呼吸反応テーブル６１及び基準脈拍反応テーブル６２に基づいて、コンテンツの経過時間に対応した（瞳孔径Ｂtに対応した）基準瞳孔径Ｃsk、呼吸瞳孔径Ｄskt及び脈拍瞳孔径Ｅsktを特定する。
【０１５０】
測定部２３は、時間間隔がＴ１（２呼吸時間以上の時間間隔）である場合、移動平均後の瞳孔径Ｂtを注目瞳孔径Ａ1tに設定し、さらに、基準瞳孔径Ｃskを減算することで、注目分瞳孔径Ａ2tを求める。また、測定部２３は、時間間隔がＴ２（２脈拍時間以上かつ２呼吸時間未満の時間間隔）である場合、瞳孔径Ｂtから脈拍瞳孔径Ｅsktを減算し、その減算結果から呼吸瞳孔径Ｄsktを減算することで、注目瞳孔径Ａ1tを求め、さらに、基準瞳孔径Ｃskを減算することで、注目分瞳孔径Ａ2tを求める。また、測定部２３は、時間間隔がＴ３（２脈拍未満の時間間隔）である場合、移動平均後の瞳孔径Ｂtから脈拍瞳孔径Ｅsktを減算し、その減算結果から呼吸瞳孔径Ｄsktを減算することで、注目瞳孔径Ａ1tを求め、さらに、基準瞳孔径Ｃskを減算することで、注目分瞳孔径Ａ2tを求める。これにより、時間間隔Ｔ１，Ｔ２，Ｔ３に応じて、明暗、呼吸及び脈拍の影響を排除した注目分瞳孔径Ａ2tが算出される。
【０１５１】
そして、測定部２３は、注目瞳孔径Ａ1t及び注目分瞳孔径Ａ2tを基準瞳孔径Ｃskで除算することで、それぞれ注目度Ｐ1t，Ｐ2tを求める。これにより、時間間隔Ｔ１，Ｔ２，Ｔ３に応じて、明暗、呼吸及び脈拍の影響を排除した注目度Ｐ1t，Ｐ2tが算出される。
【０１５２】
したがって、ディスプレイ８に表示されたコンテンツを視認する視認者について、明暗、呼吸及び脈拍の影響を排除した瞳孔径を測定することができ、視認者の情感をより正確に判定することが可能となる。
【０１５３】
〔視認者情感判定システム／オープン環境で対象物を視認する例〕
次に、本発明の実施形態による視認者情感判定装置を含む他の視認者情感判定システムについて説明する。この例は、視認者がオープン環境で対象物を視認する場合において、視認者の情感を判定するものであり、視認者は、周囲の明かりの変化がない環境で移動するものとする。
【０１５４】
図１８は、本発明の実施形態による視認者情感判定装置を含む他の視認者情感判定システムの構成例を示す概略図である。この視認者情感判定システムは、視認者情感判定装置１、明るさ計測装置３、呼吸波形計４、脈拍波形計５、蓄積装置６、送信装置７、眼球撮影装置９及び視認情景撮影装置１０を備えて構成される。図１８において、図１と共通する部分には図１と同一の符号を付し、その詳しい説明は省略する。
【０１５５】
眼球撮影装置９は、視認者の眼球を撮影し、視点位置及び瞳孔径を測定するための眼球運動映像ｂを取得する。視認情景撮影装置１０は、視認者が視認する対象物を含む情景を撮影し、視認映像ａを取得する。眼球撮影装置９により取得された眼球運動映像ｂ、及び視認情景撮影装置１０により取得された視認映像ａは、蓄積装置６に蓄積され、送信装置７により、視認者情感判定装置１へ送信される。
【０１５６】
視認者が曇り空の室外を歩く場合、または同じ明るさの室内を歩く場合は、瞳孔径を比較することにより、注目度を比較することができる。例えば、視認者が街を歩く場合、目立つ看板等の表示物の目立ち度合を比較したり、商品陳列の目立ち度合を比較したりするときの検証に利用できる。
【０１５７】
この場合、呼吸及び脈拍の影響を排除するためには、視認者が周囲の明かりの変化がない環境で移動することを前提として、２呼吸時間以上の時間間隔Ｔ１にて瞳孔径Ｂtを移動平均することが必要である。一方で、周囲の明かりの変化がある環境において、対象物の明るさも変化する場合、図２に示した視認者情感判定装置１の構成及び処理により、明るさの変化に対応する基準データを測定し、２呼吸時間未満の時間間隔Ｔ２，Ｔ３にて瞳孔径Ｂtを移動平均し、呼吸等の影響を排除する。この場合の基準明暗反応測定手段３０は、対象物を含む所定の基準映像全体の明るさと視点の明るさとを段階的にそれぞれ変化させた場合の、基準映像全体の明るさと視点の明るさとの組合せ毎に、視認者の瞳孔に関する基準データを測定する。
【０１５８】
以上のように、本発明の実施形態の視認者情感判定装置１によれば、オープン環境で対象物を視認する場合であっても、図１に示した視認者情感判定装置１と同様に、オープン環境にて対象物を視認する視認者について、明暗、呼吸及び脈拍の影響を排除した瞳孔径を測定することができ、視認者の情感をより正確に判定することが可能となる。
【０１５９】
〔複数の視認者〕
尚、複数の視認者について、コンテンツ等の対象物に対する注目度Ｐtの平均値を算出する場合を想定する。複数の視認者が同じコンテンツ等の対象物を同じ時間経過で視認した場合、視認者情感判定装置１の解析部２１は、複数の視認者の瞳孔径Ｂtを取得する。そして、測定部２３は、移動平均処理及び瞳孔径Ｂtの補正処理等を行うことなく、解析部２１から入力した、複数の視認者の瞳孔径Ｂtを注目瞳孔径Ａtとし、注目度Ｐ1tをそれぞれ算出する。そして、測定部２３は、複数の視認者の注目度Ｐ1tに対し、時間毎に注目度Ｐ1tを加算して平均値を算出する。
【０１６０】
これにより、視認者が多いほど、注目度Ｐ1tは互いに山谷が相殺されるから、周期的な視認者個人の呼吸及び脈拍による注目度Ｐ1tへの影響を排除することができ、複数の視認者の母集団について、時間毎の注目度Ｐ1tの平均値が得られる。したがって、視認者の数が多いほど、呼吸及び脈拍による注目度Ｐ1tへの影響は少なくなる。
【０１６１】
〔適用例〕
次に、本発明の実施形態による視認者情感判定装置１の適用例について説明する。以下、ディスプレイ８の画面を分割した場合、アンケートの回答画面の場合の適用例について説明する。
【０１６２】
（ディスプレイ８の画面を分割した場合）
まず、本発明の実施形態による視認者情感判定装置１を、ディスプレイ８の画面を分割した場合に適用した例について説明する。図１９は、ディスプレイ８の画面を分割した例を示す図である。図１９に示すように、ディスプレイ８をＫ×Ｌの領域に分割し、所定のコンテンツがディスプレイ８に表示された場合において、視認者情感判定装置１は、瞬時の視認者の視点の位置Ｄxy及び注目度Ｐxyを測定する。xyは、ディスプレイ８がＫ×Ｌの領域に分割された分割領域の位置を示す。
【０１６３】
視認者情感判定装置１の測定部２３は、例えばＴＶのＣＭ、ドラマ等のコンテンツについて、視認者の注目点を検証することで視認者の情感を判定する際に、複数の視認者（例えばＮ人）の注目度の合計Ｑを、以下の数式にて求める。
〔数式１０〕
2017057631.tif 000003
Ｑｍは、ｍ番目の視認者の注目度を示し、注目度Ｐ1tが用いられる。注目度Ｐ2tはマイナスの値があるため妥当でなく、注目度Ｐ1tはマイナスの値がないからである。
【０１６４】
測定部２３は、視点が分割領域Ｄxyにある視認者による注目度の分布（分割領域Ｄxyの注目度の分布）Ｗxyを、以下の数式にて求める。
〔数式１１〕
Ｗxy＝Ｈxy／Ｑ×１００（％）
Ｈxyは、分割領域Ｄxyを視認する視認者の注目度の合計を示す。
【０１６５】
これにより、例えばコンテンツがＴＶのＣＭの場合、銘柄の文字が存在する分割領域に、どの程度の注目度が集中しているかを検証でき、ＣＭのデザイン評価に応用できる。
【０１６６】
また、測定部２３は、全体の注目度Ｑの大きさを、視認者の人数Ｎで除算することで、１人当たりの画面全体の注目度Ｒを、以下の数式にて求める。
〔数式１２〕
Ｒ＝Ｑ／Ｎ
これにより、１人当たりの画面全体の注目度の大きさを検証でき、そのＣＭの注目度合が分かる。
【０１６７】
特定のシーンが続く間の特定の分割領域（分割画面）の注目度の平均を求める場合を想定する。測定部２３は、以下の数式にて、時間（またはコンテンツのフレーム番号）t1からt2までの間の注目度の合計Ｖxyを算出する。
〔数式１３〕
2017057631.tif 000004
【０１６８】
測定部２３は、以下の数式にて、視認者全員の単位時間当たりにおけるそのシーンの分割領域Ｄxyの注目度分布Ｓxyを算出する。
〔数式１４−１〕
Ｓxy＝Ｖxy／（ｔ2−ｔ1）（％）
【０１６９】
また、測定部２３は、以下の数式にて、画面全体におけるそのシーンの注目度の時間合計Ｓを算出する。
〔数式１４−２〕
2017057631.tif 000005
【０１７０】
測定部２３は、以下の数式にて、１人当たり及び単位時間当たりにおけるそのシーンでの画面全体の注目度Ｆを算出する。
〔数式１５〕
Ｆ＝Ｓ／（ｔ2−ｔ1）
【０１７１】
（アンケートの回答画面の場合）
次に、本発明の実施形態による視認者情感判定装置１を、アンケートの回答画面に適用した例について説明する。一般に、アンケートを回答する場合、回答画面に注目度が集中する。また、迷った場合は、他の解答欄へも注目度が分散する。したがって、注目度の分布により、どの程度の確信を持って回答したかが分かる。すなわち、アンケートの回答確信率（反対語として回答迷い度）を、注目度から求めることができる。アンケート画面の輝度はほぼ一定であるため、輝度は、最初の画面の測定により統一でき、基準明暗画面の視認者固有の瞳孔径も１つの値として扱うことができる。この場合、注目度Ｐ2tはマイナスの値があるため、マイナスの値のない注目度Ｐ1tが用いられる。
【０１７２】
（２択アンケートの例）
図２０は、２択アンケートの画面例を示す図である。ある時間ｔの注目度Ｐ1t、アンケート画面視認時間をＴとする。注目時間の合計（合計注目度）Ｇは、以下の数式にて算出される。
〔数式１６〕
2017057631.tif 000006
【０１７３】
視認者情感判定装置１の測定部２３は、視点位置Ｓtの座標（ｘ，ｙ）が質問欄（ａ＜ｘ＜ｃ，ｂ＜ｙ＜e）に入っているとき（視認者が質問欄の領域を見ているとき）の合計注目度をＱ１、視点位置Ｓtの座標（ｘ，ｙ）が回答欄Ａ（ａ＜ｘ＜ｄ，ｅ＜ｙ＜ｆ）に入っているとき（視認者が回答欄Ａの領域を見ているとき）だけの合計注目度をＡ１、視点位置Ｓtの座標（ｘ，ｙ）が回答欄Ｂ（ｄ＜ｘ＜ｃ，ｅ＜ｙ＜ｆ）に入っているとき（視認者が回答欄Ｂの領域を見ているとき）だけの合計注目度Ｂ１をそれぞれ算出する。そして、測定部２３は、以下の数式にて、この質問への合計注目度Ｇを算出する。
〔数式１７〕
Ｇ＝Ｑ１＋Ａ１＋Ｂ１
【０１７４】
測定部２３は、以下の数式にて、回答欄Ａ，Ｂのうち回答欄Ａへの注目度の分布比率を回答確信率（その補数は回答の迷い度）Ａ’として算出する。
〔数式１８〕
Ａ’＝（Ａ１／（Ａ１＋Ｂ１））×１００（％）
【０１７５】
また、測定部２３は、以下の数式にて、回答欄Ｂの領域の回答確信率Ｂ’を算出する。
〔数式１９〕
Ｂ’＝（Ｂ１／（Ａ１＋Ｂ１））×１００（％）
【０１７６】
図２１は、２択アンケートの結果の画面例を示す図である。視認者情感判定装置１の測定部２３は、図２１に示すように、Ａの領域の回答確信率及びＢの領域の回答確信率をグラフで表示する。図２１のグラフから、視認者がＡを６０％の確信を持って選択していることが分かる。また、視認者がＢを４０％の確信を持って見ていることが分かり、４０％の数値は、視認者がこの割合いで迷っていたことを意味する。
【０１７７】
また、測定部２３は、回答時間をＴとして、以下の数式にて、そのアンケート画面全体の単位時間当たりの注目度合計を算出する。
〔数式２０〕
Ｇ／Ｔ＝（Ｑ１＋Ａ１＋Ｂ１）／Ｔ
この値により、この質問に対する注目度（関心度）の高さを判断できる。
【０１７８】
さらに、測定部２３は、以下の数式にて、複数人Ｎ（Ｎは２以上の整数）におけるアンケート計測の１人当たりの平均（回答欄Ａの回答確信率平均Ａa、回答欄Ｂの回答確信率平均Ｂa）を算出する。
〔数式２１〕
2017057631.tif 000007
〔数式２２〕
2017057631.tif 000008
測定部２３は、以下の数式にて、１人当たり及び単位時間当たりにおけるこの質問の注目度（関心度）の平均Ｑaを算出する。
〔数式２３〕
2017057631.tif 000009
この値により、この質問に対する複数人Ｎの平均注目度（関心度）を判定できる。
【０１７９】
（４択アンケートの例）
図２２は、４択アンケートの画面例を示す図である。視認者情感判定装置１の測定部２３は、視点位置Ｓtの座標（ｘ，ｙ）が質問欄（ａ＜ｘ＜ｃ，ｂ＜ｙ＜e）に入っているとき（視認者が質問欄の領域を見ているとき）の合計注目度をＱ１、視点位置Ｓtの座標（ｘ，ｙ）が回答欄Ａ（ａ＜ｘ＜ｄ，ｅ＜ｙ＜ｆ）に入っているとき（視認者が回答欄Ａの領域を見ているとき）だけの合計注目度をＡ１、視点位置Ｓtの座標（ｘ，ｙ）が回答欄Ｂ（ｄ＜ｘ＜ｃ，ｅ＜ｙ＜ｆ）に入っているとき（視認者が回答欄Ｂの領域を見ているとき）だけの合計注目度Ｂ１、視点位置Ｓtの座標（ｘ，ｙ）が回答欄Ｃ（ａ＜ｘ＜ｄ，ｆ＜ｙ＜ｇ）に入っているとき（視認者が回答欄Ｃの領域を見ているとき）だけの合計注目度Ｃ１、視点位置Ｓtの座標（ｘ，ｙ）が回答欄Ｄ（ｄ＜ｘ＜ｃ，ｆ＜ｙ＜ｇ）に入っているとき（視認者が回答欄Ｄの領域を見ているとき）だけの合計注目度Ｄ１をそれぞれ算出する。そして、測定部２３は、以下の数式にて、この質問への合計注目度Ｇを算出する。
〔数式２４〕
Ｇ＝Ｑ１＋Ａ１＋Ｂ１＋Ｃ１＋Ｄ１
【０１８０】
また、測定部２３は、以下の数式にて、Ａ，Ｂ，Ｃ，Ｄの領域の回答確信率Ａ’，Ｂ’，Ｃ’，Ｄ’を算出する。
〔数式２５〕
Ａ’＝（Ａ１／（Ａ１＋Ｂ１＋Ｃ１＋Ｄ１））×１００（％）
Ｂ’＝（Ｂ１／（Ａ１＋Ｂ１＋Ｃ１＋Ｄ１））×１００（％）
Ｃ’＝（Ｃ１／（Ａ１＋Ｂ１＋Ｃ１＋Ｄ１））×１００（％）
Ｄ’＝（Ｄ１／（Ａ１＋Ｂ１＋Ｃ１＋Ｄ１））×１００（％）
【０１８１】
図２３は、４択アンケートの結果の画面例を示す図である。視認者情感判定装置１の測定部２３は、図２３に示すように、Ａ〜Ｄの領域の回答確信率をグラフで表示する。図２３のグラフから、視認者がＤを６５％の確信を持って選択していることが分かる。また、視認者がＡ，Ｂ，Ｃをそれぞれ１５，１０，１０％の確信を持って見ていることがわかり、合計３５％の数値は、視認者がこの割合で迷っていたことを意味する。
【０１８２】
また、測定部２３は、回答時間をＴとして、以下の数式にて、そのアンケート画面全体の単位時間当たりの注目度合計を算出する。
〔数式２６〕
Ｇ／Ｔ＝（Ｑ１＋Ａ１＋Ｂ１＋Ｃ１＋Ｄ１）／Ｔ
この値により、この質問に対する注目度（関心度）の高さを判断できる。
【０１８３】
さらに、測定部２３は、以下の数式にて、複数人Ｎ（Ｎは２以上の整数）におけるアンケート計測の１人当たりの平均（回答欄Ａの回答確信率平均Ａa、回答欄Ｂの回答確信率平均Ｂa、回答欄Ｃの回答確信率平均Ｃa、回答欄Ｄの回答確信率平均Ｄa）を算出する。
〔数式２７〕
2017057631.tif 000010
〔数式２８〕
2017057631.tif 000011
〔数式２９〕
2017057631.tif 000012
〔数式３０〕
2017057631.tif 000013
【０１８４】
測定部２３は、前記数式２３にて、１人当たり及び単位時間当たりにおけるこの質問の注目度（関心度）の平均Ｑaを算出する。この平均Ｑaの値により、この質問に対する複数人Ｎの平均注目度（関心度）を判定できる。
【０１８５】
以上、実施形態を挙げて本発明を説明したが、本発明は前記実施形態に限定されるものではなく、その技術思想を逸脱しない範囲で種々変形可能である。例えば、図２に示した視認者情感判定装置１は、インターネット等のネットワークに接続されるようにしてもよい。視認者情感判定装置１は、外部の装置からネットワークを介して指示を受信し、当該指示に基づいて、所定のコンテンツに対する注目瞳孔径Ａ1t、注目分瞳孔径Ａ2t及び注目度Ｐ1t，Ｐ2t等の算出処理、ディスプレイ８の画面を分割した場合の処理、アンケートの回答画面の場合の処理等を行う。そして、視認者情感判定装置１は、処理結果を、ネットワークを介して外部の装置へ送信する。
【０１８６】
また、図１及び図１８に示した視認者情感判定システムにおいて、明るさ計測装置３は、視認者の視点位置Ｓtの輝度を自動的に計測するために、当該明るさ計測装置３による輝度の計測方向を、視点位置Ｓtに追従させるようにしてもよい。
【０１８７】
具体的には、図１に示した視認者情感判定システムにおいて、明るさ計測装置３は、当該明るさ計測装置３（に備えた輝度計）の向きを変えるアクチュエータを備えており、視認者情感判定装置１、または視線及び瞳孔径計測器２から、後述する明るさ計測方向データｇを入力する。明るさ計測方向データｇには、明るさ計測装置３の向きを視認者の視点位置Ｓtへ向けるためのデータ（例えば、当該明るさ計測装置３を基点として視点位置Ｓtへの向きを極座標で表したデータ）が含まれる。
【０１８８】
明るさ計測装置３は、明るさ計測方向データｇに基づいて、アクチュエータにて、当該明るさ計測装置３の向きを、明るさ計測方向データｇの示す向きに変える。これにより、明るさ計測装置３の向きを視点位置Ｓtに追従させることができ、視点位置Ｓtの輝度を、視点位置Ｓtの変化に合わせて正確に計測することができる。つまり、視認者情感判定装置１は、視点位置Ｓtの輝度である明るさデータｃを入力し、視点位置輝度Ｔtをリアルタイムに（視認者によるコンテンツの視認と同時に）かつ正確に自動測定することができる。
【０１８９】
尚、明るさ計測装置３は、視認者の頭の近くに設置されているものとする。明るさ計測装置３が視認者の頭の近くに設置されることで、明るさ計測装置３の位置と視認者の目の位置とが近くなる。これにより、明るさ計測装置３により、視点位置Ｓtの輝度が正確に計測され、結果として、視点位置輝度Ｔtが正確に測定されるようになる。
【０１９０】
まず、視点位置輝度Ｔtを自動測定する第１の例について説明する。図２６は、視点位置輝度Ｔtを自動測定する第１の例を説明するブロック図である。第１の例では、視認者情感判定装置１は、図２に示した構成部に加え、さらに送信部２６を備えている。
【０１９１】
また、図１を参照して、視線及び瞳孔径計測器２は、視認者の視線方向を計測する視線方向計測器として機能する。具体的には、視線及び瞳孔径計測器２は、視認映像ａ及び眼球運動映像ｂに基づいて、視認対象に対する（ディスプレイ８の画面に対する）視認者の視点位置Ｓtを測定し、視認者の目を基点とした視点位置Ｓtの方向（視線方向）を測定し、視線方向データｆを生成する。視線方向を測定する手法は既知であり、例えば角膜反射法が用いられる。視線方向データｆには、視認者の視線の向きのデータ（例えば、視認者の目を基点とした極座標で表されるデータ）が含まれる。視線及び瞳孔径計測器２は、視線方向データｆを、視認映像ａ及び眼球運動映像ｂと共に視認者情感判定装置１へ送信する。
【０１９２】
図２６を参照して、視認者情感判定装置１の受信部２０は、視線及び瞳孔径計測器２から、視認映像ａ及び眼球運動映像ｂに加え、さらに視線方向データｆを受信する。そして、受信部２０は、視認映像ａ等に加え視線方向データｆを解析部２１に出力する。
【０１９３】
解析部２１は、視認映像ａ等に加え視線方向データｆを入力し、前述の処理に加え、視線方向データｆに基づいて、明るさ計測方向データｇを生成し、明るさ計測方向データｇを送信部２６に出力する。具体的には、解析部２１は、入力した視線方向データｆをそのまま明るさ計測方向データｇに設定することで、明るさ計測方向データｇを生成する。
【０１９４】
送信部２６は、明るさ計測方向データｇを明るさ計測装置３へ送信する。これにより、明るさ計測装置３は、明るさ計測方向データｇを受信することで、明るさ計測方向データｇに基づいて、当該明るさ計測装置３の向きを視点位置Ｓtの向きに合わせることができる。
【０１９５】
尚、解析部２１は、視線方向データｆに対応した補正データを記憶部２４から読み出し、補正データに基づいて視線方向データｆを補正し、明るさ計測方向データｇを生成するようにしてもよい。この場合、記憶部２４には、視線方向データｆと当該視線方向データｆに対応した補正データとが、予め格納されている。
【０１９６】
視線方向データｆを明るさ計測方向データｇとして用いた場合、明るさ計測装置３の向きは、必ずしも視点位置Ｓtへ正確に向くとは限らない。これは、視認者の目の位置と明るさ計測装置３の位置との違いにより、両者の基点が異なるからである。補正データは、視線方向データｆの基点である視認者の目の位置と、明るさ計測方向データｇの基点である明るさ計測装置３の位置との間の空間位置の違いを吸収し、明るさ計測装置３の向きを視点位置Ｓtへ正確に向かせるためのデータである。
【０１９７】
これにより、明るさ計測装置３は、補正された明るさ計測方向データｇに基づいて、当該明るさ計測装置３の向きを、視点位置Ｓtの向きに正確に合わせることができ、視点位置Ｓtの輝度を一層正確に計測することができる。
【０１９８】
このように、視点位置輝度Ｔtを自動測定する第１の例によれば、視認者情感判定装置１は、視線及び瞳孔径計測器２から視線方向データｆを受信し、視線方向データｆに基づいて明るさ計測方向データｇを生成し、明るさ計測方向データｇを明るさ計測装置３へ送信する。これにより、明るさ計測装置３は、明るさ計測方向データｇに基づいて、当該明るさ計測装置３の向きを視点位置Ｓtの向きに変えることができる。
【０１９９】
したがって、明るさ計測装置３の向きは、視認者の視点位置Ｓtに追従するようになり、視認者情感判定装置１は、視点位置輝度Ｔtをリアルタイムにかつ正確に自動測定することができる。つまり、視認者によりコンテンツが視認され、視点位置Ｓtが測定された後に、コンテンツを再度表示して視点位置輝度Ｔtを測定する必要がないから、コンテンツの再表示を行う手間を省くことができる。また、視認者情感判定装置１は、精度の高い視点位置輝度Ｔtを得ることができるから、結果として、精度の高い注目度Ｐ1t，Ｐ2t等を算出することができる。
【０２００】
次に、視点位置輝度Ｔtを自動測定する第２の例について説明する。第２の例は、第１の例に比べ、視点位置輝度Ｔtを一層リアルタイムに測定する例である。図２７は、視点位置輝度Ｔtを自動測定する第２の例を説明するブロック図である。
【０２０１】
図１に示した視認者情感判定システムにおいて、第２の例では、視認者情感判定装置１は、図２と同じ構成部を備えている。視線及び瞳孔径計測器２は、第１の例と同様に、視認映像ａ及び眼球運動映像ｂに基づいて、コンテンツに対する（ディスプレイ８の画面に対する）視認者の視点位置Ｓtを測定し、視認者の目を基点とした視点位置Ｓtの方向を測定し、視線方向データｆを生成する。
【０２０２】
視線及び瞳孔径計測器２は、視線方向データｆをそのまま明るさ計測方向データｇに設定することで、明るさ計測方向データｇを生成する。そして、視線及び瞳孔径計測器２は、明るさ計測方向データｇを明るさ計測装置３へ送信する。
【０２０３】
尚、視線及び瞳孔径計測器２は、視線方向データｆに対応した補正データを、図示しない記憶部から読み出し、第１の例と同様に、補正データに基づいて視線方向データｆを補正し、明るさ計測方向データｇを生成するようにしてもよい。この場合、図示しない記憶部には、視線方向データｆと当該視線方向データｆに対応した補正データとが、予め格納されている。
【０２０４】
このように、視点位置輝度Ｔtを自動計測する第２の例によれば、視線及び瞳孔径計測器２は、視認映像ａ及び眼球運動映像ｂに基づいて視線方向データｆを生成し、視線方向データｆに基づいて明るさ計測方向データｇを生成し、明るさ計測方向データｇを明るさ計測装置３へ送信する。これにより、明るさ計測装置３は、視線及び瞳孔径計測器２から直接受信した明るさ計測方向データｇに基づいて、当該明るさ計測装置３の向きを視点位置Ｓtの向きに変えることができる。
【０２０５】
したがって、明るさ計測装置３の向きは、視認者の視点位置Ｓtに即座に追従するようになり、視認者情感判定装置１からの明るさ計測方向データｇを用いる場合に比べ、視認者情感判定装置１は、視点位置輝度Ｔtを一層リアルタイムにかつ正確に自動測定することができる。つまり、視認者によりコンテンツが視認され、視点位置Ｓtが測定された後に、コンテンツを再度表示して視点位置輝度Ｔtを測定する必要がないから、コンテンツの再表示を行う手間を省くことができる。また、視認者情感判定装置１は、精度の高い視点位置輝度Ｔtを得ることができるから、結果として、精度の高い注目度Ｐ1t，Ｐ2t等を算出することができる。
【０２０６】
以上、図１に示した視認者情感判定システムにおいて、明るさ計測装置３による輝度の計測方向を視点位置Ｓtに追従させる例について説明した。これは、図１８に示した視認者情感判定システムにおいても同様である。以下、図１８に示した視認者情感判定システムの変形例について説明する。
【０２０７】
図２８は、図１８に示した視認者情感判定システムを変形した構成例であって、オープン環境で視点位置輝度Ｔtを自動計測する例を示す概略図である。この視認者情感判定システムは、視認者情感判定装置１、明るさ計測装置３、呼吸波形計４、脈拍波形計５、蓄積装置６、送信装置７、眼球撮影装置９及び視認映像撮影カメラ１１を備えて構成される。
【０２０８】
明るさ計測装置３及び視認映像撮影カメラ１１は一体的に構成されており、明るさ計測装置３による輝度の計測方向が視点位置Ｓtに追従する。以下、一体的に構成された明るさ計測装置３及び視認映像撮影カメラ１１を、明るさ計測及び視認映像撮影装置という。
【０２０９】
明るさ計測及び視認映像撮影装置は、視認映像撮影カメラ１１により撮影された視認映像ａを取得し、眼球撮影装置９から眼球運動映像ｂを入力する。そして、明るさ計測及び視認映像撮影装置は、視認映像ａ及び眼球運動映像ｂに基づいて、オープン環境の対象物に対する視点位置Ｓtを測定し、視認者の目を基点とした視点位置Ｓtの方向（視線方向）を測定し、視線方向データｆを生成する。また、明るさ計測及び視認映像撮影装置は、眼球運動映像ｂに基づいて、視認者の瞳孔径Ｂtを求める。
【０２１０】
明るさ計測及び視認映像撮影装置は、前述のとおり、視線方向データｆに基づいて明るさ計測方向データｇを生成し、明るさ計測装置３に備えたアクチュエータにて、明るさ計測装置３の向きを、明るさ計測方向データｇの示す向きに変える。
【０２１１】
図２９は、視認映像ａ内の視点位置Ｓt等を説明する図である。図２９に示すように、明るさ計測及び視認映像撮影装置により、視認映像ａ内の視点における視点位置Ｓtの座標（ｘ，ｙ）の方向に、明るさ計測装置３の向きを合わせることができる。そして、明るさ計測及び視認映像撮影装置は、視点位置Ｓtの明るさデータｃを取得することができる。
【０２１２】
明るさ計測及び視認映像撮影装置は、視認映像ａ、眼球運動映像ｂ、明るさデータｃ、視点位置Ｓt、瞳孔径Ｂtを、送信装置７を介して視認者情感判定装置１へ送信する。
【０２１３】
このように、明るさ計測及び視認映像撮影装置の明るさ計測装置３を、明るさ計測装置３に備えたアクチュエータにより、視認映像ａ内の視点位置Ｓtへ向けることができ、対象物における視点位置Ｓtの輝度を測定することができる。つまり、明るさ計測装置３の向きは、対象物における視点位置Ｓtに即座に追従するようになり、視認者情感判定装置１は、視点位置輝度Ｔtをリアルタイムにかつ正確に自動測定することができる。
【０２１４】
例えば、視認者である作業者が即時に行動を起こすべき労働安全作業（例えば自動車の運転）を行っている場合、瞳孔径Ｂt、注目度Ｐ1t，Ｐ2t等と共に、視点位置輝度Ｔtもリアルタイムに得ることができる。したがって、視認者情感判定装置１は、作業者の注目していない（不注意）状態をリアルタイムに検出することができ、作業者に対して即時に警告を通知したり、ブレーキ動作を起こしたりすることができる。
【０２１５】
また、前記説明では、図２に示した視認者情感判定装置１の解析部２１は、視認映像ａ及び眼球運動映像ｂに基づいて、視認者の視点位置Ｓtを測定し、眼球運動映像ｂに基づいて、視認者の瞳孔径Ｂtを測定するようにした。これに対し、視線及び瞳孔径計測器２が視点位置Ｓt及び瞳孔径Ｂtを求める機能を備えるようにしてもよい。この場合、視線及び瞳孔径計測器２は、視認映像ａ及び眼球運動映像ｂに基づいて、視認者の視点位置Ｓtを求め、眼球運動映像ｂに基づいて、視認者の瞳孔径Ｂtを求める。そして、視認者情感判定装置１の受信部２０は、視線及び瞳孔径計測器２から視認映像ａ及び眼球運動映像ｂに加え視点位置Ｓt及び瞳孔径Ｂtも受信し、解析部２１は、受信部２０から視認映像ａ等に加え視点位置Ｓt及び瞳孔径Ｂtも入力する。図１８に示した視認者情感判定装置１についても同様である。
【０２１６】
また、前記説明では、明るさ計測装置３は、アクチュエータにより、当該明るさ計測装置３（に備えた輝度計）の向きを、視点位置Ｓtへ向けることで、視点位置Ｓtの輝度を計測するようにした。これに対し、明るさ計測装置３は、図２９の視認映像の画面（図１の例ではディスプレイ８の画面）全体に対応して複数の輝度センサー（例えばフォトダイオード）を配列させた撮像部７０及び視点位置輝度測定部７１等を備えるようにしてもよい。
【０２１７】
図３０は、明るさ計測装置３の構成及び処理を説明する図である。明るさ計測装置３の視点位置輝度測定部７１は、輝度センサーと視点位置Ｓtとの関係が定義されたテーブル７２を用いて、撮像部７０に配列した複数の輝度センサーのうち、視点位置Ｓtに対応する位置の輝度センサーを特定する。そして、視点位置輝度測定部７１は、当該輝度センサーによりレンズ７３を介して計測された輝度を明るさデータｃとして、蓄積装置６に蓄積し、送信装置７を介して視認者情感判定装置１へ送信する。このようにして計測された明るさデータｃは視点位置輝度Ｔtとして扱われ、視認者情感判定装置１は、視点位置輝度Ｔtをリアルタイムに測定することができる。
【０２１８】
尚、本発明の実施形態による視認者情感判定装置１のハードウェア構成としては、通常のコンピュータを使用することができる。視認者情感判定装置１は、ＣＰＵ、ＲＡＭ等の揮発性の記憶媒体、ＲＯＭ等の不揮発性の記憶媒体、及びインターフェース等を備えたコンピュータによって構成される。視認者情感判定装置１に備えた受信部２０、解析部２１、基準データ測定部２２、測定部２３及び記憶部２４，２５の各機能は、これらの機能を記述したプログラムをＣＰＵに実行させることによりそれぞれ実現される。また、これらのプログラムは、磁気ディスク（フロッピー（登録商標）ディスク、ハードディスク等）、光ディスク（ＣＤ−ＲＯＭ、ＤＶＤ等）、半導体メモリ等の記憶媒体に格納して頒布することもでき、ネットワークを介して送受信することもできる。
【符号の説明】
【０２１９】
１  視認者情感判定装置
２  視線及び瞳孔径計測器
３  明るさ計測装置
４  呼吸波形計
５  脈拍波形計
６  蓄積装置
７  送信装置
８  ディスプレイ
９  眼球撮影装置
１０  視認情景撮影装置
１１  視認映像撮影カメラ
２０  受信部
２１  解析部
２２  基準データ測定部
２３  測定部
２４，２５  記憶部
２６  送信部
３０  基準明暗反応測定手段
３１  基準呼吸反応測定手段
３２  基準脈拍反応測定手段
３３  基準瞳孔径等特定手段
３４  注目瞳孔径等算出手段
３５  注目度算出手段
４０，４３，４７  移動平均時間設定段
４１，４４，４８  移動平均瞳孔径算出段
４２，４６，５１  注目瞳孔径等算出段
４５，５０  呼吸反応除去段
４９  脈拍反応除去段
６０  基準明暗反応テーブル
６１  基準呼吸反応テーブル
６２  基準脈拍反応テーブル
７０  撮像部
７１  視点位置輝度測定部
７２  テーブル
７３  レンズ
【図１】
2017057631.tif 000014
【図２】
2017057631.tif 000015
【図３】
2017057631.tif 000016
【図４】
2017057631.tif 000017
【図５】
2017057631.tif 000018
【図６】
2017057631.tif 000019
【図７】
2017057631.tif 000020
【図８】
2017057631.tif 000021
【図９】
2017057631.tif 000022
【図１０】
2017057631.tif 000023
【図１１】
2017057631.tif 000024
【図１２】
2017057631.tif 000025
【図１３】
2017057631.tif 000026
【図１４】
2017057631.tif 000027
【図１５】
2017057631.tif 000028
【図１６】
2017057631.tif 000029
【図１７】
2017057631.tif 000030
【図１８】
2017057631.tif 000031
【図１９】
2017057631.tif 000032
【図２０】
2017057631.tif 000033
【図２１】
2017057631.tif 000034
【図２２】
2017057631.tif 000035
【図２３】
2017057631.tif 000036
【図２４】
2017057631.tif 000037
【図２５】
2017057631.tif 000038
【図２６】
2017057631.tif 000039
【図２７】
2017057631.tif 000040
【図２８】
2017057631.tif 000041
【図２９】
2017057631.tif 000042
【図３０】
2017057631.tif 000043
【手続補正書】
【提出日】平成29年7月13日(2017.7.13)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
ディスプレイに表示されたコンテンツを視認する視認者の瞳孔径に基づいて、前記視認者の情感を判定する視認者情感判定装置において、
第１の画面に所定の基準明暗画面が表示され、第１の画面の明るさと、第１の画面の所定箇所に前記視認者の視点を合わせたときの視点位置の明るさとを変化させた場合に、前記基準明暗画面における第１の画面の明るさと前記視点位置の明るさとの組合せ毎に測定した前記視認者の瞳孔径に基づく前記視認者の瞳孔径に関する基準データを記憶する記憶部と、
前記ディスプレイに前記コンテンツが表示された場合に、前記視認者の瞳孔径を測定し、実測した瞳孔径を得るとともに、前記記憶部に記憶された前記基準データに基づいて、前記コンテンツが表示された前記ディスプレイの明るさ及び前記コンテンツが表示された前記ディスプレイ内の視点位置の明るさに対応する前記基準データを特定し、前記実測した瞳孔径、及び特定した前記基準データに基づいて、前記実測した瞳孔径を補正し、補正後の瞳孔径を得る測定部と、
を備え、
前記基準データは、基準データ測定部により測定され、
前記基準データ測定部は、
前記視認者の呼吸周期を１呼吸時間として、２呼吸時間以上の所定の時間間隔を設定し、前記基準明暗画面における第１の画面の明るさと前記視点位置の明るさとの組合せ毎に、前記瞳孔径を前記時間間隔にて移動平均して移動平均後の瞳孔径を求め、前記基準明暗画面が表示された時間にて前記移動平均後の瞳孔径を平均し、基準瞳孔径を求め、前記基準明暗画面における第１の画面の明るさと前記視点位置の明るさとの組合せ毎の前記基準瞳孔径からなる基準明暗反応テーブルを生成する基準明暗反応測定手段を備え、
前記測定部は、
前記基準明暗反応測定手段により生成された基準明暗反応テーブルに基づいて、前記コンテンツが表示された前記ディスプレイの明るさ及び前記コンテンツが表示された前記ディスプレイ内の視点位置の明るさに対応する前記基準瞳孔径を特定する基準瞳孔径等特定手段と、
前記２呼吸時間以上の所定の時間間隔を設定し、前記瞳孔径を前記時間間隔にて移動平均して移動平均後の瞳孔径を求め、前記移動平均後の瞳孔径を注目瞳孔径とし、前記移動平均後の瞳孔径から、前記基準瞳孔径等特定手段により特定された前記基準瞳孔径を減算し、注目分瞳孔径を求める手段と、を備えたことを特徴とする視認者情感判定装置。
【請求項２】
（削除）
【請求項３】
請求項１に記載の視認者情感判定装置において、
前記視認者の呼吸における吸気開始点と排気開始点のタイミングを含む呼吸状態データを測定する解析部を備え、
前記基準データ測定部は、さらに、
前記視認者の呼吸周期を１呼吸時間とし、前記視認者の脈拍周期を１脈拍時間として、２脈拍時間以上かつ２呼吸時間未満の所定の時間間隔を設定し、
前記基準明暗画面における前記第１の画面の明るさと前記視点位置の明るさとの組合せ毎に、前記瞳孔径を前記時間間隔にて移動平均して移動平均後の瞳孔径を求め、
前記基準明暗画面が表示された時間にて前記移動平均後の瞳孔径を平均し、平均値を求め、
前記移動平均後の瞳孔径から前記平均値を減算し、減算結果である呼吸のみの影響を受けた瞳孔径を求め、
前記呼吸のみの影響を受けた瞳孔径の時間変化から、前記解析部により測定された前記呼吸状態データを用いて、吸気開始点及び排気開始点を含む１呼吸周期の時間における呼吸瞳孔径を抽出し、前記基準明暗画面における前記第１の画面の明るさと前記視点位置の明るさとの組合せ毎の前記呼吸瞳孔径からなる基準呼吸反応テーブルを生成する基準呼吸反応測定手段を備え、
前記測定部の基準瞳孔径等特定手段は、
前記基準瞳孔径を特定すると共に、前記基準明暗反応測定手段により生成された基準呼吸反応テーブルに基づいて、前記コンテンツが表示された前記ディスプレイの明るさ及び前記コンテンツが表示され前記ディスプレイ内の視点位置の明るさに対応する前記呼吸瞳孔径を特定し、
前記測定部の注目瞳孔径等算出手段は、
前記２脈拍時間以上かつ２呼吸時間未満の所定の時間間隔を設定し、前記瞳孔径を前記時間間隔にて移動平均して移動平均後の瞳孔径を求め、前記移動平均後の瞳孔径から、前記基準瞳孔径等特定手段により特定された前記呼吸瞳孔径を減算し、注目瞳孔径を求め、さらに、前記基準瞳孔径等特定手段により特定された前記基準瞳孔径を減算し、注目分瞳孔径を求める、ことを特徴とする視認者情感判定装置。
【請求項４】
請求項３に記載の視認者情感判定装置において、
前記解析部は、
前記呼吸状態データに加え、前記視認者の脈拍における脈拍開始点のタイミングを含む脈拍状態データを測定し、
前記基準データ測定部は、さらに、
前記視認者の呼吸周期を１呼吸時間とし、前記視認者の脈拍周期を１脈拍時間として、２脈拍時間以上かつ２呼吸時間未満の所定の時間間隔を設定し、
前記瞳孔径を前記時間間隔にて移動平均して移動平均後の瞳孔径を求め、
前記瞳孔径から前記移動平均後の瞳孔径を減算し、減算結果である脈拍のみの影響を受けた瞳孔径を求め、
前記脈拍のみの影響を受けた瞳孔径の時間変化から、前記解析部により測定された前記脈拍状態データを用いて、脈拍開始点を含む１脈拍周期の時間における脈拍瞳孔径を抽出し、前記基準明暗画面における第１の画面の明るさと前記視点位置の明るさとの組合せ毎の前記脈拍瞳孔径からなる基準脈拍反応テーブルを生成する基準脈拍反応測定手段を備え、
前記測定部の基準瞳孔径等特定手段は、
前記基準瞳孔径及び前記呼吸瞳孔径を特定すると共に、前記基準明暗反応測定手段により生成された基準脈拍反応テーブルに基づいて、前記コンテンツが表示された前記ディスプレイの明るさ及び前記コンテンツが表示された前記ディスプレイの視点位置の明るさに対応する前記脈拍瞳孔径を特定し、
前記測定部の注目瞳孔径等算出手段は、
前記瞳孔径から、前記基準瞳孔径等特定手段により特定された前記脈拍瞳孔径及び前記呼吸瞳孔径を減算し、注目瞳孔径を求め、さらに、前記基準瞳孔径等特定手段により特定された前記基準瞳孔径を減算し、注目分瞳孔径を求めることを特徴とする視認者情感判定装置。
【請求項５】
請求項４に記載の視認者情感判定装置において、
前記測定部は、さらに、
前記基準瞳孔径等特定手段により特定された前記基準瞳孔径と、前記注目瞳孔径等算出手段により求められた前記注目瞳孔径との間の比を算出し、第１の注目度を求め、または、前記基準瞳孔径等特定手段により特定された前記基準瞳孔径と、前記注目瞳孔径等算出手段により求められた前記注目分瞳孔径との間の比を算出し、第２の注目度を求める注目度算出手段、を備えたことを特徴とする視認者情感判定装置。
【請求項６】
請求項５に記載の視認者情感判定装置において、
前記ディスプレイの画面を分割した複数の分割領域が設定され、前記視認者が複数存在する場合に、
前記測定部は、
前記複数の視認者のそれぞれについて、前記ディスプレイに表示されたコンテンツに対する前記第１の注目度を第１のコンテンツ注目度として求め、前記第１のコンテンツ注目度を前記複数の視認者について合計して第１の合計結果を求め、前記第１の合計結果を前記複数の視認者の数で除算することで、前記コンテンツに対する前記視認者１人当たりの注目度を求め、
前記複数の視認者のそれぞれについて、前記分割領域毎に、前記第１の注目度を第１の
領域注目度として求め、前記第１の領域注目度を前記複数の視認者について合計して第２の合計結果を求め、前記第２の合計結果を前記第１の合計結果で除算することで、前記コンテンツに対する前記分割領域毎の注目度の分布を求め、
前記コンテンツに対する前記分割領域毎の注目度の分布を所定時間期間にて積分して前記分割領域毎の合計注目度の分布を求め、前記分割領域毎の合計注目度の分布を前記所定時間期間で除算することで、前記コンテンツに対する単位時間当たりの前記分割領域毎の注目度の分布を求める、ことを特徴とする視認者情感判定装置。
【請求項７】
請求項５に記載の視認者情感判定装置において、
前記ディスプレイに、質問欄及び複数の回答欄を含むアンケートの画面が表示されている場合に、
前記測定部は、
前記質問欄及び前記複数の回答欄のそれぞれに対する前記第１の注目度を所定時間期間にて積分し、前記質問欄及び前記複数の回答欄のそれぞれに対する各欄注目度を求め、
前記質問欄及び前記複数の回答欄のそれぞれに対する前記各欄注目度を合計して第１の合計結果を求め、前記複数の回答欄のそれぞれに対する前記各欄注目度を合計して第２の合計結果を求め、
前記複数の回答欄のそれぞれに対する前記各欄注目度を前記第２の合計結果で除算することで、前記複数の回答欄のそれぞれに対する回答確信率を求め、
前記第１の合計結果を前記所定時間期間で除算することで、前記アンケートについての注目度の高さを求める、ことを特徴とする視認者情感判定装置。
【請求項８】
請求項１に記載の視認者情感判定装置において、
前記基準データのもととなる前記視認者の瞳孔径は、第１の画面に所定の基準明暗画面が前記視認者に対して最初に表示されてから、４０秒以上１０分以下経過した後であって、前記第一の画面の所定の基準明暗画面の変化毎に、１秒以上１分以下後測定されたものである、視認者情感判定装置。
【請求項９】
（削除）
【請求項１０】
ディスプレイに表示されたコンテンツを視認する視認者の瞳孔径に基づいて、前記視認者の情感を判定するプログラムであって、
コンピュータに、
第１の画面に所定の基準明暗画面が表示され、第１の画面の明るさと、第１の画面の所定箇所に前記視認者の視点を合わせたときの視点位置の明るさとを複数変化させた場合に、前記基準明暗画面における第１の画面の明るさと前記視点位置の明るさとの組合せ毎に、測定した前記視認者の瞳孔径に基づいて、前記視認者の瞳孔径に関する基準データを記憶部から読み出させるステップと、
前記ディスプレイに前記コンテンツが表示された場合に、前記基準データに基づいて、前記コンテンツが表示された前記ディスプレイの明るさ及び前記コンテンツが表示された前記ディスプレイの視点位置の明るさに対応する前記基準データを特定させるステップと、
前記ディスプレイに前記コンテンツが表示された場合における、前記視認者の瞳孔径の測定時である実測した瞳孔径に関する情報を受け取り、前記実測した瞳孔径及び特定された前記基準データに基づいて、前記実測した瞳孔径を補正し、補正後の瞳孔径を得るステップと、
前記視認者の呼吸周期を１呼吸時間として、２呼吸時間以上の所定の時間間隔を設定し、前記基準明暗画面における第１の画面の明るさと前記視点位置の明るさとの組合せ毎に、前記瞳孔径を前記時間間隔にて移動平均して移動平均後の瞳孔径を求め、前記基準明暗画面が表示された時間にて前記移動平均後の瞳孔径を平均し、基準瞳孔径を求め、前記基準明暗画面における第１の画面の明るさと前記視点位置の明るさとの組合せ毎の前記基準瞳孔径からなる基準明暗反応テーブルを作成するステップと、
前記基準明暗反応テーブルに基づいて、前記コンテンツが表示された前記ディスプレイの明るさ及び前記コンテンツが表示された前記ディスプレイ内の視点位置の明るさに対応する前記基準瞳孔径を特定するステップと、
前記２呼吸時間以上の所定の時間間隔を設定し、前記瞳孔径を前記時間間隔にて移動平均して移動平均後の瞳孔径を求め、前記移動平均後の瞳孔径を注目瞳孔径とし、前記移動平均後の瞳孔径から、前記基準瞳孔径等特定手段により特定された前記基準瞳孔径を減算し、注目分瞳孔径を求めるステップと、
を実行させるためのプログラム。
【国際調査報告】
2017057631.tif 000044
2017057631.tif 000045