(57)【要約】表示されたページの特定のコンテンツへのユーザの反応を決定するための方法であって、眼球追跡装置で捉えられたユーザの眼球追跡運動を受信するステップと、ユーザが閲覧しているコンテンツ・ページ上の位置を監視された眼球運動から決定するステップと、追跡運動または決定された位置を表すデータをデータベースに格納するステップと、表示されたページの少なくとも１つの特定の位置上の滞留時間またはユーザの瞳孔拡張などのパラメータの値を決定するためにデータを分析するステップであって、パラメータの値があらかじめ定められた通常の数値と比較され、ユーザの反応がパラメータの通常の値と現在の値との間の計算されたギャップ上で定義され、ユーザの反応がページ・プロバイダにリアルタイムで表示されるステップと備える、方法。
2010541057.tif 000002
【特許請求の範囲】
【請求項１】
表示されたプレゼンテーションの特定のコンテンツへの出席者の反応を決定する方法であって、
視標追跡装置で捉えられた前記出席者の眼球追跡運動を受信するステップと、
前記捉えられた眼球追跡運動の前記受信を前記プレゼンテーション・イベントと同期させるステップと、
前記追跡運動を表すデータを格納するステップと、
前記プレゼンテーションのイベントについての滞留時間または出席者の瞳孔拡張などのパラメータの値を決定するために前記データを分析するステップとを含み、前記パラメータの前記値が出席者のスキルに基づいて規則とのバランスを取られてあらかじめ定められた通常の数値と比較され、前記出席者の前記反応が前記パラメータの通常の値と現在の値との間の計算されたギャップ上で定義され、前記出席者の前記反応がページ・プロバイダにリアルタイムに表示される、方法。
【請求項２】
コンピュータにプレゼンテーション・プロバイダを支援させるための制御論理を内部に格納するコンピュータ使用可能メディアを前記ページの特定のコンテンツへの出席者の反応を決定するために備えるコンピュータ・プログラム製品であって、前記制御論理が、
−眼球追跡装置で捉えられた前記出席者の眼球追跡運動を受信するための第１コンピュータ可読プログラム・コードと、
−前記捉えられた眼球追跡運動の前記受信を前記プレゼンテーション・イベントと同期させるための第２コンピュータ可読プログラム・コードと、
−前記追跡運動を表すデータを格納するための第３コンピュータ可読プログラム・コードと、
−前記プレゼンテーションのイベントについての前記滞留時間または出席者の瞳孔拡張などのパラメータの前記値を決定するために前記データを分析するための第４コンピュータ可読プログラム・コードと、
−第５コンピュータ可読プログラム・コードであって、前記パラメータの前記値が、出席者のスキルに基づいて規則とのバランスを取られてあらかじめ定められた通常の数値と比較され、前記出席者の前記反応が前記パラメータの通常の値と現在の値との間の前記計算されたギャップ上で定義されるコンピュータ可読プログラム・コードとを備える、コンピュータ・プログラム製品
【請求項３】
請求項２に記載のコンピュータ・プログラム製品と、少なくとも１つのプレゼンテーションを含むサーバと、加入者端末（１２）と、視標追跡装置に接続されたユーザ端末と、前記ユーザ（１、２、５）が前記プレゼンテーションを閲覧しているときに前記出席者の前記反応を前記加入者端末に送信するためのコンピュータ可読プログラム・コードを備えるパブリッシング・サーバ（１１）とを含む、通信システム。
【請求項４】
前記パブリッシング・サーバ（１１）がＳＩＰベースである、請求項３に記載の通信システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は一般に視標追跡（ｅｙｅ  ｔｒａｃｋｉｎｇ）の分野に関し、より詳細には、ディスプレイを閲覧しているユーザから収集された視標追跡装置のデータを分析して、ユーザの目的および関心によってそのディスプレイを適合させるためのシステムおよび方法に関する。
【背景技術】
【０００２】
視標追跡技法は、人間の知覚および認知過程を調査するために長い間使用されてきた（検討のために、Ｒａｙｎｅｒの「Ｅｙｅ  ｍｏｖｅｍｅｎｔｓ  ｉｎ  ｒｅａｄｉｎｇ  ａｎｄ  ｉｎｆｏｒｍａｔｉｏｎ  ｐｒｏｃｅｓｓｉｎｇ，２０  ｙｅａｒｓ  ｏｆ  ｒｅｓｅａｒｃｈ」（Ｐｓｙｃｈｏｌｏｇｉｃａｌ  Ｂｕｌｌｅｔｉｎ  １２４，第３７２頁乃至第４２２頁）を参照のこと）。
【０００３】
ユーザの注視行動を追跡することはユーザの目的および関心を推測するために有益な技法である。例として、視覚的注意の焦点は注意の焦点と通常一致すると一般に想定される。
【０００４】
場合によっては、ユーザは動作を開始するために意図的に注視を使用することができる。これは、運動ニューロン疾患を患っている人々などの、身体的な障害があるユーザのために行われたものである。
【０００５】
他の例では、システムの動作をユーザの行動によりよく適合させるために、ユーザの自然な眼球運動が追跡されて解釈される。いくつかの例を以下に挙げる。
【０００６】
米国特許第７１２０８８０号は、放送されたＴＶまたはケーブルＴＶから生じるコンテンツなどのメディア・コンテンツ、ウェブ、コンピュータ・アプリケーション、会話、教室講義、演劇への被験者の関心レベルを決定するための方法およびシステムに関する。被験者が何に注目しているかを決定する際、たとえば米国特許第４５９５９９０号に開示されたリモート・カメラ・ベースの技法、あるいは、ＥｙｅＴｒａｃ（登録商標）Ｓｅｒｉｅｓ  ４０００（Ａｐｐｌｉｅｄ  Ｓｉｃｅｎｃｅ  Ｌａｂｓ）またはＥｙｅＧａｚｅ（登録商標）（ＬＣ  Ｔｅｃｈｎｏｌｏｇｉｅｓ）などの市販のシステムを使用して、被験者の注視が追跡されることが好ましい。被験者の観察から、被験者が何を見ているか、被験者の瞬目率および瞬目持続時間、６つの頭部ジェスチャへの６つの距離、被験者のまゆ毛の相対位置、および被験者の口角の相対位置などの様々な特徴が抽出される。測定された特徴から被験者の関心を推測するために、ベイジアン・ネットワークが使用される。システムは、被験者が特定のディスプレイに注意を払っているかどうかに基づいて関連フィードバックを生成する。
【０００７】
米国特許第６５７７３２９号は、ディスプレイ上に「ティッカー式」方法で表示されている情報の、ユーザにとっての関連性を判断するための視標追跡を有する表示装置に関する。一般にティッカー・ディスプレイはコンピュータ・スクリーンのある領域を使用して、あらかじめ定められた方式でテキストおよび／または画像項目を連続的にスクロールする。オペレータが注視している時間があらかじめ定められた時間以上の場合、第２レベルの情報（たとえば要約）が表示される。注視している時間があらかじめ定められた時間未満の場合、処理は単純にティッカー式項目を表示し続ける。滞留時間はユーザ定義でよい。
【０００８】
国際公開第２００６／１１０４７２号は電子的に提示されたコンテンツとユーザとの対話を測定および評価するための方法に関する。電子視標追跡装置（Ｔｏｂｉｉ  ｓｅｒｉｅｓ  １７５０  ＥＴ）は、ウェブ・コンテンツ・ページとユーザとの対話を監視するために使用される。アルゴリズムは、ユーザの眼が最も長い時間を費やすコンテンツ・ページ上の領域、または眼球運動がコンテンツ・ページのあちこちにある最も可能性が高いパターンを決定するように構成されている。ページのそれぞれの領域についての瞳孔拡張、閲覧されている広告をユーザが理解または把握する上で問題がないことを示すと考えられるより大きい瞳孔サイズなどの、他のパラメータが抽出されうる。コンテンツ・ページとユーザとの対話はリアルタイムに記録されて分析されることができ、後続のコンテンツ・ページでユーザに提示されるコンテンツを決定するためにその分析の結果が使用されうる。
【０００９】
欧州特許出願公開第１２１３６４２号は、動的ハイパーメディア・ページのディスプレイを閲覧しているユーザから収集された視標追跡装置のデータを分析するためのシステムおよび方法に関する。
【００１０】
様々な状況（たとえば、ｖ−ラーニング、ビデオ会議）で、スライドを用いてプレゼンテーションが行われ、プレゼンタによって解説される。これらのスライドは室内のスクリーン上に表示されるか、遠隔ユーザのコンピュータに放送される。
【００１１】
プレゼンテーションを適合させるために、プレゼンタは当然出席者の注意理解および関心のリアルタイムの評価が欲しい。リアルタイムのフィードバックは、何人かの出席者が提示された１つのポイントを逃したようなのでさらなる説明が必要とされているとプレゼンタに警告するだろう。プレゼンタは、出席者の反応を考慮して、これが彼らにとって主に重要であると考える何らかの理由があれば、いくつかの特定のトピックを解説することもできる。
【００１２】
コミュニケーションの成功は、プレゼンタおよび出席者（個人および個人のグループと考えられる）双方の現在の感情的および精神的特徴を含む様々な技術的および非技術的パラメータによるので、プレゼンテーション後に提出された評価表はよいフィードバックを与えない。これらの人的パラメータによって、ある日は効果的だったプレゼンテーションが別の日には失敗になりうる。さらに、生徒などの出席者は行われているプレゼンテーションについてどう思うか率直に言明することを躊躇する場合がある。
【先行技術文献】
【特許文献】
【００１３】
【特許文献１】米国特許第７１２０８８０号明細書
【特許文献２】米国特許第４５９５９９０号明細書
【特許文献３】米国特許第６５７７３２９号明細書
【特許文献４】国際公開第２００６／１１０４７２号
【特許文献５】欧州特許出願公開第１２１３６４２号明細書
【非特許文献】
【００１４】
【非特許文献１】Ｒａｙｎｅｒの「Ｅｙｅ  ｍｏｖｅｍｅｎｔｓ  ｉｎ  ｒｅａｄｉｎｇ  ａｎｄ  ｉｎｆｏｒｍａｔｉｏｎ  ｐｒｏｃｅｓｓｉｎｇ，２０  ｙｅａｒｓ  ｏｆ  ｒｅｓｅａｒｃｈ」（Ｐｓｙｃｈｏｌｏｇｉｃａｌ  Ｂｕｌｌｅｔｉｎ  １２４，第３７２頁乃至第４２２頁）
【発明の概要】
【発明が解決しようとする課題】
【００１５】
従来のシステムおよび方法の上述のおよび他の問題を考慮して、本発明の目的は被験者の反応（たとえば関心レベル）をリアルタイムに確実に評価してメディア・コンテンツ・プロバイダに伝達することである。
【課題を解決するための手段】
【００１６】
本発明の第１の態様では、表示されたプレゼンテーションの特定のコンテンツへの出席者の反応を決定するための方法が提供され、その方法は、視標追跡装置で捉えられた出席者の眼球追跡運動を受信するステップと、捉えられた眼球追跡運動の受信をプレゼンテーション・イベントと同期させるステップと、追跡運動を表すデータを格納するステップと、プレゼンテーションのイベントについての滞留時間または出席者の瞳孔拡張などのパラメータの値を決定するためにデータを分析するステップであって、パラメータの値が出席者のスキルに基づいて規則とのバランスを取られてあらかじめ定められた通常の数値と比較され、出席者の反応がパラメータの通常の値と現在の値との間の計算されたギャップ上で定義され、出席者の反応がページ・プロバイダにリアルタイムに表示されるステップとを備える。
【００１７】
「パラメータの通常の値」という表現は、これらのパラメータの予測値を示すために使用される。予測は任意でもよく、以前の統計的分析の結果でもよい。
【００１８】
本発明の他の態様では、コンピュータにページ・プロバイダを支援させるための制御論理を内部に格納するコンピュータ使用可能メディアを前記ページの特定のコンテンツへのユーザの反応を決定するために備えるコンピュータ・プログラム製品が提供され、前記制御論理が、
−眼球追跡装置で捉えられたユーザの眼球追跡運動を受信するための第１コンピュータ可読プログラム・コードと、
−監視された眼球運動から、ユーザが閲覧しているコンテンツ・ページ上の位置を決定するための第２コンピュータ可読プログラム・コードと、
−追跡運動または決定された位置を表すデータをデータベース内に格納するための第３コンピュータ可読プログラム・コードと、
−表示されたページの少なくとも１つの特定の位置上の滞留時間またはユーザの瞳孔拡張などのパラメータの値を決定するためにデータを分析するための第４コンピュータ可読プログラム・コードと、
−パラメータの値をあらかじめ定められた通常の数値と比較するための第５コンピュータ可読プログラム・コードであって、ユーザの反応が、パラメータの通常の値と現在の値との間の計算されたギャップ上で定義されるプログラム・コードとを備える。
【００１９】
本発明の他の態様では、上述のようなコンピュータ・プログラム製品、少なくとも１ページを含むサーバ、加入者端末、視標追跡装置に接続されたユーザ端末、およびユーザが前記ページを閲覧しているときにユーザの反応を加入者端末に送信するためのコンピュータ可読プログラム・コードを備えるパブリッシング・サーバを含む、通信システムが提供される。
【００２０】
有利なことに、パブリッシング・サーバはＳＩＰベースである。
【００２１】
本発明の上記および他の目的および諸利点は、好ましい実施形態の詳細な説明を添付の図面と併せて考慮すれば明らかになるであろう。
【図面の簡単な説明】
【００２２】
【図１】通信システムの概略図である。
【発明を実施するための形態】
【００２３】
本発明の有利な使用が添付の図面に提示されている。この使用では、出席者のためにプレゼンテーションが行われる。それぞれの出席者は、いわゆる「注視点（ｐｏｉｎｔ  ｏｆ  ｇａｚｅ）」を少なくとも測定する視標追跡装置と対面している。
【００２４】
それぞれの出席者について視標追跡装置の較正が必要な場合に、図１に提示されたシステムの使用が開始される。最近の視標追跡装置のうちのいくつかは持続的な較正をサポートし、セッションごとの較正を必要とするわけではない。その場合、出席者は較正情報がロードされうるように本人認証されなければならない。
【００２５】
出席者は、Ｔｅａｍｗｏｒｋ（Ａｌｃａｔｅｌ  Ｌｕｃｅｎｔ）またはＭｉｃｒｏｓｏｆｔ  Ｎｅｔｍｅｅｔｉｎｇ、ＩＢＭ  Ｓａｍｅｔｉｍｅｓなどの通信システムに遠隔接続して、自分のパーソナル・コンピュータ上でプレゼンテーションを見ることができる。
【００２６】
遠隔に接続された出席者１、２はそれぞれ視標追跡システムのためのデータを捉えるウェブカメラ３、４と対面している。他の出席者達５はプレゼンタのスクリーン６と対面し、視標追跡を実行するカメラ７と対面しながら会議室の中にいることができる。
【００２７】
出席者の心的傾向を示す様々なパラメータが測定されうる。このようなパラメータの例は滞留時間および瞳孔拡張である。
【００２８】
測定が実行される瞬間は、プレゼンテーション・イベント、たとえばページ変更と同期される。それぞれの測定後、収集サーバ８にチケットが送信される。
【００２９】
一実施形態では、このチケットのフォーマットはＸＭＬである。ＸＭＬ（ｅＸｔｅｎｓｉｂｌｅ  Ｍａｒｋｕｐ  Ｌａｎｇｕａｇｅ：拡張マークアップ言語）は論理構造情報を文書内に埋め込み、プラットフォームから独立しているという諸利点を有するので、これは有利である。さらに、ＸＭＬは情報を共有および交換するための標準フォーマットとして広く認められている。
【００３０】
収集サーバ８は出席者の装置から測定チケットを受信する。測定と規則とのバランスを取り、次いでバランスの取れた測定をあらかじめ定められた通常の数値と比較することによって、処理サーバ１０で評価結果が計算される。
【００３１】
バランスを取る規則は、そのページの主題に対する出席者のスキル、または出席者の言語に基づく。バランスを取る規則はリポジトリ９に格納される。
【００３２】
あらかじめ定められた通常の数値もリポジトリに格納される。たとえば、あらかじめ定められた通常の数値は注意が適度であると考えられる出席者の平均を意味することができるので、バランスを取る測定があらかじめ定められた数値より小さい場合は出席者の注意が「低い」と考えられる。そうでない場合は注意が「高い」と考えられる。さらに、あらかじめ定められた数値とバランスの取れた測定との間のギャップの値によって、いくつかの注意レベルが決定されうる。
【００３３】
パブリッシング・サーバ１１は、結果公表の加入者に表示するための評価結果を送信する。会議の場合、監督者１３と同様プレゼンタ１２が加入者になることができる。
【００３４】
パブリッシング・サーバ１１は、有利なことにＳＩＰベースのサーバである。ＳＩＰは、基礎をなす伝送プロトコルおよび確立されているセッションのタイプとは独立に働くセッションを作成、修正、および終了させるための多用途の汎用信号プロトコルなので、これは有利である。
【００３５】
ＳＩＰはＨＴＴＰと同様にテキスト・ベースのプロトコルであり、拡張されるように設計されている。その拡張性のために、ＳＩＰはＨ．３２３に取って代わる最も一般的なＶｏＩＰ信号プロトコルになった。近年、ＳＩＰはプレゼンス、イベント通知、およびインスタント・メッセージング・サービスの提供にも適用されている。
【００３６】
ＳＩＰは音声、ビデオ、およびテキストなどの複数のメディア・ストリームからなるセッションを確立できる。ユーザがセッションを確立すると、メディア・ストリームを１セットの装置に配信でき、たとえば２つの異なる専門ネットワーク・アプライアンスに音声ストリームおよびビデオ・ストリームをセットアップできる。
【００３７】
ＳＩＰにおいて、ユーザ・エージェント、レジストラ、プロキシ・サーバ、およびリダイレクト・サーバの４つの論理エンティティが定義される。ＳＩＰは要求方法の拡張可能なセットも定義する。現在は以下の６つの基本的要求が仕様である。ＩＮＶＩＴＥ要求はセッションを開始するために、ＡＣＫはセッション確立を確認するために、ＢＹＥはセッションを終了するために、ＲＥＧＩＳＴＥＲは位置情報を登録するために、ＯＰＴＩＯＮは機能を決定するために、およびＣＡＮＣＥＬはまだ確立されていないセッション終了するために使用される。
【００３８】
加入者１２、１３はＳＵＢＳＣＲＩＢＥおよびＮＯＴＩＦＹ  ＳＩＰメッセージでサーバ１１と通信できる。
【００３９】
ＳＩＰ要求はソース・アドレスおよび２つの宛先アドレスを含む。要求のＦｒｏｍヘッダ内に配置されるソース・アドレスは要求者のＳＩＰ  ＵＲＩである。Ｔｏヘッダ内に配置される宛先アドレスは宛先ＳＩＰ  ＵＲＩであり、プロキシ・サーバによって得られる。Ｃｏｎｔａｃｔヘッダ内において、第２宛先アドレスが今後の要求が送信されるべき場所を示す。ＳＩＰ  ＵＲＩは電子メール・アドレスの形式を有するので、将来多くのユーザが自分の電子メール・アドレスのうちのいくつかをＳＩＰ  ＵＲＩとして再利用することになると思われる。
【００４０】
結果のディスプレイ・フォーマットは、有利なことに送信前にパブリッシング・サーバ１１によって加入者にカスタマイズされる。
【００４１】
結果はデータベース１４に送信されて格納されうる。したがって、これらのデータから出席者の関心および注意の発展グラフが作成されうる。
【００４２】
本発明には多くの諸利点がある。
【００４３】
第１に、入力データは管理された重みとバランスを取られる。
【００４４】
第２に、結果のディスプレイが読む人にカスタマイズされる。
【００４５】
第３に、注意の発展グラフなどの事後分析が実行されうる。
【００４６】
最後に、ソリューションは、プレゼンタまたは監督者同様、出席者の在宅勤務での使用または遠隔使用に適合する。
【００４７】
場合によっては、ディスプレイ・ページの特定のコンテンツ、たとえば会議プレゼンテーションのスライドへの出席者の反応を決定する際に、出席者の一部だけが考慮されうる点を留意しなければならない。
【００４８】
たとえば、地区の再建が目的であるプロジェクトが、建築家によって公開されている会議室内で提示されうる。当局、ならびに銀行、団体、労働組合が傍聴人を代表しうる。建築家は出席者のうちの何人かだけの反応に焦点を合わせたい場合がある。パラメータの通常の数値は傍聴人のそれぞれのカテゴリについてあらかじめ定められなければならない。
【００４９】
出席者の特定の特徴が考慮されなければならない点にも留意されなければならない。たとえば、左から右へ読む傍聴人と、右から左へまたは上から下へ読む傍聴人とでは眼球運動は同じではない。
【図１】
2010541057.tif 000003
【国際調査報告】
2010541057.tif 000004
2010541057.tif 000005
2010541057.tif 000006
2010541057.tif 000007
2010541057.tif 000008