(57)【要約】  オーディオビジュアルコンテンツを視聴する視聴者の反応を分析する方法は、先ず、オーディオビジュアルコンテンツを視聴する視聴者メンバから生体データを収集することを開始する。収集される生体データは、相関グラフを設定するために相互相関の処理に委ねられ、相関グラフは、視聴されるオーディオビジュアルコンテンツに対する個人的な視聴者メンバの反応を表すノードを有する。その後、類似するノードに対応するグラフにおけるエッジが識別され、視聴されるコンテンツに対して同様に反応する視聴者メンバを示す。
2016513297.tif 000002
【特許請求の範囲】
【請求項１】
オーディオビジュアルコンテンツを視聴する視聴者の反応を分析する方法であって、
前記オーディオビジュアルコンテンツを視聴する視聴者メンバから生体データを収集するステップと、
視聴されるオーディオビジュアルコンテンツに対する個々の視聴者メンバの反応を表すノードを有する相関グラフを構築するために、収集された生体データの相互相関を計算するステップと、
視聴されるコンテンツに対して同様に反応する視聴者メンバを示すように、類似するノードに対応する前記グラフにおけるエッジを識別するステップと、
を有する方法。
【請求項２】
前記生体データが、各々の視聴者メンバの皮膚電位（ＥＤＡ）のストリームを有する、請求項１に記載の方法。
【請求項３】
前記ＥＤＡストリームは前記視聴されるコンテンツに同期する、請求項２に記載の方法。
【請求項４】
前記相互相関を計算するステップは、ペアの視聴者メンバの生体データの間の相関を計算するステップを含む、請求項１に記載の方法。
【請求項５】
前記相互相関を計算するステップは、
相関値を生成するためにペアの視聴者メンバの生体データの相関を計算するステップと、
前記ペアの視聴者メンバの生体データのうち少なくとも１つをランダム化するステップと、
相関ベースライン分布値を生成するために、前記ペアの視聴者メンバの生体データのうちランダム化されたものと前記ペアの視聴者メンバの生体データのうちランダム化されていないものとの相関を計算するステップと、
前記相関値と前記相関ベースライン分布値とを比較し、前記ペアの視聴者メンバの生体データの間の相互相関を計算するステップと、
を有する、請求項４に記載の方法。
【請求項６】
オーディオビジュアルコンテンツを視聴する視聴者の反応を分析する装置であって、
（ａ）視聴されるオーディオビジュアルコンテンツに対する個々の視聴者メンバの反応を表すノードを有する相関グラフを構築するために、視聴者メンバから収集される生体データの相互相関を計算し、及び（ｂ）視聴されるコンテンツに対して同様に反応する視聴者メンバを示すように、類似するノードに対応する前記グラフにおけるエッジを識別する分析エンジン
を有する装置。
【請求項７】
前記生体データが複数の皮膚電位（ＥＤＡ）のストリームを有し、各々のＥＤＡのストリームは個々の視聴者メンバに関連する、請求項６に記載の装置。
【請求項８】
前記分析エンジンは、ペアの視聴者メンバの生体データの間の相関を計算することにより、収集される生体データの相関を計算する、請求項６に記載の装置。
【請求項９】
相関値を生成するためにペアの視聴者メンバの生体データの相関を計算する手段と、
前記ペアの視聴者メンバの生体データのうち少なくとも１つをランダム化する手段と、
相関ベースライン分布値を生成するために、前記ペアの視聴者メンバの生体データのうちランダム化されたものと前記ペアの視聴者メンバの生体データのうちランダム化されていないものとの相関を計算する手段と、
前記相関値と前記相関ベースライン分布値とを比較し、前記ペアの視聴者メンバの生体データの間の相互相関を計算する手段と、
を有する請求項８に記載の装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は視聴されるコンテンツに対する視聴者メンバの反応を分析するための技術に関連する。
【背景技術】
【０００２】
映画及びTVスタジオは、一般に、既存の及び提案されるコンテンツ提供に関する市場調査活動の一環として視聴者テスト(audience  testing)を実行する。個々のテスト上映の最終的な目的は様々であるが(例えば、マーケティング、編集など)、多くの場合、スタジオ(又は会社)は、視聴者がコンテンツの提供に対してどのように反応するかを予想する手助けとなるフィードバックを望む。視聴テストについての現在の最良の方法は、概して、コメントカードにより得られる明示的なフィードバックを当てにし、グループインタビューに着目している。これらの技術はマーケットリサーチ業界で幅広く使用されているが、これらの技術は信頼できない批判を受けたり、調査が粗すぎるおそれがある。そのような技術の信頼性が低いことは、様々な人々がコメントカードで問われる質問を主観的に解釈し、視聴者メンバの記憶や着目するグループの社会的状況に依存して、様々に応答するかもしれないことに起因する。
【０００３】
皮膚電位(electro  dermal  activity：EDA)のような視聴者メンバの生体データを収集することは、視聴者メンバの感情反応のきめ細かい客観的な評価を可能にする。しかしながら、個人的な反応は解釈が容易でなく、その理由は、人の生体組織だけでなく、センサの配置により導入されるノイズも、その人の反応として影響し得るからである。広く視聴者測定値を収集することは、全体的な反応により、それら個々の特徴の影響を減らす。しかしながら、そのような収集(aggregation)は、複数の視聴者メンバの生体データを単に平均化すること以上の負担を必要とし、例えば、各人の反応は皮膚やセンサの特性に依存して異なる統計性を有するかもしれない。
【０００４】
生体センサの読み取り値(例えば、EDA、EEG、心拍)を感情に変換する方法についてのリサーチがなされている。そのようなリサーチは、視聴者テストに関するものよりも相当困難な問題を招く。更に、この種の分野におけるリサーチは、汎用的なアプリケーションに対するモデルを構築することは困難であることが判明しており、その理由は、様々なパラメータの値を学習するのに必要な真の基準ラベル(ground  truth  label)(例えば、実際の感情)を把握することは困難だからである。脳の活動(情報)を収集するために、短い映画セグメントを鑑賞する視聴者メンバについてのファンクショナル磁気共鳴イメージング(functional  Magnetic  Resonance  Imaging：fMRI)を相互に関連させる(相関させる)試みも存在する。そのようなリサーチは、参加する視聴者の中で大きな相互相関(cross  correlation)が存在し、これは彼らが視聴される映画を互いに同様に経験することを示す、ということを紹介している。このリサーチはファンクショナルMRIデータを当てにしているので、この方法論が実際の視聴者テストに適用できるか否か及び何処まで適用できるかについて疑義が残るかもしれない。ファンクショナルMRIスキャンを適切に実行するために、視聴者メンバは、閉ざされた空間内で横になり、測定の期間の間は完全に静止したままでなければならない。如何なる視聴者メンバの動きもデータを劣化させ得る。更に、MRI装置は、多額の費用がかかり、かなりの運営コストを招き、従って、データの収集を1度に1人の視聴者メンバに制限している。
【０００５】
過去において、マーケットの研究者は、ユーザのフィードバックデータを分析することにより得られる反応を説明するのに役立つ映画要素(例えば、キャラクタ、ロケーション、音など)を確認するために、視聴者メンバとコンテンツメタデータとの相関性を算出した。そのような試みは、コンテンツを視聴する個人の反応を解釈することに着目し、特に、レコメンドエンジンのようなパーソナライズツールに関連しており、そのような試みは、視聴者全体としての何らの情報ももたらしていない。
【発明の概要】
【発明が解決しようとする課題】
【０００６】
従って、従来技術に関する上記の問題を克服する視聴者の反応を分析する技術が望まれている。
【課題を解決するための手段】
【０００７】
概して、本発明の原理による好ましい形態によれば、オーディオビジュアルコンテンツを視聴する視聴者の反応を分析する方法は、先ず、オーディオビジュアルコンテンツを視聴する視聴者メンバから生体データを収集することを開始する。収集される生体データは、相関グラフ(correlation  graph)を設定するために相互相関の処理に委ねられ、相関グラフは、視聴されるオーディオビジュアルコンテンツに対する個人的な視聴者メンバの反応を表すノード(node)を有する。その後、類似するノードに対応するグラフにおけるエッジが識別され、視聴されるコンテンツに対して同様に反応する視聴者メンバを示す。
【図面の簡単な説明】
【０００８】
【図１】オーディオビジュアルコンテンツをともに視聴する視聴者メンバから収集される生体データを収集する発明原理の好適実施形態による分析エンジンの概略ブロック図。
【図２】データ収集と並列して視聴者メンバから収集される生体データをリサンプリングする図1の分析エンジンにおけるリサンプリング手段を示す図。
【図３】図1の分析エンジンにより決定される異なる映画に対する視聴者メンバの反応を集めたグラフを時間の関数として示す図。
【発明を実施するための形態】
【０００９】
発明原理によれば、図1に示される分析エンジン10は、視聴者メンバから収集される生体データにより、視聴されるオーディオビジュアルコンテンツ(例えば、映画及びテレビジョン番組)に対する視聴者メンバの反応を判定することが可能である。実際には、生体データは皮膚電位(EDA)による複数のストリームの形態をとり(図示せず)、各々のストリームはコンテンツを鑑賞する個々の視聴者メンバから発する。個々のストリームの取得は、全ての視聴者がそのコンテンツを同時に鑑賞する場合にはリアルタイム分析と並列的に行うことが可能であり、或いは、オフライン分析の場合には複数のセッションにより行うことが可能である。ストリームは典型的には外的な方法で同期をとり、例えば、映画の開始のようなコンテンツ中の対応するポイントを指す、EDA信号におけるマークにより同期をとってもよい。
【００１０】
簡明化のため、図1は、視聴者メンバ12及び14のペア(又は組)からEDAデータストリームを分析エンジン10により受信することを示しているが、実際には、分析エンジンは更に多数の視聴者メンバからEDAデータストリームを受信するのが一般的である。分析エンジン10は、相関機能部16及びリサンプリング機能部18(図2を参照しながら詳細に説明される)において視聴者メンバ12及び14からEDAデータストリームを受信する。相関機能部16は、後述する方法により、受信される視聴者メンバのEDAデータストリームについて相関(の計算)を実行するようにプログラムされるデータプロセッサ(例えば、パーソナルコンピュータ)を有する。図1の分析エンジン10の相関機能部16は、視聴者メンバ12及び14からのEDAデータストリームを、オーバーラップする固定長時間ウィンドウ(例えば、1秒刻みのステップで5分間の長さのウィンドウ)に集める(aggregate)。全ての時点において、相関機能部16は、相関グラフを構築するアルゴリズムを利用して、全ての視聴者メンバについて5分間ウィンドウの現在のセット(集合)を処理し、ノードは視聴されるコンテンツに対する視聴メンバの個人的な反応を表現し、2人の対応する視聴者メンバがその5分間ウィンドウの間にそのコンテンツに対して同様に反応する場合には、2つのノードはエッジにより接続されるようになる。
【００１１】
相関グラフを構築するために、図1の相関機能部16は、各々の固定長時間ウィンドウについて、視聴者メンバについて、EDA信号の所与のスナップショットについて、全てのペアの視聴者メンバに対するペアの相関又はペアワイズ相関(pairwise  correlation)を計算する。特に、相関機能部16は、ノンパラメトリック仮説検定(non-parametric  hypothesis  test)を実行し、スナップショットにより示される時間の間に2人の視聴者メンバの反応が類似して見えるか否かを判断する。先ず、相関機能部16は、視聴者メンバの特定のペアについてEDAストリームの相関を計算し、次に、それら2つの信号が統計的に互いにどの程度類似しているかを反映するスコアを生成する。
【００１２】
相関機能部16は異なる相関法を利用することも可能であり、例えば、信号同士の間の相互情報又は2つの信号のドット積(又は点乗積又は内積)(コサイン類似度としても知られている)を利用してもよいがこれらに限定されない。異なる相関技術は、誤検出(false  positive)の発生率に関して異なる属性を有し、それらの影響の仕方は最終的な相関グラフとともに実行される分析の仕方(又はタイプ)に依存する。
【００１３】
相関機能部16により実行される相関処理と並列して、図1の分析エンジン10内のリサンプリング機能部18は、(例えば、図1の視聴者メンバ12及び14のような)視聴者メンバからの入力EDAストリームに従って、相関値に対するベースライン分布(baseline  distribution)を設定する。図2を参照すると、リサンプリング機能部18は、典型的には、図1の相関機能部16を含むデータプロセッサと同一又は別個であるデータプロセッサ(図示せず)を有する。リサンプリング機能部18はランダム化機能部20を有し、ランダム化機能部20は、ある程度のストリームの統計的性質を保っているが、そのストリームが図2のリサンプリング機能部18により受信される他の入力ストリームとの間で有していた潜在的な何らかの相関性を示さないように、受信される視聴者メンバのEDAストリームのペアのうちの一方をランダム化したバージョンを生成する。ランダム化機能部20は、信号の中で何れの統計値を保存することを希望するかに依存して様々なランダム化技術を利用することが可能である。例えば、単なるサイクリックシフト(又は循環シフト)は、(相互)相関を低くするが、平均値、分散、及び、変換される信号の自己相関値などのような多くの他の統計値を依然として維持するには十分である。この「変換される信号」は上記の「ランダム化したバージョン」のストリームと同じである。一方、信号中の全ての点を乱す(シャッフルする)ランダム化方法は、平均値や分散を維持するが、自己相関は維持されない。ランダム化方法の選択は、アルゴリズムの感度(sensitivity)に影響し、すなわち、2つの信号が真に相関して見える場合にどの程度頻繁に相互相関を計算するかに影響する。
【００１４】
ランダム化機能部20は、入力信号のうちの一方にランダム化を何度か適用し、その度に、異なるランダム化出力信号を生成するように異なるランダム化シード(seed)を使用する。様々なランダム化出力信号の各々に関し、相関機能部22は、他の入力信号との相関を計算し、それらの値を保存し、相関値のベースライン分布を形成する。この点に関し、相関機能部22は図1の相関機能部16と同じ相関技術を利用してもよい。
【００１５】
図1を参照すると、分析エンジン10は統計的有意性機能部24を含み、統計的有意性機能部24は、相関機能部16により生成される視聴者メンバのEDA信号のペアの相関値と、リサンプリング機能部18により生成されるベースライン分布とを比較し、それらの間で(存在するならば)統計的有意性(statistical  significance)を判定する。実際には、統計的有意性機能部24は、相関機能部16及び/又はリサンプリング機能部18(何れも図1)を形成するデータプロセッサと同一である又は異なるデータプロセッサを有する。本質的には、統計的サンプリング機能部24は、生成されたベースライン分布値が観測される相関値より大きな値を有する確率を推定する。この確率が、ある小さな閾値(例えば、0.1％)より小さな値を有する場合、統計的サンプリング機能部24は、そのスナップショットの期間に関し、(例えば、図1の視聴者メンバ12及び14のような)視聴者メンバのペアのEDA信号は互いに類似していると判断する。
【００１６】
個々の視聴者メンバの全てのペアについてペアワイズ相関の有意性を算出した後に、統計的有意性機能部24は、統計的に有意な相関する視聴者メンバEDAのデータストリームの相関をマッピングすることにより、相関グラフを構築することができる。そのような相関グラフは各々の視聴者メンバに対するノードを有する。更に、スナップショットの間にノードが類似性を示す場合であってその場合に限り、すなわち、それらのペアワイズ相関が上述したような統計的有意性を示す場合に、統計的有意性機能部24はペアのノードの間で相関グラフにエッジを付加する。相関グラフはスナップショット(例えば、5分間のウィンドウ)に含まれるデータを表現しているに過ぎないことに留意を要する。図1の分析エンジン10は、コンテンツの持続時間の間の全てのスナップショットについて、この手順を反復し、スナップショットについて異なる可能性がある相関グラフを生成する。
【００１７】
全てのスナップショットについて取得される一群のグラフは、集合的に、単独のダイナミックグラフ(dynamic  graph)を表現し、一群のノード(すなわち、視聴者メンバ)は変わらないが、視聴者メンバの反応は多かれ少なかれ互いに類似するので、時間経過とともにノード間にエッジが追加又は削除される。そのようなダイナミックグラフは、視聴者メンバがコンテンツにどのように関わるかについての詳細な説明をもたらす。グラフ構造を分析することは、ある時間内のエッジ密度、グラフ内のグループ(clique)のサイズ、及び、グラフのスペクトル特性(すなわち、グラフのラプラシアンの固有値)を含む様々なメトリックを利用して行うことが可能である。
【００１８】
図3は4つの異なる映画に対する一群の相関グラフを示す。各々の映画に関し、図1の分析エンジン10は、映画を同時に鑑賞する20人のメンバに属する視聴者についてEDAデータを収集及び分析した。上記の方法を適用し、分析エンジン10は、各々の映画についてダイナミックグラフを算出し、これらのグラフについて時間経過に対するエッジ密度を測定した。このメトリックは、図3のグラフのエッジのうち、所与の時点においてアクティブであるものの部分(又は割合)を示す。直感的には、エッジを介して接続される視聴者メンバのペアが多いほど、その映画は視聴者に同じ体験を共有させる効果が大きい。
【００１９】
以上、視聴されるコンテンツに対する視聴者メンバの反応を分析するための技術が説明された。
【００２０】
＜関連出願＞
本願は2013年1月4日付け米国仮特許出願第61/749,051号の35U.S.C.119(e)に関する利益を享受し、その出願の教示内容は本願に組み入れられる。
【図１】
2016513297.tif 000003
【図２】
2016513297.tif 000004
【図３】
2016513297.tif 000005
【国際調査報告】
2016513297.tif 000006
2016513297.tif 000007