(57)【要約】      （修正有）【課題】コンテンツに対する評価情報の入力に係る負担をユーザに強いることなく、ユーザの評価を確実にかつ正確に取得して収集し、管理できるようにする。【解決手段】表示装置１０は、再生するコンテンツを表示する表示部１８と、表示部１８に表示されるコンテンツの評価情報を生成する評価情報生成部２６ｂと、表示部１８で再生するコンテンツの評価結果を所定の判定処理により判定する判定部２６ａを有する。判定部２６ａは、コンテンツの再生中に、特定のタイミングで表示装置１０の周囲のユーザの状態を認識し、認識した結果に基づきユーザによるコンテンツの評価結果を判定する。評価情報生成部２６ｂは、判定部２６ａが判定した結果を集計してコンテンツの評価情報を生成する。【選択図】図２
2014060642.tif 000002
【特許請求の範囲】
【請求項１】
再生するコンテンツを表示する表示部と、
該表示部に表示されるコンテンツの評価情報を生成する評価情報生成部と、を有する表示装置であって、
該表示部で再生するコンテンツの評価結果を所定の判定処理により判定する判定部を有し、
該判定部は、前記コンテンツの再生中に、特定のタイミングで前記表示装置の周囲のユーザの状態を認識し、該認識した結果に基づきユーザによる前記コンテンツの評価結果を判定し、
前記評価情報生成部は、前記判定部が判定した結果を集計して前記コンテンツの評価情報を生成することを特徴とする表示装置。
【請求項２】
請求項１に記載の表示装置において、
前記表示部の表示を制御する表示制御部を備え、
該表示制御部は、前記特定のタイミングに合わせて、前記コンテンツを評価するために予め定められた動作を行うよう前記視聴者に要求する要求画面を前記表示部に表示させることを特徴とする表示装置。
【請求項３】
請求項１または２に記載の表示装置において、
ユーザを撮像するための撮像部を有し、
前記判定部は、該撮像部で撮像した画像を前記ユーザの状態を認識するための情報として使用し、前記撮像部で撮像した画像によりユーザの状態を解析して、該解析した結果に従って前記ユーザの状態を認識することを特徴とする表示装置。
【請求項４】
請求項１または２に記載の表示装置において、
ユーザの音声を取得する音声取得部を備え、
前記判定部は、前記音声取得部により取得された音声を前記ユーザの状態を認識するための情報として使用し、前記音声取得部により取得された音声に基づいて前記ユーザの状態を認識することを特徴とする表示装置。
【請求項５】
請求項１または２に記載の表示装置において、
ユーザによる所定の操作入力を受け付ける操作入力部を有し、
前記判定部は、前記操作入力部に対する操作入力を前記ユーザの状態を認識するための情報として使用し、前記操作入力部に対する操作入力に従って、前記ユーザの状態を認識することを特徴とする表示装置。
【請求項６】
請求項３〜５のいずれか１に記載の表示装置において、
前記判定部は、前記ユーザの状態を認識することができなかった場合、所定の入力手段を使用して入力されたユーザの状態を示す情報を取得し、
前記ユーザの状態を認識するための情報と、前記入力手段を使用して入力されたユーザの状態を示す情報との関連付けを学習する機能を有することを特徴とする表示装置。
【請求項７】
請求項３に記載の表示装置において、
前記撮像部により撮像された画像を解析する撮像画像解析部を有し、
前記特定のタイミングは、前記撮像画像解析部が、前記撮像部により撮像された画像に所定の画像が含まれていると判断したタイミングを含むことを特徴とする表示装置。
【請求項８】
請求項１〜６のいずれか１に記載の表示装置において、
前記再生するコンテンツに含まれるメタデータを解析するメタデータ解析部を有し、
前記特定のタイミングは、前記メタデータ解析部が、前記再生するコンテンツに所定のメタデータ含まれていると判断したとき、該メタデータに従うタイミングを含むことを特徴とする表示装置。
【請求項９】
請求項１〜６のいずれか１に記載の表示装置において、
前記再生するコンテンツの画像を解析するコンテンツ画像解析部を有し、
前記特定のタイミングは、前記コンテンツ画像解析部が、前記再生するコンテンツの画像に所定の画像が含まれていると判断したタイミングを含むことを特徴とする表示装置。
【請求項１０】
請求項４に記載の表示装置において、
前記音声取得部が取得した音声を解析する取得音声解析部を有し、
前記特定のタイミングは、前記取得音声解析部が、前記音声取得部により取得した音声信号に所定の音声情報が含まれていると判断したタイミングを含むことを特徴とする表示装置。
【請求項１１】
請求項１〜６のいずれか１に記載の表示装置において、
前記コンテンツを再生中に、ＣＭが再生されているか否かを検出するＣＭ検出部を有し、
前記特定のタイミングは、前記ＣＭ検出部が、前記ＣＭが再生されていると判断したタイミングを含むことを特徴とする表示装置。
【請求項１２】
請求項１〜６のいずれか１に記載の表示装置において、
コンテンツを再生中の出力音声を解析する出力音声解析部を有し、
前記特定のタイミングは、前記出力音声解析部が、出力する音声信号の音量または音質が所定の条件に該当すると判断したタイミングを含むことを特徴とする表示装置。
【請求項１３】
請求項１〜６のいずれか１に記載の表示装置において、
前記再生するコンテンツの画像を解析するコンテンツ画像解析部を有し、
前記特定のタイミングは、前記コンテンツ画像解析部が、再生されているコンテンツの映像信号の色調または輝度が所定の条件に該当すると判断したタイミングを含むことを特徴とする表示装置。
【請求項１４】
請求項１〜１３のいずれか１に記載の表示装置において、
外部機器と通信を行う通信部を有し、
前記評価情報生成部は、前記コンテンツの評価情報を前記通信部を介して所定のサーバ装置に送信し、
前記通信部は、サーバ装置が蓄積したコンテンツの評価情報を受信し、前記表示部は、前記通信部が受信したコンテンツの評価情報を表示することを特徴とする表示装置。
【請求項１５】
請求項１〜１４のいずれか１に記載の表示装置と、該表示装置と通信可能に接続されたサーバ装置とを備え、
前記サーバ装置は、前記表示装置の評価情報生成部が生成したコンテンツの評価情報を通信により取得し、コンテンツの評価情報のデータベースとして蓄積し、該蓄積した評価情報を前記表示装置に送信することを特徴とする表示システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示装置及び表示システムに関し、より詳細には、コンテンツを再生してそのコンテンツのユーザによる評価情報を生成する表示装置、及び該表示装置と表示装置で生成した評価情報を蓄積するサーバ装置とからなる表示システムに関する。
【背景技術】
【０００２】
例えばテレビ受像機などの表示装置を使用してコンテンツを再生し、これを視聴することができる。このような再生コンテンツには、例えば放送番組として放送されたコンテンツや、可搬型の記録媒体から読み出されたコンテンツ、通信回線を介して外部から入力されたコンテンツ、あるいはこれらコンテンツを特定の記憶手段に記憶し、その後読み出して再生するコンテンツなどがある。
【０００３】
ユーザにコンテンツを提供する提供者は、そのコンテンツが視聴者にどのように評価されているかを調査し、ユーザの嗜好を判断してコンテンツの提供事業に役立てたいという要求をもつ。ユーザによるコンテンツの評価をコンテンツ提供者が知る手法として、例えば視聴率調査がある。放送コンテンツの視聴率を調査することで、提供しているコンテンツのユーザによる評価を判断することができる。
【０００４】
また、従来知られている技術においては、カメラによってコンテンツを視聴しているユーザを撮影し、その撮影画像を解析することでユーザがコンテンツをどのように評価しているかを判断するものがある。
【０００５】
例えば特許文献１では、視聴者の操作を伴わずに、視聴者の好みを認識し、視聴者に対して、他の視聴者の評価に応じたコンテンツを薦めるための評価情報管理技術が開示されている。ここでは番組を視聴している視聴者の表情を撮影して得られた画像データを解析することにより、その番組に対する反応情報を判定し、評価サーバがその反応情報を取得する。そして評価サーバは、ある視聴者に対して、その番組に対する他の視聴者の評価情報を作成し、他の視聴者の評価情報を、番組を視聴している視聴者に通知する。
【０００６】
また、特許文献２には、生活中の様々な行動全般から個々のユーザの嗜好情報を生成し、情報検索や推薦などの提示順位を個々のユーザに対して最適化する嗜好情報取集システムが開示されている。このシステムは、行動検出部でユーザの特徴的な行動を検出すると、情報取得部にて、そのような行動を引き起こした情報を取得する。また、情報取得部でユーザに影響を与えた情報が特定されると、評価取得部ではその情報に対するユーザの評価を取得する。そして、ＤＢ登録部を介してユーザ嗜好ＤＢに情報取得部から得られた情報と、評価取得部から得られた情報が蓄積される。
【０００７】
特許文献３には、再生されるコンテンツに対する視聴者反応の情報を収集する視聴者反応情報収集方法が開示されている。ここでは、視聴者についてのセンシングデータとそれを認識処理することで得られる視聴者についての認識データのいずれか一方又は双方を収集することで、再生コンテンツに対しての視聴者の反応を示す視聴者反応データを収集し、画面操作履歴の情報を含む再生コンテンツについての視聴データを収集する。そして視聴者反応データと視聴データとの事後統合を実現すべく、視聴者反応データが収集された際に割り付けられたタイムスタンプと、視聴データが収集された際に割り付けられたタイムスタンプとを使って、視聴者反応データと視聴データとを時間同期させて統合する。さらに統合データに基づいて、再生コンテンツに対しての視聴者の質的な反応を示す視聴質データを生成して、その生成した視聴質データの流通用の視聴メタデータを作成する。  
【０００８】
特許文献４では、放送されている番組をユーザが本当に視聴しているのか否かを判断し、分析し、好みの番組を推定するための装置が開示されている。この装置は、番組視聴手段に表示された番組を視聴するユーザを撮影するための撮影手段と、撮影手段により撮影された画像から番組に対する視聴態度を番組に関連づけて記録する記録手段と、視聴態度に基づいてユーザの好みの番組を推定する推定手段と、を備えている。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２０１２−００９９５７号公報
【特許文献２】特開２００８−１９１７０２号公報
【特許文献３】特許０４３３５６４２号公報
【特許文献４】特開２０１１−１９６６５７２号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
表示装置を使用してコンテンツを視聴するユーザの嗜好を調査するために、上記のように放送番組の視聴率を用いることができるが、視聴率は、単にユーザがその放送番組を表示装置で視聴しているか否かがわかるだけであり、そのコンテンツに対する評価がどの程度のものなのかは視聴率だけでは知ることはできない。また、複数のユーザがコンテンツを視聴している場合に、それぞれのユーザがコンテンツの感想を表明することは難しい。
【００１１】
また、カメラを使用してユーザを撮影し、その撮影した画像を解析してユーザの嗜好を判断する場合、無作為にユーザの撮影画像を解析し、その嗜好を判断しようとしても、そのときのユーザの動作が視聴中のコンテンツに対する反応によるものかどうかは曖昧であり判別できない。また、コンテンツの視聴中には、ユーザは相反する感想を持つこともあり、ユーザがコンテンツの評価中であることを意識していないときにユーザの嗜好を判断しようとしても、正確な評価を得ることができない。
【００１２】
また、コンテンツを再生中に、操作入力手段を使用してユーザの感想や嗜好等の評価情報を入力させるようにすることもできるが、コンテンツの再生中にユーザにそのコンテンツの感想の入力を継続させることはユーザにとって負担となる。
【００１３】
本発明は、上述のごとき実情に鑑みてなされたものであり、コンテンツに対する評価情報の入力に係る負担をユーザに強いることなく、ユーザの評価を確実にかつ正確に取得して収集し、管理できるようにするための表示装置及び表示システムを提供することを目的とする。
【課題を解決するための手段】
【００１４】
上記課題を解決するために、本発明の第１の技術手段は、再生するコンテンツを表示する表示部と、該表示部に表示されるコンテンツの評価情報を生成する評価情報生成部と、を有する表示装置であって、該表示部で再生するコンテンツの評価結果を所定の判定処理により判定する判定部を有し、該判定部は、前記コンテンツの再生中に、特定のタイミングで前記表示装置の周囲のユーザの状態を認識し、該認識した結果に基づきユーザによる前記コンテンツの評価結果を判定し、前記評価情報生成部は、前記判定部が判定した結果を集計して前記コンテンツの評価情報を生成することを特徴としたものである。
【００１５】
第２の技術手段は、第１の技術手段において、前記表示部の表示を制御する表示制御部を備え、該表示制御部は、前記特定のタイミングに合わせて、前記コンテンツを評価するために予め定められた動作を行うよう前記視聴者に要求する要求画面を前記表示部に表示させることを特徴としたものである。
【００１６】
第３の技術手段は、第１または２の技術手段において、ユーザを撮像するための撮像部を有し、前記判定部は、該撮像部で撮像した画像を前記ユーザの状態を認識する情報として使用し、前記撮像部で撮像した画像によりユーザの状態を解析して、該解析した結果に従って前記ユーザの状態を認識することを特徴としたものである。
【００１７】
第４の技術手段は、第１または２の技術手段において、ユーザの音声を取得する音声取得部を備え、前記判定部は、前記音声取得部により取得された音声を前記ユーザの状態を認識するための情報として使用し、前記音声取得部により取得された音声に基づいて前記ユーザの状態を認識することを特徴としたものである。
【００１８】
第５の技術手段は、第１または２の技術手段において、ユーザによる所定の操作入力を受け付ける操作入力部を有し、前記判定部は、前記操作入力部に対する操作入力を前記ユーザの状態を認識するための情報として使用し、前記操作入力部に対する操作入力に従って、前記ユーザの状態を認識することを特徴としたものである。
【００１９】
第６の技術手段は、第３〜５のいずれか１の技術手段において、前記判定部は、前記ユーザの状態を認識することができなかった場合、所定の入力手段を使用して入力されたユーザの状態を示す情報を取得し、前記ユーザの状態を認識するための情報と、前記入力手段を使用して入力されたユーザの状態を示す情報との関連付けを学習する機能を有することを特徴としたものである。
【００２０】
第７の技術手段は、第３の技術手段において、前記撮像部により撮像された画像を解析する撮像画像解析部を有し、前記特定のタイミングは、前記撮像画像解析部が、前記撮像部により撮像された画像に所定の画像が含まれていると判断したタイミングを含むことを特徴としたものである。
【００２１】
第８の技術手段は、第１〜６のいずれか１の技術手段において、前記再生するコンテンツに含まれるメタデータを解析するメタデータ解析部を有し、前記特定のタイミングは、前記メタデータ解析部が、前記再生するコンテンツに所定のメタデータ含まれていると判断したとき、該メタデータに従うタイミングを含むことを特徴としたものである。
【００２２】
第９の技術手段は、第１〜６のいずれか１の技術手段において、前記再生するコンテンツの画像を解析するコンテンツ画像解析部を有し、前記特定のタイミングは、前記コンテンツ画像解析部が、前記再生するコンテンツの画像に所定の画像が含まれていると判断したタイミングを含むことを特徴としたものである。
【００２３】
第１０の技術手段は、第４の技術手段において、前記音声取得部が取得した音声を解析する取得音声解析部を有し、前記特定のタイミングは、前記取得音声解析部が、前記音声取得部により取得した音声信号に所定の音声情報が含まれていると判断したタイミングを含むことを特徴としたものである。
【００２４】
第１１の技術手段は、第１〜６のいずれか１の技術手段において、前記コンテンツを再生中に、ＣＭが再生されているか否かを検出するＣＭ検出部を有し、前記特定のタイミングは、前記ＣＭ検出部が、前記ＣＭが再生されていると判断したタイミングを含むことを特徴としたものである。
【００２５】
第１２の技術手段は、第１〜６のいずれか１の技術手段において、コンテンツを再生中の出力音声を解析する出力音声解析部を有し、前記特定のタイミングは、前記出力音声解析部が、出力する音声信号の音量または音質が所定の条件に該当すると判断したタイミングを含むことを特徴としたものである。
【００２６】
第１３の技術手段は、第１〜６のいずれか１の技術手段において、前記再生するコンテンツの画像を解析するコンテンツ画像解析部を有し、前記特定のタイミングは、前記コンテンツ画像解析部が、再生されているコンテンツの映像信号の色調または輝度が所定の条件に該当すると判断したタイミングを含むことを特徴としたものである。
【００２７】
第１４の技術手段は、第１〜１３のいずれか１の技術手段において、外部機器と通信を行う通信部を有し、前記評価情報生成部は、前記コンテンツの評価情報を前記通信部を介して所定のサーバ装置に送信し、前記通信部は、サーバ装置が蓄積したコンテンツの評価情報を受信し、前記表示部は、前記通信部が受信したコンテンツの評価情報を表示することを特徴としたものである。
【００２８】
第１５の技術手段は、第１〜１４のいずれか１の技術手段の表示装置と、該表示装置と通信可能に接続されたサーバ装置とを備え、前記サーバ装置は、前記表示装置の評価情報生成部が生成したコンテンツの評価情報を通信により取得し、コンテンツの評価情報のデータベースとして蓄積し、該蓄積した評価情報を前記表示装置に送信することを特徴とした表示システムである。
【発明の効果】
【００２９】
本発明によれば、コンテンツに対する評価情報の入力に係る負担をユーザに強いることなく、ユーザの評価を確実にかつ正確に取得して収集し、管理できるようにするための表示装置及び表示システムを提供することができる。
【図面の簡単な説明】
【００３０】
【図１】本発明による表示システムの構成例を説明するための図である。
【図２】本発明に係る表示装置の構成例を示すブロック図ある。
【図３】ユーザに対する動作の要求画面の一例を示す図である。
【図４】本発明による表示装置の処理の流れと各動作を概念的に説明するための図である。
【図５】本発明による表示システムのサーバ装置に蓄積されたデータベースのデータ例を説明するための図である。
【発明を実施するための形態】
【００３１】
図１は、本発明による表示システムの構成例を説明するための図である。
表示システムの構成例では、コンテンツを再生して出力する表示装置１０と、表示装置１０と通信ネットワークを介して接続されるサーバ装置１００とを有している。表示装置１０は、本発明に係る表示装置の一例であり、表示装置１０とサーバ装置１００とにより、本発明の表示システムの実施形態が構成される。サーバ装置１００には、複数の表示装置１０が接続され、各表示装置１０との通信が可能とされる。表示装置１０には、例えば、テレビ受像機を適用することができる。
【００３２】
表示装置１０は、各種コンテンツの再生を行うものであり、再生するコンテンツとしては、例えば放送番組として放送されたコンテンツや、可搬型の記録媒体から読み出されたコンテンツ、通信回線を介して外部から入力されたコンテンツ、あるいはこれらコンテンツを特定の記憶手段に記憶し、その後記憶手段から読み出したコンテンツなどを適用することができる。ここでは表示装置１０が受信し、あるいは記憶手段から読み出したコンテンツデータから映像データおよび音声データを取り出して再生することを、表示装置１０がコンテンツを再生すると称する。
【００３３】
表示装置１０は、表示装置１０の周囲のユーザ５０の状態を所定の判定処理により認識し、その認識結果に基づいてユーザによるコンテンツの評価結果を判定する。ここでは、表示装置１０は、コンテンツの再生中に、特定のタイミングでユーザ５０の状態を認識し、認識した結果に基づき判定した評価結果を集計してコンテンツの評価情報を生成することができる。
【００３４】
ユーザ５０の状態を判定する判定処理には、種々の手法を用いることができる。例えば、表示装置１０に撮像部２３を設け、撮像部２３で撮像した画像を解析することによりユーザ５０の状態を認識して、その認識結果に従ってユーザによるコンテンツの評価結果を判定することができる。例えば、撮像部２３で撮像した画像からユーザ５０を識別し、所定のジェスチャを認識してユーザ５０の動作に応じた評価結果を判定することができる。またユーザ５０の座っている位置や、顔や手の大きさ、表情などから評価結果を判定するようにすることもできる。
あるいは、表示装置１０にユーザの音声を取得する音声取得部２４を設け、その音声取得部２４により取得された音声を解析して、ユーザ５０の状態を認識するようにしてもよい。あるいは、ユーザによる所定の操作入力に従って、ユーザ５０の状態を認識することもできる。そして認識したユーザの状態に基づいてユーザ５０によるコンテンツの評価結果を判定する。
【００３５】
表示装置１０は、上記のような所定の判定処理によりユーザの評価結果を判定すると、その判定結果を集計し、コンテンツの評価情報を生成する。生成した評価情報は、適宜サーバ装置１００に送信される。評価情報には、ユーザによるコンテンツの評価結果として、例えば、コンテンツの支持／不支持、ＣＭ商品の希望／不希望などの情報を含めることができる。また、評価結果には、コンテンツを視聴するユーザの数や内訳（性別）の情報、ユーザの識別情報、コンテンツの視聴時間や放送チャンネル情報等を含ませることができる。
サーバ装置１００では、複数の表示装置１０から送信された評価情報をデータベースにして蓄積する。蓄積した評価情報は、例えばコンテンツ提供者などに所定条件下でアクセス権を与えてアクセスを許可することで、コンテンツの評価情報を利用可能とすることができる。
【００３６】
表示装置１０がユーザの状態を認識し、ユーザによるコンテンツの評価結果を判定する特定のタイミングは、予め設定された条件に従う。例えば特定のタイミングとして、撮像部２３により撮像された画像に所定の画像が含まれていると判断したタイミングや、再生するコンテンツに所定のメタデータ含まれているとき、そのメタデータに従うタイミングを含むことができる。あるいは、再生するコンテンツの画像に特定の画像が含まれていると判断したタイミングや、コンテンツの画像の色調ないし輝度が所定の条件に該当すると判断したときのタイミングとすることができる。さらには、コンテンツの再生中にＣＭが再生されていることが検出されたタイミング、コンテンツを再生中の出力する音声信号の音量ないし音質が所定の条件に該当するタイミングなどを適宜予め定めておくことができる。
【００３７】
特定のタイミングでユーザの状態を認識し、コンテンツの評価結果を判定することで、
コンテンツに対する評価情報の入力に係る負担をユーザに強いることなく、ユーザの評価を確実にかつ正確に取得して収集し、管理することができる。
【００３８】
図２は、本発明に係る表示装置の構成例を示すブロック図で、本発明の表示装置をテレビ受像機として構成した例を示すものである。
表示装置１０の各部の動作は、制御部２６により制御される。制御部２６は、ＣＰＵ（Central Processing Unit）により構成することができる。記憶部２７は、装置各部を制御し、本発明に係る実施形態の処理を実行するための各種制御プログラムが記憶されたメモリであり、制御部２６は、この制御プログラムを読み出して実行することで本発明の実施形態の機能が実現される。すなわち、表示装置１０は、制御部２６を含むコンピュータ・システムによって制御されている。
【００３９】
チューナ部１１は、放送受信用アンテナ３０を介して受信したテレビ放送信号を、選局部１５による選局指示に応じて選局する。チューナ部１１から出力された受信信号は、復調部１２にて復調され、分離部１４に送られる。分離部１４は、復調部１２またはＩＰ放送チューナ部１３からの受信信号を受け取り、多重化された映像データおよび音声データを分離して、映像データを映像処理部１６に送るとともに、音声データを音声処理部１９に送る。
【００４０】
映像処理部１６は、分離部１４によって分離された映像データをデコードし、各種の映像処理、例えばノイズリダクション、シャープネス、コントラスト等を調整する映像処理を行い、表示部１８に表示させる最適な映像信号となるように映像データを変換する。
表示制御部１７は、受信した映像データを表示部１８に表示させるための駆動回路を含み、表示部１８の表示を制御する。表示部１８は、例えば液晶パネルなどの表示デバイスを含み、表示制御部１７から出力された映像データを画面に表示する。
【００４１】
音声処理部１９は、分離部１４によって分離された音声データをデコードし、得られた音声信号をスピーカ２０による再生に最適な信号に変換してスピーカ２０に供給する。スピーカ２０からは音声が出力される。
【００４２】
通信部２１は、電話回線、ＬＡＮ、インターネット等のネットワーク網を介して通信を確立させるように制御を行う。
操作入力部２２は、ユーザによる操作入力を受け付ける。例えば、特定のリモコンからの光信号を受信して、制御信号を受け付けるリモコン受光部を含むことができる。また、ユーザ操作が可能に設けられたタッチパネル、キー、ボタンなどにより、ユーザの操作入力を受け付けるように構成することができる。
【００４３】
撮像部２３は、ユーザを撮像するためのものであり、例えば、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）を撮像素子として有する公知のデジタルカメラを用いることができる。撮像部２３は、撮像した画像データを制御部２６に送信する。
音声取得部２４は、表示装置１０の周囲で発せられた音声を取得するマイクロホンを有する。音声取得部２４により取得した音声信号は、制御部２６に送信される。
【００４４】
制御部２６は、本発明に係る実施形態の機能を実現するための制御を行う。例えば制御部２６の機能として、表示装置１０で再生するコンテンツの評価結果を所定の判定処理により判定する判定部２６ａと、判定部２６ａで判定された評価結果に基づき、コンテンツの評価情報を生成する評価情報生成部２６ｂとを備える。
判定部２６ａは、コンテンツの再生中に特定のタイミングで表示装置１０の周囲のユーザの状態を認識し、認識した結果に基づきユーザによるコンテンツの評価結果を判定する。評価情報生成部２６ｂは、判定部２６ａが判定した結果を集計してコンテンツの評価情報を生成する。
【００４５】
判定部２６ａでは、例えば、撮像部２３が撮像した画像によりユーザの状態を解析し、その解析結果に従ってユーザの状態を認識する。例えば、撮像されたユーザのジェスチャが所定の動作であるかに応じてユーザの状態を認識し、その認識結果に従ってユーザの評価結果を判定する。また、撮像部２３が撮像した画像に複数のユーザが含まれている場合、それぞれのユーザの動作を認識して、複数の評価結果を得るようにすることができる。また、ユーザのジェスチャ動作などの積極的で明示的な行動だけでなく、暗黙的な動作を認識して評価結果を判定するようにしてもよい。
【００４６】
暗黙的な動作としては、例えば、表示装置１０の周囲でユーザが座っている位置や、パターン認識等により識別するユーザの座り方、撮像画面におけるユーザの顔や手の大きさ、ユーザの表情（泣き顔や笑い顔）などを認識して、評価結果を判定するようにしてもよい。画像内におけるユーザの顔や手の大きさを認識する場合は、その大きさが大きいほど表示装置の近くにいて、コンテンツに興味を持っていることが推定できる。この場合、表示装置１０に赤外線等による距離センサを設け、検出した顔や手の大きさを距離に応じて補正するようにしてもよい。
【００４７】
また、ユーザが行うジェスチャに対応する評価結果が判定できなかった場合、ジェスチャに対応する評価結果をユーザに再度確認することもできる。この場合、確認画面を表示させてユーザに再度ジェスチャを行わせたり、他の入力手法で応答させるようにすることができる。そしてこの場合、判定部２６ａに学習機能を設け、曖昧で判定できなかったジェスチャ動作に対して、次回から評価結果を判定できるようにすることができる。判定部２６ａの学習機能は、上記のジェスチャ判定だけでなく、判定部２６ａにおける種々の判定処理に適用することができる。
【００４８】
つまり判定部２６ａは、ユーザの状態を認識するための情報として、ジェスチャ動作やユーザの表情、その他の暗黙的動作、あるいは後述するユーザの音声や所定の操作入力の情報を取得し、これらのユーザの状態を認識するための情報に従ってユーザの状態を認識する。このときこれらのユーザの状態を認識するための情報によりユーザの状態を認識することができなかった場合、所定の入力手段を使用して入力されたユーザの状態を示す情報を取得する。所定の入力手段は、再度ジェスチャを行わせるときの撮像部２３であったり、音声を再入力させる音声取得部２４であったり、操作入力を行わせる操作入力部２２であったりする。ユーザの状態を示す情報は、ジャスチャなどの明示的情報だけでなく、ユーザの位置や形態などの暗黙的情報であってもよい。そして上記のユーザの状態を認識するための情報と、上記の所定の入力手段を使用して入力されたユーザの状態を示す情報との関連付けを学習し、以後その学習結果を使用して、ユーザの状態を認識するための情報に基づいて、ユーザの状態を認識することができる。
【００４９】
判定部２６ａでは、音声取得部２４により取得された音声に基づいてユーザの状態を認識し、ユーザの評価結果を判定することができる。例えば、ユーザにより発生された音声を音声認識し、音声認識した結果に応じてユーザの評価結果を判定することができる。この場合にも複数のユーザによる音声が認識された場合、それぞれのユーザの音声認識に従って複数の評価結果を判定させるようにすることができる。
【００５０】
あるいは、判定部２６ａは、操作入力部２２に対する操作入力に従って、ユーザの状態を認識し、その認識結果に応じてユーザの評価結果を判定することができる。例えば、リモコンキーに応じて評価結果を定めておき、特定のタイミングで操作されたリモコンキーに応じてユーザの評価結果を判定することができる。
【００５１】
ユーザの評価結果としては、例えば、コンテンツの賛否、例えばコンテンツＡや広告Ａを支持する、あるいは支持しない、などの結果を判定させることができる。あるいは、広告Ａで提供される商品が欲しい、欲しくないなどの評価として判定させることもできる。この場合、Ｙｅｓ、Ｎｏ、どちらでもない、等の３つの選択肢程度をユーザがジェスチャ等で選択できるようにすることが好ましいが、この手法に限定されない。これらの評価結果は、上記のユーザの状態に認識結果に応じて、予め適宜定めておくことができる。また、コンテンツの評価結果を操作入力部を使用した自由入力文で入力させることも可能とすることができる。
【００５２】
上記の判定処理においては、上記の複数の判定処理のいずれか１つを使用して評価結果を判定するようにしてもよく、あるいは複数の判定処理を組み合わせて使用してもよい。複数の判定処理を使用する場合、例えばその判定処理に優先順位をつけて判定を行わせることができる。例えば、操作入力に応じた判定処理、ユーザのジェスチャに応じた判定処理、音声の解析による判定処理の順に優先順位を付けて判定処理を行うようにすることができる。
また、上記のような操作入力判定、ジェスチャ判定、音声解析などの明示的な動作と、ユーザの座る位置などの暗黙的動作とを組わせて判定処理を行うようにすることで、例えば、明示的な動作が曖昧であり判定が難しい場合には、暗黙的動作に基づき自動判定することができる。この場合、アクションを行ったのに判定されない、という認識をユーザに持たせることなく、ユーザの暗黙的動作から判定処理を実行することができる。
【００５３】
上記の判定部２６ａの機能は、ユーザの評価結果を判定するための機能を実現するための例であり、制御部２６ではこれら全ての機能を備えることは必須ではなく、採用する判定処理に応じて、その判定処理を実施するための機能を設けるようにすることができる。
【００５４】
また、判定部２６ａによってユーザの評価結果を判定する特定のタイミングは、制御部２６の処理により判断することができる。例えば、制御部２６の機能として、再生するコンテンツの画像を解析して、解析した画像に特定の画像が含まれているか否かを判断するコンテンツ画像解析部２６ｃを設ける。特定の画像は、例えば特定の文字列であったり、特定の物体などを予め定めておくことができる。
画像解析は、公知の手法により実施することができ、例えばパターンマッチングなどにより画像解析を行う。制御部２６では、コンテンツ画像解析部２６ｃにより特定の画像が再生コンテンツに含まれると判断されたときを特定のタイミングとして、判定部２６ａにより、ユーザによるコンテンツの評価を判定する。
【００５５】
また、コンテンツ画像解析部２６ｃが、再生するコンテンツの映像信号から映像の明るさ（輝度）ないし色調（色度）を抽出し、その明るさまたは色調の変化が所定条件に該当すると判断したときを特定のタイミングとすることができる。所定の条件としては、例えば、映像の明るさの変化量、あるいは色度の変化量が所定レベル以上で、画面が大きく切り換えられたと判断されるときを特定のタイミングとして判定することができる。
【００５６】
また、特定のタイミングを判定する制御部２６の他の機能として、撮像部２３で撮像された画像を解析して、解析した画像に所定の画像が含まれているか否かを判断する撮像画像解析部２６ｄ設ける。画像解析は、公知の手法により実施することができ、例えばパターンマッチングなどにより画像解析を行う。制御部２６では、撮像画像解析部２６ｄにより所定の画像が再生コンテンツに含まれると判断されたときを特定のタイミングとして、判定部２６ａにより、ユーザによるコンテンツの評価を判定する。もしくは、特定の物体をユーザが手に持ったときなど、予めトリガを決めておき、それを特定のタイミングとすることも可能である。具体例としては、ユーザが赤紙を表示装置に向けた場合、ユーザは、再生中のコンテンツやＣＭなどに対して拒絶反応を示しているとして評価することができる。
【００５７】
また、特定のタイミングを判定する制御部２６の他の機能として、再生するコンテンツに所定のメタデータ含まれているか否かを判別し、またメタデータの内容を解析するメタデータ解析部２６ｅを設ける。制御部２６では、メタデータ解析部２６ｅにより所定のメタデータが再生コンテンツに含まれると判断されたとき、そのメタデータに従うタイミングとして、判定部２６ａにより、ユーザによるコンテンツの評価を判定する。
【００５８】
また、特定のタイミングを判定する制御部２６の他の機能として、音声取得部２４により取得した音声信号に所定の音声情報が含まれているか否かを解析する取得音声解析部２６ｆを設ける。制御部２６では、取得音声解析部２６ｆにより所定の音声情報が取得されたと判断されたときを特定のタイミングとして、判定部２６ａにより、ユーザによるコンテンツの評価を判定する。この場合、取得音声解析部２６ｆにて、特定のタイミングであることを判定し、特定のタイミングであるときに判定部２６ａによる音声認識処理を行うことにより、ユーザの評価結果を判定させることができる。
【００５９】
また、特定のタイミングを判定する制御部２６の他の機能として、コンテンツを再生中に、ＣＭ（commercial message）が再生されているか否かを検出するＣＭ検出部２６ｇを設ける。ＣＭ検出部２６ｇによるＣＭ検出には公知の技術を採用することができる。
例えば、放送番組等では、ＣＭの前後に同一のシーンを繰り返して放送するケースが多く、表示装置で放送コンテンツを再生する際に、所定時間内で同一のシーンが繰り返して再生されたことを検出し、検出された場合には、その間にＣＭが放送されたことを検出することができる。
【００６０】
また、ＣＭ検出の他の例として、放送局側で、放送信号のＰＳＩ／ＳＩ情報、または番組の映像データに対してＣＭであることを区別できる識別情報を付加して放送することにより、表示装置１０のＣＭ検出部２６ｇは、その識別情報を識別することで再生コンテンツのＣＭを検出することができる。
【００６１】
また、ＣＭ検出の他の例として、出力形式の相違によりＣＭ判定を行うようにしてもよい。一つの番組として完成されたコンテンツはその出力形式が統一されている。出力形式は、コンテンツの番組データに含まれるＰＳＩ／ＳＩ情報の番組情報から取得することができ、例えばアスペクト比や、解像度、音声情報等の出力形式を特定できる情報が取得できる。ＣＭ検出部２６ｇは、この出力形式を特定できる情報を取得し、コンテンツの再生中に番組データから取得された出力形式とは異なる出力形式が取得されたときに、ＣＭが再生中であることを検出することができる。
【００６２】
この他、ＣＭ検出部２６ｇでは、例えば、毎時００分、１５分、３０分、４５分などの所定時刻を含む所定の時間帯をＣＭの放送時間であると推定し、その放送時間にＣＭが再生されているものとしてＣＭ検出を行うようにしてもよい。
もしくは、ＣＭは番組コンテンツと比較して音量が大きく、明るい傾向があるため、音量や輝度の情報が一定以上であれば、ＣＭが再生されているものとして検出してもよい。
制御部２６では、ＣＭ検出部２６ｇよりＣＭが再生されていることが検出されたときを特定のタイミングとして、判定部２６ａにより、ユーザによるコンテンツの評価を判定する。
【００６３】
また、特定のタイミングを判定する制御部２６の他の機能として、コンテンツの再生中にスピーカから出力させる出力音声のボリューム値や音質が所定の条件に該当するか否かを判定する出力音声解析部２６ｈを設ける。
制御部２６は、出力音声解析部２６ｈによって出力する音声が所定条件に該当すると判定されたときを特定のタイミングとして、判定部２６ａにより、ユーザによるコンテンツの評価を判定させる。所定の条件としては、例えば、コンテンツなにおける音量変化の状態を定めておくことができる。ここでは例えば、一定時間における音量レベルを示す特定のパラメータの積分値、あるいは音質を示す特定のパラメータの積分値を計算し、その積分値が所定条件に該当するときに特定のタイミングとして判定することができる。
【００６４】
また、特定のタイミングを判定する制御部２６の他の機能として、図示しないタイマにより時間をカウントすることで、所定の時間間隔で特定のタイミングを設定し、判定部２６ａによりコンテンツのユーザ評価を判定するようにしてもよい。
【００６５】
上記の特定のタイミングの判定機能は、ユーザの評価情報を生成する特定のタイミングを判定するための機能を実現する例であり、表示装置１０では、これら全ての機能を備えることは必須ではなく、採用する特定のタイミングの判定処理に応じて、その判定処理を実施するための機能を設けるようにすればよい。
【００６６】
上記のように制御部２６の判定部２６ａでは、特定のタイミングで所定の判定処理によりユーザの状態を認識し、コンテンツに対するユーザの評価を判定する。
例えば、コンテンツの再生中に長時間にわたってユーザの状態を認識して、評価結果を判定したとしても、局所的にはユーザは相反する評価を行うこともあり、評価結果を正しく判定することができない場合もある。また、ユーザに評価結果を入力させる場合には、長時間のコンテンツの再生中に入力を続けることはユーザの負担を招く。
特定のタイミングでユーザの評価結果を判定することにより、ユーザに過度の負担をかけることなく、ユーザの評価を確実にかつ正確に取得して収集して管理することができるようになる。
【００６７】
なお、特定のタイミングでユーザの評価結果を判定するときに、制御部２６は、特定のタイミングに合わせて表示制御部１７を制御して、評価結果を集計中であることを表示するともに、コンテンツを評価するために予め定められた動作を行うようユーザに要求する要求画面を表示部１８に表示させることができる。
【００６８】
図３は、ユーザに対する動作の要求画面の一例を示す図である。特定のタイミングであることが判断されると、表示制御部１７は、表示部１８に対して図３のような画面を表示させることができる。この例では、ユーザに対して特定のジェスチャである“万歳”、または“片方の手を上げる”動作を行うよう要求する表示を行う。この表示を見たユーザは、再生中のコンテンツに関して、自己の評価に応じてジェスチャ動作を行う。
【００６９】
また、例えばＣＭ検出によりＣＭが再生されていることを検出したときには、ＣＭにより提供される商品等を希望するか、希望しないかなどを質問する表示を行って、ユーザに動作を要求するなどの処理を行うものであってもよい。
表示装置１０の撮像部２３は、この画像を撮像し、判定部２６ａにてジェスチャの動作を認識して、ユーザの評価結果を判定する。判定処理は所定の時間内に行うようにするが、例えば同じシーンが繰り返し再生されてＣＭであると判定されたときに、前回と同じシーンが再生されている間、ユーザによるジェスチャ動作等を判定するようにしてもよい。この場合、所定の時間内では、評価結果のカウンタをリセットすることなく、カウントを継続して行うようにする。例えば所定の時間内に複数のユーザがそれぞれ所定のジェスチャを行った場合には、所定の時間内であればそれぞれの評価結果を累積してカウントする。
【００７０】
要求画面は、このような特定のジェスチャを行うことを要求する画面だけでなく、判定部２６ａの機能に応じて、例えば、特定の音声を発するようユーザに要求したり、特定の操作入力を行うようユーザに要求したりするように定めることができる。
このような要求画面の表示を行うことで、ユーザは、その要求画面が表示されたときに、コンテンツを評価する動作を行えばよく、コンテンツ評価のためのユーザの負担を過度に増大させることなく、確実に評価結果を得ることができるようになる。
【００７１】
図４は、本発明による表示装置の処理の流れと各動作を概念的に説明するための図である。表示装置１０では、特定のタイミングを検出することにより、表示装置１０の周囲のユーザの状態を認識し、ユーザによるコンテンツの評価結果を判定する処理を開始する。
特定のタイミングの判定処理２０１では、検出処理２１０に示す各検出処理２１０による検出結果により、特定のタイミングであることが判定される。
特定のタイミングは、上記のように予め定められたタイミングとし、特定のタイミングの検出処理にその処理例が示される。検出処理の期間は適宜定めことができるが、例えば、ユーザが所定のジェスチャを行ったり、音声を発声したり、所定の操作入力を行う期間として数分の期間を設定することができる。表示装置１０には、この特定のタイミングを検出するための必要な構成が備えられる。
【００７２】
検出処理２１０に示されるように、特定のタイミングは、再生コンテンツに所定の画像が含まれるタイミングであり、ここでは、例えば画像内泣き顔検出２１１や画像内笑い顔検出２１２により、画像内の人物の泣きや笑い顔が検出されたときに、特定のタイミングと判断することができる。
画像内の人物の表情を解析する技術は、各種の技術が知られている。本発明では表情解析技術自体を特徴付けるものではなく、適宜公知の技術を適用して画像内の人物の表情解析を行わせることができる。
【００７３】
一例として、例えば特許２８３９８５５号公報には、入力映像から静止画を抽出し、その特徴ベクトルを輝度哀楽などのカテゴリ別に量子化し、各カテゴリの表情を高精度に認識するための技術が開示されている。あるいは、特許２８３９８５５号公報には、顔の表情を認識する装置が開示されている。あるいは、特許２９６２５４９号公報には、不特定多数の人物の顔画像から、その表情を認識するための技術が開示されている。
特定のタイミングの判定処理２０１では、上記のような表情解析より、例えば画像内の人物の泣き顔が検出された場合や、あるいは人物の目尻が下がっているなどの特徴を検出した場合、笑い顔が検出された場合、等を特定のタイミングとして判定する。笑い顔を判定する場合には、画像解析のみならず、例えばコンテンツの音声データを解析して音声のトーンのレベルや変化パターン等から笑い声であることを検出して特定のタイミングとして判定するようにしてもよい。
【００７４】
また、画像内の所定の画像として、特定の文字列を検出したときに特定のタイミングと判定することもできる。例えば、スポンサー表示検出２１３により、再生するコンテンツの画像に、“提供”、あるいは“スポンサー名“などの予め定めたスポンサー表示に関連する特定の文字列が含まれていることを検出したときに、特定のタイミングであるとして判定する。これにより例えばスポンサーが提供する放送コンテンツの評価結果を、そのスポンサーに関連する表示が行われているときに取得することができる。
【００７５】
あるいは、特定物体検出２１４により、画像内の所定の画像として特定の物体を検出したときに特定のタイミングと判定することもできる。特定の物体としては、例えば“特定メーカの清涼飲料水の缶”や“ビールの缶”などの物体を事前に登録しておくことができる。このような物体は、例えばステルスマーケティングなどに用いられる可能性があり、このような物体の表示時にコンテンツの評価結果を取得することで、スポンサーに関連する場面での評価結果を取得することができる。
【００７６】
検出処理２１０の他の例では、ＣＭ検出２１５によりコンテンツの再生中にＣＭが再生されたことを検出したときに、特定のタイミングであると判定することができる。ＣＭ検出は上述したように、同一シーンが繰り返し再生された場合や、放送コンテンツにＣＭを示す識別情報が含まれていた場合、あるいは出力形式の変化、所定時刻を含む時間帯などに基づきＣＭ検出を行うことができる。
【００７７】
検出処理２１０の他の例では、タイマ検出２１６により、一定の時間間隔で特定のタイミングであることを検出することができる。ここでは図示するように、特定のタイミングの判定処理２０１は、タイマによりカウントされた時間情報２２２を使用して特定のタイミングであることを判定する。また、特定の時刻を特定のタイミングとして設定するようにしてもよい。
また、検出処理２１０の更に他の例では、音声ボリューム検出２１７により、コンテンツを再生中の音声信号の音量（ボリューム）が所定の条件にある場合、あるいは音質が所定の条件にある場合に、特定のタイミングであると判定することができる。
【００７８】
検出処理２１０の他の例では、メタデータ検出２１８により、再生するコンテンツに所定のメタデータが含まれている場合、メタデータに従うタイミングを特定のタイミングであると判定することができる。ここでは図示するように、特定のタイミングの判定処理２０１は、放送波に含まれる放送波情報２２１により、特定のタイミングであることを判定する。
【００７９】
ここで特定のタイミングは、メタデータ検出２１８により特定のメタデータが検出されたときとすることができるが、この他、メタデータにより指定されたタイミングを特定のタイミングとすることもできる。例えば、メタデータにより、コンテンツの章の終わりや、クライマックスシーンの後などのタイミングを特定のタイミングとして定めることができる。特定のメタデータとしては、例えば特定のキーワードや質問文を予め定めておくことができる。コンテンツをユーザに提供する放送事業者やコンテンツ制作者等は、コンテンツの所定の位置に、ユーザの感想を求めるメタデータを適宜含ませておくことができる。そしてその所定の位置が再生されれば、表示装置では特定のタイミングであると判定され、ユーザの状態を認識して評価結果を判定する処理が行われる。
【００８０】
検出処理２１０の他の例では、映像明るさ検出処理２１９により、再生するコンテンツの映像信号の明るさや色調が所定の条件に該当するときに、特定のタイミングと判断することができる。
【００８１】
上記のような検出処理２１０により、特定のタイミングであることが検出されると、表示装置では、集計開始の表示処理２０２を行う。集計開始の表示は、ユーザによるコンテンツの評価情報を集計する処理を実行していることを示す表示を行う。ここでは例えば表示部１８の表示画面に、“集計中”との表示を行わせることができる。集計中を表示する表示画面では、図３に示すようなユーザに対する所定の動作を要求する表示を行うことができる。
【００８２】
次に表示装置１０では、判定処理２０３によりユーザの状態を認識し、その認識結果に従ってユーザによるコンテンツの評価結果を判定する。判定処理２０３は、上述したように、ユーザによるジェスチャ動作や、ユーザによる音声入力、ユーザによるリモコン等に対する操作入力などに基づいて実行することができる。従ってこの判定処理２０３では、図示するようにリモコン情報２２３、カメラ情報２２４、マイク情報２２５などによりユーザの評価結果を判定することができる。
【００８３】
また、判定処理２０３により、評価結果を判定するときに、撮像部２３により撮像した画像を解析することで、コンテンツを視聴しているユーザの数や内訳（性別）を判定し、評価結果の一部として使用するようにしてもよい。
【００８４】
上記の判定処理２０３により評価結果が判定されると、集計処理２０４により評価結果の集計を行う。集計では、その表示装置１０で評価されたコンテンツの評価結果を集計する処理を行う。また、上記のように、コンテンツを視聴しているユーザの数や内訳を集計する処理を行うことができる。
【００８５】
集計処理２０４により集計された評価結果は、結果表示処理２０５により、表示部１８の表示画面に表示される。ここでは、例えば“ただ今の集計結果は・・”との表示を行った後、集計結果を表示させるようにすることもできる。
【００８６】
集計処理２０４により集計された評価結果は、データ通信２０６によってネットワークデータ２２６とされ、所定のサーバ装置に送信することができる。サーバ装置では、複数の表示装置１０から送信された評価結果をデータベースに蓄積し、ユーザから利用可能とする。
また、データベースに蓄積された評価結果は、ネットワークデータ２２６としてデータ通信２０６により各表示装置１０に送信され、表示装置１０で、結果表示処理２０５により表示させることができる。
【００８７】
評価結果の集計とその集計結果の表示は、コンテンツの評価結果が判定されるごとに行ってもよく、あるいはコンテンツの再生終了時などの所定のタイミング、もしくは所定のユーザ操作に基づくタイミングで行うようにしてもよい。
ここでは、タイマ装置により現在の時刻や前回の処理からの経過時間等を計測し、処理のタイミングを判断することができる。例えば、集計処理の実行、集計結果の表示、データベースの評価結果の表示等を予め定めたタイミングで実行することができる。
【００８８】
図５は、本発明による表示システムのサーバ装置に蓄積されたデータベースのデータ例を説明するための図である。上記のようにサーバ装置には、複数の表示装置から送信されたコンテンツの評価情報が蓄積される。
蓄積された評価情報は、例えば図５の例にように構成されて管理される。この例では、データベースには、コンテンツの視聴者（ユーザ）の視聴人数・構成（図５（Ａ））と、ユーザによるコンテンツの支持、不支持の結果（図５（Ｂ））、及び広告により提供される商品の希望・不希望の結果（図５（Ｃ））が記録されている。
【００８９】
例えば図５（Ａ）の視聴者人数・構成では、サーバ装置に接続される表示装置（ここではテレビ）ごとに、再生されたコンテンツを視聴している視聴者の人数と、その性別が記録されている。なお、広告Ａとして示されるＣＭについても評価対象のコンテンツの一種であるものとする。視聴者の人数やその性別は、表示装置１０における撮像画像を、表示装置１０で解析することで判定された情報を用いることができる。
【００９０】
図５（Ｂ）のコンテンツの支持、不支持の結果では、テレビごとに、再生コンテンツ（広告も含む）に対するユーザの支持・不支持の情報が蓄積される。支持・不支持の情報は、表示装置１０にてユーザのジェスチャ動作の解析や音声解析、所定の操作入力等に基づいて判定された情報である。
また、図５（Ｃ）の広告により提供される商品の希望・不希望の結果では、テレビごとに、広告コンテンツ（ＣＭ）により提供される商品等をユーザが希望するか否か、つまりその商品等をユーザが欲しいか否かの情報が蓄積される。この情報についても、表示装置１０にてユーザのジェスチャ動作の解析や音声解析、所定の操作入力等に基づいて判定された情報が用いられる。
【００９１】
サーバ装置では、データベースへのアクセス権を設定し、アクセス権が付与された利用者やシステムに対して、データベースの蓄積データを提供できるようにすることができる。アクセス権は、例えば、コンテンツを放送する放送事業者や、放送番組を提供する広告主などに与えることができる。これにより放送事業者が視聴率を判断したり、広告主が広告効果を判断したり、あるいはコンテンツ制作者がコンテンツ自体の評価を知ることができ、表示システムの運用における満足度を向上させることができる。また、表示システムの運営主体は、データベースへのアクセス権を販売することもできる。
データベースへのアクセス権については、例えば図５（Ａ）〜図５（Ｃ）の全ての蓄積データに対してではなく、部分的に特定の利用者に与えることもできる。例えば、放送事業者に対しては、図５（Ａ）の視聴人数・構成に係る蓄積データのみをアクセス可能とし、広告主には、図５（Ｃ）の商品の希望・不希望の結果のみにアクセス可能とするように設定することができる。
【００９２】
そして、データベースに蓄積された評価結果を表示装置１０で表示できるようにすることにより、表示装置１０のユーザは、他のユーザの評価結果を知ることができる。これにより、ユーザ間での一体間を感じたり、世論を肌で感じることができるという効果が得られる。そしてユーザは、世の中に対して自分の意見を発信しているという気分になることもでき、ジェスチャ等により評価結果を入力することにインセンティブを与えることにもつながる。
また、ユーザに対してコンテンツの評価に関する興味を抱かせることで、ＣＭによる広告効果が向上するなども期待できる。あるいは、コンテンツを評価することがユーザにとって楽しみとなる、という効果により、放送コンテンツをリアルタイムでユーザが視聴する機会が増え、コンテンツの視聴率を高くしたり、録画視聴を減少させることが期待でき、コンテンツ配信に関わる業界の利益に寄与することができる。
【００９３】
評価結果の集計とその集計結果の表示は、コンテンツの評価結果が判定されるごとに行ってもよく、あるいはコンテンツの再生終了時などの所定のタイミング、もしくは所定のユーザ操作に基づくタイミングで行うようにしてもよい。
ここでは、タイマ装置により時刻や、前回の処理からの経過時間等を計測し、処理のタイミングを判断することができる。例えば、集計処理の実行、集計結果の表示、データベースの評価結果の表示等を予め定めたタイミングで実行することができる。
【００９４】
本発明の実施形態を構成する上記の各技術的特徴は、任意に組み合わせが可能であり、組わせることにより、それぞれ新しい技術的特徴を形成することができる。
【符号の説明】
【００９５】
１０…表示装置、１１…チューナ部、１２…復調部、１３…ＩＰ放送チューナ部、１４…分離部、１５…選局部、１６…映像処理部、１７…表示制御部、１８…表示部、１９…音声処理部、２０…スピーカ、２１…通信部、２２…操作入力部、２３…撮像部、２４…音声取得部、２６…制御部、２６ａ…判定部、２６ｂ…評価情報生成部、２６ｃ…コンテンツ画像解析部、２６ｄ…撮像画像解析部、２６ｅ…メタデータ解析部、２６ｆ…取得音声解析部、２６ｇ…ＣＭ検出部、２６ｈ…出力音声解析部、２７…記憶部、３０…放送受信用アンテナ、５０…ユーザ、１００…サーバ装置、２００…検出処理、２０１…特定タイミングの判定処理、２０２…表示処理、２０３…判定処理、２０４…集計処理、２０５…結果表示処理、２０６…データ通信、２１０…検出処理、２１１…画像内泣き顔検出、２１２…画像内笑い顔検出、２１３…スポンサー表示検出、２１４…特定物体検出、２１５…ＣＭ検出、２１６…タイマ検出、２１７…音声ボリューム検出、２１８…メタデータ検出、２１９…検出処理、２２１…放送波情報、２２２…時間情報、２２３…リモコン情報、２２４…カメラ情報、２２５…マイク情報、２２６…ネットワークデータ。
【図１】
2014060642.tif 000003
【図２】
2014060642.tif 000004
【図３】
2014060642.tif 000005
【図４】
2014060642.tif 000006
【図５】
2014060642.tif 000007