(57)【特許請求の範囲】
【請求項１】
複数人で団欒視聴中のテレビを制御するテレビ制御装置において、
複数人の注目によるテレビの視聴度合いと前記複数人の発話による場の盛上り度合いとの各時間変化と、前記テレビを視聴している人数と、に応じて定めた各イベント情報をイベントテーブルに記憶しておく記憶手段と、
前記複数人を撮影した映像データを用いて前記視聴度合いと前記テレビを現在視聴中の人数とを計算し、前記複数人の発話による音声データを用いて前記盛上り度合いを計算する解析手段と、
前記記憶手段からイベントテーブルを読み出して、過去と現在でそれぞれ計算された前記視聴度合い及び前記盛上り度合いの各時間変化と前記現在視聴中の人数とに対応するイベント情報を判定する判定手段と、
判定されたイベント情報の内容がコンテンツ制御に関する場合、外部から取得した情報に基づいて前記複数人への推薦コンテンツを決定する推薦手段と、
決定された推薦コンテンツを前記テレビの画面に表示させる制御手段と、
判定されたイベント情報の内容がコンテンツ制御以外の場合、当該内容に基づいて前記テレビの機能を制御する制御手段と、
を備えることを特徴とするテレビ制御装置。
【請求項２】
前記推薦手段は、
外部ネットワークを介して電子番組情報を取得し、現在放送中の放送番組に関する複数のキーワードを抽出して、ソーシャル・ネットワーキング・サイトへの書込み数を集計し、最高書込み数のキーワードを持つ放送番組を前記推薦コンテンツとして決定する請求項１記載のテレビ制御装置。
【請求項３】
複数人で団欒視聴中のテレビを制御するテレビ制御方法において、
テレビ制御装置により、
複数人の注目によるテレビの視聴度合いと前記複数人の発話による場の盛上り度合いとの各時間変化と、前記テレビを視聴している人数と、に応じて定めた各イベント情報を記憶手段のイベントテーブルに記憶しておく記憶ステップと、
前記複数人を撮影した映像データを用いて前記視聴度合いと前記テレビを現在視聴中の人数とを計算し、前記複数人の発話による音声データを用いて前記盛上り度合いを計算する解析ステップと、
前記記憶手段からイベントテーブルを読み出して、過去と現在でそれぞれ計算された前記視聴度合い及び前記盛上り度合いの各時間変化と前記現在視聴中の人数とに対応するイベント情報を判定する判定ステップと、
判定されたイベント情報の内容がコンテンツ制御に関する場合、外部から取得した情報に基づいて前記複数人への推薦コンテンツを決定する推薦ステップと、
決定された推薦コンテンツを前記テレビの画面に表示させる制御ステップと、
判定されたイベント情報の内容がコンテンツ制御以外の場合、当該内容に基づいて前記テレビの機能を制御する制御ステップと、
を備えることを特徴とするテレビ制御方法。
【請求項４】
前記推薦ステップは、
外部ネットワークを介して電子番組情報を取得し、現在放送中の放送番組に関する複数のキーワードを抽出して、ソーシャル・ネットワーキング・サイトへの書込み数を集計し、最高書込み数のキーワードを持つ放送番組を前記推薦コンテンツとして決定する請求項３記載のテレビ制御方法。
【請求項５】
請求項３又は４記載のテレビ制御方法をコンピュータに実行させることを特徴とするテレビ制御プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、テレビを制御する技術に関する。
【背景技術】
【０００２】
テレビの視聴方法として、ユーザがリモコンを用いてテレビの電源を付け、所期番組を選択するという視聴行為は一般的である。近年、このような視聴行為に対し、ユーザの状況を推定する技術（以下、状況推定技術）を活用することにより、ユーザの現状況に応じてテレビを自動制御する技術が提案されている。
【０００３】
例えば、非特許文献１によれば、テレビ操作制御技術に関し、ユーザの存在やその動きを感知して、リモコンを利用することなく自動で電源をオンオフする技術が開示されている。具体的には、ユーザが部屋から出て誰もテレビを観ていないとされる場合や、ユーザの視線方向を認識して視聴していないとされる場合には、消画する。
【０００４】
また、そのようなユーザの表層的な状況のみでなく、ユーザの心的な状況を推定して画面表示対象コンテンツの検索処理や推薦処理に役立てる技術も提案されている。例えば、非特許文献２によれば、非特許文献３の「顔の変化度合測定」技術を用いて、視聴中の番組に対するユーザの関心の高さを推定する技術が開示されている。
【０００５】
具体的には、視聴中のユーザの顔画像とそのユーザの基準顔画像のＳＵＲＦ（Speed-Up Robust Features）を取得し、ｋ−ｍｅａｎｓ法（Ｋ平均法）によりクラスタに分類してその要素数を比較して顔表情の変化度を計算し、その変化度が大きい番組場面を当該ユーザの関心度が高いものとしてブックマークを付与し、再視聴のためのインデキシングに利用する。
【先行技術文献】
【非特許文献】
【０００６】
【非特許文献１】鶴見辰吾、「小特集  画像認識とヒューマンインタフェース、３．画像認識を応用したヒューマンインタフェース、３−１．インテリジェント人感センサ」、映像情報メディア学会誌、Vol.64、No.12、2010年、p.1809-1811
【非特許文献２】苗村昌秀、外５名、「小特集  画像認識とヒューマンインタフェース、３．画像認識を応用したヒューマンインタフェース、３−３．視聴状況に基づいたテレビインタフェース」、映像情報メディア学会誌、Vol.64、No.12、2010年、p.1816-1819
【非特許文献３】奥田誠、外１名、「画像処理による顔の変化度合測定」、2010年映像情報メディア学会年次大会予稿集、2010年
【発明の概要】
【発明が解決しようとする課題】
【０００７】
一方、一般的なテレビの視聴形態の一つに、テレビを囲んで複数ユーザで団欒しながら視聴するスタイルが存在する。この団欒視聴スタイルでは、何か他の作業を行いながら視聴したり、ユーザ同士が会話をしながら視聴したりと、テレビの画面を特に注視することなく受動的に映像を視聴することが多い。
【０００８】
このとき、ユーザの意図とは無関係に次々とコンテンツが画面に表示されるが、その場の雰囲気に応じて適切に「テレビの電源を落とす」、「音量を上げ下げする」、「チャンネルを変える」等の操作が行われることがある。
【０００９】
そこで、こうしたテレビの団欒視聴時に、その場の雰囲気を推定することにより、リモコン操作することなくテレビの基本機能や表示コンテンツを自動制御できれば極めて利便性が高いと言える。
【００１０】
しかしながら、非特許文献１の従来技術によれば、単にユーザの存在や動作の感知信号に基づいてテレビを制御するため、ユーザの表層的な状況を推定するに留まり、場の雰囲気といったユーザの心的要素が含まれる状況を推定して制御することはできない。
【００１１】
一方、非特許文献２の従来技術によれば、顔画像情報から取得した表情変化に基づいてユーザの心的状況を推定することは可能である。しかし、団欒視聴時には、ユーザ同士が会話している状況が存在し、観測用の撮像機器に対して常に顔を向けているとは限らないため、団欒視聴時下での心的状況を推定する手段としては適切ではない。
【００１２】
また、非特許文献２で推定されるユーザの心的状況は、番組の関心度といった個人を中心としたものにすぎず、複数ユーザによって構成される団欒視聴場での心的状況を推定することはできない。
【００１３】
すなわち、複数ユーザによるテレビの団欒視聴時に、そのユーザが顔をわざわざ撮像機器に向けずとも、場の雰囲気といった心的状況を推定してテレビを自動制御する技術は発明されていなかった。
【００１４】
本発明は、上記を鑑みてなされたものであり、その課題とするところは、団欒視聴場の雰囲気に合わせてテレビを制御することにある。
【課題を解決するための手段】
【００１５】
請求項１記載のテレビ制御装置は、複数人で団欒視聴中のテレビを制御するテレビ制御装置において、複数人の注目によるテレビの視聴度合いと前記複数人の発話による場の盛上り度合いとの各時間変化と、前記テレビを視聴している人数と、に応じて定めた各イベント情報をイベントテーブルに記憶しておく記憶手段と、前記複数人を撮影した映像データを用いて前記視聴度合いと前記テレビを現在視聴中の人数とを計算し、前記複数人の発話による音声データを用いて前記盛上り度合いを計算する解析手段と、前記記憶手段からイベントテーブルを読み出して、過去と現在でそれぞれ計算された前記視聴度合い及び前記盛上り度合いの各時間変化と前記現在視聴中の人数とに対応するイベント情報を判定する判定手段と、判定されたイベント情報の内容がコンテンツ制御に関する場合、外部から取得した情報に基づいて前記複数人への推薦コンテンツを決定する推薦手段と、決定された推薦コンテンツを前記テレビの画面に表示させる制御手段と、判定されたイベント情報の内容がコンテンツ制御以外の場合、当該内容に基づいて前記テレビの機能を制御する制御手段と、を備えることを特徴とする。
【００１６】
請求項２記載のテレビ制御装置は、請求項１記載のテレビ制御装置において、前記推薦手段は、外部ネットワークを介して電子番組情報を取得し、現在放送中の放送番組に関する複数のキーワードを抽出して、ソーシャル・ネットワーキング・サイトへの書込み数を集計し、最高書込み数のキーワードを持つ放送番組を前記推薦コンテンツとして決定する。
【００１７】
請求項３記載のテレビ制御方法は、複数人で団欒視聴中のテレビを制御するテレビ制御方法において、テレビ制御装置により、複数人の注目によるテレビの視聴度合いと前記複数人の発話による場の盛上り度合いとの各時間変化と、前記テレビを視聴している人数と、に応じて定めた各イベント情報を記憶手段のイベントテーブルに記憶しておく記憶ステップと、前記複数人を撮影した映像データを用いて前記視聴度合いと前記テレビを現在視聴中の人数とを計算し、前記複数人の発話による音声データを用いて前記盛上り度合いを計算する解析ステップと、前記記憶手段からイベントテーブルを読み出して、過去と現在でそれぞれ計算された前記視聴度合い及び前記盛上り度合いの各時間変化と前記現在視聴中の人数とに対応するイベント情報を判定する判定ステップと、判定されたイベント情報の内容がコンテンツ制御に関する場合、外部から取得した情報に基づいて前記複数人への推薦コンテンツを決定する推薦ステップと、決定された推薦コンテンツを前記テレビの画面に表示させる制御ステップと、判定されたイベント情報の内容がコンテンツ制御以外の場合、当該内容に基づいて前記テレビの機能を制御する制御ステップと、を備えることを特徴とする。
【００１８】
請求項４記載のテレビ制御方法は、請求項３記載のテレビ制御方法において、前記推薦ステップは、外部ネットワークを介して電子番組情報を取得し、現在放送中の放送番組に関する複数のキーワードを抽出して、ソーシャル・ネットワーキング・サイトへの書込み数を集計し、最高書込み数のキーワードを持つ放送番組を前記推薦コンテンツとして決定する。
【００１９】
請求項５記載のテレビ制御プログラムは、請求項３又は４記載のテレビ制御方法をコンピュータに実行させることを特徴とする。
【００２０】
以上より、本発明によれば、複数人の注目によるテレビの視聴度合いと複数人の発話による場の盛上り度合いとの各時間変化に応じて定めた各イベント情報をイベントテーブルに記憶しておき、団欒視聴中の複数人を撮影した映像データを用いて上記視聴度合いを計算し、その複数人の発話による音声データを用いて上記盛上り度合いを計算して、イベントテーブルを用いて過去と現在でそれぞれ計算された視聴度合い及び盛上り度合いの各時間変化に対応するイベント情報を判定し、判定されたイベント情報の内容がコンテンツ制御に関する場合に、外部から取得した情報に基づいて複数人への推薦コンテンツを決定してテレビの画面に表示させ、判定されたイベント情報の内容がコンテンツ制御以外の場合に、その内容に基づいてテレビの機能を制御するため、団欒視聴場の雰囲気に合わせてテレビを制御することができる。
【発明の効果】
【００２１】
本発明によれば、団欒視聴場の雰囲気に合わせてテレビを制御することができる。
【図面の簡単な説明】
【００２２】
【図１】テレビ制御装置の機能ブロックを示す図である。
【図２】指標化データリスト例を示す図である。
【図３】イベント判定部の処理フローを示す図である。
【図４】会話を楽しみたい人向けのイベントテーブル例を示す図である。
【図５】視聴に集中したい人向けのイベントテーブル例を示す図である。
【図６】イベント指示履歴データリスト例を示す図である。
【図７】外部ネットワーク構成例を示す図である。
【図８】話題度の集計結果例を示す図である。
【図９】コンテンツの表示制御例を示す図である。
【発明を実施するための形態】
【００２３】
本発明は、テレビを団欒視聴中の複数ユーザによる場の雰囲気といった心的状況は、その複数ユーザの発する音声の強調状態から推測可能であることに着目し、音声情報を利用した状況推定技術と画像情報を利用した状況推定技術とを組み合わせ、団欒視聴時の状況やその場の雰囲気を推定する。また、その場にいる人数や、音声及び画像の時間変化を考慮してルールブックを事前生成しておき、そのルールブックに基づいて現在の場の雰囲気を推定し、その推定結果に合わせたテレビ制御を実行することを特徴としている。
【００２４】
以下、本発明を実施する一実施の形態について図面を用いて説明する。但し、本発明は多くの異なる様態で実施することが可能であり、本実施の形態の記載内容に限定して解釈すべきではない。
【００２５】
図１は、本実施の形態に係るテレビ制御装置の機能ブロックを示す図である。テレビ制御装置１００は、通信可能に接続された映像・音声取得装置２００から映像データ及び音声データを取得し、それら各データに基づいて団欒視聴場の雰囲気を推定し、その推定結果を基にテレビ３００を制御する装置である。
【００２６】
映像・音声取得装置２００は、テレビ３００の周辺で団欒視聴中の複数ユーザを撮画すると共にその音声を集音する装置であり、一般市販されている個々のカメラやマイク、又はマイク付きカメラ等で実現可能である。
【００２７】
以下、テレビ制御装置１００の機能を説明する。テレビ制御装置１００は、図１に示したように、特徴解析部１１と、データ記憶部１２と、イベント判定部１３と、テレビ制御部１４と、コンテンツ推薦部１５と、表示制御部１６とで主に構成される。本装置１００は、メモリ等の記憶手段、ＣＰＵ等の計算・制御手段を備えたコンピュータで実現可能であり、プログラムによって実行される。
【００２８】
特徴解析部１１は、映像・音声取得装置２００で撮画・集音された映像データ及び音声データを取得し、その映像データから団欒視聴中の複数ユーザの注目によるテレビの視聴度合いやその場の人数を計算し、更に、その音声データからそのユーザの発話による場の盛上り度合いを計算することにより、団欒視聴場の情報を指標化する機能を有する。
【００２９】
データ記憶部１２は、上記テレビ視聴度合いと上記盛上り度合いとの各時間変化や場の人数に応じて定めた各イベント情報をイベントテーブルに予め記憶しておく機能や、特徴解析部１１によって行われた解析結果を指標化データリストに記憶する機能を有する。
【００３０】
イベント判定部１３は、データ記憶部１２からイベントテーブル及び指標化データリストを読み出して、過去と現在でそれぞれ計算された視聴度合い及び盛上り度合いの各時間変化や場の人数に対応するイベント情報を判定する機能を有する。
【００３１】
テレビ制御部１４は、イベント判定部１３によって判定されたイベント情報の内容がコンテンツ制御以外の場合に、その内容に基づいてテレビ３００の機能を制御する機能を有する。尚、以下では、画面のオンオフや音量調節といったテレビの基本機能を制御する場合を例に説明する。
【００３２】
コンテンツ推薦部１５は、イベント判定部１３によって判定されたイベント情報の内容がコンテンツ制御に関する場合に、外部ネットワーク４００を介して外部から取得した情報に基づいて複数ユーザへの推薦コンテンツを決定する機能を有する。
【００３３】
表示制御部１６は、コンテンツ推薦部１５によって決定された推薦コンテンツをテレビ３００の画面に表示させる機能を有する。
【００３４】
次に、テレビ制御装置１００の動作を説明する。最初に、テレビ３００を団欒視聴中の複数ユーザを撮画・集音した映像データ及び音声データが取得された後に、特徴解析部１１により、その映像データからテレビの視聴度合いが計算され、その音声データから場の盛上り度合いが計算される（ステップＳ１０１）。
【００３５】
ここでは、「注目度」と「強調度」を定義し、「注目度」を視聴度合いの指標とし、「強調度」を場の盛上りの指標として、団欒視聴場の情報の数値化を行う。以下、「注目度」と「強調度」の計算例について説明する。
【００３６】
「注目度（視聴度合い）」は、例えば、得られた映像データからユーザの顔を複数の識別器を通じて識別し、更にその複数の識別器を統合してテレビ３００を向いたユーザの顔を検出し、テレビ３００を向いているユーザ数と映像データから識別された全ユーザ数との比を「注目度」として計算する。この際に、ユーザの顔の角度と大きさをあらかじめ閾値パラメータとして定義しておく。尚、このような「注目度」の計算方法は公知技術であり、例えば、特開２００６−６５４４７号公報に開示されている。
【００３７】
「強調度（盛上り度合い）」は、例えば、まず、音声において任意区間の特徴量ベクトルの強調状態及び平静状態を各出現確率から、強調状態であるか否かを判定する。「（音声が）強調状態である」とは、例えば、楽しいときに笑声となり、怒るときには声を荒げ、嬉しいときには大声となる、といったような韻律特徴の変化を伴う状態であり、強調状態の音声には何らかの感性状態や心理状態が含まれると推測される。
【００３８】
少なくとも基本周波数パワー、動的特徴量の時間変化特性値、又はこれらのフレーム間差分の少なくともいずれかを含む音声特徴量の組から成る音声特徴量ベクトルの強調状態での出現確率及び平静状態での出現確率をコードごとに格納した符号帳を用い、入力音声からフレームごとに得た音声特徴量の組を量子化した対応する音声特徴量ベクトルの強調状態及び平静状態での各出現確率を求め、それらを比較して強調状態であるか否かを判定する。
【００３９】
次に、音声が強調状態となる尤度と平静状態となる尤度を求め、その尤度比を「強調度」として計算する。尚、このような「強調度」の計算方法は公知技術であり、例えば、特開２００３−３１６３７８号公報、「音声の感性情報に注目したマルチメディアコンテンツ要約技術」（日高浩太、外４名、インタラクション２００３論文集、２００３年２月、ｐ．１７−２４）に開示されている。
【００４０】
ここで説明した「注目度」と「強調度」の計算方法は例であり、映像データを用いて「注目度」を計算し、音声データを用いて「強調度」を計算可能であればどのような計算方法も採用できる。
【００４１】
尚、特徴解析部１１によって計算された「強調度」と「注目度」の指標化値は、イベント判定部１３に送信され、データ記憶部１２に蓄積される。併せて、「注目度」の算出過程で計算された全ユーザ数（テレビの方向を向いている・いないに関わらず撮影された全ての顔の数）が「場の人数」としてイベント判定部１３に送信され、データ記憶部１２に蓄積される。
【００４２】
以上のステップＳ１０１は、例えば１秒間隔（一定時間間隔）で繰り返し実行され、図２に示すように、「（解析又は撮影）時刻」と「場の人数」と「注目度」と「強調度」とを対応付けた団欒視聴場の情報（指標化データリスト）が、現在から遡った過去の一定期間、データ記憶部１２に蓄積される。
【００４３】
次に、イベント判定部１３により、データ記憶部１２からイベントテーブル及び指標化データリストが読み出され、ステップＳ１０１で計算された「強調度」と「注目度」の各時間変化や「場の人数」に基づいて、テレビ３００で実行するイベントが決定される（ステップＳ１０２）。
【００４４】
ここで、図３を参照しながら、イベント判定部１３の動作を詳述する。最初に、データ記憶部１２からイベントテーブルが読み出され、ユーザの満足度を高めるためにテレビ３００に対するイベントの実行が指示される（ステップＳ１０２−１）。
【００４５】
ここで、イベントテーブルについて説明する。満足度の感じ方は人それぞれであり、容易に一般化できない場合が多い。例えば、テレビを見ているときに、全員が盛り上がっていない状態について、不満に思う場合もあれば、気にならずにむしろ静かに視聴していることを好む場合もある。
【００４６】
そこで、本実施の形態では、「強調度」と「注目度」と「場の人数」、更にはそれらの値の時間変化によって、テレビ３００で実行するイベントをイベントテーブルによって管理している。これにより、対象となるユーザが、どのような状態において、より高い満足度を感じるか、すなわち満足度がどのようにモデル化できるかによって、様々なパターンに基づいてテレビ３００を制御することが可能となる。
【００４７】
例えば、図４に示すような、団欒時の会話を楽しみたい人向け用のイベントテーブルを生成し利用してもよいし、図５に示すような、会話よりも視聴に集中したい人向け用のイベントテーブルを用いてもよい。例えば条件４のように、過去は盛り上がっていてテレビを見ていたが現在急に静かになった場合、図４のイベントテーブルでは関連情報を提示して再度盛り上げようとしているが、図５のイベントテーブルでは音量を下げてそのまま視聴を促すことを期待して設定している。このようにイベントテーブルは設計者によって書き換え可能であり、多様なユーザに対応できる。
【００４８】
次に、現在の時刻が前回のイベント実行から例えば５分以内（一定時間以内）でない場合に、「強調度」と「注目度」と「場の人数」のリアルタイムデータとその過去データ（すなわち、指標化データリスト）がデータ記憶部１２から取得される（ステップＳ１０２−２〜Ｓ１０２−３）。
【００４９】
尚、本テレビ制御装置１００によってテレビ３００が自動制御されるが、その制御タイミングが頻繁に発生するとユーザに対して視覚的・聴覚的な煩わしさを与えるため、前回のイベント実行から５分以内の場合には処理を終了する。
【００５０】
次に、イベントテーブルを用いてテレビ３００で実行するイベントの判定処理が開始され、「強調度」と「注目度」のリアルタイムデータとその過去データとの各時間変化や「場の人数」がイベントテーブルに設定された各パラメータに合致する場合に、合致した「イベント指示」情報がイベントテーブルから抽出され、図６に示すように、現在時刻に対応付けてイベント指示履歴データリストに蓄積される（ステップＳ１０２−４〜Ｓ１０２−７）。
【００５１】
例えば、イベントテーブルの条件項目を上から順に参照し、現在の「場の人数」が値に適合するか否か、５分前から現時刻までの平均値と現在値の「注目度」及び「強調度」が閾値（０．３）よりも高いか否かでマッチングを順次行い、合致する「イベント指示（「内容」と「指示先」との組み合わせ）」情報が抽出される。
【００５２】
尚、イベントテーブルの参照項目は、この限りではなく、閾値を異なる値に設定してもよいし、より細かな時間変化を参照してもよいし、参照パラメータを増やしてもよい。
【００５３】
最後に、抽出された「イベント指示」情報に含まれる「内容」のイベント指示が、その「イベント指示」情報の「指示先」に応じて、テレビ制御部１４若しくはコンテンツ推薦部１５、又はそれら両部１４，１５に送信される（ステップＳ１０２−８〜Ｓ１０２−１０）。
【００５４】
例えば、実行するイベントが音量や電源などの「テレビの基本機能の制御に関するもの」であれば、その実行指示がテレビ制御部１４に送られる。一方、チャンネル切り替えや関連情報の提供など「コンテンツ制御に関するもの」であれば、コンテンツ制御指示がコンテンツ推薦部１５に送られる。
【００５５】
以上、イベント判定部１３の動作を詳述した。引き続き、テレビ制御装置１００の動作を説明する。
【００５６】
ステップＳ１０２の後、テレビ制御部１４により、イベント判定部１３から送信されたイベント指示に基づいてテレビの基本機能が制御される（ステップＳ１０３）。例えば、消画や音量の上げ下げなどが実行されるが、指示された内容によって出力される結果は一意に決定しているため、従来技術を用いて制御可能である。
【００５７】
次に、コンテンツ推薦部１５により、イベント判定部１３から送信されたコンテンツ制御を目的とするイベント指示に基づいて、提供する推薦コンテンツが決定され、表示制御部１６に送信される（ステップＳ１０４）。
【００５８】
尚、ここで決定されるコンテンツは、例えば、動画、静止画、音声、音楽、文字情報であり、それらを組み合わせた複数のコンテンツでもよい。推薦コンテンツを決定する際に必要なコンテンツ情報は、例えば、ＥＰＧ（Electronic Program Guide）やＳＮＳ（Social Networking Service）など、インターネット上に存在するデータを利用可能である。
【００５９】
ここでは例として、第三者がリアルタイムに入力した番組関連情報を機械的に解析し、話題として現在盛り上がっている放送番組を抽出する手法を用いて、推薦番組を決定する方法について説明する。図７にその構成を示す。
【００６０】
まず、イベント判定部１３から「コンテンツ切替」の指示を受けると、インターネットなどの外部ネットワーク４００を介して放送局２１からＥＰＧデータ（電子番組情報）を取得し、現在放送中の「番組名」「放送局」「ジャンル」「登場人物」等のキーワードを抽出する。
【００６１】
次に、現在時刻を含む任意の時間内で、第三者端末２２，２３によってコミュニティサーバ２４に書き込まれた情報のうち上記抽出キーワードが含まれる数（すなわち、キーワードの書込み数）を集計する。尚、コミュニティサーバ２４とは、ｔｗｉｔｔｅｒやＳＮＳ等のソーシャル・ネットワーキング・サイトを提供・運営しているサーバである。
【００６２】
最後に、図８に示すように、キーワードの集計数（書込み数）が大きいほど話題になっていると判断できることから、一番話題性の高いとされる最高集計数のキーワードを持つ放送番組を推薦番組として決定する。
【００６３】
最後に、表示制御部１６により、コンテンツ推薦部１５から送信されたコンテンツ情報を用いて、テレビ３００の画面にコンテンツが表示される（ステップＳ１０５）。
【００６４】
例えば、図９の例１に示すように、画面全体を推薦番組のチャンネルに強制的に切り替える。他の表示例としては、複数の推薦コンテンツが送られてきた場合には、同図の例２に示すようにワイプとして並べて提示してもよいし、ＳＮＳから取得した関連情報を表示する場合には、同図の例３に示すように画面上にポップアップして提示してもよい。
【００６５】
以上より、本実施の形態によれば、データ記憶部１２が、複数ユーザの注目によるテレビの視聴度合い（注目度）と複数ユーザの発話による場の盛上り度合い（強調度）との各時間変化に応じて定めた各イベント情報をイベントテーブルに記憶しておき、特徴解析部１１が、団欒視聴中の複数ユーザを撮影した映像データを用いて視聴度合いを計算すると共に、その複数ユーザの発話による音声データを用いて盛上り度合いを計算し、イベント判定部１３が、上記イベントテーブルを用いて、過去と現在でそれぞれ計算された注目度及び強調度の各時間変化に対応するイベント情報を判定し、コンテンツ推薦部１５及び表示制御部１６が、判定されたイベント情報の内容がコンテンツ制御に関する場合に、外部から取得した情報に基づいて複数ユーザへの推薦コンテンツを決定してテレビ３００の画面に表示させ、テレビ制御部１４が、判定されたイベント情報の内容がテレビの基本機能の制御に関する場合に、その内容に基づいてテレビ３００の基本機能を制御するので、複数ユーザが常に観測用の撮像機器に顔を向けていなくても、その場の雰囲気を推測し、コンテンツ切替やテレビの基本機能を自動制御することができる。
【符号の説明】
【００６６】
１００…テレビ制御装置
２００…映像・音声取得装置
３００…テレビ
４００…外部ネットワーク
１１…特徴解析部
１２…データ記憶部
１３…イベント判定部
１４…テレビ制御部
１５…コンテンツ推薦部
１６…表示制御部
２１…放送局
２２，２３…第三者端末
２４…コミュニティサーバ
Ｓ１０１〜Ｓ１０５，Ｓ１０２−１〜Ｓ１０２−１０…ステップ
【図１】
0005847646.tif 000002
【図２】
0005847646.tif 000003
【図３】
0005847646.tif 000004
【図４】
0005847646.tif 000005
【図５】
0005847646.tif 000006
【図６】
0005847646.tif 000007
【図７】
0005847646.tif 000008
【図８】
0005847646.tif 000009
【図９】
0005847646.tif 000010