(57)【要約】【課題】操作者以外の視聴者の視聴を邪魔しない操作手段を提供する。【解決手段】視聴者の映像を撮像する撮像手段１１０、撮像した映像から視聴者の顔を検知する顔検知手段１２０、検知した顔を区別して管理する個人区別手段１３０、区別した顔毎にテレビ視聴の注視度を算出する注視度算出手段１４０、テレビの操作者を判定し、操作者以外の視聴者の注視度の値で操作の実行を判定する操作実行判定手段１５０で構成する。【選択図】  図１
2011023909.tif 000002
【特許請求の範囲】
【請求項１】
視聴者を撮影する撮像手段を備えた放送受信装置であって、
前記撮像手段で撮影された画像から顔を含む顔領域画像情報を得て、当該顔領域画像情報を得た後に顔を検知する顔検知情報を生成する顔検知手段と、
前記顔検知情報から、撮影された視聴者を区別する個人区別手段と、
視聴者毎に視聴の注視の度合いを示す注視度を求める注視度算出手段と、
視聴者から操作者を特定する操作者特定手段と、
前記操作者特定手段で特定された操作者以外の視聴者の注視度の値で操作の実行を判定する操作実行判定手段と、
を備える事を特徴とする放送受信装置
【請求項２】
請求項１に記載の放送受信装置において
前記操作実行判定手段による判定結果を視聴者に知らせる通知手段と、
を備える事を特徴とする放送受信装置。
【請求項３】
請求項１および２に記載の放送受信装置において
前記個人区別手段が前記顔領域画像から個人に対応するテンプレート情報である個人テンプレート情報を生成するテンプレート生成手段を備え、
前記注視度算出手段が前記顔領域画像を用いて顔の向きを検出する顔向き検出手段を備え、
前記個人テンプレート生成手段は前記顔向き検出手段によって顔の向きが正面と判断された顔領域画像情報を用いて個人テンプレート情報を生成する
ことを特徴とする放送受信装置。
【請求項４】
請求項１および２に記載の放送受信装置であって、
前記注視度算出手段は所定の時間間隔毎に得られる瞬間注視度情報を算出し、
算出した任意の時間から、前記所定の時間間隔毎に算出した瞬間注視度情報を有する瞬間注視度列情報を保持し、
前記瞬間注視度列情報を基に区間注視度情報を算出し、
前記操作実行判定手段は前記区間注視度情報を用いて操作の実行を判定する事を
特徴とする放送受信装置
【請求項５】
請求項１および２に記載の放送受信装置であって、
前記注視度算出手段は前記顔領域画像を用いて顔の向きを検出する顔向き検出手段を備え、
顔向きが放送受信装置に対して正面を向いている場合の瞬間注視度情報を注視状態とすることを特徴とする放送受信装置
【請求項６】
請求項１および２に記載の放送受信装置であって、
前記操作実行判定手段は注視度情報の値が所定の閾値より大きい場合は操作無効とする
ことを特徴とする放送受信装置
【請求項７】
請求項１および２に記載の放送受信装置であって、
前記操作実行判定手段は注視度情報の値が所定の閾値より大きい間は操作保留とする
ことを特徴とする放送受信装置
【請求項８】
請求項１および２に記載の放送受信装置であって、
前記操作実行判定手段は、操作保留とした後、注視度情報の値が所定の閾値より大きい状態が所定の時間以上継続した場合は、操作保留としない
ことを特徴とする放送受信装置
【請求項９】
請求項２に記載の放送受信装置であって、
前記操作実行判定手段による判定結果が操作無効、もしくは、操作保留であった場合に、他の視聴者が番組を注視しているため操作が無効になった、若しくは保留になったことを通知する
ことを特徴とする放送受信装置
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は放送受信装置に関する。
【背景技術】
【０００２】
従来の放送受信装置では従来の放送受信装置では操作者に操作の決定権があり、他の視聴者への配慮が欠けていた。これに対して、特許文献１では、複数のユーザが自分専用のリモコンを使い、所定の優先順位によって、操作できるリモコンを決定する場合、リモコンの操作回数や操作時間に制限を設け、優先順位を変動させるように工夫するものである。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開2003-111161号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１では、自分専用のリモコンについて、リモコンの操作回数や操作時間に制限を設け、優先順位を変動させるように工夫すると言う特徴を有するものである。
【０００５】
ところで、複数の視聴者が視聴する場合においては、ある視聴者が集中して番組を視聴している時に、他の視聴者に突然チャンネルを変更されたり、録画予約など視聴中の番組の画面が隠れてしまうような操作をされたりする場合があり、気分が害されせっかくの番組を楽しめなくなってしまうという課題が想定される。
【課題を解決するための手段】
【０００６】
本発明は、上記課題を考慮してなされたもので、装置の操作者以外の視聴者の視聴を邪魔することを従来よりも低減出来るような操作手段を実現する放送受信装置を提供する事を目的とする。
【０００７】
この目的を実現するため、放送受信装置で表示される番組、画面などを視聴している視聴者の状態、姿、状況などを含む映像を撮像する撮像手段１１０、撮像した映像から視聴者の顔を検知する顔検知手段１２０、検知した顔を区別して管理する個人区別手段１３０、区別した顔毎にテレビ視聴の注視度情報を算出する注視度算出手段１４０、テレビの操作者を判定し、操作者以外の視聴者の注視度情報の値で操作の実行を判定する操作実行判定手段１５０で構成する。
【発明の効果】
【０００８】
本発明によれば、操作者以外の視聴者の注視度情報が所定の値より小さくなるまで操作を保留する。そのため、従来に比べて、視聴者は邪魔される事が低減され、番組に集中でき、快適に視聴できるように改善されるものである。
【図面の簡単な説明】
【０００９】
【図１】本発明の実施例１にかかる放送受信装置の構成図
【図２】個人区別手段のブロック図
【図３】注視度算出手段のブロック図
【図４】操作実行判定手段のブロック図
【図５】個人区別処理のフローチャート
【図６】個人識別手段が記憶する顔検知結果
【図７】個人識別手段が記憶する顔テンプレート
【図８】注視度算出のフローチャート
【図９】テンプレート作成処理のフローチャート
【図１０】注視度算出手段が記憶する個人毎注視度情報
【図１１】テレビ視聴者を表す図
【図１２】テレビ操作者判断方式の一例を表す図
【図１３】操作実行判定のフローチャート
【図１４】操作保留中の処理フローチャート
【発明を実施するための形態】
【００１０】
以下、本発明の実施の形態について図面を用いて説明する。
【実施例１】
【００１１】
図１は本発明の実施例１にかかる放送受信装置（以下テレビと記す）の構成図である。
【００１２】
１１０は撮像手段、１２０は顔検知手段、１３０は個人区別手段、１４０は注視度算出手段、１５０は操作実行判定手段、１６０は操作イベント検知手段、１７０は制御手段である。なお、以下では、注視度情報のことを単に注視度と呼ぶことにする。
【００１３】
撮像手段１１０はテレビを視聴している視聴者の映像を撮像する手段である。撮像手段１１０で撮像された映像は顔検知手段１２０と個人区別手段１３０、注視度算出手段１４０、操作実行判定手段１５０に入力される。顔検知手段１２０は前記撮像手段１１０で撮影された映像、画像から顔を含む顔領域画像情報を得て、当該顔領域画像情報を得た後に顔領域を検知し、顔を検知する顔検知情報を生成して、顔検知結果を個人区別手段１３０に入力する。顔領域の検知方式については特に制限しない。顔を検知する顔検知情報に対応して、顔を検知可能とする情報である顔モデルテンプレート情報を用いて検知する方法など既存の技術を採用してもよい。顔検知結果として、検知した顔毎に顔領域の座標、大きさを出力する。なお、以下では、テンプレート情報のことをテンプレートと呼ぶことにする。
【００１４】
個人区別手段１３０は検知された顔検知結果を用いて撮像手段１１０で撮像された画像から顔領域の映像を切り出し、個人テンプレートと比較して個人を区別し、識別子を割り当て、顔検知手段１２０が生成した顔検知結果に個人を区別する識別子情報を付加する。
【００１５】
以下、顔検知結果に個人を区別する識別子情報を付加した情報を識別子付加顔検知結果６００（図６）と呼ぶ。個人区別の方式、および、個人区別に用いる個人テンプレートの作成方式については特に制限しない。目や口、鼻など顔の器官を検知し特徴点を比較する方式など既存の技術を採用しても良い。注視度算出手段１４０は個人区別手段１３０が生成した識別子付加顔検知結果６００（図６）を用いて撮像手段１１０で撮像された画像から顔領域の映像を切り出し、個人毎に注視度を算出する。
【００１６】
なお、顔検知、個人識別、注視度算出の処理は、撮像手段１１０が映像を撮影する時間単位（フレーム毎）に行っても良いし、所定の時間間隔を処理時間単位として行っても良い。
【００１７】
操作実行判定手段１５０は、操作イベント検知手段１６０から入力される操作イベントを契機に、撮像手段１１０で撮像された映像信号と、個人区別手段１３０から得た識別付き顔検知結果から操作者と、それ以外の視聴者を判断し、それ以外の視聴者の注視度によって操作の実行を判定した判定結果を制御手段１７０に出力する。
【００１８】
操作イベント検知手段１６０はここには記載していないリモコンや操作パネルによる操作イベントを検知し、チャンネル切り替えや録画予約など視聴を妨げる操作イベントを検知したら操作実行判定手段１５０に通知する。
【００１９】
制御手段１７０は、ここでは記載していないテレビ全体の制御を行う手段である。また、操作実行判定手段１５０の判定結果に従い、リモコンや操作パネルによる操作の実行を制御する。
【００２０】
以下、個人区別手段１３０、注視度算出手段１４０、操作実行判定手段１５０の処理の詳細について順次説明する。
【００２１】
個人区別手段１３０は顔検知手段１２０で検知された顔検知結果情報を用いて、撮像された視聴者各々に識別子を付けて区別する手段である。
【００２２】
以下、図２、図５、図６を用いて説明する。
【００２３】
図２は個人区別手段１３０のブロック図、図５は個人区別処理のフローチャート、図６は個人識別手段が記憶する識別子付加顔検知結果６００を示す図、図７は個人識別手段が記憶する個人テンプレートを示す図である。
【００２４】
図２に示すように、個人区別手段１３０は顔追跡手段１３１、顔区別手段１３２、テンプレート作成手段１３３、記憶手段１３４で構成する。
【００２５】
顔追跡手段１３１は顔検知手段１２０で検知された顔検知結果に含まれる顔が、前フレーム（処理時間単位）での個人区別処理で記憶手段１３４に記憶した識別子付加顔検知結果６００のどの識別子の顔に対応するかを判断する手段である。顔を追跡する方式としては、輝度信号を用いた代表点マッチング方式や、動きベクトルを検出しそれに基づいて追跡する方式など、既存の技術を用いても良い。
【００２６】
顔追跡手段１３１による顔追跡結果は以下３つの状態を判断する。
(１)「在席」：識別子付加顔検知結果６００に対応の取れる顔があった場合。
(２)「新規」：顔検知手段１２０で検知した顔検知結果と対応の取れる顔が識別子付加顔検知結果６００に存在しない場合。
(３)「離席」：顔検知手段１２０で検知した顔検知結果と対応の取れない識別子加顔検知結果６００が存在する場合。
【００２７】
顔区別手段１３２は、個人テンプレートと顔検知手段１２０で検知された顔領域の画像データを比較して、個人テンプレートが記憶されている既知の視聴者か、新規の視聴者かを判断する。既知の視聴者の場合は、該当する識別子の識別子付加顔検知結果６００を更新する。また、新規の視聴者の場合は仮識別子を割り当て識別子付加顔検知結果６００に追加する。
【００２８】
テンプレート作成手段１３３は顔検知手段１２０で検知された顔領域の画像データを用いて個人テンプレートを作成する手段である。図７に示すように、識別子と個人テンプレートを対応づけ出来るように記憶する。また、１つの識別子に対して複数の個人テンプレートを記憶できる。
【００２９】
記憶手段１３４は識別子付加顔検知結果６００と個人テンプレートを記憶する。物理的には、他の記憶手段と共通であっても問題ない。
【００３０】
以下、図５の個人区別処理のフローチャートを用いて個人区別処理について説明する。
【００３１】
ｓ５０１：ｓ５０１は顔追跡処理である。顔追跡結果によって処理を分岐する。
顔追跡結果が「在席」なら視聴中の視聴者が継続して視聴中と判断しｓ５０２へ。
顔追跡結果が「新規」なら新しい視聴者が現れたと判断しｓ５０４へ。
顔追跡結果が「離席」なら視聴者がテレビの前を離れたと判断してｓ５０９へ。
【００３２】
ｓ５０２：視聴者が継続して「在席」している場合の識別子付加顔検知結果情報更新処理ｓ５０３へ。
【００３３】
ｓ５０３：ｓ５０１で「在席」と判断された識別子（６０１）の識別子付加顔検知結果６００情報を更新する。
【００３４】
「状態」情報（６０２）：「在席」
「顔検知結果」情報（６０３）：顔検知手段１２０で検知された情報で置き換え
ｓ５０４：新しい視聴者が現れたのでｓ５０５以下のステップで顔区別処理を行う。
【００３５】
ｓ５０５：記憶手段１３４に登録された個人テンプレートを参照し、個人テンプレートが記憶されている既知の視聴者か、新規の視聴者かを判断する。登録データと合致した場合は合致した個人テンプレートで識別子を参照、取得してｓ５０６へ。合致しなかった場合ｓ５０７へ。
【００３６】
ｓ５０６：ｓ５０５で既知の視聴者と判断された識別子（６０１）の識別子付加顔検知結果６００情報を更新する。
【００３７】
「状態」情報（６０２）：「新規」
「顔検知結果」情報（６０３）：顔検知手段１２０で検知された情報で置き換え
ｓ５０７：新規の視聴者に仮識別子を割り当て
ｓ５０８：仮識別子を割り当てられた新規視聴者の情報を識別子付加顔検知結果６００情報に追加。
【００３８】
「状態」情報（６０２）：「新規」
「顔検知結果」情報（６０３）：顔検知手段１２０で検知された情報
ｓ５０９：視聴者が「離席」した場合の識別子付加顔検知結果情報更新処理ｓ５１０へ。
【００３９】
ｓ５１０：ｓ５０１で「離席」と判断された識別子（６０１）の識別子付加顔検知結果６００情報を更新する。
【００４０】
「状態」情報（６０２）：「離席」
「顔検知結果」情報（６０３）：消去
注視度算出手段１４０は個人区別手段１３０が生成した識別子付加顔検知結果６００を用いて撮像手段１１０で撮像された画像から顔領域の映像を切り出し、個人毎に注視度を算出する手段である。
【００４１】
以下、図３、図８、図１０を用いて説明する。
【００４２】
図３は注視度算出手段１４０のブロック図、図８は注視度算出のフローチャート、図１０は個人毎注視度情報を示す図である。
【００４３】
図３に示すように、注視度算出手段１４０は顔向き検出手段１４１、瞬間注視度算出手段１４２、区間注視度算出手段１４３、注視度記憶手段１４４で構成する。
【００４４】
顔向き検出手段１４１は回転の大きさ、上下の傾き、左右の傾きからなる顔方向を算出し、顔方向情報を元に顔がテレビの方向を向いているか、向いていないかの正面判定を行う。回転の大きさ、上下の傾き、左右の傾きの算出方式は３次元顔モデルを顔画像にフィットさせて判定する方式など既存の技術を用いても良い。
【００４５】
正面判定は、例えば、顔の特徴器官（両目、鼻、口）がすべて入っている顔画像で、回転の大きさの絶対値が９５度以下、上下傾きの絶対値が５度以下、左右傾きが５度以下などの条件を満足するものを正面と判断する。回転の大きさの範囲を広く取っているのは、頬杖をついている状態や、横になって視聴している状態も検知するためである。
【００４６】
なお、必ずしもこの方式でなくてもよく、テレビに対して視聴者の顔が正面を向いているかどうかを判断できる方式であればよい。
【００４７】
瞬間注視度算出手段１４２は所定の時間間隔で視聴者毎の瞬間注視度を算出し、常に定められた時間長分（以下、区間と記す）の最新の瞬間注視度を注視度記憶手段１４４に記録する。
【００４８】
区間注視度算出手段１４３は瞬間注視度算出手段１４２が算出した、区間分の瞬間注視度を元に、最新の区間注視度を算出し注視度記憶手段１４４に記録する。
【００４９】
注視度記憶手段１４４は図１０に示すように、区間分の瞬間注視度１００１と区間注視度１００２を記録する。瞬間注視度と区間注視度は、共に個人区別手段１４０で割り振られた識別子１０００で参照可能である。瞬間注視度１００１はリングバッファ構造のメモリ領域に記録され、常に区間分の最新の瞬間注視度（瞬間注視度列）が記憶される。また、図中t0,t1・・・は全ての視聴者に対し同時刻の瞬間注視度を算出したスナップショットとなっている。
【００５０】
以下、図８の注視度算出のフローチャートを用いて注視度算出について説明する。
【００５１】
ｓ８０１：個人区別手段１３０が生成した識別子付加顔検知結果６００から注視度算出する対象の状態を識別子で参照する。状態が「離籍」でない場合はｓ８０２の顔向き判定処理に移る。状態が「離籍」の場合は、瞬間注視度を−１（ｓ８０６）とする。そして、ｓ８０９の区間注視度算出に処理を移す。
【００５２】
ｓ８０２：撮像手段１１０で撮像された画像から顔領域の映像を用いて顔向き判定する。３次元顔モデルを顔画像にフィットさせて判定する方式など既存の技術を用いて顔がテレビに対して正面を向いているか、否かを判定する（ｓ８０２）。顔が正面を向いている場合はｓ８０４、それ以外の場合はｓ８０５で瞬間注視度を決定する。
【００５３】
ｓ８０４：顔がテレビに対して正面を向いているときを注視して視聴している状態と判断し瞬間注視度を１とする。そして、ｓ８０７に処理を移す。
【００５４】
ｓ８０５：顔がテレビに対して正面を向いていないときは注視して視聴していない状態と判断して瞬間注視度を０とする。そして、ｓ８０９に処理を移す。
【００５５】
ｓ８０７：正面と判定された顔の識別子が仮識別子かどうかを判定する。仮識別子の場合はｓ８０８、仮識別子出ない場合はｓ８０９に処理を移す。
【００５６】
ｓ８０８：識別子が仮識別子の顔は、個人テンプレートが記憶されていない未登録の顔であるか、もしくは、一部が隠れているなど、顔画像の撮影状態が悪く個人を区別できなかったことを表す。そこで、顔向きを正面と判定したとき、個人区別手段１３０に個人テンプレートの作成を要求し、その顔に割り当てられた顔識別子を取得する。そして、注視度記憶手段１４４に記録されている仮識別子の値を割り当てられた識別子で置き換える。このようにすることで、個人の区別状態が仮識別子で区別していた仮状態から、個人テンプレートが登録された既知の個人として区別できる本状態に変化した場合も、区間分の最新の瞬間注視度情報を途切れることなく継続的に保持できる。なお、個人テンプレート作成処理については、別途説明する。
【００５７】
ｓ８０９：ｓ８０９では注視度記憶手段１４４に記録されている区間分の瞬間注視度情報から区間注視度算出を算出する。算出方式は、区間時間における注視状態、すなわち、瞬間注視度が１の割合とする。しかし、この方式に限らず、瞬間注視度が１の状態が２回以上連続して出現した割合などでもよい。区間注視度は瞬間注視度を算出する所定の時間間隔と同期して更新され、注視度記憶手段１４４には区間注視度情報１００２には常に最新の区間注視度が記憶されている。
【００５８】
以下、図９の個人テンプレート作成処理のフローチャートを用いて、個人区別手段１４０における個人テンプレート作成手順を説明する。
【００５９】
ｓ９０１：個人テンプレート作成要求を待ち、作成要求があった場合はｓ９０２に処理を移す。
【００６０】
ｓ９０２：個人テンプレート作成を要求された顔画像と記憶手段１３４に登録された個人テンプレートを参照し、個人テンプレートが記憶されている既知の視聴者か、新規の視聴者かを判断する。登録データと合致した場合は合致した場合はｓ９０４へ。合致しなかった場合ｓ９０８へ。
【００６１】
ｓ９０４：記憶手段１４４を参照し、ｓ９０２で合致した個人テンプレートの識別子を取得（ｓ９０４）して、ｓ９０５へ。
【００６２】
ｓ９０５：識別子付加顔検知結果６００の状態情報を仮識別子の値に更新し、仮識別子から本識別子に状態が変わったことを示す。また、識別子情報も本識別子の値に更新する。ｓ９０６へ。
【００６３】
ｓ９０６：個人テンプレート作成を要求された顔画像から個人テンプレートを生成し、ｓ９０４またはｓ９０８で配布された識別子の個人を判定するためのテンプレート６１０として記憶手段１３４に記憶。該当する識別子に登録されている個人テンプレート数が記憶可能数を超える場合は、最も古い情報を削除する。ｓ９０７へ。
【００６４】
ｓ９０７：個人テンプレート作成要求元に、顔画像に割り当てられた識別子を返し処理を終了する。
【００６５】
ｓ９０８：登録データと合致しなかったので、新しい識別子を割りあてる。ｓ９０５へ。
【００６６】
このように、個人テンプレートが未登録の顔画像については、区別用テンプレートとして適切な正面向きの顔画像の場合に個人テンプレート作成を行う。これによって、精度のよい、個人テンプレートの作成が可能となる。また、未登録かどうかを判断し、ユーザーの手を煩わすことなく個人テンプレート作成、登録できる。
【００６７】
操作実行判定手段１５０は、操作イベント検知手段１６０から入力される操作イベントを契機に、視聴者の注視度によって操作実行を判定する手段である。
【００６８】
以下、図４、図１１、図１２、図１３、図１４を用いて説明する。
【００６９】
図４は操作実行判定手段１５０のブロック図、図１１はテレビ視聴者を表す図、図１２はテレビ操作者判断方式の一例を表す図、図１３は操作実行判定のフローチャート、図１４は操作保留中の処理フローチャートである。
【００７０】
図４に示すように、操作実行判定手段１５０はリモコン位置検出手段１５１、操作者判定手段１５２、実行判定手段１５３、通知手段１５４で構成する。
【００７１】
リモコン位置検出手段１５１は操作イベント検知手段１６０から入力される操作イベントを契機に、撮像手段１１０で撮像された映像からリモコンの位置を検知する。リモコンの位置は、リモコンから送信された赤外線を画像中から検知する。
【００７２】
操作者判定手段１５２はリモコン位置検出手段１５１で検知したリモコン位置情報と、個人区別手段１３０が生成した識別子付加顔検知結果６００を用いて操作者を判定する。
例えば、図１１に示すように視聴者が存在し、それぞれ１、２、３の識別子が割り当てられていたとする。奏者写は、図１２に示すようにリモコン位置４と顔検知結果に含まれる顔位置情報５、６、７からリモコンと顔の距離８、９、１９を算出し、距離が一番短いものを操作者の顔と判断する。図１２の場合は識別子１が操作者と判定される。
実行判定手段１５３は注視度算出手段１４０で算出された区間注視度を用いて、要求された操作の実行を判断する手段である。操作者判定手段１５２で判定された操作者以外の区間注視度が予め定めた閾値より大きい場合は操作無効もしくは操作保留と判定する。
【００７３】
通知手段１５４は操作が無効、もしくは、保留になったことを操作者に通知する手段である。テレビ画面の下端にテキストで表示するまたは、リモコンの表示手段に表示するなどの方法を用いる。
【００７４】
以下、図１３の操作実行判定のフローチャートを用いて操作実行判定処理を説明する。
なお、以下は操作保留とする場合の処理フローである。操作無効とする場合の処理フローは「保留」を「無効」に読み替えればよい。
【００７５】
ｓ１３０１：リモコン操作イベントを待ち、チャンネル切り替えや録画予約など視聴を妨げるリモコン操作イベントを検知した場合はｓ１３０２に処理を移す。
【００７６】
ｓ１３０２：注視度算出手段１４０の注視度記憶手段１４４から区間注視度情報を取得する。ｓ１３０３へ。
【００７７】
ｓ１３０３：すべての視聴者の区間注視度が閾値より小さい場合はｓ１３０９へ。その他の場合はｓ１３０４へ。
【００７８】
ｓ１３０４：撮像手段１１０で撮像された映像を用いて、リモコン位置検出手段１５１でリモコン位置を検知する。ｓ１３０５へ。
【００７９】
ｓ１３０５：操作者判定手段１５２により、ｓ１３０４で得たリモコン位置と視聴者の顔位置から操作者を判定。
【００８０】
ｓ１３０６：ｓ１３０２で取得した区間注視度情報を用い、操作者以外の区間注視度が一人でも閾値より大きかったらｓ１３０７へ。そのほかの場合はｓ１３０９へ。
【００８１】
ｓ１３０７：操作判定結果を「保留」とし制御手段１７０へリモコン操作「保留」を要求する。ｓ１３０９へ。
【００８２】
ｓ１３０８：画面の下端に文字などで操作が「保留」になったことを表示し、操作者に通知。
【００８３】
ｓ１３０９：操作判定結果は「実行」でリモコン操作はそのまま有効となる。
【００８４】
操作を「無効」にするか「保留」にするかは予めユーザーが設定しておいても良いし、視聴に加わったばかりの視聴者（例えば、区間注視度の測定期間中に視聴に加わった視聴者など）が操作した場合は「無効」とし、ある程度長い時間視聴している視聴者が操作した場合は「保留」にするなどの制御をしても良い。
【００８５】
以下、図１４の操作保留中の処理フローチャートを用いて操作保留中の処理を説明する。
【００８６】
ｓ１４０１：操作保留中でない場合は処理を終了する。操作保留中の場合はｓ１４０２へ。
【００８７】
ｓ１４０２：区間注視度情報の更新と同期して、注視度記憶手段１４４から区間注視度情報を取得する。ｓ１４０３へ。
【００８８】
ｓ１４０３：操作者以外の区間注視度が閾値より大きいか判定。一人でも閾値より大きかったらｓ１４０４へ。そのほかの場合はｓ１４０６へ。
【００８９】
ｓ１４０４：保留継続時間が閾値より長いか判定。短い場合は保留を継続。ｓ１４０５へ。長い場合はｓ１４０６へ。
【００９０】
ｓ１４０５：操作判定結果は「保留」のままで、保留状態継続。
【００９１】
ｓ１４０６：操作判定結果を「保留解除」とし、制御手段１７０へリモコン操作保留解除を要求し、処理を終了。
【００９２】
以上のように、操作保留中は区間注視度の更新単位で保留状態を見直すため、操作者以外の視聴者の注視度が低くなった時点で保留になった操作を実行できる。
【００９３】
以上で説明した本発明の実施例によれば、操作者以外の視聴者の注視度が所定の値より小さくなるまで操作を保留する。そのため、視聴者は邪魔される事なく番組に集中でき、快適に視聴できるテレビを提供できる。
【符号の説明】
【００９４】
１，２，３  視聴者
４  リモコン
５，６，７  検知された顔領域
８，９，１０  検知された顔領域とリモコンの距離
１１０  撮像手段
１２０  顔検知手段
１３０  個人区別手段
１３１  顔追跡手段
１３２  顔区別手段
１３３  テンプレート作成手段
１３４  記憶手段
１４０  注視度算出手段
１４１  顔向き検出手段
１４２  瞬間注視度算出手段
１４３  区間注視度算出手段
１４４  注視度記憶手段
１５０  操作実行判定手段
１５１  リモコン位置検出手段
１５２  操作者判定手段
１５３  実行判定手段
１５４  通知手段
１６０  操作イベント検知手段
１７０  制御手段
６０１、１０００  識別子
６０２  顔状態
６０３  顔検知結果  位置
６０４  顔検知結果  大きさ
１００１  瞬間注視度
１００２  瞬間注視度列
１００３  区間注視度
【図１】
2011023909.tif 000003
【図２】
2011023909.tif 000004
【図３】
2011023909.tif 000005
【図４】
2011023909.tif 000006
【図５】
2011023909.tif 000007
【図６】
2011023909.tif 000008
【図７】
2011023909.tif 000009
【図８】
2011023909.tif 000010
【図９】
2011023909.tif 000011
【図１０】
2011023909.tif 000012
【図１１】
2011023909.tif 000013
【図１２】
2011023909.tif 000014
【図１３】
2011023909.tif 000015
【図１４】
2011023909.tif 000016