(57)【特許請求の範囲】
【請求項１】
複数の画面を有する表示部と、
視聴者の注視点を検出し、上記複数の画面から注視画面を検出し、所定時間内における各画面の注視回数及び／又は注視時間を算出する注視画面検出部と、
上記所定時間内における注視回数及び／又は注視時間が最も大きい画面のコンテンツと他のコンテンツとの類似性を評価し、該類似性に基づくコンテンツのリストを作成し、上記所定時間内における注視回数及び／又は注視時間が閾値以下である画面のコンテンツを上記リスト内のコンテンツに切り替える切替制御部と
を備えるコンテンツ再生装置。
【請求項２】
上記コンテンツの切り替え要求を指示する指示部を備え、
上記注視画面検出部は、上記切り替え要求から過去所定時間内における各画面の注視回数及び／又は注視時間を算出する請求項１記載のコンテンツ再生装置。
【請求項３】
視聴者の注視点を検出し、表示部の複数の画面から注視画面を検出し、所定時間内における各画面の注視回数及び／又は注視時間を算出する注視画面検出工程と、
上記所定時間内における注視回数及び／又は注視時間が最も大きい画面のコンテンツと他のコンテンツとの類似性を評価し、該類似性に基づくコンテンツのリストを作成し、上記所定時間内における注視回数及び／又は注視時間が閾値以下である画面のコンテンツを上記リスト内のコンテンツに切り替える切替工程と
を有するコンテンツ再生方法。
【請求項４】
上記コンテンツの切り替え要求を指示する指示工程を有し、
上記注視画面検出工程では、上記切り替え要求から過去所定時間内における各画面の注視回数及び／又は注視時間を算出する請求項３記載のコンテンツ再生方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例えば、テレビジョン放送等の複数のコンテンツを複数の画面に同時に表示するコンテンツ再生装置及びコンテンツ再生方法に関するものである。
【背景技術】
【０００２】
近年、大容量のＨＤＤ（Hard Disk Drive）などにコンテンツデータを大量に蓄積することができる。また、多チャンネル化により、視聴可能なコンテンツが増大している。このため、大量に蓄積されたコンテンツ又は受信したコンテンツを複数の画面に同時に表示することができる表示装置は、複数の情報を一度に取得することができるため、大変利便性が高いものである。
【０００３】
【特許文献１】特開２００１−７８１０２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
上述のような表示装置においてコンテンツを切り替える際、例えば、図８に示すように９つの画面に表示されている１ＣＨから９ＣＨまでのコンテンツを１０ＣＨから１８ＣＨまでのコンテンツに切り替えるようにリモートコントローラ等により指示すると、意に反してそれまで視聴していたコンテンツも切り替わってしまう。
【０００５】
また、例えば、図９に示すように９つの画面からコンテンツを切り替えようとする１つの画面を選択し、その画面のみコンテンツを切り替えた場合（例えば、特許文献１参照。）、リモートコントローラにより何回も画面を指定しなければならず、操作が面倒である。
【０００６】
本発明は、上記問題点を解消するためになされたものであり、複数画面に表示されたコンテンツを視聴者の意図を損なわずに容易に切り替えることができるコンテンツ再生装置及びコンテンツ再生方法を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上述した課題を解決するために、本発明に係るコンテンツ再生装置は、複数の画面を有する表示部と、視聴者の注視点を検出し、上記複数の画面から注視画面を検出し、所定時間内における各画面の注視回数及び／又は注視時間を算出する注視画面検出部と、上記所定時間内における注視回数及び／又は注視時間が最も大きい画面のコンテンツと他のコンテンツとの類似性を評価し、該類似性に基づくコンテンツのリストを作成し、上記所定時間内における注視回数及び／又は注視時間が閾値以下である画面のコンテンツを上記リスト内のコンテンツに切り替える切替制御部とを備えることを特徴としている。
【０００８】
また、本発明に係るコンテンツ再生方法は、視聴者の注視点を検出し、表示部の複数の画面から注視画面を検出し、所定時間内における各画面の注視回数及び／又は注視時間を算出する注視画面検出工程と、上記所定時間内における注視回数及び／又は注視時間が最も大きい画面のコンテンツと他のコンテンツとの類似性を評価し、該類似性に基づくコンテンツのリストを作成し、上記所定時間内における注視回数及び／又は注視時間が閾値以下である画面のコンテンツを上記リスト内のコンテンツに切り替える切替工程とを備えることを特徴としている。
【発明の効果】
【０００９】
本発明によれば、視聴者が注視する注視画面を検出し、その注視画面の検出結果に基づいてコンテンツの切り替えを制御するようにしたため、複数画面に表示されたコンテンツを視聴者の意図を損なわずに容易に切り替えることができる。
【発明を実施するための最良の形態】
【００１０】
以下、本発明の具体的な実施の形態について、図面を参照しながら詳細に説明する。図１は、本発明の一実施形態におけるコンテンツ再生装置を示すブロック図である。このコンテンツ再生装置１０は、複数のチャンネルのコンテンツデータを受信する受信部１１と、複数のコンテンツデータを記録する記録部１２と、複数の画面を有する表示部１３と、受信部１１及び／又は記録部１２から表示部１３の各画面に表示するコンテンツを切り替えるスイッチャー１４と、視聴者が注視する注視画面を検出する注視画面検出部１５と、視聴者の要求を指示するリモートコントローラ１６と、リモートコントローラ１６から視聴者の要求に応じた制御信号を受光する受光部１７と、受光部１７からの制御信号に応じて各構成部を制御する制御部１８とを備えて構成されている。
【００１１】
受信部１１は、所望のチャンネルの放送信号を受信するチューナを備えている。なお、異なるコンテンツを複数の画面に表示する場合、チューナは表示部１３が有する画面数分備えられることが好ましい。
【００１２】
記録部１２は、例えば、受信部１１で受信したチャンネルのコンテンツデータを記録するための大容量のＨＤＤ（Hard Disk Drive）を備えている。
【００１３】
表示部１３は、複数の画面１３１〜画面１３Ｎを有しており、複数のコンテンツを同時に表示する。なお、表示部１３は、１つのディスプレイ画面を複数の画面に分割した構成でもよく、複数のディスプレイ画面を用いた構成としてもよい。
【００１４】
スイッチャー１４は、受信部１１で選局されたチャンネルのコンテンツデータや記録部１２に記録されたコンテンツデータの中から表示部１３の各画面に表示するコンテンツの切り替えを行う。
【００１５】
注視画面検出部１５は、視聴者を撮像する撮像手段を備えている。この注視画面検出部１５は、後述するように取得した画像から、顔の向きや位置を検出し、視線の向きを検出し、注視点を検出する。そして、検出した注視点より注視画面を検出する。
【００１６】
リモートコントローラ１６は、視聴者によって操作され、視聴者の要求を指示する。例えば、コンテンツの切り替えを要求する場合、リモートコントローラ１５のチャンネル切替ボタンを押すことにより、切替制御信号が送信される。
【００１７】
受光部１７は、リモートコントローラ１６からの制御信号を受信する。
【００１８】
制御部１８は、リモートコントローラ１６を介した視聴者からの指示に応じて各部を制御する。例えば、コンテンツ切り替え指示が入力された場合、スイッチャー１４を注視画面検出部１５で検出された注視画面に基づいて制御する。すなわち、表示部１３の各画面に表示するコンテンツの切り替えを制御する。
【００１９】
このコンテンツ再生装置１０は、制御部１８がスイッチャー１４を制御し、受信部１１や記録部１２から入力されたコンテンツ画像を表示部１３の複数の画面に振り分けることによりコンテンツを同時に再生する。
【００２０】
図２は、上述したコンテンツ再生装置１０のコンテンツ切り替え動作を示すフローチャートである。
【００２１】
ステップＳ１において、注視画面検出部１５は、視聴者が注視している画面を検出する。ここで、ステップＳ１の注視画面検出動作を図３に示すフローチャートを用いて説明する。ステップＳ１０１において、注視画面検出部１５は、例えば、肌色、白目の白、黒目の黒等の色彩情報を用いて、両目の輪郭、両目の位置を検出し、さらに画像の輝度情報を用いて鼻孔の位置を検出し、顔の向き及び位置を検出する。
【００２２】
次に、ステップＳ１０２において、注視画面検出部１５は、両目の位置及び鼻孔の位置の幾何学的な位置関係に基づいて眼球の中心の位置及び半径を推定するとともに輝度情報を用いて瞳孔の位置を検出し、眼球の中心と瞳孔の中心を結ぶベクトルを算出することにより視線の向きを検出する。
【００２３】
そして、ステップＳ１０２で検出された視線の延長上の注視点を検出し（ステップＳ１０３）、その注視点が画面上にあるか否かを判別する（ステップＳ１０４）。
【００２４】
ステップＳ１０４において、検出した注視点が画面上である場合、注視画面検出部１５は、その注視点がある画面の番号を出力する。また、検出した注視点が画面上でない場合、注視画像検出処理を終了する。
【００２５】
この注視画面検出処理は、例えば、所定時間Ｔ１毎に行われている。そして、注視画面検出部１５から出力された注視画面番号は、タイムコードとともに制御部１８内のＲＡＭ（Random Access Memory）等のメモリに蓄積される（ステップＳ２）。
【００２６】
そして、制御部１８は、リモートコントローラ１６からコンテンツの切り替えコマンドの受信を待つ（ステップＳ３）。
【００２７】
ステップＳ３において、受光部１７を介してリモートコントローラ１６からコンテンツの切り替えコマンドを受信した場合、制御部１８は、ステップＳ２で蓄積された画面番号１〜画面番号Ｎまでの注視画面情報に基づいてステップＳ４〜ステップＳ１２の処理を行う。つまり、画面１からコンテンツを切り替えるか否かの判別処理を行い（ステップＳ４）、画面ｉ（１≦ｉ≦Ｎ）が表示部１３の画面数Ｎとなるまでコンテンツを切り替えるか否かの判別処理を行う。
【００２８】
ステップＳ５において、画面ｉ（１≦ｉ≦Ｎ）（Ｎは画面数）がＮ以下の場合、ステップＳ６に進み、図４に示すように、コンテンツの切り替えコマンドを受信した時刻ｔ０から過去一定時間Ｔ２（Ｔ２＞Ｔ１）内の画面ｉの注視回数をカウントする。
【００２９】
ステップＳ７において、制御部１８は、各画面の注視回数の分布に基づいて閾値を決定する。
【００３０】
そして、制御部１８は、ステップＳ６でカウントした画面ｉの注視回数が閾値以下か否かを判別する（ステップＳ８）。なお、この判別は、例えば、図５に示すように画面ｉの画面注視時間に基づいて行ってもよい。また、この注視時間は、例えば画面をある時間注視した回数に基づいて算出しても、サンプリングされる注視点に基づいて算出してもよい。
【００３１】
ステップＳ８において、画面ｉの注視回数が閾値以下の場合、ステップＳ９に進み、画面ｉに表示するコンテンツをリストから決定する。例えば、図６に示すリストを用いてコンテンツを決定する場合、画面２及び画面４が注視回数が閾値以下であるとすると、画面１〜画面９にそれぞれ表示されたＮｏ．１〜Ｎｏ．９のコンテンツの内、画面２及び画面４に表示するコンテンツが切り替えられる。画面２及び画面４には、まだ表示されておらずリスト番号の小さいコンテンツが表示される。つまり、画面２にはＮｏ．１０のコンテンツ、画面４にはＮｏ．１１のコンテンツがそれぞれ表示される。なお、ステップＳ８において、画面ｉの注視回数が閾値より大きい場合には、ステップＳ１２に進む。
【００３２】
ステップＳ１０において、制御部１８は、ステップＳ９で決定したコンテンツの出力先をスイッチャー１４によって画面ｉに切り替える。そして、制御部１８は、画面ｉの注視画面情報をメモリから消去する（ステップＳ１１）。
【００３３】
ステップＳ１２において、制御部１８は、画面番号ｉをインクリメントする処理を行い、ステップＳ５に戻り、ｉ＞Ｎとなった場合、上述の切り替え処理を終了する。
【００３４】
このように複数の画面から視聴者の注視回数に基づいて画面を選択し、コンテンツを切り替えることにより、視聴者があまり注視しない画面、すなわち、あまり興味のないコンテンツのみを切り替えることができる。例えば、図７に示す９つの画面１３１〜画面１３９のうち画面１３２及び画面１３４の注視回数が閾値以下であった場合、コンテンツの切り替えコマンドを受信すると画面１３２及び１３４のコンテンツがそれぞれＨＤＤ２、ＣＨ９に切り替わる。一方、よく注視する画面のコンテンツは視聴者が興味をもって見続けたいコンテンツであり、コンテンツの切り替えが行なわれないため、意に反して見たいコンテンツが消えてしまうことがない。
【００３５】
また、視聴者は、リモートコントローラ１６で何回も画面を指定してコンテンツを切り替えることなく、切り替えボタンのみを選択すればよいため、非常に簡単にコンテンツの切り替えを行うことができる。
【００３６】
なお、実施の形態では、視聴者から受信したコンテンツの切り替えの指示に応じて、コンテンツを切り替えることとしたが、注視されていない画面のコンテンツを定期的に切り替えるようにしてもよい。例えば、ある時間における画面の注視回数が閾値以下の場合、その画面のコンテンツが自動的に切り替えられるようにすれば、視聴者は多くの情報を得ることができる。
【００３７】
また、機械的にリスト番号の次のコンテンツに切り替えるのではなく、視聴者の注視情報を取得、解析することにより、視聴者が同時に見るコンテンツの組み合わせを作成し、この組み合わせのリストに基づいてコンテンツを切り替えるようにしてもよい。例えば、最も注視回数及び／又は注視回数が多い画面に表示されたコンテンツと再生可能な他のコンテンツとの類似性を比較評価し、評価値が高い順番のコンテンツリストを作成し、その順番でコンテンツの表示を切り替えるようにしてもよい。このリストはＥＰＧ（Electronic Program Guide）等のメタデータを用いて作成することができる。そして、例えば、ジャンル、サブジャンル、タイトル、キーワードのうち一致するものが多いものを類似性の評価値の高いものとする。したがって、例えば、ある局のニュースが再生された画面を注視した場合、そのニュースとの類似性の評価値に基づいてコンテンツリストを作成し、そのコンテンツリストに基づいて切り替えを行えば、例えば、多くのニュースコンテンツを一度に見ることができ、多くの情報を得ることができる。また、例えば、ある人物の試合中継が再生された画面を注視し、その人物の過去の試合のコンテンツのリストに基づいて切り替えを行えば、その人物の現在と過去を容易に比較することができる。
【図面の簡単な説明】
【００３８】
【図１】本発明の一実施形態におけるコンテンツ再生装置を示すブロック図である。
【図２】コンテンツ切り替え動作例を示すフローチャートである。
【図３】注視画面検出動作例を示すフローチャートである。
【図４】コンテンツの切り替えコマンドを受信した時刻からの過去一定時間を説明するための図である。
【図５】切り替え画面の決定例を説明するための図である。
【図６】コンテンツの再生リストの一例を示す図である。
【図７】本発明の一実施形態におけるコンテンツの切り替えの一例を示す図である。
【図８】従来におけるコンテンツの切り替えの一例を示す図である。
【図９】従来におけるコンテンツの切り替えの一例を示す図である。
【符号の説明】
【００３９】
１０  コンテンツ再生装置、１１  受信部、１２  記録部、１３  表示部、１４  スイッチャー、１５  注視画面検出部、１６  リモートコントローラ、１７  受光部、１８  制御部
【図１】
0004802618.tif 000002
【図２】
0004802618.tif 000003
【図３】
0004802618.tif 000004
【図４】
0004802618.tif 000005
【図５】
0004802618.tif 000006
【図６】
0004802618.tif 000007
【図７】
0004802618.tif 000008
【図８】
0004802618.tif 000009
【図９】
0004802618.tif 000010