(57)【要約】      （修正有）【課題】ディスプレイ上に１以上の画面を表示する表示装置において、複数の視聴者が常により視聴しやすいように画面表示を行うことができる表示装置を提供する。【解決手段】表示装置において、カメラを設置し、カメラの映像を入力するカメラ入力部と、視聴者からのリモコン操作によるリモコン信号受信部と、カメラに映った映像から視聴者数を検出する視聴者数検出部と、カメラに映った映像から視聴者の視線を検出する視線検出部と、カメラに映った映像から視聴者の位置を検出する視聴者位置検出部と、１以上の画面のサイズや表示位置などを制御する表示制御部と、１以上の画面を表示するディスプレイとを設ける。【選択図】図２
2011055382.tif 000002
【特許請求の範囲】
【請求項１】
リモコン操作を行う第１の視聴者と、リモコン操作を行わない第２の視聴者が視聴を行うための表示装置であって、
前記第１の視聴者を撮影したカメラ映像を入力するカメラ入力部と、
前記カメラ入力部で入力されたカメラ映像から前記第１の視聴者の視線を検出する視線検出部と、
前記第１の視聴者によりリモコン操作で指示される第１の表示画面と、前記第２の視聴者が視聴する第２の表示画面を表示する表示部と、
前記視線検出部で検出された視線の方向に前記第１の表示画面を表示させるように前記表示部を制御する表示制御部を備えることを特徴とする表示装置。
【請求項２】
前記入力部で入力されたカメラ映像から視聴者数を検出する視聴者数検出部をさらに備え、
前記表示制御部は、前記視聴者数検出部で検出される視聴者数が１になっている場合には、前記第１の表示画面を全画面表示させるように前記表示部を制御することを特徴とする請求項１に記載の表示装置。
【請求項３】
前記視線検出部は、前記第２の視聴者の視線も検出し、視線数を検出可能であって、
前表示記制御部は、前記視線検出部で検出される視線数が１になった場合には、前記第１の表示画面を全画面表示させるように前記表示部を制御することを特徴とする請求項１に記載の表示装置。
【請求項４】
前記視線検出部は、前記第２の視聴者の視線も検出可能であり、
前記リモコン操作により、前記第２の視聴者の視線を優先することを設定可能であって
前記表示制御部は、前記第２の視聴者の視線を優先することが設定されている場合、第１の表示画面を前記第２の視聴者の視線のない方向に表示させるように表示部を制御することを特徴とする請求項１に記載の表示装置。
【請求項５】
複数の視聴者が視聴を行うための表示装置であって、
前記複数の視聴者を撮影したカメラ映像を入力するカメラ入力部と、
前記カメラ入力部で入力されたカメラ映像から視聴者数を検出する視聴者数検出部と、
前記カメラ入力部で入力されたカメラ映像から複数の視聴者の視線を検出する視線検出部と、
少なくとも２つの表示画面を表示する表示部と、
前記視聴者数検出部で検出される視聴者数が１になった場合に、前記視線検出部で検出される１になった視聴者の視線が送られている表示画面を全画面表示させるように前記表示部を制御する表示制御部を備えることを特徴とする表示装置。
【請求項６】
第１の視聴者と第２の視聴者が視聴を行うための表示装置であって、
前記第１及び第２の視聴者を撮影したカメラ映像を入力するカメラ入力部と、
前記カメラ入力部で入力されたカメラ映像から前記第１及び第２の視聴者の視線を検出する視線検出部と、
前記第１の視聴者が視聴する第１の表示画面と、前記第２の視聴者が視聴する第２の表示画面を表示する表示部と、
前記視線検出部で第１の視聴者の視線しか検出されなくなった場合には、前記第１の表示画面を全画面表示させるように前記表示部を制御する表示制御部を備えることを特徴とする表示装置。
【請求項７】
複数の視聴者が視聴を行うための表示装置であって、
前記複数の視聴者を撮影したカメラ映像を入力するカメラ入力部と、
前記カメラ入力部で入力されたカメラ映像から前記複数の視聴者の視線を検出する視線検出部と、
２つの表示画面を表示する表示部と、
前記２つの表示画面のうち、前記視線検出部で検出される視線数が多い方の表示画面を全画面表示させるように前記表示部を制御する表示制御部を備えることを特徴とする表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、一つのディスプレイ上に表示された複数の画面を複数の視聴者が視聴する場合の表示装置に関し、特に、視聴者の視線により画面表示を変える表示装置に関する。
【背景技術】
【０００２】
近年、ディスプレイの大画面化及び高精細化に伴い、一つのディスプレイ内に２画面表示やPinPなどで複数画面表示するテレビが登場している。しかし、複数人の視聴者に対応したものとは言い切れず、例えば、３人の視聴者がそれぞれ違う画面を表示させたい場合、画面を３分割あるいは３つのウィンドウ画面をディスプレイ上に表示して、それぞれが視聴するということになるが、自分が視聴している画面と、他人が視聴している画面とに形状や大きさの区別がないため、一度ディスプレイから目を離すと、自分がどの画面を視聴していたかを識別し難くなる。
【０００３】
また、テレビ視聴中の様々なテレビ操作は全画面で切り替わるものもあり、このような操作は、複数人での視聴の妨げになる。例えば、録画予約をするために、電子番組表を表示するが、電子番組表は全画面に表示される場合が多く、電子番組表を全画面表示してしまうと、他に番組を視聴している人の視聴を妨げることになってしまう。
【０００４】
このような課題を考慮したものとして、特許文献１に開示された手法がある。特許文献１は、ディスプレイ上に表示される１以上の画面の視聴者の視聴位置を検出し、検出された視聴位置に基づき、前記１以上の画面の前記ディスプレイ上での表示位置を決定するというものである。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００１−９４９００号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、上記先行技術文献では、複数のリモコンが余分に必要となってしまう。また、視聴者の位置情報に基づいて複数画面の表示位置を変えても、必ずしも、視線にあった表示位置にすることはできない場合がある。
【０００７】
本発明は、上記の問題点を解消するためになされたものであり、ディスプレイ上に複数の画面を表示する表示装置において、複数の視聴者の視線を考慮して常により視聴しやすいように画面表示を行うことができる表示装置を提供することを課題とする。
【課題を解決するための手段】
【０００８】
上記の課題を解決するために本発明は、リモコン操作を行う第１の視聴者と、リモコン操作を行わない第２の視聴者が視聴を行うための表示装置において、前記第１の視聴者を撮影したカメラ映像を入力するカメラ入力部と、前記カメラ入力部で入力されたカメラ映像から前記第１の視聴者の視線を検出する視線検出部と、
前記第１の視聴者によりリモコン操作で指示される第１の表示画面と、前記第２の視聴者が視聴する第２の表示画面を表示する表示部と、前記視線検出部で検出された視線の方向に前記第１の表示画面を表示させるように前記表示部を制御する表示制御部を備えるようにする。
【０００９】
また、別の本発明は、複数の視聴者が視聴を行うための表示装置において、前記複数の視聴者を撮影したカメラ映像を入力するカメラ入力部と、前記カメラ入力部で入力されたカメラ映像から視聴者数を検出する視聴者数検出部と、前記カメラ入力部で入力されたカメラ映像から複数の視聴者の視線を検出する視線検出部と、少なくとも２つの表示画面を表示する表示部と、前記視聴者数検出部で検出される視聴者数が１になった場合に、前記視線検出部で検出される１になった視聴者の視線が送られている表示画面を全画面表示させるように前記表示部を制御する表示制御部を備えるようにする。
【００１０】
また、別の本発明は、第１の視聴者と第２の視聴者が視聴を行うための表示装置において、前記第１及び第２の視聴者を撮影したカメラ映像を入力するカメラ入力部と、前記カメラ入力部で入力されたカメラ映像から前記第１及び第２の視聴者の視線を検出する視線検出部と、前記第１の視聴者が視聴する第１の表示画面と、前記第２の視聴者が視聴する第２の表示画面を表示する表示部と、前記視線検出部で第１の視聴者の視線しか検出されなくなった場合には、前記第１の表示画面を全画面表示させるように前記表示部を制御する表示制御部を備えるようにする。
【００１１】
また、別の本発明は、複数の視聴者が視聴を行うための表示装置において、前記複数の視聴者を撮影したカメラ映像を入力するカメラ入力部と、前記カメラ入力部で入力されたカメラ映像から前記複数の視聴者の視線を検出する視線検出部と、２つの表示画面を表示する表示部と、前記２つの表示画面のうち、前記視線検出部で検出される視線数が多い方の表示画面を全画面表示させるように前記表示部を制御する表示制御部を備えるようにする。
【発明の効果】
【００１２】
本発明によれば、ディスプレイ上に２以上の画面を表示する表示装置において、視線を考慮して常により視聴しやすいように画面表示を行うことができる。
【図面の簡単な説明】
【００１３】
【図１】実施例１に係る画面表示装置のブロック図である。
【図２】実施例１に係る画面表示方法の処理手順を示すフロー図である。
【図３】実施例２に係る画面表示方法の処理手順を示すフロー図である。
【図４】実施例３に係る画面表示方法の処理手順を示すフロー図である。
【図５】実施例４に係る画面表示方法の処理手順を示すフロー図である。
【図６】実施例５に係る画面表示方法の処理手順を示すフロー図である。
【図７】実施例６に係る画面表示方法の処理手順を示すフロー図である。
【図８】実施例７に係る画面表示方法の処理手順を示すフロー図である。
【図９】実施例８に係る画面表示方法の処理手順を示すフロー図である。
【図１０】実施例９に係る画面表示方法の処理手順を示すフロー図である。
【図１１】実施例１に係る画面表示方法の処理手順による画面表示例である。
【図１２】実施例２に係る画面表示方法の処理手順による画面表示例である。
【図１３】実施例４に係る画面表示方法の処理手順による画面表示例である。
【図１４】実施例７に係る画面表示方法の処理手順による画面表示例である。
【図１５】実施例８に係る画面表示方法の処理手順による画面表示例である。
【発明を実施するための形態】
【実施例１】
【００１４】
本実施例は本発明の画面表示方法の１実施例である。以下、本実施例を図１、図２及び図１１を用いて説明する。
【００１５】
図１は本発明における画面表示方法を実現する画面表示装置のブロック図であり、図２は本実施例における画面表示方法の処理手順を示すフロー図であり、図１１は本実施例における画面表示例である。
【００１６】
図１は本発明における画面表示方法を実現する画面表示装置のブロック図であり、１０１はカメラの映像を入力するカメラ入力部であり、１０２は視聴者からのリモコン操作によるリモコン信号を受信するリモコン信号受信部であり、１０３はカメラに映った映像から視聴者数を検出する視聴者数検出部であり、１０４はカメラに映った映像から視聴者の視線を検出する視線検出部であり、１０５はカメラに映った映像から視聴者の位置を検出する視聴者位置検出部であり、１０６は１以上の画面のサイズや表示位置などを制御する表示制御部であり、１０７は１以上の画面を表示するディスプレイである。なお、図示していないが、本実施例における画面表示方法を実現する画面表示装置には、カメラが設置されており、また放送波を受信でき、またはインターネットとの通信機能を有して、番組の表示及び番組に付随する情報、例えば番組表などを表示することができる。
【００１７】
以下、本実施例における画面表示方法の処理手順を図２のフロー図を用いて説明する。
【００１８】
図２は前記カメラ入力部１０１で入力したカメラ映像を基に前記視聴者数検出部１０３で検出した視聴者数と、前記カメラ入力部１０１で入力したカメラ映像を基に前記視線検出部１０４で検出した視聴者の視線と、前記カメラ入力部１０１で入力したカメラ映像を基に前記視聴者位置検出部１０５で検出したリモコン操作者の位置から、前記表示制御部１０６で画面数や画面サイズ、画面位置を決定し、前記ディスプレイ１０７に１以上の画面を表示する一連の処理を示すフロー図である。まず、視聴者のリモコン操作により、操作キーが送信され、前記リモコン受信部１０２で受信された操作キーについて、キー入力がなされる（ステップＳ２０１）。入力されたキーの内容が、例えば、電子番組表表示など全画面表示するような要求である場合、前記カメラ入力部１０１で入力したカメラ映像を基に前記視聴者数検出部１０３で視聴者数を検出する（ステップＳ２０２）。前記視聴者数検出部１０３で検出した視聴者数が２人以上かどうかを判断し（ステップＳ２０３）、視聴者数が２人以上だった場合、前記カメラ入力部１０１で入力したカメラ映像を基に前記視線検出部１０４で複数視聴者の視線を検出する（ステップＳ２０４）。ステップＳ２０３で検出した視聴者数が２人より少なかった場合、つまり１人しか検出されなかった場合、ステップＳ２０１で入力されたキー入力に対応する画面を全画面表示して（ステップＳ２０５）、一連の処理を終了する。ステップＳ２０４で複数視聴者の視線を検出後、前記カメラ入力部１０１で入力したカメラ映像を基に前記視聴者位置検出部１０５でリモコン操作者の位置を検出する（ステップＳ２０６）。ステップＳ２０４で検出した複数視聴者の視線とステップＳ２０６で検出したリモコン操作者の位置から、ステップＳ２０１で入力されたキー入力に対応する画面の表示位置を前記表示制御部１０６で決定し、前記ディスプレイ１０７に画面表示し（ステップＳ２０７）、一連の処理を終了する。ステップＳ２０７での画面位置の決定方法は、例えば、現在視聴中の番組は中心位置をずらしてアスペクト比を４：３に変更して両端をカットし、リモコン操作者の位置に遠い側に番組画面を表示し、リモコン操作者の位置に近い側にキー入力に対応した画面を表示する。また、リモコン操作者の視線がリモコン操作者の位置から遠い側にある場合、そちら側にキー入力に対応した画面を表示する。
【００１９】
図１１は本発明における画面表示方法によって表示される画面表示例であり、１１１１はリモコン操作者であり、１１１２は他の視聴者である。１１０１はリモコン操作者に対する画面であり、１１０２は視聴者１１１２に対する画面である。図１１（ａ）では、前記ステップＳ２０３で視聴者数が１人の場合の画面表示例であり、リモコン操作者が番組表表示キーを押した場合である。この場合はリモコンキーに対応した番組表画面を全画面表示する。図１１（ｂ）では、前記ステップＳ２０３で視聴者数が２人だった場合の画面表示例であり、リモコン操作者が番組表表示キーを押した場合である。この場合は現在視聴中の番組は中心位置をずらしてアスペクト比を４：３に変更して両端をカットし、リモコンキーに対応した番組表画面をリモコン操作者に近い側に表示する。図１１（ｃ）では、前記ステップＳ２０３で視聴者数が２人だった場合の画面表示例であり、リモコン操作者が番組表表示キーを押した場合である。この場合は現在視聴中の番組は中心位置をずらしてアスペクト比を４：３に変更して両端をカットし、リモコンキーに対応した番組表画面をリモコン操作者の視線側に表示する。
【００２０】
上記処理により、他の視聴者の視聴を妨げることなく、常により視聴しやすいように画面表示を行うことができる画面表示方法を提供することができる。
【実施例２】
【００２１】
本実施例は、第１の実施例に対して、視線の数を考慮した場合の画面表示方法である。なお、本実施例における、画面表示方法を実現する画面表示装置のブロック図は第１の実施例で示した図１と同じである。以下、図３及び図１２を用いて本実施例における画面表示方法の処理手順を説明する。
【００２２】
図３は本実施例における画面表示方法の処理手順を示すフロー図であり、前記カメラ入力部１０１で入力したカメラ映像を基に前記視聴者数検出部１０３で検出した視聴者数と、前記カメラ入力部１０１で入力したカメラ映像を基に前記視線検出部１０４で検出した視聴者の視線の数と、前記カメラ入力部１０１で入力したカメラ映像を基に前記視聴者位置検出部１０５で検出したリモコン操作者の位置から、前記表示制御部１０６で画面数や画面サイズ、画面位置を決定し、前記ディスプレイ１０７に１以上の画面を表示する一連の処理を示すフロー図である。まず、視聴者のリモコン操作により、操作キーが送信され、前記リモコン受信部１０２で受信された操作キーについて、キー入力がなされる（ステップＳ３０１）。入力されたキーの内容が、例えば、電子番組表表示など全画面表示するような要求である場合、前記カメラ入力部１０１で入力したカメラ映像を基に前記視聴者数検出部１０３で視聴者数を検出する（ステップＳ３０２）。前記視聴者数検出部１０３で検出した視聴者数が２人以上かどうかを判断し（ステップＳ３０３）、視聴者数が２人以上だった場合、前記カメラ入力部１０１で入力したカメラ映像を基に前記視線検出部１０４で複数視聴者の視線を検出する（ステップＳ３０４）。複数視聴者の視線の数が２以上かどうかを判断し（ステップＳ３０５）、視線の数が２以上だった場合、前記カメラ入力部１０１で入力したカメラ映像を基に前記視聴者位置検出部１０５でリモコン操作者の位置を検出する（ステップＳ３０６）。ステップＳ３０３で検出した視聴者数が２人より少なかった場合、つまり１人しか検出されなかった場合、及び、ステップＳ３０５で検出した視線の数が２より少なかった場合、つまり１つしか視線を検出しなかった場合、この場合は、複数視聴者を検出しても、一人しかディスプレイを見ていないと判断できるので、ステップＳ３０１で入力されたキー入力に対応する画面を全画面表示して（ステップＳ３０７）、一連の処理を終了する。ステップＳ３０４で検出した複数視聴者の視線とステップＳ３０６で検出したリモコン操作者の位置から、ステップＳ３０１で入力されたキー入力に対応する画面の表示位置を前記表示制御部１０６で決定し、前記ディスプレイ１０７に画面表示し（ステップＳ３０８）、一連の処理を終了する。ステップＳ３０８での画面位置の決定方法は、例えば、現在視聴中の番組は中心位置をずらしてアスペクト比を４：３に変更して両端をカットし、リモコン操作者の位置に遠い側に番組画面を表示し、リモコン操作者の位置に近い側にキー入力に対応した画面を表示する。また、リモコン操作者の視線がリモコン操作者の位置から遠い側にある場合、そちら側にキー入力に対応した画面を表示する。
【００２３】
図１２は本発明における画面表示方法によって表示される画面表示例であり、１２１１はリモコン操作者であり、１２１２は他の視聴者である。１２０１はリモコン操作者に対する画面である。図１２では、前記ステップＳ３０３で視聴者数が２人だが、リモコン操作者以外の他の視聴者１２１２の視線がディスプレイに向いておらず、前記ステップＳ３０５で視線の数が１の場合の画面表示例であり、リモコン操作者が番組表表示キーを押した場合である。この場合はリモコンキーに対応した番組表画面を全画面表示する。
【００２４】
上記処理により、他の視聴者の視聴を妨げることなく、常により視聴しやすいように画面表示を行うことができる画面表示方法を提供することができる。また、視線の数を判断することで、複数の視聴者を検出した場合でも、視線が１つしか検出されなかった場合、すなわち、一人しかディスプレイを見ておらず、他の人はディスプレイを見ていない場合、全画面表示することで、より視聴しやすいように画面表を行うことができる画面表示方法を提供することができる。
【実施例３】
【００２５】
本実施例は、第１の実施例に対して、視聴者数を検出するのではなく、視聴者の視線の数を検出することで処理を省いた場合の画面表示方法である。なお、本実施例における、画面表示方法を実現する画面表示装置のブロック図は第１の実施例で示した図１とほぼ同じであるが、前記視聴者数検出部１０３は不要になる。以下、図４を用いて本実施例における画面表示方法の処理手順を説明する。
【００２６】
図４は本実施例における画面表示方法の処理手順を示すフロー図であり、前記カメラ入力部１０１で入力したカメラ映像を基に前記視線検出部１０４で検出した視聴者の視線の数と、前記カメラ入力部１０１で入力したカメラ映像を基に前記視聴者位置検出部１０５で検出したリモコン操作者の位置から、前記表示制御部１０６で画面数や画面サイズ、画面位置を決定し、前記ディスプレイ１０７に１以上の画面を表示する一連の処理を示すフロー図である。まず、視聴者のリモコン操作により、操作キーが送信され、前記リモコン受信部１０２で受信された操作キーについて、キー入力がなされる（ステップＳ４０１）。入力されたキーの内容が、例えば、電子番組表表示など全画面表示するような要求の場合、前記カメラ入力部１０１で入力したカメラ映像を基に前記視線検出部１０４で複数視聴者の視線を検出する（ステップＳ４０２）。視聴者の視線の数が２以上かどうかを判断し（ステップＳ４０３）、視線の数が２以上だった場合、前記カメラ入力部１０１で入力したカメラ映像を基に前記視聴者位置検出部１０５でリモコン操作者の位置を検出する（ステップＳ４０４）。ステップＳ４０３で検出した視線の数が２より少なかった場合、つまり１つしか視線を検出しなかった場合、ステップＳ４０１で入力されたキー入力に対応する画面を全画面表示して（ステップＳ４０５）、一連の処理を終了する。ステップＳ４０２で検出した視聴者の視線とステップＳ４０４で検出したリモコン操作者の位置から、ステップＳ４０１で入力されたキー入力に対応する画面の表示位置を前記表示制御部１０６で決定し、前記ディスプレイ１０７に画面表示し（ステップＳ４０６）、一連の処理を終了する。ステップＳ４０６での画面位置の決定方法は、例えば、現在視聴中の番組は中心位置をずらしてアスペクト比を４：３に変更して両端をカットし、リモコン操作者の位置に遠い側に番組画面を表示し、リモコン操作者の位置に近い側にキー入力に対応した画面を表示する。また、リモコン操作者の視線がリモコン操作者の位置から遠い側にある場合、そちら側にキー入力に対応した画面を表示する。
【００２７】
上記処理により、他の視聴者の視聴を妨げることなく、常により視聴しやすいように画面表示を行うことができる画面表示方法を提供することができる。また、視線の数で視聴者の数を判断することで、視聴者数検出部１０３とそれに関わる処理手順を省くことができる。
【実施例４】
【００２８】
本実施例は、第１の実施例に対して、画面表示モードを設けることで、視聴者が画面の表示方法をカスタマイズできるようにした画面表示方法である。画面表示方法を実現する画面表示装置のブロック図は第１の実施例で示した図１と同じである。以下、図５及び図１３を用いて本実施例における画面表示方法の処理手順を説明する。
【００２９】
図５は本実施例における画面表示方法の処理手順を示すフロー図であり、前記カメラ入力部１０１で入力したカメラ映像を基に前記視聴者数検出部１０３で検出した視聴者数と、前記カメラ入力部１０１で入力したカメラ映像を基に前記視線検出部１０４で検出した視聴者の視線と、前記カメラ入力部１０１で入力したカメラ映像を基に前記視聴者位置検出部１０５で検出したリモコン操作者の位置から、前記表示制御部１０６で画面数や画面サイズ、画面位置を決定し、前記ディスプレイ１０７に１以上の画面を表示する一連の処理を示すフロー図である。まず、視聴者のリモコン操作により、操作キーが送信され、前記リモコン受信部１０２で受信された操作キーについて、キー入力がなされる（ステップＳ５０１）。入力されたキーの内容が、例えば、電子番組表表示など全画面表示するような要求である場合、前記カメラ入力部１０１で入力したカメラ映像を基に前記視聴者数検出部１０３で視聴者数を検出する（ステップＳ５０２）。前記視聴者数検出部１０３で検出した視聴者数が２人以上かどうかを判断し（ステップＳ５０３）、視聴者数が２人以上だった場合、予め登録されたモードが操作者優先モードかどうかを判断する（ステップＳ５０４）。ここで、本実施例におけるモードには操作者に近い方に画面表示する操作者優先モードと視線が少ない方に画面表示する視聴者優先モードがある。予め登録されたモードが操作者優先モードでない場合、すなわち視聴者優先モードの場合、前記カメラ入力部１０１で入力したカメラ映像を基に前記視線検出部１０４で複数視聴者の視線を検出する（ステップＳ５０６）。検出した複数視聴者の視線から、ステップＳ５０１で入力されたキー入力に対応する画面の表示位置を視線が少ない方に表示するように前記表示制御部１０６で画面表示位置を決定し、前記ディスプレイ１０７に画面表示し（ステップＳ５０８）、一連の処理を終了する。ステップＳ５０４で予め登録されたモードが操作者優先モードの場合、前記カメラ入力部１０１で入力したカメラ映像を基に前記視聴者位置検出部１０５でリモコン操作者の位置を検出する（ステップＳ５０７）。検出したリモコン操作者の位置から、ステップＳ５０１で入力されたキー入力に対応する画面の表示位置をリモコン操作者に近い方に表示するように前記表示制御部１０６で画面表示位置を決定し、前記ディスプレイ１０７に画面表示し（ステップＳ５０８）、一連の処理を終了する。また、ステップＳ５０３で検出した視聴者数が２人より少なかった場合、つまり１人しか検出されなかった場合、ステップＳ５０１で入力されたキー入力に対応する画面を全画面表示して（ステップＳ５０５）、一連の処理を終了する。
【００３０】
図１３は本発明における画面表示方法によって表示される画面表示例であり、１３１１はリモコン操作者であり、１３１２、１３１３は他の視聴者である。１３０１はリモコン操作者に対する画面であり、１３０２は視聴者１３１２、１３１３に対する画面である。図１３では、前記ステップＳ５０３で視聴者数が３人の場合の画面表示例であり、リモコン操作者が番組表表示キーを押した場合である。図１３（ａ）は、前記ステップＳ５０４でモードが操作者優先モードの場合の画面例であり、この場合、現在視聴中の番組は中心位置をずらしてアスペクト比を４：３に変更して両端をカットし、リモコン操作者の位置に近い側にキー入力に対応した番組表画面を表示する。図１３（ｂ）は、前記ステップＳ５０４でモードが視聴者優先モードの場合で、他の視聴者１３１２、１３１３の視線がディスプレイ中心より左側を見ている時の画面例であり、この場合、視線が少ない方、すなわちディスプレイ中心より右側に番組表画面表示する。
【００３１】
上記処理により、他の視聴者の視聴を妨げることなく、常により視聴しやすいように画面表示を行うことができる画面表示方法を提供することができ、かつ、画面表示モードを設けることで、視聴者が画面の表示方法をカスタマイズできるようになり、視聴者にとってより視聴しやすいように画面表示を行うことができる画面表示方法を提供することができる。
【実施例５】
【００３２】
本実施例は、第１の実施例に対して、リモコン操作者の個人識別を行う場合の画面表示方法である。
【００３３】
なお、本実施例における、画面表示方法を実現する画面表示装置のブロック図は第１の実施例で示した図１とほぼ同じであるが、前記視線検出部１０４は不要であり、代わりにリモコン操作者の個人識別を行う個人識別部を設ける。以下、図６を用いて本実施例における画面表示方法の処理手順を説明する。
【００３４】
図６は本実施例における画面表示方法の処理手順を示すフロー図であり、前記カメラ入力部１０１で入力したカメラ映像を基に前記視聴者数検出部１０３で検出した視聴者数と、前記カメラ入力部１０１で入力したカメラ映像を基に前記個人識別部で検出したリモコン操作者の個人識別情報と、前記カメラ入力部１０１で入力したカメラ映像を基に前記視聴者位置検出部１０５で検出したリモコン操作者の位置から、前記表示制御部１０６で画面数や画面サイズ、画面位置を決定し、前記ディスプレイ１０７に１以上の画面を表示する一連の処理を示すフロー図である。まず、視聴者のリモコン操作により、操作キーが送信され、前記リモコン受信部１０２で受信された操作キーについて、キー入力がなされる（ステップＳ６０１）。入力されたキーの内容が、例えば、電子番組表表示など全画面表示するような要求である場合、前記カメラ入力部１０１で入力したカメラ映像を基に前記視聴者数検出部１０３で視聴者数を検出する（ステップＳ６０２）。前記視聴者数検出部１０３で検出した視聴者数が２人以上かどうかを判断し（ステップＳ６０３）、視聴者数が２人以上だった場合、前記カメラ入力部１０１で入力したカメラ映像を基に前記視聴者位置検出部１０５でリモコン操作者の位置を検出する（ステップＳ６０４）。その後、前記カメラ入力部１０１で入力したカメラ映像を基に前記個人識別部でリモコン操作者の個人識別情報を検出する（ステップＳ６０６）。ステップＳ６０６で識別したリモコン操作者が予め登録された人物かどうか判断し（ステップＳ６０７）、登録された人物である場合、個人毎に予め登録された画面サイズなどの画面表示情報に従って画面サイズを決定する（ステップＳ６０８）。ステップＳ６０８で画面サイズを決めた後、或いは、ステップＳ６０７でリモコン操作者が予め登録された人物でなかった場合、ステップＳ６０４で検出したリモコン操作者の位置から、ステップＳ６０１で入力されたキー入力に対応する画面の表示位置を前記表示制御部１０６で決定し、前記ディスプレイ１０７に画面表示し（ステップＳ６０９）、一連の処理を終了する。
【００３５】
上記処理により、他の視聴者の視聴を妨げることなく、常により視聴しやすいように画面表示を行うことができる画面表示方法を提供することができる。また、リモコン操作者を識別することで、予め登録した画面サイズなどの画面表示情報に従って、画面表示することで、視聴者にとってより視聴しやすいように画面表示を行うことができる画面表示方法を提供することができる。
【実施例６】
【００３６】
本実施例は、第１の実施例に対して、複数画面表示中に視聴者数及び視線から画面表示を制御する画面表示方法である。なお、本実施例における画面表示方法を実現する画面表示装置のブロック図は第１の実施例で示した図１とほぼ同じであるが、前記視聴者位置検出部１０４は不要である。以下、図７を用いて本実施例における画面表示方法の処理手順を説明する。
【００３７】
図７は本実施例における画面表示方法の処理手順を示すフロー図であり、前記カメラ入力部１０１で入力したカメラ映像を基に前記視聴者数検出部１０３で検出した視聴者数と、前記カメラ入力部１０１で入力したカメラ映像を基に前記視線検出部１０４で検出した視聴者の視線から、前記表示制御部１０６で全画面表示を決定し、前記ディスプレイ１０７に全画面表示する一連の処理を示すフロー図である。複数画面が表示されている間、前記カメラ入力部１０１で入力したカメラ映像を基に前記視聴者数検出部１０３で視聴者数を検出する（ステップＳ７０１）。前記視聴者数検出部１０３で検出した視聴者数が１人かどうかを判断し（ステップＳ７０２）、視聴者数が１人だった場合、前記カメラ入力部１０１で入力したカメラ映像を基に前記視線検出部１０４で視聴者の視線を検出する（ステップＳ７０３）。前記ディスプレイ１０７に表示されている複数画面のうち、ステップＳ７０３で検出した視線がある画面を全画面表示するように前記表示制御部１０６で決定し、前記ディスプレイ１０７に全画面表示し（ステップＳ７０４）、一連の処理を終了する。ステップＳ７０２で、検出された視聴者数が１人で無い場合は、ステップＳ７０１に戻って処理を繰り返す。なお、この処理は間に何秒かスリープして検出頻度を下げても良い。
【００３８】
上記処理により、視聴者が１人になった場合、複数画面表示が解除され、見ている側の画面が全画面表示されるので、常により視聴しやすいように画面表示を行うことができる画面表示方法を提供することができる。
【実施例７】
【００３９】
本実施例は、第１の実施例に対して、複数画面表示中に視聴者の視線の数から画面表示を制御する画面表示方法である。なお、本実施例における画面表示方法を実現する画面表示装置のブロック図は第１の実施例で示した図１とほぼ同じであるが、前記視聴者数検出部１０３及び前記視聴者位置検出部１０４は不要である。以下、図８及び図１４を用いて本実施例における画面表示方法の処理手順を説明する。
【００４０】
図８は本実施例における画面表示方法の処理手順を示すフロー図であり、前記カメラ入力部１０１で入力したカメラ映像を基に前記視線検出部１０４で検出した視聴者の視線の数から、前記表示制御部１０６で全画面表示を決定し、前記ディスプレイ１０７に全画面表示する一連の処理を示すフロー図である。複数画面が表示されている間、前記カメラ入力部１０１で入力したカメラ映像を基に前記視線検出部１０４で視聴者の視線を検出する（ステップＳ８０１）。前記視線検出部１０４で検出した視聴者の視線の数が１つかどうかを判断し（ステップＳ８０２）、視線の数が１つだった場合、前記ディスプレイ１０７に表示されている複数画面のうち、ステップＳ８０１で検出した視線がある画面を全画面表示するように前記表示制御部１０６で決定し、前記ディスプレイ１０７に全画面表示し（ステップＳ８０３）、一連の処理を終了する。ステップＳ８０２で、検出された視聴者の視線の数が１つで無い場合は、ステップＳ８０１に戻って処理を繰り返す。なお、この処理は間に何秒かスリープして検出頻度を下げても良い。
【００４１】
図１４は本発明における画面表示方法によって表示される画面表示例であり、１４１１、１４１２は視聴者である。１４０１、１４０２はそれぞれ画面である。図１４（ａ）は２人視聴者が存在しているが、視聴者１４１２の視線がディスプレイを向いていないので、前記ステップＳ８０２で視線先画面が１になり、ステップＳ８０３で視聴者１４１１の視線先画面であるＳ１４０１を全画面表示する。図１４（ｂ）はこの処理により全画面表示した時の画面表示である。
【００４２】
上記処理により、視聴者の視線の数が１つになった場合、すなわち視聴者が１人になった場合、複数画面表示が解除され、見ている側の画面が全画面表示されるので、常により視聴しやすいように画面表示を行うことができる画面表示方法を提供することができる。なお、実施例６に比べて、視聴者数検出部及びそれに関わる処理が不要になるので、コスト削減になる。
【実施例８】
【００４３】
本実施例は、第１の実施例に対して、複数画面表示中にCMの検出及び視線から画面表示を制御する画面表示方法である。なお、本実施例における画面表示方法を実現する画面表示装置のブロック図は第１の実施例で示した図１とほぼ同じであるが、前記視聴者数検出部１０３及び前記視聴者位置検出部１０４は不要であり、代わりにCMを検出するCM検出部を設ける。以下、図９及び図１５を用いて本実施例における画面表示方法の処理手順を説明する。
【００４４】
図９は本実施例における画面表示方法の処理手順を示すフロー図であり、前記カメラ入力部１０１で入力したカメラ映像を基に前記視線検出部１０４で検出した視聴者の視線の数と、放送中の番組映像からCMを検出するCM検出部で検出したCM検出情報から、前記表示制御部１０６で画面制御を行い、前記ディスプレイ１０７に画面表示する一連の処理を示すフロー図である。複数画面が表示され、かつ、主画面側に放送が表示されている場合、前記CM検出部でCM検出を行う（ステップＳ９０１）。CMが検出された場合、前記カメラ入力部１０１で入力したカメラ映像を基に前記視線検出部１０４で視聴者の視線を検出する（ステップＳ９０２）。前記ディスプレイ１０７に表示されている複数画面のうち、子画面への視線の数が主画面への視線の数より多いかどうか判断し（ステップＳ９０３）、子画面への視線の数の方が多い場合、現在の画面サイズ・画面位置などの画面表示情報を前記表示制御部１０６で保存し（ステップＳ９０４）、該視線側の子画面を拡大するように前記表示制御部１０６で決定し、前記ディスプレイ１０７に画面表示する（ステップＳ９０５）。その後、前記CM検出部で主画面側のCMが終了したかを判断し（ステップＳ９０６）、主画面側のCMが終了した場合、前記ステップＳ９０４で保存した画面状態へ戻るように前記表示制御部１０６で決定し、前記ディスプレイ１０７に画面表示し（ステップＳ９０７）、一連の処理を終了する。ステップＳ９０６で主画面側のCMが終了していない場合、ステップＳ９０２に戻って処理を繰り返す。また、ステップＳ９０３で主画面への視線数が子画面への視線数より多い場合、ステップＳ９０１に戻って処理を繰り返す。
【００４５】
図１５は本発明における画面表示方法によって表示される画面表示例であり、１５１１、１５１２、１５１３は視聴者である。１５０１は音声が出力されている主画面であり、１５０２は子画面である。図１５（ａ）は３人の視聴者が存在しており、それぞれ視聴者１５１１は主画面１５０１を、視聴者１５１２、１５１３は子画面１５０２を見ている。主画面１５０１がＣＭになると、前記ステップＳ９０１でＣＭ検出し、ステップＳ９０３で子画面への視線の数が主画面への視線の数より多くなるので、ステップＳ９０４以降の処理を行い、子画面１５０２を全画面表示する（図１５（ｂ））。その後、ステップＳ９０６で主画面のＣＭが終わったのを検出すると、基の画面状態に戻る（図１５（ｃ））。
【００４６】
上記処理により、主画面側でCMが検出され、かつ子画面側に視線が集中している場合、子画面側を拡大表示することで、常により視聴しやすいように画面表示を行うことができる画面表示方法を提供することができる。
【実施例９】
【００４７】
本実施例は、第１の実施例に対して、複数画面表示中に複数視聴者の視線から音声出力を制御する画面表示方法である。なお、本実施例における画面表示方法を実現する画面表示装置のブロック図は第１の実施例で示した図１とほぼ同じであるが、前記視聴者数検出部１０３及び前記視聴者位置検出部１０４は不要であり、前記表示制御部では音声の制御も行う。また、音声を出力するスピーカも設ける。以下、図１０を用いて本実施例における画面表示方法の処理手順を説明する。
【００４８】
図１０は本実施例における画面表示方法の処理手順を示すフロー図であり、前記カメラ入力部１０１で入力したカメラ映像を基に前記視線検出部１０４で検出した視聴者の視線の数から、前記表示制御部１０６で音声出力制御を行い、前記スピーカから音声出力する一連の処理を示すフロー図である。複数画面が表示されている間、前記カメラ入力部１０１で入力したカメラ映像を基に前記視線検出部１０４で視聴者の視線を検出する（ステップＳ１００１）。前記ディスプレイ１０７に表示されている複数画面のうち、子画面への視線の数が主画面への視線の数より多いかどうか判断し（ステップＳ１００２）、子画面への視線の数の方が多い場合、該視線側の子画面の音声を出力するように前記表示制御部１０６で決定し、前記スピーカに子画面側の音声を出力し（ステップＳ１００３）、一連の処理を終了する。ステップＳ１００２で、主画面への視線数が子画面への視線数より多い場合、ステップＳ１００１に戻って処理を繰り返す。
【００４９】
上記処理により、子画面側に視線が集中している場合、子画面側の音声を出力することで、常により視聴しやすいように画面表示を行うことができる画面表示方法を提供することができる。
【符号の説明】
【００５０】
１０１…カメラ入力部
１０２…リモコン受信部
１０３…視聴者数検出部
１０４…視線検出部
１０５…視聴者位置検出部
１０６…表示制御部
１０７…ディスプレイ
【図１】
2011055382.tif 000003
【図２】
2011055382.tif 000004
【図３】
2011055382.tif 000005
【図４】
2011055382.tif 000006
【図５】
2011055382.tif 000007
【図６】
2011055382.tif 000008
【図７】
2011055382.tif 000009
【図８】
2011055382.tif 000010
【図９】
2011055382.tif 000011
【図１０】
2011055382.tif 000012
【図１１】
2011055382.tif 000013
【図１２】
2011055382.tif 000014
【図１３】
2011055382.tif 000015
【図１４】
2011055382.tif 000016
【図１５】
2011055382.tif 000017