(57)【特許請求の範囲】
【請求項１】
複数の映像を複数の表示画面に表示するとともに該複数の映像のそれぞれに対応する音声を該複数の表示画面のそれぞれに対応するスピーカから出力する表示手段と、
前記複数の表示画面の内、ユーザが注視している表示画面を検出する視線検出手段と、
緊急度が高い情報の映像を検出する緊急映像検出手段と、
複数の映像信号から１つの映像信号を選択する映像選択手段と、
前記視線検出手段で検出された前記表示画面のデータに基づいて前記表示手段と前記映像選択部とを制御する制御手段と、
前記映像信号から該映像信号における重要な情報を含む画像を抽出する重要画像抽出手段と
を備え、
前記映像選択手段は、前記表示手段に、前記複数の表示画面の内、前記視線検出手段で検出されたユーザが注視している表示画面に該映像選択手段で選択された１つの映像信号に基づく映像を表示させるとともに該映像選択手段で選択された１つの映像信号に対応する音声を該表示手段のスピーカに出力させ、該複数の表示画面の内、該視線検出手段で検出された表示画面以外の表示画面に前記重要画像抽出手段で抽出された前記重要な情報を含む画像を表示させるとともに該視線検出手段で検出された表示画面以外の表示画面に対応するスピーカの音声出力をオフとし、前記緊急映像検出手段によって緊急度が高い情報の映像が検出された場合には、前記視線検出手段で検出された表示画面に該緊急度が高い情報の映像を表示させるマルチディスプレイ装置。
【請求項２】
前記緊急映像検出手段は、監視カメラが撮影したイベントを含む映像を前記緊急度が高い情報の映像とする請求項１記載のマルチディスプレイ装置。
【請求項３】
複数の映像を表示するマルチディスプレイ装置に用いられる表示装置であって、
複数の映像を複数の表示画面に表示するとともに該複数の映像のそれぞれに対応する音声を該複数の表示画面のそれぞれに対応するスピーカから出力する表示手段と、
前記複数の表示画面の内、ユーザが注視している表示画面を検出する視線検出手段と、
複数の映像信号から１つの映像信号を選択する映像選択手段と、
前記視線検出手段で検出された前記表示画面のデータに基づいて前記表示手段と前記映像選択部とを制御する制御手段と、
前記映像信号から該映像信号における重要な情報を含む画像を抽出する重要画像抽出手段と
を備え、
前記映像選択手段は、前記表示手段に、前記複数の表示画面の内、前記視線検出手段で検出されたユーザが注視している表示画面に該映像選択手段で選択された１つの映像信号に基づく映像を表示させるとともに該映像選択手段で選択された１つの映像信号に対応する音声を該表示手段のスピーカに出力させ、該複数の表示画面の内、該視線検出手段で検出された表示画面以外の表示画面に前記重要画像抽出手段で抽出された前記重要な情報を含む画像を表示させるとともに該視線検出手段で検出された表示画面以外の表示画面に対応するスピーカの音声出力をオフとし、緊急度が高い情報の映像を検出する緊急映像検出手段から緊急度が高い情報の映像が入力された場合には、前記視線検出手段で検出された表示画面に該緊急度が高い情報の映像を表示させる表示装置。
【請求項４】
前記緊急映像検出手段は、監視カメラが撮影したイベントを含む映像を前記緊急度が高い情報の映像とする請求項３記載の表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ユーザに重要な情報を提供する際に用いて好適なマルチディスプレイ装置及びこのマルチディスプレイ装置に用いる表示装置に関する。
【背景技術】
【０００２】
現在、テレビジョンジョン放送は、ますます多チャンネル化されており、ユーザは、より多くのチャンネルの中から１つのチャンネルを選択する必要があるため、テレビジョンジョン放送が提供する多大な情報の中から重要な情報を得ることが困難になりつつある。
【０００３】
マルチディスプレイが複数の映像を同時に表示させることによりユーザが得られる情報量は、１つのディスプレイを用いて１つの映像を視聴する場合に比べて格段に増加するが、ユーザは、全ての表示画面に表示された映像を同時に視聴することができない。
【０００４】
そのため、マルチディスプレイの中には、ユーザが複数のディスプレイの内、何れの表示画面を注視しているかを判断してその画面に対応する映像のみを表示させる技術もある（例えば、特許文献１参照）。
【０００５】
【特許文献１】特開２０００−１３８８７２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかし、このような技術を用いても、ユーザは、注視している表示画面以外の表示画面に表示された映像が提供する重要な情報を見逃す場合があるため、最適な情報の提供が行われているとはいえない。
【０００７】
本発明は、このような従来の実情に鑑みて提案されたものであり、複数のディスプレイを用いてユーザに最適な情報提供を行うマルチディスプレイ装置及びこのマルチディスプレイ装置に用いる表示装置を提供することを目的とする。
【課題を解決するための手段】
【００１０】
上述した目的を達成するために、本発明に係るマルチディスプレイ装置は、複数の映像を複数の表示画面に表示するとともに該複数の映像のそれぞれに対応する音声を該複数の表示画面のそれぞれに対応するスピーカから出力する表示手段と、前記複数の表示画面の内、ユーザが注視している表示画面を検出する視線検出手段と、緊急度が高い情報の映像を検出する緊急映像検出手段と、複数の映像信号から１つの映像信号を選択する映像選択手段と、前記視線検出手段で検出された前記表示画面のデータに基づいて前記表示手段と前記映像選択部とを制御する制御手段と、前記映像信号から該映像信号における重要な情報を含む画像を抽出する重要画像抽出手段とを備え、前記映像選択手段は、前記表示手段に、前記複数の表示画面の内、前記視線検出手段で検出されたユーザが注視している表示画面に該映像選択手段で選択された１つの映像信号に基づく映像を表示させるとともに該映像選択手段で選択された１つの映像信号に対応する音声を該表示手段のスピーカに出力させ、該複数の表示画面の内、該視線検出手段で検出された表示画面以外の表示画面に前記重要画像抽出手段で抽出された前記重要な情報を含む画像を表示させるとともに該視線検出手段で検出された表示画面以外の表示画面に対応するスピーカの音声出力をオフとし、前記緊急映像検出手段によって緊急度が高い情報の映像が検出された場合には、前記視線検出手段で検出された表示画面に該緊急度が高い情報の映像を表示させる。
【００１１】
また、緊急度が高い情報の映像を検出する緊急映像検出手段をさらに備え、前記映像選択手段は、前記表示手段に、前記視線検出手段で検出された表示画面に前記緊急度検出手段で検出された映像を表示させる。
【００１２】
また、前記緊急映像検出手段は、監視カメラが撮影したイベントを含む映像を前記緊急度が高い情報の映像とする。
【００１３】
また、上述した目的を達成するために、本発明に係る表示装置は、複数の映像を表示するマルチディスプレイ装置に用いられる表示装置であって、複数の映像を複数の表示画面に表示するとともに該複数の映像のそれぞれに対応する音声を該複数の表示画面のそれぞれに対応するスピーカから出力する表示手段と、前記複数の表示画面の内、ユーザが注視している表示画面を検出する視線検出手段と、複数の映像信号から１つの映像信号を選択する映像選択手段と、前記視線検出手段で検出された前記表示画面のデータに基づいて前記表示手段と前記映像選択部とを制御する制御手段と、前記映像信号から該映像信号における重要な情報を含む画像を抽出する重要画像抽出手段とを備え、前記映像選択手段は、前記表示手段に、前記複数の表示画面の内、前記視線検出手段で検出されたユーザが注視している表示画面に該映像選択手段で選択された１つの映像信号に基づく映像を表示させるとともに該映像選択手段で選択された１つの映像信号に対応する音声を該表示手段のスピーカに出力させ、該複数の表示画面の内、該視線検出手段で検出された表示画面以外の表示画面に前記重要画像抽出手段で抽出された前記重要な情報を含む画像を表示させるとともに該視線検出手段で検出された表示画面以外の表示画面に対応するスピーカの音声出力をオフとし、緊急度が高い情報の映像を検出する緊急映像検出手段から緊急度が高い情報の映像が入力された場合には、前記視線検出手段で検出された表示画面に該緊急度が高い情報の映像を表示させる。
【００１４】
また、前記映像選択手段は、緊急度が高い情報の映像を検出する緊急映像検出手段からの映像が入力され、前記表示手段に、前記視線検出手段で検出された表示画面に前記緊急度検出手段で検出された映像を表示させる。
【００１５】
また、前記緊急映像検出手段は、監視カメラが撮影したイベントを含む映像を前記緊急度が高い情報の映像とする。
【発明の効果】
【００１６】
本発明に係るマルチディスプレイ装置及び表示装置によれば、ユーザの視線情報に応じて重要な情報を提供することができ、ユーザが情報を取得する効率が高まる。
【発明を実施するための最良の形態】
【００１７】
以下、本発明を適用した具体的な実施の形態について、図面を参照しながら詳細に説明する。
【００１８】
本発明を適用した実施の形態におけるマルチディスプレイ装置は、図１に示すように、複数の表示装置１１０（表示装置１１０Ａ，１１０Ｂ，・・・，１１０Ｉ）を備え、表示装置１１０は、それぞれが有する表示画面１１１（表示画面１１１Ａ，１１１Ｂ，・・・，１１１Ｉ）に映像を表示する。例えば、ユーザ１４が注視していない表示画面１１１Ａに表示されているテレビジョン番組の映像の情報が、ユーザ１４が注視している表示画面１１１Ｅに表示されているテレビジョン番組の映像の情報よりも重要度が高い場合に、この表示画面１１１Ａに表示されている映像を表示画面１１１Ｅに割り込み又は切り替え表示することにより、ユーザ１４が得る情報量を向上させることができる。また、図２に示すように、ユーザ１４が、表示装置１１０（表示装置１１０Ａ，１１０Ｂ，・・・，１１０Ｉ）の内、表示装置１１０Ｅが有する表示画面１１１Ｅを注視している場合、音声を表示画面１１１Ｅに表示した映像の音声に自動的に切り替えて、ユーザ１４が情報をより確実に得られるようにする。
【００１９】
また、本発明を適用した実施の形態におけるマルチディスプレイ装置は、図３に示すように、例えば、ユーザ１４が表示装置１１０（表示装置１１０Ａ，１１０Ｂ，・・・，１１０Ｉ）の内、表示装置１１０Ｅが有する表示画面１１１Ｅを注視している場合、ユーザ１４が注視していない表示画面１１１Ａ，１１１Ｂ，１１１Ｃ，１１１Ｄ，１１１Ｆ，１１１Ｇ，１１１Ｈ，１１１Ｉにおいてテロップを含む画像等の重要な情報の画像を検出して表示し、その画像ごとに表示画面の更新を行い、ユーザ１４が得られる情報量を最大にする。
【００２０】
本発明を適用した実施の形態におけるマルチディスプレイ装置の構成について、以下に説明する。
【００２１】
先ず、第１の実施の形態におけるマルチディスプレイ装置の構成について説明する。
【００２２】
図４は、この第１の実施の形態におけるマルチディスプレイ装置の概略図である。
【００２３】
表示装置１１０（表示装置１１０Ａ，１１０Ｂ，・・・，１１０Ｉ）は、それぞれが有する表示画面１１１（表示画面１１１Ａ，１１１Ｂ，・・・，１１１Ｉ）に映像を表示する。視線検出部１２は、ユーザ撮影カメラ１２１を有し、後述するように、このユーザ撮影カメラ１２１によってユーザ１４の顔を撮影した後、目の画像を画像処理することによりユーザ１４が何れの表示画面を見ているかを推定し、ユーザ１４が見ている表示画面の番号を通知する。リモコン１３は、ディスプレイ装置１０の電源キー、チャンネルの選択キー、音量調節キー等を備え、ユーザ１４はこのリモコン１３を用いて表示装置１１０の制御を行う。
【００２４】
この第１の実施の形態におけるマルチディスプレイ装置１０の内部構成について説明する。
【００２５】
マルチディスプレイ装置１０は、図５のブロック図に示すように、切り替え部２と、重要度検出部３と、表示部４（表示部４Ａ,４Ｂ,４Ｃ,・・・,４Ｈ,４Ｉ）と、制御部５と、ユーザ監視カメラ１２１を有する視線検出部１２とを備えて構成される。
【００２６】
切り替え部２は、複数の映像信号Ｖ（映像信号Ｖａ,Ｖｂ,・・・,Ｖｉ）を入力して重要度検出部３の検出結果に応じて表示部４に映像信号Ｖを供給する。重要度検出部３は、複数の映像信号Ｖの映像における情報の重要度を検出して、この重要度を示す重要度データを後述する制御部５に出力する。表示部４（表示部４Ａ，４Ｂ，・・・，４Ｉ）は、表示画面１１１（表示画面１１１Ａ，１１１Ｂ，・・・，１１１Ｉ）とスピーカ１１２（スピーカ１１２Ａ，１１２Ｂ，・・・，１１２Ｉ）とを備えて、供給された映像信号Ｖに基づく映像と音声とを出力する。制御部５は、重要度検出部３から供給される重要度データと視線検出部１２から供給される視線検出結果データとに基づいて切り替え部２を制御する。
【００２７】
ここで、情報の重要度の高い映像の表示方法としては種々の表示方法が想定されるが、例えば、複数の表示画面のそれぞれがサッカーの試合の映像、ニュース番組の映像、プロ野球の試合の映像等の複数の異なる映像を表示し、ユーザ１４がサッカーの試合の映像を表示した表示画面を注視している場合に、重要度の高い情報の映像を表示する方法の例として、ユーザ１４が注視していない表示画面において緊急のニュースの映像が表示された時は、この緊急のニュースの映像をユーザ１４が注視している表示画面に表示する方法、サッカーの試合のハーフタイム中にプロ野球の試合の得点のチャンスの場面の映像をユーザ１４が注視している表示画面に表示する方法等がある。このように、重要度検出部３が検出した情報の重要度に応じて、切り替え部２は、最も重要度が高い情報が含まれている映像の映像信号Ｖを表示部４に出力する。表示部４は、ユーザ１４が注視している表示画面にこの最も重要な情報を含む映像を表示する。
【００２８】
視線検出部１２は、ユーザ１４の顔を撮影するユーザ撮影カメラ１２１を備え、図６のフローチャートに示す処理手順に従って、ユーザ１４の視線を検出する。
【００２９】
視線検出部１２は、ステップＳ１１においてユーザ撮影カメラ１２１が撮影したユーザ１４の画像データが供給されると、続くステップＳ１２において、供給された画像データの内、ユーザ１４の画像の色彩情報（ユーザ１４の肌色、白目の色、黒目の色等）を用いて両目の輪郭を検出し、さらに、両目の両端の位置を検出する。
【００３０】
ステップＳ１３において、視線検出部１２は、ステップＳ１２で検出した両目の位置を基準として所定の探索範囲を限定し、画像の輝度情報を用いて鼻孔の位置を検出する。
【００３１】
ステップＳ１４において、視線検出部１２は、図７に示すように、目の両端及び鼻孔の位置の幾何学的な位置関係に基づいて眼球４１における眼球中心４２の位置及び半径を推定する。
【００３２】
ステップＳ１５において、視線検出部１２は、目の輪郭内の輝度情報を用いて瞳孔４３における瞳孔中心４４の位置を検出する。
【００３３】
ステップＳ１６において、視線検出部１２は、ステップＳ１４で検出した眼球中心４２とステップＳ４５で検出された瞳孔中心４４とを結ぶベクトルを視線ベクトル４５として算出することによりユーザ１４の視線を検出し、ユーザ１４が見ている表示画面の番号を視線検出結果データとして制御部５に供給する。その後、視線検出部１２は、一連の処理動作を終了する。
【００３４】
上述したように、第１の実施の形態におけるマルチディスプレイ装置１０は、複数の映像信号Ｖに基づく映像を複数の表示画面に表示する際、映像中の情報の重要度を検出し、例えば、後述するように、監視カメラが不審者を撮影した映像等、ユーザ１４に伝達する緊急性が高く、情報の重要度が最も高い映像を視線検出部１２が検出した表示画面に表示する。これにより、ユーザ１４がマルチディスプレイを用いて複数の映像を視聴する際に得られる情報量は、格段に向上する。
【００３５】
なお、上述した第１の実施の形態におけるマルチディスプレイ装置は、切り替え部２、重要度検出部３、制御部５を表示部４の外部に設けた構成を備えるが、切り替え部２、重要度検出部３、制御部５の一部又は全部を各表示部内に設けた構成を備えてもよい。
【００３６】
次に、第２の実施の形態におけるマルチディスプレイ装置の構成について説明する。なお、マルチディスプレイ装置１０と同様の構成については、同一符号を付して説明を省略する。
【００３７】
図８は、この第２の実施の形態におけるマルチディスプレイ装置の概略図である。
【００３８】
マルチディスプレイ装置２０は、複数の表示装置２１０（表示装置２１０Ａ，２１０Ｂ，・・・，２１０Ｉ）と、視線検出部１２と、緊急映像検出部２３と、リモコン１３とを備える。
【００３９】
表示装置２１０（表示装置２１０Ａ，２１０Ｂ，・・・，２１０Ｉ）は、それぞれが有する表示画面１１１（表示画面１１１Ａ，１１１Ｂ，・・・，１１１Ｉ）に映像を表示する。緊急映像検出部２３は、監視カメラ２３１を有し、この監視カメラ２３１によって撮影した映像中に不審者等のイベントを検出すると、表示装置２１０（表示装置２１０Ａ，２１０Ｂ，・・・，２１０Ｉ）にその旨を通知する。
【００４０】
この第２の実施の形態におけるマルチディスプレイ装置２０に用いる表示装置２１０（表示装置２１０Ａ，２１０Ｂ，・・・，２１０Ｉ）の内部構成について説明する。
【００４１】
表示装置２１０（表示装置２１０Ａ，２１０Ｂ，・・・，２１０Ｉ）は、図９に示すように、それぞれ制御部５２と、重要画像抽出部５３と、映像選択部５４と、表示画面１１１（表示画面１１１Ａ，１１１Ｂ，・・・，１１１Ｉ）及びスピーカ２１２（スピーカ１１２Ａ，１１２Ｂ，・・・，１１２Ｉ）を有する表示部４とを備える。
【００４２】
制御部５２は、緊急映像検出部２３と視線検出部１２とからそれぞれ割り込みイベント通知データと視線検出結果データとが供給されると、音声制御データをスピーカ１１２に供給してスピーカ１１２が出力する音声をＯＮ／ＯＦＦの切り替えにより制御し、また、映像選択データを映像選択部５４に供給する。
【００４３】
重要画像抽出部５３は、テレビジョン番組の映像信号Ｖ１から、テロップ画像等、重要な情報を含む画像の映像信号を抽出して映像選択部５４に供給する。
【００４４】
重要画像抽出部５３は、図１０のブロック図に示すように、重要画像検出部５３１がテレビジョン番組の映像信号Ｖ１からテロップ画像を検出して、このテロップ画像をメモリ５３２に供給する。また、更新フラグ信号をメモリ５３２に供給してメモリ５３２の更新を行い、メモリ５３２は、最新の画像を読み出し続ける。
【００４５】
映像選択部５４は、緊急映像検出部２３が検出したイベントの映像信号Ｖ２と、テレビジョン番組の映像信号と、テレビジョン番組のテロップ画像の映像信号とから特定の映像信号を選択して表示部４に供給する。
【００４６】
ここで、表示装置２１０（表示装置２１０Ａ，２１０Ｂ，・・・，２１０Ｉ）がそれぞれ行う処理動作について、図１１のフローチャートを示しながら説明する。
【００４７】
表示装置２１０（表示装置２１０Ａ，２１０Ｂ，・・・，２１０Ｉ）は処理動作を開始すると、ステップＳ２１において、視線検出部１２からユーザ１４が表示画面１１１（１１１Ａ，１１１Ｂ，・・・，１１１Ｉ）の内、何れの表示画面を注視しているかを示す視線検出結果データが供給される。
【００４８】
ステップＳ２２において、表示装置２１０は、それぞれ自身の表示画面がユーザ１４に注視されているか否かを判断する。このステップＳ２２において表示装置２１０の内、自身の表示画面がユーザ１４に注視されていると判断した表示装置は、ステップＳ２２からステップＳ２３に移り、注視時間をカウントアップする。一方、自身の表示画面がユーザ１４に注視されていないと判断した表示装置は、ステップＳ２２からステップＳ２９に移り、非注視時間をカウントアップする。
【００４９】
表示装置２１０の内、ステップＳ２２において自身の表示画面がユーザ１４に注視されていると判断した表示装置を表示装置２１０ｍとする。表示装置２１０ｍは、ステップＳ２３からステップＳ２４に移ると、緊急映像検出部２３からイベント通知データが供給されたか否かを判断する。
【００５０】
表示装置２１０ｍは、このステップＳ２４において、緊急映像検出部２３からイベント通知データが供給されたと判断した場合、ステップＳ２４からステップＳ２５に移り、緊急映像検出部２３が撮影した映像を出力選択して表示する。その後、表示装置２１０Ａ，２１０Ｂ，・・・，２１０Ｉは、一連の処理動作を終了する。
【００５１】
一方、表示装置２１０ｍは、このステップＳ２４において、緊急映像検出部２３からイベント通知データが供給されていないと判断した場合、ステップＳ２４からステップＳ２６に移り、通常の入力映像であるテレビジョン番組の映像を出力選択して自身の表示画面に表示する。
【００５２】
表示装置２１０ｍは、ステップＳ２６からステップＳ２７に移り、自身の表示画面がユーザ１４に注視されている時間が一定時間以上であるか否かを判断する。このステップＳ２７において表示装置２１０ｍは、ユーザ１４に注視されている時間が一定時間以上であると判断した場合、ステップＳ２７からステップＳ２８に移り、この表示装置２１０ｍに内蔵されたスピーカへの音声の出力をＯＮに切り替える。その後、表示装置２１０は、一連の処理動作を終了する。一方、このステップＳ２７において表示装置２１０ｍが、ユーザ１４に注視されている時間が一定時間以上でないと判断した場合、表示装置２１０は、一連の処理動作を終了する。
【００５３】
表示装置２１０の内、上述したステップＳ２２においてユーザ１４に注視されていないと判断した表示装置を表示装置２１０ｎとする。表示装置２１０ｎは、ステップＳ２９において非注視時間をカウントアップした後、ステップＳ２９からステップＳ３０に移ると、ユーザ１４に注視されていない時間が一定時間以上であるか否かを判断する。このステップＳ３０において表示装置２１０ｎは、ユーザ１４に注視されていない時間が一定時間以上であると判断した場合、ステップＳ３０からステップＳ３１に移り、この表示装置２１０ｎに内蔵されたスピーカへの音声の出力をＯＦＦに切り替えて、ステップＳ３１からステップＳ３２に移る。一方、このステップＳ３０において表示装置２１０ｎは、ユーザ１４に注視されていない時間が一定時間以上でないと判断した場合、ステップＳ３０からステップＳ３２に移る。
【００５４】
表示装置２１０ｎは、このステップＳ３２において、重要画像抽出部５３で抽出したテロップ画像を出力選択する。その後、表示装置２１０は、一連の処理動作を終了する。
【００５５】
緊急映像検出部２３は、図１２のブロック図に示すように、差分回路２３２が監視カメラ１２１からの入力映像のフレームとメモリ２３３に蓄えている過去の映像のフレームとの差分からイベントを検出し、割り込みイベント通知データを制御部２１に供給することによりイベントの検出を通知する。
【００５６】
なお、このマルチディスプレイ装置２０では、表示部４、制御部５２、重要画像抽出部５３、映像選択部５４を表示装置２１０内に設けた構成を備えているが、表示部４、制御部５２、重要画像抽出部５３、映像選択部５４を表示装置２１０の外部に設けた構成を備えてもよい。
【００５７】
ここで、イベントの検出の例として、緊急映像検出部２３が不審者を検出する際の処理動作について図１３のフローチャートを示しながら説明する。
【００５８】
緊急映像検出部２３は、処理動作を開始すると、ステップＳ４１に移る。このステップＳ４１において差分回路２３２は、監視カメラ２３１からの入力映像のフレームとメモリ２３３に蓄えられている過去の映像のフレームとを比較し、その差分を算出する。
【００５９】
差分回路２３２は、ステップＳ４２に移り、差分が所定の閾値以上であるか否かを判断する。このステップＳ４２において、差分が所定の閾値以上であると判断した場合、差分回路２３２はステップＳ４３に移る。一方、このステップＳ４２において、差分が所定の閾値以上でないと判断した場合、緊急映像検出部２３は、一連の処理動作を終了する。
【００６０】
ステップＳ４３において、差分回路２３２は、入力映像中のオブジェクトの形状が人型であるか否かを判断する。このステップＳ４３において、入力映像中のオブジェクトの形状が人型であると判断した場合、差分回路２３２はステップＳ４４に移る。一方、このステップＳ４３において、入力映像中のオブジェクトの形状が人型でないと判断した場合、緊急映像検出部２３は、一連の処理動作を終了する。
【００６１】
ステップＳ４４において、差分回路２３２は、形状が人型であるオブジェクトが入力映像中に出現している時間が一定時間以上であるか否かを判断する。このステップＳ４４において、形状が人型であるオブジェクトが入力映像中に出現している時間が一定時間以上であると判断した場合、差分回路２３２は、ステップＳ４５に移る。一方、このステップＳ４４において、形状が人型であるオブジェクトが入力映像中に出現している時間が一定時間以上でないと判断した場合、緊急映像検出部２３は、一連の処理動作を終了する。
【００６２】
ステップＳ４５において、差分回路２３２は、形状が人型であるオブジェクトを不審者とみなし、不審者をイベントとして検出した旨を通知する割り込みイベント通知データを制御部５２に供給する。その後、緊急映像検出部２３は、一連の処理動作を終了する。
【００６３】
上述したマルチディスプレイ装置２０は、ユーザ１４がテレビジョン番組の映像を視聴する際、緊急映像検出部２３がイベントを検出した場合は、そのイベントの映像をユーザ１４が注視している表示画面に表示する。また、ユーザ１４が注視していない表示画面にテレビジョン番組の映像におけるテロップ画像を表示する。これにより、ユーザ１４がマルチディスプレイを用いて映像視聴をする際、注視している表示画面と注視していない画面との両方から多くの重要な情報をリアルタイムで取得することが可能となる。
【００６４】
なお、本発明は上述した実施の形態のみに限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能であることは勿論である。
【００６５】
上述した実施の形態では、表示装置１１０及び表示装置２１０を構成するディスプレイ数をそれぞれ９としたが、ディスプレイ数はこれに限られない。
【００６６】
また、上述した実施の形態では、ユーザ１４の目の画像を画像処理することによりユーザ１４の視線を検出したが、ユーザ１４の視線を検出する方法として、例えば、ユーザ１４の顔に赤外線を照射して反射した赤外線の画像を用いる方法等、何れの方法を用いてもよい。
【００６７】
また、上述した実施の形態では、ユーザ１４が注視していない表示画面においてテロップ画像を表示したが、これらの表示画面がテロップ画像を表示する場合に限られず、例えば、シーンチェンジの映像を一端静止画によって表示することによりユーザ１４が映像選択する機会を提供することが可能となる。
【００６８】
また、上述した実施の形態では、一連の処理プログラムは、システムにプリインストールされているが、このようなプリインストールによる提供に代えて、インターネット等のネットワークを介したダウンロードにより提供してもよく、又は、各種の記録媒体を介して提供してもよい。このような記録媒体としては、例えばＣＤ−ＲＯＭ、ＤＶＤ等の光ディスク等の磁気ディスク、駆動機構と一体構成による着脱可能なハードディスク装置、メモリカード等、種々の記録媒体を適用することができる。
【図面の簡単な説明】
【００６９】
【図１】ユーザが注視している表示画面に重要な情報の映像を割り込んで表示する様子を示す図である。
【図２】ユーザが注視している表示画面の映像の音声を出力する様子を示す図である。
【図３】ユーザが注視していない表示画面で重要な画像を検出して表示する様子を示す図である。
【図４】第１の実施の形態におけるマルチディスプレイ装置の概略図である。
【図５】第１の実施の形態におけるマルチディスプレイ装置の構成を示すブロック図である。
【図６】視線検出部が行う処理動作を示すフローチャートである。
【図７】視線検出部が推定したユーザの眼球における眼球中心の位置及び半径を示す図である。
【図８】第２の実施の形態におけるマルチディスプレイ装置の概略図である。
【図９】第２の実施の形態における表示装置の構成を示すブロック図である。
【図１０】重要画像抽出部の構成を示すブロック図である。
【図１１】第２の実施の形態における各ディスプレイ行う処理動作を示すフローチャートである。
【図１２】イベント検出部の構成を示すブロック図である。
【図１３】イベント検出部が不審者を検出する際の処理動作を示すフローチャートである。
【符号の説明】
【００７０】
２  切り替え部、３  重要度検出部、４  表示部、５  制御部、１０  マルチディスプレイ装置、１２  視線検出部、１３  リモコン、２０  マルチディスプレイ装置、２３  緊急映像検出部、５２  制御部、５３  重要画像抽出部、５４  映像選択部、１１０  表示装置、２１０  表示装置、２３１  監視カメラ、２３２  差分回路、２３３  メモリ、５３１  重要画像検出部、５３２  メモリ
【図１】
0004815949.tif 000002
【図２】
0004815949.tif 000003
【図３】
0004815949.tif 000004
【図４】
0004815949.tif 000005
【図５】
0004815949.tif 000006
【図６】
0004815949.tif 000007
【図７】
0004815949.tif 000008
【図８】
0004815949.tif 000009
【図９】
0004815949.tif 000010
【図１０】
0004815949.tif 000011
【図１１】
0004815949.tif 000012
【図１２】
0004815949.tif 000013
【図１３】
0004815949.tif 000014