(57)【要約】【課題】視聴者が映像の視聴を楽しむことができること。【解決手段】視聴距離測定部は、複数の視聴者各々と映像表示部との距離を示す視聴距離を測定する。視聴距離判定部は、視聴距離測定部が測定した視聴距離と、映像表示部に表示された映像の視聴者による視聴時間と、に基づいて、複数の視聴者の中から誘導対象者を決定する。視聴者誘導部は、視聴距離判定部が決定した誘導対象者に対して、誘導対象者以外の視聴者である非誘導者よりも強く、映像表示部から離れるように誘導を行う。【選択図】図３
2013223133.tif 000002
【特許請求の範囲】
【請求項１】
複数の視聴者各々と表示部との距離を示す視聴距離を測定する視聴距離測定部と、
前記視聴距離測定部が測定した視聴距離と、前記表示部に表示された映像の前記視聴者による視聴時間と、に基づいて、前記複数の視聴者の中から誘導対象者を決定する判定部と、
前記判定部が決定した誘導対象者に対して、誘導対象者以外の視聴者である非誘導者よりも強く、前記表示部から離れるように誘導を行う視聴者誘導部と、
を備えることを特徴とする誘導装置。
【請求項２】
前記視聴者誘導部は、前記誘導対象者の見ることができる画面領域であって、少なくとも１人の前記非誘導者の見ることができない画面領域に、前記誘導を表す表示を行うことを特徴とする請求項１に記載の誘導装置。
【請求項３】
前記視聴者誘導部は、前記非誘導者から見て、前記誘導対象者によって遮蔽される画面領域に、前記誘導を表す表示を行うことを特徴とする請求項２に記載の誘導装置。
【請求項４】
前記視聴者誘導部は、前記誘導対象者に対して非誘導者よりも大きな音で、前記表示部から離れるように誘導を行うことを特徴とする請求項１から請求項３のいずれか一項に記載の誘導装置。
【請求項５】
誘導装置における誘導方法おいて、
複数の視聴者各々と表示部との距離を示す視聴距離を測定する視聴距離測定過程と、
前記視聴距離測定過程で測定された視聴距離と、前記表示部に表示された映像の前記視聴者による視聴時間と、に基づいて、前記複数の視聴者の中から誘導対象者を決定する判定過程と、
前記判定過程で決定された誘導対象者に対して、誘導対象者以外の視聴者である非誘導者よりも強く、前記表示部から離れるように誘導を行う視聴者誘導過程と、
を有することを特徴とする誘導方法。
【請求項６】
誘導装置のコンピュータに、
複数の視聴者各々と表示部との距離を示す視聴距離を測定する視聴距離測定手順と、
前記視聴距離測定手順で測定された視聴距離と、前記表示部に表示された映像の前記視聴者による視聴時間と、に基づいて、前記複数の視聴者の中から誘導対象者を決定する判定手順、
前記判定手順で決定された誘導対象者に対して、誘導対象者以外の視聴者である非誘導者よりも強く、前記表示部から離れるように誘導を行う視聴者誘導手順、
を実行させるための誘導プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、誘導装置、誘導方法、及び誘導プログラムに関する。
【背景技術】
【０００２】
近年、映像放送インフラのデジタル放送化や広帯域化、表示装置の大型化や高解像度化、撮影装置の微細化、高機能化など映像技術の発展によって，高品質で高精細な映像が急速に普及しており，快適な視聴環境が整いつつある。家庭では大画面FullHDテレビ(画素数1920×1080)が普及し、シネマにはデジタルシネマ（画素数2048×1080）が一般化し、業務機器市場には４Ｋシステム（４Ｋ解像度のテレビシステム。例えば、画素数4096×2160））も商品化されている。更に、スーパーハイビジョン(画素数7680×4320)などの研究も盛んに行われており、これらの超高精細映像技術は今後も急速に発展していくと考えられる。
【０００３】
超高精細映像は高い臨場感、迫力を有し、その表現力はこれからの映像産業を強力に牽引するものと期待されている。感性工学を用いた研究成果から、超高精細映像は、画面に近付けば近付くほど、被写体がはっきり見えて、質感をより感じ取れることが、明らかになっている。この研究成果によると、この効果は表示装置の解像度が上がるほど高くなり、実世界における「物体に近づけば、よりはっきり見えて、その質感を深く知覚できる」といった知覚体験が超高精細映像で感じ取れるとしている。
【０００４】
ところで、画面に近付いた視聴には注意すべき問題がある。すなわち、過度に画面に近付いて長時間集中して視聴することにより、近見作業による眼の疲れと似た疲労感が発生するといった問題である。この問題に関して、例えば、特許文献１には、ユーザ（視聴者）と装置との間の距離に応じて視聴制限を行う映像表示装置が開示されている。この特許文献１によれば、映像表示装置は、映像の解像度及び画面サイズに応じた視聴距離が格納されたテーブルを記憶部に備え、表示されている映像の解像度をＭＰＥＧ部によって判別し、当該解像度に応じた視聴距離をテーブルから取得することにより、視聴者センサ部によって検出される情報により視聴距離よりも画面に人が近づいたと判断された場合には、警告部によって警告を行った後に、電源制御部によって電源オフ処理（視聴制限）を行う。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０１０−６４７４９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１に開示された技術では、距離のみで制限視聴がかかってしまうため、画面の近くで、映像を全く見ることができない場合がある。つまり、特許文献１に開示された技術では、画面に近づくほど、質感をより感じ取れる高精細映像の特徴が失われてしまう場合がある。ここで、眼が疲れるなどの症状は、近い距離で、長時間、集中して視聴することにより引き起こされる。従って、視聴距離のみで視聴制限をかけることは、高精細映像では好ましくない。
また、高精細映像は大画面で表示することが臨場感や迫力を高めるには効果的であるため、視聴状況として、一人よりも多数の視聴者が一緒に、高精細の大画面映像を楽しむ場面が多い。特許文献１に開示された技術では、一人の視聴者が近づいた場合でも視聴制限がされるため、この視聴制限によって、一緒に視聴している他の視聴者が不愉に感じてしまうといった問題も発生する。
以上に例示したように、特許文献１に開示された技術では、視聴者が映像の視聴を楽しむことができない場合があるという問題があった。
【０００７】
本発明は上記の点に鑑みてなされたものであり、視聴者が映像の視聴を楽しむことができる誘導装置、誘導方法、及び誘導プログラムを提供する。
【課題を解決するための手段】
【０００８】
（１）本発明は上記の課題を解決するためになされたものであり、本発明の一態様は、複数の視聴者各々と表示部との距離を示す視聴距離を測定する視聴距離測定部と、前記視聴距離測定部が測定した視聴距離と、前記表示部に表示された映像の前記視聴者による視聴時間と、に基づいて、前記複数の視聴者の中から誘導対象者を決定する判定部と、前記判定部が決定した誘導対象者に対して、誘導対象者以外の視聴者である非誘導者よりも強く、前記表示部から離れるように誘導を行う視聴者誘導部と、を備えることを特徴とする誘導装置である。
【０００９】
（２）また、本発明の一態様は、上記の誘導装置において、前記視聴者誘導部は、前記誘導対象者の見ることができる画面領域であって、少なくとも１人の前記非誘導者の見ることができない画面領域に、前記誘導を表す表示を行うことを特徴とする。
【００１０】
（３）また、本発明の一態様は、上記の誘導装置において、前記視聴者誘導部は、前記非誘導者から見て、前記誘導対象者によって遮蔽される画面領域に、前記誘導を表す表示を行うことを特徴とする。
【００１１】
（４）また、本発明の一態様は、上記の誘導装置において、前記視聴者誘導部は、前記誘導対象者に対して非誘導者よりも大きな音で、前記表示部から離れるように誘導を行うことを特徴とする。
【００１２】
（５）また、本発明の一態様は、誘導装置における誘導方法おいて、複数の視聴者各々と表示部との距離を示す視聴距離を測定する視聴距離測定過程と、前記視聴距離測定過程で測定された視聴距離と、前記表示部に表示された映像の前記視聴者による視聴時間と、に基づいて、前記複数の視聴者の中から誘導対象者を決定する判定過程と、前記判定過程で決定された誘導対象者に対して、誘導対象者以外の視聴者である非誘導者よりも強く、前記表示部から離れるように誘導を行う視聴者誘導過程と、を有することを特徴とする誘導方法である。
【００１３】
（６）また、本発明の一態様は、誘導装置における誘導方法おいて、誘導装置のコンピュータに、複数の視聴者各々と表示部との距離を示す視聴距離を測定する視聴距離測定手順、前記視聴距離測定手順で測定された視聴距離と、前記表示部に表示された映像の前記視聴者による視聴時間と、に基づいて、前記複数の視聴者の中から誘導対象者を決定する判定手順、前記判定手順で決定された誘導対象者に対して、誘導対象者以外の視聴者である非誘導者よりも強く、前記表示部から離れるように誘導を行う視聴者誘導手順、を実行させるための誘導プログラムである。
【発明の効果】
【００１４】
本発明によれば、視聴者が映像の視聴を楽しむことができる。
【図面の簡単な説明】
【００１５】
【図１】本発明の実施形態に係る映像表示装置の外観図である。
【図２】本実施形態に係る映像表示装置と視聴者を上方から見た図である。
【図３】本実施形態に係る映像表示装置の構成を示す概略ブロック図である。
【図４】本実施形態に係る視聴距離算出部の構成を示す概略ブロック図である。
【図５】本実施形態に係る参照映像信号の一例を表す概念図である。
【図６】本実施形態に係る基準映像信号の一例を表す概念図である。
【図７】本実施形態に係る参照注目ブロックの一例を表す概念図である。
【図８】本実施形態に係る基準注目ブロックの一例を表す概念図である。
【図９】本実施形態に係る視差マップの一例を表す図である。
【図１０】本実施形態に係る視聴距離判定部の構成を示す概略ブロック図である。
【図１１】本実施形態に係る映像の一例を表す概略図である。
【図１２】本実施形態に係る視差マップの一例を表す図である。
【図１３】本実施形態に係る判定処理部の動作の一例を示すフローチャートである。
【図１４】本実施形態に係る誘導表示処理を説明する説明図である。
【図１５】映像表示部が行う誘導表示の一例を示す図である。
【図１６】本実施形態に係る誘導音声処理を説明する説明図である。
【図１７】本実施形態に係る誘導音声処理の別の一例を説明する説明図である。
【発明を実施するための形態】
【００１６】
本発明の実施形態について図を用いて説明する。
図１は、本発明の実施形態に係る映像表示装置１０の外観図（正面図）である。
図１に示すように、映像表示装置１０は、ステレオ撮影部1、映像表示部７、及び音声出力部８を備える。
ステレオ撮影部1は、映像表示部７の上部で、映像表示部７又は映像表示装置１０の中央位置に配置されている。ステレオ撮影部1は、２個のカメラモジュール１１１、１１２から構成されている。カメラモジュール１１１、１１２は、各々異なる視点に配置され、それぞれ、左眼用映像、右眼用映像を撮影する。例えば、ステレオ撮影部１は、映像表示部７に表示された映像を視聴する視聴者を撮影する。
なお、ステレオ撮影部１を構成する２台のカメラモジュール１１１、１１２は、映像表示部７を視聴する全ての視聴者を撮影できるように、広い範囲が撮影できるものである。例えば、水平方向に約１３０度の画角を有する広角カメラモジュールである。
【００１７】
映像表示部７は、入力された映像信号に基づいて映像を表示する。例えば、映像表示部７は、受信した放送波の映像や、外部から入力された映像を表示する。映像表示部７は、例えば、液晶ディスプレイ（ＬＣＤ）である。
音声出力部８は、入力された音声信号に基づいて音声を出力する。例えば、音声出力部８は、受信した放送波の音声や、外部から入力された音声を出力する。映像表示装置１０には、音声出力部８が２つ備えられている。音声出力部８は、例えば、スピーカーである。
【００１８】
図２は、本実施形態に係る映像表示装置１０と視聴者３１を上方から見た図である。つまり、図２には、映像表示装置１０の上面図が含まれている。この図は、ステレオ撮影部１が撮影する範囲３２を示す。ここで、範囲３２は、カメラモジュール１１１が撮影する範囲３２１とカメラモジュール１１２が撮影する範囲３２２とを合わせた範囲である。
カメラモジュール１１１、１１２を使用する事によって、映像表示部７を視聴する視聴者３１１、視聴者３１２（各々を視聴者３１とも称する）の全員が撮影できる。なお、２つのカメラモジュール１１１，１１２は、垂直方向のずれや回転のずれが極力無いように、光軸並行で配置されている。これにより、映像表示装置１０は、ステレオ撮影部１で撮影された映像を用いて、後述の視聴距離算出部２で高精度な距離測定を行うことができる。
【００１９】
図３は、本実施形態に係る映像表示装置１０の構成を示す概略ブロック図である。
図３に示すように、映像表示装置１０は、ステレオ撮影部１、視聴距離算出部２、視聴距離判定部３、視聴者誘導部４、映像表示処理部５、音声出力処理部６、映像表示部７、及び音声出力部８を含んで構成される。
【００２０】
ステレオ撮影部1は、撮影した２系統のステレオ映像（カメラモジュール１１１が撮影した左眼用映像、カメラモジュール１１２が撮影した右眼用映像）を、視聴距離算出部２へ出力する。
視聴距離算出部２は、ステレオ撮影部1から入力されたステレオ映像に基づいて、後述する視差算出処理を行う。これにより、視聴距離算出部２は、視聴者と映像表示部７までの距離（視聴距離）を算出する。視聴距離算出部２は、算出した視聴距離を示す視聴距離データを、視聴距離判定部３へ出力する。
【００２１】
視聴距離判定部３は、視聴者が所定の距離（例えば、視聴距離）以下で、所定の時間の以上、映像表示部７の映像を視聴しているかどうかの判定を行う。視聴距離判定部３は、この判定結果を示す視聴距離判定結果情報を、視聴者誘導部４へ出力する。
視聴者誘導部４は、視聴距離判定部３から入力された視聴距離判定結果情報に基づき、例えば、映像表示部７を過度に近くで視聴している視聴者に対して、視聴距離を遠ざける誘導処理を行う。例えば、視聴者誘導部４は、映像表示処理部５及び音声出力処理部６に対して、視聴距離を遠ざける誘導を出力させることで、誘導処理を行う。
【００２２】
映像表示処理部５は、放送波の映像（放送映像）や、外部から入力された映像（入力映像）を復調して映像信号を生成し、生成した映像信号を映像表示部７へ出力する。映像表示処理部５は、例えば、視聴者誘導部４の誘導処理に従い、放送映像や入力映像に対して、視聴者に視聴距離を遠ざけさせる誘導を示す画像を合成させる誘導表示処理を行う。この場合、映像表示処理部５は、誘導表示処理後の映像信号を映像表示部７へ出力する。映像表示部７は、放送映像や入力映像に、誘導画像を合成して表示する。
音声出力処理部６は、放送波の音声情報（放送音声）や、外部から入力された音声情報（入力音声）を音声信号に変換し、変換した音声信号を音声出力部８へ出力する。音声出力処理部６は、例えば、視聴者誘導部４の誘導処理に従い、放送映像や入力映像に対して、視聴者に視聴距離を遠ざけさせる誘導を示す誘導音を出力させる誘導音声処理を行う。この場合、音声出力処理部６は、誘導音声処理後の映像信号を音声出力部８へ出力する。音声出力部８は、誘導音を出力する。
【００２３】
以下、図３の各ブロックの詳細について図を用いて説明する。尚、以下の説明では、カメラモジュール１１１が撮影した左眼用映像を基準映像として処理を行う場合を例にとって説明する。他方、カメラモジュール１１２が撮影した右眼用映像を参照映像と呼ぶ。
まず、視聴距離算出部２について説明する。
【００２４】
図４は、本実施形態に係る視聴距離算出部２の構成を示す概略ブロック図である。視聴距離算出部２は、座標変換部１２３１、１２３２及び対応点探索部１２３３を含んで構成される。
座標変換部１２３１、１２３２には、カメラモジュール１１１、１１２から基準映像信号、参照映像信号が入力される。座標変換部１２３１、１２３２は、カメラモジュール１１１、１１２のカメラパラメータが各々記憶されている。カメラパラメータは、光軸の向きや視点の位置を表す外部パラメータと、撮像素子の仕様を表す内部パラメータが含まれる。外部パラメータには、光軸の向きを表すヨー、ピッチ及びロールの３軸ベクトルと、視点の位置を表す３次元の並進ベクトルと、計６個のパラメータが含まれる。内部パラメータには、２次元の映像中心位置と、視野角、アスペクト比及び焦点距離ｆと、計５個のパラメータが含まれる。
【００２５】
座標変換部１２３１、１２３２は、カメラパラメータを用いて、各々のエピポーラライン（エピポーラ線［ｅｐｉｐｏｌａｒ  ｌｉｎｅ］とも呼ばれる）が水平方向に平行になるように基準映像信号、参照映像信号を座標変換する。エピポーララインとは、各映像における複数のエピポール（ｅｐｉｐｏｌｅ）を結ぶ直線である。エピポールの１つは、１つのカメラモジュールの視点と３次元空間上のある特徴点とを結ぶ線分と、当該1つのカメラモジュールにおける映像の投影面との交点である。エピポールの他の１つは、当該1つのカメラモジュールの視点と他のカメラモジュールの視点とを結ぶ線分と、当該1つのカメラモジュールにおける映像の投影面との交点である。座標変換部１２３１、１２３２は、エピポーララインを平行にした基準映像信号、参照映像信号をそれぞれ対応点探索部１２３３に出力する。このように、エピポーララインを、水平方向に平行にすることで、後述する対応点探索部１２３３において視差を算出する際に行われる垂直方向への探索を省略することができる。そのため、処理量を低減でき、垂直方向の視差を考慮する必要がなくなる。
【００２６】
座標変換部１２３１、１２３２は、エピポーララインを平行化するために、例えば次の処理を行う。座標変換部１２３１、１２３２は、自部が記憶しているカメラパラメータに基づいて光軸平行化行列ＨＬ，ＨＲを予め算出しておき、算出した光軸平行化行列ＨＬ，ＨＲを記憶させておく。光軸平行化行列ＨＬ，ＨＲは、カメラモジュール１１１、１１２の光軸（Ｚ軸）が互いに平行であって、光軸に垂直であって水平面に平行な軸（Ｘ軸）がベースラインと平行になるように回転させる３行３列の座標変換行列である。ベースラインは、カメラモジュール１１１、１１２の視点を結ぶ線分であり、基線とも呼ばれる。座標変換部１２３１、１２３２は、また、並進回転行列ＫＬ，ＫＲ、レンズ歪補正関数ΦＬ，ΦＲ、投影行列Ｋ’を予め算出しておき、算出した並進回転行列ＫＬ，ＫＲ、レンズ歪補正関数ΦＬ，ΦＲ、投影行列Ｋ’を記憶させておく。並進回転行列ＫＬ，ＫＲは、各カメラモジュール１１１、１１２の内部パラメータに基づく３行３列の回転並進行列である。レンズ歪補正関数ΦＬ，ΦＲは、カメラモジュール１１１、１１２が備えるレンズの半径方向及び円周方向の歪係数に基づく３行３列の回転並進行列である。投影行列Ｋ’は、光軸を平行化した基準映像、参照映像を同一の表示座標系に投影する３行３列の回転並進行列である。座標変換部１２３１、１２３２は、これらの行列を用いて式（１）を満足するように平行化した基準映像信号、参照映像信号を生成する。
【００２７】
【数１】
2013223133.tif 000003
【００２８】
式（１）において、ｘＬ，ｘＲは、それぞれ基準映像信号、参照映像信号の各画素の座標を表す２次元ベクトルである。ｘＬ’，ｘＲ’は、それぞれ平行化した基準映像信号、参照映像信号の各画素の座標を表す２次元ベクトルである。
なお、撮影された基準映像、参照映像のエピポーララインが互いに平行になるように、カメラモジュール１１１、１１２が配置されていても良い。その場合、視聴距離算出部２は、座標変換部１２３１、１２３２を省略することができる。
【００２９】
対応点探索部１２３３には、座標変換部１２３１、１２３２から基準映像信号、参照映像信号が入力される。対応点探索部１２３３は、基準映像信号の各画素に対応する対応点である画素を、参照映像信号から探索する。対応点探索部１２３３は、例えば、ブロックマッチングによって対応点を探索する。ここで、対応点探索部１２３３は、基準映像信号において注目する画素（基準注目画素）を含む領域である基準注目ブロックと、基準注目ブロックと同一の数の画素を含む参照映像内の領域（参照注目ブロック）との間の指標値を算出する。算出される指標値は、基準注目ブロックに含まれる画素毎の信号値と参照注目ブロックに含まれる画素毎の信号値の類似度を表す。対応点探索部１２３３は、類似度が最も高い指標値をとる参照注目ブロックを定める。対応点探索部１２３３は、参照注目ブロックと対応する基準注目ブロックとの間の水平方向の距離を表す視差値を、基準注目画素毎に定める。対応点探索部１２３３は、基準注目画素毎の視差値を視差マップとして視聴距離判定部３に出力する。
【００３０】
次に、参照映像信号の一例について説明する。
図５は、本実施形態に係る参照映像信号ｓ４２の一例（参照映像信号ｓ４２）を表す概念図である。図５において、右方向が水平方向（ｘ方向）、下方向が垂直方向（ｙ方向）を表す。参照映像信号ｓ４２の左上にある四角形は、参照注目ブロック４２２を表す。参照注目ブロック４２２の右側にある四角形は、検索終了ブロック４２３を表す。ｘ、ｙは、参照注目ブロックの左上端の注目画素（参照注目画素）のｘ座標、ｙ座標を表す。この座標は、後述する基準映像信号ｓ４１における基準注目画素の座標と同一である。探索範囲５２は、ｘ、ｙから、参照注目画素を変更する範囲を表す予め定められた画素数（最大視差値、例えば１６）だけ水平方向にずれたｘ座標が最大になる位置である。検索終了ブロック４２３は、このｘ座標が最大になる位置に参照注目画素を有する参照注目ブロックである。つまり、検索終了ブロック４２３を終点とする矢印は、対応点探索部１２３３が、この終点まで参照注目ブロックを１画素ずつ移動させながら、基準注目ブロック４１２との指標値を算出することを表す。
【００３１】
次に基準映像信号の一例について説明する。
図６は、本実施形態に係る基準映像信号の一例（基準映像信号ｓ４１）を表す概念図である。図６における水平方向、垂直方向の位置関係は、図５と同様である。基準映像信号ｓ４１の左上にある実線の四角形は、基準注目ブロック４１２を表す。図６の例では、基準注目ブロック４１２の左上端の基準注目画素の座標はｘ、ｙである。基準映像信号ｓ４１の左上端の破線の四角形は、基準開始ブロック４１１である。基準開始ブロック４１１は、基準注目画素が基準映像信号ｓ４１の左上端の画素とする基準注目ブロックである。基準終了ブロック４１３は、下端の画素が基準映像信号ｓ４１の下端となり、右端の画素が水平方向終端５３となる基準注目ブロックである。水平方向終端５３のｘ座標は、基準映像信号ｓ４１のｘ座標の最大値よりも最大視差値だけ小さいｘ座標、つまり基準映像信号ｓ４１の右端よりも探索範囲５２だけ左側にあるｘ座標である。
【００３２】
基準開始ブロック４１１を起点とする矢印は、対応点探索部１２３３が、右端が水平方向終端５３に至るまで、１画素ずつ基準注目ブロックを移動させてブロックマッチングを行うことを表す。これにより、参照注目ブロック４２２の探索範囲５２が、参照映像信号ｓ４２の範囲外になることを回避する。左斜め下に向かう矢印は、対応点探索部１２３３が、その後、基準注目画素の座標のｘ座標を最小値に戻し、y座標を１増加するように、基準注目ブロックの位置を変更することを表す。対応点探索部１２３３は、基準注目ブロック４１２が基準終了ブロック４１３に達するまで、順次移動させてブロックマッチングを行う。これにより、対応点探索部１２３３は、基準注目画素毎に基準注目ブロック４１２と対応する参照注目ブロック４２２の座標を求め、視差値を算出する。
【００３３】
基準注目ブロック４１２と参照注目ブロック４２２との類似度を表す指標値は、例えば、ＳＡＤ（Ｓｕｍ  ｏｆ  Ａｂｓｏｌｕｔｅ  Ｄｉｆｆｅｒｅｎｃｅｓ、差分絶対値和）である。ＳＡＤは、例えば、式（２）を用いて表されるＳＳＡＤである。
【００３４】
【数２】
2013223133.tif 000004
【００３５】
式（２）において、Ｍ、Ｎは、それぞれ水平方向の画素数、垂直方向の画素数（いずれも１よりも大きい整数）を示す。Ｎ、Ｍは、基準注目ブロック、参照注目ブロックにおいて共通である。ｉ、ｊは、それぞれ水平方向の画素のインデックス、垂直方向の画素のインデックスである。Ｒ（ｉ，ｊ）は、参照注目ブロックにおける画素ｉ、ｊの信号値を示す。Ｔ（ｉ，ｊ）は、基準注目ブロックにおける画素ｉ、ｊの信号値を示す。即ち、ＳＡＤは、画素毎の信号値の基準注目ブロック及び参照注目ブロック間の絶対差分値の総和である。従って、ＳＡＤが小さいほど、基準注目ブロックと参照注目ブロックの類似度が高いことを表す。
【００３６】
次に、参照注目ブロック４２２、基準注目ブロック４１２の一例について説明する。
図７は、本実施形態に係る参照注目ブロック４２２の一例を表す概念図である。図８は、本実施形態に係る基準注目ブロック４１２の一例を表す概念図である。
図７、８における水平方向、垂直方向の位置関係は、図５と同様である。ｉ、ｊは、左上端を、それぞれ１、１とする画素のインデックスを示す。
本実施例では指標値としてＳＡＤを用いたが、ＳＡＤの代わりに、差分二乗和（ＳＳＤ；Ｓｕｎ  ｏｆ  Ｓｑｕａｒｅｄ  Ｄｉｆｆｅｒｅｎｃｅ）、正規化相互相関（ＮＣＣ；Ｎｏｒｍａｌｉｚｅｄ  Ｃｒｏｓｓ  Ｃｏｒｒｅｌａｔｉｏｎ）等、を用いても良い。
【００３７】
視差マップは、画素毎の視差値を含む距離情報である。視差値と距離とは、式（３）に示す関係がある。
【００３８】
【数３】
2013223133.tif 000005
式（３）において、ｆは、カメラモジュール１１１の焦点距離、ｂは、カメラモジュール１１１、１１２カメラ間隔、ｐは、カメラモジュール１１１の画素ピッチ（画素間間隔）、ｄは、視差値をそれぞれ表す。つまり、ステレオ撮影部１１までの距離が小さい被写体ほど視差値が大きく、距離が大きい被写体ほど視差値が小さい。視差値の大小を、濃淡で表した映像も、視差マップと呼ぶことがある。
【００３９】
図９は、本実施形態に係る視差マップの一例（視差マップ９１１）を表す図である。
図９が表す視差マップ９１１では、中央より左下に１箇所と、中央より右上に１箇所、それぞれ周囲よりも明るい領域が表されている。これらの領域は、本装置の映像表示部７を視聴している視聴者を表しており、本視差マップ９１１の例では２人の視聴者が異なる視聴距離で視聴していることが分る。更に、それぞれの領域の視差値から視聴者の視聴距離も測定することが出来る。このように、視聴距離算出部２では、本映像表示装置１０を何人の視聴者が、どれ位の距離で視聴しているかを検出できる視差マップを算出して、視聴距離判定部３に送る。
【００４０】
以下、視聴距離判定部３について図１０から図１３を用いて説明する。
図１０は、本実施形態に係る視聴距離判定部３の構成を示す概略ブロック図である。視聴距離判定部３は、顔検出部４１、顔領域視差算出部４２、及び判定処理部４３を含んで構成される。
顔検出部４１は、カメラモジュール１１１で撮影された基準画像から視聴者の顔領域を検出する。
顔領域視差算出部４２は、顔検出部４１で検出した領域の視差値を算出する。
判定処理部４３は、顔検出部４１の検出結果と顔領域視差算出部４２の視差値に基づき、視聴距離の判定を行う。
【００４１】
顔検出部４１は、人間の顔の輪郭、眼、鼻、口などの特徴点から構成される顔パターンテンプレートを備え、入力される基準映像とテンプレートマッチングを行う。顔検出部４１の検出結果の一例を図１１に示す。
図１１は、本実施形態に係る映像の一例を表す概略図である。この図の映像は、カメラモジュール１１１で本映像表示装置を視聴している視聴者２名（例えば、図２の視聴者３１１、３１２）を撮影した映像例である。図１１中の破線領域４４が顔検出部４１で検出された視聴者の顔の領域である。顔領域視差算出部４２は、検出された顔検出領域４４に基づいて、図１２の視差マップ映像の顔領域の視差値を算出する。顔領域視差算出部４２は、例えば、図１２の白破線が示す顔検出領域４４の全視差値の平均値、あるいは中央値などを算出することにより、顔領域の視差値を算出する。
【００４２】
判定処理部４３は、視聴者が過度に映像表示部７に近い位置で、長時間、継続して視聴しているかの判定を行う。この処理内容について、図１３のフローチャートを用いて説明する。判定処理部４３には、１つあるいは複数の顔領域の視差値と、その領域を示す位置データが入力される。また判定処理部４３は、視差値を判定するため予め設定された距離閾値データと、視聴時間を判定するため予め設定された視聴時間閾値データを記憶する。また、判定処理部４３は、視聴時間を計測するためのタイマー機能を有している。
【００４３】
図１３は、本実施形態に係る判定処理部４３の動作の一例を示すフローチャートである。
（ステップＳ１３０）判定処理部４３は、入力される複数の顔領域の視差値から最大の値を判定する。ここで、映像表示部７に最も近い位置で視聴している視聴者の位置と距離を検出する。その後、ステップＳ１３１へ進む。
（ステップＳ１３１）判定処理部４３は、ステップＳ１３０で検出した視聴者（最も近い視聴距離で視聴している視聴者）の位置が前回の位置と同じであるか否かを判定する。視聴者の位置が前回の位置と同じであると判定された場合（ＹＥＳ）、ステップＳ１３３へ進む。一方、視聴者の位置が前回の位置とは異なると判定された場合（ＮＯ）、ステップＳ１３２へ進む。
なお、判定処理部４３は、位置の変化が予め定めた範囲内にある場合には、同じ位置と判定しても良い。また、ステップＳ１３１において、判定処理部４３は、奥行き方向の位置（視聴距離）が同じであるか否かを判定しても良い。
【００４４】
（ステップＳ１３２）判定処理部４３は、タイマーをリセットする。例えば、判定処理部４３は、判定対象の視聴者が変わった場合にタイマーをリセットする。その後、ステップＳ１３３へ進む。
（ステップＳ１３３）判定処理部４３は、ステップＳ１３０で検出した視聴距離が、予め設定された距離閾値データが示す距離以上であるか否かを判定する。視聴距離が距離閾値データが示す距離以上であると判定された場合（ＹＥＳ）、ステップＳ１３４へ進む。一方、視聴距離が距離閾値データが示す距離よりも小さいと判定された場合（ＮＯ）、ステップＳ１３４へ進む。
（ステップＳ１３４）判定処理部４３は、タイマーをリセットする。つまり、視聴距離が距離閾値データが示す距離よりも小さい場合、すなわち視聴距離が遠い場合はタイマーをリセットする。その後、ステップＳ１３０へ戻る。
（ステップＳ１３５）判定処理部４３は、タイマーを進める。つまり、判定処理部４３は、視聴距離が距離閾値データが示す距離よりも大きい場合、すなわち視聴距離が過度に近い場合は、タイマーを進める。その後、ステップＳ１３６へ進む。
【００４５】
（ステップＳ１３６）判定処理部４３は、視聴時間が予め設定された視聴時間閾値データが示す時間以上であるかを判定する。視聴時間が視聴時間閾値データが示す時間以上であると判定された場合（ＹＥＳ）、ステップＳ１３７へ進む。一方、視聴時間が予め設定された視聴時間閾値データが示す時間よりも短いと判定された場合（ＮＯ）、ステップＳ１３０へ戻る。つまり、判定処理部４３は、視聴時間が短い場合、最初（ステップＳ１３０）に戻り判定を繰り返す。
（ステップＳ１３７）判定処理部４３は、判定結果と、誘導する視聴者の視聴距離、視聴位置、また、その他の視聴者の視聴位置の情報を視聴者誘導部４に伝える。つまり、視聴時間が視聴時間閾値データよりも長い場合は、判定処理部４３は、誘導処理が必要であると判定し、誘導処理に必要な情報を視聴者誘導部４へ出力する。
【００４６】
視聴者誘導部４は、視聴距離判定部３からの情報に基づき映像表示処理部５と音声出力処理部６に対して誘導処理のデータを送出し、誘導処理を行うように命令する。以下、視聴者誘導部４が行う誘導処理、映像表示処理部５が行う誘導表示処理、及び音声出力処理部６が行う誘導音声処理について説明する。
【００４７】
＜誘導表示処理について＞
まず、視聴者誘導部４が行う誘導処理と、映像表示処理部５が行う誘導表示処理について説明する。
図１４は、本実施形態に係る誘導表示処理を説明する説明図である。この図は、映像表示部７と視聴者３１を上方から見た図である。この図において、視聴者３１は、２人の視聴者３１１、３１２である。この図の場合には、視聴距離判定部３は、視聴者３１１が誘導対象と判定する（図１３参照）。なお、誘導対象と判定された視聴者を、誘導対象者とも称する。図１４中の破線で挟まれた画面領域１４３は、遠くの視聴者３１２からは視聴者３１１に隠されて見えない遮蔽領域（遮蔽領域１４３とも称する）である。
視聴者誘導部４は、この遮蔽領域１４３を決定し、決定した遮蔽領域１４３を示す情報を、映像表示処理部５へ出力する。映像表示処理部５は、視聴者誘導部４から入力された情報が示す遮蔽領域１４３内に、誘導画像を合成し、合成後の映像信号を映像表示部７へ出力する。映像表示部７は、遮蔽領域１４３内に誘導画像を表示することで、誘導表示を行う。
【００４８】
つまり、映像表示部７は、誘導対象者の見ることができる画面領域であって、少なくとも１人の他の視聴者（図１４では視聴者３１２）が見ることのできない画面領域に、誘導画像を表示する。例えば、映像表示部７は、視聴者３１２から見て、視聴者３１１によって遮蔽される遮蔽領域１４３内に、誘導画像を表示する。
【００４９】
具体的には、視聴者誘導部４は、以下の手法によって、誘導対象者の位置と、その他の視聴者３１２位置から、遮蔽領域１４３を算出する。
視聴距離判定部３は、誘導対象者（図１４では視聴者３１１）、及び、誘導画像を見せない視聴者（非誘導者とも称する。図１４では視聴者３１２）を決定する。なお、非誘導者は、複数人であっても良い。また、視聴距離判定部３は、視聴距離に基づいて、例えば視聴距離が短い視聴者であって誘導対象者以外の視聴者を、非誘導者としても良い。
【００５０】
視聴距離判定部３は、非誘導者の視聴位置を示す点Ａの位置、点Ａと映像表示装置１０までの距離Ｄ１、及び、点Ａに対応する映像表示部７の座標位置Ｘ１を算出する。なお、点Ａは、非誘導者の眼の位置に基づいて、例えば右眼と左眼の中心であっても良い。視聴者誘導部４は、誘導対象者の輪郭において、映像表示部７の上方から見た場合に一番縁となる点Ｂ１と点Ｂ２の位置を決定する。ここで、点Ｂ１は視聴者３１２側の、点Ｂ２は視聴者３１２と反対側の両端を示している。視聴距離判定部３は、決定した点Ｂ１と映像表示装置１０（点Ｂ２と映像表示装置１０）の距離Ｄ２と、点Ｂ１、Ｂ２に対応する映像表示部７の座標位置Ｘ２１、Ｘ２２と、を算出する。
【００５１】
視聴距離判定部３は、点Ａの位置、距離Ｄ１、座標位置Ｘ１、点Ｂ１、Ｂ２の位置、距離Ｄ２、座標位置Ｘ２１、Ｘ２２を示す情報、視聴者誘導部４へ出力する。視聴者誘導部４は、視聴距離判定部３から入力された情報に基づいて、遮蔽領域１４３を決定する。具体的には、視聴者誘導部４は、三角形（Ａ，Ｘ３１，Ｘ２１）と三角形（Ａ，Ｘ３１，Ｘ１）の相似関係からＸ３１の座標を求める。同様に、視聴者誘導部４は、三角形（Ａ，Ｘ３２，Ｘ２３）と三角形（Ａ，Ｘ３２，Ｘ１）の相似関係からＸ３２の座標を求める。これにより、視聴者誘導部４は、遮蔽領域の１４３を算出することができる。
【００５２】
視聴者誘導部４は、算出した遮蔽領域１４３を示す情報を、映像表示処理部５へ出力する。映像表示処理部５は、映像表示部７が表示している映像の遮蔽領域１４３内に、誘導画像を合成して表示させることで、誘導表示を行う。ここで、誘導画像には、例えば、画面から離れて見ることを促す内容の文字や絵が含まれている。
【００５３】
図１５は、映像表示部７が行う誘導表示の一例を示す図である。図中１５０が遮蔽領域１４３から設定された誘導表示領域である。誘導表示領域１５０は、水平位置を遮蔽領域１４３の座標範囲として、映像表示部７の画面下に設定される。誘導表示領域１５０に例えば画面から少し離れるメッセージ（誘導画像）を表示する。なお、垂直位置（画面の縦方向の位置）は予め定められているが、本発明はこれに限られない。以上の処理により、映像表示装置１０は、誘導が必要な視聴者のみが見ることができ、非誘導者の妨げにならない誘導表示をすることができる。
【００５４】
また、視聴者の位置関係によっては、遮蔽領域１４３が映像表示部７に存在しない場合も考えられる。その場合、視聴者誘導部４は、映像表示部７を含む面（映像表示部７を延長した面）において、遮蔽領域１４３を算出し、その領域に最も違い画面部分に誘導表示をする。これにより、映像表示装置１０は、非誘導者への影響を最小限した誘導が可能となる。
また、映像表示処理部５は、メッセージを合成する他に、誘導表示領域１５０の明るさを暗くする、解像度を下げて表示映像をぼかす、コントラストを下げる、彩度を下げるなど、表示している映像を一時的に変化させても良い。表示映像を変化させる構成は、誘導が必要な視聴者のみに注意を喚起する効果に加えて、誘導が必要な視聴者が視聴している領域のみの映像刺激を抑え、眼の疲れを軽減する効果もある。
【００５５】
＜誘導音声処理について＞
続いて、視聴者誘導部４が行う誘導処理と、映像表示処理部５が行う誘導表示処理について説明する。視聴者誘導部４は、視聴者の位置関係に基づいて、誘導音を出力する音声出力部８と誘導音の出力音量とを決定し、決定した音声出力部８と出力音量を示す情報を音声出力処理部６へ出力する。
【００５６】
図１６は、本実施形態に係る誘導音声処理を説明する説明図である。この図は、映像表示部７と２つの音声出力部８と視聴者３１を上方から見た図である。視聴距離判定部３は、誘導対象者（図１６では視聴者３１１）、及び、誘導画像を見せない視聴者（非誘導者とも称する。図１６では視聴者３１２）を決定する。視聴者誘導部４は、誘導対象者の位置情報に基づいて、視聴者３１１に近い側の音声出力部８を、誘導音を出力する音声出力部８と決定する。また、視聴者誘導部４は、決定した音声出力部８の位置と視聴者３１１の距離を算出し、算出した距離に基づいて音量を決定する。なお、視聴者誘導部４は、距離と音量とを対応付けた対応情報を予め記憶する。この対応情報は、距離と、視聴者３１１のみに聞こえる最小限の音量とが、対応付けられた情報である。
【００５７】
音声出力処理部６は、画面から離れて見ることを促す内容の音声や音等の誘導音を、決定された音量で、現在出力している音声に重畳する。音声出力処理部６は、重畳した音声を、決定された側の音声出力部８から出力する。この処理により、映像表示装置１０は、誘導が必要な視聴者３１１のみが聞こえて、非誘導者（図１６では視聴者３１２）の妨げにならない誘導音声出力が可能となる。
【００５８】
以上のように、本実施形態では、映像表示装置１０は、複数の視聴者３１各々と映像表示部７との距離を示す視聴距離を測定する。映像表示装置１０は、測定した視聴距離と、映像表示部７に表示された映像の視聴者による視聴時間と、に基づいて、複数の視聴者の中から誘導対象者を決定する。映像表示装置１０は、決定した誘導対象者に対して、誘導対象者以外の視聴者である非誘導者よりも強く、映像表示部７から離れるように誘導を行う。
【００５９】
例えば、映像表示装置１０は、誘導対象者のみに、画面から離れるように誘導を行う。具体的には、映像表示装置１０は、誘導対象者のみに見える画像領域（遮蔽領域１４３）に誘導表示を行い、画面から離れるように促す。また、映像表示装置１０は、誘導対象者に対して非誘導者よりも大きな音で、映像表示部７から離れるように誘導を行う。例えば、映像表示装置１０は、誘導対象者のみに聞こえる音で、映像表示部７から離れるように誘導を行う。
【００６０】
これにより、視聴者は、映像表示装置１０を用いて、映像の視聴を楽しむことができる。例えば、映像表示装置１０は、視聴時間内であれば、画面の近くでも映像を見ることができ、高精細映像を楽しむことができる。また、例えば、映像表示装置１０は、誘導対象者がいる場合でも、誘導対象者に対して非誘導者よりも強く、換言すれば、非誘導者に対して誘導対象者よりも弱く、映像表示部７から離れるように誘導を行う。これにより、非誘導者が不愉に感じることなく誘導対象者を誘導でき、視聴者は、映像の視聴を楽しむことができる。
【００６１】
なお、上記実施形態において、音声出力部８が指向性の音声を出力可能な指向性スピーカである場合には、音声出力処理部６は、誘導対象者の位置情報に基づいて、音声の出力方向を制御しても良い。また、音声出力処理部６は、誘導対象者、及び、非誘導者の双方の位置情報に基づいて、音声の出力方向を制御しても良い。例えば、視聴者誘導部４は、誘導対象者に対して、非誘導者と同じ側にある音声出力部８を、誘導音を出力する音声出力部８と決定しても良い。
【００６２】
図１７は、本実施形態に係る誘導音声処理の別の一例を説明する説明図である。この図において、視聴者誘導部４は、誘導対象者である視聴者３１１に対して、非誘導者である視聴者３１２と同じ側（図１７では、線Ｈに対して、視聴者３１２が位置する側）にある音声出力部８２を、誘導音を出力する音声出力部８と決定している。これにより、映像表示装置１０は、非誘導者に誘導音が聞こえてしまうことを防止できる。具体的には、視聴者誘導部４は、非誘導者との距離が、誘導対象者との距離よりも、小さくなる音声出力部８を、誘導音を出力する音声出力部８と決定する。なお、視聴者誘導部４は、例えば、カメラモジュール１１１が撮影した映像に基づいて、非誘導者と同じ側にある音声出力部を決定しても良い。
また、上記実施形態において、視聴距離は、カメラモジュール１１１又は１１２から視聴者までの距離であっても良いし、視差で表されても良い。
【００６３】
なお、上述した実施形態における映像表示装置１０の一部をコンピュータで実現するようにしても良い。その場合、この制御機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することによって実現しても良い。なお、ここでいう「コンピュータシステム」とは、映像表示装置１０に内蔵されたコンピュータシステムであって、ＯＳや周辺機器等のハードウェアを含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含んでも良い。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。
また、上述した実施形態における映像表示装置１０の一部、または全部を、ＬＳＩ（Ｌａｒｇｅ  Ｓｃａｌｅ  Ｉｎｔｅｇｒａｔｉｏｎ）等の集積回路として実現しても良い。映像表示装置１０の各機能ブロックは個別にプロセッサ化しても良いし、一部、または全部を集積してプロセッサ化しても良い。また、集積回路化の手法はＬＳＩに限らず専用回路、または汎用プロセッサで実現しても良い。また、半導体技術の進歩によりＬＳＩに代替する集積回路化の技術が出現した場合、当該技術による集積回路を用いても良い。
【００６４】
以上、図面を参照してこの発明の一実施形態について詳しく説明してきたが、具体的な構成は上述のものに限られることはなく、この発明の要旨を逸脱しない範囲内において様々な設計変更等をすることが可能である。
【符号の説明】
【００６５】
１  ステレオ撮影部
１１１、１１２  カメラモジュール
２  視聴距離算出部
３  視聴距離判定部
４  視聴者誘導部
５  映像表示処理部
６  音声出力処理部
７  映像表示部
８  音声出力部
３１  視聴者
３２  撮影範囲
１２３１、１２３２  座標変換部
１２３３  対応点探索部
４１  顔検出部
４２  顔領域視差算出部
４３  判定処理部
【図１】
2013223133.tif 000006
【図２】
2013223133.tif 000007
【図３】
2013223133.tif 000008
【図４】
2013223133.tif 000009
【図５】
2013223133.tif 000010
【図６】
2013223133.tif 000011
【図７】
2013223133.tif 000012
【図８】
2013223133.tif 000013
【図１０】
2013223133.tif 000014
【図１１】
2013223133.tif 000015
【図１３】
2013223133.tif 000016
【図１４】
2013223133.tif 000017
【図１５】
2013223133.tif 000018
【図１６】
2013223133.tif 000019
【図１７】
2013223133.tif 000020
【図９】
2013223133.tif 000021
【図１２】
2013223133.tif 000022