(57)【特許請求の範囲】
【請求項１】
映像を表示する表示画面と、
前記表示画面の前方を撮像して画像を取得する撮像手段と、
前記取得した前記画像から人物を検出する人物検出手段と、
前記検出した前記人物の動き量を算出するとともに、前記人物の顔の向きの情報として、前記表示画面に対して前記人物の顔の向きを示す線を定めることにより、前記人物の顔の向きを示す線と、所定の条件を満たす線がなす角を用いて、前記人物が前記映像を視聴している可能性を表す解析値を算出し、前記動き量に応じて前記解析値を重み付けする視聴可能性解析手段と、
前記重み付けした前記解析値に基づいて、前記検出された人物が前記表示画面の視聴者であるか否かを判定する視聴者判定手段と、
前記視聴者判定手段で視聴者であると判定された人物の位置に基づいて前記表示画面の画面方向を決定する方向決定手段と、
前記方向決定手段で決定した前記画面方向に前記表示画面を回転駆動する駆動手段とを備えた映像表示装置。
【請求項２】
前記視聴者判定手段の判定結果の履歴を保持する履歴保持手段を更に備え、
前記方向決定手段は、前記視聴者判定手段で視聴者であると判定された人物が存在しない場合、前記履歴に基づいて前記表示画面の画面方向を決定することを特徴とする請求項１に記載の映像表示装置。
【請求項３】
前記視聴可能性解析手段は、前記表示画面の垂線と前記顔の向きを示す線とのなす角に基づいて前記解析値を算出することを特徴とする請求項１または２に記載の映像表示装置。
【請求項４】
前記視聴可能性解析手段は、前記顔の中央から前記表示画面の中央へ向かう線と前記顔の向きを示す線とのなす角に基づいて前記解析値を算出することを特徴とする請求項１または２に記載の映像表示装置。
【請求項５】
前記視聴可能性解析手段は、前記顔の中央から前記表示画面へ向かう線のうち、前記顔の向きを示す線とのなす角が最小となる線と、前記顔の向きを示す線とのなす角に基づいて前記解析値を算出することを特徴とする請求項１または２に記載の映像表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、映像表示装置に関する。
【背景技術】
【０００２】
従来のテレビジョン受像機として、映像を表示する表示画面の前面側の画像を取得し、取得した画像内に含まれる顔画像を識別し、識別した顔画像の位置に画面方向が向くように表示画面を回転させるものがある（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−２９６５２１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところが、取得した画像内の顔画像を識別する際、人物の顔が印刷されているポスターが実際の人物の顔であるとして識別されてしまうことがある。こういった場合、画面を見ている人物である視聴者の位置が適切に決定されず、視聴者とは関係のない方向に画面方向が決定されてしまい、視聴者が最適な角度で画面を見ることができなくなってしまうという問題点があった。
【０００５】
この発明は、上述のような問題を解決するためになされたもので、画面方向を適切に決定することができる映像表示装置を得ることを目的とする。
【課題を解決するための手段】
【０００６】
この発明に係る映像表示装置は、映像を表示する表示画面と、表示画面の前方を撮像して画像を取得する撮像手段と、取得した画像から人物を検出する人物検出手段と、検出した人物の動き量を算出するとともに、人物の顔の向きの情報として、表示画面に対して人物の顔の向きを示す線を定めることにより、人物の顔の向きを示す線と、所定の条件を満たす線がなす角を用いて、人物が映像を視聴している可能性を表す解析値を算出し、動き量に応じて解析値を重み付けする視聴可能性解析手段と、重み付けした解析値に基づいて、検出された人物が表示画面の視聴者であるか否かを判定する視聴者判定手段と、視聴者判定手段で視聴者であると判定された人物の位置に基づいて表示画面の画面方向を決定する方向決定手段と、方向決定手段で決定した画面方向に表示画面を回転駆動する駆動手段とを備えるものである。
【発明の効果】
【０００７】
この発明によれば、人物が映像を視聴している可能性を示す解析値を動き量に応じて重み付けし、重み付けした解析値に基づいて検出された人物が視聴者であるか否かを判定するようにしているので、画面方向を適切に決定することができる。
【図面の簡単な説明】
【０００８】
【図１】実施の形態１に係る映像表示装置の構成を示すブロック図である。
【図２】実施の形態１に係る映像表示装置における情報処理装置の構成を示すブロック図である。
【図３】実施の形態１に係る映像表示装置における角度θの決定方法を示す上面図である。
【図４】実施の形態１に係る映像表示装置における人物検出部で検出された人物情報の一例を示す図である。
【図５】実施の形態１に係る映像表示装置における人物情報から視聴者を判定する具体例を示す図である。
【図６】実施の形態１に係る映像表示装置における画面方向と分割領域との関係を示す図である。
【図７】実施の形態１に係る映像表示装置における情報処理装置の制御手順を示すフローチャート図である。
【図８】実施の形態１に係る映像表示装置の第１変形例における角度θの決定方法を示す上面図である。
【図９】実施の形態１に係る映像表示装置の第２変形例における角度θの決定方法を示す上面図である。
【図１０】実施の形態１に係る映像表示装置における分割領域の変形例を示す図である。
【図１１】実施の形態２に係る映像表示装置における情報処理装置の構成を示すブロック図である。
【図１２】実施の形態２に係る映像表示装置における情報処理装置の制御手順を示すフローチャート図である。
【発明を実施するための形態】
【０００９】
実施の形態１．
まず、実施の形態１の映像表示装置の構成を説明する。図１は、実施の形態１に係る映像表示装置の構成を示すブロック図である。
【００１０】
図１において、映像表示装置１００は、撮像装置１１、回転スタンド１２、表示画面１３および情報処理装置１４を有する。映像表示装置１００は、表示画面１３を視聴している視聴者の位置に応じて表示画面１３を向ける画面方向を決定し、回転スタンド１２により自動的に表示画面１３の向き当該画面方向に回転させるものである。
【００１１】
表示画面１３は、映像を表示する画面であり、例えば液晶ディスプレイ画面である。
【００１２】
回転スタンド１２は、表示画面１３を保持するスタンドであり、例えばモータや歯車といった駆動部を備え、表示画面１３を略鉛直軸まわりに一定の角度範囲で回転させることができる。回転の開始又は停止や回転方向は情報処理装置１４によって制御される。なお、回転スタンド１２は、ロータリエンコーダといった、表示画面１３が向いている方向を取得する手段を備えていても良い。
【００１３】
撮像装置１１は、表示画面１３の前方を撮像して画像を取得し、取得した画像（具体的にはデジタル画像データ）を情報処理装置１４に出力する。撮像装置１１による画像の取得および撮像画像の情報処理装置１４への出力は、繰り返し行われ、例えば毎秒３０回で実施される。
【００１４】
撮像装置１１は、ＣＣＤ（Charge Coupled Device）素子およびレンズ等により構成され、解像度６４０×４８０ピクセルのグレースケール画像を取得する。なお、撮像装置１１は、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）素子など、ＣＣＤ素子以外の撮像素子を利用するものでもよい。また、撮像装置１１は、グレースケール画像ではなく、カラー画像を取得するものでもよい。また、画像の解像度も、６４０×４８０ピクセルに限られず、人物の検出が可能である限りは、より高い解像度でも、より低い解像度でもよい。なお、撮像装置１１の画角によるが、一般的に解像度が高いほど、遠くの人物を検出することができる。
【００１５】
情報処理装置１４は、撮像装置１１で取得した画像に基づき、表示画面１３に表示される映像を視聴している視聴者の位置を算出し、当該視聴者の位置から表示画面１３が見やすい方向に表示画面１３を回転させるよう回転スタンド１２の制御を行う。
【００１６】
次に、情報処理装置１４の構成を説明する。図２は、実施の形態１に係る情報処理装置の構成を示す図である。
【００１７】
図２において、情報処理装置１４は、撮像処理部２１、人物検出部２２、視聴可能性解析部２３、視聴者判定部２４、方向決定部２５および駆動制御部２６を有する。
【００１８】
撮像処理部２１は、撮像装置１１により撮像された画像を取得する。そして、撮像処理部２１は、取得した画像（以下、「撮像画像」と称す）を、人物検出部２２に出力する。
【００１９】
人物検出部２２は、撮像処理部２１により取得された撮像画像から人物を検出し、撮像画像における人物の位置、顔の大きさおよび顔の向きの３つの情報（人物情報と称す）を検出する。
【００２０】
具体的には、人物検出部２２は、人物の位置の情報として、撮像画像の座標系における当該人物の顔の中心座標を検出し、顔の大きさの情報として、撮像画像の座標系における当該人物の顔の幅（具体的には顔の水平方向の幅）を検出する。
【００２１】
図３は、実施の形態１に係る映像表示装置における角度θの決定方法を示す上面図である。人物検出部２２は、図３に示すように、顔の向きの情報として、表示画面１３の垂線３１と人物の顔の向きを示す線３２とのなす角の角度θ（０°≦θ≦９０°）を検出する。角度θは、当該人物が表示画面１３に対して正面を向いている場合に０°、当該人物が表示画面１３に対して真横を向いている場合に９０°となる。
【００２２】
なお、人物検出部２２における人物の検出の手法は特に限定されないが、例えば、米国特許出願公開第２００２／０１０２０２４号明細書等に開示されているビオラ−ジョーンズ法と呼ばれる方式を用いることができる。ビオラ−ジョーンズ法は、要約すると、画像内における小領域の位置や大きさを変えながら画像内に小領域を設定し、当該小領域から特徴量を抽出し、識別器を利用して、当該小領域が顔であるか否かを判別するものである。人物検出部２２は、撮像画像にビオラ−ジョーンズ法を適用した後、顔であると判別された小領域の位置や大きさから、撮像画像の座標軸で表される顔の中心位置や顔の大きさを求めることができる。また、人物検出部２２は、撮像画像にビオラ−ジョーンズ法を適用する際に、顔であるか否かのみを判別するのではなく、例えば、正面を向いている顔であるか否か、もしくは、鉛直軸周りに正面より３０度右に向いている顔であるか否か、鉛直軸周りに正面より３０度左に向いている顔であるか否か、をそれぞれ判別することにより、おおよその顔の向きを求めることができる。
【００２３】
図４は、実施の形態１に係る映像表示装置における人物検出部で検出された人物情報の一例を示す図である。図４において、「Ｎｏ．」は検出された人物に割り当てられた番号、「ｘ座標」および「ｙ座標」は各人物の顔の中心座標、「顔の大きさ」は各人物の顔の幅、「顔の向き（θ）」は表示画面１３の垂線３１と人物の向いている方向を示す線３２とのなす角θの角度である。図４では、Ｎｏ．１〜Ｎｏ．３の３人の人物が検出された場合を示している。
【００２４】
なお、人物の位置の情報や顔の大きさの情報として、顔の長さ（具体的には顔の垂直方向の長さ）や、肩幅、両目間の距離、両目それぞれの位置、頭の頂点の座標など、他の情報を検出するようにしてもよい。また、撮像画像から複数の人物が検出された場合には、検出された複数の人物の各々について、撮像画像における当該人物の位置、顔の大きさおよび顔の向きを検出する。
【００２５】
人物検出部２２は、人物の顔の中心座標と、上述の角度θとを、視聴可能性解析部２３に出力する。
【００２６】
視聴可能性解析部２３は、人物検出部２２により検出された人物のそれぞれに対して、当該人物が映像を視聴している可能性を解析する。
【００２７】
具体的には、視聴可能性解析部２３は、上記の角度θを用いて９０−θの値を算出する（９０−θの値を視聴可能性解析値と称す）。視聴可能性解析値は、値が大きい人物ほど映像を視聴している可能性が高く、検出された人物が表示画面１３に対して正面を向いている場合に最大（９０−θ＝９０）となり、表示画面１３に対して真横を向いている場合に最小（９０−θ＝０）となる。
【００２８】
また、視聴可能性解析部２３は、現在のフレームの撮像画像と、その前のフレームの撮像画像と用いて、現在のフレームの撮像画像から検出された人物の位置における動きベクトルを算出し、その絶対値として動き量を算出する。そして、視聴可能性解析部２３は、算出した動き量が閾値よりも大きいか否かに応じて視聴可能性解析値に重み付けをする。この重み付けは、たとえば、算出した動き量が閾値よりも小さい人物の視聴可能性解析値は０．１倍にし、動き量が閾値よりも大きい人物の視聴可能性解析値の値は変化させないようにすることで行う。
【００２９】
なお、上記の動きベクトルの算出方法としては、ブロックマッチング法や勾配法などを用いることができる。また、動き量は、特定の時刻のものではなく、所定の時間にわたって算出した動き量を保持しておき、例えばそれらの平均値としたものでも良い。
【００３０】
また、視聴可能性解析部２３は、撮像画像を複数の分割領域に分割し、上述した人物の顔の中心座標を用いて、検出された人物がどの分割領域に含まれるのかを対応付ける。そして、視聴可能性解析部２３は、検出された人物が含まれる分割領域の位置と、当該分割領域における重み付けされた視聴可能性解析値とを、視聴者判定部２４に出力する。
【００３１】
視聴者判定部２４は、重み付けされた視聴可能性解析値に基づいて、人物検出部２２で検出された人物が視聴者であるか否かを判定する。人物が視聴者であるか否かは、重み付けされた視聴可能性解析値が閾値よりも大きければ視聴者、小さければ視聴者ではないとして判定する。そして、視聴者判定部２４は、視聴者が存在する分割領域の位置を方向決定部２５に出力する。
【００３２】
ここで、人物情報から視聴者を判定する具体例を説明する。図５は、実施の形態１に係る映像表示装置における人物情報から視聴者を判定する具体例を示す図であって、（ａ）は撮像画像中の人物を示す図、（ｂ）は視聴可能性解析部の解析結果を分割領域ごとに表した図、（ｃ）は視聴者判定部の判定結果を分割領域ごとに表した図である。
【００３３】
図５（ａ）において、撮像画像には人物３３ａおよび人物３３ｂが含まれている。人物３３ａは表示画面１３を正面から見ている視聴者であり、人物３３ｂは人物の顔が表示画面１３に対して正面となるように印刷されているポスターである。
【００３４】
視聴可能性解析部２３は、図５（ｂ）に示すように、まず、人物３３ａ、３３ｂがどの分割領域に含まれるかを対応付ける。人物３３ａは分割領域３５ａに、人物３３ｂは分割領域３５ｂにそれぞれ含まれる。次に、視聴可能性解析部２３は、視聴可能性解析値を算出する。人物３３ａ、３３ｂはともにθ＝０°であるため、視聴可能性解析値はともに９０である。次いで、視聴可能性解析部２３は人物３３ａ、３３ｂの動き量をそれぞれ算出する。ここで、人物３３ａは動き量が閾値よりも大きく、人物３３ｂは動き量が閾値よりも小さい。そして、視聴可能性解析部２３は、動き量が閾値よりも小さい人物３７ｂの視聴可能性解析値を０．１倍にするようにして重み付けする。この結果、視聴可能性解析値は、人物３３ａが９０、人物３３ｂが９であると解析される。そして、視聴可能性解析部２３は、人物が検出された分割領域３５ａ、３５ｂの位置と、分割領域３５ａ、３５ｂにおける重み付けされた視聴可能性解析値とを視聴者判定部２４へ出力する。
【００３５】
視聴者判定部２４は、図５（ｃ）に示すように、検出された人物の視聴可能性解析値が閾値よりも大きければ視聴者であると判定し、閾値よりも小さければ視聴者ではないと判定する。この閾値をたとえば４０とすると、人物３３ａは視聴者であると判定され、人物３３ｂは視聴者ではないと判定される。すなわち、分割領域３５ａにのみ視聴者が存在すると判定される。
【００３６】
人物の顔が印刷されているポスターや、衣服のしわ、壁の模様等は人物検出部２２で撮像画像から人物を検出する際に、実際には人物ではないのに人物として認識されてしまうことがある。これに対して、上述のように検出した人物が視聴者であるか否かを判定することで、人物検出部２２で人物として検出されてしまうが、実際には人物ではない静止物体が撮像画像中に含まれる場合であっても、実際の人物とそうでないものを判別することができる。
【００３７】
図２に戻って、方向決定部２５は、視聴者判定部２４で視聴者であると判定された人物の位置に基づいて表示画面１３の画面方向を決定する。
【００３８】
図６は、実施の形態１に係る液晶表示装置における画面方向と分割領域との関係を示す図である。表示画面１３の画面方向は、図６に示すように、各分割領域に対応付けられており、視聴者がどの分割領域に存在するかにより決定される。つまり、表示画面１３の画面方向は、視聴者が分割領域４１ａに存在する場合は中央の方向４０ａ、分割領域４１ｂに存在する場合は右の方向４０ｂ、分割領域４１ｃに存在する場合は左の方向４０ｃとなる。図６においては、視聴者が分割領域４１ｃに存在するため、表示画面１３の画面方向は左の方向４０ｃと決定される。なお、複数の分割領域に視聴者が存在する場合は、それぞれの分割領域の中間の位置としても良い。このとき、視聴可能性解析値の値により重み付けを行っても良い。
【００３９】
駆動制御部２６は、方向決定部２５が決定した、中央の方向４０ａ、右の方向４０ｂまたは左の方向４０ｃのいずれかの方向に表示画面１３を回転させるように回転スタンド１２の回転を制御する。右または左に回転させる際の回転角度は、右の方向４０ｂまたは左の方向４０ｃの、中央の方向４０ａに対する角度として予め設定しておく。
【００４０】
なお、表示画面１３を回転させる画面方向と分割領域との関係は図６に示すものに限らない。すなわち、水平方向に分割領域の数を増加させるとともに、各分割領域に応じて画面方向を新たに設定するようにしてもよい。このようにすることで、より正確に表示画面１３を視聴者の方向に向けることができる。
【００４１】
また、表示画面１３の回転中も随時、視聴可能性解析部２３による解析や、視聴者判定部２４による判定、方向決定部２５による画面方向の決定を随時行い、表示画面１３が最適な画面方向となるまで回転を続ける。また、駆動制御部２６は、方向決定部２５が決定した表示画面１３の画面方向から、回転させる方向および時間を決定し、決定した時間連続して右または左に回転させたのち回転を停止する制御を行うようにしてもよい。また、回転スタンド１２にロータリエンコーダ等の表示画面１３が向いている方向を取得する手段を備え、表示画面１３が向いている方向と表示画面１３を向けるべき方向とが一致するまで、右または左に回転するよう制御しても良い。
【００４２】
次に、情報処理装置１４の制御手順を示す。図７は、実施の形態１に係る映像表示装置における情報制御装置の制御手順を示すフローチャート図である。
【００４３】
まず、撮像処理部２１が、撮像画像を取得する（Ｓ１１）。次に、人物検出部２２が、取得した撮像画像から人物の顔を検出し、当該人物の位置、顔の大きさおよび顔の向きを検出する（Ｓ１２）。そして、視聴可能性解析部２３が、ステップＳ１２で検出した人物のそれぞれについて、視聴可能性解析値を算出する（Ｓ１３）。次に、視聴可能性解析部２３は、当該人物の動き量を算出し（Ｓ１４）、視聴可能性解析値を算出した動き量に応じて重み付けする（Ｓ１５）。次に、視聴者判定部２４が、重み付けされた視聴可能性解析値に基づいて、検出した人物が視聴者であるか否かを判定する（Ｓ１６）。
【００４４】
次に、方向決定部２５が、視聴者であると判定された人物の位置に基づいて、表示画面１３を回転させる方向を決定する（Ｓ１７）。次に、駆動制御部２６が、決定した表示画面１３を回転させる方向が表示画面１３の現時点での画面方向に対して中央の方向であるか否かを判断する（Ｓ１８）。中央の方向であると判断された場合（Ｓ１８：ＹＥＳ）、駆動制御部２６は、表示画面１３を回転させないよう回転スタンド１２の制御を行い（Ｓ１９）、処理を終了させる。
【００４５】
一方、中央の方向ではないと判断された場合（Ｓ１８：ＮＯ）、駆動制御部２６は、決定した表示画面１３を回転させる方向が右の方向であるか否かを判断する（Ｓ２０）。ここで、右の方向であると判断された場合（Ｓ２０：ＹＥＳ）、駆動制御部２６は、表示画面１３を右に回転させるよう回転スタンド１２の制御を行い（Ｓ２１）、処理を終了させる。また、右の方向であると判断されなかった場合（Ｓ２０：ＮＯ）、駆動制御部２６は、表示画面１３を左に回転させるよう回転スタンド１２の制御を行い（Ｓ２２）、処理を終了させる。
【００４６】
上記の処理は撮像装置１１の撮像の周期と同じ周期で繰り返し行われる。なお、情報処理装置１４の処理の周期は、Ｎ（Ｎは２以上の整数）個の撮像画像につき１回など、撮像の周期より長い周期で行われてもよい。また、処理の周期は一定でなくても良く、たとえば、表示画面１３が右または左に回転している最中は、回転していない時よりも短い周期で行うようにしても良い。
【００４７】
実施の形態１の映像表示装置によれば、人物の動き量に応じて視聴可能性解析値を重み付けし、重み付けした視聴可能性解析値に基づいて検出された人物が視聴者であるか否かを判定するようにしているので、人物として検出されてしまうが、実際には人物ではない静止物体が撮像画像中に含まれる場合であっても、その影響を軽減して適切に表示画面１３の画面方向を決定することができる。
【００４８】
また、人物の顔の向いている方向に基づいて当該人物の視聴可能性解析値を算出するようにしているので、表示画面１３を見ていない人物が撮像画像内に含まれる場合であっても、表示画面１３の画面方向を適切に決定することができる。
【００４９】
さらに、人物の顔の向きと表示画面１３の垂線とのなす角に基づいて当該人物の視聴可能性解析値を算出するようにしているので、角度θは撮像画像における人物の顔の向きと一対一で対応する値となり、角度θの算出のために必要な計算量が小さく、当該可能性を簡易に解析することができる。
【００５０】
なお、実施の形態１では表示画面１３の垂線と人物の顔の向きとのなす角に基づいて当該人物が映像を視聴している可能性を解析するものを示したが、角度θの決定方法はこれに限らない。
【００５１】
図８は実施の形態１に係る映像表示装置の第１変形例における角度θの決定方法を示す上面図である。この変形例においては、顔の中央から表示画面１３の中央へ向かう線３６と、顔の向きを示す線３２とのなす角を角度θとしている。このようにすることで、表示画面の１３の中央に存在して表示画面の方向を向いている人物ほど当該人物が映像を視聴している可能性が高いと解析することができるので、複数の人物が表示画面１３を視聴している場合において、中央にいる人物を優先することができる。
【００５２】
図９は実施の形態１に係る映像表示装置の第２変形例における角度θの決定方法を示す上面図である。この変形例においては、顔の中央から表示画面１３に向かう線３７ａ、３７ｂ、３７ｃのうち、顔の向きを示す線３２とのなす角が最小になる線３７aと、顔の向きを示す線３２とのなす角を角度θとしている。このようにすることで、表示画面１３の方向を向いている人物であればθ＝０となるので、表示画面１３の方向を向いている人物がいずれの位置に存在しても映像を視聴している可能性が高いと解析することができる。
【００５３】
また、実施の形態１では、図６において２次元の分割領域を示したが、分割領域はこれに限らない。
【００５４】
図１０は実施の形態１に係る映像表示装置における分割領域の変形例を示しており、（ａ）は直方体、（ｂ）は扇形円柱の分割領域を示している。これらの変形例においては、３次元の分割領域を擬似的に設定することで人物の奥行き方向を考慮している。３次元の分割領域は、表示画面１３に対して垂直方向に分割された分割領域を生成することで設定する。また、垂直方向に分割された各分割領域に応じて画面方向をさらに細分化して設定する。そして、取得した撮像画像内の人物の顔の大きさから表示画面と視聴者との距離を計算し、計算した距離から表示画面１３に対して垂直方向に分割された分割領域のいずれに視聴者が存在するかを求める。このように表示画面１３と視聴者との距離を考慮した分割領域を設定し、視聴者の距離に応じて画面方向を決定することで、より正確に表示画面１３を視聴者の方向に向けることができる。
【００５５】
なお、実施の形態１では、動きベクトルの絶対値を動き量とするものを示したが、動き量の決定方法はこれに限るものではない。動きベクトルを算出するかわりに、現在のフレームの撮像画像と、その前のフレームの撮像画像を用いて、現在のフレームの撮像画像から検出された人物の位置におけるその前のフレームとの画素値の相違度を動き量としてもよい。画素値の相違度は、輝度値の差の二乗の平均値や正規化相関係数により求める。視聴者には動きがあるため、画素値の相違度は大きいが、人物の顔が印刷されているポスターは静止しているため画素値の相違度は小さい。したがって、このようにしても視聴者と人物の顔が印刷されているポスターとを判別できる。
【００５６】
また、動きベクトルを算出する代わりに、現在のフレームの撮像画像から検出された人物の位置と、その前のフレームの撮像画像から検出された人物の位置との差の絶対値を動き量とし、当該絶対値が所定の閾値以上である場合は動き量を０とするようにしてもよい。視聴者は完全に静止しておらず小さな動きを持つため、位置の差の絶対値は０ではない小さな値となる。一方、人物の顔が印刷されているポスターは完全に静止しているため、位置の差の絶対値は０となる。これに対し、ある人物の位置と別の人物の位置との間で誤って位置の差を算出してしまった場合、算出される絶対値は大きい値となる。したがって、このようにすることで、視聴者と人物の顔が印刷されているポスターとを判別するとともに、異なる人物間で動き量を算出してしまった場合の影響を軽減することができる。
【００５７】
実施の形態２．
図１１は、実施の形態２に係る映像表示装置における情報処理装置の構成を示すブロック図である。実施の形態２の情報処理装置１４は、図１１に示すように、実施の形態１の構成に加えて履歴保持部２７をさらに備えている。
【００５８】
履歴保持部２７は、視聴者判定部２４の過去の一定期間における履歴を保持するものである。薄暗い場合や、逆光など照明環境の悪い状況下で撮像装置１１が画像を取得すると、人物検出部２２が撮像画像から人物を検出する際に、実際には顔である領域を顔として識別できず、結果として、視聴者判定部２４において視聴者と判定される人物が存在しない場合がある。一方、視聴者が映像表示装置を視聴する位置は、たとえばソファに腰掛けて視聴する場合など、いつもほぼ同じ位置であることが多い。そこで、方向決定部２５は、視聴者判定部２４で視聴者であると判定された人物が存在しない場合、履歴保持部２７で保持されている履歴に基づいて表示画面１３の画面方向を決定する。
【００５９】
次に、情報処理装置１４の制御手順を示す。図１２は、実施の形態２に係る映像表示装置における情報処理装置の制御手順を示すフローチャート図である。実施の形態２では、視聴者判定部２４が、ステップＳ１６で視聴者であると判定された人物が存在したかどうかを判定する（Ｓ１６Ｂ）。視聴者であると判定された人物が存在する場合（Ｓ１６Ｂ：ＹＥＳ）、ステップＳ１７へ進む。一方、視聴者であると判定された人物が存在しない場合（Ｓ１６Ｂ：ＮＯ）、方向決定部２５は、履歴保持部２７で保持されている履歴に基づいて表示画面を向ける方向を決定する（Ｓ１７Ｂ）。上記以外は実施の形態１と同様である。
【００６０】
実施の形態２によれば、視聴者判定部２４において視聴者であると判定された人物が存在しない場合、方向決定部２５が、履歴保持部３１に保持されている履歴に基づいて表示画面１３の画面方向を決定させるようにしているので、人物の顔を認識できない場合でも、その影響が軽減され、表示画面１３の画面方向を適切に決定することができる。
【００６１】
なお、この発明の映像表示装置は、テレビジョン受像機やデジタルサイネージ等に適用することができる。また、上記各実施の形態の構成は互いに組み合わせることができる。
【符号の説明】
【００６２】
１１  撮像装置
１３  表示画面
２１  撮像処理部
２２  人物検出部
２３  視聴可能性解析部
２４  視聴者判定部
２５  方向決定部
２６  駆動制御部
２７  履歴保持部
３１  表示画面の垂線
３２  顔の向きを示す線
３６  顔の中央から表示画面の中央へ向かう線
３７ａ、３７ｂ、３７ｃ  顔の中央から表示画面へ向かう線
１００  映像表示装置
【図１】
0005853443.tif 000002
【図２】
0005853443.tif 000003
【図３】
0005853443.tif 000004
【図４】
0005853443.tif 000005
【図５】
0005853443.tif 000006
【図６】
0005853443.tif 000007
【図７】
0005853443.tif 000008
【図８】
0005853443.tif 000009
【図９】
0005853443.tif 000010
【図１０】
0005853443.tif 000011
【図１１】
0005853443.tif 000012
【図１２】
0005853443.tif 000013