(57)【要約】      （修正有）【課題】視聴者の関心を反映させてより高い広告効果を発揮させる表示装置、コンテンツ表示方法及びプログラムを提供する。【解決手段】デジタルサイネージ装置の表示部２４０は、画像を表示する。制御部２３は、複数種類の広告を切り替えて表示部２４０に表示する。制御部２３は、表示部２４０に表示される広告に対する肯定度の評価を行う。肯定度の評価は、顔画像を抽出し、例えばアダブーストのアルゴリズムを用いて顔画像を検出し、ハールライク特徴の一致度を用いて識別し、複数種類の表情の何れに近いかを判定する。【選択図】図４
2015064513.tif 000002
【特許請求の範囲】
【請求項１】
画像を表示する表示部と、
複数種類のコンテンツを切り替えて前記表示部に表示する表示制御手段と、
前記表示部に表示されるコンテンツに対する肯定度の評価を行うコンテンツ評価手段と、
を備え、
前記表示制御手段は、前記コンテンツ評価手段による肯定度に基づいて前記表示部に表示するコンテンツを決定することを特徴とする表示装置。
【請求項２】
撮像を行う撮像部と、
前記撮像部による撮像画像から人物の顔画像を抽出する顔画像抽出手段と、
を備え、
前記コンテンツ評価手段は、前記顔画像抽出手段によって抽出された顔画像に基づいて、前記表示部に表示されるコンテンツに対する肯定度の評価を行うことを特徴とする請求項１に記載の表示装置。
【請求項３】
前記コンテンツ評価手段は、前記顔画像抽出手段によって抽出された顔画像から表情を評価し、該顔画像の表情の肯定度に基づいて、前記表示部に表示されている種類のコンテンツに対する評価を行うことを特徴とする請求項２に記載の表示装置。
【請求項４】
前記コンテンツ評価手段は、前記顔画像抽出手段によって抽出された顔画像に基づいて予め定められた複数種類の表情から何れの表情に近似するかを判定することにより前記顔画像の表情の評価を行うことを特徴とする請求項３に記載の表示装置。
【請求項５】
前記コンテンツ評価手段は、前記顔画像の表情の肯定度を示す評価値を所定間隔で求めて、該評価値の平均を算出し、該算出した評価値の平均に基づいて、前記表示部に表示されている種類のコンテンツに対する評価を行うことを特徴とする請求項３又は４に記載の表示装置。
【請求項６】
前記コンテンツ評価手段は、前記顔画像抽出手段によって抽出された顔画像から前記表示部に対する視線を検出し、該視線を検出していることを条件に、前記顔画像の表情の評価を行うことを特徴とする請求項３〜５の何れか一項に記載の表示装置。
【請求項７】
前記コンテンツ評価手段は、前記顔画像抽出手段によって抽出された顔画像から前記表示部に対する視線を検出し、該視線の検出結果に基づいて、前記表示部に表示されている種類のコンテンツに対する肯定度の評価を行うことを特徴とする請求項２〜６の何れか一項に記載の表示装置。
【請求項８】
前記コンテンツ評価手段は、前記表示部に対する視線を検出した時間に基づいて、前記表示部に表示されている種類のコンテンツに対する肯定度の評価を行うことを特徴とする請求項７に記載の表示装置。
【請求項９】
前記表示制御手段は、前記コンテンツ評価手段による肯定度が所定の肯定評価であるときは、前記表示部に表示中のコンテンツを延長して表示することを特徴とする請求項１〜８のいずれか一項に記載の表示装置。
【請求項１０】
前記表示制御手段は、前記コンテンツ評価手段による肯定度に基づいて、前記表示部に表示するコンテンツの表示順序を決定することを特徴とする請求項１〜８のいずれか一項に記載の表示装置。
【請求項１１】
前記表示制御手段は、前記コンテンツ評価手段による肯定度が所定の肯定評価であるときは、前記表示部に表示中のコンテンツを、当該コンテンツに関連する所定の詳細コンテンツに切り替えることを特徴とする請求項１〜８のいずれか一項に記載の表示装置。
【請求項１２】
前記表示制御手段は、前記コンテンツ評価手段による肯定度が所定の第１の肯定評価であるときは、前記表示部に表示中のコンテンツを、当該コンテンツに関連する所定の詳細コンテンツに切り替え、前記コンテンツ評価手段による肯定度が前記第１の肯定評価よりも低評価である第２の肯定評価であるときは、前記表示部に表示中のコンテンツを延長して表示することを特徴とする請求項１〜８のいずれか一項に記載の表示装置。
【請求項１３】
複数種類のコンテンツを切り替えて画像を表示する表示部に表示する表示制御ステップと、
前記表示部に表示されるコンテンツに対する肯定度の評価を行うコンテンツ評価ステップと、
前記肯定度に基づいて前記表示部に表示するコンテンツを決定するコンテンツ決定ステップと、
を備えていることを特徴とするコンテンツ表示方法。
【請求項１４】
画像を表示する表示部を備えた表示装置のコンピュータを
複数種類のコンテンツを切り替えて前記表示部に表示する表示制御手段、
前記表示部に表示されるコンテンツに対する肯定度の評価を行うコンテンツ評価手段、
前記コンテンツ評価手段による肯定度に基づいて前記表示部に表示するコンテンツを決定するコンテンツ決定手段、
として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示装置、コンテンツ表示方法及びプログラムに関する。
【背景技術】
【０００２】
近年、店舗や駅などの公共の場所等において不特定多数の者に対して広告・宣伝を行うためのツールとして、デジタルサイネージ装置が知られている。このようなデジタルサイネージ装置は、広告・宣伝の内容を容易に変更することができる。そのため、最新の情報等をすぐに視聴者に提供することができ、従来の看板などに比べて優れた広告効果を発揮する（例えば、特許文献１、２）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１１−１５０２２１号公報
【特許文献２】特開２０１２−１２８２１０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来のデジタルサイネージ装置で行われる広告表示は、予め定められたものを一定のサイクルで表示するという一方的な広告・宣伝のため、視聴者の関心と合わない場合には効果が得られにくいといった問題がある。
【０００５】
本発明の課題は、視聴者の関心を反映させてより高い広告効果を発揮させることである。
【課題を解決するための手段】
【０００６】
以上の課題を解決するため、請求項１に記載の発明は、表示装置において、
画像を表示する表示部と、
複数種類のコンテンツを切り替えて前記表示部に表示する表示制御手段と、
前記表示部に表示されるコンテンツに対する肯定度の評価を行うコンテンツ評価手段と、
を備え、
前記表示制御手段は、前記コンテンツ評価手段による肯定度に基づいて前記表示部に表示するコンテンツを決定することを特徴としている。
【発明の効果】
【０００７】
本発明によれば、視聴者の関心を反映させてより高い広告効果を発揮することができる。
【図面の簡単な説明】
【０００８】
【図１】第１の実施の形態に係る表示システムの概略構成を示すブロック図である。
【図２】デジタルサイネージ装置の機能的構成を示すブロック図である。
【図３】デジタルサイネージ装置のスクリーン部の概略構成を示す正面図である。
【図４】デジタルサイネージ装置の制御部における機能的構成を示すブロック図である。
【図５】第１の実施の形態に係る表示制御処理について説明するフローチャートである。
【図６】肯定度算出処理について説明するフローチャートである。
【図７】表示部に表示される広告の一例について説明する図である。
【図８】第２の実施の形態に係る表示制御処理について説明するフローチャートである。
【図９】広告の表示順序について説明する図である。
【図１０】広告の表示順序について説明する図である。
【図１１】表示部に表示される広告の一例について説明する図である。
【図１２】第３の実施の形態に係る表示制御処理について説明するフローチャートである。
【図１３】広告の表示順序について説明する図である。
【図１４】第４の実施の形態に係る表示制御処理について説明するフローチャートである。
【図１５】表示部に表示される広告の一例について説明する図である。
【発明を実施するための形態】
【０００９】
以下に、本発明を実施するための最良の形態について図面を用いて説明する。ただし、以下に述べる実施形態には、本発明を実施するための技術的に好ましい種々の限定が付されているが、発明の範囲を以下の実施形態及び図示例に限定するものではない。
【００１０】
（第１の実施の形態）
図１は、第１の実施の形態の表示システムの概略構成を示すブロック図である。表示システム１には、本発明に係る表示装置としてのデジタルサイネージ装置２と、ネットワークＮを介してデジタルサイネージ装置２に通信自在なサーバ装置５とが備えられている。サーバ装置５は、例えば、デジタルサイネージ装置２で表示する広告のデータ等が記憶してあり、デジタルサイネージ装置２に対してダウンロード可能に構成されている。
【００１１】
［デジタルサイネージ装置］
図２は、デジタルサイネージ装置２の主制御構成を示すブロック図である。デジタルサイネージ装置２は、後述する広告等の画像の映像光を照射する投影部２１と、投影部２１から照射された映像光を背面で受けて前面に投影するスクリーン部２２とを備えている。
【００１２】
投影部２１は、処理プログラム及び各種のデータに基づいて各部を制御する制御部２３と、制御部２３に接続され、当該制御部２３から出力された画像データ（動画及び静止画を含む画像データ）を映像光に変換してスクリーン部２２に向けて照射するプロジェクタ２４と、処理プログラム及び各種のデータを記憶する記憶部２５と、ネットワークＮを介してサーバ装置５と通信する通信部２６とを備えている。
【００１３】
次に、スクリーン部２２について説明する。
図３は、スクリーン部２２の概略構成を示す正面図である。図３に示すように、スクリーン部２２には、四角形の表示パネル２７と、表示パネル２７を支持する台座２８とが備えられている。
表示パネル２７は、映像光の照射方向に対して略直交する、例えば、アクリル板などの一枚の透光板２９により形成されている。透光板２９の背面には背面投影用のフィルムスクリーンが積層され、なおかつフィルムスクリーンの背面にはフィルム状のフレネルレンズが積層されている。そして、この表示パネル２７と前述したプロジェクタ２４とにより表示部２４０（図４参照）を構成している。
【００１４】
そして、表示パネル２７の上部には、例えば、カメラなどの撮像部３０が設けられている。この撮像部３０が表示パネル２７に対向する空間の映像をリアルタイムに撮像して画像データを生成する。撮像部３０は、図示は省略するが、光学系及び撮像素子を備えるカメラと、カメラを制御する撮像制御部とを備えている。上記カメラは、可視光カメラまたは赤外線カメラの何れを使用してもよい。
カメラの光学系は、複数のレンズから構成され、焦点距離が所定距離に固定され、被写界深度が深くなるように構成されている。また、この光学系は、表示パネル２７に向き合った人物の顔部分を撮像可能な方向に光軸が向けられている。
撮像素子は、例えば、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal-Oxide Semiconductor）等のイメージセンサである。そして、撮像素子は、光学系を通過した光学像を二次元の画像信号に変換する。
撮像制御部は、撮像素子による特定の被写体の撮像を制御する。すなわち、撮像制御部は、図示は省略するが、タイミング発生器、ドライバなどを備えている。そして、撮像制御部は、タイミング発生器、ドライバにより撮像素子を走査駆動して、受光した光学像を所定周期毎に二次元の画像信号に変換させ、当該撮像素子の撮像領域から１画面分ずつフレーム画像を読み出して画像データを生成する。
【００１５】
台座２８には、ボタン式の操作部３２と、スピーカなどの音声出力部３３と、マイクなどの音声入力部３４とが設けられている。
操作部３２、音声出力部３３、音声入力部３４及び撮像部３０は、図２に示すように制御部２３に接続されている。
【００１６】
制御部２３は、各種プログラムを実行して所定の演算や各部の制御を行うＣＰＵと、プログラム実行時の作業領域となるメモリとを備えている（いずれも図示略）。
そして、制御部２３は、操作部３２からの操作信号に基づいて、各種の処理を実行し、必要時には、記憶部２５から画像データや音声データを読み出して、プロジェクタ２４の表示制御及び音声出力部３３の音声出力制御を実行する。
さらに、制御部２３は、撮像部３０から得られた画像データや、音声入力部３４から得られた音声データを記憶部２５に格納する。
また、制御部２３は、操作部３２からの操作信号によっては、通信部２６を制御してサーバ装置５と通信を行う。通信により得られた情報は記憶部２５に格納される。
【００１７】
［デジタルサイネージ装置における表示制御処理］
本実施の形態では、デジタルサイネージ装置２において表示制御処理を実行する。
そのため、デジタルサイネージ装置２には、図２に示すように、その記憶部２５に表示制御処理を行うための処理プログラム２５１が格納されており、表示制御処理に要する設定データ、画像データ、音声データ等の各種データは、記憶部２５内のデータ記憶部２５２に格納されている。
そして、デジタルサイネージ装置２の制御部２３は、いわゆるコンピュータであって、上述した表示制御処理の処理プログラム２５１を実行することにより、図４に示す、顔画像抽出手段２３１、コンテンツ評価手段２３２及び表示制御手段２３３として機能する。
なお、以下の説明において、撮像画像、顔画像、表示画像、その他の画像は、いずれも、全てデータ化して処理が行われることを前提とする。
【００１８】
顔画像抽出手段２３１は、撮像部３０による撮像画像から視聴者の顔画像を抽出する。
コンテンツ評価手段２３２は、抽出された顔画像に基づいて、表示部２４０に表示されている種類のコンテンツとしての広告に対する評価を行う。
表示制御手段２３３は、複数種類の広告を切り替えて表示部２４０に表示するとともに、コンテンツ評価手段２３２による評価結果に基づいて表示部２４０に表示するコンテンツを決定する。これにより、視聴者の広告を見たときの表情に基づいて当該広告に対する評価を行い、評価結果に基づいて、例えば、当該広告の表示を延長したり、他の広告に切り替えたりすることにより、表示する広告を決定することができる。
【００１９】
上記各手段２３１〜２３３について、さらに補足的に説明する。
【００２０】
［顔画像抽出手段］
顔画像抽出手段２３１は、撮像部３０により取得された撮像画像から所定のアルゴリズムに基づいて顔画像抽出処理を行い、顔画像を抽出する。
この顔画像抽出手段２３１では、撮像部３０により取得された撮像画像に対して、例えば、adaboost（アダブースト）のアルゴリズムを用いて顔画像の抽出を行う。
adaboostのアルゴリズムでは、顔画像の識別力が弱い識別器（例えば、識別の正解率が０．５より若干高い程度）を複数使用する。これらの識別器は、予め、サンプルとなる顔画像と非顔画像とを用いた学習によって識別器毎に重み付けが設定されている。
そして、顔画像抽出手段２３１は、撮像画像全体を各識別器によりサーチすることでそれぞれの識別器から得られる点数（重み付けが反映された点数）の総計が所定の閾値以上となるエリアに顔があるものと認識する。
【００２１】
上記識別器としては、例えば、顔の部分的な特徴を白黒の矩形領域とその配置とで表したHaar-Like（ハールライク）特徴といわれる複数のパターン画像を使用する。これらの複数のパターン画像も顔画像と非顔画像とを用いた学習によってここに重み付けされている。そして、各パターン画像と撮像画像のサーチエリアとの一致判定結果から当該識別器の点数を算出する。
また、顔画像を抽出するためのサーチエリアは、複数のサイズで用意されており、識別器も、これらのサイズ毎に用意されている。つまり、各種のサイズで顔画像の検出を行い、これにより、撮像画像の撮像範囲内の顔画像の位置だけでなく、顔画像のサイズも取得することが可能となっている。
なお、この顔画像抽出手段２３１による顔画像の抽出の方法は一例であって、上記処理に限らず、他の周知の顔画像抽出の手法を使用することも可能である。
【００２２】
［コンテンツ評価手段］
コンテンツ評価手段２３２は、まず、顔画像抽出手段２３１から抽出された顔画像から複数種類の表情の何れに近いかを判定することにより、顔画像の表情の認識を行う。本実施の形態では、この顔画像の表情の認識結果に基づいて、表示部２４０に表示されている広告に対する評価を行う。
表情の種類としては、例えば、楽しい顔、うれしい顔、幸せな顔、穏やかな顔及び和やかな顔といった肯定的な感情を示す表情や、悲しい顔、怒った顔及び嫌悪している顔といった否定的な感情を示す表情が挙げられる。なお、これらに限定されるものではなく、より多く又はより少ない表情を判定することも可能であり、また、上記以外の他の表情を判定することも可能である。
この表情の判定は、例えば、adaboostのアルゴリズムを利用することができる。
この場合、学習の際に、各種の表情の中で何れか一種類の表情を示す画像とそれ以外の表情の画像とを用いて複数の識別器を生成する。また、識別器のパターン画像はHaar-Like特徴とすることが好ましい。これにより、一種類の表情を識別するための複数の識別器が取得される。
さらに、同様にして、他の全ての種類の表情についてそれぞれを識別するための複数の識別器を各種の表情毎に生成する。
【００２３】
ここで、上述した各表情には評価値が設定されている。肯定的な感情については、肯定的な値、すなわち、プラスの評価値が設定されており、否定的な感情については、否定的な値、すなわち、マイナスの評価値が設定されている。なお、評価値は表情毎に異なっていてもよいし、同じ評価値である表情が複数あってもよい。また、評価値の取得の手法は例示であって、上記に限らず、表情を評価する周知の他の方法を使用することが可能である。
また、コンテンツ評価手段２３２は、所定間隔で撮像されて顔画像抽出手段２３１により抽出された顔画像について、それぞれ上述したようにして評価値を求め、これらの評価値の平均を算出して表情認識による肯定度Ｐｅを求め、この肯定度Ｐｅに基づいて、表示部２４０に表示されている種類の広告に対する評価を行う。肯定度Ｐｅは、下記式（１）により求めることができる。ここで、「Ｅ」は、所定間隔で取得した評価値を表し、「Ｎ」は、評価値を取得した回数、すなわち、表情認識回数を表している。
肯定度Ｐｅ＝ΣＥ／Ｎ・・・（１）
【００２４】
また、コンテンツ評価手段２３２は、顔画像抽出手段２３１から抽出された顔画像から表示パネル２７に対する視線の認識を行い、視線を認識していることを条件に、顔画像の表情の評価を行う。すなわち、コンテンツ評価手段２３２は、視線を認識してしない場合には、顔画像の表情の評価を行わないようにする。
表示パネル２７に対する視線の認識は、例えば、顔画像から視聴者の目の目頭を基準点として設定し、虹彩を動点として設定し、これらの位置関係を判定することにより行うことができる。なお、視線の認識方法はこれに限定されず、公知の種々の方法が採用できる。
【００２５】
また、コンテンツ評価手段２３２は、顔画像抽出手段２３１から抽出された顔画像から表示パネル２７に対する視線の認識（検出）を行い、視線の認識結果に基づいて、表示部２４０に表示されている種類の広告に対する評価を行う。本実施の形態では、コンテンツ評価手段２３２は、表示パネル２７に対する視線の認識時間と、表示パネル２７から視線が外れた回数を求め、これに基づいて視線認識による肯定度Ｐｌを求める。コンテンツ評価手段２３２は、この肯定度Ｐｌに基づいて、表示部２４０に表示されている種類の広告に対する評価を行う。肯定度Ｐｌは、下記式（２）により求めることができる。ここで、「Ｔｏｎ」は、表示パネル２７に対する視線を認識した時間を表し、「Ｎｏｕｔ」は、表示パネル２７から視線が外れた回数を表している。
肯定度Ｐｌ＝Ｔｏｎ＊ｋ１−Ｎｏｕｔ＊ｋ２・・・（２）
なお、上記式（２）において、ｋ１及びｋ２は、それぞれ表示パネル２７に対する視線の認識時間に対する計数と、表示パネル２７から視線が外れた回数に対する係数を表している。
本実施の形態では、表示パネル２７に対する視線の認識時間に基づいて、表示部２４０に表示されている種類の広告に対する評価を行うようにしたが、視線の認識時間ではなく、視線を認識した回数に基づいて、表示部２４０に表示されている種類の広告に対する評価を行うようにしてもよい。
【００２６】
コンテンツ評価手段２３２は、上述したようにして求めた肯定度Ｐｅ及び肯定度Ｐｌに基づいて、表示部２４０に表示されている広告に対する評価である肯定度Ｐを求める。具体的には、下記式（３）により肯定度Ｐを求めることができる。
肯定度Ｐ＝肯定度Ｐｅ＋肯定度Ｐｌ・・・（３）
なお、ここで、肯定度Ｐｅ及び肯定度Ｐｌにそれぞれ重み付けを行うようにしてもよい。
【００２７】
本実施の形態では、上述したようにして肯定度Ｐを求めるようにしたが、例えば、特開２０１３−０５１６８８号公報に記載されているように、視聴者の顔の向きで肯定度Ｐを求めるようにしてもよい。
【００２８】
［表示制御手段］
表示制御手段２３３は、複数種類の広告を切り替えて表示部２４０に表示する制御を行う。
また、表示制御手段２３３は、コンテンツ評価手段２３２による評価結果に基づいて表示部２４０に表示する広告を決定する。何れの広告を表示するかについては、後述する。
【００２９】
次に、上述のようにして構成されたデジタルサイネージ装置２の制御部２３にて実行される表示制御処理について図５を参照しながら説明する。
【００３０】
まず、制御部２３は、コンテンツとしての広告の表示を開始する（ステップＳ１０１）。具体的には、例えば、図７（Ａ）〜図７（Ｄ）に示される４種類の広告を所定時間（例えば、１０秒）毎に切り替えながら表示部２４０に表示する。より具体的には、所定時間毎に、図７（Ａ）に示す「広告Ａ−メイン」画像、図７（Ｂ）に示す「広告Ｂ−メイン」画像、図７（Ｃ）に示す「広告Ｃ−メイン」画像、図７（Ｄ）に示す「広告Ｄ−メイン」画像、図７（Ａ）に示す「広告Ａ−メイン」画像・・・の順に表示を切り替える。この表示制御は、以下の処理の実行に並行して行われる。
【００３１】
次に、制御部２３は、撮像部３０によりデジタルサイネージ装置２の表示パネル２７の前方に対して撮像を行う（ステップＳ１０２）。
【００３２】
制御部２３は、撮像画像に対して顔画像の検出を行う顔検出処理を実行する（ステップＳ１０３）。制御部２３は、顔画像を検出したか否かを判定する（ステップＳ１０４）。制御部２３は、顔画像を検出したと判定したときは（ステップＳ１０４：Ｙ）、顔画像抽出手段２３１を機能させて、撮像画像から顔画像を抽出する（ステップＳ１０５）。
【００３３】
制御部２３は、抽出した顔画像に基づいて肯定度算出処理を実行する（ステップＳ１０６）。
ここで、図６を参照しながら、肯定度算出処理について説明する。
【００３４】
制御部２３は、上述したようにして表示パネル２７に対する視線の認識を行う視線認識処理を行う（ステップＳ２０１）。続いて、制御部２３は、上述したようにして視線の認識結果に基づき、視線認識による肯定度Ｐｌを算出し、その結果を最新の肯定度Ｐｌとして、例えば、メモリに更新記憶する（ステップＳ２０２）。
【００３５】
制御部２３は、視線認識処理を行った結果、表示パネル２７に対する視線の認識があったか否かを判定する（ステップＳ２０３）。制御部２３は、視線の認識があったと判定したときは（ステップＳ２０３：Ｙ）、表情認識回数Ｎをインクリメントし（ステップＳ２０４）、上述したようにして顔画像の表情の認識を行う表情認識処理を実行する（ステップＳ２０５）。
【００３６】
制御部２３は、表情を認識した結果に基づいて評価値を取得し、上述したようにして表情認識による肯定度Ｐｅを算出し、その結果を最新の肯定度Ｐｅとして、例えば、メモリに更新記憶する（ステップＳ２０６）。
【００３７】
一方、制御部２３は、ステップＳ２０３において、視線の認識があったと判定しないときは（ステップＳ２０３：Ｎ）、ステップＳ２０４〜ステップＳ２０６の処理を行うことなく、ステップＳ２０７の処理を実行する。
【００３８】
制御部２３は、ステップＳ２０７において、上述したようにして求めた最新の肯定度Ｐｅ及び肯定度Ｐｌから肯定度Ｐを算出し（ステップＳ２０７）、この処理を終了する。
【００３９】
図５に戻って、制御部２３は、ステップＳ１０７において、肯定度算出処理において算出した肯定度Ｐが所定の閾値ｔｈを超えているか否かを判定する（ステップＳ１０７）。制御部２３は、肯定度Ｐが閾値ｔｈを超えていると判定したときは（ステップＳ１０７：Ｙ）、視聴者は表示部２４０に現在表示されている種類の広告に興味があると判断し、当該広告の表示時間を延長する表示延長処理を実行する（ステップＳ１０８）。表示を延長する時間は、例えば、１０秒としているが、これに限定されない。一方、制御部２３は、肯定度Ｐが閾値ｔｈを超えていると判定しないときは（ステップＳ１０７：Ｎ）、視聴者は表示部２４０に現在表示されている種類の広告には興味がないと判断し、表示部２４０に現在表示されている種類の広告を他の種類の広告に変更する表示変更処理を実行する（ステップＳ１０９）。例えば、図７（Ａ）に示す「広告Ａ−メイン」画像が表示部２４０に表示されている場合には、図７（Ｂ）に示す「広告Ｂ−メイン」画像に変更する。なお、変更後の広告をランダムに選択するようにしてもよい。
【００４０】
制御部２３は、表示部２４０に現在表示されている種類の広告の表示時間を積算して、例えば、メモリに更新記憶する表示時間積算処理を実行し（ステップＳ１１０）、ステップＳ１０２の処理に移行する。これによれば、広告の種類毎に表示部２４０に表示された時間を集計することができ、例えば、これをマーケティングに役立てることができる。
【００４１】
また、制御部２３は、ステップＳ１０４において、顔画像を検出したと判定しないときは（ステップＳ１０４：Ｎ）、広告表示を終了させるか否かを判定する（ステップＳ１１１）。具体的には、例えば、所定の終了操作が行われたか否かにより、広告表示を終了させるか否かを判定する。制御部２３は、広告表示を終了させると判定しないときは（ステップＳ１１１：Ｎ）、ステップＳ１０２に移行する。一方、制御部２３は、広告表示を終了させると判定したときは（ステップＳ１１１：Ｙ）。この処理を終了する。
【００４２】
このように、第１の実施の形態では、広告を見ている視聴者の表情によって、表示部２４０に表示されている広告の表示を延長したり、広告の内容を変更したりするので、視聴者の関心を反映させてより高い広告効果を発揮させることができる。また、例えば、視聴者に選択肢を表示して、視聴者の選択によって広告の内容を変更させるようなものなどのように、視聴者に選択させるという動作が不要であるため、視聴者に広告を見ることに対する積極的な関心を持っていない状態であっても高い広告効果を発揮させることができる。
【００４３】
（第２の実施の形態）
次に、本発明の第２の実施の形態について説明する。なお、第２の実施の形態において適用されるデジタルサイネージ装置２の機能的構成は、上述した第１の実施の形態のものと同様なので、ここでの説明は省略する。
【００４４】
第２の実施の形態にかかる表示制御処理について図８を参照しながら説明する。
【００４５】
まず、制御部２３は、撮像部３０によりデジタルサイネージ装置２の表示パネル２７の前方に対して撮像を行う（ステップＳ３０１）。
【００４６】
制御部２３は、撮像画像に対して顔画像を検出する顔検出処理を実行する（ステップＳ３０２）。制御部２３は、顔画像の検出があったか否かを判定する（ステップＳ３０３）。制御部２３は、顔画像の検出があったと判定したときは（ステップＳ３０３Ｙ）、コンテンツとしての広告の表示を開始する（ステップＳ３０４）。ここでは、例えば、図７（Ａ）〜図７（Ｄ）に示される４種類の広告を所定時間毎に切り替えながら表示部２４０にダイジェスト表示する。すなわち、図９に示すように、制御部２３は、「広告Ａ−メイン」画像を所定時間（例えば、３秒）表示し（ステップＳ４０１）、「広告Ｂ−メイン」画像を所定時間表示し（ステップＳ４０２）、「広告Ｃ−メイン」画像を所定時間表示し（ステップＳ４０３）、「広告Ｄ−メイン」画像を所定時間表示して（ステップＳ４０４）、ダイジェスト表示を完了させる。
【００４７】
次に、制御部２３は、顔画像抽出手段２３１を機能させて、撮像画像から顔画像を抽出し（ステップＳ３０５）、上述した肯定度算出処理を実行する（ステップＳ３０６）。
【００４８】
制御部２３は、広告のダイジェスト表示が完了したか否かを判定する（ステップＳ３０７）。制御部２３は、ダイジェスト表示が完了したと判定しないときは（ステップＳ３０７：Ｎ）、撮像部３０による撮像を行った後（ステップＳ３０８）、ステップＳ３０５の処理に移行する。制御部２３は、ステップＳ３０５〜Ｓ３０８の処理をダイジェスト表示が完了するまで繰り返し実施し、広告の種類毎の肯定度を算出する。
【００４９】
一方、制御部２３は、広告のダイジェスト表示が完了したと判定したときは（ステップＳ３０７：Ｙ）、広告の種類毎の肯定度に基づいて、広告の詳細の表示順序を決定する表示順序決定処理を実行する（ステップＳ３０９）。具体的には、制御部２３は、肯定度の高い順に広告の詳細が表示されるように表示順序を決定する。そして、制御部２３は、ステップＳ３０９において決定した表示順序となるように広告の詳細の表示を開始する（ステップＳ３１０）。例えば、広告の種類毎の肯定度を算出した結果、広告Ａ、広告Ｄ、広告Ｂ、広告Ｃの順に肯定度が高い場合は、最初に広告Ａの詳細表示である「広告Ａ−サブ」画像を表示し、次に広告Ｄの詳細表示である「広告Ｄ−サブ」画像を表示し、次に広告Ｂの詳細表示である「広告Ｂ−サブ」画像を表示し、最後に広告Ｃの詳細表示である「広告Ｃ−サブ」画像を表示する。ここで、「広告Ａ−サブ」画像が４つの画像からなり、「広告Ｂ−サブ」画像が３つの画像からなり、「広告Ｃ−サブ」画像が５つの画像からなり、「広告Ｄ−サブ」画像が２つの画像からなる場合は、図１０に示すように、制御部２３は、最初に、「広告Ａ−サブ１」画像から「広告Ａ−サブ４」画像までをそれぞれ所定時間（例えば、５秒）ずつ表示し（ステップＳ５０１）、続いて、「広告Ｄ−サブ１」画像から「広告Ｄ−サブ２」画像までをそれぞれ所定時間ずつ表示し（ステップＳ５０２）、続いて、「広告Ｂ−サブ１」画像から「広告Ｂ−サブ３」画像までをそれぞれ所定時間ずつ表示し（ステップＳ５０３）、続いて、「広告Ｃ−サブ１」画像から「広告Ｃ−サブ５」画像までをそれぞれ所定時間表示し（ステップＳ５０４）、これを繰り返し実施する。ここで、「広告Ａ−サブ１」画像の一例としては、例えば、図１１（Ａ）に示すような画像であり、「広告Ａ−サブ２」画像の一例としては、例えば、図１１（Ｂ）に示すような画像であり、「広告Ａ−サブ３」画像の一例としては、例えば、図１１（Ｃ）に示すような画像であり、「広告Ａ−サブ４」画像の一例としては、例えば、図１１（Ｄ）に示すような画像である。すなわち、「広告Ａ−サブ」画像は、それぞれ、図７（Ａ）に示される「広告Ａ−メイン」画像に関連する詳細表示画像である。「広告Ｂ−サブ」画像、「広告Ｃ−サブ」画像及び「広告Ｄ−サブ」画像も同様に「広告Ｂ−メイン」画像、「広告Ｃ−メイン」画像及び「広告Ｄ−メイン」画像にそれぞれ関連する複数の詳細表示画像を有している。
【００５０】
このように、第２の実施の形態では、広告を見ている視聴者の表情によって、表示部２４０に表示される広告の詳細表示の表示順序を決定するので、視聴者は、興味のある順序で広告を見ることができ、視聴者の関心を反映させてより高い広告効果を発揮させることができる。
【００５１】
（第３の実施の形態）
次に、本発明の第３の実施の形態について説明する。なお、第３の実施の形態において適用されるデジタルサイネージ装置２の機能的構成も、上述した第１の実施の形態のものと同様なので、ここでの説明は省略する。
【００５２】
第３の実施の形態にかかる表示制御処理について図１２を参照しながら説明する。
【００５３】
まず、制御部２３は、コンテンツとしてのメインシナリオの広告の表示を開始する（ステップＳ６０１）。具体的には、例えば、図７（Ａ）〜図７（Ｄ）に示される４種類の広告を所定時間（例えば、１０秒）毎に切り替えながら表示部２４０に表示する。すなわち、制御部２３は、所定時間毎に、図７（Ａ）に示す「広告Ａ−メイン」画像、図７（Ｂ）に示す「広告Ｂ−メイン」画像、図７（Ｃ）に示す「広告Ｃ−メイン」画像、図７（Ｄ）に示す「広告Ｄ−メイン」画像、図７（Ａ）に示す「広告Ａ−メイン」画像・・・の順に表示を切り替える。この表示制御は、以下の処理の実行に並行して行われる。
【００５４】
次に、制御部２３は、撮像部３０によりデジタルサイネージ装置２の表示パネル２７の前方に対して撮像を行う（ステップＳ６０２）。
【００５５】
制御部２３は、撮像画像に対して顔画像の検出を行う顔検出処理を実行する（ステップＳ６０３）。制御部２３は、顔画像を検出したか否かを判定する（ステップＳ６０４）。制御部２３は、顔画像を検出したと判定したときは（ステップＳ６０４：Ｙ）、顔画像抽出手段２３１を機能させて、撮像画像から顔画像を抽出し（ステップＳ６０５）、抽出した顔画像に基づいて上述した肯定度算出処理を実行する（ステップＳ６０６）。
【００５６】
制御部２３は、肯定度算出処理において算出した肯定度Ｐが閾値ｔｈを超えているか否かを判定する（ステップＳ１０７）。制御部２３は、肯定度Ｐが閾値ｔｈを超えていると判定したときは（ステップＳ６０７：Ｙ）、視聴者は表示部２４０に現在表示されている種類の広告に興味があると判断し、当該メインシナリオの広告に関連するサブシナリオの広告を表示する（ステップＳ６０８）。例えば、制御部２３は、表示部２４０にメインシナリオの広告として「広告Ａ−メイン」画像が表示されているときにおいて、算出した肯定度Ｐが閾値ｔｈを超えていると判定したときは、「広告Ａ−メイン」画像に関連する「広告Ａ−サブ１」画像から「広告Ａ−サブ４」画像までをそれぞれ所定時間（例えば、５秒）ずつ切り替えて表示する。
【００５７】
その後、制御部２３は、撮像部３０による撮像を行った後（ステップＳ６０９）、ステップＳ６０５の処理に移行する。制御部２３は、例えば、「広告Ａ−サブ」画像を表示している場合に、ステップＳ６０７において、肯定度Ｐが閾値ｔｈを超えていると判定する限りは、「広告Ａ−サブ」画像を繰り返し表示する。サブシナリオの広告の表示が終了した後は、メインシナリオの広告に切り替えて表示するようにしてもよい。
【００５８】
また、制御部２３は、ステップＳ６０７において、肯定度Ｐが閾値ｔｈを超えていると判定しないときは（ステップＳ６０７：Ｎ）、視聴者は表示部２４０に現在表示されている種類の広告には興味がないと判断し、ステップＳ６０１に移行してメインシナリオの広告の表示を行う。なお、本実施の形態において、サブシナリオの広告が一通り行われたことを条件に、肯定度Ｐが閾値ｔｈを超えていると判定しない場合にメインシナリオに移行するようにしてもよいし、サブシナリオの広告の表示中に肯定度Ｐが閾値ｔｈを超えていると判定しない場合にメインシナリオに移行するようにしてもよい。
【００５９】
また、制御部２３は、ステップＳ６０４において、顔画像を検出したと判定しないときは（ステップＳ６０４：Ｎ）、広告表示を終了させるか否かを判定する（ステップＳ６１０）。制御部２３は、広告表示を終了させると判定しないときは（ステップＳ６１０：Ｎ）、ステップＳ６０２の処理に移行する。一方、制御部２３は、広告表示を終了させると判定したときは（ステップＳ６１０：Ｙ）、この処理を終了する。
【００６０】
本実施の形態では、上述したように構成されているので、例えば、以下のようにして広告が切り替え表示される。
【００６１】
図１３に示すように、まず、制御部２３は、「広告Ａ−メイン」画像を所定時間表示する（ステップＳ７０１）。このとき、制御部２３は、肯定度Ｐが閾値ｔｈを超えていると判定されたときは（ステップＳ７０２：Ｙ）、「広告Ａ−サブ１」画像から「広告Ａ−サブ４」画像までそれぞれ所定時間ずつ表示し（ステップＳ７０３）、肯定度Ｐが閾値ｔｈを超えている限り（ステップＳ７０４：Ｙ）、「広告Ａ−サブ」画像を繰り返し表示する。
【００６２】
制御部２３は、ステップＳ７０２又はステップＳ７０４において、肯定度Ｐが閾値ｔｈを超えていると判定されないときは（ステップＳ７０２：Ｎ、ステップＳ７０４：Ｎ）、「広告Ｂ−メイン」画像を所定時間表示する（ステップＳ７０５）。このとき、制御部２３は、肯定度Ｐが閾値ｔｈを超えていると判定されたときは（ステップＳ７０６：Ｙ）、「広告Ｂ−サブ１」画像から「広告Ｂ−サブ３」画像までそれぞれ所定時間ずつ表示し（ステップＳ７０７）、肯定度Ｐが閾値ｔｈを超えている限り（ステップＳ７０８：Ｙ）、「広告Ｂ−サブ」画像を繰り返し表示する。
【００６３】
制御部２３は、ステップＳ７０６又はステップＳ７０８において、肯定度Ｐが閾値ｔｈを超えていると判定されないときは（ステップＳ７０６：Ｎ、ステップＳ７０８：Ｎ）、「広告Ｃ−メイン」画像を所定時間表示する（ステップＳ７０９）。このとき、制御部２３は、肯定度Ｐが閾値ｔｈを超えていると判定されたときは（ステップＳ７１０：Ｙ）、「広告Ｃ−サブ１」画像から「広告Ｃ−サブ５」画像までそれぞれ所定時間ずつ表示し（ステップＳ７１１）、肯定度Ｐが閾値ｔｈを超えている限り（ステップＳ７１２：Ｙ）、「広告Ｃ−サブ」画像を繰り返し表示する。
【００６４】
制御部２３は、ステップＳ７１０又はステップＳ７１２において、肯定度Ｐが閾値ｔｈを超えていると判定されないときは（ステップＳ７１０：Ｎ、ステップＳ７１２：Ｎ）、「広告Ｄ−メイン」画像を所定時間表示する（ステップＳ７１３）。このとき、制御部２３は、肯定度Ｐが閾値ｔｈを超えていると判定されたときは（ステップＳ７１４：Ｙ）、「広告Ｄ−サブ１」画像から「広告Ｄ−サブ２」画像までそれぞれ所定時間ずつ表示し（ステップＳ７１５）、肯定度Ｐが閾値ｔｈを超えている限り（ステップＳ７１６：Ｙ）、「広告Ｄ−サブ」画像を繰り返し表示する。
【００６５】
制御部２３は、ステップＳ７１４又はステップＳ７１６において、肯定度Ｐが閾値ｔｈを超えていると判定されないときは（ステップＳ７１４：Ｎ、ステップＳ７１６：Ｎ）、ステップＳ７０１の処理に移行する。以後はこれらの処理が繰り返し行われる。
【００６６】
このように、第３の実施の形態では、広告を見ている視聴者の表情によって、視聴者が興味のある広告を判断し、視聴者の興味のある広告の詳細を表示できるので、視聴者の関心を反映させてより高い広告効果を発揮させることができる。また、視聴者に、所望とする広告を選択させるという動作が不要であるため、視聴者の手間を煩わせることなく高い広告効果を発揮させることができる。
【００６７】
（第４の実施の形態）
次に、本発明の第４の実施の形態について説明する。なお、第４の実施の形態において適用されるデジタルサイネージ装置２の機能的構成も、上述した第１の実施の形態のものと同様なので、ここでの説明は省略する。
【００６８】
第４の実施の形態に係る表示制御処理について図１４を参照しながら説明する。第４の実施の形態では、肯定度Ｐの閾値について、閾値ｔｈ１と、閾値ｔｈ１よりも小さい閾値ｔｈ２を設定し、肯定度Ｐが何れの閾値を超えているかを判定することにより、表示部２４０に表示する広告を決定する点で第１の実施の形態と異なっている。なお、図１４に示される表示制御処理において、ステップＳ８０１〜ステップＳ８０６については、図５に示される第１の実施の形態に係る表示制御処理におけるステップＳ１０１〜ステップＳ１０６と同様なので、ここでの説明は省略する。
【００６９】
制御部２３は、ステップＳ８０７において、肯定度算出処理において算出した肯定度Ｐが閾値ｔｈ１を超えているか否かを判定する（ステップＳ８０７）。すなわち、制御部２３は、肯定度Ｐが第１の肯定評価であるか否かを判定する。制御部２３は、肯定度Ｐが閾値ｔｈ１を超えていると判定したときは（ステップＳ８０７：Ｙ）、視聴者は表示部２４０に現在表示されている種類の広告に大変興味があると判断し、当該広告に関連する購買情報を表示する購買情報表示処理を実行する（ステップＳ８０８）。購買情報は、例えば、図１５に示されるような広告であって、例えば、当該広告に表示された商品の購買方法や商品の陳列場所などが表示されるものである。
【００７０】
一方、制御部２３は、肯定度Ｐが閾値ｔｈ１を超えていると判定しないときは（ステップＳ８０７：Ｎ）、肯定度Ｐが閾値ｔｈ２を超えているか否かを判定する（ステップＳ８０９）。すなわち、制御部２３は、肯定度Ｐが第２の肯定評価であるか否かを判定する。制御部２３は、肯定度Ｐが閾値ｔｈ２を超えていると判定したときは（ステップＳ８０９：Ｙ）、視聴者は表示部２４０に現在表示されている種類の広告に多少の興味があると判断し、上述した表示時間延長処理を実行する（ステップＳ８１０）。一方、制御部２３は、肯定度Ｐが閾値ｔｈ２を超えていると判定しないときは（ステップＳ８０９：Ｎ）、視聴者は表示部２４０に現在表示されている種類の広告には興味がないと判断し、上述した表示変更処理を実行する（ステップＳ８１１）。
【００７１】
その後、制御部２３は、上述した表示時間積算処理を実行した後（ステップＳ８１２）、ステップＳ８０２の処理に移行する。
【００７２】
また、制御部２３は、ステップＳ８０４において、顔画像を検出したと判定しないときは（ステップＳ８０４：Ｎ）、広告表示を終了させるか否かを判定する（ステップＳ８１３）。制御部２３は、広告表示を終了させると判定しないときは（ステップＳ８１３：Ｎ）、ステップＳ８０２の処理に移行する。一方、制御部２３は、広告表示を終了させると判定したときは（ステップＳ８１３：Ｙ）、この処理を終了する。
【００７３】
このように、第４の実施の形態では、広告を見ている視聴者の表情によって、表示部２４０に表示されている広告に関連する詳細な情報を表示したり、表示されている広告の表示を延長したり、広告の内容を変更したりするので、視聴者の関心の度合いに応じた表示を行うことができ、高い広告効果を発揮させることができる。
【００７４】
以上説明したように、第１〜第４の実施の形態によれば、表示部２４０は、画像を表示する。制御部２３は、複数種類の広告を切り替えて表示部２４０に表示する。制御部２３は、表示部２４０に表示される広告に対する肯定度の評価を行う。制御部２３は、肯定度に基づいて表示部２４０に表示する広告を決定する。その結果、視聴者の関心を反映させてより高い広告効果を発揮することができる。
【００７５】
また、第１〜第４の実施の形態によれば、撮像部３０は、撮像を行う。制御部２３は、撮像部３０による撮像画像から人物の顔画像を抽出する。制御部２３は、抽出された顔画像に基づいて、表示部２４０に表示される広告に対する肯定度の評価を行う。その結果、視聴者の顔画像から表示部に表示されているコンテンツに対する視聴者の関心の度合いを評価することができる。
【００７６】
また、第１〜第４の実施の形態によれば、制御部２３は、抽出された顔画像から表情を評価し、該顔画像の表情の肯定度に基づいて、表示部２４０に表示されている種類の広告に対する評価を行う。その結果、視聴者の表情により視聴者のコンテンツに対する関心を評価できるので、より高い広告効果を発揮することができる。
【００７７】
また、第１〜第４の実施の形態によれば、制御部２３は、抽出された顔画像に基づいて予め定められた複数種類の表情から何れの表示に近似するかを判定する。その結果、視聴者の表情を簡便に判定できるようになる。
【００７８】
また、第１〜第４の実施の形態によれば、制御部２３は、顔画像の表情の肯定度を示す評価値を所定間隔で求めて、該評価値の平均を算出し、該算出した評価値の平均に基づいて、表示部２４０に表示されている種類の広告に対する評価を行う。その結果、確度の高い視聴者の表情の評価を行うことができるようになる。
【００７９】
また、第１〜第４の実施の形態によれば、制御部２３は、抽出された顔画像から表示部２４０に対する視線を検出し、該視線を検出していることを条件に、顔画像の表情の評価を行う。その結果、視聴者の表情をより正確に評価することができるようになる。
【００８０】
また、第１〜第４の実施の形態によれば、制御部２３は、抽出された顔画像から表示部２４０に対する視線を検出し、視線の検出結果に基づいて、表示部２４０に表示されている種類の広告に対する肯定度の評価を行う。その結果、視聴者のコンテンツに対する関心をより精度よく把握することができるようになる。
【００８１】
また、第１〜第４の実施の形態によれば、制御部２３は、表示部２４０に対する視線を検出した時間に基づいて、表示部２４０に表示されている種類の広告に対する肯定度の評価を行う。その結果、視聴者のコンテンツに対する関心をより精度よく把握することができるようになる。
【００８２】
また、第１の実施の形態によれば、制御部２３は、表示部２４０に表示される広告に対する肯定度が所定の肯定評価であるときは、表示部２４０に表示中の広告を延長して表示する。その結果、コンテンツを見ている視聴者の顔画像の状態によって、表示部に表示されているコンテンツの表示を延長するので、視聴者の関心を反映させてより高い広告効果を発揮させることができる。
【００８３】
また、第２の実施の形態によれば、制御部２３は、表示部２４０に表示される広告に対する肯定度に基づいて、表示部２４０に表示する広告の表示順序を決定する。その結果、視聴者は、例えば、興味のある順序で広告を見ることができ、視聴者の関心を反映させてより高い広告効果を発揮させることができる。
【００８４】
また、第３の実施の形態によれば、制御部２３は、表示部２４０に表示される広告に対する肯定度が所定の肯定評価であるときは、表示部２４０に表示中の広告を、当該広告に関連する所定の広告の詳細に切り替える。その結果、視聴者の関心を反映させてより高い広告効果を発揮させることができる。また、視聴者に、所望とするコンテンツを選択させるという動作が不要であるため、視聴者の手間を煩わせることなく高い広告効果を発揮させることができる。
【００８５】
また、第４の実施の形態によれば、制御部２３は、表示部２４０に表示される広告に対する肯定度が所定の第１の肯定評価であるときは、表示部２４０に表示中の広告を、当該広告に関連する購買情報に切り替え、表示部２４０に表示される広告に対する肯定度が第１の肯定評価よりも低評価である第２の肯定評価であるときは、表示部２４０に表示中の広告を延長して表示する。その結果、コンテンツを見ている視聴者の顔画像によって、表示部２４０に表示されているコンテンツに関連する詳細な情報を表示したり、表示されているコンテンツの表示を延長したりするので、視聴者の関心の度合いに応じた表示を行うことができ、高い広告効果を発揮させることができる。
【００８６】
なお、上記実施形態における記述内容は、本発明に係る表示装置の好適な一例であり、これに限定されるものではない。
【００８７】
また、上述した実施の形態では、撮像する毎に肯定度を算出し、算出した肯定度により表示延長処理を行うか表示変更処理を行うようにしたが、例えば、肯定度の確度を高めるため、表示部２４０に表示される広告の種類が切り替わってから数秒間（例えば、３秒）は、肯定度の算出のみ行って、表示延長処理又は表示変更処理を行わないようにしてもよい。
【００８８】
また、上述した実施の形態では、視線の認識があったことを条件に表情認識処理を実行するようにしたが、視線の認識の有無にかかわらず表情認識処理を実行するようにしてもよい。
【００８９】
また、上述した実施の形態では、表情認識による肯定度と視線認識による肯定度とに基づいて肯定度を求めるようにしたが、表情認識による肯定度のみによって肯定度を求めるようにしてもよい。また、視線認識による肯定度のみによって肯定度を求めるようにしてもよい。
【００９０】
また、上述した実施の形態において、肯定度の判定について、広告の内容に応じて判定方法や判定の基準を変更してもよい。
【００９１】
また、上述した実施の形態では、表示部２４０に表示される広告の内容を変更するものとしたが、音声出力部３３から出力される音声案内、もしくは、表示と音声との両方を変更するものであってもよい。
【００９２】
また、上述した実施の形態において、肯定度の判定結果により表示する広告の内容を適応的に変更するようにしてもよい。例えば、メインシナリオにおいて、「広告Ａ−メイン」画像について、肯定度が閾値ｔｈよりも大きい場合には、「広告Ａ−メイン」画像に関連する表示を行った後は、「広告Ａ−メイン」画像に係る商品に類似する商品の広告（例えば、「広告Ｅ−メイン」画像）を優先的に表示するなど、適応的に変更するようにしてもよい。
【００９３】
また、上述した実施の形態において、表情認識処理及び視線認識処理で、性別や年齢を識別する処理を併せて行って広告を見ている人の情報を入手するようにしてもよい。これらの情報に加えて、肯定度や表示時間積算処理にて集計された広告の表示時間に基づいて、どのような人がどのような広告に興味を示すのかなどといったマーケティング情報を入手するようにしてもよい。
【００９４】
また、上述した実施の形態において、撮像部３０に撮像した撮像画像から表情認識等を行って肯定度を算出したが、これに限らず、音声入力部３４を用いた音声認識を行って肯定度を算出してもよく、肯定度を算出することができれば方法は限定されない。
【００９５】
また、上記の各処理を実行するためのプログラムを格納したコンピュータ読み取り可能な媒体として、ＲＯＭやハードディスク等の他、フラッシュメモリ等の不揮発性メモリ、ＣＤ−ＲＯＭ等の可搬型記録媒体を適用することも可能である。また、プログラムのデータを所定の通信回線を介して提供する媒体としては、キャリアウェーブ（搬送波）も適用される。
【００９６】
その他、表示装置を構成する各装置の細部構成及び細部動作に関しても、発明の趣旨を逸脱することのない範囲で適宜変更可能である。
【００９７】
本発明の実施の形態及び変形例を説明したが、本発明の範囲は、上述の実施の形態及び変形例に限定するものではなく、特許請求の範囲に記載された発明の範囲とその均等の範囲を含む。
以下に、この出願の願書に最初に添付した特許請求の範囲に記載した発明を付記する。付記に記載した請求項の項番は、この出願の願書に最初に添付した特許請求の範囲の通りである。
〔付記〕
＜請求項１＞
画像を表示する表示部と、
複数種類のコンテンツを切り替えて前記表示部に表示する表示制御手段と、
前記表示部に表示されるコンテンツに対する肯定度の評価を行うコンテンツ評価手段と、
を備え、
前記表示制御手段は、前記コンテンツ評価手段による肯定度に基づいて前記表示部に表示するコンテンツを決定することを特徴とする表示装置。
＜請求項２＞
撮像を行う撮像部と、
前記撮像部による撮像画像から人物の顔画像を抽出する顔画像抽出手段と、
を備え、
前記コンテンツ評価手段は、前記顔画像抽出手段によって抽出された顔画像に基づいて、前記表示部に表示されるコンテンツに対する肯定度の評価を行うことを特徴とする請求項１に記載の表示装置。
＜請求項３＞
前記コンテンツ評価手段は、前記顔画像抽出手段によって抽出された顔画像から表情を評価し、該顔画像の表情の肯定度に基づいて、前記表示部に表示されている種類のコンテンツに対する評価を行うことを特徴とする請求項２に記載の表示装置。
＜請求項４＞
前記コンテンツ評価手段は、前記顔画像抽出手段によって抽出された顔画像に基づいて予め定められた複数種類の表情から何れの表情に近似するかを判定することにより前記顔画像の表情の評価を行うことを特徴とする請求項３に記載の表示装置。
＜請求項５＞
前記コンテンツ評価手段は、前記顔画像の表情の肯定度を示す評価値を所定間隔で求めて、該評価値の平均を算出し、該算出した評価値の平均に基づいて、前記表示部に表示されている種類のコンテンツに対する評価を行うことを特徴とする請求項３又は４に記載の表示装置。
＜請求項６＞
前記コンテンツ評価手段は、前記顔画像抽出手段によって抽出された顔画像から前記表示部に対する視線を検出し、該視線を検出していることを条件に、前記顔画像の表情の評価を行うことを特徴とする請求項３〜５の何れか一項に記載の表示装置。
＜請求項７＞
前記コンテンツ評価手段は、前記顔画像抽出手段によって抽出された顔画像から前記表示部に対する視線を検出し、該視線の検出結果に基づいて、前記表示部に表示されている種類のコンテンツに対する肯定度の評価を行うことを特徴とする請求項２〜６の何れか一項に記載の表示装置。
＜請求項８＞
前記コンテンツ評価手段は、前記表示部に対する視線を検出した時間に基づいて、前記表示部に表示されている種類のコンテンツに対する肯定度の評価を行うことを特徴とする請求項７に記載の表示装置。
＜請求項９＞
前記表示制御手段は、前記コンテンツ評価手段による肯定度が所定の肯定評価であるときは、前記表示部に表示中のコンテンツを延長して表示することを特徴とする請求項１〜８のいずれか一項に記載の表示装置。
＜請求項１０＞
前記表示制御手段は、前記コンテンツ評価手段による肯定度に基づいて、前記表示部に表示するコンテンツの表示順序を決定することを特徴とする請求項１〜８のいずれか一項に記載の表示装置。
＜請求項１１＞
前記表示制御手段は、前記コンテンツ評価手段による肯定度が所定の肯定評価であるときは、前記表示部に表示中のコンテンツを、当該コンテンツに関連する所定の詳細コンテンツに切り替えることを特徴とする請求項１〜８のいずれか一項に記載の表示装置。
＜請求項１２＞
前記表示制御手段は、前記コンテンツ評価手段による肯定度が所定の第１の肯定評価であるときは、前記表示部に表示中のコンテンツを、当該コンテンツに関連する所定の詳細コンテンツに切り替え、前記コンテンツ評価手段による肯定度が前記第１の肯定評価よりも低評価である第２の肯定評価であるときは、前記表示部に表示中のコンテンツを延長して表示することを特徴とする請求項１〜８のいずれか一項に記載の表示装置。
＜請求項１３＞
複数種類のコンテンツを切り替えて画像を表示する表示部に表示する表示制御ステップと、
前記表示部に表示されるコンテンツに対する肯定度の評価を行うコンテンツ評価ステップと、
前記肯定度に基づいて前記表示部に表示するコンテンツを決定するコンテンツ決定ステップと、
を備えていることを特徴とするコンテンツ表示方法。
＜請求項１４＞
画像を表示する表示部を備えた表示装置のコンピュータを
複数種類のコンテンツを切り替えて前記表示部に表示する表示制御手段、
前記表示部に表示されるコンテンツに対する肯定度の評価を行うコンテンツ評価手段、
前記コンテンツ評価手段による肯定度に基づいて前記表示部に表示するコンテンツを決定するコンテンツ決定手段、
として機能させるためのプログラム。
【符号の説明】
【００９８】
２  デジタルサイネージ装置（表示装置）
２３  制御部
２３１  表示制御手段
２３２  顔画像抽出手段
２３３  コンテンツ評価手段
３０  撮像部
２４０  表示部
【図１】
2015064513.tif 000003
【図２】
2015064513.tif 000004
【図３】
2015064513.tif 000005
【図４】
2015064513.tif 000006
【図５】
2015064513.tif 000007
【図６】
2015064513.tif 000008
【図７】
2015064513.tif 000009
【図８】
2015064513.tif 000010
【図９】
2015064513.tif 000011
【図１０】
2015064513.tif 000012
【図１１】
2015064513.tif 000013
【図１２】
2015064513.tif 000014
【図１３】
2015064513.tif 000015
【図１４】
2015064513.tif 000016
【図１５】
2015064513.tif 000017