(57)【要約】【課題】コンテンツの誘導効果を評価できるようにする。【解決手段】デジタルサイネージ装置１によれば、制御部２３は、撮像部３４により取得された撮影画像に基づいてコンテンツの視聴者を検出し、コンテンツの視聴後の視聴者の移動方向を検出し、検出された視聴者の移動方向に基づいてコンテンツの評価を行う。【選択図】図４
2017162221.tif 000002
【特許請求の範囲】
【請求項１】
コンテンツの視聴者を検出する視聴者検出手段と、
前記コンテンツの視聴後の前記視聴者の移動方向を検出する移動方向検出手段と、
前記移動方向検出手段により検出された前記視聴者の移動方向に基づいて前記コンテンツの評価を行う評価手段と、
を備える情報処理装置。
【請求項２】
前記評価手段は、前記コンテンツで案内した方向と前記視聴者の移動方向が一致しているか否かに基づいて、前記コンテンツの評価を行う請求項１に記載の情報処理装置。
【請求項３】
前記コンテンツは、当該コンテンツで紹介している商品の陳列場所の方向を示す情報を含み、
前記評価手段は、前記商品の陳列場所の方向と前記視聴者の移動方向が一致しているか否かに基づいて、前記コンテンツの評価を行う請求項２に記載の情報処理装置。
【請求項４】
前記コンテンツは、複数の商品を紹介する情報と、それぞれの前記商品の陳列場所の方向を示す情報を含み、
前記評価手段は、前記視聴者の移動方向がどの前記商品の陳列場所の方向と一致しているかに基づいて、前記コンテンツの評価を行う請求項１〜３の何れか一項に記載の情報処理装置。
【請求項５】
コンテンツの視聴者を検出する工程と、
前記コンテンツの視聴後の前記視聴者の移動方向を検出する工程と、
前記検出された視聴者の移動方向に基づいて前記コンテンツの評価を行う工程と、
を含むコンテンツ評価方法。
【請求項６】
コンピュータを、
コンテンツの視聴者を検出する視聴者検出手段、
前記コンテンツの視聴後の前記視聴者の移動方向を検出する移動方向検出手段、
前記移動方向検出手段により検出された前記視聴者の移動方向に基づいて前記コンテンツの評価を行う評価手段、
として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置、コンテンツ評価方法、及びプログラムに関する。
【背景技術】
【０００２】
従来、広告表示装置を設置したエリアを撮影し、撮影されたエリアに存在する人物の視線方向を検出し、それに基づいてコンテンツの広告効果を測定する技術が知られている（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００８−１１２４０１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、特許文献１に記載の技術では、顧客がコンテンツに注目しているか否かはわかるが、そのコンテンツを見て実際に商品に興味を持ちその商品コーナーへ足を運んだか否かはわからず、コンテンツの商品コーナーへの誘導効果を評価することはできなかった。
【０００５】
本発明の課題は、コンテンツの誘導効果を評価できるようにすることである。
【課題を解決するための手段】
【０００６】
上記課題を解決するため、請求項１に記載の発明の情報処理装置は、
コンテンツの視聴者を検出する視聴者検出手段と、
前記コンテンツの視聴後の前記視聴者の移動方向を検出する移動方向検出手段と、
前記移動方向検出手段により検出された前記視聴者の移動方向に基づいて前記コンテンツの評価を行う評価手段と、
を備える。
【発明の効果】
【０００７】
本発明によれば、コンテンツの誘導効果を評価することが可能となる。
【図面の簡単な説明】
【０００８】
【図１】本実施形態におけるデジタルサイネージ装置の機能的構成を示すブロック図である。
【図２】図１のスクリーン部の概略構成を示す図である。
【図３】検出結果記憶部のデータ格納例を示す図である。
【図４】図１の制御部により実行される検出結果取得処理を示すフローチャートである。
【図５】図４のステップＳ３において出力される商品コーナーの案内及び商品コーナーの配置を示す図である。
【発明を実施するための形態】
【０００９】
以下、添付図面を参照して本発明に係る好適な実施形態を詳細に説明する。以下の実施形態では、本発明に係る情報処理装置をデジタルサイネージ装置１に適用した場合を例にとり説明する。なお、本発明は、図示例に限定されるものではない。
【００１０】
［デジタルサイネージ装置１の構成］
図１は、デジタルサイネージ装置１の主制御構成を示すブロック図である。図２は、図１のスクリーン部２２の概略構成を示す正面図である。
デジタルサイネージ装置１は、例えば、店舗で取り扱っている商品に係る広告コンテンツを出力する装置であり、図１に示すように、コンテンツの映像光を照射する投影部２１と、投影部２１から照射された映像光を背面で受けて前面に投影するスクリーン部２２とを備えている。
【００１１】
まず、投影部２１について説明する。
投影部２１は、制御部２３と、プロジェクタ２４と、記憶部２５と、通信部２６と、計時部３０と、を備えている。プロジェクタ２４、記憶部２５、通信部２６、計時部３０は、図１に示すように制御部２３に接続されている。
【００１２】
制御部２３は、記憶部２５のプログラム記憶部２５１に記憶されている各種のプログラムを実行して所定の演算や各部の制御を行うＣＰＵとプログラム実行時の作業領域となるメモリとを備えている（いずれも図示略）。制御部２３は、プログラムとの協働により、後述する検出結果取得処理、コンテンツ評価処理を始めとする各種処理を実行する。制御部２３は、プログラム記憶部２５１に記憶されているプログラムとの協働により、評価手段として機能する。また、制御部２３は、撮像部３４及びプログラムとの協働により、視聴者検出手段、移動検出手段として機能する。
【００１３】
プロジェクタ２４は、制御部２３から出力された画像データを映像光に変換してスクリーン部２２に向けて照射する投影装置である。プロジェクタ２４は、例えば、アレイ状に配列された複数個（ＸＧＡの場合、横１０２４画素×縦７６８画素）の微小ミラーの各傾斜角度を個々に高速でオン／オフ動作して表示動作することでその反射光により光像を形成する表示素子であるＤＭＤ（デジタルマイクロミラーデバイス）を利用したＤＬＰ（Digital Light Processing）(登録商標)プロジェクタが適用可能である。
【００１４】
記憶部２５は、ＨＤＤ（Hard Disk Drive）や不揮発性の半導体メモリ等により構成される。記憶部２５には、図１に示すように、プログラム記憶部２５１が設けられている。プログラム記憶部２５１には、制御部２３で実行されるシステムプログラムや、後述する検出結果取得処理、コンテンツ評価処理を始めとする各種処理を実行するための処理プログラム、これらのプログラムの実行に必要なデータ等が記憶されている。
【００１５】
また、記憶部２５には、コンテンツ情報記憶部２５２が設けられている。コンテンツ情報記憶部２５２には、コンテンツを識別するためのコンテンツＩＤに対応付けて、デジタルサイネージ装置１でコンテンツを出力するためのコンテンツ情報（コンテンツデータ）、そのコンテンツで紹介している商品の陳列場所（商品コーナー）の方向、及びコンテンツで商品コーナーの方向の案内を開始する時間（コンテンツ再生開始からどのくらい経過したタイミングで商品コーナーの案内が開始されるかを示す情報）が記憶されている。ここで、コンテンツ情報は、例えば、複数のフレーム画像により構成される動画データ及び各フレーム画像に対応する音声データにより構成されている。また、本実施形態において、コンテンツには、コンテンツで紹介している商品の陳列場所（商品コーナー）の方向を示す案内が含まれる（図５参照）。
【００１６】
また、記憶部２５には、検出結果記憶部２５３が設けられている。図３は、検出結果記憶部２５３のデータ格納例を示す図である。検出結果記憶部２５３は、図３に示すように、例えば、「コンテンツＩＤ」、「測定日時」、「移動方向」（右方向、左方向、移動なし、その他方向）等の項目を有し、コンテンツＩＤに対応付けて、そのコンテンツの視聴後に視聴者が移動した方向の検出結果を記憶する。
【００１７】
また、記憶部２５には、コンテンツの出力スケジュール等が記憶されている。
【００１８】
通信部２６は、モデム、ルータ、ネットワークカード等により構成され、ＬＡＮ（Local Area Network）、ＷＡＮ（Wide Area Network）等の通信ネットワークに接続された外部機器との通信を行う。
【００１９】
計時部３０は、ＲＴＣ（Real Time Clock）等により構成され、現在日時を取得して制御部２３に出力する。
【００２０】
次に、スクリーン部２２について説明する。
図２に示すように、スクリーン部２２には、画像形成部２７と、画像形成部２７を支持する台座２８とが備えられている。
【００２１】
画像形成部２７は、映像光の照射方向に対して略直交するように配置された、例えばアクリル板などの人型に成形された一枚の透光板２９に、フィルム状のフレネルレンズが積層された背面投影用のフィルムスクリーン２９１や予め人物が印刷されたフィルム２９２が貼付されて構成されたスクリーンである。プロジェクタ２４は、画像形成部２７のフィルムスクリーン２９１が貼付された領域に画像を投影する。なお、透光板２９全体にフィルムスクリーン２９１を貼付した構成とし、人物についても投影を行うこととしてもよい。
【００２２】
台座２８には、ボタン式の操作部３２と、音声を出力するスピーカなどの音声出力部３３と、撮像部３４とが設けられている。
【００２３】
操作部３２は、複数の操作ボタンを備え、操作ボタンの押下信号を検出して制御部２３に出力する。
【００２４】
撮像部３４は、画像形成部２７の前方を撮影して撮影画像を取得する撮影手段である。
撮像部３４は、図示は省略するが、光学系及び撮像素子を備えるカメラと、カメラを制御する撮像制御部とを備えている。カメラの光学系は、画像形成部２７の前方にいる人物を撮影可能な方向に向けられている。また、その撮像素子は、例えば、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal-oxide Semiconductor）等のイメージセンサであり、光学系を通過した光学像を２次元の画像信号に変換する。
【００２５】
操作部３２、音声出力部３３、撮像部３４は、図１に示すように制御部２３に接続されている。
【００２６】
［デジタルサイネージ装置１の動作］
次に、デジタルサイネージ装置１の動作について説明する。
図４に、デジタルサイネージ装置１において実行される検出結果取得処理のフローチャートを示す。検出結果取得処理は、コンテンツの出力を開始する際に、制御部２３とプログラム記憶部２５１に記憶されているプログラムとの協働により実行される。
【００２７】
まず、制御部２３は、プロジェクタ２４及び音声出力部３３によりコンテンツを出力する（ステップＳ１）。例えば、制御部２３は、予め定められたスケジュールに従ってコンテンツ情報記憶部２５２に記憶されているコンテンツ情報を読み出し、読み出したコンテンツ情報の動画データに基づいてプロジェクタ２４により画像形成部２７にコンテンツの画像を投影（表示）させる。また、読み出した動画データの音声データに基づいて音声出力部３３によりコンテンツの音声を出力させる。
【００２８】
次いで、制御部２３は、コンテンツの視聴者を検出する（ステップＳ２）。
例えば、制御部２３は、コンテンツで商品コーナーの方向の案内が開始される直前のタイミング（例えば、商品コーナーの方向の案内開始のｎ秒前、ｎは正の整数）に撮像部３４により撮影を行わせ、得られた撮影画像に顔認識処理を行う。そして、認識された各顔画像に視線検出処理を実施して視線方向を検出し、画像形成部２７の方向に視線を向けている人物を視聴者として検出する。顔認識処理及び視線検出処理としては、公知の画像処理技術を用いることができる。
或いは、コンテンツで商品コーナーの場所の案内が開始されるタイミングのｍ秒前（ｍは正の整数）から所定時間間隔で撮像部３４により撮影を行わせ、得られた各撮影画像から認識された各顔画像に基づいて、画像形成部２７の前にｍ秒以上存在している人物を特定し、特定した人物を視聴者として検出することとしてもよい。
【００２９】
商品コーナーの方向の場所の案内を開始する時間帯が到来すると、制御部２３は、プロジェクタ２４及び音声出力部３３によりコンテンツで紹介した商品が陳列されている商品コーナーの案内を出力させる（ステップＳ３）。
【００３０】
図５は、ステップＳ３において出力される商品コーナーの案内及び商品コーナーの配置を示す図である。例えば、コンテンツがデジタルカメラ（デジカメ）及びビデオカメラを紹介するものであり、図５に示すように、視聴者からみて右側にデジカメコーナーがあり、左側にビデオカメラコーナーがある場合、ステップＳ３においては、デジカメが視聴者から見て右側方向にあることを示す矢印と、ビデオカメラが視聴者から見て左側方向にあることを示す矢印が表示され、デジタルカメラのコーナーとビデオカメラのコーナーの方向の案内が行われる。
【００３１】
次いで、制御部２３は、コンテンツの視聴者の移動方向を検出する（ステップＳ４）。例えば、制御部２３は、商品コーナーの案内開始後所定時間間隔で撮像部３４により撮影を行わせ、得られた各撮影画像からステップＳ２で検出された視聴者を認識し、認識された各視聴者の位置の変化に基づいて、視聴者の移動方向を検出する。例えば、制御部２３は、各視聴者の移動方向を「右方向」、「左方向」、「移動なし」、「その他方向」の４つの方向の何れかとして検出する。そして、それぞれの方向に移動した人数をカウントする。図５に示す配置では、「右方向」は、デジカメコーナーの案内と一致する方向に移動したことを示す。「左方向」はビデオカメラコーナーの案内と一致する方向に移動したことを示す。「移動なし」は、デジタルサイネージ装置１の前にとどまっている（コンテンツを引き続き視聴しようとしている）ことを示す。「その他方向」は、コンテンツの案内とは異なる向に移動したことを示す。
【００３２】
そして、制御部２３は、検出結果を検出結果記憶部２５３に記憶させ（ステップＳ５）、検出結果取得処理を終了する。例えば、現在日時を計時部３０から取得して、今回出力したコンテンツのコンテンツＩＤ、現在日時（測定日時）、各移動方向に移動した人数を対応付けて検出結果記憶部２５３に記憶させる。
【００３３】
制御部２３は、プログラム記憶部２５１に記憶されているプログラムとの協働により、デジタルサイネージ装置１の電源ＯＦＦ時（１日の終わり等）、或いは、予め定められたデータ数（例えば、１００件）の検出結果が溜まった時点でコンテンツ評価処理を実行し、検出結果記憶部２５３に記憶されている検出結果に基づいてコンテンツの商品コーナーへの誘導効果の評価を行う。
【００３４】
コンテンツ評価処理において、例えば、制御部２３は、検出結果記憶部２５３に記憶されている情報を参照し、コンテンツ毎に、そのコンテンツ視聴後の視聴者の移動方向を集計する。例えば、「右方向」、「左方向」、「移動なし」、「その他の方向」のそれぞれについて、その方向に移動した人数を合計し、そのコンテンツの視聴者全体の人数に対する商品コーナーと一致する方向に移動した人数の割合をコンテンツの商品コーナーへの誘導効果の評価値として算出する。例えば、図５に示す配置でデジカメとビデオカメラを説明するコンテンツを出力した場合、デジカメコーナーの方向を示す矢印に一致する方向に移動した視聴者の割合が高いほど、即ち、右方向に移動した人数の割合が高いほど、そのコンテンツのデジカメコーナーへの誘導効果が高いことを示す。ビデオカメラコーナーの方向を示す矢印に一致する方向に移動した視聴者の割合が高いほど、即ち、左方向に移動した人数の割合が高いほど、そのコンテンツのビデオカメラコーナーへの誘導効果が高いことを示す。なお、移動しない視聴者の人数は、商品コーナーへの誘導効果を示すものではないが、コンテンツを引き続き見ようとしている視聴者の人数であるため、コンテンツの集客効果を示す評価値としてもよい。
【００３５】
なお、視聴者の移動方向の集計は、測定時間帯別に行うこととしてもよい。これにより、コンテンツの商品コーナーへの誘導効果を時間帯別に評価することができる。
【００３６】
また、ステップＳ２において視聴者を検出する際、顔認識処理で認識された各顔画像に対し、公知の性別・年齢推定処理を行って各視聴者の性別・年齢（年代）を取得し、ステップＳ４で各視聴者の移動方向を検出してそれぞれの方向に移動した人数をカウントする際には、性別・年齢別に、それぞれの方向に移動した視聴者の人数をカウントして検出結果記憶部２５３に記憶させることとしてもよい。そして、コンテンツ評価処理では、コンテンツ毎に、そのコンテンツ視聴後の視聴者の移動方向を性別・年齢別に集計してもよい。例えば、「右方向」、「左方向」、「移動なし」、「その他の方向」のそれぞれについて、性別・年齢別の人数を合計し、性別・年齢別に、その性別・年齢の全視聴者の人数に対するその方向に移動した人数の割合を評価値として算出してもよい。これにより、商品コーナーへの誘導効果を性別・年齢別に評価することができる。また、コンテンツ毎に、そのコンテンツ視聴後の視聴者の移動方向を時間帯別に性別・年齢別に集計してもよい。これにより、コンテンツの商品コーナーへの時間帯別、性別・年齢別の誘導効果を評価することができる。また、どの時間帯にどのような顧客がどの商品コーナーへ移動するのかを把握することが可能となる。
【００３７】
以上説明したように、デジタルサイネージ装置１によれば、制御部２３は、撮像部３４により取得された撮影画像に基づいてコンテンツの視聴者を検出し、コンテンツの視聴後の視聴者の移動方向を検出し、検出された視聴者の移動方向に基づいてコンテンツの評価を行う。例えば、制御部２３は、コンテンツで案内した方向と視聴者の移動方向が一致しているか否かに基づいて、コンテンツの評価を行う。
従って、コンテンツの誘導効果を評価することが可能となる。
【００３８】
例えば、コンテンツは、当該コンテンツで紹介している商品の陳列場所の方向を示す情報を含み、制御部２３は、コンテンツで示した商品の陳列場所の方向と視聴者の移動方向が一致しているか否かに基づいて、コンテンツの評価を行う。従って、コンテンツの商品の陳列場所への誘導効果を評価することが可能となる。
【００３９】
なお、上記実施形態における記述内容は、本発明に係るデジタルサイネージ装置１の好適な一例であり、これに限定されるものではない。
【００４０】
例えば、上記実施形態においては、デジカメとビデオの２つの商品を紹介しているコンテンツを評価する場合を例にとり説明したが、コンテンツで紹介する商品は一つであってもよい。この場合、視聴者のうちコンテンツで紹介した商品の商品コーナーを示す矢印と一致している方向に移動した人数の割合が高いほど、コンテンツの商品コーナーへの誘導効果が高いと評価することができる。
【００４１】
また、複数の商品を紹介するコンテンツを表示し、その後視聴者がコンテンツで紹介したどの商品の商品コーナーを示す矢印と一致している方向に移動したかを判定し、コンテンツがどの商品に対して広告効果が高かったかを評価しても良い。
また、上記実施形態においては、商品を紹介するコンテンツの誘導効果を評価する場合を例にとり説明したが、これに限定されず、例えば、催し物を紹介するコンテンツ（催し物の開催場所の方向の案内を含むコンテンツ）の誘導効果の評価に本発明を適用してもよい。
【００４２】
また、上記実施形態におけるデジタルサイネージ装置１は、プロジェクタからスクリーンに画像を投影することで画像の表示を行うものとして説明したが、例えば、液晶ディスプレイ、プラズマディスプレイ等、他の表示装置を有するものとしてもよい。
【００４３】
その他、デジタルサイネージ装置の細部構成及び細部動作に関しても、発明の趣旨を逸脱することのない範囲で適宜変更可能である。
【００４４】
本発明のいくつかの実施形態を説明したが、本発明の範囲は、上述の実施形態に限定するものではなく、特許請求の範囲に記載された発明の範囲とその均等の範囲を含む。
以下に、この出願の願書に最初に添付した特許請求の範囲に記載した発明を付記する。付記に記載した請求項の項番は、この出願の願書に最初に添付した特許請求の範囲の通りである。
［付記］
＜請求項１＞
コンテンツの視聴者を検出する視聴者検出手段と、
前記コンテンツの視聴後の前記視聴者の移動方向を検出する移動方向検出手段と、
前記移動方向検出手段により検出された前記視聴者の移動方向に基づいて前記コンテンツの評価を行う評価手段と、
を備える情報処理装置。
＜請求項２＞
前記評価手段は、前記コンテンツで案内した方向と前記視聴者の移動方向が一致しているか否かに基づいて、前記コンテンツの評価を行う請求項１に記載の情報処理装置。
＜請求項３＞
前記コンテンツは、当該コンテンツで紹介している商品の陳列場所の方向を示す情報を含み、
前記評価手段は、前記商品の陳列場所の方向と前記視聴者の移動方向が一致しているか否かに基づいて、前記コンテンツの評価を行う請求項２に記載の情報処理装置。
＜請求項４＞
前記コンテンツは、複数の商品を紹介する情報と、それぞれの前記商品の陳列場所の方向を示す情報を含み、
前記評価手段は、前記視聴者の移動方向がどの前記商品の陳列場所の方向と一致しているかに基づいて、前記コンテンツの評価を行う請求項１〜３の何れか一項に記載の情報処理装置。
＜請求項５ ＞
コンテンツの視聴者を検出する工程と、
前記コンテンツの視聴後の前記視聴者の移動方向を検出する工程と、
前記検出された視聴者の移動方向に基づいて前記コンテンツの評価を行う工程と、
を含むコンテンツ評価方法。
＜請求項６＞
コンピュータを、
コンテンツの視聴者を検出する視聴者検出手段、
前記コンテンツの視聴後の前記視聴者の移動方向を検出する移動方向検出手段、
前記移動方向検出手段により検出された前記視聴者の移動方向に基づいて前記コンテンツの評価を行う評価手段、
として機能させるためのプログラム。
【符号の説明】
【００４５】
１  デジタルサイネージ装置
２１  投影部
２２  スクリーン部
２３  制御部
２４  プロジェクタ
２５  記憶部
２５１  プログラム記憶部
２５２  コンテンツ情報記憶部
２５３  検出結果記憶部
２６  通信部
２７  画像形成部
２８  台座
２９  透光板
３０  計時部
３２  操作部
３３  音声出力部
３４  撮像部
【図１】
2017162221.tif 000003
【図２】
2017162221.tif 000004
【図３】
2017162221.tif 000005
【図４】
2017162221.tif 000006
【図５】
2017162221.tif 000007