(57)【要約】【課題】表示された各広告コンテンツに対する広告効果を自動的に算出する。【解決手段】撮影部１１は広告表示装置２を設置したエリアを撮影し、画像認識情報生成部１２は、撮影されたエリアに存在する人物の顔画像を認識し、認識した顔画像から人物の視線方向を抽出し、抽出した人物の視線方向と人物のエリアにおける座標位置情報により顔画像の認識情報を生成する。認識情報処理部１３は、生成された顔画像の認識情報に基づき、表示されている広告コンテンツを視聴している人数を計測することにより、広告コンテンツの広告効果を測定する。【選択図】図１
2008112401.tif 000002
【特許請求の範囲】
【請求項１】
広告表示装置を設置したエリアを撮影する撮像部と、
該撮像部により撮影されたエリアに存在する人物の顔画像を認識し、認識した顔画像から人物の視線方向を抽出し、抽出した人物の視線方向と人物のエリアにおける座標位置情報により顔画像の認識情報を生成する画像認識情報生成部と、
該画像認識情報生成部により生成された顔画像の認識情報に基づき、上記広告表示装置に表示されている広告コンテンツを視聴している人数を計測することにより、表示されている広告コンテンツの広告効果を測定する認識情報処理部とを備えた広告効果測定装置。
【請求項２】
上記認識情報処理部により測定された広告コンテンツの広告効果に基づき上記広告表示装置に表示されている広告コンテンツの表示方法を変更する表示制御部を備え、
上記認識情報処理部は、変更されて表示される広告コンテンツに追随する人物の視線の動きを追跡することにより、表示されている広告コンテンツの広告効果を測定することを特徴とする請求項１記載の広告効果測定装置。
【請求項３】
上記表示制御部は上記広告表示装置に表示されている広告コンテンツを移動させることを特徴とする請求項２記載の広告効果測定装置。
【請求項４】
上記表示制御部は上記広告表示装置に表示されている広告コンテンツの大きさを変更することを特徴とする請求項２記載の広告効果測定装置。
【請求項５】
上記画像認識情報生成部は抽出した人物の属性情報を認識し、上記認識情報処理部は、上記画像認識情報生成部により抽出された人物の属性情報別に、表示されている広告コンテンツの広告効果を測定することを特徴とする請求項１記載の広告効果測定装置。
【請求項６】
広告表示装置を設置したエリアを分割した各セルを撮影する複数の撮像部を備えたことを特徴とする請求項１記載の広告効果測定装置。
【請求項７】
上記複数の撮像部を、上記広告表示装置を設置した部屋の天井に設置することを特徴とする請求項６記載の広告効果測定装置。
【請求項８】
上記複数の撮像部を、上記広告表示装置の上部に各セルを撮影できるように設置することを特徴とする請求項６記載の広告効果測定装置。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は広告表示装置に表示される広告コンテンツの広告効果を測定する広告効果測定装置に関するものである。
【背景技術】
【０００２】
従来の広告効果測定方法として、例えば特許文献１に記載された広告配信システムがある。この広告配信システムは、広告コンテンツを配信する広告コンテンツ配信局と、この広告コンテンツ配信局からの広告コンテンツを受信し表示する少なくとも１つの広告表示装置とを有し、広告表示装置は、受信した広告コンテンツの表示制御を行う広告表示制御装置と、コンテンツを表示するディスプレイと、ディスプレイを見ている人を撮像して撮像画像情報を生成するカメラと、このカメラで観測した撮像画像情報を送信する撮像画像送信装置とを備え、広告コンテンツ配信局は、広告コンテンツを広告表示装置に配信する広告配信管理装置、広告コンテンツを格納し保存する記憶装置及びカメラからの撮像画像情報を解析し撮像された人に関する情報を所定時間毎に生成する広告効果測定装置とを備え、広告効果測定装置が、カメラから受信した撮像画像情報を処理しカメラ画面に表示された人の顔を分離し抽出する顔抽出部、顔抽出部で抽出された顔の目の視線方向を決定する視線方向決定部、視線方向決定部で決定された視線の方向からカメラを見ている人の注目度を演算する広告効果演算部を備えている。
【０００３】
また、ある商品販売フロアを対象とした顧客移動経路を把握する方法として、例えば特許文献２に記載された顧客移動経路システムがある。この顧客移動経路システムは、販売フロアを複数の区画に分割したときの各区画をそれぞれ撮影する複数の撮影手段と、撮影手段により得た画像を解析して特定の客を識別すると共に該客がいる区画の変化に基づいて販売フロアを該客が移動した経路を記録する客移動経路記録手段とを具備し、客がどのような商品の売り場に立ち寄ったか、すなわち、客がどのような経緯で商品を選択し購入に至ったかの情報を収集している。
【０００４】
【特許文献１】特開２００２−２６９２９０号公報（段落０００５，０００６）
【特許文献２】特開２００４−７８７２４号公報（段落０００５）
【発明の開示】
【発明が解決しようとする課題】
【０００５】
従来の広告配信システムは広告表示装置の装置単位の測定であり、１つの画面に複数の広告コンテンツが表示されている場合には、広告コンテンツ毎の広告効果を測定できないという課題があった。
【０００６】
また、従来の顧客移動経路記録システムは、売り場に並んだ商品のように、時間と共に変化しないものを対象とした顧客の移動経路記録であり、広告表示装置に表示される広告コンテンツのように、時間と共に刻々と変化する対象について、移動経路だけでは広告効果を測定しにくいという課題があった。
【０００７】
この発明は上記のよう課題を解決するためになされたもので、表示される広告コンテンツの内容が時間と共に変化するような広告表示装置や、１つの画面を分割して複数のコンテンツを表示させるような広告表示装置であっても、表示された各広告コンテンツに対する広告効果を自動的に算出することができる広告効果測定装置を得ることを目的とする。
【課題を解決するための手段】
【０００８】
この発明に係る広告効果測定装置は、広告表示装置を設置したエリアを撮影する撮像部と、該撮像部により撮影されたエリアに存在する人物の顔画像を認識し、認識した顔画像から人物の視線方向を抽出し、抽出した人物の視線方向と人物のエリアにおける座標位置情報により顔画像の認識情報を生成する画像認識情報生成部と、該画像認識情報生成部により生成された顔画像の認識情報に基づき、上記広告表示装置に表示されている広告コンテンツを視聴している人数を計測することにより、表示されている広告コンテンツの広告効果を測定する認識情報処理部とを備えたものである。
【発明の効果】
【０００９】
この発明により、表示されるコンテンツ内容が時間と共に変化するような広告表示装置や、１つの画面を分割して複数のコンテンツを表示させるような広告表示装置であっても、表示された各広告コンテンツに対する効果を自動的に算出することができるという効果が得られる。
【発明を実施するための最良の形態】
【００１０】
実施の形態１．
図１はこの発明の実施の形態１による広告効果測定装置の構成を示すブロック図である。この広告効果測定装置１は、撮影部１１、画像認識情報生成部１２、認識情報処理部１３、認識結果出力部１４及び表示制御部１５を備え、広告表示装置２の表示部２１に表示される広告コンテンツの広告効果を測定したり、広告コンテンツの広告効果を測定するために広告表示装置２の表示部２１に表示される広告コンテンツの表示方法を変更する。
【００１１】
広告効果測定装置１において、撮影部１１は、カメラにより構成され、広告表示装置２を設置したエリア、すなわち広告表示装置２の表示部２１の前面のエリアを撮影する。画像認識情報生成部１２は、撮影部１１により撮影されたエリアに存在する人物の顔画像を認識して、顔画像の認識情報を生成する。認識情報処理部１３は、画像認識情報生成部１２により生成された顔画像の認識情報に基づき、広告表示装置２の表示部２１に表示される広告コンテンツの広告効果を測定する。認識結果出力部１４は認識情報処理部１３により測定された広告コンテンツの広告効果を出力する。表示制御部１５は、認識結果出力部１４により出力された広告コンテンツの広告効果に基づき、広告表示装置２の表示部２１に表示される広告コンテンツの表示方法を変更する。
【００１２】
次に動作について説明する。
図２は広告効果測定装置１の撮影部１１の設置位置の一例を示す図である。図２に示すように、撮影部１１は、エリアに存在する人物の顔画像を撮影するために、例えば広告表示装置２の表示部２１の上方に配置される。撮影部１１は広告コンテンツを視聴可能な広告表示装置２の表示部２１の前面のエリアを常に撮影して動画像データを出力する。
【００１３】
画像認識情報生成部１２は、撮影部１１からの動画像データを入力し、撮影されたエリアに存在する人物の顔画像を認識して各人物を特定し、認識した顔画像から人物の視線方向を抽出し、抽出した人物の視線方向と人物のエリアにおける座標位置情報により顔画像の認識情報を生成する。
図３は画像認識情報生成部１２により生成される顔画像の認識情報を説明する図であり、図３に示すようにエリアに存在する人物の視線方向と、人物のエリアにおける座標位置情報が生成される。
【００１４】
認識情報処理部１３は、画像認識情報生成部１２により生成された顔画像の認識情報である人物の視線方向と人物のエリアにおける座標位置情報に基づき、広告表示装置２の表示部２１に表示されている広告コンテンツを視聴している人数を計測することで、表示部２１に複数表示されている広告コンテンツの中のある広告コンテンツの広告効果を測定する。
【００１５】
この段階では、認識情報処理部１３は、図３に示すように、単純に広告表示装置２の表示部２１の方面を見ていると識別された人数をカウントすることにより、その時点における広告コンテンツの一応の広告効果を測定する。また、認識情報処理部１３は、エリアに人物が存在してもその人物の顔画像や人物の視線方向が認識されていない場合には、その広告コンテンツを視聴していない人物と判断する。認識結果出力部１４は認識情報処理部１３により測定された広告コンテンツの広告効果を出力する。
【００１６】
表示制御部１５は、認識結果出力部１４により出力された広告コンテンツの広告効果に基づき、広告表示装置２の表示部２１に表示されている広告コンテンツの表示方法を変更する。
図４は表示制御部１５により変更される広告コンテンツの表示方法の例を説明する図である。表示制御部１５は、認識結果出力部１４からの出力により、広告表示装置２の表示部２１の比較的近い位置で、ある広告コンテンツを見ている人物の数が多いと判断された場合には、例えば図４に示すように、その広告コンテンツをゆっくり移動させることを試みる。
【００１７】
撮影部１１はエリアを同様にして撮影して動画像データを出力し、画像認識情報生成部１２は、同様にして、撮影されたエリアに存在する人物の顔画像を認識し、認識した顔画像から人物の視線方向を抽出し、抽出した人物の視線方向と人物のエリアにおける座標位置情報により顔画像の認識情報を生成する。
【００１８】
認識情報処理部１３は、画像認識情報生成部１２により生成された顔画像の認識情報である人物の視線方向と人物のエリアにおける座標位置情報に基づき、広告表示装置２の表示部２１に表示されている広告コンテンツを視聴している人数を計測することにより、広告コンテンツ移動前に広告コンテンツを視聴していると判断された人物が、広告コンテンツの移動に合わせて位置を移動し、その人物の視線方向が移動している広告コンテンツの方向である場合、明らかにその人物は広告コンテンツを積極的に視聴しているものと判断して広告コンテンツの広告効果を測定する。一方、広告コンテンツ移動前に広告コンテンツを視聴していると判断された人物が、広告表示装置２の表示部２１から離れるような行動をとった場合は、認識情報処理部１３は、積極的ではなく、たまたま見ていた視聴者と判断する。
【００１９】
以上のように、この実施の形態１によれば、画像認識情報生成部１２が撮影されたエリアに存在する人物の顔画像を認識して人物の視線方向を抽出し、抽出した人物の視線方向と人物のエリアにおける座標位置情報により顔画像の認識情報を生成し、認識情報処理部１３が生成された顔画像の認識情報に基づき表示される広告コンテンツの広告効果を測定することにより、表示されるコンテンツ内容が時間と共に変化するような広告表示装置２や、１つの画面を分割して複数のコンテンツを表示させるような広告表示装置２であっても、表示された各広告コンテンツの広告効果を自動的に算出することができるという効果が得られる。
【００２０】
また、この実施の形態１によれば、表示制御部１５が測定された広告コンテンツの広告効果に基づき広告表示装置２の表示部２１に表示される広告コンテンツの表示方法を変更し、認識情報処理部１３が変更されて表示される広告コンテンツに追随する人物の視線の動きを追跡することにより、一層精度の高い広告コンテンツの広告効果を測定できるという効果が得られる。この場合、例えば、雑踏等の人物の往来の激しい場所でも、瞬間的に偶然視聴した人物と、興味を持ち積極的に視聴している人物とを区別することができ、精度の高い広告効果を測定することができる。
【００２１】
実施の形態２．
この発明の実施の形態２による広告効果測定装置１の構成を示すブロック図は上記実施の形態１の図１に示す構成と同じである。上記実施の形態１では、表示制御部１５が広告コンテンツをゆっくり移動させることにより、変更されて表示される広告コンテンツに追随する人物を追跡して広告効果を把握しようとするものであるが、この実施の形態２は、表示制御部１５が広告コンテンツの大きさを変更することにより、変更されて表示される広告コンテンツに追随する人物を追跡して広告効果を把握しようとするものである。
【００２２】
図５は表示制御部１５により変更される広告コンテンツの表示方法の例を説明する図である。表示制御部１５は、認識結果出力部１４からの出力により、広告表示装置２の表示部２１の比較的遠い位置で、ある広告コンテンツを見ている人物の数が多いと判断された場合には、例えば図５に示すように、視聴者に見やすくするため、その広告コンテンツをそれまでの大きさより拡大させて表示する。
【００２３】
認識情報処理部１３は、画像認識情報生成部１２により生成された顔画像の認識情報である人物の視線方向と人物のエリアにおける座標位置情報に基づき、広告表示装置２の表示部２１に表示されている広告コンテンツを視聴している人数を計測することにより、広告コンテンツ移動前に広告コンテンツを視聴していると判断された人物が、その後も拡大させた広告コンテンツの方向を見ている場合、明らかにその人物は広告コンテンツを積極的に視聴しているものと判断して広告コンテンツの広告効果を測定する。その他の処理は上記実施の形態１と同じである。
【００２４】
また、表示制御部１５が広告コンテンツを拡大させることで、それまで同時に表示されていた広告コンテンツよりも目立つことになるので、その周囲にいて広告表示装置２以外の方向を見ていた人物が広告表示装置２の拡大された広告コンテンツを視聴するきっかけになる。この場合も、認識情報処理部１３はコンテンツ拡大を機会に積極的に転じた視聴者を判断できる。
【００２５】
以上のように、この実施の形態２によれば、上記実施の形態１同様の効果が得られると共に、表示制御部１５がある時点の広告コンテンツの視聴状態に応じて動的に広告コンテンツの表示方法を変更することにより、広告効果の測定だけでなく、さらに追加の視聴者を獲得することができ、広告表示装置２における広告コンテンツの価値を向上させることができるという効果が得られる。
【００２６】
実施の形態３．
この発明の実施の形態３による広告効果測定装置１の構成を示すブロック図は上記実施の形態１の図１に示す構成と同じである。上記実施の形態１及び上記実施の形態２では、広告コンテンツを見ている人物の人数に基づき広告効果を測定するものであるが、この実施の形態３は、画像認識情報生成部１２が人物の性別や年齢層等の属性情報を認識できる場合に、認識情報処理部１３は性別や年齢層別に広告効果を測定するものである。その他の処理は上記実施の形態１と同じである。
【００２７】
以上のように、この実施の形態３によれば、上記実施の形態１同様の効果が得られると共に、画像認識情報生成部１２が人物の性別や年齢層等の属性情報を認識することにより、性別や年齢層等の属性情報別に広告コンテンツの広告効果を測定することができるという効果が得られる。
【００２８】
実施の形態４．
図６はこの発明の実施の形態４による広告効果測定装置１の構成を示すブロック図である。この広告効果測定装置１は、撮影部１１−１，１１−２，１１−３，１１−４，・・・１１−ｎ、画像認識情報生成部１２−１，１２−２，１２−３，１２−４，・・・１２−ｎ、認識情報処理部１３、認識結果出力部１４及び表示制御部１５を備え、広告表示装置２の表示部２１に表示される広告コンテンツの広告効果を測定したり、広告コンテンツの広告効果を測定するために広告表示装置２の表示部２１に表示される広告コンテンツの表示方法を変更する。
【００２９】
次に動作について説明する。
図７は広告効果測定装置１の撮影部１１の設置位置の一例を示す図である。図７に示すように、撮影部１１−１〜１１−ｎは、表示部２１の前面のエリアに存在する人物の顔画像を撮影するために、例えば広告表示装置２を設置している部屋の天井部分に配置される。図７に示す例では、広告表示装置２の表示部２１の前面のエリアを３段６列の格子状のセルに区切り、その各セルに対応して、そのセルに人物が入った場合に顔面等が撮影できるように、部屋の天井部分に撮影部１１−１〜１１−ｎが配置され、撮影部１１−１〜１１−ｎはエリアの各セルを常に撮影して動画像データを出力する。
【００３０】
画像認識情報生成部１２−１〜１２−ｎは、撮影部１１−１〜１１−ｎに対応して備えられ、撮影部１１−１〜１１−ｎからの動画像データを入力し、撮影されたエリアのセルに存在する人物の顔画像をそれぞれ認識し、認識した顔画像から人物の視線方向を抽出し、抽出した人物の視線方向と人物の各セルにおける座標位置情報により顔画像の認識情報を生成する。
【００３１】
認識情報処理部１３は、画像認識情報生成部１２−１〜１２−ｎにより生成された顔画像の認識情報である人物の視線方向と人物の各セルにおける座標位置情報に基づき、広告表示装置２の表示部２１に表示されている広告コンテンツを視聴している人数を計測することにより、表示されている広告コンテンツの広告効果を測定する。このとき、認識情報処理部１３は、各撮影部１１−１〜１１−ｎが撮影するエリアの区切りの位置関係を把握し、各撮影部１１−１〜１１−ｎがカバーする各セルが一部重なっている箇所も把握しており、そのセルに人物が居ることが検知された場合は、同一の人物を二重にカウントしないようにする。
【００３２】
この段階では、認識情報処理部１３は、図３に示すように単純に広告表示装置２の表示部２１の方面を見ていると識別された人数をカウントすることにより、その時点における広告コンテンツの一応の広告効果を測定する。また、認識情報処理部１３は、エリアに人物が存在してもその人物の顔画像や人物の視線方向が認識されていない場合には、その広告コンテンツを視聴していない人物と判断する。認識結果出力部１４は認識情報処理部１３により測定された広告コンテンツの広告効果を出力する。
【００３３】
この処理を比較的短い時間間隔、例えば１／１０秒程度の時間間隔で繰り返し実行すると、セル単位での人物の移動履歴が得られる。認識情報処理部１３は各撮影部１１−１〜１１−ｎが撮影するセルの位置関係を把握しているので、図７において、例えばセル２Ｂとセル２Ａは近接しており、セル２Ｂから１名の人物がセル２Ａ方向に向かって移動しセル２Ｂの画像から消え、セル２Ａの画像にセル２Ｂの方向から１名の人物が現れた場合には、認識情報処理部１３はその人物がセル２Ｂからセル２Ａに移動したと判断する。また、認識情報処理部１３は、セルを跨いだ時刻を記録すれば、各セルにおける滞在時間を把握することができる。
【００３４】
その他の認識結果出力部１４及び表示制御部１５の処理は、上記実施の形態１と同様である。
【００３５】
以上のように、この実施の形態４によれば、上記実施の形態１と同様の効果が得られると共に、複数の撮影部１１と複数の画像認識情報生成部１２を備えることにより、広告表示装置２の表示部２１がいかに大きくなっても、広告表示装置２を視聴可能な全てのエリアをカバーすることにより、一層精度の高い広告コンテンツの広告効果を測定できるという効果が得られる。
【００３６】
実施の形態５．
この発明の実施の形態５による広告効果測定装置１の構成を示すブロック図は上記実施の形態４の図６に示す構成と同じである。上記実施の形態４では、複数の撮影部１１を、広告表示装置２を設置している部屋の天井部分に設置しているが、撮影するエリアをカバーできれば必ずしも天井に設置する必要はない。この実施の形態５は、広告表示装置２の表示部２１の上部に、各セルを撮影できるように複数の撮影部１１を向きを変えて設置するものである。
【００３７】
以上のように、この実施の形態５によれば、上記実施の形態４と同様の効果が得られると共に、広告表示装置２の表示部２１の上部に、各セルを撮影できるように複数の撮影部１１を向きを変えて設置することにより、屋外等に設置された広告表示装置２にも適用できるという効果が得られる。
【図面の簡単な説明】
【００３８】
【図１】この発明の実施の形態１による広告効果測定装置の構成を示すブロック図である。
【図２】この発明の実施の形態１による広告効果測定装置の撮影部の設置位置の一例を示す図である。
【図３】この発明の実施の形態１による広告効果測定装置の画像認識情報生成部により生成される顔画像の認識情報を説明する図である。
【図４】この発明の実施の形態１による広告効果測定装置の表示制御部により変更される広告コンテンツの表示方法の例を説明する図である。
【図５】この発明の実施の形態２による広告効果測定装置の表示制御部により変更される広告コンテンツの表示方法の例を説明する図である。
【図６】この発明の実施の形態４による広告効果測定装置の構成を示すブロック図である。
【図７】この発明の実施の形態４による広告効果測定装置の撮影部の設置位置の一例を示す図である。
【符号の説明】
【００３９】
１  広告効果測定装置、２  広告表示装置、１１  撮影部、１２  画像認識情報生成部、１３  認識情報処理部、１４  認識結果出力部、１５  表示制御部、２１  表示部。
【図１】
2008112401.tif 000003
【図２】
2008112401.tif 000004
【図３】
2008112401.tif 000005
【図４】
2008112401.tif 000006
【図５】
2008112401.tif 000007
【図６】
2008112401.tif 000008
【図７】
2008112401.tif 000009