(57)【特許請求の範囲】
【請求項１】
広告メディア側に取り付けられてその広告メディアの前方を撮影可能なカメラと、
前記カメラに前記広告メディアの前方を撮影させて撮影画像を得る撮影制御装置と、
前記撮影画像をデジタル画像として記憶する画像記憶メモリと、
前記広告メディアが見られた度合いを示す評価値を算出する演算装置と、を備える広告メディア評価装置であって、
前記演算装置は、前記デジタル画像の中から両眼を抽出可能な人間の顔を評価対象として抽出しその人間が撮影された位置における両眼の中央と前記広告メディアの横方向両端部とを結ぶ二直線がなす角度であるメディア角度を算出するとともに、
複数の評価対象の顔についてそれぞれ算出された前記メディア角度を集計した集計値を前記評価値として算出することとした広告メディア評価装置。
【請求項２】
前記演算装置は、前記デジタル画像の中から評価対象として抽出された人間が撮影された位置から前記広告メディアまでの距離を算出する距離算出手段を含み、
前記距離算出手段によって求められた距離に基づいて前記人間が撮影された位置を特定して前記メディア角度を算出することとした請求項１に記載の広告メディア評価装置。
【請求項３】
前記演算装置は、前記デジタル画像の中から人間の顔を抽出する顔抽出手段と、
前記顔抽出手段で抽出された人間の顔の中から眼を抽出する眼抽出手段と、
前記眼抽出手段にて抽出された両眼の距離および各眼と前記顔抽出手段にて抽出された顔の輪郭線とがなす距離をそれぞれ求めることにより前記広告メディアに対する抽出された前記顔の向きを示す数値を算出する顔方向判断手段と、をさらに含み、
前記顔方向判断手段によって算出した前記顔の向きを示す数値にて前記演算装置が前記集計値を補正した評価値を算出することとした請求項２に記載の広告メディア評価装置。
【発明の詳細な説明】
【０００１】
【発明が属する技術分野】
この発明は、視覚刺激を中心とした広告媒体の広告効果を客観化するための技術に関するものである。
【０００２】
【先行技術】
視覚刺激を中心とした広告媒体の価値は、より多くの人が、より多くの時間、より注視して見たか、ということによって決定される。上記の前提を踏まえ、本発明の説明に当たり、本出願人は、予め日本特許情報機構（ＪＡＰＩＯ）の先行技術調査（パトリス）の利用により、特許出願、実用新案登録出願を調査し、広告の価値を知る技術、および画像から人間の顔を抽出する技術として次の技術を抽出した。
【０００３】
（広告価値を知る技術）
広告の価値を知る技術として抽出した特開平７−９５６２５号は、「視聴測定システムおよび方法」に関するものである。そしてその技術は、視聴者が能動的に識別プロセスに関与する必要なく、視聴者を正確に識別する装置および方法を提供している。
【０００４】
また、特開平２−１２０９８７号に示された技術は、「監視領域内の視聴者の中から複数の所定の個人を識別する画像認識システムであって、それぞれが複数の所定の個人１人に対応する複数のパターン像特徴を記憶する手段、監視領域内の複数の個人を探知する手段、監視領域内の前記探知された各個人の像を捕捉する手段、前記捕捉された像と前記記憶されているパターン像特徴とを比較して所定の各個人を識別する手段を具備する画像認識システム」に係る。
【０００５】
（画像処理技術）
一方、画像の中から人間の顔を抽出する技術については、特開平５−２２５３４４号、特開平７−１２８０３１号などに開示されている。特開平５−２２５３４４号に示される技術は、「入力パターンに対する特徴点抽出によって位置決めの基準点の候補となる特徴点を抽出し、当該基準点候補の組み合わせに応じてそれぞれのパターンの位置合わせを行って、逐次、画像を切り出して、複数の照合パターン候補を求め、複数の位置決めの条件に対するテンプレートを格納しているテンプレート辞書の内容と照合し、これによって位置や大きさの正規化が行われた結果の照合パターンの一つを出力する。」という技術である。
【０００６】
また、特開平７−１２８０３１号に示される技術は、「二次元の画像データは、顔の位置検出部の結果に応じて位置合わせ部で位置合わせされた後、輪郭部抽出部で輪郭部分が抽出される。画像データは、エッジ検出部でエッジ検出され線画領域に変換され、属性への変換部で属性が求められた点の領域に変換され、極大値検出部で属性の極大値の座標が求められる。属性からのエッジ領域への変換部で極大値の座標から或半径の内側に属する属性のみについて平均値が求められ、点領域の標準顔が得られ、先の領域に戻すことで線の領域における標準顔の内側の特徴量を得る。」という技術である。背景の影響を受けること無く、計算量を減少させ、装置を小型に構成するとともに、認識率を向上させる。
【０００７】
【発明が解決しようとする課題】
（メディア価値の判断手法）
前述のように、従来、広告メディアがどれだけの人に、どれだけの時間見られているか、ということを客観的に数字で表わす手法は、テレビにおける視聴率調査、という手法のほかには、ほとんど存在しなかった。例えば、駅や地下鉄の構内に貼ったポスターといった広告メディアでは、どれだけの数がどれだけの期間に剥がされた（盗まれた）か、といったことで注目度を図ることもあったが、これはきわめて異例な計測方法である。
【０００８】
（同種類のメディアの客観化）
同じメディア、例えばポスターについては、人通りが多い場所に張られているポスターの方が人通りの少ない場所に張られているポスターよりも価値がある、と推定できる。しかし、相対的な評価はできても本当に客観的な価値判断であるとは言いがたい。
【０００９】
（異なるメディアの客観化）
広告メディアは、技術の進歩とともに新たなメディアが開発される。そのような新しいメディアがどれだけの価値を持っているかは、既存のメディアとの比較をする必要がある。しかし、メディアの種類に関係なく共通の広告メディア評価を行える基準が存在しないので、新しいメディアの価値判断は主観的にならざるを得ない、というのが現状である。
（課題および目的）
本発明が解決すべき課題は、広告メディアの価値につき、種類に関係なく客観的に評価するための技術を提供することにある。すなわち、視覚刺激を中心とした広告媒体を、より多くの人が、より多くの時間、より注視して見たか、という見地から客観的に評価できる技術を提供することにある。
【００１０】
ここで、請求項１から請求項３に記載の発明の目的は、広告媒体がどれだけの人に見られているかを客観的に評価するための広告メディア評価装置を提供することである。
【００１１】
なお、上記の課題を解決する技術は、前記した先行技術調査によっては発見できなかった。
【００１２】
【課題を解決するための手段】
本発明は、上記した目的を達成するためのものであり、広告媒体をどれだけの人が見ていたか、どれだけ注視していたか、どれだけの時間見ていたか、などを客観的に評価することができるものである。
（請求項１）
請求項１に記載の発明は、広告メディア側に取り付けられてその広告メディアの前方を撮影可能なカメラと、  前記カメラに前記広告メディアの前方を撮影させて撮影画像を得る撮影制御装置と、  前記撮影画像をデジタル画像として記憶する画像記憶メモリと、  前記広告メディアが見られた度合いを示す評価値を算出する演算装置と、を備える広告メディア評価装置に係る。
前記演算装置は、前記デジタル画像の中から両眼を抽出可能な人間の顔を評価対象として抽出しその人間が撮影された位置における両眼の中央と前記広告メディアの横方向両端部とを結ぶ二直線がなす角度であるメディア角度を算出するとともに、  複数の評価対象の顔についてそれぞれ算出された前記メディア角度を集計した集計値を前記評価値として算出する。
【００１３】
（用語説明）
「カメラ」とは、通常はデジタルカメラであるが、後にデジタル画像へ変更する画像処理が行えるのであれば、通常のフィルム式のカメラでもよい。動画を取り入れる場合には、ビデオカメラ、デジタルビデオカメラでもよい。カメラと他の装置とが、物理的に異なる場所、例えば、別に設けられた集計センターに設置されていてもよい。その場合、デジタル画像を撮影したら、通信手段を用いて集計センターなどへ送信し、集計してもよい。
【００１４】
「演算装置」につき、「デジタル画像の中から両眼が抽出される人間の顔を評価対象として抽出する」手法としては、例えば、顔の色と背景の色とを区別して顔の輪郭を抽出する画像処理技術、顔の中から眼を抽出する技術などが代表的である。
（作用）
カメラを広告メディア側に取り付け、その広告メディアの前方を撮影する。その撮影は、撮影制御装置によって制御される。撮影された画像は、画像記憶メモリにデジタル画像として記憶される。そして、演算装置が、前記デジタル画像の中から両眼が抽出される人間の顔を評価対象として抽出し評価対象として抽出されたその人間が撮影された位置における両眼の中央と前記広告メディアの横方向両端部とを結ぶ二直線がなす角度であるメディア角度を算出するとともに、  複数の評価対象の顔についてそれぞれ算出された前記メディア角度を集計してその集計値を前記評価値として算出する。
【００１５】
この集計結果は、当該広告メディアに関心があると推定できる人間の顔を抽出したこととなるので、メディア価値についての客観的な基準としてよい。また、メディア価値の集計についてメディアの種類を問わないので、異なるメディア間でもメディア価値についての客観的な比較が可能となる。
（請求項２）
請求項２記載の発明は、請求項１記載の広告メディア評価装置を限定したものであり、
前記演算装置は、前記デジタル画像の中から評価対象として抽出された人間が撮影された位置から前記広告メディアまでの距離を算出する距離算出手段をさらに含み、  その距離算出手段によって求められた距離に基づいて前記人間が撮影された位置を特定して前記メディア角度を算出することとした広告メディア評価装置に係る。
【００１６】
（用語説明）
「距離算出手段」とは、デジタル画像中に距離算出用の基準点が撮影されるようにしておく、といった方法や、デジタル画像において抽出された顔の輪郭から当該輪郭の横幅寸法を測定し、顔の輪郭の横幅平均値とデジタル画像の大きさとを用いて算定する方法などによりデジタル画像中の人間が撮影された位置からカメラまでの距離を算出する手段である。
【００１７】
「評価値」とは、前記広告メディアがどれだけの人に見られているかを客観的に評価するための値であり、メディア角度の総計と正の相関をなす。「評価値がメディア角度の総計と正の関係をなす」ことについての合理性について説明する。すなわち、デジタル画像に写っているある人物について測定されたメディア角度が大きいということは、当該人物の視界に占める広告メディアの面積が大きいということになり、視界に占める広告メディアの面積が大きいということは小さい場合よりも注視していると想定してよいからである。
【００１８】
ここで、「正の関係」とは、例えば、評価値はメディア角度の二乗に比例する、単調増加する、といった関係である。また、デジタルビデオ画像を使用したり、連続写真を撮影して平均値をとるなどして時間のファクターを勘案することができる場合には、評価値は、時間とも正の関係をなす。
（作用）
演算装置は、デジタル画像の中から人間の顔を抽出する。そして、抽出された顔の大きさから距離算出手段が当該顔とカメラとの距離を算出する。更に、演算装置は、広告メディアの横方向両端部と前記抽出された顔とがなすメディア角度を算出し、メディア角度の総計を演算する。
【００１９】
（請求項３）
請求項３記載の発明は、請求項２記載の広告メディア評価装置を限定したものである。
すなわち、前記演算装置は、前記デジタル画像の中から人間の顔を抽出する顔抽出手段と、  前記顔抽出手段で抽出された人間の顔の中から眼を抽出する眼抽出手段と、  前記眼抽出手段にて抽出された両眼の距離および各眼と前記顔抽出手段にて抽出された顔の輪郭線とがなす距離をそれぞれ求めることにより前記広告メディアに対する前記抽出された顔の向きを示す数値を算出する顔方向判断手段と、をさらに含み、  前記顔方向手段によって算出した前記顔の向きを示す数値にて前記演算装置が前記集計値を補正した評価値を算出することとした広告メディア評価装置に係る。
【００２０】
「顔抽出手段」とは、従来から様々な技術があるが、例えば、周りの色と人間の肌の色とを認識してその境界線を顔の輪郭として抽出する技術などが代表的である。
（作用）
デジタル画像の中から人間の顔を抽出したら、眼抽出手段がデジタル画像に両眼が写っている人間の顔の中から眼を抽出し、その抽出された眼と眼の距離たる眼間隔を求める。また、眼抽出手段にて抽出された両眼の距離および当該各眼と前記顔抽出手段にて抽出された顔の輪郭線とがなす距離をそれぞれ求めることにより、顔方向判断手段が前記広告メディアに対する前記抽出された顔の向きを示す数値を算出する。
【００２１】
顔方向判断手段によって広告メディアを向いていると判断した顔についてのみ、メディア角度を測定し、広告メディアを向いていないと判断した顔については、メディア角度は測定しない。あるいは、広告メディアを向いていないと判断した顔については、メディア角度を測定していても、評価値の演算装置において総計の対象としない。
【００２２】
演算装置には、顔抽出手段、眼抽出手段、および顔方向判断手段を備えたので、評価値の客観性を高めることができる。
【００２３】
【発明の実施の形態】
以下、本発明を実施の形態及び図面に基づいて、更に詳しく説明する。ここで使用する図面は、図１ないし図５である。図１は、本発明の実施形態におけるハードウエア構成とデータとの関係を示す概念図である。図２ないし図５は、本発明の実施形態を説明するためのモデル図である。
【００２４】
（ハードウエア構成）
図１および図２を参照させながらハードウエア構成を説明する。本実施形態の広告メディア評価装置は、地下通路の壁に貼られたポスターの広告効果を評価する装置であって、ポスター側に取り付け、そのポスターの前方を撮影可能なデジタルカメラと、デジタルカメラの撮影を制御する撮影制御装置と、撮影された画像をデジタル画像として一旦記憶する画像記憶メモリと、デジタル画像から人間の顔を抽出しその抽出された顔から、ポスターを向いている評価できる顔の評価値を抽出し、評価値を集計する演算装置と、集計結果を出力する出力装置とを備えて構成されている。
【００２５】
また、演算装置は、デジタル画像の中から人間の顔を抽出する顔抽出手段と、抽出された顔の大きさから当該顔が撮影された位置からカメラまでの距離を算出する距離算出手段を備え、広告メディアの横方向両端部と前記抽出された顔とがなすメディア角度たる「ポスター角度」を算出する。ここで、「顔抽出手段」とは、デジタル画像において顔の色と背景の色とを区別して顔の輪郭を抽出する画像処理技術を用いる。
【００２６】
前記した顔抽出手段には、デジタル画像に両眼が写っている人間の顔の中から眼を抽出する眼抽出手段と、抽出された眼と眼の距離たる眼間隔を測定する眼間隔測定手段と、顔抽出手段によって抽出された人間の顔と眼間隔測定手段によって測定された眼間隔とを用いて、当該顔が広告メディアを向いているか否かを判断する顔方向判断手段とを備えている。「眼抽出手段」もまた、眼の色とその周りの色とを区別して眼を抽出する画像処理技術を用いる。抽出された眼の大きさが一定以上の場合には、その中心部分も求める。
評価値の演算装置は、メディア角度すなわちポスター角度の総計を演算し、その総計を用いて出力装置に出力させるのであるが、顔方向判断手段によって広告メディアを向いていると判断した顔について、評価値の演算装置にて演算する対象とする。図２ないし図５を用いて更に詳しく説明する。
【００２７】
（顔の抽出からメディア角度算定まで）
図２は、ある撮影の瞬間、二人の人間がカメラの前にいた場合の平面概念図である。また、図３は、図２の瞬間に撮影されたデジタル画像である。
【００２８】
図３の画像を用いて、顔抽出手段がデジタル画像の中から人間の顔を抽出する。また、両眼が抽出できる場合には、その両眼を抽出する。両眼を抽出できない顔、具体的には図３の左側の人物については、ポスターを向いていないと判断し、後の計算対象からは外すこととする。両眼が抽出できた顔については、抽出された顔の大きさと日本人の平均的な顔の大きさとを比較することで、距離算出手段が当該顔とカメラとの距離（Ｌ１）を算出するのである。なお、ポスターの横方向寸法（ｍ）、人間の平均的な眼と眼の間の距離（ｅ）、デジタル画像の横寸法（ｎ）、デジタル画像の中の対象者における眼と眼の間の距離（ｅｐ）、カメラ角度（φ）、両眼角度（α）、ポスター角度（θ；図２中ではθ１）、対象者からカメラまでの距離（Ｌ；図２中ではＬ１）とする。
【００２９】
更に、角度測定手段が広告メディアの横方向両端部と前記抽出された顔とがなすポスター角度（θ１）を測定する。具体的には、図２より、
ｍ／２＝Ｌ×tan（θ１／２）
となるので、以下のようにして算出される。
θ１＝２×tan−１（ｍ／２L）
上記の式は、両眼が抽出できた顔（ｉ；ｉは自然数）について全て総計する。すなわち、ポスター角度の総計（θｎ）とすると、
θｎ＝Σθｉ
このθｎの値が大きいポスターについては、メディア価値が高いと判断できる。
【００３０】
続いて、図３との比較において説明する。図３は、両眼が抽出できた顔とカメラとの距離が、図２中のＬ１よりも短いＬ２となった場合を示している。上記したθの計算式から明らかなように、θ２は、θ１よりも大きくなる。これは、図３にて抽出できた顔の人物の方が、図２において両眼を抽出できた顔の人物よりもポスター近くにいるのであるから、ポスターへの関心度が高く、あるいはポスターからのメッセージをより強く受け取るであろうと推定できるからである。
【００３１】
（精度向上の手法に関する説明）
ところで、図４において細線にて示した顔は、ポスターからの距離を同じとしつつ、ポスターに対してはやや斜めを向いている。すると、前述したポスター角度の値としては、正面を向いている場合と同じとなってしまう。しかし、このようにポスターに対する顔の角度が正面でない場合には、正面の場合よりもポスターへの関心が低い、あるいはポスターからのメッセージを弱く受け取るであろうと推定できる。そこで、ポスター角度（θｉ）についての修正計数を定めるための技術について説明する。
【００３２】
デジタル画像の解析の精度が高い場合には、正面を向いているか斜めを向いているかの判断を数値的に行うことによって、ポスター角度について、客観性を高めるための工夫をすることができる。図５を用いて説明する。Ｆ１は、やや斜めを向いている顔のモデル図であり、Ｆ２は、ほぼ正面を向いている顔のモデル図である。これらについて、顔の色と背景の色とを区別して顔の輪郭を抽出し、眼の色とその周りの色とを区別して眼を抽出し、抽出された眼の大きさが一定以上の場合には、その中心部分も求める。その後、Ｆ１およびＦ２について、抽出された顔の横寸法（ｆ１，ｆ２）、輪郭の左端から左眼中央までの距離（ａ１，ａ２）、両眼の中央間の距離（ｂ１，ｂ２）および輪郭の右端から右眼中央までの距離（ｃ１，ｃ２）を算定する。そして、これらの変数の関係式を作成する。そして、その変数の関係式から、どの範囲は正面を向いている、どの範囲は正面を１とした場合にｋ（０<ｋ<１）である、といった条件を策定することにより、ポスター角度（θｉ）にｋを掛け、客観性を高める。
【００３３】
【００３４】
（眼間隔のみによる評価方法）
ハードウエアの性能を下げ、あるいは処理時間を短縮するため、前述した「メディア角度」の代わりに、「眼間隔」を評価値とすることによる評価方法も、場合によっては有効である。すなわち、人間のいる位置が広告メディアに近ければ長くなり、広告メディアから遠ければ短くなる。広告メディアの近くにいる人間の方が遠くにいる人間よりも、当該広告メディアへの関心が高いと推定できる。したがって、広告メディアの評価を客観的な数字とする場合、「眼間隔」の値と正の関係があるとすることは合理的である。
【００３５】
また、人間のいる位置から広告メディアまでの距離が同じであっても、広告メディアに対して（正確にはカメラに対して）正面を向いている人間の方が、斜めに向いている人間よりも、当該広告メディアへの関心が高いと推定できる。したがって、正面を向いている人間の「眼間隔」の値が、斜めに向いている人間の「眼間隔」の値よりも大きくなるが、広告メディアの評価を客観的な数字とする場合の「眼間隔」の値と正の関係があるとすることは、合理性が確保される。
【００３６】
（異なるメディアの比較）メディアそのものに時間の要素があるメディア（例えばテレビ）と、時間の要素がないメディア（例えばポスター）についての比較は、評価値の単位をどちらかに合わせればよい。例えば、時間の要素がないメディアについて、メディア角度（単位；例えば、「ラジアン」）へ時間係数（単位；例えば「秒」）を掛ければ、どちらのメディアの評価値も、その単位が「ラジアン・秒」となり、比較検討が可能となる。すなわち、時間の要素がないメディアについても、ある人物がどのくらいの時間メディアを見ていたか、という時間の要素を含める評価値を測定すれば、時間の要素があるメディアとの比較検討が可能になる。
【００３７】
対象となるメディアをテレビコマーシャルとした場合について実施した例を挙げる。まず、ハードウエア構成について説明する。サンプルとなる家庭に設置されたテレビの操作パネルの中に、デジタルビデオカメラを組み込んでおく。そのデジタルビデオカメラは、通信回線を介して撮影の制御、撮影した映像の集計センターへの送信が行えるようになっている。デジタルビデオカメラから取り込んだ画像については、いくつかの静止画像を対象として、前述したような手法にてメディア角度（θｎ）を算定して平均値を取り、そのメディア角度（θｎ）に、コマーシャルの放映時間（例えば１５秒）を掛ける。
【００３８】
比較の対象となるポスターについては、ある時間について連続的に何枚かのデジタル映像を撮影し、メディア角度（θｎ）の１秒あたりの平均値を出し、１５秒を掛ける。以上のようなサンプルデータを元にして、全国レベルのメディア価値を推定するには、一世帯当たりのＴＶ視聴人数（例えば１．５人）、ＴＶ視聴世帯数が４千万世帯、平均視聴率が１％といったデータを勘案する。このようにすれば、複数種類のテレビコマーシャルどうしについて、相対的、客観的な数字によるメディア価値を比較することもできるし、ポスターなど、異なるメディアとの比較も可能になる。
【００３９】
【発明の効果】
請求項１から請求項３に記載の発明によれば、広告媒体がどれだけの人に見られているかを客観的に評価するための広告メディア評価装置を提供することができた。
【図面の簡単な説明】
【図１】本発明の実施形態におけるハードウエア構成とデータとの関係を示す概念図である。
【図２】本発明の実施形態を説明するためのモデル図である。
【図３】本発明の実施形態を説明するためのモデル図である。
【図４】本発明の実施形態を説明するためのモデル図である。
【図５】本発明の実施形態を説明するためのモデル図である。
【符号の説明】
Ｆ１，Ｆ２ 抽出された顔の輪郭
ｆ１，ｆ２ 抽出された顔の横寸法
ａ１，ａ２ 輪郭の左端から左眼中央までの距離
ｂ１，ｂ２ 両眼の中央間の距離
ｃ１，ｃ２ 輪郭の右端から右眼中央までの距離
【図１】
0004159159.tif 000002
【図２】
0004159159.tif 000003
【図３】
0004159159.tif 000004
【図４】
0004159159.tif 000005
【図５】
0004159159.tif 000006