(57)【要約】【課題】宣伝の有効性を示す視聴度を信頼度高く求める。【解決手段】  顔抽出部４は、画像データから、人物の顔部分を抽出するとともに、抽出された顔領域の顔情報を求める。顔情報記録部５は、顔情報を記録する。顔同定部６は、一定間隔で実施される顔情報と、顔情報記録部の顔情報を比較し、抽出された顔が同一人物のものかどうかを判定する。視聴時間計測部７は、同一人物が検知された時刻から検知されなくなった時刻までの視聴時間を求める。人物属性判別部８は、視聴時間が求められた人物の性別及び年齢を求める。視聴度算出部９は、一定期間における、性別及び年齢ごとの視聴度を算出する。視聴度情報記録部１０は、その視聴度を記録する。分析部１１は、視聴度情報をもとに、宣伝に対する効果度を求める。【選択図】  図1
2006254274.tif 000002
【特許請求の範囲】
【請求項１】
陳列され又は店頭モニタ広告又はＴＶ広告で紹介されている商品あるいは映像を視聴する人物を撮像する撮像部と、前記撮像部を制御する制御部と、前記撮像部からの画像データを記憶するフレームメモリとを備え、前記撮像部からの画像データを処理して、前記商品あるいは映像に対する人物の階層別の視聴度を算出する視聴層分析装置において、
前記撮像部からの画像データから、前記商品あるいは映像を視聴している人物を抽出する人物抽出手段と、前記抽出された人物の性別又は年齢層の属性を判別する人物属性判別手段と、前記商品あるいは映像に対する人物属性別の視聴度を算出する視聴度算出手段とを備えたことを特徴とする視聴層分析装置。
【請求項２】
陳列され又は店頭モニタ広告又はＴＶ広告で紹介されている商品あるいは映像を視聴する人物を撮像する撮像部と、前記撮像部を制御する制御部と、前記撮像部からの画像データを記憶するフレームメモリとを備え、前記撮像部からの画像データを処理して、前記商品あるいは映像に対する人物の階層別の視聴度を算出する視聴層分析装置において、
前記撮像部からの画像データから、前記商品あるいは映像を視聴している人物を抽出する人物抽出手段と、前記人物抽出手段で抽出された人物の異なる時刻の画像データにおける存在を判定する人物同定手段と、前記人物同定手段の同定結果に基づいて、前記人物が前記商品あるいは映像を視聴している時間を計測する視聴時間計測手段と、前記抽出された人物の性別又は年齢層の属性を判別する人物属性判別手段と、前記視聴時間計測手段で求められる視聴時間と前記人物属性判別手段で求められる人物属性に基づいて、前記商品あるいは映像に対する人物属性別の視聴度を算出する視聴度算出手段とを備えたことを特徴とする視聴層分析装置。
【請求項３】
請求項１又は請求項２記載の視聴層分析装置において、視聴度算出手段による人物属性別の視聴度の算出結果に基づいて、宣伝の有効度を分析する分析手段を備えたことを特徴とする視聴層分析装置。
【請求項４】
人物抽出手段が、人物の正面顔を抽出することを特徴とする請求項１又は請求項２又は請求項３のいずれか１に記載の視聴層分析装置。
【請求項５】
請求項１又は請求項２又は請求項３のいずれか１に記載の視聴層分析装置において、
複数の撮像部と、前記複数の撮像部からの画像データを用い、物体の３次元位置を計測する３次元位置計測手段を備え、
人物抽出手段は、前記３次元位置計測手段により計測した人物の３次元位置と人物の正面顔の抽出位置とを用いて人物を抽出することを特徴とすることを特徴とする視聴層分析装置。
【請求項６】
人物属性判別手段が、抽出された人物の顔情報に基づいて判別することを特徴とする請求項１又は請求項２又は請求項３のいずれか１に記載の視聴層分析装置。
【請求項７】
請求項１又は請求項２記載の視聴層分析装置と、商品の販売数を計数する販売数計数装置と、過去の商品の販売実績及び前記過去の商品に対する宣伝に関する人物属性別視聴度及び別の対象商品の宣伝に関する人物属性別視聴度に基づいて、対象商品に対する販売戦略を作成する販売戦略作成手段を備えたことを特徴とする販売戦略支援システム。
【請求項８】
複数の地点に、請求項１又は請求項２記載の視聴層分析装置と、商品の販売数を計数する販売数計数装置とを設置し、前記複数地点の視聴層分析装置から得られる人物属性別の視聴度を集計する視聴度データ集計手段と、前記複数地点の販売計数装置から得られる商品の販売数を集計する販売数データ集計手段と、集計された過去の商品の販売実績及び集計された前記過去の商品に対する宣伝に関する人物属性別視聴度及び集計された別の対象商品の宣伝に関する人物属性別視聴度に基づいて、対象商品に対する販売戦略を作成する販売戦略作成手段を備えたことを特徴とする販売戦略支援システム。
【請求項９】
請求項１又は請求項２記載の視聴層分析装置と、
陳列され又は店頭モニタ広告又はＴＶ広告で紹介されている商品の販売数を計数する販売数計数装置と、広告の視聴時間と商品の販売数に基づいて、前記商品に対する広告の貢献度を判定する広告貢献度判定手段とを備えたことを特徴とする広告支援システム。
【請求項１０】
ＴＶ映像を視聴する人物を撮像する撮像部と、前記撮像部を制御する制御部と、前記撮像部からの画像データを記憶するフレームメモリと、前記フレームメモリの画像から、前記映像を視聴している人物を抽出する人物抽出手段と、前記抽出された人物の性別又は年齢層の属性を判別する人物属性判別手段と、ＴＶの番組情報を入手する番組情報入手手段と、ＴＶ画面で表示された映像の番組を決定する番組決定手段と、
前記番組情報入手手段で得られている人物が前記番組を試聴可能か否かを判定する視聴可否判定手段と、
前記視聴可否判定手段の判定結果に基づき、ＴＶ画面の映像の表示に対するオンオフを制御する表示制御手段を備えたことを特徴とするＴＶ装置。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、陳列されている商品の宣伝に対する人物の視聴度合いを、ＴＶカメラの映像を画像処理して自動的に求める装置およびそれを応用したシステム並びにＴＶ装置に関する。
【背景技術】
【０００２】
宣伝を目的とした商品陳列の有効性を測定することは、人がカウントすることで実施されていた。また、宣伝の視聴率については、番組の視聴率から間接的に推測されていた。
ＴＶ装置が視聴者を判断して視聴を制限するものは見当たらなかった。
【発明の開示】
【発明が解決しようとする課題】
【０００３】
陳列され又は店頭モニタ広告で紹介されている商品あるいは映像を視聴する人をその場においてを直接カウントすることはコストがかかり、年中調査することは困難であった。また、ＴＶ広告の有効性を評価するものとして採用されている番組の視聴率から判定する方法については、信頼度を高く求めることはできないという課題があった。
この発明は、上記のような問題点を解決するためになされたものであり、宣伝の有効性を示す視聴度を信頼度高く求めることを目的とする。
また、求めた視聴度を用いて商品の販売戦略を作成する際の信頼度を向上させることに資することを目的とする。
さらに、視聴者の制限を可能とするＴＶ装置を提供することを目的とする。
【課題を解決するための手段】
【０００４】
請求項１に係る視聴層分析装置は、陳列され又は店頭モニタ広告又はＴＶ広告で紹介されている商品あるいは映像を視聴する人物を撮像する撮像部と、前記撮像部を制御する制御部と、前記撮像部からの画像データを記憶するフレームメモリとを備え、前記撮像部からの画像データを処理して、前記商品あるいは映像に対する人物の階層別の視聴度を算出するものにおいて、前記撮像部からの画像データから、前記商品あるいは映像を視聴している人物を抽出する人物抽出手段と、前記抽出された人物の性別又は年齢層の属性を判別する人物属性判別手段と、前記商品あるいは映像に対する人物属性別の視聴度を算出する視聴度算出手段とを備えたことを特徴とするものである。
【０００５】
請求項２に係る視聴層分析装置は、陳列され又は店頭モニタ広告又はＴＶ広告で紹介されている商品あるいは映像を視聴する人物を撮像する撮像部と、前記撮像部を制御する制御部と、前記撮像部からの画像データを記憶するフレームメモリとを備え、前記撮像部からの画像データを処理して、前記商品あるいは映像に対する人物の階層別の視聴度を算出するものにおいて、前記撮像部からの画像データから、前記商品あるいは映像を視聴している人物を抽出する人物抽出手段と、前記人物抽出手段で抽出された人物の異なる時刻の画像データにおける存在を判定する人物同定手段と、前記人物同定手段の同定結果に基づいて、前記人物が前記商品あるいは映像を視聴している時間を計測する視聴時間計測手段と、前記抽出された人物の性別又は年齢層の属性を判別する人物属性判別手段と、前記視聴時間計測手段で求められる視聴時間と前記人物属性判別手段で求められる人物属性に基づいて、前記商品あるいは映像に対する人物属性別の視聴度を算出する視聴度算出手段とを備えたことを特徴とするものである。
【０００６】
請求項３に係る視聴層分析装置は、請求項１又は請求項２記載のものにおいて、視聴度算出手段による人物属性別の視聴度の算出結果に基づいて、宣伝の有効度を分析する分析手段を備えたことを特徴とするものである。
【０００７】
請求項４に係る視聴層分析装置は、人物抽出手段が、人物の正面顔を抽出することを特徴とする請求項１又は請求項２又は請求項３のいずれか１に記載のものである。
【０００８】
請求項５に係る視聴層分析装置は、請求項１又は請求項２又は請求項３のいずれか１に記載のものにおいて、複数の撮像部と、前記複数の撮像部からの画像データを用い、物体の３次元位置を計測する３次元位置計測手段を備え、人物抽出手段は、前記３次元位置計測手段により計測した人物の３次元位置と人物の正面顔の抽出位置とを用いて人物を抽出することを特徴とするものである。
【０００９】
請求項６に係る視聴層分析装置は、人物属性判別手段が、抽出された人物の顔情報に基づいて判別することを特徴とする請求項１又は請求項２又は請求項３のいずれか１に記載のものである。
【００１０】
請求項７に係る販売戦略支援システムは、前記請求項１又は請求項２記載の視聴層分析装置と、商品の販売数を計数する販売数計数装置と、過去の商品の販売実績及び前記過去の商品に対する宣伝に関する人物属性別視聴度及び別の対象商品の宣伝に関する人物属性別視聴度に基づいて、対象商品に対する販売戦略を作成する販売戦略作成手段を備えたことを特徴とするものである。
【００１１】
請求項８に係る販売戦略支援システムは、複数の地点に、請求項１又は請求項２記載の視聴層分析装置と、商品の販売数を計数する販売数計数装置とを設置し、前記複数地点の視聴層分析装置から得られる人物属性別の視聴度を集計する視聴度データ集計手段と、前記複数地点の販売計数装置から得られる商品の販売数を集計する販売数データ集計手段と、集計された過去の商品の販売実績及び集計された前記過去の商品に対する宣伝に関する人物属性別視聴度及び集計された別の対象商品の宣伝に関する人物属性別視聴度に基づいて、対象商品に対する販売戦略を作成する販売戦略作成手段を備えたことを特徴とするものである。
【００１２】
請求項９に係る広告支援システムは、請求項１又は請求項２記載の視聴層分析装置と、陳列され又は店頭モニタ広告又はＴＶ広告で紹介されている商品の販売数を計数する販売数計数装置と、広告の視聴時間と商品の販売数に基づいて、前記商品に対する広告の貢献度を判定する広告貢献度判定手段とを備えたことを特徴とするものである。
【００１３】
請求項１０に係るＴＶ装置は、ＴＶ映像を視聴する人物を撮像する撮像部と、前記撮像部を制御する制御部と、前記撮像部からの画像データを記憶するフレームメモリと、前記フレームメモリの画像から、前記映像を視聴している人物を抽出する人物抽出手段と、前記抽出された人物の性別又は年齢層の属性を判別する人物属性判別手段と、ＴＶの番組情報を入手する番組情報入手手段と、ＴＶ画面で表示された映像の番組を決定する番組決定手段と、前記番組情報入手手段で得られている人物が前記番組を試聴可能か否かを判定する視聴可否判定手段と、前記視聴可否判定手段の判定結果に基づき、ＴＶ画面の映像の表示に対するオンオフを制御する表示制御手段を備えたことを特徴とするものである。
【発明の効果】
【００１４】
請求項１に係る視聴層分析装置において、人物抽出手段で抽出した人物の性別又は年齢層の属性を人物属性判断手段で判別して、人物属性別の視聴度を視聴度算出手段で算出するから、商品や広告に対する注目度の裏付けとなる視聴度を老若男女別に求めることができる。
【００１５】
請求項２に係る視聴層分析装置において、個人毎に視聴時間を求めることができ、商品や広告に対する注目度の裏付けとなる視聴度を信頼度を高く求めることができる。
【００１６】
請求項３に係る視聴層分析装置において、老若男女あるいは個人別に視聴時間を求めて、これを商品に対する販売戦略に効果的に展開することができる。
【００１７】
請求項４に係る視聴層分析装置において、正面顔の人物を商品や広告に注目していると想定し、その人物のみを抽出することができるので、装置の処理時間を削減できる。
【００１８】
請求項５に係る視聴層分析装置において、人物抽出手段は、３次元位置計測手段により計測した人物の３次元位置と人物の正面顔の抽出位置とを用いて人物を抽出するから、人物の抽出精度を向上させることができ、視聴時間の信頼度を高めることができる。
【００１９】
請求項６に係る視聴層分析装置において、老若男女情報を精度よく判定することができる。
【００２０】
請求項７に係る販売戦略支援システムにおいて、過去の商品の売り上げ実績と人物属性別視聴度を用いたため、新規商品に対する販売戦略の信頼度を向上させることができる。
【００２１】
請求項８に係る販売戦略支援システムにおいて、複数地点における老若男女別の視聴度を求めるようにしたため、商品に対する販売戦略の信頼度を向上させることができる。
【００２２】
請求項９に係る広告支援システムにおいて、商品に対する広告の貢献度を求めるようにしたため、例えば広告に対する宣伝料を妥当に決定できる。
【００２３】
請求項１０に係るＴＶ装置において、成人向け映画など視聴者に対する制限が必要な映像の表示に対して、視聴者毎の表示の制限を自動で設定することが可能となる。
【実施例１】
【００２４】
（請求項１，２，３，４，６に対応）
図１は、この発明の実施例１による視聴層分析装置を示す構成図である。
図２は、この発明の実施例１による視聴層分析装置の利用形態に関する説明図である。
図１、図２において、視聴層分析装置１００は、撮像部１、撮像制御部２、フレームメモリ３、顔抽出部４、顔情報記録部５、顔同定部６、視聴時間計測部７、人物属性判別部８、視聴度算出部９、視聴度情報記録部１０、分析部１１からなる。
また、本実施例１の視聴層分析装置１００は、図２に示すように、撮像部１を宣伝用として陳列されている商品付近に、対象商品を見つめる人物群の映像を捉えるように設置し、得られる画像データから人物群の属性情報を抽出し、さらに商品の視聴度を求めて、宣伝の有効度を分析する。
【００２５】
図１において、撮像部１は、例えばＣＣＤカメラ等からなり、撮像制御部２からの制御に従って所定のフレーム間隔で映像を撮影するものである。撮像制御部２は、撮像部１及びフレームメモリ３の制御を行うための制御部である。フレームメモリ３は、撮像部１の映像信号に基づくデジタルの画像データを１フレーム分蓄積するためのメモリである。
顔抽出部４は、画像データから、一定時間間隔で、人物の顔部分を抽出するとともに、抽出された顔領域の面積、重心、大きさ、周囲長、外接四角形の位置と大きさなどの顔情報を求め、顔情報記録部５は、それらの顔情報を記録する。顔同定部６は、前記顔抽出部４により一定時間で抽出した顔情報と、顔情報記録部５に記録されている顔情報とを比較し、抽出された顔が顔情報記録部５のものと同一人物のものかどうかを判定する。視聴時間計測部７は、同一人物が検知された時刻から検知されなくなった時刻までの視聴時間を求める。
人物属性判別部８は、視聴時間が求められた人物の性別及び年齢層の属性を判別する。視聴度算出部９は、一定時間における、性別及び年齢毎の視聴度を計算し、視聴度情報記録部１０は、その視聴度を記録する。
分析部１１は、視聴度情報をもとに、宣伝に対する有効度を求める。
なお、上記顔抽出部４〜分析部１１の構成はコンピュータで実現され、各機能部は、それぞれの機能に対応したソフトウェアと、これを実行するためのＣＰＵやメモリ等のハードウェアから構成されている。あるいは、各機能部はそれぞれ専用のハードウェアで構成するようにすることもできる。
【００２６】
次に、このように構成された視聴層分析装置の動作について説明する。
図３は、本実施例１の視聴層分析装置の動作を説明するフローチャートである。
まず、撮像部１によって視聴層分析検知の撮影範囲を撮影した２次元の画像信号がフレームメモリ３に入力される（ステップＳＴ１）。図４は、撮像部１で撮像された画像の一例で、このような画像を画像処理して、視聴度を分析する。なお、以後の説明において、画像の横軸をＸ座標、縦軸をＹ座標とする。
【００２７】
顔抽出部４は、画像から、人物の顔を抽出する（ステップＳＴ２）。抽出方法は例えば、
鹿毛  裕史  他  「ロバスト顔追跡によるベストショット顔画像記録システム」第１０回画像センシングシンポジウム（ＳＳＩＩ２００４）講演論文集  ２００４年
に開示されている手法などを用いる。
【００２８】
このとき、図４に示されるように、両目、鼻、口がすべて写っている横方向への回転の少ない正面顔のみが検知される。この場合、横を向いている顔は検出されず、従って商品を視聴していると推測される人物のみが対象となる。また、複数の人物の顔が写っている場合、すべての顔を抽出することを基本とするが、顔の大きさ又は画像中心に一番近い人物の顔など、ある条件を設定して、条件を満たす顔だけを抽出することでもよい。情報記録部５は、顔として抽出された領域の面積、重心、周囲長、外接四角形の位置及び大きさ等の情報を求めて記録する（ステップＳＴ３）。記録する際には、抽出された顔それぞれに対して、すでに記録されている顔画像との比較を行い（ステップＳＴ４）、もし、同一人物のものと判断されるものがなかった場合には、識別番号及びフレーム番号（すなわち開始時刻）を追加して前記の情報とともに記録する（ステップＳＴ５）。一方、同一人物の顔と判断される場合には何もしない。なお、同一人物の顔と判断される場合に、抽出された顔情報で、記憶している顔情報の値を更新するようにしてもよい。同一人物であるかないかの判定は、比較する２つの顔情報のうち、一部又はすべての値のずれが所定のしきい値以下であるかどうかで実施する。
ＳＴ３〜ＳＴ５までの処理を繰り返し実行し、抽出されたすべての顔に対する処理が終了した時点で、後述のＳＴ７に移行する（ステップＳＴ６）。顔情報記録部５に前フレームまで記録されていたもので、今回のフレームにおいて同定されなかった顔がない場合には、ＳＴ１に戻り、次のフレームに対する処理を実行する。一方、今回のフレームにおいて同定されなかった顔がある場合は、視聴していた人物が立ち去ったとして、後述のＳＴ８以降の処理を実行する（ステップＳＴ７）。
視聴時間計測部７は、立ち去った人物のフレーム番号（すなわち終了時刻）を求め、開始時刻との差を求めることで、その人物の視聴時間を計測する（ステップＳＴ８）。このとき、ノイズなどにより一時的に抽出もれが発生する場合を想定し、一定時間継続して同定されなかった場合に、視聴時間を計測するようにしてもよい。
次に、視聴時間が計測された人物の属性を求める（ステップＳＴ９）。ここで、人物の属性とは、性別及び年齢層を示し、顔をもとに判別される。このとき、年齢層は、子供、成年、中年、老年といった大まかな区分や１０才刻みといった複数の階層からなる。
【００２９】
人物の属性を求める方法は、例えば
安本  守  他  「平均顔との距離を用いた性別・年令推定手法の提案」電子情報通信学会  信学技報  ＰＲＭＵ２００１−１３８  ２００１年
に開示される手法などを用いることができる。
【００３０】
人物の属性が確定した場合には、視聴度を算出する（ステップＳＴ１０）。視聴度としては、一定期間における人物属性別人数または一定期間における人物属性別視聴時間または一定期間における人物属性別視聴時間または総視聴時間などを用いる。その結果をもとに、例えば属性情報テーブルの値を更新する（ステップＳＴ１１）。図５は、男女それぞれを子供、成年、中年、老年の４階層に分類した場合の、人物属性別人数及び人物属性別視聴時間で表した属性情報テーブルである。
以上のＳＴ１〜ＳＴ１１のステップを繰り返すことで視聴度を計測する。この視聴度を用いて宣伝効果に関する分析を実施するかどうかを選択し（ステップＳＴ１２）、分析する指示があった場合には、分析部１１により分析を行う（ステップＳＴ１３）。
分析部１１による分析の一例のフローチャートを図６に示す。システムは、一定期間の視聴度情報を対象に、一定期間の視聴度があるかどうかを判定する（ステップＳＴ１４）。このとき条件を満たさない場合には、商品の宣伝手法が悪いまたは商品そのものが悪いとして、宣伝方法の見直しや商品の見直しなどの結果を出力する（ステップＳＴ１５）。条件を満たしている場合は、次に、視聴度が他の階層に比べて、際だって高い層にあるかどうかを判定する（ステップＳＴ１６）。この条件を満たさない場合には、さらに、商品が幅広い層をターゲットとしている商品であるかを確認する（ステップＳＴ１７）。この確認は、予めシステムに入力されていてもよいし、インタラクティブに入力するようにしてもよい。この商品が幅広いターゲット層を想定している場合には、商品コンセプトとユーザー層の興味が一致しているとして、この商品の販売を実施するまたは促進するよう出力する（ステップＳＴ１９）。一方、この商品が特定のターゲット層を想定しているものであるなら、商品コンセプトとユーザー層の興味とにずれがあるとして、販売戦略の見直しや商品コンセプトの見直しをするよう出力する（ステップＳＴ２０）。また、ＳＴ１６において、条件を満たしている場合には、視聴度の高かったそうと想定していたターゲット層とが一致しているかどうかを判定する（ステップＳＴ１８）、一致している場合は、ＳＴ１９を、一致していない場合はＳＴ２０をそれぞれ実行する。
【００３１】
なお、上記実施例１において、人物抽出手段として顔に基づく手法を示したが、顔だけでなく、人物の全身や半身を抽出する手法を用いてもよい。
また、人物属性判定手段として、顔に基づく手法を示したが、服装、体型、髪型などを用いて求めるものであってもよい。
また、顔の抽出方法及び人物属性判別手法の例をあげたが、特にこれらにこだわるものではなく、その他の手法であってもよい。
また、視聴度、属性情報テーブル及び分析手法について示したが、これらは一例であって、他の方法を使用してもよい。
また、１台の装置について述べたが、この装置を複数台異なる場所に設置し、これらを複数の装置からの視聴度を集計し、その値をもとに分析するように構成してもよい。
【００３２】
以上のように、実施例１によれば、商品や映像を視聴している人物の顔を抽出する顔抽出部と、人物の性別または年齢層の属性を判別する人物属性判別部と、商品や映像に対する人物属性別の視聴を算出する視聴度算出部を備え、商品や宣伝に対する注目度の裏付けとなる視聴度を老若男女別に求めるようにしたため、商品に対する販売戦略を効果的に展開できる。
また、実施例１によれば、人物属性判別部は、人物の顔情報に基づいて判別するようにしたので、老若男女情報を精度よく判定することが可能となる。
また、実施例１によれば、顔抽出部で抽出された人物の異なる時間の画像データにおける存在を判定する顔同定部を備え、個人毎の視聴時間を求められるようにしたので、商品や宣伝に対する注目度の裏付けとなる視聴度を信頼高く求めることができる。
【実施例２】
【００３３】
（請求項５に対応）
図７は、この発明の実施例２による視聴層分析装置を示す構成図である。
図７において、カメラ１ａは、実施例１のカメラ１と同様のもので、人物の正面顔を撮像する。カメラ１ｂ及びカメラ１ｃは、一対のステレオカメラである。図８に、カメラ１ａ，１ｂ，１ｃの設置例を示す。図８のように、カメラ１ｂ及びカメラ１ｃは、商品を視聴する人物の上方、例えば天井付近に、人物を撮像するよう下向きに設置される。これらのカメラの映像は、フレームメモリ３ｂおよび３ｃに画像データとして蓄積される。また、図７において、撮像制御部２ａは実施例１の撮像制御部２と同様のものである。また、撮像制御部２ｂ，２ｃは、それぞれ撮像部１ｂ，１ｃ及びフレームメモリ３ｂ，３ｃの制御を行うための制御部である。フレームメモリ３ａは、実施例１のフレームメモリ３と同様のものである。フレームメモリ３ｂ，３ｃは、それぞれ撮像部１ｂ，１ｃの映像信号に基づくデジタルの画像データを１フレーム分蓄積するためのメモリである。
距離画像生成部７０は、２枚の画像から、いわゆる三角測量の原理により距離画像を生成する。人物位置計測部７１は、距離画像から、高さのしきい値処理により、人物の頭部付近の領域を抽出する。
図９（ａ）は、領域抽出結果の例である。さらに、人物位置計測部７１は、抽出された領域の３次元位置を算出する。このとき、算出される位置は、例えば、領域で地面からの高さが最も高い点や領域の重心などである。
顔抽出部７２は、実施例１と同じ手法で顔を抽出する。そして、抽出された顔の位置と、人物位置計測部７１で得られる人物位置から推測される顔位置とを比較し、顔の位置が異なる場合は、顔抽出に失敗している可能性が高いとして、顔の候補から除去する。例えば、図９（ｂ）の人物９ｃは、人物位置計測部７１で得られる人物９ａ，９ｂの顔位置と異なるから除去されることになる。または、例えば人物の位置が商品から離れている場合には、仮に顔の抽出ができていたとしても信頼度が低いとして、上記の場合と同様に顔の候補から除去する。
そして、顔が抽出された場合は、実施例１と同様の方法により宣伝の有効度を分析する。
以上のように、実施例２によれば、物体の３次元位置を計測する距離画像生成部と人物位置計測部を備え、顔抽出部は、人物の３次元位置及び人物の正面顔の抽出位置を用いて人物を抽出するようにしたので、人物の抽出精度が向上するため、視聴時間の信頼度を高めることができる。
【実施例３】
【００３４】
（請求項７，８に対応）
図１０は、この発明の実施例３による販売戦略支援システムを示す構成図である。
図１０において、ローカルシステム１０２ａ〜１０２ｎは、図１により実施例１として説明した視聴層分析装置１００と同様のものを複数すなわち視聴層分析装置１００ａ〜１００ｎを備え、さらに、販売数計数装置１０１ａ〜１０１ｎからなる。また、中央管理システム１０８は、視聴度データ集計部１０３、視聴度データ記録部１０４、販売数データ集計部１０５、販売数データ記録部１０６、販売戦略作成部１０７からなる。
【００３５】
ローカルシステム１０２ａ〜１０２ｎは、各地にある店舗など複数の地点に配備されており、視聴層分析装置１００ａ〜１００ｎは、それぞれの地点における商品毎の販売数を計数している。これらの視聴度データ及び販売数データは、通信ネットワークなどのデータ伝送路を経由して、中央管理システム１０８に伝送される。中央管理システム１０８において、視聴度データ集計部１０３は、各地から伝送されてくる視聴度データを集計し、集計された視聴度データを視聴度データ記録部１０４で記録する。また、販売数データ集計部１０５は、各地から伝送されてくる販売数データを商品毎に集計し、集計された販売数データを販売数データ記録部１０６で記録する。集計される視聴度データの形式は、例えば、各地点における図５の属性情報テーブルを積算したものや平均化した形式などが用いられる。また、特定の地域単位でまとめた形式やそれ以外の形式を使用してもよい。
販売戦略作成部１０７は、視聴度データ及び販売数データをもとに販売戦略を設定する。販売戦略作成部１０７の販売戦略の例を以下に記す。仮に商品Ａを対象とする場合、分析部１０７は、過去に販売された商品Ａと類似の商品Ｂ、商品Ｃ…商品Ｎを選択し、商品Ｂ、Ｃ…Ｎに関する過去の視聴度データ及び販売数データを視聴度データ記録部１０４、販売数データ記録部１０６からそれぞれ抽出する。さらに、商品Ａの現時点の視聴度データを入手する。分析部１０７は、商品Ａの視聴度データの傾向と最も近い視聴度データを示す商品を選択し、その商品に対する過去の販売数をもとに、商品Ａの販売数を予測する。
なお、本実施例においては、複数地点の視聴層分析装置及び販売数計測装置を設置する場合について説明したが、１地点の場合であってもよい。
以上のように、実施例３によれば、視聴層分析装置及び販売数計測装置を複数地点に設置し、複数地点の人物属性別の視聴度を集計する視聴度データ集計部と販売数データ集計部を備え、人物属性別の視聴度データ及び販売数データに基づいて、商品または宣伝の販売戦略を作成する分析部を備え、新規商品の視聴度データ、過去の商品の販売実績と人物属性別視聴度データを用いて対象となる商品の販売数を予測するようにしたので、新規商品または新規宣伝に対する販売戦略の信頼度を向上させることが可能になる。
【実施例４】
【００３６】
（請求項９に対応）
図１１は、この発明の実施例４による広告支援システムを示す構成図である。
図１２は、この発明の実施例４による広告支援システムの利用形態に関する説明図である。
図１１において、図１により実施例１として説明した視聴層分析装置１００と同様のものを備え、図１２のように撮像部１を店内に置かれたディスプレイ１１０に内蔵する。撮像部１は、ディスプレイ１１０の近傍に設置してもよい。広告表示制御部１１１は、予め設定されたプログラムに基づいて広告を選択して、図１２のようにディスプレイ１１０に表示するとともに、広告の識別子と表示時間帯の情報を図１１の広告貢献度判定部１１２に送信する。視聴層分析装置１００は、広告が表示されている時間帯の人物属性別の視聴度を求める。広告貢献度判定部１１２は、ある期間における商品の販売数を販売数計数装置１０１から入手するとともに、その期間までに表示されたその商品の広告時間と広告に対する視聴度をもとに広告の貢献度を以下のように算出する。
広告貢献度判定部１１２における貢献度Ｃは、例えば以下の式（１）を用いて算出する。
【００３７】
Ｃ＝ｋ×ｍ／ｔ              （１）
【００３８】
ここで、ｋは商品の販売数、ｍは広告の視聴人数、ｔは広告の総表示時間を表す。さらに、以下の式（２）で求めてもよい。
【００３９】
Ｃ＝ｋ×ｍ／（ｔ×Ｔ）      （２）
【００４０】
ここで、Ｔは総販売時間である。
なお、上記実施例では、貢献度を式（１）または式（２）で求めたが、これに限るものではない。また、式（１）及び式（２）において、ｍを視聴人数としたが、ある特定の層の視聴人数やあるいは実施例１で示したその他の視聴度を使用してもよい。
また、一つの店舗をもとに説明したが、実施例３のように、複数地点に本実施例の広告支援システムを配置し、貢献度を集計したものであってもよい。
以上のように、視聴層分析装置と、販売数計数装置を備え、広告の視聴時間と商品の販売数に基づいて前記商品に対する広告の貢献度を判定する広告貢献度判定部を備え、商品に対する広告の貢献度を求めるようにしたため、広告に対する宣伝料を妥当に決定することができる。
【実施例５】
【００４１】
（請求項１０に対応）
図１３は、この発明の実施例５によるＴＶ装置を示す構成図である。
図１３において、実施例１として示した図１の撮像部１〜人物属性判別部８と同様のものを含む。撮像部１は、ＴＶ装置の表示装置の前面に装着され、ＴＶ画面を見ている人物を撮影し、人物属性判別部８によりその人物の属性を判定する。
一方、アンテナからチューナー１３０によりＴＶ放送を受信する。番組入手部１３１は、ＴＶ放送から電子番組表を入手する。番組決定部１３４は、現在放送されている番組の時刻及びチャンネルをタイマー１３２及びチャンネル設定部１３３から求め、電子番組表をもとに、現在放送される番組を決定する。番組制限認識部１３５は、現在放送されている番組の視聴者指定コードを入手する。視聴可否判定部１３６は、視聴者指定コードで指定される以外の視聴者層の属性と、人物属性判別部８で抽出された人物の属性が一致しているかどうか判定する。表示制御部１３７は、視聴可否判定部１３６の判定結果が一致していない場合には、モニタ（ＴＶ表示装置）１３８への表示を取りやめるまたは電源をオフにするまたはブルーバックを表示するなどの制御を行う。すなわち、例えば、成人向け番組が放送されている場合に、子供が画面を見ることを禁止するようにモニタ１３８への表示を制御する。
なお、視聴時間計測部７の視聴時間をもとに、一定以上視聴される場合にのみ、視聴可否の判定を行うようにしてもよい。
以上のように、実施例５によれば、人物属性判別部、番組制限認識部と表示制御部とを備え、ＴＶの表示を制御するようにしたので、成人向け映画など視聴者に対する制限が必要な映像の表示に対して、視聴者ごとの表示の制限を自動で設定することが可能となる。
【図面の簡単な説明】
【００４２】
【図１】この発明の実施例１による視聴層分析装置を示す構成図である。
【図２】この発明の実施例１による視聴層分析装置の利用形態に関する説明図である。
【図３】この発明の実施例１による視聴層分析装置の動作を示すフローチャートである。
【図４】この発明の実施例１による視聴層分析装置の撮像部で撮影された画像の一例を示す図である。
【図５】この発明の実施例１による視聴層分析装置の属性情報テーブルの一例を示す図である。
【図６】この発明の実施例１による視聴層分析装置の分析部の動作を示すフローチャートである。
【図７】この発明の実施例２による視聴層分析装置を示す構成図である。
【図８】この発明の実施例２による視聴層分析装置の利用形態に関する説明図である。
【図９】この発明の実施例２による視聴層分析装置の撮像部で撮影された画像の一例を示す図である。
【図１０】この発明の実施例３による販売戦略支援システムを示す構成図である。
【図１１】この発明の実施例４による広告支援システムを示す構成図である。
【図１２】この発明の実施例４による広告支援システムの利用形態に関する説明図である。
【図１３】この発明の実施例５によるＴＶ装置を示す構成図である。
【符号の説明】
【００４３】
１００…視聴層分析装置、１…撮像部、２…撮像制御部、３…フレームメモリ、４…顔抽出部、５…顔情報記録部、６…顔同定部、７…視聴時間計測部、８…人物属性判別部、９…視聴度算出部、１０…視聴度情報記録部、１１…分析部。
【図１】
2006254274.tif 000003
【図２】
2006254274.tif 000004
【図３】
2006254274.tif 000005
【図４】
2006254274.tif 000006
【図５】
2006254274.tif 000007
【図６】
2006254274.tif 000008
【図７】
2006254274.tif 000009
【図８】
2006254274.tif 000010
【図９】
2006254274.tif 000011
【図１０】
2006254274.tif 000012
【図１１】
2006254274.tif 000013
【図１２】
2006254274.tif 000014
【図１３】
2006254274.tif 000015