(57)【要約】【課題】注目対象に対する注目状況を詳細に解析可能な情報生成技術を提供する。【解決手段】画像処理部１０３は、画像入力受付部１０２が入力を受け付けた画像情報を解析し、撮像された画像に映った物体の動作状態の画像情報を抽出する。言語構造構築部１０４は、画像処理部１０３が抽出した物体の動作状態の画像情報から状態情報を構築して状態情報ＤＢ１０５に記憶させる。マーケティング情報生成部１０６は、状態情報ＤＢ１０５に記憶されている状態情報を用いて、広告物に対する注目状況を解析して、広告物に対する興味の度合いを判断してマーケティング情報を生成しこれをマーケティング情報ＤＢ１０７に記憶させる。マーケティング情報解析部１０８は、マーケティング情報ＤＢ１０７に記憶されたマーケティング情報を解析して、その解析結果を得る。表示制御部１０９は、マーケティング情報解析部１０８の解析結果を表示部１１０に表示させる。【選択図】        図１
2010238185.tif 000002
【特許請求の範囲】
【請求項１】
撮像手段が撮像した物体の画像情報を解析して物体の動作状態を抽出し、当該動作状態を表す情報であって、前記物体の動作の種類を表す動詞と前記物体の動作に関連する名詞である格要素とを含み、前記動詞と前記格要素との間の意味関係を示す格フレームによって表された状態情報を構築する構築手段と、
前記状態情報を記憶する第１記憶手段と、
前記第１記憶手段に記憶された前記状態情報を用いて、前記物体の注目対象に対する注目状況を解析し、当該注目の状況を示すマーケティング情報を生成する情報生成手段とを備える
ことを特徴とする情報生成装置。
【請求項２】
前記情報生成手段は、前記状態情報を用いて、前記注目状況を解析し、前記注目対象に対する注目の度合いを判断して、前記注目の度合いを含むマーケティング情報を生成する
ことを特徴とする請求項１に記載の情報生成装置。
【請求項３】
前記情報生成手段は、前記動作の主体となる物体を表す主格と、前記物体である人物の視線方向と、当該視線方向の先にある他の物体であって前記主格の注目対象となる物体を表す対象格とを前記状態情報が前記格要素として含む場合に、当該注目対象に対する注目状況を解析し、前記注目の度合いを判断して、前記マーケティング情報を生成する
ことを特徴とする請求項２に記載の情報生成装置。
【請求項４】
前記状態情報は、前記格要素として前記物体の動作が発生した動作開始時刻及び前記物体の動作が終了した動作終了時刻を含み、
前記情報生成手段は、前記状態情報に含まれる前記動作終了時刻及び前記動作開始時刻の差が所定時間より小さい場合、注目の度合いは第１の度合いであると判断して、前記マーケティング情報を生成する
ことを特徴とする請求項３に記載の情報生成装置。
【請求項５】
前記情報生成手段は、前記状態情報に含まれる前記動作終了時刻及び前記動作開始時刻の差が所定時間以上である場合且つ当該状態情報によって示される動作状態の直後に発生した動作状態を示す状態情報に含まれる動詞が表す動作が移動でない場合、注目の度合いは第２の度合いであると判断して、前記マーケティング情報を生成する
ことを特徴とする請求項４に記載の情報生成装置。
【請求項６】
前記状態情報は、前記動作の主体となる物体を表す主格と、前記動作が生じた位置を表す場所格とを前記格要素として含み、
前記情報生成手段は、前記状態情報に含まれる前記動作終了時刻及び前記動作開始時刻の差が所定時間以上である場合、当該状態情報によって示される動作状態の直後に発生した動作状態を示す状態情報に含まれる動詞が表す動作が移動である場合且つ前記位置と前記他の物体のある位置との距離が所定距離より大きい場合、注目の度合いは第３の度合いであると判断して、前記マーケティング情報を生成する
ことを特徴とする請求項５に記載の情報生成装置。
【請求項７】
前記情報生成手段は、前記状態情報に含まれる前記動作終了時刻及び前記動作開始時刻の差が所定時間以上である場合、当該状態情報によって示される動作状態の直後に発生した動作状態を示す状態情報によって示される動作状態が移動である場合且つ前記位置と前記他の物体のある位置との距離が所定距離以内である場合、注目の度合いは第４の度合いであると判断して、前記マーケティング情報を生成する
ことを特徴とする請求項６に記載の情報生成装置。
【請求項８】
前記状態情報は、前記名詞として、前記物体の特徴を示す属性情報を含み、
前記情報生成手段は、前記状態情報を用いて、前記注目の度合いと、抽出された前記属性情報とを含む前記マーケティング情報を生成する
ことを特徴とする請求項２乃至７のいずれか一項に記載の情報生成装置。
【請求項９】
前記マーケティング情報を記憶する第２記憶手段と、
前記第２記憶手段に記憶された前記マーケティング情報を解析するマーケティング情報解析手段と、
前記マーケティング情報解析手段の解析結果を出力する出力手段とを更に備える
ことを特徴とする請求項１乃至８のいずれか一項に記載の情報生成装置。
【請求項１０】
構築手段と、記憶制御手段と、情報生成手段と情報生成装置で実行される情報生成方法であって、
前記構築手段が、撮像手段が撮像した物体の画像情報を解析して物体の動作状態を抽出し、当該動作状態を表す情報であって、前記物体の動作の種類を表す動詞と前記物体の動作に関連する名詞である格要素とを含み、前記動詞と前記格要素との間の意味関係を示す格フレームによって表された状態情報を構築する構築ステップと、
前記記憶制御手段が、前記状態情報を記憶する記憶制御ステップと、
前記情報生成手段が、前記記憶制御ステップで記憶された前記状態情報を用いて、前記物体の注目対象に対する注目状況を解析し、当該注目の状況を示すマーケティング情報を生成する情報生成ステップとを含む
ことを特徴とする情報生成方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、カメラで撮影された画像からマーケティングに関する情報を生成する情報生成装置及び情報生成方法に関する。
【背景技術】
【０００２】
従来より、画像を解析して、プロモーション情報（広告情報）を提供したり、マーケティングに関する情報を取得したりする技術がある。例えば、特許文献１には、店舗内に設置されたカメラで撮影された画像を解析して、画像に写っている顧客に関する情報や顧客の滞在時間などの情報を取得し、顧客の行動を解析して、行動軌跡情報を生成し、行動軌跡情報に基づいて、有効なプロモーション情報を提供する技術が記載されている。また、特許文献２には、写真のプリントを行なう端末において、写真に表れる画像を解析して、画像に写っている人物に関する情報を抽出し、当該情報を集計及び処理することにより、マーケティングに関する情報を生成する技術が記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−１１３７１１号公報
【特許文献２】特開２００３−１１４９７０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、特許文献１〜２に示される技術では、広告情報を提供した対象の人物が、その広告情報をどのように見たか、例えば、広告情報を詳しく見たか、広告情報に興味を示さずに移動したかなどについては解析することは困難である。また、店舗内で販売されている商品に対して顧客が興味を持っているかについて詳細に解析することは困難である。即ち、特許文献１〜２に示される技術では、広告情報や商品などの注目対象に対する顧客の注目状況を詳細に解析することは困難であった。
【０００５】
本発明は、上記に鑑みてなされたものであって、注目対象に対する注目状況を詳細に解析可能な情報生成装置及び情報生成方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上述した課題を解決し、目的を達成するために、本発明は、情報生成装置であって、撮像手段が撮像した物体の画像情報を解析して物体の動作状態を抽出し、当該動作状態を表す情報であって、前記物体の動作の種類を表す動詞と前記物体の動作に関連する名詞である格要素とを含み、前記動詞と前記格要素との間の意味関係を示す格フレームによって表された状態情報を構築する構築手段と、前記状態情報を記憶する第１記憶手段と、前記第１記憶手段に記憶された前記状態情報を用いて、前記物体の注目対象に対する注目状況を解析し、当該注目の状況を示すマーケティング情報を生成する情報生成手段とを備えることを特徴とする。
【０００７】
また、本発明は、構築手段と、記憶制御手段と、情報生成手段と情報生成装置で実行される情報生成方法であって、前記構築手段が、撮像手段が撮像した物体の画像情報を解析して物体の動作状態を抽出し、当該動作状態を表す情報であって、前記物体の動作の種類を表す動詞と前記物体の動作に関連する名詞である格要素とを含み、前記動詞と前記格要素との間の意味関係を示す格フレームによって表された状態情報を構築する構築ステップと、前記記憶制御手段が、前記状態情報を記憶する記憶制御ステップと、前記情報生成手段が、前記記憶制御ステップで記憶された前記状態情報を用いて、前記物体の注目対象に対する注目状況を解析し、当該注目の状況を示すマーケティング情報を生成する情報生成ステップとを含むことを特徴とする。
【発明の効果】
【０００８】
本発明によれば、注目対象に対する注目状況を詳細に解析可能になる。
【図面の簡単な説明】
【０００９】
【図１】図１は、一実施の形態にかかる情報生成装置１００の構成を例示する図である。
【図２】図２は、状態情報ＤＢ１０５に記憶される状態情報のデータ構造を示す図である。
【図３】図３は、状態情報ＤＢ１０５に記憶される状態情報の具体例を示す図である。
【図４】図４は、広告物に対して、状態情報によって示される動作状態から解析される注目状況と、興味の度合いとを例示する図である。
【図５】図５は、撮像装置１２０が撮像した画像から状態情報を生成する処理の手順の一例を示すフローチャートである。
【図６】図６は、状態情報ＤＢ１０５に記憶されている状態情報を用いてマーケティング情報を生成する処理の手順を示すフローチャートである。
【図７】図７は、解析結果のグラフを例示する図である。
【発明を実施するための形態】
【００１０】
以下に添付図面を参照して、この発明にかかる情報生成装置及び情報生成方法の最良な実施の形態を詳細に説明する。
【００１１】
（１）構成
図１は、本実施の形態にかかる情報生成装置１００の構成を例示する図である。同図に示されるように、情報生成装置１００には、撮像装置１２０と、表示部１１０とが接続されている。尚、接続される撮像装置１２０の数は、１つであっても良いし、複数であっても良い。撮像装置１２０は、撮影領域内を撮像するものであり、例えば、商品や広告物が陳列されるスーパーなどの店舗の天井付近に設置されている。表示部１１０は、ＬＣＤ（Liquid  Crystal  Display）等の液晶パネルから構成され、各種画像や各種情報を表示する。情報生成装置１００は、制御部１０１と、画像入力受付部１０２と、画像処理部１０３と、言語構造構築部１０４と、状態情報ＤＢ１０５と、マーケティング情報生成部１０６と、マーケティング情報ＤＢ１０７と、マーケティング情報解析部１０８と、表示制御部１０９とを主に含んで構成されている。
【００１２】
制御部１０１は、情報生成装置１００全体を制御する。画像入力受付部１０２は、撮像装置１２０が撮像した画像を表す画像情報の入力を受け付ける。画像処理部１０３は、画像入力受付部１０２が入力を受け付けた画像情報を解析し、撮像された画像に映った物体の動作状態の画像情報を抽出する。例えば、画像処理部１０３は、撮像された画像に人物が映っている場合には、肌領域を検出する等して人物を特定し、更に、顔領域パターンと照合する方法などによって当該人物の顔領域を検出して、特定した人物の動作の画像情報を抽出する。
【００１３】
言語構造構築部１０４は、画像処理部１０３が抽出した物体の動作状態の画像情報から、後述する深層格フレームによって表された状態情報を構築する。状態情報ＤＢ１０５は、物体の動作状態を深層格フレーム構造で表した状態情報を記憶するものであり、ＨＤＤやメモリ等の記憶媒体に記憶されている。尚、深層格フレーム（以下、単に格フレームとも言う）とは、動詞を基準として、動詞に対する名詞の意味関係を深層格として表した言語構造のことである。このような状態情報を構築する方法は、例えば特願2008-299955や特願2008-335023に記載されているため、ここではその詳細な説明を省略する。
【００１４】
図２は、状態情報ＤＢ１０５に記憶される状態情報のデータ構造を示す図である。同図に示されるように、状態情報は、格フレームを識別する格フレームＩＤ（ＣＦＩＤ）と、動作（行動）の種類を表す行動名（動詞）と、動作に関連する名詞である格要素（深層格）とを含んでいる。行動名には、体行動名、顔行動名及び腕行動名が含まれる。深層格には、主格、属性格（属性情報）、場所格、時間格、源泉格、目標格及び対象格が含まれる。
【００１５】
体行動名は、体全体に関する動作の名称を表す。顔行動名は、顔に関する動作の名称を表す。腕行動名は、腕に関する動作の名称を表す。
【００１６】
主格は、動作を引き起こす主体を表し、例えば、人物に割り当てられるエージェントＩＤが含まれる。属性格（属性情報）は、主格に関する情報をいう。例えば、属性格は、視線方向、性別及び年代などの要素を含む。
【００１７】
場所格は、動作や状態が起こる場所の位置を表す。ここでの位置は、店舗内の位置である。尚、店舗内で商品や広告物の配置されている位置（配置位置という）は別途予め記憶されているものとする。時間格は、動作や状態が起こる時間を表す。例えば、時間格は、現在時刻を表す時刻、動作が開始された時刻を表す動作開始時刻、動作が終了した時刻を表す動作終了時刻、および年月日等を表す。
【００１８】
源泉格は、移動や状態変化などの起点を表す。例えば、源泉格は、主格が移動や動作等を行う起点の位置を表す場所情報、および起点での主格の属性を表す属性情報を含む。
【００１９】
目標格は、移動や状態変化などの終点を表す。例えば、目標格は、主格が移動や動作等を行う終点の位置を表す場所情報、および終点での主格の属性を表す属性情報を含む。
【００２０】
対象格は、動作や状態の対象となる事物を表す。対象格は、固有の識別情報である対象ＩＤ、および固有の情報である属性情報を含む。この対象ＩＤによっては、事物を識別可能であると共に、事物の種類を識別可能である。事物の種類とは、例えば、商品、広告物などである。広告物とは、販売促進のための事物であり、例えば、ポスターであったり、パンフレットであったり、商品自体であったり、着ぐるみなどを着た販促人であったりする。
【００２１】
なお、利用できる深層格はこれらに限られず、例えば精神的事象の経験者を表す経験者格などのその他のあらゆる深層格を用いることができる。
【００２２】
図３は、状態情報ＤＢ１０５に記憶される状態情報の具体例を示す図である。同図では、ＣＦＩＤが「０００１０」である人物Ａについて行動を検出したときに生成される状態情報の一例が示されている。同図では、人物Ａが撮像装置１２０の撮影領域内に存在しており、腕を動かして事物を手に取って、見ているという行動が検出されて設定されていることが示されている。また、属性格には、主格の視線方向、性別、年代などの具体的な値が検出されて設定されている。場所格および時間格には、それぞれ主格が滞在しているときの位置や時刻に関する具体的な値が検出されて設定される。
【００２３】
マーケティング情報生成部１０６は、状態情報ＤＢ１０５に記憶されている状態情報を用いて、注目対象に対する注目状況を解析して、当該注目の状況を示すマーケティング情報を生成する。尚、ここでは、注目対象は広告物であるとする。具体的には、マーケティング情報生成部１０６は、状態情報を解析して、広告物に対する注目の度合いとして興味の度合いを判断し、当該興味の度合い及び属性格を含むマーケティング情報を生成する。そして、マーケティング情報生成部１０６は、生成したマーケティング情報をマーケティング情報ＤＢ１０７に記憶させる。
【００２４】
図４は、広告物に対して、状態情報によって示される動作状態から解析される注目状況と、興味の度合いとを例示する図である。同図に示されるように、状態情報から注目状況として、主体が移動中に広告を見て、広告に近づいて詳しく見たと解析された場合、広告物に対して非常に強い興味を持っていると判断される。また、主体が移動中に広告を見て、立ち止まって見たと解析された場合、広告物に対して強い興味を持っていると判断される。主体が移動中に広告を見て、そのまま移動しながら見ていたと解析された場合、広告物に対して弱い興味を持っていると判断される。主体が移動中に広告を見たが、視線を別のところに移したと解析された場合、広告物に対して興味を持っていないと判断される。状態情報から注目状況をどのように解析するかについては後述の動作欄で詳述する。
【００２５】
マーケティング情報解析部１０８は、マーケティング情報ＤＢ１０７に記憶されたマーケティング情報を解析して、その解析結果を得る。例えば、マーケティング情報解析部１０８は、年代別や性別毎に興味の度合いを集計してその割合を算出することにより、解析結果を得る。表示制御部１０９は、マーケティング情報解析部１０８の解析結果を表示部１１０に表示させる。
【００２６】
（２）動作
次に、本実施の形態にかかる情報生成装置１００の行う処理の手順について説明する。まず、撮像装置１２０が撮像した画像から状態情報を生成する処理の手順の一例について図５を用いて説明する。情報生成装置１００は、画像入力受付部１０２の機能により、撮像装置１２０が撮影した画像を表す画像情報の入力を受け付け（ステップＳ１）、画像処理部１０３の機能により、画像情報から人物領域を検出すると、顔領域を検出する。この検出の結果、顔領域を検出できた場合（ステップＳ２：ＹＥＳ）、情報生成装置１００は、言語構造構築部１０４の機能により、「存在する」という体行動を検出すると共に、格フレームを生成して、当該格クレームに対して他の格フレームと重複しない格フレームＩＤを割り当てる。そして、情報生成装置１００は、抽出済みの顔領域と照合する方法などにより、抽出された人物を同定して、同定した人物に既に割り当てられているエージェントＩＤ（図２のＡｇｔＩＤ）を、作成した格フレームの主格に設定する（ステップＳ３）。
【００２７】
また、情報生成装置１００は、検出した顔領域から主格の視線方向を検出すると共に、「見る」という顔行動を検出する。このとき、情報生成装置１００は、画像情報から、当該視線方向の先にある物体を検出した場合には、当該物体に割り当てられた対象ＩＤを検出する。更に、情報生成装置１００は、物体が前の画像情報で検出されていたか否か、および物体と人物領域に含まれる腕部との位置関係に応じて、「手に取る」という腕行動を検出する。具体的には、情報生成装置１００は、未検出の物体が新たに検出されたと判断でき、かつ、人物の手の位置と物体の位置とが重なると判断できる場合に、「手に取る」という腕行動を検出する。
【００２８】
そして、情報生成装置１００は、格フレームにおける行動名として、体行動名「存在する」、顔行動名「見る」及び腕行動名「手に取る」を各々設定する（ステップＳ４〜Ｓ６）。また、情報生成装置１００は、検出した人物領域の座標を算出し当該座標を、人物のいる位置として場所格に設定する（ステップＳ７）。また、情報生成装置１００は、検出した顔領域に表れる顔特徴を解析して、年齢及び性別を検出し、これらを属性格に各々設定する（ステップＳ８〜Ｓ９）。また、情報生成装置１００は、対象格において、検出した対象ＩＤを設定すると共に、属性情報として「顔行動」を設定する（ステップＳ１０〜Ｓ１１）。更に、情報生成装置１００は、時間格において、現在時刻を表す時刻、動作が開始された時刻を表す動作開始時刻、動作が終了した時刻を表す動作終了時刻及び年月日を各々設定する（ステップＳ１２〜Ｓ１５）。以上のようにして情報生成装置１００は各値を設定した格フレームを状態情報として状態情報ＤＢ１０５に記憶させる（ステップＳ１６）。
【００２９】
次に、状態情報ＤＢ１０５に記憶されている状態情報を用いてマーケティング情報を生成する処理の手順について図６を用いて説明する。情報生成装置１００は、マーケティング情報生成部１０６の機能により、状態情報ＤＢ１０５に記憶された状態情報をエージェントＩＤ毎の格フレームＩＤ毎に参照して（ステップＳ２０）、体行動名が「存在する」であるか否かを判断する（ステップＳ２１）。当該判断結果が肯定的である場合、情報生成装置１００は、状態情報によって示される動作状態が、「広告物を見る」という動作状態であるか否か、即ち、顔行動名が「見る」及び対象格の対象ＩＤが広告物に割り当てられたものであるか否かを判断する（ステップＳ２２）。当該判断結果が肯定的である場合、情報生成装置１００は、状態情報によって示される動作状態が、「広告物を見続ける」という動作状態であるか否か、即ち、時間格の動作開始時刻及び動作終了時刻の差が所定時間以上であるか否かを判断する（ステップＳ２３）。当該判断結果が否定的である場合、情報生成装置１００は、広告物に対する当該主体の注目状況として、主体が移動中に広告を見たが、視線を別のところに移したと解析する。この場合、情報生成装置１００は、広告物に対する興味の度合いは「興味なし」と判断して（ステップＳ２９）、ステップＳ３０に進む。
【００３０】
ステップＳ２３の判断結果が肯定的である場合、情報生成装置１００は、エージェントＩＤが同じで且つ当該状態情報によって示される動作状態の直後に発生した動作状態を示す状態情報（後状態情報という）を参照して、体行動名が「移動する」であるか否かを判断する（ステップＳ２４）。当該判断結果が否定的である場合、情報生成装置１００は、広告物に対する当該主体の注目状況として、主体が移動中に広告を見て、立ち止まって見たと解析する。この場合、情報生成装置１００は、広告物に対する興味の度合いは「強い興味」と判断して（ステップＳ２８）、ステップＳ３０に進む。ステップＳ２４の判断結果が肯定的である場合、情報生成装置１００は、主格の移動先が広告物の近くであるか否か、即ち、後状態情報の場所格に設定された位置が、広告物のある位置との距離が所定値以内であるか否かを判断する（ステップＳ２５）。具体的には、情報生成装置１００は、後状態情報の場所格に設定された位置と、予め記憶された配置位置とを照合して、この位置間の距離が所定値内であるか否かを判断することにより、主格の移動先が広告物の近くであるか否かを判断する。当該判断結果が肯定的である場合、情報生成装置１００は、広告物に対する当該主体の注目状況として、主体が移動中に広告を見て、広告に近づいて詳しく見たと解析する。この場合、情報生成装置１００は、広告物に対する興味の度合いは「非常に強い興味」と判断して（ステップＳ２６）、ステップＳ３０に進む。ステップＳ２５の判断結果が否定的である場合、情報生成装置１００は、広告物に対する当該主体の注目状況として、主体が移動中に広告を見て、そのまま移動しながら見ていたと解析する。この場合、情報生成装置１００は、広告物に対する興味の度合いは「弱い興味」と判断して（ステップＳ２７）、ステップＳ３０に進む。ステップＳ３０では、情報生成装置１００は、興味の度合いと、状態情報に含まれる属性格とを含むマーケティング情報を生成してこれをマーケティング情報ＤＢ１０７に記憶させる。
【００３１】
以上のようにして生成してマーケティング情報ＤＢ１０７に記憶させたマーケティング情報を、情報生成装置１００は、マーケティング情報解析部１０８の機能により解析して、その解析結果を得る。そして、情報生成装置１００は、表示制御部１０９の機能により、マーケティング情報の解析結果をグラフ化して表示部１１０に表示させる。図７は、解析結果のグラフを例示する図である。同図では、年代毎に興味の度合いが集計されその割合が算出された結果が棒グラフにより表されていることが示されている。
【００３２】
このように、本実施の形態においては、格フレームで表現された物体の動作状態を表す状態情報を用いることにより、広告物に対する注目状況を詳細に解析することができ、当該注目状況に応じて興味の度合いを判断することができる。この結果、精度が高く効果的なマーケティング情報を生成することができる。
【００３３】
[変形例]
なお、本発明は前記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、前記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。また、以下に例示するような種々の変形が可能である。
【００３４】
＜変形例１＞
上述の実施の形態においては、言語構造構築部１０４は、広告物のうちの見ている部分や、広告を見ている際の視線の動きを検出して、これを含む状態情報を構築するようにしても良い。マーケティング情報生成部１０６は、状態情報を参照した際、広告物のうちの見ている部分が、例えば、詳細な解説のある部分なのか、広告に使われている芸能人の画像のある部分なのかなどを解析したり、広告を見ている際の視線の動きから、例えば広告をじっと見ているのか、他の事物に目を移しながら見ているのかを解析して、これらの解析結果を含むマーケティング情報を生成すれば良い。
【００３５】
このような構成によれば、広告物に対する注目状況をより効果的に解析することが可能になる。
【００３６】
＜変形例２＞
上述の実施の形態においては、注目状況を解析する注目対象を、広告物としたが、これに限らない。注目対象は、例えば、商品自体であっても良いし、美術館における展示物であっても良いし、ＴＶ番組やＣＭであっても良い。また、解析する状況としては、例えば、自動車、電車、飛行機などの乗り物の運転手の気がそがれる状況であっても良いし、学校の授業に対する興味や、労働者の安全管理として注意力の散漫になる状況であっても良い。
【００３７】
尚、注目対象を商品とした場合、マーケティング情報生成部１０６は、状態情報の対象格に設定されている事物が商品であり、顔行動名が「見る」であり、腕行動名が「手に取る」であると判断した場合に、商品に対する主格の注目状況として、主格が商品を見て手に取ったと解析する。また、マーケティング情報生成部１０６は、商品のうちの見ている部分（商品全体か、商品の解説部分かなど）を視線方向から検出したり、「見る」という顔行動や「手に取る」という腕行動の動作状態の動作開始時刻及び動作終了時刻から滞在時間を検出したり、その他、パンフレットを持ち帰ったか否かを検出したり、店員に話を聞いたか否かを検出したり、複数の商品を見比べているか（複数の商品間で行ったり来たりしているか）を検出したりして、商品に対する注目状況を解析するようにしても良い。このようにしてマーケティング情報生成部１０６は商品に対する注目状況を解析し、注目の度合いとしての興味の度合いを判断して、マーケティング情報を生成するようにしても良い。
【００３８】
＜変形例３＞
上述の実施の形態においては、マーケティング情報解析部１０８の解析結果を表示部１１０を介して出力するようにしたが、これに限らず、例えば、プリンタを介して紙などの記録媒体に出力するようにしても良いし、音声出力部を介して音声で出力するようにしても良い。
【符号の説明】
【００３９】
１００  情報生成装置
１０１  制御部
１０２  画像入力受付部
１０３  画像処理部
１０４  言語構造構築部
１０５  状態情報ＤＢ
１０６  マーケティング情報生成部
１０７  マーケティング情報ＤＢ
１０８  マーケティング情報解析部
１０９  表示制御部
１１０  表示部
１２０  撮像装置
【図１】
2010238185.tif 000003
【図２】
2010238185.tif 000004
【図３】
2010238185.tif 000005
【図４】
2010238185.tif 000006
【図５】
2010238185.tif 000007
【図６】
2010238185.tif 000008
【図７】
2010238185.tif 000009