(57)【要約】【課題】  リアルタイムで顧客の行動に基づいて選定した有効なプロモーション情報を提供できるようにする。【解決手段】  画像処理部１９は、各カメラ部１１〜１４からの映像を画像処理して、映像の中に含まれている顧客の人物情報、滞在時間情報等を取得し、画像解析部２１は、映像中の対象人物の行動を解析して行動軌跡情報を生成する。プロモーション実行判定部２２は、人物の行動軌跡の認識結果をもとにその人物に対してどのようなプロモーションデータを表示するべきかどうかを判定し、指定されたプロモーションデータを情報提供部２０を通して特定のディスプレイ１５、１６に対して送信して表示させる。これにより、行動軌跡を基に選定した特定人物に対して有効なプロモーションデータをリアルタイムに提供する。【選択図】  図１
2006113711.tif 000002
【特許請求の範囲】
【請求項１】
対象範囲の映像を撮影するカメラ部と、
前記カメラ部から送出される映像データの画像処理を行う画像処理部と、
前記画像処理部による画像処理結果および前記カメラ部により撮影した映像データを蓄積する映像蓄積部と、
前記蓄積された映像データを解析して映像内における人物の行動の解析を行う画像解析部と、
前記画像解析部により得られる人物の行動軌跡に応じて、商品のプロモーションの実行に関する判定を行うプロモーション実行判定部と、
前記商品のプロモーション用のコンテンツデータを格納するプロモーションデータ格納部と、
前記商品のプロモーション用コンテンツを配信する情報提供部と、
前記配信されたプロモーション用コンテンツを再生するコンテンツ再生部と
を備えるマーケティング情報提供システム。
【請求項２】
請求項１に記載のマーケティング情報提供システムであって、
前記カメラ部および前記コンテンツ再生部と前記情報提供部とは通信網を介して接続され、前記情報提供部は、前記通信網を介して前記コンテンツ再生部にプロモーション用コンテンツを配信するマーケティング情報提供システム。
【請求項３】
請求項１または２に記載のマーケティング情報提供システムであって、
前記プロモーション実行判定部は、前記人物の行動軌跡に応じて、商品のプロモーションを行うかどうかの判定、およびどのプロモーション用コンテンツを配信するかの判定を行うマーケティング情報提供システム。
【請求項４】
請求項１または２に記載のマーケティング情報提供システムであって、
前記プロモーションデータ格納部は、映像データと音声データとを含むコンテンツデータを格納するものであり、
前記コンテンツ再生部は、前記プロモーション用コンテンツの映像データを表示する表示部と、前記プロモーション用コンテンツの音声データを再生する音声再生部とを有するマーケティング情報提供システム。
【請求項５】
請求項１または２に記載のマーケティング情報提供システムであって、
前記人物の行動軌跡を検知するための検知部をさらに備えるマーケティング情報提供システム。
【請求項６】
請求項１または２に記載のマーケティング情報提供システムであって、
販売端末から得られる販売情報を含むマーケティング情報を収集および管理するマーケティング情報蓄積部を備え、
前記プロモーション実行判定部は、前記マーケティング情報蓄積部からのマーケティング情報に基づいて配信するプロモーション用コンテンツを決定するマーケティング情報提供システム。
【請求項７】
請求項６に記載のマーケティング情報提供システムであって、
前記画像解析部は、前記対象範囲における人物の行動軌跡、および各位置での滞在時間の抽出および解析を行い、
前記マーケティング情報蓄積部は、人物の行動に対応する商品に関連する商品情報を格納するものであり、
前記プロモーション実行判定部は、前記画像解析部による解析結果および前記商品情報に基づいて前記対象範囲における人物の興味対象となる商品のプロモーション用コンテンツを配信するように決定するマーケティング情報提供システム。
【請求項８】
請求項７に記載のマーケティング情報提供システムであって、
前記マーケティング情報蓄積部は、前記販売端末によりリアルタイムで得られる販売情報を格納し、前記プロモーション実行判定部は、前記販売情報に応じて関連する商品のプロモーション用コンテンツを配信するように決定するマーケティング情報提供システム。
【請求項９】
請求項７に記載のマーケティング情報提供システムであって、
前記プロモーション実行判定部は、前記画像解析部の解析結果と前記販売端末から得られる販売情報の少なくとも一方に応じて対象人物の購買行動を認識し、前記マーケティング情報蓄積部から前記対象人物の購買行動に関連する商品のプロモーション用コンテンツを抽出するマーケティング情報提供システム。
【請求項１０】
請求項６に記載のマーケティング情報提供システムであって、
前記マーケティング情報蓄積部は、商品の製造業者または納入業者に関する優先度情報を格納するものであり、
前記プロモーション実行判定部は、前記優先度情報に応じて配信するプロモーション用コンテンツを決定するマーケティング情報提供システム。
【請求項１１】
請求項１または２に記載のマーケティング情報提供システムであって、
前記コンテンツ再生部は、前記プロモーション用コンテンツの映像データを表示する表示部と、前記プロモーション用コンテンツに関連した情報として販売促進用のクーポンを印字する印字部を備えるマーケティング情報提供システム。
【請求項１２】
請求項１１に記載のマーケティング情報提供システムであって、
前記表示部は表示画面上で操作指示を行うタッチパネルを有し、このタッチパネルの操作に応じて前記印字部が前記クーポンの印字を行うマーケティング情報提供システム。
【請求項１３】
請求項６に記載のマーケティング情報提供システムであって、
前記マーケティング情報蓄積部は、商品に添付されたＩＣタグから得られる当該商品の移動情報を格納するものであり、
前記プロモーション実行判定部は、前記移動情報と前記販売情報とに基づいて配信するプロモーション用コンテンツを決定するマーケティング情報提供システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、店舗等においてプロモーション情報を提供するマーケティング情報提供システムに関する。
【背景技術】
【０００２】
従来のマーケティングシステムとして、ＰＯＳ等の店舗端末から供給される販売結果に基づいて販売対策を行っている。このようなシステムとして、販売実績の分析評価が簡単に行え、顧客分析とその結果に基づいた販促処理を同一のシステムで効率的に行うことができる顧客分析システムが提案されている（特許文献１参照）。
【０００３】
また、動的にマーケティング情報を収集し、その結果をリアルタイムにマーケティングに反映させるようにしたシステムとして、商品に付着させた送受信可能なＩＣタグを使用し、店内で顧客によって移動する商品を移動情報データとして収集し、各店のそれらのデータを中央にインターネットを介して収集し、商品毎及び販売店毎の比較解析を行い販売管理の効果を向上させるようにした動的マーケティング情報収集解析システムが提案されている（特許文献２参照）。
【０００４】
また、店舗の入出口に顧客端末（例えば顧客の携帯電話）との無線通信により顧客の入出を認識する顧客認識装置を配置し、各商品に顧客の商品への接近、接触、滞在時間等を検知するタグ装置をそれぞれ接続し、サービス提供サーバは、顧客認識装置およびタグ装置により検知した結果を顧客の履歴情報として収集し、その履歴情報に基づいて内容の詳細レベルを定めた商品情報、及び紹介する商品を定めたお勧め情報を、予め格納しておいた商品に関する情報から抽出して顧客端末へ送信することで、効率的に商品の紹介ができるようにした商品紹介方法および装置が提案されている（特許文献３参照）。
【０００５】
また、店舗内の画像情報から店舗内の顧客の位置情報を特定時間間隔で算出して顧客移動情報を収集し、商品に取り付けられた受発信装置からの情報により商品の位置情報を特定時間間隔で算出して商品移動情報を収集し、前記収集された顧客移動情報と商品移動情報及びその顧客が購買した商品購買情報とを対応付けて、特定の顧客が店舗に入ってから出るまでの間に選択、検討または購買した商品の情報を算出し、当該顧客の商品選択行動情報として収集するようにした商品選択行動情報算出方法およびその実施システムが提案されている（特許文献４参照）。
【０００６】
また、店舗に来店した顧客に対して、ディスプレイや液晶プロジェクタ等を使用したプロモーションを見せ、必要に応じてプリンタにより所定の案内を印刷してプロモーションの内容を売り場間で連携させることにより販売促進を図るようにした販売支援システムが提案されている（特許文献５参照）。
【０００７】
【特許文献１】特開２００１−２４３２１４号公報
【特許文献２】特開２００１−３５７０７３号公報
【特許文献３】特開２００２−３４２６４０号公報
【特許文献４】特開平１１−１７５５９７号公報
【特許文献５】特開２００４−１８４７５２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００８】
しかしながら、従来のマーケティング情報提供システムは、ＰＯＳ端末等の店舗端末からの情報や顧客からのアンケート結果などの、販売結果情報や顧客の嗜好情報に基づき販売対策を行っていることから、次回の来店を想定したプロモーション活動になっている。  つまり、現在来店している顧客に対するリアルタイムな販売促進活動が実現されていない。
【０００９】
また、リアルタイムにマーケティング情報を獲得し、その結果をリアルタイムに顧客に反映させる試みとしてＩＣタグを使用したシステムが提案されているが、ＩＣタグは各商品に付着させるので、商品の移動経路は把握可能となるが、顧客の行動パターンは収集できない。従って、商品購入の過程において吟味時間や迷った末に購入に至らなかったケース、および顧客の各商品に関する興味度など、マーケティングにおける重要な要素を獲得することができず、これらの情報をリアルタイムにマーケティング活動に反映させることができない。
【００１０】
また、顧客端末との無線通信により商品の紹介を行う方法は、顧客端末を所有していない顧客に対しては商品の紹介を行うことができない。また、顧客の商品選択行動情報を収集できるようにしたシステムが提案されているが、現在来店している顧客に対するリアルタイムな販売促進活動を実現するものではない。また、ディスプレイや液晶プロジェクタ等を使用したプロモーションを見せ、プロモーションの内容を売り場間で連携させることにより販売促進を図るようにした販売支援システムが提案されているが、顧客の行動に対応してプロモーションの内容を変更することはできない。
【００１１】
本発明は、上記事情に鑑みてなされたもので、所定位置において撮影した映像に基づいて顧客の行動を分析し、リアルタイムで顧客の行動に基づいて選定した有効なプロモーション情報を提供することが可能なマーケティング情報提供システムを提供することを目的とする。
【課題を解決するための手段】
【００１２】
本発明は、以下のいずれかの態様をとることが可能である。
本発明のマーケティング情報提供システムは、対象範囲の映像を撮影するカメラ部と、前記カメラ部から送出される映像データの画像処理を行う画像処理部と、前記画像処理部による画像処理結果および前記カメラ部により撮影した映像データを蓄積する映像蓄積部と、前記蓄積された映像データを解析して映像内における人物の行動の解析を行う画像解析部と、前記画像解析部により得られる人物の行動軌跡に応じて、商品のプロモーションの実行に関する判定を行うプロモーション実行判定部と、前記商品のプロモーション用のコンテンツデータを格納するプロモーションデータ格納部と、前記商品のプロモーション用コンテンツを配信する情報提供部と、前記配信されたプロモーション用コンテンツを再生するコンテンツ再生部とを備えるものである。
【００１３】
これにより、例えば店舗内等に設置したカメラ部から送出される映像データの画像処理および解析によって、人の動きや状況の把握、イベントの発生の監視等が可能であり、映像の中に含まれている人物情報、時間情報、イベント情報、状態変化情報等を取得し、人物の行動を解析して行動軌跡の学習、認識等を行い、この解析結果をもとに、プロモーション実行判定部により対象の人物（顧客）に対してどのようなプロモーション用コンテンツを提供するかなどの判定を行うことで、リアルタイムに顧客の行動に基づいて選定した有効なプロモーション情報を提供することが可能となる。
【００１４】
また、本発明の一態様として、上記のマーケティング情報提供システムであって、前記カメラ部および前記コンテンツ再生部と前記情報提供部とは通信網を介して接続され、前記情報提供部は、前記通信網を介して前記コンテンツ再生部にプロモーション用コンテンツを配信するものとする。
これにより、ネットワーク等の通信網を介して撮影映像における人物の行動を解析し、対象の人物（顧客）に対してその顧客の行動に基づいて選定した有効なプロモーション情報を提供することが可能となる。
【００１５】
また、本発明の一態様として、上記のマーケティング情報提供システムであって、前記プロモーション実行判定部は、前記人物の行動軌跡に応じて、商品のプロモーションを行うかどうかの判定、およびどのプロモーション用コンテンツを配信するかの判定を行うものとする。
これにより、対象の人物（顧客）の行動軌跡に応じて、その顧客に対して商品のプロモーションを行うかどうかの判定、およびどのプロモーション用コンテンツを配信するかの判定を行って有効なプロモーション情報を提供することが可能となる。
【００１６】
また、本発明の一態様として、上記のマーケティング情報提供システムであって、前記プロモーションデータ格納部は、映像データと音声データとを含むコンテンツデータを格納するものであり、前記コンテンツ再生部は、前記プロモーション用コンテンツの映像データを表示する表示部と、前記プロモーション用コンテンツの音声データを再生する音声再生部とを有するものとする。
これにより、プロモーション用コンテンツを提供する場合において、映像データを用いた視覚的なプロモーション活動、および音声データを用いた聴覚的なプロモーション活動を行うことが可能となる。
【００１７】
また、本発明の一態様として、上記のマーケティング情報提供システムであって、前記人物の行動軌跡を検知するための検知部をさらに備えるものとする。
これにより、検知部として例えば距離センサ、赤外線センサ、温度センサ等を設けることで、検知部からの検知情報に基づいてより詳細に人の動きや状況の把握を行うことができ、カメラ部からの映像だけを用いる場合と比較して、人物の行動軌跡、動作や姿勢の認識、あるいは個人識別などにおいて、より精度の高い識別が可能になる。
【００１８】
また、本発明の一態様として、上記のマーケティング情報提供システムであって、販売端末から得られる販売情報を含むマーケティング情報を収集および管理するマーケティング情報蓄積部を備え、前記プロモーション実行判定部は、前記マーケティング情報蓄積部からのマーケティング情報に基づいて配信するプロモーション用コンテンツを決定するものとする。
これにより、マーケティング情報蓄積部からの販売情報を含むマーケティング情報をもとに、配信すべき適切なプロモーション用コンテンツを判定することが可能となる。
【００１９】
また、本発明の一態様として、上記のマーケティング情報提供システムであって、前記画像解析部は、前記対象範囲における人物の行動軌跡、および各位置での滞在時間の抽出および解析を行い、前記マーケティング情報蓄積部は、人物の行動に対応する商品に関連する商品情報を格納するものであり、前記プロモーション実行判定部は、前記画像解析部による解析結果および前記商品情報に基づいて前記対象範囲における人物の興味対象となる商品のプロモーション用コンテンツを配信するように決定するものとする。
これにより、人物の行動軌跡および各位置での滞在時間に基づき、例えば店舗内の顧客の行動パターン、行動軌跡、行動履歴、商品棚等の各位置での立ち寄り時間、商品購買パターンなどをリアルタイムに抽出、解析を行うことが可能であり、各顧客にとって興味がある商品情報、あるいは顧客の行動軌跡や購買履歴に基づく各商品の関連情報などを得ることができる。この情報を顧客に配信するプロモーション用コンテンツを決定する際の判断基準に用いることで、有効なプロモーション用コンテンツを提供することが可能となる。
【００２０】
また、本発明の一態様として、上記のマーケティング情報提供システムであって、前記マーケティング情報蓄積部は、前記販売端末によりリアルタイムで得られる販売情報を格納し、前記プロモーション実行判定部は、前記販売情報に応じて関連する商品のプロモーション用コンテンツを配信するように決定するものとする。
これにより、販売情報に基づいて例えば現在の売れ筋商品等がリアルタイムに把握でき、動的に変化する販売状況に応じたプロモーション活動が可能となる。
【００２１】
また、本発明の一態様として、上記のマーケティング情報提供システムであって、前記プロモーション実行判定部は、前記画像解析部の解析結果と前記販売端末から得られる販売情報の少なくとも一方に応じて対象人物の購買行動を認識し、前記マーケティング情報蓄積部から前記対象人物の購買行動に関連する商品のプロモーション用コンテンツを抽出するものとする。
これにより、画像解析部の解析結果と販売端末から得られる販売情報の少なくとも一方に基づき、対象人物の購買行動や興味に即した関連する商品のプロモーション用コンテンツを抽出して提供することが可能となる。
【００２２】
また、本発明の一態様として、上記のマーケティング情報提供システムであって、前記マーケティング情報蓄積部は、商品の製造業者または納入業者に関する優先度情報を格納するものであり、前記プロモーション実行判定部は、前記優先度情報に応じて配信するプロモーション用コンテンツを決定するものとする。
これにより、例えば商品の製造業者または納入業者から店舗側に対する補助金、貢献度などの優先度情報に応じて、顧客に対し配信すべきプロモーション用コンテンツを決定する際に優先順位付けを行って配信することが可能となる。また、例えば商品の製造業者または納入業者から広告補助費を獲得することも可能である。また、プロモーションを行ってもらいたい製造業者または納入業者側にとっても、例えば新開発商品や重点販売促進商品などを業者側から重点的な広告を行いたい場合に、実際の店舗上で効果的な商品プロモーション活動が可能になる。
【００２３】
また、本発明の一態様として、上記のマーケティング情報提供システムであって、前記コンテンツ再生部は、前記プロモーション用コンテンツの映像データを表示する表示部と、前記プロモーション用コンテンツに関連した情報として販売促進用のクーポンを印字する印字部を備えるものとする。
これにより、提供するプロモーション用コンテンツに関連した販売促進用のクーポンを印字して発券等を行うことが可能である。
【００２４】
また、本発明の一態様として、上記のマーケティング情報提供システムであって、前記表示部は表示画面上で操作指示を行うタッチパネルを有し、このタッチパネルの操作に応じて前記印字部が前記クーポンの印字を行うものとする。
これにより、プロモーション用コンテンツを閲覧する人物がタッチパネルを操作することで、特定のクーポンの選択、印字、発券等をタッチパネルを用いて行うことが可能となる。
【００２５】
また、本発明の一態様として、上記のマーケティング情報提供システムであって、前記マーケティング情報蓄積部は、商品に添付されたＩＣタグから得られる当該商品の移動情報を格納するものであり、前記プロモーション実行判定部は、前記移動情報と前記販売情報とに基づいて配信するプロモーション用コンテンツを決定するものとする。
これにより、例えば店舗内の各商品にＩＣタグが添付されている場合に、ＩＣタグから得られる商品の移動情報に基づき、特定人物が購入した商品の移動情報などをマーケティング情報蓄積部に蓄積し、個別の商品の購買情報と移動情報の関係等を得ることが可能である。また、商品の購買情報と移動情報の関係をもとに、配信すべき適切なプロモーション用コンテンツを決定することが可能となる。また、商品の移動情報と画像解析による対象人物の行動軌跡情報の双方の情報を用いて、有効なプロモーション用コンテンツを選択して配信することも可能である。
【発明の効果】
【００２６】
本発明によれば、所定位置において撮影した映像に基づいて顧客の行動を分析し、リアルタイムで顧客の行動に基づいて選定したプロモーション情報を提供することが可能なマーケティング情報提供システムを提供できる。
【発明を実施するための最良の形態】
【００２７】
（第１の実施形態）
図１は本発明の第１の実施形態に係るマーケティング情報提供システムの構成を示すブロック図である。本実施形態は、リアルタイムにマーケティング情報を提供可能としたシステム構成例である。
【００２８】
第１の実施形態のマーケティング情報提供システムは、複数のカメラ部（カメラ）１１、１２、１３、１４と、画像処理部１９と、映像蓄積部１８と、画像解析部２１と、プロモーション実行判定部２２と、プロモーションデータ格納部２３と、プロモーションデータ編集部２４と、情報提供部２０と、複数のディスプレイ装置（ディスプレイ）１５、１６とを有して構成される。
【００２９】
カメラ部１１〜１４は、通信網１７に接続され、各配設位置の画像を撮像するもので、人の動きや状況の把握、またイベントの発生の監視や映像伝送を行うために設けられる。  画像処理部１９は、各カメラ部１１〜１４から送出される映像の画像処理を行う。映像蓄積部１８は、画像処理部１９により画像処理された処理結果の画像データ、および各カメラ部１１〜１４から伝送された映像データを蓄積する。
【００３０】
画像解析部２１は、蓄積された映像データを解析して、現場状況の認識および人物の動きの解析を行い、行動軌跡情報を生成する。プロモーション実行判定部２２は、画像解析部２１により得られる人物の行動軌跡動向に応じて、商品のプロモーションを行うかどうかの判定、およびどのプロモーション用コンテンツを提供するかの判定を行う。プロモーションデータ格納部２３は、プロモーション実行判定部２２の判定結果により商品のプロモーションを行う場合に提供する各商品のプロモーション用のコンテンツデータを格納している。プロモーションデータ編集部２４は、プロモーションデータ格納部２３に格納されたプロモーションデータをプロモーション実行判定部２２により指定された長さに編集する。情報提供部２０は、プロモーションデータ編集部２４により編集されたプロモーション用コンテンツを通信網１７を通して配信して情報提供を行う。ディスプレイ装置１５、１６は、情報提供部２０から提供されたプロモーション用コンテンツを受信して表示、再生する。なお、ディスプレイ装置１５、１６には音声再生用のスピーカを備えるようにしてもよい。
【００３１】
上記のように構成された第１の実施形態のマーケティング情報提供システムについて、その動作を図１を用いて説明する。
【００３２】
まず、各カメラ部１１〜１４より得られる映像や音声のようなマルチメディアデータを画像処理部１９により画像処理することにより、その映像の中に含まれている人物情報、時間情報、イベント情報、状態変化情報等を取得し、取得した情報に基づいて画像解析部２１で人物の行動情報を解析して学習および認識し、その人物行動の認識結果をもとにその人物に対してどのようなプロモーションデータを表示するべきかどうかをプロモーション実行判定部２２により判定し、指定されたプロモーションデータを情報提供部２０を通して特定のディスプレイ装置１５、１６に対して送信を行い、行動軌跡をもとに特定人物に対してプロモーションデータをリアルタイムに表示する。
【００３３】
なお、入力ソースとしてここではカメラ部２１〜２４を例として挙げ、カメラ映像から画像処理部１９により画像処理を行った結果をもとに、画像解析部２１により人物の行動軌跡の獲得を行ったが、入力ソースとして距離センサ、赤外線センサ、温度センサ等の各種入力デバイス機器を用い、画像解析部２１は各センサの情報をもとに人物の行動軌跡を獲得することもできる。
【００３４】
また、画像入力装置としてのカメラ部２１〜２４と距離センサ、赤外線センサ、温度センサ等の各種入力デバイス機器とを併用することで、画像解析部２１は、画像処理部１９により得られる情報から人物の動きを解析、学習するだけでなく、各センサの情報をもとに人物の行動を把握することができる。したがって、人物の行動軌跡、動作や姿勢および個人識別を行う場合において、カメラだけを用いて行う場合と比較して、より精度の高い識別が可能になる。
【００３５】
また、配信するプロモーション用コンテンツは、ディスプレイ装置１５、１６を用いて表示する映像ソースや文字情報、あるいはスピーカを用いて再生する音声ソースなど、様々なメディアを配信することもできる。
【００３６】
このような第１の実施形態によれば、人物の行動軌跡をリアルタイムに検出し、獲得した情報をもとに特定人物に対してカスタマイズされたマルチメディアデータを配信することが可能となり、画一的なデータを配信することと比較して効果的なプロモーションデータ配信を行うことが可能となる。また、人物の行動をリアルタイムに把握することにより、人物が存在しない箇所のディスプレイ装置１５、１６の電源を自動でオフすることもでき、省エレルギー化にも有用となる。なお、プロモーションデータの配信対象となる人物は１人とは限らず、複数人の場合、あるいは特定集団に対するプロモーションデータの配信も可能である。
【００３７】
（第２の実施形態）
図２は本発明の第２の実施形態に係るマーケティング情報提供システムにおける店舗での配置構成を示す説明図である。第２の実施形態は、上記第１の実施形態のマーケティング情報提供システムをより具体的に説明する例である。
【００３８】
図２の店舗マップに示すように、店舗内には、監視用のカメラ（第１カメラ〜第６カメラ）３１〜３６が複数台配置されており、また、ディスプレイ（ディスプレイＡ〜ディスプレイＤ）３７〜４０も複数台設置されている。なお、マーケティング情報提供システムのブロック構成は、カメラおよびディスプレイの台数が異なる点を除いて、図１に示した第１の実施形態と同じである。
【００３９】
図３は第２の実施形態のマーケティング情報提供システムにおける各カメラの映像を示す図であり、任意の時間においてカメラ３１〜３６から入力される映像を示している。第１カメラ画面４１は第１カメラ３１からの映像を、第２カメラ画面４２は第２カメラ３２からの映像を、第３カメラ画面４３は第３カメラ３３からの映像を、第４カメラ画面４４は第４カメラ３４からの映像をそれぞれ示している。図示しないが、その他のカメラからの映像も同様である。また、第３カメラ画面４３に写っている人物Ａ４５は、本実施形態においてプロモーションデータを配信する対象となる顧客である。これらの入力映像を基に画像処理部１９により画像処理を行い、画像内の人物を抽出する。その画像処理結果を図４に示す。
【００４０】
図４は第２の実施形態のマーケティング情報提供システムにおける画像処理結果を示す図である。図４（Ａ）において、第１カメラ画像処理結果５６は第１カメラ３１からの映像に基づく画像処理結果を、第２カメラ画像処理結果５７は第２カメラ３２からの映像に基づく画像処理結果を、第３カメラ画像処理結果５８は第３カメラ３３からの映像に基づく画像処理結果を、第４カメラ画像処理結果５９は第４カメラ３４からの映像に基づく画像処理結果をそれぞれ示している。図示しないが、その他のカメラからの映像に基づく画像処理結果も同様である。
【００４１】
また、図４（Ｂ）に示すように、第３カメラ画像処理結果５８において抽出された人物Ａ６０については、画像処理部１９により第３カメラ画像処理結果情報４６の情報が同時に生成される。この画像処理により得られる画像処理結果情報４６は、服装４７、色情報４８、顔情報４９、髪型５０、身長５１、体型５２、年齢５３、性別５４、店舗内位置５５、選択商品６８等が含まれる。他カメラからの映像に関しても同様な画像処理結果が得られる。これら画像処理部１９により得られる処理結果を、映像とともに映像蓄積部１８に蓄積する。
【００４２】
画像解析部２１は、得られた画像処理結果情報４６を映像蓄積部１８から取り出し、各人物毎の行動軌跡、購買履歴、各売場毎の滞在時間、および商品棚から手にとった商品、また商品棚に戻した商品、あるいはカゴに入れた商品情報などを抽出する。例えば、人物Ａ４５の行動軌跡の場合、画像解析部２１は特定人物に対して時系列的な立ち寄り位置、および各立ち寄り位置での滞在時間を計算する。
【００４３】
図５は第２の実施形態のマーケティング情報提供システムにおいて画像解析部により得られる人物Ａに関する行動軌跡情報を示す図であり、図６は第２の実施形態のマーケティング情報提供システムにおいて抽出された人物Ａの行動軌跡を示す図である。画像解析部２１には、事象ごとに個別に付与される番号６２、時間６３、人物Ａ４５が写っているカメラ番号６４（第１カメラ０１〜第６カメラ０６）、人物Ａが滞在した場所情報Ａ６５、場所情報Ｂ６６、その場所での滞在時間６７が時系列のデータとしてテーブル状にまとめられている。図５において、時間６３及び滞在時間６７は千分の１秒単位で示しており、時間６３は、例えば２００４年９月３日１９時４０分１秒７８２（事象番号００２８）、同２秒９７０（事象番号００４６）などの絶対時間を示し、滞在時間６７は各事象間の絶対時間の差を示している。この図５の行動軌跡情報を図２の店舗マップにマッピングした例を図６に示す。店舗マップ上への行動軌跡のマッピングは、場所情報Ａ６５、場所情報Ｂ６６の情報を用いて行われる。図６の例では、人物Ａ４５は本のコーナー、お酒のコーナーに滞在し、その後ディスプレイＣ７３の方向に向かって歩いている例を示している。  図６には、人物Ａ４５の行動軌跡７５、および滞在Ａ１ポイント７６、滞在Ａ２ポイント７７が図示されている。ここでは、滞在Ａ１ポイント７６に０分１秒３２滞在し、滞在Ａ２ポイント７７に０分１４秒９１秒滞在していることを示している。
【００４４】
この第２の実施形態により、特定人物の行動軌跡、各売場での滞在ポイント、滞在時間が把握できる。店舗内に入店した顧客が特定場所において滞在することは、その商品棚の品物に対して興味を示しているということができる。また、滞在時間の長さに応じて興味の度合いの計測、また商品購入時の迷いの指標の計測も可能となる。このように、特定顧客毎の行動を把握することで、顧客毎の興味を持つ商品群をリアルタイムに把握することが可能となり、その人物の行動および興味情報に即した商品のプロモーションデータを配信することが可能となる。
【００４５】
プロモーションデータの配信例としては、滞在Ａ２ポイント７７（お酒のコーナー）に立ち寄った顧客に対して、ディスプレイＣ７３の前を通過する時点で、お酒と関連したおつまみ商品のプロモーションデータの配信を行う。この顧客はお酒のコーナーに立ち寄り、お酒の種類を吟味し、そして商品の選択／非選択を行っている。この例では、お酒に興味を持った顧客がディスプレイＣ７３の付近（表示タイミングポイント７８）に行った際におつまみのプロモーションデータを配信するというプログラムに沿ったものである。画像処理部１９および画像解析部２１によりこれらの対象者の行動を把握し、そしてタイミング良く商品のプロモーションデータを配信することで、効果的な商品のプロモーション活動が実施できる。なお、上記例では、顧客がディスプレイＣ７３の前を通過する際に、すなわち人物Ａ４５が表示タイミングポイント７８に到達した時に、プロモーションデータを表示させているが、この顧客が滞在Ａ２ポイント７７でお酒を吟味している時に、その商品と関連したプロモーションデータ（例えば、おつまみ商品のプロモーション）をディスプレイＢ７２を通して配信してもよい。配信するタイミングおよび配信先のディスプレイは設定により任意に決定することができる。
【００４６】
また、プロモーションデータの配信を行い、表示ディスプレイ（ディスプレイ装置）上でデータを流している間、顧客の行動を画像処理部１９および画像解析部２１により把握し、実際にディスプレイ付近で立ち止まった顧客、あるいは立ち止まらなかった顧客の情報を管理、蓄積することにより、プロモーションデータの実際の広告効果が測定できる。  また、このような実際に視聴した顧客の割合を店舗側あるいはプロモーションデータを提供した側に対し、フィードバックを掛けることにより、販売促進効果を推定することが可能となる。なお、画像処理部１９および画像解析部２１により獲得できる顧客の滞在場所情報等の行動軌跡情報の詳細に関しては、選択した商品棚の位置、吟味した個別商品銘柄の情報等のより詳細な情報を用いても良い。
【００４７】
（第３の実施形態）
図７は本発明の第３の実施形態に係るマーケティング情報提供システムの構成を示すブロック図、図８は第３の実施形態のマーケティング情報提供システムのデータ配信プログラムにおいて用いる情報を示す図である。
【００４８】
第３の実施形態のマーケティング情報提供システムは、複数のカメラ部（カメラ）８１、８２、８３、８４と、画像処理部８９と、映像蓄積部８８と、画像解析部９１と、マーケティング情報蓄積部９５と、プロモーション実行判定部９２と、プロモーションデータ格納部９３と、プロモーションデータ編集部９４と、情報提供部９０と、複数のディスプレイ装置（ディスプレイ）８５、８６とを有して構成される。
【００４９】
カメラ部８１〜８４は、通信網８７に接続され、各配設位置の画像を撮像するもので、人の動きや状況の把握、またイベントの発生の監視や映像伝送を行うために設けられる。  画像処理部８９は、各カメラ部８１〜８４から送出される映像の画像処理を行う。映像蓄積部８８は、画像処理部８９により画像処理された処理結果の画像データ、および各カメラ部８１〜８４から伝送された映像データを蓄積する。
【００５０】
画像解析部９１は、蓄積された映像データを解析して、現場状況の認識および人物の動きの解析を行い、行動軌跡情報を生成する。マーケティング情報蓄積部９５は、店舗に設置されているマルチメディア端末、ＰＯＳ端末、キヨスク端末等の販売端末から得られる販売情報等のマーケティング情報の収集および管理を行う。プロモーション実行判定部９２は、画像解析部９１およびマーケティング情報蓄積部９５により得られる人物の行動軌跡、およびマーケティング情報に応じて、商品のプロモーションを行うかどうかの判定、およびどのプロモーション用コンテンツを提供するかの判定を行う。プロモーションデータ格納部９３は、プロモーション実行判定部９２の判定結果により商品のプロモーションを行う場合に提供する各商品のプロモーション用のコンテンツデータを格納している。プロモーションデータ編集部９４は、プロモーションデータ格納部９３に格納されたプロモーションデータをプロモーション実行判定部９２により指定された長さに編集する。情報提供部９０は、プロモーションデータ編集部９４により編集されたプロモーション用コンテンツを通信網８７を通して配信して情報提供を行う。ディスプレイ装置８５、８６は、情報提供部９０から提供されたプロモーション用コンテンツを受信して表示、再生する。
【００５１】
上記のように構成された第３の実施形態のマーケティング情報提供システムについて、その動作を図７および図８を用いて説明する。
【００５２】
マーケティング情報蓄積部９５には、マルチメディア端末、ＰＯＳ端末等からの情報がリアルタイムに格納されており、現在の販売状況、在庫情報、他店舗からの販売情報などが格納される。それらのマーケティング情報に基づいて、プロモーション実行判定部９２は、予め設定されたデータ配信プログラム１０１により、現在売れている売れ筋商品１０２、あまり売れていない死に筋商品１０３、顧客に勧められるお勧め商品１０４、戦略的に販売したい戦略商品１０５、利益率の高い高利益率商品１０６、在庫数の多い在庫数大商品１０７等の優先事項をもとに、各顧客に配信するプロモーションデータ決定し、情報提供部９０を通してディスプレイ装置８５〜８６に向け配信を行う。
【００５３】
このような第３の実施形態によれば、現在の販売状況や店舗において販売促進を行いたい商品、あるいはフランチャイズチェーン展開している店舗においては総合的な販売戦略に基づいたプロモーションデータの配信などを行うことが可能となる。ただ単に機械的にプロモーションデータを配信するのと比較して、各顧客の行動タイミングにあわせたプロモーションデータの配信が可能になり、また店舗における商品の販売戦略をより反映させたプロモーション活動が可能となる。なお、表示媒体となるディスプレイの設置場所や構成に制限はなく、液晶表示パネルやＣＲＴ等のディスプレイの他に、商品棚と商品棚の間の隙間に例えばＬＥＤ表示のディスプレイを配設してデータを表示させることも可能である。
【００５４】
（第４の実施形態）
図９は本発明の第４の実施形態のマーケティング情報提供システムにおける商品関連性情報の具体例を示す図である。第４の実施形態のマーケティング情報提供システムのブロック構成は図７に示した第３の実施形態と同じである。
【００５５】
第４の実施形態のマーケティング情報提供システムについて、その動作を図７および図９を用いて説明する。各カメラ部８１〜８４からの情報に基づき、画像処理部８９および画像解析部９１を通して、各商品棚において顧客が滞在した位置、顧客が興味を示した各商品等の行動軌跡情報に基づき関連する商品情報がマーケティング情報蓄積部９５に格納される。また、マーケティング情報蓄積部９５には、同様に店舗におけるＰＯＳ端末からの販売情報がリアルタイムに蓄積され、この販売情報から各商品ごとの販売状況が確認できる。これらの情報から各商品毎の相関性が確認でき、マーケティング情報を提供する際に利用することが可能である。例えば、カレー粉を購入した顧客はジャガイモを購入する確率が高いなどの各商品間の関連性を示す情報である。
【００５６】
図９に示した商品関連性情報１１１は、お弁当を購入した顧客に対して、同時に他のどの商品を購入したかという商品関連性の具体例である。この例は、弁当購入顧客総数１１２が１５０人のうち、弁当のみ購入顧客数１１３として弁当のみを購入しその他の商品は購入しなかった人物は４０人、飲み物購入顧客数１１４として飲み物を弁当と一緒に購入した顧客は８５人、本購入顧客数１１５として本を弁当と一緒に購入した顧客は３０人、お酒購入顧客数１１６としてお酒を弁当と一緒に購入した顧客は１３人であったという商品関連性を示すマーケティングデータである。この商品関連性情報１１１から、お弁当を購入した顧客は飲み物コーナーに行く可能性が高いと判断できる。
【００５７】
このような例から、様々な商品毎の関連性情報をマーケティング情報蓄積部９５に蓄えておく。画像処理部８９、画像解析部９１より各顧客の行動軌跡や滞在時間をリアルタイムに獲得している状況において、プロモーション実行判定部９２は、マーケティング情報蓄積部９５から関連性情報に基づく関連商品の商品情報を得て、その対象となる顧客が該当する商品の陳列場所付近に来たとき、あるいは現在吟味している付近のディスプレイに対して、関連する商品のプロモーションデータを情報提供部９０を通して配信し、ディスプレイ８５〜８６に表示させる。
【００５８】
このような第４の実施形態によれば、店舗内の顧客の行動軌跡をリアルタイムに獲得するとともに、対象商品の関連性情報を得ることにより、顧客が立ち寄って興味を持った商品とその商品と相関関係のある（同時に購入する可能性の高い）商品のプロモーションデータの配信が可能となる。実際に購入したかどうかの判断は顧客がレジカウンタに行き、精算をするまでＰＯＳには登録されないが、本実施形態では、顧客が立ち寄る場所や商品の吟味時間等の滞在時間の計測をリアルタイムで行い、購入商品候補として認識し、その商品と関連の高いデータをリアルタイムで表示することで、顧客に対する関連商品の消費購買意欲を高めることが可能となる。なお、顧客に対し配信を行うプロモーションデータは、本実施形態では店舗内の商品のプロモーションデータを例に挙げているが、店舗のプロモーションまたは店舗に納品を行っている製造メーカのプロモーションあるいは企業のプロモーション、ＴＶ、音楽等の芸能関係のプロモーション等、広告媒体の対象となるものを扱うことも可能である。
【００５９】
（第５の実施形態）
第５の実施形態のマーケティング情報提供システムのブロック構成は図７に示した第３の実施形態と同じである。以下に第５の実施形態のマーケティング情報提供システムについてその動作を説明する。
【００６０】
マーケティング情報蓄積部９５には、店舗に商品を納入している各商品製造メーカからの貢献度等の優先度情報が入っている。例えば、製造メーカからの販売補助金であったり、商品の価格、リベート等の情報である。プロモーション実行判定部９２は、上記優先度情報（貢献度の情報）をもとに配信すべきプロモーションデータを決定する。
【００６１】
このような第５の実施の形態によれば、店舗に商品を納入しているメーカの貢献度に応じた商品のプロモーション活動ができ、納入業者は店舗において重点的に販売促進を行いたい商品に関してプロモーション活動が行える。また、店舗側としては、顧客に配信すべきプロモーションデータの優先配信権を納入業者側に販売することが可能となり、プロモーションデータの配信サービスとして新たな収入源になりうる。また、プロモーションデータの配信を行い、表示ディスプレイ上でデータを流している間、顧客の行動を画像処理部８９および画像解析部９１により把握し、実際にディスプレイ付近で立ち止まった顧客、あるいは立ち止まらなかった顧客の情報等を管理、蓄積することにより、プロモーションデータの実際の広告効果が測定できる。また、このような実際に視聴した顧客の割合を店舗側、あるいはプロモーションデータを提供した側に対し、フィードバックを掛けることにより、販売促進効果を推定することが可能となり、配信したプロモーションデータの視聴率に応じた課金を行うことも可能になり、宣伝効果に応じた広告費を見積もることが可能となる。
【００６２】
（第６の実施形態）
図１０は本発明の第６の実施形態に係るマーケティング情報提供システムの構成を示すブロック図である。
【００６３】
第５の実施形態のマーケティング情報提供システムは、複数のカメラ部（カメラ）１２１、１２２、１２３、１２４と、画像処理部１２９と、映像蓄積部１２８と、画像解析部１３１と、マーケティング情報蓄積部１３５と、プロモーション実行判定部１３２と、プロモーションデータ格納部１３３と、プロモーションデータ編集部１３４と、情報提供部１３０と、複数のディスプレイ装置（ディスプレイ）１２５、１２６と、各ディスプレイ装置１２５、１２６にそれぞれ接続された各プリンタ装置（プリンタ）１３６、１３７とを有して構成される。
【００６４】
カメラ部１２１〜１２４は、通信網１２７に接続され、各配設位置の画像を撮像するもので、人の動きや状況の把握、またイベントの発生の監視や映像伝送を行うために設けられる。画像処理部１２９は、各カメラ部１２１〜１２４から送出される映像の画像処理を行う。映像蓄積部１２８は、画像処理部１２９により画像処理された処理結果の画像データ、および各カメラ部１２１〜１２４から伝送された映像データを蓄積する。
【００６５】
画像解析部１３１は、蓄積された映像データを解析して、現場状況の認識および人物の動きの解析を行い、行動軌跡情報を生成する。マーケティング情報蓄積部１３５は、店舗に設置されているマルチメディア端末、ＰＯＳ端末、キヨスク端末等から得られる情報の収集および管理を行う。プロモーション実行判定部１３２は、画像解析部１３１およびマーケティング情報蓄積部１３５により得られる人物の行動軌跡、およびマーケティング情報に応じて、商品のプロモーションを行うかどうかの判定、およびどのプロモーション用コンテンツを提供するかの判定を行う。プロモーションデータ格納部１３３は、プロモーション実行判定部１３２の判定結果により商品のプロモーションを行う場合に提供する各商品のプロモーション用のコンテンツデータを格納している。プロモーションデータ編集部１３４は、プロモーションデータ格納部１３３に格納されたプロモーションデータをプロモーション実行判定部１３２により指定された長さに編集する。情報提供部１３０は、プロモーションデータ編集部１３４により編集されたプロモーション用コンテンツを通信網１２７を通して配信して情報提供を行う。ディスプレイ装置１２５、１２６は、情報提供部１３０から提供されたプロモーション用コンテンツを受信して表示、再生し、プリンタ装置１３６、１３７は、提供されたプロモーション用コンテンツを印字出力する。
【００６６】
第６の実施形態では、先に述べた実施形態と同様の動作により、顧客に対し商品のプロモーションデータをディスプレイ１２５、１２６に表示した場合において、表示したプロモーションデータに対象人物が興味を示した場合、ディスプレイ１２５、１２６に接続されてあるプリンタ１３６、１３７から特定商品の割引クーポン券を発券するなど、提供情報の印字をできるようにする。
【００６７】
このような第６の実施の形態によれば、プロモーションデータを配信し表示させるだけでなく、その配信データに関係する商品の販売促進用クーポン券の発券など、関連情報の印字を行うことにより、各顧客の行動や商品の興味度に応じた販売促進活動ができる。なお、表示用のディスプレイをタッチパネル方式にすれば、顧客が自分で発券の処理を行うことが可能となる。また、プロモーション実行判定部１３２により選択されたプロモーションデータではなく、顧客個人が自分の嗜好に合ったデータをタッチパネルを用いて探すことが可能になり、店舗側から配信させるプロモーションデータだけでなく、個人の嗜好に合ったプロモーションデータを選択でき、またそれに付随したクーポン券の発券も可能になる。
【００６８】
（第７の実施形態）
第７の実施形態のマーケティング情報提供システムのブロック構成は図１０に示した第６の実施形態と同じである。以下に第７の実施形態のマーケティング情報提供システムについてその動作を説明する。
【００６９】
第７の実施形態では、各商品ごとにＩＣタグを添付する。この添付されたＩＣタグから得られる各商品ごとの移動情報を、リアルタイムにマーケティング情報蓄積部１３５に蓄積を行う。また、同時に画像処理部１２９および画像解析部１３１により各人物の行動軌跡や各位置における滞在時間等の行動軌跡情報をマーケティング情報蓄積部１３５にリアルタイムで格納する。プロモーション実行判定部１３２は、マーケティング情報蓄積部１３５から得られる商品の移動情報を含む情報をもとに配信すべきプロモーションデータを決定し、情報提供部１３０を通して配信を行う。これにより、適切なプロモーションデータが適切な位置のディスプレイ１２５、１２６において表示される。
【００７０】
このような第７の実施形態によれば、ＩＣタグを商品に添付することにより、詳細な商品ごとの移動情報が獲得できるため、特定人物が選択した各商品の移動情報（ＩＣタグからの情報）をマーケティング情報蓄積部１３５に蓄積し、このマーケティング情報蓄積部１３５から得られる個別の商品の販売情報と移動情報の関係をもとにプロモーション実行判定部１３２が配信すべきプロモーションデータを決定することが可能となる。また、商品毎の移動情報と、画像処理部１２９および画像解析部１３１により得られる顧客の行動軌跡や滞在時間等の行動軌跡情報とを組み合わせることで、人物の行動軌跡と商品の移動履歴とを対応付けることが可能となり、この対応情報をマーケティング情報蓄積部１３５に格納することで、プロモーション実行判定部１３２は対応情報を用いて適切な配信データを決定することが可能になる。
【００７１】
上述したように、本実施形態によれば、店舗内等の対象範囲にカメラを設置し、カメラからの映像情報に対して画像処理を行うことで顧客である人物の行動軌跡をリアルタイムに抽出し、顧客の行動パターン、購買パターン等をマーケティングシステムに反映させ、獲得した情報をもとに行動軌跡や購買興味等に則した販売促進情報を提供できるように、特定人物に対してカスタマイズされた映像や音声等のマルチメディアデータをリアルタイムで適切な場所に配信することが可能となる。このため、画一的な情報を配信することと比較して、効果的なプロモーションデータ配信を行うことができる。
【産業上の利用可能性】
【００７２】
本発明は、所定位置において撮影した映像に基づいて顧客の行動を分析し、リアルタイムで顧客の行動に基づいて選定した有効なプロモーション情報を提供することが可能となる効果を有し、店舗等においてプロモーション情報を提供するマーケティング情報提供システム等に有用である。
【図面の簡単な説明】
【００７３】
【図１】本発明の第１の実施形態に係るマーケティング情報提供システムの構成を示すブロック図
【図２】本発明の第２の実施形態に係るマーケティング情報提供システムにおける店舗での配置構成を示す説明図
【図３】第２の実施形態のマーケティング情報提供システムにおける各カメラの映像を示す図
【図４】第２の実施形態のマーケティング情報提供システムにおける画像処理結果を示す図
【図５】第２の実施形態のマーケティング情報提供システムにおいて画像解析部により得られる人物に関する行動軌跡情報を示す図
【図６】第２の実施形態のマーケティング情報提供システムにおいて抽出された人物の行動軌跡を示す図
【図７】本発明の第３の実施形態に係るマーケティング情報提供システムの構成を示すブロック図
【図８】第３の実施形態のマーケティング情報提供システムのデータ配信プログラムにおいて用いる情報を示す図
【図９】本発明の第４の実施形態のマーケティング情報提供システムにおける商品関連性情報の具体例を示す図
【図１０】本発明の第６の実施形態に係るマーケティング情報提供システムの構成を示すブロック図
【符号の説明】
【００７４】
１１〜１４、３１〜３６、８１〜８４、１２１〜１２４  カメラ部（カメラ）
１５、１６、３７〜４０、８５、８６、１２５、１２６  ディスプレイ装置（ディスプレイ）
１７、８７、１２７  通信網
１８、８８、１２８  映像蓄積部
１９、８９、１２９  画像処理部
２０、９０、１３０  情報提供部
２１、９１、１３１  画像解析部
２２、９２、１３２  プロモーション実行判定部
２３、９３、１３３  プロモーションデータ格納部
２４、９４、１３４  プロモーションデータ編集部
９５、１３５    マーケティング情報蓄積部
１３６、１３７  プリンタ装置（プリンタ）
【図１】
2006113711.tif 000003
【図２】
2006113711.tif 000004
【図３】
2006113711.tif 000005
【図４】
2006113711.tif 000006
【図５】
2006113711.tif 000007
【図６】
2006113711.tif 000008
【図７】
2006113711.tif 000009
【図８】
2006113711.tif 000010
【図９】
2006113711.tif 000011
【図１０】
2006113711.tif 000012