(57)【要約】【課題】  顧客の人物特徴が個人情報としてより正確に判断できると共にその個人情報に基づく顧客層に対応した即時の販売促進サービスが提供できる。【解決手段】  画像処理部５１が、複数のカメラ１１〜１８それぞれが連続して撮影した商品購買顧客の複数画面から、顧客個人の性別、年齢層、職業などの特徴、滞在場所及びその時間、並びに顔向きから興味を有する注目商品、顧客の足取りコースなどを抽出して特定し、来店中顧客リスト５２に登録する。顧客管理部５３は、来店中顧客リスト５２から特徴データを取り出し、特徴データに対応する予め保持された音声案内情報／電子掲示情報を告示情報ＤＢ７０から取り出して出力部４０からアナウンス／電子掲示し、退店顧客のデータは顧客ＤＢ６０に記録する。また、顧客ＤＢ６０に記録される顧客の足取りコースは商品陳列改善に有効活用できる。【選択図】      図２
2008152810.tif 000002
【特許請求の範囲】
【請求項１】
マーケティングに活用するため、カメラで顧客の画像情報を取得し、画像処理部でその画像情報から顧客を判別して顧客リストに収集管理する顧客情報収集管理システムにおいて、 
少なくとも出入り口に配備され顧客の正面を撮影しその人物画像を出力する複数の第１のカメラと、
少なくとも通路に向けて配備され顧客の顔向きを含む画像を撮影してその人物画像を出力する複数の第２のカメラと、
前記第１及び第２のカメラの連続取得する複数の画像を受けその画像情報から追跡された顧客の年齢、性別を含む人物属性を判定してその顧客の個人情報に生成し出力する画像処理部と、
この画像処理部の生成した個人情報を受けて記録する来店中顧客リストと、この来店中顧客リストに記録された情報を繰返し走査して取り出し前記個人情報とは別にその情報から取得された情報の特徴として特定時間帯の店内状況を含む一般的条件を生成する顧客管理部と
を備えることを特徴とする顧客情報収集管理システム。
【請求項２】
請求項１に記載の顧客情報収集管理システムおいて、商品提供場所にスピーカ、電子掲示板、及び情報端末のうちの少なくとも一つの告示機器と、販売促進商品を含む案内告示情報および告示条件を前記告示機器に対応して予め格納する告示情報データベースとを更に設け、
前記画像処理部は、同一個人情報に基づいて連続する人物画像のうちの前記第２のカメラで取得した少なくとも顔向きデータからその注目商品を選定し、これら情報を前記来店中顧客リストに前記個人情報に対応して記録し、かつ、
前記顧客管理部は、前記来店中顧客リストに記録された情報が前記告示条件と一致した際に、その告示条件に対応する前記案内告示情報を告示情報データベースから取得して前記告示機器に提供する
ことを特徴とする顧客情報収集管理システム。
【請求項３】
請求項１に記載の顧客情報収集管理システムにおいて、来店中の顧客の購買商品を登録するレジスタと今までの来店客の情報を記録する顧客データベースとが更に備えられており、
前記画像処理部は、レジスタで購買商品が登録された際には購買顧客のカメラ画像と照合して前記来店中顧客リストに登録し、かつ出口カメラ画像が顧客を捕捉した際にはその退店を前記来店中顧客リストに記録し、かつ、
前記顧客管理部は、前記来店中顧客リストで退店の記録された顧客対応情報のうちの所定情報を前記顧客データベースに追加記録する
ことを特徴とする顧客情報収集管理システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、カメラで顧客の画像情報を取得してマーケティングに活用する顧客情報収集管理方法及びそのシステムに関し、特に、顧客の人物特徴が個人情報としてより正確に判断できると共にその個人情報に基づく顧客層に対応した販売促進サービスを時期を失することなく提供することができる顧客情報収集管理システムに関する。
【背景技術】
【０００２】
従来、この種の顧客情報収集管理システムでは、入力作業を軽減させると共に顧客の属性についての判断のばらつきを防止することで、正確なデータベースを作成できることを目的として、システムが、出入り口それぞれのカメラで撮影された顧客の画像に基づいて、画像処理により顧客の属性を自動判別している（例えば、特許文献１参照）。
【０００３】
図７を参照して、この顧客情報収集管理システムを説明する。
【０００４】
各店舗内情報分析システム１００では、レジスタでの購買顧客を撮像するレジカメラ１０２の画像情報から制御部１０８がこの顧客の属性として性別、年齢層などを判別する。次いで、この顧客により購入された商品のデータを店員がレジスタに例えばバーコードを利用して正確に入力する。その結果、商品データと顧客の属性とが対応付けられて記録される。
【０００５】
すなわち、顧客の属性は商品購入顧客の画像情報に基づいて判別されるので、店員による入力作業が軽減されるのみならず、画像情報からの均一な基準から判断のばらつきも防止される。また、各店舗でのこれらデータは店舗内情報分析システム１００から送付されて情報分析センター１１０に集中保存され、マーケティングに活用される。
【０００６】
また、端末装置で、顧客のデータを取得しかつ分析して顧客の種別を判定し、この判定結果に基づいて商品の案内データを特定して、顧客に提供する顧客データ処理システムがある（例えば、特許文献２参照）。
【０００７】
この端末装置は、カメラ及びセンサを備え、顧客が前面に立った際に、カメラ及びセンサにより顧客情報を自動的に取得し、取得した情報から顧客種別を判別してその客層に見合う案内データをその顧客に提供する。案内データは、客層データに対応してサーバ装置に集中して保持され、複数の端末装置に提供される。ここでは、顧客の滞留時間も計測されている。
【０００８】
【特許文献１】特開２００２−３２５５３号公報（図１）
【特許文献２】特開平１１−３２８２６６号公報（図１、図２）
【発明の開示】
【発明が解決しようとする課題】
【０００９】
しかしながら、上述した従来の顧客情報収集管理システムでは、次のような問題点がある。
【００１０】
第一の問題は、年齢、性別、服装といった顧客の属性を判断する正確性に欠ける点である。
【００１１】
その理由は、顧客の属性情報を取得するための撮影データは複数フレーム連続して撮影せず、単一フレームによってしか判断していないためである。上記特許文献１ではレジスタで商品を購入する際のみの画像情報、また上記特許文献２では端末装置に対面する際のカメラの画像情報、それぞれから顧客を正面からの画像のみで判断するので、判別に対するデータ量が少なく、年齢、性別、服装といった人物の属性を正確に判断するには危険性がある。
【００１２】
第二の問題は、来店中の顧客の個人情報に基づく商品販売促進に際して店舗ごとの柔軟な対応が困難な点である。
【００１３】
その理由は、上記特許文献１、２では複数店舗で集中して情報分析センター又はサーバ装置が顧客データ及び販売促進商品データを管理しており、店舗ごとの変化に迅速な対応が困難なためである。
【００１４】
第三の問題は、店舗内の商品陳列改善に、来店した顧客の購買情報を反映することが困難な点である。
【００１５】
その理由は、上記特許文献１では顧客情報と対応するものは購入商品データであり、購入商品以外のデータがないからである。上記特許文献２では、このための情報収集には、商品ごとに端末装置を備えることを提案しているからである。
【００１６】
本発明の課題は、このような問題点を解決し、商品の各提供場所において、より正確な個人情報を画像情報から取得し、各提供場所での状況の変化に迅速に時期を失することなく対応する商品データを提供し、かつ商品陳列位置改善のための情報を収集することができる顧客情報収集管理方法及びそのシステムを提供することである。
【課題を解決するための手段】
【００１７】
本発明による顧客情報収集管理システムは、マーケティングに活用するため、カメラで顧客の画像情報を取得し、画像処理部でその画像情報から顧客を判別して顧客リストに収集管理するものであって、少なくとも出入り口近辺に配備され顧客の正面を撮影しその人物画像を出力する複数の第１のカメラと、少なくとも通路に向けて配備され顧客の顔向きを含む画像を撮影してその人物画像を出力する複数の第２のカメラと、前記第１及び第２のカメラの連続取得する複数の画像を受けその画像情報から追跡された顧客の年齢、性別を含む人物属性を判定してその顧客の個人情報に生成し出力する画像処理部と、この画像処理部の生成した個人情報を受けて記録する来店中顧客リストと、この来店中顧客リストに記録された情報を繰返し走査して取り出し前記個人情報とは別にその情報から取得された情報の特徴として特定時間帯の店内状況を含む一般的条件を生成する顧客管理部とを備えることを特徴とする。
【００１８】
このために、対象とするすべての顧客の画像を前記カメラで定期的に取得し、連続して取得した複数フレームの画像から顧客の人物属性を判定して個人を判別し、更に、判別した個人毎にカメラ位置、顔向き、及び滞在時間から興味を有する注目商品群を判断してマーケティングに活用している。
【発明の効果】
【００１９】
この構成により、一人の顧客に対して複数の連続する画像情報が取得できるので、顧客の属性としての個人情報がより正確に収集できる。又、カメラ位置と画像情報から分析された顔向きとから注目商品または商品群の特定、更に滞在時間と注目継続時間を分析することが可能である。
【００２０】
また、顧客の人物属性と注目商品群とを取得した際に、この注目商品群に対応する予め用意された商品の販売促進情報を可聴／可視で店内に直ちに告知している。したがって、効率の高いマーケティングの自動化が可能である。
【００２１】
商品陳列場所にはスピーカ、電子掲示板、及び／又は情報端末のような可聴／可視による告示機器と、販売促進商品を含む案内告示及び告示条件を前記告示機器に対応して予め格納する告示情報データベースとを更に設けられている。この画像処理部は、同一個人情報に基づいて連続する人物画像の人物位置及び顔向き並びに滞留時間などの前記通路でのカメラで取得したデータからその注目商品を選定し、これら情報を前記来店中顧客リストに前記個人情報に対応して記録する。また、顧客管理部は、前記来店中顧客リストに記録された情報が前記告示条件と一致した際に、その告示条件に対応する前記案内告示を告示情報データベースから取得して前記告示機器に対応する可聴／可視の情報を提供する。
【００２２】
この告示情報は同一店舗内のデータベースから提供できるので、提供条件及び提供商品の案内を適宜作成して迅速に時期を失することなく提供することができる。すなわち、購買意欲を昂騰させることができる。
【００２３】
また、連続して取得した画像から、顧客の注目商品群及びその注目時間、並びに移動経路を判定することにより、店舗内の商品陳列位置改善などのマーケティング向上に活用することができる。
【００２４】
すなわち、来店中の顧客の購買商品を登録するレジスタと今までの来店客の情報を記録する顧客データベースとが備えられている。この画像処理部は、レジスタで購買商品が登録された際には購買顧客のカメラ画像と照合して前記来店中顧客リストに登録し、出口カメラ画像が顧客を捕捉した際にはその退店を前記来店中顧客リストに記録する。また、顧客管理部は、前記来店中顧客リストで退店の記録された顧客対応情報のうちの所定情報を前記顧客データベースに追加記録している。
【発明を実施するための最良の形態】
【００２５】
次に、本発明の実施の形態について図面を参照して説明する。
【００２６】
図１は本発明における店舗内カメラの配置及び人物の顔向きに係る実施の一形態を示す平面図である。図７に示される従来例との相違は店舗内の通路上にいる顧客３１〜３５の撮像画面を取得する複数のカメラ１１〜１８を設けている点である。
【００２７】
図１に示された平面図では、入り口カメラ１１、レジカメラ１２、出口カメラ１４、及び店内カメラ１５〜１８が、例えば、天井に設けられ、それぞれのカメラが定期的に連続で撮影している。店舗は、例えば、所謂コンビニエンスストアである。店舗内には、レジスタとなるＰＯＳ（販売時点情報管理）端末２０が備えられ、来店中の顧客３１〜３６がおり、スピーカ４１、電子掲示板４２及び情報端末４３が商品陳列棚以外に設けられている。
【００２８】
入り口カメラ１１は店内から出入り口に向いており入店する顧客の正面を撮影する。レジカメラ１２はレジスタとなるＰＯＳ端末２０の設置場所で購買商品を提示する顧客のほぼ正面を撮影する。出口カメラ１４は出入り口側から店舗内に向いており退店する顧客のほぼ正面を撮影する。
【００２９】
店内カメラ１５〜１８は通路上の顧客を撮影する。図１での店内カメラ１５は本棚と日用品の陳列棚との間の顧客を対象とする。店内カメラ１６は食料品と菓子類との陳列棚間の顧客を対象とする。店内カメラ１７はパン類、弁当類、及びデザート類、並びに情報機器４３に面する顧客を対象にする。店内カメラ１８は飲み物類及び電子掲示板前の顧客を対象にする。
【００３０】
図１においては、顧客３１が本棚に顔を向けている。顧客３２は電子掲示板４２に向かっているが、例えば、顔向きが電子掲示板４２方向で固定されている場合、電子掲示板４２が注目されていると判断できる。顧客３３、３４は食料品及び弁当類それぞれを注目している。顧客３５は情報端末４３にアクセスし、顧客３６はレジスタで購買商品の精算をしている。
【００３１】
次に、図２に図１を併せ参照して、本発明による顧客情報収集管理システムについて説明する。
【００３２】
この顧客情報収集管理システムは、店舗内に、入力部１０、ＰＯＳ端末２０、出力部４０、制御部５０、顧客ＤＢ（データベース）６０、及び告示情報ＤＢ７０を備えている。顧客ＤＢ６０は複数店舗で共通又は集中管理してもよい。
【００３３】
情報の入力部１０には、入り口カメラ１１、レジカメラ１２、出口カメラ１４、及び店内カメラ１５〜１８が含まれる。図示されるＰＯＳ端末２０には、キーボード２１、画面表示器２２、及び購買商品情報取得部２３が含まれる。情報の出力部４０には、スピーカ４１、電子掲示板４２、及び情報端末４３が図示されている。制御部５０は、画像処理部５１、来店中顧客リスト５２、及び顧客管理部５３を含んでいる。また、告示情報ＤＢ７０は音声案内商品情報７１及び電子刑事商品情報７２を有している。
【００３４】
カメラ１１〜１８についてはすでに図１を参照して説明したが、例えば１秒間に数フレームずつ連続して撮影した画像情報は制御部５０の画像処理部５１に順次送られる。ＰＯＳ端末２０では、情報入力には、キーボード２１以外に、例えば図示されていないバーコードリーダなどがある。情報出力には、各種情報を画面表示する画面表示器２２以外に例えば図示されていないレシート出力がある。従って、顧客の購買商品情報を記録保持する購買商品情報取得部２３が備えられている。
【００３５】
スピーカ４１は音声案内商品情報７１に格納されている商品情報などを顧客管理部５３の制御により受けて店舗内へ放送する。電子掲示板４２は電子掲示商品情報７２に格納されている商品情報などを顧客管理部５３の制御により受けて画面表示する。図示される電子掲示板４２は出入り口方向に面しているが、複数を設けて、掲示される情報によっては、店舗外部に向いていてもよい。情報端末４３は、顧客の操作を受け、告示情報ＤＢ７０に格納された商品に限らず、これ以外の情報も可視／可聴で顧客に提供できる。
【００３６】
画像処理部５１は、入力部１０から得られた複数フレームの画像情報を一フレームごとに画像処理し、顧客追跡のため、性別、年齢、服装といった人物特徴の抽出を行う。画像処理により、人物の特定とカメラ位置、顔向き、及び滞在時間から得られる注目商品情報の特定とが可能であり、更に、時間の経過と対応付けて店舗内での、一人の顧客の移動経路を追跡できる。従って、抽出して顧客ＩＤ（識別子）を付与された個人情報は来店中顧客リスト５２に送られて顧客別にＩＤにより整理される。また、画像情報から顧客が退店したと判断した際には顧客の退店を来店中顧客リスト５２に送る。
【００３７】
顧客管理部５３は、来店中顧客リスト５２に記録される顧客情報を繰り返し走査しており、予め設定された条件に一致した際に、告示情報ＤＢ７０に格納される音声案内商品情報７１及び／又は電子掲示商品情報７２から適切な告示情報を取り出して出力部４０へ送出している。顧客が退店した際には該当する顧客のデータを顧客ＤＢ６０と照合し、新規顧客情報を顧客ＤＢ６０に転送して追加する一方、同一情報は破棄される。また、特に、顧客ＤＢ６０における情報の変化が著しい場合には、これを検知して販売促進に反映させることができる。
【００３８】
顧客ＤＢ６０は、顧客それぞれの人物としての特徴に加えて、顧客層に対して購買商品、移動経路、滞在時間などの興味対象商品情報も記録される。したがって、顧客ＤＢ６０は、今後の、性別、年齢層、職業などに対応する販売促進商品の選定、店舗内の商品陳列の改善などに役立つ。
【００３９】
告示情報ＤＢ７０は、それまでの情報に基づいて販売促進のために作成された顧客層に対応したおすすめ商品の情報を、音声情報は音声案内商品情報７１、また映像情報は電子掲示商品情報７２、それぞれに、販売促進対象の顧客層条件、例えば、性別、年齢層、職業などと共に予め格納しておく。この情報は、顧客ＤＢ６０に格納される情報に基づいて定期的に改版される。
【００４０】
次に、図３及び図４を併せ参照して画像処理部５１の機能について詳細に説明する。
【００４１】
画像処理部５１は、図示される例では、カメラ対応の画像受付５１１、５１２、・・及びＩＤ編集５１０それぞれの機能を有している。例えば、画像受付５１１は、入り口カメラ１１で撮影された画像データを順次受付け、これら画像データに、このカメラ番号及び時刻を付加してＩＤ編集５１０へ送出する。
【００４２】
ＩＤ編集５１０は、受けた複数フレームの画像を一フレームごとに画像処理して、性別、年齢、服装といった人物の特徴を人物情報として抽出する。具体的には、画像フレームごとに９０パーセントの確率で男性、３０パーセントの確率で３０歳代であるなどの判定確率を算定し、この判定確率の高さから人物特徴を判定する。一方、人物画像それぞれにおいては、同時に、カメラ位置と顔向きとから注目場所が判定できるので、興味を持った又は購買対象の商品群若しくは商品が特定される。
【００４３】
次いで、時系列で同類画像情報を集めて、図４に示されるように、一人の顧客に対して複数画像フレーム８１〜８６の情報を総合的に判断することにより、より正確な特徴抽出を実現し、個人情報の総合判断がなされ、顧客ＩＤが付与される。このように、人物の特徴は、複数カメラの追跡により多数の画像フレームの判定結果から、より信頼性の高い判定結果を採択するという方法がとられる。
【００４４】
上記総合判断で具体的には、判定確率がある閾値以上である画像フレームのみを採択するということを行う。例えば、判定確率の閾値を８０パーセントとした場合では、男性：９３パーセントの画像フレーム８１と男性：８１パーセントの画像フレーム８５との二つの画像フレームが採択され、そこから男性と判定している。このようにあいまいな判定を排除する方法により、正確な人物特徴の抽出ができる。
【００４５】
これにより信頼性の高い多数の判定結果に少数の信頼性の低い判定結果が紛れ込んでいる場合でも、信頼性の低い判定結果を除去することで、より正確な人物特徴抽出が可能になる。また、信頼性の低い大多数の判定結果に少数の信頼性の高い判定結果がある場合でも、同様に少数の信頼性の高い判定結果を採択することができ、やはり正確な人物特徴の抽出が可能である。
【００４６】
画像処理部５１で得られた顧客の追跡情報や特徴情報は来店中顧客リスト５２に送付され追加記録される。すなわち、例えば、ＩＤごとに、顧客の特徴を示す個人情報、入店時刻、滞在場所と滞在時間などが記録され、出口からの退店を検出した際に退店時刻を記録できる。上述したように、退店時刻の記録された顧客情報は来店中顧客リスト５２から顧客管理部５３により取り出される。
【００４７】
次に、図５Ａ及び図５Ｂを参照して来店中顧客リスト５２について詳細を説明する。
【００４８】
図５Ａに示される来店中顧客リスト５２Ａの内容には、顧客を識別するＩＤ、性別、年齢、服装、顔向き方向から得られたステータス、滞在時間といった属性が含まれており、この情報は画像処理部５１によりリアルタイムで更新される。更に、図５Ｂでは、滞在時間の存在する場所を順次記録した足取りが移動コースのデータとして取得されている。
【００４９】
次に、図６に図１から図５までを併せ参照して、制御部５０の動作手順について説明する。図６は顧客管理部５３の主要動作を中心とする手順の実施の一形態を示すフローチャートである。
【００５０】
制御部５０では、画像処理部５１が、入り口カメラ１１から受ける撮像データから、顧客の来店あり（手順Ｓ１のＹＥＳ）を知ると共にこの顧客の人物データを取得（手順Ｓ２）してＩＤ符号を付与し、来店中顧客リスト５２に記録する。この来店中の顧客は店内のカメラ１１〜１８のいずれかにより撮影され、かつその画像は処理されてその処理結果が来店中顧客リスト５２に順次記録される。
【００５１】
顧客管理部５３は、来店中顧客リスト５２を繰り返し走査して、取得データの特徴を調査（手順Ｓ３）している。特徴としては個人のみならず、例えば、昼食の時間帯でスーツ着用の多くの男性顧客がお弁当と飲み物を購入している、又は多数の若い女性顧客が来店中であるなどの一般的条件もある。
【００５２】
手順Ｓ３が「ＹＥＳ」で来店中顧客リスト５２からの取得データに特徴がある場合、顧客管理部５３は、告示情報ＤＢ７０の登録情報と比較して、例えば、昼食時の男性顧客に対して推薦する本日の商品、又は多数の若い女性顧客には推薦する化粧品など、対応するＰＲ（広告、宣伝）商品の有無を確認（手順Ｓ４）する。
【００５３】
手順Ｓ４が「ＹＥＳ」で対応ＰＲ商品がある場合、顧客管理部５３は、告示情報ＤＢ７０から対応するデータを取り出して出力部４０に渡し、そのＰＲ商品をアナウンスによる音声、又は／及び電子掲示による画像で告示（手順Ｓ５）している。例えば、音声案内商品情報７１の場合にはスピーカ４１からアナウンスによる音声案内が流される。また、電子掲示商品情報７２の場合には電子掲示板４２への画面表示で来店中顧客に告示がなされる。
【００５４】
更に例えば、深夜に雑誌のコーナーで立ち読みしている１０歳代後半から２０歳代前半の若い学生顧客が多い場合には特定のＰＲ夜食をお勧めするなど、個人に特化したサービス、又は全体の客層向けのサービスを自動かつリアルタイムで行うことができるので、顧客の購買意欲を高めることが可能となる。
【００５５】
一方、画像処理部５１が出口カメラ１４から受けた撮像データから退店の顧客を識別（手順Ｓ６のＹＥＳ）した際には、来店中顧客リスト５２の該当個所に退店が、例えば時刻により記録される。顧客管理部５３は、来店中顧客リスト５２で退店の記録を有する顧客の人物特徴データを顧客ＤＢ６０に保存されるものと比較する。顧客管理部５３は、退店顧客が新規顧客（手順Ｓ７のＹＥＳ）であると判断される場合、新たにＩＤ番号を付与してその顧客の個人データを顧客ＤＢ６０に登録（手順Ｓ８）すると共に興味を有する商品、その場所の滞在時間などの所定データを顧客データとして追加登録して来店中顧客リスト５２から該当データを削除（手順Ｓ９）する。
【００５６】
上記手順Ｓ７が「ＮＯ」ですでに個人の顧客登録済みの場合、顧客管理部５３は、上記手順Ｓ８を飛ばして上記手順Ｓ９に進み、来店回数、購買商品情報、従来と異なる興味対象商品など、所定の顧客データを対応個所に追加登録して来店中顧客リスト５２から該当データを削除する。
【００５７】
次いで、顧客管理部５３は店内顧客の存在を来店中顧客リスト５２で確認（手順Ｓ１０）する。来店中顧客リスト５２に顧客の記録がないため、この手順Ｓ１０が「ＮＯ」の場合、手順は終了する。
【００５８】
手順Ｓ１０が「ＹＥＳ」で店舗内に来店中顧客がまだいる場合には、上記手順Ｓ３が「ＮＯ」で来店中顧客リスト５２に特徴ある取得データがない場合、又は上記手順Ｓ４が「ＮＯ」で対応するＰＲ商品がない場合も同様に、上記手順Ｓ２に戻り、来店中顧客の顧客データが収集される動作から上述された手順が継続して繰り返される。
【００５９】
上記説明では、来店中顧客データのＩＤと顧客ＤＢのＩＤとは独立して付与されているが、画像処理部が、来店した顧客にＩＤ付与する際に個人特徴データの一致するＩＤを顧客ＤＢから取り出して付与することとしてもよい。
【００６０】
上記説明では、複数カメラを利用して店舗内すべての顧客の撮像データを得るとしたが、全方位カメラを店舗内で中央の天井に設置し、１つのカメラで店舗内全体を追跡するという方法でもよい。
【００６１】
また、上記図４を参照した複数画像フレームの処理に関して、ある閾値以上のもののみ採択するとしたが、全ての画像フレーム８１〜８５の平均を取る方法も考えられる。具体的には、男性である確率を７２（＝（９３＋６７＋４５＋７４＋８１＋７４）／６）パーセント、また女性である確率を２８（＝（７＋３３＋５５＋２６＋１９＋２６）／６）パーセントと計算して男性と判定する方法である。この方法は、その顧客が撮影されているすべての情報を取り込むことができるため、一枚のみの画像から得る判定よりも信頼性が高くなる。更に、画像処理技術において表情が認識できるようであれば、商品への関心度の情報に加えることができる。
【００６２】
また、顧客データの取得に画像処理技術を使用して説明したが、音声を組み合わせて認識の性能を更に向上させることも可能である。この場合、例えば、店舗内にマイクを設置し、発声から男女を分析し、又は会話内容から音声認識技術を用いて商品の評判を分析するという方法を付け加えるともできる。
【００６３】
上記説明では店舗を対象としたが、自動販売機又はＡＴＭ（自動現金出し入れ装置）で利用者の追跡、及び特徴抽出を行い、利用者へ特定サービスを実行すること、又は、未成年者の利用を制限するような使い方もできる。
【００６４】
すなわち、上述した構成により、効率の高いマーケティングの自動化、来店中の顧客に対して購買意欲を昂騰させること、更に店舗内の商品陳列配置の改善が可能である。
【００６５】
このように、図示された機能ブロックおよび手順を参照して店舗内での顧客情報管理を説明したが、機能の分離併合による配分または手順の前後入替えなどの変更は上記機能を満たす限り自由であり、対象も商品陳列棚に限定されるものではない。すなわち、上記説明が本発明を限定するものではないのみならず、本機能はカメラによる撮影可能な設備を利用した顧客の情報管理全般に適用可能なものである。
【産業上の利用可能性】
【００６６】
上述してように、本発明によれば、複数箇所で他方向に向けたカメラを配置し連続的に撮影した人物画像をカメラから取得することにより、画像処理部がその人物画像から人物の特定と人物周囲の映像から付随する状況情報を取得できるので、撮影画面に入る人物とその背景とをカメラから取得してその状況を判定する用途に広く適用可能である。
【図面の簡単な説明】
【００６７】
【図１】本発明における店舗内カメラの配置及び人物の顔向きに係る実施の一形態を示す平面図である。
【図２】本発明における実施の一形態を示す機能ブロック図である。
【図３】図２の画像処理部における実施の一形態を示す機能ブロック図である。
【図４】図３のＩＤ編集における個人情報総合判断のために収集された複数画像フレームの実施の一形態を示す説明図である。
【図５Ａ】図２の来店中顧客リストにおける実施の一形態を示す機能ブロック図である。
【図５Ｂ】図５Ａと異なる来店中顧客リストにおける実施の一形態を示す機能ブロック図である。
【図６】図２の制御部における主要動作手順の実施の一形態を示すフローチャートである。
【図７】従来の一例を示す機能ブロック図である。
【符号の説明】
【００６８】
１０    入力部
１１    入り口カメラ
１２    レジカメラ
１４    出口カメラ
１５〜１８    店内カメラ
２０    ＰＯＳ端末
３１〜３６    顧客
４０    出力部
４１    スピーカ
４２    電子掲示板
４３    情報端末
５０    制御部
５１    画像処理部
５２、５２Ａ、５２Ｂ    来店中顧客リスト
５３    顧客管理部
６０    顧客ＤＢ
７０    告示情報ＤＢ
７１    音声案内商品情報
７２    電子掲示商品情報
８１〜８６    画像フレーム
５１０    ＩＤ編集
５１１、５１２    画像受付
【図１】
2008152810.tif 000003
【図２】
2008152810.tif 000004
【図３】
2008152810.tif 000005
【図４】
2008152810.tif 000006
【図５Ａ】
2008152810.tif 000007
【図５Ｂ】
2008152810.tif 000008
【図６】
2008152810.tif 000009
【図７】
2008152810.tif 000010