(57)【要約】【課題】購買者情報と購買情報との関連付けを容易にする。【解決手段】情報処理装置は、撮像装置によって撮像された画像から検出された人物の画像を含む人物の情報を取得し、取得された人物の情報を表示部に表示させ、ユーザの操作に基づいて、顧客の購買情報を取得し、ユーザによって、該表示部に表示された人物の情報から指定された人物の情報を選択し、選択された人物の情報と、取得された顧客の購買情報とを関連付ける。【選択図】図６
2017162104.tif 000002
【特許請求の範囲】
【請求項１】
情報処理装置であって、
撮像装置によって撮像された画像から検出された人物の画像を含む人物の情報を取得する第１の取得手段と、
前記第１の取得手段により取得された人物の情報を表示部に表示させる表示制御手段と、
ユーザの操作に基づいて、顧客の購買情報を取得する第２の取得手段と、
ユーザによって、前記表示部に表示された人物の情報から指定された人物の情報を選択する選択手段と、
前記選択手段により選択された人物の情報と、前記顧客の購買情報とを関連付ける関連付け手段と、
を有することを特徴とする情報処理装置。
【請求項２】
前記表示制御手段は、さらに前記顧客の購買情報を前記表示部に表示させる請求項１に記載の情報処理装置。
【請求項３】
前記情報処理装置は、前記撮像装置を含むことを特徴とする請求項１または２に記載の情報処理装置。
【請求項４】
前記第１の取得手段は、前記情報処理装置の近傍に設置された撮像装置によって撮像された画像から人物の情報を取得することを特徴とする請求項１または２に記載の情報処理装置。
【請求項５】
前記第１の取得手段は、前記顧客が購買を行うために通行できる範囲に設置された複数の撮像装置によって撮像された画像から人物の情報を取得することを特徴とする請求項１または２に記載の情報処理装置。
【請求項６】
前記第１の取得手段は、ユーザの操作に応じて、前記撮像装置と異なる他の撮像装置によって撮像される画像から検出された人物の画像を新たに取得し、
前記表示制御手段は、さらに前記第１の取得手段により新たに取得された人物の情報を前記表示部に表示させることを特徴とする請求項６に記載の情報処理装置。
【請求項７】
ユーザの操作に基づいて前記顧客の情報を受け付ける受け付け手段を更に有し、
前記表示制御手段は、さらに前記顧客の情報を前記表示部に表示させ、
前記選択手段は、ユーザによって、前記表示部に表示された人物の情報から前記顧客の情報に基づいて指定された人物の情報を選択することを特徴とする請求項６に記載の情報処理装置。
【請求項８】
前記顧客の情報は、該顧客の年齢と該顧客の性別のいずれかを少なくとも含むことを特徴とする請求項８に記載の情報処理装置。
【請求項９】
情報処理方法であって、
撮像装置によって撮像された画像から検出された人物の画像を含む人物の情報を取得する第１の取得工程と、
前記第１の取得工程において取得された人物の情報をユーザに表示する表示制御工程と、
ユーザの操作に基づいて、顧客の購買情報を取得する第２の取得工程と、
ユーザによって、前記表示された人物の情報から指定された人物の情報を選択する選択工程と、
前記選択工程において選択された人物の情報と、前記顧客の購買情報とを関連付ける関連付け工程と、
を有することを特徴とする情報処理方法。
【請求項１０】
表示部を有する情報処理装置に備えられたコンピュータに、
撮像装置によって撮像された画像から検出された人物の画像を含む人物の情報を取得する第１の取得工程と、
前記第１の取得工程により取得された人物の情報を表示部に表示させる表示制御手段と、
ユーザの操作に基づいて、顧客の購買情報を取得する第２の取得工程と、
ユーザによって、前記表示部に表示された人物の情報から指定された人物の情報を選択する選択手段と、
前記選択手段により選択された人物の情報と、前記顧客の購買情報とを関連付ける関連付け手段と、
を実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置、情報処理方法、およびそのプログラムに関する。
【背景技術】
【０００２】
店舗には、ファーストフード、レストランなどの飲食店や、スーパーマーケット、衣料品店、家電量販店などの小売店など、様々な店舗がある。いずれの店舗であっても、購買顧客の情報を把握し、その情報を広告や販売促進などのマーケティングに活かすことが望まれている。
【０００３】
また、購買顧客の情報をマーケティング分析に活用する技術として、様々な技術が知られている。例えば、ネットワークカメラを用いてレジ前の指定領域に来た顧客の顔画像を取得し、取得した顔画像を解析（年齢推定など）して顧客情報を取得し、得られた顧客情報と購買情報を関連付けて、マーケティング分析に活用する技術が知られている。また、特許文献１には、顧客がグループで来店した情報を営業支援に用いる技術が開示されている。複数の購買者情報と購買情報を関連付ける手法は、購買者が個人かグループか、グループの場合、そのグループはどういう集団か、を知ることでより詳細なマーケティング分析が行えるため、有益である。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８−２６２４３５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、ネットワークカメラにより撮影された画像を用いて購買者の情報を取得し、取得した購買者の情報と購買情報とを関連付ける場合、該画像の特定の領域に写っていなければ購買者の情報は取得できない。また、所望の購買者が画像に写っていても、カメラとは違う方向を向いている場合や、客同士が重なってしまっている場合など、解析可能な顔画像が取得できないことがありうる。
【０００６】
また、ネットワークカメラにより撮影された画像を用いて複数の購買者の情報を取得し、取得した複数の購買者の情報と購買情報とを関連付ける場合も、同様の問題が起こり得る。他にも、購買者がグループの場合、会計は一人の購買者に任せて、他の購買者は先に退店することもありうる。入店時や会計時であっても、購買者全員がカメラの撮影する特定領域内に収まっているとは限らず、購買者全員の画像を一度に取得することは容易でない。そのため、複数の購買者の情報と購買情報とを関連付けることは難しい。
【０００７】
本発明は、上記の課題を解決するためになされたもので、購買者情報と購買情報との関連付けを容易にすることを目的とする。
【課題を解決するための手段】
【０００８】
上述した課題を解決するための一手段として、本発明の情報処理装置は以下の構成を有する。すなわち、情報処理装置であって、撮像装置によって撮像された画像から検出された人物の画像を含む人物の情報を取得する第１の取得手段と、前記第１の取得手段により取得された人物の情報を表示部に表示させる表示制御手段と、ユーザの操作に基づいて、顧客の購買情報を取得する第２の取得手段と、ユーザによって、前記表示部に表示された人物の情報から指定された人物の情報を選択する選択手段と、前記選択手段により選択された人物の情報と、前記顧客の購買情報とを関連付ける関連付け手段と、を有することを特徴とする。
【発明の効果】
【０００９】
本発明によれば、購買者情報と購買情報との関連付けを容易にすることが可能となる。
【図面の簡単な説明】
【００１０】
【図１】マーケティング分析システムの全体構成を示す図。
【図２】店舗のレイアウトの一例を示す図。
【図３】マーケティング分析システムの機能構成の一例を示す図。
【図４】クライアントＰＣのハードウェア構成の一例を示す図。
【図５】データテーブルの一例を示す図。
【図６】第一の実施形態におけるマーケティング分析システムの全体の処理を示すフロー図。
【図７】第一の実施形態における購買処理の詳細を示すフロー図。
【図８】第一の実施形態における購買者候補の情報を表示する画面例を示す図。
【図９】追加探索処理の詳細を示すフロー図。
【図１０】購買者候補表示領域の表示例を示す図。
【図１１】第二の実施形態における購買処理の詳細を示すフロー図。
【図１２】第二の実施形態における購買者候補の情報を表示する画面例を示す図。
【発明を実施するための形態】
【００１１】
以下、添付の図面を参照して、本発明をその実施形態に基づいて詳細に説明する。なお、以下の実施形態において示す構成は一例に過ぎず、本発明は図示された構成に限定されるものではない。
【００１２】
［第一の実施形態］
以下、第一の実施形態を説明する。図１に、本実施形態におけるマーケティング分析システム１０１の構成を示す。マーケティング分析システム１０１は、例えば、スーパーマーケットやコンビニエンスストア、衣料品販売店、家電量販店、書店などの小売店舗を対象にして構築され得る。マーケティング分析システム１０１は、クライアントＰＣ（Personal Computer）１０２、マーケティングサーバ１０３、ネットワークカメラサーバ１０４、ＰＯＳサーバ１０５、ネットワークカメラ１０６、ＰＯＳレジ１０７から構成される。これらの構成要素は、ネットワークに接続され、相互に通信することが可能である。なお、後述する処理を実現可能であれば、マーケティング分析システム１０１の構成要素は、図１の形態0に限定されない。
【００１３】
クライアントＰＣ１０２は、ユーザからの指示を受け付けて、マーケティングサーバ１０３、ネットワークカメラサーバ１０４、ＰＯＳサーバ１０５に対して指示を行い、その結果を表示する。マーケティングサーバ１０３は、クライアントＰＣ１０２またはＰＯＳサーバ１０５からの指示を受け付け、指示に基づいてマーケティング分析処理を行う。本実施形態において、マーケティング分析処理とは、一例として、顧客の年齢や性別などの顧客情報と、購買品や購買時刻などの購買情報を用いてデータ分析を行い、分析レポートを作成することをいう。データ分析の一例としては、購買者の年代別の購入状況や年代別の購買推移を分析する年代別分析、併せて購入した購買品を分析する併売分析などがある。データ分析を行うために、マーケティングサーバ１０３は、必要に応じてＰＯＳサーバ１０５に蓄積されている販売情報を参照する。
【００１４】
ネットワークカメラサーバ１０４は、クライアントＰＣ１０２、マーケティングサーバ１０３またはＰＯＳレジ１０７からの指示を受け付け、指示に基づいてネットワークカメラ制御処理を行う。本実施形態において、ネットワークカメラ制御処理は、ネットワークカメラサーバ１０４と同じネットワークに接続されている複数のネットワークカメラ１０６に対して制御指示を行い、カメラの動作を制御する処理を含む。また、ネットワークカメラ制御処理は、ネットワークカメラ１０６の動作結果に応じて、ネットワークカメラサーバ１０４が自律的に制御を行う処理も含む。
【００１５】
ＰＯＳ（Point of sales）サーバ１０５は、ＰＯＳレジ１０７と合わせて、店舗での売り上げに関する販売情報を管理するＰＯＳシステムを構成する。このＰＯＳシステムでは、販売情報として、商品名、価格、数量、日時などの販売実績にかかわる情報が管理される。ネットワークカメラ（撮像装置）１０６は、店舗に設けられ、店舗の画像を取得する。ネットワークカメラ１０６は、ネットワークカメラサーバ１０４からの制御指示を受け付け、画像取得や、カメラの回転方向の制御、音声の収録などを行う。なお、本実施形態を適用可能な店舗は、商品を販売する店舗に限らず、スポーツジムやクリニック等のサービスを提供する店舗であってもよい。ＰＯＳレジ１０７は、一般的なキャッシュレジスター装置としての機能を有しており、入出金機、レシート発行用プリンタ、カードリーダ、バーコードリーダなどが接続されていてもよい。
【００１６】
図２は、店舗のレイアウトの一例を示す図である。店舗には、出入口、通路スペース、ＰＯＳレジが置かれるレジスペース、複数の商品棚が設けられている。店内カメラ２０１、レジカメラ２０２、出入口カメラ２０３はそれぞれ、図１のネットワークカメラ１０６に対応する。店内カメラ２０１は、店舗内の商品棚や通路スペースなどの画像を取得する目的で設置されたカメラである。店内カメラ２０１を用いることで、商品棚に置かれている商品や通路スペースを通行する顧客などの画像を取得できる。レジカメラ２０２は、レジスペースにおける会計の様子を撮像する目的で、ＰＯＳレジ１０７の近傍に設置されたカメラである。レジカメラ２０２を用いることで、会計を行っている顧客や、会計待ちをしている顧客の様子、会計処理を行う店員の様子などの画像を取得できる。出入口カメラ２０３は、出入口における顧客の通行の様子を撮像する目的で設置されたカメラである。出入口カメラ２０３を用いることで、顧客の入店時、退店時の画像が取得できる。本実施形態におけるマーケティング分析システム１０１は、図２に示したようなレイアウトの小売店舗に適用され、ネットワークカメラ１０６により取得された画像情報とＰＯＳレジに入力される購買情報を合わせて購買者の情報を取得し、マーケティング分析処理を行うことが可能である。
【００１７】
図３は、実施形態におけるマーケティング分析システムの機能構成を示す図である。  クライアントＰＣ１０２は、ＰＣ画面表示制御部３０１、ＰＣ入力受付部３０２を有する。ＰＣ画面表示制御部３０１は、表示部４０４（図４）に対して各種表示を行う。ＰＣ入力受付部３０２は、ユーザによる処理を受け付けて、ネットワークカメラサーバ１０４、マーケティングサーバ１０３、ＰＯＳレジへ必要な指示を行う。本実施形態において、ユーザとは、例えば、マーケティング分析を行いたい小売店舗の店員や小売店舗を統括するエリアマネージャを指す。
【００１８】
ＰＯＳレジ１０７は、ＰＯＳ画面表示制御部３０３、ＰＯＳ入力受付部３０４、販売情報処理部３０５を有する。ＰＯＳ画面表示制御部３０３は、ＰＯＳレジ１０７の画面に対して各種表示を行う。例えば、ＰＯＳ画面表示制御部３０３は、ＰＯＳサーバ１０５から取得した情報の表示を行う。ＰＯＳ入力受付部３０４は、ユーザによる入力を受け付けて、ＰＯＳサーバ１０５への指示を行う。また、ＰＯＳ入力受付部３０４は、売り上げの記録など会計処理のための操作の受け付けも行う。販売情報処理部３０５は、販売情報に関する処理を行う。例えば、販売情報処理部３０５は、小売店舗の店員が販売時に行う売り上げ情報の処理を行う。また、販売情報処理部３０５は、ユーザの操作に基づいて、顧客の情報と売り上げ情報との関連付けを行う。
【００１９】
ネットワークカメラサーバ１０４は、ネットワークカメラ制御部３０６を有する。ネットワークカメラ制御部３０６は、ＰＣ入力受付部３０２または顧客情報管理部３０９からの指示を受けて、ネットワークカメラ１０６に対して制御指示を行う。具体的には、ネットワークカメラ制御部３０６は、複数のネットワークカメラ１０６に対して、画像取得や、カメラの回転方向の制御、音声の収録などの制御指示を行う。
【００２０】
マーケティングサーバ１０３は、マーケティング分析処理部３０７、マーケティング分析情報保持部３０８を有する。マーケティング分析処理部３０７は、ＰＣ入力受付部３０２からの指示を受けて、マーケティング分析処理を行う。マーケティング分析処理部３０７は、例えば、販売情報保持部３１３、顧客情報保持部３１２に保存されている情報を用いて、年代別分析、併売分析などのマーケティング分析処理を行う。マーケティング分析情報保持部３０８は、マーケティング分析に関わる情報を保持する。
【００２１】
ＰＯＳサーバ１０５は、顧客情報管理部３０９、映像解析部３１０、販売情報管理部３１１、顧客情報保持部３１２、販売情報保持部３１３を有する。顧客情報管理部３０９は、ＰＯＳ入力受付部３０４からの指示を受けて、顧客情報の取得や蓄積を行う。顧客情報管理部３０９は、ネットワークカメラ制御部３０６を通じて、ネットワークカメラ１０６から画像を取得し、映像解析部３１０を用いて、取得した画像を解析して顧客情報を取得し、取得した顧客情報を顧客情報保持部３１２に保存する。映像解析部３１０は、顧客情報管理部３０９からの指示を受けて、ネットワークカメラ１０６により取得された画像に対して映像解析を行う。また、映像解析部３１０は、ネットワークカメラ１０６により取得された画像に対して、顔認識や年齢性別推定などの画像解析処理を行う。販売情報管理部３１１は、小売店舗の店員が販売時に行う売り上げ情報の管理を行う。また、販売情報管理部３１１は、ＰＯＳレジ１０７の販売情報処理部３０５により関連付けが行われた情報を販売情報保持部３１３に保存する。なお、ＰＯＳレジ１０７の販売情報処理部３０５の機能は、販売情報管理部３１１に備えられてもよい。その場合、販売情報管理部３１１は、売り上げ情報と併せて、購買した顧客の情報も付加して、販売情報保持部３１３に保存する。
【００２２】
なお、図３の点線に示すように、例えば、クライアントＰＣ１０２とＰＯＳレジ１０７を情報処理装置として一つの装置で構成されてもよい。ほかに、クライアントＰＣ１０２、ＰＯＳレジ１０７、ＰＯＳサーバ１０５等、マーケティング分析システム１０１の複数の構成要素を、情報処理装置として一つの装置で構成することも可能である。
【００２３】
図４は、クライアントＰＣ１０２のハードウェア構成を示す図である。なお、ＰＯＳレジ１０７や、前述の形態の情報処理装置も、図４に示すハードウェア構成により構成されてもよい。
【００２４】
記憶部４０１は、ＲＯＭ(Read Only Memory)、RAM(Random Access Memory)の両方、もしくは、いずれか一方により構成され、後述する各種動作を行うためのプログラムや、無線通信のための通信パラメータ等の各種情報を記憶する。なお、記憶部４０１として、ROM、RAM等のメモリの他に、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、CD-ROM、CD-R、磁気テープ、不揮発性のメモリカード、DVDなどの記憶媒体を用いてもよい。
【００２５】
制御部４０２は、CPU(Central Processing Unit)、または、MPU(Micro Processing Unit)により構成され、記憶部４０１に記憶されたプログラムを実行することによりクライアントＰＣ１０２全体を制御する。なお、制御部４０２は、記憶部４０１に記憶されたプログラムとOS(Operating System)との協働によりクライアントＰＣ１０２全体を制御するようにしてもよい。
【００２６】
入力部４０３は、ユーザからの各種操作の受付を行う。表示部４０４は、ユーザに対して各種表示を行う。なお、タッチパネルのように入力部４０３と表示部４０４の両方を１つのモジュールで実現するようにしてもよい。通信部４０５は、無線（または有線）通信の制御を行う。また、通信部４０５は、無線通信を行う場合は、アンテナ４０６を制御して、無線通信のための無線信号の送受信を行う。
【００２７】
本実施形態におけるマーケティング分析システム１０１では、ネットワークカメラ１０６から取得された画像から購買者の顧客情報を取得し、それと売り上げ情報である販売情報と関連付けてＰＯＳサーバの販売情報保持部３１３に保存することが可能である。図５を用いて、保存されるデータの一例を示す。
【００２８】
図５は、ＰＯＳサーバ１０５により保存される顧客情報と販売情報およびその関連を表したデータテーブルの一例である。テーブル５０１は、「注文ＩＤ」、「注文日時」、「グループＩＤ」、「合計金額」から構成されている。「注文ＩＤ」は、顧客ごとの注文売り上げを管理するために付与されるＩＤである。「注文日時」は、注文売り上げを行った日時である。「グループＩＤ」は、注文に対応する一人以上の購買者を表すグループのＩＤである。「合計金額」は、注文売り上げの合計の金額である。
【００２９】
テーブル５０２は、「注文ＩＤ」、「明細ＩＤ」、「商品名」、「点数」、「単価」から構成されている。「注文ＩＤ」は、テーブル５０１と同様である。「明細ＩＤ」は、注文に含まれる商品ごとに付与されるＩＤであり、同一の注文内で一意なＩＤが付与される。「商品名」は顧客が購買した商品の名称を表す。「点数」は、顧客が購入した商品点数である。「単価」は、顧客が購入した商品の単価を表す。
【００３０】
テーブル５０３は、「グループＩＤ」、「顧客ＩＤ」から構成されている。「グループＩＤ」はテーブル５０１と同様である。「顧客ＩＤ」は、顧客一人ごとに一意に付与されるＩＤである。
【００３１】
テーブル５０４は、「顧客ＩＤ」、「年齢」、「性別」、「画像」、「画像取得時刻」から構成されている。「顧客ＩＤ」は、テーブル５０３と同様である。「年齢」、「性別」はそれぞれ、購買者の年齢、性別のデータを表す。「画像」は、ネットワークカメラ１０６から取得した顧客の画像を表し、「画像取得時刻」はその取得時刻を表す。本実施形態では、ＰＯＳサーバ１０５は、ネットワークカメラ１０６が取得した顧客の画像をそのまま顧客情報保持部３１２で格納するが、当該画像が別のデータベースに格納され、その格納場所へのリンクをデータテーブルとして保持してもよい。また、各テーブル間に引かれた矢印は関連を示しており、「注文ＩＤ」、「グループＩＤ」、「顧客ＩＤ」介して顧客情報と購買情報を参照できる。例えば、「顧客ＩＤ」が「ａ００１」の男性が一人（「グループＩＤ」の「ｇｒｏｕｐ０１」に含まれる顧客は一人のみであるため）で、「注文ＩＤ」で「ｏｒｄｅｒ１」が示す購買（「ビスケット」を二つと「チョコレート」を一つ）を行ったことがわかる。なお、本実施形態では、顧客情報として年齢、性別、画像を用いているが、これに限定されるものではく、他に身長や服装情報などの顧客の属性を表す情報が含まれていてもよい。 
【００３２】
以下、図６のフローチャートを用いて、マーケティング分析システム１０１における処理の流れを説明する。図６は、マーケティング分析システム１０１の全体の処理を示すフロー図である。
【００３３】
Ｓ６０１において、ネットワークカメラ制御部３０６は、ネットワークカメラ１０６に制御指示を行い、レジカメラ２０２からレジ付近の画像を取得する。続いて、Ｓ６０２において、映像解析部３１０は、Ｓ６０１で取得したレジ付近の画像に対して画像解析処理を行い、画像に含まれる購買候補者の情報を取得し、顧客情報保持部３１２に保存する。購買候補者とは、購買者となる可能性のある顧客を指す。本実施形態における画像解析処理には、画像に対して顔検出処理を行い、検出された顔情報に基づいて購買候補者の情報を取得する処理が含まれる。購買候補者の情報の例として、顔画像から映像解析部３１０による画像解析処理によって得られる年齢推定結果や性別推定結果などがある。Ｓ６０１およびＳ６０２の処理は繰り返し行われているものとし、ＰＯＳサーバ１０５の顧客情報保持部３１２には、過去から現在までの一定期間の購買候補者情報が蓄積されているものとする。
【００３４】
Ｓ６０３において、ＰＯＳレジ１０７は、ユーザによる入力を受け付けて購買処理を行い、購買情報を販売情報保持部３１３に保存する。購買処理の詳細については図７、図８を用いて後述する。Ｓ６０４において、マーケティング分析処理部３０７は、Ｓ６０２およびＳ６０３の処理結果を用いて、マーケティング分析処理を行い、マーケティング分析結果をマーケティング分析情報保持部３０８に保存する。マーケティング分析処理には、上述した年代別分析、併売分析などが含まれる。Ｓ６０５において、マーケティング分析処理部３０７は、ユーザの指示を受け付け、マーケティング分析情報保持部３０８に保存されたマーケティング分析結果を出力する。
【００３５】
このように、図６に示す処理によって、本実施形態におけるマーケティング分析システム１０１は、販売情報と顧客情報を関連付け、この関連付けに基づいて、マーケティング分析結果を出力することが可能となる。
【００３６】
次に、図７と図８を参照して、図６のＳ６０３における購買処理の詳細を説明する。図７は、本実施形態における購買処理の詳細を示すフロー図である。図８は、購買者候補の情報を表示する画面例を示す図である。
【００３７】
図７のＳ７０１において、販売情報処理部３０５は、顧客情報保持部３１２に保存されている購買候補者の情報を読み出し、ＰＯＳレジ１０７のＰＯＳ画面表示制御部３０３によりＰＯＳレジ１０７の表示部４０４に表示する。このときの画面の一例を図８（Ａ）に示す。領域８０１は、顧客が購買しようとしている商品のリストを表示する領域であり、商品名、点数、単価などが表示される。この例では、顧客は、ビスケット２点とチョコレート１点を購買しようとしていることを表している。領域８０２は、会計処理に関わる合計金額などの情報を表示する領域である。顧客が購買しようとしている商品の合計金額、預かり金額、お釣りなどを表示する。領域８０３は、購買者の選択に関わる情報を表示する領域である。領域８０３には、購買しようとしている顧客の候補を表示する購買者候補表示領域８０４と、購買者候補の中に実際の購買者が表示されていなかった場合に追加で購買者の画像を探索する追加探索ボタン８０５が含まれる。
【００３８】
ユーザは、購買者候補表示領域８０４を見て、どの購買者候補が同一グループに含まれるのかを判断し、同一グループに含まれる購買者候補を選択していく。このとき、ユーザは、店内の様子を確認しており、どの顧客がどのグループに属するのかがある程度分かっているものとする。また、購買者候補表示領域８０４では、ユーザにより購買者候補が選択された場合に、選択されたことがわかるような表示が行われる。この例では、画像８０６に示すように、選択された画像を枠で囲んだ表示が行われる。また、購買者候補表示領域８０４において複数の画像が選択された場合は、同様の表示が複数の画像に対して行われる。
【００３９】
また、購買者候補表示領域８０４では、レジ前にいる購買者と同一グループに含まれる顧客を選択しやすくするような表示が行われる。例えば、ユーザは、出入口カメラ２０３で撮影された、顧客の入店の様子が映る画像をもとに、グループ判定を行う。そして、ＰＯＳ画面表示制御部３０３は、購買者候補表示領域８０４に表示する際に判定結果がわかるよう表示し、関連付けを行いやすくする。一例として、ＰＯＳ画面表示制御部３０３は、図８（Ｂ）の点線８０７のように枠で囲って、各購買者候補がグループであることが分かるよう表示を行ってもよい。ユーザによるグループ判定の方法として、同じ画像に写っている人物は同じグループとし、写っていない人物は別のグループと判定する方法があるが、ここで例示したものに限らず、顧客のグループ分けが行えるものであればどのようなものであってもよい。
【００４０】
Ｓ７０２において、販売情報処理部３０５は、ＰＯＳ入力受付部３０４でユーザによって追加探索が選択されたかどうか判定する。すなわち、販売情報処理部３０５は、追加探索ボタン８０５が選択されたかを判定する。選択された場合は（Ｓ７０２のＹｅｓ）、処理はＳ７０３に進み、追加探索処理を行う。選択されない場合は（Ｓ７０２のＮｏ）、処理はＳ７０４に進む。
【００４１】
Ｓ７０３において、販売情報処理部３０５は、追加探索処理を行い、追加で購買者候補情報の取得を行う。追加探索処理の詳細について図９、図１０を用いて後述する。続いて、Ｓ７０４において、販売情報処理部３０５は、ユーザからの指定を受け付けて、ＰＯＳ入力受付部３０４でＰＯＳ画面表示制御部３０３に表示された購買候補者の中から購買者の指定を受け付ける。Ｓ７０５において、販売情報処理部３０５は、ＰＯＳ入力受付部３０４がユーザからの会計処理操作を受け付けた場合に、会計処理を行い、指定された購買者の情報と併せて、ＰＯＳサーバ１０５の販売情報管理部３１１を介して販売情報保持部３１３に保存する。
【００４２】
Ｓ７０３における追加探索処理の詳細を、図９と図１０を参照して説明する。図９は、追加探索処理の詳細を示すフロー図であり、図１０は、購買者候補表示領域の表示例を示す図である。ここでは、「実際の購買者は三人グループであり、そのうち一人の画像は表示されているが、残り二人はレジ前にいなかったため、表示されていない。たまたま他の顧客がレジ前にいたため、購買者ではないが購買者候補として表示されている」という状況例に沿って説明する。
【００４３】
図１０（Ａ）は、Ｓ７０３の処理が始まる際に購買者候補表示領域８０４に表示される画面例を示している。この画面には、購買者候補が二人（画像１００１、画像１００２）表示されており、一人（画像１００１）は購買者としてユーザにより選択されている。Ｓ９０１において、販売情報処理部３０５は、ネットワークカメラ１０６に制御指示を行い、レジカメラ２０２以外のネットワークカメラ１０６により撮影された画像を取得する。本実施形態において、レジカメラ２０２以外のネットワークカメラ１０６とは、店内カメラ２０１と出入口カメラ２０３を指す。
【００４４】
Ｓ９０２において、ＰＯＳサーバ１０５の映像解析部３１０は、Ｓ９０１で取得した他カメラからの画像に対して画像解析処理を行い、画像に含まれる購買候補者の情報を取得する。顧客情報管理部３０９は、取得された情報を顧客情報保持部３１２に保存する。ここでの画像解析処理には、Ｓ６０２と同様に、画像に対して顔検出処理を行い、検出された顔情報に基づいて購買候補者の情報を取得する処理が含まれる。
【００４５】
Ｓ９０３において、販売情報管理部３１１は顧客情報保持部３１２に保存されている購買候補者の情報を読み出し、ＰＯＳレジ１０７へ送る。ＰＯＳレジ１０７のＰＯＳ画面表示制御部３０３は、表示部４０４に購買候補者の情報を表示する。このときの表示部４０４に表示される画面の一例を図１０（Ｂ）に示す。図１０（Ｂ）は、Ｓ９０３の際に購買者候補表示領域８０４に表示される画面例を示している。画像１００３と画像１００４が指す人物の画像は、画像１００１と画像１００２が指す人物の画像と同様であり、どのカメラでいつ取得した画像であるかの情報が付けられている（情報１００７、情報１００８）。画像１００５および画像１００６が指す人物の画像は、Ｓ９０１およびＳ９０２で取得した画像から得られたものである。それぞれの画像に、店内カメラで現在時刻に取得した画像であることを説明する情報（情報１００９）、出入口カメラで現在時刻に取得した画像であることを説明する情報（情報１０１０）が付けられている。
【００４６】
追加探索処理は、図９（Ａ）のＳ９０１〜Ｓ９０３で示した処理に限らず、例えば、図８（Ｂ）のＳ９０４〜Ｓ９０５に示す処理でもよい。以下、Ｓ９０４〜Ｓ９０５の処理例について、「会計直前まではグループ全員が揃っていたが、会計時にはそのうち二人がどこかに行ってしまい、レジ前にはいなくなっていた。」という状況例に沿って説明する。
【００４７】
Ｓ９０４において、販売情報処理部３０５は顧客情報保持部３１２に保存されている購買候補者の情報から、現在時刻情報をキーに購買候補者を検索し、購買候補者の情報を取得する。ここでの検索処理では、現在時刻から過去３分間に記録された購買候補者を抽出する処理を想定しているが、これに限らず時刻や状況などの何らかの入力に対して検索を行って結果を返すようなものならばどのようなものでもよい。
【００４８】
Ｓ９０５において、販売情報処理部３０５はＳ９０４で取得された購買候補者の情報をＰＯＳ画面表示制御部３０３の制御によりＰＯＳレジ１０７の表示部４０４に表示する。このときの購買者候補表示領域８０４に表示される画面例を図１０（Ｃ）に示す。図１０（Ｃ）は、Ｓ９０４の際に購買者候補表示領域８０４に表示される画面例を示している。画像１０１１および画像１０１２が指す人物の画像は、Ｓ９０４で取得した購買候補者情報から得られたものであり、レジカメラ２０２で３分前に取得した画像であることを説明する情報（情報１０１３、情報１０１４）が付けられている。
【００４９】
以上のように第一の実施形態によるマーケティング分析システムによれば、購買者情報が正しく取得されていない場合に、複数ネットワークカメラの画像や過去に取得した画像を用いることで、購買者情報を取得できる。これにより、購買者情報と購買情報の関連付けを容易に行うことができる。
【００５０】
［第二の実施形態］
第一の実施形態においては、購買者情報を取得し、購買処理を実施する際に、購買者候補の探索を行い、購買者の指定を受け付けることで、購買者情報と購買情報を関連付けることが可能であることを示した。第二の実施形態では、購買処理を実施する際に、購買者の仮情報の指定を受け付けて、会計処理を行い、仮情報と購買情報を関連付ける。会計処理が終了した後に、購買者候補の探索を行って購買者情報を取得し、取得した情報で仮情報を更新することで、購買者情報と購買情報を関連付けることが可能であることを示す。第二の実施形態におけるシステムの全体概要、プログラムの構成、データ構造は、第一の実施形態と同様のため説明を省略する。
【００５１】
本実施形態の全体の処理の流れは、上述した第一の実施形態（図６のＳ６０１〜Ｓ６０５）と同様である。第一の実施形態と異なる図６のＳ６０３の処理について、図１１と図１２を参照して説明する。図１１は、本実施形態における購買処理の詳細を示すフロー図である。図１２は、本実施形態における購買者候補の情報を表示する画面例を示す図である。
【００５２】
図１１のＳ１１０１において、ＰＯＳレジ１０７の販売情報処理部３０５は、顧客情報保持部３１２に保存されている購買候補者の情報を読み出す。ＰＯＳ画面表示制御部３０３は、表示部４０４に購買候補者の情報を表示する。このときの画面の一例を図１２（Ａ）に示す。領域１２０１は、顧客が購買しようとしている商品のリストを表示する領域である。領域１１０２は、会計処理に関わる合計金額などの情報を表示する領域である。領域１２０３は、購買客の選択に関わる情報を表示する領域である。領域１１０３には図８に示した領域８０３と同様に、購買者候補表示領域１２０４と、追加探索ボタン１２０５が含まれる。さらに、領域１２０３には、購買者候補表示領域１２０４に実際の購買者がすべて表示されていない場合に購買者の情報をユーザが仮で入力しておくための仮情報入力ボタン１２０６が備わっている。
【００５３】
Ｓ１１０２において、販売情報処理部３０５は、ユーザによるＰＯＳ入力受付部３０４からの仮情報入力ボタン１２０６の選択と、仮情報入力フォーム１２０７での仮情報の入力を受け付ける。仮情報入力ボタン１２０６が選択された際の入力画面例を図１２（Ｂ）に示す。ユーザにより仮情報入力ボタン１２０６が選択された場合、仮情報入力フォーム１２０７がＰＯＳレジ１０７の表示部４０４に表示される。ユーザは、仮情報入力フォーム１２０７に対して、年齢、性別などの購買者の属性情報を容易に入力することができる。この例では、年齢「３０代」、性別「女性」、備考として「赤い服装」といった購買者の属性情報が入力されている。入力される属性情報はこれに限らず、購買者の特徴を示すものであればどのようなものでもよい。
【００５４】
Ｓ１１０３において、販売情報処理部３０５は、ＰＯＳ入力受付部３０４でユーザからの会計処理操作を受け付けて、会計処理を行い、Ｓ１１０２で入力された仮情報と併せて、ＰＯＳサーバ１０５の販売情報管理部３１１を介して販売情報保持部３１３に保存する。
【００５５】
Ｓ１１０４において、販売情報処理部３０５は、ＰＯＳ入力受付部３０４でユーザによって追加探索ボタン１２０５が選択されたかどうか判定する。追加探索ボタン１２０５が選択された場合は（Ｓ１１０４のＹｅｓ）処理はＳ１１０５に進み、追加探索処理が行われる。追加探索ボタン１２０５が選択されない場合は（Ｓ１１０４のＮｏ）、処理はＳ１１０６に進む。
【００５６】
Ｓ１１０５において、販売情報処理部３０５は、追加探索処理を行い、追加で購買者候補情報の取得を行う。追加探索の詳細については、第一の実施形態（図６のＳ６０３）と同様のため、説明を省略する。
【００５７】
Ｓ１１０６において、販売情報処理部３０５は、ユーザからの指定を受け付けて、ＰＯＳレジ１０７の表示部４０４に表示されている購買候補者の中から購買者の指定を受け付ける。続いて、Ｓ１１０７において、販売情報処理部３０５は、Ｓ１１０６で指定された購買者の購買者情報を用いて、Ｓ１１０３で保存した仮情報を更新する。
【００５８】
なお、図１１の例では、Ｓ１１０３の処理の直後にＳ１１０４以降の処理が行われるように記述しているが、Ｓ１１０４以降の処理は直後に行われなくてもよい。例えば、会計時にはＳ１１０３までの処理が行われ、レジの混雑が緩和されたタイミングでＳ１１０４〜Ｓ１１０７の処理が行われてもよい。あるいは、営業時間中にはＳ１１０３までの処理が行われ、営業終了後にＳ１１０４〜Ｓ１１０７の処理が行われてもよい。
【００５９】
以上のように、第二の実施形態によるマーケティング分析システムによれば、会計処理を終了した後で、購買者候補の探索を行って購買者情報と購買情報を関連付けることができる。したがって、レジが混み合うなど購買者候補の探索を行う時間を十分に確保できない状況であっても、ユーザの手間を大きくすることなく、正しい購買者情報の関連付けを行うことができる。
【００６０】
以上に詳述した実施形態によれば、購買情報に対して購買者情報を容易に関連付けることができるようになり、より多様なマーケティング分析が可能となる。また、会計時に取得した画像からの情報だけでなく、会計場所以外のネットワークカメラから取得した画像や、ネットワークカメラで取得した過去の画像を用いて、購買者情報を取得することができ、購買者情報と購買情報を関連付けることができる。そのため、購買者が複数であっても正確な顧客情報を取得でき、マーケティング分析に活用できる。
【００６１】
なお、本発明は上記実施形態に限定されるものではなく、本発明の主旨に基づき種々の変形（各実施形態の有機的な組合せを含む）が可能であり、それらを本発明の範囲から除外するものではない。
【００６２】
＜その他の実施形態＞
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
【符号の説明】
【００６３】
１０２  クライアントＰＣ、１０３  マーケティングサーバ、１０４  ネットワークカメラサーバ、１０５  ＰＯＳサーバ、１０６  ネットワークカメラ、１０７  ＰＯＳレジ
【図１】
2017162104.tif 000003
【図２】
2017162104.tif 000004
【図３】
2017162104.tif 000005
【図４】
2017162104.tif 000006
【図５】
2017162104.tif 000007
【図６】
2017162104.tif 000008
【図７】
2017162104.tif 000009
【図８】
2017162104.tif 000010
【図９】
2017162104.tif 000011
【図１０】
2017162104.tif 000012
【図１１】
2017162104.tif 000013
【図１２】
2017162104.tif 000014