(57)【特許請求の範囲】
【請求項１】
複数のレジがある店舗内を撮影した画像から、出入口における入店した顧客に関する情報と該店舗内での顧客の動線に関する情報を対応付ける第１の対応付手段と、
前記店舗内の支払領域から出入口までの顧客の動線に関する情報と該店舗における購買に関する情報を対応付ける第２の対応付手段と、
前記店舗の出入口における入店した顧客に関する情報と退店した顧客に関する情報を対応付ける第３の対応付手段と、
前記第１の対応付手段と第２の対応付手段と第３の対応付手段によって対応付けられた情報を用いて、前記購買に関する情報と前記店舗内での顧客の動線に関する情報を対応付ける第４の対応付手段
を具備し、
前記第２の対応付手段は、前記顧客の動線に関する情報が、前記購買に関する情報で特定されるレジに該当するレジの前となっている場合に、該動線に関する情報と該購買に関する情報を対応付ける
ことを特徴とする情報処理装置。
【請求項２】
前記出入口における入店又は退店した顧客に関する情報は、該出入口を上から撮影した第１の画像から抽出したものであり、
前記店舗内での顧客の動線に関する情報と店舗内の支払領域から出入口までの顧客の動線に関する情報は、店舗内を撮影した第２の画像から抽出したものである
ことを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記第３の対応付手段は、入店した顧客の画像と対称となっている退店した顧客の画像を対応付けることによって、入店した顧客に関する情報と退店した顧客に関する情報を対応付ける
ことを特徴とする請求項１又は２に記載の情報処理装置。
【請求項４】
前記第４の対応付手段は、前記店舗内での顧客の動線に関する情報から前記入店した顧客に関する情報を抽出し、該入店した顧客に関する情報から前記退店した顧客に関する情報を抽出し、該退店した顧客に関する情報から前記支払領域から出入口までの顧客の動線に関する情報を抽出し、該支払領域から出入口までの顧客の動線に関する情報から前記購買に関する情報を抽出することによって、該購買に関する情報と該店舗内での顧客の動線に関する情報を対応付ける
ことを特徴とする請求項１から３のいずれか一項に記載の情報処理装置。
【請求項５】
コンピュータを、
複数のレジがある店舗内を撮影した画像から、出入口における入店した顧客に関する情報と該店舗内での顧客の動線に関する情報を対応付ける第１の対応付手段と、
前記店舗内の支払領域から出入口までの顧客の動線に関する情報と該店舗における購買に関する情報を対応付ける第２の対応付手段と、
前記店舗の出入口における入店した顧客に関する情報と退店した顧客に関する情報を対応付ける第３の対応付手段と、
前記第１の対応付手段と第２の対応付手段と第３の対応付手段によって対応付けられた情報を用いて、前記購買に関する情報と前記店舗内での顧客の動線に関する情報を対応付ける第４の対応付手段
として機能させ、
前記第２の対応付手段は、前記顧客の動線に関する情報が、前記購買に関する情報で特定されるレジに該当するレジの前となっている場合に、該動線に関する情報と該購買に関する情報を対応付ける
情報処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置及び情報処理プログラムに関する。
【背景技術】
【０００２】
特許文献１には、チェックアウトレーンには顧客が密集するのでカメラ画像で顧客一人一人を個別に認識して動線計測を継続することは困難であることを課題とし、顧客動向収集システムは、顧客の移動経路を示す動線情報を生成する動線計測手段、動線計測手段が生成した各々の動線情報に固有の動線インデックスを発行する動線インデックス発行手段、動線計測手段が生成した各々の動線情報を動線インデックス毎に記憶する動線情報記憶手段、精算時に顧客の購買商品の情報を管理する販売時点情報管理手段、販売時点情報管理手段が管理する購買商品の情報を顧客毎に記憶する購買情報記憶手段、同一顧客の動線情報と購買情報とを関連付ける顧客動向連結手段及び顧客動向連結手段が関連付けた情報を記憶する連結情報記憶手段を具備することが開示されている。
【０００３】
特許文献２には、店内の客の移動データを作成することができ、さらに、移動データを購買データやパーソナルデータと合わせて分析することができる装置が望まれることを課題とし、移動分析装置は、特定の領域内の複数の範囲の画像を撮影する複数の撮像装置であるカメラと、画像を処理し画像内で移動する移動物体の特徴量と画像から解析される個々の範囲内での移動物体の軌跡を示す軌跡データとを抽出する画像処理装置と、各々の範囲で撮影された移動物体を特徴量のデータを照合して認証し同一の前記移動物体の軌跡置データを統合して移動物体の領域内での移動の様子を示す移動データを作成するデータ統合分析装置と、を具備することが開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−０８７２０８号公報
【特許文献２】特開２００３−２６３６４１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明は、支払いのための顧客の列ができた場合であっても、購買に関する情報と店舗内での顧客の動線に関する情報を対応付けるようにした情報処理装置及び情報処理プログラムを提供することを目的としている。
【課題を解決するための手段】
【０００６】
かかる目的を達成するための本発明の要旨とするところは、次の各項の発明に存する。
請求項１の発明は、複数のレジがある店舗内を撮影した画像から、出入口における入店した顧客に関する情報と該店舗内での顧客の動線に関する情報を対応付ける第１の対応付手段と、前記店舗内の支払領域から出入口までの顧客の動線に関する情報と該店舗における購買に関する情報を対応付ける第２の対応付手段と、前記店舗の出入口における入店した顧客に関する情報と退店した顧客に関する情報を対応付ける第３の対応付手段と、前記第１の対応付手段と第２の対応付手段と第３の対応付手段によって対応付けられた情報を用いて、前記購買に関する情報と前記店舗内での顧客の動線に関する情報を対応付ける第４の対応付手段を具備し、前記第２の対応付手段は、前記顧客の動線に関する情報が、前記購買に関する情報で特定されるレジに該当するレジの前となっている場合に、該動線に関する情報と該購買に関する情報を対応付けることを特徴とする情報処理装置である。
【０００７】
請求項２の発明は、前記出入口における入店又は退店した顧客に関する情報は、該出入口を上から撮影した第１の画像から抽出したものであり、前記店舗内での顧客の動線に関する情報と店舗内の支払領域から出入口までの顧客の動線に関する情報は、店舗内を撮影した第２の画像から抽出したものであることを特徴とする請求項１に記載の情報処理装置である。
【０００８】
請求項３の発明は、前記第３の対応付手段は、入店した顧客の画像と対称となっている退店した顧客の画像を対応付けることによって、入店した顧客に関する情報と退店した顧客に関する情報を対応付けることを特徴とする請求項１又は２に記載の情報処理装置である。
【０００９】
請求項４の発明は、前記第４の対応付手段は、前記店舗内での顧客の動線に関する情報から前記入店した顧客に関する情報を抽出し、該入店した顧客に関する情報から前記退店した顧客に関する情報を抽出し、該退店した顧客に関する情報から前記支払領域から出入口までの顧客の動線に関する情報を抽出し、該支払領域から出入口までの顧客の動線に関する情報から前記購買に関する情報を抽出することによって、該購買に関する情報と該店舗内での顧客の動線に関する情報を対応付けることを特徴とする請求項１から３のいずれか一項に記載の情報処理装置である。
【００１０】
請求項５の発明は、コンピュータを、複数のレジがある店舗内を撮影した画像から、出入口における入店した顧客に関する情報と該店舗内での顧客の動線に関する情報を対応付ける第１の対応付手段と、前記店舗内の支払領域から出入口までの顧客の動線に関する情報と該店舗における購買に関する情報を対応付ける第２の対応付手段と、前記店舗の出入口における入店した顧客に関する情報と退店した顧客に関する情報を対応付ける第３の対応付手段と、前記第１の対応付手段と第２の対応付手段と第３の対応付手段によって対応付けられた情報を用いて、前記購買に関する情報と前記店舗内での顧客の動線に関する情報を対応付ける第４の対応付手段として機能させ、前記第２の対応付手段は、前記顧客の動線に関する情報が、前記購買に関する情報で特定されるレジに該当するレジの前となっている場合に、該動線に関する情報と該購買に関する情報を対応付ける情報処理プログラムである。
【発明の効果】
【００１１】
請求項１の情報処理装置によれば、支払いのための顧客の列ができた場合であっても、購買に関する情報と店舗内での顧客の動線に関する情報を対応付けることができる。
【００１２】
請求項２の情報処理装置によれば、出入口を上から撮影した画像から、出入口における入店又は退店した顧客に関する情報を抽出することができる。
【００１３】
請求項３の情報処理装置によれば、入店した顧客の画像と対称となっている退店した顧客の画像を対応付けることによって、入店した顧客に関する情報と退店した顧客に関する情報を対応付けることができる。
【００１４】
請求項４の情報処理装置によれば、支払いのための顧客の列ができた場合であっても、購買に関する情報と店舗内での顧客の動線に関する情報を対応付けることができる。
【００１５】
請求項５の情報処理プログラムによれば、支払いのための顧客の列ができた場合であっても、購買に関する情報と店舗内での顧客の動線に関する情報を対応付けることができる。
【図面の簡単な説明】
【００１６】
【図１】本実施の形態の構成例についての概念的なモジュール構成図である。
【図２】本実施の形態を利用したシステム構成例を示す説明図である。
【図３】店舗における顧客の列の例を示す説明図である。
【図４】本実施の形態による処理例を示すフローチャートである。
【図５】店舗のレイアウト例を示す説明図である。
【図６】店内動線テーブルのデータ構造例を示す説明図である。
【図７】本実施の形態による処理例を示す説明図である。
【図８】店内動線テーブルのデータ構造例を示す説明図である。
【図９】本実施の形態による処理例を示す説明図である。
【図１０】本実施の形態による処理例を示す説明図である。
【図１１】入店／退店テーブルのデータ構造例を示す説明図である。
【図１２】本実施の形態による処理例を示す説明図である。
【図１３】本実施の形態による処理例を示す説明図である。
【図１４】店内動線テーブルのデータ構造例を示す説明図である。
【図１５】入店／退店テーブルのデータ構造例を示す説明図である。
【図１６】ＩＤ対応テーブルのデータ構造例を示す説明図である。
【図１７】本実施の形態による処理例を示す説明図である。
【図１８】本実施の形態を実現するコンピュータのハードウェア構成例を示すブロック図である。
【発明を実施するための形態】
【００１７】
以下、図面に基づき本発明を実現するにあたっての好適な一実施の形態の例を説明する。
図１は、本実施の形態の構成例についての概念的なモジュール構成図を示している。
なお、モジュールとは、一般的に論理的に分離可能なソフトウェア（コンピュータ・プログラム）、ハードウェア等の部品を指す。したがって、本実施の形態におけるモジュールはコンピュータ・プログラムにおけるモジュールのことだけでなく、ハードウェア構成におけるモジュールも指す。それゆえ、本実施の形態は、それらのモジュールとして機能させるためのコンピュータ・プログラム（コンピュータにそれぞれの手順を実行させるためのプログラム、コンピュータをそれぞれの手段として機能させるためのプログラム、コンピュータにそれぞれの機能を実現させるためのプログラム）、システム及び方法の説明をも兼ねている。ただし、説明の都合上、「記憶する」、「記憶させる」、これらと同等の文言を用いるが、これらの文言は、実施の形態がコンピュータ・プログラムの場合は、記憶装置に記憶させる、又は記憶装置に記憶させるように制御するの意である。また、モジュールは機能に一対一に対応していてもよいが、実装においては、１モジュールを１プログラムで構成してもよいし、複数モジュールを１プログラムで構成してもよく、逆に１モジュールを複数プログラムで構成してもよい。また、複数モジュールは１コンピュータによって実行されてもよいし、分散又は並列環境におけるコンピュータによって１モジュールが複数コンピュータで実行されてもよい。なお、１つのモジュールに他のモジュールが含まれていてもよい。また、以下、「接続」とは物理的な接続の他、論理的な接続（データの授受、指示、データ間の参照関係等）の場合にも用いる。「予め定められた」とは、対象としている処理の前に定まっていることをいい、本実施の形態による処理が始まる前はもちろんのこと、本実施の形態による処理が始まった後であっても、対象としている処理の前であれば、そのときの状況・状態に応じて、又はそれまでの状況・状態に応じて定まることの意を含めて用いる。「予め定められた値」が複数ある場合は、それぞれ異なった値であってもよいし、２以上の値（もちろんのことながら、すべての値も含む）が同じであってもよい。また、「Ａである場合、Ｂをする」という意味を有する記載は、「Ａであるか否かを判断し、Ａであると判断した場合はＢをする」の意味で用いる。ただし、Ａであるか否かの判断が不要である場合を除く。
また、システム又は装置とは、複数のコンピュータ、ハードウェア、装置等がネットワーク（一対一対応の通信接続を含む）等の通信手段で接続されて構成されるほか、１つのコンピュータ、ハードウェア、装置等によって実現される場合も含まれる。「装置」と「システム」とは、互いに同義の用語として用いる。もちろんのことながら、「システム」には、人為的な取り決めである社会的な「仕組み」（社会システム）にすぎないものは含まない。
また、各モジュールによる処理毎に又はモジュール内で複数の処理を行う場合はその処理毎に、対象となる情報を記憶装置から読み込み、その処理を行った後に、処理結果を記憶装置に書き出すものである。したがって、処理前の記憶装置からの読み込み、処理後の記憶装置への書き出しについては、説明を省略する場合がある。なお、ここでの記憶装置としては、ハードディスク、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、外部記憶媒体、通信回線を介した記憶装置、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）内のレジスタ等を含んでいてもよい。
【００１８】
本実施の形態である処理装置１００は、購買に関する情報（以下、購買データともいう）と店舗内での顧客の動線に関する情報（以下、動線データともいう）を対応付けるものであって、図１の例に示すように、店内動線追跡記録モジュール１０２、入口真上動線追跡記録モジュール１０４、入店／退店データと入口を通る動線の対応付けモジュール１０６、レジから入口までの動線と購買データの対応付けモジュール１０８、入店／退店データの入店と退店のＩＤ対応付けモジュール１１０、店内動線と購買データの対応付けモジュール１１２、提示モジュール１１４を有している。店舗内において、顧客がどのような移動経路を示すと何を買うか、又は、逆に、ある商品を購入するための移動経路を調査したい場合がある。そのために、顧客の移動経路を示す動線データと、その顧客の購買内容を示す購買データとを関連付けるものである。
【００１９】
図３は、店舗２００における顧客の列の例を示す説明図である。
店舗２００内には、撮影装置（入口真上カメラ）１２２があり、商品棚２９０Ａ、商品棚２９０Ｂ、商品棚２９０Ｃ、商品棚２９０Ｄ、商品棚２９０Ｅがあり、顧客は商品を選択して、レジ受付台２１８へ進み、それぞれ支払い（レジ処理装置２２０Ａで顧客３０６、レジ処理装置２２０Ｂで顧客３０４、レジ処理装置２２０Ｃで顧客３０２）が行われる。その場合、図３の例に示すように、支払いをするために待っている顧客の列（顧客３０８、顧客３１０、顧客３１２、顧客３１４、顧客３１６）がフォーク型となる場合がある。待っているときでは、静止している状態となる場合が多く、静止していると背景との区別がつきにくく、人体を抽出することが困難となる場合がある。なお、この状況は、フォーク型に限らず、待ちの列が発生した場合にも発生する。また、特にフォーク型の場合は、列に並んだ順序とレジで処理を完了する順序が一致しない場合が発生する。例えば、顧客３０２、顧客３０４、顧客３０６の順序で並んでいたとしても、必ずしもこの順序で支払いが完了するわけではない。例えば、購入する商品の量、店員が不慣れである場合等によって、顧客３０６の支払いが他の２人（顧客３０２、顧客３０４）よりも先に完了する場合がある。その場合、前述の特許文献等に示した技術では、動線データと購買データを誤って対応付けてしまうことがある。また、レジ受付台２１８に立ち寄ったが何も買わない場合もあるので、対応付けは自明ではない。そして、レジ受付台２１８で顧客の顔を撮影することは望ましくない。
処理装置１００は、店内動線と購買情報を抽出し、入店における動線と退店における動線の対応付けを行い、退店における動線と購買情報を対応付ける。これにより、レジ待ち行列に関係なく、店内動線と購買情報を対応付けるようにしている。
【００２０】
図１を用いて、処理装置１００内のモジュール、処理装置１００に接続されている装置等の機能、処理内容等の説明を行う。
処理装置１００は、撮影装置（撮影装置（全方位カメラ）１２０、撮影装置（入口真上カメラ）１２２）から動画ストリームを受け取り、これを動線データに変換し、購買データＤＢ１４０上の購買データと対応付けるところまでを行う装置である。処理装置１００内での処理に関しては、以下に説明する。
【００２１】
撮影装置（全方位カメラ）１２０は、店内動線追跡記録モジュール１０２と接続されている。撮影装置（全方位カメラ）１２０は、１８０度（３６０度であってもよい）の視野角を持つカメラである。撮影装置（全方位カメラ）１２０は店舗の天井に取り付けられる。撮影装置（全方位カメラ）１２０と処理装置１００間の通信は、アナログ通信でもデジタル通信でもよい。デジタル通信の場合は、無線通信であっても有線通信であってもよい。処理装置１００には、カメラ画像をデジタルデータとして取り込むインタフェースが内蔵されているものとする。また、全方位カメラに限定されることなく、静止画又は動画を撮影するための２Ｄカメラ、３Ｄカメラ、サーモカメラ等であってもよい。また、撮影装置（全方位カメラ）１２０は、固定されたものであってもよいし、角度、位置等を変更することができるものであってもよい。
店内動線追跡記録モジュール１０２は、撮影装置（全方位カメラ）１２０、店内動線ＤＢ１３０と接続されている。店内動線追跡記録モジュール１０２は、店舗のエリア内に設置されたカメラを用いて人物を追跡して動線を記録する。
店内動線ＤＢ１３０は、店内動線追跡記録モジュール１０２、入店／退店データと入口を通る動線の対応付けモジュール１０６、レジから入口までの動線と購買データの対応付けモジュール１０８、提示モジュール１１４と接続されている。店内動線ＤＢ１３０は、店内動線追跡記録モジュール１０２による処理結果を記憶しており、入店／退店データと入口を通る動線の対応付けモジュール１０６、レジから入口までの動線と購買データの対応付けモジュール１０８からアクセスされる。具体的には、店内動線ＤＢ１３０は、店内動線が記録されるＤＢである。１人の店内動線に対して１つの店内動線ＩＤが割り当てられる。
【００２２】
撮影装置（入口真上カメラ）１２２は、入口真上動線追跡記録モジュール１０４と接続されている。撮影装置（入口真上カメラ）１２２は、任意の視野角を持つカメラである。撮影装置（入口真上カメラ）１２２は、店舗の出入口付近の天井に取り付けられる。そのほかの説明は、撮影装置（全方位カメラ）１２０と同等である。
入口真上動線追跡記録モジュール１０４は、撮影装置（入口真上カメラ）１２２、入店／退店データＤＢ１３２と接続されている。入口真上動線追跡記録モジュール１０４は、出入口を出入りする人物を追跡し、境界線をクロスしたときの画像、時刻、方向と、境界線上の座標（例えば、人物の中央等）を記録する。
入店／退店データＤＢ１３２は、入口真上動線追跡記録モジュール１０４、入店／退店データと入口を通る動線の対応付けモジュール１０６、入店／退店データの入店と退店のＩＤ対応付けモジュール１１０と接続されている。入店／退店データＤＢ１３２は、入口真上動線追跡記録モジュール１０４による処理結果を記憶しており、入店／退店データと入口を通る動線の対応付けモジュール１０６、入店／退店データの入店と退店のＩＤ対応付けモジュール１１０からアクセスされる。入店／退店データＤＢ１３２は、入店／退店が記録されるＤＢである。
【００２３】
入店／退店データと入口を通る動線の対応付けモジュール１０６は、店内動線ＤＢ１３０、入店／退店データＤＢ１３２、ＩＤ対応ＤＢ１５０と接続されている。入店／退店データと入口を通る動線の対応付けモジュール１０６は、店舗内を撮影した画像から、出入口における入店した顧客に関する情報とその店舗内での顧客の動線に関する情報を対応付ける。「店舗内での顧客の動線に関する情報」は、出入口（入り口）から支払領域まで又は支払いを行うための列待ち状態までの動線情報を含む。例えば、入店した顧客における、商品を選択して、支払いをするために支払領域までの動線情報がある。具体的には、出入口の真上から撮影した画像に写っている人物と店内動線追跡記録モジュール１０２で得られた動線を対応付ける。
【００２４】
レジから入口までの動線と購買データの対応付けモジュール１０８は、店内動線ＤＢ１３０、購買データＤＢ１４０、ＩＤ対応ＤＢ１５０と接続されている。レジから入口までの動線と購買データの対応付けモジュール１０８は、店舗内の支払領域から出入口までの顧客の動線に関する情報とその店舗における購買（以下、購買データともいう）に関する情報を対応付ける。「店舗内の支払領域から出入口までの顧客の動線に関する情報」は、例えば、支払いを済ませた顧客における、支払領域から出入口（出口）までの動線情報を含む。そして、「支払領域」とは、顧客が商品を購入するための支払いを行う場所であり、一般的にはレジスターが設置されている場所の近辺（以下、レジともいう）である。具体的には、動線がレジから離れた時刻と購買データを時刻に基づいて対応付けする。
【００２５】
入店／退店データの入店と退店のＩＤ対応付けモジュール１１０は、入店／退店データＤＢ１３２、ＩＤ対応ＤＢ１５０と接続されている。入店／退店データの入店と退店のＩＤ対応付けモジュール１１０は、店舗の出入口における入店した顧客に関する情報と退店した顧客に関する情報を対応付ける。また、入店／退店データの入店と退店のＩＤ対応付けモジュール１１０は、入店した顧客の画像と対称となっている退店した顧客の画像を対応付けることによって、入店した顧客に関する情報と退店した顧客に関する情報を対応付けるようにしてもよい。具体的には、入退店画像（撮影装置（入口真上カメラ）１２２が撮影した場合、又は、後述するように撮影装置（全方位カメラ）１２０が撮影した画像）を用いて、入店／退店データの入店と退店のＩＤを対応付ける。
【００２６】
店内動線と購買データの対応付けモジュール１１２は、ＩＤ対応ＤＢ１５０と接続されている。店内動線と購買データの対応付けモジュール１１２は、入店／退店データと入口を通る動線の対応付けモジュール１０６とレジから入口までの動線と購買データの対応付けモジュール１０８と入店／退店データの入店と退店のＩＤ対応付けモジュール１１０によって対応付けられた情報を用いて、購買に関する情報と店舗内での顧客の動線に関する情報を対応付ける。店内動線と購買データの対応付けモジュール１１２は、「店舗内での顧客の動線に関する情報」から「入店した顧客に関する情報」を抽出し、「その入店した顧客に関する情報」から「退店した顧客に関する情報」を抽出し、「その退店した顧客に関する情報」から「支払領域から出入口までの顧客の動線に関する情報」を抽出し、「その支払領域から出入口までの顧客の動線に関する情報」から「購買に関する情報」を抽出することによって、「その購買に関する情報」と「その店舗内での顧客の動線に関する情報」を対応付けるようにしてもよい。具体的には、入店／退店データと入口を通る動線の対応付けモジュール１０６、レジから入口までの動線と購買データの対応付けモジュール１０８、入店／退店データの入店と退店のＩＤ対応付けモジュール１１０で得られた対応から、店内動線ＩＤ（出入口からレジ待ち列におけるＩＤ）とレシートＩＤを対応させる。
【００２７】
購買データＤＢ１４０は、レジから入口までの動線と購買データの対応付けモジュール１０８、提示モジュール１１４と接続されている。具体的には、購買データＤＢ１４０は、ＰＯＳ（Ｐｏｉｎｔ  Ｏｆ  Ｓａｌｅ  ｓｙｓｔｅｍ）等の購買データが格納されるＤＢである。１レシートにつき、１つのレシートＩＤが割り当てられている。また、決済完了時刻も記録されている。例えば、時刻は分までとする。もちろんのことながら、ここでの時刻は日時（年、月、日、時、分、秒、秒以下、又はこれらの組み合わせであってもよい）を含む概念である。
ＩＤ対応ＤＢ１５０は、入店／退店データと入口を通る動線の対応付けモジュール１０６、レジから入口までの動線と購買データの対応付けモジュール１０８、入店／退店データの入店と退店のＩＤ対応付けモジュール１１０、店内動線と購買データの対応付けモジュール１１２、提示モジュール１１４と接続されている。具体的には、ＩＤ対応ＤＢ１５０は、入店ＩＤ、退店ＩＤ、店内動線ＩＤ、レシートＩＤを対応付けるためのデータベースである。テーブル構成としては、１テーブル構成としてもよいし、一対一対応のテーブルを複数個用意する構成であってもよい。
【００２８】
提示モジュール１１４は、店内動線ＤＢ１３０、購買データＤＢ１４０、ＩＤ対応ＤＢ１５０、表示装置１９０と接続されている。提示モジュール１１４は、店内動線ＤＢ１３０、購買データＤＢ１４０、ＩＤ対応ＤＢ１５０に記憶されているデータを用いて、店内動線と購買データの対応付けモジュール１１２による処理結果を表示装置１９０に提示させる。なお、店内動線と購買データの対応付けモジュール１１２による処理結果（ＩＤ対応ＤＢ１５０内のデータ）を、例えば、プリンタ等の印刷装置で印刷すること、ファックス等の画像送信装置で画像を送信すること、購買データベース等の記憶装置へ書き込むこと、メモリーカード等の記憶媒体に記憶すること、他の情報処理装置へ渡すこと等を行うようにしてもよい。
表示装置１９０は、提示モジュール１１４と接続されている。表示装置１９０は、店内動線と購買データの対応付け結果が表示されるディスプレイ等の装置である。
【００２９】
なお、「出入口における入店又は退店した顧客に関する情報」、「店舗内での顧客の動線に関する情報と店舗内の支払領域から出入口までの顧客の動線に関する情報」は、店舗内を撮影した画像から抽出したものであってもよい。具体的には、撮影装置（全方位カメラ）１２０によって撮影された画像から、「出入口における入店又は退店した顧客に関する情報」、「店舗内での顧客の動線に関する情報と店舗内の支払領域から出入口までの顧客の動線に関する情報」の両方を抽出する。この場合、撮影装置（全方位カメラ）１２０は、店舗の出入口における画像も撮影する。
また、「出入口における入店又は退店した顧客に関する情報」は、その出入口を上から撮影した第１の画像から抽出したものであってもよい。具体的には、撮影装置（入口真上カメラ）１２２によって撮影された画像から、「出入口における入店又は退店した顧客に関する情報」を抽出する。そして、「店舗内での顧客の動線に関する情報と店舗内の支払領域から出入口までの顧客の動線に関する情報」は、店舗内を撮影した第２の画像から抽出したものであってもよい。具体的には、撮影装置（全方位カメラ）１２０によって撮影された画像から、「店舗内での顧客の動線に関する情報と店舗内の支払領域から出入口までの顧客の動線に関する情報」を抽出する。
さらに、撮影装置（入口真上カメラ）１２２によって撮影された画像から、「出入口における入店又は退店した顧客に関する情報」、「店舗内での顧客の動線に関する情報と店舗内の支払領域から出入口までの顧客の動線に関する情報」の両方を抽出するようにしてもよい。この場合、撮影装置（入口真上カメラ）１２２は、店舗の出入口の画像のほかに、店舗内の画像も撮影する。
また、ここでの「第１の画像又は第２の画像」は、複数のカメラ（撮影装置（全方位カメラ）１２０が複数、又は撮影装置（入口真上カメラ）１２２が複数）によって撮影された複数の画像を合成した画像であってもよい。
【００３０】
図２は、本実施の形態を利用したシステム構成例を示す説明図である。
図２（ａ）の例では、店舗２００内に処理装置１００を設置した場合を示している。
店舗２００には、処理装置１００、撮影装置（全方位カメラ）１２０、撮影装置（入口真上カメラ）１２２、入り口２１０、レジ受付台２１８、購買データ記憶装置２３０、商品棚２９０Ａ、商品棚２９０Ｂ、商品棚２９０Ｃ、商品棚２９０Ｄ、商品棚２９０Ｅが設置されている。購買データ記憶装置２３０は、購買データＤＢ１４０を有している。レジ受付台２１８には、レジ処理装置２２０Ａ、レジ処理装置２２０Ｂ、レジ処理装置２２０Ｃが設置されている。
処理装置１００、撮影装置（全方位カメラ）１２０、撮影装置（入口真上カメラ）１２２、購買データ記憶装置２３０は、通信回線を介してそれぞれ接続されている。通信回線は、無線、有線、これらの組み合わせであってもよく、例えば、通信インフラとしてのイントラネット等であってもよい。
【００３１】
図２（ｂ）の例では、店舗２００外に処理装置１００を設置した場合を示している。
各店舗２００には、撮影装置（全方位カメラ）１２０、撮影装置（入口真上カメラ）１２２、購買データ記憶装置２３０が設置されている。処理装置１００、店舗２００Ａ、店舗２００Ｂ、店舗２００Ｃは、通信回線２９９を介してそれぞれ接続されている。通信回線２９９は、無線、有線、これらの組み合わせであってもよく、例えば、通信インフラとしてのインターネット、イントラネット等であってもよい。また、処理装置１００による機能は、クラウドサービスとして実現してもよい。
【００３２】
図４は、本実施の形態による処理例を示すフローチャートである。図５〜１７に示す例を用いて、各ステップの処理について説明する。
ステップＳ４０２では、店内動線追跡記録モジュール１０２は、店内における動線を追跡し、記録する。具体的には、店内動線追跡記録モジュール１０２は、エリア内に設置された撮影装置（全方位カメラ）１２０を用いて、出入口（入店）から、レジ待ち行列までの追跡及び、レジから出入口（退店）までの追跡を行う。
処理装置１００では、図５の例に示すようにエリア内の天井に設置された撮影装置（全方位カメラ）１２０（複数の場合もある）からの情報を前提とする例を示すが、全方位カメラでなくとも、動線が途切れずに追跡できるように、カメラが配置されていれば問題ない。
人物追跡には、既知の手法を用いればよい。例えば、前段の人体検出にはＭＯＧ２による背景差分法（Ｚｉｖｋｏｖｉｃ  ２００４）、後段の追跡にはＫＬＴトラッキング法（Ｔｏｍａｓｉ  ｅｔ ａｌ.  １９９１）などを用いればよい。
なお、処理装置１００の前提上、レジ待ちの列に並んだときに動線が分断されてしまうことは問題ないものとする。
【００３３】
追跡の結果としては、最低限、タイムスタンプと追跡ＩＤと人物を囲う矩形の座標情報が出力されるのが一般的である。ここでは、追跡ＩＤのことを店内動線ＩＤと呼ぶものとする。ステップＳ４０２の処理結果を、例えば、店内動線テーブル６００として記憶する。図６は、店内動線テーブル６００のデータ構造例を示す説明図である。店内動線テーブル６００は、タイムスタンプ欄６１０、店内動線ＩＤ欄６２０、人物を囲う矩形の左上Ｘ座標欄６３０、人物を囲う矩形の左上Ｙ座標欄６４０、人物を囲う矩形の幅欄６５０、人物を囲う矩形の高さ欄６６０を有している。
タイムスタンプ欄６１０は、撮影した画像のタイムスタンプ（撮影日時）を記憶している。店内動線ＩＤ欄６２０は、本実施の形態において、店内動線を一意に識別するための情報（店内動線ＩＤ：ＩＤｅｎｔｉｆｉｃａｔｉｏｎ）を記憶している。人物を囲う矩形の左上Ｘ座標欄６３０は、その店内動線ＩＤにおける人物を囲う矩形（外接矩形）の左上Ｘ座標を記憶している。人物を囲う矩形の左上Ｙ座標欄６４０は、その店内動線ＩＤにおける人物を囲う矩形の左上Ｙ座標を記憶している。人物を囲う矩形の幅欄６５０は、その店内動線ＩＤにおける人物を囲う矩形の幅を記憶している。人物を囲う矩形の高さ欄６６０は、その店内動線ＩＤにおける人物を囲う矩形の高さを記憶している。
【００３４】
なお、人物を矩形として扱うと、処理上扱いにくいので、矩形情報から足元座標を計算して、これを人物の位置情報として用いてもよい。足元座標の計算方法としては、例えば、画像の中心と人物を囲う矩形の中心を通る直線を描画し、その直線と矩形の２つ交点を求め、図７の例に示すように、画像中心７０２から近いほうの交点を足元座標とすればよい。具体的には、撮影装置（全方位カメラ）１２０が撮影した画像７００で左上を原点とした座標系として、顧客の人物矩形情報７１０が図７の例のような位置にあるとする。この場合、画像７００の画像中心７０２と人物矩形情報７１０の人物矩形中心７１２とを結ぶ直線７１５と、人物矩形情報７１０の外縁（４本の線分）の交点であって、画像中心７０２に近い足元座標７２０を、足元座標とする。
また、全方位カメラの画像は歪んでいて扱いにくいので、既知の幾何学補正技術により歪みを除去し、平面図の座標系の動線データに変換してもよい。簡単には、床に等間隔にマーカーを貼った状態で全方位カメラ画像を取得し、中心からの距離を変換する回帰式を導出しておけばよい。処理装置１００の説明では、簡便のため、平面図の座標系に変換した動線データを用いる。
ステップＳ４０２の足元座標を用いた処理結果を、例えば、店内動線テーブル８００として記憶する。図８は、店内動線テーブル８００のデータ構造例を示す説明図である。店内動線テーブル８００は、タイムスタンプ欄８１０、店内動線ＩＤ欄８２０、Ｘ座標欄８３０、Ｙ座標欄８４０を有している。
タイムスタンプ欄８１０は、撮影した画像のタイムスタンプを記憶している。店内動線ＩＤ欄８２０は、店内動線ＩＤを記憶している。Ｘ座標欄８３０は、その店内動線ＩＤにおける足元座標のＸ座標を記憶している。Ｙ座標欄８４０は、その店内動線ＩＤにおける足元座標のＹ座標を記憶している。
【００３５】
店内動線追跡記録モジュール１０２では、以下の２種類の動線を取得する
・入口からレジ待ち行列までの動線（例えば、図９に示す入店からレジ行列までの動線９１０参照）
・レジから入口までの動線（例えば、図１０に示すレジから入口までの動線１０１０参照）
なお、レジ及び入口の座標情報は予め保持しておくものとする。
また、１つの全方位カメラで対象エリアすべてをカバーできない場合は、複数カメラを用いる視体積交差法（窪田ら  ２００８）等の技術を用いて店内動線を取得すればよい。
このステップＳ４０２の説明における前述の参考文献は、以下の通りである。
「Ｚｉｖｋｏｖｉｃ，  Ｚｏｒａｎ．  ”Ｉｍｐｒｏｖｅｄ  ａｄａｐｔｉｖｅ  Ｇａｕｓｓｉａｎ  ｍｉｘｔｕｒｅ  ｍｏｄｅｌ  ｆｏｒ  ｂａｃｋｇｒｏｕｎｄ  ｓｕｂｔｒａｃｔｉｏｎ．”  Ｐａｔｔｅｒｎ  Ｒｅｃｏｇｎｉｔｉｏｎ，  ２００４．  ＩＣＰＲ  ２００４．  Ｐｒｏｃｅｅｄｉｎｇｓ  ｏｆ  ｔｈｅ  １７ｔｈ  Ｉｎｔｅｒｎａｔｉｏｎａｌ  Ｃｏｎｆｅｒｅｎｃｅ  ｏｎ．  Ｖｏｌ．  ２．  ＩＥＥＥ，  ２００４．」
「Ｃａｒｌｏ  Ｔｏｍａｓｉ  ａｎｄ  Ｔａｋｅｏ  Ｋａｎａｄｅ．  Ｄｅｔｅｃｔｉｏｎ  ａｎｄ  Ｔｒａｃｋｉｎｇ  ｏｆ  Ｐｏｉｎｔ  Ｆｅａｔｕｒｅｓ．  Ｃａｒｎｅｇｉｅ  Ｍｅｌｌｏｎ  Ｕｎｉｖｅｒｓｉｔｙ  Ｔｅｃｈｎｉｃａｌ  Ｒｅｐｏｒｔ  ＣＭＵ−ＣＳ−９１−１３２，  Ａｐｒｉｌ  １９９１．」
「窪田進，  丸山昌之，  ａｎｄ  伊久美智則．  ”複数の全方位カメラによる人物動線計測システム．”  東芝レビュー  ６３．１０  （２００８）：  ４４−４７．」
【００３６】
ステップＳ４０４では、入口真上動線追跡記録モジュール１０４は、店舗の入口真上における動線を追跡し、記録する。具体的には、入口真上動線追跡記録モジュール１０４は、撮影装置（入口真上カメラ）１２２を利用して、入口真上を通る人物の動線を記録する。入口真上動線追跡記録モジュール１０４の処理として、例えば、店内動線追跡記録モジュール１０２と同等の背景差分とＫＬＴトラッキングによる方法等を利用する。動線データの形式は、図６の例に示した店内動線テーブル６００を用いればよい。
ここで、店外と店内の境界線を越えたとき（入店と退店のとき）の画像を保存しておく。
また、境界線を越えたときの時刻と方向（人物が移動する方向であって、店外から店内への入店と店内から店外への退店の２方向がある）と、境界線上の座標（例えば、人物の中央等）も記録しておく。
入店、退店の区別は、予め与えておいた出入口を表す線分（境界線）をどちらの方から越えたのか、に基づいて区別する。
画像ファイルは例えば、入退店ＩＤをファイル名としておくことで対応付けられる。ステップＳ４０４の処理結果を、例えば、入店／退店テーブル１１００として記憶する。図１１は、入店／退店テーブル１１００のデータ構造例を示す説明図である。入店／退店テーブル１１００は、タイムスタンプ欄１１１０、入退店ＩＤ欄１１２０、入店／退店欄１１３０、境界線上の座標欄１１４０を有している。
タイムスタンプ欄１１１０は、撮影した画像のタイムスタンプを記憶している。入退店ＩＤ欄１１２０は、本実施の形態において、入退店を一意に識別するための情報（入退店ＩＤ）を記憶している。入店／退店欄１１３０は、その入退店ＩＤは入店であるか退店であるかを記憶している。境界線上の座標欄１１４０は、その入退店ＩＤにおける境界線上の座標を記憶している。この境界線上の座標は、図１２の例に示すように、入り口２１０における１次元の座標である。
なお、入店と退店を別テーブルとしても問題ない。つまり、入店用テーブルとして、タイムスタンプ欄１１１０と入退店ＩＤ欄１１２０と境界線上の座標欄１１４０を有しており、退店用テーブルとして、タイムスタンプ欄１１１０と入退店ＩＤ欄１１２０と境界線上の座標欄１１４０を有している２つのテーブルを用いてもよい。
【００３７】
ステップＳ４０６では、入店／退店データと入口を通る動線の対応付けモジュール１０６は、入店／退店データＤＢ１３２内の入店／退店データと入口を通る動線の対応付けを行う。具体的には、入店／退店データと入口を通る動線の対応付けモジュール１０６は、タイムスタンプや、座標の対応関係に基づいて、入店／退店データと店内動線追跡記録モジュール１０２で得られた動線のＩＤを対応付ける。
このとき、入店／退店データが入店であれば、店内動線データのうち、入店からレジまでの動線と対応付ける。逆に、入店／退店データが退店であれば、店内動線データのうち、レジから退店までの動線と対応付ける。
【００３８】
図１３の例に示す荒い座標系の店内平面図を前提とし、図１４の例に示す店内動線テーブル１４００内の店内動線データと、図１５の例に示す入店／退店テーブル１５００内の入店／退店データを用いて説明する。なお、店内動線テーブル１４００は店内動線テーブル８００と、入店／退店テーブル１５００は入店／退店テーブル１１００と同等のデータ構造である。
図１５の例に示す入店／退店テーブル１５００の入店に関する行カラムを１つずつ取り出す。ここでは、以下の入店／退店データ（入店／退店テーブル１５００内の２行目）が取り出されたものとする。
（１７：２２：３４，  ４０，  入店，  ４）
【００３９】
次に、図１４の例に示す店内動線テーブル１４００からタイムスタンプ（１７：２２：３４）の店内動線データを検索すると、以下の店内動線データ（店内動線テーブル１４００内の１４、１５行目）が取り出される。
（１７：２２：３４，  ５０，  ４，  １）
（１７：２２：３４，  ５１，  ４，  ５）
【００４０】
次に、取り出された店内動線データの中から、入口を越えてすぐの位置にあるもの（図１３の例に示すように、Ｙ座標が５で、Ｘ座標が１か２か３か４か５）だけを抽出する。すると、以下の店内動線データ（店内動線テーブル１４００内の１５行目）だけが残ることになる。
（１７：２２：３４，  ５１，  ４，  ５）
【００４１】
次に、通過した入口のＸ座標位置が同じかどうかを確認し、異なるものは除外する。この例の場合は、店内動線データ、入店／退店データとも４であるので、除外されないことになる。
次に残った店内動線データに対して、同じ店内動線ＩＤ（５１）で、ひとつ前の時刻（１７：２２：３３）の店内動線データを検索すると以下（店内動線テーブル１４００内の１３行目）が得られる。
（１７：２２：３３，  ５１，  ４，  ６）
【００４２】
次に、この店内動線データを検査し、場所が店外かどうかを判定する。図１３の例に示すように、場所（４，  ６）は店外であるので、店内動線ＩＤ＝５１の店内動線データ（図１３の例に示す動線１３２０）は、入店の動線であることが分かる。取り出した入店／退店データと同じ方向であれば残し、そうでなければ除外する。この例の場合は、取り出した入店／退店データは入店であったので、残すことになる。
以上により、入退店ＩＤ＝４０の入店データは、店内動線ＩＤ＝５１の店内動線データに対応することが分かる。
得られた対応は、図１６のように示すようなテーブルとして、ＩＤ対応ＤＢ１５０に記録される。図１６は、ＩＤ対応テーブル１６００のデータ構造例を示す説明図である。ＩＤ対応テーブル１６００は、店内動線ＩＤ欄１６１０、入退店ＩＤ欄１６２０、入店／退店欄１６３０を有している。
店内動線ＩＤ欄１６１０は、店内動線ＩＤを記憶している。入退店ＩＤ欄１６２０は、その店内動線ＩＤに対応する入退店ＩＤを記憶している。入店／退店欄１６３０は、その入退店ＩＤは入店であるか退店であるかを記憶している。
ここでは、処理の一例として上記を示したが、逆に、図１４の例に示す店内動線テーブル１４００内のデータを先に選択して、対応する処理を行ってもよい。
なお、タイムスタンプのマッチングは、完全に同一でなくとも、例えば、前後０．５秒などの幅を持たせてもよい。
【００４３】
ステップＳ４０８では、レジから入口までの動線と購買データの対応付けモジュール１０８は、レジから入口までの動線と購買データＤＢ１４０内の購買データの対応付けを行う。具体的には、レジから入口までの動線と購買データの対応付けモジュール１０８は、動線がレジから離れた時刻と購買データを時刻に基づいて対応付けする。対応付けの方法は、入店／退店データと入口を通る動線の対応付けモジュール１０６と同様である。もし、同じ時刻にデータがあった場合は、順序関係を優先する。
処理の手順は、以下の通りである。
（ステップＡ１）購買データＤＢ１４０からレシート（レシートデータ）を１つ取り出す。
（ステップＡ２）店内動線ＤＢ１３０から、取り出したレシートと近い時刻のデータを取り出す。
（ステップＡ３）取り出した店内動線データの場所がレジ前になっているかをチェックする。もし、レシートにレジ番号が記載されているならば、当該レジ番号に該当するレジの前かをチェックする。
（ステップＡ４）取り出した店内動線データが退店する動線かどうかをチェックする。取り出した店内動線データの店内動線ＩＤを持ち、取り出した店内動線データより未来の時刻のデータを店内動線ＤＢ１３０から取り出す。そのデータが、入口を店内→店外の順に越えているかを確認する。
（ステップＡ５）もし、この段階で複数の店内動線データが対応付け候補として残っている場合は、順序関係によって、どれに対応付くかを決める。例えば、２０時１５分のレシートが２つあり、今回取り出したのは、２つ目のレシートであった場合、残っている店内動線データのうち２番目の時刻のデータと対応付ける。
（ステップＡ６）レシートＩＤと店内動線ＩＤの対応をＩＤ対応ＤＢ１５０に格納する。
（ステップＡ７）未処理のレシートが残っている場合は、ステップＡ１に戻る。
ステップＳ４０８による処理結果としてのデータ形式の例は、以下の通りである。
・（タイムスタンプ、店内動線ＩＤ（レジ→入口）、レシートＩＤ）
【００４４】
ステップＳ４１０では、入店／退店データの入店と退店のＩＤ対応付けモジュール１１０は、入店／退店データＤＢ１３２内の入店／退店データの入店と退店のＩＤ対応付けを行う。具体的には、入店／退店データの入店と退店のＩＤ対応付けモジュール１１０は、入店／退店データＤＢ１３２において、予め取得してある境界線上の静止画を用いて、退店者のＩＤを入店者のＩＤに対応付けていく処理を行う。
まず、入店／退店データＤＢ１３２から退店の情報を時系列順に１つずつ取り出す。例えば、以下の退店情報（入店／退店テーブル１５００の３行目）が取り出されたとする。
（１７：３０：３８，  ４１，  退店，  ２）
このときの境界線上の静止画は、「４１．ｊｐｇ」という名前で保存されていたとする。例えば、図１７（ｂ）に示す退店時画像１７５０である。この退店時画像１７５０には、境界線１７３０上の顧客１７２０が撮影されている。この例では、退店の方向（図１７の例では上から下へ）に顧客１７２０が移動しているところを撮影した画像である。
次に、入店／退店データＤＢ１３２から入店の情報を時系列順に１つずつ取り出し、それに対応する境界線上の静止画を「４１．ｊｐｇ」と順次、人物の照合をする。例えば、退店時画像１７５０と図１７（ａ）に示す入店時画像１７１０とを照合する。入店時画像１７１０には、境界線１７３０上の顧客１７２０が撮影されている。この例では、入店の方向（図１７の例では下から上へ）に顧客１７２０が移動しているところを撮影した画像である。この照合処理では、退店時画像１７５０を１８０度回転させた画像を用いるようにしてもよい。つまり、退店時と入店時では顧客は逆方向を向いているからである。画像間の類似度を算出するようにしてもよいし、両画像から特徴抽出を行い、その特徴間の類似度を算出するようにしてもよい。また、既知の人物照合手法（井尻ら  ２０１１）で比較するようにしてもよい。
そして、４１．ｊｐｇと最も近い入口真上画像をもつ入店データが、入退店ＩＤ＝４１の退店データと対応付くと判断し、入退店ＩＤ（入店）と入退店ＩＤ（退店）の対応をＩＤ対応ＤＢ１５０に保存する。
ステップＳ４１０による処理結果としてのデータ形式の例は、以下の通りである。
・（入退店ＩＤ（入店）、入退店ＩＤ（退店））
この処理を、退店データがすべて処理されるまで繰り返す。
なお、本実施の形態では、入口真上画像を用いて入店と退店の対応付けを行ったが、入口真上に設置されたカメラでなくとも、人物の照合ができる程度に入口の入退店がとらえられるカメラであればよい。
店内に設置した動線追跡用カメラで、人物の照合ができる程度に入退店をとらえることができれば、動線追跡用カメラで入店と退店の対応付けを行ってもよい。
このステップＳ４１０の説明における前述の参考文献は、以下の通りである。
「井尻  善久，  川西  康友，  村瀬  洋，  美濃  導彦．  ”サーベイ論文：視野を共有しない複数カメラ間での人物照合，”  パターン認識・メディア理解研究会（ＰＲＭＵ），  ２０１１−１１．」
【００４５】
ステップＳ４１２では、店内動線と購買データの対応付けモジュール１１２は、店内動線と購買データＤＢ１４０内の購買データの対応付けを行う。具体的には、店内動線と購買データの対応付けモジュール１１２は、対応付けをたどって、購買データと店内動線を対応付ける。
本手段を実行するまでに、得られているＩＤの対応関係は以下の通りである。
・「店内動線ＩＤ（入口→レジ待ち列）」と「入退店ＩＤ（入店）」（入店／退店データと入口を通る動線の対応付けモジュール１０６による処理結果）
・「入退店ＩＤ（入店）」と「入退店ＩＤ（退店）」（入店／退店データの入店と退店のＩＤ対応付けモジュール１１０による処理結果）
・「入退店ＩＤ（退店）」と「店内動線ＩＤ（レジ→入口）」（入店／退店データと入口を通る動線の対応付けモジュール１０６による処理結果）
・「店内動線ＩＤ（レジ→入口）」と「レシートＩＤ」（レジから入口までの動線と購買データの対応付けモジュール１０８による処理結果）
これらから、「店内動線ＩＤ（入口→レジ待ち列）」→「入退店ＩＤ（入店）」→「入退店ＩＤ（退店）」→「店内動線ＩＤ（レジ→入口）」→「レシートＩＤ」とたどることができる。
以上により、求めたい「店内動線ＩＤ（入口→レジ待ち列）」と「レシートＩＤ」を対応付けることができる。
【００４６】
なお、本実施の形態としてのプログラムが実行されるコンピュータのハードウェア構成は、図１８に例示するように、一般的なコンピュータであり、具体的にはパーソナルコンピュータ、サーバーとなり得るコンピュータ等である。つまり、具体例として、処理部（演算部）としてＣＰＵ１８０１を用い、記憶装置としてＲＡＭ１８０２、ＲＯＭ１８０３、ＨＤ１８０４を用いている。ＨＤ１８０４として、例えばハードディスク、ＳＳＤ（Ｓｏｌｉｄ  Ｓｔａｔｅ  Ｄｒｉｖｅ）を用いてもよい。店内動線追跡記録モジュール１０２、入口真上動線追跡記録モジュール１０４、入店／退店データと入口を通る動線の対応付けモジュール１０６、レジから入口までの動線と購買データの対応付けモジュール１０８、入店／退店データの入店と退店のＩＤ対応付けモジュール１１０、店内動線と購買データの対応付けモジュール１１２、提示モジュール１１４等のプログラムを実行するＣＰＵ１８０１と、そのプログラムやデータを記憶するＲＡＭ１８０２と、本コンピュータを起動するためのプログラム等が格納されているＲＯＭ１８０３と、補助記憶装置（フラッシュメモリ等であってもよい）であるＨＤ１８０４（店内動線ＤＢ１３０、入店／退店データＤＢ１３２、購買データＤＢ１４０、ＩＤ対応ＤＢ１５０等の機能を有していてもよい）と、キーボード、マウス、タッチパネル等に対する利用者の操作に基づいてデータを受け付ける受付装置１８０６と、ＣＲＴ、液晶ディスプレイ、スピーカー等の出力装置１８０５（表示装置１９０としての機能を有していてもよい）と、ネットワークインタフェースカード等の通信ネットワークと接続するための通信回線インタフェース１８０７（撮影装置（全方位カメラ）１２０、撮影装置（入口真上カメラ）１２２等との通信の機能を有していてもよい）、そして、それらをつないでデータのやりとりをするためのバス１８０８により構成されている。これらのコンピュータが複数台互いにネットワークによって接続されていてもよい。
【００４７】
前述の実施の形態のうち、コンピュータ・プログラムによるものについては、本ハードウェア構成のシステムにソフトウェアであるコンピュータ・プログラムを読み込ませ、ソフトウェアとハードウェア資源とが協働して、前述の実施の形態が実現される。
なお、図１８に示すハードウェア構成は、１つの構成例を示すものであり、本実施の形態は、図１８に示す構成に限らず、本実施の形態において説明したモジュールを実行可能な構成であればよい。例えば、一部のモジュールを専用のハードウェア（例えば特定用途向け集積回路（Ａｐｐｌｉｃａｔｉｏｎ  Ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ：ＡＳＩＣ）等）で構成してもよく、一部のモジュールは外部のシステム内にあり通信回線で接続しているような形態でもよく、さらに図１８に示すシステムが複数互いに通信回線によって接続されていて互いに協調動作するようにしてもよい。また、特に、パーソナルコンピュータの他、携帯情報通信機器（携帯電話、スマートフォン、モバイル機器、ウェアラブルコンピュータ等を含む）、情報家電、ロボット、複写機、ファックス、スキャナ、プリンタ、複合機（スキャナ、プリンタ、複写機、ファックス等のいずれか２つ以上の機能を有している画像処理装置）などに組み込まれていてもよい。
【００４８】
なお、説明したプログラムについては、記録媒体に格納して提供してもよく、また、そのプログラムを通信手段によって提供してもよい。その場合、例えば、前記説明したプログラムについて、「プログラムを記録したコンピュータ読み取り可能な記録媒体」の発明としてとらえてもよい。
「プログラムを記録したコンピュータ読み取り可能な記録媒体」とは、プログラムのインストール、実行、プログラムの流通等のために用いられる、プログラムが記録されたコンピュータで読み取り可能な記録媒体をいう。
なお、記録媒体としては、例えば、デジタル・バーサタイル・ディスク（ＤＶＤ）であって、ＤＶＤフォーラムで策定された規格である「ＤＶＤ−Ｒ、ＤＶＤ−ＲＷ、ＤＶＤ−ＲＡＭ等」、ＤＶＤ＋ＲＷで策定された規格である「ＤＶＤ＋Ｒ、ＤＶＤ＋ＲＷ等」、コンパクトディスク（ＣＤ）であって、読出し専用メモリ（ＣＤ−ＲＯＭ）、ＣＤレコーダブル（ＣＤ−Ｒ）、ＣＤリライタブル（ＣＤ−ＲＷ）等、ブルーレイ・ディスク（Ｂｌｕ−ｒａｙ（登録商標）  Ｄｉｓｃ）、光磁気ディスク（ＭＯ）、フレキシブルディスク（ＦＤ）、磁気テープ、ハードディスク、読出し専用メモリ（ＲＯＭ）、電気的消去及び書換可能な読出し専用メモリ（ＥＥＰＲＯＭ（登録商標））、フラッシュ・メモリ、ランダム・アクセス・メモリ（ＲＡＭ）、ＳＤ（Ｓｅｃｕｒｅ  Ｄｉｇｉｔａｌ）メモリーカード等が含まれる。
そして、前記のプログラム又はその一部は、前記記録媒体に記録して保存や流通等させてもよい。また、通信によって、例えば、ローカル・エリア・ネットワーク（ＬＡＮ）、メトロポリタン・エリア・ネットワーク（ＭＡＮ）、ワイド・エリア・ネットワーク（ＷＡＮ）、インターネット、イントラネット、エクストラネット等に用いられる有線ネットワーク、又は無線通信ネットワーク、さらにこれらの組み合わせ等の伝送媒体を用いて伝送させてもよく、また、搬送波に乗せて搬送させてもよい。
さらに、前記のプログラムは、他のプログラムの一部分であってもよく、又は別個のプログラムと共に記録媒体に記録されていてもよい。また、複数の記録媒体に分割して記録されていてもよい。また、圧縮や暗号化等、復元可能であればどのような態様で記録されていてもよい。
【符号の説明】
【００４９】
１００…処理装置
１０２…店内動線追跡記録モジュール
１０４…入口真上動線追跡記録モジュール
１０６…入店／退店データと入口を通る動線の対応付けモジュール
１０８…レジから入口までの動線と購買データの対応付けモジュール
１１０…入店／退店データの入店と退店のＩＤ対応付けモジュール
１１２…店内動線と購買データの対応付けモジュール
１１４…提示モジュール
１２０…撮影装置（全方位カメラ）
１２２…撮影装置（入口真上カメラ）
１３０…店内動線ＤＢ
１３２…入店／退店データＤＢ
１４０…購買データＤＢ
１５０…ＩＤ対応ＤＢ
１９０…表示装置
２００…店舗
２１０…入り口
２１８…レジ受付台
２２０…レジ処理装置
２３０…購買データ記憶装置
２９０…商品棚
２９９…通信回線
【図１】
0006520218.tif 000002
【図２】
0006520218.tif 000003
【図３】
0006520218.tif 000004
【図４】
0006520218.tif 000005
【図５】
0006520218.tif 000006
【図６】
0006520218.tif 000007
【図７】
0006520218.tif 000008
【図８】
0006520218.tif 000009
【図９】
0006520218.tif 000010
【図１０】
0006520218.tif 000011
【図１１】
0006520218.tif 000012
【図１２】
0006520218.tif 000013
【図１３】
0006520218.tif 000014
【図１４】
0006520218.tif 000015
【図１５】
0006520218.tif 000016
【図１６】
0006520218.tif 000017
【図１７】
0006520218.tif 000018
【図１８】
0006520218.tif 000019