(57)【要約】      （修正有）【課題】店内の買物客に対し自身の行動履歴を提示するサーバー装置、商業施設内情報システム及び行動履歴の提示方法を提供する。【解決手段】商業施設内情報システム１００において、サーバー装置１は、一ユーザーに割り当てられた携帯端末及び一店舗に少なくともひとつ設置され、当該店舗の店内画像を撮影して、店内画像を送信するための店内カメラと通信可能であって、予め登録された、携帯端末を割り当てられたユーザーのユーザー画像に基づいて、店内画像に含まれる人物を登録ユーザーとして判定する手段と、登録ユーザーの店舗における行動履歴を記録する手段と、携帯端末からの第１の要求に応じて、行動履歴に関する情報を携帯端末に送信する手段とを備える。【選択図】図１
2019159998.tif 000002
【特許請求の範囲】
【請求項１】
一ユーザーに割り当てられた携帯端末、及び、一店舗に少なくともひとつ設置され、当該店舗の店内画像を撮影して、前記店内画像を送信するための店内カメラと通信可能であって、
予め登録された、前記携帯端末を割り当てられたユーザーのユーザー画像に基づいて、前記店内画像に含まれる人物を登録ユーザーとして判定する手段と、
前記登録ユーザーの前記店舗における行動履歴を記録する手段と、
前記携帯端末からの第１の要求に応じて、前記行動履歴に関する情報を前記携帯端末に送信する手段と
を備えるサーバー装置。
【請求項２】
前記店内画像に基づいて前記登録ユーザーが前記店舗内で行った商品のチェックに関する情報を、前記登録ユーザーの前記店舗における前記行動履歴として記録する手段と、
前記携帯端末からの第２の要求に応じて、前記商品のチェックに関する情報を、前記携帯端末に送信する手段と、
を更に備える請求項１に記載のサーバー装置。
【請求項３】
前記携帯端末からの第３の要求に応じて、前記チェックの対象となった商品の商品詳細情報を前記携帯端末に送信する手段を更に備える、請求項２に記載のサーバー装置。
【請求項４】
前記携帯端末からの第４の要求に応じて、前記チェックの対象となった商品に類似した商品の情報を前記携帯端末に送信する手段を更に備える、請求項３に記載のサーバー装置。
【請求項５】
前記店舗は、複数の店舗を収容する商業施設に収容された店舗のひとつであり、
前記複数の店舗のそれぞれに、少なくとも一台の前記店内カメラが設置され、
前記複数の店舗のそれぞれにおける、前記登録ユーザーの前記行動履歴を記録する手段と、
前記携帯端末からの第５の要求に応じて、前記複数の店舗における前記登録ユーザーの前記行動履歴に関する情報を前記携帯端末に送信する手段と
を更に備える、請求項１乃至請求項４のいずれか一項に記載のサーバー装置。
【請求項６】
一ユーザーに割り当てられた携帯端末と、
一店舗に少なくともひとつ設置され、当該店舗の店内画像を撮影して、前記店内画像を送信するための店内カメラと、
前記携帯端末及び前記店内カメラと通信可能な管理サーバーとを備え、
前記管理サーバーは、
予め登録された、前記携帯端末を割り当てられたユーザーのユーザー画像に基づいて、前記店内画像に含まれる人物を登録ユーザーとして判定する手段と、
前記登録ユーザーの前記店舗における行動履歴を記録する手段と、
前記携帯端末からの第１の要求に応じて、前記行動履歴に関する情報を前記携帯端末に送信する手段と、
を備える、商業施設内情報システム。
【請求項７】
前記管理サーバーは、
前記店内画像に基づいて、前記登録ユーザーが前記店舗内で行った商品のチェックに関する情報を、前記登録ユーザーの前記店舗における前記行動履歴として記録し、
前記携帯端末からの第２の要求に応じて、前記商品のチェックに関する情報を、前記携帯端末に送信する、
請求項６に記載の商業施設内情報システム。
【請求項８】
前記管理サーバーは、前記携帯端末からの第３の要求に応じて、前記チェックの対象となった商品の商品詳細情報を前記携帯端末に送信する、請求項７に記載の商業施設内情報システム。
【請求項９】
一ユーザーに割り当てられた携帯端末、及び、一店舗に少なくともひとつ設置され、当該店舗の店内画像を撮影して、前記店内画像を送信するための店内カメラと通信可能な管理サーバーで実行されて、
予め登録された、前記携帯端末を割り当てられたユーザーのユーザー画像に基づいて、前記店内画像に含まれる人物を登録ユーザーとして判定する手段と、
前記登録ユーザーの前記店舗における行動履歴を記録する手段と、
前記携帯端末からの第１の要求に応じて、前記行動履歴に関する情報を前記携帯端末に送信する手段と
して前記管理サーバーを機能させるためのプログラム。
【請求項１０】
管理サーバーに予め登録された、携帯端末のユーザー画像に基づいて、店舗に設置された店内カメラで撮影した店内画像に含まれる人物を、前記管理サーバーが登録ユーザーとして判定し、前記登録ユーザーの前記店舗における行動履歴を、前記管理サーバーが記録する段階と、
前記携帯端末からの第１の要求に応じて、前記行動履歴に関する情報を前記管理サーバーが前記携帯端末に送信する段階と
を含む、行動履歴の提示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、店内における買物客の行動履歴の記録に関する。また、本発明は、買物客に対する店内における自身の行動履歴の提供に関する。
【背景技術】
【０００２】
一般に、デパート、ショッピングセンター、ショッピングモール、更に、ショッピングセンターに飲食施設、映画館、遊技場等を併設した複合商業施設は、複数の店舗を収容する。これらの商業施設をここではまとめて単に商業施設と呼ぶものとする。一般に商業施設は単独の店舗と比較して広大である。また、商業施設では、類似の商品を複数の売り場、店舗で扱うことが多く、売り場や店舗を混同しやすい傾向がある。
【０００３】
一方で、買物をする際に、店内を一巡して気になる商品をチェックし、その後、チェックした商品の中で購入する商品を検討する、といった手順を踏む買物客が存在する。
【０００４】
このような検討を行う買物客は、チェックした商品をどこで見たのかを記憶しておく必要がある。現代では、多くの買物客が、スマートフォンや携帯電話のようなカメラを内蔵した携帯端末を携帯している。このため、携帯端末のカメラで撮影することにより、気になる商品を記録することが考えられる。しかし、商品の撮影は必ずしも許可されるものではなく、撮影を禁止する店舗もある。このため、買物客自身が携帯端末のカメラで撮影して記録するといった手法は、必ずしも利用することができない。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】国際公開第２０１５／０３３５７５号
【発明の概要】
【発明が解決しようとする課題】
【０００６】
本発明に関連した技術が特許文献１に開示されている。特許文献１によれば、買物客が現に手に取っている商品に関連した情報を、その場に設置した情報提示装置を用いて、その買物客に通知することが記載されている。
【０００７】
また、特許文献１によれば、情報提示装置を用いて買物客に商品に関する情報を提示する。情報提示装置は、買物客が視認可能（聞き取り可能）な位置に設置される、据置型の装置である。
【０００８】
しかし、特許文献１には、買物客が手に取った商品を記録することや、その記録を後から買物客が閲覧することについては記載されていない。
【０００９】
また、特許文献１によれば、特許文献１によれば、買物客は、情報提示装置から離れた場所では、情報を閲覧することができない。例えば、商品に関連する情報を、その商品を扱う店舗から離れたカフェ、レストラン、休憩所等で買物客が閲覧することはできない。
【００１０】
また、特許文献１によれば、据置型の情報提示装置を用いるため、特定の買物客個人を宛先とする情報の通知に用いることが難しい。例えば、店舗や複合商業施設が、買物客の購入実績に応じて異なる割引率を提示するサービスを提供する場合がある。このような場合、ある一人の買物客に対して提示する割引率を、他の買物客も閲覧可能な据置型の情報提示装置に表示するのは難しい。
【００１１】
本発明はこのような状況に鑑みてなされたものであり、本発明が解決しようとする課題は、店内の買物客に対して、自身の行動履歴を提示するシステムを提供することである。
【課題を解決するための手段】
【００１２】
上述の課題を解決するため、本発明は、その一態様として、一ユーザーに割り当てられた携帯端末、及び、一店舗に少なくともひとつ設置され、当該店舗の店内画像を撮影して、前記店内画像を送信するための店内カメラと通信可能であって、予め登録された、前記携帯端末を割り当てられたユーザーのユーザー画像に基づいて、前記店内画像に含まれる人物を登録ユーザーとして判定する手段と、前記登録ユーザーの前記店舗における行動履歴を記録する手段と、前記携帯端末からの第１の要求に応じて、前記行動履歴に関する情報を前記携帯端末に送信する手段とを備えるサーバー装置を提供する。
【００１３】
また、本発明は、他の一態様として、一ユーザーに割り当てられた携帯端末と、一店舗に少なくともひとつ設置され、当該店舗の店内画像を撮影して、前記店内画像を送信するための店内カメラと、前記携帯端末及び前記店内カメラと通信可能な管理サーバーとを備え、前記管理サーバーは、予め登録された、前記携帯端末を割り当てられたユーザーのユーザー画像に基づいて、前記店内画像に含まれる人物を登録ユーザーとして判定する手段と、前記登録ユーザーの前記店舗における行動履歴を記録する手段と、前記携帯端末からの第１の要求に応じて、前記行動履歴に関する情報を前記携帯端末に送信する手段と、を備える、商業施設内情報システムを提供する。
【００１４】
また、本発明は、他の一態様として、一ユーザーに割り当てられた携帯端末、及び、一店舗に少なくともひとつ設置され、当該店舗の店内画像を撮影して、前記店内画像を送信するための店内カメラと通信可能な管理サーバーで実行されて、予め登録された、前記携帯端末を割り当てられたユーザーのユーザー画像に基づいて、前記店内画像に含まれる人物を登録ユーザーとして判定する手段と、前記登録ユーザーの前記店舗における行動履歴を記録する手段と、前記携帯端末からの第１の要求に応じて、前記行動履歴に関する情報を前記携帯端末に送信する手段として前記管理サーバーを機能させるためのプログラムを提供する。
【００１５】
また、本発明は、他の一態様として、管理サーバーに予め登録された、携帯端末のユーザー画像に基づいて、店舗に設置された店内カメラで撮影した店内画像に含まれる人物を、前記管理サーバーが登録ユーザーとして判定し、前記登録ユーザーの前記店舗における行動履歴を、前記管理サーバーが記録する段階と、前記携帯端末からの第１の要求に応じて、前記行動履歴に関する情報を前記管理サーバーが前記携帯端末に送信する段階とを含む、行動履歴の提示方法を提供する。
【発明の効果】
【００１６】
本発明によれば、店内の買物客に対して、自身の行動履歴を提示することができる。
【図面の簡単な説明】
【００１７】
【図１】本発明の第１の実施形態である商業施設内情報システムについて説明するためのブロック図である。
【図２】店内カメラについて説明するためのブロック図である。
【図３】携帯端末について説明するためのブロック図である。
【図４】携帯端末で実行するユーザーアプリについて説明するためのブロック図である。
【図５】ユーザーアプリのメニュー画面の一例である。
【図６】ユーザーアプリが入退店履歴を表示するときの画面の一例である。
【図７】ユーザーアプリがチェック商品履歴を表示するときの画面の一例である。
【図８】ユーザーアプリが商品詳細を表示するときの画面の一例である。
【図９】ユーザーアプリが類似商品の一覧を表示するときの画面の一例である。
【図１０】携帯端末のユーザー画面を管理サーバーに登録する際の商業施設内情報システムの動作を説明するためのフローチャートである。
【図１１】携帯端末のユーザーが店舗に入退店したことを記録する際の商業施設内情報システムの動作を説明するためのフローチャートである。
【図１２】携帯端末のユーザーが店舗内でチェックした商品を記録する際の商業施設内情報システムの動作を説明するためのフローチャートである。
【図１３】携帯端末のユーザーが自身の行動履歴を閲覧する際の商業施設内情報システムの動作を説明するためのフローチャートである。
【図１４】携帯端末のユーザーがある店舗でチェックした商品の一覧を閲覧する際の商業施設内情報システムの動作を説明するためのフローチャートである。
【図１５】携帯端末のユーザーがある店舗でチェックした商品の商品詳細情報と、その商品に類似した商品の商品詳細情報とを閲覧する際の商業施設内情報システムの動作を説明するためのフローチャートである。
【発明を実施するための形態】
【００１８】
本発明の一実施の形態である商業施設内情報システム１００について図１を参照して説明する。商業施設内情報システム１００は、商業施設２００や、商業施設２００に収容されている店舗２００Ａ、２００Ｂ、２００Ｃ、…が、来店した買物客に対して情報を提供するためのシステムである。
【００１９】
商業施設２００は、類似の商品を扱う店舗を複数収容した商業施設である。商業施設２００には、例えば、ショッピングセンター、ショッピングモール、デパート、ショッピングビル、駅ビル、ファッションビル等がある。商業施設２００は、レストラン、映画館、遊技場等を併設した複合商業施設であってもよい。尚、本明細書にいう類似の商品は同一の商品も含むものとする。
【００２０】
商業施設２００は複数の店舗２００Ａ、２００Ｂ、２００Ｃ、…を収容している。店舗２００Ａ、２００Ｂ、２００Ｃ、…の中には、同一或いは類似の商品を扱う店舗が含まれている。本実施形態では、複合商業施設２００は、女性服を扱う店舗を複数収容している。
【００２１】
商業施設内情報システム１００は、管理サーバー１、店内カメラ２、携帯端末３を備える。
【００２２】
管理サーバー１は、ユーザー情報１１、店舗情報１２、商品情報１３を管理する。管理サーバー１はこれら情報を格納するための読み書き可能な記憶装置を備える。記憶装置は例えばＨＤＤ（Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）、ＳＳＤ（Ｓｏｌｉｄ  Ｓｔａｔｅ  Ｄｒｉｖｅ）である。
【００２３】
ユーザー情報１１は、ユーザー、即ち、買物客それぞれに係る情報である。ユーザー情報はユーザーの顔の画像１１Ａを含む。画像１１Ａをユーザー画像と呼ぶ。ユーザー画像１１Ａは任意のフォーマットの画像データである。後述するように、ユーザー画像１１Ａは、携帯端末３から管理サーバー１にアップロードされる。
【００２４】
また、ユーザー情報１１は行動履歴１１Ｂを含む。行動履歴１１Ｂは、そのユーザーが商業施設２００内で行った行動の履歴情報である。
【００２５】
店舗情報１２は、商業施設２００が収容する各店舗に係る情報である。店舗情報１２は、その店舗を識別するための識別情報（店舗識別情報）、その店舗が扱う商品に関する情報（取扱商品情報）、その店舗に設置された店内カメラ２を識別するための識別情報（店内カメラ識別情報）を含む。
【００２６】
店舗識別情報は、例えばその店舗の名称、商業施設２００内におけるその店舗の位置（例えば、商業施設２００のビル内において３階のＡブロックにあるとき３−Ａ等）、その他、各店舗を個々に識別可能であるように店舗毎に予め付与した識別情報である。
【００２７】
取扱商品情報は、その店舗が扱う商品に関する情報である。取扱商品情報は、その店舗が扱う商品の商品識別情報（後述）、その商品の価格、その商品の在庫数を含む。
【００２８】
店内カメラ識別情報は例えばその店内カメラ２のＩＰアドレスである。
【００２９】
商品情報１３は、商業施設２００の全店舗が扱う商品に関する情報である。店舗２００Ａ、２００Ｂ、２００Ｃ、…の各店舗が扱う、全ての商品についての情報が商品情報１３に含まれる。商品情報１３は、商品の名称、その商品の識別情報（商品識別情報）、その商品の価格、その商品を扱う店舗の店舗識別情報、その商品の属性を示す情報（商品属性情報）等を含む。また、商品情報１３は、その商品の画像１３Ａ、即ち、商品画像１３Ａを含む。
【００３０】
商品識別情報は、各商品を他の商品から識別可能に予め付与される識別情報である。例えば、EAN(European Article Number)コード、JAN(Japanese Article Number)コードを商品識別情報として用いることとしてもよい。また、JANコードと、商業施設２００内、或いは、その店舗内で発行したインストアコードとを組み合わせたものを、商品識別情報として用いてもよい。
【００３１】
商品属性情報としては、その商品のサイズ、色、柄、材質、ブランド名や、これらの組み合わせが考えられる。また、その商品を含む商品のカテゴリを商品属性情報として含むこととしてもよい。
【００３２】
また、管理サーバー１はデータ収集部１４を備える。データ収集部１４は店内カメラ２、携帯端末３とデータ通信を行う通信装置を含む。
【００３３】
データ収集部１４と店内カメラ２とを接続するデータ通信回線は有線であっても無線であってもよい。例えば、データ収集部１４はＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）ケーブル、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ）ケーブルを介して店内カメラ２と接続されてもよいし、無線ＬＡＮ回線を介して接続されてもよい。
【００３４】
データ収集部１４は店内カメラ２とデータ通信を行い、店内カメラ２から画像を受信する。店内カメラ２の画像を店内画像と呼ぶものとする。データ収集部１４は、店内画像の送信元である店内カメラ２の店内カメラ識別情報を、その店内画像と共に、データ抽出部１５に出力する。
【００３５】
データ収集部１４と携帯端末３とを接続するデータ通信回線は基本的には無線回線である。この無線回線は、例えばLTE（Long  Term  Evolution）回線のような携帯電話網を介したものであってもよい。或いは、この無線回線は、商業施設２００に設置された無線LANによるものであってもよい。
【００３６】
データ収集部１４は携帯端末３とデータ通信を行い、携帯端末３から、その携帯端末３のユーザーの顔を撮影した画像を受信する。この画像を、データ収集部１４は、送信元の携帯端末３のユーザーと関連付けて、ユーザー画像１１Ａとしてユーザー情報１１に記録する。
【００３７】
データ収集部１４は、特定の携帯端末３を宛先としたデータをデータ抽出部１５から受け取って、その宛先の携帯端末３に送信する。
【００３８】
更に、管理サーバー１はデータ抽出部１５を備える。データ抽出部１５はデータ処理装置及び画像処理装置を備える。データ抽出部１５は、店舗情報１２に基づいて、店内カメラ識別情報が示す店内カメラ２を特定する。その際、データ抽出部１５は、店舗情報１２に基づいて、その店内カメラ２が設置されている店舗を識別する。
【００３９】
また、データ抽出部１５は、ユーザー画像１１Ａに基づいて、店内画像に含まれるユーザーを識別する。
【００４０】
また、データ抽出部１５は、その店内カメラ２が設置されている店舗の商品情報１３に含まれる商品画像１３Ａに基づいて、店内画像に含まれる商品を識別する。
【００４１】
また、データ抽出部１５は、特定したユーザーの行動履歴１１Ｂを更新する。例えば、そのユーザーの行動履歴１１Ｂに、ユーザーが入店した店舗の店舗識別情報、その店舗への入店とその時刻、その店舗でユーザーがチェックした商品の商品識別情報、その店舗からの退店とその時刻を追加する。
【００４２】
また、データ抽出部１５は、データ収集部１４を介して、特定した人物の行動履歴１１Ｂの一部或いは全体をその人物の携帯端末３に送信する。
【００４３】
更に、データ抽出部１５は、行動履歴１１Ｂにそのユーザーがチェックしたと記録された商品に基づいて、その商品に関連する商品についての情報を商品情報１３から取得する。データ抽出部１５は取得した情報をデータ収集部１４を介してその行動履歴１１Ｂのユーザーの携帯端末３に送信する。
【００４４】
図２を参照して説明する。店内カメラ２Ａ、２Ｂ、２Ｃ、…は同じ構造を有する。これらをまとめて店内カメラ２と呼ぶ。店内カメラ２は、カメラ２１、画像処理部２２、通信部２３を備える。尚、店内カメラ２は、店舗２００Ａ、２００Ｂ、２００Ｃ、…の各店舗に少なくとも一台設置する。
【００４５】
各店舗に設置する店内カメラ２の台数は、店舗毎に定められ、店舗の規模、取扱商品の品数、商品の大きさ等によって異なる。店舗の出入口を撮影する店内カメラ２を各店舗に設置する。また、その店舗の中に陳列した全商品が撮影可能となる台数の店内カメラ２を店舗毎に設置する。
【００４６】
カメラ２１は固体撮像素子である。例えば、CCD(Charge-Coupled Device)カメラ、CMOS(Complementary Metal-Oxcide-Semiconductor)イメージセンサをカメラ２１として用いることができる。カメラ２１は店内カメラ２を設置した店舗内を撮影して、その店舗の店内画像を出力するカメラである。例えば、店内カメラ２Ａは店舗２００Ａの店内画像を出力する。カメラ２１は十分に短い時間毎に所定の枚数の店内画像を出力する。これによりカメラ２１は実質的にリアルタイムの画像を出力する。
【００４７】
画像処理部２２は、カメラ２１が出力する画像データに対して画像処理を行う。画像認識処理は顔認識処理、物体認識処理を含む。
【００４８】
画像処理部２２は、店内画像に対して顔認識処理を行い、人間の入退店を検出する。人間の入退店を検出すると、画像処理部２２は、その時刻を示す時刻情報と共に、その店内画像を、通信部２３を介して管理サーバー１に送信する。
【００４９】
また、画像処理部２２は、店舗内の人間が商品をチェックしているか否かを判定する。チェックしていると判定した場合、画像処理部２２は、その店内画像を、通信部２３を介して管理サーバー１に送信する。
【００５０】
店舗内の人間が商品をチェックしているか否かの判定は例えば次のようにして行う。画像処理部２２は、店内画像Ｐ１に基づいて、店舗内の人間が商品に触れていると判定すると、その時刻ｔ１を記録する。以後の店内画像Ｐ２〜Ｐｘ−１（Ｘは自然数）に基づいても同様の判定を行う。店内画像Ｐｘに基づいて同様の判定をしたとき、その人間がその商品に触れていないと判定したとする。このとき、画像処理部２２は、その時刻ｔｘと時刻ｔ１との差分ｔｄを求め、差分ｔｄと予め定められた閾値ｔｔと比較する。差分ｔｄが閾値ｔｔよりも大きいとき、画像処理部２２は、その人物がその商品をチェックしたと判定する。この判定に応じて、画像処理部２２は、店内画像Ｐ１〜Ｐｘの一部乃至全部を、通信部２３を介して管理サーバー１に送信する。
【００５１】
通信部２３は管理サーバー１のデータ収集部１４と通信を行う通信装置である。上述のように、データ収集部１４と通信部２３とを接続するデータ通信回線は有線であっても無線であってもよい。例えば、通信部２３はＬＡＮケーブル、ＵＳＢケーブルを介して管理サーバー１と接続されてもよいし、無線ＬＡＮ回線を介して接続されてもよい。
【００５２】
通信部２３はデータ収集部１４とデータ通信を行い、店内カメラ２から画像を受信する。店内カメラ２の画像を店内画像と呼ぶものとする。データ収集部１４は、店内画像の送信元である店内カメラ２の店内カメラ識別情報を、その店内画像と共に、データ抽出部１５に出力する。
【００５３】
携帯端末３は携帯可能かつ無線通信可能な情報処理装置である。商業施設２００を訪れる買物客は、それぞれ、携帯端末３を携帯して商業施設２００内を移動する。例えば、スマートフォン、タブレット、ラップトップコンピュータ、ＰＤＡ（Ｐｅｒｓｏｎａｌ  Ｄａｔａ  Ａｓｓｉｓｔａｎｔ）等を携帯端末３として用いることができる。携帯端末３の典型的な例は、買物客自身が所有するスマートフォン、タブレットである。
【００５４】
携帯端末３は、制御部３１、表示部３２、入力部３３、カメラ３４、記録部３５、無線通信部３６を備える。
【００５５】
制御部３１はCPU(Central Processing Unit)を備え、携帯端末３の各部の動作を制御する。また、制御部３１は、オペレーティングシステム(Operating System, OS)を実行し、その上でアプリケーションプログラムを実行する。オペレーティングシステムの種類は任意であり、例えば、グーグルのアンドロイド、アップルのｉＯＳ、マイクロソフトのMicrosoft Windows 10 Mobileが考えられる。
【００５６】
表示部３２は液晶ディスプレイ装置、有機EL(Electro-Luminescence)ディスプレイ装置等のディスプレイ装置である。
【００５７】
入力部３３はキーボード、ポインティングデバイス等の入力装置である。タッチディスプレイ装置として、表示部３２と入力部３３を一体に構成することとしてもよい。
【００５８】
カメラ３４は固体撮像素子である。カメラ２１と同様に、例えば、CCDカメラ、CMOSイメージセンサをカメラ３４として用いることができる。
【００５９】
記録部３５はストレージデバイスである。記録部３５は、制御部３１上で実行するOSが生成する各種のデータを格納する。また、記録部３５は、外部からダウンロードしたアプリケーションプログラムを格納する。また、記録部３５は、制御部３１及びOSの上で実行するアプリケーションプログラムが生成する各種のデータを格納する。また、記録部３５は、カメラ３４が生成した画像を格納する。
【００６０】
特に、記録部３５は、管理サーバー１と連携して動作する専用のアプリケーションプログラムを格納している。以下、このアプリケーションプログラムをユーザーアプリ３７と呼ぶ。図４に示すように、ユーザーアプリ３７は、ユーザー登録処理４１、行動履歴処理４２、商品情報処理４３、お気に入り処理４４、ポイント処理４５を含み、これらの処理を制御部３１に実行させる。尚、ここでは、表示部３２、入力部３３はタッチディスプレイとして携帯端末３に実装されているものとして説明する。
【００６１】
ユーザーアプリ３７を実行すると、制御部３１は、表示部３２に、例えば図５のようなメニュー画面５０を表示させる。「顔を登録する」５１、「行動履歴を表示する」５２、「お気に入りを表示する」５３、「ポイントを表示する」５４は、それぞれ、タッチディスプレイ上に表示されたボタンである。「顔を登録する」５１のタップに応じてユーザー登録処理４１に移行する。「行動履歴を表示する」５２のタップに応じて行動履歴処理４２に移行する。「お気に入りを表示する」５３のタップに応じてお気に入り処理４４に移行する。「ポイントを表示する」５４のタップに応じてポイント処理４５に移行する。
【００６２】
ユーザー登録処理４１は、携帯端末３のユーザーを管理サーバー１に登録する処理である。ユーザー登録処理４１では、制御部３１は、入力部３３、カメラ３４を用いて入力されるユーザー情報を受け付けて、無線通信部３６によって管理サーバー１に送信する。
【００６３】
入力部３３を用いて入力されるユーザー情報としては、例えば自分の名前、性別、年齢、住所、電話番号、メールアドレス、クレジットカード番号、商業施設２００が発行した会員番号等が考えられる。また、カメラ３４を用いて入力されるユーザー情報としては、ユーザー自身の顔を撮影して生成した顔画像がある。
【００６４】
制御部３１は、これらのユーザー情報を、無線通信部３６を用いて管理サーバー１に送信する。管理サーバー１では、データ収集部１４がユーザー情報を受信すると、データ抽出部１５が、そのユーザー情報を、そのユーザーに対して予め付与されたユーザー識別情報と関連付けて、ユーザー情報１１に格納する。特に、顔画像はユーザー画像１１Ａとして格納する。
【００６５】
行動履歴処理４２は、管理サーバー１に予め記録されている、その携帯端末３のユーザーの行動履歴を取得して、表示部３２に表示する処理である。「行動履歴を表示する」５２をタップすると、制御部３１は、無線通信部３６を用いて、管理サーバー１に行動履歴を問い合わせる。管理サーバー１は、ユーザー情報１１を参照して、その携帯端末３のユーザーの行動履歴１１Ｂを読み出して、携帯端末３に送信する。無線通信部３６が行動履歴１１Ｂを受信すると、制御部３１は、表示部３２を用いて入退店履歴を表示する。
【００６６】
入退店履歴の画面の一例を図６に示す。図６のテーブルにおいて、「ＩＮ」の列にあるセルには、その携帯端末３のユーザーがある店舗に入店した入店時刻を示す値が記載されている。「ＯＵＴ」の列にあるセルには、その携帯端末３のユーザーがその店舗から退店した退店時刻を示す値が記載されている。「店舗名」の列にあるセルには、その店舗の名称を示す文字列が記載されている。店舗名「○○」、「△△」、「□□」はそれぞれ順に、店舗２００Ａ、２００Ｂ、２００Ｃの店舗名である。「チェックした商品」の列にあるセルには、その携帯端末３のユーザーがその店舗でチェックした商品の品数を示す値と、文字列「詳細を表示」が記載されている。文字列「詳細を表示」はリンクである。ユーザーが入力部３３でリンク「詳細を表示」を選択する（例えばタッチディスプレイをタップする）と、制御部３１は、表示部３２に表示する画面を、図６の入退店履歴から後述する図７のチェック商品履歴に切り替える。
【００６７】
図６に例示した入退店履歴には、携帯端末３のユーザーが、１０時４０分から１１時まで店舗名「○○」（店舗２００Ａ）に滞在し、３点の商品をチェックしたことが記録されている。また、同じユーザーが、１１時１３分から１１時２０分まで店舗名「△△」（店舗２００Ｂ）に滞在し、１点の商品をチェックしたことが記録されている。また、同じユーザーが、１１時３０分から１２時５分まで店舗名「□□」（店舗２００Ｃ）に滞在し、３点の商品をチェックしたことが記録されている。
【００６８】
既に述べたように、入退店履歴でリンク「詳細を表示」をタップすると、携帯端末３のユーザーがその店舗でチェックした商品の一覧を表示する画面、即ち、チェック商品履歴を表示する。図７を参照すると、画面上部には、「○○店でチェックした商品」との見出しが表示されている。その見出しの下に、携帯端末３のユーザーが、店舗名「○○」（店舗２００Ａ）でチェックした商品の一覧が表示されている。「Ｎｏ」の列にあるセルには、ユーザーがその商品をチェックした順番を示す数字が記載されている。「商品名」の列にあるセルには、ユーザーがチェックした商品の名称と、リンク「詳細を表示」が記載されている。ユーザーが例えばリンク「詳細を表示」をタッチディスプレイ上でタップすると、制御部３１は、対応する商品を対象として指定した商品情報処理４３を行う。商品情報処理４３については後述する。
【００６９】
図７に例示したチェック商品履歴には、店舗名「○○」（店舗２００Ａ）において、携帯端末３のユーザーが、１番目に「長袖ブラウス」をチェックしたことが記録されている。以下、同様に、２−５番目に「鞄」、「靴」、「帽子」、「ジーンズ」をチェックしたことが記録されている。
【００７０】
商品情報処理４３を実行すると、制御部３１は、指定された商品についての商品詳細情報を管理サーバー１に要求する。これに応答して、管理サーバー１は、商品情報１３から指定された商品の商品詳細情報を取得して、携帯端末３に送信する。商品詳細情報は、商品の画像、チェックした店舗名、商品名、金額、カラー、サイズ、在庫を含む。
【００７１】
ここでは、図７のチェック商品履歴に記載のリンク「詳細を表示」をタップしたときに表示される画面を例に挙げて説明する。図８の商品詳細は、図７、１番目の「長袖ブラウス」と共に記載のリンク「詳細を表示」のタップ等に応答して表示される画面である。「商品詳細」の見出しの下に、商品詳細情報が表示されている。商品詳細情報の下には、「類似商品を見る」ボタン８１が表示されている。「類似商品を見る」ボタン８１の下には、「お気に入りに登録する」ボタン８２、「戻る」ボタン８３が表示されている。「お気に入りに登録する」ボタン８２をユーザーがタップ等すると、後述するお気に入り処理４４に移行する。「戻る」ボタン８２をユーザーがタップ等すると、図７のチェック商品履歴画面に戻る。
【００７２】
ユーザーが「類似商品を見る」ボタン８１をタップ等すると、制御部３１は、商品情報処理４３に従って、図７、１番目の「長袖ブラウス」に類似した商品の商品詳細情報を、無線通信部３６を介して管理サーバー１に要求する。
【００７３】
管理サーバー１では、データ収集部１４がこの要求を受信する。この要求に応じて、データ抽出部１５は、商品情報１３から該当する商品の商品詳細情報を取得して、データ収集部１４を介して携帯端末３に送信する。
【００７４】
このとき、データ抽出部１５は、携帯端末３から指定された商品に類似した商品を、商品情報１３から検索する。商品間の類似については商品情報１３に予め定めておいてもよい。例えば、各商品の商品詳細情報として、その商品に類似した商品の商品識別情報を予め記録しておくことが考えられる。この場合、データ抽出部１５は、携帯端末３から指定された商品が、類似商品として記録されている商品詳細情報を、商品情報１３から検索する。
【００７５】
また、例えば、商品情報１３に含まれる各商品に、一乃至複数の属性情報を予め付与しておき、各商品の商品詳細情報として、その商品の属性情報を記録しておくこととしてもよい。この場合、データ抽出部１５は、携帯端末３から指定された商品に付与されたものと同じ属性情報を、一乃至複数記録された商品詳細情報を、商品情報１３から検索する。
【００７６】
図９の類似商品の一覧画面には、４つの矩形領域９１〜９４が記載され、それぞれにひとつの商品の商品詳細情報が記載されている。矩形領域９１には図８の商品が記載されている。矩形領域９２〜９４にはそれぞれ図８の商品に類似した別商品の商品詳細情報が記載されている。矩形領域９５の「戻る」ボタンをユーザーがタップ等すると、制御部３１は表示部３２の表示を図８の商品詳細に戻す。
【００７７】
矩形領域９２〜９４に記載の店舗名が、どれも矩形領域９１の店舗名「○○店」とは異なる点に注意されたい。この画面を見ることにより、携帯端末３のユーザーは、自分が「○○店」でチェックした商品と類似した商品が、商業施設２００内の他店にあると知ることができる。また、その際に、各店舗での金額、在庫数を知ることができる。
【００７８】
矩形領域９１では、「クーポン」の文字が反転表示されている。この反転表示は、携帯端末３のユーザーが、矩形領域９１の店舗「○○店」で使用可能なクーポンを持っていることを示す。クーポンは店舗毎に電子的に発行されて、例えば、ユーザー情報１１として管理サーバー１に格納されている。このようにして、類似商品の一覧画面にて、ユーザーがクーポンを所持する店舗を表示することにより、ユーザーに対して商品購入の際の判断材料を提供することができる。
【００７９】
管理サーバー１は行動履歴１１Ｂに応じてユーザーにクーポンを発行することとしてもよい。例えば、管理サーバー１は、ユーザーが各店舗に入店した回数、商品をチェックした回数、時間を行動履歴１１Ｂから抽出し、これらの値に基づいてクーポンに関する決定を行うことが考えられる。即ち、そのユーザーにクーポンを発行するか否かや、発行するクーポンの種類、数等を管理サーバー１が決定する。更に、店舗のＰＯＳ（Ｐｏｉｎｔ  Ｏｆ  Ｓａｌｅｓ）システムと連携して、そのユーザーの購入実績と、行動履歴１１Ｂとに基づいて、管理サーバー１がクーポンを発行することとしてもよい。
【００８０】
図８の「お気に入りに登録する」ボタン８２をユーザーがタップ等すると、制御部３１はお気に入り処理４４を実行する。お気に入り処理４４に従って、制御部３１は、商品詳細画面に表示されている商品を、お気に入りの商品として登録する。このとき、制御部３１は、この商品の商品識別情報を指定して、この商品をお気に入りに登録する旨の要求を、無線通信部３６を介して管理サーバー１に対して送信する。管理サーバー１では、データ収集部１４がこの要求を受信すると、データ抽出部１５がユーザー情報１１を更新して、そのユーザーのお気に入り１１Ｃにその商品識別情報を追加する。
【００８１】
図５のメニュー画面において、「お気に入りを表示する」ボタン５３をユーザーがタップ等すると、制御部３１は、無線通信部３６を介して、管理サーバー１にお気に入りに登録された商品を要求する。管理サーバー１では、データ収集部１４がこの要求を受信すると、データ抽出部１５は、そのユーザーのお気に入り１１Ｃとして記録されている商品識別情報を読み出す。データ抽出部１５は、商品情報１３からその商品識別情報に該当する商品詳細情報を読み出して、データ収集部１４を介して、要求の送信元である携帯端末３に送信する。無線通信部３６が商品詳細情報を受信すると、制御部３１は、その商品詳細情報を表示部３２に表示する。
【００８２】
次に、商業施設内情報システム１００の動作について説明する。ある一個人のユーザーＵが携帯端末３を所持しているものとする。最初に、ユーザーＵのユーザー登録について図１０を参照して説明する。
【００８３】
ユーザーＵは、携帯端末３の入力部３３を操作して、ユーザーアプリ３７を起動する。この操作に応じて、制御部３１はユーザーアプリ３７を記録部３５から読み出して実行する。ユーザーアプリ３７に従って、制御部３１は表示部３２でメニュー画面５０を表示する。ユーザーＵが入力部３３で「顔を登録する」ボタン５１を選択すると、制御部３１は、ユーザー登録処理４１を実行する（ステップＳ１）。
【００８４】
ユーザーＵは、携帯端末３のカメラ３４を用いて自分の顔を撮影する操作を行う。この操作により、カメラ３４は、ユーザーＵの顔画像を生成する（ステップＳ２）。
【００８５】
制御部３１は、無線通信部３６を用いて管理サーバー１に顔画像を送信する（ステップＳ３）。尚、このときの顔画像の伝送経路は、携帯電話網を介するものであってもよいし、商業施設２００に設けた無線ＬＡＮ経由であってもよい。
【００８６】
管理サーバー１において、データ収集部１４が顔画像を受信する（ステップＳ４）と、データ抽出部１５は、送信元である携帯端末３のユーザーＵのユーザー画像１１Ａとしてその顔画像を記録する（ステップＳ５）。このようにして顔画像をユーザー画像１１Ａとして管理サーバー１に登録したユーザーを登録ユーザーと呼ぶものとする。
【００８７】
次に、図１１を参照して、登録ユーザーＵが商業施設２００に入り、店舗２００Ａ、２００Ｂ、２００Ｃ、…のいずれかに入店したときの商業施設内情報システム１００の動作について説明する。入店した店舗がどれであっても動作は同じなので、ここでは、ユーザーＵは、店内カメラ２が設置された店舗２００に入店したものとして説明する。
【００８８】
店内カメラ２のカメラ２１は、十分に短い時間間隔（例えば５秒に一回）で店舗２００の中を繰り返し撮影し、画像処理部２２に画像を出力する。画像処理部２２は、画像に人物が含まれているか否かの判定を各画像について行う。
【００８９】
画像処理部２２が画像に人物が含まれていると判定する（ステップＳ１１）と、画像処理部２２は、その画像と、その画像の撮影時刻とを、通信部２３を用いて管理サーバー１に送信する（ステップＳ１２）。
【００９０】
管理サーバー１では、データ収集部１４が画像と撮影時刻とを受信する（ステップＳ１３）。この受信に応じて、データ抽出部１５が、受信した画像をユーザー画像１１Ａと比較して、その画像に含まれる人物が登録ユーザーか判定する（ステップＳ１４）。
【００９１】
ここで、データ抽出部１５がその画像に含まれるユーザーを登録ユーザーＵと判定したとする。このとき、データ抽出部１５は、その画像の送信元である店内カメラ２を設置した店舗、即ち、店舗２００にユーザーＵが入店したことを、ユーザーＵの行動履歴１１Ｂとして記録する。その際、その画像の撮影時刻を、ユーザーＵが店舗２００に入店した入店時刻として記録する（ステップＳ１５）。ここで記録される入店時刻が、図６の「ＩＮ」セル内の時刻に対応する。
【００９２】
店舗２００から人物が退店する場合の動作も基本的には同様である。退店の場合、ここで記録される退店時刻が、図６の「ＯＵＴ」セル内の時刻に対応する。
【００９３】
店内カメラ２のカメラ２１は、十分に短い時間間隔（例えば５秒に一回）で店舗２００の中を繰り返し撮影し、画像を生成する。ステップＳ１１で人物の存在を検出後、店内カメラ２は撮影、生成した画像を撮影時刻と共に管理サーバー１に送信する（ステップＳ１１、Ｓ１２）。
【００９４】
管理サーバー１では、データ収集部１４が画像と撮影時刻とを受信する（ステップＳ１３）。この受信に応じて、データ抽出部１５が、受信した画像をユーザー画像１１Ａと比較して、その画像に含まれる人物が登録ユーザーか判定する（ステップＳ１４）。
【００９５】
ここで、データ抽出部１５が、その画像に含まれると判定した登録ユーザーの中に登録ユーザーＵが含まれていなかったとする。即ち、データ抽出部１５が、その画像には登録ユーザーが誰も含まれていないと判定したとする。或いは、データ抽出部１５が、行動履歴１１Ｂにおいて入店時刻のみが記録され、退店時刻が記録されていない登録ユーザーＵが、その画像に含まれていないと判定したとする。
【００９６】
このとき、データ抽出部１５は、その画像の送信元である店内カメラ２を設置した店舗、即ち、店舗２００からユーザーＵが退店したことを、ユーザーＵの行動履歴１１Ｂとして記録する。その際、その画像の撮影時刻を、ユーザーＵが店舗２００から退店した退店時刻として記録する（ステップＳ１５）。ここで記録される退店時刻が、図６の「ＯＵＴ」セル内の時刻に対応する。
【００９７】
次に、図１２を参照して、登録ユーザーＵが店舗２００の任意の商品Ｚをチェックしたことを行動履歴１１Ｂに記録するときの商業施設内情報システム１００の動作について説明する。
【００９８】
カメラ２１が出力する画像に基づいて、ユーザーＵが店舗２００の商品Ｚに触れたことを画像処理部２２が検出したとする（ステップＳ２１）。このとき、画像処理部２２は、その画像の撮影時刻ｔ１を記録する（ステップＳ２２）。
【００９９】
次に、カメラ２１が出力する別の画像に基づいて、ユーザーＵが商品Ｚから手を離したことを画像処理部２２が検出したとする（ステップＳ２３）。このとき、画像処理部２２は、その画像の撮影時刻ｔ２を記録する（ステップＳ２４）。
【０１００】
次に、画像処理部２２は、差ｔ２−ｔ１を求めて、予め定められた閾値ｔｄと比較する（ステップＳ２５）。差ｔ２−ｔ１が閾値ｔｄよりも大きい場合、画像処理部２２は、ユーザーＵが商品Ｚをチェックしたと判定する。そして、画像処理部２２は、通信部２３を介して、ユーザーＵが商品をチェックした旨のメッセージと共に、商品Ｚを含む画像を管理サーバー１に送信する（ステップＳ２６）。
【０１０１】
管理サーバー１において、データ収集部１４が画像を受信する（ステップＳ２７）と、データ抽出部１５が、受信した画像に基づいて、ユーザーＵがチェックした商品、即ち、商品Ｚを識別する（ステップＳ２８）。即ち、データ抽出部１５は、受信した画像と、その画像の送信元である店舗２００の商品の商品画像１３Ａとを比較することにより、商品Ｚを特定する。
【０１０２】
この識別結果を受けて、データ抽出部１５は、ユーザーＵが店舗２００で商品Ｚをチェックしたことを、行動履歴１１Ｂとして記録する（ステップＳ２９）。
【０１０３】
以後、ユーザーＵが店舗２００に滞在する間、ステップＳ２１〜Ｓ２９を繰り返す。ここで記録される商品Ｚが、図７において「商品名」セルに記載されている５点の商品、即ち、「長袖ブラウス」、「鞄」、「靴」、「帽子」、「ジーンズ」それぞれに対応する。図６、図７の例では、ユーザーは、店舗○○に入店（１０時４０分）してから退店（１１時）するまでの間に、これら５点の商品をチェックしたと行動履歴１１Ｃに記録されたことになる。
【０１０４】
次に、ユーザーＵが携帯端末３で自分の行動履歴を確認するときの商業施設内情報システム１００の動作について図１３を参照して説明する。
【０１０５】
携帯端末３において、ユーザーＵが入力部３３を操作して、ユーザーアプリ３７を起動すると、以後、制御部３１はユーザーアプリ３７に従って動作する。まず、制御部３１は、表示部３２にメニュー画面５０を表示する（ステップＳ３１）。次に、ユーザーＵが、入力部３３により「行動履歴を表示する」ボタン５２を選択する操作を行うと、制御部３１は、行動履歴処理４２に移行する（ステップＳ３２）。行動履歴処理４２では、制御部３１は、ユーザーＵの行動履歴の送信を求める要求を、無線通信部３６を用いて管理サーバー１に送信する（ステップＳ３３）。
【０１０６】
管理サーバー１において、データ収集部１４が携帯端末３から要求を受信する（ステップＳ３４）と、データ抽出部１５がユーザーＵの行動履歴を行動履歴１１Ｂから取得する（ステップＳ３５）。より具体的には、商業施設２００内の店舗のうち、ユーザーＵがその日に入退店した各店舗への入店時刻、退店時刻、店舗名、チェックした商品の点数を含む情報（以下、この情報を入退店履歴と記す）を行動履歴１１Ｂから取得する。行動履歴１１Ｂから取得した、ユーザーＵの入退店履歴をデータ収集部１４が携帯端末３に送信する（ステップＳ３６）。
【０１０７】
携帯端末３に戻って、無線通信部３６がユーザーＵの入退店履歴を受信する（ステップＳ３７）と、制御部３１は、その受信した入退店履歴を表示部３２に表示する（ステップＳ３８）。このときの画面の例が図６である。この画面を見ることにより、ユーザーＵは、自分が商業施設２００内のどの店舗に何時から何時までいたのかを確認することができる。
【０１０８】
入退店履歴の表示後、ユーザーＵが希望する場合には、各店舗で自分がチェックした商品を確認することができる。このときの商業施設内情報システム１００の動作について図１４を参照して説明する。
【０１０９】
ステップＳ３８と同様に、表示部３２が入退店履歴を表示している（ステップＳ４１）。この状態から、ユーザーＵが、入力部３３を用いて、チェックした商品の履歴を確認したい店舗の「チェックした商品」セルに記載されている、リンク「詳細を表示」を指定する操作を行う。この操作に応じて、制御部３１は、指定した店舗においてユーザーＵがチェックした商品の情報（以下、この情報をチェック商品履歴と記す）を、無線通信部３６を介して管理サーバー１に要求する（ステップＳ４２）。
【０１１０】
管理サーバー１では、データ収集部１４がこの要求を受信する（ステップＳ４３）と、選択した店舗におけるユーザーＵのチェック商品履歴を、データ抽出部１５が行動履歴１１Ｂから取得する（ステップＳ４４）。データ収集部１４は、チェック商品履歴を携帯端末３に送信する（ステップＳ４５）。
【０１１１】
携帯端末３に戻って、チェック商品履歴を無線通信部３６が受信する（ステップＳ４６）と、制御部３１は、例えば図７のようなチェック商品履歴を表示部３２に表示する（ステップＳ４７）。
【０１１２】
チェック商品履歴を表示した後、ユーザーＵが希望する場合、チェック商品履歴に表示した商品や、その商品に類似した商品の情報を閲覧することができる。このときの商業施設内情報システム１００の動作について図１５を参照して説明する。
【０１１３】
ステップＳ４８と同様に、表示部３２がチェック商品履歴を表示している（ステップＳ５１）。この状態から、ユーザーＵが、入力部３３を用いて、商品詳細情報を閲覧したい商品の「商品名」セルに記載されている、リンク「詳細を表示」を指定する操作を行う。ここで、ユーザーＵが商品Ｄを指定したとする。この操作に応じて、制御部３１は、商品Ｄの商品詳細情報を、無線通信部３６を介して管理サーバー１に要求する（ステップＳ５２）。ここでは、商品詳細情報とは、その商品を販売している店舗名、商品名、金額、カラー、サイズ、在庫数を含む。
【０１１４】
管理サーバー１では、データ収集部１４がこの要求を受信する（ステップＳ５３）と、商品Ｄの商品詳細情報を、データ抽出部１５が商品情報１３から取得する（ステップＳ５４）。データ収集部１４は、その商品詳細情報を携帯端末３に送信する（ステップＳ５５）。
【０１１５】
携帯端末３に戻って、商品詳細情報を無線通信部３６が受信する（ステップＳ５６）と、制御部３１は、例えば図８のような商品詳細情報を表示部３２に表示する（ステップＳ５７）。
【０１１６】
この状態から、ユーザーＵが、商品Ｄに類似した商品の閲覧を希望したとする。このとき、ユーザーＵは、入力部３３を用いて「類似商品を見る」ボタン８１を操作する。この操作に応じて、制御部３１は、商品Ｄに類似する各商品の商品詳細情報（以下、類似商品情報と記す）を管理サーバー１に要求する（ステップＳ５８）。
【０１１７】
管理サーバー１では、データ収集部１４がこの要求を受信する（ステップＳ５９）と、商品Ｄに類似した商品の商品詳細情報を、データ抽出部１５が商品情報１３から取得する（ステップＳ６０）。商品Ｄに類似した商品はひとつとは限らず、複数存在していてもよい。類否判定の手法としては、上述のように、各商品の商品詳細情報にその商品に類似した商品の商品識別番号を関連付けて記録しておくことが考えられる。
【０１１８】
ここでは、商品Ｒ１、Ｒ２、Ｒ３が類似していたとする。このとき、データ抽出部１５は商品情報１３から商品Ｒ１、Ｒ２、Ｒ３の商品詳細情報を取得する。データ収集部１４は、商品Ｒ１、Ｒ２、Ｒ３の商品詳細情報を携帯端末３に送信する（ステップＳ６１）。
【０１１９】
携帯端末３に戻って、無線通信部３６が管理サーバー１から商品Ｒ１、Ｒ２、Ｒ３の商品詳細情報を受信する（ステップＳ６２）。これに応じて、表示部３２が、例えば図９のように、商品Ｄ、Ｒ１、Ｒ２、Ｒ３の商品詳細情報をまとめて表示する（ステップＳ６３）。図９では、矩形領域９１が商品Ｄの商品詳細情報を表示している。矩形領域９２〜９４がそれぞれ商品Ｒ１〜Ｒ３の商品詳細情報を表示している。
【０１２０】
このようにして、ユーザーＵは、自分が入店した店舗で実際にチェックした商品の商品詳細情報を、その店舗を離れた後で確認することができる。
【０１２１】
また、チェックした商品だけではなく、チェックした商品に類似した別商品が商業施設２００内にあることも、ユーザーＵは知ることができる。商品間の類否判定は、ユーザーＵが入店した店舗か否かとは基本的に無関係に行われる。このため、商業施設２００においてユーザーＵが未訪問の店舗が販売している商品についても、その存在をユーザーＵに伝えることができる。例えば、図９の矩形領域９３に表示されている商品の店舗「××店」は、図６の入退店履歴によればユーザーＵは行ったことがない。しかし、「類似商品を見る」ボタン８１を操作することにより、ユーザーＵは「××店」がこの商品を販売していることに気付くことができる。
【０１２２】
以上、本実施の形態によれば、商業施設２００の買物客は、携帯端末３を用いて、商業施設２００内での自分の行動履歴を後から確認することができる。即ち、買物客は、自分が入退店した店舗を、その店舗を離れた後で確認することができる。その際、買物客は、その店舗への入店時刻、退店時刻、チェックした商品の点数を確認することができる。
【０１２３】
特に、多数の店舗を収容する大型の商業施設において、様々な店舗を渡り歩くと、買物客は自分が訪れた店舗がどれであったかを忘れてしまう場合がある。こうした場合であっても、本実施の形態によれば、買物客は自分が訪れた店舗を確認することができる。
【０１２４】
また、買物客は、携帯端末３を用いて、チェックした商品の詳細情報を閲覧することができる。これにより、買物客は、気になった商品を見た店舗がどの店舗であったかを容易に確認することができる。このため、買物客は、気になった商品があった店舗を容易に特定することができる。また、買物客は、各店舗で気になる商品をチェックした後、例えばカフェ、レストラン、休憩所等に移動して、チェックした商品についてゆっくり検討することができる。
【０１２５】
また、本実施の形態によれば、チェックした商品そのものの商品詳細情報だけではなく、その商品に類似した商品の商品詳細情報をも、買物客は容易に閲覧することができる。買物客が訪れた店舗でチェックしなかった商品や、買物客が訪れていない店舗の商品であっても、類似商品として買物客の携帯端末３に提示する。このため、買物客は商業施設２００内で好みの商品を見落とす恐れが低くなる。
【０１２６】
更に、本実施の形態によれば、買物客の入退店履歴、チェック商品履歴が行動履歴１１Ｂとして管理サーバー１に蓄積される。このため、管理サーバー１の管理者は、行動履歴１１Ｂに基づいて買物客の行動を分析することができる。例えば、管理者は、店舗の配置、商品の配列を決定する際の材料として行動履歴１１Ｂを用いることができる。結果として、管理者は、行動履歴１１Ｂに基づいて、商業施設２００全体としての売り上げ増に繋がる様々な施策を検討することができる。
【０１２７】
本発明は上述の実施の形態に限定されるものではなく、様々な変形が可能である。
【０１２８】
例えば、商業施設内情報システム１００では、店内カメラ２で人物の存在を検知すると、その画像を管理サーバー１に送信して、管理サーバー１で画像内の人物を識別した。
【０１２９】
このような構成に代わって、店内カメラ２で撮影した画像を全て管理サーバー１に送信し、管理サーバー１で人物の存在の検知及び識別の両方を行うこととしてもよい。このような構成によれば、店内カメラ２の構成を簡素化することができる。
【０１３０】
或いは、店内カメラ２それぞれで人物の検知及び識別の両方を行うこととしてもよい。このように構成すれば、管理サーバー１の処理負荷を低減し、構成を簡素化することができる。
【０１３１】
同様に、商業施設内情報システム１００では、ユーザーがチェックした商品の識別を管理サーバー１で行った。これに代わって、店内カメラ２で商品の識別を行うこととしてもよい。例えば、各店舗にその店舗の商品の商品画像１３Ａを格納した記憶装置を配置し、画像処理部２２は、カメラ２１で撮影した画像と、この記憶装置に格納した商品画像１３Ａとを比較して、商品を識別することが考えられる。
【０１３２】
また、商業施設内情報システム１００では、ユーザーがチェックした商品を識別する際、予め撮影しておいた商品画像１３Ａと、店内カメラ２で撮影した画像とを比較して、その比較結果に基づいて識別を行った。
【０１３３】
このような手法に代わって、別の手法を用いることとしてもよい。例えば次のような手法が考えられる。店舗情報１２或いは商品情報１３の一部として、商品が店舗内のどの位置に陳列されているのかを予め記録しておく。店内カメラ２で撮影した画像に基づいて、ユーザーの視線方向を推定する。ある商品の陳列位置にユーザーの視線方向が向けられた時間を測定する。測定時間と予め定められた閾値とを比較して、測定時間が閾値を超えた場合、ユーザーはその商品をチェックしたと判定する。
【０１３４】
また、ユーザーの購入金額に応じたポイントをユーザーに付与する、所謂ポイントプログラムとユーザーアプリ３７とを連携させることとしてもよい。ユーザーアプリ３７は、個々の携帯端末３を宛先として情報を通知する。このため、第三者に知られることなく、宛先ユーザーのみにポイントを通知することができる。また、ポイントプログラムの運用者からユーザーへの通知、例えば販促クーポンを、ユーザーアプリ３７を介してユーザーに送信することとしてもよい。
【０１３５】
また、上述の商業施設内情報システム１００では、ユーザーアプリ３７は、管理サーバー１に記録した入退店履歴、チェック商品履歴をそのまま表示した。しかし、ユーザーアプリ３７は、入退店履歴に記録された店舗の一部、チェック商品履歴に記録された商品の一部を、表示部３２で非表示に設定することができるように構成してもよい。例えば、ユーザーが購入した商品については、図７のチェック商品履歴画面として表示部３２に表示する必要性が低い。また、チェック商品履歴画面の閲覧性を良好に保つ上で、表示すべき点数が少ない方が好ましい。
【０１３６】
上記の実施形態の一部又は全部は以下の付記のようにも記載されうるが、これらに限定されるものではない。
【０１３７】
（付記１）
一ユーザーに割り当てられた携帯端末、及び、一店舗に少なくともひとつ設置され、当該店舗の店内画像を撮影して、前記店内画像を送信するための店内カメラと通信可能であって、
予め登録された、前記携帯端末を割り当てられたユーザーのユーザー画像に基づいて、前記店内画像に含まれる人物を登録ユーザーとして判定する手段と、
前記登録ユーザーの前記店舗における行動履歴を記録する手段と、
前記携帯端末からの第１の要求に応じて、前記行動履歴に関する情報を前記携帯端末に送信する手段と
を備えるサーバー装置。
【０１３８】
（付記２）
前記店内画像に基づいて、前記登録ユーザーが前記店舗内で行った商品のチェックに関する情報を、前記登録ユーザーの前記店舗における前記行動履歴として記録する手段と、
前記携帯端末からの第２の要求に応じて、前記商品のチェックに関する情報を、前記携帯端末に送信する手段と、
を更に備える付記１に記載のサーバー装置。
【０１３９】
（付記３）
前記携帯端末からの第３の要求に応じて、前記チェックの対象となった商品の商品詳細情報を前記携帯端末に送信する手段を更に備える、付記２に記載のサーバー装置。
【０１４０】
（付記４）
前記携帯端末からの第４の要求に応じて、前記チェックの対象となった商品に類似した商品の情報を前記携帯端末に送信する手段を更に備える、付記３に記載のサーバー装置。
【０１４１】
（付記５）
前記店舗は、複数の店舗を収容する商業施設に収容された店舗のひとつであり、
前記複数の店舗のそれぞれに、少なくとも一台の前記店内カメラが設置され、
前記複数の店舗のそれぞれにおける、前記登録ユーザーの前記行動履歴を記録する手段と、
前記携帯端末からの第５の要求に応じて、前記複数の店舗における前記登録ユーザーの前記行動履歴に関する情報を前記携帯端末に送信する手段と
を更に備える、付記１乃至付記４のいずれか一項に記載のサーバー装置。
【０１４２】
（付記６）
一ユーザーに割り当てられた携帯端末と、
一店舗に少なくともひとつ設置され、当該店舗の店内画像を撮影して、前記店内画像を送信するための店内カメラと、
前記携帯端末及び前記店内カメラと通信可能な管理サーバーとを備え、
前記管理サーバーは、
予め登録された、前記携帯端末を割り当てられたユーザーのユーザー画像に基づいて、前記店内画像に含まれる人物を登録ユーザーとして判定する手段と、
前記登録ユーザーの前記店舗における行動履歴を記録する手段と、
前記携帯端末からの第１の要求に応じて、前記行動履歴に関する情報を前記携帯端末に送信する手段と、
を備える、商業施設内情報システム。
【０１４３】
（付記７）
前記管理サーバーは、
前記店内画像に基づいて、前記登録ユーザーが前記店舗内で行った商品のチェックに関する情報を、前記登録ユーザーの前記店舗における前記行動履歴として記録し、
前記携帯端末からの第２の要求に応じて、前記商品のチェックに関する情報を、前記携帯端末に送信する、
付記６に記載の商業施設内情報システム。
【０１４４】
（付記８）
前記管理サーバーは、前記携帯端末からの第３の要求に応じて、前記チェックの対象となった商品の商品詳細情報を前記携帯端末に送信する、付記７に記載の商業施設内情報システム。
【０１４５】
（付記９）
前記管理サーバーは、前記携帯端末からの第４の要求に応じて、前記チェックの対象となった商品に類似した商品の情報を前記携帯端末に送信する、付記８に記載の商業施設内情報システム。
【０１４６】
（付記１０）
前記店舗は、複数の店舗を収容する商業施設に収容された店舗のひとつであり、
前記複数の店舗のそれぞれに、少なくとも一台の前記店内カメラが設置され、
前記管理サーバーは、前記複数の店舗のそれぞれにおける、前記登録ユーザーの前記行動履歴を記録し、
前記携帯端末からの第５の要求に応じて、前記複数の店舗における前記登録ユーザーの前記行動履歴に関する情報を、前記管理サーバーが前記携帯端末に送信する、
付記６乃至付記９のいずれか一項に記載の商業施設内情報システム。
【０１４７】
（付記１１）
一ユーザーに割り当てられた携帯端末、及び、一店舗に少なくともひとつ設置され、当該店舗の店内画像を撮影して、前記店内画像を送信するための店内カメラと通信可能な管理サーバーで実行されて、
予め登録された、前記携帯端末を割り当てられたユーザーのユーザー画像に基づいて、前記店内画像に含まれる人物を登録ユーザーとして判定する手段と、
前記登録ユーザーの前記店舗における行動履歴を記録する手段と、
前記携帯端末からの第１の要求に応じて、前記行動履歴に関する情報を前記携帯端末に送信する手段と
して前記管理サーバーを機能させるためのプログラム。
【０１４８】
（付記１２）
前記店内画像に基づいて、前記登録ユーザーが前記店舗内で行った商品のチェックに関する情報を、前記登録ユーザーの前記店舗における前記行動履歴として記録する手段と、
前記携帯端末からの第２の要求に応じて、前記商品のチェックに関する情報を、前記携帯端末に送信する手段と、
して前記管理サーバーを更に機能させる、付記１１に記載のプログラム。
【０１４９】
（付記１３）
前記携帯端末からの第３の要求に応じて、前記チェックの対象となった商品の商品詳細情報を前記携帯端末に送信する手段として前記管理サーバーを更に機能させる、付記１２に記載のプログラム。
【０１５０】
（付記１４）
前記携帯端末からの第４の要求に応じて、前記チェックの対象となった商品に類似した商品の情報を前記携帯端末に送信する手段として前記管理サーバーを更に機能させる、付記１３に記載のプログラム。
【０１５１】
（付記１５）
前記店舗は、複数の店舗を収容する商業施設に収容された店舗のひとつであり、
前記複数の店舗のそれぞれに、少なくとも一台の前記店内カメラが設置され、
前記複数の店舗のそれぞれにおける、前記登録ユーザーの前記行動履歴を記録する手段として前記管理サーバーを更に機能させ、
前記携帯端末からの第５の要求に応じて、前記複数の店舗における前記登録ユーザーの前記行動履歴に関する情報を前記携帯端末に送信する手段として、前記管理サーバーを更に機能させる、
付記１１乃至付記１４のいずれか一項に記載のプログラム。
【０１５２】
（付記１６）
管理サーバーに予め登録された、携帯端末のユーザー画像に基づいて、店舗に設置された店内カメラで撮影した店内画像に含まれる人物を、前記管理サーバーが登録ユーザーとして判定し、前記登録ユーザーの前記店舗における行動履歴を、前記管理サーバーが記録する段階と、
前記携帯端末からの第１の要求に応じて、前記行動履歴に関する情報を前記管理サーバーが前記携帯端末に送信する段階と
を含む、行動履歴の提示方法。
【０１５３】
（付記１７）
前記管理サーバーは、前記店内画像に基づいて、前記登録ユーザーが前記店舗内で行った商品のチェックに関する情報を、前記登録ユーザーの前記店舗における前記行動履歴として記録する段階と、
前記携帯端末からの第２の要求に応じて、前記商品のチェックに関する情報を、前記管理サーバーが前記携帯端末に送信する段階と
を更に含む、付記１６に記載の行動履歴の提示方法。
【０１５４】
（付記１８）
前記携帯端末からの第３の要求に応じて、前記チェックの対象となった商品の商品詳細情報を、前記管理サーバーが前記携帯端末に送信する段階
を更に含む、付記１７に記載の行動履歴の提示方法。
【０１５５】
（付記１９）
前記携帯端末からの第４の要求に応じて、前記チェックの対象となった商品に類似した商品の情報を、前記管理サーバーが前記携帯端末に送信する段階
を更に含む、付記１８に記載の行動履歴の提示方法。
【０１５６】
（付記２０）
前記店舗は、複数の店舗を収容する商業施設に収容された店舗のひとつであり、
前記複数の店舗のそれぞれに、少なくとも一台の前記店内カメラが設置され、
前記管理サーバーは、前記複数の店舗のそれぞれにおける、前記登録ユーザーの前記行動履歴を記録し、
前記携帯端末からの第５の要求に応じて、前記複数の店舗における前記登録ユーザーの前記行動履歴に関する情報を、前記管理サーバーが前記携帯端末に送信する、
付記１６乃至付記１９のいずれか一項に記載の行動履歴の提示方法。
【符号の説明】
【０１５７】
１  管理サーバー
２  店内カメラ
３  携帯端末
１１  ユーザー情報
１１Ａ  ユーザー画像
１１Ｂ  行動履歴
１２  店舗情報
１３  商品情報
１３Ａ  商品画像
１４  データ収集部
１５  データ抽出部
２１、３４  カメラ
２２  画像処理部
２３  通信部
３１  制御部
３２  表示部
３３  入力部
３５  記録部
３６  無線通信部
３７  ユーザーアプリ
４１  ユーザー登録処理
４２  行動履歴処理
４３  商品情報処理
４４  お気に入り処理
４５  ポイント処理
１００  商業施設内情報システム
２００  商業施設
【図１】
2019159998.tif 000003
【図２】
2019159998.tif 000004
【図３】
2019159998.tif 000005
【図４】
2019159998.tif 000006
【図５】
2019159998.tif 000007
【図６】
2019159998.tif 000008
【図７】
2019159998.tif 000009
【図８】
2019159998.tif 000010
【図９】
2019159998.tif 000011
【図１０】
2019159998.tif 000012
【図１１】
2019159998.tif 000013
【図１２】
2019159998.tif 000014
【図１３】
2019159998.tif 000015
【図１４】
2019159998.tif 000016
【図１５】
2019159998.tif 000017