(57)【要約】【課題】電子広告表示装置を用いて実施された広告展開による広告効果を人の行動に基づき測定するために役立たせること。【解決手段】サーバと電子広告表示装置とを備える行動履歴管理システムにおいて、前記電子広告表示装置の付近の被写体を撮影して撮影画像データを出力するカメラと、行動履歴の解析対象の特徴を示す特徴情報を当該撮影画像データから抽出する画像処理部と、前記カメラによって撮影された際の前記解析対象の状況を示す行動履歴情報を取得する行動履歴情報取得部と、前記解析対象ごとに、前記特徴情報と前記行動履歴情報とを対応付けて記憶する記憶部と、を備えることを特徴とする。【選択図】図１
2012208854.tif 000002
【特許請求の範囲】
【請求項１】
サーバと電子広告表示装置とを備える行動履歴管理システムにおいて、
前記電子広告表示装置の付近の被写体を撮影して撮影画像データを出力するカメラと、
前記撮影画像データから人物を検出して、当該人物の特徴を示す特徴情報を前記撮影画像データから抽出する画像処理部と、
前記カメラによって撮影された際の前記人物の状況を示す行動履歴情報を取得する行動履歴情報取得部と、
前記人物ごとに、前記特徴情報と前記行動履歴情報とを対応付けて記憶する記憶部と、
を備えることを特徴とする行動履歴管理システム。
【請求項２】
前記記憶部を参照して、過去に抽出された特徴情報と現時点において抽出した特徴情報とを比較し、前記カメラによって撮影された被写体の中に前記記憶部に記憶されている特徴情報が示す特徴を有する人物が含まれているか否かを判定する人物判定部と、
前記人物判定部の判定結果に応じたコンテンツを決定し、決定したコンテンツを前記デジタルサイネージのディスプレイに表示させる配信コンテンツ決定部とを備えることを特徴とする請求項１に記載の行動履歴管理システム。
【請求項３】
店舗に設置され、撮影した撮影画像データを出力する店舗カメラと、
前記店舗カメラからの前記撮影画像データを入力する店舗監視装置とをさらに備え、
前記画像処理部は、
前記店舗カメラが出力する撮影画像データから人物を検出して、当該人物の特徴を示す前記特徴情報を抽出し、
前記行動履歴情報取得部は、
前記店舗カメラによって撮影された際の前記人物の状況を示す前記行動履歴情報を取得することを特徴とする請求項１あるいは２に記載の行動履歴管理システム。
【請求項４】
商品の会計処理を実行する販売情報管理装置と
商品の会計をする際に支払いした人物の顔を撮影して、撮影画像データを出力する会計カメラと、
少なくとも会計した商品を示す販売情報を生成する販売情報取得部とをさらに備え、
前記画像処理部は、
前記会計カメラが出力する撮影画像データから人物を検出して、当該人物の特徴を示す前記特徴情報を抽出し、
前記記憶部は、
前記人物ごとに、前記特徴情報と前記販売情報とを対応付けて記憶することを特徴とする請求項１から３のいずれか一項に記載の行動履歴管理システム。
【請求項５】
前記画像処理部は、
前記撮影画像データから検出対象である人物の顔の特徴を示す前記特徴情報を抽出することを特徴とする請求項１から４のいずれか一項に記載の行動履歴管理システム。
【請求項６】
前記画像処理部は、
前記撮影画像データから検出対象である人物の特徴として、身長、体重、所持品、歩き方、性別、年齢のうち少なくともいずれか１つを示す前記特徴情報を抽出することを特徴とする請求項１から５のいずれか一項に記載の行動履歴管理システム。
【請求項７】
電子広告表示装置の付近の被写体をカメラが撮影して撮影画像データを取得するステップと、
前記撮影画像データから人物を検出して、当該人物の特徴を示す特徴情報を前記撮影画像データから抽出するステップと、
前記カメラによって撮影された際の前記人物の状況を示す行動履歴情報を取得するステップと、
前記人物ごとに、前記特徴情報と前記行動履歴情報とを対応付けて記憶部に記憶させるステップと、
を備えることを特徴とする行動履歴管理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、行動履歴管理システムおよび行動履歴管理方法に関するものである。
【背景技術】
【０００２】
複数のデジタルサイネージに電子広告を配信する際に、デジタルサイネージの表示空き時間枠に、収益が高くなるように電子広告の表示を割り当る電子広告配信計画装置がある（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１０−１２８６９４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１の技術を利用して、複数のデジタルサイネージにおける広告展開を実施した場合、このデジタルサイネージによる広告効果が不明であった。
【０００５】
本発明は、このような事情を考慮してなされたものであり、その目的は、電子広告表示装置を用いて実施された広告展開による広告効果を人の行動に基づき測定するために役立たせることができる行動履歴管理システムおよび行動履歴管理方法を提供することにある。
【課題を解決するための手段】
【０００６】
上述の課題を鑑み、本発明に係る行動履歴管理システムの一実施形態は、サーバと電子広告表示装置とを備える行動履歴管理システムにおいて、前記電子広告表示装置の付近の被写体を撮影して撮影画像データを出力するカメラと、前記撮影画像データから人物を検出して、当該人物の特徴を示す特徴情報を前記撮影画像データから抽出する画像処理部と、前記カメラによって撮影された際の前記人物の状況を示す行動履歴情報を取得する行動履歴情報取得部と、前記人物ごとに、前記特徴情報と前記行動履歴情報とを対応付けて記憶する記憶部と、を備えることを特徴とする。
【０００７】
上述の行動履歴管理システムにおいて、前記記憶部を参照して、過去に抽出された特徴情報と現時点において抽出した特徴情報とを比較し、前記カメラによって撮影された被写体の中に前記記憶部に記憶されている特徴情報が示す特徴を有する人物が含まれているか否かを判定する人物判定部と、前記人物判定部の判定結果に応じたコンテンツを決定し、決定したコンテンツを前記デジタルサイネージのディスプレイに表示させる配信コンテンツ決定部とを備えることを特徴とする。
【０００８】
上述の行動履歴管理システムにおいて、店舗に設置され、撮影した撮影画像データを出力する店舗カメラと、前記店舗カメラからの前記撮影画像データを入力する店舗監視装置とをさらに備え、前記画像処理部は、前記店舗カメラが出力する撮影画像データから人物を検出して、当該人物の特徴を示す前記特徴情報を抽出し、前記行動履歴情報取得部は、前記店舗カメラによって撮影された際の前記人物の状況を示す前記行動履歴情報を取得することを特徴とする。
【０００９】
上述の行動履歴管理システムにおいて、商品の会計処理を実行する販売情報管理装置と商品の会計をする際に支払いした人物の顔を撮影して、撮影画像データを出力する会計カメラと、少なくとも会計した商品を示す販売情報を生成する販売情報取得部とをさらに備え、前記画像処理部は、前記会計カメラが出力する撮影画像データから人物を検出して、当該人物の特徴を示す前記特徴情報を抽出し、前記記憶部は、前記人物ごとに、前記特徴情報と前記販売情報とを対応付けて記憶することを特徴とする。
【００１０】
上述の行動履歴管理システムにおいて、前記画像処理部は、前記撮影画像データから検出対象である人物の顔の特徴を示す前記特徴情報を抽出することを特徴とする。
【００１１】
上述の行動履歴管理システムにおいて、前記画像処理部は、前記撮影画像データから検出対象である人物の特徴として、身長、体重、所持品、歩き方、性別、年齢のうち少なくともいずれか１つを示す前記特徴情報を抽出することを特徴とする。
【００１２】
上述の課題に鑑み、本発明に係る行動履歴管理方法の一実施形態は、電子広告表示装置の付近の被写体をカメラが撮影して撮影画像データを取得するステップと、前記撮影画像データから人物を検出して、当該人物の特徴を示す特徴情報を前記撮影画像データから抽出するステップと、前記カメラによって撮影された際の前記人物の状況を示す行動履歴情報を取得するステップと、前記人物ごとに、前記特徴情報と前記行動履歴情報とを対応付けて記憶部に記憶させるステップと、を備えることを特徴とする。
【発明の効果】
【００１３】
本発明によると、電子広告表示装置を用いて実施された広告展開による広告効果を人の行動に基づき解析するための情報を取得することができる。
【図面の簡単な説明】
【００１４】
【図１】本実施形態にかかる行動履歴管理システムの構成の一例を示すブロック図である。
【図２】本実施形態に係る行動履歴管理システムの概要の一例について説明するための図である。
【図３】本実施形態に係る行動履歴管理システムの構成の一例を示す図である。
【図４】サーバの記憶部に記憶されている特徴情報テーブルの一例を示す図である。
【図５】サーバの記憶部に記憶されている行動履歴情報テーブルの一例を示す図である。
【図６】サーバの記憶部に記憶されている購入履歴情報テーブルの一例を示す図である。
【図７】サーバの記憶部に記憶されているコンテンツテーブルの一例を示す図である。
【図８】本実施形態の行動履歴管理システムにおけるサーバとデジタルサイネージ間の処理フローの一例について説明するためのシーケンス図である。
【図９】デジタルサイネージに表示されている電子広告を人が見た場合の一例を説明するための図である。
【図１０】本実施形態の行動履歴管理システムにおけるサーバと販売情報管理装置間の処理フローの一例について説明するためのシーケンス図である。
【図１１】本実施形態の行動履歴管理システムにおけるサーバと店舗監視装置間の処理フローの一例について説明するためのシーケンス図である。
【図１２】本実施形態に係る行動履歴管理システムにより測定される広告効果について説明するための図である。
【図１３】本実施形態に係る行動履歴管理システムにより測定される広告効果について説明するための図である。
【図１４】本実施形態に係る行動履歴管理システムによるコンテンツの配信の一例を説明するための図である。
【図１５】本実施形態に係る行動履歴管理システムによるコンテンツの配信の一例を説明するための図である。
【図１６】サーバの記憶部に記憶されている行動履歴情報テーブルの他の例を示す図である。
【発明を実施するための形態】
【００１５】
［第１実施形態］
以下、本発明の一実施形態にかかる行動履歴管理システムの一例について説明する。図１は、本実施形態にかかる行動履歴管理システムの構成の一例を示すブロック図である。
図１に示す通り、本実施形態に係る行動履歴管理システムは、サーバ１と、少なくとも１つのデジタルサイネージ２と、少なくとも１つの販売情報管理装置３と、少なくとも１つの店舗監視装置４とを備える。これらサーバ１、デジタルサイネージ２、販売情報管理装置３、および店舗監視装置４は、ネットワーク５によって通信可能に接続されている。
【００１６】
サーバ１は、デジタルサイネージ２によって取得される情報、販売情報管理装置３によって取得される情報、および、店舗監視装置４によって取得される情報を保持し、これら情報を管理する。
デジタルサイネージ２は、例えば、街中、駅中、あるいは商業施設等に設置されており、電子広告（コンテンツ）を表示する。
販売情報管理装置３は、各商業施設における商品の販売実績を示す販売情報を管理する。この販売情報は、例えば、ＰＯＳ  ｓｙｓｔｅｍ（Point of sale system）によって管理されている情報であって、商品の名称、商品のＩＤ、販売金額、店舗名等を示す情報である。本実施形態において、販売情報管理装置３は、例えば、会計処理を実行するレジスターである。
店舗監視装置４は、店舗内に設置されたカメラ４００と接続され、このカメラ４００によって撮影された撮影画像を管理する。このカメラ４００は、例えば、店舗の入り口から入っている顧客の顔が撮影できる位置に設置されている。なお、カメラ４００は、この位置以外の位置に設置されているものであってもよく、一店舗に複数個が設置されるものであってもよい。
【００１７】
次に、図２を参照して、本実施形態に係る行動履歴管理システムの概要の一例について説明する。図２は、本実施形態に係る行動履歴管理システムの概要の一例について説明するための図である。なお、本実施形態において、行動履歴管理システムによる行動履歴情報の検出対象は、人物である。
【００１８】
図２に示す通り、本実施形態に係る行動履歴管理システムでは、デジタルサイネージ２のカメラがデジタルサイネージ２の付近を撮影し、デジタルサイネージ２に表示されているコンテンツ（例えば、電子広告）を人物が視聴した場合、この人物を撮影した画像内から抽出する。そして、このカメラが撮影した撮影画像データを画像処理することにより、この人物の特徴を示す特徴量を抽出する。この人物の特徴を示す情報を、以下、特徴情報と記す。この特徴情報は、例えば、人物の顔（目鼻立ち、髪型、顔の色等）、あるいは、身長、体重、所持品、歩き方、性別、年齢等の特徴を示す情報である。
【００１９】
また、デジタルサイネージ２は、前を通行した人物が視聴した電子広告の内容や表示時刻、あるいは、デジタルサイネージ２が設置されている位置等を示す情報を取得する。この情報は、前を通行した人物がデジタルサイネージ２の表示する電子広告に興味を示して視聴した可能性があることを示す情報であり、以下、行動履歴情報と記す。言い換えると、この行動履歴情報は、カメラによって撮影された際の当該人物の状況を示す情報である。本実施形態において、前を通行した人物が特定のデジタルサイネージ２の前でその時点で表示されている電子広告を視聴し得る状況にあったことを示す行動履歴情報について、以下説明する。なお、デジタルサイネージ２に電子広告が表示されていない状況において、デジタルサイネージ２の方を見る人物を検出した場合、コンテンツの内容以外の情報であって、前を通行した人物が視聴した電子広告表示時刻とデジタルサイネージ２が設置されている位置を示す情報を、この人物の状況を示す情報を行動履歴情報として取得する。
サーバ１は、検出対象である人物毎に、この特徴情報と行動履歴情報とを対応付けて記憶部に記憶する。
【００２０】
また、同様にして、店舗監視装置４は、例えば、店舗に来店した人物をカメラ４００が撮影した画像の中から検出する。そして、店舗監視装置４は、デジタルサイネージ２と同様、カメラ４００が撮影により得た撮影画像データを画像処理することにより、この人物の特徴を示す特徴量を抽出する。
この店舗監視装置４は、検出対象である人物が来店した店舗の店舗名や場所、来店時刻等を示す情報を取得する。この情報は、カメラ４００によって撮影された際の人物の状況を示す行動履歴情報である。この行動履歴情報は、検出対象である人物がデジタルサイネージ２の表示する電子広告に興味を示して視聴した後に来店した可能性があることを示す情報である。
サーバ１は、検出対象である人物毎に、この特徴情報と行動履歴情報とを対応付けて記憶部に記憶する。
【００２１】
これにより、デジタルサイネージ２の電子広告を視聴する人物を個々に識別することができるとともに、店舗監視装置４が設置されている店舗に来店した人物を個々に識別することができる。また、デジタルサイネージ２や店舗監視装置４によって取得された特徴情報が示す人物の行動履歴情報を取得することができる。よって、サーバ１に記憶されている情報を利用することにより、街中のデジタルサイネージ２の電子広告を視聴した人物が店舗に来店したか否かを判定することができる。
【００２２】
販売情報管理装置３は、商品の会計をする際に、支払いをした人物の顔を撮影して、人物の顔の特徴を示す特徴量を抽出して、特徴情報を生成する。また、販売情報管理装置３は、この人物が商品を購入した店舗名や商品の価格等を示す販売情報を生成する。
サーバ１は、商品を購入した人物ごとに、この特徴情報と販売情報とを対応付けて記憶部に記憶する。
これにより、店舗において商品を購入する人物を個々に識別することができるとともに、この人物の販売情報を取得することができる。よって、サーバ１に記憶されている情報を利用することにより、デジタルサイネージ２の電子広告を視聴した人物が実際に広告の商品を購入したか否かを判定することができる。
【００２３】
次に、図３〜７を参照して、本実施形態に係る行動履歴管理システムの構成について説明する。図３は、本実施形態に係る行動履歴管理システムの構成の一例を示す図である。図４〜７は、サーバ１の記憶部に記憶されているテーブルの一例を示す図である。
【００２４】
デジタルサイネージ２は、制御部２１と、通信部２２と、ディスプレイ２３と、記憶部２４と、カメラ２５と、画像処理部２６とを含む。
制御部２１は、デジタルサイネージ２を統括的に制御する。例えば、制御部２１は、記憶部２４に記憶されているコンテンツデータに基づき電子広告をディスプレイ２３に表示させる。この制御部２１は、行動履歴情報取得部２１１を含む。
行動履歴情報取得部２１１は、行動履歴情報を取得する。
通信部２２は、ネットワーク５を介してサーバ１と情報の送受信を行う。
ディスプレイ２３は、制御部２１の制御によってコンテンツ、例えば電子広告を表示する。なお、ディスプレイ２３は、音声出力装置を備え、電子広告に合わせた音声を出力するものであってもよい。
【００２５】
カメラ２５は、デジタルサイネージ２の付近を撮影して、撮影画像データを取得する。このカメラ２５は、例えば、デジタルサイネージ２のディスプレイ２３を見ている被写体を撮影できる位置に設置されている。この場合、カメラ２３によって取得される画像は、ディスプレイ２３の目線で撮影される画像であって、人物がディスプレイ２３を見ている場合、画像内の人物の顔は正面を向いている。一方、人物がディスプレイ２３を見ていない場合、つまり、デジタルサイネージ２の前を通過しただけの場合、画像内の人物の顔は横顔あるいは後頭部等となる。
【００２６】
画像処理部２６は、カメラ２５から出力される撮影画像データに基づき、検出対象である人物の特徴を示す特徴情報を抽出する。この画像処理部２６は、例えば、撮影画像データから、人物の顔を検出し、この顔の特徴量を抽出する。また、画像処理部２６は、撮影画像データを画像処理することにより、顔が検出された人物の身長、体重、所持品、性別、年齢を示す情報を抽出するものであってもよい。さらに、画像処理部２６は、連続する複数枚の撮影画像データ（つまり、動画データ）に基づき、顔が検出された人物の歩き方を示す情報を抽出するものであってもよい。
【００２７】
店舗監視装置４は、制御部４１と、通信部４２と、記憶部４３と、カメラ４４と、画像処理部４５とを含む。
制御部４１は、店舗監視装置４を統括的に制御する。この制御部４１は、行動履歴情報取得部４１１を含む。
行動履歴情報取得部４１１は、行動履歴情報を取得する。
通信部４２は、ネットワーク５を介してサーバ１と情報の送受信を行う。
記憶部４３は、例えば、カメラ４００によって撮影された撮影画像データを保存する。
画像処理部４４は、カメラ４００から出力される撮影画像データに基づき、検出対象である人物の特徴を示す特徴情報を抽出する。この画像処理部４００は、デジタルサイネージ２の画像処理部２６と同様にして、例えば、撮影画像データから、人物の顔を検出し、この顔の特徴量を抽出する。また、画像処理部４００は、画像処理部２６と同様、撮影画像データを画像処理することにより、顔が検出された人物の身長、体重、所持品、性別、年齢を示す情報を抽出するものであってもよい。さらに、画像処理部４００は、画像処理部２６と同様、連続する複数枚の撮影画像データ（つまり、動画データ）に基づき、顔が検出された人物の歩き方を示す情報を抽出するものであってもよい。
【００２８】
サーバ１は、制御部１１と、通信部１２と、記憶部１３とを含む。
制御部１１は、サーバ１を統括的に制御する。この制御部１１は、デジタルサイネージ２あるいは店舗監視装置４から受信する行動履歴情報と特徴情報とを、人物ごとに対応付けて記憶部１３に記憶させる。この場合、制御部１１は、人物を識別するための固有の人物ＩＤを割り当てる。また、制御部１１は、人物判定部１１１と配信コンテンツ決定部１１２とを含む。
人物判定部１１１は、記憶部１３を参照して、過去に抽出された特徴情報と現時点において抽出した特徴情報とを比較し、デジタルサイネージ２のカメラ２５や店舗のカメラ４００によって撮影された被写体の中に特徴情報が示す特徴を有する検出対象である人物が含まれているか否かを判定する。
配信コンテンツ決定部１１２は、人物判定部１１１の判定結果に応じたコンテンツを決定し、決定したコンテンツを表示することを指示する情報を通信部１２を介してデジタルサイネージ２に送信する。
【００２９】
記憶部１３は、特徴情報テーブル１３１と、行動履歴情報テーブル１３２と、購入履歴情報テーブル１３３と、コンテンツテーブル１３４とを記憶する。この記憶部１３は、コンテンツテーブル１３４によって対応付けられているコンテンツ（例えば、電子広告）を示すデータを記憶する。
特徴情報テーブル１３１は、例えば、図４に示す通り、人物ＩＤと、特徴情報とを対応付けるテーブルである。この特徴情報には、例えば、人物の顔の特徴を示す顔特徴量や、人の身長、体重、所持品、歩き方、性別、年齢等を示す情報が含まれる。
行動履歴情報テーブル１３２は、例えば、図５に示す通り、人物ＩＤと、行動履歴情報とを対応付けるテーブルである。この行動履歴情報には、例えば、デジタルサイネージ２のカメラ２５や店舗のカメラ４００によって撮影された際の人物の状況を示す情報として、例えば、場所（デジタルサイネージ２の設置位置、あるいは、店舗監視装置４の設置店舗名あるいは位置）、時刻（デジタルサイネージ２の視聴時刻、あるいは、店舗監視装置４の店舗の来店時刻）、属性、滞留時間（デジタルサイネージ２のコンテンツを視聴した時間）、コンテンツＩＤ（デジタルサイネージ２で表示したコンテンツの識別情報）等を示す情報が含まれる。
【００３０】
購入履歴情報テーブル１３３は、例えば、図６に示す通り、人物ＩＤと、販売情報とを対応付けるテーブルである。この販売情報には、例えば、人物が商品を購入した店舗名、購入した商品の商品名、その商品を購入した金額、その商品を購入した時刻等を示す情報が含まれる。
コンテンツテーブル１３４は、例えば、図７に示す通り、視聴の順番を示す情報と、コンテンツＩＤと、配信条件を示す情報とを対応付けるテーブルである。視聴の順番を示す情報は、ストーリー性のあるコンテンツを配信する際の配信順を示す。
【００３１】
販売情報管理装置３は、制御部３１と、通信部３２と、ディスプレイ３３と、記憶部３４と、カメラ３５と、画像処理部３６とを含む。この販売情報管理装置３は、例えば、会計係が利用するレジスターである。
制御部３１は、販売情報管理装置３を統括的に制御する。例えば、制御部３１は、リーダー３３を介して入力された商品情報（例えば、商品名とその価格）に基づき、会計処理を行う。また、制御部３１は、販売情報取得部３１１を含む。
この販売情報取得部３１１は、会計処理によりリーダー３３によって読み取られる販売情報を、会計ごとにまとめる。また、販売情報取得部３１１は、販売情報に対応する特徴情報が検出された場合、この販売情報と特徴情報を対応付けた情報を、通信部３２を介してサーバ１に送信する。
【００３２】
通信部３２は、ネットワーク５を介してサーバ１と情報の送受信を行う。
リーダー３３は、例えば、ＲＦ部３３１とバーコードリーダー３３２を含む読み取り装置である。
ＲＦ部３３１は、例えば、携帯端末装置に搭載されているＲＦデバイスと通信して、電子マネーでの支払いを要求する人の会計処理の際に、会計金額に相当する電子マネーの支払いをしたことを示す情報を携帯端末装置に送信する。
バーコードリーダー３３２は、例えば、商品に表示されているバーコードを読み取り、当該商品を識別する商品ＩＤを読み取る。この商品ＩＤに対応する商品名や価格が記憶部３４に記憶されており、制御部３１は、この商品ＩＤに基づき記憶部３４を参照することで、会計する商品の商品名と価格を示す情報を取得する。
記憶部３４は、商品ＩＤと、商品に関する情報（例えば、商品名や価格）を対応付けるテーブルを記憶する。
【００３３】
カメラ３５は、販売情報管理装置３の付近を撮影して、撮影画像データを取得する。
画像処理部３６は、カメラ３５から出力される撮影画像データに基づき、撮影画像内に含まれる人物の顔の特徴を示す特徴情報を抽出する。
【００３４】
次に、図８〜９を参照して、本実施形態の行動履歴管理システムにおけるサーバ１とデジタルサイネージ２間の処理フローの一例について説明する。図８は、本実施形態の行動履歴管理システムにおけるサーバ１とデジタルサイネージ２間の処理フローの一例について説明するためのシーケンス図である。図９は、デジタルサイネージ２に表示されている電子広告αをＡさんが見た場合の一例を説明するための図である。
【００３５】
デジタルサイネージ２は、記憶部２４に記憶されているコンテンツデータを読み出し、例えば、広告αをディスプレイ２３に表示する（ステップＳＴ１０１）。
このデジタルサイネージ２のカメラ２５は、ディスプレイ２３の前を撮影して、撮影画像データを出力する（ステップＳＴ１０２）。例えば、図９（ａ）に示すように、デジタルサイネージ２のディスプレイ２３の前をＡさんが通ったとする。この場合、カメラ２５は、図９（ｂ）に示すような撮影画像を示す撮影画像データを画像処理部２６に出力する。
【００３６】
画像処理部２６は、カメラ２５から出力される撮影画像データに基づき、画像内に含まれる人物を検出する。この画像処理部２６は、画像内のＡさんを検出し、Ａさんの特徴を示す特徴情報を抽出する（ステップＳＴ１０３）。そして、画像処理部２６は、この特徴情報を通信部２２を介してサーバ１に送信する。
そして、サーバ１の人物判定部１１１は、受信した特徴情報と、記憶部１３の特徴情報テーブル１３１とを照合する（ステップＳＴ１０４）。つまり、サーバ１の人物判定部１１１は、受信した特徴情報と類似する情報が特徴情報テーブル１３１の特徴情報内にあるか否かを判定する。なお、サーバ１の人物判定部１１１は、特徴情報に含まれる顔特徴量が示す特徴が予め決められた誤差範囲内で一致している場合、両特徴情報は類似していると判定する。また、サーバ１の人物判定部１１１は、顔特徴量では同一人物であるか否かを判定できない場合、つまり、特徴量が類似していない場合、特徴情報に含まれる複数の項目（身長、体重等）の類似性を判定するものであってもよい。これら項目が予め決められた誤差範囲内で一致している場合、人物判定部１１１は、両特徴情報は類似していると判定する。
【００３７】
このステップＳＴ１０３とステップＳＴ１０４の処理を、特徴照合処理という。この特徴照合処理における特徴情報の抽出（ステップＳＴ１０３）は、サーバ１において行われてもよいし、デジタルサイネージ２の画像処理部２６において行われてもよい。
サーバ１において行われる場合、デジタルサイネージ２は、カメラ２５が撮影した撮影画像データを通信部２２を介してサーバ１に送信する。サーバ１は、異なるデジタルサイネージ２から送信された撮影画像データに対して、同一の特徴量抽出処理を実行できるため、撮影画像データから抽出される画像の特徴量抽出処理を一括管理することができる。つまり、異なるデジタルサイネージ２で取得された撮影画像データから抽出する特徴量の性質を一致させることができる。
一方、デジタルサイネージ２の画像処理部２６において行われる場合、デジタルサイネージ２からサーバ１に撮影画像データを送信せずにすむ。これにより、送信データの容量を低減できるとともに、セキュリティーの観点からも画像データが漏洩する危険性を低減することができる。
【００３８】
また、デジタルサイネージ２の行動履歴情報取得部２１１は、ステップＳＴ１０２において撮影された際のＡさんの状況を示す行動履歴情報を取得する（ステップＳＴ１０５）。例えば、行動履歴情報取得部２１１は、ステップＳＴ１０２において撮影された際にディスプレイ２３に表示されていたコンテンツαを示す情報や、デジタルサイネージ２が設置されている場所、ステップＳＴ１０２において撮影された際の時刻を示す情報を行動履歴情報として取得する。
そして、デジタルサイネージ２の行動履歴情報取得部２１１は、取得した行動履歴情報を通信部２２を介してサーバ１に送信する。
【００３９】
そして、サーバ１の制御部１１は、受信した行動履歴情報と特徴情報とを対応付けて記憶部１３に記憶させる。ここで、サーバ１の人物判定部１１１は、記憶部１３を参照して、過去に抽出された特徴情報と現時点において抽出した特徴情報とを比較し、デジタルサイネージ２のカメラ２５によって撮影された被写体の中に特徴情報が示す特徴を有する検出対象である人物が含まれているか否かを判定する。
例えば、ステップＳＴ１０４の特徴照合処理において、サーバ１が受信した特徴情報と類似する情報が特徴情報テーブル１３１の特徴情報内にある場合（ステップＳＴ１０６−ＹＥＳ）、この特徴情報と対応付けて行動履歴情報を記憶部１３に記憶させる。具体的に説明すると、制御部１１は、サーバ１が受信した特徴情報と類似する特徴情報と特徴情報テーブル１３１において対応付けられている人物ＩＤを取得し、この取得した人物ＩＤと行動履歴情報とを対応付けて、行動履歴情報テーブル１３２に書き込む（ステップＳＴ１０７）。
一方、ステップＳＴ１０４の特徴照合処理において、サーバ１が受信した特徴情報と類似する情報が特徴情報テーブル１３１の特徴情報内にない場合（ステップＳＴ１０６−ＮＯ）、制御部１１は、この特徴情報に対して新たな人物ＩＤを割り当てて、この新たな人物ＩＤと行動履歴情報とを対応付けて、行動履歴情報テーブル１３２に書き込む（ステップＳＴ１０８）。
このステップＳＴ１０５〜ステップＳＴ１０８の処理を、行動履歴情報作成処理という。
【００４０】
なお、デジタルサイネージ２は、ステップＳＴ１０３によって取得した特徴情報とステップＳＴ１０５で取得した行動履歴情報を対応づけて、一度にサーバ１に送信するものであってもよい。
【００４１】
そして、配信コンテンツ決定部１１２は、コンテンツテーブル１３４を参照して、人物判定部１１１の判定結果に応じたコンテンツデータを決定し、決定したコンテンツを表示することを指示する情報を通信部１２を介してデジタルサイネージ２に送信する（ステップＳＴ１０９）。
デジタルサイネージ２の制御部２１は、コンテンツを表示することを指示する情報を通信部２２を介してサーバ１から受信し、この情報が示すコンテンツデータを記憶部２４から読み出し、デジタルサイネージ２３に表示させる。
【００４２】
次に、図１０を参照して、本実施形態の行動履歴管理システムにおけるサーバ１と販売情報管理装置３間の処理フローの一例について説明する。図１０は、本本実施形態の行動履歴管理システムにおけるサーバ１と販売情報管理装置３間の処理フローの一例について説明するためのシーケンス図である。
【００４３】
販売情報管理装置３は、例えば、バーコードリーダー３３２で読み取った商品の会計処理を実行する（ステップＳＴ２０１）。つまり、販売情報管理装置３の制御部３１は、バーコードリーダー３３２が読み取った情報に対応する商品の商品名と価格を記憶部３４から読み出し、この商品の支払いの合計額を計算する。人によって、例えば、ＲＦ部３３１を介して電子マネーの支払いがあった場合、制御部３１は、支払い金額および購入商品を示す情報に対して、支払いをした人物を識別する情報を対応付けて記憶部３４に保存する。
この販売情報管理装置３のカメラ３５は、販売情報管理装置３において支払いをしている人物を撮影して、撮影画像データを出力する（ステップＳＴ２０２）。
【００４４】
そして、画像処理部３６は、カメラ３５から出力される撮影画像データに基づき、画像内に含まれる人物を検出する。この画像処理部３６は、画像内のＡさんを検出し、Ａさんの特徴を示す特徴情報を抽出する（ステップＳＴ２０３）。そして、画像処理部３６は、この特徴情報を通信部３２を介してサーバ１に送信する。
そして、サーバ１の人物判定部１１１は、受信した特徴情報と、記憶部１３の特徴情報テーブル１３１とを照合する（ステップＳＴ２０４）。つまり、サーバ１の人物判定部１１１は、受信した特徴情報と類似する情報が特徴情報テーブル１３１の特徴情報内にあるか否かを判定する。なお、サーバ１の人物判定部１１１は、特徴情報に含まれる顔特徴量が示す特徴が予め決められた誤差範囲内で一致している場合、両特徴情報は類似していると判定する。また、サーバ１の人物判定部１１１は、顔特徴量では同一人物であるか否かを判定できない場合、つまり、特徴量が類似していない場合、特徴情報に含まれる複数の項目（身長、体重等）の類似性を判定するものであってもよい。これら項目が予め決められた誤差範囲内で一致している場合、人物判定部１１１は、両特徴情報は類似していると判定する。
このステップＳＴ２０３〜ステップＳＴ２０４の処理を、特徴照合処理という。
【００４５】
また、販売情報管理装置３の販売情報取得部３１１は、ステップＳＴ２０１において会計処理した商品を購入したＡさんの購入商品および購入金額を示す販売情報を取得する（ステップＳＴ２０５）。
そして、販売情報管理装置３の販売情報取得部３１１は、取得した販売情報を通信部３２を介してサーバ１に送信する。
【００４６】
そして、サーバ１の制御部１１は、受信した販売情報と特徴情報とを対応付けて記憶部１３に記憶させる。ここで、サーバ１の人物判定部１１１は、記憶部１３を参照して、過去に抽出された特徴情報と現時点において抽出した特徴情報とを比較し、販売情報管理装置３のカメラ３５によって撮影された被写体の中に特徴情報が示す特徴を有する検出対象である人物が含まれているか否かを判定する。
例えば、ステップＳＴ２０４の特徴照合処理において、サーバ１が受信した特徴情報と類似する情報が特徴情報テーブル１３１の特徴情報内にある場合（ステップＳＴ２０６−ＹＥＳ）、この特徴情報と対応付けて販売情報を記憶部１３に記憶させる。具体的に説明すると、制御部１１は、サーバ１が受信した特徴情報と類似する特徴情報と特徴情報テーブル１３１において対応付けられている人物ＩＤを取得し、この取得した人物ＩＤと販売情報とを対応付けて、購入履歴情報テーブル１３３に書き込む（ステップＳＴ２０７）。
一方、ステップＳＴ２０４の特徴照合処理において、サーバ１が受信した特徴情報と類似する情報が特徴情報テーブル１３１の特徴情報内にない場合（ステップＳＴ２０６−ＮＯ）、制御部１１は、この特徴情報に対して新たな人物ＩＤを割り当てて、この新たな人物ＩＤと販売情報とを対応付けて、購入履歴情報テーブル１３３に書き込む（ステップＳＴ２０８）。
このステップＳＴ２０５〜ステップＳＴ２０８の処理を、行動履歴情報作成処理という。
【００４７】
なお、販売情報管理装置３は、ステップＳＴ２０３によって取得した特徴情報とステップＳＴ２０５で取得した販売情報を対応づけて、一度にサーバ１に送信するものであってもよい。
【００４８】
次に、図１１を参照して、本実施形態の行動履歴管理システムにおけるサーバ１と店舗監視装置４間の処理フローの一例について説明する。図１１は、本実施形態の行動履歴管理システムにおけるサーバ１と店舗監視装置４間の処理フローの一例について説明するためのシーケンス図である。
【００４９】
店舗に設置されたカメラ４００は、例えば、店舗入り口を撮影して、撮影画像データを出力する（ステップＳＴ３０１）。
【００５０】
店舗監視装置４の画像処理部４４は、カメラ４００から出力される撮影画像データに基づき、画像内に含まれる人物を検出する。この画像処理部４４は、画像内のＡさんを検出し、Ａさんの特徴を示す特徴情報を抽出する（ステップＳＴ３０２）。そして、画像処理部４４は、この特徴情報を通信部２４２を介してサーバ１に送信する。
そして、サーバ１の人物判定部１１１は、受信した特徴情報と、記憶部１３の特徴情報テーブル１３１とを照合する（ステップＳＴ３０３）。つまり、サーバ１の人物判定部１１１は、受信した特徴情報と類似する情報が特徴情報テーブル１３１の特徴情報内にあるか否かを判定する。なお、サーバ１の人物判定部１１１は、特徴情報に含まれる顔特徴量が示す特徴が予め決められた誤差範囲内で一致している場合、両特徴情報は類似していると判定する。また、サーバ１の人物判定部１１１は、顔特徴量では同一人物であるか否かを判定できない場合、つまり、特徴量が類似していない場合、特徴情報に含まれる複数の項目（身長、体重等）の類似性を判定するものであってもよい。これら項目が予め決められた誤差範囲内で一致している場合、人物判定部１１１は、両特徴情報は類似していると判定する。
このステップＳＴ３０２とステップＳＴ３０３の処理を、特徴照合処理という。
【００５１】
そして、店舗監視装置４の行動履歴情報取得部４１１は、ステップＳＴ３０１において撮影された際のＡさんの状況を示す行動履歴情報を取得する（ステップＳＴ３０４）。例えば、行動履歴情報取得部４１１は、ステップＳＴ３０１において撮影された時刻や、カメラ４００が設置されている店舗の名称あるいは場所等を示す情報を行動履歴情報として取得する。
そして、店舗監視装置４の行動履歴情報取得部４１１は、取得した行動履歴情報を通信部４２を介してサーバ１に送信する。
【００５２】
そして、サーバ１の制御部１１は、受信した行動履歴情報と特徴情報とを対応付けて記憶部１３に記憶させる。ここで、サーバ１の人物判定部１１１は、記憶部１３を参照して、過去に抽出された特徴情報と現時点において抽出した特徴情報とを比較し、店舗のカメラ４００によって撮影された被写体の中に特徴情報が示す特徴を有する検出対象である人物が含まれているか否かを判定する。
例えば、ステップＳＴ３０３の特徴照合処理において、サーバ１が受信した特徴情報と類似する情報が特徴情報テーブル１３１の特徴情報内にある場合（ステップＳＴ３０５−ＹＥＳ）、この特徴情報と対応付けて行動履歴情報を記憶部１３に記憶させる。具体的に説明すると、制御部１１は、サーバ１が受信した特徴情報と類似する特徴情報と特徴情報テーブル１３１において対応付けられている人物ＩＤを取得し、この取得した人物ＩＤと行動履歴情報とを対応付けて、行動履歴情報テーブル１３２に書き込む（ステップＳＴ３０６）。
一方、ステップＳＴ３０３の特徴照合処理において、サーバ１が受信した特徴情報と類似する情報が特徴情報テーブル１３１の特徴情報内にない場合（ステップＳＴ３０５−ＮＯ）、制御部１１は、この特徴情報に対して新たな人物ＩＤを割り当てて、この新たな人物ＩＤと行動履歴情報とを対応付けて、行動履歴情報テーブル１３２に書き込む（ステップＳＴ３０７）。
このステップＳＴ３０４〜ステップＳＴ３０７の処理を、行動履歴情報作成処理という。
【００５３】
なお、店舗監視装置４は、ステップＳＴ３０２によって取得した特徴情報とステップＳＴ３０４で取得した行動履歴情報を対応づけて、一度にサーバ１に送信するものであってもよい。
【００５４】
上述の通り、本実施形態に係る行動履歴管理システムは、デジタルサイネージ２に表示されているコンテンツ（電子広告）を視聴した人物、店舗に来店した人物、商品を購入した人物を、それぞれ、特徴情報により識別することができる。また、当該人物が視聴したデジタルサイネージ２に関する情報（例えば、行動履歴情報）、当該人物が来店した店舗や時刻に関する情報（例えば、行動履歴情報）、および当該人物が購入した商品に関する情報（例えば、販売情報）を取得することができる。これにより、人の行動履歴や購入履歴に応じたデジタルサイネージ２による広告効果を測定することができる。
【００５５】
この広告効果の一例について、図１２を参照して説明する。図１２は、本実施形態に係る行動履歴管理システムにより測定される広告効果について説明するための図である。
図１２に示す通り、例えば、第１地点および第２地点にデジタルサイネージ２が設置されている。また、第３地点には、商業施設があり、この商業施設内には、販売情報管理装置３と店舗監視装置４が設置されている。
【００５６】
Ａさんは、第１地点のデジタルサイネージ２で広告αのコンテンツを視聴し、第２地点のデジタルサイネージ２で広告βのコンテンツを視聴している。また、Ｂさんは、第２地点のデジタルサイネージ２で広告βのコンテンツを視聴している。さらに、Ｃさん、Ｄさんは、第１地点のデジタルサイネージ２で広告αのコンテンツを視聴している。
Ａさん、Ｃさん、Ｄさんのように、第１地点のデジタルサイネージ２で広告αのコンテンツを視聴した人が１００人いた。一方、Ａさん、Ｂさんのように、第２地点のデジタルサイネージ２で広告βのコンテンツを視聴した人が３０人いた。この場合、デジタルサイネージ２の広告αの方が、より多くの人に視聴されている。よって、デジタルサイネージ２の広告βの方が、例えば、商品の露出や認知といった広告効果があったといえる。
【００５７】
また、Ａさん、Ｂさんのように、第２地点のデジタルサイネージ２で広告βのコンテンツを視聴した後に、第３地点の店舗に来店した人は１５人いた。一方、第１地点のデジタルサイネージ２で広告αのコンテンツを視聴した後に、第３地点の店舗に来店した人は５人しかいなかった。つまり、Ｃさん、Ｄさんは、第１地点のデジタルサイネージ２で広告αのコンテンツを視聴したにも関わらず、来店には至らなかった可能性が高い。この場合、広告効果としては、デジタルサイネージ２の広告βの方が、来店率が高いといえる。
【００５８】
さらに、Ａさんのように、第１地点のデジタルサイネージ２で広告αのコンテンツを、第２地点のデジタルサイネージ２で広告βのコンテンツを視聴した後、広告αとβの商品を購入した人は、７人いた。この場合、広告効果としては、デジタルサイネージ２の広告αとβの双方を視聴することとにより、購買率が向上するといえる。
【００５９】
このように、来店あるいは購買するまでの人の行動導線を広告ごとに把握することができる。
仮に、人の行動履歴に応じたデジタルサイネージ２による広告効果を測定することができない場合、図１３に示す通り、より多くの人が視聴した広告αの方が、広告効果が高いという結果を得る。しかし、本実施形態に係る行動履歴管理システムを用いることにより、来店率の高い広告βの方が、来店につながる広告効果が高いという結果を得ることができる。
【００６０】
また、本実施形態に係る行動履歴管理システムは、図１４に示すように、人の行動履歴情報に応じて、ストーリー性のある広告コンテンツを順次、デジタルサイネージ２に表示させることができる。図１４は、本実施形態に係る行動履歴管理システムによるコンテンツの配信の一例を説明するための図である。
【００６１】
まず、デジタルサイネージ２の記憶部２４には、例えば、ストーリー性のある広告コンテンツ（第１話、第２話、第３話）が記憶されている。
例えば、Ａさんが、第１地点のデジタルサイネージ２に表示されている広告コンテンツ（第１話）を視聴したとする。
この場合、第１地点のデジタルサイネージ２のカメラ２５は、Ａさんがディスプレイ２３の方を向いた画像を示す撮影画像データを出力する。例えば、図９（ｂ）に示すような画像を示す撮影画像データである。
【００６２】
画像処理部２６は、カメラ２５から出力される撮影画像データに基づき、画像内に含まれる人物を検出する。この画像処理部２６は、画像内のＡさんを検出し、Ａさんの特徴を示す特徴情報を抽出する。
また、行動履歴情報取得部２１１が、この画像が撮影された際のＡさんの状況を示す行動履歴情報を取得する。この行動履歴情報取得部２１１は、撮影された際にディスプレイ２３に表示されていた広告コンテンツ（第１話）を示す情報、デジタルサイネージ２の設置場所である第１地点を示す情報、および現在の時刻を示す情報を行動履歴情報として取得する。
そして、デジタルサイネージ２の行動履歴情報取得部２１１は、特徴情報と行動履歴情報とを対応付けた情報を、通信部２２を介してサーバ１に送信する。
【００６３】
サーバ１は、受信した特徴情報と、記憶部１３の特徴情報テーブル１３１とを照合する。ここで、Ａさんの特徴を示す特徴情報は、記憶部１３の特徴情報テーブル１３１に記憶されていない。よって、サーバ１の制御部１１は、Ａさんに対して新たな人物ＩＤ「００１」を割り当てる。そして、サーバ１１の制御部１１は、この人物ＩＤ「００１」と特徴情報とを対応づけて特徴情報テーブル１３１に記憶させるとともに、人物ＩＤ「００１」と行動履歴情報とを対応づけて行動履歴情報テーブル１３２に記憶させる。
【００６４】
次いで、Ａさんが、第２地点のデジタルサイネージ２の前を通過したとする。
この場合、第２地点のデジタルサイネージ２のカメラ２５は、Ａさんがディスプレイ２３の方を向いた画像を示す撮影画像データを出力する。例えば、図９（ｂ）に示すような画像を示す撮影画像データである。
【００６５】
画像処理部２６は、カメラ２５から出力される撮影画像データに基づき、画像内に含まれる人物を検出する。この画像処理部２６は、画像内のＡさんを検出し、Ａさんの特徴を示す特徴情報を抽出する。
また、行動履歴情報取得部２１１が、この画像が撮影された際のＡさんの状況を示す行動履歴情報を取得する。この行動履歴情報取得部２１１は、デジタルサイネージ２の設置場所である第２地点を示す情報および現在の時刻を示す情報を行動履歴情報として取得する。なお、行動履歴情報取得部２１１は、撮影された際にディスプレイ２３に表示されていた広告コンテンツを示す情報があれば、行動履歴情報に追加してもよい。
そして、デジタルサイネージ２の行動履歴情報取得部２１１は、特徴情報と行動履歴情報とを対応付けた情報を、通信部２２を介してサーバ１に送信する。
【００６６】
サーバ１は、受信した特徴情報と、記憶部１３の特徴情報テーブル１３１とを照合する。ここで、サーバ１が受信したＡさんの特徴を示す特徴情報は、記憶部１３の特徴情報テーブル１３１において人物ＩＤ「００１」対応付けられている特徴情報と類似する。よって、人物判定部１１１は、受信した特徴情報が示すＡさんは、既に広告コンテンツ（第１話）を視聴している人物であると判定する。サーバ１の制御部１１は、この人物ＩＤ「００１」と受信した特徴情報とを対応づけて特徴情報テーブル１３１に記憶させるとともに、人物ＩＤ「００１」と受信した行動履歴情報とを対応づけて行動履歴情報テーブル１３２に記憶させる。
【００６７】
そして、サーバ１の配信コンテンツ決定部１１２は、コンテンツテーブル１３４を参照して、人物判定部１１１の判定結果に応じたコンテンツデータを決定する。ここでは、広告コンテンツ（第２話）がＡさんに応じたコンテンツであり、サーバ１の配信コンテンツ決定部１１２は、広告コンテンツ（第２話）を表示することを指示する情報を通信部１２を介してデジタルサイネージ２に送信する。なお、サーバ１の配信コンテンツ決定部１１２は、コンテンツテーブルの視聴の順番を示す情報に基づき、広告コンテンツ（第１話）
の次に配信する広告コンテンツ（第２話）を決定する。
これにより、第２地点のデジタルサイネージ２は、広告コンテンツ（第２話）をディスプレイ２３に表示することができる。
よって、Ａさんは、第２地点のデジタルサイネージ２のディスプレイ２３の方に顔を向けることによって、広告コンテンツ（第２話）を視聴することができる。
【００６８】
同様にして、Ａさんが第３地点のデジタルサイネージ２のディスプレイ２３の方に顔を向けることによって、第３地点のデジタルサイネージ２は、広告コンテンツ（第３話）を表示させることができる。
【００６９】
また、本実施形態に係る行動履歴管理システムは、図１５に示すように、人の行動履歴情報に応じて、スタンプラリー等のゲーム性のあるコンテンツを順次、デジタルサイネージ２に表示させることができる。図１５は、本実施形態に係る行動履歴管理システムによるコンテンツの配信の一例を説明するための図である。
【００７０】
まず、デジタルサイネージ２の記憶部２４には、例えば、ゲーム性のあるコンテンツが記憶されている。このコンテンツは、図１５に示す通り、例えば、スタンプラリーのように、Ａ〜Ｃの各ポイントの到着の有無を示す画像である。なお、対応する音声を含むものであってもよい。
例えば、Ａさんが、第１地点のデジタルサイネージ２に表示されているコンテンツを視聴したとする。
この場合、第１地点のデジタルサイネージ２のカメラ２５は、Ａさんがディスプレイ２３の方を向いた画像を示す撮影画像データを出力する。例えば、図９（ｂ）に示すような画像を示す撮影画像データである。
【００７１】
画像処理部２６は、カメラ２５から出力される撮影画像データに基づき、画像内に含まれる人物を検出する。この画像処理部２６は、画像内のＡさんを検出し、Ａさんの特徴を示す特徴情報を抽出する。
また、行動履歴情報取得部２１１が、この画像が撮影された際のＡさんの状況を示す行動履歴情報を取得する。この行動履歴情報取得部２１１は、デジタルサイネージ２の設置場所である第１地点を示す情報および現在の時刻を示す情報を行動履歴情報として取得する。
そして、デジタルサイネージ２の行動履歴情報取得部２１１は、特徴情報と行動履歴情報とを対応付けた情報を、通信部２２を介してサーバ１に送信する。
【００７２】
サーバ１は、受信した特徴情報と、記憶部１３の特徴情報テーブル１３１とを照合する。ここで、Ａさんの特徴を示す特徴情報は、記憶部１３の特徴情報テーブル１３１に記憶されていない。よって、サーバ１の制御部１１は、Ａさんに対して新たな人物ＩＤ「００１」を割り当てる。そして、サーバ１１の制御部１１は、この人物ＩＤ「００１」と特徴情報とを対応づけて特徴情報テーブル１３１に記憶させるとともに、人物ＩＤ「００１」と行動履歴情報とを対応づけて行動履歴情報テーブル１３２に記憶させる。
【００７３】
そして、サーバ１の配信コンテンツ決定部１１２は、コンテンツテーブル１３４を参照して、人物判定部１１１の判定結果に応じたコンテンツデータを決定し、決定したコンテンツを表示することを指示する情報を通信部１２を介してデジタルサイネージ２に送信する。つまり、サーバ１の配信コンテンツ決定部１１２は、人物判定部１１１によって判定された人の人物ＩＤに対応する行動履歴情報を行動履歴情報テーブル１３２から読み出す。そして、この行動履歴情報に含まれるデジタルサイネージ２の設置位置を示す「場所」の情報に基づき、予め決められたスタンプラリーの各ポイント（第１〜第３地点）のうちいずれのポイントが行動履歴情報の「場所」に含まれているか否かを判定する。この場合、行動履歴情報には、第１地点を示す「場所」の情報が含まれている。このように、Ａさんは、スタンプラリーにおいて、第１地点に到達しているため、サーバ１は、第１地点を第２、３地点とは異なる形態で表示した画像をディスプレイに表示させることを指示する情報をデジタルサイネージ２に送信する。
デジタルサイネージ２の制御部２１は、コンテンツを表示することを指示する情報を通信部２２を介してサーバ１から受信し、この情報が示すコンテンツデータを記憶部２４から読み出し、ディスプレイ２３に表示させる。
【００７４】
また、Ａさんが、第２、３地点に到着した場合も同様にして、デジタルサイネージ２のディスプレイ２３に、第１、２、３地点の到着したことを示す画像を表示する。
【００７５】
このように、デジタルサイネージ２のディスプレイ２３にスタンプラリーで各人が到着したポイントを表示させることにより、参加者の手間を省くことができる。また、スタンプラリーの参加者数を示す情報も容易に取得することができる。さらに、デジタルサイネージ２のカメラ２５で撮影された撮影画像データを解析することによって、参加者の属性（年齢や性別）を示す情報を取得することができる。
【００７６】
なお、本発明に係る行動履歴管理システムは、上述の実施形態に限られない。例えば、デジタルサイネージ２においてイベント告知の広告を配信していたとする。この場合、店舗監視装置４は、イベントの会場の入り口に設置されたカメラによって撮影された撮影画像データに基づき、来場者の特徴を示す特徴情報を取得する。また、イベント用に設けられた店舗監視装置４は、イベントの場所や内容、あるいは、出演者やカテゴリー（文化、音楽、スポーツ等）を示す行動履歴情報を作成し、サーバ１に送信する。そして、サーバ１は、特徴情報と行動履歴情報とを対応付けて管理する。
これにより、イベント告知の広告をデジタルサイネージ２において視聴した人物と、イベントに来場した人物を個々に識別することができるとともに、人の行動履歴情報を取得することができる。
【００７７】
また、事前に、人物の特徴を示す情報（名前、年齢、性別、顔写真、服装、身長、体重等）を登録しておき、サーバ１の特徴情報テーブルに保存しておくものであってもよい。これにより、人物判定部１１１による判定精度を高めることができる。この場合、身長や体重等は、事前に身長計や体重計等の計測器によって人物の身長や体重を計測した実測値を利用するものであってもよい。また、体重は、当該人物の特徴を示す情報を登録する際に事前に計測されるものであってもよく、デジタルサイネージ２で顔の画像が撮影される際に、デジタルサイネージ２の付近に設置される体重計によって計測されるものであってもよい。
デジタルサイネージ２で顔の画像が撮影される際に体重を計測する場合、例えば、デジタルサイネージ２の前に立つ人物の体重が計測できるようなマットをデジタルサイネージ２の前に設置しておく。これにより、デジタルサイネージ２の前で電子広告を閲覧した人の体重を測定できる。この計測された体重と、デジタルサイネージ２で撮影された顔の画像を識別する情報とを対応づけて、サーバ１に送信するものであってもよい。
このように、人物の特徴を示す情報として、実測値を対応付けることにより、より正確な人物判定をすることができる。
なお、人物の特徴を示す情報は、これに限られず、他の計測機器等によって計測されるデータ（例えば、血圧、血液型、視力、聴力等）であってもよい。
【００７８】
さらに、行動履歴管理システムの処理動作を１つの装置によって独自に実行するものであってもよい。例えば、デジタルサイネージ２に、サーバ１の構成と機能を搭載させるものであってもよい。このデジタルサイネージ２は、通過する人の行動履歴に応じたコンテンツを提供することができる。なおこの場合、デジタルサイネージ２の画像処理部２６は、カメラ２５が撮影した撮影画像データから人物の表情を解析するものであってもよい。例えば、人物の顔の特徴として、デジタルサイネージ２を視聴した際に、笑っているのか、怒っているのか等の表情を示す情報を取得して、当該人物の感情を示す情報を行動履歴情報に追加するものであってもよい。これにより、過去の行動履歴情報において、当該人物が不快感を示したコンテンツは表示させないようにしたりできる。これにより、デジタルサイネージ２によって行動履歴や個人の識別がなされていることを不快に思う人に対しては、行動履歴や個人に応じたコンテンツの変更を中止することができる。
【００７９】
また、本実施形態に係るサーバ１は、図１６に示す通り、行動履歴情報テーブルにおいて、人物ＩＤと行動履歴情報に加え、撮影画像ＩＤと特徴類似度を対応付けて記憶するものであってもよい。この撮影画像ＩＤとは、デジタルサイネージ２や店舗監視装置４において撮影された画像を識別するための情報である。特徴類似度は、特徴照合処理において、デジタルサイネージ２や店舗監視装置４において撮影された画像から抽出した特徴と、特徴情報テーブル１３１の特徴情報とが類似している程度を示す情報である。
このように、撮影画像ＩＤを人物ＩＤや行動履歴情報と対応付けてサーバ１に格納しておくことにより、後で、人間が目視により確認することができる。また、特徴点類似度を人物ＩＤや行動履歴情報と対応付けてサーバ１に格納しておくことにより、例えば、特徴照合処理における人物判定の精度を、後で、人間が確認することができる。これにより、人物判定に類似すると判定された場合であっても、完全に本人として一致していると判定されたのか、あるいは、概ね似ているため類似と判定されたのか、その類似の程度を示すことができる。
また、図示しないが、特徴情報テーブルや購入履歴情報テーブルも同様に、人物ＩＤに対応付けて、撮影画像ＩＤや特徴類似度を対応付けるものであってもよい。
【００８０】
なお、上述のサーバ１、デジタルサイネージ２、販売情報管理装置３、および店舗監視装置４は、内部にコンピュータシステムを有している。そして、サーバ１、デジタルサイネージ２、販売情報管理装置３、および店舗監視装置４の動作の過程は、プログラムの形式でコンピュータ読み取り可能な記録媒体に記憶されており、このプログラムをコンピュータシステムが読み出して実行することによって、上記処理が行われる。ここでいう「コンピュータシステム」とは、ＣＰＵ及び各種メモリやＯＳ、周辺機器等のハードウェアを含むものである。
また、「コンピュータシステム」は、ＷＷＷシステムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）も含むものとする。
【００８１】
また、各ステップを実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、また、サーバ１、デジタルサイネージ２、販売情報管理装置３、および店舗監視装置４はこの機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより、各処理を行ってもよい。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、フラッシュメモリ等の書き込み可能な不揮発性メモリ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。
【００８２】
さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（例えばＤＲＡＭ（Dynamic Random Access Memory））のように、一定時間プログラムを保持しているものも含むものとする。
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。
また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムに既に記録されているプログラムとの組合せにより実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。
【符号の説明】
【００８３】
１・・・サーバ、２・・・デジタルサイネージ、３・・・販売情報管理装置、４・・・店舗監視装置、１１・・・制御部、１２・・・通信部、１３・・・記憶部、１１１・・・人物判定部、１１２・・・配信コンテンツ決定部、１３１・・・特徴情報テーブル、１３２・・・行動履歴情報テーブル、１３３・・・購入履歴情報テーブル、２１・・・制御部、２２・・・通信部、２３・・・ディスプレイ、２４・・・記憶部、２５・・・カメラ、２６・・・画像処理部、３１・・・制御部、３２・・・通信部、３３・・・ディスプレイ、３４・・・記憶部、３５・・・カメラ、３６・・・画像処理部、４１・・・制御部、４２・・・通信部、４３・・・記憶部、４４・・・カメラ、４５・・・画像処理部
【図１】
2012208854.tif 000003
【図２】
2012208854.tif 000004
【図３】
2012208854.tif 000005
【図４】
2012208854.tif 000006
【図５】
2012208854.tif 000007
【図６】
2012208854.tif 000008
【図７】
2012208854.tif 000009
【図８】
2012208854.tif 000010
【図９】
2012208854.tif 000011
【図１０】
2012208854.tif 000012
【図１１】
2012208854.tif 000013
【図１２】
2012208854.tif 000014
【図１３】
2012208854.tif 000015
【図１４】
2012208854.tif 000016
【図１５】
2012208854.tif 000017
【図１６】
2012208854.tif 000018