(57)【要約】【課題】  画像または音声を記録する記録装置において、ユーザーに興味が生じたものと推定される時のみ、画像または音声を記録することができる。【解決手段】  ユーザーに装着されるカメラ搭載型のヘッドマウントディスプレイ１２であって、装着したユーザーの心拍数の変化をトリガーとして、ユーザーが見ている光景の動画像を記録する。【選択図】  図６
2016133951.tif 000002
【特許請求の範囲】
【請求項１】
ユーザーに装着される記録装置であって、
前記ユーザーの生体情報の変化をトリガーとして、画像または音声を記録することを特徴とする記録装置。
【請求項２】
前記生体情報は、心拍数、血圧、体温および呼吸数のうちの少なくとも一つを含む情報であることを特徴とする請求項１に記載の記録装置。
【請求項３】
複数のユーザーに装着される複数の、請求項１または２に記載の記録装置と、
情報管理サーバーと、を備え、
前記各記録装置は、前記各ユーザーのユーザー識別情報を付加して、記録した前記画像または前記音声の記録データを前記情報管理サーバーに送信し、
前記情報管理サーバーは、前記各記録装置からの前記記録データと、これに付加された前記ユーザー識別情報と、に基づいて、前記各ユーザーが興味を覚えた商品を判定する興味商品判定部を有することを特徴とする情報処理システム。
【請求項４】
前記各記録装置は、前記各ユーザーの現在位置を示す位置情報を付加して、前記記録データを前記情報管理サーバーに送信し、
前記興味商品判定部は、前記各記録装置からの前記記録データと、これに付加された前記ユーザー識別情報および前記位置情報と、に基づいて、前記各ユーザーが興味を覚えた商品を判定することを特徴とする請求項３に記載の情報処理システム。
【請求項５】
前記情報管理サーバーに接続された情報提示装置を更に備え、
前記情報管理サーバーは、前記複数のユーザーに対する前記興味商品判定部の判定結果を解析して、前記複数のユーザーにおける、興味を覚えた商品の統計情報を生成する統計情報生成部を更に有し、
前記情報提示装置は、前記統計情報生成部により生成した前記統計情報を提示することを特徴とする請求項３または４に記載の情報処理システム。
【請求項６】
前記情報管理サーバーに接続されたＰＯＳ印刷装置を更に備え、
前記情報管理サーバーは、前記興味商品判定部の判定結果である前記各ユーザーが興味を覚えた商品の、広告画像またはクーポン画像を生成する画像生成部を更に有し、
前記ＰＯＳ印刷装置は、前記各ユーザーの会計時に、前記画像生成部により生成した前記広告画像または前記クーポン画像を印刷することを特徴とする請求項３ないし５のいずれか一項に記載の情報処理システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像または音声を記録する記録装置およびこれを備えた情報処理システムに関するものである。
【背景技術】
【０００２】
従来、情報処理システムとして、ユーザーによって携帯されるモバイル装置と、サーバー装置と、を備えたものが知られている（特許文献１参照）。この情報処理システムでは、モバイル装置が、センサーデータ（加速度や位置情報）から識別されるユーザーの行動等の情報と、ユーザーが入力する満足度等の情報と、を取得して、サーバー装置に送信する。一方、サーバー装置が、これらの情報を受信して蓄積し、蓄積した情報を解析することによって、ユーザーの行動と、その行動を含む期間についてのユーザーの満足度との関係を解析する。そして、サーバー装置が、この解析の結果を元に、行動パターン、関連性、コンテクストに合った行動選択肢などを提示する情報を、ユーザーに提示する情報として生成する。すなわち、本情報処理システムでは、満足度の高い行動を判定し、おすすめの行動をユーザーに提示する構成となっている。これによって、ユーザーがより高い満足度を得られる行動をとることを助けることができる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１３−００３６４３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、このような情報処理システムにおいて、ユーザーが興味を覚えた商品を判定し、おすすめの商品を提示したいという要請がある。これに対し、本発明の発明者は、ユーザーが見ている光景の画像や、ユーザーが聞いている音の音声を記録する記録装置を、ユーザーに装着させ、当該記録装置の記録データを解析することで、ユーザーが興味を覚えた商品を判定することを考えた。この構成によれば、ユーザーが興味を覚えた商品を、精度良く且つ自動的に判定することができる。
しかしながら、このような構成では、ユーザーが興味を覚えた商品を判定すべく、画像や音声を常に記録し続けなければならないという問題が生じた。これでは、記録装置のバッテリー消費が極端に多くなり、また、記録データのデータ量が極端に多くなってしまう。
【０００５】
本発明は、ユーザーに興味が生じたものと推定される時のみ、画像または音声を記録することができる記録装置およびこれを備えた情報処理システムを提供することを課題としている。
【課題を解決するための手段】
【０００６】
本発明の記録装置は、ユーザーに装着される記録装置であって、ユーザーの生体情報の変化をトリガーとして、画像または音声を記録することを特徴とする。
【０００７】
この場合、生体情報は、心拍数、血圧、体温および呼吸数のうちの少なくとも一つを含む情報であることが好ましい。
【０００８】
これらの構成によれば、ユーザーの生体情報の変化をトリガーとして、画像または音声を記録する構成であるため、ユーザーに興味が生じたものと推定される時のみ、画像または音声を記録することができる。よって、記録装置のバッテリー消費を削減することができ、また、記録データのデータ量を少なくすることができる。なお、本記録装置は、展示会等のイベントでユーザー（来場者）に装着させ、ユーザーが興味を覚えた商品を判定するのに用いても良いし、旅行やイベント事の際、ユーザーが装着し、旅行やイベントの思い出を記録するのに用いても良い。また、記録する画像は、静止画像であっても良いし、動画像であっても良い。
【０００９】
本発明の情報処理システムは、複数のユーザーに装着される複数の、上記の記録装置と、情報管理サーバーと、を備え、各記録装置は、各ユーザーのユーザー識別情報を付加して、記録した画像または音声の記録データを情報管理サーバーに送信し、情報管理サーバーは、各記録装置からの記録データと、これに付加されたユーザー識別情報と、に基づいて、各ユーザーが興味を覚えた商品を判定する興味商品判定部を有することを特徴とする。
【００１０】
この構成によれば、各ユーザーが興味を覚えた商品を、精度良く且つ容易に判定することができる。このように、各ユーザーが興味を覚えた商品を把握することができるため、これを考慮したサービスをいち早く展開することができる。
【００１１】
この場合、各記録装置は、各ユーザーの現在位置を示す位置情報を付加して、記録データを情報管理サーバーに送信し、興味商品判定部は、各記録装置からの記録データと、これに付加されたユーザー識別情報および位置情報と、に基づいて、各ユーザーが興味を覚えた商品を判定することが好ましい。
【００１２】
この構成によれば、ユーザーの位置も加味して、ユーザーが興味を覚えた商品を判定する構成であるため、興味を覚えた商品を、より精度良く判定することができる。
【００１３】
一方、情報管理サーバーに接続された情報提示装置を更に備え、情報管理サーバーは、複数のユーザーに対する興味商品判定部の判定結果を解析して、複数のユーザーにおける、興味を覚えた商品の統計情報を生成する統計情報生成部を更に有し、情報提示装置は、統計情報生成部により生成した統計情報を提示することが好ましい。
【００１４】
この構成によれば、複数のユーザーにおける、興味を覚えた商品の統計情報を、例えば各店舗のオーナー等に提示することができる。これによって、各店舗のオーナーは、市場の傾向を迅速に知ることができ、市場の傾向に沿ったサービスをいち早く展開することができる。
【００１５】
また、情報管理サーバーに接続されたＰＯＳ印刷装置を更に備え、情報管理サーバーは、興味商品判定部の判定結果である各ユーザーが興味を覚えた商品の、広告画像またはクーポン画像を生成する画像生成部を更に有し、ＰＯＳ印刷装置は、各ユーザーの会計時に、画像生成部により生成した広告画像またはクーポン画像を印刷することが好ましい。
【００１６】
この構成によれば、ＰＯＳ印刷装置によって、各ユーザーの会計時に、各ユーザーが興味を覚えた商品の広告画像やクーポン画像が印刷される。そのため、各ユーザーに、各ユーザーが興味を覚えた商品の広告画像やクーポン画像の印刷物を渡すことができ、各ユーザーの購買意欲を向上させることができる。なお、広告画像やクーポン画像を、会計レシートに付加（印刷）する構成であっても良いし、会計レシートとは別に、広告画像やクーポン画像を印刷した印刷物（クーポン券等）を発行する構成であっても良い。
【図面の簡単な説明】
【００１７】
【図１】本発明の一実施形態に係る情報処理システムを示したシステム構成図である。
【図２】ユーザー側システムの構成を示したブロック図である。
【図３】情報管理サーバーの構成を示したブロック図である。
【図４】店舗側システムの構成を示したブロック図である。
【図５】情報処理システムの機能構成を示した機能ブロック図である。
【図６】情報処理システムによる興味商品判定動作を示したフローチャートである。
【図７】情報処理システムによる統計情報印刷動作を示したフローチャートである。
【図８】情報処理システムによるクーポン画像印刷動作を示したフローチャートである。
【図９】第１変形例の情報処理システムの機能構成を示した機能ブロック図である。
【図１０】第２変形例の情報処理システムの機能構成を示した機能ブロック図である。
【発明を実施するための形態】
【００１８】
以下、添付の図面を参照し、本発明の一実施形態に係る記録装置およびこれを備えた情報処理システムについて説明する。本実施形態では、本発明の記録装置を適用したカメラ搭載型のヘッドマウントディスプレイと、これを備えた情報処理システムについて例示する。この情報処理システムは、カメラ搭載型のヘッドマウントディスプレイで記録した動画像を元に、各ユーザーが興味を覚えた商品を判定するものである。本実施形態では、カメラ搭載型のヘッドマウントディスプレイを、展示会等のイベントの来場者（ユーザー）に装着させることで、各来場者が興味を覚えた商品を判定することを想定している。
【００１９】
図１に示すように、情報処理システムＳＹは、複数のユーザーに装着または携帯された複数のユーザー側システム１と、複数の店舗に設置された複数の店舗側システム２と、これら各システム１、２とネットワークＮＷ（インターネット等）を介して接続した情報管理サーバー３と、を備える。本実施形態では、各ユーザー側システム１で得られた動画像を、情報管理サーバー３で解析し、この解析結果に基づくデータを、各店舗側システム２に提供する構成となっている。
【００２０】
図２に示すように、各ユーザー側システム１は、各ユーザーの腕に装着されるリスタブル機器１１と、各ユーザーの頭部に装着されるカメラ搭載型のヘッドマウントディスプレイ１２（記録装置）と、各ユーザーに携帯される携帯端末１３と、を備える。
【００２１】
リスタブル機器１１は、心拍数（生体情報）を検出する健康管理機器であり、心拍センサー２１および無線通信モジュール２２を有する。心拍センサー２１は、リスタブル機器１１を装着したユーザーの心拍数を検出する。無線通信モジュール２２は、ヘッドマウントディスプレイ１２との無線通信を行う。詳細は後述するが、当該無線通信モジュール２２は、主に、心拍センサー２１で検出した心拍数の心拍数データを、ヘッドマウントディスプレイ１２に送信するのに用いられる。
【００２２】
ヘッドマウントディスプレイ１２は、ユーザーに対し画像を虚像として視認させると共に、外景（現実風景）も視認可能な透過型（シースルー）の頭部装着型表示装置である。また、ヘッドマウントディスプレイ１２は、上記したように、カメラ搭載型のものであり、ユーザーが見ている外景（光景）の動画像を記録することができるようになっている。すなわち、本ヘッドマウントディスプレイ１２は、ヘッドマウントカメラとしても機能する。
【００２３】
ヘッドマウントディスプレイ１２は、撮像カメラ３１と、カメラ制御機構３２と、無線通信モジュール３３と、を有する。撮像カメラ３１は、ユーザーが見ている光景の動画像を記録（撮像）する。カメラ制御機構３２は、撮像カメラ３１による動画像の記録を制御する。無線通信モジュール３３は、リスタブル機器１１および携帯端末１３との無線通信を行う。詳細は後述するが、無線通信モジュール３３は、主に、リスタブル機器１１からの心拍数データを受信し、また撮像カメラ３１で記録した記録データ（動画像）を携帯端末１３に送信するのに用いられる。
【００２４】
携帯端末１３は、例えば、スマートフォンや携帯電話により構成された通信機器であり、無線通信モジュール４１と、通信インターフェース４２と、を有する。無線通信モジュール４１は、ヘッドマウントディスプレイ１２との無線通信を行う。通信インターフェース４２は、情報管理サーバー３とのネットワークＮＷを介した通信を行う。詳細は後述するが、無線通信モジュール４１は、主に、ヘッドマウントディスプレイ１２からの記録データを受信するのに用いられ、通信インターフェース４２は、当該記録データを、情報管理サーバー３に送信するのに用いられる。
【００２５】
図３に示すように、情報管理サーバー３は、通信インターフェース５１と、制御機構５２と、記憶機構５３と、を有する。通信インターフェース５１は、各ユーザー側システム１および各店舗側システム２とのネットワークＮＷを介した通信を行う。詳細は後述するが、通信インターフェース５１は、主に、各ユーザー側システム１の各携帯端末１３からの記録データを受信し、また、ユーザーが興味を覚えた商品の統計情報を各店舗側システム２の情報提示用プリンター６１に送信し、さらに、ユーザーが興味を覚えた商品のクーポン画像を各店舗側システム２のＰＯＳプリンター６２に送信するのに用いられる。
【００２６】
制御機構５２は、ＣＰＵ（Central  Processing  Unit）、ＲＡＭ（Random  Access  Memory）、ＲＯＭ（Read  Only  Memory）等を有し、情報管理サーバー３全体を統括制御する。記憶機構５３は、ハードディスク等で構成されており、情報管理サーバー３の制御に係る各種データを記憶する。
【００２７】
図４に示すように、各店舗側システム２は、各店舗のオーナーに情報を提示するための情報提示用プリンター６１（情報提示装置）と、会計時にレシート等を印刷するためのＰＯＳプリンター（ＰＯＳ印刷装置）６２と、を備える。ここにいう「ＰＯＳ」は、「Point  Of  Sales」の略である。情報提示用プリンター６１およびＰＯＳプリンター６２は、それぞれ、ネットワークＮＷを介して情報管理サーバー３に接続されている。
【００２８】
情報提示用プリンター６１は、通信インターフェース７１と、印刷機構７２と、印刷制御機構７３と、を有する。通信インターフェース７１は、情報管理サーバー３とのネットワークＮＷを介した通信を行う。印刷機構７２は、印刷用紙に対し印刷処理を行う。印刷制御機構７３は、印刷機構７２による印刷処理の制御を行う。詳細は後述するが、通信インターフェース７１は、主に、情報管理サーバー３からの上記統計情報を受信するのに用いられる。また、印刷機構７２および印刷制御機構７３は、主に、上記統計情報を印刷用紙に印刷するのに用いられる。
【００２９】
ＰＯＳプリンター６２は、レシート用紙に印刷を施して、レシートを発行するレシートプリンターにより構成されている。ＰＯＳプリンター６２は、通信インターフェース８１と、印刷機構８２と、印刷制御機構８３と、ＵＳＢ（Universal  Serial  Bus）インターフェース８４と、を有する。通信インターフェース８１は、情報管理サーバー３とのネットワークＮＷを介した通信を行う。印刷機構８２は、レシート用紙に対し印刷処理を行う。印刷制御機構８３は、印刷機構８２による印刷処理の制御を行う。詳細は後述するが、通信インターフェース８１は、主に、情報管理サーバー３からの上記クーポン画像を受信するのに用いられる。また、印刷機構８２および印刷制御機構８３は、主に、レシート用紙に対し、会計情報と共に、上記クーポン画像を印刷するのに用いられる。
【００３０】
また、ＵＳＢインターフェース８４は、ＮＦＣ（Near  field  communication）読取機器９１が接続され、ＩＣカードやＮＦＣ搭載型携帯端末から読み取った読取データを取得する。詳細は後述するが、ＵＳＢインターフェース８４は、主に、ＩＣカードやＮＦＣ搭載型携帯端末から、それを所持するユーザーのユーザー識別情報を取得するのに用いられる。
【００３１】
次に図５を参照して、情報処理システムＳＹを構成する各機器、各装置の機能構成について説明する。図５に示すように、リスタブル機器１１は、機能構成として、心拍数検出部１０１と、心拍数データ送信部１０２と、を有する。心拍数検出部１０１は、心拍センサー２１を主要部とし、継続的（例えば０．０１秒毎）に、リスタブル機器１１を装着しているユーザーの心拍数を検出する。一方、心拍数データ送信部１０２は、無線通信モジュール２２を主要部とし、検出した心拍数のデータである心拍数データを、継続的にヘッドマウントディスプレイ１２に送信する。
【００３２】
ヘッドマウントディスプレイ１２は、機能構成として、心拍数データ受信部１１１と、画像記録部１１２と、記録データ送信部１１３と、を有する。心拍数データ受信部１１１は、無線通信モジュール３３を主要部とし、リスタブル機器１１からの心拍数データを受信する。
【００３３】
画像記録部１１２は、撮像カメラ３１およびカメラ制御機構３２を主要部とし、ユーザーの心拍数の変化をトリガーとして、ユーザーが見ている光景の動画像を記録する。具体的には、画像記録部１１２は、リスタブル機器１１から受信される心拍数データを継続的に監視し、その心拍数が、ユーザーに興味が生じたものと推定される閾値以上となったことをトリガーとして、上記動画像を記録する。すなわち、心拍数が、当該閾値以上となったことをトリガーとして動画像の記録を開始し、記録の開始から一定時間経過したら、動画像の記録を終了する。このような構成により、ユーザーに興味が生じたものと推定される時だけ、ユーザーが見ている光景の動画像を記録するようにしている。なお、本実施形態では、動画像の記録の終了タイミングを、記録の開始から一定時間経過したタイミングとしたが、動画像の記録の終了タイミングを、ユーザーの心拍数が上記閾値未満となったタイミングとしても良い。
【００３４】
記録データ送信部１１３は、無線通信モジュール３３を主要部とし、画像記録部１１２により記録した動画像の記録データを、携帯端末１３に送信する。このとき、記録データ送信部１１３は、当該記録データに、本ヘッドマウンドディスプレイ１２を装着するユーザーのユーザー識別情報（ユーザーＩＤ等）を付加して、当該記録データを送信する。これにより、情報管理サーバー３側で、当該記録データがどのユーザーのものかを識別できるようにしている。なお、ユーザー識別情報は、ヘッドマウントディスプレイ１２に、予め登録（記録）されているものとする。
【００３５】
携帯端末１３は、機能構成として、記録データ受信部１２１と、記録データ送信部１２２と、を有する。記録データ受信部１２１は、無線通信モジュール４１を主要部とし、ヘッドマウントディスプレイ１２からの記録データと、これに付加されたユーザー識別情報と、を受信する。記録データ送信部１２２は、通信インターフェース４２を主要部とし、記録データ受信部１２１により受信した記録データと、これに付加されたユーザー識別情報とを、情報管理サーバー３に送信する。このように、携帯端末１３は、ヘッドマウントディスプレイ１２からのデータを、情報管理サーバー３に転送する役割を担っている。すなわち、ヘッドマウントディスプレイ１２（記録データ送信部１１３）は、記録データおよびユーザー識別情報を、携帯端末１３を介して、情報管理サーバー３に送信する構成となっている。
【００３６】
情報管理サーバー３は、機能構成として、記録データ受信部１３１と、興味商品判定部１３２と、興味商品記憶部１３３と、属性情報記憶部１３４と、統計情報生成部１３５と、統計情報送信部１３６と、クーポン画像生成部１３７（画像生成部）と、クーポン画像送信部１３８と、を有する。記録データ受信部１３１は、通信インターフェース５１を主要部とし、各ユーザー側システム１からの、記録データと、これに付加されたユーザー識別情報と、を受信する。
【００３７】
興味商品判定部１３２は、制御機構５２を主要部とし、受信した記録データと、これに付加されたユーザー識別情報と、に基づいて、各ユーザーが興味を覚えた商品（以下、興味商品と呼称）を判定する。この判定処理では、まず、記録データを解析し、記録データの動画像の中央部に、いずれかの商品やそれに関連するものが写っていた否かを判定する。そして、いずれかの商品やそれに関連するものが写っていた場合には、その商品を、ユーザー識別情報に基づくユーザーの興味商品と判定する。すなわち、記録データの動画像の中央部に写っているものは、心拍数が閾値以上となったときに、ユーザーが注視していたものであるため、ユーザーが興味を覚えた商品であると推定できる。よって、記録データの動画像の中央部に写っているものの商品を、ユーザーの興味商品としている。なお、「いずれか商品に関連するもの」とは、各商品の名称、ロゴ、広告、看板等である。また、各商品の外観のデータや、各商品の名称、ロゴ、広告、看板等のデータは、予めデータベースに記憶しておき、これと照合して、いずれかの商品やそれに関連するものが写っているか否かを判定する。このような構成により、情報管理サーバー３上のデータベースで更新すれば、新たな商品についても、判定処理を行うことができるようになっている。
【００３８】
興味商品記憶部１３３は、記憶機構５３を主要部とし、複数のユーザーに対する興味商品判定部１３２の判定結果、すなわち、各ユーザーの興味商品を記憶する。具体的には、各ユーザーのユーザー識別情報と、各ユーザーの興味商品と、を対応付けて記憶する。
【００３９】
属性情報記憶部１３４は、記憶機構５３を主要部とし、各ユーザーの属性情報を記憶する。具体的には、各ユーザーのユーザー識別情報と、各ユーザーの年齢や性別等（属性情報）と、を対応付けて記憶する。
【００４０】
統計情報生成部１３５は、制御機構５２を主要部とし、属性情報記憶部１３４に記憶された各ユーザーの属性情報（年齢や性別等）に基づき、興味商品記憶部１３３に記憶された各ユーザーの興味商品を解析して、複数のユーザーにおける興味商品の統計情報を生成する。本実施形態では、統計情報として、全てのユーザー、各年齢層のユーザーおよび各性別のユーザーが、どの商品に興味を覚えたか、を示す情報を生成する。統計情報送信部１３６は、通信インターフェース５１を主要部とし、統計情報生成部１３５により生成した興味商品の統計情報を、情報提示用プリンター６１に送信する。
【００４１】
クーポン画像生成部１３７は、制御機構５２を主要部として、ＰＯＳプリンター６２からのクーポン画像要求信号を受けて、興味商品のクーポン画像を生成する。クーポン画像要求信号には、ユーザー識別情報が付加されており、クーポン画像生成部１３７は、このユーザー識別情報に基づくユーザーの興味商品を、興味商品記憶部１３３から抽出し、抽出した興味商品のクーポン画像を生成する。クーポン画像生成部１３７は、例えば、クーポン画像として、当該興味商品となっている商品を割引する画像を生成する。クーポン画像送信部１３８は、通信インターフェース５１を主要部とし、クーポン画像生成部１３７により生成したクーポン画像を、要求元のＰＯＳプリンター６２に送信する。
【００４２】
情報提示用プリンター６１は、機能構成として、統計情報受信部１４１と、統計情報印刷部１４２と、を有する。統計情報受信部１４１は、通信インターフェース７１を主要部として、情報管理サーバー３からの興味商品の統計情報を受信する。統計情報印刷部１４２は、印刷機構７２および印刷制御機構７３を主要部とし、統計情報受信部１４１により受信した興味商品の統計情報を、印刷用紙に印刷する。これによって、各店舗のオーナーに、興味商品の統計情報を提示することができるようになっている。
【００４３】
ＰＯＳプリンター６２は、機能構成として、識別情報取得部１５１と、クーポン画像要求部１５２と、クーポン画像受信部１５３と、レシート印刷部１５４と、を有する。
【００４４】
識別情報取得部１５１は、ＵＳＢインターフェース８４を主要部とし、ＮＦＣ読取機器９１の読取データを取得して、ユーザー識別情報を取得する。すなわち、ユーザーは、各店舗で買い物をした際、その会計時に、自身が所持するＩＣカードやＮＦＣ搭載型携帯端末を、ＮＦＣ読取機器９１に近接させる。これに対し、ＮＦＣ読取機器９１は、そのＩＣカードやＮＦＣ搭載型携帯端末から、当該ユーザーのユーザー識別情報を読み取る。識別情報取得部１５１は、このＮＦＣ読取機器９１の読取データを取得して、ユーザーのユーザー識別情報を取得する。なお、ＩＣカードやＮＦＣ搭載型携帯端末には、それを所持するユーザーのユーザー識別情報が、予め記憶されているものとする。
【００４５】
クーポン画像要求部１５２は、通信インターフェース８１を主要部とし、各ユーザーの会計時に、識別情報取得部１５１によりユーザー識別情報を取得した際、取得したユーザー識別情報を付加して、クーポン画像要求信号を情報管理サーバー３に送信する。
【００４６】
クーポン画像受信部１５３は、通信インターフェース８１を主要部とし、情報管理サーバー３からのクーポン画像を受信する。すなわち、クーポン画像受信部１５３は、クーポン画像要求信号に対するレスポンスとして情報管理サーバー３から送信されたクーポン画像を受信する。
【００４７】
レシート印刷部１５４は、印刷機構８２および印刷制御機構８３を主要部とし、上記会計に基づく会計情報と、クーポン画像受信部１５３により受信したクーポン画像とを、レシート用紙に印刷して、会計レシートを発行する。すなわち、レシート印刷部１５４は、情報管理サーバー３から得られたクーポン画像を付加して、クーポン画像付きの会計レシートを発行する。
【００４８】
次に図６を参照して、情報処理システムＳＹによる興味商品判定動作について説明する。本興味商品判定動作は、各ユーザーのユーザー側システム１で得られた記録データにより、各ユーザーの興味商品を判定し、これを興味商品記憶部１３３に記憶させるものである。ここでは、１のユーザーのユーザー側システム１で得られた記録データにより、そのユーザーの興味商品を判定するものを例示する。また、本興味商品判定動作は、当該ユーザーの心拍数が閾値以上となったことをトリガーとしたヘッドマウントディスプレイ１２による動画像の記録を起点として行われるものである。
【００４９】
図６に示すように、ユーザー側システム１のヘッドマウントディスプレイ１２において、ユーザーの心拍数が閾値以上となったと判定された場合（Ｓ１：Ｙｅｓ）、画像記録部１１２により、ユーザーが見ている光景の動画像を記録する（Ｓ２）。すなわち、ユーザーの心拍数が閾値以上となったことをトリガーとして、動画像の記録を開始し、記録の開始から一定時間経過したら、動画像の記録を終了する。動画像の記録が終了したら、記録データ送信部１１３により、記録した記録データと、ユーザー識別情報とを、携帯端末１３に送信する（Ｓ３）。
【００５０】
これに対し、ユーザー側システム１の携帯端末１３は、記録データ受信部１２１により、ヘッドマウントディスプレイ１２からの記録データおよびユーザー識別情報を受信する（Ｓ４）。その後、記録データ送信部１２２により、受信した記録データおよびユーザー識別情報を、情報管理サーバー３に送信する（Ｓ５）。
【００５１】
これに対し、情報管理サーバー３は、記録データ受信部１３１により、携帯端末１３からの記録データおよびユーザー識別情報を受信する（Ｓ６）。記録データおよびユーザー識別情報を受信したら、興味商品判定部１３２により、受信した記録データに基づいて、受信したユーザー識別情報に基づくユーザーの興味商品を判定する（Ｓ７）。すなわち、記録データの動画像の中央部に、いずれかの商品またはこれに関連するものが写っているか否かを判定し、これらが写っている場合には、当該商品をユーザーの興味商品と判定する。また、いずれかの商品またはそれに関連するものが一切写っていないと判定された場合には、興味商品「無し」と判定する。興味商品の判定が終了したら、判定した興味商品を興味商品記憶部１３３に記憶させる（Ｓ８）。これにより、本興味商品判定動作を終了する。
【００５２】
次に図７および図８を参照して、興味商品判定動作により記録した興味商品の情報を利用する統計情報提示動作およびクーポン画像印刷動作について説明する。これらの動作は、興味商品判定動作により記録した興味商品の情報を利用するため、各ユーザーに対する上記興味商品判定動作が行われた後に実行されるものとする。
【００５３】
まず、図７を参照して、情報処理システムＳＹによる統計情報提示動作について説明する。図７に示すように、まず、情報管理サーバー３は、統計情報生成部１３５により、興味商品記憶部１３３に記憶された各ユーザーの興味商品および、属性情報記憶部１３４に記憶された各ユーザーの属性情報を参照して、複数のユーザーにおける興味商品の統計情報を生成する（Ｓ１１）。すなわち、全てのユーザーが統計的にどの商品に興味を覚えたか、各年齢層のユーザーが統計的にどの商品に興味を覚えたか、各性別のユーザーが統計的にどの商品に興味を覚えたか、を示す情報を、統計情報として生成する。統計情報を生成したら、統計情報送信部１３６により、生成した統計情報を各店舗側システム２に送信する（Ｓ１２）。
【００５４】
これに対し、各情報提示用プリンター６１は、統計情報受信部１４１により、情報管理サーバー３からの統計情報を受信する（Ｓ１３）。統計情報を受信したら、統計情報印刷部１４２により、受信した統計情報を印刷用紙に印刷する（Ｓ１４）。すなわち、統計情報が印刷された印刷物を発行する。これにより、本統計情報提示動作を終了する。
【００５５】
次に図８を参照して、情報処理システムＳＹによるクーポン画像印刷動作について説明する。本クーポン画像印刷動作は、店舗側システム２のＰＯＳプリンター６２において、識別情報取得部１５１により、ユーザー識別情報を取得したことに起因して実行される。すなわち、各ユーザーの会計時に、各ユーザーが、ＮＦＣ読取機器９１に、自身のＩＣカードやＮＦＣ搭載型携帯端末を近接し、ＮＦＣ読取機器９１が、そのＩＣカードやＮＦＣ搭載型携帯端末から、ユーザー識別情報を読み取る。そして、識別情報取得部１５１が、その読取データであるユーザー識別情報を取得することに起因して、本クーポン画像印刷動作が実行される。
【００５６】
図８に示すように、ＰＯＳプリンター６２は、識別情報取得部１５１により、ユーザー識別情報を取得すると（Ｓ２１：Ｙｅｓ）、クーポン画像要求部１５２により、取得したユーザー識別情報を付加して、クーポン画像要求信号を、情報管理サーバー３に送信する（Ｓ２２）。
【００５７】
これに対し、情報管理サーバー３は、クーポン画像要求信号およびこれに付加されたユーザー識別情報を受信する（Ｓ２３）。クーポン画像要求信号およびユーザー識別情報を受信したら、クーポン画像生成部１３７により、受信したユーザー識別情報に基づいて、クーポン画像を生成する（Ｓ２４）。すなわち、当該ユーザー識別情報に基づくユーザーの興味商品を、興味商品記憶部１３３から抽出し、抽出した興味商品のクーポン画像を生成する。クーポン画像を生成したら、クーポン画像送信部１３８により、生成したクーポン画像を、要求元のＰＯＳプリンター６２に送信する（Ｓ２５）。
【００５８】
これに対し、ＰＯＳプリンター６２は、クーポン画像受信部１５３により、情報管理サーバー３からのクーポン画像を受信する（Ｓ２６）。クーポン画像を受信したら、レシート印刷部１５４により、上記会計の会計情報と、受信したクーポン画像とをレシート用紙に印刷する（Ｓ２７）。これによって、クーポン画像付きの会計レシートを発行する。これにより、本クーポン画像印刷動作を終了する。
【００５９】
以上のような構成によれば、ユーザーの心拍数の変化をトリガーとして、画像を記録する構成であるため、ユーザーに興味が生じたものと推定される時のみ、画像を記録することができる。よって、ヘッドマウントディスプレイ１２のバッテリー消費を削減することができ、また、記録データのデータ量を少なくすることができる。
【００６０】
また、情報管理サーバー３が、各ヘッドマウントディスプレイ１２からの上記記録データと、これに付加されたユーザー識別情報と、に基づいて、各ユーザーが興味を覚えた商品を判定する構成であるため、各ユーザーが興味を覚えた商品を、精度良く且つ容易に判定することができる。そのため、各ユーザーが興味を覚えた商品を把握することができ、これを考慮したサービスをいち早く展開することができる。
【００６１】
さらに、情報管理サーバー３により、複数のユーザーにおける興味商品の統計情報を生成し、情報提示用プリンター６１により、生成した統計情報を提示する構成であるため、興味商品の統計情報を、各店舗のオーナー等に提示することができる。これによって、各店舗のオーナーは、市場の傾向を迅速に知ることができ、市場の傾向に沿ったサービスをいち早く展開することができる。
【００６２】
またさらに、情報管理サーバー３により、興味商品のクーポン画像を生成し、ＰＯＳプリンター６２により、各ユーザーの会計時に、生成したクーポン画像を印刷する構成であるため、各ユーザーに対し、そのユーザーが興味を覚えた商品のクーポン画像を印刷することができ、各ユーザーに、当該クーポン画像を印刷した印刷物（上記実施例では、会計レシート）を渡すことができる。すなわち、各ユーザーに対し、おすすめ商品を提示することができる。よって、各ユーザーの購買意欲を向上させることができる。
【００６３】
なお、上記実施形態においては、ヘッドマウントディスプレイ１２が、記録データおよびユーザー識別情報を送信し、情報管理サーバー３が、記録データおよびユーザー識別情報に基づいて、各ユーザーの興味商品を判定する構成であったが、これに限るものではない。例えば、ヘッドマウントディスプレイ１２が、記録データおよびユーザー識別情報に加え、動画像を記録した時のユーザーの現在位置を示す記録位置情報を送信し、情報管理サーバー３が、記録データおよびユーザー識別情報に加え、記録位置情報に基づいて、各ユーザーの興味商品を判定する構成であっても良い。
すなわち、ヘッドマウントディスプレイ１２は、ＧＰＳ（Global  Positioning  System）受信機を搭載し、図９に示すように、ヘッドマウントディスプレイ１２は、図５に示した各部に加え、ＧＰＳ受信機を主要部とし、動画像を記録した時のユーザーの現在位置である記録位置を検出する記録位置検出部２０１を有するものとする。そして、ヘッドマウントディスプレイ１２の記録データ送信部１１３は、検出した記録位置を示す記録位置情報（位置情報）とユーザー識別情報とを付加して、携帯端末１３を介し、記録データを情報管理サーバー３に送信する。これに対し、情報管理サーバー３の記録データ受信部１３１は、ヘッドマウントディスプレイ１２からの記録データと、これに付加されたユーザー識別情報および記録位置情報とを受信し、興味商品判定部１３２は、記録データと、これに付加されたユーザー識別情報および記録位置情報とに基づいて、各ユーザーの興味商品を判定するものとする。かかる構成によれば、ユーザーの位置を加味して興味商品の判定を行うことができるため、興味商品の判定を、より精度良く行うことができる。
【００６４】
また、例えば、ヘッドマウントディスプレイ１２が、記録データおよびユーザー識別情報に加え、動画像を記録した時の現在時刻を示す記録時刻情報を送信し、情報管理サーバー３が、記録データおよびユーザー識別情報に加え、記録時刻情報に基づいて、各ユーザーの興味商品を判定する構成であっても良い。
すなわち、図１０に示すように、ヘッドマウントディスプレイ１２は、図５に示した各部に加え、動画像を記録した時の現在時刻である記録時刻を検出する記録時刻検出部２０２を有するものとする。そして、ヘッドマウントディスプレイ１２の記録データ送信部１１３は、検出した記録時刻を示す記録時刻情報とユーザー識別情報とを付加して、携帯端末１３を介し、記録データを情報管理サーバー３に送信する。これに対し、情報管理サーバー３の記録データ受信部１３１は、記録データと、これに付加されたユーザー識別情報および記録時刻情報とを受信し、興味商品判定部１３２は、記録データと、これに付加されたユーザー識別情報および記録時刻情報とに基づいて、各ユーザーの興味商品を判定するものとする。
【００６５】
また、上記実施形態においては、ヘッドマウントディスプレイ１２（記録データ送信部１１３）が、記録データおよびユーザー識別情報を、携帯端末１３を介して情報管理サーバー３に送信する構成であったが、ヘッドマウントディスプレイ１２が、記録データおよびユーザー識別情報を、情報管理サーバー３に対し直接送信する構成であっても良い。かかる場合、ヘッドマウントディスプレイ１２は、情報管理サーバー３とのネットワークＮＷを介した通信を行う通信インターフェースを更に有し、記録データ送信部１１３は、当該通信インターフェースを主要部とする。また、上記記録位置情報の送信および上記記録時刻情報の送信についても同様である。
【００６６】
さらに、上記実施形態においては、動画像を記録する都度、その記録データを携帯端末１３に（情報管理サーバー３に）送信する構成であったが、ヘッドマウントディスプレイ１２で記録データを蓄積しておき、蓄積した記録データをまとめて携帯端末１３に（情報管理サーバー３に）送信する構成であっても良い。また、携帯端末１３で、ヘッドマウントディスプレイ１２からの記録データを蓄積しておき、携帯端末１３で、蓄積した記録データをまとめて情報管理サーバー３に送信する構成であっても良い。
【００６７】
なお、上記実施形態においては、心拍数の変化をトリガーとして、動画像（映像）を記録する構成であったが、心拍数の変化をトリガーとして、静止画像（写真）を記録する構成であっても良い。ひいては、心拍数の変化をトリガーとして、ユーザーが聞いている音の音声を記録する構成であっても良い。また、これら画像と音声との両方を記録する構成であっても良い。
【００６８】
さらに、上記実施形態においては、心拍数が、ユーザーに興味が生じたものと推定される閾値以上となったことをトリガーとして、画像または音声を記録する構成であったが、心拍数の変化をトリガーとして、画像または音声を記録する構成であれば、これに限るものではない。例えば、心拍数が、ユーザーに興味が生じたものと推定される特定の挙動で変化したことをトリガーとして、画像または音声を記録する構成であっても良い。
【００６９】
またさらに、上記実施形態においては、リスタブル機器１１に心拍センサー２１を搭載し、リスタブル機器１１で、心拍数の検出を行う構成であったが、ヘッドマウントディスプレイ１２に心拍センサー２１を搭載し、ヘッドマウントディスプレイ１２で、心拍数の検出を行う構成であっても良い。
【００７０】
また、上記実施形態においては、心拍数を検出し、心拍数の変化をトリガーとして、画像または音声を記録する構成であったが、血圧（血圧値）を検出し、血圧の変化をトリガーとして、画像または音声を記録する構成であっても良い。ひいては、興味が生じたか否かに対する指標となる生体情報であれば良く、例えば、脈拍や体温、呼吸数等の変化をトリガーとして、画像や音声を記録する構成であっても良い。
【００７１】
なお、上記実施形態においては、情報提示装置として情報提示用プリンター６１を用い、興味商品の統計情報を印刷することで、当該統計情報を提示する構成であったが、情報提示装置として表示装置を用い、興味商品の統計情報を表示することで、当該統計情報を提示する構成であっても良い。また、情報提示装置として音声出力装置を用い、興味商品の統計情報を音声出力することで、当該統計情報を提示する構成であっても良い。
【００７２】
また、上記実施形態においては、情報管理サーバー３（クーポン画像生成部１３７）により、興味商品のクーポン画像を生成し、これをＰＯＳプリンター６２で印刷する構成であったが、情報管理サーバー３により、クーポン画像に代えて、興味商品の広告画像を生成し、これをＰＯＳプリンター６２で印刷する構成であっても良い。
【００７３】
なお、上記実施形態においては、展示会等のイベントの来場者をユーザーとし、当該来場者の興味商品を判定するものを想定しているとしたが、例えば、スーパーや各店舗の客をユーザーとし、当該客の興味商品を判定することも考えられる。かかる場合、情報管理サーバー３から、当該店舗の店舗側システム２のみに、統計情報やクーポン画像、広告画像を送信するようにしても良い。
【００７４】
また、上記実施形態においては、心拍数の変化をトリガーとして画像または音声を記録する構成を、興味商品を判定するのに用いる構成であったが、これに限るものではない。例えば、心拍数の変化をトリガーとして画像または音声を記録する構成を、ユーザーが、旅行やイベント事の思い出を記録するのに用いる構成であっても良い。すなわち、心拍数に特定の変化が生じたタイミングは、ユーザーが強い衝撃を覚えた時であるため、心拍数の変化をトリガーとして画像または音声を記録すれば、その衝撃を覚えたタイミングで、画像または音声を記録することができる。よって、思い出を自動的に記録することができる。
【符号の説明】
【００７５】
３：情報管理サーバー、  １２：ヘッドマウントディスプレイ、  ６１：情報提示用プリンター、  ６２：ＰＯＳプリンター、  １３２：興味商品判定部、  １３５：統計情報生成部、  １３７：クーポン画像生成部、  ＳＹ：情報処理システム。
【図１】
2016133951.tif 000003
【図２】
2016133951.tif 000004
【図３】
2016133951.tif 000005
【図４】
2016133951.tif 000006
【図５】
2016133951.tif 000007
【図６】
2016133951.tif 000008
【図７】
2016133951.tif 000009
【図８】
2016133951.tif 000010
【図９】
2016133951.tif 000011
【図１０】
2016133951.tif 000012