(57)【要約】【課題】顧客特定情報を保持する媒体の携帯を不要とするとともに、顧客の嗜好に応じた商品の提案を支援することが可能な販売支援装置及びプログラムを提供する。【解決手段】撮像手段と、前記撮像手段により撮像された顧客の顔画像から、当該顧客の顔の特徴を表わす顔特徴を抽出する抽出手段と、会員登録された各会員の顔特徴と、各会員を識別する会員識別子を含む会員情報とを対応付けて記憶した会員情報記憶手段から、前記抽出手段で抽出された顔特徴に対応する会員情報を取得する取得手段と、前記取得手段により取得された会員情報を表示装置に表示させる表示制御手段と、を備える。【選択図】図１０
2011048462.tif 000002
【特許請求の範囲】
【請求項１】
撮像手段と、
前記撮像手段により撮像された顧客の顔画像から、当該顧客の顔の特徴を表わす顔特徴を抽出する抽出手段と、
会員登録された各会員の顔特徴と、各会員を識別する会員識別子を含む会員情報とを対応付けて記憶した会員情報記憶手段から、前記抽出手段で抽出された顔特徴に対応する会員情報を取得する取得手段と、
前記取得手段により取得された会員情報を表示装置に表示させる表示制御手段と、
を備えたことを特徴とする販売支援装置。
【請求項２】
前記取得手段は、前記会員識別子と、当該会員識別子に対応する会員の購入履歴とを対応付けて記憶した購入履歴記憶手段から、前記顧客の会員識別子に対応する購入履歴を取得し、
前記表示制御手段は、前記取得手段により取得された購入履歴を前記表示装置に表示させることを特徴とする請求項１に記載の販売支援装置。
【請求項３】
前記取得手段により取得された購入履歴に基づいて、前記顧客の嗜好を推測する第１推測手段を更に備え、
前記表示制御手段は、前記第１推測手段による推測結果を前記表示装置に表示させることを特徴とする請求項２に記載の販売支援装置。
【請求項４】
前記抽出手段により抽出された顔特徴に基づいて、前記顧客の年齢及び性別を推定する第２推定手段を更に備え、
前記表示制御手段は、前記第２推測手段による推測結果を前記表示装置に表示させることを特徴とする請求項１〜３の何れか一項に記載の販売支援装置。
【請求項５】
音声を集音する集音手段と、
前記集音手段により集音された音声に基づいて、当該音声に含まれる所定のキーワードを認識する音声認識手段と、
を更に備え、
前記取得手段は、店舗内で販売される各商品について当該商品に関する商品情報を記憶した商品情報記憶手段から、前記キーワードに合致する文字列を含んだ商品情報を取得し、
前記表示制御手段は、前記取得手段により取得された商品情報を前記表示装置に表示させることを特徴とする請求項１〜４の何れか一項に記載の販売支援装置。
【請求項６】
撮像手段を備える販売支援装置のコンピュータを、
前記撮像手段により撮像された顧客の顔画像から、当該顧客の顔の特徴を表わす顔特徴を抽出する抽出手段と、
会員登録された各会員の顔特徴と、各会員を識別する会員識別子を含む会員情報とを対応付けて記憶した会員情報記憶手段から、前記抽出手段で抽出された顔特徴に対応する会員情報を取得する取得手段と、
前記取得手段により取得された会員情報を表示装置に表示させる表示制御手段と、
して機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、店舗内で販売される商品の販売支援に係る販売支援装置及びプログラムに関する。
【背景技術】
【０００２】
従来、小売店では、顧客を特定する会員番号等の顧客特定情報を顧客毎に発行し、この顧客特定情報に対応付けて商品の購入履歴を管理するようなことが行われている。この顧客特定情報は一般に会員カード等の携帯可能な媒体に保持されており、顧客毎に配布されている。また、特許文献１には、顧客特定情報を携帯電話端末等の通信端末上に保持することで、会員（顧客）が携帯する通信端末に会員カードとしての機能を持たせることとした技術が開示されている。
【発明の概要】
【発明が解決しようとする課題】
【０００３】
しかしながら、上記従来の技術では顧客が店舗に来店する際に、顧客特定情報が保持された会員カードや通信端末を持参する必要があるため、利便性に欠けるという問題がある。また、店舗側にとっては、会員カードや通信端末の不携帯等により顧客特定情報を特定できない場合、この顧客の購入履歴等の販売支援に有用な情報を利用することができないため、顧客の嗜好を把握するまで時間を要し、スムーズな接客を妨げる可能性がある。
【０００４】
本発明は、上記に鑑みてなされたものであって、顧客特定情報を保持する媒体の携帯を不要とするとともに、顧客の嗜好に適した商品の提案を支援することが可能な販売支援装置及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００５】
上述した課題を解決し、目的を達成するために、本発明は、撮像手段と、前記撮像手段により撮像された顧客の顔画像から、当該顧客の顔の特徴を表わす顔特徴を抽出する抽出手段と、会員登録された各会員の顔特徴と、各会員を識別する会員識別子を含む会員情報とを対応付けて記憶した会員情報記憶手段から、前記抽出手段で抽出された顔特徴に対応する会員情報を取得する取得手段と、前記取得手段により取得された会員情報を表示装置に表示させる表示制御手段と、を備える。
【０００６】
また、本発明は、撮像手段を備える販売支援装置のコンピュータを、前記撮像手段により撮像された顧客の顔画像から、当該顧客の顔の特徴を表わす顔特徴を抽出する抽出手段と、会員登録された各会員の顔特徴と、各会員を識別する会員識別子を含む会員情報とを対応付けて記憶した会員情報記憶手段から、前記抽出手段で抽出された顔特徴に対応する会員情報を取得する取得手段と、前記取得手段により取得された会員情報を表示装置に表示させる表示制御手段と、して機能させる。
【発明の効果】
【０００７】
本発明によれば、顧客特定情報を保持する媒体の携帯を不要とするとともに、顧客の嗜好に応じた商品の提案を支援することが可能な販売支援装置及びプログラムを提供することができる。
【図面の簡単な説明】
【０００８】
【図１】図１は、本実施形態にかかるＰＯＳシステムの一例を示す図である。
【図２】図２は、図１に示したストアサーバの電装系の構成例を示すブロック図である。
【図３】図３は、図２に示した商品マスタテーブルを構成するデータ項目の一例を示す図である。
【図４】図４は、図２に示した会員管理テーブルを構成するデータ項目の一例を示す図である。
【図５】図５は、図２に示した売上登録テーブルを構成するデータ項目の一例を示す図である。
【図６】図６は、図２に示した購入履歴テーブルを構成するデータ項目の一例を示す図である。
【図７】図７は、図１に示したヘッドマウントディスプレイの一例を示す図である。
【図８】図８は、図１に示したインタフェースボックスの構成例を示すブロック図である。
【図９】図９は、会員情報表示処理の手順を示すフローチャートである。
【図１０】図１０は、図７に示したモニタ表示部の表示例を示す図である。
【図１１】図１１は、図７に示したモニタ表示部の表示例を示す図である。
【図１２】図１２は、購買候補表示処理の手順を示すフローチャートである。
【図１３】図１３は、図７に示したモニタ表示部の表示例を示す図である。
【発明を実施するための形態】
【０００９】
以下に添付図面を参照して、本発明にかかる販売支援装置及びプログラムの実施の形態を詳細に説明する。本実施の形態では、本発明にかかる販売支援装置及びプログラムを、服飾品を販売する店舗でのＰＯＳシステムに適用した例について説明する。なお、以下に説明する実施形態により本発明が限定されるものではない。
【００１０】
図１は、本実施形態に係るＰＯＳシステムの一例を概略的に示すブロック図である。同図に示すようにＰＯＳシステム１は、１又は複数のＰＯＳ端末２、その上位機として機能するストアサーバ３、店員Ｃが装着して使用するユーザインタフェースであるウエアラブル端末装置４とデータの送受信を行うための送受信装置５がネットワークＮを介して接続されている。ここで、ネットワークＮは、ＬＡＮ（Local  Area  Network）、イントラネット等である。
【００１１】
送受信装置５とウエアラブル端末装置４との間のデータの送受信は、電波、光、赤外線、超音波等であってよく、本実施形態では通信範囲が数ｍ程度である近接無線通信（例えばＢｌｕｅｔｏｏｔｈ（登録商標）等）を用いて行うものとする。なお、送受信装置５は、精算カウンター近傍の領域、陳列棚が設けられた領域、バックヤード等の店舗内の各領域に設置されているものとする。
【００１２】
ＰＯＳ端末２は、ドロア、カードリーダ、コードスキャナ、ディスプレイ、レシート／ジャーナル用プリンタ等を備え（いずれも図示せず）、現金やクレジットカードを用いて商取引を行うもので、例えば精算カウンター等に設けられる。
【００１３】
このようなＰＯＳシステムが構築される店舗では、販売対象の各種商品に対して、その商品に関する各種情報がコード化されて示されるバーコードが各々の商品に付与されている。各種商品の商品コードに対応して価格等がプリセットされた後述する商品マスタテーブル３７１がストアサーバ３に記憶されている。ＰＯＳ端末２は、図示しないコードスキャナを介して読み取ったバーコードのデータから商品コードを抽出し、この商品コードに対応して設定された価格をストアサーバ３に問い合わせ、取得した価格に基づいて買上商品の精算を行うとともに、買上商品の販売記録を示す売上データを生成してこれをストアサーバ３に通知することで、売上データを後述する売上登録テーブル３７３に登録する。
【００１４】
また、ＰＯＳ端末２は、買上商品の販売登録を行う際、この商品を買い上げた顧客が会員登録されたメンバーである場合には、買い上げが行われた商品の商品コードと、この顧客の後述する会員管理番号とをストアサーバ３へ通知することで、該顧客の購買履歴を後述する購入履歴テーブル３７４に登録する。なお、ＰＯＳ端末２への会員管理番号の入力は、後述するようにウエアラブル端末装置４を介して行われるものとするが、顧客が会員管理番号を保持した媒体を持参した場合には、カードリーダやコードスキャナによって媒体から会員管理番号を読み取り、ＰＯＳ端末２に入力する形態としてもよい。
【００１５】
ストアサーバ３は、店舗内で販売される商品や店舗内で販売された商品の売上、顧客に関する情報を管理し、ＰＯＳ端末２及びウエアラブル端末装置４に各種の情報を提供するサーバ装置である。
【００１６】
図２は、ストアサーバ３の電装系の構成例を示すブロック図である。同図に示すように、ストアサーバ３は、図示しないＣＰＵ（Central  Processing  Unit）,ＲＯＭ（Read  Only  Memory）、ＲＡＭ（Random  Access  Memory）等で構成される制御部３１を有し、バス３２に接続された通信インタフェース３３を介してＰＯＳ端末２やウエアラブル端末装置４（送受信装置５）との間で通信可能に構成されている。
【００１７】
また、制御部３１にはバス３２及びＩ／Ｏ機器制御部３４を介して、キーボードやマウス等の入力デバイスにより構成される入力部３５、液晶ディスプレイ等の表示デバイスから構成される表示部３６及びＨＤＤ（Hard  Disk  Drive）やＳＤＤ（Solid  State  Drive）等の記憶装置から構成される記憶部３７が夫々接続されている。
【００１８】
記憶部３７は、制御部３１のＣＰＵにより実行される各種の制御プログラムの他、商品マスタテーブル３７１、会員管理テーブル３７２、売上登録テーブル３７３及び購入履歴テーブル３７４等を記憶している。
【００１９】
商品マスタテーブル３７１は、店舗内で販売される商品に関する情報を管理するテーブルである。図３は、商品マスタテーブル３７１を構成するデータ項目の一例を示す図である。同図に示すように、商品マスタテーブル３７１は、「商品コード」、「製造メーカ」、ジャケットやスーツ等の商品の種別を示す「商品種別」、「価格」、「サイズ」、「色目」、「付加情報」等のデータ項目からなるレコードによって構成されている。ここで、「商品コード」には、店舗で販売される各種商品品目を識別するために商品毎に予め設定された固有のコードが格納される。また、「製造メーカ」、「商品種別」、「価格」、「サイズ」、「色目」、「付加情報」には、同一の商品コードによって特定される商品についての情報が格納される。なお、「付加情報」には、男性用か女性用又は男女兼用かを示す情報や、季節ものである場合にはその季節を示す情報、ある年齢層を対象とするものであればその年齢層等の付加的な情報が格納される。
【００２０】
会員管理テーブル３７２は、会員登録された顧客に関する情報を管理するテーブルである。図４は、会員管理テーブル３７２を構成するデータ項目の一例を示す図である。同図に示すように、会員管理テーブル３７２は、「会員管理番号」、「顔画像」、「顔特徴」、「名前」、「サイズ」、「性別」、「最終来店日」等のデータ項目からなるレコードによって構成されている。ここで、「会員管理番号」には、各会員を識別するためにユニークに割り振られた会員番号等の識別子が格納される。「顔画像」には、会員登録された顧客の顔画像データが格納される。「顔特徴」には、顔画像データから顔の特徴を抽出した情報が格納される。例えば、顔の輪郭や、目鼻口等の構成要素の配置位置を表した情報等が格納される。なお、顔特徴の抽出は、公知の技術を用いることが可能である。「名前」、「サイズ」、「性別」には、会員登録された顧客の氏名、洋服サイズ、性別が夫々格納される。「最終来店日」には、会員登録された顧客が来店した最新の日付が格納される。
【００２１】
売上登録テーブル３７３は、店舗内のＰＯＳ端末２から送信された売上データを管理するテーブルである。図５は、売上登録テーブル３７３を構成するデータ項目の一例を示す図である。制御部３１は、ＰＯＳ端末２から売上データが通知される毎に、この売上データと本日の日付とを対応付け、一のレコードとして売上登録テーブル３７３に登録する。
【００２２】
購入履歴テーブル３７４は、会員登録された顧客の購入履歴を管理するテーブルである。図６は、購入履歴テーブル３７４を構成するデータ項目の一例を示す図である。同図に示すように、購入履歴テーブル３７４は、「会員管理番号」、「購入商品」、「購入日」等のデータ項目からなるレコードによって構成されている。ここで、「会員管理番号」は、会員管理テーブル３７２の「会員管理番号」に対応するものである。「購入商品」には、実際に購入された商品の製造メーカ、スーツやジャケット等の種別、色目、価格等が格納される。また、「購入日」には、購入された日付が格納される。制御部３１は、ＰＯＳ端末２から会員管理番号と商品コードとの組が通知される毎に、この商品コードに対応する各種の情報を商品マスタテーブル３７１の該当するレコードから読み出し、通知された会員管理番号と本日の日付とを対応付け、一のレコードとして購入履歴テーブル３７４に登録する。
【００２３】
制御部３１は、記憶部３７に記憶されたプログラムと協働して販売支援に係る各種の情報をＰＯＳ端末２及びウエアラブル端末装置４に提供する。
【００２４】
具体的に、制御部３１は、ＰＯＳ端末２から商品コードの問い合わせを受け付けると、この商品コードに対応するレコードを商品マスタテーブル３７１から読み出し、商品情報としてＰＯＳ端末２へ送信する。
【００２５】
また、制御部３１は、ウエアラブル端末装置４から送信された後述する照合情報を、送受信装置５及び通信インタフェース３３を介して受け付けると、この照合情報に対応する顔特徴を会員管理テーブル３７２の各レコードから検索する。ここで、照合情報に対応する顔特徴が存在する場合には、該当するレコードを会員情報として会員管理テーブル３７２から読み出す。また、制御部３１は、抽出した会員情報に含まれる会員管理番号に基づいて、該会員管理番号を含んだレコードを購入履歴テーブル３７４から検索し、該当するレコードを購入履歴情報として読み出す。そして、制御部３１は、抽出した会員情報及び購入履歴情報を、通信インタフェース３３及び送受信装置５を介してウエアラブル端末装置４へ送信する。なお、照合情報に対応する顔特徴が何れのレコードにも存在しない場合には、制御部３１は対応する顔特徴が存在しないことを示した不在情報をウエアラブル端末装置４へ送信する。
【００２６】
また、制御部３１は、ウエアラブル端末装置４から送信された後述する購買候補要求を、送受信装置５及び通信インタフェース３３を介して受け付けると、この購買候補要求に含まれた文字列（キーワード）を検索条件とし、この検索条件に合致する文字列を含んだレコードを商品マスタテーブル３７１から検索する。そして、制御部３１は、検索条件に該当するレコードを商品マスタテーブル３７１から読み出し、購買候補情報として通信インタフェース３３及び送受信装置５を介してウエアラブル端末装置４へ送信する。一方、購買候補要求に会員管理番号が含まれていた場合には、この会員管理番号に対応するレコードを会員管理テーブル３７２から検索し、このレコードに含まれたサイズ等の情報を検索条件とする。
【００２７】
ウエアラブル端末装置４は、図１及び図７に示したように、ヘッドマウントディスプレイ４１と、撮像装置としてのデジタルカメラ４２と、インタフェースボックス４３と、マイク４４とを備え、店員Ｃにより装着される端末装置である。ヘッドマウントディスプレイ４１は、眼鏡のフレーム状に形成された保持部材としてフレーム本体４５と、このフレーム本体４５の左右両側にそれぞれ設けられた装着用アーム４６とを備える。このヘッドマウントディスプレイ４１は、左右両側にそれぞれ設けられた装着用アーム４６によって店員Ｃの頭部Ｈに装着可能である。
【００２８】
フレーム本体４５は、店員Ｃの両眼に合わせた大きさの枠状に形成されている。フレーム本体４５の枠外の上部中央には、撮像方向可変機構４７を介してデジタルカメラ４２が設けられている。また、フレーム本体４５の上部左側には、店員Ｃの瞳を撮像して視線Ｅの検出を行うための視線認識用カメラ４８が設けられている。また、フレーム本体４５の下部には、店員Ｃやその周囲の音声を取得するためのマイク４４が設けられている。フレーム本体４５の枠内には、例えばフレーム枠の形状に合わせて形成された板状の光透過性部材４９が保持されている。この光透過性部材４９は、ヘッドマウントディスプレイ４１を店員Ｃの頭部Ｈに装着した場合、店員Ｃの眼によって周辺環境を観察可能である。この光透過性部材４９は、例えば無色透明又は予め決められた色を有していてもよい。
【００２９】
光透過性部材４９内の一部分には、モニタ表示部４９１が形成されている。このモニタ表示部４９１は、デジタルカメラ４２の撮像により取得される動画の画像データ等をリアルタイムにモニタ表示する。このモニタ表示部４９１は、例えばヘッドマウントディスプレイ４１における左側に形成されている。すなわち、モニタ表示部４９１は、ヘッドマウントディスプレイ４１を店員Ｃの頭部Ｈに装着したときの店員Ｃの例えば左眼に対応する部分に形成されている。なお、モニタ表示部４９１は、店員Ｃの右眼に対応する部分に形成してもよいし、店員Ｃの両目に対応する各部分に形成してもよい。このモニタ表示部４９１は、光透過性の状態でモニタ表示する。しかるに、モニタ表示部４９１は、例えばデジタルカメラ４２の撮像により取得された画像データや各種情報等をリアルタイムにモニタ表示している状態でも周辺環境を観察可能である。
【００３０】
デジタルカメラ４２は、撮像動作を行って動画の画像データを出力する。このデジタルカメラ４２は、光透過性部材４９を通した店員Ｃの視線Ｅ方向に焦点が合うように撮像範囲を設定した状態でヘッドマウントディスプレイ４１のフレーム本体４５上に取り付けられている。撮像方向可変機構４７は、例えばデジタルカメラ４２を首振り可能に支持し、デジタルカメラ４２の撮像方向を任意の方向、ここでは上記の如くデジタルカメラ４２の撮像範囲を店員Ｃの視線Ｅ方向に焦点が合うように設定する。
【００３１】
インタフェースボックス４３は、送受信装置５との間のデータの送受信を行うとともに、ヘッドマウントディスプレイ４１にかかる各種処理を行う。具体的には、インタフェースボックス４３は、図８に示すように、制御部４３１、音声処理部４３２、送受信部４３３、情報表示部４３４、画像処理部４３５、嗜好推定部４３６、年齢推定部４３７を備え、店員Ｃが携帯可能なボックスである。ここで、図８は、インタフェースボックス４３の構成例を示すブロック図である。
【００３２】
制御部４３１は、ＣＰＵ、ＲＯＭ、ＲＡＭ等を有するコンピュータであり、ウエアラブル端末装置４の動作を制御する。ＲＯＭには、プログラムやそのプログラムを実行する際に参照される各種設定情報等が予め格納されている。
【００３３】
ＣＰＵは、ＲＯＭに記憶されたプログラムをＲＡＭのワークエリアに展開して順次実行することで、ウエアラブル端末装置４の動作を中央制御する。
【００３４】
具体的に、制御部４３１は、デジタルカメラ４２の撮像により取得された画像データを情報表示部４３４へ出力してヘッドマウントディスプレイ４１のモニタ表示部４９１にリアルタイムに表示させる。また、制御部４３１は、デジタルカメラ４２の撮像により取得された顧客の顔画像データを画像処理部４３５へ出力して画像処理させることで、撮像された顔画像データから顔特徴を抽出させる。そして、制御部４３１は、抽出された顔特徴を照合情報として送受信部４３３及び送受信装置５を介してストアサーバ３へ通知することで、ストアサーバ３から、この照合情報に該当する会員情報及び購入履歴情報を取得する。さらに、制御部４３１は、取得した会員情報及び購入履歴情報を情報表示部４３４へ出力することで、モニタ表示部４９１に表示させる。なお、制御部４３１により取得された会員情報及び購入履歴情報は、ＲＡＭのワークエリアに一時記憶される。
【００３５】
さらに、制御部４３１は、購入履歴情報を嗜好推定部４３６に出力することで後述する嗜好推定情報を生成させ、この嗜好推定情報を情報表示部４３４へ出力することでモニタ表示部４９１に表示させる。なお、ストアサーバ３から不在情報を取得した場合、制御部４３１は、デジタルカメラ４２の撮像により取得された画像データ又は画像処理部４３５により抽出された顔特徴を年齢推定部４３７へ出力することで、画像処理部４３５に後述する顧客推定情報を生成させ、この顧客推定情報を情報表示部４３４へ出力することでモニタ表示部４９１に表示させる。
【００３６】
また、制御部４３１は、マイク４４により入力された音声の認識結果（キーワード）を音声処理部４３２から受け付けると、送受信部４３３及び送受信装置５を介してストアサーバ３へ通知する。次いで、この通知によりストアサーバ３から取得した購買候補情報を、情報表示部４３４へ出力してモニタ表示部４９１に表示させる。
【００３７】
音声処理部４３２は、マイク４４により入力された音声の識別にかかる処理を行う。具体的に、音声処理部４３２は、予め設定された辞書データに含まれる音声データと、マイク４４からの音声データとを照合し、一致した音声データが表す文字列をキーワードとして認識し、認識したキーワードを制御部４３１へ通知する。なお、辞書データに含まれる音声データとしては、例えば、洋服の色目を表す単語（ブルー、ピンク等）、洋服のサイズを表す単語（９号、１１号等）、洋服の種別を表す単語（例えば、ジャケット、スーツ等）、季節を表す単語（春、夏等）、製造メーカを表す単語等の、商品の選定に有用な語の音声データが挙げられる。
【００３８】
情報表示部４３４は、制御部４３１等から入力された画像データをヘッドマウントディスプレイ４１のモニタ表示部４９１へ表示する。具体的には、情報表示部４３４は、デジタルカメラ４２の撮像により取得された画像データをモニタ表示部４９１に表示する。また、情報表示部４３４は、商品コード、商品名、単価や各種アイコン画像等の情報を受け取ると、受け取った情報を入力された画像データに合成してヘッドマウントディスプレイ４１のモニタ表示部４９１に表示する。なお、受け取った情報の表示位置が座標等で指定されている場合は、その指定された表示位置に情報が表示されるように、入力された画像データへの合成を行う。
【００３９】
画像処理部４３５は、デジタルカメラ４２の撮像により取得された画像データの画像処理を行う。具体的には、デジタルカメラ４２の撮像により取得された顧客の顔部の画像データ（顔画像データ）を解析することで顔特徴を抽出し、制御部４３１へ通知する。なお、顔特徴の抽出は公知の技術を用いるものとする。
【００４０】
また、画像処理部４３５は、視線認識用カメラ４８で撮像された画像データを解析して店員Ｃの視線Ｅの検出を行う。具体的に、画像処理部４３５は、視線認識用カメラ４８で撮像された画像データから店員Ｃの瞳を検出し、その検出された瞳の位置に応じて視線Ｅの検出を行う。
【００４１】
また、ウエアラブル端末装置４における操作入力は、制御部４３１の制御の下、視線認識用カメラ４８の画像を元に画像処理部４３５により検出された視線Ｅに応じて行われてもよい。具体的には、情報表示部４３４がモニタ表示部４９１へ表示した操作入力用のアイコン画像を店員Ｃが見つめた際の視線Ｅを検出することで、ウエアラブル端末装置４における操作入力を行う。
【００４２】
嗜好推定部４３６は、購入履歴情報に含まれる製造メーカ、種別、色目、価格等から、商品購買における顧客（会員）の嗜好を推定し、推定結果を表した嗜好推定情報を生成する。なお、嗜好の推定は、データマイニングやキーワード抽出等の公知の技術を用いるものとする。例えば、マーケットバスケット分析といったデータマイニング手法を用いることによって、ある顧客の購入商品はシャツが多いとか、シャツの服は黒、ストライプ縞、シャツと靴下を一緒に買うことが多いといった嗜好が得られる。
【００４３】
年齢推定部４３７は、顧客の顔画像データ又は該顔画像データから抽出された顔特徴から顧客の年齢や性別等を推定し、推定結果を表した顧客推定情報を生成する。なお、年齢や性別の推定は公知の技術を用いるものとする。
【００４４】
なお、インタフェースボックス４３における音声処理部４３２、送受信部４３３、情報表示部４３４、画像処理部４３５、嗜好推定部４３６及び年齢推定部４３７等の各部は、制御部４３１がＲＯＭに予め格納されたプログラムを実行することで実現してもよい。
【００４５】
以下、ウエアラブル端末装置４とストアサーバ３との間で行われる処理について説明する。図９は、会員情報表示処理の手順を示すフローチャートである。
【００４６】
店舗に顧客が来店し、顧客の顔部に店員の視線が向けられると、制御部４３１は、デジタルカメラ４２の撮像により取得された顧客の画像データを、画像処理部４３５へ出力する。画像処理部４３５は、出力された画像データに対して顔画像の検知を行なう。そして顔画像が検知されると、顔画像データから顔特徴を抽出させる（ステップＳ１１）。続いて、制御部４３１は、ステップＳ１１で抽出された顔特徴を照合情報としてストアサーバ３へ通知する（ステップＳ１２）。
【００４７】
一方、ストアサーバ３では照合情報の通知を受け付けると、制御部３１は、照合情報に対応する顔特徴を会員管理テーブル３７２の各レコードから検索し（ステップＳ２１）、該当する顔特徴が存在するか否かを判定する（ステップＳ２２）。ここで、照合情報に対応する顔特徴が存在しないと判定した場合（ステップＳ２２；Ｎｏ）、制御部３１は、対応する顔特徴が存在しないことを示した不在情報をウエアラブル端末装置４へ送信する（ステップＳ２３）。
【００４８】
また、ステップＳ２２において、照合情報に対応する顔特徴が存在すると判定した場合（ステップＳ２２；Ｙｅｓ）、制御部３１は、該当する顔特徴を含んだレコードを会員情報として会員管理テーブル３７２から読み出す（ステップＳ２４）。続いて、制御部３１は、購入履歴テーブル３７４を参照し、会員情報に含まれた会員管理番号に対応する全てのレコードを購入履歴情報として読み出す（ステップＳ２５）。そして、制御部３１は、読み出した会員情報及び購入履歴情報をウエアラブル端末装置４へ送信した後（ステップＳ２６）、照合情報に対応した顔特徴のレコードに含まれる「最終来店日」を本日の日付に更新する（ステップＳ２７）。
【００４９】
一方、ウエアラブル端末装置４では、制御部４３１がストアサーバ３から返信された情報を取得すると、この情報が不在情報か否かを判定する（ステップＳ１３）。ここで、不在情報でないと判定した場合、即ち会員情報及び購入履歴情報を取得した場合（ステップＳ１３；Ｎｏ）、制御部４３１は、購入履歴情報を嗜好推定部４３６へ出力することで、嗜好推定情報を生成させる（ステップＳ１４）。そして、制御部４３１は、ステップＳ１４で生成された嗜好推定情報を、会員情報及び購入履歴情報とともに情報表示部４３４へ出力することで、モニタ表示部４９１に表示させ（ステップＳ１５）、本処理を終了する。
【００５０】
また、ステップＳ１４において、不在情報を取得したと判定した場合（ステップＳ１３；Ｙｅｓ）、制御部４３１は、ステップＳ１１で取得された顔画像データ又はステップＳ１２で抽出された顔特徴を年齢推定部４３７へ出力することで、顧客推定情報を生成させる（ステップＳ１６）。そして、制御部４３１は、ステップＳ１６で生成された顧客推定情報を情報表示部４３４へ出力することで、モニタ表示部４９１に表示させ（ステップＳ１７）、本処理を終了する。
【００５１】
ここで、図１０は、モニタ表示部４９１に表示された会員情報、購入履歴情報及び嗜好推定情報の一例を示す図である。同図に示すように、表示領域Ｇ１１は、会員情報に含まれた情報（名前、最終来店日、サイズ、顔画像データ）を表示する領域である。表示領域Ｇ１２は、購入履歴情報に含まれた各種情報（購入日、商品名）を表示する領域である。また、表示領域Ｇ１３は、嗜好推定情報に含まれた各種情報を表示する領域である。なお、図１０では、嗜好推定情報として、過去に購入された商品の色目の傾向をパーセンテージ（％）で表している。
【００５２】
視線マーカーＭは、視線認識用カメラ４８の画像を元に画像処理部４３５で検出された視線Ｅを示すマーカーである。アイコン画像Ｇ１４、Ｇ１５、Ｇ１６は、ウエアラブル端末装置４に対する操作指示を視線マーカーＭにより受け付けるためのアイコンである。例えば、視線マーカーＭがアイコン画像Ｇ１４と重なって「キャンセル」の指示が入力された場合、制御部４３１は、モニタ表示部４９１に表示された表示領域Ｇ１１、Ｇ１２、Ｇ１３（及びアイコン画像Ｇ１４、Ｇ１５、Ｇ１６）を消去し、顔画像データ入力前の状態とする。
【００５３】
また、視線マーカーＭがアイコン画像Ｇ１５と重なって「音声入力」の指示が入力された場合、制御部４３１は、購買候補選別のための条件入力として音声処理部４３２によるキーワードの抽出を開始する。
【００５４】
また、視線マーカーＭがアイコン画像Ｇ１６と重なって「会員管理番号通知」の指示が入力された場合、制御部４３１は、ストアサーバ３から受け取った会員情報に含まれる会員管理番号を、送受信装置５を介してＰＯＳ端末２へ通知する。これにより、会員管理番号をＰＯＳ端末２での販売登録の用に供することができる。
【００５５】
図１１は、モニタ表示部４９１に表示された顧客推定情報の一例を示す図である。同図に示すように、表示領域Ｇ２１は、顧客推定情報に含まれた各種情報（性別、年齢）を表示する領域である。なお、図１１では顧客が会員でないことを知覚させるため、名前が登録されていないことを明示している。なお、視線マーカーＭ及びアイコン画像Ｇ１４、Ｇ１５については、図１０と同様である。
【００５６】
ウエアラブル端末装置４を装着した店員Ｃは、図１０又は図１１のように表示された画面を参照することで、来店した顧客が会員か否かを把握することができる。また、来店した顧客が会員であった場合、店員Ｃは、その顧客の名前やサイズ、過去の購入履歴や嗜好等を把握することができるため、顧客の嗜好に適した商品を提案することが容易となる。また、来店した顧客が会員登録を行っていない場合であっても、店員Ｃは、その顧客の年齢や性別の推定結果を把握することができるため、顧客の年代に適した商品を提案することが容易となる。そのため、店員に係る負荷を軽減することができ、接客に不慣れな店員であっても、ウエアラブル端末装置４を装着することで、効率的な販売支援を行うことが可能となる。
【００５７】
次に、ウエアラブル端末装置４とストアサーバ３との間で行われる購買候補表示処理について説明する。なお、本処理は、上述した会員情報表示処理の実行後に行われる処理であって、図１０又は図１１の画面が表示された後、アイコン画像Ｇ１５の入力により開始されるものである。
【００５８】
図１２は、購買候補表示処理の手順を示すフローチャートである。まず、ウエアラブル端末装置４を装着した店員が顧客と会話すると、この店員又は顧客が発話した音声がマイク４４により音声データとして取得（集音）される（ステップＳ３１）。音声処理部４３２は、取得された音声データと、辞書データに含まれる音声データとを照合し、一致した音声データが表す文字列をキーワードとして認識し、制御部４３１へ通知する（ステップＳ３２）。
【００５９】
続いて、制御部４３１は、ＲＡＭのワークエリアに会員情報が保持されているか否かを判定する（ステップＳ３３）。ここで、会員情報が存在しないと判定した場合、即ち、会員情報表示処理において、不在情報をストアサーバ３から取得していた場合（ステップＳ３３；Ｎｏ）、制御部４３１は、ステップＳ３２で通知されたキーワードと、会員情報表示処理で生成された顧客推定情報に含まれる文字列とを含んだ購買候補要求を生成し（ステップＳ３４）、ストアサーバ３へ通知する（ステップＳ３６）。なお、本処理では、購買候補要求に、顧客推定情報中の文字列を含める形態としたが、キーワードのみを購買候補要求として通知する形態としてもよい。
【００６０】
また、ステップＳ３３において、会員情報が存在すると判定した場合（ステップＳ３３；Ｙｅｓ）、制御部４３１は、ステップＳ３２で通知されたキーワードと、会員情報に含まれた会員管理番号とを含んだ購買候補要求を生成し（ステップＳ３５）、ストアサーバ３へ通知する（ステップＳ３６）。なお、本処理では、購買候補要求に会員管理番号を含める形態としたが、会員管理番号の代りに、会員情報に含まれた会員管理番号以外の情報（例えば、サイズ等）を含める形態としてもよい。また。キーワードのみを購買候補要求として通知する形態としてもよい。
【００６１】
一方、ストアサーバ３では、制御部３１がウエアラブル端末装置４から購買候補要求を受け付けると、この購買候補要求に会員管理番号が含まれているか否かを判定する（ステップＳ４１）。ここで、購買候補要求に会員管理番号が含まれていないと判定した場合（ステップＳ４１；Ｎｏ）、制御部３１は、この購買候補要求に含まれたキーワード及び文字列を検索条件に設定し（ステップＳ４２）、この検索条件に該当するレコードを商品マスタテーブル３７１から検索する（ステップＳ４５）。そして、制御部３１は、検索条件に該当したレコードを購買候補情報として商品マスタテーブル３７１から読み出し（ステップＳ４６）、ウエアラブル端末装置４へ送信する（ステップＳ４７）。
【００６２】
また、ステップＳ４１において、購買候補要求に会員管理番号が含まれていると判定した場合（ステップＳ４１；Ｙｅｓ）、制御部３１は、この会員管理番号に対応するレコードを会員管理テーブル３７２から検索する（ステップＳ４３）。続いて、制御部３１は、ステップＳ４３で検索したレコードに含まれる「性別」や「サイズ」等を表す文字列と、購買候補要求に含まれたキーワードとを検索条件に設定し（ステップＳ４４）、この検索条件に合致する文字列を含んだレコードを商品マスタテーブル３７１から検索する（ステップＳ４５）。そして、制御部３１は、該当するレコードを商品マスタテーブル３７１から読み出し（ステップＳ４６）、購買候補情報としてウエアラブル端末装置４へ送信する（ステップＳ４７）。
【００６３】
一方、ウエアラブル端末装置４では、制御部４３１がストアサーバ３から返信された購買候補情報を受け付けると、情報表示部４３４へ出力することで、モニタ表示部４９１に表示させ（ステップＳ３７）、本処理を終了する。
【００６４】
ここで、図１３は、モニタ表示部４９１に表示された購買候補情報の一例を示す図である。同図に示すように、表示領域Ｇ３１は、購買候補情報に含まれた情報（製造メーカ名、種別、価格）を表示する領域である。また、表示領域Ｇ３２は、購買候補情報の抽出に使用した検索条件（購買候補要求）を表示する領域である。ここでは、洋服の色目“ブルー”と、洋服サイズ“１１号”とを検索条件としたことを表している。
【００６５】
アイコン画像Ｇ３３、Ｇ３４は、ウエアラブル端末装置４に対する操作指示を視線マーカーＭにより受け付けるためのアイコンである。例えば、視線マーカーＭがアイコン画像Ｇ３３と重なって「戻る」の指示が入力された場合、制御部４３１は、この購買候補情報の表示画面を消去し、当該表示画面の直前に表示されていた図１０又は図１１の画面を再び表示する。これにより、購買候補選別のための検索条件を新たに設定し直すことができる。
【００６６】
また、視線マーカーＭがアイコン画像Ｇ３４と重なって「追加入力」の指示が入力された場合、制御部４３１は、購買候補選別のための条件を追加するため、音声処理部４３２によるキーワードの抽出を開始する。なお、「追加入力」の指示が入力された場合には、音声処理部４３２により抽出されたキーワードに加え、ストアサーバ３から送信された検索条件を購買候補要求としてストアサーバ３に通知するものとする。これにより、顧客との会話内容に応じ、購買候補を動的に絞り込むことができる。
【００６７】
ウエアラブル端末装置４を装着した店員は、図１３のように表示された購買候補を参照することで、店舗内に存在する商品のうち顧客の所望する条件に適した商品を把握することができる。そのため、ウエアラブル端末装置４を装着した店員は、購買候補として挙げられた商品の全て又は何れかを、お薦め商品として顧客に提案することで、顧客の購買意欲を促進することが可能となる。
【００６８】
以上のように、本実施形態によれば、来店した顧客の顔画像を用いて会員か否かを判定し、会員である場合にはこの顧客の購入履歴から該顧客の嗜好を推測して店員の眼前に表示する。また、顧客との会話内容から商品の選定に有用なキーワードを認識し、このキーワードに該当する商品リストを店員の眼前に表示する。これにより、顧客特定情報（会員管理番号）を保持する媒体の携帯を不要とすることができ、顧客の嗜好に適した商品の提案を支援することが可能である。
【００６９】
なお、本実施形態では、嗜好推定情報の生成を行う嗜好推定部４３６や顧客推定情報の生成を行う年齢推定部４３７をインタフェースボックス４３に備える構成を例示したが、嗜好推定部４３６や年齢推定部４３７をストアサーバ３等の外部装置が備える形態としてもよく、この場合、外部装置での処理結果（嗜好推定情報及び顧客推定情報）を送受信部４３３で受信する構成とすることができる。
【００７０】
また、本実施形態の制御部３１及び制御部４３１が実行するプログラムは、ＲＯＭ等に予め組み込んで提供するように構成してもよい。また、上記プログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ等のコンピュータで読み取り可能な記録媒体に記録されて提供されてもよい。
【００７１】
また、上記プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、上記プログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。
【００７２】
また、本発明は、上記実施の形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化することができる。また、上記実施の形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成することができる。例えば、実施の形態に示される全構成要素からいくつかの構成要素を削除してもよい。さらに、異なる実施の形態にわたる構成要素を適宜組み合わせてもよい。
【符号の説明】
【００７３】
１  ＰＯＳシステム
２  ＰＯＳ端末
３  ストアサーバ
３１  制御部
３２  バス
３３  通信インタフェース
３４  Ｉ／Ｏ機器制御部
３５  入力部
３６  表示器
３７  記憶部
３７１  商品マスタテーブル
３７２  会員管理テーブル
３７３  売上登録テーブル
３７４  購入履歴テーブル
４  ウエアラブル端末装置
４１  ヘッドマウントディスプレイ
４２  デジタルカメラ
４３  インタフェースボックス
４３１  制御部
４３２  音声処理部
４３３  送受信部
４３４  情報表示部
４３５  画像処理部
４３６  嗜好推定部
４３７  年齢推定部
４４  マイク
４５  フレーム本体
４６  装着用アーム
４７  撮像方向可変機構
４８  視線認識用カメラ
４９  光透過性部材
４９１  モニタ表示部
５  送受信装置
【先行技術文献】
【特許文献】
【００７４】
【特許文献１】特開２００５−１４８８０４公報
【図１】
2011048462.tif 000003
【図２】
2011048462.tif 000004
【図３】
2011048462.tif 000005
【図４】
2011048462.tif 000006
【図５】
2011048462.tif 000007
【図６】
2011048462.tif 000008
【図７】
2011048462.tif 000009
【図８】
2011048462.tif 000010
【図９】
2011048462.tif 000011
【図１０】
2011048462.tif 000012
【図１１】
2011048462.tif 000013
【図１２】
2011048462.tif 000014
【図１３】
2011048462.tif 000015