(57)【要約】【課題】対象物への注目動作によって、対象物の傍まで行かなくても、また手が離せないような状況でも当該対象物の情報を自動的に入手することができる自動情報提示装置、自動情報提示方法及び自動情報提示プログラムを提供すること。【解決手段】ユーザの顔の向き（身体情報）を検出する検出手段と、検出された顔の向きからユーザの注目方向及び意思を判別する判別手段と、判別された注目方向とユーザの位置情報とに基づき、ユーザの注目する店舗を特定する特定手段と、特定された店舗の一次情報を提示する一次情報提示手段と、提示された一次情報に基づき、ユーザの個人属性情報の店舗側への提示の許可をユーザＵに求める判断要求手段と、提示された個人属性情報に基づいた店舗の二次情報を提示する二次情報提示手段と、一次情報及び二次情報を表示する表示手段と、を備えている。【選択図】図１
2009163307.tif 000002
【特許請求の範囲】
【請求項１】
ユーザの身体情報を検出する検出手段と、
検出された前記身体情報から前記ユーザの注目方向及び意思を判別する判別手段と、
判別された前記注目方向と前記ユーザの位置情報とに基づき、前記ユーザの注目対象物を特定する特定手段と、
特定された前記注目対象物の一次情報を提示する一次情報提示手段と、
提示された前記一次情報に基づき、前記ユーザの個人属性情報に基づいた前記注目対象物の二次情報の提示の要否を前記ユーザに求める判断要求手段と、
前記ユーザの要求に対して、前記ユーザの個人属性情報を前記注目対象物側へ提示する提示手段と、
前記二次情報を提示する二次情報提示手段と、
前記一次情報及び前記二次情報を表示する表示手段と、
を備えていることを特徴とする自動情報提示装置。
【請求項２】
前記個人属性情報が、前記ユーザの嗜好情報を備えていることを特徴とする請求項１に記載の自動情報提示装置。
【請求項３】
前記検出手段が、前記ユーザの顔を撮像する撮像手段を備え、
前記判別手段が、前記撮像手段によって撮像された顔画像から前記注目方向及び意思を算出する算出手段を備えていることを特徴とする請求項１又は２に記載の自動情報提示装置。
【請求項４】
獲得した前記二次情報を保存するかどうかの判断を求める選択手段と、
獲得した前記二次情報に基づき前記個人属性情報を更新する情報整理手段と、
を備えていることを特徴とする請求項１から３の何れか一つに記載の自動情報提示装置。
【請求項５】
ユーザの身体情報を検出して前記ユーザの注目方向を判別するステップと、
判別された前記注目方向と前記ユーザの位置情報とに基づき、前記ユーザの注目対象物を特定するステップと、
前記注目対象物の一次情報を前記注目対象物側から前記ユーザ側へ提示するステップと、
前記一次情報を表示して、前記ユーザの個人属性情報に基づいた前記注目対象物の二次情報の提示の要否を前記ユーザに求めるステップと、
前記ユーザの要求に対して、前記ユーザの個人属性情報を前記注目対象物側へ提示するステップと、
前記二次情報を前記ユーザに提示して表示するステップと、
を備えていることを特徴とする自動情報提示方法。
【請求項６】
前記個人属性情報が、前記ユーザの嗜好情報を備えていることを特徴とする請求項５に記載の自動情報提示方法。
【請求項７】
前記注目方向を判別するステップが、前記ユーザの顔を撮像するステップと、
撮像された顔画像から前記注目方向を算出するステップと、
を備えていることを特徴とする請求項５又は６に記載の自動情報提示方法。
【請求項８】
獲得した前記二次情報を保存するかどうかの判断を求めるステップと、
獲得した前記二次情報に基づき前記個人属性情報を更新するステップと、
を備えていることを特徴とする請求項５から７の何れか一つに記載の自動情報提示方法。
【請求項９】
コンピュータを、
ユーザの身体情報を検出する検出手段と、
検出された前記身体情報から前記ユーザの注目方向及び意思を判別する判別手段と、
判別された前記注目方向と前記ユーザの位置情報とに基づき、前記ユーザの注目対象物を特定する特定手段と、
特定された前記注目対象物の一次情報を提示する一次情報提示手段と、
提示された前記一次情報に基づき、前記ユーザの個人属性情報に基づいた前記注目対象物の二次情報の提示の要否を前記ユーザに求める判断要求手段と、
前記ユーザの要求に対して、前記ユーザの個人属性情報を前記注目対象物側へ提示する提示手段と、
前記二次情報を提示する二次情報提示手段と、
前記一次情報及び前記二次情報を表示する表示手段と、
して機能させることを特徴とする自動情報提示プログラム。
【請求項１０】
獲得した前記二次情報を保存するかどうかの判断を求める選択手段と、
獲得した前記二次情報に基づき前記個人属性情報を更新する情報整理手段と、
してさらに前記コンピュータを機能させることを特徴とする請求項９に記載の自動情報提示プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、自動情報提示装置、自動情報提示方法及び自動情報提示プログラムに関する。
【背景技術】
【０００２】
われわれを取り巻くＩＴ関連の製品は発達が目覚しく、高機能化とともに、搭載される機能も増大化が進んできた。これに伴い、これらの機能を使いこなすユーザと、使いこなせずに情報技術の恩恵を十分に受けられないユーザとが出現してきている。
【０００３】
そこで、ＩＴ製品とのインタフェースを人にとって自然な動作にすることにより、簡単に情報を入手する方法が種々提案されてきている（例えば、非特許文献１，２参照。）。これらによれば、ユーザが指差した商品に対して、ユーザが携帯するコンピュータが保有する個人属性情報を店側のコンピュータが受け取り、保有する商品情報とのマッチングを行い、選択された商品情報をユーザに送信するシステムが提案されている。このシステムによれば、ユーザは、店の商品への指差し動作によって、必要な商品情報を自動的に入手することができる。
【非特許文献１】中村  耕太、外２名、“嗜好属性と身体属性に基づく店舗向きサービスロボットシステム”、第７回（社）計測自動制御学会システムインテグレーション部門講演会、平成１８年１２月、ｐ．５３８−５３９
【非特許文献２】中村  耕太、外３名、“個人属性情報に基づく店舗向きサービスロボットシステム”、第１７回インテリジェント・システム・シンポジウム講演論文集、平成１９年８月、ｐ．２１７−２２０
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記非特許文献１，２に記載のような自動情報提示装置、自動情報提示方法及び自動情報提示プログラムは、指差し動作を行って商品を特定した後に情報を入手するので、所望の店舗まで行かないと所望の商品情報を入手することができない。また、乗車中のように手が離せない状況には適用することができない。
【０００５】
本発明は上記事情に鑑みて成されたものであり、興味を引いた対象物への注目動作によって、対象物の傍まで行かなくても、また手が離せないような状況でも当該対象物の情報を自動的に入手することができる自動情報提示装置、自動情報提示方法及び自動情報提示プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明は、上記課題を解決するため、以下の手段を採用する。
本発明に係る自動情報提示装置は、ユーザの身体情報を検出する検出手段と、検出された前記身体情報から前記ユーザの注目方向及び意思を判別する判別手段と、判別された前記注目方向と前記ユーザの位置情報とに基づき、前記ユーザの注目対象物を特定する特定手段と、特定された前記注目対象物の一次情報を提示する一次情報提示手段と、提示された前記一次情報に基づき、前記ユーザの個人属性情報に基づいた前記注目対象物の二次情報の提示の要否を前記ユーザに求める判断要求手段と、前記ユーザの要求に対して、前記ユーザの個人属性情報を前記注目対象物側へ提示する提示手段と、前記二次情報を提示する二次情報提示手段と、前記一次情報及び前記二次情報を表示する表示手段と、を備えていることを特徴とする。
【０００７】
また、本発明に係る自動情報提示方法は、ユーザの身体情報を検出して前記ユーザの注目方向を判別するステップと、判別された前記注目方向と前記ユーザの位置情報とに基づき、前記ユーザの注目対象物を特定するステップと、前記注目対象物の一次情報を前記注目対象物側から前記ユーザ側へ提示するステップと、前記一次情報を表示して、前記ユーザの個人属性情報に基づいた前記注目対象物の二次情報の提示の要否を前記ユーザに求めるステップと、前記ユーザの要求に対して、前記ユーザの個人属性情報を前記注目対象物側へ提示するステップと、前記二次情報を前記ユーザに提示して表示するステップと、
を備えていることを特徴とする。
【０００８】
また、本発明に係る自動情報提示プログラムは、コンピュータを、ユーザの身体情報を検出する検出手段と、検出された前記身体情報から前記ユーザの注目方向及び意思を判別する判別手段と、判別された前記注目方向と前記ユーザの位置情報とに基づき、前記ユーザの注目対象物を特定する特定手段と、特定された前記注目対象物の一次情報を提示する一次情報提示手段と、提示された前記一次情報に基づき、前記ユーザの個人属性情報に基づいた前記注目対象物の二次情報の提示の要否を前記ユーザに求める判断要求手段と、前記ユーザの要求に対して、前記ユーザの個人属性情報を前記注目対象物側へ提示する提示手段と、前記二次情報を提示する二次情報提示手段と、前記一次情報及び前記二次情報を表示する表示手段と、して機能させることを特徴とする。
【０００９】
この発明は、ユーザの注目方向と位置情報とからユーザの注目対象物を特定して、注目対象物の一次情報をユーザに提示することができる。そして、ユーザの個人属性情報に基づいた注目対象物の二次情報をユーザが得たい場合には、提示された一次情報に対してユーザが二次情報の提示要求動作を行うだけで、個人属性情報が注目対象物側に提示され、二次情報を入手することができる。
【００１０】
また、本発明に係る自動情報提示装置は、前記自動情報提示装置であって、前記個人属性情報が、前記ユーザの嗜好情報を備えていることを特徴とする。
【００１１】
また、本発明に係る自動情報提示方法は、前記自動情報提示方法であって、前記個人属性情報が、前記ユーザの嗜好情報を備えていることを特徴とする。
【００１２】
この発明は、ユーザの嗜好情報に合致した注目対象物の情報を効率的に入手することができる。
【００１３】
また、本発明に係る自動情報提示装置は、前記自動情報提示装置であって、前記検出手段が、前記ユーザの顔を撮像する撮像手段を備え、前記判別手段が、前記撮像手段によって撮像された顔画像から前記注目方向及び意思を算出する算出手段を備えていることを特徴とする。
【００１４】
また、本発明に係る自動情報提示方法は、前記自動情報提示方法であって、前記注目方向を判別するステップが、前記ユーザの顔を撮像するステップと、撮像された顔画像から前記注目方向を算出するステップと、を備えていることを特徴とする。
【００１５】
この発明は、注目する方向や意思の表示を顔の画像から算出するので、より簡易な動作で情報を入手することができる。
【００１６】
また、本発明に係る自動情報提示装置は、前記自動情報提示装置であって、獲得した前記二次情報を保存するかどうかの判断を求める選択手段と、獲得した前記二次情報に基づき前記個人属性情報を更新する情報整理手段と、を備えていることを特徴とする。
【００１７】
また、本発明に係る自動情報提示方法は、前記自動情報提示方法であって、獲得した前記二次情報を保存するかどうかの判断を求めるステップと、獲得した前記二次情報に基づき前記個人属性情報を更新するステップと、を備えていることを特徴とする。
【００１８】
また、本発明に係る自動情報提示プログラムは、前記自動情報提示プログラムであって、獲得した前記二次情報を保存するかどうかの判断を求める選択手段と、獲得した前記二次情報に基づき前記個人属性情報を更新する情報整理手段と、してさらに前記コンピュータを機能させることを特徴とする。
【００１９】
この発明は、必要な場合のみ、二次情報を保存することができ、さらに、二次情報によって個人属性情報を更新して次回以降、より個人属性情報に適した商品情報を入手することができる。
【発明の効果】
【００２０】
本発明によれば、興味を引いた対象物への注目動作によって、対象物の傍まで行かなくても、また手が離せないような状況でも当該対象物の情報を自動的に入手することができる。
【発明を実施するための最良の形態】
【００２１】
本発明に係る第１の実施形態について、図１から図４を参照して説明する。
本実施形態に係る自動情報提示装置１は、図１及び図２に示すように、ユーザＵが所有する車Ｃ内に搭載されたユーザ側コンピュータ２、及びユーザ側コンピュータ２と接続されてユーザＵの顔を撮像するユーザ側カメラ３と、ユーザＵが携帯するスマートフォン（携帯型通信機器）５と、店舗（注目対象物）Ｏに置かれた店舗側コンピュータ６と、を備えている。
【００２２】
ユーザ側コンピュータ２は、必要な処理を行うためのプログラム及びデータ等が記憶されたＲＯＭ（リードオンリーメモリ）、地図情報等の必要なデータを一時的に保存するためのＲＡＭ（ランダムアクセスメモリー）、ＲＯＭ等に記憶されたプログラムに応じた処理を行うＣＰＵ（中央演算処理装置）、が内蔵されたユーザ側本体２Ａと、処理前後のデータを表示するユーザ側ディスプレイ２Ｂと、を備えている。店舗側コンピュータ６も、同様の構成の店舗側本体６Ａと、店舗側ディスプレイ６Ｂと、を備えている。スマートフォン５は、携帯側本体５Ａ、携帯側ディスプレイ５Ｂ及び携帯側カメラ５Ｃを備えている。
【００２３】
自動情報提示装置１は、ユーザ側コンピュータ２に組み込まれるユーザ側プログラムＵＰ１と、店舗側コンピュータ６に組み込まれる店舗側プログラムＯＰ１と、スマートフォン５に組み込まれる携帯側プログラムＨＰ１と、を有する自動情報提示プログラムＰ１を備えている。
【００２４】
ユーザ側プログラムＵＰ１は、機能手段（プログラムモジュール）として、ユーザの顔の向き又は動き（身体情報）を検出する検出手段ＵＰ１１と、検出された顔の向きから前記ユーザの注目方向及び顔の動きからユーザＵの意思を判別する判別手段ＵＰ１２と、判別された注目方向とユーザＵの位置情報とに基づき、ユーザＵが注目した店舗Ｏを特定する店舗特定手段（特定手段）ＵＰ１３と、ユーザＵの個人属性情報を保存するユーザ側記憶手段ＵＰ１４と、提示された店舗Ｏのコンテンツ情報等の一次情報に基づき、ユーザＵの個人属性情報に基づいた店舗Ｏ及びその商品に関する二次情報の提示の要否をユーザＵに求める判断要求手段ＵＰ１５と、ユーザＵの要求に対して、ユーザＵの個人属性情報を店舗Ｏ側へ提示するユーザ側提示手段（提示手段）ＵＰ１６と、一次情報及び提示された個人属性情報に基づいて店舗Ｏ側の二次情報を無線受信するユーザ側受信手段ＵＰ１７と、受信した一次情報及び二次情報を表示する表示手段ＵＰ１８と、獲得した二次情報を保存するかどうかの判断を求める選択手段ＵＰ１９と、を備えている。
【００２５】
検出手段ＵＰ１１は、車Ｃ内のユーザ側カメラ３によりユーザの顔を撮像する撮像手段ＵＰＡを備えている。また、判別手段ＵＰ１２は、ユーザ側カメラ３によって撮像されたユーザＵの顔画像から注目方向及び意思を算出する算出手段ＵＰＢを備えている。この算出手段ＵＰＢは、図３に示すように、撮像された顔の画像解析から唇を検出し、身体情報として、顔全体の重心に対する唇の位置から顔の向きやうなずきを算出する。
【００２６】
店舗特定手段ＵＰ１３は、ＧＰＳ（グローバルポジショニングシステム）によりユーザＵの現在位置情報を取得するとともに、地図情報とユーザＵの注目方向とから、ユーザＵが車Ｃ内から見ている店舗Ｏを特定する。そして、ユーザＵがその店舗Ｏに注目していることを後述するユーザ側送信手段ＵＰ１６を介して店舗Ｏ側に送信する。
【００２７】
ユーザ側記憶手段ＵＰ１４は、個人の特定につながらない程度のユーザＵの嗜好情報（例えば、洋服の色の好み、好きな洋服のタイプ等）や、身体的な特徴（例えば、性別、服のサイズ等）を備えた個人属性情報を記憶している。
【００２８】
判断要求手段ＵＰ１５は、提示された一次情報に接したユーザＵに対し、個人属性情報を店舗Ｏ側へ送信して個人属性情報に基づいた二次情報の提示をさらに店舗Ｏ側に要求するかどうかの許可をユーザＵに求める。この際、ユーザＵは、ｙｅｓを示すうなずき動作又はそれ以外の動作を行う。これに対して判断要求手段ＵＰ１５が、検出手段ＵＰ１１及び判別手段ＵＰ１２を介してユーザＵの意思を把握して、個人属性情報の店舗Ｏ側への送信の可否を判断する。
【００２９】
ユーザ側提示手段ＵＰ１６及びユーザ側受信手段ＵＰ１７は、ブルートゥース等の短距離用無線通信手段を有している。
表示手段ＵＰ１８は、ユーザ側受信手段ＵＰ１７が受信した店舗Ｏ側の一次情報及び二次情報をユーザ側ディスプレイ２Ｂに表示させる。
選択手段ＵＰ１９は、獲得した二次情報をログとして残しておくかどうかの判断をユーザＵに求める。
【００３０】
店舗側プログラムＯＰ１は、プログラムモジュールとして、一次情報を予め保存する店舗側記憶手段ＯＰ１１と、店舗Ｏの一次情報をユーザＵに提示する一次情報提示手段ＯＰ１２と、提示された個人属性情報に基づいてユーザＵに見合った店舗Ｏ側の商品情報等の二次情報をユーザＵに提示する二次情報提示手段ＯＰ１３と、を備えている。
【００３１】
店舗側記憶手段ＯＰ１１は、店舗Ｏ又は店舗Ｏ内の商品に関する一次情報として、店舗Ｏ側が用意するコンテンツ情報を予め記憶しておく。
【００３２】
一次情報提示手段ＯＰ１２は、ユーザＵが注目しているとの情報を無線受信して、一次情報をユーザＵに無線送信する。二次情報提示手段ＯＰ１３は、ユーザＵから獲得した個人属性情報と店舗Ｏ側の商品情報との間で推論して、個人属性情報であるユーザＵの嗜好情報や身体情報に適したお勧め商品情報を二次情報としてユーザＵに提示する。一次情報提示手段ＯＰ１２及び二次情報提示手段ＯＰ１３は、ユーザＵ側と同様、ブルートゥース等の図示しない短距離用無線通信手段を有している。
【００３３】
携帯側プログラムＨＰ１は、個人属性情報をユーザ側記憶手段ＵＰ１４に記憶させるとともに、獲得した二次情報に基づき個人属性情報を更新する情報整理手段ＨＰ１１を備えている。この情報整理手段ＨＰ１１は、ユーザＵが許可した場合に限り、獲得した二次情報を記憶し、二次情報に基づき個人属性情報を更新する。
【００３４】
次に、図４に示す自動情報提示方法について、自動情報提示プログラムＰ１の処理の流れと合わせて説明する。
【００３５】
この自動情報提示方法及びそのプログラムによる処理は、上述のように、ユーザ側コンピュータ２、店舗側コンピュータ６、及びスマートフォン５で行われる。
そして、個人属性情報を記憶させるステップ（ＳＴ１）と、ユーザの顔の向きを検出して注目方向を判別するステップ（ＳＴ２）と、ユーザＵの注目方向と位置情報とに基づき、ユーザＵが注目している店舗Ｏを特定するステップ（ＳＴ３）と、一次情報を店舗Ｏ側からユーザＵ側へ提示するステップ（ＳＴ４）と、一次情報を表示してユーザＵの個人属性情報に基づいた店舗Ｏの二次情報の提示の要否をユーザＵに求めるステップ（ＳＴ５）と、ユーザＵの要求に対して、ユーザＵの個人属性情報を店舗Ｏ側へ提示するステップ（ＳＴ６）と、ユーザＵの個人属性情報に基づいた二次情報をユーザＵ側へ提示して表示するステップ（ＳＴ７）と、獲得した二次情報を保存するかどうかの判断を求めるステップ（ＳＴ８）と、獲得した二次情報を保存するとともに、この二次情報に基づき個人属性情報を更新するステップ（ＳＴ９）と、ユーザＵが店舗Ｏに近づいているかどうかを判断するステップ（ＳＴ１０）と、店舗Ｏの駐車場情報等の設備情報をユーザ側に提示するステップ（ＳＴ１１）と、を備えている。
【００３６】
ステップ（ＳＴ１）は、スマートフォン５とユーザ側コンピュータ２との間でやりとりが行われ、予めスマートフォン５に入力されたユーザＵが保有する個人属性情報を、ユーザ側コンピュータ２に移行してユーザ側記憶手段ＵＰ１４に保存する。
【００３７】
ステップ（ＳＴ２）は、ユーザ側コンピュータ２で行われ、検出手段ＵＰ１１によって、ユーザ側カメラ３がユーザＵの顔の画像を検出し、判別手段ＵＰ１２によってユーザＵの注目方向を判別する。ステップ（ＳＴ３）もユーザ側コンピュータ２で行われ、店舗特定手段ＵＰ１３によって、ユーザＵが注目する店舗Ｏを特定する。そして、ユーザＵが当該店舗Ｏを注目している情報を店舗Ｏ側へ通知する。
【００３８】
ステップ（ＳＴ４）は、ユーザＵが注目した店舗側コンピュータ６で行われ、店舗側記憶手段ＯＰ１１に記憶された一次情報が、一次情報提示手段ＯＰ１２によってユーザＵ側に送信される。そして、一次情報がユーザ側受信手段ＵＰ１７によって獲得される。
【００３９】
ステップ（ＳＴ５）は、ユーザ側コンピュータ２で行われ、獲得した店舗Ｏ側の一次情報を表示手段ＵＰ１８によってユーザ側ディスプレイ２Ｂに表示させる。そして、判断要求手段ＵＰ１５によって、個人属性情報の提示による二次情報の入手の要否判断をユーザＵへ要求する。これに対してユーザＵがｙｅｓのうなずきをした場合、検出手段ＵＰ１１によってこのときの画像をとらえ、判別手段ＵＰ１２による画像解析によってユーザＵの意思を判別する。
【００４０】
ステップ（ＳＴ６）は、ユーザ側コンピュータ２で行われ、「要求する」と識別した場合に、ユーザ側提示手段ＵＰ１６によって個人属性情報が店舗Ｏ側に提示される。ステップ（ＳＴ７）は、店舗側コンピュータ６及びユーザ側コンピュータ２で行われる。すなわち、二次情報提示手段ＯＰ１３によって、個人属性情報に基づく店舗Ｏ側の二次情報が生成され、店舗Ｏ側からユーザＵ側に送信される。この二次情報は、ユーザ側受信手段ＵＰ１７によって受信されて、ユーザ側ディスプレイ２Ｂに表示される。
【００４１】
ステップ（ＳＴ８）は、ユーザ側コンピュータ２で行われ、選択手段ＵＰ１９によって、獲得した二次情報をログとして記憶しておくかどうかの判断がユーザＵに求められる。これに対して、ユーザＵがｙｅｓのうなずきをした場合、検出手段ＵＰ１１及び判別手段ＵＰ１２によって、このときの画像をとらえ、画像解析によりユーザＵがログの記憶を許可したことを認識する。
【００４２】
ステップ（ＳＴ９）は、ユーザ側コンピュータ２とスマートフォン５とで行われる。すなわち、情報整理手段ＨＰ１１によって、獲得した二次情報をスマートフォン５に記憶し、かつ二次情報に基づいて個人属性情報を更新する。
【００４３】
ここで、ステップ（ＳＴ５）にて、ユーザＵがｙｅｓのうなずき以外の動作をした場合、又は一定時間顔の動きがなかった場合がある。このときには、検出手段ＵＰ１１及び判別手段ＵＰ１２によって、このときの画像をとらえ、画像解析によりユーザＵが個人属性情報の提示を許可しないことを認識する。そして、ユーザ側コンピュータ２と店舗側コンピュータ６とのやり取りを終了する。
【００４４】
ステップ（ＳＴ８）においても、ユーザＵがｙｅｓのうなずき以外の動作をした場合、又は一定時間顔の動きがなかった場合がある。このときには、検出手段ＵＰ１１及び判別手段ＵＰ１２によって、このときの画像をとらえ、画像解析によりユーザＵが二次情報の記憶を許可しないことを認識する。
【００４５】
ステップ（ＳＴ１０）は、ユーザ側コンピュータ２で行われ、ユーザＵが店舗Ｏに近づいていることをさらにその位置情報から店舗特定手段ＵＰ１３によって特定する。そして、ステップ（ＳＴ１１）は、ユーザ側コンピュータ２と店舗側コンピュータ６とで行われる。すなわち、位置情報を店舗側コンピュータ６に送信して、店舗Ｏの駐車場情報等の設備情報をユーザ側に提示する。さらに、個人属性情報の身体情報から、ユーザＵが店舗Ｏ側のサポートが必要な場合には店員に警告する。
【００４６】
この自動情報提示装置１、自動情報提示方法及びそのプログラムＰ１によれば、ユーザＵが興味を示す方向へ注目するというより自然な動作から、注目方向を判別することができる。また、注目方向と位置情報とからユーザＵが興味を示した店舗Ｏを特定することができ、特定できた時点で、店舗Ｏまで実際に行かなくても、また乗車中のように手が離せないような状況でも店舗Ｏの一次情報を自動的に入手することができる。そして、一次情報に基づき、ユーザＵの個人属性情報に基づいた二次情報をさらに入手したい場合には、うなずき動作によって個人属性情報を店舗Ｏ側に送信することができ、店舗Ｏ側から、二次情報を自動的に入手することができる。
【００４７】
特に、検出手段ＵＰ１１が、ユーザＵの顔を撮像する撮像手段ＵＰＡを備え、判別手段ＵＰ１２が、撮像手段ＵＰＡによって撮像されたユーザ画像から注目方向を算出する算出手段ＵＰＢを備えている。したがって、手を動かさなくても注目する方向に顔を向けるだけで、その注目方向を判別することができる。また、情報の送受信の許否についても、うなずき動作だけで、意思を判別することができる。
【００４８】
また、無線による送受信を行うので、移動しながら自在に情報を入手することができる。さらに、選択手段ＵＰ１９及び情報整理手段ＨＰ１１によって、必要な場合のみ、二次情報を保存することができ、二次情報に基づいて個人属性情報を更新しておくことができる。したがって、情報提示直後でなくても、ユーザＵに商品情報を提供することができる。また、個人属性情報の更新によって、次回以降、よりユーザＵの嗜好に沿った精度の高い商品情報をユーザＵが入手することができる。
【００４９】
次に、第２の実施形態について図５から図７を参照しながら説明する。
なお、上述した第１の実施形態と同様の構成要素には同一符号を付すとともに説明を省略する。
第２の実施形態と第１の実施形態との異なる点は、本実施形態に係る自動情報提示装置１０では、図５に示すように、ユーザＵのスマートフォン１１と店舗側コンピュータ１２とが直接送受信を行うとした点である。
【００５０】
スマートフォン１１は、携帯側本体１１Ａ、携帯側ディスプレイ１１Ｂ、及び携帯側カメラ１１Ｃを備えている。店舗側コンピュータ１２は、店舗側本体１２Ａと、店舗側ディスプレイ１２Ｂとを備えている。この店舗側コンピュータ１２は、ユーザＵの顔を撮像する店舗側カメラ１３と接続されている。
【００５１】
また、この自動情報提示装置１０は、図６に示すように、店舗側プログラムＯＰ２と、携帯側プログラムＨＰ２と、を有する自動情報提示プログラムＰ２を備えている。
【００５２】
店舗側プログラムＯＰ２は、店舗側検出手段（検出手段）ＯＰ２１、店舗側判別手段（判別手段）ＯＰ２２、ユーザ特定手段（特定手段）ＯＰ２３、店舗側記憶手段ＯＰ１１、一次情報提示手段ＯＰ１２、二次情報提示手段ＯＰ１３と、を備えている。
【００５３】
店舗側検出手段ＯＰ２１は、店舗側カメラ１３によりユーザの顔を撮像する店舗側撮像手段（撮像手段）ＯＰＡを備えている。また、店舗側判別手段ＯＰ２２は、店舗側カメラ１３によって撮像されたユーザＵの顔の画像から注目方向及び意思を算出する店舗側算出手段（算出手段）ＯＰＢを備えている。この店舗側算出手段ＯＰＢは、第１の実施形態と同様に、撮像された顔の画像解析から唇を検出し、顔全体の重心に対する唇の位置から顔の向きやうなずきを算出する。
【００５４】
ユーザ特定手段ＯＰ２３は、ＧＰＳ（グローバルポジショニングシステム）によりユーザＵの現在位置情報を取得するとともに、地図情報とユーザＵの注目方向とから、ユーザＵが店舗Ｏに向かっているか否かを特定する。その他の手段については、第１の実施形態と同様の構成となっている。
【００５５】
携帯側プログラムＨＰ２は、機能手段（プログラムモジュール）として、携帯側検出手段（検出手段）ＨＰ２１、携帯側判別手段（判別手段）ＨＰ２２、ユーザ側記憶手段ＵＰ１４、判断要求手段ＵＰ１５、ユーザ側提示手段ＵＰ１６、ユーザ側受信手段ＵＰ１７、表示手段ＨＰ２３、選択手段ＵＰ１９、情報整理手段ＨＰ１１、を備えている。
【００５６】
携帯側検出手段ＨＰ２１は、携帯側カメラ１１Ｃによりユーザの顔を撮像する携帯側撮像手段ＨＰＡを備えている。携帯側判別手段ＨＰ２２は、携帯側カメラ１１Ｃによって撮像されたユーザＵの顔の画像から注目方向及び意思を算出する携帯側算出手段ＨＰＢを備えている。この携帯側算出手段ＨＰＢは、店舗側算出手段ＯＰＢと同様に、撮像された顔の画像解析から唇を検出し、顔全体の重心に対する唇の位置から顔の向きやうなずきを算出する。
【００５７】
表示手段ＨＰ２３は、ユーザ側受信手段ＵＰ１７が受信した店舗Ｏ側の一次情報及び二次情報を携帯側ディスプレイ１１Ｂに表示させる。その他の手段については、第１の実施形態と同様の構成となっている。
【００５８】
次に、図７に示す自動情報提示方法について、自動情報提示プログラムＰ２の処理の流れと合わせて説明する。
【００５９】
この自動情報提示方法及びそのプログラムによる処理は、店舗側コンピュータ１２とスマートフォン１１との間で行われる。
そして、ユーザの顔の向きを検出して注目方向を判別するステップ（ＳＴ２１）と、注目方向とユーザＵの位置情報とに基づき、ユーザＵが店舗Ｏを注目しているかどうかを特定するステップ（ＳＴ２２）と、一次情報を店舗Ｏ側からユーザＵ側へ提示するステップ（ＳＴ２３）と、一次情報を表示してユーザＵの個人属性情報に基づいた店舗Ｏの二次情報の提示の要否をユーザＵに求めるステップ（ＳＴ２４）と、ユーザＵの要求に対して、ユーザＵの個人属性情報を店舗Ｏ側へ提示するステップ（ＳＴ２５）と、ユーザＵの個人属性情報に基づいた二次情報をユーザＵ側へ提示して表示するステップ（ＳＴ２６）と、獲得した二次情報を保存するかどうかの判断を求めるステップ（ＳＴ２７）と、獲得した二次情報を保存するとともに、この二次情報に基づき個人属性情報を更新するステップ（ＳＴ２８）と、ユーザＵが店舗Ｏに近づいているかどうかを判断するステップ（ＳＴ２９）と、個人属性情報の身体情報を店舗Ｏに提示して、ユーザＵが店舗Ｏ側のサポートが必要な場合には店員に警告するステップ（ＳＴ３０）と、を備えている。
【００６０】
ステップ（ＳＴ２１）は、店舗側コンピュータ１２で行われ、店舗側検出手段ＯＰ２１によって店舗側カメラ１３に近づくユーザＵを撮像するとともに、店舗側判別手段ＯＰ２２によって、ユーザＵの注目方向を判別する。ステップ（ＳＴ２２）も店舗側コンピュータ１２で行われ、ユーザ特定手段ＯＰ２３によって、ユーザＵが店舗Ｏを注目しているかどうかを特定する。ステップ（ＳＴ２３）では、スマートフォン１１とユーザＵが注目している店舗側コンピュータ１２との間で通信が行われ、一次情報提示手段ＯＰ１２によって、店舗Ｏ側の一次情報がユーザＵに提示される。
【００６１】
ステップ（ＳＴ２４）は、スマートフォン１１で行われ、獲得した店舗Ｏ側の一次情報を表示手段ＨＰ２３によって携帯側ディスプレイ１１Ｂに表示する。そして、判断要求手段ＵＰ１５によって、二次情報の入手の要否判断をユーザＵへ要求する。これに対してユーザＵがｙｅｓのうなずきをした場合、携帯側検出手段ＨＰ２１及び携帯側判別手段ＨＰ２２によって、このときの画像をとらえ、画像解析によりユーザＵが個人属性情報の提示の意思を判別する。
【００６２】
ステップ（ＳＴ２５）は、スマートフォン１１で行われ、「要求する」と識別した場合に、ユーザ側提示手段ＵＰ１６によって個人属性情報が店舗Ｏ側に提示される。ステップ（ＳＴ２６）は、店舗側コンピュータ１２及びスマートフォン１１で行われる。すなわち、二次情報提示手段ＯＰ１３によって、個人属性情報に基づく店舗Ｏ側の二次情報が生成され、店舗Ｏ側からユーザＵ側に送信される。この二次情報は、ユーザ側受信手段ＵＰ１７によって受信されて、携帯側ディスプレイ１１Ｂに表示される。
【００６３】
ステップ（ＳＴ２７）は、スマートフォン１１で行われ、選択手段ＵＰ１９によって、獲得した二次情報をログとして記憶しておくかどうかの判断がユーザＵに求められる。これに対して、ユーザＵがｙｅｓのうなずきをした場合、携帯側検出手段ＨＰ２１及び携帯側判別手段ＨＰ２２によって、このときの画像をとらえ、画像解析によりユーザＵがログの記憶を許可したことを認識する。
【００６４】
ステップ（ＳＴ２８）は、スマートフォン１１で行われ、情報整理手段ＨＰ１１によって、獲得した二次情報を記憶し、かつ二次情報に基づいて個人属性情報を更新する。
【００６５】
ここで、ステップ（ＳＴ２４）にて、ユーザＵがｙｅｓのうなずき以外の動作をした場合、又は一定時間顔の動きがなかった場合は、このときの画像からユーザＵが個人属性情報の提示を許可しないことを認識する。そして、スマートフォン１１と店舗側コンピュータ１２とのやり取りを終了する。
【００６６】
ステップ（ＳＴ２７）においても、ユーザＵがｙｅｓのうなずき以外の動作をした場合、又は一定時間顔の動きがなかった場合、このときの画像からユーザＵが二次情報の記憶を許可しないことを認識する。
【００６７】
ステップ（ＳＴ２９）は、スマートフォン１１で行われ、ユーザＵが店舗Ｏに近づいていることをさらにその位置情報からユーザ特定手段ＯＰ２３によって特定して、位置情報を店舗側コンピュータ１２に送信する。ステップ（ＳＴ３０）は、個人属性情報の身体情報の提示を受けた店舗Ｏが、ユーザＵのサポートの必要の有無を店員に警告する。
【００６８】
この自動情報提示装置１０、自動情報提示方法及びそのプログラムＰ２によれば、車Ｃによる移動に限定されることなく、ユーザＵが外を歩いているだけの状態であっても、第１の実施形態と同様の効果を奏することができる。
【００６９】
なお、本発明の技術範囲は上記実施の形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲において種々の変更を加えることが可能である。
例えば、上記実施形態では、興味を示した店舗を注目対象物としているが、これに限らず、商品そのものや、店舗以外の施設であっても構わない。また、ユーザの身体情報として、顔全体の重心に対する唇の位置としているが、これに限らず、目の動きや、ユーザの声等でもよい。
【図面の簡単な説明】
【００７０】
【図１】本発明の第１の実施形態に係る自動情報提示装置を示す概要図である。
【図２】本発明の第１の実施形態に係る自動情報提示プログラムを示すブロック図である。
【図３】本発明の第１の実施形態に係る自動情報提示装置における顔の向きの判別方法を示す説明図である。
【図４】本発明の第１の実施形態に係る自動情報提示方法を示すフロー図である。
【図５】本発明の第２の実施形態に係る自動情報提示装置を示す概要図である。
【図６】本発明の第２の実施形態に係る自動情報提示プログラムを示すブロック図である。
【図７】本発明の第２の実施形態に係る自動情報提示方法を示すフロー図である。
【符号の説明】
【００７１】
１，１０  自動情報提示装置
ＨＰ１１  情報整理手段
ＨＰ２１  携帯側検出手段（検出手段）
ＨＰ２２  携帯側判別手段（判別手段）
ＨＰ２３  携帯側表示手段（表示手段）
ＨＰＡ  携帯側撮像手段（撮像手段）
ＨＰＢ  携帯側算出手段（算出手段）
ＯＰ１２  一次情報提示手段
ＯＰ１３  二次情報提示手段
ＯＰ２１  店舗側検出手段（検出手段）
ＯＰ２２  店舗側判別手段（判別手段）
ＯＰ２３  ユーザ特定手段（特定手段）
ＯＰＡ  店舗側撮像手段（撮像手段）
ＯＰＢ  店舗側算出手段（算出手段）
Ｐ１，Ｐ２  自動情報提示プログラム
ＵＰ１１  検出手段
ＵＰ１２  判別手段
ＵＰ１３  店舗特定手段（特定手段）
ＵＰ１５  判断要求手段
ＵＰ１６  ユーザ側提示手段（提示手段）
ＵＰ１８  表示手段
ＵＰ１９  選択手段
ＵＰＡ  撮像手段
ＵＰＢ  算出手段
【図１】
2009163307.tif 000003
【図２】
2009163307.tif 000004
【図３】
2009163307.tif 000005
【図４】
2009163307.tif 000006
【図５】
2009163307.tif 000007
【図６】
2009163307.tif 000008
【図７】
2009163307.tif 000009