(57)【要約】【課題】入店歴のある顧客情報だけでなく、顧客グループの顧客層、グループ形態等の情報も加味した形で営業支援をおこなうことができるサービス支援システムを提供する。【解決手段】入店歴のある顧客情報を管理し、入店の度に顧客情報を更新し、また、初めての顧客に対しては新規登録をし、店舗入口に入店顧客の個々の顔部分、及び顧客グループ全体を撮影することが可能な撮影カメラ装置を設置し、映像より顔を検知し、その顔画像に対して顔照合をし、映像より顧客グループ全体の人数をカウントし、映像より顧客一人ひとりに対して、性別を判定し、映像より顧客一人ひとりに対して、身長区分を判定し、顧客グループの構成を判定し、適切で、かつ志向にあった選定メニューを提供する。【選択図】  図１
2008262435.tif 000002
【特許請求の範囲】
【請求項１】
撮影カメラ装置と、該カメラで撮影された映像の顔部分を検知し顔画像として切出す顔検知装置と、該切出された顔画像と、入店歴のある顧客顔画像、もくしくは顔照合に必要な個々顔の特徴データを蓄えているデータベースと照合をおこなう照合装置と、入店歴のある顧客の入店回数、性別、身長、過去のオーダー情報等の顧客情報を管理する顧客情報管理装置とを有する営業支援システムであって、
前記照合結果に基づき、顧客情報の追加更新を行なう顧客情報管理装置と、顧客情報管理装置から得られる顧客情報よりサービス選定支援をおこなう営業支援システム。
【請求項２】
前記営業支援システムは、前記撮影カメラ装置で撮影した映像から顧客グループの人数をカウントする顧客人数判定装置と、顧客グループ全員の性別を判定する性別判定装置と、顧客グループ全員の身長を判定する身長判定装置とを有し、それら判断装置で判断した顧客人数情報、顧客性別情報、顧客身長判定情報とに基づいて、前記サービス選定を行なうことを特徴とする営業支援システム。
【請求項３】
人数、性別、身長  顔認証装置においては、顔照合をおこなった結果、該当する顧客情報が存在しなかった場合は、その入店顧客を新規顧客として、顧客情報管理装置に登録することを特徴とする、顔認証、及び顧客状況情報を利用した営業支援システム。
【請求項４】
実施例として、飲食店におけるメニュー選定支援を挙げるが、カラオケの選曲等、様々な顧客層が、様々なグループ形態で訪れる店舗サービスまで利用が可能なことを特徴とする、顔認証、及び顧客状況情報を利用した営業支援システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、営業支援、サービス選定支援に関し、特に顧客入店型の店舗におけるメニューの選定、オーダー支援に適した営業支援、メニューオーダー選定支援に関する。
【背景技術】
【０００２】
従来のサービス選定支援システムとしては、例えば特許文献１のような顧客ＩＤを管理する方法や、特許文献２および特許文献３に記載されたような、注文者のＩＤとパスワード、といった顧客個人を識別する手段を入店時に顧客より意識的に提示してもらうような方法であった。
【０００３】
【特許文献１】特開２００３−２６３４８１号公報
【特許文献２】特開２００５−２２２１９１号公報
【特許文献３】特開２００３−２４２４８６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
従来のシステムでは、顧客に意識的に個人を識別する情報を定時してもらわないと店舗側はそれを入手することができないものであった。
【０００５】
また、対象が入店顧客一人一人の顧客データは管理しても、顧客が複数人のグループで入店した際のグループ単位で顧客データ管理を行なうような形態は考慮していなかった。
つまり、顧客が提示した個人データのみが、メニューオーダー選定の支援対象となっていた。
【０００６】
本願発明は、入店歴のある顧客情報だけでなく、顧客グループの顧客層、グループ形態等の情報も加味した形で営業支援をおこなうことができるサービス支援システムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記課題を達成するために、本発明は、入店歴のある顧客情報を管理し、入店の度に顧客情報を更新することを、また、初めての顧客に対しては、新規登録をすることを特徴とする。また、本発明は、店舗入口に入店顧客の個々の顔部分、及び顧客グループ全体を撮影することが可能な撮影カメラ装置を設置することを特徴とする。また、本発明は、映像より顔を検知し、その顔画像に対して顔照合をすることを特徴とする。また、本発明は、映像より顧客グループ全体の人数をカウントすることを特徴とする。また、本発明は、映像より顧客一人ひとりに対して、性別を判定することを特徴とする。また、本発明は、映像より顧客一人ひとりに対して、身長区分を判定することを特徴とする。また、本発明は、顧客グループの構成を判定し、選定メニューを提供する
【発明の効果】
【０００８】
本発明によれば、顔認証、及び顧客状況情報を利用した、営業支援システムは、入店歴のある顧客情報だけでなく、顧客グループの顧客層、グループ形態等の情報も加味した形で営業支援をおこなうようになっているため、入店歴のない顧客が始めて訪れた場合や、顧客グループの形態（人数、構成等）によっても変わる、顧客個々の志向にも対応した営業支援が可能となるという効果が期待できる。それに伴い顧客へのサービス向上という点で経営者に対して貢献できる。
【発明を実施するための最良の形態】
【０００９】
以下、本発明の実施の形態について図面を参照しながら詳細に説明する。
【実施例１】
【００１０】
図１は本発明の一実施例における、顔認証、及び状況情報を利用した営業支援システムの一実施例を示すブロック構成図である。
この顔認証、及び状況情報を利用した営業支援システムは、例えば、飲食店等の店舗で入店した顧客に対してメニューの選定、オーダー支援を管理するものである。営業支援システムは、店舗の入口に設置された撮影カメラ装置１１、撮影された映像より顔部分を検知、顔画像として切出す顔検知装置１２と、切出された顔画像と、入店歴のある顧客顔画像、もくしくは顔照合に必要な個々顔の特徴データを蓄えているデータベースと顔照合をおこなう顔照合装置１３（顔検知装置１２と顔照合装置１３を併せて顔認証装置１４とする）と、撮影カメラ装置１１により撮影された映像より来店顧客人数をカウントする顧客人数判定装置１５と、同じく撮影カメラ装置１１により撮影された映像より来店顧客のそれぞれの性別を判定する性別判定装置１６と、同じく撮影カメラ装置１１により撮影された映像より来店顧客のそれぞれの身長を判定する身長判定装置１７と、入店歴のある顧客の入店回数、性別、身長、過去のオーダー情報等の顧客情報を管理する顧客情報管理装置１８と、顧客情報管理装置１８から得られる顧客グループの人数、構成、性質等の情報よりメニュー選定の支援をおこなうメニュー選定支援装置１９と、これらの各装置を通信可能にするネットワーク環境２０から構成される。
【００１１】
本構成内の顔認証装置１４において、例えば、該当者が存在する照合結果が得られれば、すなわち、入店歴のある顧客情報を管理する顧客情報管理装置１８に登録されていたとすれば、それは入店歴のある顧客であるという判定がなされる。この場合、該当する顧客情報が提供メニューを選定するための情報の一部として使用される。この顧客情報には、図２が示すような、顧客識別ＩＤ、性別、身長、入店回数等の顧客固有の情報と、図３が示すような、当該顧客の過去のオーダーメニューやメニューの分類、オーダー回数等の過去のオーダー情報とが含まれている。
【００１２】
一方で、顔認証装置１４において、例えば、該当者が存在しない照合結果が得られれば、すなわち、入店歴のある顧客情報を管理する顧客情報管理装置１８に登録されていないとすれば、それは入店歴のない顧客であるという判定がなされる。この場合、顔検知装置１２によって切出された顔画像を元に、顔照合に必要な顔の特徴データが作成され、新たな顧客識別ＩＤ等と共に顧客情報管理装置１８に登録される。この際に、性別判定装置１６により得られた性別と、身長判定装置１７により得られた身長区分も共に、顧客情報管理装置１８に登録される。
また、これらの一連の処理を、顧客人数判定装置１５によりカウントした人数と確認をしながら、入店する顧客グループの全員に対しておこなうことで、顧客個々の過去のオーダーメニュー情報を、提供メニューの参考にすることができる。
【００１３】
しかしながら、顧客個々の過去のオーダーメニュー情報だけでは、入店歴のない初めての顧客に対しては、提供メニューを選定する情報が全く得られないことになる。また、久しぶりにその店舗を訪れたり、飲食の嗜好が変わったりした場合、当該顧客の過去のオーダーメニュー情報さえ役に立たない場合がある。さらに、当該顧客が複数人のグループで入店する場合、同一人物であっても、そのグループの人数、構成、性質等によって、飲食する志向が異なる可能性が非常に高い。
本発明では、これら提供メニューを選定する際の情報不足を補うため、顧客個々の過去のオーダーメニュー情報だけでなく、入店する顧客グループが、どのような顧客層で、どのようなグループ形態かを判定し、その情報をも加味した提供メニューの選定をおこなう。
【００１４】
図４は顧客への提供メニューの選定までの流れをフローチャートに示したものである。
まず、店舗入口において入店する顧客グループの個々の顔部分、及びグループ全体を撮影して動画映像を取得する。次にこの取得した映像に対して、人数判定をおこない、グループ全体の人数をカウントする。同時に、同映像より顔検知、顔切出しを実行し、切出された顔部分を顔画像として保存する。この時保存された顔画像に対して、入店歴を管理している顧客情報管理データベースと顔照合を実行し、照合結果を取得する。この際に、該当情報が存在する場合、つまりは照合が一致した場合、顧客情報管理装置から、当該顧客の過去の嗜好メニュー情報を取得し、提供メニュー選定の情報源の一部とする。一方で、顔照合の結果、該当情報が存在しなかった場合、つまりは照合が一致しなかった場合、性別判定装置により、当該顧客の男性／女性を判定し、また、身長判定装置により、身長区分（大人／子供）を判定し、顔検知した当該顧客の顔画像情報（顔照合に必要なデータ）と共に顧客情報管理装置へ新規登録する。これらの一連の処理を、顧客グループ全体の人数を確認しながら、全員に対して繰り返す。顧客グループ全員に対して、一連の処理が完了した後に、結果として、顧客グループがどのような集団（構成）で入店しているかを判定する。
【００１５】
この時の判定材料としては、図５の顧客グループ構成判定情報がある。例えば、大人の男性１人、大人の女性１人で構成される合計２人の顧客グループの場合では、これを夫婦、もしくはカップルと判定する。また、大人の男性１人、大人の女性１人、子供２人で構成される合計４人の顧客グループの場合では、これを家族連れと判定する。ここで判定した構成に対して、提供メニューの選定していくのであるが、これに対しては図６の顧客グループ構成による志向メニュー情報がある。例えば、夫婦、もしくはカップルと判定された顧客グループに対しては、ワインやフランス料理といったオシャレで落ち着いたものを、提供メニューとして選定したり、また、家族連れと判定された顧客グループに対しては、お子様ランチやジュースといった子供向けのメニューを豊富に選定したりすることができる。
【００１６】
これら顧客グループの構成にあわせた、選定メニュー情報を、入店歴のある顧客情報と併せて提供することで、顧客グループに対して、的確で、かつ志向に添った選定メニューの提供を期待することができる。
【実施例２】
【００１７】
次に、店舗の入口に設置された撮影カメラ装置１１から得られる映像から、人数判定装置１５、性別判定装置１６、身長判定装置１７の実施の形態について、図面を参照しながら、詳細に説明する。
図７（ａ）は、顧客入店時に撮影カメラ装置１１によって撮影されたある時点でのフレームであり、
図７（ｂ）は、図７（ａ）の次のフレームである。
図７（ａ）において、例えば、３人の人物の顔が検知されたとする。この時に検知された顔画像とそれぞれの顔画像の検知座標位置を一時的に保存しておく。また、次のフレーム図７（ｂ）においても検知された３人の顔画像とそれぞれの顔画像の検知座標位置を一時的に保存しておく。そして、図７（ｂ）の時点において得られた顔画像の検知座標位置が、前フレーム図７（ａ）の時点において得られた顔画像の検知座標位置に非常に近傍である場合、同一人物である可能性が高い。そこで、一時的に保存している図７（ａ）の顔画像と、図７（ｂ）の顔画像の顔照合をおこなう。この顔照合により、フレーム間で同一人物を二重、三重カウントすることを避けることができ、正確な入店人数を把握することができる。
次に、性別判定装置１６に関しては、入力された映像中の顔画像から、その性別の属性を推定するための装置が特開２００３−２４２４８６号公報として報告されている。これは、事前に手動で属性毎に分けて登録しておいた人物顔の特徴と、入力された顔画像の特徴とを照合することにより、顔画像の性別の属性を推定する装置である。
【００１８】
次に、身長判定装置１７に関して説明する。
図８は、顧客グループが入店した際のイメージ図である。
図８からも分かるように、身長によってカメラで撮影され、顔を検出される位置が変わってくる。実際の撮影カメラ装置１１による撮影フレームは図７に示した通りである。これによって、撮影カメラ装置１１との位置関係を考慮することにより、入店顧客のそれぞれの身長判定をおこなうことができる。また必要に応じて、撮影カメラ装置１１自体を上下移動させることにより、広範囲な領域を網羅することができる。
本発明は、飲食店やカラオケ等、様々な顧客層が、様々なグループ形態で訪れる店舗サービスに応用可能である。
【図面の簡単な説明】
【００１９】
【図１】本発明の一実施例における顔認証、及び状況情報を利用した営業支援システムのブロック構成図である。
【図２】入店歴のある顧客の固有情報の例を示す図である。
【図３】入店歴のある顧客の過去のオーダー情報の例を示す図である。
【図４】顧客への提供メニューの選定までの流れを説明したフローチャートである。
【図５】顧客グループ構成判定情報の例を示す図である。
【図６】顧客グループ構成による志向メニュー情報の例を示す図である。
【図７】入店時に撮影された顧客グループの映像（フレーム）図のイメージ図である。
【図８】入店時の顧客グループと撮影カメラ装置１１の位置関係図である。
【符号の説明】
【００２０】
１１：撮影カメラ装置
１２：顔検知装置
１３：顔照合装置
１４：顔認証装置
１５：顧客人数判定装置
１６：性別判定装置
１７：身長判定装置
１８：顧客情報管理装置
１９：メニュー選定支援装置
２０：ネットワーク装置
２１：動画映像取得手段
２２：人数情報取得手段
２３：顔切出し（画像保存）手段
２４：照合結果取得手段
２６：嗜好メニュー情報取得手段
２７：男性／女性情報取得手段
２８：大人／子供情報を取得手段
２９：新規登録手段
３１：メニューの選定を実行する手段
３２：映像フレーム内の顔画像検知枠
【図１】
2008262435.tif 000003
【図２】
2008262435.tif 000004
【図３】
2008262435.tif 000005
【図４】
2008262435.tif 000006
【図５】
2008262435.tif 000007
【図６】
2008262435.tif 000008
【図７】
2008262435.tif 000009
【図８】
2008262435.tif 000010