(57)【要約】【課題】買物客の手間を増やさずレジでの精算時間を短縮できるシステムの提供。【解決手段】ネットワーク接続された、１以上の監視カメラと、レジと、サーバとを含み、サーバは、１以上の監視カメラから撮影された映像を取得する映像取得部と、店舗に入店した買物客、商品棚から商品を取った買物客、商品棚に商品を戻した買物客、および精算のためレジの前に来た買物客の顔を映像内で認識し、各買物客の顔情報を作成する顔認識部と、買物客が商品棚から取った商品および買物客が商品棚に戻した商品を映像内で検知する商品検知部と、各買物客の顔情報に紐付けて、買物客が購入する商品が登録される精算リストを管理する精算リスト管理部と、レジの前に来た買物客の顔情報に紐付いた精算リストおよび当該精算リストに基づいて算出された精算結果を精算リスト管理部から受け取り、レジに送信する精算結果送信部とを備える。【選択図】図４
2018180717.tif 000002
【特許請求の範囲】
【請求項１】
ネットワーク接続された、１以上の監視カメラと、キャッシュレジスターと、サーバーとを含み、
前記サーバーは、
前記１以上の監視カメラおよび前記キャッシュレジスターと通信可能な通信部と、
前記１以上の監視カメラから撮影された映像を取得する映像取得部と、
店舗に入店した買物客、商品棚から商品を取った買物客、商品棚に商品を戻した買物客、および精算のため前記キャッシュレジスターの前に来た買物客の顔を前記映像内で認識し、各買物客の顔情報を作成する顔認識部と、
買物客が商品棚から取った商品および買物客が商品棚に戻した商品を前記映像内で検知する商品検知部と、
各買物客の前記顔情報に紐付けて、買物客が購入する商品が登録される精算リストを管理する精算リスト管理部と、
前記キャッシュレジスターの前に来た買物客の前記顔情報に紐付いた精算リストおよび当該精算リストに基づいて算出された精算結果を前記精算リスト管理部から受け取り、前記キャッシュレジスターに送信する精算結果送信部と
を備えた
商品精算システム。
【請求項２】
請求項１に記載の商品精算システムであって、
買物客が使う買物かごには、一意に認識可能な番号が表示されており、
前記サーバーは、
前記店舗に入店した買物客が前記買物かごを持ったとき、および前記顔認識部が買物客の顔認識に失敗したとき、当該買物客が持った前記買物かごの番号を前記映像内で検知し、かご番号情報を作成するかご番号検知部
をさらに備えた
商品精算システム。
【請求項３】
請求項１または２に記載の商品精算システムであって、
前記精算リスト管理部は、
買物客が商品棚から商品を取ったとき、前記商品検知部により前記映像内で検知された商品を、前記顔認識部が前記映像内で認識した当該買物客の顔の前記顔情報に紐付いた前記精算リストに追加する
商品精算システム。
【請求項４】
請求項１から３のいずれか１つに記載の商品精算システムであって、
前記精算リスト管理部は、
買物客が商品棚に商品を戻したとき、前記商品検知部により前記映像内で検知された商品を、前記顔認識部が前記映像内で認識した当該買物客の顔の前記顔情報に紐付いた前記精算リストから削除する
商品精算システム。
【請求項５】
請求項１から４のいずれか１つに記載の商品精算システムであって、
前記１以上の監視カメラの一部または全ては、画像形成装置に装着されているカメラである
商品精算システム。
【請求項６】
ネットワーク接続された、１以上の監視カメラと、キャッシュレジスターと、サーバーとを含んだ商品精算システムにおける商品精算方法であって、
前記１以上の監視カメラから撮影された映像を取得し、
店舗に入店した買物客、商品棚から商品を取った買物客、商品棚に商品を戻した買物客、および精算のため前記キャッシュレジスターの前に来た買物客の顔を前記映像内で認識し、各買物客の顔情報を作成し、
買物客が商品棚から取った商品および買物客が商品棚に戻した商品を前記映像内で検知し、
各買物客の前記顔情報に紐付けて、買物客が購入する商品が登録される精算リストを管理し、
前記キャッシュレジスターの前に来た買物客の前記顔情報に紐付いた精算リストおよび当該精算リストに基づいて算出された精算結果を前記キャッシュレジスターに送信することを
前記サーバーが行う商品精算方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、店で購入した商品を精算する商品精算システムおよび商品精算方法に関する。
【背景技術】
【０００２】
スーパーマーケットやコンビニエンスストアでは、買物客が購入した商品を精算する手間と時間を短縮するための様々な工夫がなされてきた。
【０００３】
例えば、特許文献１の技術では、買物客が持つ携帯端末にＰＯＳ（Point of sales）アプリケーションプログラムを導入し、買物客が商品をかごに入れる際に、商品のバーコードを読み取ったり、商品名と数量を携帯端末に入力したりする。その後、購入商品に関する情報はセルフ方式のレジスター（セルフレジ）に送られ、各商品と商品の総重量を比較して会計漏れをチェックした後、精算が行われる。
【０００４】
また、特許文献２の技術は、小売店舗などに設置された監視カメラの撮影映像またはその画像解析情報などを用いて、販売機会損失などの分析を行うものである。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０１６−７１７８７号公報
【特許文献２】特開２０１２−２２５２８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
特許文献１の技術では、買物客はかごに入れる商品に対し自分で携帯端末にバーコードを読ませたり、バーコードの無い商品については商品名と数量を自分で携帯端末に直接入力したりする必要があり、レジでの精算自体は時間短縮出来るとしても、買物客自身の手間は増えるものであった。
【０００７】
以上のような事情に鑑み、本発明の目的は、買物客の手間を増やさずレジでの精算時間を短縮できる商品精算システムおよび商品精算方法を提供することにある。
【課題を解決するための手段】
【０００８】
上記目的を達成するため、本発明の一形態に係る商品精算システムは、ネットワーク接続された、１以上の監視カメラと、キャッシュレジスターと、サーバーとを含み、前記サーバーは、前記１以上の監視カメラおよび前記キャッシュレジスターと通信可能な通信部と、前記１以上の監視カメラから撮影された映像を取得する映像取得部と、店舗に入店した買物客、商品棚から商品を取った買物客、商品棚に商品を戻した買物客、および精算のため前記キャッシュレジスターの前に来た買物客の顔を前記映像内で認識し、各買物客の顔情報を作成する顔認識部と、買物客が商品棚から取った商品および買物客が商品棚に戻した商品を前記映像内で検知する商品検知部と、各買物客の前記顔情報に紐付けて、買物客が購入する商品が登録される精算リストを管理する精算リスト管理部と、前記キャッシュレジスターの前に来た買物客の前記顔情報に紐付いた精算リストおよび当該精算リストに基づいて算出された精算結果を前記精算リスト管理部から受け取り、前記キャッシュレジスターに送信する精算結果送信部とを備える。
【０００９】
そのため、買物客の手間を増やさずレジでの精算時間を短縮できる。
【００１０】
上記目的を達成するため、本発明の一形態に係る商品精算システムでは、買物客が使う買物かごには、一意に認識可能な番号が表示されており、前記サーバーは、前記店舗に入店した買物客が前記買物かごを持ったとき、および前記顔認識部が買物客の顔認識に失敗したとき、当該買物客が持った前記買物かごの番号を前記映像内で検知し、かご番号情報を作成するかご番号検知部をさらに備えてもよい。
【００１１】
上記目的を達成するため、本発明の一形態に係る商品精算システムでは、前記精算リスト管理部は、買物客が商品棚から商品を取ったとき、前記商品検知部により前記映像内で検知された商品を、前記顔認識部が前記映像内で認識した当該買物客の顔の前記顔情報に紐付いた前記精算リストに追加する構成でもよい。
【００１２】
上記目的を達成するため、本発明の一形態に係る商品精算システムでは、前記精算リスト管理部は、買物客が商品棚に商品を戻したとき、前記商品検知部により前記映像内で検知された商品を、前記顔認識部が前記映像内で認識した当該買物客の顔の前記顔情報に紐付いた前記精算リストから削除する構成でもよい。
【００１３】
上記目的を達成するため、本発明の一形態に係る商品精算システムでは、前記１以上の監視カメラの一部または全ては、画像形成装置に装着されているカメラであってもよい。
【００１４】
上記目的を達成するため、本発明の一形態に係る商品精算方法は、ネットワーク接続された、１以上の監視カメラと、キャッシュレジスターと、サーバーとを含んだ商品精算システムにおける商品精算方法であって、前記１以上の監視カメラから撮影された映像を取得し、店舗に入店した買物客、商品棚から商品を取った買物客、商品棚に商品を戻した買物客、および精算のため前記キャッシュレジスターの前に来た買物客の顔を前記映像内で認識し、各買物客の顔情報を作成し、買物客が商品棚から取った商品および買物客が商品棚に戻した商品を前記映像内で検知し、各買物客の前記顔情報に紐付けて、買物客が購入する商品が登録される精算リストを管理し、前記キャッシュレジスターの前に来た買物客の前記顔情報に紐付いた精算リストおよび当該精算リストに基づいて算出された精算結果を前記キャッシュレジスターに送信することを前記サーバーが行う。
【発明の効果】
【００１５】
以上のように、本発明によれば、買物客の手間を増やさずレジでの精算時間を短縮できる。
【図面の簡単な説明】
【００１６】
【図１】本発明の一実施形態に係る商品精算システム１００の全体構成図である。
【図２】サーバー１０が一般的なコンピューターにより構成される場合の構成図である。
【図３】買物客が店舗に入店した際に行われる処理の流れを説明するためのフローチャートである。
【図４】買物客が商品棚から商品を取った際に行われる処理の流れを説明するためのフローチャートである。
【図５】買物客が商品を商品棚に戻した際に行われる処理の流れを説明するためのフローチャートである。
【図６】買物客が購入する商品の代金を支払うためにレジ前に来た際に行われる処理の流れを説明するためのフローチャートである。
【発明を実施するための形態】
【００１７】
以下、図面を参照しながら、本発明の実施形態を説明する。
【００１８】
［全体構成と概要］
最初に、本発明の一実施形態に係る商品精算システムの全体構成と概要について説明する。図１は、本発明の一実施形態に係る商品精算システム１００の全体構成図である。
【００１９】
商品精算システム１００は、ネットワーク接続された１台以上の監視カメラ２０と、サーバー１０と、キャッシュレジスター３０（以下、レジとも呼ぶ）を含んで構成される。
【００２０】
なお、店舗内は、買物客の顔、買物客が使うかごに付けられた一意に識別可能な番号（かご番号）、および買物客が手に取った商品を適切に撮影できるように、１台以上の監視カメラ２０で漏れなく撮影されているものとする。
【００２１】
また、１台以上の監視カメラ２０の一部または全ては、店舗内に設置された複合機（ＭＦＰ、Multifunction Peripheral）等の画像形成装置に装着されているカメラであっても良い。
【００２２】
画像形成装置に装着されたカメラは、通常、例えば、画像形成装置にログインする際の顔認証用として使用されたり、画像形成装置をスリープ状態である省エネルギーモードから通常使用モードに復帰する際の人体検知用として使用されたりしているが、このような通常の使用がない場合に監視カメラ２０として利用されるように制御される。
【００２３】
サーバー１０は、店舗のバックヤードなどに設置され、監視カメラ２０で撮影された映像を収集して解析し、店舗にいる買物客ごとの精算リストを管理し、キャッシュレジスター３０に各買物客が購入する商品の精算リストおよび購入する商品の合計額である精算結果を送信する。
【００２４】
キャッシュレジスター３０は、サーバー１０から受信した精算リストおよび精算結果を買物客に提示することが出来る以外は、通常のキャッシュレジスターと同様であり、釣銭機および電子マネー読取部を備え、買物客が購入した商品の代金を支払って、釣銭を受け取ることが出来る。
【００２５】
商品精算システム１００では、監視カメラの映像を解析し、各買物客の顔に紐付けられた精算リストに、買物客が手に持った、またはかごに入れた商品を登録し、買物客が商品棚に戻した商品を精算リストから削除する。
【００２６】
買物客がレジに来て購入する商品の精算をする時点では、既に購入する商品に関する精算リストが出来上がっているので、サーバー１０はキャッシュレジスター３０を通じてすぐに買物客に対し、購入する商品の合計金額を提示することが出来る。（レジスタッフは、商品情報をレジに入力する必要が無いため、商品情報のレジでの入力時間を省略することが出来る。）
【００２７】
そのため、キャッシュレジスター３０での購入商品のチェックが不要になり、精算時間を短縮することが出来る。
【００２８】
なお、本発明では、買物客を一意に識別するために買物客の顔を認識して得られた顔情報を用いている。精算リストと買物客の顔情報を紐付けている。
【００２９】
また、買物客が使うかごには一意に識別可能な番号が振られている。番号は監視カメラ２０で検知しやすいように、大きく表示されていることが好ましい。かご番号を検知して得られたかご番号情報は、買物客の顔を認識すべき時に認識に失敗した場合に、補助的に買物客を識別するために用いられる。補助的に用いられる理由は、買物客によっては買い物かごを用いずに商品を購入する場合があるからである。
【００３０】
以上、全体構成と概要について説明した。
【００３１】
［サーバーの構成］
次に、サーバー１０の構成について説明する。サーバー１０は、専用のハードウェアやソフトウェアにより構成されていてもよいし、一般的なコンピューターにより構成されてもよい。サーバー１０が一般的なコンピューターにより構成される場合の構成図を図２に示す。
【００３２】
同図に示すように、サーバー１０は、ＣＰＵ（Central Processing Unit）１１、ＲＯＭ（Read Only Memory）１２、ＲＡＭ（Random Access Memory）１３、操作入力部１４、通信部１５、表示部１６、および記憶部１７を有し、これら各ブロックがバス１８を介して接続されている。
【００３３】
ＲＯＭ１２は、各種の処理を実行するためのファームウェア等の複数のプログラムやデータを記憶する。ＲＡＭ１３は、ＣＰＵ１１の作業用領域として用いられ、ＯＳ（Operating System）、実行中の各種アプリケーション、処理中の各種データを一時的に保持する。
【００３４】
記憶部１７は、例えばＨＤＤ（Hard Disk Drive）や、フラッシュメモリー、その他の不揮発性メモリーである。記憶部１７には、ＯＳや各種アプリケーション、各種データ、買物客の顔情報１７ａ、かご番号情報１７ｂ、および顔情報１７ａおよびかご番号情報１７ｂに紐付けられた精算リスト１７ｃが記憶される。
【００３５】
顔情報１７ａは、入店した買物客の顔を撮影した映像から抽出された情報である。１人の買物客に対し、１つの顔情報１７ａが設定される。
【００３６】
かご番号情報１７ｂは、買物客が持つかごに付された一意に識別可能な番号を監視カメラ２０で読み取った情報である。かご番号情報１７ｂは、特定の買物客の顔情報１７ａおよび精算リスト１７ｃと組み合わされて、精算セット１７ｄとして記憶部１７に記憶される。精算セット１７ｄは買物客ごとに設定され、商品の精算が済むと記憶部１７から消去される。
【００３７】
なお、買い物かごを使わずに商品を手に持ってレジまでいき精算する買物客の場合、かご番号情報１７ｂはブランクになる。
【００３８】
精算リスト１７ｃは、買物客が商品棚から手に取った商品または買い物かごに入れた商品を登録したリストであり、特定の買物客の顔情報１７ａおよび精算リスト１７ｃと紐付けられ、精算セット１７ｄとして記憶部１７に記憶される。この精算リスト１７ｃに登録された商品の金額の合計額が買物客の支払う金額となる。
【００３９】
通信部１５は、ネットワーク上の監視カメラ２０およびキャッシュレジスター３０と情報のやりとりを行う為のネットワークと結ばれている。
【００４０】
ＣＰＵ１１は、ＲＯＭ１２や記憶部１７に格納された複数のプログラムのうち、操作入力部１４から与えられる命令に対応するプログラムをＲＡＭ１３に展開し、この展開されたプログラムにしたがって、表示部１６及び記憶部１７を適宜制御する。
【００４１】
操作入力部１４は、例えばマウス等のポインティングデバイス、キーボード、タッチパネル、その他の操作装置である。
【００４２】
表示部１６は、例えば液晶ディスプレイ、ＥＬ（Electro-Luminescence）ディスプレイ、プラズマディスプレイ等である。
【００４３】
次に、ＣＰＵ１１においてプログラムが実行されることにより実現される機能ブロックについて説明する。
【００４４】
サーバー１０のＣＰＵ１１において実現される機能ブロックは、映像取得部１１ａ、顔認識部１１ｂ、かご番号検知部１１ｃ、精算リスト管理部１１ｄ、商品検知部１１ｅ、および精算結果送信部１１ｆである。
【００４５】
映像取得部１１ａは、各監視カメラ２０から撮影された映像を取得する。取得した映像は、顔認識部１１ｂ、かご番号検知部１１ｃ、および商品検知部１１ｅによって解析される。
【００４６】
顔認識部１１ｂは、入店した買物客、棚から商品を取った買物客、棚に商品を戻した買物客、および精算のためレジに来た買物客の顔を映像内で認識する。顔認識部１１ｂは、顔認識により顔情報１７ａを作成する。買物客の入店時には新規に顔情報１７ａが記憶部１７に記憶され、それ以外の場合には、顔認識により新たに作成する顔情報１７ａと記憶部１７に既に記憶されている顔情報１７とが照合される。
【００４７】
かご番号検知部１１ｃは、買物客が持った買物かごの番号を映像内で検知し、かご番号情報１７ｂを作成する。なお、入店時のかご番号検知は、入店した買物客が買物かごを持った場合は必ず行われるが、それ以外の場合のかご番号検知は、買物客の顔認識に失敗した場合のみ、行われる。
【００４８】
精算リスト管理部１１ｄは、各買物客の顔情報１７ａに紐付けて、買物客が購入する商品が登録される精算リスト１７ｃを管理する。より具体的には、買物客が商品棚から商品を取った場合には、商品検知部１１ｅにより検知された商品を、顔認識部１１ｂが認識した当該買物客の顔の顔情報１７ａに紐付いた精算リスト１７ｃに追加する。
【００４９】
また、精算リスト管理部１１ｄは、買物客が商品棚に商品を戻した場合には、商品検知部１１ｅにより検知された商品を、顔認識部１１ｂが認識した当該買物客の顔の顔情報１７ａに紐付いた精算リスト１７ｃから削除する。
【００５０】
また、精算リスト管理部１１ｄは、買物客がレジに行った場合には、当該買物客の顔情報１７ａに紐付いた精算リスト１７ｃと当該精算リスト１７ｃに基づいて精算した結果を精算結果送信部１１ｆに渡す。
【００５１】
商品検知部１１ｅは、買物客が商品棚から取った商品および買物客が商品棚に戻した商品を映像内で検知する。検知結果は精算リスト管理部１１ｄに通知される。
【００５２】
精算結果送信部１１ｆは、レジに来た買物客の顔情報１７ａに紐付いた精算リスト１７ｃおよび当該精算リスト１７ｃに基づいて算出された精算結果を精算リスト管理部１１ｄから受け取り、キャッシュレジスター３０に送信する。
【００５３】
以上、サーバー１０の構成について説明した。
【００５４】
［処理の流れ（入店時処理）］
次に、買物客が店舗に入店した際に行われる処理の流れを説明する。図３は、買物客が店舗に入店した際に行われる処理の流れを説明するためのフローチャートである。なお、入店した買物客を撮影した監視カメラ２０の映像は、映像取得部１１ａにより常に取得され続けているものとする。
【００５５】
買物客が店舗に入店すると、まず、顔認識部１１ｂが買物客の顔認識を行い、顔情報１７ａを作成し登録する（ステップＳ１）。
【００５６】
次に、かご番号検知部１１ｃが、入店した買物客が買物かごを利用したか否かを判断する（ステップＳ２）。
【００５７】
買物かごを利用した場合（ステップＳ２のＹ）、かご番号検知部１１ｃが、かご番号の検知を行い、かご番号情報１７ｂを作成する（ステップＳ３）。
【００５８】
次に、かご番号検知部１１ｃが、作成したかご番号情報１７ｂをステップＳ１で作成した顔情報１７ａに紐付けて登録する（ステップＳ４）。
【００５９】
買物かごを利用しなかった場合（ステップＳ２のＮ）、かご番号は検知せず、ステップＳ５の処理に進む。
【００６０】
次に、精算リスト管理部１１ｄが、ステップＳ１で登録された顔情報１７ａに新しい精算リスト１７ｃを紐付けて登録する（ステップＳ５）。
【００６１】
以上の処理で、店舗に入店した買物客について、顔情報１７ａ、かご番号情報１７ｂ、精算リスト１７ｃを紐付けて精算セット１７ｄとして記憶部１７に記憶させることにより、入店後の処理の準備を行う。
【００６２】
以上、買物客が店舗に入店した際に行われる処理の流れを説明した。
【００６３】
［処理の流れ（商品ピックアップ時処理）］
次に、買物客が商品棚から商品を取った際に行われる処理の流れを説明する。図４は、買物客が商品棚から商品を取った際に行われる処理の流れを説明するためのフローチャートである。
【００６４】
まず、商品検知部１１ｅが、買物客が商品棚から商品を取ったか否かを判断する（ステップＳ１０）。
【００６５】
商品を取っていない場合（ステップＳ１０のＮ）、ステップＳ１０に戻る。
【００６６】
商品を取った場合（ステップＳ１０のＹ）、商品検知部１１ｅが、買物客が商品棚から取った商品を検知する（ステップＳ１１）。
【００６７】
次に、顔認識部１１ｂが、商品を棚から取った買物客の顔認識を行う（ステップＳ１２）。
【００６８】
次に、顔認識部１１ｂが、顔認識が成功したか否かを判断する（ステップＳ１３）。
【００６９】
顔認識に成功した場合（ステップＳ１３のＹ）、顔認識部１１ｂが顔情報１７ａを作成し精算リスト管理部１１ｄが作成された顔情報１７ａに基づいて記憶部１７内の精算セット１７ｄを検索し、該当する顔情報１７ａに紐付いた精算リスト１７ｃにステップＳ１１で検知された商品を追加し、処理を終了する（ステップＳ１４）。
【００７０】
顔認識に失敗した場合（ステップＳ１３のＮ）、かご番号検知部１１ｃが、顔認識に失敗した買物客の持つかごのかご番号の検知を試みる（ステップＳ１５）。
【００７１】
次に、かご番号検知部１１ｃは、かご番号の検知が成功したか否かを判断する（ステップＳ１６）。
【００７２】
かご番号の検知に成功した場合（ステップＳ１６のＹ）、かご番号検知部１１ｃがかご番号情報１７ｂを作成し精算リスト管理部１１ｄが作成されたかご番号情報１７ｂに基づいて記憶部１７内の精算セット１７ｄを検索し、該当するかご番号情報１７ｂに紐付いた精算リスト１７ｃにステップＳ１１で検知された商品を追加し、処理を終了する（ステップＳ１７）。
【００７３】
かご番号の検知に失敗した場合（ステップＳ１６のＮ）、精算リスト管理部１１ｄは、ステップＳ１１で検知された商品をどの精算リスト１７ｃにも追加せず処理を終了する（ステップＳ１８）。
【００７４】
以上、買物客が商品棚から商品を取った際に行われる処理の流れを説明した。
【００７５】
［処理の流れ（商品戻し時処理）］
次に、買物客が商品を商品棚に戻した際に行われる処理の流れを説明する。図５は、買物客が商品を商品棚に戻した際に行われる処理の流れを説明するためのフローチャートである。
【００７６】
まず、商品検知部１１ｅが、買物客が商品棚に商品を戻したか否かを判断する（ステップＳ２０）。
【００７７】
商品を戻していない場合（ステップＳ２０のＮ）、ステップＳ２０に戻る。
【００７８】
商品を戻した場合（ステップＳ２０のＹ）、商品検知部１１ｅが、買物客が商品棚に戻した商品を検知する（ステップＳ２１）。
【００７９】
次に、顔認識部１１ｂが、商品を棚に戻した買物客の顔認識を行う（ステップＳ２２）。
【００８０】
次に、顔認識部１１ｂが、顔認識が成功したか否かを判断する（ステップＳ２３）。
【００８１】
顔認識に成功した場合（ステップＳ２３のＹ）、顔認識部１１ｂが顔情報１７ａを作成し精算リスト管理部１１ｄが作成された顔情報１７ａに基づいて記憶部１７内の精算セット１７ｄを検索し、該当する顔情報１７ａに紐付いた精算リスト１７ｃからステップＳ２１で検知された商品を削除し、処理を終了する（ステップＳ２４）。
【００８２】
顔認識に失敗した場合（ステップＳ２３のＮ）、かご番号検知部１１ｃが、顔認識に失敗した買物客の持つかごのかご番号の検知を試みる（ステップＳ２５）。
【００８３】
次に、かご番号検知部１１ｃは、かご番号の検知が成功したか否かを判断する（ステップＳ２６）。
【００８４】
かご番号の検知に成功した場合（ステップＳ２６のＹ）、かご番号検知部１１ｃがかご番号情報１７ｂを作成し精算リスト管理部１１ｄが作成されたかご番号情報１７ｂに基づいて記憶部１７内の精算セット１７ｄを検索し、該当するかご番号情報１７ｂに紐付いた精算リスト１７ｃからステップＳ２１で検知された商品を削除し、処理を終了する（ステップＳ２７）。
【００８５】
かご番号の検知に失敗した場合（ステップＳ２６のＮ）、精算リスト管理部１１ｄは、ステップＳ２１で検知された商品をどの精算リスト１７ｃからも削除せず処理を終了する（ステップＳ２８）。
【００８６】
以上、買物客が商品を商品棚に戻した際に行われる処理の流れを説明した。
【００８７】
［処理の流れ（レジ精算時処理）］
次に、買物客が購入する商品の代金を支払うためにレジ前に来た際に行われる処理の流れを説明する。図６は、買物客が購入する商品の代金を支払うためにレジ前に来た際に行われる処理の流れを説明するためのフローチャートである。
【００８８】
まず、顔認識部１１ｂが、買物客がレジに来たか否かを判断する（ステップＳ３０）。
【００８９】
買物客がレジに来ていない場合（ステップＳ３０のＮ）、ステップＳ３０に戻る。
【００９０】
買物客がレジに来た場合（ステップＳ３０のＹ）、顔認識部１１ｂが、レジに来た買物客の顔認識を行う（ステップＳ３１）。
【００９１】
次に、顔認識部１１ｂが、顔認識が成功したか否かを判断する（ステップＳ３２）。
【００９２】
顔認識に成功した場合（ステップＳ３２のＹ）、顔認識部１１ｂが顔情報１７ａを作成し精算リスト管理部１１ｄが作成された顔情報１７ａに基づいて記憶部１７内の精算セット１７ｄを検索し、該当する顔情報１７ａに紐付いた精算リスト１７ｃから精算結果を算出し、精算結果送信部１１ｆが精算リスト１７ｃおよび精算結果をキャッシュレジスター３０に送信し、キャッシュレジスター３０が受信した精算リスト１７ｃおよび精算結果を買物客に提示する（ステップＳ３３）。
【００９３】
顔認識に失敗した場合（ステップＳ３２のＮ）、かご番号検知部１１ｃが、顔認識に失敗した買物客の持つかごのかご番号の検知を試みる（ステップＳ３４）。
【００９４】
次に、かご番号検知部１１ｃは、かご番号の検知が成功したか否かを判断する（ステップＳ３５）。
【００９５】
かご番号の検知に成功した場合（ステップＳ３５のＹ）、かご番号検知部１１ｃがかご番号情報１７ｂを作成し精算リスト管理部１１ｄが作成されたかご番号情報１７ｂに基づいて記憶部１７内の精算セット１７ｄを検索し、該当するかご番号情報１７ｂに紐付いた精算リスト１７ｃから精算結果を算出し、精算結果送信部１１ｆが精算リスト１７ｃおよび精算結果をキャッシュレジスター３０に送信し、キャッシュレジスター３０が受信した精算リスト１７ｃおよび精算結果を買物客に提示する（ステップＳ３６）。
【００９６】
かご番号の検知に失敗した場合（ステップＳ３５のＮ）、かご番号検知部１１ｃは、キャッシュレジスター３０に対しその旨を通知し、キャッシュレジスター３０は、買物客およびレジスタッフに対し、手動での精算を行うよう提示する（ステップＳ３７）。
【００９７】
以上、買物客が購入する商品の代金を支払うためにレジ前に来た際に行われる処理の流れを説明した。
【００９８】
＜変形例＞
上記の説明では、１人の買物客の顔情報１７ａとかご番号情報１７ｂと精算リスト１７ｃとが、１対１で組になって精算セット１７ｄとして記憶部１７に記憶される構成としたが、これに限らず、複数の顔情報と１つのかご番号情報と１つの精算リストが組になって記憶部１７に記憶される構成もあってもよい。
【００９９】
複数の顔情報と１つのかご番号情報と１つの精算リストを組に出来ると、１つの買い物かごをシェアして家族または友人などグループで買い物をする場合でも対応することが出来る。
【０１００】
［補足事項］
以上のように、本発明に係る商品精算システム１００は、ネットワーク接続された、１以上の監視カメラ２０と、キャッシュレジスター３０と、サーバー１０とを含み、前記サーバー１０は、前記１以上の監視カメラ２０および前記キャッシュレジスター３０と通信可能な通信部１５と、前記１以上の監視カメラ２０から撮影された映像を取得する映像取得部１１ａと、店舗に入店した買物客、商品棚から商品を取った買物客、商品棚に商品を戻した買物客、および精算のため前記キャッシュレジスター３０の前に来た買物客の顔を前記映像内で認識し、各買物客の顔情報１７ａを作成する顔認識部１１ｂと、買物客が商品棚から取った商品および買物客が商品棚に戻した商品を前記映像内で検知する商品検知部１１ｅと、各買物客の前記顔情報１７ａに紐付けて、買物客が購入する商品が登録される精算リスト１７ｃを管理する精算リスト管理部１１ｄと、前記キャッシュレジスター３０の前に来た買物客の前記顔情報１７ａに紐付いた精算リスト１７ｃおよび当該精算リスト１７ｃに基づいて算出された精算結果を前記精算リスト管理部１１ｄから受け取り、前記キャッシュレジスター３０に送信する精算結果送信部１１ｆとを備える。
【０１０１】
そのため、買物客の手間を増やさずレジでの精算時間を短縮できる。
【０１０２】
その他、本発明は、上述の実施形態にのみ限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。
【符号の説明】
【０１０３】
１０  …  サーバー
１１  …  ＣＰＵ
１１ａ…  映像取得部
１１ｂ…  顔認識部
１１ｃ…  かご番号検知部
１１ｄ…  精算リスト管理部
１１ｅ…  商品検知部
１１ｆ…  精算結果送信部
１２  …  ＲＯＭ
１３  …  ＲＡＭ
１４  …  操作入力部
１５  …  通信部
１６  …  表示部
１７  …  記憶部
１７ａ…  顔情報
１７ｂ…  かお番号情報
１７ｃ…  精算リスト
１７ｄ…  精算セット
１８  …  バス
２０  …  監視カメラ
３０  …  キャッシュレジスター
１００  …  商品精算システム
【図１】
2018180717.tif 000003
【図２】
2018180717.tif 000004
【図３】
2018180717.tif 000005
【図４】
2018180717.tif 000006
【図５】
2018180717.tif 000007
【図６】
2018180717.tif 000008