(57)【要約】【課題】バーコードが付されていない商品であって類似する形状の商品であっても、商品の選択を容易にするために商品の候補を選別して商品選択画面として画面表示することが可能なセルフチェックアウト装置、方法、およびプログラムを提供すること。【解決手段】顧客の操作により買上げ商品の商品登録処理およびその代金の精算処理を行うセルフチェックアウト装置において、買上げ商品の色情報を取得し、買上げ商品のニオイ情報を取得し、商品を識別するための商品名、商品価格および商品画像を含む商品情報を商品の色情報およびニオイ情報と対応付けて格納した商品データベースを参照することで、取得された色情報およびニオイ情報に対応する商品情報を検索し、検索された商品情報を選択可能に表示する。【選択図】図３
2017146854.tif 000002
【特許請求の範囲】
【請求項１】
顧客の操作により買上げ商品の商品登録処理およびその代金の精算処理を行うセルフチェックアウト装置において、
前記買上げ商品の色情報を取得する色情報取得部と、
前記買上げ商品のニオイ情報を取得するニオイ情報取得部と、
商品を識別するための商品名、商品価格および商品画像を含む商品情報を前記商品の色情報およびニオイ情報と対応付けて格納した商品データベースと、
前記色情報取得部によって取得された色情報および前記ニオイ情報取得部によって取得されたニオイ情報に対応する商品情報を前記商品データベースから検索する検索部と、
前記検索部によって検索された商品情報を選択可能に表示する表示部と、
を備えることを特徴とするセルフチェックアウト装置。
【請求項２】
前記表示部は、前記検索された商品情報の商品数が複数の場合、前記取得された色情報およびニオイ情報と前記検索された商品情報に対応する色情報およびニオイ情報の類似度が高い順に表示する、
ことを特徴とする請求項１に記載のセルフチェックアウト装置。
【請求項３】
前記色情報取得部は、前記買上げ商品を撮像した買上げ商品画像から前記色情報を取得する、
ことを特徴とする請求項１または２に記載のセルフチェックアウト装置。
【請求項４】
前記色情報取得部は、前記買上げ商品画像のＲＧＢ値を取得し、
前記商品データベースは、前記商品のＲＧＢ値を含む色情報を格納し、
前記検索部は、前記色情報取得部によって取得されたＲＧＢ値に対応するＲＧＢ値を前記商品データベースから検索する、
ことを特徴とする請求項３に記載のセルフチェックアウト装置。
【請求項５】
前記ニオイ情報取得部が取得するニオイ情報は、複数のニオイ成分の各々に応答特性を有する複数のニオイセンサが検出した前記買上げ商品から発生するニオイ成分の強度データである、
ことを特徴とする請求項１乃至４の何れか１項に記載のセルフチェックアウト装置。
【請求項６】
買上げ商品は、前記商品情報を商品データベースから検索する為のキーの一つであるバーコードが付されていない商品である、
ことを特徴とする請求項１乃至５の何れか１項に記載のセルフチェックアウト装置。
【請求項７】
顧客の操作により買上げ商品の商品登録処理およびその代金の精算処理を行うセルフチェックアウト装置において実行されるセルフチェックアウト方法であって、
前記買上げ商品の色情報を取得し、
前記買上げ商品のニオイ情報を取得し、
商品を識別するための商品名、商品価格および商品画像を含む商品情報を前記商品の色情報およびニオイ情報と対応付けて格納した商品データベースを参照することで、前記取得された色情報およびニオイ情報に対応する商品情報を検索し、
前記検索された商品情報を選択可能に表示する、
ことを特徴とするセルフチェックアウト方法。
【請求項８】
顧客の操作により買上げ商品の商品登録処理およびその代金の精算処理を行うセルフチェックアウト装置におけるセルフチェックアウトプログラムであって、
前記セルフチェックアウト装置のコンピュータを、
前記買上げ商品の色情報を取得する色情報取得手段、
前記買上げ商品のニオイ情報を取得するニオイ情報取得手段、
商品を識別するための商品名、商品価格および商品画像を含む商品情報を前記商品の色情報およびニオイ情報と対応付けて格納した商品データベースを参照することで、前記色情報取得手段によって取得された色情報および前記ニオイ情報取得手段によって取得されたニオイ情報に対応する商品情報を検索する検索手段、
前記検索手段によって検索された商品情報を選択可能に表示する表示手段、
として機能させるためのセルフチェックアウトプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、購入予定商品の商品登録および登録した商品の精算処理を、顧客（買物客）自身が行うためのセルフチェックアウト装置、セルフチェックアウト方法、およびセルフチェックアウトプログラムに関する。
【背景技術】
【０００２】
従来、スーパーマーケット、大型量販店等の商品販売の現場では、セルフチェックアウト装置（セルフＰＯＳ（Point Of Sales）装置、セルフレジ装置）が増加している。セルフチェックアウト装置では、専任のレジ担当者が行っていた購入予定商品の商品登録および登録した商品の精算処理を顧客自身が行う。これにより、レジ業務を少ない人員で行うことができ、店舗の省力化、レジ待ち行列の待ち時間短縮に貢献している。
【０００３】
例えば、セルフチェックアウト装置を利用する場合、顧客自身は、商品に付されたバーコードをバーコードリーダでスキャンすることによって商品の商品登録を行う。そして、全ての商品の商品登録後、現金の投入またはクレジットカード等を挿入する。これにより精算処理が行われて、セルフチェックアウト装置から釣銭、使用したクレジットカードおよびレシートが排出され、顧客がこれらを受け取って取引が終了する。ところが、バーコードが付されていない商品の場合、セルフチェックアウト装置の画面のメニューを操作し、顧客が該当する商品を探して選択しなければならない。例えば、顧客が画面のメニューから該当商品を選択するまで複数回の操作を行う必要があり、操作が煩雑である。また、該当商品のカテゴリや名称が思い浮かばないような場合には、探しだすことが困難である。
【０００４】
そこで、商品の選択を容易にするために、カメラで商品を撮像して得た画像データを処理し、商品の形状を認識することで、商品の候補を選別して商品選択画面として画面表示するセルフチェックアウト装置が開示されている（例えば、特許文献１参照。）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０１４−１３９８４７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、種類の異なる商品であっても形状が類似する商品も多数存在する。例えば、キャベツとレタスは共に球状であり類似する。また、パプリカとピーマンも形状が類似する。このように形状の類似する商品については、カメラで撮像した形状を用いても商品の候補を絞り込むことができない、という問題がある。
【０００７】
本発明は、上述のような実状に鑑みたものであり、バーコードが付されていない商品であって類似する形状の商品であっても、商品の選択を容易にするために商品の候補を選別して商品選択画面として画面表示することが可能なセルフチェックアウト装置、セルフチェックアウト方法、およびセルフチェックアウトプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
本発明は、上記課題を解決するため、下記のような構成を採用した。
すなわち、本発明の一態様によれば、本発明のセルフチェックアウト装置は、顧客の操作により買上げ商品の商品登録処理およびその代金の精算処理を行うセルフチェックアウト装置において、前記買上げ商品の色情報を取得する色情報取得部と、前記買上げ商品のニオイ情報を取得するニオイ情報取得部と、商品を識別するための商品名、商品価格および商品画像を含む商品情報を前記商品の色情報およびニオイ情報と対応付けて格納した商品データベースと、前記色情報取得部によって取得された色情報および前記ニオイ情報取得部によって取得されたニオイ情報に対応する商品情報を前記商品データベースから検索する検索部と、前記検索部によって検索された商品情報を選択可能に表示する表示部とを備えることを特徴とする。
【０００９】
また、本発明のセルフチェックアウト装置は、前記表示部が、前記検索された商品情報の商品数が複数の場合、前記取得された色情報およびニオイ情報と前記検索された商品情報に対応する色情報およびニオイ情報の類似度が高い順に表示することが望ましい。
【００１０】
また、本発明のセルフチェックアウト装置は、前記色情報取得部が、前記買上げ商品を撮像した買上げ商品画像から前記色情報を取得することが望ましい。
【００１１】
また、本発明のセルフチェックアウト装置は、前記色情報取得部が、前記買上げ商品画像のＲＧＢ値を取得し、前記商品データベースが、前記商品のＲＧＢ値を含む色情報を格納し、前記検索部が、前記色情報取得部によって取得されたＲＧＢ値に対応するＲＧＢ値を前記商品データベースから検索することが望ましい。
【００１２】
また、本発明のセルフチェックアウト装置は、前記ニオイ情報取得部が取得するニオイ情報が、複数のニオイ成分の各々に応答特性を有する複数のニオイセンサが検出した前記買上げ商品から発生するニオイ成分の強度データであることが望ましい。
【００１３】
また、本発明のセルフチェックアウト装置は、買上げ商品が、前記商品情報を商品データベースから検索する為のキーの一つであるバーコードが付されていない商品であることが望ましい。
【００１４】
また、本発明の一態様によれば、本発明のセルフチェックアウト方法は、顧客の操作により買上げ商品の商品登録処理およびその代金の精算処理を行うセルフチェックアウト装置において実行されるセルフチェックアウト方法であって、前記買上げ商品の色情報を取得し、前記買上げ商品のニオイ情報を取得し、商品を識別するための商品名、商品価格および商品画像を含む商品情報を前記商品の色情報およびニオイ情報と対応付けて格納した商品データベースを参照することで、前記取得された色情報およびニオイ情報に対応する商品情報を検索し、前記検索された商品情報を選択可能に表示することを特徴とする。
【００１５】
また、本発明の一態様によれば、本発明のセルフチェックアウトプログラムは、顧客の操作により買上げ商品の商品登録処理およびその代金の精算処理を行うセルフチェックアウト装置におけるセルフチェックアウトプログラムであって、前記セルフチェックアウト装置のコンピュータを、前記買上げ商品の色情報を取得する色情報取得手段、前記買上げ商品のニオイ情報を取得するニオイ情報取得手段、商品を識別するための商品名、商品価格および商品画像を含む商品情報を前記商品の色情報およびニオイ情報と対応付けて格納した商品データベースを参照することで、前記色情報取得手段によって取得された色情報および前記ニオイ情報取得手段によって取得されたニオイ情報に対応する商品情報を検索する検索手段、前記検索手段によって検索された商品情報を選択可能に表示する表示手段として機能させるためのセルフチェックアウトプログラムである。
【発明の効果】
【００１６】
本発明によれば、バーコードが付されていない商品であって類似する形状の商品であっても、商品の選択を容易にするために商品の候補を選別して商品選択画面として画面表示することができ、セルフチェックアウト装置を用いて商品を購入する際の顧客による操作を簡略化することができ、商品の購入時間が大幅に短縮できる、という効果を奏する。
【図面の簡単な説明】
【００１７】
【図１】本実施の形態のセルフチェックアウト装置の外観を示す図である。
【図２】本実施の形態のセルフチェックアウト装置のハードウェア構成図である。
【図３】本実施の形態のセルフチェックアウト装置の機能ブロック図である。
【図４】本実施の形態のセルフチェックアウト処理の流れを示すフローチャートである。
【図５】本実施の形態における色情報およびニオイ情報のデータ構造例を示す図である。
【図６】本実施の形態のセルフチェックアウト装置に表示される画面例を示す図である。
【発明を実施するための形態】
【００１８】
以下、本発明の実施の形態について、図面を参照しながら詳細に説明する。
図１は、実施の形態に係るセルフチェックアウト装置の外観構成例を示す図である。
【００１９】
図１に示すように、セルフチェックアウト装置１０は、筐体１１と筐体１２を備え、顧客が行う操作により購入予定商品の商品登録処理および登録した商品の精算処理を実行する。筐体１１および筐体１２は、セルフチェックアウト装置１０を統括的に制御する不図示の制御装置（図２中の制御装置１００）や、外部との通信を行う不図示の通信装置や、不図示の電源装置等を収容する。
【００２０】
また、セルフチェックアウト装置１０は、筐体１１の上方に、ＬＣＤ（Liquid Crystal Display：液晶ディスプレイ）１３、タッチパネル１４、カードＲ／Ｗ（Reader/Writer）１５、カメラスキャナ１６、不図示のハンディスキャナ（図２中のハンディスキャナ２４）、レシートプリンタ１７、臭気センサ装置１８、色識別用カメラ１９および金銭取扱装置収納部２０を備える。
【００２１】
ＬＣＤ１３は、各種の情報を表示する。例えば、ＬＣＤ１３は、セルフチェックアウト装置１０の操作案内および操作メニューや、カメラスキャナ１６またはハンディスキャナで読み取ったバーコード（商品情報）に基づく商品名、商品単価、商品重量等の商品精算に伴う情報、精算時の預かり金額、買い物合計の金額、および釣銭額等の情報を表示する。なお、バーコードは、商品に付されているコードの一例である。また、ＬＣＤ１３は、バーコードの付されていない商品を精算するための商品選択用の案内表示を行う。このとき、顧客は、ＬＣＤ１３の案内表示に従い、表面をタッチすることで選択操作を行うことができる。
【００２２】
タッチパネル１４は、抵抗膜式、静電容量式または光学式等の透過型タッチパネルであり、ＬＣＤ１３の表示に従った顧客のタッチ操作による操作情報の入力を受け付ける。タッチパネル１４は、ＬＣＤ１３の上層に位置している。
【００２３】
カードＲ／Ｗ１５は、磁気カード（例えば、クレジットカード）の磁気ストライプに記録された情報を読み取る。
【００２４】
カメラスキャナ１６は、例えば下方読取方式のスキャナであって、セルフチェックアウト装置１０に固定されている。カメラスキャナ１６は、撮像して得られた画像内に、商品に付されているバーコードの存在が認識された場合に、そのバーコードを読み取る。
【００２５】
図示しないハンディスキャナは、カメラスキャナ１６で読み取ることができないバーコードを読み取ることができるように、不図示の制御装置に有線または無線で接続され、移動可能である。図示しないハンディスキャナは、商品に付されているバーコードにレーザ走査線を照射し、そのバーコードを読み取る。
【００２６】
レシートプリンタ１７は、購入した商品の名称（商品名）、商品単価、預かり金額、釣銭金額等の情報が記載されたレシートを印刷する。
【００２７】
臭気センサ装置１８は、野菜、果物、肉類、魚類等の各種の臭気物質に対して応答特性を有するセンサを有する。センサは、例えば、ニオイ（臭い、匂い）の元となる原因物質に応じて電気抵抗値が変化するガスセンサである。このような臭気センサ装置１８は、複数のセンサにより取得された検出信号に基づいて、クラスター分析や主成分分析等の各種多変量解析処理、ニューラルネットワークを用いた非線形解析処理等を行う。これらの処理結果として、臭気物質のニオイの強度を算出する。例えば、ｍ個の原因物質に応答特性を有するｍ個のセンサで測定すると、各センサからその強度信号が出力されるため、ｍ個の測定データが生成される。これらの測定データは、ｍ次元空間（臭気空間）における１つの点で表される。臭気物質の濃度が相違するように複数回測定すると、その濃度変化に伴って臭気空間での点が原点から或る一定の方向に移動する。この点を繋ぐ１本の線は、その臭気物質のニオイの種類に対応する特有な向きを有する。したがって、予め、標準臭気を有する標準物質の測定結果を臭気空間において位置付けて記憶させることにより、臭気物質の測定結果と標準物質の測定結果との方向が類似する場合には、両者は近い種類のニオイであると判断する。他方、方向が大きく異なる場合には、両者は遠い種類のニオイであると判断する。
【００２８】
また、臭気センサ装置１８は、それぞれ異なる種類の吸着膜を形成した複数の水晶振動子の振動数変化を同時に計測し、振動子間の振動数変化比をパターン解析することで、ニオイの種類を識別するマルチアレイ型を用いることもできる。この場合、ニオイの識別精度を高めるには、用いる吸着膜を備える振動子の種類を増やすことが有効である。
【００２９】
色識別用カメラ１９は、例えば、ＲＧＢカメラであり、撮像した画像のＲＧＢ値を検出する。ＲＧＢカメラは、赤（Ｒ）、緑（Ｇ）、青（Ｂ）の３つの色成分毎に光の強度を検出するカラーセンサを有する。
【００３０】
金銭取扱装置収納部２０は、不図示の釣札機（紙幣取扱装置）と不図示の釣銭機（硬貨取扱装置）を収容する。また、金銭取扱装置収納部２０は、紙幣投入口２０ａ、紙幣出金口２０ｂ、硬貨投入口２０ｃ、硬貨返却口２０ｄ、および硬貨出金口２０ｅを備える。紙幣投入口２０ａは、商品の代金の会計時に買物客により１枚ずつ、または束状態の複数の紙幣を短手方向に投入可能に構成された開口部であり、釣札機に入金する紙幣の投入口である。紙幣出金口２０ｂは、投入キャンセルされた紙幣、識別不能な紙幣、釣銭としての紙幣を釣札機から出金するための開口部である。硬貨投入口２０ｃは、商品の代金の会計時に買物客により１または複数の硬貨を投入可能に構成された開口部であり、釣銭機に入金する硬貨の投入口である。硬貨返却口２０ｄは、投入キャンセルされた硬貨、識別不能な硬貨として釣銭機から返却される硬貨の取り出し口である。硬貨出金口２０ｅは、釣銭機から出金する硬貨の取り出し口である。
【００３１】
また、セルフチェックアウト装置１０は、金銭取扱装置収納部２０の右側に商品仮置き台２１を備え、筐体１２の上方に買物袋懸吊部２２および合計重量計量用秤２３を備える。
【００３２】
商品仮置き台２１は、顧客が精算前の商品を入れた買物かごを載置する台である。買物袋懸吊部２２は、備え付けのレジ袋、顧客が持参したマイバッグ等を吊り下げ可能に構成される。合計重量計量用秤２３は、精算対象として商品登録した商品の合計重量を計量する。
【００３３】
このようなセルフチェックアウト装置１０を使用する顧客は、まず、精算前の商品を入れた買物かごを商品仮置き台２１に載置する。そして、カメラスキャナ１６を用いて商品に付されたバーコードを読み取ることにより、その商品の商品登録作業を行う。精算対象として商品登録をした商品は、買物袋懸吊部２２に吊り下げたレジ袋等に納められ、合計重量計量用秤２３により精算対象として商品登録した商品の合計重量が計量される。個別の商品の重量と、合計重量計量用秤２３により計量した重量の増分との差が所定の許容範囲内にあれば、精算対象として商品登録した商品の精算を行う。
【００３４】
次に、買物かごに入れた商品の商品登録作業を終えた顧客は、カードＲ／Ｗ１５へのクレジットカードの挿入、紙幣投入口２０ａへの紙幣投入、硬貨投入口２０ｃへの硬貨投入により精算を行うことができる。そして、セルフチェックアウト装置１０は、釣銭が生じた場合、紙幣出金口２０ｂからの紙幣払い出しおよび硬貨出金口２０ｅからの硬貨払い出しにより釣銭を払い出す。また、セルフチェックアウト装置１０は、取引内容等をレシートプリンタ１７で印字してレシートを発行する。
【００３５】
図２は、実施の形態に係るセルフチェックアウト装置のハードウェア構成例を示す図である。
【００３６】
図２に示すように、セルフチェックアウト装置１０は、ＬＣＤ１３、タッチパネル１４、カメラスキャナ１６、ハンディスキャナ２４、カードＲ／Ｗ１５、レシートプリンタ１７、音声出力装置２５、入出金装置２６、合計重量計量用秤２３、臭気センサ装置１８、色識別用カメラ１９および制御装置１００を備える。
【００３７】
制御装置１００は、ＣＰＵ（Central Processing Unit）１０１、ＲＡＭ（Random Access Memory）１０２、ＨＤＤ（Hard Disk Drive）１０３、通信インタフェース１０４、グラフィック処理装置１０５および入出力インタフェース１０６を備え、これらがバス１０７を介して互いに接続されている。また、制御装置１００は、グラフィック処理装置１０５を介してＬＣＤ１３と接続されている。また、制御装置１００は、入出力インタフェース１０６を介して、タッチパネル１４、カメラスキャナ１６、ハンディスキャナ２４、カードＲ／Ｗ１５、レシートプリンタ１７、音声出力装置２５、入出金装置２６、合計重量計量用秤２３、臭気センサ装置１８および色識別用カメラ１９と接続されている。そして、制御装置１００は、これらの接続された各装置を統括的に制御する。
【００３８】
ＣＰＵ１０１は、バス１０７を介して、ＨＤＤ１０３からＲＡＭ１０２上にプログラムを読み出して実行する。これにより、後述のセルフチェックアウト処理を含む、セルフチェックアウト装置１０の各種動作が行われる。
【００３９】
ＲＡＭ１０２は、ＣＰＵ１０１により実行される、ＯＳ（Operating System）やアプリケーション等のプログラムの一部が一時的に格納される他、後述するテーブルデータや画像データ等、ＣＰＵ１０１の処理に必要な各種データが格納される。
【００４０】
ＨＤＤ１０３には、プログラムや各種データが格納されている。なお、ＨＤＤ１０３に格納されるプログラムや各種データは、例えば、不図示のプログラム提供者端末装置から不図示のネットワークおよび通信インタフェース１０４を介して格納されるものであってもよい。
【００４１】
通信インタフェース１０４は、例えばＬＡＮ（Local Area Network）等のネットワークを介して、外部装置と通信を行う。
【００４２】
グラフィック処理装置１０５は、ＣＰＵ１０１の制御の下に、ＬＣＤ１３に表示させる画像データを生成し、当該画像データを画像信号に変換して、ＬＣＤ１３へ出力する。
【００４３】
また、入出力インタフェース１０６には、不図示の媒体読取装置も接続されており、当該媒体読取装置にセットされた可搬型記憶媒体に対して、データの書込みまたは読み出しが可能である。なお、ＣＰＵ１０１により実行されるプログラムは、その可搬型記憶媒体に記憶されていてもよい。この場合、ＣＰＵ１０１は、媒体読取装置にセットされた可搬記憶媒体からＲＡＭ１０２上にプログラムを読み出して実行するようにしてもよい。可搬型記憶媒体は、例えば、ＣＤ−ＲＯＭ（Compact Disc Read Only Memory）、フレキシブルディスク、光ディスク、光磁気ディスク、ＤＶＤ（Digital Versatile Disc）ディスク、ＵＳＢ（Universal Serial Bus）メモリなど様々な形式の記憶媒体のいずれでもよい。
【００４４】
ハンディスキャナ２４は、カメラスキャナ１６で読み取ることができないバーコードを読み取ることができるように移動可能であり、商品に付されているバーコードにレーザ走査線を照射し、そのバーコードを読み取る。
【００４５】
音声出力装置２５は、ブザーを含み、商品登録から支払いまでの一連の処理の中で、必要な音声を出力する。例えば、音声出力装置２５は、カメラスキャナ１６によりバーコードが読み取られた時に読取音を出力する。
【００４６】
入出金装置２６は、上述した釣札機および釣銭機を含む。
ＬＣＤ１３、タッチパネル１４、カメラスキャナ１６、カードＲ／Ｗ１５、レシートプリンタ１７、合計重量計量用秤２３、臭気センサ装置１８および色識別用カメラ１９は、図１を用いて説明した通りである。
【００４７】
図３は、本実施の形態のセルフチェックアウト装置の機能ブロック図である。
図３に示すように、セルフチェックアウト装置１０は、色情報取得部２００、ニオイ情報取得部３００、商品データベース４００、検索部５００および表示部６００を備え、顧客の操作により買上げ商品の商品登録処理およびその代金の精算処理を行う。
【００４８】
色情報取得部２００は、買上げ商品の色情報を取得する。例えば、色情報取得部２００は、買上げ商品を撮像した買上げ商品画像から色情報を取得する。例えば、買上げ商品は、商品価格および商品画像を含む商品情報を商品データベースから検索する為のキーの一つであるバーコードが付されていない商品である。
【００４９】
ニオイ情報取得部３００は、買上げ商品のニオイ情報を取得する。ニオイ情報取得部３００が取得するニオイ情報は、例えば、複数のニオイ成分の各々に応答特性を有する複数のニオイセンサが検出した買上げ商品から発生するニオイ成分の強度データである。ニオイ成分としては、テルペン類、エステル類、アルコール類、アルデヒド類、ケトン類、含硫化合物、窒素化合物等がある。例えば、グレープフルーツのニオイは、「ヌートカトン」というテルペン類であり、マツタケのニオイは、「マツタケオール」というアルコール類が主成分である。
【００５０】
商品データベース４００は、商品を識別するための商品名、商品価格および商品画像を含む商品情報を商品の色情報およびニオイ情報と対応付けて格納している。
【００５１】
検索部５００は、色情報取得部２００によって取得された色情報およびニオイ情報取得部３００によって取得されたニオイ情報に対応する商品情報を商品データベース４００から検索する。
【００５２】
表示部６００は、検索部５００によって検索された商品情報を選択可能に表示する。
表示部６００は、検索された商品情報の商品数が複数の場合、取得された色情報およびニオイ情報と検索された商品情報に対応する色情報およびニオイ情報の類似度が高い順に表示する。
【００５３】
例えば、色情報取得部２００は、買上げ商画像のＲＧＢ値を取得し、商品データベース４００は、商品のＲＧＢ値を含む色情報を格納し、検索部５００は、色情報取得部２００によって取得されたＲＧＢ値に対応するＲＧＢ値を商品データベース４００から検索する。
【００５４】
図４は、本実施の形態のセルフチェックアウト処理の流れを示すフローチャートであり、図５は、本実施の形態における色情報およびニオイ情報のデータ構造例を示す図であり、図６は、本実施の形態のセルフチェックアウト装置に表示される画面例を示す図である。
【００５５】
これらの図４乃至図６を用いて、上述のセルフチェックアウト装置１０が実行するセルフチェックアウト処理の流れを説明する。
【００５６】
セルフチェックアウト装置１０が実行するセルフチェックアウト処理は、顧客が初期画面を手指でタッチすることにより開始される。例えば、顧客がＬＣＤ１３に表示されている初期画面の「商品登録」ボタンをタッチすることにより、セルフチェックアウト処理が開始される。
【００５７】
セルフチェックアウト処理が開始されると、顧客が商品仮置き台２１に載置した買物かご内の商品を取り出し、通常、カメラスキャナ１６またはハンディスキャナ２４を用いて商品に付されたバーコードを読み取らせる。これにより、その商品が商品登録される。この時、ＬＣＤ１３の画面には、その時点で商品登録された商品の合計額（小計）が表示される。バーコードの読み取りおよび商品の商品登録は、買物かご内の全ての商品の商品登録が終了するまで繰り返される。
【００５８】
他方、商品にバーコードが付されていない場合、顧客が商品を色識別用カメラ１９に翳すことにより、ＣＰＵ１０１は、図４のステップＳ４０１において、色識別用カメラ１９で商品そのものを撮像する。
【００５９】
ＣＰＵ１０１は、ステップＳ４０２において、ステップＳ４０１で撮像した商品画像から色情報を取得する。例えば、色識別用カメラ１９が有するカラーセンサにより画像のＲＧＢ値、すなわち、Ｒ値、Ｇ値、Ｂ値の３つの色成分毎に光の強度を検出する。図５（ａ）には、Ｒ値が「９９」、Ｇ値が「１４１」、Ｂ値が「０」の例が示されている。
【００６０】
なお、ＲＧＢ値に加え、明度や彩度を用いてもよい。また、ＲＧＢ値の検出は、１箇所だけでもよいし、複数個所でもよい。複数個所を検出した場合には、各検出値の平均値をＲＧＢ値としてもよいし、各検出値の分布やバラつきを用いることもできる。
【００６１】
また、顧客が商品を色識別用カメラ１９に翳すとともに臭気センサ装置１８に翳すことにより、ＣＰＵ１０１は、ステップＳ４０３において、臭気センサ装置１８で商品のニオイ情報を取得する。例えば、臭気センサ装置１８が有する複数のニオイセンサにより、テルペン類、エステル類、アルコール類、アルデヒド類、ケトン類、含硫化合物、窒素化合物等のニオイ成分の強度データを取得する。図５（ａ）には、ニオイ成分Ａが「５６」、ニオイ成分Ｂが「２１」の例が示されている。
【００６２】
なお、ステップＳ４０１およびＳ４０２による色情報の取得と、ステップＳ４０３によるニオイ情報の取得は、順不同でありどちらが先でもよい。また、何れが先であっても、両取得処理は極めて短時間に実行される。商品が撮像されニオイがセンシングされるタイミングは、例えば、顧客が臭気センサ装置１８および色識別用カメラ１９に商品を翳すことを赤外線センサ等で検知することで実行することができる。また、ニオイのセンシングに際しては、次のニオイが前のニオイと混合しないようにするために、例えば、前のニオイのセンシング直後に無臭の気体を強制的に臭気センサ装置１８に送気することができる。
【００６３】
ＣＰＵ１０１は、ステップＳ４０４において、ステップＳ４０２で取得した色情報に基づいて、対応する商品情報を商品データベース４００から検索する。商品データベース４００には、商品を識別するための商品名、商品価格および商品画像を含む商品情報が商品の色情報およびニオイ情報と対応付けられて格納されている。図５（ｂ）には、例えば、Ｒ値「５１」、Ｇ値「１５３」、Ｂ値「５１」、ニオイ成分Ａ「２１」、ニオイ成分Ｂ「１５」の商品名「ブロッコリー」の他、「ほうれんそう」「小松菜」「水菜」等の例が示されている。また、取得した色情報との差分が所定範囲内の商品情報が検索の範囲となる。
【００６４】
ＣＰＵ１０１は、ステップＳ４０５において、検索された商品情報を色情報の差分で昇順に順位付け（ランキング）する。すなわち、色情報の差分が小さい方が順位は高くなる。色情報の差分で昇順に順位付けすることは、撮像された商品の色情報と検索された商品情報の色情報とが類似することを示している。例えば、図５（ｃ）に示した例では、ステップＳ４０２で取得したＲＧＢ値（Ｒ値「９９」、Ｇ値「１４１」、Ｂ値「０」）とステップＳ４０４で検索した「ブロッコリー」のＲＧＢ値（Ｒ値「５１」、Ｇ値「１５３」、Ｂ値「５１」）との各差分（「４８」「１２」「５１」）を算出する。そして、これら各差分の和である色差分計（「１１１」）を算出する。同様に、「ほうれんそう」「小松菜」「水菜」等、検索された商品について色差分計を算出する。この色差分計を昇順に順位付けする。なお、図５（ｃ）では、色差分順位として順位付けされている。
【００６５】
ＣＰＵ１０１は、ステップＳ４０６において、ステップ４０３で取得したニオイ情報に基づいて、対応する商品情報を商品データベース４００から検索する。
【００６６】
ＣＰＵ１０１は、ステップＳ４０７において、検索された商品情報をニオイ情報の差分で昇順に順位付けする。すなわち、ニオイ情報の差分が小さい方が順位は高くなる。ニオイ情報の差分で昇順に順位付けすることは、撮像された商品のニオイ情報と検索された商品情報のニオイ情報とが類似することを示している。例えば、図５（ｃ）に示した例では、ステップＳ４０２で取得したニオイ情報（ニオイ成分Ａ「５６」、ニオイ成分Ｂ「２１」）とステップＳ４０６で検索した「ブロッコリー」のニオイ情報（ニオイ成分Ａ「２１」、ニオイ成分Ｂ「１５」）との各差分（「３５」「６」）を算出する。そして、これら各差分の和であるニオイ成分差分計（「４１」）を算出する。同様に、「ほうれんそう」「小松菜」「水菜」等、検索された商品についてニオイ成分差分計を算出する。このニオイ成分差分計を昇順に順位付けする。なお、図５（ｃ）では、ニオイ成分差分順位として順位付けされている。
【００６７】
ＣＰＵ１０１は、ステップＳ４０８において、検索された商品情報を色情報およびニオイ情報の差分で順位付けする。例えば、色差分計とニオイ成分差分計との和を算出して総合的に順位付けする。または、色差分計の順位とニオイ成分差分計の順位の和で順位付けしてもよい。
【００６８】
ＣＰＵ１０１は、ステップＳ４０９において、ステップＳ４０９で順位付けされた総合順位の高い順に、換言すれば、取得された色情報およびニオイ情報と検索された商品情報に対応する色情報およびニオイ情報の類似度が高い順に、ＬＣＤ１３の画面に商品情報を選択可能に表示する。例えば、図５に示した例で総合順位が１位の「ほうれんそう」の商品情報は、図６に示すように、ＬＣＤ１３の画面の左上に表示されている。そして、２位の「モロヘイヤ」がその右側に表示され、３位の「小松菜」が更にその右側に表示されている。
【００６９】
顧客は、ＬＣＤ１３の画面に表示されている商品情報から該当する商品をタッチすることで、バーコードの読み取りと同様に商品の商品登録を行うことができる。そして、商品登録が終了すると、従来と同様に支払い処理を実行する。
【００７０】
上述したように、実施の形態のセルフチェックアウト処理は、顧客が自ら商品を登録する操作で、バーコードが付されていない商品、例えば、ばら売りの野菜や果物等を登録する場合に実行される。顧客が商品を色識別用カメラ１９および臭気センサ装置１８に翳すと、商品について事前登録してある商品データベース４００の情報により、色とニオイが判別された商品の候補が選出される。
【００７１】
選出された商品の情報は、ＬＣＤ１３の左上から右方向に向かって類似度の高い順に一画面内に表示される。顧客は、ＬＣＤ１３の一画面に表示された商品群から該当する商品を探し出してタッチ操作する。これにより、顧客が画面の頁切替ボタンを何度も何度も操作して、該当する商品を探し出す手間を削減することができる。
【００７２】
以上、本発明の実施の形態を、図面を参照しながら説明してきたが、上述してきた本発明の実施の形態は、セルフチェックアウト装置の一機能としてハードウェアまたはＤＳＰ（Digital Signal Processor）ボードやＣＰＵボードでのファームウェアもしくはソフトウェアにより実現することができる。
【００７３】
また、本発明が適用されるセルフチェックアウト装置は、その機能が実行されるのであれば、上述の実施の形態に限定されることなく、単体の装置であっても、複数の装置からなるシステムあるいは統合装置であっても、ＬＡＮ、ＷＡＮ等のネットワークを介して処理が行なわれるシステムであってもよいことは言うまでもない。
【００７４】
また、バスに接続されたＣＰＵ、ＲＯＭやＲＡＭのメモリ、入力装置、出力装置、外部記録装置、媒体駆動装置、ネットワーク接続装置で構成されるシステムでも実現できる。すなわち、前述してきた実施の形態のシステムを実現するソフトェアのプログラムを記録したＲＯＭやＲＡＭのメモリ、外部記録装置、可搬記録媒体を、セルフチェックアウト装置に供給し、そのセルフチェックアウト装置のコンピュータがプログラムを読み出し実行することによっても、達成されることは言うまでもない。
【００７５】
この場合、可搬記録媒体等から読み出されたプログラム自体が本発明の新規な機能を実現することになり、そのプログラムを記録した可搬記録媒体等は本発明を構成することになる。
【００７６】
プログラムを供給するための可搬記録媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、磁気テープ、不揮発性のメモリーカード、ＲＯＭカード、電子メールやパソコン通信等のネットワーク接続装置（言い換えれば、通信回線）を介して記録した種々の記録媒体などを用いることができる。
【００７７】
また、コンピュータ（情報処理装置）がメモリ上に読み出したプログラムを実行することによって、前述した実施の形態の機能が実現される他、そのプログラムの指示に基づき、コンピュータ上で稼動しているＯＳなどが実際の処理の一部または全部を行ない、その処理によっても前述した実施の形態の機能が実現される。
【００７８】
さらに、可搬型記録媒体から読み出されたプログラムやプログラム（データ）提供者から提供されたプログラム（データ）が、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行ない、その処理によっても前述した実施の形態の機能が実現され得る。
【００７９】
すなわち、本発明は、以上に述べた実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内で種々の構成または形状を取ることができる。
【符号の説明】
【００８０】
１０          セルフチェックアウト装置
１１、１２    筐体
１３          ＬＣＤ（Liquid Crystal Display：液晶ディスプレイ）
１４          タッチパネル
１５          カードＲ／Ｗ（Reader/Writer）
１６          カメラスキャナ
１７          レシートプリンタ
１８          臭気センサ装置
１９          色識別用カメラ
２０          金銭取扱装置収納部
２０ａ        紙幣投入口
２０ｂ        紙幣出金口
２０ｃ        硬貨投入口
２０ｄ        硬貨返却口
２０ｅ        硬貨出金口
２１          商品仮置き台
２２          買物袋懸吊部
２３          合計重量計量用秤
２４          ハンディスキャナ
２５          音声出力装置
２６          入出金装置
１００        制御装置
１０１        ＣＰＵ（Central Processing Unit）、
１０２        ＲＡＭ（Random Access Memory）
１０３        ＨＤＤ（Hard Disk Drive）
１０４        通信インタフェース
１０５        グラフィック処理装置
１０６        入出力インタフェース
１０７        バス
２００        色情報取得部
３００        ニオイ情報取得部
４００        商品データベース
５００        検索部
６００        表示部
【図１】
2017146854.tif 000003
【図２】
2017146854.tif 000004
【図３】
2017146854.tif 000005
【図４】
2017146854.tif 000006
【図５】
2017146854.tif 000007
【図６】
2017146854.tif 000008