(57)【要約】【課題】セルフチェックアウト端末を利用する顧客の負担を軽減する。【解決手段】実施形態のセルフチェックアウト端末は、商品の重量を計量する計量部と、画像を撮像する撮像部と、前記撮像された画像から商品を認識する認識手段と、商品を特定する情報であって商品の重量を含む商品情報を記憶する商品マスタから、前記認識した商品を特定する前記商品情報を抽出する抽出手段と、前記抽出した商品情報から、前記計量した重量と略同一の重量を含む商品情報を選択する選択手段と、前記選択した商品情報により特定される商品を販売登録する登録手段と、を備える。【選択図】図７
2014112451.tif 000002
【特許請求の範囲】
【請求項１】
商品の重量を計量する計量部と、
画像を撮像する撮像部と、
前記撮像された画像から商品を認識する認識手段と、
商品を特定する情報であって商品の重量を含む商品情報を記憶する商品マスタから、前記認識した商品を特定する前記商品情報を抽出する抽出手段と、
前記抽出した商品情報から、前記計量した重量と略同一の重量を含む商品情報を選択する選択手段と、
前記選択した商品情報により特定される商品を販売登録する登録手段と、
を備えたセルフチェックアウト端末。
【請求項２】
前記選択手段により複数の商品情報が選択された場合、前記選択した商品情報を表示部に表示する表示制御手段と、
前記表示部に表示した商品情報の中から、販売登録する商品を特定する商品情報を受け付ける受付手段と、をさらに備え、
前記登録手段は、前記受け付けた商品情報により特定される商品を販売登録する請求項１に記載のセルフチェックアウト端末。
【請求項３】
前記抽出手段は、商品名、商品の重量、および商品の金額を含む前記商品情報を記憶する前記商品マスタから、前記認識した商品を特定する前記商品情報を抽出し、
前記表示制御手段は、前記選択した商品情報に含まれる商品名、商品の重量、および商品の金額を前記表示部に表示する請求項２に記載のセルフチェックアウト端末。
【請求項４】
商品の重量を計量する計量部と、画像を撮像する撮像部と、を備えたセルフチェックアウト端末を制御するコンピュータを、
前記撮像された画像から商品を認識する認識手段と、
商品を特定する情報であって商品の重量を含む商品情報を記憶する商品マスタから、前記認識した商品を特定する前記商品情報を抽出する抽出手段と、
前記抽出した商品情報から、前記計量した重量と略同一の重量を含む商品情報を選択する選択手段と、
前記選択した商品情報により特定される商品を販売登録する登録手段と、
として機能させるためのプログラム。
【請求項５】
前記コンピュータを、
前記選択手段により複数の商品情報が選択された場合、前記選択した商品情報を表示部に表示する表示制御手段と、
前記表示部に表示した商品情報の中から、販売登録する商品を特定する商品情報を受け付ける受付手段と、として機能させ、
前記登録手段は、前記受け付けた商品情報により特定される商品を販売登録する請求項４に記載のプログラム。
【請求項６】
前記抽出手段は、商品名、商品の重量、および商品の金額を含む前記商品情報を記憶する前記商品マスタから、前記認識した商品を特定する前記商品情報を抽出し、
前記表示制御手段は、前記選択した商品情報に含まれる商品名、商品の重量、および商品の金額を前記表示部に表示する請求項５に記載のプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、セルフチェックアウト端末およびプログラムに関する。
【背景技術】
【０００２】
近年、ＰＯＳ（Ｐｏｉｎｔ  Ｏｆ  Ｓａｌｅｓ）端末等において、ＰＬＵ（Ｐｒｉｃｅ  Ｌｏｏｋ  Ｕｐ）ファイルに記憶された商品の画像を参照し、オブジェクト認識技術を利用して、撮像した画像から商品を認識し、認識した商品を販売登録する技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１０−５５４６０公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、オブジェクト認識技術を利用して、撮像した画像から商品を認識する場合、複数の商品が当該撮像した画像に含まれる商品の候補として認識されることがある。例えば、撮像した画像から、色合いや表面の凹凸状況等などの表面の状態を読み取ることによって商品を認識する場合、パッケージが同じで重量が異なる複数の商品が認識される。この場合、認識された複数の商品の商品情報を表示し、表示された商品情報の中からオペレータが絞り込んだ商品情報が示す商品を販売登録する。
【０００５】
しかしながら、多数の商品情報の中から、販売登録する商品の商品情報を絞り込むのは、オペレータに負担がかかり利便性に欠ける。特に、顧客自身が商品の販売登録を行うセルフチェックアウト端末においては、顧客が端末の操作に慣れていないことが多く、多数の商品情報の中から販売登録する商品の商品情報を絞り込むのは顧客にかかる負担が大きい。
【課題を解決するための手段】
【０００６】
実施形態のセルフチェックアウト端末は、商品の重量を計量する計量部と、画像を撮像する撮像部と、前記撮像された画像から商品を認識する認識手段と、商品を特定する情報であって商品の重量を含む商品情報を記憶する商品マスタから、前記認識した商品を特定する前記商品情報を抽出する抽出手段と、前記抽出した商品情報から、前記計量した重量と略同一の重量を含む商品情報を選択する選択手段と、前記選択した商品情報により特定される商品を販売登録する登録手段と、を備える。
【図面の簡単な説明】
【０００７】
【図１】全体のシステム構成を示す模式図。
【図２】セルフチェックアウト端末を示す斜視図。
【図３】保持アームにレジ袋が保持されている状態を示す斜視図。
【図４】決済端末の電気的なハードウェア構成を示すブロック図。
【図５】商品マスタファイルを説明する図。
【図６】本実施形態にかかる決済端末の機能構成を示すブロック図。
【図７】決済端末が行う商品の販売登録処理の手順を示したフローチャート。
【発明を実施するための形態】
【０００８】
図１は、全体のシステム構成を示す模式図である。本実施形態のシステムは、複数のセルフチェックアウトシステム１１と、複数台のＰＯＳ（Ｐｏｉｎｔ  Ｏｆ  Ｓａｌｅｓ）端末２１と、ストアコントローラ３１と、を通信ネットワーク４１を介して接続している。セルフチェックアウトシステム１１は、複数台のセルフチェックアウト端末１０１に一台のアテンダント端末５０１を割り当てている。セルフチェックアウト端末１０１は、顧客自らの操作により購入する商品のチェックアウトを行う端末である。本実施形態では、セルフチェックアウト端末１０１は、決済端末２０１と秤装置３０１とを備えている。
【０００９】
図２は、セルフチェックアウト端末を示す斜視図である。セルフチェックアウト端末１０１は、上述したように、決済端末２０１と秤装置３０１とを備えている。
【００１０】
決済端末２０１は、顧客が購入しようとする商品を入れた籠（図示せず）を載置するための商品籠載置台１０２が脇から突出したハウジング２０２を有している。
【００１１】
決済端末２０１のハウジング２０２は、床面に設置されるベースハウジング２０２ａと、当該ベースハウジング２０２ａの上面に載置される上部ハウジング２０２ｂと、を有している。ベースハウジング２０２ａの前面は、下方に向かうほどベースハウジング２０２ａの投影面積を狭めるように傾斜している。つまり、ベースハウジング２０２ａは、下方に向かうほど奥側にオフセットした形状となっている。
【００１２】
また、決済端末２０１は、上部ハウジング２０２ｂの商品籠載置台１０２側にカラーＣＣＤ（Ｃｈａｒｇｅｄ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）イメージセンサやカラーＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサ等の撮像部２０３を配置している。さらに、決済端末２０１は、上部ハウジング２０２ｂの商品籠載置台１０２の反対側にプリンタカバー２０４を配置している。さらに、決済端末２０１は、撮像部２０３とプリンタカバー２０４との間に、カード挿入口２１２を配置している。
【００１３】
決済端末２０１は、ガラス板で形成されている読取窓２０３ａの内部に撮像部２０３を内蔵している。撮像部２０３は、販売登録する商品の画像を含む画像を撮像するためのものである。本実施形態では、撮像部２０３は、３０ｆｐｓの動画像の撮像を行う。そして、撮像部２０３は、所定のフレームレートで順次撮像したフレーム画像をＲＡＭ２５４（図４参照）に保存する。
【００１４】
また、決済端末２０１は、上部ハウジング２０２ｂに対して開閉自在にプリンタカバー２０４を取り付けている。プリンタカバー２０４は、レシート発行口２０８を有している。決済端末２０１は、プリンタカバー２０４の奥側に、レシートプリンタ２５１（図４参照）を内蔵する。そして、決済端末２０１は、レシートプリンタ２５１によって印字される図示しないレシートを、レシート発行口２０８から発行する。
【００１５】
また、決済端末２０１は、カード挿入口２１２の内部に、磁気カードに対するデータの読み書きを可能とする磁気カードリーダライタであるカードリーダライタ２５２（図４参照）を内蔵している。カード挿入口２１２は、磁気カードとしてクレジットカードが挿入されるものである。
【００１６】
また、決済端末２０１は、上部ハウジング２０２ｂに、販売登録する商品の商品名や重量や価格や画像等、商品を特定する商品情報を買物客に表示する表示部としてのＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）２１０を有している。さらに、決済端末２０１は、ＬＣＤ２１０の画面上に、販売登録する商品の商品コード等の入力を受け付ける各種キー、商品代金の決済に必要な締めキー等が配置されている入力部としてのタッチパネル２１１を積層配置している。
【００１７】
また、決済端末２０１は、ベースハウジング２０２ａに、硬貨と紙幣との入出金装置２２１（図４参照）を内蔵している。さらに、決済端末２０１は、入出金装置２２１の一部として、ベースハウジング２０２ａの中央上面に硬貨投入口２１３を配置し、当該硬貨投入口２１３の左側に硬貨払出口２１４を配置している。また、決済端末２０１は、硬貨投入口２１３の右側に、紙幣投入口２１５と紙幣払出口２１６とを配置している。このような入出金装置２２１は、硬貨および紙幣の取扱いを可能にする機構部と当該機構部を制御する制御部とを有している（いずれも図示せず）。硬貨および紙幣の取扱いを可能にする機構部の構造および当該機構部を制御する制御部での処理手順等については、その内容が周知なので、説明を省略する。
【００１８】
さらに、決済端末２０１は、ベースハウジング２０２ａの背面から、セルフチェックアウト端末１０１の現在の状態を表示する警報装置としての表示ポール２１７を立設している。表示ポール２１７は、先端部に青色と赤色とに選択的に発光する発光部２１８を有する。
【００１９】
次に、図２および図３を用いて、秤装置３０１について説明する。図３は、保持アームにレジ袋が保持されている状態を示す斜視図である。秤装置３０１は、秤ハウジング３０２の上部に秤皿３０３を有し、秤皿３０３に載置された商品の重量を計量する計量部である。また、秤装置３０１は、秤皿３０３に袋保持具３０４を取り付けている。より具体的には、秤皿３０３は、上面に載置台３０３ａを有する。そして、秤装置３０１は、載置台３０３ａに袋保持具３０４を取り付けている。したがって、袋保持具３０４からすると、秤皿３０３は、台座を構成する。つまり、秤装置３０１は、載置台３０３ａの後方中央部に、ポール形状のアーム支持部３０５を立設している。また、秤装置３０１は、アーム支持部３０５の上端に、品物を載置するための一時置き台３０６を固定している。一時置き台３０６は、上面が平坦面となっており、決済端末２０１の撮像部２０３により画像を撮像した後の商品を一時的に置く用途で用いられる台である。載置台３０３ａおよび一時置き台３０６は、共に、商品コードが入力された商品を載置するための載置部としての役割を担っている。
【００２０】
また、秤装置３０１は、一時置き台３０６の下面に、一対の保持アーム３０７とフック３０８を取り付けている。つまり、秤装置３０１は、一時置き台３０６の下面両端位置に、アーム取付具３０９（図３参照）を固定している。具体的には、秤装置３０１は、例えばネジ止め、接着止め等、各種の固定手法によってアーム取付具３０９を、一時置き台３０６の下面両端位置に固定している。そして、秤装置３０１は、アーム取付具３０９のそれぞれに、保持アーム３０７を埋設している。また、秤装置３０１は、一時置き台３０６の下面中央位置に、フック取付具３１０（図３参照）を固定している。具体的には、秤装置３０１は、例えばネジ止め、接着止め等、各種の固定手法によって、フック取付具３１０を、一時置き台３０６の下面中央位置に固定している。そして、秤装置３０１は、フック取付具３１０に、フック３０８を埋設している。
【００２１】
保持アーム３０７は、例えばスーパーマーケット等で顧客に提供するビニール袋等の収納部材としてのレジ袋４０１、つまり、開口部４０２とこの開口部４０２から突出する一対の把手４０３とを有してこれらの把手４０３が両側に位置付けられるように折り畳まれたレジ袋４０１を保持するために、一対の把手４０３を串刺し状態で保持する。このような保持状態を実現するために、レジ袋４０１は、把手４０３に、スリット４０４を有している。また、レジ袋４０１は、一対の把手４０３の間に位置させてミシン目４０５で脱落可能な一対の耳部４０６を有している。そして、耳部４０６は、引掛け穴４０７を有している。フック３０８は、引掛け穴４０７を挿通して、レジ袋４０１を保持アーム３０７と共に保持する。
【００２２】
図４は、決済端末の電気的なハードウェア構成を示すブロック図である。決済端末２０１は、内部に情報処理部としての制御部２５３を有する。制御部２５３は、例えば動作シーケンスが書き込まれた半導体チップ構成のものであっても、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）２５４等に動作プログラムを記憶させて動作するマイクロコンピュータ構成のものであっても良い。ここでは、マイクロコンピュータ構成の制御部２５３を紹介する。
【００２３】
制御部２５３の中核をなすのはＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）２５５である。そして、制御部２５３は、ＣＰＵ２５５に、固定データを固定的に記憶するＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）２５６と、可変データを書き換え自在に記憶するＲＡＭ２５４と、ＬＣＤ２１０に表示する表示画像を生成するＶＲＡＭ２５７と、ＨＤＤ２５８と、をシステムバス２５９を介して接続している。
【００２４】
また、決済端末２０１は、制御部２５３に、システムバス２５９を介して、撮像部２０３、ＬＣＤ２１０、タッチパネル２１１、カードリーダライタ２５２、レシートプリンタ２５１、発光部２１８、入出金装置２２１との間でのデータ通信を媒介するインターフェース２６０を接続している。そして、撮像部２０３、ＬＣＤ２１０、タッチパネル２１１、カードリーダライタ２５２、レシートプリンタ２５１、発光部２１８、インターフェース２６０は、制御部２５３による制御を受ける。また、決済端末２０１は、制御部２５３に、システムバス２５９を介して通信インターフェース２６１も接続している。通信インターフェース２６１は、通信ネットワーク４１に接続され、アテンダント端末５０１およびストアコントローラ３１とセルフチェックアウト端末１０１との間のデータ通信を実現する。なお、決済端末２０１は、制御部２５３に、図示はしないが、システムバス２５９を介して、秤装置３０１との間のデータ通信を実現させるインターフェースも接続している。
【００２５】
ＨＤＤ２５８は、制御部２５３を動作させるプログラムの他に、商品マスタファイルＦ１（図５参照）、販売データ等を記憶する売上ファイル等を格納している。図５は、商品マスタファイルを説明する図である。商品マスタファイルＦ１は、商品の商品コードや商品の商品名や商品の重量や商品の単価（価格）等の商品を特定する商品情報と、当該商品情報により特定される商品の商品画像と、を対応付けて記憶する記憶部である。
【００２６】
次に、本実施形態にかかる決済端末２０１が有する機能について説明する。図６は、本実施形態にかかる決済端末の機能構成を示すブロック図である。ＣＰＵ２５５は、ＲＡＭ２５４に展開されたＨＤＤ２５８が記憶するプログラムに従って動作することで、図６に示すように、取込部６０１、物体認識部６０２、抽出部６０３、選択部６０４、表示制御部６０５、受付部６０６、および登録部６０７として機能する。
【００２７】
取込部６０１は、撮像部２０３に撮像オン信号を出力して撮像部２０３に撮像動作を開始させる。そして、取込部６０１は、撮像部２０３が撮像した撮像エリアのフレーム画像を取り込んで、ＲＡＭ２５４に格納する。
【００２８】
物体認識部６０２は、商品マスタファイルＦ１に記憶された商品画像を参照して、取込部６０１により取り込まれたフレーム画像から、特徴量として色合いや表面の凹凸状況等の表面の状態を読み取ることによって特定の物体として商品を認識する。なお、物体認識部６０２は、処理時間の短縮を図るため、商品の輪郭や大きさは考慮しないものとする。
【００２９】
このように画像中に含まれる物体を認識することは一般物体認識（ｇｅｎｅｒｉｃ  ｏｂｊｅｃｔ  ｒｅｃｏｇｎｉｔｉｏｎ）と呼ばれている。このような一般物体認識については、下記の文献において各種認識技術が解説されている。
【００３０】
柳井  啓司，“一般物体認識の現状と今後”，情報処理学会論文誌，Ｖｏｌ．４８，Ｎｏ．ＳＩＧ１６  [平成２２年８月１０日検索]，インターネット<URL:  http://mm.cs.uec.ac.jp/IPSJ-TCVIM-Yanai.pdf  >
また、画像をオブジェクトごとに領域分割することによって一般物体認識を行う技術が、下記の文献において解説されている。
【００３１】
Jamie  Shottonら，“Semantic  Texton  Forests  for  Image  Categorization  and  Segmentation”，[平成２２年８月１０日検索]，インターネット<URL:  http://citeseerx.ist.psu.edu/viewdoc/download?doi=10.1.1.145.3036&rep=rep1&type=pdf  >
抽出部６０３は、商品マスタファイルＦ１から、物体認識部６０２により認識した商品を特定する商品情報を抽出する。本実施形態では、抽出部６０３は、商品マスタファイルＦ１において、物体認識部６０２により商品を認識した際に参照した商品画像と対応付けて記憶された商品情報を、当該物体認識部６０２により認識した商品を特定する商品情報として抽出するものとする。
【００３２】
選択部６０４は、秤装置３０１との間のデータ通信を実現させるインタフェース（図示しない）を介して、秤装置３０１により計量された商品の重量を受信する。そして、選択部６０４は、抽出部６０３により抽出された商品情報から、秤装置３０１から受信した重量と略同一の重量を含む商品情報を選択する。この選択に際して、計量された商品の重量と、商品マスタファイルＦ１から抽出された商品情報に含まれる商品の重量とは、必ずしも同一である必要はない。例えば、選択部６０４は、商品毎に予め定められた許容誤差重量を設定しておき、商品マスタファイルＦ１から抽出された商品情報のうち、計量された商品の重量を基準にして、この許容誤差重量の範囲内にある商品の重量を含む商品情報を選択しても良い。これにより、物体認識部６０２により１つのフレーム画像から複数の商品が認識された場合、例えば、１つのフレーム画像からパッケージが同じで重量が異なる複数の商品が認識された場合、認識された複数の商品の中から販売登録する商品を絞り込むことができるので、認識された複数の商品の中から顧客が所望の商品を選択する必要がなくなり、顧客の負担を軽減することができる。ここで、パッケージが同じで重量が異なる複数の商品とは、例えば、飲料水のペットボトル商品を一例に挙げると、５００ミリリットルのペットボトル商品または１リットルのペットボトル商品のようにパッケージが同じであっても重量が異なる商品等が該当する。また、青果物の場合（一例としてバナナにて説明する）、品種はバナナで同一であるが、２００グラム以下のバナナは９９円で、３００グラム以上のバナナは１９９円であるように、商品の重量によって商品の価格が異なるように設定されている商品等が該当する。なお、上記具体例は、一例として記載したものであって、これらに限られるものではない。
【００３３】
表示制御部６０５は、選択部６０４により複数の商品情報が選択された場合に、当該選択部６０４により選択された商品情報をＬＣＤ２１０に表示する。本実施形態では、表示制御部６０５は、選択部６０４により選択された商品情報に含まれる商品名、単価、重量等を、タッチパネル２１１によりタッチ指定可能なオブジェクトとしてＬＣＤ２１０に表示する。なお、表示制御部６０５は、選択部６０４により複数の商品情報が選択された場合に、選択された商品情報をＬＣＤ２１０に表示しているが、これに限定するものではない。例えば、表示制御部６０５は、選択部６０４により１つの商品情報が選択された場合であっても、当該選択された１つの商品情報をＬＣＤ２１０に表示しても良い。これにより、顧客は、ＬＣＤ２１０に表示された商品情報が、自身が販売登録したい商品であるか否かを確認することができる。
【００３４】
受付部６０６は、ＬＣＤ２１０に表示された商品情報の中から、タッチパネル２１１によりタッチ指定された商品情報を、販売登録する商品を特定する商品情報として受け付ける。選択部６０４により複数の商品情報が選択された場合、顧客は、ＬＣＤ２１０に表示された商品情報の中から所望の商品情報にタッチ指定する必要があるが、抽出部６０３により抽出された商品情報のうち選択部６０４により選択された（つまり、絞り込まれた）商品情報がＬＣＤ２１０に表示されるので、ＬＣＤ２１０に表示された商品情報の中から所望の商品情報を選択する顧客の負担を軽減することができる。
【００３５】
登録部６０７は、受付部６０６により受け付けた商品情報を、売上マスタファイルなどに記録することにより、当該選択された商品情報により特定される商品を販売登録する。本実施形態では、登録部６０７は、受付部６０６により受け付けられた商品情報を売上マスタファイルなどに記録することにより、商品を販売登録する。なお、本実施形態では、登録部６０７は、受付部６０６により受け付けた商品情報を売上マスタファイルに記憶して商品の販売登録を行っているが、これに限定するものではない。例えば、選択部６０４により選択された商品情報が１つである場合には、登録部６０７は、選択部６０４により選択された商品情報を売上マスタファイルに記憶して商品の販売登録を行っても良い。
【００３６】
次に、図７を用いて、決済端末２０１が行う商品の販売登録処理について説明する。図７は、決済端末が行う商品の販売登録処理の手順を示したフローチャートである。
【００３７】
まず、取込部６０１が、撮像部２０３に撮像オン信号を出力して撮像部２０３に撮像動作を開始させる（Ａｃｔ７０１）。そして、取込部６０１は、撮像部２０３により撮像したフレーム画像を取り込む（Ａｃｔ７０２）。
【００３８】
そして、フレーム画像が取り込まれなかった場合（Ａｃｔ７０３のＮｏ）、Ａｃｔ７０２に戻り、取込部６０１は、撮像部２０３により撮像したフレーム画像の取り込みを行う。一方、フレーム画像が取り込まれた場合（Ａｃｔ７０３のＹｅｓ）、物体認識部６０２は、商品マスタファイルＦ１に記憶された商品画像を参照して、取り込まれたフレーム画像から商品を認識する（Ａｃｔ７０４）。取り込まれたフレーム画像から商品が認識されなかった場合（Ａｃｔ７０５のＮｏ）、Ａｃｔ７０２に戻り、取込部６０１がフレーム画像の取り込みを行う。
【００３９】
取り込まれたフレーム画像から商品が認識された場合（Ａｃｔ７０５のＹｅｓ）、抽出部６０３は、商品マスタファイルＦ１から、認識した商品の商品情報を抽出する（Ａｃｔ７０６）。次いで、選択部６０４は、秤装置３０１により計量された商品の重量を受信するとともに、抽出部６０３により抽出された商品情報から、受信した重量と略同一の重量を含む商品情報を選択する（Ａｃｔ７０７）。
【００４０】
表示制御部６０５は、選択部６０４により商品情報が選択されると、選択された商品情報をＬＣＤ２１０に表示する（Ａｃｔ７０８）。登録部６０７は、ＬＣＤ２０１に表示された商品情報のうちタッチパネル２１１によりタッチ指定された商品情報を売上マスタファイルなどに記録することにより、当該選択された商品情報により特定される商品の販売登録を行う（Ａｃｔ７０９）。
【００４１】
商品の販売登録が行われた後、ＬＣＤ２１０に表示された締めキーが押下されると（Ａｃｔ７１０のＹｅｓ）、取込部６０１は、撮像部２０３に対して撮像オフ信号を出力して撮像部２０３による撮像動作を終了する（Ａｃｔ７１１）。さらに、ＬＣＤ２１０に表示された締めキーが押下された場合（Ａｃｔ７１０のＹｅｓ）、ＣＰＵ２５５は、売上マスタファイルに記録された商品情報を参照して、販売登録された商品の会計を行う（Ａｃｔ７１２）。なお、ＬＣＤ２１０に表示された締めキーが押下されなかった場合（Ａｃｔ７１０のＮｏ）、Ａｃｔ７０２に戻り、取込部６０１が、撮像部２０３が撮像したフレーム画像の取り込みを行う。
【００４２】
このように本実施形態にかかるセルフチェックアウト端末１０１によれば、撮像部２０３により撮像したフレーム画像を取り込み、取り込まれたフレーム画像から商品を認識し、商品マスタファイルＦ１から認識した商品の商品情報を抽出し、抽出した商品情報から、秤装置３０１により計量された重量と略同一の重量を含む商品情報を選択し、選択した商品情報により特定される商品の販売登録を行うことにより、取り込まれたフレーム画像から複数の商品が認識された場合に、認識された複数の商品の中から販売登録する商品を顧客が絞り込む必要がなくなるので、セルフチェックアウト端末１０１を利用する顧客の負担を軽減することができる。
【００４３】
なお、本実施形態のセルフチェックアウト端末１０１で実行されるプログラムは、ＲＯＭ等に予め組み込まれて提供されるが、これに限定するものではない。本実施形態のセルフチェックアウト端末１０１で実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｋ）等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。
【００４４】
さらに、本実施形態のセルフチェックアウト端末１０１で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、本実施形態のセルフチェックアウト端末１０１で実行されるプログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。
【００４５】
本実施形態のセルフチェックアウト端末１０１で実行されるプログラムは、上述した各部（取込部６０１、物体認識部６０２、抽出部６０３、選択部６０４、表示制御部６０５、受付部６０６、および登録部６０７）を含むモジュール構成となっており、実際のハードウェアとしてはＣＰＵ（プロセッサ）が上記ＲＯＭから〜プログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、取込部６０１、物体認識部６０２、抽出部６０３、選択部６０４、表示制御部６０５、受付部６０６、および登録部６０７が主記憶装置上に生成されるようになっている。
【００４６】
本発明の実施形態を説明したが、この実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。この新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。この実施形態は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【符号の説明】
【００４７】
１０１  セルフチェックアウト端末
２０１  決済端末
２０３  撮像部
２１０  ＬＣＤ
２５４  ＲＡＭ
２５５  ＣＰＵ
２５６  ＲＯＭ
２５８  ＨＤＤ
３０１  秤装置
６０２  物体認識部
６０３  抽出部
６０４  選択部
６０５  表示制御部
６０６  受付部
６０７  登録部
Ｔ  商品マスタファイル
【図１】
2014112451.tif 000003
【図２】
2014112451.tif 000004
【図３】
2014112451.tif 000005
【図４】
2014112451.tif 000006
【図５】
2014112451.tif 000007
【図６】
2014112451.tif 000008
【図７】
2014112451.tif 000009
【手続補正書】
【提出日】平成26年3月20日(2014.3.20)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
商品の画像を撮像する撮像部と、
前記商品を載置する載置部と、
前記載置部に載置された前記商品の重量を計量する計量部と、
商品を特定する物体表面のデータを含む商品情報を記憶する記憶部と、
前記記憶部に記憶された前記物体表面のデータを参照して、前記撮像された画像から商品を認識する認識手段と、
前記計量部で計量された情報と前記認識手段で認識した情報から、物体の重量によって価格が異なるように設定されている商品を特定し、特定された商品の重量及び価格を表示部に表示して確認させる確認手段と、
を備えた商品認識装置。
【請求項２】
前記表示部には、タッチパネルが積層されており、商品の入力をタッチ指定で受け付けることを特徴とする請求項１に記載の商品認識装置。
【請求項３】
前記記憶部が記憶する商品情報は商品画像を含み、前記認識手段が認識した商品の前記商品画像を前記表示部に表示させることを特徴とする請求項１記載の商品認識装置。
【請求項４】
商品の画像を撮像する撮像部と、載置部に載置された前記商品の重量を計量する計量部と、商品を特定する物体表面のデータを含む商品情報を記憶する記憶部と、を備えた商品認識装置を制御するコンピュータを、
前記記憶部に記憶された前記物体表面のデータを参照して、前記撮像された画像から商品を認識する認識手段と、
前記計量部で計量された情報と前記認識手段で認識した情報から、物体の重量によって価格が異なるように設定されている商品を特定し、特定された商品の重量及び価格を表示部に表示して確認させる確認手段と、として機能させるためのプログラム。
【請求項５】
前記表示部には、タッチパネルが積層されており、商品の入力をタッチ指定で受け付けることを特徴とする請求項４に記載のプログラム。
【請求項６】
前記記憶部が記憶する商品情報は商品画像を含み、前記認識手段が認識した商品の前記商品画像を前記表示部に表示させる請求項４に記載のプログラム。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００１
【補正方法】変更
【補正の内容】
【０００１】
本発明の実施形態は、商品認識装置およびプログラムに関する。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００６
【補正方法】変更
【補正の内容】
【０００６】
実施形態の商品認識装置は、商品の画像を撮像する撮像部と、前記商品を載置する載置部と、前記載置部に載置された前記商品の重量を計量する計量部と、商品を特定する物体表面のデータを含む商品情報を記憶する記憶部と、前記記憶部に記憶された前記物体表面のデータを参照して、前記撮像された画像から商品を認識する認識手段と、前記計量部で計量された情報と前記認識手段で認識した情報から、物体の重量によって価格が異なるように設定されている商品を特定し、特定された商品の重量及び価格を表示部に表示して確認させる確認手段と、を備える。