【手続補正書】
【提出日】平成28年4月11日(2016.4.11)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
撮像部で撮影された画像を取り込む取込手段と、
前記取込手段により取り込まれた画像を表示する表示部と、
前記表示部に表示される画像上の任意の箇所への指示入力を受け付ける入力受付手段と、
前記入力受付手段により指示入力を受け付けたことに応じて前記画像上に商品を囲うための枠を表示させる枠表示手段と、
前記画像上に表示されている枠の数をカウントするカウンタと、
前記枠によって囲われた領域内の画像の特徴量から前記枠内に映し出されている商品の候補を認識する認識手段と、
この認識手段により認識された商品の候補のなかで最有力候補の商品に係る情報を出力する第１の出力手段と、
前記第１の出力手段で出力された候補の変更指示を受け付ける変更受付手段と、
前記変更受付手段が商品の候補の変更指示を受け付けると、前記候補の中から選出された最有力候補以外の商品に係る情報を出力する第２の出力手段と、
前記カウンタのカウント値が０のときに前記入力受付手段により指示入力を受付けると前記枠表示手段を動作させ、前記カウント値が１以上のときに前記入力受付手段により指示入力を受付けるとその指示入力を受付けた箇所が前記枠の外側のときには前記枠表示手段を動作させ、前記枠の内側のときには前記変更受付手段を動作させる制御手段と、
を具備したことを特徴とする商品認識装置。
【請求項２】
前記枠表示手段は、削除マークが付与された枠を表示するものであり、
前記入力受付手段により指示入力を受付けた箇所が前記削除マークであるときその削除マークが付与された枠を消去する枠消去手段、をさらに具備し、
前記カウンタは、前記枠表示手段により枠が表示される毎にカウントアップし、前記枠消去手段により枠が消去される毎にカウントダウンすることを特徴とする請求項１記載の商品認識装置。
【請求項３】
前記認識手段は、各商品の外観特徴量を示すパラメータと前記枠によって囲われた領域内の画像の特徴量との類似度を商品毎に算出して類似度の高い順に候補を認識し、
前記第１の出力手段は、最も類似度が高い商品を最有力候補の商品として当該商品に係る情報を出力し、
前記第２の出力手段は、前記変更受付手段により変更指示を受付ける毎に類似度が低くなる下位の候補の商品を順次選出して当該商品に係る情報を出力する、ことを特徴とする請求項１又は２記載の商品認識装置。
【請求項４】
前記枠表示手段は、前記入力受付手段により指示入力を受け付けた箇所を中心に前記枠を表示させることを特徴とする請求項１乃至３のうちいずれか１に記載の商品認識装置。
【請求項５】
前記第１，第２の出力手段は、それぞれ商品に係る情報を前記枠内に表示出力する手段であり、かつ、
前記第２の出力手段は、前記枠の表示形態を前記第１の出力手段で前記商品に係る情報が内部に表示出力される枠と異ならせることを特徴とする請求項１乃至４のうちいずれか１に記載の商品認識装置。
【請求項６】
撮像部と表示部とを接続してなるコンピュータに、
前記撮像部で撮影された画像を前記表示部に表示させる第１の機能と、
前記表示部に表示される画像上の任意の箇所への指示入力を受け付ける第２の機能と、
前記指示入力を受け付けたことに応じて前記画像上に商品を囲うための枠を表示させる第３の機能と、
前記画像上に表示されている枠の数をカウントする第４の機能と、
前記枠によって囲われた領域内の画像の特徴量から前記枠内に映し出されている商品の候補を認識する第５の機能と、
認識された商品の候補のなかで最有力候補の商品に係る情報を出力する第６の機能と、
候補の変更指示を受け付ける第７の機能と、
前記候補の変更指示を受け付けると、前記候補の中から選出された最有力候補以外の商品に係る情報を出力する第８の機能と、
前記カウント値が０のときに前記指示入力を受付けると前記第３の機能を動作させ、前記カウント値が１以上のときに前記指示入力を受付けるとその指示入力を受付けた箇所が前記枠の外側のときには前記第３の機能を動作させ、前記枠の内側のときには前記第７の機能を動作させる第９の機能と、
を実現させるための商品認識プログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００５
【補正方法】変更
【補正の内容】
【０００５】
一実施形態において、商品認識装置は、取込手段、表示部、入力受付手段、枠表示手段、カウンタ、認識手段、第１の出力手段、変更受付手段、第２の出力手段及び制御手段を含む。取込手段は、撮像部で撮影された画像を取り込む。表示部は、取込手段により取り込まれた画像を表示する。入力受付手段は、表示部に表示される画像上の任意の箇所への指示入力を受け付ける。枠表示手段は、入力受付手段により指示入力を受け付けたことに応じて画像上に商品を囲うための枠を表示させる。カウンタは、画像上に表示されている枠の数をカウントする。認識手段は、枠によって囲われた領域内の画像の特徴量から枠内に映し出されている商品の候補を認識する。第１の出力手段は、認識手段により認識された商品の候補のなかで最有力候補の商品に係る情報を出力する。変更受付手段は、候補の変更指示を受け付ける。第２の出力手段は、候補の変更指示を受け付けると、候補の中から選出された最有力候補以外の商品に係る情報を出力する。制御手段は、カウンタのカウント値が０のときに入力受付手段により指示入力を受付けると枠表示手段を動作させ、カウント値が１以上のときに入力受付手段により指示入力を受付けるとその指示入力を受付けた箇所が枠の外側のときには枠表示手段を動作させ、枠の内側のときには変更受付手段を動作させる。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００７２
【補正方法】変更
【補正の内容】
【００７２】
この他、本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。  
以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。  
［１］撮像部で撮影された画像を表示部に表示させる画像表示手段と、前記表示部に表示される画像上の任意の１乃至複数箇所に商品を囲うための枠を表示させる枠表示手段と、前記枠によって囲われた領域内の画像の特徴量から前記枠内に映し出されている商品の候補を認識する認識手段と、この認識手段により認識された商品の候補のなかで最有力候補の商品に係る情報を出力する第１の出力手段と、前記第１の出力手段で出力された候補の変更指示を受け付ける変更受付手段と、前記変更指示手段が商品の候補の変更指示を受け付けると、前記候補の中から選出された最有力候補以外の商品に係る情報を出力する第２の出力手段と、を具備したことを特徴とする商品認識装置。
［２］前記認識手段は、各商品の外観特徴量を示すパラメータと前記枠線によって囲われた領域内の画像の特徴量との類似度を商品毎に算出して類似度の高い順に候補を認識し、前記第１の出力手段は、最も類似度が高い商品を最有力候補の商品として当該商品に係る情報を出力し、前記第２の出力手段は、前記変更受付手段により変更指示を受付ける毎に類似度が低くなる下位の候補の商品を順次選出して当該商品に係る情報を出力する、ことを特徴とする付記［１］記載の商品認識装置。
［３］前記表示部に表示される画像上の任意の箇所への指示入力を受け付ける入力受付手段、をさらに具備し、前記枠表示手段は、前記入力受付手段により指示入力を受け付けた箇所を中心に前記枠を表示させることを特徴とする付記［１］または［２］記載の商品認識装置。
［４］前記入力受付手段により指示入力を受付けた箇所が、前記枠表示手段により表示された枠の内側か否かを判定する判定手段、をさらに具備し、前記枠の外側と判定された場合には前記枠表示手段が動作し、前記枠の内側と判定された場合には前記変更受付手段が動作することを特徴とする付記［３］記載の商品認識装置。
［５］前記第１，第２の出力手段は、それぞれ商品に係る情報を前記枠内に表示出力する手段であり、かつ、前記第２の出力手段は、前記枠の表示形態を前記第１の出力手段で前記商品に係る情報が内部に表示出力される枠と異ならせることを特徴とする付記［１］乃至［４］のうちいずれか１に記載の商品認識装置。
［６］撮像部と表示部とを接続してなるコンピュータに、前記撮像部で撮影された画像を前記表示部に表示させる機能と、前記表示部に表示される画像上の任意の１乃至複数箇所に商品を囲うための枠を表示させる機能と、前記枠によって囲われた領域内の画像の特徴量から前記枠内に映し出されている商品の候補を認識する機能と、認識された商品のなかで最有力候補の商品に係る情報を出力する機能と、候補の変更指示を受け付ける機能と、前記候補の変更指示を受け付けると、前記候補の中から選出された最有力候補以外の商品に係る情報を出力する機能と、を実現させるための商品認識プログラム。