【手続補正書】
【提出日】令和2年2月27日(2020.2.27)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正の内容】
【００１２】
続いて、出庫物品特定部は、出庫物品と判定された物品の画像を、物品情報記憶部に記憶されている複数の見本画像と照合して該出庫物品の種類又は名称を特定し、入庫物品特定部は、入庫物品と判定された物品の画像を、物品情報記憶部に記憶されている複数の見本画像と照合して該入庫物品の種類又は名称を特定する。この場合、出庫物品特定部又は入庫物品特定部は、物品情報記憶部に記憶されている複数の見本画像を探索し、出庫物品又は入庫物品の画像と対応する画像を選出する。この場合、出庫物品又は入庫物品の画像と完全に一致する見本画像に限らず、その一部が出庫物品又は入庫物品の画像と一致するような見本画像、一部又は全体を変形させたときに出庫物品又は入庫物品の画像と一致するような見本画像等、出庫物品又は入庫物品の画像との間に類似性がみられる見本画像を、「対応する画像」として選出する。そして、選出された見本画像に付随して記憶されている種類又は名称を出庫物品又は入庫物品の種類又は名称とする。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１６
【補正方法】変更
【補正の内容】
【００１６】
また、撮影部に対する物品の向きによって、撮影部の撮影画像に含まれる出庫物品又は入庫物品の画像が認識できない場合がある。このような場合、出入庫判定部が、撮影画像から物品の画像を抽出できないか、或いは出庫物品特定部又は入庫物品特定部が、撮影画像から抽出された物品の画像から、その物品の種類又は名称を特定できない。
そこで、本発明においては、スピーカー又は表示画面を備える報知部と、
前記出入庫判定部が物品の画像の抽出に失敗したときに、或いは出庫物品特定部又は入庫物品特定部が出庫物品又は入庫物品の種類又は名称の特定に失敗したときに、該物品の出入庫動作を繰り返し行うことを促す音声又は画像を前記報知部に出力させる報知制御部とを備えるようにすると良い。
このような構成により、物品貯蔵庫における出入庫物品の在庫管理を確実に行うことができる。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００２３
【補正方法】変更
【補正の内容】
【００２３】
＜１．在庫管理システム＞
図１は本実施例に係る在庫管理システムの構成を示す概略図である。在庫管理システムは、冷蔵庫１と、該冷蔵庫１と通信機器２及びインターネット等の通信ネットワーク３を介して接続されたクラウドサーバ４とを備えており、冷蔵庫１とクラウドサーバ４との間でデータの送受信が行われるようになっている。クラウドサーバ４が本発明の在庫管理装置に相当する。また、クラウドサーバ４は、通信ネットワーク３を介して通信端末５と接続されており、該通信端末５との間でデータの送受信を行うことができる。通信端末５は、例えば携帯電話、タブレット端末等の携帯端末やノートパソコン等である。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００４１
【補正方法】変更
【補正の内容】
【００４１】
在庫管理情報更新部４１０は、在庫管理情報格納部４０３に格納されている在庫管理情報に、出庫時刻からの経過時間が所定時間以上である在庫管理情報が含まれる場合には、その収納食品は使用されたものとして、その在庫管理情報を在庫管理情報格納部４０３から消去する。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００４２
【補正方法】変更
【補正の内容】
【００４２】
購入物品リスト作成部４０８は、在庫管理情報格納部４０３から或る収納食品の在庫管理情報が消去されると、その収納食品の種類又は名称を含む購入物品リストを作成する。或いは、既に購入物品リストが作成されている場合は、その購入物品リストに該収納食品の種類又は名称を追加する。一方、購入物品リスト作成部４０８は、在庫管理情報格納部４０３に新規の在庫管理情報（食品の種類又は名称、入庫日、賞味期限又は消費期限）が格納された場合であって、その収納食品の種類又は名称が購入物品リストに含まれる場合は、その種類又は名称を購入物品リストから消去する。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００４３
【補正方法】変更
【補正の内容】
【００４３】
制御装置４００は、在庫管理情報格納部４０３に格納されている在庫管理情報の中に賞味／消費期限を経過している収納食品が含まれる場合は、賞味／消費期限切れの食品が貯蔵庫内に存在することを示す音声データ又は画像データを通信ネットワーク３、通信機器２、及び通信部１０３を介して冷蔵庫１の制御装置１００に送信する。また、制御装置４００は、出入庫判定部４０４が、物品の画像の抽出に失敗したときに、或いは出庫物品特定部４０６又は入庫物品特定部４０７が出庫物品又は入庫物品の食品種類の特定に失敗したとき、通信ネットワーク３、通信機器２、及び通信部１０３を介して冷蔵庫１の制御装置１００に物品の出入庫動作を繰り返し行うことを促す音声データ又は画像データを送信する。物品の出入庫動作を繰り返し行うことをユーザに促す音声データ又は画像データとしては、例えば、冷蔵庫１から出し入れした食品をカメラ６０に近づけることや食品の向きを変えてカメラ６０に近づけることを表す音声データや画像データである。そして、音声データ又は画像データを受信した制御装置１００は、報知器１０２又は表示部１１６に出力する。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００４５
【補正方法】変更
【補正の内容】
【００４５】
図９は、上述した本実施例に係る在庫管理システムのクラウドサーバ４における処理の流れを示すフローチャートである。図９のフローチャートは、カメラ６０によりその撮影範囲にある物品の撮影が行われ、その撮影画像データ及び撮影時刻情報が冷蔵庫１からクラウドサーバ４に送られてきたことによりスタートする。すなわち、ステップＳ１において、クラウドサーバ４の制御装置４００がカメラ６０による撮影画像データとその撮影時刻情報を受信すると、それらのデータを撮影画像格納部４０２に格納する。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００５１
【補正方法】変更
【補正の内容】
【００５１】
なお、本発明は上記した実施例に限定されることはなく、本発明の趣旨の範囲で適宜の変形又は拡張が可能である。
例えば、上記実施例では在庫管理情報格納部４０３に収納食品の在庫管理情報が消去されたこと、或いは、新規の収納食品の在庫管理情報が追加されたことに基づき、購入物品リスト作成部４０８は購入物品リストを作成／更新するようにしたが、これに代えて、出入庫判定部４０４が物品の出庫を判定すると、出庫物品特定部４０６が特定した出庫物品の種類又は名称を購入物品リストに書き込み、出入庫判定部４０４が物品の入庫を判定すると、入庫物品特定部４０７が特定した入庫物品の種類又は名称を購入物品リストから消去するようにしても良い。この構成では、在庫管理情報格納部４０３を省略することができる。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００５３
【補正方法】変更
【補正の内容】
【００５３】
また、冷蔵庫１にマイク等の入力手段を設けて、出入庫判定部４０４が、物品の画像の抽出に失敗したときに、或いは出庫物品特定部４０６又は入庫物品特定部４０７が出庫物品又は入庫物品の食品種類の特定に失敗したとき、制御装置４００は、通信ネットワーク３、通信機器２、及び通信部１０３を介して冷蔵庫１の制御装置１００に物品の出入庫動作を行った食品の種類又は名称を入力するようを促す音声データ又は画像データを送信するようにしても良い。そして、ユーザが入力手段を通して食品の種類又は名称を入力すると、制御装置１００は、この食品の種類又は名称をその画像データとともに、通信部１０、通信機器２、通信ネットワーク３を介して制御装置４００に送信し、これを受けて制御装置４００は、その画像データと食品の種類又は名称を食品情報記憶部４０１に記憶させる。これにより、新規の食品に関する情報を食品情報記憶部４０１に蓄積することができる。
【手続補正１０】
【補正対象書類名】図面
【補正対象項目名】図２
【補正方法】変更
【補正の内容】
【図２】
2018146177.tif 000001
【手続補正１１】
【補正対象書類名】図面
【補正対象項目名】図３
【補正方法】変更
【補正の内容】
【図３】
2018146177.tif 000002