【手続補正書】
【提出日】平成28年1月28日(2016.1.28)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
収納庫内部を撮像することで得られる庫内画像を取得する処理を繰り返す庫内画像取得部と、
前記収納庫内で物品の入庫、出庫及び移動の少なくともいずれかのための作業が行われているか否かの判定を行う作業判定部と、
前記作業が開始された際に、該作業の開始の直前に前記収納庫内部を撮像することで得られた前記庫内画像を作業前画像として記憶する作業前画像記憶部と、
前記作業が終了したときに、該作業の終了の直後に、前記収納庫内部を撮像することで得られた前記庫内画像を作業後画像とし、前記作業前画像と前記作業後画像とから、両画像間の差分領域を抽出する差分領域抽出部と、
前記作業前画像又は前記作業後画像と、前記差分領域とから物品の入庫又は出庫が行われたかを判定する入出庫判定部と
を備えることを特徴とする庫内管理装置。
【請求項２】
前記作業判定部は、前記庫内画像の時間的変化の有無に基づいて、庫内で作業が行われているか否かの判定を行うことを特徴とする請求項１に記載の庫内管理装置。
【請求項３】
前記庫内画像取得部が取得した前記庫内画像を記憶する庫内画像記憶部をさらに有し、
前記作業判定部は、前記庫内画像取得部が次に庫内画像を取得したときに、前記庫内画像記憶部に記憶されている前記庫内画像を読出し、前記庫内画像取得部が取得した前記庫内画像の、前記庫内画像記憶部から読み出された前記庫内画像に対する変化量があらかじめ定められた閾値以下である場合に前記作業が行われていないと判定することを特徴とする
請求項２に記載の庫内管理装置。
【請求項４】
前記作業判定部は、前記収納庫に対する物品の出し入れが行われる方向に応じて、前記庫内画像取得部が取得した前記庫内画像と前記庫内画像記憶部から読み出された前記庫内画像の各部に重みを付けて前記変化量を計算することを特徴とする請求項３に記載の庫内管理装置。
【請求項５】
前記収納庫に挿入される使用者の手の近接を検出する近接センサを備え、
前記作業判定部は、該近接センサにより前記近接が検出されたか否かに基づいて、前記作業が行われているか否かを判定する
ことを特徴とする請求項１に記載の庫内管理装置。
【請求項６】
前記入出庫判定部は、前記作業前画像中の、前記差分領域と同じ位置に、前記差分領域の輪郭との類似度が予め定められた閾値以上の輪郭を有する画像部分が存在するときに、当該画像部分に対応する物品が前記作業前画像の前記差分領域の位置に対応する、前記収納庫内の位置から消失したと判定し、この判定結果に基づいて、当該画像部分に対応する物品の出庫が行われたか否かを判定することを特徴とする請求項１から５のいずれか一項に記載の庫内管理装置。
【請求項７】
前記入出庫判定部は、前記消失したと判定された物品に対応する画像部分の輪郭との類似度が閾値以上の輪郭を有する画像部分が前記作業後画像中に存在しないときに、当該物品が出庫されたと判定することを特徴とする請求項６に記載の庫内管理装置。
【請求項８】
前記入出庫判定部は、前記消失したと判定された物品に対応する画像部分の輪郭との類似度が閾値以上の輪郭を有する画像部分が前記作業後画像中の異なる位置に存在するときに、当該物品が庫内で移動したと判定することを特徴とする請求項６又は７に記載の庫内管理装置。
【請求項９】
前記入出庫判定部は、前記作業後画像中に、前記差分領域と同じ位置に、前記差分領域の輪郭との類似度が予め定められた閾値以上の輪郭を有する画像部分が存在するときに、当該画像部分に対応する物品が前記作業後画像の前記差分領域の位置に対応する、前記収納庫内の位置に出現したと判定し、この判定結果に基づいて、当該画像部分に対応する物品の入庫が行われたか否かを判定することを特徴とする請求項１から８のいずれか一項に記載の庫内管理装置。
【請求項１０】
前記入出庫判定部は、前記出現したと判定された物品に対応する画像部分の輪郭との類似度が閾値以上の輪郭を有する画像部分が前記作業前画像中に存在しないときに、当該物品が入庫されたと判定することを特徴とする請求項９に記載の庫内管理装置。
【請求項１１】
前記入出庫判定部は、前記出現したと判定された物品に対応する画像部分の輪郭との類似度が閾値以上の輪郭を有する画像部分が前記作業前画像中の異なる位置に存在するときに、当該物品が庫内で移動したと判定することを特徴とする請求項９又は１０に記載の庫内管理装置。
【請求項１２】
前記入出庫判定部により、入庫又は出庫が行われたと判定された物品に関する情報を在庫情報として記憶する在庫情報記憶部と、
前記在庫情報記憶部に記憶された前記在庫情報を外部に配信する庫内情報配信部とをさらに備える
ことを特徴とする請求項１から１１のいずれか一項に記載の庫内管理装置。
【請求項１３】
前記収納庫のドアの開閉状態を判定する開閉判定部と、
前記ドアが閉まる直前に前記作業前画像記憶部に記憶されている前記庫内画像をドア閉前画像として記憶するドア閉前画像記憶部とをさらに備え、
前記庫内情報配信部は、前記在庫情報記憶部に記憶された前記在庫情報に加えて、前記ドア閉前画像を配信することを特徴とする
請求項１２に記載の庫内管理装置。
【請求項１４】
前記在庫情報記憶部は、前記入出庫判定部により入庫が行われたと判定された物品の画像を記憶し、
前記入出庫判定部により出庫されたと判定された物品の画像との類似度が予め定められた閾値以上の画像が、前記在庫情報記憶部に記憶されているか否かを判定する同一物品判定部をさらに備え、
前記同一物品判定部により、前記出庫されたと判定された物品の画像との類似度が予め定められた閾値以上の画像が、前記在庫情報記憶部に記憶されていると判定された場合には、当該画像に対応する物品に関する情報を、前記在庫情報記憶部から消去することを特徴とする
請求項１２又は１３に記載の庫内管理装置。
【請求項１５】
前記入出庫判定部により入庫又は出庫が行われたと判定された物品に対応する差分領域の画像から、当該物品の種別を特定する物品認識部をさらに備え、
前記在庫情報記憶部は、前記物品認識部によって種別が特定された物品、及びその物品と同じ種別の物品の数を記憶することを特徴とする
請求項１２又は１３に記載の庫内管理装置。
【請求項１６】
収納庫内部を撮像することで得られる庫内画像を取得する処理を繰り返す庫内画像取得ステップと、
前記収納庫内で物品の入庫、出庫及び移動の少なくともいずれかのための作業が行われているか否かの判定を行う作業判定ステップと、
前記作業が開始された際に、該作業の開始の直前に前記収納庫内部を撮像することで得られた前記庫内画像を作業前画像として作業前画像記憶部に記憶させる記憶ステップと、
前記作業が終了したときに、該作業の終了の直後に、前記収納庫内部を撮像することで得られた前記庫内画像を作業後画像とし、前記作業前画像と前記作業後画像とから、両画像間の差分領域を抽出する差分領域抽出ステップと、
前記作業前画像又は前記作業後画像と、前記差分領域とから物品の入庫又は出庫が行われたかを判定する入出庫判定ステップと
を備えることを特徴とする収納庫の庫内管理方法。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
本発明の庫内管理装置は、
収納庫内部を撮像することで得られる庫内画像を取得する処理を繰り返す庫内画像取得部と、
前記収納庫内で物品の入庫、出庫及び移動の少なくともいずれかのための作業が行われているか否かの判定を行う作業判定部と、
前記作業が開始された際に、該作業の開始の直前に前記収納庫内部を撮像することで得られた前記庫内画像を作業前画像として記憶する作業前画像記憶部と、
前記作業が終了したときに、該作業の終了の直後に、前記収納庫内部を撮像することで得られた前記庫内画像を作業後画像とし、前記作業前画像と前記作業後画像とから、両画像間の差分領域を抽出する差分領域抽出部と、
前記作業前画像又は前記作業後画像と、前記差分領域とから物品の入庫又は出庫が行われたかを判定する入出庫判定部と
を備えることを特徴とする。