(57)【要約】  【解決手段】  監視ドローン方法、装置、およびシステム。前記監視ドローンは、１若しくはそれ以上の画像を撮影する画像取得デバイスと、前記監視ドローンに電力を供給する充電モジュールと、前記監視ドローンが棚を動き回れるようにする移動モジュールであって、前記画像取得デバイスは、前記監視ドローンが前記棚を動き回る際に画像を撮影して仮想立体視像を生成するものである、前記移動モジュールとを含む。  【選択図】      図２
2020530160.tif 000002
【特許請求の範囲】
【請求項１】
棚に連結するよう構成されている監視ドローンであって、
プロセッサと、
メモリと、
１若しくはそれ以上の画像を撮影する画像取得デバイスであって、前記プロセッサおよび前記メモリの少なくとも１つに繋がれているものである、前記画像取得デバイスと、
前記監視ドローンに電力を供給する充電モジュールと、
前記監視ドローンが連結される前記棚を動き回れるようにする移動モジュールであって、前記画像取得デバイスは、前記監視ドローンが前記棚を動き回る際に画像を撮影して仮想立体視像を生成するものである、前記移動モジュールと
を有する監視ドローン。
【請求項２】
請求項１に記載の監視ドローンにおいて、前記画像取得デバイスはモノカメラである、監視ドローン。
【請求項３】
請求項１に記載の監視ドローンにおいて、前記画像取得デバイスは、ステレオカメラ、ビデオカメラ、赤外線カメラ、リアル・センス・カメラ、深度カメラ、カラーカメラ、および構造化光カメラのうちの少なくとも１つである、監視ドローン。
【請求項４】
請求項１に記載の監視ドローンにおいて、前記充電モジュールは低電力充電モジュールである、監視ドローン。
【請求項５】
請求項４に記載の監視ドローンにおいて、前記監視ドローンは、電気のない棚に連結されるものである、監視ドローン。
【請求項６】
請求項１に記載の監視ドローンにおいて、前記移動モジュールは、車輪、モーター、空気圧、磁気、および浮揚のうちの少なくとも１つを含むものである、監視ドローン。
【請求項７】
請求項１に記載の監視ドローンにおいて、通信モジュール、ＧＰＳ、ディスプレイ、顔認識技術、ポインタ、ビーコン技術、および防曇モジュールのうちの少なくとも１つをさらに有するものである、監視ドローン。
【請求項８】
請求項１に記載の監視ドローンにおいて、前記ドローンは、異なる方向の画像を取得することができる複数の画像取得デバイスを有するものである、監視ドローン。
【請求項９】
請求項１に記載の監視ドローンにおいて、前記画像取得デバイスは、ズーム、枢動、および回転のうちの少なくとも１つを含むものである、監視ドローン。
【請求項１０】
請求項１に記載の監視ドローンにおいて、前記監視ドローンは、前記棚の上部、前記棚の底部、前記棚の縁部、前記棚の中央、および前記棚の価格チャネルの少なくとも１つの任意の位置に連結されるものである、監視ドローン。
【請求項１１】
監視ドローンシステムであって、
ネットワーク、コンピュータ、モバイルデバイス、およびメモリの少なくとも１つと通信する１若しくはそれ以上の監視ドローンを有し、
各監視ドローンは１若しくはそれ以上の画像を撮影する画像取得デバイスを有するものであり、
前記画像取得デバイスは前記監視ドローンが棚を動き回れるようにする移動モジュールと連結されているものであり、前記監視ドローンは前記棚に連結されるものであり、
前記画像取得デバイスは、前記監視ドローンが前記棚を動き回る際に画像を取得して仮想立体視像を生成し、前記画像を通信するものである、監視ドローンシステム。
【請求項１２】
請求項１１に記載の監視ドローンシステムにおいて、前記監視ドローンは、ｉクラウド、ポータブルデバイス、リモートコンピュータ、ネットワーク、メインフレーム、およびローカルコンピュータのうちの少なくとも１つと通信するものである、監視ドローンシステム。
【請求項１３】
請求項１１に記載の監視ドローンシステムにおいて、前記監視ドローンシステムは、前記監視ドローンの相互の位置を判定し、取得された画像から前記位置のマッピングを生成するものである、監視ドローンシステム。
【請求項１４】
請求項１１に記載の監視ドローンシステムにおいて、前記監視ドローンは、それに連結された棚、周囲の少なくとも１つの棚、その前の少なくとも１つの棚、および少なくとも１つの棚の周囲のうちの少なくとも１つの画像を取得するものである、監視ドローンシステム。
【請求項１５】
請求項１１に記載の監視ドローンシステムにおいて、前記監視ドローンは、直線、Ｃ形状、円形、ジクザク、垂直、または水平に移動するものである、監視ドローンシステム。
【請求項１６】
請求項１１に記載の監視ドローンシステムにおいて、前記監視ドローンは、時間間隔、距離間隔で、およびトリガーにより画像を取得するものである、監視ドローンシステム。
【請求項１７】
請求項１１に記載の監視ドローンシステムにおいて、前記監視ドローンシステムは、深度情報の少なくとも１つを用いて、在庫の補充、アイルから除去が必要な物、および製品に関連する人の位置の少なくとも１つを決定するものである、監視ドローンシステム。
【請求項１８】
請求項１１に記載の監視ドローンシステムにおいて、前記監視システムは、少なくとも１つの仮想マスクを発生させて画像をフィルタリングするものである、監視ドローンシステム。
【請求項１９】
請求項１１に記載の監視ドローンシステムにおいて、労働システム、従業員システム、保守システム、店舗サービス、在庫、注文システム、セキュリティシステム、配送システム、価格設定システム、マーチャンダイジングシステム、報告ツール、分析ツール、表示および入出力デバイスの少なくとも１つをさらに含むものである、監視ドローンシステム。
【請求項２０】
ドローン監視方法であって、
既定の経路で棚を動き回る工程と、
少なくとも１つの棚の少なくとも１つの画像を取得する工程であって、その取得された画像は仮想立体視像を生成するのに用いられるものであり、この仮想立体視像は前記棚またはその周囲に関連する取得された画像中の少なくとも１つの物体の少なくとも１つを決定するのに用いられるものである、
方法。
【請求項２１】
請求項２０に記載のドローン監視方法において、この方法はさらに、前記画像を、ｉクラウド、ポータブルデバイス、リモートコンピュータ、およびローカルコンピュータのうちの少なくとも１つに送信することを含むものである、方法。
【請求項２２】
請求項２０に記載のドローン監視方法において、前記仮想立体視像は、ポータブルデバイス、リモートコンピュータ、およびローカルコンピュータのうちの少なくとも１つによって生成されるものである、方法。
【請求項２３】
請求項２０に記載のドローン監視方法において、この方法はさらに、少なくとも１つの仮想マスクを発生させて画像をフィルタリングする工程を含むものである、方法。
【請求項２４】
請求項２０に記載のドローン監視方法において、この方法はさらに、前記取得された画像および前記仮想立体視像の少なくとも１つに対して分析を実行して分析データを生成する工程を含むものである、方法。
【請求項２５】
請求項２４に記載のドローン監視方法において、前記分析データは、労働システム、従業員システム、保守システム、店舗サービス、在庫、注文システム、セキュリティシステム、配送システム、価格設定システム、マーチャンダイジングシステム、レポートツール、分析ツール、表示および入出力デバイスのうちの少なくとも１つにより用いられるものである、方法。
【請求項２６】
請求項２０に記載のドローン監視方法において、この方法はさらに、少なくとも１つの他の監視ドローンと通信して位置を決定する工程を有するものである、方法。
【請求項２７】
請求項２０に記載のドローン監視方法において、前記画像を取得する工程は、それに連結される前記棚、周囲の少なくとも１つの棚、その前の少なくとも１つの棚、および少なくとも１つの棚の周囲のうちの少なくとも１つの画像を取得することを含むものである、方法。
【請求項２８】
請求項２０に記載のドローン監視方法において、前記動き回る工程は、直線、Ｃ形状、円形、ジクザク、垂直、および水平のうちの少なくとも１つである、方法。
【請求項２９】
請求項２０に記載のドローン監視方法において、前記少なくとも１つの画像を取得する工程は、時間間隔、距離間隔、およびトリガーの結果の少なくとも１つである、方法。
【請求項３０】
請求項２０に記載のドローン監視方法において、この方法はさらに、深度情報を用いて、在庫の補充、アイルからの除去が必要な物体、および製品に関する人の位置の少なくとも１つを決定することをさらに含む、方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、監視ドローンを作成および操作するシステム、装置、および方法に関する。より具体的には、本開示は、棚、冷却器、店のスタンド等に関連した活動を監視することができる監視ドローンに関する。
【背景技術】
【０００２】
マーチャンダイザー、小売業者、店舗の所有者等は一般的に商品や在庫、消費者の習慣に関する詳細を必要とする。例えば、それは、製品の展示、在庫の補充、従業員の活動、消費者の活動等に関する傾向を知るのに役立ってきた。多くの場合、それらの傾向はリアルタイムで必要となる。しかしながら、そのような情報を収集するために人を雇うには費用がかかる。このような情報の収集を補助するためにいくつかのデバイスが開発された。
【０００３】
残念ながら、そのようなデバイスは、通過を妨げ、見栄えが悪く、不正確なデータを生み出し、また他の多くの問題が存在する傾向にある。したがって、そのような詳細を取得するための改善されたシステム、装置、および方法に対するニーズがある。
【発明の概要】
【課題を解決するための手段】
【０００４】
本明細書で説明する実施形態は、監視ドローン方法、装置、およびシステムに関する。監視ドローンは、１またはそれ以上の画像を撮影する画像取得デバイスと、前記監視ドローンに電力を供給する充電モジュールと、前記監視ドローンが棚を動き回れるようにする移動モジュールであって、前記画像取得デバイスは、前記監視ドローンが棚を動き回る際に画像を取得して仮想立体視像を生成するものである、前記移動モジュールとを含む。
【図面の簡単な説明】
【０００５】
【図１】図１は、監視ドローンについて装置の一実施形態を示すブロック図である。
【図２】図２は、棚のための監視ドローン構成の一実施形態を示す図である。
【図３】図３は、冷却器のための監視ドローン構成の一実施形態を示す図である。
【図４】図４は、監視ドローンシステムの一実施形態を示す図である。
【図５】図５は、ドローン監視方法の一実施形態を示す流れ図である。
【発明を実施するための形態】
【０００６】
以下の説明において、明細書および図面全体にわたり、同様の部分にはそれぞれ同一の番号が付している。図面は必ずしも縮尺通りに描かれているわけではなく、特定の図は、明確さと簡潔さのために強調または一般化された形で示されている場合がある。
【０００７】
本開示の態様は、新規かつ有用なプロセス、機械、製造、または物質の組成、あるいはそれらの新規かつ有用な改良を含む任意の複数の特許性を有する部類または内容で本明細書に例示され説明されていることを当業者であれば理解するであろう。したがって、本開示の態様は、全体的にハードウェアに実装され、または、ソフトウェアとハードウェアの組み合わせ実装であってよく、それらは全て一般に、「回路」、「モジュール」、「コンポーネント」、若しくは「システム」（ファームウェア、常駐ソフトウェア、マイクロコード等を含む）として本明細書で参照される。さらに、本開示の態様は、１若しくはそれ以上のコンピュータ可読媒体に具体化されたコンピュータプログラム製品の形をとることができ、当該１若しくはそれ以上のコンピュータ可読媒体はその上に具体化されたコンピュータ可読プログラムコードを有する。
【０００８】
本開示の態様は、本開示の実施形態における方法、システム、およびコンピュータプログラム製品のフローチャート図および／またはブロック図を参照して本明細書で説明される。フローチャート図および／またはブロック図の各ブロック、および当該フローチャート図および／またはブロック図におけるブロックの組み合わせは、コンピュータプログラム命令、ハードウェア、またはそれらの組み合わせによって実装することができることが理解されよう。また、列挙されている全ての要素が必要なわけではなく、特定されている順序は単なる例示に過ぎないことが理解される。
【０００９】
図１は、監視ドローン１００について装置の一実施形態を示すブロック図である。監視ドローン１００は、例えば小売店や流通センターといった施設または製品を入手可能な任意の場所で製品、商品、買い物客、従業員等を監視するために使用される。監視ドローンは、棚、冷却器、スタンド、または商品、製品、物品等を保持できる任意の構造に連結することができる。監視ドローン１００は、プロセッサ（ＣＰＵ）１０２と、充電モジュール１０４と、メモリ１０６と、通信モジュール１０８と、移動モジュール１１０と、防曇モジュール１１１と、１若しくはそれ以上の画像取得デバイス１１２（複数の画像取得デバイス１１２１...１１２Ｎについて）と、入出力デバイス（Ｉ  ／  Ｏ）１１４と、ドローンモジュール１１６とを含む。いくつかの実施形態では、監視ドローン１００はまた、例えばフラッシュ、発光ダイオード（ＬＥＤ）等の光源１１８を含む。
【００１０】
メモリ１０６は、１若しくはそれ以上のコンピュータ可読媒体の任意の組み合わせとすることができる。コンピュータ可読媒体は、コンピュータ可読信号媒体、任意の種類のメモリ、またはコンピュータ可読非一時的記憶媒体であってよい。例えば、コンピュータ可読記憶媒体は、これらに限られるものではないが、電子式、磁気式、光学式、電磁気的、若しくは半導体のシステム、装置、若しくはデバイス、または前述のものの任意の適切な組み合わせであってよい。コンピュータ可読記憶媒体のより具体的な例としては、これらに限られるものではないが、ポータブル・コンピュータ・ディスケット、ハードディス、ランダム・アクセス・メモリ（「ＲＡＭ」）、読み取り専用メモリ（「ＲＯＭ」）、消去可能プログラム可能な読み取り専用メモリ（「ＥＰＲＯＭ」またはフラッシュメモリ）、リピータ付きの適切な光ファイバー、ポータブル・コンパクト・ディスク読み取り専用メモリ（「ＣＤ−ＲＯＭ」）、光学記憶装置、磁気記憶装置、または任意の前述の適切な組み合わせが挙げられる。したがって、コンピュータ可読記憶媒体は、命令実行システム、装置、またはデバイスによって、またはそれらに接続して使用するためのプログラムを含むまたは格納することができる任意の有形の媒体であってよい。
【００１１】
本開示の態様のプロセッサまたはＣＰＵ１０２を用いて動作を実行するためのコンピュータ・プログラム・コードは、これらに限定されないが、Ｗｉｎｄｏｗｓ  Ｐｒｅｓｅｎｔａｔｉｏｎ  Ｆｏｕｎｄａｔｉｏｎ（ＷＰＦ）、ＨＴＭＬ／ＣＳＳ、Ｎｏｄｅ、ＸＡＭＬ、およびＪＱｕｅｒｙ、Ｃ、Ｂａｓｉｃ、＊  Ａｄａ、Ｐｙｔｈｏｎ、Ｃ  ＋＋、Ｃ＃、Ｐａｓｃａｌ、＊  Ａｒｄｕｉｎｏ、ＪＡＶＡ（登録商標）等を含む１若しくはそれ以上のプログラミング言語、マークアップ言語、スタイルシートおよびＪａｖａＳｃｒｉｐｔ（登録商標）ライブラリの任意の組み合わせで記述され得る。さらに、利用可能な様々なコンパイラを用いて動作を実行することができる。
【００１２】
メモリ１０６上のコンピュータプログラム命令はプロセッサ１０２に提供される。この場合、プロセッサ１０２は、汎用コンピュータ、専用コンピュータ、マイクロチップ、または機械を製造するその他のプログラム可能なデータ処理装置のものであり、当該コンピュータのプロセッサまたはその他のプログラム可能な命令実行装置を介して実行する命令が前記フローチャートおよび／またはブロック図若しくはブロックで特定した機能／動作を実行するためのメカニズムを生成するようになっている。前記コンピュータ命令は、以下のうちの１若しくはそれ以上を実行し、監視ドローン１００を動かし、監視ドローン１００または当該監視ドローン１００を用いるシステム全体の状態または健康状態を与えることができる。一実施形態において、それは画像分析および／またはデータ圧縮も実行することができる。
【００１３】
これらのコンピュータプログラム命令はまたメモリ１０６（コンピュータ可読媒体）に格納することができ、それは実行されると、コンピュータ、プロセッサ、その他のプログラム可能なデータ処理装置、またはその他のデバイスが特定の方法で機能するよう指示可能であり、当該命令は、コンピュータ可読媒体に格納されている場合、実行されると、コンピュータが前記フローチャートおよび／またはブロック図若しくはブロックで特定した機能／動作を実行する命令を含んだ製造による製品を生み出す。コンピュータプログラム命令はまた、コンピュータ、プロセッサ、その他のプログラム可能な命令実行装置、またはその他のデバイスにロードされて、そのコンピュータ、その他のプログラム可能な装置またはその他のデバイス上で一連の動作工程を引き起こし、コンピュータで実行されるプロセスを生成することができ、コンピュータまたはその他のプログラム可能な装置で実行する命令が、前記フローチャートおよび／またはブロック図若しくはブロックで特定した機能／動作を実行するプロセスを提供するようになっている。
【００１４】
充電モジュール１０４は監視ドローン１００への電力の供給／維持に利用される。充電モジュール１０４は、低電力であってもよく、また有線または無線とすることができ、また以下のバッテリー、ＷＩＦＩ充電、コイル、太陽電池のうちの１つまたはそれらの組み合わせ、あるいは監視ドローン１００に充電を提供するその他のメカニズムを用いることができる。
【００１５】
通信モジュール１０８は、監視ドローン１００と、その他のデバイス、コンピュータ、ネットワーク、クラウド、Ｉ／Ｏデバイス１１４等との間における通信を促進する。通信モジュール１０８は、イーサネット（登録商標）、ＵＳＢ接続、様々な種類のポート接続、無線、それらの組み合わせ等を含むことができる。通信モジュール１０８は、リアルタイムで、間隔を置いて、オンデマンドで、またはそれらの組み合わせで通信することができる。
【００１６】
移動モジュール１１０は、棚、冷却器、スタンド、店の天井、床等を動き回ることを容易にし、そのための任意の機械的または電気的機構を用いることができる。いくつかの実施形態を図２及び図３でさらに説明する。移動モジュール１１０は、例えば、車輪、モーター、空気圧、磁気、浮揚等を用いることができる。移動モジュール１１０は、監視ドローン１００を棚、冷却スタンド等に連結する機構も提供することができる。一実施形態において、移動モジュール１１０は監視ドローン１００を既定の経路またはハードウェア構成によって設定された経路で移動させる。
【００１７】
一実施形態において、監視ドローン１００は、例えば、屋外、冷却器等に置かれる場合、結露を防止または取り除くための防曇モジュール１１１を用いることができる。防曇モジュール１１１は、電気的機構、機械的機構、流体、それらの組み合わせ等を含むことができる。ドローンモジュール１１１はまた、メモリ１０６内のコンピュータ命令を用い、プロセッサ１０２によって処理することができる。
【００１８】
監視ドローン１００は、画像取得デバイス１１２または複数の画像取得デバイス１１２１...１１２Ｎを用いることができる。画像取得デバイス１１２は、以下、モノカメラ、ステレオカメラ、ビデオカメラ、赤外線カメラ、リアル・センス・カメラ、Ｋｉｎｅｃｔカメラ、Ｌｅａｐカメラ、深度カメラ、カラーカメラ、構造化光カメラ、またはそれらの組み合わせのうちの１若しくはそれ以上であってよい。一実施形態において、複数の画像取得デバイス１１２１...１１２Ｎは、当該画像取得デバイス１１２１...１１２Ｎが異なる景色を取得きるように１若しくはそれ以上の角度で角度付けされた構成で使用される。別の一実施形態では、複数の画像取得デバイス１１２は通信して互いに対する位置を学習する。例えば、画像取得デバイス１１２は、棚またはアイル（ｉｓｌｅ）の両側で画像取得デバイス１１２と通信することができる。このため、そのような通信は、深度を用いて施設または部屋のマッピングに、例えば店舗、流通センター等のために用いられる。したがって、監視ドローン１００は、そのような施設内の物体、例えば商品、在庫、人などの位置を判定するのに用いることができる。したがって、そのような構成マットは、第３者が施設への品物の到着を判定し配置を確認するために用い得る。例えば、チップ独立型段ボールを遠隔で検証して、到着、設置、および／または店舗内での場所等を確認することができる。
【００１９】
一実施形態において、監視ドローン１００はまた、ＧＰＳ、ビーコン技術、またはＷＩＦＩ、ビーカー技術、ブルートゥース（登録商標）メッシュ、赤外線等を含む位置を学習することを可能にする任意の技術を含んでもよい。そのような実施形態では、監視ドローン１００は、例えば店舗内に製品を置く方法模索を容易にする。監視ドローン１００はまた、ディスプレイ、レーザーポインター、または任意のコミュニケーションを促進するものを含んでもよい。
【００２０】
入出力モジュール（Ｉ／Ｏ）１１４は、監視ドローン１００と共に、提示、印刷、受信、保存、分析、送信、通信等に使用される任意のデバイスとすることができる。Ｉ／Ｏ１１４は無線または有線で監視ドローン１００と結合することができる。Ｉ／Ｏ１１２は、監視ドローン１００、その周囲等に関する画像または情報等を表示、分析、印刷、発音等するために使用することができる。Ｉ／Ｏ１１４はまた、例えば、更新、リセット、データ検索、またはデータ入力、バイタルの学習、トラブルシューティング、監視ドローン１００の様々なコンポーネントの制御等のために監視ドローン１００に情報を送信することができる。
【００２１】
一実施形態において、監視ドローンは音声認識および／または表示が可能である。例えば、買い物客は監視ドローン１００に品物の場所を尋ねてもよい。監視ドローン１００は例えばＬＥＤディスプレイ等上で場所を表示することができる。監視ドローン１００が他の監視ドローン１００と通信できる実施形態では、それは質問の場所で監視ドローン１００に通知することができ、顔認識を用いて、品物の場所により近い監視ドローン１００が、例えば赤外線またはレーザーポインター等のポインタを用いて、その買い物客へ特定の経路または場所を強調表示することができる。顔認識が用いられない場合でも、その場所に近い監視ドローン１００は、そのような技術を用いて場所を強調表示することができる。
【００２２】
図２は、棚２００のための監視ドローン１００の構成を示す一実施形態である。監視ドローン１００は、棚の周囲または棚のどこにでも、すなわち棚２００の前底部２０２、後底部２０４、後部頂部２０６、前部頂部２０８、および／または側面２１０に近接して配置することができる。複数の監視ドローン１００を棚２００の周りに配置し得る。一実施形態において、監視ドローン１００は、棚２００の価格チャネル上のレール２１２上に配置される。レール２１２は、直線、Ｃ形状、または必要な任意の形状であってよい。レール２１２により監視ドローン１００は、ギア／歯、磁気ロック、磁気浮上等を利用して棚を動き回ることができる。一実施形態において、監視ドローン１００は、レールなしで棚２００を動き回る。任意の数のドローンを棚の周りまたは棚に置くことができる。
【００２３】
一実施形態において、監視ドローン１００は、電力を必要とせずに「インテリジェント棚」を作成するために棚に連結される。例えば、監視ドローンは、単一の画像取得デバイスと、コイルまたはその他の無線充電メカニズムによって充電されるバッテリー等の低電源とを含む。監視ドローン１００は、棚の場合は当該棚の端または価格チャネル部分を上下に移動する。監視ドローン１００は、盗難を防止するため、または移動中に近くにいる人に害を与えないように、透明なチューブ内に配置することができる。画像取得デバイスは、移動しながら、例えば、その上にある棚、その前の棚、その周りの一連の棚、または棚の周囲の画像を撮影する。
【００２４】
監視デバイス１００によって取得された画像は、つなぎ合わせて棚および／またはその周囲の仮想立体画像または仮想立体視像を形成することができる。一実施形態において、画像は、仮想立体視像（画像）への画像のつなぎ合わせを容易にするために、時間間隔または距離間隔をおいて取得される。別の一実施形態では、画像は分析され、共通ピクセルに基づいてつなぎ合わされる。例えば、モノカメラを用いて仮想立体画像を生成し、平均を作成し、深度を決定したりすることができる。
【００２５】
一実施形態において、仮想マスクを発生させて画像間の差異を除去し、また例えばカート等の短期間に通過または導入される物体とは対照的に監視されている物体をよりよく識別することができる。
【００２６】
一実施形態において、監視ドローン１００は、棚アセンブリの上部等のより高い位置に配置されてもよく、または棚アセンブリの底部に配置されてもよい。棚アセンブリは２若しくはそれ以上の棚２００である。さらに別の一実施形態では、画像取得デバイスは、視認性を促進するため、または特定の景色を取得するために角度を調整することができる。一実施形態において、監視ドローン１００は棚２００またはそれが連結されている棚アセンブリを監視する。別の一実施形態では、監視ドローン１００は、その場所の反対側にある棚または棚アセンブリを監視する。このため、監視ドローン１００はレールを横切って移動し、棚の或る部分、棚全体、アイルを横切る棚、またはアイルを横切る棚アセンブリの画像を取得する。本明細書で説明する棚のためのすべての機能と設定は、冷却器、スタンド、小売店のディスプレイ、流通施設等にも適用することができる。
【００２７】
図３は、冷却器３００のための監視ドローン１００の構成を示す実施形態である。監視ドローン１００は、冷却器２００と、その冷却器３００の上部背面３０２、上部前面３０４、下部背面３０６、下部前面３０８、または任意の側面３１０で連結することができる。
【００２８】
図４は、監視ドローンシステム４００の一実施形態を示す図である。監視ドローンシステム４００は、図１について上述したような監視ドローン１００と、データシステム４０２とを含む。データシステム４０２は、以下のクラウド、ネットワーク、パーソナルコンピュータ、メインフレーム、ポータブルデバイス等のうちの１若しくはそれ以上を含むことができる。図４には、例として、クラウド、ネットワーク、およびパーソナルコンピュータが示されている。データシステム４０２は、監視ドローン１００に無線または有線で結合されていてよい。データシステム４０２は監視ドローン１００からデータおよび／または画像を受信する。データシステム４０２は、受信した画像の分析を実行して、画像内の品物を監視すべきかどうか、または画像内に一時的にあり、したがって監視する必要がない品物であるかどうかを判定することができる。
【００２９】
データシステム４０２は、画像の分析を実行し、以下のシステム：労働／従業員システム、保守／店舗サービス、在庫／注文、セキュリティ、配送システム、価格設定システム（いくつかの場合では動的価格設定）、マーチャンダイジング、レポート／分析ツール、ディスプレイおよび／またはＩ／Ｏデバイスの１若しくはそれ以上に分析データを提供することができ、またアラーム／アラートを発生させてもよい。一実施形態において、データシステム４０２の機能のいくつかは監視ドローン１００によって実行されてもよい。
【００３０】
例えば、監視ドローン１００はレール２１２を用いて棚２００の価格設定チャネルを移動する。ドローン１００の画像取得デバイス１１２は、棚２００上の製品または在庫の画像を取得する。通信モジュール１０８は画像をデータシステム４０２に送信する。データシステム４０２は、画像間の差異を分析し、それに応じて、以下：一貫性のある画像内の品物（棚上の製品）、短期間の画像内の品物（すなわち、顧客の歩行）、長期間にわたる画像内の品物であるが一貫性がない（つまりカートの置き忘れ）の１若しくはそれ以上を決定する。そのような判定は、深度情報、継続時間、および／またはそれらの組み合わせを用いて決定することができる。一実施形態において、通信モジュール１０８は、モバイルデバイス、その他の画像取得デバイス、小売業者、買い物客、在庫ストッカー等との通信を容易にする。
【００３１】
このため、データシステム４０２がある品物が残されていると判定した場合、メッセージをアラートシステムまたは従業員のモバイルデバイス等に送信し得る。しかしながら、データシステム４０２は、品物が画像内に一貫してあると判定し、製品として識別してもよい。したがって、製品の深度が時間とともに変化する場合、在庫の変更が記録され、他のシステムに在庫変更の説明、棚の補充の要求、購入時の消費者の習慣の判定等が通知されてもよい。別の一実施形態では、買い物客が画像取得デバイスの視野内を歩いたため、データシステム４０２は品物が短時間そこにあると判断した。そのような場合、買い物客に関連するデータは、顔認識、商品化、プラノグラムに使用され、あるいは無視され得る。更なる別の一実施形態では、ドローン監視システムを用いて、従業員の効率、適切な製品棚の維持の有効性等を判定することができる。
【００３２】
ドローン監視システム４００は、製品間の間隔を判定することができ、三角測量／深度を用いて、品物が距離閾値内に配置されているか、または見当たらないかを判定する（閾値から遠い品物は棚の空のスポットを意味し、距離閾値から近い品物はアイル内の物を意味する等）。距離閾値は、設定距離、範囲、および／または監視システム４００による経時的な学習であってよい。その分析は、以下：製品、製品の説明、製品の位置、製品の位置の正確性（プラノグラム）、製品の量（数）、閾値を超えるまたは下回る製品の量、価格変更の必要性、価格の的確性、セキュリティの問題、顔認識、買い手の習慣等の１若しくはそれ以上を決定するのに用いることができる。
【００３３】
図５は、ドローン監視方法５００の一実施形態を示す流れ図である。この方法は、工程５０２で開始し、工程５０４に進む。工程５０４で、方法５００は、監視ドローンを較正および／または訓練して、１若しくはそれ以上の機能について、例えば監視ドローンがその画像取得デバイスを較正するように、実行準備させ、監視している製品を判定し、その製品種類、その表現、棚上のその位置、店舗内のその位置に関連するデータ、その製品または店舗に関連するメタデータ、時刻／日付設定、動きの較正、通信ハンドシェイクを学習または受け取る。
【００３４】
次に、工程５０６で、方法５００は、動き回りながら画像を取得し、工程５０８で画像を処理する。一実施形態において、画像の処理は、画像をメモリにアーカイブすること、および／または送信する画像を準備することであってよい。別の一実施形態では、工程５０６で、方法５００は、画像の有効性、品質および／または分類を決定することができる。更なる別の一実施形態では、画像を分析して画像内容分析に基づく監視データを提供することができる。工程５１０で、方法５００は画像および／またはデータを送信し、その方法が工程５１２で終了する。
【００３５】
これらの品物は全て同一のシステム４００にあるように示されているが、それらは複数のシステムに分散されていてもよく、当該複数のシステムは同じ場所にあってもそうでなくてもよい。一実施形態において、画像および／またはデータはクラウドシステムに通信される。
【００３６】
当業者であれば、広範な発明の概念から逸脱することなく、上述の実施形態に変更を加えることができることを理解されよう。したがって、本開示は本明細書の特定の実施形態に限定されるものではなく、添付の特許請求の範囲によって定義される本開示の趣旨および範囲内の修正を網羅することを意図していることが理解される。
【図１】
2020530160.tif 000003
【図２】
2020530160.tif 000004
【図３】
2020530160.tif 000005
【図４】
2020530160.tif 000006
【図５】
2020530160.tif 000007
【国際調査報告】
2020530160.tif 000008