(57)【要約】  小売店ディスプレイコンプライアンスを測定する方法およびシステムが提供される。１つまたは複数の小売店状態の１つまたは複数のイメージが取り込まれ、関連情報と関連付けられる。その１つまたは複数の取込みイメージおよび関連情報が、格納および処理のために処理位置に送信される。その１つまたは複数の取込みイメージおよび関連情報が処理位置で受信され、リポジトリに格納され、処理される。１つまたは複数の取込みイメージ内の１つまたは複数の小売店状態がライブラリと比較され、それが識別され、識別情報が得られる。１つまたは複数の小売店状態に関する１つまたは複数の識別後取込みイメージおよび識別情報がリポジトリに格納される。１つまたは複数の取込みイメージおよび識別情報内の１つまたは複数の小売店状態が分析され、分析に基づいて１つまたは複数の概要レポートあるいは１つまたは複数の警報が生成される。
2008537226.tif 000002
【特許請求の範囲】
【請求項１】
小売店ディスプレイコンプライアンスを測定する方法であって、
１つまたは複数の小売店状態の１つまたは複数のイメージを取り込むステップと、
前記１つまたは複数の取込みイメージを関連情報と関連付けるステップと、
前記１つまたは複数の取込みイメージおよび前記関連情報を格納および処理のために処理位置に送信するステップと、
前記１つまたは複数の取込みイメージおよび前記関連情報を前記処理位置で受信し、前記１つまたは複数の取込みイメージおよび関連情報をリポジトリに格納するステップと、
前記１つまたは複数の取込みイメージを処理するステップと、
前記１つまたは複数の取込みイメージ内の前記１つまたは複数の小売店状態をライブラリと比較し、前記１つまたは複数の小売店状態を識別し、前記１つまたは複数の小売店状態についての識別情報を得るステップと、
前記１つまたは複数の小売店状態に関する前記１つまたは複数の識別後取込みイメージおよび識別情報を前記リポジトリに格納するステップと、
前記１つまたは複数の取込みイメージおよび識別情報内の前記１つまたは複数の小売店状態を分析するステップと、
前記分析に基づいて１つまたは複数の概要レポートあるいは１つまたは複数の警報を生成するステップと
を含む方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は一般に消費者製品販売の分野に関し、より詳細には、自動化されたデジタルイメージ取込および分析を介して小売店ディスプレイコンプライアンスを測定する方法およびシステムに関する。
【背景技術】
【０００２】
本開示は、参照によりその内容全体が本明細書に組み込まれる「Ｍｅｔｈｏｄ  Ａｎｄ  Ｓｙｓｔｅｍ  Ｆｏｒ  Ａｕｔｏｍａｔｉｃａｌｌｙ  Ｍｅａｕｒｉｎｇ  Ｒｅｔａｉｌ  Ｓｔｏｒｅ  Ｄｉｓｐｌａｙ  Ｃｏｍｐｌｉａｎｃｅ」という名称の２００５年４月１３日に出願された仮出願６０／６７０８０２号に基づき、その特典を主張するものである。
【０００３】
小売店の人の出入りが多いエリアの２次位置に設置された大型ディスプレイを使用すると、消費者製品の販売が、その１次棚位置から直接販売された同一の製品の販売と比較して劇的に増加することが示されている。その結果、製造業者は、例えば通路端ディスプレイ（ｅｎｄ−ｏｆ−ａｉｓｌｅ  ｄｉｓｐｌａｙ）、スタンドアロンディスプレイ、販売地点ディスプレイ（ｐｏｉｎｔ−ｏｆ−ｓａｌｅ  ｄｉｓｐｌａｙ）、パレットディスプレイなどの形態の、小売店内のディスプレイスペースの購入に年間数十億ドルを費している。ある場合には、製造業者は、製品販売を促進するために、指定の期間に食料雑貨店またはスーパーマーケットでの製品の最良の位置、例えば目の高さの棚または通路端ディスプレイに配置するための料金を小売業者に支払うことがある。
【０００４】
小売業者が適切に製造業者の製品およびディスプレイを陳列していることを保証するために、製造業者は通常、製造業者の人員または独立の監査人を小売場所に派遣する。監査人は、製造業者にとって満足が行き、製造業者が支払いをした仕方でディスプレイが設置されているかどうかを検証する。しかし、そのような監査に伴う問題は、監査が通常はサンプル的に行われ、通常は全マーケットの１０％未満であることである。監査の頻度は非常に限られており、せいぜい週に１度である。例えば、数百の小売店のチェーンを定期的に検査することは、全国にわたって配置されている場合には特に、費用がかかり、困難である。次いで、この小さいサンプルに基づいて、チェーンまたはマーケットに関して結果が見積もられる。例えば食料雑貨店の商品は回転率が高いので、ディスプレイは日ごとに変化し、それにより、現在のレポートの方法が実際の店の状態の公正な表現とはならなくなる。
【発明の開示】
【発明が解決しようとする課題】
【０００５】
製造業者は、それに対する支払いを行った場所と期間に小売店が実際に製造業者の促進する製品を販売していることを保証するための十分な方法を持たずに小売ディスプレイスペースに対して数十億ドルを支払っていることに気付くことがしばしばある。したがって、小売店ディスプレイコンプライアンスを監査するための、信頼性が高く効率的な方法が求められている。
【課題を解決するための手段】
【０００６】
本発明の一実施形態による、小売店ディスプレイコンプライアンスを測定する方法は、１つまたは複数の小売店状態の１つまたは複数のイメージを取り込むこと、１つまたは複数の取込みイメージを関連情報と関連付けること、１つまたは複数の取込みイメージおよび関連情報を格納および処理のために処理位置に送信すること、１つまたは複数の取込みイメージおよび関連情報を処理位置で受信し、１つまたは複数の取込みイメージおよび関連情報をリポジトリに格納すること、１つまたは複数の取込みイメージを処理すること、１つまたは複数の取込みイメージ内の１つまたは複数の小売店状態をライブラリと比較し、１つまたは複数の小売店状態を識別し、１つまたは複数の小売店状態についての識別情報を得ること、１つまたは複数の小売店状態に関する１つまたは複数の識別後取込みイメージおよび識別情報をリポジトリに格納すること、１つまたは複数の取込みイメージおよび識別情報内の１つまたは複数の小売店状態を分析すること、ならびに分析に基づいて１つまたは複数の概要レポートあるいは１つまたは複数の警報を生成することを含む。
【０００７】
本発明の一実施形態による、小売店ディスプレイコンプライアンスを測定するシステムは、１つまたは複数の小売店状態の１つまたは複数のイメージを取り込むイメージ取込みユニットと、１つまたは複数の取込みイメージを関連情報と関連付ける手段と、１つまたは複数の取込みイメージおよび関連情報を送信する手段、ならびに１つまたは複数の取込みイメージおよび関連情報を受信する手段と、１つまたは複数の取込みイメージを処理する手段と、１つまたは複数の取込みイメージ内の１つまたは複数の小売店状態をライブラリと比較し、１つまたは複数の小売店状態を識別し、１つまたは複数の小売店状態についての識別情報を得るイメージ認識モジュールと、１つまたは複数の識別後取込みイメージおよび識別情報を格納するリポジトリと、１つまたは複数の取込みイメージおよび識別情報内の１つまたは複数の小売店状態を分析し、分析に基づいて１つまたは複数の概要レポートあるいは１つまたは複数の警報を生成する報告エンジンとを含む処理位置を含む。
【０００８】
本発明の一実施形態による、小売店ディスプレイコンプライアンスを測定するコンピュータ実行可能コードを含むコンピュータ記憶媒体は、１つまたは複数の小売店状態の１つまたは複数のイメージを取り込むコードと、１つまたは複数の取込みイメージを関連情報と関連付けるコードと、１つまたは複数の取込みイメージおよび関連情報を格納および処理のために処理位置に送信するコードと、１つまたは複数の取込みイメージおよび関連情報を処理位置で受信し、１つまたは複数の取込みイメージおよび関連情報をリポジトリに格納するコードと、１つまたは複数の取込みイメージを処理するコードと、１つまたは複数の取込みイメージ内の１つまたは複数の小売店状態をライブラリと比較し、１つまたは複数の小売店状態を識別し、１つまたは複数の小売店状態についての識別情報を得るコードと、１つまたは複数の小売店状態に関する１つまたは複数の識別後取込みイメージおよび識別情報をリポジトリに格納するコードと、１つまたは複数の取込みイメージおよび識別情報内の１つまたは複数の小売店状態を分析するコードと、分析に基づいて１つまたは複数の概要レポートあるいは１つまたは複数の警報を生成するコードとを含む。
【０００９】
本発明の一実施形態による、小売店ディスプレイコンプライアンスを測定するコンピュータ実行可能コードを含むコンピュータ記憶媒体は、機器の位置を識別かつ検証するコードと、１つまたは複数の小売店状態の１つまたは複数のイメージを取り込むコードと、１つまたは複数の小売店状態の１つまたは複数の取込みイメージを格納するコードと、１つまたは複数の小売店状態の１つまたは複数の取込みイメージを処理するコードと、１つまたは複数の小売店状態の１つまたは複数の取込みイメージを処理位置に送信するコードと、１つまたは複数の小売店状態の１つまたは複数の取込みイメージが処理位置に首尾よく送られたかどうかを示す確認を生成するコードとを含む。
【００１０】
添付の図面を参照しながら、以下の詳細な説明から本願の特徴をより容易に理解することができる。
【発明を実施するための最良の形態】
【００１１】
本発明は、自動化されたデジタルイメージ取込みおよび分析を介して小売店ディスプレイコンプライアンスを測定する（方法およびシステムの形態の）ツールを提供する。図１に、本発明の方法およびシステムを実装することのできるコンピュータシステム１００の一例を示す。本発明のシステムおよび方法を、コンピュータシステム、例えばメインフレーム、パーソナルコンピュータ（ＰＣ）、ハンドヘルドコンピュータ、またはサーバ上で動作するソフトウェアアプリケーションの形態で実装することができる。ソフトウェアアプリケーションを、コンピュータシステムでローカルにアクセス可能な記録媒体、例えばフロッピィディスク、コンパクトディスク、またはハードディスク上に格納することができ、あるいはコンピュータシステムからリモートであり、ネットワーク（例えばローカルエリアネットワークまたはインターネット）に対する有線またはワイヤレス接続または別の伝送媒体を介してアクセス可能でよい。
【００１２】
コンピュータシステム１００は、中央演算処理装置（ＣＰＵ）１０２、プログラムおよびデータ記憶装置１０４、プリンタインターフェース１０６、ディスプレイユニット１０８、（ＬＡＮ）ローカルエリアネットワークデータ伝送コントローラ１１０、ＬＡＮインターフェース１１２、ネットワークコントローラ１１４、内部バス１１６、および１つまたは複数の入力装置１１８（例えばキーボードまたはマウス）を含むことができる。図示するように、リンク１２２を介してシステム１００をデータベース１２０に接続することができる。
【００１３】
イメージ取込みユニットの使用により、小売店に設置されたディスプレイを定期的に一日中スキャンおよび監視する手段が得られる。本開示の方法およびシステムは、小売店状態のデジタルイメージ、例えば複数の小売店のディスプレイおよび棚の状態の画像を取り込み、格納することができる。こうした取込みイメージを処理位置に例えばインターネットを介して電子的に送る前に、日付、時刻、および位置情報を記録することができる。処理位置は中央プロセッサでよい。次いで、取込みイメージをライブラリ内のエントリと一致させてディスプレイ上の製品を識別することができる。製品を識別できるだけでなく、ディスプレイ上に満たされた製品の量を近似することもできる。ディスプレイ活動をレポートとして要約し、製造業者の関係者または小売業者に対して例えば電子フォーマットまたはレポートフォーマットで入手可能にすることができる。例えば、製造業者は、報告を掘り下げて、レポートが発行されたディスプレイの写真を確認することができる。
【００１４】
本発明の一実施形態による、自動化されたデジタルイメージ取込みおよび分析を介して小売店ディスプレイコンプライアンスを測定するシステムを、図２Ａを参照しながら論ずる。システム２０は、イメージ取込みユニット２１、製品ディスプレイ２２、製品ディスプレイ２２ａ、イメージ認識モジュール２３、ライブラリ２４、リポジトリ２５、および報告エンジン２６を含む。１つまたは複数の製品ディスプレイ２２を含む小売店１でイメージ取込みユニット２１を使用することができる。処理位置２は、イメージ認識モジュール２３、ライブラリ２４、リポジトリ２５、報告エンジン２６、外部データリポジトリ２７、および例外編集機構２８を含む。外部データ２７および例外編集機構２８と共に報告エンジン２６を使用して、１つまたは複数のレポートおよび／または警報を生成することができる。例えば、レポートは、ブランドビュー２９、販売チームビュー３０、マーチャンダイジングビュー３１、ストア・オペレーション・ビュー３２、および／または標準電子データフィード３３の形でよい。
【００１５】
本発明の一実施形態による、小売店ディスプレイコンプライアンスを測定する方法を、図２Ａおよび２Ｂを参照しながら論ずる。イメージ取込みユニット２１は、例えば製造業者製品ディスプレイ２２、２２ａ、および小売店１内の他の小売店状態のイメージを取り込む（ステップＳ２０１）。イメージ取込みユニット２１は、以下でさらに詳細に説明する以下の装置を含むことができる。店内セキュリティカメラ、カメラフォン、固定ビデオまたは他のデジタルカメラ、移動ビデオまたは他のデジタルカメラ（例えば、店のあるエリアから別のエリアに移動する移動トラックに取り付けられたカメラ）、ウェブカメラ、モバイル取込みユニット、モバイルカート、および／または自走ロボット。１つまたは複数の取込みイメージが日付、時刻、および位置情報などの関連情報と関連付けられ（ステップＳ２０２）（例えば、店名、店の位置、ディスプレイ位置、ディスプレイタイプ、イメージ取込みの日付および時刻）、取込みイメージと関連情報が共に、格納および処理のためにイメージ取込みユニット２１から処理位置２に送信される（ステップＳ２０３）。これは、イメージ取込みユニット２１からの有線接続またはワイヤレス接続を介するものでよい。
【００１６】
処理位置２は、１つまたは複数の取込みイメージおよび関連情報を受信し、１つまたは複数の取込みイメージをリポジトリ２５に格納する（ステップＳ２０４）。イメージ認識モジュール２３は、１つまたは複数の取込みイメージを処理し、イメージが十分な品質であるかどうか、十分な内容を含んでいるか否かを判定する（ステップＳ２０５）。１つまたは複数の取込みイメージ内の１つまたは複数の小売店状態を識別するために、イメージ認識モジュール２３は、１つまたは複数の小売店状態をライブラリ２４と比較し、各小売店状態を例えば製品と突き合わせる。イメージ認識モジュール２３はまた、各小売店状態についての識別情報も得る（ステップＳ２０６）。例えば、識別情報は、店名、店の位置、ディスプレイ位置、ディスプレイタイプ、イメージ取込みの日付および時刻、ディスプレイ量（Ｄｉｓｐｌａｙ  Ｑｕａｎｔｉｔｙ）、ユニバーサル製品コード（Ｕｎｉｖｅｒｓａｌ  Ｐｒｏｄｕｃｔ  ｃｏｄｅ）（「ＵＰＣ」）、ブランド、説明、サイズ、カテゴリなどを含むことができる。次いで、１つまたは複数の識別後取込みイメージおよび識別情報がリポジトリ２５に格納される（ステップＳ２０７）。
【００１７】
報告エンジン２６は、リポジトリ２５に格納された情報を他の外部データリポジトリ２７（例えば販売情報、在庫情報）と共に分析および編集し、情報の概要および／あるいは１つまたは複数の警報を生成する（ステップＳ２０８およびＳ２０９）。概要をレポートフォーマットおよび／または電子データフィードフォーマットで製造業者または小売業者の内部報告システムに提供することができる。例えば、１つまたは複数の小売店状態の生画像フィードおよび／または生データフィードを提供することができる。報告エンジン２６はまた、１つまたは複数の小売店状態が満たされ、または超過するときに自動警報を提供することもできる。こうした警報は、Ｅメールなどによって遠隔通信リンクを介して送ることができる。例えば、一定の数の特定の製品のみが小売店の棚の上に残っている場合、報告エンジンは自動Ｅメール警報を生成し、例えば製造業者に送ることができる。報告エンジン２６はまた、異なるユーザに対して異なるビューの情報を編集することもできる。例えば、ブランドビュー２９、販売チームビュー３０、マーチャンダイジングビュー３１、および／またはストア・オペレーション・ビュー３２である。さらに、報告エンジン２６は、任意の所与の時間に、小売店内の任意の場所の任意の小売店内の任意の取込みイメージへのアクセスを与えることできる。
【００１８】
イメージ取込みユニット
ａ）アドホック手法
本開示の一実施形態によれば、店内セキュリティカメラ、カメラフォン、ウェブカメラ、固定ビデオまたは他のデジタルカメラ、および移動ビデオまたは他のデジタルカメラの各装置のうちの１つまたは複数の使用を含むことのできるアドホック手法を使用することによってイメージを取り込むことができる。例えば、ディスプレイや棚などの小売店状態のイメージをデジタルカメラおよび／またはカメラフォンで撮影することができ、格納および処理のためにそれを処理位置にＥメールすることができる。アドホック手法を使用して撮影されたイメージを、アドホックビューイングのためにリポジトリ２５に格納することができる。処理位置２は、例えば携帯電話で撮影されるイメージをアップロードするためのウェブポータルを含むことができる。ウェブポータルは、無許可アクセスを防止するためのユーザ識別およびパスワードと、店、場所、説明などを含む、各イメージの報告に関するキーデータを取り込むためのデータ入力画面と、画像をアップロードし、処理および格納のためにそれを待ち行列化する能力とを含むことができる。こうしたイメージが送信されるとき、こうしたイメージは、小売店識別、小売店内の画像の場所のテキスト説明などの関連情報を含むべきである。本開示の一実施形態によれば、アドホックイメージ取込み手法を使用して取り込まれたイメージの送信の前に、潜在的なコンピュータウィルス、ワームなどに関してイメージをスキャンすべきである。
【００１９】
ｂ）モバイル取込みユニット
本開示の別の実施形態によれば、イメージ取込みユニット２１はモバイル取込みユニットである。モバイル取込みユニットは、例えば、移送が容易であり、ユーザが店から店に搬送することを可能にするポータブルユニットでよく、または、例えば店内の通路を通じて楽に押すことによってユーザがイメージを取り込むことを可能にするホイール付きのカート（ショッピングカートと同様のサイズ）の形態の、より大きなユニットでよい。例えば、ショッピングカートと同様のフォームサイズのモバイル取込みユニットは、カートを使用しない店で有用であることがあり、一方ポータブルユニットは、カートを配置することのできない狭い通路を有する店で使用されることになる。モバイル取込みユニットは（例えば電動機を使用することによって）自走することができ、充電可能で、バックアップ電源を含むべきである。使用されないとき、ポータブルモバイル取込みユニットは待機モードに入る。モバイル取込みユニットが小売店状態のイメージの取込みを終了したとき、ユニットをその電池を充電するために電源に接続する合図としてスピーカから音を放出することができる。
【００２０】
モバイル取込みユニットはタッチスクリーンＰＣを含むことができ、モバイル取込みユニットを複数のユニバーサルシリアルバス（「ＵＳＢ」）装置にリンクし、給電ＵＳＢハブを介してそれを制御することができる。一実施形態によれば、ＰＣ上のソフトウェアは、各モータのモータ速度および方向を制御することができ、ＰＣが、小売店を通じてモバイル取込みユニットを駆動するのに人々が使用するインターフェースを制御することが可能となる。ソフトウェアはまた、店を通じたモバイル取込みユニットの移動を追跡および記録することもできる。カメラトリガホイールは、例えばホイールの回転をカウントすることにより、ＰＣがモバイル取込みユニットの前方移動および後方移動を測定することを可能にすることができる。画像スティッチングのために、ＰＣは、次のイメージを取り込む前にモバイル取込みユニットが移動する必要のある適切な距離を計算することができる。例えば、画像を互いにスティッチングして、小売店状態の複数のイメージからパノラマビューを作成するのに必要な最適な水平および垂直オーバラップによってこの計算を求めることができる。モバイル取込みユニットと共に１つまたは複数のＵＳＢカメラを使用することができる。一実施形態によれば、モバイル取込みユニットは、画像品質を改善するために、ライトを使用してディスプレイを照明することができる。
【００２１】
モバイル取込みユニットは、複数のＵＳＢ赤外線装置を使用して、モバイル取込みユニットと、各小売店内のディスプレイ、棚、および／または他の物体との間の距離を測定かつ記録することができる。
【００２２】
本開示の代替実施形態によれば、モバイル取込みユニットは、人工知能を使用して自動的かつ自立的に小売店内を動き回って１つまたは複数の小売店状態のイメージを取り込む自走ロボットでよい。人々の注意をロボットの実際の使命からそらすために、ロボットシェルは、小売業者用のマーケティングビークルでよい。例えば、シェルは、ストアマスコットでよく、かつ／または広告をその上に表示または放送することのできるビデオ画面を含むことができる。製品の場所、価格チェック、調理レシピなどの質問を尋ねるために買物客が画面を使用することもできる。店のどのエリアを取り込まなければならないかを知ることができることに加えて、ロボットは、その電池を充電するために自動的にそれ自体をドッキングすることもできなければならない。自走ロボットは、店内ナビゲーションシステム、例えばグローバルポジショニングシステム（「ＧＰＳ」）タイプの技術、またはロボットがその周囲を見て、ホイールの回転をカウントし、店を「学習」して、通路の位置を認識する技術を必要とすることがある。ロボットは履歴画像データとＸ−Ｙ座標を共に使用して、通路がどこにあるかを学習することができるだけでなく、特定の場所が例えばパンの通路または乳製品の通路であることを学習することもできる。例えば、どちらのデータの組もロボットで作成することができ、次いで処理位置２にリンクすることができ、その結果、システムは店内の特定の場所が例えばパンの通路であることを学習する。経時的に店内のこの場所で多くのパン商品を見つけることにより、ロボットは、イメージ内に見つけたＵＰＣにＸ−Ｙ座標をマッピングすることによってパン区画の場所および境界を学習することができる。ライブラリ２４内の製品階層により、データ入力をせずに区画を識別することが可能となる。例えば、イメージ内のすべてのＵＰＣの９０％がライブラリ２４のパン区画内にある場合、実際のデータによってそのマッピングが否定されるまで、店内のその場所を「Ｂｒｅａｄ」と符号化することができる。
【００２３】
本開示の一実施形態によれば、モバイル取込みユニット３０は、Ｒａｄｉｏ  Ｆｒｅｑｕｅｎｃｙ  Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ（「ＲＦＩＤ」）を使用して店内を自動的にナビゲートすることができる。
【００２４】
以下で図３Ａおよび３Ｂを参照しながら本開示の一実施形態によるモバイル取込みユニットを論ずる。モバイル取込みユニット３０は、識別および検証手段３１、取込み手段３２、格納手段３３、処理手段３４、および送信手段３５を含むことができる。識別および検証手段３１は、モバイル取込みユニット３０の場所を識別かつ検証する（ステップＳ３０１）。例えば、小売店外にある間は、モバイル取込みユニット３０はＧＰＳ技術を使用して小売店位置を識別および確認することができる。モバイル取込みユニット３０は、処理位置から情報および／または更新を受信することができる（ステップＳ３０２）。取込み手段３２は、１つまたは複数の小売店状態の１つまたは複数のイメージを取り込む（ステップＳ３０３）。格納手段３３は、所定の時間、１つまたは複数の小売店状態の１つまたは複数の取込みイメージを一時的に格納する（ステップＳ３０４）。処理手段３４は、１つまたは複数の小売店状態の１つまたは複数の取込みイメージを処理する（ステップＳ３０５）。送信手段３５は、１つまたは複数の小売店状態の１つまたは複数の格納後取込みイメージを処理位置２に送信する（ステップＳ３０６）。１つまたは複数の取込みイメージが首尾よく処理位置２に送信されたか否かを示す確認を生成することができる（ステップＳ３０７）。
【００２５】
モバイル取込みユニットの取込み手段３２は、１つまたは複数のデジタルカメラ、ビデオカメラ、ウェブカメラなどを含むことができる。例えば、複数の低コストウェブカメラをモバイル取込みユニット上の高い位置および／または低い位置に取り付けて、棚の平坦かつ完全なイメージ取込みを得ることができる。例えばエンドキャップディスプレイ、通路内ディスプレイ、および標準ゴンドラ（床から８フィートの高さまで）の適切な角度で画像を撮影するようにカメラを配置することができる。ディスプレイ全体のイメージと、通路が非常に狭い棚のイメージを取り込むのに魚眼レンズを使用することもできる。モバイル取込みユニット３０は、例えばポータブルユニットまたはカートに固定されないカメラも含むことができる。これにより、カートに取り付けられたカメラで取り込むことが難しいショットに関して固定されないカメラを使用する柔軟性が得られる。例えば、コフィンフリーザ（ｃｏｆｆｉｎ  ｆｒｅｅｚｅｒ）、ドアに標識または霜が付いた冷凍庫、棚の正面にディスプレイを有するプラノグラム区画（ｐｌａｎｏｇｒａｍ  ｓｅｃｔｉｏｎ）などは問題となることがある。本開示の一実施形態によれば、モバイル取込みユニットは、運動検出器技術を使用してイメージ取込みを開始および停止することができる。
【００２６】
モバイル取込みユニットは、インターネットに接続するための手段、例えばワイヤレスインターネット接続を含むことができる。インターネット接続の可用性に応じて様々な方式で１つまたは複数の取込みイメージが処理位置２に送信される。ユニットが使用される小売店でインターネット接続が利用可能でない場合、モバイル取込みユニット３０は、高速インターネット接続を使用して、バッチプロセスで１つまたは複数の取込みイメージをすべて一緒に送信することができる。アップロードプロセスが１つまたは複数の取込みイメージの送信中に中断された場合、プロセスは、それが中断されたところで再始動すべきである。例えば、アップロードプロセスが４００個のイメージのうちの３５０番目のイメージで失敗した場合、アップロードは３５１番目のイメージで再始動すべきである。同様に、処理位置２との接続が失われた場合、モバイル取込みユニット３０は、接続を自動的に再確立することができるべきである。本開示の一実施形態によれば、イメージ転送で圧縮技術を使用して、アップロードすべきデータ量を最小限に抑えることができ、送信の前に、潜在的なコンピュータウィルス、ワームなどに関してイメージをスキャンすべきである。
【００２７】
しかし、インターネット接続が小売店で利用可能である場合、例えば、モバイル取込みユニット３０が店内に永続的に配置されるカートである場合、モバイル取込みユニット３０は、取込みイメージを処理位置２に自動的に送ることができる。例えば、モバイル取込みユニット３０が、処理位置２への１つまたは複数の取込みイメージの送信を開始することができ、または処理位置２が、モバイル取込みユニット３０が処理位置２に１つまたは複数の取込みイメージを送信することを要求することができる。送信プロセスが中断された場合、システムは、自動的に回復することができるべきであり、例えばモバイル取込みユニット３０は、送信エラーのために使用不可能である任意のイメージを自動的に再送信すべきである。
【００２８】
上述のカートユニットの場合には特に、モバイル取込みユニットの盗難の危険を最小限に抑えるために、モバイル取込みユニットが出口の数フィート以内に運ばれた場合、可聴警報を鳴らすことができ、かつ／またはＥメール警報を店長に送信することができる。モバイル取込みユニットはまた、オペレータがユーザ識別および／またはパスワードを入力することを要求することができ、カートを押す人の画像を撮影することができる。
【００２９】
本開示の一実施形態によれば、モバイル取込みユニット、例えばカートユニットは、イメージの取込みを制御して、以下でさらに論ずる仮想ウォークスルービューア機能に関するオーバラップを保証することができる。カートユニットを使用することにより、すべての画像を正しいシーケンスで処理することができるように同じ高さから十分なオーバラップで撮影することができる。例えば、ウェブカメラ技術を介して、システムは画像取込みのタイミングを制御することができる。
【００３０】
１人または複数の監査人は、日常の店監査スケジュールに従って、モバイル取込みユニット３０を使用して１つまたは複数の小売店を訪問し、各店についての小売店状態の１つまたは複数のイメージを取り込むことができる。日常の店監査スケジュールを処理位置２からモバイル取込みユニット３０に送信することができ、モバイル取込みユニット３０の画面上に表示することができる。
【００３１】
図４は、モバイル取込みユニット３０のメイン画面を示すブロック図である。監査すべき店の外部で、監査人はモバイル取込みユニット３０に電源を投入し、モバイル取込みユニットのメイン画面４０上に配置された「ログイン／ログアウト」４１をタッチまたはクリックする。監査人は、システムにアクセスするために自分のユーザ名およびパスワードを入力することができる。日常の監査スケジュールに対して行われる変更または任意の他の情報を直ちに送信することができ、監査人がメッセージボード４８を介して取り出すことができる。「店の注記」４４を介して特定の店についての任意の注記にアクセスすることができる。監査人がログインした後、モバイル取込みユニット４０は、例えば標準ＧＰＳ技術と小売位置のデータベースを使用することにより、その位置を検証および識別することができる。モバイル取込みユニットがその位置を識別した後、モバイル取込みユニットは、処理位置２から小売店の平面図構成を取り出すことができる。平面図構成は、例えば、通路の数、冷凍庫、設備、および他の平面図詳細を含む。この情報を使用して、モバイル取込みユニット３０は、監査人がイメージを取り込む必要のあるすべてのエリアとそのステータス４７のリストを含む平面図４７をモバイル取込みユニット３０のメイン画面４０上に表示する。本開示の代替実施形態によれば、実際のグラフィカルな平面図を得て表示することができる。どのイメージが既に取り込まれているか、どのイメージをまだ取り込む必要があるかを監査人が迅速に確認する助けとなるように、各区画を色分けすることができる。本開示の一実施形態によれば、取り込む必要のあるエリアが、データを取り込むことについて道理にかなった順序で表示される。例えば、監査人の休止時間を最小限に抑えるために、第１区画は入口付近でよい。メイン画面４０上の提案される順序／シーケンスは、標準的な店監査を実施する人が店内を歩く典型的な方式に追従することができる。任意の時間に、監査人は、「電池をチェック」４３をタッチまたはクリックすることによってモバイル取込みユニット３０の電池寿命をチェックすることができる。すべてのイメージが取り込まれた後、「画像をアップロード」４５をタッチまたはクリックすることによってイメージを処理位置２にアップロードすることができる。
【００３２】
例えばプラノグラムを使用することにより、監査人は、モバイル取込みユニット３０を使用して、ディスプレイ活動を監査し、店内小売状態を検討することができる。プラノグラムは、特定の製品および製品カテゴリの配置を含む、店のレイアウトのダイアグラム、図面、または他の視覚的記述である。小売店状態の１つまたは複数のイメージを取り込むために、監査人は、平面図４７内の任意の場所をタッチまたはクリックし、「詳細画面に進む」４２をタッチまたはクリックすることができ、例えば、監査人が第４エントリ「通路２」をタッチまたはクリックした場合、図５の詳細画面５０が表示される。詳細画面５０は、監査人がプラノグラム５２を使用することによってイメージを取り込む助けになる。通路のレイアウトを詳述するプラノグラム５２が、詳細画面５０上に表示される。「画像を追加」５１をタッチまたはクリックすることにより、監査人は、小売店状態のイメージの取込みを開始することができる。イメージを取り込んだ後、イメージがモバイル取込みユニット３０の記憶域に自動的にダウンロードされる。イメージをプラノグラム５２の適切な位置に追加するために、監査人は、適切な位置で画面をタッチして、イメージを大きいイメージ５３として画面の右側に出現させ、通路内のより小さなサムネイル５４として出現させることができる。監査人が誤った位置にイメージを置いた場合、監査人は、「画像を移動」５８をタッチまたはクリックし、イメージが現れるべき画面上の正しい位置をタッチすることによってイメージを移動することができる。イメージが受け入れられない場合、監査人は、「画像を削除」５９をタッチまたはクリックすることによってイメージを削除し、イメージを撮影し直すことができる。監査人は、「フルサイズを閲覧」６０をタッチまたはクリックすることによってフルサイズイメージを閲覧することもできる。
【００３３】
本開示の一実施形態によれば、監査人は、上述のカートユニットなどの固定カメラを有するモバイル取込みユニット３０に切り換えることによって通路の全長を取り込むことができる。カートユニットは１つのカメラを有することができ、またはユニットの両側に複数のカメラを有することができ、カートが通路で押されるときにカートが小売店状態の高品質画像を撮影する能力が最大となる。監査人は、「カメラを開始」５５をタッチまたはクリックすることができ、またはイメージ取込みが開始される場所のプラノグラム５２エリアをタッチまたはクリックすることができる。次いで、監査人は、通路でモバイル取込みユニット３０、例えばカートユニットを押して、その通路内の小売店状態の１つまたは複数のイメージを取り込むことができる。次いで、監査人は、「カメラを停止」５６、および／または通路の端部のプラノグラム５２上の位置をタッチして、その通路に関するイメージ取込みが完了することを示すことができる。監査人は、「メイン画面」をタッチまたはクリックすることによってメイン画面４０に戻ることができ、または監査人を次の通路または前の通路に移動する矢印５７をタッチまたはクリックすることによってすべての通路の全長の取込みを続行することができる。矢印５７はまた、監査人を店内の他の場所、例えば店の正面、店の後部、店の精算エリア、店の青果物エリアなどに移動することもできる。あるいは、監査人は、「ビデオを開始」６２、および／またはイメージ取込みが開始されるプラノグラム５２上の位置をタッチまたはクリックすることもできる。次いで、監査人は、通路でモバイル取込みユニット３０、例えばカートユニットを押して、その通路内の小売店状態の１つまたは複数のイメージを取り込むことができる。監査人は、「ビデオを停止」６３をタッチまたはクリックすることによってイメージ取込みが完了するまで、隣接する通路でのモバイル取込みユニット３０の移動を続行することができる。
【００３４】
格納手段３３は、１つまたは複数の小売店状態の１つまたは複数の取込みイメージを、所定の時間、一時的に格納する。例えば、イメージを格納し、様々な方式で互いにスティッチングして、比較ステップまたはイメージ認識ステップのためにイメージを編成および準備することができる。さらに、イメージを互いにスティッチングすることは、小売店の順次イメージ間、およびそうしたイメージを撮影する１つまたは複数のカメラにわたる可能なオーバラップによって引き起こされる重複をなくす助けになる。さらに、イメージスティッチングは、仮想ウォークスルービューア機能ならびにアドホックピクチャ閲覧に関する生データベースを提供することもできる。代替実施形態によれば、取込みイメージの送信後、またはイメージの取込み中に画像スティッチングを実施することができる。
【００３５】
互いにスティッチングされて仮想店ウォークスルーに関するより大きい画像が作成される元のソース画像を、新しい画像が作成され、品質保証試験に合格した後に削除することができる。スティッチング用の画像のための元のソースを取り込むのにビデオストリームが使用される場合、個々のフレームが分離され、抽出され、フォーマット変換され、互いにスティッチングされるとすぐに、ビデオストリームが削除される。所定の時間、最終処理済みイメージをイメージ取込みユニット２１のデータベースに格納すべきである。例えば、１週間イメージを保持し、次いで現在の週のイメージで置き換えることができる。本開示の一実施形態によれば、各イメージを個々のファイルとして格納することができる。
【００３６】
伝送の前に、モバイル取込みユニット３０は、１つまたは複数の取込みイメージを処理することができる。具体的には、モバイル取込みユニット３０は、区画の紛失および／または画像マッピングでの誤りなどの、イメージに伴う何らかの問題があるかどうか、例えば、モバイル取込みユニット３０と棚またはディスプレイとの間に障害物があったかどうか、棚またはディスプレイに対するモバイル取込みユニット３０の角度が不良であったためにイメージがひずんでいるかどうか、レンズが汚れており、または焦点が合っていないかどうか、モバイル取込みユニット３０が移動中であっためにイメージがぼやけているかどうか、イメージが最後の画像とオーバラップしていないためにイメージ内に情報ギャップがあるかどうか、イメージが既に撮影されたイメージの複製であり、または既に撮影された前のイメージとオーバラップするかどうか、イメージが使用不能となる何らかのタイプのハードウェア障害があるかどうか、モバイル取込みユニット３０が製品のはっきりした画像を得る妨げとなる、縦型冷凍庫または冷蔵庫の窓の霜があるかどうかなどを判定することができる。上述のような何らかの紛失イメージまたは誤りがある場合、監査人は、そうしたイメージを再撮影することができ、またはモバイル取込みユニットは自動的にイメージを再撮影することができる。さらに、すべてのイメージを正しい向きに回転し（例えば、イメージを画面上に示すことができ、監査人は、それが正しくない場合に回転を上書きすることができる）、色、輝度、色相などを自動的に向上させ（例えば、イメージを圧縮する前にバッチモードで行うことができる）、焦点についてチェックし（例えば、画面上にイメージを表示することができ、したがって監査人はそれを拒絶するかどうかを判定することができる）、かつ／またはイメージ認識モジュール２３で棚の上の製品を正しく識別することができるようにディスプレイからイメージをクロッピングすることができる。本開示の一実施形態によれば、モバイル取込みユニット３０のオペレータは、次の組の棚画像を取り込む前に、処理済み仮想店ウォークスルーイメージを視覚的に検討し、画像品質を承認することができる。例えば、製品が非常に小さいラベルを含む場合、監査人は、ディスプレイから製品の１つを除去し、イメージを撮影する前にラベルをより目立つようにすることができる。
【００３７】
処理手段は、１つまたは複数の取込みイメージを、限定はしないが店名、店の位置、ディスプレイ位置、ディスプレイタイプ、イメージ取込みの日付および時刻を含む、日付、時刻、位置情報などの関連情報と関連付けることもできる。代替実施形態によれば、イメージ取込みユニット２１によって実施される処理を、処理位置２による取込みイメージの送信後に実施することができる。
【００３８】
取込みイメージおよび関連情報を処理位置に送信することができ、そこに格納し、さらに処理して有用な情報に変換することができる。
処理位置
１つまたは複数の取込みイメージおよび関連情報を送信した後、処理位置２でそれを受信する。集中型とすることができる処理位置２は、イメージ認識モジュール２３、ライブラリ２４、リポジトリ２５、報告エンジン２６、外部データリポジトリ２７、および例外編集機構２８を含む。
【００３９】
１つまたは複数の取込みイメージおよび関連情報を受信すると、それをリポジトリ２５に格納する。取込みイメージのすべてが永続的に格納されるわけではない。例えば、重複、不良イメージなどは廃棄される。本開示の一実施形態によれば、店、位置、日付、時刻、および向きによる迅速なアクセスのために、１つまたは複数の取込みイメージを生イメージとしてＭＳ−ＳＱＬデータベースに保存することができる。例えばデータミラーリングまたはその他の形態のバックアップソフトウェアを使用して、１つまたは複数の取込みイメージをバックアップ位置にも格納することができる。データ記憶を最小限に抑えるために、イメージ認識モジュールに対して必要な最小解像度でイメージを取り込み、格納すべきである。イメージ認識処理に関して画像をどんな形でも低下させない方式で各イメージに透かしを付けることができる。日ごとの多くの記憶要件のために、最終的画像をオフラインで保存することができる。
【００４０】
図６は、本開示の一実施形態による、イメージ認識モジュールによる処理のステップを示す流れ図である。このステップをイメージ取込みユニット２１またはイメージ認識モジュール２３によって実施することができる。イメージ認識モジュール２３は、各イメージについてのイメージ品質およびイメージ内容が十分であるかどうかを判定することにより、１つまたは複数の取込みイメージを処理する。例えば、イメージ認識モジュール２３はまず、イメージ品質が十分であるかどうか（すなわち焦点合せ、ひずみなど）を判定することができる（ステップＳ６０１）。イメージ品質が十分でないとイメージ認識モジュール２３が判定した場合（ステップＳ６０１のＮｏ）、イメージ認識モジュール２３は、イメージを削除し、またはイメージにフラグを立てることができ、終了することができ、あるいはイメージを再撮影することを要求することができる（ステップＳ６０２）。一方、イメージ品質が十分であるとイメージ認識モジュール２３が判定した場合（ステップＳ６０１のＹｅｓ）、イメージ認識モジュール２３は、イメージ内容全体がその符号化位置と整合するかどうかを判定することができる（ステップＳ６０３）（すなわち、イメージが棚のビューとして符号化される場合、イメージ内にディスプレイユニットがあるか否か）。イメージ内に障害物があるとイメージ認識モジュール２３が判定した場合（ステップＳ６０３のＮｏ）（すなわち、棚またはディスプレイのビューを遮る人々、ショッピングカート、または任意の他の障害物）、イメージを削除し、またはイメージにフラグを立てることができ、終了することができ、あるいはイメージを再撮影することを要求することができる（ステップＳ６０２）。しかし、イメージ内容が十分であるとイメージ認識モジュール２３が判定した場合（ステップＳ６０３のＹｅｓ）、イメージが承認され、処理の第２ステップに送られる（ステップＳ６０４）。一実施形態によれば、分析されない異なる棚の上の製品の遠方のビューをイメージが含むとイメージ認識モジュール２３が判定した場合、イメージ認識モジュール２３は、イメージをクロッピングして除去することによってイメージを分析から除外することができる。代替実施形態によれば、イメージ認識モジュールは、店内のハンドヘルドバーコードリーダを使用して製品を識別する。（例えば、押したり、または運転することによって）モバイル取込みユニット３０を操作する人は、ハンドヘルドバーコードリーダを使用して、在庫切れ状態などの追従措置を必要とする製品のＵＰＣを記録することに加えて、小売店で表示されている各製品のＵＰＣコードを電子的に記録する。
【００４１】
処理の第２ステップは、イメージ認識モジュール２３が、１つまたは複数の取込みイメージを、ライブラリ２４、例えばＣＰＧ製品ピクチャデータベースまたはサードパーティベンダライブラリと比較して、１つまたは複数の取込みイメージ内の１つまたは複数の小売店状態を識別し、小売店状態についての識別情報、例えば店番号、イメージ日付／時刻、ＵＰＣ、および／または店内の製品の厳密な位置を記述する他の詳細情報などを得ることを含む。これにより、各店でどの製品が見つかったか、および店内のその製品の位置に関する詳細を含む、店による小売状態に関する情報のデータベースの作成が可能となる。例えば、イメージ認識モジュール２３は、各取込みイメージ内の各小売店状態をライブラリ２４と比較して、（例えば、イメージ内で見つかった各ＵＰＣを識別しようと試みることによって）各取込みイメージ内に出現する製品を識別することができる。複数の中央演算処理装置（「ＣＰＵ」）にわたって処理を分割することができ、その結果、ＣＰＵは、次のレポートが期限となる前に処理を完了する。処理時間を加速するために、イメージ認識モジュール２３は、各イメージについてライブラリ２４の関連する部分のみを使用することができる。例えば、イメージ認識モジュール２３がディスプレイのみを分析している場合、イメージ認識モジュール２３は、通路端ディスプレイ上に一般的に存在する５０００個程度のＵＰＣを使用することができ、または缶詰商品区画内のイメージのみを分析している場合、ライブラリ２４内の冷凍製品イメージを分析しない。
【００４２】
ライブラリ２４は、ＵＰＣ、棚タグ、製品イメージ、および／またはイメージ認識モジュール２３が１つまたは複数の取込みイメージ内の１つまたは複数の小売店状態を識別することを可能にする任意の他の情報を含むことができる。例えば、化粧品売場は、ＵＰＣ間の主な違いが色だけである非常に小さい製品を有することがある。イメージ認識を完了するために、各イメージに対して複数のパスを実施しなければならないことがある。例えば、製品上の少量のテキストのみが相異なるＵＰＣを区別することができるいくつかのカテゴリが存在する。こうしたタイプのＵＰＣに、ライブラリ内でフラグを立てることができる。フラグを立てたＵＰＣが配置される場合、異なるビジネス規則を使用してイメージが再び処理される。例えば、こうした製品のうちのただ１つが画像内で見つかった場合、説明、ＵＰＣバーコード、および関連標識を含む棚タグ上の情報などの追加の情報を使用して識別プロセスを完了することができる。ディスプレイについて、厚紙箱（ｃａｒｄｂｏａｒｄ  ｂｏｘ）および／またはシッパ（ｓｈｉｐｐｅｒ）上の情報が使用される。
【００４３】
本開示の一実施形態によれば、イメージ認識モジュール２３は、１つまたは複数の取込みイメージをサードパーティベンダライブラリと比較することによって特定の標識および店内バナーを見つけることができる。
【００４４】
各イメージ内の１つまたは複数の小売店状態を識別し、関連情報を得た後、この情報がデータベース２５に格納される。例えば、識別した各小売店状態について、イメージ取込みの日付、イメージ取込みの時刻、画像識別、店番号、ユーザ識別、平面図、店の位置、設備、設備図、シーケンス位置、処理位置区画、ＵＰＣ、量、マーチャンダイジング識別、イメージ内のＸ／Ｙ位置、処理日付／時刻、ソフトウェアバージョンなどの情報をデータベースに格納することができる。例えば、イメージ取込みの日付は、画像が撮影された日付に関係し、イメージ取込みの時刻は、画像が撮影された時刻に関係し、それを、関連する時間帯に関する地方時間に変換することができる。画像識別は、画像が処理位置２にアップロードされるときに画像に割り当てられるファイル名または識別タグでよい。この識別をアドホック報告モードで使用して、イメージを得ることができる。店番号は、米国内のあらゆる店に割り当てられた番号ＩＤである。米国内のあらゆる小売店の物理的位置が地球の緯度および経度で識別される市販のデータベースが存在する。このデータベースは、小売名などの各小売位置についての他の情報も含む。この情報を使用して、モバイル取込みユニットの小売監査の物理的位置および小売元を確認かつ記録することができる。ユーザ識別は、イメージ取込みユニット２１の監査人またはオペレータの識別に関係する。平面図は、ソフトウェアが店設備を実際のフロア設計図にマッピングする場合に使用することのできるフィールドである。店内の位置を識別するのに１つまたは複数のデータフィールドを使用しなければならないことがある。設備フィールドには、イメージ取込みが開始した場合にイメージが入力される。設備ビューフィールドには、イメージ取込みが終了した場合にイメージが入力される。シーケンス位置は、画像をローカルグループ（すなわち通路全体）として互いにスティッチングする助けになる内部シーケンス番号が関係する。処理位置区画は、ＵＰＣおよび物理位置を使用することで区画を推定または計算することのできるイメージ認識モジュール２３によって計算されるフィールドでよい。ＵＰＣは、イメージ内で見つかった製品のＵＰＣである。イメージ内で見つかった各ＵＰＣについてテーブル内に１つのレコードが存在することになる。量フィールドは、画像内で見つかったＵＰＣの数に関係する。例えば、棚が製品の３つの外装面を有する場合、量は３となる。マーチャンダイジング識別は、シェルフトーカ（ｓｈｅｌｆ−ｔａｌｋｅｒ）やバナーなどの棚ラベルおよび店内標識とを識別するのに使用することのできるフィールドである。イメージ内のＸ／Ｙ位置は、製品が見つかったイメージ内の位置に関係する。例えば、これを使用して、棚の上のどこに製品が配置されたか、およびこれが会社の指示に従っていたか否かを識別することができる。Ｘ／Ｙ位置の別の使用法は、クライアントによって識別されたデータ精度の問題を調査し、それに対処することでよい。処理日付／時刻は、イメージ認識モジュール２３が画像を処理し、このイメージ内の特定の製品を識別した日付である。ソフトウェアバージョンは、製品を識別したイメージ認識モジュール２３によって使用されるイメージ認識ソフトウェアのバージョンである。
【００４５】
報告エンジン２６は、任意の所与の時刻に関する任意の小売店内の任意の位置での小売店内の任意の取込みイメージへのアクセスを提供することができる。例えば、アドホックイメージビューアを介して、フィルタを使用して個々のイメージを１度に１つ引き上げることができる。フィルタにより、ユーザは、日付範囲、時刻、店、製品などの検索パラメータを選択することが可能となる。個々のイメージを見るとき、ユーザは、時刻の順方向または逆方向に反転して、同じ位置が経時的にどう見えるか、またはどう見えることになるかを確認することができる。特定のイメージを見るとき、ユーザは、プラノグラム上の同一の識別位置を複数の店にわたって見ることができる。仮想店ウォークスルービューアを介して、小売店状態のイメージを２次元または３次元で順次閲覧することができる。ビューアは、１つまたは複数の小売店状態についてのイメージを引き上げて、各イメージを「ウォークスルー」することができる。同一の店設備および位置の重複イメージがある場合、ビューアは、重複イメージを除去することができ、または重複イメージに関する異なる閲覧オプションを提供することができる。イメージ内にギャップがある場合、ビューアは、標準壁紙でギャップを埋めることができる。
【００４６】
１つまたは複数の取込みイメージおよび関連情報が分析され、１つまたは複数の概要レポートおよび／または警報が生成される。店、日付、時刻、および製品によって情報を詳述する、店内小売状態の自動警報およびレポートを自動的にクライアントに送ることができる。警報は構成可能であり、テーブル駆動され、処理位置２が警報をトリガするビジネス規則を容易にセットアップすることが可能となる。例えば、店が、取込みイメージを送る期限が過ぎた状態である場合、店が特定の製品をディスプレイすることを怠った場合、マーチャンダイジングが許可されていない製品がディスプレイ上に見つかった場合、または任意の他のユーザ定義の警報である。警報をコンピュータ、ラップトップ、携帯情報端末、携帯電話、および任意の他のハンドヘルド装置に送信することができる。メッセージ内にウェブリンクを埋め込むことができ、その結果、装置がブラウザ支援を有する場合、受信側は、支援レポートまたはイメージに直接進むことができる。可能なときには、個々のユーザが短い時間フレームで関連する大量のＥメールを受信しないように警報が組み合わされる。
【００４７】
レポートは、店、ゾーン、チェーン、または任意の他の位置を含む概要レベルで動作することができる。レポートは、店内の位置（すなわち、エンドキャップ、通路など）ごとの結果を報告してよい。ディスプレイ上の製品について、レポートは、製品がディスプレイ上にあった日数、ＵＰＣ、説明、ブランド、サイズなどの要約を含むことができる。本開示の一実施形態によれば、小売販売地点データ（ｒｅｔａｉｌ  ｐｏｉｎｔ  ｏｆ  ｓａｌｅ  ｄａｔａ）を小売店状態と統合して、ほぼリアルタイムのポストプロモーション分析（ｐｏｓｔ  ｐｒｏｍｏｔｉｏｎ  ａｎａｌｙｓｉｓ）を実現することができる。販売地点データが処理位置２によって統合されるとき、レポートは、通常価格、販売価格、ベースボリューム、実際のボリューム、リフト、商品ＵＰＣ、ブランド説明、サイズ、カテゴリ要約、カテゴリベース、実際のカテゴリ、カテゴリリフト、カテゴリ目標利益率、カテゴリ実利益率、参加販売促進ブランド概要などのうちの１つまたは複数に関する情報を含むことができる。
【００４８】
図７〜１２に、本発明の一実施形態による、小売店ディスプレイコンプライアンスを測定する方法を使用して生成されたサンプルレポートを示す。例えば、図８は、店ごとにディスプレイコンプライアンスを示すレポートを示す。図９は、地域レベルでディスプレイコンプライアンスを表示するレポートを示し、図１０は、地区レベルでディスプレイコンプライアンスを表示するレポートを示し、図１１は、小売業者レベルでディスプレイコンプライアンスを表示するレポートを示し、図１２は、競合ブランドごとにディスプレイコンプライアンスを表示するレポートを示す。リポジトリ２５に格納されたデータと、１つまたは複数の外部データリポジトリ２７からの外部データとを使用することによって各レポートを生成することができる。例えば、店に関する情報を、固有小売店識別番号、名前、説明、住所、親会社、取引のクラス、フォーマット、ならびに他の情報および属性を含むすべての店のリストを含む外部データリポジトリ２７に格納することができる。親会社に関する情報を、説明、住所、および／または任意の他の情報を含むすべての親会社のリストを含む外部データリポジトリ２７に格納することができる。これにより、親会社への個々の店バナーの情報をすべてロールアップすることが可能となる。ＵＰＣに関する情報を、ＵＰＣ説明、製品寸法、いくつかの角度からの製品イメージ、および他の属性を含むすべての製品のリストを含む外部データリポジトリ２７に格納することができる。ブランドに関する情報を、説明、カテゴリ、製造業者などを含むすべてのブランドのリストを含む外部データリポジトリ２７に格納することができる。カテゴリおよび製造業者に関する情報も外部データリポジトリ２７に格納することができる。
【００４９】
本開示の一実施形態による、小売店ディスプレイコンプライアンスを測定するコンピュータ実行可能コードを含むコンピュータ記憶媒体は、１つまたは複数の小売店状態の１つまたは複数のイメージを取り込むコードと、１つまたは複数の取込みイメージを関連情報と関連付けるコードと、１つまたは複数の取込みイメージおよび関連情報を格納および処理のために処理位置に送信するコードと、１つまたは複数の取込みイメージおよび関連情報を処理位置で受信し、１つまたは複数の取込みイメージおよび関連情報をリポジトリに格納するコードと、１つまたは複数の取込みイメージを処理するコードと、１つまたは複数の取込みイメージ内の１つまたは複数の小売店状態をライブラリと比較し、１つまたは複数の小売店状態を識別し、１つまたは複数の小売店状態についての識別情報を得るコードと、１つまたは複数の小売店状態に関する１つまたは複数の識別後取込みイメージおよび識別情報をリポジトリに格納するコードと、１つまたは複数の取込みイメージおよび識別情報内の１つまたは複数の小売店状態を分析するコードと、分析に基づいて１つまたは複数の概要レポートあるいは１つまたは複数の警報を生成するコードとを含む。
【００５０】
本開示の一実施形態による、１つまたは複数の小売店状態の１つまたは複数のイメージを取り込むコードは、機器の位置を識別かつ検証するコードと、１つまたは複数の小売店状態の１つまたは複数のイメージを取り込むコードと、１つまたは複数の小売店状態の１つまたは複数の取込みイメージを格納するコードと、１つまたは複数の小売店状態の１つまたは複数の取込みイメージを処理するコードと、１つまたは複数の小売店状態の１つまたは複数の取込みイメージを処理位置に送信するコードと、１つまたは複数の小売店状態の１つまたは複数の取込みイメージが処理位置に首尾よく送られたかどうかを示す確認を生成するコードとをさらに含む。
【００５１】
上記の教示に照らして、本発明の多数の追加の修正形態および変形形態が可能である。
【図面の簡単な説明】
【００５２】
【図１】本発明の方法およびシステムを実装することのできる例示的コンピュータシステムのブロック図である。
【図２−Ａ】本発明の一実施形態による、小売店ディスプレイコンプライアンスを測定するシステムを示すブロック図である。
【図２−Ｂ】本発明の一実施形態による、小売店ディスプレイコンプライアンスを測定する方法を示す流れ図である。
【図３−Ａ】本開示の一実施形態による、モバイル取込みユニットを示すブロック図である。
【図３−Ｂ】本開示の一実施形態による、１つまたは複数のイメージを取り込む方法を示す流れ図である。
【図４】本開示の一実施形態による、モバイル取込みユニットのメイン画面を示すブロック図である。
【図５】本開示の一実施形態による、モバイル取込みユニットの詳細な画面を示すブロック図である。
【図６】本開示の一実施形態による、イメージ認識モジュールによる処理のステップを示す流れ図である。
【図７】本発明の一実施形態による、小売店ディスプレイコンプライアンスを測定する方法を使用することによって生成されるサンプルレポートである。
【図８】本発明の一実施形態による、小売店ディスプレイコンプライアンスを測定する方法を使用することによって生成される店ごとのディスプレイコンプライアンスを示すサンプルレポートである。
【図９】本発明の一実施形態による、小売店ディスプレイコンプライアンスを測定する方法を使用することによって生成される地域レベルのディスプレイコンプライアンスを示すサンプルレポートである。
【図１０】本発明の一実施形態による、小売店ディスプレイコンプライアンスを測定する方法を使用することによって生成される地区レベルのディスプレイコンプライアンスを示すサンプルレポートである。
【図１１】本発明の一実施形態による、小売店ディスプレイコンプライアンスを測定する方法を使用することによって生成される小売業者レベルのディスプレイコンプライアンスを示すサンプルレポートである。
【図１２】本発明の一実施形態による、小売店ディスプレイコンプライアンスを測定する方法を使用することによって生成される競合ブランドごとのディスプレイコンプライアンスを示すサンプルレポートである。
【図１】
2008537226.tif 000003
【図２−Ａ】
2008537226.tif 000004
【図２−Ｂ】
2008537226.tif 000005
【図３−Ａ】
2008537226.tif 000006
【図３−Ｂ】
2008537226.tif 000007
【図４】
2008537226.tif 000008
【図５】
2008537226.tif 000009
【図６】
2008537226.tif 000010
【図７】
2008537226.tif 000011
【図８】
2008537226.tif 000012
【図９】
2008537226.tif 000013
【図１０】
2008537226.tif 000014
【図１１】
2008537226.tif 000015
【図１２】
2008537226.tif 000016
【手続補正書】
【提出日】平成19年12月18日(2007.12.18)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
小売店ディスプレイコンプライアンスを測定する方法であって、
複数の位置でイメージを得ることのできるイメージ取込みユニットを使用して、１つまたは複数の製品ディスプレイ、製品棚、または製品の１つまたは複数のイメージを取り込むステップと、
前記１つまたは複数の取込みイメージを関連情報と関連付けるステップと、
前記１つまたは複数の取込みイメージおよび前記関連情報を格納および処理のために処理位置に送信するステップと、
前記１つまたは複数の取込みイメージおよび前記関連情報を前記処理位置で受信し、前記１つまたは複数の取込みイメージおよび関連情報をリポジトリに格納するステップと、
前記１つまたは複数の取込みイメージを処理するステップと、
前記１つまたは複数の取込みイメージ内の前記１つまたは複数のディスプレイ、製品棚、または製品をライブラリと比較し、前記１つまたは複数のディスプレイ、製品棚、または製品を識別し、前記１つまたは複数のディスプレイ、製品棚、または製品についての識別情報を得るステップと、
前記１つまたは複数のディスプレイ、製品棚、または製品に関する前記１つまたは複数の識別後取込みイメージおよび識別情報を前記リポジトリに格納するステップと、
前記１つまたは複数の取込みイメージおよび識別情報内の前記１つまたは複数の製品ディスプレイ、製品棚、または製品を分析するステップと、
前記分析に基づいて１つまたは複数の概要レポートあるいは１つまたは複数の警報を生成するステップと
を含む方法。
【請求項２】
１つまたは複数の製品ディスプレイ、製品棚、または製品がいくつかの所定の基準を満たし、または超過するときに自動警報を与えるステップをさらに含む請求項１に記載の方法。
【請求項３】
イメージ取込みがモバイルユニットによって得られる請求項１に記載の方法。
【請求項４】
前記イメージ取込みユニットの位置を識別かつ検証するステップをさらに含む請求項１に記載の方法。
【請求項５】
前記１つまたは複数の警報が互いに組み合わされ、次いで遠隔通信リンクによってクライアントに送られる請求項１に記載の方法。
【請求項６】
前記処理位置が、前記１つまたは複数の取込みイメージをアップロードするためのウェブポータルを含む請求項１に記載の方法。
【請求項７】
小売店ディスプレイコンプライアンスを測定するシステムであって、
１つまたは複数の製品ディスプレイ、製品棚、または製品の１つまたは複数のイメージを取り込むイメージ取込みユニットであって、複数の位置で前記イメージを得ることができるイメージ取込みユニットと、
前記１つまたは複数の取込みイメージを関連情報と関連付ける手段と、
前記１つまたは複数の取込みイメージおよび前記関連情報を送信する手段と、
前記１つまたは複数の取込みイメージおよび関連情報を受信する手段と、前記１つまたは複数の取込みイメージを処理する手段と、前記１つまたは複数の取込みイメージ内の前記１つまたは複数の製品ディスプレイ、製品棚、または製品をライブラリと比較し、前記１つまたは複数の製品ディスプレイ、製品棚、または製品を識別し、前記１つまたは複数の製品ディスプレイ、製品棚、または製品についての識別情報を得るイメージ認識モジュールと、前記１つまたは複数の識別後取込みイメージおよび識別情報を格納するリポジトリと、前記１つまたは複数の取込みイメージおよび識別情報内の１つまたは複数の製品ディスプレイ、製品棚、または製品を分析し、前記分析に基づいて１つまたは複数の概要レポートあるいは１つまたは複数の警報を生成する報告エンジンとを含む処理位置と
を備えるシステム。
【請求項８】
１つまたは複数の製品ディスプレイ、製品棚、または製品がいくつかの所定の基準を満たし、または超過するときに自動警報を与える手段をさらに備える請求項７に記載のシステム。
【請求項９】
イメージ取込みがモバイルユニットによって得られる請求項７に記載のシステム。
【請求項１０】
前記イメージ取込みユニットが、
前記イメージ取込みユニットの位置を識別かつ検証する識別および検証手段と、
１つまたは複数の製品ディスプレイ、製品棚、または製品の１つまたは複数のイメージを取り込む取込み手段と、
前記１つまたは複数の製品ディスプレイ、製品棚、または製品の前記１つまたは複数の取込みイメージを格納する格納手段と、
前記１つまたは複数の製品ディスプレイ、製品棚、または製品の前記１つまたは複数の取込みイメージを処理する処理手段と、
前記１つまたは複数の製品ディスプレイ、製品棚、または製品の前記１つまたは複数の取込みイメージを処理位置に送信する送信手段と、
前記処理位置から情報を受信する受信手段と、
前記１つまたは複数の製品ディスプレイ、製品棚、または製品の前記１つまたは複数の取込みイメージが前記処理位置に首尾よく送られたかどうかを示す確認を生成する生成手段と
を備える請求項７に記載のシステム。
【請求項１１】
前記イメージ取込みユニットがカートユニットまたは自走ロボットの形態である請求項１０に記載のシステム。
【請求項１２】
前記１つまたは複数の警報が互いに組み合わされ、次いで遠隔通信リンクによってクライアントに送られる請求項７に記載のシステム。
【請求項１３】
小売店ディスプレイコンプライアンスを測定するコンピュータ実行可能コードを含むコンピュータ記憶媒体であって、
複数の位置でイメージを得ることのできるイメージ取込みユニットを使用して、１つまたは複数の製品ディスプレイ、製品棚、または製品の１つまたは複数のイメージを取り込むコードと、
前記１つまたは複数の取込みイメージを関連情報と関連付けるコードと、
前記１つまたは複数の取込みイメージおよび前記関連情報を格納および処理のために処理位置に送信するコードと、
前記１つまたは複数の取込みイメージおよび前記関連情報を前記処理位置で受信し、前記１つまたは複数の取込みイメージおよび関連情報をリポジトリに格納するコードと、
前記１つまたは複数の取込みイメージを処理するコードと、
前記１つまたは複数の取込みイメージ内の前記１つまたは複数のディスプレイ、製品棚、または製品をライブラリと比較し、前記１つまたは複数のディスプレイ、製品棚、または製品を識別し、前記１つまたは複数のディスプレイ、製品棚、または製品についての識別情報を得るコードと、
前記１つまたは複数のディスプレイ、製品棚、または製品に関する前記１つまたは複数の識別後取込みイメージおよび識別情報を前記リポジトリに格納するコードと、
前記１つまたは複数の取込みイメージおよび識別情報内の前記１つまたは複数の製品ディスプレイ、製品棚、または製品を分析するコードと、
前記分析に基づいて１つまたは複数の概要レポートあるいは１つまたは複数の警報を生成するコードと
を含むコンピュータ記憶媒体。
【請求項１４】
１つまたは複数の製品ディスプレイ、製品棚、または製品がいくつかの所定の基準を満たし、または超過するときに自動警報を与えるコードをさらに含む請求項１３に記載のコンピュータ記憶媒体。
【請求項１５】
前記イメージ取込みユニットの位置を識別かつ検証するコードをさらに含む請求項１３に記載のコンピュータ記憶媒体。
【請求項１６】
前記１つまたは複数の警報が互いに組み合わされ、次いで遠隔通信リンクによってクライアントに送られる請求項１３に記載のコンピュータ記憶媒体。
【請求項１７】
小売店ディスプレイコンプライアンスを測定するコンピュータ実行可能コードを含むコンピュータ記憶媒体であって、
機器の位置を識別かつ検証するコードと、
複数の位置でイメージを得ることのできるイメージ取込みユニットを使用して、１つまたは複数の製品ディスプレイ、製品棚、または製品の１つまたは複数のイメージを取り込むコードと、
前記１つまたは複数の製品ディスプレイ、製品棚、または製品の前記１つまたは複数の取込みイメージを格納するコードと、
前記１つまたは複数の製品ディスプレイ、製品棚、または製品の前記１つまたは複数の取込みイメージを処理するコードと、
前記１つまたは複数の製品ディスプレイ、製品棚、または製品の前記１つまたは複数の取込みイメージを処理位置に送信するコードと、
前記処理位置から情報を受信するコードと、
前記１つまたは複数の製品ディスプレイ、製品棚、または製品の前記１つまたは複数の取込みイメージが前記処理位置に首尾よく送られたかどうかを示す確認を生成するコードと
を含むコンピュータ記憶媒体。
【国際調査報告】
2008537226.tif 000017