(57)【特許請求の範囲】
【請求項１】
情報処理装置であって、
受付ステップと、特定ステップと、生成ステップとを実行するように構成され、
前記受付ステップでは、店舗端末から店舗情報を受け付け、
前記店舗情報は、店舗の運営情報と、前記店舗の一定時間ごとの売上情報とを含み、
前記運営情報は、所定の位置を継続的に撮像された複数の画像を含み、
前記画像は、店舗に陳列された商品を撮像したもので、
前記特定ステップでは、前記運営情報と、前記売上情報とに基づき、前記店舗の売上が向上している期間の前記運営情報に含まれる前記画像を、前記売上向上に影響を及ぼす前記画像として特定し、
前記生成ステップでは、特定された前記画像を含む視覚情報を生成する、
もの。
【請求項２】
請求項１に記載の情報処理装置において、
分類ステップをさらに実行するように構成され、
前記分類ステップでは、前記画像に含まれる商品に基づき、前記画像を部門別に分類し、
前記特定ステップでは、分類された前記画像と、前記売上情報とに基づき、前記店舗の売上に影響を及ぼす前記画像を特定する、
もの。
【請求項３】
請求項１又は請求項２の何れか１つに記載の情報処理装置において、
前記画像には、ＰＯＰ広告を含み、
前記特定ステップでは、前記画像と、前記売上情報とに基づき、前記店舗の売上に影響を及ぼす前記ＰＯＰ広告を特定し、
前記生成ステップでは、特定された前記ＰＯＰ広告を含む視覚情報を生成する、
もの。
【請求項４】
請求項３に記載の情報処理装置において、
前記特定ステップでは、前記画像と、前記売上情報とに基づき、前記店舗の売上に影響を及ぼす前記ＰＯＰ広告の展示方法を特定し、
前記展示方法とは、商品の陳列棚における前記ＰＯＰ広告の展示位置と、展示数と、広告内容との少なくとも一つを含み、
前記生成ステップでは、特定された前記展示方法を含む視覚情報を生成する、
もの。
【請求項５】
請求項１〜請求項４の何れか１つに記載の情報処理装置において、
前記運営情報は、前記店舗の運営状況を示すテキストを含み、
前記テキストは、前記店舗の運営に係る業務指示情報及び業務報告情報のうち、少なくとも一つに関するもので、
前記特定ステップでは、前記テキストと、前記売上情報とに基づき、前記店舗の売上に影響を及ぼす前記テキストを特定し、
前記生成ステップでは、特定された前記テキストを含む視覚情報を生成する、もの。
【請求項６】
請求項１〜請求項５の何れか１つに記載の情報処理装置において、
画像処理ステップをさらに実行するように構成され、
前記画像処理ステップでは、前記画像の画像領域から、第１の領域を検出し、
前記第１の領域は、商品の補充が必要な場所を示し、
前記第１の領域において前記商品の補充を検出した場合、商品補充情報として取得し、
前記特定ステップでは、前記商品補充情報と、前記売上情報とに基づき、前記店舗の売上に影響を及ぼす前記画像領域を特定し、
前記生成ステップでは、特定された前記画像領域を含む視覚情報を生成する、
もの。
【請求項７】
請求項６に記載の情報処理装置において、
前記生成ステップでは、前記商品補充情報を含む視覚情報を生成する、
もの。
【請求項８】
プログラムであって、
コンピュータに、請求項１〜請求項７の何れか１つに記載の情報処理装置の各ステップを実行させる、
もの。
【請求項９】
情報処理装置が実行する情報処理方法であって、
受付ステップと、特定ステップと、生成ステップとを備え、
前記受付ステップでは、店舗端末から店舗情報を受け付け、
前記店舗情報は、店舗の運営情報と、前記店舗の一定時間ごとの売上情報とを含み、
前記運営情報は、前記店舗の運営状況を示すテキスト又は画像を含み、
前記画像は、店舗に陳列された商品を継続的に撮像したもので、
前記特定ステップでは、前記運営情報と、前記売上情報とに基づき、前記店舗の売上が向上している期間の前記運営情報に含まれる前記画像を、前記売上に影響を及ぼす前記画像として特定し、
前記生成ステップでは、特定された前記画像を含む視覚情報を生成する、
方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置、プログラム及び情報処理方法に関する。
【背景技術】
【０００２】
スーパーマーケット等の小売店では、本部からの指示に基づき、各店舗の店長と店員がコミュニケーションを取りながら店舗運営が行われるのが一般的である。特許文献１には、店舗の業務を支援するシステムが開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０２０−２０４９９０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、運営方法は、経験則や、勘等に基づいて行われる場合が多く、どのような運営方法が売上を左右するのか、といった判断が店舗運営者の主観に左右されるとともに、適切な運営方法が各店舗のノウハウとして他店舗に共有されにくいという問題が生じていた。
【０００５】
本発明では上記事情を鑑み、店舗の売上に影響を与える運営方法を把握することを可能とする技術を提供することとした。
【課題を解決するための手段】
【０００６】
本発明の一態様によれば、情報処理装置が提供される。この情報処理装置は、受付ステップと、特定ステップと、生成ステップとを実行するように構成される。受付ステップでは、店舗端末から店舗情報を受け付ける。店舗情報は、店舗の運営情報と、店舗の売上情報とを含む。運営情報は、店舗の運営状況を示すテキスト又は画像を含む。特定ステップでは、運営情報と、売上情報とに基づき、店舗の売上に影響を及ぼすテキスト又は画像を特定する。生成ステップでは、特定されたテキスト又は画像を含む視覚情報を生成する。
【０００７】
これにより、店舗の売上に影響を与える運営方法を把握することができる。
【図面の簡単な説明】
【０００８】
【図１】本実施形態に係るシステム１の構成概要を示す図である。
【図２】情報処理装置３のハードウェア構成を示すブロック図である。
【図３】情報処理装置３の機能を示す機能ブロック図である。
【図４】業務指示情報７１１の一例を示す図である。
【図５】業務報告情報７１２の一例を示す図である。
【図６】業務指示情報７１１の一例を示す図である。
【図７】画像７２の一例を示す図である。
【図８】撮像装置５によって撮像された画像７２の一例を示す図である。
【図９】撮像装置５によって撮像された画像７２の一例を示す図である。
【図１０】情報処理装置３による情報処理の一例を示すアクティビティ図である。
【発明を実施するための形態】
【０００９】
以下、図面を用いて本発明の実施形態について説明する。以下に示す実施形態中で示した各種特徴事項は、互いに組み合わせ可能である。
【００１０】
ところで、本実施形態に登場するソフトウェアを実現するためのプログラムは、コンピュータが読み取り可能な非一時的な記録媒体（Ｎｏｎ−Ｔｒａｎｓｉｔｏｒｙ  Ｃｏｍｐｕｔｅｒ−Ｒｅａｄａｂｌｅ  Ｍｅｄｉｕｍ）として提供されてもよいし、外部のサーバからダウンロード可能に提供されてもよいし、外部のコンピュータで当該プログラムを起動させてクライアント端末でその機能を実現（いわゆるクラウドコンピューティング）するように提供されてもよい。
【００１１】
また、本実施形態において「部」とは、例えば、広義の回路によって実施されるハードウェア資源と、これらのハードウェア資源によって具体的に実現されうるソフトウェアの情報処理とを合わせたものも含みうる。また、本実施形態においては様々な情報を取り扱うが、これら情報は、例えば電圧・電流を表す信号値の物理的な値、０又は１で構成される２進数のビット集合体としての信号値の高低、又は量子的な重ね合わせ（いわゆる量子ビット）によって表され、広義の回路上で通信・演算が実行されうる。
【００１２】
また、広義の回路とは、回路（Ｃｉｒｃｕｉｔ）、回路類（Ｃｉｒｃｕｉｔｒｙ）、プロセッサ（Ｐｒｏｃｅｓｓｏｒ）、及びメモリ（Ｍｅｍｏｒｙ）等を少なくとも適当に組み合わせることによって実現される回路である。すなわち、特定用途向け集積回路（Ａｐｐｌｉｃａｔｉｏｎ  Ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ：ＡＳＩＣ）、プログラマブル論理デバイス（例えば、単純プログラマブル論理デバイス（Ｓｉｍｐｌｅ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｌｏｇｉｃ  Ｄｅｖｉｃｅ：ＳＰＬＤ）、複合プログラマブル論理デバイス（Ｃｏｍｐｌｅｘ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｌｏｇｉｃ  Ｄｅｖｉｃｅ：ＣＰＬＤ）、及びフィールドプログラマブルゲートアレイ（Ｆｉｅｌｄ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ：ＦＰＧＡ））等を含むものである。
【００１３】
１．ハードウェア構成
本節では、本実施形態のハードウェア構成について説明する。図１は、本実施形態に係るシステム１の構成概要を示す図である。
【００１４】
１．１  システム１
システム１は、本部端末２と、情報処理装置３と、店舗端末４と店員端末６とを備え、これらが電気通信回線を通じて通信可能に構成されている。店舗端末４は、複数の撮像装置５（撮像装置５−１〜撮像装置５−Ｎ）と、のそれぞれと、インターネット等のネットワークを介して相互に通信可能となっている。これらの構成要素についてさらに説明する。
【００１５】
１．２  本部端末２
本部端末２は、複数の店舗を統括する本部のマネージャー等が操作するものであり、スマートフォン、タブレット端末、コンピュータ、その他電気通信回線を通じて情報処理装置３及び店舗端末４にアクセス可能なものであれば、その形態は問わない。
【００１６】
本部端末２は、表示部と、入力部と、通信部と、記憶部と、制御部とを有し、これらの構成要素が本部端末２の内部において通信バスを介して電気的に接続されている。
【００１７】
表示部及び入力部は、例えば、本部端末２の筐体に含まれるものであってもよいし、外付けされるものであってもよい。表示部は、ユーザが操作可能なグラフィカルユーザインターフェース（Ｇｒａｐｈｉｃａｌ  Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ：ＧＵＩ）の画面を表示する。入力部は、表示部と一体となってタッチパネルとして実施されてもよい。タッチパネルであれば、ユーザは、タップ操作、スワイプ操作等を入力することができる。もちろん、タッチパネルに代えて、スイッチボタン、マウス、ＱＷＥＲＴＹキーボード等を採用してもよい。
【００１８】
通信部、記憶部及び制御部の具体的な説明については、次に説明する情報処理装置３における通信部３１、記憶部３２及び制御部３３の記載を参照されたい。
【００１９】
１．３  情報処理装置３
図２は、情報処理装置３のハードウェア構成を示すブロック図である。情報処理装置３は、通信部３１と、記憶部３２と、制御部３３とを有し、これらの構成要素が情報処理装置３の内部において通信バス３０を介して電気的に接続されている。各構成要素についてさらに説明する。
【００２０】
（通信部３１）
通信部３１は、ＵＳＢ、ＩＥＥＥ１３９４、Ｔｈｕｎｄｅｒｂｏｌｔ、有線ＬＡＮネットワーク通信等といった有線型の通信手段が好ましいものの、無線ＬＡＮネットワーク通信、ＬＴＥ／３Ｇ等のモバイル通信、Ｂｌｕｅｔｏｏｔｈ（登録商標）通信等を必要に応じて含めてもよい。すなわち、これら複数の通信手段の集合として実施することがより好ましい。
【００２１】
（記憶部３２）
記憶部３２は、前述の記載により定義される様々な情報を記憶する。これは、例えば、制御部３３によって実行される情報処理装置３に係る種々のプログラム等を記憶するソリッドステートドライブ（Ｓｏｌｉｄ  Ｓｔａｔｅ  Ｄｒｉｖｅ：ＳＳＤ）等のストレージデバイスとして、あるいは、プログラムの演算に係る一時的に必要な情報（引数、配列等）を記憶するランダムアクセスメモリ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ：ＲＡＭ）等のメモリとして実施されうる。また、これらの組合せであってもよい。
【００２２】
特に、記憶部３２は、店舗情報７、運営情報７０、テキスト７１、画像７２、動画７３、視覚情報８、店舗の売上情報等を記憶する。
【００２３】
（制御部３３）
制御部３３は、情報処理装置３に関連する全体動作の処理・制御を行う。制御部３３は、例えば不図示の中央処理装置（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ：ＣＰＵ）である。制御部３３は、記憶部３２に記憶された所定のプログラムを読み出すことによって、情報処理装置３に係る種々の機能を実現する。すなわち、ソフトウェア（記憶部３２に記憶されている）による情報処理がハードウェア（制御部３３）によって具体的に実現されることで、制御部３３に含まれる各機能部（図３参照）として実行されうる。これらについては、次節においてさらに詳述する。なお、制御部３３は単一であることに限定されず、機能ごとに複数の制御部３３を有するように実施してもよい。またそれらの組合せであってもよい。
【００２４】
１．４  店舗端末４
店舗端末４は、各店舗の管理者（例えば、店長）が操作するものであり、各店舗に設けられていることが好ましい。店舗端末４は、スマートフォン、タブレット端末、コンピュータ、その他電気通信回線を通じて情報処理装置３にアクセス可能なものであれば、その形態は問わない。
【００２５】
店舗端末４は、表示部と、入力部と、通信部と、記憶部と、制御部とを有し、これらの構成要素が外部の店舗端末４の内部において通信バスを介して電気的に接続されている。各構成要素の説明は本部端末２及び情報処理装置３の記載を参照されたい。
【００２６】
１．５  撮像装置５
撮像装置５は、店舗に設置されるもので、映像を撮影するための光学機器である。撮像装置５は、例えば、撮像素子であるＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅ  Ｄｅｖｉｃｅｓ）イメージセンサー又はＣＭＯＳ（Ｃｏｍｐｌｅｔｅｌｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサーを備える。撮像素子は、撮像装置５の有するレンズから入ってきた光を電気信号に変換する電子部品である。撮像装置５の撮像素子の数、大きさ等の技術仕様は、限定されない。
【００２７】
特に、撮像装置５は各店舗に複数設置されていることが好ましく、部門（コーナー）ごとに設置されていることがより好ましい。例えば、青果コーナー、精肉コーナー、グロッサリーコーナー、惣菜コーナー、菓子コーナー、酒コーナーごとに設置され、陳列棚に陳列されている全ての商品７２０を撮像可能な態様で設置されていることがさらに好ましい。
【００２８】
１．６  店員端末６
店員端末６は、店舗の店員が操作するものであり、スマートフォン、タブレット端末、コンピュータ、その他電気通信回線を通じて情報処理装置３にアクセス可能なものであれば、その形態は問わない。
【００２９】
店員端末６は、表示部と、入力部と、通信部と、記憶部と、制御部とを有し、これらの構成要素が外部の店員端末６の内部において通信バスを介して電気的に接続されている。各構成要素の説明は本部端末２及び情報処理装置３の記載を参照されたい。
【００３０】
２．機能構成
本節では、本実施形態の機能構成について説明する。図３は、情報処理装置３の機能を示す機能ブロック図である。前述の通り、ソフトウェア（記憶部３２に記憶されている）による情報処理がハードウェア（制御部３３）によって具体的に実現されることで、制御部３３に含まれる各機能部として実行されうる。
【００３１】
具体的には、情報処理装置３（制御部３３）は、各機能部として受付部３３１と、分類部３３２と、画像処理部３３３と、特定部３３４と、生成部３３５とを備える。
【００３２】
（受付部３３１）
受付部３３１は、通信部３１又は記憶部３２を介して情報を受け付け、これを作業メモリに読出可能に構成される。特に、受付部３３１は、店舗端末４及び店員端末６からネットワーク及び通信部３１を介して種々の情報を受け付けるように構成される。本実施形態では、受付部３３１が受け付けた種々の情報は、記憶部３２に記憶されるものとして説明する。
【００３３】
特に、受付部３３１は、受付ステップを実行する。具体的には、受付部３３１は、店舗端末４から店舗情報７を受け付ける。ここで、店舗情報７は、店舗の運営情報７０と、店舗の売上情報とを含む。店舗情報７は、複数の店舗に係るものであることが好ましく、店舗の売上情報は、一定時間ごと及び一定期間ごと（時間ごと、日毎、週毎、月毎）の、店舗の部門別、商品７２０のカテゴリー別、商品７２０の種類別の売上に係るものであることが好ましいさらに、店舗情報７は、各店舗の所在地における天気が含まれることが好ましく、天気と、売上情報とが関連付けられて記憶部３２に記憶されていることが好ましい。さらに、店舗情報７には、クレジットカードの入会数や顧客情報が含まれてもよい。
【００３４】
運営情報７０は、店舗の運営状況を示すテキスト７１又は画像７２を含み、所定の位置を継続的に撮像された複数の画像７２を含むことが好ましい。テキスト７１は、店舗の運営に係る業務指示情報７１１及び業務報告情報７１２のうち、少なくとも一つに関するものであることが好ましい。
【００３５】
図４は、業務指示情報７１１の一例を示す図である。図４で示される業務指示は、本部端末２から店舗端末４に送信されるものである。つまり、本部のマネージャーが、各店舗に対して行う店舗運営に関する指示を行う際のテキスト７１が示される。
【００３６】
図５は、業務報告情報７１２の一例を示す図である。図５で示される業務報告は、店舗端末４から本部端末２に送信されるものである。つまり、各店舗の運営者が、本部のマネージャーに対して、業務報告を行う際のテキスト７１が示される。
【００３７】
図６は、業務指示情報７１１の一例を示す図である。図６で示される業務指示は、店舗端末４から店員端末６に送信されるものである。つまり、各店舗の店長が、店員に対して行う店舗運営に関する指示を行う際のテキスト７１が示される。なお、店員端末６から店舗端末４に対して送信された業務報告情報７１２を、運営情報７０に含んでもよい。
【００３８】
図７は、画像７２の一例を示す図である。図７に示されるように、画像７２には、店舗の陳列棚に陳列された複数の商品７２０が含まれる。また、画像７２には、ＰＯＰ広告７２１が含まれることが好ましい。
【００３９】
（分類部３３２）
分類部３３２は、分類ステップを実行する。分類部３３２は、種々の情報を予め設定された条件又は機械学習モデルに基づいて分類する。特に、分類部３３２は、画像７２に含まれる商品７２０に基づき、画像７２を部門別に分類する。分類部３３２に分類された画像７２は、分類された部門と関連付けて記憶部３２に記憶される。
【００４０】
（画像処理部３３３）
画像処理部３３３は、画像処理ステップを実行する。画像処理部３３３は、記憶部３２に記憶された画像７２に対して、画像処理を実行可能である。具体的には、画像処理部３３３は、画像７２の画像領域から、第１の領域７３１を検出する。また、画像処理部３３３は、前記第１の領域７３１において前記商品７２０の補充を検出した場合、商品補充情報として取得する。第１の領域７３１は、商品７２０の補充が必要な場所を示す。第２の領域７３２は、前記商品の補充が行われた場所を示す。つまり、画像処理部３３３は、第１の領域７３１が第２の領域７３２した場合、かかる変化を商品補充情報として取得する。また、画像処理部３３３は、記憶部３２に記憶された各店舗の商品データと照合して、撮像された商品７２０を認識し、画像７２に含まれる商品７２０を識別可能であることが好ましい。なお、画像処理部３３３は、機械学習に基づき、画像７２に対して画像処理を実行してもよい。
【００４１】
所定の位置を継続的に撮像された複数の画像７２の例は、図８及び図９で示される。図８は、撮像装置５によって撮像された画像７２の一例を示す図である。図８に示される画像７２は、２０２０年１１月１１日午前８時２分の陳列棚を写したものである。図８に示されるように、画像処理部３３３は、画像７２の画像領域から、商品７２０の補充が必要な領域を第１の領域７３１として検出する。また、画像処理部３３３は、陳列棚に展示されたＰＯＰ広告７２１を認識する。
【００４２】
図９は、撮像装置５によって撮像された画像７２の一例を示す図である。図９に示される画像７２は、２０２０年１１月１１日午前９時２分の陳列棚を写したものであり、図８の画像７２の一時間後の画像７２である。図９に示されるように、画像処理部３３３は、一時間前に商品７２０の補充が行われていなかった第１の領域７３１として認識された場所に商品７２０が補充されると、第１の領域７３１を第２の領域７３２に変更して認識し、これを商品補充情報として取得する。このおき、画像処理部３３３は、第１の領域７３１から第２の領域７３２に変更されるまでにかかった時間、すなわち、商品７２０が補充されるまでにかかった時間を商品補充情報として認識する。なお、このとき、商品７２０が客に購入され、商品７２０の補充が必要な場所が発生した場合、かかる場所を新たに第１の領域７３１として検出することが好ましい。
【００４３】
（特定部３３４）
特定部３３４は、特定ステップを実行する。具体的には、特定部３３４は、運営情報７０と、売上情報とに基づき、店舗の売上に影響を及ぼすテキスト７１又は画像７２を特定する。より具体的には、特定部３３４は、運営情報７０と、売上情報とに基づき、店舗の売上向上及び売上低下に影響を及ぼすテキスト７１又は画像７２を特定する。また、分類ステップで画像７２が分類されている場合、特定部３３４は、分類された画像７２と、売上情報とに基づき、店舗の売上に影響を及ぼす画像７２を特定する。
【００４４】
（生成部３３５）
生成部３３５は、画面、画像７２、アイコン、メッセージ等を生成し、本部端末２及び店舗端末４の表示部に視覚情報８を表示させる。あるいは、生成部３３５は、画面、画像７２、アイコン、メッセージ等を本部端末２及び店舗端末４に表示させるためのレンダリング情報だけを生成してもよい。例えば、生成部３３５は、記憶部３２に記憶された種々の情報又はこれらを含む画面等を、本部端末２及び店舗端末４で視認可能な態様で表示させる。生成部３３５は、テキスト７１、画像７２等を表示させることができる。
【００４５】
特に、生成部３３５は、生成ステップを実行する。生成部３３５は、特定ステップで特定されたテキスト７１又は画像７２を含む視覚情報８を生成する。生成部３３５は、特定ステップで特定されたＰＯＰ広告７２１又はＰＯＰ広告７２１の展示方法を含む視覚情報８を生成してもよい。さらに、生成部３３５は、特定ステップで特定された画像領域を含む視覚情報８を生成してもよい。生成された視覚情報８は、記憶部３２に記憶される。
【００４６】
３．情報処理の詳細
第３節では、アクティビティ図を参照しながら、前述した情報処理装置３の情報処理について説明する。図１０は、情報処理装置３による情報処理の一例を示すアクティビティ図である。
【００４７】
まず、受付部３３１は、店舗端末４から送信された店舗情報７を受け付ける（Ａ１０１）。受け付けた店舗情報７は、記憶部３２に記憶される。受付部３３１は、複数の店舗に係る店舗情報７を受け付けることが好ましく、受付部３３１は、本部端末２から送信された店舗情報７を受け付けてもよい。また、受付部３３１は、複数の店舗端末４から送信された店舗情報７を受け付けることが好ましい。
【００４８】
次に、分類部３３２は、画像７２に含まれる商品７２０に基づき、画像７２を部門別に分類することが好ましい。具体的には、分類部３３２は、画像７２に含まれる商品７２０の名称や形状から適切な部門を推定し、画像７２を分類する。部門とは、具体的には例えば、青果コーナー、精肉コーナー、グロッサリーコーナー、惣菜コーナー、菓子コーナー、酒コーナーである。
【００４９】
なお、画像７２が複数の部門に属するものとして分類してもよく、撮像装置５の設置場所が各店舗の部門と関連付けて記憶部３２に記憶されている場合、画像７２を撮像した撮像装置５の所属部門に基づき、画像７２が分類されてもよい。画像７２の分類を行わない場合、Ａ１０２をスキップしてＡ１０３へ進む。
【００５０】
次に、画像処理部３３３は、画像７２の画像領域から、商品７２０の補充が必要な場所を示す第１の領域７３１を検出する。また、画像処理部３３３は、前記第１の領域７３１において前記商品７２０の補充を検出した場合、商品補充情報として取得する（Ａ１０３）。商品補充情報には、第１の領域７３１に対応する商品７２０の種類と、補充が行われるまでの時間と、第１の領域７３１の検出回数とが含まれることが好ましい。取得された商品補充情報は、記憶部３２に記憶される。
【００５１】
ここで、画像処理部３３３は、商品７２０の種類ごとに第１の領域７３１を識別可能であることが好ましく、領域ごとの商品７２０の数を推定し、商品７２０の種類ごとに、陳列されている商品７２０の数の合計が参照可能な態様で記憶されることがより好ましい。また、画像処理部３３３は、画像７２に含まれるＰＯＰ広告７２１を認識し、ＰＯＰ広告７２１と、ＰＯＰ広告７２１の対象商品を関連付ける処理を実行してもよい。
【００５２】
なお、画像処理部３３３は、陳列棚以外の領域を、第１の領域７３１として認識しないことが好ましい。これにより、撮像された時点で商品７２０が陳列されていないものの、店員によって商品７２０が補充が行われる予定の場所と、元々商品７２０を陳列する予定がない領域とを区別することが可能となる。
【００５３】
店舗情報７に画像７２及び動画７３が含まれない場合、Ａ１０２及びＡ１０３をスキップしてＡ１０４へ進む。
【００５４】
続いて、特定部３３４は、運営情報７０と、売上情報とに基づき、店舗の売上に影響を及ぼすテキスト７１又は画像７２を特定する（Ａ１０４）。店舗情報７に含まれるテキスト７１に基づき特定を行う場合、特定部３３４は、テキスト７１と、売上情報とに基づき、店舗の売上に影響を及ぼすテキスト７１を特定する。例えば、ある店舗の業務指示情報７１１及び業務報告情報７１２に、特定のクレジットカード名「Ａ」が多く含まれており、「Ａ」を用いたクレジットカード払い利用者の購入金額が他の店舗より多い場合、「Ａ」を売上に影響を及ぼすテキスト７１として特定する。また、例えば、ある店舗において、売上の多い月に多用されていたテキスト７１を、店舗の売上向上に影響を及ぼすテキスト７１として特定する。また、特定部３３４は、各店舗の所在地における気象情報と、業務指示情報７１１等を参照して、雨の日の売上の高い日に多く使用されている単語を、売上向上に影響を及ぼすテキスト７１として特定する。
【００５５】
また、店舗情報７に所定の位置を継続的に撮像された複数の画像７２が含まれる場合、特定部３３４は、商品補充情報と、売上情報とに基づき、店舗の売上に影響を及ぼす画像領域を特定する。具体的には例えば、精肉コーナーの売上が高い日において、第１の領域７３１の検出回数、面積、検出継続時間等に共通する要素が見られる場合、かかる画像領域を、店舗の売上に影響を及ぼす画像領域として特定する。
【００５６】
画像７２にＰＯＰ広告７２１が含まれる場合、特定部３３４は、画像７２と、売上情報とに基づき、店舗の売上に影響を及ぼすＰＯＰ広告７２１又はＰＯＰ広告７２１の展示方法を特定してもよい。ここで、ＰＯＰ広告７２１の展示方法とは、商品７２０の陳列棚におけるＰＯＰ広告７２１の展示位置と、展示数と、広告内容との少なくとも一つを含む。例えば、特定部３３４は、売上データと、画像処理部３３３によって認識されたＰＯＰ広告７２１の展示位置とに基づき、売上向上に影響を及ぼす展示位置を特定する。また、特定部３３４は、ＰＯＰ広告７２１の対象となる商品７２０だけでなく、ＰＯＰ広告７２１が展示された周囲の商品７２０について売上が向上している場合、かかる商品７２０の種類を特定してもよい。これにより、ＰＯＰ広告７２１を展示した商品７２０の近い場所に、どのような商品７２０を配置すれば、売上向上が見込まれるのかを把握することが可能となる。なお、特定されたテキスト７１、画像７２、ＰＯＰ広告７２１等は、記憶部３２に記憶される。
【００５７】
その後、生成部３３５は、特定ステップで特定されたテキスト７１又は画像７２を含む視覚情報８を生成する（Ａ１０５）。このようにして、店舗の売上が変動した場合に、売上に影響を与えたと考えられる特徴を特定し、適切な店舗の運営方法が各店舗の関係者に把握可能な態様で示される。
【００５８】
４．その他
本実施形態に係るシステム１に関して、以下のような態様を採用してもよい。
【００５９】
（１）特定部３３４は、画像７２に含まれる複数の種類の商品７２０の相対的な位置関係と、売上情報とに基づき、店舗の売上に影響を及ぼす商品７２０の位置関係を特定してもよい。例えば、互いに近い場所に展示した特定の複数種類の商品７２０の売上がどちらも高い傾向がある場合、かかる商品７２０同士の展示位置（例えば、隣り合わせに展示した等）と、該当の商品７２０の種類を特定してもよい。
（２）生成部３３５は、商品補充情報を含む視覚情報８を生成してもよい。これにより、商品７２０を補充する店員は、補充が必要な商品名、欠品時間等の把握が可能となり、より効率的に商品７２０の補充をすることが可能となる。
（３）情報処理装置３は、ＳａａＳ（Ｓｏｆｔｗａｒｅ  ａｓ  ａ  Ｓｅｒｖｉｃｅ）形態により、本部端末２及び店舗端末４に種々の機能を提供してもよい。
（４）本実施形態の態様は、プログラムであってもよい。プログラムは、コンピュータに、情報処理装置３の各ステップを実行させる。
（５）本実施形態の態様は、情報処理方法であってもよい。情報処理方法は、受付ステップと、特定ステップと、生成ステップとを備える。受付ステップでは、店舗端末４から店舗情報７を受け付ける。
店舗情報７は、店舗の運営情報７０と、店舗の売上情報とを含む。運営情報７０は、店舗の運営状況を示すテキスト７１又は画像７２を含む。特定ステップでは、運営情報７０と、売上情報とに基づき、店舗の売上に影響を及ぼすテキスト７１又は画像７２を特定する。生成ステップでは、特定されたテキスト７１又は画像７２を含む視覚情報８を生成する。
【００６０】
さらに、次に記載の各態様で提供されてもよい。
前記情報処理装置において、前記特定ステップでは、前記運営情報と、前記売上情報とに基づき、前記店舗の売上向上に影響を及ぼす前記テキスト又は前記画像を特定する、もの。
前記情報処理装置において、分類ステップをさらに実行するように構成され、前記分類ステップでは、前記画像に含まれる商品に基づき、前記画像を部門別に分類し、前記特定ステップでは、分類された前記画像と、前記売上情報とに基づき、前記店舗の売上に影響を及ぼす前記画像を特定する、もの。
前記情報処理装置において、前記画像には、ＰＯＰ広告を含み、前記特定ステップでは、前記画像と、前記売上情報とに基づき、前記店舗の売上に影響を及ぼす前記ＰＯＰ広告を特定し、前記生成ステップでは、特定された前記ＰＯＰ広告を含む視覚情報を生成する、もの。
前記情報処理装置において、前記特定ステップでは、前記画像と、前記売上情報とに基づき、前記店舗の売上に影響を及ぼす前記ＰＯＰ広告の展示方法を特定し、前記展示方法とは、商品の陳列棚における前記ＰＯＰ広告の展示位置と、展示数と、広告内容との少なくとも一つを含み、前記生成ステップでは、特定された前記展示方法を含む視覚情報を生成する、もの。
前記情報処理装置において、前記運営情報は、前記店舗の運営状況を示す前記テキストを含み、前記テキストは、前記店舗の運営に係る業務指示情報及び業務報告情報のうち、少なくとも一つに関するもので、前記特定ステップでは、前記テキストと、前記売上情報とに基づき、前記店舗の売上に影響を及ぼす前記テキストを特定し、前記生成ステップでは、特定された前記テキストを含む視覚情報を生成する、もの。
前記情報処理装置において、画像処理ステップをさらに実行するように構成され、前記運営情報は、所定の位置を継続的に撮像された複数の前記画像を含み、前記画像処理ステップでは、前記画像の画像領域から、第１の領域を検出し、前記第１の領域は、商品の補充が必要な場所を示し、前記第１の領域において前記商品の補充を検出した場合、商品補充情報として取得し、前記特定ステップでは、前記商品補充情報と、前記売上情報とに基づき、前記店舗の売上に影響を及ぼす前記画像領域を特定し、前記生成ステップでは、特定された前記画像領域を含む視覚情報を生成する、もの。
前記情報処理装置において、前記生成ステップでは、前記商品補充情報を含む視覚情報を生成する、もの。
プログラムであって、コンピュータに、前記情報処理装置の各ステップを実行させる、もの。
情報処理方法であって、受付ステップと、特定ステップと、生成ステップとを備え、前記受付ステップでは、店舗端末から店舗情報を受け付け、前記店舗情報は、店舗の運営情報と、前記店舗の売上情報とを含み、前記運営情報は、前記店舗の運営状況を示すテキスト又は画像を含み、前記特定ステップでは、前記運営情報と、前記売上情報とに基づき、前記店舗の売上に影響を及ぼす前記テキスト又は前記画像を特定し、前記生成ステップでは、特定された前記テキスト又は前記画像を含む視覚情報を生成する、方法。
もちろん、この限りではない。
【００６１】
最後に、本発明に係る種々の実施形態を説明したが、これらは、例として提示したものであり、発明の範囲を限定することは意図していない。当該新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。当該実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
【符号の説明】
【００６２】
１      ：システム
２      ：本部端末
３      ：情報処理装置
４      ：店舗端末
５      ：撮像装置
５−１  ：撮像装置
５−Ｎ  ：撮像装置
６      ：店員端末
７      ：店舗情報
８      ：視覚情報
３０    ：通信バス
３１    ：通信部
３２    ：記憶部
３３    ：制御部
７０    ：運営情報
７１    ：テキスト
７２    ：画像
７３    ：動画
３３１  ：受付部
３３２  ：分類部
３３３  ：画像処理部
３３４  ：特定部
３３５  ：生成部
７１１  ：業務指示情報
７１２  ：業務報告情報
７２０  ：商品
７２１  ：ＰＯＰ広告
７３１  ：第１の領域
７３２  ：第２の領域
【要約】
【課題】店舗の売上に影響を与える運営方法を把握することを可能とする技術を提供すること。
【解決手段】本発明の一態様によれば、情報処理装置が提供される。この情報処理装置は、受付ステップと、特定ステップと、生成ステップとを実行するように構成される。受付ステップでは、店舗端末から店舗情報を受け付ける。店舗情報は、店舗の運営情報と、店舗の売上情報とを含む。運営情報は、店舗の運営状況を示すテキスト又は画像を含む。特定ステップでは、運営情報と、売上情報とに基づき、店舗の売上に影響を及ぼすテキスト又は画像を特定する。生成ステップでは、特定されたテキスト又は画像を含む視覚情報を生成する。
【選択図】図１【図１】
0006877806.tif 000002
【図２】
0006877806.tif 000003
【図３】
0006877806.tif 000004
【図４】
0006877806.tif 000005
【図５】
0006877806.tif 000006
【図６】
0006877806.tif 000007
【図７】
0006877806.tif 000008
【図８】
0006877806.tif 000009
【図９】
0006877806.tif 000010
【図１０】
0006877806.tif 000011