(57)【特許請求の範囲】
【請求項１】
注文者端末とサーバとがネットワークを介して接続され、商品・役務画像に基づいて注文可能な商品・役務注文システムにおいて、
前記サーバに、
商品・役務の情報を蓄積する商品・役務マスタ情報記憶手段と、
前記商品・役務画像を認識する画像認識手段と、
前記サーバに蓄積された商品・役務マスタ情報または前記サーバに蓄積されていない、インターネット上のウエブ記事を含む外部ビッグデータから抽出した類似商品・役務画像と前記商品・役務画像とを判別する画像判断手段と、
前記商品・役務マスタ情報又は前記外部ビッグデータから前記商品・役務に関連する情報を検索する商品・役務関連情報検索手段とを備え、
前記商品・役務関連情報検索手段は、前記商品・役務マスタ情報の検索において前記類似商品・役務画像が複数のウエブページで見つかった場合、前記類似商品・役務画像が掲載されている複数のウエブページに記載されているすべての文字情報の中から重複されている文字情報を抽出し、重複記載された文字情報の中から各種の商品情報の固有の文言や類似商品・役務画像の近傍から商品情報の分類を行い、類似商品・役務画像及び商品情報を導出し、前記商品・役務マスタ情報の検索において前記類似商品・役務画像が見つからなかった場合又は十分な情報量を抽出できなかった場合、外部ビックデータから類似商品・役務画像を検索することを特徴とする商品・役務注文システム。
【請求項２】
前記画像認識手段は、前記商品・役務画像から画像・映像データを出力する画像認識処理、前記商品・役務画像から文字列を含む領域の抽出する文字列検出処理、抽出した前記文字列をテキストとして出力する文字列認識処理、前記文字列を言語解析する言語解析処理を含む請求項１に記載の商品・役務注文システム。
【請求項３】
前記文字列を自動翻訳する自動翻訳手段をさらに有する請求項２に記載の商品・役務注文システム。
【請求項４】
前記注文者端末による注文者の注文履歴及び前記注文者を含めた複数の注文者に実施したアンケート結果を含むビッグデータに基づいて商品の購入傾向を前記注文者毎に人工知能を用いて分析する注文者情報分析手段をさらに有する請求項１〜３のいずれかに記載の商品・役務注文システム。
【請求項５】
注文者端末とサーバとがネットワークを介して接続され、商品・役務画像に基づいて注文可能な商品・役務注文システムにおける商品・役務注文方法において、
注文者が注文者端末より商品を撮影又はウエブ上から抽出することによって商品・役務画像を得るステップと、取得した商品・役務画像を認識して、サーバ内に蓄積された商品・役務マスタ情報または前記サーバに蓄積されていない、インターネット上のウエブ記事を含む外部ビッグデータから抽出した類似商品・役務画像と前記商品・役務画像とを判別するステップと、前記商品・役務マスタ情報又は前記外部ビッグデータから前記商品・役務に関連する情報を検索する商品・役務関連情報検索ステップとを含み、
前記商品・役務関連情報検索ステップは、前記商品・役務マスタ情報の検索において前記類似商品・役務画像が複数のウエブページで見つかった場合、前記類似商品・役務画像が掲載されている複数のウエブページに記載されているすべての文字情報の中から重複されている文字情報を抽出し、重複記載された文字情報の中から各種の商品情報の固有の文言や類似商品・役務画像の近傍から商品情報の分類を行い、類似商品・役務画像及び商品情報を導出し、前記商品・役務マスタ情報の検索において前記類似商品・役務画像が見つからなかった場合又は十分な情報量を抽出できなかった場合、外部ビックデータから類似商品・役務画像を検索することを特徴とする商品・役務注文システムにおける商品・役務注文方法。
【請求項６】
前記注文者端末による注文者の注文履歴及び前記注文者を含めた複数の注文者に実施したアンケート結果を含むビッグデータに基づいて商品の購入傾向を前記注文者毎に人工知能を用いて分析するステップをさらに含む請求項５に記載の商品・役務注文システムにおける商品・役務注文方法。
【請求項７】
請求項５又は請求項６に記載の各ステップを実行するためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、商品・役務注文システム、商品・役務注文方法及びそのプログラムに関する。
【背景技術】
【０００２】
従来、情報処理装置を用いた商品・役務注文システムは公知である。例えば、特許文献１に係る商品注文システムの情報処理装置では、検索開始指示受付手段、商品名候補表示手段、商品マスタ記憶手段、検索語句受付手段及び検索手段を備える。検索開始指示受付手段では、入力欄に入力された語句を検索に用いる検索語句として確定し、検索開始指示を受付ける。商品候補表示手段では、検索開始指示に先立って、商品マスタ記憶手段から入力欄に入力されているテキストを商品情報の一部として有する商品の商品名を抽出し、検索処理を行う商品名の候補として、入力欄の下方に並べて表示する。検索語句受付手段では、商品の候補から検索を行う商品名の選択を受付ける。検索手段では、検索語句受付手段が受付けた商品名候補により検索処理を行う。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１５−０７９４６０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１に係る商品注文システムによれば、商品マスタに記憶されたデータに基づいて該当する商品を検索することができる。しかしながら、商品マスタ記憶手段に商品を記憶させておくことが前提であるために、商品マスタ記憶手段に記憶されていない商品を注文者が検索することができないという問題があった。
【０００５】
また、検索したい商品に関する検索語句を注文者が端末で入力する必要があるために、注文者の目の前にある商品に関する検索語句が思い浮かばない場合には、適切に入力作業を行うことができない。また、仮に目の前の商品が商品マスタ記憶手段に記憶されているものであっても、注文者が携帯端末等に検索語句を入力する必要があるので、素早く商品関連情報を取得したり商品の注文を行うことができなかった。また、役務に関しても、同様に、かかる問題を解決する注文システムは存在していなかった。
【０００６】
本発明は、従来の商品・役務注文システム等の改良であって、注文者が撮影・保存した商品・役務画像に基づいて類似商品・画像検索を行い、瞬時に商品・役務関連情報を注文者に送信して、速やかに注文を行うことのできる商品・注文システム等を提供することを目的とする。
【課題を解決するための手段】
【０００７】
前記課題を解決するため、本願の第１発明は、注文者端末とサーバとがネットワークを介して接続され、商品・役務画像に基づいて注文可能な商品・役務注文システムに関する。
【０００８】
第１発明に係る商品・役務注文システムは、前記サーバに、商品・役務の情報を蓄積する商品・役務マスタ情報記憶手段と、前記商品・役務画像を認識する画像認識手段と、前記サーバに蓄積された商品・役務マスタ情報または前記サーバに蓄積されていない、インターネット上のウエブ記事を含む外部ビッグデータから抽出した類似商品・役務画像と前記商品・役務画像とを判別する画像判断手段と、前記商品・役務マスタ情報又は前記外部ビッグデータから前記商品・役務に関連する情報を検索する商品・役務関連情報検索手段とを備え、前記商品・役務関連情報検索手段は、前記商品・役務マスタ情報の検索において前記類似商品・役務画像が複数のウエブページで見つかった場合、前記類似商品・役務画像が掲載されている複数のウエブページに記載されているすべての文字情報の中から重複されている文字情報を抽出し、重複記載された文字情報の中から各種の商品情報の固有の文言や類似商品・役務画像の近傍から商品情報の分類を行い、類似商品・役務画像及び商品情報を導出し、前記商品・役務マスタ情報の検索において前記類似商品・役務画像が見つからなかった場合又は十分な情報量を抽出できなかった場合、外部ビックデータから類似商品・役務画像を検索することを特徴とする。
【０００９】
本願の第１発明に係る商品・役務注文システムは、以下の実施態様を含む。
（１）前記画像認識手段は、前記商品・役務画像から画像・映像データを出力する画像認識処理、前記商品・役務画像から文字列を含む領域の抽出する文字列検出処理、抽出した前記文字列をテキストとして出力する文字列認識処理、前記文字列を言語解析する言語解析処理を含む。
（２）前記文字列を自動翻訳する自動翻訳手段をさらに有する。
（３）前記注文者端末による注文者の注文履歴及び前記注文者を含めた複数の注文者に実施したアンケート結果を含むビッグデータに基づいて商品の購入傾向を前記注文者毎に人工知能を用いて分析する注文者情報分析手段をさらに有する。
【００１０】
本願の第２発明は、注文者端末とサーバとがネットワークを介して接続され、商品・役務画像に基づいて注文可能な商品・役務注文システムにおける商品・役務注文方法に関する。
【００１１】
本願の第２発明に係る商品・役務注文方法は、注文者が注文者端末より商品を撮影又はウエブ上から抽出することによって商品・役務画像を得るステップと、取得した商品・役務画像を認識して、サーバ内に蓄積された商品・役務マスタ情報または前記サーバに蓄積されていない、インターネット上のウエブ記事を含む外部ビッグデータから抽出した類似商品・役務画像と前記商品・役務画像とを判別するステップと、前記商品・役務マスタ情報又は前記外部ビッグデータから前記商品・役務に関連する情報を検索する商品・役務関連情報検索ステップとを含み、前記商品・役務関連情報検索ステップは、前記商品・役務マスタ情報の検索において前記類似商品・役務画像が複数のウエブページで見つかった場合、前記類似商品・役務画像が掲載されている複数のウエブページに記載されているすべての文字情報の中から重複されている文字情報を抽出し、重複記載された文字情報の中から各種の商品情報の固有の文言や類似商品・役務画像の近傍から商品情報の分類を行い、類似商品・役務画像及び商品情報を導出し、前記商品・役務マスタ情報の検索において前記類似商品・役務画像が見つからなかった場合又は十分な情報量を抽出できなかった場合、外部ビックデータから類似商品・役務画像を検索することを特徴とする商品・役務注文システムにおける商品・役務注文方法。
【００１２】
本願の第２発明は、以下の実施態様を含む。
（１）前記注文者端末による注文者の注文履歴及び前記注文者を含めた複数の注文者に実施したアンケート結果を含むビッグデータに基づいて商品の購入傾向を前記注文者毎に人工知能を用いて分析するステップをさらに含む。
【００１３】
本願の第３発明は、本願の第２発明の各ステップを実行するためのプログラムに関する。
【発明の効果】
【００１４】
本発明に係る商品・役務注文システム、商品・役務注文方法及びそのプログラムによれば、サーバに蓄積された商品・役務マスタ情報または前記サーバに蓄積されていない、インターネット上のウエブ記事を含む外部ビッグデータから抽出した商品・役務類似画像と商品・役務画像とを判別する画像判別手段を備えることから、目の前にある商品を撮影して得た商品・役務画像に基づきＳＮＳ等のインターネット上に存在する膨大な情報からなる外部ビッグデータから商品類似画像を抽出することができるので、目の前にある商品に関連する商品情報を知らなかったり、事業者サーバにおけるオンラインショッピングサイト等の商品情報を記憶する商品・役務マスタ情報に商品類似画像が記憶されていなかったとしても、商品情報を確実に検索することができる。
【図面の簡単な説明】
【００１５】
図面は、本開示に係る商品・役務注文システム（飲食物注文システムを含む）の特定の実施の形態を示し、発明の不可欠な構成ばかりでなく、選択的及び好ましい実施の形態を含む。
【図１】本発明に係る商品・役務注文システムを概略的に示す全体図。
【図２】注文者端末の構成を概略的に示すブロック図。
【図３】事業者サーバの機能を概略的に示すブロック図。
【図４】商品・役務注文システムのフローチャート図。
【図５】本発明に係る飲食物注文システムを概略的に示す全体図。
【図６】飲食物注文システムの流れを示すブロック図。
【発明を実施するための形態】
【００１６】
図１に、本発明に係る商品注文システムを示している。商品・役務注文システム１は、システムの注文者（クライアント）である顧客が使用する注文者端末１０と、商品・役務注文システム１のプログラムや商品マスタ情報等が格納される事業者サーバ２０と、インターネット上の情報からなる外部ビッグデータ４０とを備えている。これらの注文者端末１０、事業者サーバ２０及び外部ビッグデータ４０は、インターネット２を介して情報を送受信できるように構成されている。商品・役務注文システム１には、インターネット２のほかに、ブルートゥース（登録商標）や無線ＬＡＮによるビーコン等の公知の通信手段を用いることができる。
【００１７】
事業者サーバ２０の記録媒体（図示せず）内に記憶されたプログラムを実行することにより機能させる人工知能（ＡＩ）を事業者サーバ２０内に配置している。人工知能は、人間によるデータ分析を 、コンピュータの制御プログラムなどの制御資源、記憶資源を用いて肩代わりしようとする自律判断が可能な仮想的な主体である。人工知能がデータ分析を開始する際、事業者サーバ２０内のビッグデータ又は外部ビッグデータ４０を分類した結果が人工知能に与えられると、人工知能はデータの分類の特徴を学習する。
【００１８】
ここで、「商品・役務」は、商取引が可能なすべての商品とサービス（役務）を意味し、スーパーやコンビニエンスストア、ドラッグストア等の小売店で販売されているような、国内外で生産、流通、交換される狭義の物財だけではなく、レストランや喫茶店等の飲食店のサービスにより提供される飲食物、マッサージ店や互角教室等で提供される有償、無償のサービス等を含む。すなわち、ユーザ端末によって撮影可能なものであれば、本発明に係る商品になりうる。
【００１９】
「商品・役務画像」は、二次元的に平面的に撮影されるもののほかに、三次元的に立体的に撮影されたものを含み、例えば、実物の商品の外観を撮影した動画像、文字看板、外観に含まれる文字列を撮影した静止画像や動画像を意味する。また、役務を対象とすることから、役務に関する画像、例えば、ウエブ上に存在するヨガ教室の風景の写真を役務画像として、そのヨガ教室におけるレッスン予約をすることもできる。
【００２０】
「商品・役務マスタ情報３０」は、事業者サーバ２０内に記憶・蓄積された商品及び役務に関する情報（ビッグデータ）、例えば、商品の写真・動画、役務の写真・動画、商品の金額・販売店・サイズ・種類・在庫数等に関するウエブ情報、役務の料金・提供店・役務の内容・予約状況等に関するウエブ情報等を意味する。これらの蓄積されたウエブ情報は、ＳＮＳ（ソーシャル・ネットワーキング・サービス）、ブログ、口コミサイト、企業ＨＰ、ウエブニュース等のインターネット上に存在するすべてのウエブ記事から収集して蓄積される。
【００２１】
「ビッグデータ」は、販売されているデータベースや管理ツールや従来のデータ処理アプリケーションで処理することが困難なほど巨大で複雑なデータ集合の集積物である。本発明における「外部ビッグデータ４０」は、公衆がアクセス可能なＳＮＳ、ブログ、口コミサイト、企業ＨＰ、ウエブニュース等のインターネット上に存在するすべてのウエブ記事に掲載された内容、及びオフラインでスマホや携帯端末に保存されたデータであってインターネット等の通信手段によって一時的にアクセス可能になるもの等を意味する。
【００２２】
外部ビッグデータ４０は、潜在的に無限量のデータに関し、データを蓄積しないままで処理されるストリームデータ処理、または、大容量データ処理技術によってストック系のデータ処理基盤として膨大な量（ペタバイト、エクサバイト級）のデータを多数の処理サーバに分配して処理される。本発明では、既存の検索エンジン又は出願人が独自開発したクローラー技術を有する検索エンジンにより検索されたビッグデータをストリーム処理又はバッチ処理することによって適正データが検出される。したがって、事業者サーバ２０の膨大な量の蓄積からなる商品・役務マスタ情報（内部ビッグデータ）３０については、ここでは外部ビッグデータ４０とは称するものではない。
【００２３】
「販売店（小売販売店）」とは、商品をＥＣサイトまたは実店舗で販売する、アパレル、食品、スポーツ用具等を取り扱うすべての業種の小売店舗を意味する。「提供店（サービス提供事業者）」は、料理を提供する飲食店、介護サービスを提供する介護施設等の有償又は無償のサービスを提供するすべてのサービス提供事業者を意味する。
【００２４】
受注装置５０は、各小売店又は各販売店に配置された通信機器であって、注文者端末１０から送信された注文情報をインターネットを介して受信することができる。後記のように、受注装置５０にも人工機能（ＡＩ）を搭載することによって、受注後の事務処理や商品の配送、役務の提供をスムーズに行うことができる。
【００２５】
事業者サーバ２０は、デスクトップ型又はラップトップ型のパーソナルコンピュータ等からなる通常のコンピュータ装置であって、中央処理部、記憶部、入力部及び通信部等の公知の構成を備える。事業者サーバは、オンラインサーバであってもよいし、ローカルサーバであってもよい。
【００２６】
事業者サーバ２０の記憶部（記録媒体）には、中央処理部で処理するための商品・役務注文システム用のプログラム（システム用プログラム）がインストールされている。当該システム用プログラムは、インターネット・サーバや図示しないＣＤ−ＲＯＭ，ＵＳＢメモリ等の各種公知の記憶媒体に記憶されていてもよい。
【００２７】
注文者端末１０としては、携帯可能な通信機器、例えば、タッチパネルを有するスマートフォンを想定しているが、ラップトップ型コンピュータ、携帯情報端末（ＰＤＡ）、携帯ゲーム機、タブレットＰＣ等であってもよい。注文者端末１０において実行される注文者用プログラムと事業者サーバ２０で実行されるシステム用プログラムとは、ハイパーテキスト転送プロトコル（ＨＴＴＰ）等の通信プロトコルを用いて通信される。
【００２８】
注文者プログラムは、注文者が事業者のＨＰやオンラインアプリストア等からダウンロードしたアプリケーション（アプリ）として注文者端末１０にインストールされる。ただし、注文者プログラムは、端末にアプリケーションとしてダウンロードせずに、ブラウザ上等で起動させるものであってもよい。
【００２９】
図２を参照すると、注文者端末１０は、通常の携帯端末と同様に、端末通信部１１、端末記憶部１２、高感度のタッチパネル機構等からなる端末操作部１３、液晶画面等からなる端末表示部１４、端末処理部１５と、スマートフォン、ゲーム機、ウエアラブル端末等に内蔵された高感度カメラ機構等を有する端末撮影部１６とを備える。
【００３０】
端末通信部１１は、移動通信網に端末を接続するための通信インターフェース回路を有する。端末通信部１１は、事業者サーバ２０からインターネット２を介して受信したデータを端末処理部１５に送る。また、端末処理部１５から受け取ったデータをインターネット２を介して事業者サーバ２０に送信する。
【００３１】
端末処理部１５は、１個又は複数のプロセッサ及びその周辺回路から構成されており、注文者用プログラム（アプリケーション）を実行可能とするものである。端末記憶部１２は、半導体メモリ、磁気ディスクまたは光ディスク等であって、携帯端末を制御するために用いられる各種のプログラム及びデータを記憶する。例えば、端末記憶部１２は、専用のアプリのほかに、端末撮影部１６によって撮影された商品の画像や商品関連情報を記憶する。
【００３２】
注文者端末１０における商品・役務注文システム１を利用するためのアプリ（注文者プログラム)のインストールは、注文者が直接インストール作業を行う場合に限らず、いわゆる、ネット上のストア等でアプリを選択すると、自動的にインストールされて、そのアプリのアイコンが端末に表示されているものであってもよく、予め、注文者端末１０にプリインストールされているものであってもよい。
【００３３】
端末処理部１５は、専用のアプリ内でサーバに商品の注文情報を送信するための注文手段を有する。注文者は、注文者端末１０の端末撮影部１６で撮影した商品・役務画像を端末通信部１１を介して事業者サーバ２０に送信することによって、商品・役務の注文をすることができる。
【００３４】
図３を参照すると、事業者サーバ２０は、認証手段２１、画像認識手段２２、画像判断手段２３、商品・役務関連情報検索手段２４、検索結果送信手段２５、受注情報送信手段２６、商品・役務マスタ情報記憶手段２７、自動翻訳手段２８、注文者情報分析手段２９を備える。
【００３５】
＜認証手段２１＞
認証手段２１は、オプションであって、注文者端末１０から事業者サーバ２０にインターネットを介して予め登録（記憶）した認証情報（ＩＤ、パスワード、指紋等）に基づいて、アクセスしてきた注文者端末１０が登録されている注文者端末１０であるかどうかを認証する手段である。
【００３６】
＜画像認識手段２２＞
事業者サーバ２０は、端末撮影部１６によって撮影された画像に適用可能な認識アルゴリズムとその機械学習手法とからなる画像認識手段２２を有する。注文者端末１０によって撮影された画像・映像データを出力する画像認識処理のほかに、撮影されたカメラ画像から文字列を含む領域を検出する文字列検出処理、認識した文字列の領域に対して文字認識を行ってテキストとして出力する文字列認識処理、文字列認識処理の結果に基づいて言語解析を行い、意味を理解して適切な（翻訳）情報を注文者及び／又は事業者サーバ２０に提示する言語解析処理を有する。
【００３７】
画像認識手段２２は、注文者端末１０の注文者プログラムによって実行されてもよい。かかる場合には、注文者端末１０の端末撮影部１６がＡＩカメラとして機能し、対象となる商品・役務画像を的確に撮影するとともに、上記の各処理を行うことができる。
【００３８】
＜画像判断手段２３＞
画像判断手段２３は、ビッグデータの商品・役務画像が注文者端末１０で撮影された撮影画像と一致するか否かを判別する。画像判断手段２３は、複数の商品・役務画像のうち撮影画像との特徴の一致率が所定値（例えば５０％）よりも大きい程度に類似する商品・役務画像（以下、「類似商品・役務画像」という）をビッグデータから探し出す。商品・役務の特徴の一致率の計算方法としては、例えば、撮影画像の特徴と商品・役務画像の特徴との共通点と相違点に基づき所定の採点表からポイントを割り振り、そのポイントに基づいて一致率を決める。また、商品画像の数が多いほどに、ＡＩによる学習機能によって、商品・役務が画像に紐づける商品・役務情報の検索精度が高くなり、高精度の検索機能を備えるといえる。
【００３９】
また、画像判断手段２３は、商品・役務画像によって表示される商品の外観だけではなく、画像認識手段２２による文字列検出処理によって検出された文字も判断の対象とする。たとえば、撮影画像に商品名や店舗名などの検索に有利な文字は、商品情報検索手段により検索された商品の参考情報として使用される。また、メニュー表や外看板の文字のみからなる画像の場合には、文字列の画像のみを商品判別の対象とすることができる。
【００４０】
また、役務画像について判別する場合には、例えば、それが特定の役務の提供店における風景を撮影したＳＮＳやブログ記事であっても、ウエブ上に存在するデータを解析することで、その特定の役務を提供する事業者のＨＰを探し当てて、ＨＰに掲載されている役務の写真を類似役務写真として抽出することができる。
【００４１】
＜商品・役務関連情報検索手段２４＞
商品・役務関連情報検索手段２４は、事業者の商品類似画像に紐づいた商品名、金額、種類、販売店その他の商品に関する商品関連情報を商品・役務マスタ情報３０及び／又は外部ビッグデータ４０から所定の検索処理によって検索する。
【００４２】
「商品・役務関連情報」は、少なくとも商品名、金額、種類、販売店、役務名、料金、役務の内容、役務提供店を含むものであって、注文者が直接注文できるように、販売店及び役務提供店のインターネット上における商品販売サイト（ＥＣサイト）のＵＲＬを含むものであることが好ましい。
【００４３】
「商品の種類」とは、例えば、商品名は共通しているが、サイズや色などの細部で異なる商品の区別を意味する。例えば、商品画像の商品がスニーカー（男性用、黒色、サイズ２６．５ｃｍｍ）の場合、同じスペックであれば同種類といえるが、女性用であったり、青色であったり、サイズが２５．０ｃｍｍの場合には、異なる種類のものといえる。
【００４４】
所定の検索処理としては、例えば、次のとおりである。まず、事業者サーバ２０内の商品・役務マスタ情報３０内において、類似商品画像が複数のウエブページで見つかったら、類似商品・役務画像が掲載されている複数のウエブページに記載されているすべての文字情報の中から重複して使用されている文字情報を抽出する。複数のウエブページ間で重複して使用されている文字情報は、商品名、金額、商品の種類、販売店その他の商品に関する商品情報である可能性が高い。例えば、商品Ｘの写真画像や商品名、金額、販売店などの商品情報は、同一の商品Ｘについての文書であるため、重複する可能性が高い。
【００４５】
また、重複記載された文字情報の中から各種の商品情報の固有の文言や類似商品画像の近傍から商品情報の分類を行う。例えば、数字と通貨単位との組み合わせからなる文字情報は商品の金額に関する商品情報である可能性が高く、商品業界の一般名称や関連用語は販売店の名称であることが多い。また、商品名は類似商品画像の近傍に配置されることが多い。商品の種類はＳサイズ、青色等に統一化されているため検索処理から、類似商品・役務画像及び商品情報を導出することができる。
【００４６】
仮に、事業者サーバ２０内の商品・役務マスタ情報３０内において、類似商品・役務画像が見つからなかった場合や十分な情報量を抽出することができなかった場合には、追加的ないし併用して、外部ビッグデータ４０において類似商品画像を検索する。外部ビッグデータ４０は、インターネット上に存在するすべてのウエブ情報を対象とするものであるから、商品・役務画像がウエブ記事から抽出されたものであれば、確実に類似商品画像をヒットさせることができる。
【００４７】
＜検索結果送信手段２５＞
検索結果送信手段２５によって、商品・役務関連情報検索手段２４による商品検索結果を注文者端末１０に送信する。注文者端末１０に送信された検索結果は、注文者端末１０の端末表示部１４において起動されたプログラム（アプリ）上で表示される。
【００４８】
商品検索結果を受信した注文者は、注文者端末１０の端末表示部１４に表示された商品検索結果、すなわち、商品・役務画像及び商品関連情報に基づき、端末操作部１３によって商品（役務）情報に含まれる販売店（提供店）に対して注文操作を行う。商品の注文は、アプリに表示されたアイコンをクリックしてインターネット注文するほかに、電話注文、ＦＡＸ注文その他の従来から存在する方法によって行うことができる。
【００４９】
＜受注情報送信手段２６＞
受注情報送信手段２６は、商品の販売店（役務の提供店）が所有する受注装置５０に注文者端末１０からの注文情報を送信する。販売店等は、注文情報に基づいて商品の受注処理をして、商品の発送やサービスの提供を行う。
【００５０】
＜商品・役務マスタ情報記憶手段２７＞
商品・役務マスタ情報記憶手段２７では、インターネット上のビッグデータから取得した商品・役務画像及び商品・役務関連情報を新規に又は追加的に記憶することが好ましい。例えば、商品Ｘの商品写真及び商品・役務関連情報が商品・役務マスタ情報記憶手段２７に存在しない場合には、商品Ｘの商品写真及び商品関連情報が新規で記憶される。このように、商品・役務マスタ情報記憶手段２７に記憶されたビッグデータの情報量を増加させ、人工知能によって機械学習させることによって、商品・役務注文システム１における検索精度と検索速度を向上させることができる。
【００５１】
＜自動翻訳手段２８＞
画像認識手段２２における言語解析処理をすることによって、商品・役務画像に含まれていた日本語以外の言語、例えば、英語、中国語、韓国語、フランス語、ロシア語等の１８か国以上の言語からなる文字列を日本語またはそれ以外の所望の言語に自動翻訳することができる。
【００５２】
例えば、当該システム１が日本語で設定されている場合において、商品・役務画像に英語の文字列が含まれている場合には、その文字列が日本語に翻訳された状態で注文者端末１０の端末表示部１４に表示されたり、または、商品・役務マスタ情報記憶手段２７に記憶される。自動翻訳手段２８では、リアルタイム処理またはバッチ処理によって自動翻訳し、原文の表示位置に翻訳された文字列が上書きまたは追記されて表示、記憶される。なお、自動翻訳手段２８は事業者サーバ２０内のプログラムではなく、注文者端末１０のプログラムに格納されていてもよい。
【００５３】
＜注文者情報分析手段２９＞
商品・役務注文システム１は、注文者の商品の購入傾向等を分析する注文者情報分析手段２９を備えている。注文者情報分析手段２９は、注文者の購入履歴及び該注文者と他の多数の注文者とに実施したアンケート結果を含むビッグデータを収集し、収集したビッグデータに基づいて商品（役務）の購入傾向を注文者毎に人工知能を用いて分析し、その分析した結果に基づいて各注文者に適した商品を抽出する手段である。アンケート結果のデータは、年齢、性別、 住所（地域）、興味のある商品、今までに購入した商品、商品を購入する時の商品に求めるもの（例えば性能又は価格又は小型軽量又は取り扱い面）等であるが、これらに限定されるものではない。要するに、商品を購買するときの傾向が分析し易いデータであれば、どのようなデータであってもよい。
【００５４】
注文者情報分析手段２９による分析結果に基づいて、注文者が注文者端末１０の表示画面において、商品の注文の前に、商品カテゴリー毎に分類された「お勧め商品」として複数の商品の画像が表示されるようにしてもよい。また、注文者が実際に商品を注文した際に、かかる分析結果から、商品画像に紐づく商品情報を瞬時に検索することが可能となる。
【００５５】
また、商品・役務注文システム１は、オプションとして、注文情報を送信する前後に、商品・役務の具体的な内容を小売店やサービス提供事業者に対して直接問い合わせる商品問い合わせ機能を備えていてもよい。かかる機能を有することによって、注文者は、商品・役務の内容をより具体的に確認したうえで、注文したり、注文情報を変更、修正することができる。
【００５６】
また、商品の納品後又はサービスの提供後において、注文者端末１０から小売販売店やサービス提供事業者のコールセンターに対して商品に関する感想やクレームを直接送信する機能を備えていてもよい。
【００５７】
図４は、商品・役務注文システム１の利用方法の流れを示すフローチャート図である。
【００５８】
＜商品・役務画像の取得Ｓ０１＞
注文者が、認証手段２１によって商品・役務注文システム１にログインしてアプリを起動し、注文者端末１０の端末撮影部１６によって対象となる商品（役務）を撮影して商品・役務画像を得る。撮影した画像またはウエブから抽出して保存した画像は、アプリ内の所定の表示に従って操作することによって、商品・役務画像を該システム１にアップロードすることができる。自動翻訳手段２８は、注文者端末１０または事業者サーバ２０に格納されたプログラムによって実行されるものであって、画像取得時にリアルタイム又はバッチ処理によって行われることが好ましい。すなわち、注文者は、注文情報を送信する前であっても、取得した商品画像の文字列の翻訳文を得ることによって、商品画像の商品関連情報を事前に確認することができる。
【００５９】
＜商品・役務画像の認識・判別Ｓ０２＞
次に、取得された商品・役務画像を画像認識手段２２において商品写真、文字列等を認識するとともに、取得された商品・役務画像が、事業者サーバ２０内の商品・役務マスタ情報３０又はインターネット上の外部ビッグデータ４０から得た商品・役務類似画像と一致するか否かを判別する。商品・役務画像に文字列が含まれていた場合には、商品・役務関連情報検索ステップＳ０３において利用される。
【００６０】
このように、目の前にある商品を撮影して得た商品画像に基づきＳＮＳ等のインターネット上に存在する膨大な情報からなる外部ビッグデータ４０から商品類似画像を抽出することができるので、目の前にある商品に関連する商品情報を知らなかったり、事業者サーバ２０におけるオンラインショッピングサイト等の商品情報を記憶する商品・役務マスタ情報３０に商品類似画像が記憶されていなかったとしても、商品情報を確実に検索することができる。
【００６１】
＜商品・役務関連情報検索ステップＳ０３＞
商品情報検索手段を用いて商品画像に紐付いた商品（役務）名、金額、商品（役務）の種類、販売店（提供店）その他の商品に関する購入に必要な商品・役務関連情報を事業者サーバ２０内の商品・役務マスタ情報３０又はインターネット上の外部ビッグデータ４０から人工知能による学習機能を備えた所定の検索処理により検索する。商品・役務画像の認識・判別ステップＳ０２と商品・役務関連情報検索ステップＳ０３とは、同時又は前後して行われてもよいし、複数回またはループするように繰り返し行ってもよい。
【００６２】
＜商品関連情報の送信・表示ステップＳ０４＞
商品関連情報が注文者端末１０に送信されて、注文者端末１０の端末表示部１４において、起動しているアプリ上において、検索された商品・役務画像に紐付いた商品・役務関連情報が所定の表示形式で表示される。
【００６３】
＜商品注文ステップＳ０５＞
注文者は、注文者端末１０の端末操作部１３によって商品・役務関連情報に含まれる販売店・提供店に対して商品・役務の注文をする。
【００６４】
＜受注情報の送信ステップＳ０６＞
注文者端末１０から送信された注文情報は、販売店・提供店に設置された受注装置５０によって受信される。販売店・提供店は受信した受注情報に基づいて商品を準備して、小売店であれば商品の包装をして注文者に配送する準備を行い、一方、飲食店等のサービス提供事業者であれば、注文を受けた料理を注文者に自宅に配送又は、来店した注文者に対して店舗内で提供することができる。さらに、ヨガやマッサージ等のサービス提供店であれば、受注した予約情報に基づいて、レッスンや施術の手配をして、予約確認情報を注文者に対して送信する。
【００６５】
受注装置５０において受信された受注情報は、受注装置に接続された出力手段、例えば、ＦＡＸ機、プリンター機等から紙媒体として出力されてもよい。
【００６６】
受注装置５０に人工知能が搭載されていることによって、注文情報を受信した後の一連の業務が自動化、すなわち、ＲＰＡ（Ｒｏｂｏｔｉｃ  Ｐｒｏｃｅｓｓ  Ａｕｔｏｍａｔｉｏｎ）化されていることが好ましい。例えば、小売販売店の受注装置が注文情報を受信後、商品の在庫状況を確認するとともに、商品を保管している倉庫の管理サーバへの送信、商品の梱包の手配、配送業者に対する配送の手配並びに注文者に対する商品代金の決済処理が自動化されることによって、注文から受注、商品配送及び決算処理までの一連の業務をシームレスに行うことができる。
【００６７】
同様にサービス提供事業者の受注装置５０が注文情報を受信した場合、例えば、飲食店が配達用又は店舗内で提供されるメニュー料理の注文情報を受信した場合には、厨房や配膳係に対する注文内容の伝達、料理の指示・実行、メニュー料理の配達の手配又は配膳の手配、料理の代金の決済処理が自動化されることによって、メニュー料理の注文から受注、その配送及び決算処理までの一連の業務をシームレスに行うことができる。
【００６８】
＜商品・役務マスタ情報記憶ステップＳ０７＞
商品マスタ情報記憶ステップＳ０７においては、商品・役務マスタ記憶手段によって商品・役務画像及び商品・役務関連情報を記憶する。事業者サーバ２０の商品・役務マスタ情報記憶手段にこれらを記憶させることで、インターネット上のビッグデータから直接抽出する場合に比べて、より高速及び高精度な商品類似画像並びに適切な商品・役務関連情報を抽出することができる。
【００６９】
＜注文者情報分析ステップＳ０８＞
また、商品・役務注文システム１は、利用者の関するあらゆる分野の商品の注文情報、すなわち、利用者の注文日時、注文商品、注文金額、注文サービスの内容、サービス金額等の注文ビッグデータが蓄積される。かかる注文ビッグデータは、注文見込み利用者の傾向を把握するための情報といえ、利用者の店舗やサイトの利用傾向、趣味傾向、所得、世帯構成等の情報から、適正なプロモーション手法（広告方法）を分析することができる。プロモーション手法としては、例えば、特定の利用者の利用者情報に基づいて、適正なサイトの広告をディスプレイ広告したり、キャンペーンやイベントに関する広告メールを送信することができる。
【００７０】
本発明に係る商品・役務注文システム１によれば、小売販売店やレストラン、カフェ等の飲食店のほかに、スーパー銭湯、外国人用簡易宿泊所、温泉旅館、観光ホテル、カジノやパチンコ等の遊戯施設、飲食物やグッズを販売するイベント・フェスティバル会場、酒類の直販所等の様々な産業分野において、スピーディかつ簡易な商品注文を実現できる。特に、店舗の従業員に対して直接注文をする場合に比べて煩雑な手続がなく、また、言語的な障害がないことから、近年の外国人観光客の増加に伴うインバウンド対策にも効果的であるといえる。
【００７１】
図５は、本発明に係る商品・役務注文システム１を適用した飲食物注文システム１００の全体を示すブロック図、図６は、飲食物注文システム１００における飲食物の注文から決済までの一連の流れを示すブロック図である。飲食物注文システム１００は、商品・役務注文システム１と同様の構成を有する。
【００７２】
図５を参照すると、飲食物注文システム（商品・役務注文システム１）１００は、飲食物注文システム１００用のプログラムや飲食物マスタ情報が格納される店舗サーバ１２０と、注文者が所有する注文者端末１１０と、店舗サーバ１２０から注文情報を受信する従業員端末１５０、店舗内の客席に配置された座席端末１４０と、インターネット上のウエブ情報からなる外部ビッグデータ１３０とを備えている。これらの注文者端末１１０、店舗サーバ１２０、従業員端末１５０、座席端末１４０及び外部ビッグデータ１３０とは、インターネットを介して情報を送受信できるように構成されている。なお、店舗サーバ１２０は、商品・役務注文システム１の事業者サーバ２０と受注装置５０とを兼ねたものであるが、本実施例に限らず、受注装置である店舗サーバ１２０のほかに、事業者サーバがシステムネットワーク内に含まれていてもよい。
【００７３】
注文者は、注文者端末１１０又は座席端末１４０に保存された飲食物画像を基に商品関連情報を取得して、注文情報を店舗サーバ１２０に送信する。飲食物画像は、利用者が自ら撮影した飲食物画像２０４や座席端末１４０に予め保存されていた画像のほかに、注文者が店舗のサービス情報を掲載した情報端末アプリ２０１や他の利用者の口コミが掲載された口コミアプリ２０２その他の利用可能なアプリ２０３に掲載された画像を使用することができる。
【００７４】
また、飲食物注文システム１００は自動翻訳手段２８を備えていることから、外国語のメニュー表であっても自動翻訳されて日本語でメニュー表の内容を確認することができる。また、撮影する対象は、メニュー表のほかに、店舗の店頭又は店舗内に設置された看板、手内のＰＯＰ、広告チラシ、隣の座席に配膳された料理、店内に置かれたワインのボトル等であってもよい。
【００７５】
注文者は、自宅等の店舗以外の場所において注文情報を送信することによって、飲食物の配達を依頼することもできるし、予約時間に合わせて注文情報を送信することによって、来店時におけるオーダー待ち時間を大幅に短縮することができる。注文者が来店後に座席で新規又は追加の注文をする場合には、従来どおり、店舗内の従業員に直接注文を伝える従業員端末１５０によるオーダーエントリ―システム２０５によるものであってもよいし、座席端末１４０をタブレット操作して注文を行うテーブルオーダー２０６によるものであってもよい。
【００７６】
各店舗は、注文者端末１０によって注文を受けた場合には、ウエブ決済２０８やスマホ（モバイル）決済２０９を利用して飲食物の代金を請求し、従業員端末１５０又は座席端末１４０によって注文を受けた場合には、ＰＯＳ２０７によって代金を請求することができる。また、座席端末１４０において、ウエブ決済２０８及びスマホ決済２０９をすることもできる。
【００７７】
注文者端末１０はＡＩカメラを搭載しており、メニュー表を自動認識してオーダーすることができることから、注文のデジタルトランスフォーメーション化によって来店・注文・会計をシームレスに連携することができる。また、注文者情報分析手段２９によって、蓄積された利用者の膨大な情報（ビッグデータ）からＡＩ機能によって利用者の過去の来店時期、注文した飲食物の内容、会計金額等から適正なプロモーション内容を分析し、ＡＩ機能による自動プロモーション（広告）を実現することもできる。
【００７８】
近年、観光業界やアパレル業界においては、ＩＴを利用したオーダーシステムが確立しており、製造業界においてもＩＯＴに基づく作業のオートメーション化が進められているが、飲食業界においてはＩＴリテラシーが低く、ＡＩ機能に基づくオーダーシステムは皆無であった。本発明に係る飲食物注文システムによれば、従来にはない、ＡＩ機能を備えた新たなオーダーシステムを提供することができる。
【００７９】
すなわち、本発明に係る飲食物注文システムは、ＡＩ画像認識、フィンテック（キャッシュレス）、ビッグデータ（ＡＩ解析）からなる最新テクノロジーを導入することで、注文に要する時間と会計に要する時間とをそれぞれ１分以内に行うための新規な飲食店サポートインターフェースであるといえる。また、これまでの注文システムに比べて大幅な作業効率化が図られることから、店舗従業員を削減することができ、低コスト化の実現と近年の飲食業界における人手不足の問題を解消できる。加えて、本システムは、利用者が普段使用している携帯端末の簡易な操作により利用することができるので、若年者層だけではなくＩＴ機器に不慣れな高齢者層にもストレスなく利用することができるといえる。さらに、外部ビッグデータ１３０を利用することによって、店舗サーバ１２０に商品に関するマスタ情報を蓄積する必要がなく、サーバに負荷が掛かることはなく、また、サーバ（システム）自体のメンテナンスが不要であるから、利便性に優れる。
【符号の説明】
【００８０】
１    商品・役務注文システム
２    インターネット
１０  注文者端末
２０  事業者サーバ（サーバ）
２３  画像判断手段
２７  商品・役務マスタ情報記憶手段
２８  自動翻訳手段
２９  注文者情報分析手段
３０  商品・役務マスタ情報
４０  外部ビッグデータ
１００  飲食物注文システム（商品・役務注文システム）
１１０  注文者端末
１３０  外部ビッグデータ
【要約】      （修正有）【課題】注文者が撮影・保存した商品・役務画像に基づいて類似商品・画像検索を行い、瞬時に商品・役務関連情報を注文者に送信して、速やかに注文を行う商品・役務注文システム、商品・役務注文方法及びそのプログラムを提供する。【解決手段】商品・役務画像に基づいて注文可能な商品・役務注文システムにおいて、事業者サーバ２０は、商品・役務の情報を蓄積する商品・役務マスタ情報記憶手段２７と、商品・役務画像を認識する画像認識手段２２と、事業者サーバ２０に蓄積された商品・役務マスタ情報または事業者サーバ２０に蓄積されていない、インターネット上のウエブ記事を含む外部ビッグデータから抽出した商品・役務類似画像と商品・役務画像とを判別する画像判断手段２３と、商品・役務マスタ情報又は外部ビッグデータから商品・役務に関連する情報を検索する商品・役務関連情報検索手段２４と、を備える。【選択図】図３【図１】
0006879529.tif 000002
【図２】
0006879529.tif 000003
【図３】
0006879529.tif 000004
【図４】
0006879529.tif 000005
【図５】
0006879529.tif 000006
【図６】
0006879529.tif 000007