(57)【特許請求の範囲】
【請求項１】
飲食店における情報処理システムであって、
注文受付端末を用いた顧客による注文の入力を受け付ける受付手段と、
前記顧客により前記注文の入力が行われたときに、前記注文受付端末の周囲を撮像範囲に含む撮像装置により撮像された当該顧客の顔画像を含む画像を取得する画像取得手段と、
前記画像取得手段により取得された前記顧客の顔画像の特徴情報を抽出する抽出手段と、
前記注文を集計して精算情報を生成し、かつ、前記精算情報に抽出された前記顧客の顔画像の特徴情報を関連付ける精算情報生成手段と、
精算処理を行う精算装置の利用者を撮像装置により撮像した画像を取得する第２の画像取得手段と、
前記画像に基づいて、当該利用者の顔画像の特徴情報を抽出する第２の抽出手段と、
前記利用者の特徴情報と前記顧客の特徴情報を照合し、前記利用者の特徴情報に対応する前記顧客の特徴情報を特定する特定手段と、
特定された前記顧客の特徴情報に関連付けられた前記顧客の精算情報を取得する精算情報取得手段と、
取得された前記精算情報に基づいて、前記精算装置に前記顧客別に精算処理させる精算制御手段と、
前記特定手段により特定された前記顧客に対応する、少なくとも１人の前記利用者の撮像画像を表示する表示手段と、
前記撮像画像が表示された前記利用者の中から精算処理する少なくとも１人の前記顧客の選択を前記利用者又は店員から受け付ける第２の受付手段と、を備え、
前記精算情報取得手段は、選択された前記顧客の精算情報を取得し、
前記精算制御手段は、取得された前記顧客の前記精算情報に基づいて、前記精算装置に精算処理させる情報処理システム。
【請求項２】
前記受付手段は、前記顧客による第１の決定入力をさらに受け付け、
前記画像取得手段は、前記第１の決定入力を受け付けたとき、前記顧客の顔画像を取得し、
前記精算情報生成手段は、前記第１の決定入力を受け付ける毎に前記注文を集計し、前記顧客毎の前記精算情報を生成し、前記顧客の顔画像の特徴情報と関連付ける、
請求項１に記載の情報処理システム。
【請求項３】
前記注文に基づく発注処理を行う発注処理手段をさらに備え、
前記受付手段は、前記顧客による第２の決定入力をさらに受け付け、
前記発注処理手段は、前記第２の決定入力が受け付けられたときに、前記注文に基づく発注処理を行う、
請求項２に記載の情報処理システム。
【請求項４】
前記注文に基づく発注処理を行う発注処理手段をさらに備え、
前記受付手段は、前記注文の決定入力をさらに受け付け、
前記注文の決定入力を受け付けたとき、
前記画像取得手段が、顧客の顔画像を取得し、
前記精算情報生成手段が、前記顧客の前記注文を集計し、前記顧客の前記精算情報を生成し、前記顧客の顔画像の特徴情報と関連付け、
前記発注処理手段が、前記注文に基づく発注処理を行う、
請求項１に記載の情報処理システム。
【請求項５】
前記精算処理を行う前に、前記精算情報取得手段により取得された顧客の前記精算情報を前記利用者に提示する提示手段と、
提示された前記顧客の精算情報に関し、当該利用者による承認操作を受け付ける第３の受付手段と、をさらに備え、
前記精算制御手段は、
前記第３の受付手段により前記承認操作を受け付けたとき、承認された前記顧客の精算情報に基づいて前記精算装置に精算処理させる、
請求項１から４のいずれか一項に記載の情報処理システム。
【請求項６】
飲食店における情報処理システムであって、
注文受付端末を用いた顧客による注文の入力を受け付ける受付手段と、
前記顧客による前記注文の際に、撮像装置により撮像された当該顧客の顔画像を含む第１画像を取得する第１の画像取得手段と、
前記注文に基づいて精算情報を生成し、かつ、前記精算情報に前記第１画像を関連付ける精算情報生成手段と、
精算処理を行う利用者を撮像装置により撮像した第２画像を取得する第２の画像取得手段と、
少なくとも１人の前記利用者の前記第２画像を表示する表示手段と、
前記第２画像が表示された前記利用者の中から精算処理する少なくとも１人の前記利用者の選択を前記利用者又は店員から受け付ける第２の受付手段と、
選択された前記利用者に対応する前記顧客の前記精算情報を取得し、取得された前記顧客の前記精算情報に基づいて、精算装置に精算処理させる精算制御手段と、
を備える情報処理システム。
【請求項７】
飲食店における精算装置であって、
精算処理を行う前記精算装置の利用者を撮像装置により撮像した画像を取得する画像取得手段と、
前記画像に基づいて、当該利用者の顔画像の特徴情報を抽出する抽出手段と、
抽出された前記利用者の特徴情報と顧客の顔画像の特徴情報を照合し、前記利用者の特徴情報に対応する前記顧客の特徴情報を特定する特定手段と、
特定された前記顧客の特徴情報に関連付けられた前記顧客の精算情報を取得する取得手段と、
取得された前記精算情報に基づいて、前記精算装置に前記顧客別に精算処理させる精算制御手段と、
前記特定手段により特定された前記顧客に対応する、少なくとも１人の前記利用者の撮像画像を表示する表示手段と、
前記撮像画像が表示された前記利用者の中から精算処理する少なくとも１人の前記顧客の選択を前記利用者又は店員から受け付ける受付手段と、を備え、
前記取得手段は、選択された前記顧客の精算情報を取得し、
前記精算制御手段は、取得された前記顧客の前記精算情報に基づいて、前記精算装置に精算処理させる精算装置。
【請求項８】
飲食店における注文受付装置であって、
注文受付端末を用いた顧客による注文の入力を受け付ける受付手段と、
前記顧客により前記注文の入力が行われたときに、前記注文受付端末の周囲を撮像範囲に含む撮像装置により撮像された当該顧客の顔画像を含む画像を取得する画像取得手段と、
前記画像取得手段により取得された前記顧客の顔画像の特徴情報を抽出する抽出手段と、
前記注文を集計して精算情報を生成し、かつ、前記精算情報に抽出された前記顧客の顔画像の特徴情報を関連付ける精算情報生成手段と、
を備え、
前記精算情報生成手段により前記顧客の顔画像の特徴情報に関連付けられた前記精算情報は、請求項７に記載の精算装置により取得される注文受付装置。
【請求項９】
飲食店における精算装置が、
精算処理を行う前記精算装置の利用者を撮像装置により撮像した画像を取得し、
前記画像に基づいて、当該利用者の顔画像の特徴情報を抽出し、
抽出された前記利用者の特徴情報と顧客の顔画像の特徴情報を照合し、前記利用者の特徴情報に対応する前記顧客の特徴情報を特定し、
特定された前記顧客に対応する、少なくとも１人の前記利用者の撮像画像を表示し、
前記撮像画像が表示された前記利用者の中から精算処理する少なくとも１人の前記顧客の選択を前記利用者又は店員から受け付け、
選択された前記顧客の精算情報を取得し、
取得された前記顧客の前記精算情報に基づいて、前記精算装置に前記顧客別に精算処理させる、
精算装置の情報処理方法。
【請求項１０】
飲食店における注文受付装置が、
注文受付端末を用いた顧客による注文の入力を受け付け、
前記顧客により前記注文の入力が行われたときに、前記注文受付端末の周囲を撮像範囲に含む撮像装置により撮像された当該顧客の顔画像を含む画像を取得し、
取得された前記顧客の顔画像の特徴情報を抽出し、
前記注文を集計して精算情報を生成し、かつ、前記精算情報に抽出された前記顧客の顔画像の特徴情報を関連付け、
前記顧客の顔画像の特徴情報に関連付けられた前記精算情報は、請求項９に記載の情報処理方法の精算装置により取得される、
注文受付装置の情報処理方法。
【請求項１１】
飲食店における精算装置を実現するコンピュータに、
精算処理を行う前記精算装置の利用者を撮像装置により撮像した画像を取得する手順、
前記画像に基づいて、当該利用者の顔画像の特徴情報を抽出する手順、
抽出された前記利用者の特徴情報と顧客の顔画像の特徴情報を照合し、前記利用者の特徴情報に対応する前記顧客の特徴情報を特定する手順、
特定された前記顧客に対応する、少なくとも１人の前記利用者の撮像画像を表示する手順、
前記撮像画像が表示された前記利用者の中から精算処理する少なくとも１人の前記顧客の選択を前記利用者又は店員から受け付ける手順、
選択された前記顧客の精算情報を取得する手順、
取得された前記顧客の前記精算情報に基づいて、前記精算装置に前記顧客別に精算処理させる手順、
を実行させるためのプログラム。
【請求項１２】
飲食店における注文受付装置を実現するコンピュータに、
注文受付端末を用いた顧客による注文の入力を受け付ける手順、
前記顧客により前記注文の入力が行われたときに、前記注文受付端末の周囲を撮像範囲に含む撮像装置により撮像された当該顧客の顔画像を含む画像を取得する手順、
取得された前記顧客の顔画像の特徴情報を抽出する手順、
前記注文を集計して精算情報を生成し、かつ、前記精算情報に抽出された前記顧客の顔画像の特徴情報を関連付ける手順、を実行させるためのプログラムであり、
前記顧客の顔画像の特徴情報に関連付けられた前記精算情報は、請求項１１に記載のプログラムを実行するコンピュータが実現する精算装置により取得される、
プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理システム、注文受付装置、精算装置、情報処理装置の情報処理方法、およびプログラムに関し、特に、顧客が端末を操作して注文を行う情報処理システム、注文受付装置、精算装置、情報処理方法、およびプログラムに関する。
【背景技術】
【０００２】
指静脈認証システムによるオーダシステムの一例が特許文献１に記載されている。特許文献１は、ＩＣカードに静脈情報をあらかじめ登録しておき、オーダ端末には、静脈情報が直接入力されるほか、ＩＣカードからも入力される。これら２つの静脈情報が一致したときに本人認証され、オーダ可能となることが記載されている。また、精算時も同様な本人認証により処理され、一つのテーブルで複数の人で注文を行う場合、個別に精算も可能であることが記載されている。
特許文献２には、ＰＯＳ（Point Of Sale）端末などの売上データを取引毎に登録処理する売上データ処理装置の一例が記載されている。特許文献２の装置は、商品バーコードを読み込み、レジ端末で締めキーが入力されたときに、顧客の顔を撮像し、撮影画像を生成する。この撮像タイミングは、顧客が支払い金額を確認するときであるため、正面から顧客の顔を撮像できる。そして、この顔画像から顧客を特定し、購買情報を紐づけ、顧客分析に活用することが記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−１４８６４２号公報
【特許文献２】特開２０１３−２００８９５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記特許文献記載の技術においては、顧客が商品注文時に、生体情報を意識して入力する必要があり、手間がかかるという問題点があった。また、ＩＣカードを所持しているにも関わらず、さらに生体認証を行わなければならないので、顧客の了解を得るのに説明が必要となり、また承諾を得られない場合もあり、店側としても労力がいった。
【０００５】
本発明は上記事情に鑑みてなされたものであり、その目的とするところは、商品注文時にユーザが生体情報を意識して入力する必要をなくす情報処理システム、注文受付装置、精算装置、情報処理方法、およびプログラムを提供することにある。
【課題を解決するための手段】
【０００６】
本発明の各側面では、上述した課題を解決するために、それぞれ以下の構成を採用する。
【０００７】
第一の側面は、情報処理システムに関する。
第一の側面に係る第１の情報処理システムは、
飲食店における情報処理システムであって、
注文受付端末を用いた顧客による注文の入力を受け付ける受付手段と、
前記顧客により前記注文の入力が行われたときに、前記注文受付端末の周囲を撮像範囲に含む撮像装置により撮像された当該顧客の顔画像を含む画像を取得する画像取得手段と、
前記画像取得手段により取得された前記顧客の顔画像の特徴情報を抽出する抽出手段と、
前記注文を集計して精算情報を生成し、かつ、前記精算情報に抽出された前記顧客の顔画像の特徴情報を関連付ける精算情報生成手段と、
精算処理を行う精算装置の利用者を撮像装置により撮像した画像を取得する第２の画像取得手段と、
前記画像に基づいて、当該利用者の顔画像の特徴情報を抽出する第２の抽出手段と、
前記利用者の特徴情報と前記顧客の特徴情報を照合し、前記利用者の特徴情報に対応する前記顧客の特徴情報を特定する特定手段と、
特定された前記顧客の特徴情報に関連付けられた前記顧客の精算情報を取得する精算情報取得手段と、
取得された前記精算情報に基づいて、前記精算装置に前記顧客別に精算処理させる精算制御手段と、
前記特定手段により特定された前記顧客に対応する、少なくとも１人の前記利用者の撮像画像を表示する表示手段と、
前記撮像画像が表示された前記利用者の中から精算処理する少なくとも１人の前記顧客の選択を前記利用者又は店員から受け付ける第２の受付手段と、を有し、
前記精算情報取得手段は、選択された前記顧客の精算情報を取得し、
前記精算制御手段は、取得された前記顧客の前記精算情報に基づいて、前記精算装置に精算処理させる。
第一の側面に係る第２の情報処理システムは、
飲食店における情報処理システムであって、
注文受付端末を用いた顧客による注文の入力を受け付ける受付手段と、
前記顧客による前記注文の際に、撮像装置により撮像された当該顧客の顔画像を含む第１画像を取得する第１の画像取得手段と、
前記注文に基づいて精算情報を生成し、かつ、前記精算情報に前記第１画像を関連付ける精算情報生成手段と、
精算処理を行う利用者を撮像装置により撮像した第２画像を取得する第２の画像取得手段と、
少なくとも１人の前記利用者の前記第２画像を表示する表示手段と、
前記第２画像が表示された前記利用者の中から精算処理する少なくとも１人の前記利用者の選択を前記利用者又は店員から受け付ける第２の受付手段と、
選択された前記利用者に対応する前記顧客の前記精算情報を取得し、取得された前記顧客の前記精算情報に基づいて、精算装置に精算処理させる精算制御手段と、を有する。
【０００８】
第二の側面は、精算装置に関する。
第二の側面に係る精算装置は、
飲食店における精算装置であって、
精算処理を行う前記精算装置の利用者を撮像装置により撮像した画像を取得する画像取得手段と、
前記画像に基づいて、当該利用者の顔画像の特徴情報を抽出する抽出手段と、
抽出された前記利用者の特徴情報と顧客の顔画像の特徴情報を照合し、前記利用者の特徴情報に対応する前記顧客の特徴情報を特定する特定手段と、
特定された前記顧客の特徴情報に関連付けられた前記顧客の精算情報を取得する取得手段と、
取得された前記精算情報に基づいて、前記精算装置に前記顧客別に精算処理させる精算制御手段と、
前記特定手段により特定された前記顧客に対応する、少なくとも１人の前記利用者の撮像画像を表示する表示手段と、
前記撮像画像が表示された前記利用者の中から精算処理する少なくとも１人の前記顧客の選択を前記利用者又は店員から受け付ける受付手段と、を有し、
前記取得手段は、選択された前記顧客の精算情報を取得し、
前記精算制御手段は、取得された前記顧客の前記精算情報に基づいて、前記精算装置に精算処理させる。
【０００９】
第三の側面は、注文受付装置に関する。
第三の側面に係る注文受付装置は、
飲食店における注文受付装置であって、
注文受付端末を用いた顧客による注文の入力を受け付ける受付手段と、
前記顧客により前記注文の入力が行われたときに、前記注文受付端末の周囲を撮像範囲に含む撮像装置により撮像された当該顧客の顔画像を含む画像を取得する画像取得手段と、
前記画像取得手段により取得された前記顧客の顔画像の特徴情報を抽出する抽出手段と、
前記注文を集計して精算情報を生成し、かつ、前記精算情報に抽出された前記顧客の顔画像の特徴情報を関連付ける精算情報生成手段と、
を有し、
前記精算情報生成手段により前記顧客の顔画像の特徴情報に関連付けられた前記精算情報は、上記第二の側面に係る精算装置により取得される。
【００１０】
第四の側面は、少なくとも１つのコンピュータにより実行される情報処理方法に関する。
第四の側面に係る情報処理方法は、
飲食店における精算装置が、
精算処理を行う前記精算装置の利用者を撮像装置により撮像した画像を取得し、
前記画像に基づいて、当該利用者の顔画像の特徴情報を抽出し、
抽出された前記利用者の特徴情報と顧客の顔画像の特徴情報を照合し、前記利用者の特徴情報に対応する前記顧客の特徴情報を特定し、
特定された前記顧客に対応する、少なくとも１人の前記利用者の撮像画像を表示し、
前記撮像画像が表示された前記利用者の中から精算処理する少なくとも１人の前記顧客の選択を前記利用者又は店員から受け付け、
選択された前記顧客の精算情報を取得し、
取得された前記顧客の前記精算情報に基づいて、前記精算装置に前記顧客別に精算処理させる、ことを含む。
【００１１】
第五の側面は、少なくとも１つのコンピュータにより実行される情報処理方法に関する。
第五の側面に係る情報処理方法は、
飲食店における注文受付装置が、
注文受付端末を用いた顧客による注文の入力を受け付け、
前記顧客により前記注文の入力が行われたときに、前記注文受付端末の周囲を撮像範囲に含む撮像装置により撮像された当該顧客の顔画像を含む画像を取得し、
取得された前記顧客の顔画像の特徴情報を抽出し、
前記注文を集計して精算情報を生成し、かつ、前記精算情報に抽出された前記顧客の顔画像の特徴情報を関連付け、
前記顧客の顔画像の特徴情報に関連付けられた前記精算情報は、上記第四の側面の係る情報処理方法の精算装置により取得される、ことを含む。
【００１２】
なお、本発明の他の側面としては、上記第四の側面の方法を少なくとも１つのコンピュータに実行させるプログラムであってもよいし、このようなプログラムを記録したコンピュータが読み取り可能な記録媒体であってもよい。この記録媒体は、非一時的な有形の媒体を含む。
このコンピュータプログラムは、コンピュータにより実行されたとき、コンピュータに、注文受付装置上で、その制御方法を実施させるコンピュータプログラムコードを含む。さらに、このコンピュータプログラムは、コンピュータにより実行されたとき、コンピュータに、精算装置上で、その制御方法を実施させるコンピュータプログラムコードを含む。
【００１３】
なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、記録媒体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。
【００１４】
また、本発明の各種の構成要素は、必ずしも個々に独立した存在である必要はなく、複数の構成要素が一個の部材として形成されていること、一つの構成要素が複数の部材で形成されていること、ある構成要素が他の構成要素の一部であること、ある構成要素の一部と他の構成要素の一部とが重複していること、等でもよい。
【００１５】
また、本発明の方法およびコンピュータプログラムには複数の手順を順番に記載してあるが、その記載の順番は複数の手順を実行する順番を限定するものではない。このため、本発明の方法およびコンピュータプログラムを実施するときには、その複数の手順の順番は内容的に支障のない範囲で変更することができる。
【００１６】
さらに、本発明の方法およびコンピュータプログラムの複数の手順は個々に相違するタイミングで実行されることに限定されない。このため、ある手順の実行中に他の手順が発生すること、ある手順の実行タイミングと他の手順の実行タイミングとの一部ないし全部が重複していること、等でもよい。
【発明の効果】
【００１７】
上記各側面によれば、商品注文時にユーザが生体情報を意識して入力する必要をなくす情報処理システム、注文受付装置、精算装置、情報処理方法、およびプログラムを提供することができる。
【図面の簡単な説明】
【００１８】
【図１】本発明の実施の形態に係る情報処理システムのシステム構成例を概念的に示す図である。
【図２】本発明の実施の形態に係る情報処理システムの各装置を実現するコンピュータのハードウェア構成例を示すブロック図である。
【図３】本実施形態における情報処理システムの構成を論理的に示す機能ブロック図である。
【図４】本実施形態の情報処理システムの注文受付端末の周囲を撮像する撮像装置の撮像範囲を説明するための図である。
【図５】本実施形態の情報処理システムの精算情報生成部によって生成される精算情報の構造の一例を示す図である。
【図６】本実施形態における情報処理システムの動作例を示すフローチャートである。
【図７】本実施形態における情報処理システムの動作例を示すフローチャートである。
【図８】本実施形態における情報処理システムの動作例を示すフローチャートである。
【図９】本実施形態における情報処理システムの動作例を示すフローチャートである。
【図１０】本実施形態の情報処理システムの精算情報生成部によって生成される精算情報の構造の一例を示す図である。
【図１１】本実施形態における情報処理システムの構成を論理的に示す機能ブロック図である。
【図１２】本実施形態の情報処理システムの精算装置の周囲を撮像する撮像装置の撮像範囲を説明するための図である。
【図１３】本実施形態における情報処理システムの精算装置の動作例を示すフローチャートである。
【発明を実施するための形態】
【００１９】
以下、本発明の実施の形態について、図面を用いて説明する。尚、すべての図面において、同様な構成要素には同様の符号を付し、適宜説明を省略する。
【００２０】
（第１の実施の形態）
［システム構成］
図１は、本発明の実施の形態に係る情報処理システム１のシステム構成例を概念的に示す図である。
本実施形態の情報処理システム１は、ＰＯＳ（Point Of Sale）システムと電子発注システム(Electronic Ordering System：ＥＯＳ)を組み合わせ、飲食店などで活用される、顧客がオーダ端末を用いてオーダを行う、所謂オーダーエントリーシステム（Order Entry System：ＯＥＳ）である。
以下、飲食店を例に説明するが、本システムは、あらゆる分野の商品またはサービスのオーダに適用でき、これに限定されるものではない。たとえば、ホテル等の宿泊施設、駅、役所、公共施設、病院等、ありとあらゆる場所での、利用者の商品またはサービスの購入または利用のオーダに適用できる。オーダは商品の購入に限らず、様々なサービスの申込、たとえば、切符（指定席等）や航空券の申込、公演チケットの申込、役所などでの証明書の発行の申込、病院での検査の申込等も含んでよい。
【００２１】
本実施形態における情報処理システム１は、オーダ受付装置３０と、サーバ装置４０と、精算装置５０と、を有する。オーダ受付装置３０と、精算装置５０は、ルータ７０を介してＬＡＮ（Local Area Network）７２等のネットワークにより接続される。さらに、オーダ受付装置３０と、精算装置５０は、ルータ７０を介して外部のＷＡＮ（Wide Area Network）等のネットワーク７４に接続し、サーバ装置４０と通信する。ルータ７０は、ゲートウェイでもよく、各装置が異なるプロトコルで通信してもよい。
【００２２】
オーダ受付装置３０は、たとえば、厨房や店舗オフィス等に設置され、フロアのテーブルやカウンタ等で顧客自身が操作して注文するオーダ受付端末２０からのオーダデータを、オーダ受付端末２０またはサーバ装置４０から受信し、プリンタ（不図示）により印字出力させて厨房の調理人等にオーダを伝達する。サーバ装置４０は、オーダ受付端末２０からのオーダデータを、オーダ受付端末２０またはオーダ受付装置３０から受信し、受信したオーダデータを基に精算情報を生成し、データベース４２に格納する。サーバ装置４０がオーダ受付端末２０からオーダデータを受信する構成の場合は、受信したオーダデータをオーダ受付装置３０に送信する。精算装置５０は、利用者の操作に伴い、サーバ装置４０から精算情報を受信し、受信した精算情報に基づく精算処理を行う。各装置の具体的な処理内容については後述する。なお、本実施形態では、精算装置５０で顧客自身が支払いを行う構成としているが、精算情報に基づいて、ＰＯＳレジスタ６０による支払いを行うこともできる。
【００２３】
図２は、本発明のオーダ受付端末２０、オーダ受付装置３０、サーバ装置４０、および精算装置５０の少なくともいずれか一つを実現するコンピュータ１０のハードウェア構成例を示すブロック図である。
コンピュータ１０は、ＣＰＵ（Central Processing Unit）２、メモリ３、通信ユニット４、入出力インタフェース（Ｉ／Ｆ：InterFace）５等を有する。これら各ハードウェア要素は、たとえば、バス等により接続される。ＣＰＵ２は、一般的なＣＰＵ、特定用途向け集積回路（ＡＳＩＣ）、ＤＳＰ（Digital Signal Processor）、ＧＰＵ（Graphics Processing Unit）等の少なくとも一つに相当する。メモリ３は、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、補助記憶装置（ハードディスク等）等である。通信ユニット４は、無線および有線の少なくともいずれか一方にて、他の装置と通信を行う。
【００２４】
入出力Ｉ／Ｆ５には、表示装置６、入出力装置７等が接続されてもよい。表示装置６は、店員用および顧客用のディスプレイ、タッチパネルの表示部、ＬＥＤ（Light Emitting Diode）表示器等の少なくとも一つである。入出力装置７は、タッチパネルのセンサ部、キーボード、スキャナ装置、スピーカ等を含む。入出力Ｉ／Ｆ５は、ＣＰＵ２により実行される処理に応じて出力装置に画面表示や音声等を出力する。また、入出力Ｉ／Ｆ５は、入力装置からの入力信号を受け付ける。
なお、本明細書の各図において、本発明の本質に関わらない部分の構成については省略してあり、図示されていない。
【００２５】
以下、各装置の具体的な構成について説明する。
＜オーダ受付端末２０＞
図１のオーダ受付端末２０は、たとえば、タッチパネルを有したタブレット端末、またはテーブルトップ型端末等のコンピュータ１０であり、ハードウェア要素として、図２のＣＰＵ２、メモリ３、通信ユニット４、入出力Ｉ／Ｆ５等を有する。さらに、オーダ受付端末２０の入出力Ｉ／Ｆ５に接続される表示装置６は、顧客用のディスプレイ、タッチパネルの表示部等の少なくとも一つである。入出力装置７は、タッチパネルのセンサ部、スピーカ等を含む。
【００２６】
オーダ受付端末２０の入出力Ｉ／Ｆ５または通信ユニット４を介して接続される装置は、撮像装置２２を含む。撮像装置２２は、ＣＣＤ（Charge Coupled Devices）イメージセンサやＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサなどの素子を用いたデジタルカメラの機能を実現するユニットである。撮像装置２２は、オーダ受付端末２０に内蔵されたものでもよいし、外部接続されるものでもよい。オーダ受付端末２０は、通信ユニット４を介して撮像装置２２と有線および無線の少なくともいずれか一方で通信し、撮像装置２２から撮像画像（動画を含む）を受信してもよい。
【００２７】
撮像装置２２が外付けの場合、オーダ受付端末２０を利用する顧客の顔が撮影できる位置に配置されていればよい。たとえば、テーブルの中央または上部（頭上）に設置されてもよい。たとえば、撮像装置２２の撮像範囲に顧客の顔が入るように、人の存在を検知して撮像範囲の方向を変更制御できる構成を有してもよい。複数の撮像装置２２を設置し、テーブルの複数の席方向の顧客の顔をそれぞれ撮像してもよい。
【００２８】
また、オーダ受付端末２０は、撮像装置２２の撮影場所との位置が関連付けられるものとする。関連付けの方法は特に限定されないが、たとえば、ブルートゥース（登録商標）やＧＰＳ（Global Positioning System）等の技術を用いて、オーダ受付端末２０または撮像装置２２が互いの位置を無線通信等により検知して、サーバ装置４０に通知することで、互いの位置を関連付けてもよい。
【００２９】
位置関係を関連付ける方法は、様々考えられ、以下に例示されるが、これらに限定されない。また、少なくともいずれか一つ、または、少なくとも２つを組み合わせてもよい。
（ａ１）撮像装置２２の撮像範囲内で利用されるオーダ受付端末２０の識別情報と、その撮像装置２２の識別情報を予め関連付ける。
（ａ２）撮像装置２２の撮像範囲内に存在するオーダ受付端末２０を検索（たとえば、ビーコン検知、無線通信による検知）し、検知したら関連付ける。
（ａ３）ＧＰＳ（Global Positioning System）またはアクセスポイントにより撮像装置２２とオーダ受付端末２０の位置を検知し、撮像装置２２の撮像範囲内のオーダ受付端末２０を検出して関連付ける。
【００３０】
本実施形態では、オーダ受付端末２０は、たとえば、店舗フロアや客室のテーブルで顧客が手に取り持って利用できるタブレット端末であるとする。あるいは、テーブルトップ型端末の場合は、顧客は端末のディスプレイまたはタッチパネルに向き合って画面を見ながら操作する。撮像装置２２は、図４に示すように、オーダ受付端末２０を顧客Ｕ１が手に持って、タッチパネルを操作するとき、またはディスプレイに向き合って操作するときに、顧客Ｕ１の顔を写すように、撮像範囲Ｒ１の画角が調整されてもよい。
【００３１】
オーダ受付端末２０は、このようなハードウェア要素により、顧客のオーダ入力（選択）操作、顧客のオーダ受付端末２０への指示入力等を受け付け、オーダ受付処理を行うとともに、顧客の顔を撮像し、その画像とオーダデータを、オーダ受付装置３０またはサーバ装置４０に送信する。なお、顧客のオーダ入力操作には、たとえば、商品の選択、注文数の指定（または入力）等が含まれる。オーダ受付端末２０を用いたオーダ入力操作方法、オーダ受付処理方法、およびオーダ内容については、特に限定されず、本明細書では詳細な説明は省略する。
【００３２】
＜オーダ受付装置３０＞
図１のオーダ受付装置３０は、いわゆるコンピュータ１０であり、ハードウェア要素として、図２のＣＰＵ２、メモリ３、通信ユニット４、入出力Ｉ／Ｆ５等を有する。オーダ受付装置３０の入出力Ｉ／Ｆ５には、表示装置や入出力装置が接続されていてもよい。
オーダ受付装置３０の入出力Ｉ／Ｆ５に接続される入出力装置７は、オーダ受付端末２０から送信されるオーダを通信ユニット４を介して受け付けて印字出力するプリンタ（不図示）、または表示するディスプレイ装置を含む。
【００３３】
オーダ受付装置３０は、上述のようなハードウェア要素により、オーダ受付端末２０から送信されるオーダデータをオーダ受付端末２０またはサーバ装置４０から受信し、店舗の厨房などに設置されたプリンタに印字出力させることができる。オーダデータを印字出力させることで、フロアに居る顧客のオーダが厨房の調理人等に自動的に伝達されることとなる。オーダ受付端末２０からオーダ受付装置３０にオーダを送信する処理を、本明細書では、発注処理と呼ぶものとする。
【００３４】
＜精算装置５０＞
精算装置５０は、ハードウェア要素として、図２のコンピュータ１０のＣＰＵ２、メモリ３、通信ユニット４、入出力Ｉ／Ｆ５等を有する。精算装置５０の入出力Ｉ／Ｆ５に接続される表示装置６は、顧客用のディスプレイ、タッチパネルの表示部等の少なくとも一つである。入出力装置７は、タッチパネルのセンサ部、釣銭機（紙幣および硬貨）、クレジットカードリーダ、電子マネーリーダ、レシートプリンタ、スピーカ等を含む。精算装置５０の入出力Ｉ／Ｆ５には、サーバ装置４０から受信された精算情報に基づく精算処理を完了させるために必要となる表示装置６および入出力装置７が接続される。
【００３５】
精算装置５０は、上述のようなハードウェア要素により、顧客の精算装置５０への指示入力、顧客の支払い操作等のユーザ操作を受け付け、精算処理を行う。顧客の支払い操作には、たとえば、硬貨および紙幣の投入操作、釣銭の取り出し操作、クレジットカード支払いの操作、電子マネーの支払いの操作等が含まれる。
【００３６】
＜サーバ装置４０＞
サーバ装置４０は、いわゆるコンピュータであり、図２に示されるように、バスで相互に接続される、ＣＰＵ２、メモリ３、通信ユニット４、入出力Ｉ／Ｆ５等を有する。図示されていないが、入出力Ｉ／Ｆ５には、表示装置や入出力装置が接続されていてもよい。また、サーバ装置４０は、データベース４２に接続され、オーダ受付装置３０から送信されるオーダに関する様々な情報を記憶する。
【００３７】
情報処理システム１に含まれる各装置のハードウェア構成は、図１の例に制限されない。また、各装置の数、および各装置のハードウェア要素の数も、図１の例に制限されない。また、情報処理システム１は、サーバ装置４０を含まなくてもよい。この場合、オーダ受付装置３０はオーダ受付端末２０からオーダデータを受信し、精算装置５０はオーダ受付装置３０から精算情報を取得すればよい。また、情報処理システム１は、ＰＯＳレジスタ端末の処理の一部である精算処理をＰＯＳレジスタ６０とは別に設けられた精算装置５０に対する顧客の操作に委ねる運用方法に対応していればよく、ＰＯＳレジシステムがサポートする具体的な運用方法は制限されない。
【００３８】
［処理構成］
図３は、本実施形態における情報処理システム１の構成を論理的に示す機能ブロック図である。
情報処理システム１は、オーダ受付部（注文受付部）１０２と、画像取得部１０４と、精算情報生成部１０６と、を含む。
【００３９】
本実施形態の情報処理システム１において、オーダ受付部１０２は、オーダ受付端末（注文受付端末）２０を用いてオーダ（注文）の入力を受け付ける。
画像取得部１０４は、オーダの入力が行われたときに、オーダ受付端末２０の周囲を撮像範囲に含む撮像装置２２により撮像された画像を取得する。
精算情報生成部１０６は、オーダ（注文）を集計して精算情報を生成し、かつ、精算情報に画像を関連付ける。
【００４０】
図３の本実施形態の情報処理システム１の各構成要素は、たとえば、図１のオーダ受付端末２０、オーダ受付装置３０およびサーバ装置４０の少なくともいずれか一つのコンピュータ１０のＣＰＵ２によりメモリ３に格納されるプログラム９が読み出されて実行されることにより実現される。また、当該プログラムは、たとえば、ＣＤ（Compact Disc）、メモリカード等のような可搬型記録媒体やネットワーク上の他のコンピュータから通信ユニット４を介してインストールされ、メモリ３に格納されてもよい。また、情報処理システム１は、図３に示されていない他の処理部を有してもよい。
【００４１】
本発明の情報処理システム１は、図３の構成要素の機能を、オーダ受付端末２０、オーダ受付装置３０、およびサーバ装置４０が少なくともいずれか一つが機能の少なくとも一部ずつを分担して実現する。機能分担をどのように構成するかは特に限定されず、様々な構成が考えられる。
本実施形態では、図３の構成要素のすべての機能をサーバ装置４０が実現する構成例について説明する。
【００４２】
図３の情報処理システム１の各構成要素は、たとえば、図１のオーダ受付端末２０、オーダ受付装置３０、およびサーバ装置４０の少なくともいずれか一つを構成するコンピュータ１０のハードウェアとソフトウェアの任意の組合せによって実現される。そして、その実現方法、装置にはいろいろな変形例があることは、当業者には理解されるところである。以下説明する各実施形態の各装置を示す機能ブロック図は、ハードウェア単位の構成ではなく、論理的な機能単位のブロックを示している。
【００４３】
本実施形態のコンピュータプログラム９は、情報処理システム１を構成する少なくとも１つの情報処理装置を実現させるためのコンピュータ１０に、オーダ受付端末２０を用いてオーダの入力を受け付ける手順、オーダの入力が行われたときに、オーダ受付端末２０の周囲を撮像範囲に含む撮像装置２２により撮像された画像を取得する手順、オーダを集計して精算情報を生成し、かつ、精算情報に画像を関連付ける手順、を実行させるように記述されている。
【００４４】
本実施形態のコンピュータプログラムは、コンピュータで読み取り可能な記録媒体に記録されてもよい。記録媒体は特に限定されず、様々な形態のものが考えられる。また、プログラムは、記録媒体からコンピュータのメモリにロードされてもよいし、ネットワークを通じてコンピュータにダウンロードされ、メモリにロードされてもよい。
【００４５】
コンピュータプログラムを記録する記録媒体は、非一時的な有形のコンピュータが使用可能な媒体を含み、その媒体に、コンピュータが読み取り可能なプログラムコードが埋め込まれる。コンピュータプログラムが、コンピュータ上で実行されたとき、コンピュータに、情報処理装置（たとえば、サーバ装置４０）を実現するための後述する情報処理方法を実行させる。
【００４６】
図３に戻り、オーダ受付部１０２において、オーダ受付端末２０を用いて入力され、受け付けられるオーダデータ（注文データ）は、たとえば、商品の識別情報（名称または商品コード等）と、その商品の注文数（発注単位で示されてよい）のオーダ内容（注文内容）を含む。受け付けられたオーダは、オーダ受付端末２０からサーバ装置４０またはオーダ受付装置３０に通信ユニット４を介して送信される。
【００４７】
たとえば、オーダ受付端末２０では、タッチパネルに表示されるオーダ画面にて商品画像または商品選択ボタン等へのタッチ操作などを入出力Ｉ／Ｆ５を介して受け付け、操作された商品の選択を受け付ける。さらに、商品の注文数の指定を入力またはリストにより選択操作を受け付け、指定された商品の注文数を受け付ける。注文数はデフォルト値として１が指定されていてもよく、特に注文数の変更操作が行われなかった場合には、そのままデフォルト値を注文数として受け付けてもよい。
顧客が、注文する商品を少なくとも１つ選択した後、注文を確定するための確定操作ボタン（たとえば、オーダボタン）の操作を受け付けてもよいが、必ずしも必要はなく、商品選択毎に自動的にオーダが確定する構成も排除されない。
【００４８】
本実施形態では、オーダ受付端末２０とテーブル（オーダ発注場所となる）の位置は予め関連付けられているものとする。オーダデータは、オーダ内容とともに、端末の識別情報（または、テーブル番号等の情報でもよい）を含んでもよい。さらに、オーダ（発注）日時など他の情報を含んでもよい。
【００４９】
画像取得部１０４が取得する顔画像は、画像データそのものでもよいし、画像から抽出された特徴情報であってもよい。画像からの特徴情報の抽出処理は、オーダ受付端末２０、オーダ受付装置３０、およびサーバ装置４０の少なくともいずれか一つで行うことができる。画像取得部１０４が取得する顔画像を顧客の生体情報として、顧客の精算情報に関連付ける。
このように、画像取得部１０４は、撮像装置２２を用いて撮像された画像から顧客の顔画像の特徴情報を取得してもよい。顧客の顔画像の特徴情報とは、撮像画像内の人物の中から顧客を認識することができる画像の特徴情報である。顧客の顔画像から抽出された特徴情報は、顔画像そのものに比較して情報量が小さいので、記憶容量および通信負荷を削減できる。たとえば、オーダ受付端末２０で特徴情報を取得する構成としてもよく、その場合は、オーダ受付端末２０からオーダ受付装置３０またはサーバ装置４０への通信負荷も削減できる。顔画像の特徴情報の抽出方法および画像特徴情報を用いた顧客の認識処理方法は、公知の技術を用いることができ、詳細な説明は省略する。
【００５０】
また、画像取得部１０４は、撮像装置２２に対し、焦点合わせ、露出調整、または解像度の変更、あるいは、ライト等の制御を行ってもよい。または、撮像装置２２自身またはオーダ受付端末２０が、これらの制御機能を持っていてもよい。
【００５１】
本実施形態において、オーダ受付端末２０の撮像装置２２によって撮像された画像は、サーバ装置４０に送信された後、オーダ受付端末２０のメモリ３から削除されてよい。本実施形態の画像取得部１０４が取得した画像は、精算情報生成部１０６により精算情報と関連付けられてメモリ３またはデータベース４２に記憶される。そして、精算装置５０による精算時に、精算情報に関連付けられた画像が顧客の識別に使用される。そのため、本実施形態において、顧客の顔画像は、顧客が飲食を終えて、精算処理を終了して帰った後は、メモリ３またはデータベース４２から削除されてよい。すなわち、顧客の顔画像は、比較的短時間の期間だけ記憶されていればよく、長期間記憶しなくてよい。同じ顧客が別日に来店した場合は、その都度、顔画像を取得すればよい。
【００５２】
さらに、本実施形態では、顔画像に基づいて、店舗の利用者全員の中から顧客を特定する必要はなく、オーダ受付端末２０でオーダの入力が行われたときから、精算装置５０で精算処理を行うまでの間、その間の顧客（利用者）が区別できればよい。本実施形態では、個人の特定まで行う必要はないため、顔画像を用いた人物を識別する基準は、他の目的で顧客個人やその属性を特定し、顧客情報として蓄積する場合とは異なってよい。たとえば、本実施形態では、顔画像は、顧客の顔だけではなく、髪型や服装などを含んでもよい。恒久的な顧客の特徴よりも、現時点での顧客の特徴を抽出できればよい。
【００５３】
画像取得部１０４により画像が取得されるタイミングとなる「オーダが入力されたとき」は、以下に例示される。
（ｂ１）オーダ受付端末２０において、顧客の操作によるオーダを受け付け、商品単位、顧客単位、および端末単位の少なくともいずれか一つ、または組み合わせで確定操作がなされたとき
（ｂ２）オーダ受付端末２０からオーダデータを受信したとき
【００５４】
また、上記（ｂ１）のオーダ受付端末２０におけるオーダの確定方法とタイミングは、以下に例示される。これらの少なくともいずれか一つ、または、少なくともいずれか２つの組み合わせとなる。
（ｃ１）商品（および注文数）が入力（指定または選択）する操作を受け付けたとき
（ｃ２）オーダを顧客単位で確定するための確定ボタンの操作（第１決定入力）を受け付けたとき
（ｃ３）オーダを確定して発注するためのオーダボタンの操作（第２決定入力）を受け付けたとき
【００５５】
上記（ｃ２）で顧客単位の確定操作（第１決定入力）を受け付けた場合、発注処理を行うタイミングは、以下に例示される。
（ｄ１）上記（ｃ２）の顧客単位の確定操作（第１決定入力）を受け付けと同じタイミングで、顧客単位に発注処理を行う。
（ｄ２）上記（ｃ２）で、少なくとも１人の顧客のオーダの確定操作を受け付けた後、上記（ｃ３）の発注操作（第２決定入力）をさらに受け付けてから、確定された顧客のオーダに基づいて発注処理を行う。
【００５６】
上記各操作によるオーダを、オーダ受付端末２０から送信される（オーダ受付部１０２が受信する）タイミングは、様々考えられ、特に限定されない。
たとえば、上記（ｃ１）の商品（および注文数）が入力（指定または選択）する操作を受け付ける度に送信してもよいし、上記（ｃ２）のオーダを顧客単位で確定するための確定ボタンの操作（第１決定入力）を受け付けた後、顧客毎のオーダデータを送信してもよい。
【００５７】
また、オーダ受付端末２０は、オーダデータと顧客の顔画像の画像データを送信する順序は限定されず、また、同じときに送信してもよい。たとえば、「オーダの入力が行われたとき」に、顧客の顔画像を撮像し、入力されたオーダデータと画像データをオーダ受付端末２０からサーバ装置４０に送信してもよい。あるいは、「オーダの入力が行われたとき」に、顧客の顔画像を撮像し、画像データをオーダ受付端末２０からサーバ装置４０に送信した後、オーダデータを送信してもよい。あるいは、「オーダの入力が行われたとき」に、オーダデータをオーダ受付端末２０からサーバ装置４０に送信し、顧客の顔画像を撮像し、画像データを送信してもよい。
【００５８】
また、画像取得部１０４は、顧客がオーダ受付端末２０を利用してオーダを選択している間に撮像された、顔画像を複数フレーム（たとえば、動画像）取得してもよい。そして、上記の「オーダの入力が行われたとき」に、これらの複数フレームを全て取得してもよいし、複数フレームから選択された少なくとも１つの顔画像を取得してもよい。たとえば、画像認識処理で、人物の認識結果の尤度が所定値以上の画像を選択してもよい。また、複数フレームから抽出される特徴情報を組み合わせて人物の認識精度を上げてもよい。このように、複数フレームを利用することで、顧客の認識精度が向上する。
【００５９】
オーダ受付端末２０における撮像装置２２による撮影は、たとえば、上記の画像取得のタイミングより前から行われていてよい。本明細書では、「撮影」とは、撮像装置２２のイメージセンサにより画像は検出されているが、その画像データを、顧客の顔画像として送信するための画像ファイルまたはその特徴情報としてメモリ３に記憶しない動作を指すものとする。さらに、本明細書では、「撮像」とは、撮像装置２２のイメージセンサにより検出された画像を、顧客の顔画像として送信するための画像ファイルまたはその特徴情報としてメモリ３に記憶する動作を指すものとする。
【００６０】
本実施形態では、撮像装置２２により前もって撮影されている画像を基に、画像認識処理により撮像範囲内の人の存在を検出し、所定の精度で人の顔を認識できたときに、撮像動作を行う構成としてもよい。
また、撮像装置２２により撮像された画像の画質が悪く、画像認識処理による人の判別精度が低い場合に、カメラの焦点合わせ、露出調整、解像度の変更、あるいは、ライト等の制御を行ったり、撮像範囲内に入るようにカメラの向きを制御する制御部（不図示）をオーダ受付端末２０が有してもよい。さらに、画質が向上するように、顧客に立ち位置や顔の向きの変更を指示したり、サングラスや帽子などを外すように指示したりするガイダンスを入出力Ｉ／Ｆ５を介して出力（画面表示または音声出力）したりする出力部（不図示）を有してもよい。
【００６１】
撮像装置２２が撮影を開始するタイミングは様々考えられ、以下に例示されるが、これらに限定されない。また、以下の少なくともいずれか一つ、または少なくとも２つを組み合わせでもよい。
（ｆ１）オーダ受付端末２０でオーダ操作が開始された（受け付けられた）とき（たとえば、電源投入、プログラム起動、開始ボタンの操作等も含む）
（ｆ２）撮像装置２２の撮像範囲内に顧客（人物）が入ったことを検知する検知部（不図示）により、顧客が撮像装置２２の撮像範囲に入ったことが検知されたとき
上記（ｆ２）の検知部の構成は様々考えられ、周知の人感センサ等でもよいし、画像認識処理手段により、撮像画像内の人を検出する構成でもよい。
【００６２】
撮像装置２２により撮影を終了するタイミングは様々考えられ、以下に例示されるが、これら限定されない。また、以下の少なくともいずれか一つ、または少なくとも２つを組み合わせでもよい。
（ｇ１）発注指示を受け付けたとき
（ｇ２）顧客が撮像範囲から外れて所定時間経過した後、オーダ受付端末２０へのユーザ操作が所定時間以上受け付けられなかったとき
（ｇ３）オーダ受付端末２０の電源オフ、プログラムの終了、モニタオフ等の操作を受け付けたとき
（ｇ４）所定時間以上、人物が検知されなかったとき
【００６３】
精算情報生成部１０６は、顧客のオーダを集計し、顧客の精算情報を生成する。そして生成された精算情報に、顔画像を関連付ける。精算情報は、精算対象として登録された各商品の情報を含み、精算装置５０が精算処理を行う際に利用する情報である。たとえば、精算情報は、注文された各商品についての、商品コード、売価情報、販売数量、値引き情報等を含む。商品コードとは、各商品を特定するために予め決められた、文字、数字、記号等から形成される識別データである。精算情報の具体的内容は制限されない。
生成された精算情報は、メモリ３に記憶されてもよいし、データベース４２に格納されてもよい。また、追加注文が発生した場合は、先に生成された当該顧客の精算情報に追加する。この処理については、後述する。
【００６４】
また、画像取得部１０４が取得した画像に、複数の人物の顔画像に含まれている場合、画像から、各人物を識別し、複数の顔画像を取得するとともに、一精算情報に複数の顔画像をそれぞれ関連付ける。
【００６５】
図５は、精算情報生成部１０６によって生成される精算情報１３０の構造の一例を示す図である。
本実施形態において、精算情報１３０は、対応する顧客の顔画像と関連付けて生成される。
なお、精算情報の実体は、上述したように、精算に関する様々な情報が含まれる、複数のフィールドと複数レコードからなるデータの集合である。また、顔画像の実体も、画像データ、または特徴情報の少なくともいずれか一方を含むバイナリデータまたはデータの集合である。ここでは、説明を簡単にするために、１レコードで示してある。本実施形態における精算情報生成部１０６による、精算情報と顔画像の関連付けは、たとえば、それぞれの情報に付与される識別情報（たとえば、データの集合の配列名等）を少なくとも紐付けて１レコードとすればよい。
【００６６】
精算情報生成部１０６により生成される精算情報１３０は、図１の通信ユニット４を介して、サーバ装置４０から精算装置５０に送信される。あるいは、精算装置５０が必要なとき（顧客が精算処理を行うとき等）に、サーバ装置４０に要求して受信してもよい。
【００６７】
［動作例］
以下、本実施形態における情報処理システム１の動作例について図６を用いて説明する。図６は、本実施形態における情報処理システム１の動作例を示すフローチャートである。図示される各ステップは、たとえば、図３の各構成要素により実行される。
本発明の情報処理システム１は、その実現方法として複数の構成例が考えられるため、構成例毎に情報処理方法の各手順を実行する装置（コンピュータ１０）、または装置の組み合わせが異なり、いずれの装置（コンピュータ１０）によって情報処理方法の各手順を実行するかは、様々な形態が考えられる。
本実施形態では、サーバ装置４０（コンピュータ１０）によって、情報処理方法の各手順が実行される。他の例では、オーダ受付装置３０およびオーダ受付端末２０の少なくともいずれか一つによって、情報処理方法の少なくとも一部の手順が実行されてもよい。
【００６８】
本発明の実施の形態に係る情報処理方法は、情報処理装置（本実施形態では、サーバ装置４０）の情報処理方法であり、サーバ装置４０を実現するコンピュータ１０により実行される情報処理方法である。
本実施形態の情報処理方法は、情報処理装置（サーバ装置４０）が、オーダ受付端末２０を用いてオーダの入力を受け付け（ステップＳ１２１）、オーダの入力が行われたときに（ステップＳ１０５のＹＥＳ）、オーダ受付端末２０の周囲を撮像範囲に含む撮像装置により撮像された画像を取得し（ステップＳ１２３）、オーダを集計して精算情報を生成し（ステップＳ１２５）、かつ、精算情報に画像を関連付ける（ステップＳ１２７）、ことを含む。
【００６９】
以下、顧客によるオーダ受付端末２０の操作の手順とともに、詳細に説明する。
まず、顧客は、オーダ受付端末２０を操作して、商品のオーダを行う。このとき、コンピュータ１０は、顧客のオーダを受け付けて、サーバ装置４０またはオーダ受付装置３０にオーダデータを送信し、オーダを発注する処理を行う。オーダ受付端末２０等の操作端末を用いたオーダの受付処理方法および発注処理方法については、特に限定されず、本明細書では詳細な説明は省略する。
【００７０】
オーダ受付端末２０では、予め、または、顧客の操作により、電源が投入されると、プログラムが実行されてオーダ受付処理が開始される。そして、撮像装置（カメラ）２２が起動され（ステップＳ１０１）、顧客の顔の撮像が開始される。撮像装置２２の起動のタイミングは、これに限定されず、後述するステップＳ１０９で顧客の顔画像をサーバ装置４０に送信するタイミングの前までであればよい。好ましくは、顧客がオーダ受付端末２０を手に持ち、オーダする商品やサービスを選んでいる最中から撮像して複数フレームを取得し、前述したように、顔画像の認識精度を向上させるとよい。
【００７１】
顧客によるオーダ受け付け内容は、たとえば、商品名（注文数を含んでよい）の選択または指定を含む。ステップＳ１０３では、たとえば、オーダ受付端末２０において商品名の選択と注文数が顧客の操作により入力されると、入力が受け付けられ、オーダデータがサーバ装置４０に送信される（ステップＳ１０３）。ステップＳ１０３で、オーダ入力が受け付けられると（ステップＳ１０５のＹＥＳ）、撮像装置２２により顧客の顔が撮像され（ステップＳ１０７）、その顧客の顔画像がサーバ装置４０に送信される（ステップＳ１０９）。オーダ入力を受け付けない間は（ステップＳ１０５のＮＯ）、ステップＳ１０１に戻る。
【００７２】
一方、サーバ装置４０において、オーダ受付部１０２が、オーダ受付端末２０から送信されたオーダデータを受信する（ステップＳ１２１）。そして、画像取得部１０４が、オーダ受付端末２０から送信された顧客の顔画像を受信する（ステップＳ１２３）。さらに、精算情報生成部１０６が、ステップＳ１２１で受信したオーダデータを基にオーダを集計して精算情報を生成する（ステップＳ１２５）。そして、精算情報に画像を関連付け（ステップＳ１２７）、メモリ３に記憶する。
【００７３】
図６の例では、ステップＳ１２１でのオーダデータの取得は、商品単位または顧客単位で行われる。ステップＳ１２５におけるオーダの集計は、ステップＳ１２１で取得したオーダデータを、顧客単位で集計する。図６の例は、複数の顧客がオーダ受付端末２０を利用して続けて注文する構成を含んでいるが、複数の顧客を区別する具体的な構成については、後述する。顧客毎に、図６のフローが実行されればよい。
【００７４】
次に、本実施形態の情報処理システム１におけるオーダに基づく精算情報の生成処理と、発注処理の手順の具体例を説明する。以下の３つの例について図７〜図９のフローチャートを用いて説明する。
（例１）オーダの確定操作（決定入力）で確定し、精算情報の生成処理を行う。（発注処理は限定しない。）
（例２）顧客毎のオーダの確定操作で顧客毎のオーダを確定し、複数の顧客のオーダについて発注操作で発注処理を行う。（２段階の操作を受け付ける。）
（例３）オーダの確定操作で確定し、精算情報の生成処理とオーダ発注処理を行う。（１回の操作で発注処理まで行う。）
本実施形態における情報処理システム１で実行される各処理の実行順序は、図７〜図９の各図に示される例に限定されない。各処理の実行順序は、内容的に支障のない範囲で変更することができる。
【００７５】
＜例１：オーダの確定操作（決定入力）による精算情報の生成処理＞
図７は、本実施形態における情報処理システム１の動作例を示すフローチャートである。図示される各ステップは、たとえば、図３の各構成要素により実行される。図７の例は、顧客がオーダを入力し、確定操作（オーダ決定入力）を受け付けたとき、精算情報を生成し、当該顧客の顔画像に関連付ける。
【００７６】
本実施形態において、オーダ受付部１０２は、第１の決定入力（オーダ決定入力）をさらに受け付ける。精算情報生成部１０６は、オーダ決定入力を受け付ける毎にオーダを集計し、顧客毎の精算情報を生成し、顧客の顔画像と関連付ける精算情報を生成する。
【００７７】
図７のフローチャートにおける、オーダ受付端末２０の処理手順は、図６のフローチャートの処理手順と同様なステップＳ１０１、ステップＳ１０３、ステップＳ１０７、およびステップＳ１０９を含み、さらに、ステップＳ１４１およびステップＳ１４３を含む。
【００７８】
図７の例では、ステップＳ１０３で、オーダ受付端末２０において、オーダ画面にて少なくとも一つの商品名の選択と注文数が顧客の操作による入力が受け付けられ、受け付けられたオーダはメモリ３に記憶される。そして、オーダを確定する確定ボタンの押下（オーダ決定入力）を受け付ける前までは（ステップＳ１４１のＮＯ）、ステップＳ１０１に戻り、入力の受け付けが繰り返される。
確定ボタンの押下（オーダ決定入力）を受け付けたとき（ステップＳ１４１のＹＥＳ）、ステップＳ１０７に進み、顧客の顔画像を撮像装置２２により撮像し（ステップＳ１０７）、サーバ装置４０に送信する（ステップＳ１０９）。このとき、ステップＳ１０３で受け付け、メモリ３に蓄積されていたオーダをサーバ装置４０に送信する（ステップＳ１４３）。
【００７９】
サーバ装置４０側の処理手順自体は図６の例と変わらないが、サーバ装置４０が精算情報を生成するタイミングが異なる。すなわち、図６の例では、商品毎、または顧客毎に精算情報が生成される構成を両方含んでいるが、図７の例では、特に、顧客毎に精算情報が生成される構成を示している。
なお、ステップＳ１０３で受け付けたオーダデータは、図６の手順と同様にオーダ受付毎にサーバ装置４０に送信してもよい。
また、ステップＳ１４３のサーバ装置４０へのオーダデータの送信処理は、ステップＳ１０９の画像データと同時に行ってもよいし、ステップＳ１０９の後に行ってもよいし、ステップＳ１０７で撮像処理を行うより前に行ってもよい。
【００８０】
そして、ステップＳ１０９の後、次の顧客が注文操作を開始、または、追加注文のために再び同じ顧客が注文操作を開始したとき、ステップＳ１０１に戻り、オーダ受付端末２０は処理を開始する。このとき、既にカメラが起動している場合、ステップＳ１０３から処理を開始してもよい。
【００８１】
このように、顧客毎に、オーダを入力した後、オーダ決定入力（確定操作）を受け付けたとき、サーバ装置４０にオーダデータと顧客の顔画像が送信され（ステップＳ１４３、ステップＳ１０９）、サーバ装置４０では、ステップＳ１２１で受信した顧客のオーダデータを基に、精算情報生成部１０６が顧客のオーダを集計して、精算情報を生成するとともに（ステップＳ１２５）、ステップＳ１２３で受信した画像データを、ステップＳ１２５で生成された精算情報に関連付ける（ステップＳ１２７）。そして、生成された精算情報１３０は、メモリ３に記憶され、後に精算装置５０において顧客が帰る際の精算処理に使用されることになる。
【００８２】
この構成によれば、顧客毎のオーダを集計して精算情報を生成するとともに、当該顧客の顔画像を精算情報に関連付けることができる。後に、顧客が帰るときに、伝票を持たずに、精算装置５０で精算処理を行うための精算情報を生成できる。
【００８３】
＜発注操作受け付け（第２のオーダ決定入力）による精算情報の生成＞
次の例では、端末単位の発注操作で、複数の顧客のオーダをまとめて発注処理する構成について、説明する。
図８は、本実施形態の情報処理システム１の動作例を示すフローチャートである。図示される各ステップは、たとえば、図３の各構成要素により実行される。
図６および図７の例と異なり、図８の例では、顧客毎または商品毎のオーダの確定に加え、さらに、発注指示を受け付けるオーダボタンの操作（第２の決定入力）を受け付け、発注処理を行う構成を含む。
【００８４】
本実施形態において、情報処理システム１（サーバ装置４０）は、オーダに基づく発注処理を行う発注処理部（不図示）をさらに備える。オーダ受付部１０２は、第２の決定入力（発注指示入力）をさらに受け付ける。発注出力部は、発注指示入力が受け付けられたときに、オーダに基づく発注処理を行う。
【００８５】
オーダ受付端末２０におけるオーダ受付処理は、図６または図７と同様であり、図６のステップＳ１０１〜ステップＳ１０７、または図７のステップＳ１０１〜ステップＳ１０９（ステップＳ１４１、ステップＳ１４３を含む）は、説明を簡単にするためステップＳ１６１のサブルーチンで示される。
ステップＳ１６１で、オーダ受付端末２０において、オーダ画面にて顧客毎にオーダを受け付け、顧客毎のオーダデータと画像データをオーダ受付部１０２と画像取得部１０４がそれぞれ取得する（ステップＳ１２１とステップＳ１２３）。たとえば、図４の顧客Ｕ１〜顧客Ｕ３の順に、オーダ受付端末２０を用いてオーダを入力する。ステップＳ１２１とステップＳ１２３でデータを受信した後、顧客毎に、オーダデータを集計して精算情報を生成し（ステップＳ１７１）、生成された精算情報に当該顧客の顔画像それぞれを関連付ける（ステップＳ１７３）。
【００８６】
本実施形態では、決定入力を受け付けたときが、顧客の画像データを画像取得部１０４が取得するタイミングなので、ステップＳ１２３で画像データを受信したとき、その画像データの顧客のオーダが確定したことを意味する。
そこで、精算情報生成部１０６は、ステップＳ１２１で受信したオーダデータを集計し、精算情報を生成する（ステップＳ１７１）。さらに、ステップＳ１２３で受信した顔画像またはその特徴情報を精算情報に関連付けてメモリ３に記憶する（ステップＳ１７３）。
【００８７】
一方、オーダ受付端末２０において、全ての顧客の注文が終了したとき、顧客が画面上のオーダボタンを押下すると、発注指示入力を受け付け（ステップＳ１６３のＹＥＳ）、オーダ受付端末２０からサーバ装置４０に発注指示が送信される（ステップＳ１６５）。発注指示入力を受け付けるまでの間は（ステップＳ１６３のＮＯ）、ステップＳ１６１の出力を繰り返す。
サーバ装置４０では、オーダ受付端末２０からの発注指示を受信すると（ステップＳ１７５のＹＥＳ）、発注処理部により、通信ユニット４を介してオーダデータがオーダ受付装置３０に送信され、オーダに基づく発注処理が行われる（ステップＳ１７７）。発注指示を受信するまでの間は（ステップＳ１７５のＮＯ）、ステップＳ１２１に戻る。
ここで、発注処理とは、たとえば、オーダ受付装置３０にオーダデータを送信し、厨房のプリンタにオーダ内容を印字出力させ、オーダ指示を調理人等に伝達すること等を含む。発注処理については、特に限定されず、本明細書では詳細な説明は省略する。
【００８８】
図８の例では、図１０（ａ）に示すように、一発注（たとえば、テーブル単位）に対し、顧客の顔画像が関連付けられた精算情報を少なくとも１レコード（図では２レコード）が対応付けられる。
また、上述したように、精算情報の実体は、複数のフィールドと複数レコードからなるデータの集合であり、顔画像の実体も、画像データ、または特徴情報の少なくともいずれか一方を含むバイナリデータまたはデータの集合である。ここでは、説明を簡単にするために、略号で示してある。
【００８９】
この構成によれば、顧客毎の集計を、画像データを受信する度に行い、各顧客の精算情報を顔画像と関連付けてメモリ３に記憶できるので、顧客が帰るときに、伝票を持たずに、精算装置５０で顧客各々が精算処理を行うための精算情報を生成できる。
【００９０】
＜第１オーダ決定入力（確定および発注操作）による精算情報の生成＞
次の例では、顧客による確定操作（第１決定入力）毎に、顧客単位のオーダに基づく発注処理を行う構成について、説明する。
図９は、本実施形態の情報処理システム１の動作例を示すフローチャートである。図示される各ステップは、たとえば、図３の各構成要素により実行される。
図６〜図８の例とは異なり、図９の例では、オーダ確定と発注処理を確定操作毎に受け付ける構成を含む。
【００９１】
本実施形態において、情報処理システム１（サーバ装置４０）は、オーダに基づく発注処理を行う発注処理部（不図示）をさらに備える。オーダ受付部１０２は、オーダの決定入力をさらに受け付ける。オーダの決定入力を受け付けたとき、画像取得部１０４が、顧客の顔画像を取得し、精算情報生成部１０６が、顧客のオーダを集計し、顧客の精算情報を生成し、顧客の顔画像と関連付け、発注処理部が、オーダに基づく発注処理を行う。
【００９２】
オーダ受付端末２０によるオーダ受付処理は、図７と同様である。また、サーバ装置４０におけるオーダデータと画像データの受信、精算情報の生成、精算情報への画像の関連付け等の処理も図６または図７と同様である。ステップＳ１２７で精算情報が生成された後、発注処理部がオーダに基づき発注処理を行う（ステップＳ１７７）。
図８の例では、顧客毎に確定されたオーダデータを基に複数の顧客のオーダをまとめて発注処理する構成を含むが、図９の例では、確定されたオーダデータを基に、確定毎にオーダを発注処理する構成を含む。
図９の例では、図１０（ｂ）に示すように、一発注（たとえば、テーブル単位）に対し、顧客の顔画像が関連付けられた精算情報１レコードが対応付けられる。
【００９３】
上述したように本実施形態では、オーダ受付部１０２によりオーダ受付端末２０を用いたオーダが受け付けられ、オーダ入力が行われたときに、画像取得部１０４によりオーダ受付端末２０の周囲を撮像した画像が取得される。その結果、顧客の顔画像が取得され、精算情報生成部１０６により、オーダが集計されて精算情報が生成され、生成された精算情報に顧客の顔画像が関連付けられる。
【００９４】
本実施形態の情報処理システム１によれば、顧客が顔画像などの生体情報の入力を意識せずに、オーダを顧客毎に自動的に集計して精算情報を生成するとともに、当該顧客の顔画像を精算情報に関連付けることができるという効果を奏する。このようにして生成された精算情報によって、顧客は伝票を持たずに、また、店員に自分のオーダ内容を伝えることなく、精算装置５０で自動的に顧客別の精算情報が取得されて顧客毎に精算処理を行うことができるようになる。
【００９５】
（第２の実施の形態）
本発明の実施の形態に係る情報処理システム１は、上記実施形態のオーダ受付装置３０により取得した顧客の顔画像に基づいて、精算情報を取得し、顧客が精算装置５０に移動して顧客毎の精算処理を行える構成を有する。また、本実施形態では、顧客の顔画像から特徴情報を抽出し、精算情報に関連付ける構成をさらに有する。
以下、本実施形態における情報処理システム１について、上記実施形態と異なる内容を中心に説明する。以下の説明では、上記実施形態と同様の内容については適宜省略する。
【００９６】
［処理構成］
図１１は、本実施形態における情報処理システム１の構成を論理的に示す機能ブロック図である。
情報処理システム１では、オーダ受付装置３０またはサーバ装置４０の構成として、上記実施形態と同様なオーダ受付部１０２および精算情報生成部１０６を有するとともに、さらに、第１画像取得部２０４と、第１抽出部２０６とを有する。
情報処理システム１は、精算処理を行う構成として、第２画像取得部２２２と、第２抽出部２２４と、特定部２２６と、精算情報取得部２２８と、精算制御部２３０と、を備える。
【００９７】
本実施形態において、情報処理システム１（サーバ装置４０）は、画像取得部１０４により取得された顧客の顔画像の特徴情報を抽出する第１抽出部２０６をさらに備える。
なお、上記実施形態の画像取得部１０４と同じ機能を有する第１画像取得部２０４をさらに備える。
精算情報生成部１０６は、抽出された顧客の顔画像の特徴情報を前記精算情報に関連付ける。
【００９８】
さらに、本実施形態において、情報処理システム１（精算装置５０またはサーバ装置４０）は、精算処理を行う精算装置５０の利用者を撮像装置２２により撮像した画像を取得する第２画像取得部２２２と、画像に基づいて、当該利用者の顔画像の特徴情報を抽出する第２抽出部２２４と、抽出された利用者の特徴情報と注文受付時に撮像された少なくとも１人の顧客の顔画像の特徴情報を照合し、利用者の特徴情報に対応する顧客の特徴情報を特定する特定部２２６と、特定された顧客の特徴情報に関連付けられた顧客の精算情報を取得する精算情報取得部２２８と、取得された精算情報に基づいて、精算装置５０に顧客別に精算処理させる精算制御部２３０と、をさらに備える。
【００９９】
第１抽出部２０６または第２抽出部２２４は、たとえば、顧客の顔を、撮像装置２２を用いて撮像して取得される顔画像から各個人を識別可能な特徴情報を抽出する。
【０１００】
図１２は、本実施形態の情報処理システム１の精算装置５０周辺の配置の一例を示す図である。
精算装置５０は、フロアから店外に出る前に通る経路の途中に設置されるのが好ましい。また、未精算のまま顧客が店外に出てしまわないように、精算装置５０から出口に進めないような工夫がなされているのが好ましい。
【０１０１】
本実施形態では、第１画像取得部２０４に顔画像を送信する撮像装置２２は、オーダ受付端末２０を用いてオーダをする顧客が撮像範囲（図４の破線Ｒ１で示す領域内）に入るように設置されるとともに、撮像範囲が制御される。また、第２画像取得部２２２に顔画像を送信する撮像装置（カメラ）２２は、精算装置５０の利用者が撮像範囲（図１２、破線Ｒ２で示す領域内）に入るように設置されるとともに、撮像範囲が制御される。
【０１０２】
また、第２画像取得部２２２は、精算装置５０の利用者が精算を行う前に、利用者の顔画像を取得する。たとえば、撮像装置２２は、人が精算装置５０の前に立ち、精算装置５０の周囲の撮像範囲Ｒ２内に利用者が存在していることが検知されたときに、その利用者の顔画像を撮像してもよい。または、撮像装置２２は、常時撮影を行っていてもよく、画像認識処理により、撮像画像内に人が検出され、所定の精度で人の顔を認識できたときに、撮像動作を行う構成としてもよい。
本実施形態の第１画像取得部２０４が利用する撮像装置２２は、上記実施形態のオーダ受付端末２０の撮像装置２２と同様の機能を有してよい。
【０１０３】
第１抽出部２０６および第２抽出部２２４は、撮像装置２２を用いて撮像された画像から顧客の顔画像の特徴情報を取得してもよい。顧客の顔画像の特徴情報とは、撮像画像内の人物の中から顧客を認識することができる画像の特徴情報である。本実施形態では、顧客の顔画像の特徴情報は、顧客の顔画像から抽出された特徴情報であり、顔画像そのものに比較して情報量が小さい。顔画像の特徴情報の抽出方法および画像特徴情報を用いた顧客の認識方法は、公知の技術を用いることができ、詳細な説明は省略する。
【０１０４】
精算装置５０は、サーバ装置４０から送信される精算情報１３０を用いて、精算処理を実行する。
精算処理は、合計金額を顧客に提示する処理、支払い方法を顧客に選択させる処理、選択された支払い方法での支払いを受け付ける処理、釣銭を払い出す処理、レシートを出力する処理、精算完了を提示する処理を含む。当該精算処理は、レシートの要否を顧客に選択させる処理、領収書の発行の要否を顧客に選択させる処理、領収書出力処理、会員カードの読み取り処理等、一般的な精算の流れに沿う他の処理を含んでもよい。
【０１０５】
精算情報取得部２２８は、サーバ装置４０から送信された精算情報１３０を受信し、記憶部（図１のメモリ３等）に記憶する。そして、顧客は精算装置５０周辺に移動する。撮像装置２２の撮像範囲Ｒ２に入った利用者を撮像装置２２が撮像し、第２画像取得部２２２に送信する。第２抽出部２２４は、第２画像取得部２２２が受信した利用者の顔画像から特徴情報を抽出する。そして、特定部２２６が、サーバ装置４０から受信した精算情報に紐付けられている顔画像の特徴情報を照合する。そして、精算情報取得部２２８は、利用者の顔画像の特徴情報に対応する顧客の顔画像の特徴情報を検出し、検出された顧客の顔画像の特徴情報に関連付けられている精算情報を取得する。
【０１０６】
本システムでは、顧客が飲食店のフロアのテーブル等でオーダ受付端末２０を用いてオーダする。そして、食事が終わったとき、店外に出る前に精算装置５０まで移動し精算処理を行う。
【０１０７】
［動作例］
以下、本実施形態における情報処理システム１の動作例について図１３を用いて説明する。図１３は、本実施形態における情報処理システム１の精算装置５０の動作例を示すフローチャートである。図示される各ステップは、たとえば、図１の各処理ユニットにより実行される。図１３の精算装置５０の処理手順の分担は、一例であり、これらに限定されず、これらの手順の順番は内容的に支障のない範囲で変更することができる。さらに、他の実施形態では、本実施形態の情報処理方法の処理手順の少なくとも一部を、サーバ装置４０が実現してもよい。
【０１０８】
本発明の実施の形態に係る情報処理方法は、少なくとも１つのコンピュータにより実行される。
本実施形態の情報処理方法は、情報処理装置（精算装置５０）が、精算装置５０の利用者の顔画像を取得し、取得された顔画像から特徴情報を抽出し（ステップＳ２０３）、精算情報に関連付けられた顧客の顔画像の特徴情報と、取得された利用者の顔画像の特徴情報を照合し（ステップＳ２０５）、利用者の特徴情報に対応する前記顧客の特徴情報を検出し（ステップＳ２０７のＹＥＳ）、検出された顧客の特徴情報に関連付けられている精算情報を取得し（ステップＳ２０９）、精算装置５０を用いて、取得した精算情報に基づく精算処理を行う（ステップＳ２１１）、ことを含む。
【０１０９】
以下、詳細に説明する。
上記実施形態で説明したように、サーバ装置４０のメモリ３に記憶された精算情報１３０は、サーバ装置４０から精算装置５０に通信ユニット４を介して送信される。このとき、精算装置５０では、サーバ装置４０から送信された精算情報１３０を、通信ユニット４を介して受信する（ステップＳ２０１）。受信した精算情報１３０は精算装置５０のメモリ３に蓄積される。
【０１１０】
そして、第２画像取得部２２２が、精算装置５０の撮像装置２２を用いて利用者の顔画像を取得し、第２抽出部２２４が、顔画像の特徴情報を抽出する（ステップＳ２０３）。たとえば、第２画像取得部２２２は、精算装置５０の撮像範囲Ｒ２内に入ってきた利用者を撮像装置２２により撮像した利用者の顔画像を取得する。
【０１１１】
そして、特定部２２６が、ステップＳ２０１で受信した精算情報１３０に関連付けられた顧客の特徴情報と、ステップＳ２０３で取得した利用者の特徴情報を照合する（ステップＳ２０５）。利用者の特徴情報に対応する顧客の特徴情報が検出された場合（ステップＳ２０７のＹＥＳ）、精算情報取得部２２８が、検出された顧客の特徴情報に関連付けられている精算情報を取得する（ステップＳ２０９）。そして、精算制御部２３０が、精算装置５０を用いて、取得した精算情報に基づく精算処理を実行する（ステップＳ２１１）。ステップＳ２０７で、一致する特徴情報が見つからなかった場合（ステップＳ２０７のＮＯ）、精算処理を行わず本処理を終了してもよい。
【０１１２】
本実施形態における情報処理システム１で実行される各処理の実行順序は、図１３に示される例に限定されない。たとえば、ステップＳ２０１でサーバ装置４０から送信された精算情報１３０を、精算装置５０が受信しているが、精算装置５０からサーバ装置４０に対し、精算情報１３０の送信を要求し、要求に応じてサーバ装置４０から精算装置５０に精算情報が送信されてもよい。
【０１１３】
また、精算情報の受信は、ステップＳ２０３で顧客の顔画像の特徴情報が抽出された後、ステップＳ２０５で照合処理の前でもよい。また、他の実施形態では、精算装置５０からサーバ装置４０に顧客の顔画像または画像の特徴情報を送信し、サーバ装置４０でメモリ３またはデータベース４２に記憶される顧客の精算情報に関連付けられている顔画像または特徴情報と、利用者の顔画像または画像の特徴情報を照合する処理を行ってもよい。そして、対応する顧客の顔画像または画像の特徴情報が検出された場合に、対応する精算情報を取得し、取得された精算情報をサーバ装置４０から精算装置５０に送信し、精算装置５０で精算情報に基づく精算処理を行ってもよい。
この構成では、サーバ装置４０が、第２画像取得部２２２と、第２抽出部２２４と、特定部２２６と、精算情報取得部２２８と、精算制御部２３０とを有する。
【０１１４】
ステップＳ２０７で対応する特徴情報が見つからなかった場合、第２画像取得部２２２は、利用者にもう一度、顔画像の撮影を行うようにメッセージを出力（画面表示または音声出力）してもよい。または、第２画像取得部２２２が、撮像装置２２の焦点合わせ、露出調整、解像度の変更、あるいは、ライト等の制御を行ったり、利用者が撮像範囲Ｒ２内に入るようにカメラの向きを制御したり、または、画像の精度が向上するように、利用者に立ち位置や顔の向きの変更を指示したり、サングラスや帽子などを外すように指示したりするガイダンスを出力（画面表示または音声出力）したりして、ステップＳ２０３に戻ってもよい。
【０１１５】
上述したように本実施形態では、精算装置５０において、第２画像取得部２２２により利用者の撮像画像が取得され、第２抽出部２２４により利用者の顔画像の特徴情報が抽出される。そして、特定部２２６により、利用者の特徴情報と、サーバ装置４０で生成された精算情報に関連付けられている顧客の特徴情報が照合される。一致する顧客の特徴情報が検出されたとき、精算装置５０にて、当該顧客の精算情報に基づく精算処理が行われる。
【０１１６】
従来技術では、たとえば、オーダ時等に顧客に精算情報の識別情報を記録した媒体（たとえば、伝票）を渡して精算時利用していた。食事終了後に、顧客がその媒体を持ってＰＯＳレジスタ６０のところまで行き、店員に渡して精算する。このとき、複数の顧客が同じテーブルで食事をする場合、注文も一緒に行うので、同じ伝票に複数の顧客のオーダが一緒に含まれる。精算時に顧客が個別会計を希望した場合には、店員が個別に商品を指定して会計処理を行うため、煩雑で手間がかかった。
【０１１７】
本実施形態の情報処理システム１によれば、オーダーエントリーシステムにおいて、顧客のオーダ情報を記録した媒体（たとえば、伝票）の提示を不要とし、かつ、顧客が個別に自分で精算処理を行うことができるので、利便性が高いという効果を奏する。
【０１１８】
以上、図面を参照して本発明の実施形態について述べたが、これらは本発明の例示であり、上記以外の様々な構成を採用することもできる。以下に示す各実施形態は、矛盾のない範囲で適宜組み合わせることができる。
＜未精算者の検知＞
本実施形態では、さらに、未精算で店舗を退出する顧客を検知する構成を有してもよい。
本実施形態において、情報処理システム１は、さらに、店舗内から外部に退出する退出者の顔画像を取得する第３の画像取得部（不図示）と、未精算の精算情報に関連付けられた顧客の画像の特徴情報と、第３の画像取得部により取得された退出者の顔画像またはその特徴情報を照合し、一致した場合に出力を行う出力部（不図示）を備えてもよい。
【０１１９】
第３の画像取得部は、店舗の出口に設けられ、店舗からの退出者の顔を撮像する撮像範囲を有する撮像装置２２によって退出者の顔を撮像し、顔画像を取得する。
この実施形態において、精算情報は、図５の精算情報１３０には、さらに、精算済みフラグが関連付けされる。この精算済みフラグを用いて、退出者が未精算か否かを判別することができる。
精算装置５０を用いて精算処理が終了した顧客の精算情報に、精算制御部２３０が精算済みフラグをセットして関連付ける。サーバ装置４０で精算情報を生成したときに、精算済みフラグをリセットし、精算制御部２３０が精算後に精算済みフラグをセットしてもよい。
【０１２０】
また、フラグを使用しない構成も考えられる。たとえば、サーバ装置４０のメモリ３または、精算装置５０のメモリに記憶されている未精算分の精算情報について、精算制御部２３０により精算が完了したら、対応するレコードを削除する構成でも同様の機能を実現できる。精算済みのレコードを削除することで、出力部は、精算情報内に、退出者の顔画像または画像の特徴情報と一致する顔画像または画像の特徴情報のレコードが残っているかを調べればよく、顔画像または画像の特徴情報が残っている退出者は未精算であることを検知できる。なお、ここで削除されるのは、本実施形態で使用する精算情報と顔画像または画像の特徴情報を関連付ける情報であり、精算情報の実体データそのものは削除されなくてよい。
【０１２１】
未精算の退出者の顔画像が検出された場合の出力部の出力は、様々考えられ、以下に例示されるが、これらに限定されない。以下の出力の少なくともいずれか１つ、または少なくとも２つを組み合わせてもよい。
（ｈ１）店舗出口の自動ドアを開放禁止に制御する信号を出力する。
（ｈ２）警報音または音声を出力する。ランプ等の点灯または点滅制御信号を出力する。
（ｈ３）店員、警備室または警備員等への通報出力を行う。
【０１２２】
この構成によれば、上記実施形態と同様な効果を奏するとともに、さらに、顧客が故意に、またはうっかり未精算のまま退出することを防止できる。
【０１２３】
＜精算情報承認操作受付＞
さらなる他の実施形態では、上記実施形態の少なくともいずれか１つと同様な構成を有するとともに、さらに、精算装置５０で利用者に対応するとして取得された精算情報を、精算前に利用者に提示して承認操作を受け付けて場合に精算処理を行う構成を有する。
本実施形態の情報処理システム１は、さらに、精算処理の前に、精算情報取得部２２８により取得された精算情報を利用者に提示する提示部（不図示）と、提示された顧客の精算情報に関し、当該利用者による承認操作を受け付ける受付部（不図示）と、をさらに有する。
そして、精算制御部２３０は、受付部により承認操作を受け付けたとき、承認された顧客の精算情報に基づいて精算装置５０に精算処理させる。
【０１２４】
提示部は、図１の表示装置６に対し、入出力Ｉ／Ｆ５を介して精算情報を出力して表示させる。なお、レシート等への印字出力する構成も排除されない。精算情報は、全て表示してもよいし、一部を表示してもよい。支払い金額だけを表示したり、注文した商品の名称、個数、単価等の少なくともいずれかを表示したり、クーポン利用情報だけ表示したり、表示する内容や方法は特に限定されない。また、利用者の操作を受け付けて表示内容を変更できてもよい。たとえば、表示内容や方法を利用者が選択できる構成を有してもよい。
利用者が表示された精算情報を見て、精算内容が自分のものであるか、また、クーポンが適正に適用されているか、注文数が間違っていないか等の少なくともいずれかを確認できるとよい。
【０１２５】
承認操作は、たとえば、図１の入出力装置７に利用者が操作を行い、その操作信号が入出力Ｉ／Ｆ５を介して入力され、受付部が受け付けることができる。また、受付部が利用者による承認操作そのものを受け付けなかった場合であっても、その精算情報に対する支払い処理を利用者が開始したことで、承認操作を受け付けたものとして処理を進めてもよい。
【０１２６】
この構成によれば、顧客毎に精算内容を確認した上で、利用者が支払いを行うことができる。
【０１２７】
＜精算時に顔画像を確認＞
さらなる他の実施形態では、精算時に店員または本人が、精算情報に関連付けられている顔画像を確認できる構成を有してもよい。
本実施形態の情報処理システム１は、さらに、特定部２２６により特定された顧客に対応する、少なくとも１人の利用者の撮像画像を表示する表示部を有してもよい。
【０１２８】
また、さらに、情報処理システム１は、表示部により表示された撮像画像の中から精算処理する少なくとも１人の顧客の画像の選択を受け付ける受付部を有してもよい。
精算情報取得部２２８は、選択された顧客の画像が関連付けられた精算情報を取得し、精算制御部２３０は、取得された顧客の精算情報に基づいて、精算装置５０に精算処理させる。
【０１２９】
この構成によれば、店員または本人が、支払いを行う精算情報が本人のものであるかを顔画像で確認することができるので、間違って他人の支払いを行ってしまうのを未然に防ぐことができる。
【０１３０】
＜顔画像の取得時ガイダンス＞
さらなる他の実施形態では、画像取得部１０４または第１画像取得部２０４において、取得される画像の画質を上げるために、顧客または利用者に対し、撮像を再度行う指示や撮像画像の画質を上げるためのガイダンスを出力する指示部（不図示）をさらに備えてもよい。
【０１３１】
指示部は、画像取得部１０４または第１画像取得部２０４において、顧客または利用者を識別できる精度の情報が取得できなかったとき、顧客または利用者に対し、もう一度、画像データを取得するための読み取り操作や動作を促すメッセージを出力する表示装置６または入出力装置７のスピーカ等から出力（画面表示または音声出力）する。その際、より精度を向上させるために、たとえば、顔が撮像範囲内に入るように、そして、画像が鮮明になるように、顧客や利用者に適切な立ち位置や顔の向きを指示したり、サングラスや帽子などを外すように指示したりするガイダンスを表示装置６または入出力装置７のスピーカ等から出力（画面表示または音声出力）してもよい。
【０１３２】
この構成によれば、顔画像または画像の特徴情報を取得する際に、より高い認識精度で取得することが可能になり、誤認識の発生率を低減できる。
【０１３３】
＜追加注文時の処理＞
さらなる他の実施形態において、顧客が注文を追加するための構成について説明する。
画像取得部１０４により顔画像が取得されたとき、精算情報を参照し、取得した顔画像と精算情報に関連付けられている顔画像を照合し、一致する顔画像が検出された場合、対応する顧客の精算情報を取得する。そして、このときにオーダ受付部１０２により取得されたオーダを加えて集計し、追加オーダを含む当該顧客の精算情報を生成する。
【０１３４】
また、この構成において、取得した顔画像と一致した精算情報に関連付けられている顔画像が検出されたとき、その画像をオーダ受付端末２０のディスプレイに表示して、顧客に本人であるか確認し、承認操作を受け付ける確認部（不図示）をさらに備えてもよい。顧客による承認操作を受け付けた場合には、上述した追加オーダの情報を追加する処理を行う。承認されなかった場合（否認操作を受け付けた場合）、撮像装置２２による顔画像の撮像を再度行うためのガイダンスを出力し、画像取得部１０４が顧客の顔画像を取得し直す。そして、精算情報生成部１０６が取得された顔画像と精算情報に関連付けられている顔画像を照合し、一致する顔画像が見つかるまで、再撮像処理を繰り返す。
【０１３５】
この構成によれば、追加オーダを受け付けた場合にも、顧客毎に精算情報を集計し直して、追加オーダを含む顧客の精算情報を生成することができ、精算時にも追加オーダを含む顧客の精算情報に基づいて精算処理を行うことができるので、利便性が高い。
【０１３６】
＜オーダ受付端末２０をスマートフォンで実現＞
さらなる他の実施形態において、オーダ受付端末２０を顧客のスマートフォン等の携帯端末を用いて実現する構成について説明する。
本実施形態では、顧客のスマートフォンに、本情報処理システム１の少なくとも一部の機能を実現するアプリケーションプログラムをインストールする。そして、アプリケーションをスマートフォンのＣＰＵに実行させることにより、上記実施形態で説明したオーダ受付端末２０の処理機能を実現してもよい。
この形態では、ユーザは、事前に本情報処理システム１のサービスを利用するためのユーザ登録などを行い、サーバ装置４０には、インターネット等のネットワークを介して接続してもよいし、店舗内の無線ＬＡＮ設定を行うことでルータ７０を介してサーバ装置４０に接続できる構成としてもよい。このとき、セキュリティ確保のための対策処理も適切に行うのが好ましい。
【０１３７】
この構成によれば、ユーザの携帯端末を用いて、オーダーエントリーシステムを顧客が利用できることになり、利便性が向上する。
【０１３８】
＜ＰＯＳレジスタ６０利用の精算処理＞
上記実施形態では、精算装置５０で店員ではなく顧客が自身で精算する場合について説明した。
さらなる他の実施形態では、本発明の情報処理システム１のＰＯＳレジスタ６０が、精算処理を行う構成を有する。
この例では、ＰＯＳレジスタ６０が、第２画像取得部２２２と、第２抽出部２２４と、特定部２２６と、精算情報取得部２２８と、精算制御部２３０と、を備える。
たとえば、第２画像取得部２２２が、ＰＯＳレジスタ６０の前に会計のために立った顧客の顔を撮像する撮像装置２２を利用して顧客の顔画像を取得する。第２抽出部２２４、特定部２２６、および精算情報取得部２２８、精算制御部２３０の動作は、上記実施形態と同様であり、詳細な説明は省略する。
【０１３９】
そして、精算情報取得部２２８が顧客毎の精算情報を取得し、ＰＯＳレジスタ６０に精算情報、たとえば、会計金額が顧客用ディスプレイと店員用ディスプレイの両方に表示される。そして、顧客毎に会計手続きを行うことができる。
【０１４０】
この構成によれば、精算装置５０だけでなく、ＰＯＳレジスタ６０でも顧客別の会計をスムーズに行うことが可能になる。
【０１４１】
以上、実施形態および実施例を参照して本願発明を説明したが、本願発明は上記実施形態および実施例に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。
なお、本発明において利用者に関する情報を取得、利用する場合は、これを適法に行うものとする。
【０１４２】
以下、参考形態の例を付記する。
１．  注文受付端末を用いて注文の入力を受け付ける受付手段と、
前記注文の入力が行われたときに、前記注文受付端末の周囲を撮像範囲に含む撮像装置により撮像された画像を取得する画像取得手段と、
前記注文を集計して精算情報を生成し、かつ、前記精算情報に前記画像を関連付ける精算情報生成手段と、
を備える注文受付装置。
２．  前記受付手段は、第１の決定入力をさらに受け付け、
前記画像取得手段は、前記第１の決定入力を受け付けたとき、顧客の顔画像を取得し、
前記精算情報生成手段は、前記第１の決定入力を受け付ける毎に前記注文を集計し、前記顧客毎の前記精算情報を生成し、前記顧客の顔画像と関連付ける、
１．に記載の注文受付装置。
３．  前記注文に基づく発注処理を行う発注処理手段をさらに備え、
前記受付手段は、第２の決定入力をさらに受け付け、
前記発注処理手段は、前記第２の決定入力が受け付けられたときに、前記注文に基づく発注処理を行う、
２．に記載の注文受付装置。
４．  前記注文に基づく発注処理を行う発注処理手段をさらに備え、
前記受付手段は、前記注文の決定入力をさらに受け付け、
前記注文の決定入力を受け付けたとき、
前記画像取得手段が、顧客の顔画像を取得し、
前記精算情報生成手段が、前記顧客の前記注文を集計し、前記顧客の前記精算情報を生成し、前記顧客の顔画像と関連付け、
前記発注処理手段が、前記注文に基づく発注処理を行う、
１．に記載の注文受付装置。
５．  前記画像取得手段により取得された顧客の顔画像の特徴情報を抽出する抽出手段をさらに備え、
前記精算情報生成手段は、抽出された前記顧客の顔画像の特徴情報に関連付けて前記精算情報を生成する、
１．から４．いずれか１つに記載の注文受付装置。
【０１４３】
６．  精算処理を行う精算装置の利用者を撮像装置により撮像した画像を取得する画像取得手段と、
前記画像に基づいて、当該利用者の顔画像の特徴情報を抽出する抽出手段と、
抽出された前記利用者の特徴情報と注文受付時に撮像された少なくとも１人の顧客の顔画像の特徴情報を照合し、前記利用者の特徴情報に対応する前記顧客の特徴情報を特定する特定手段と、
特定された前記顧客の特徴情報に関連付けられた前記顧客の精算情報を取得する取得手段と、
取得された前記精算情報に基づいて、前記精算装置に前記顧客別に精算処理させる精算制御手段と、
を備える精算装置。
７．  前記精算処理を行う前に、前記精算情報取得手段により取得された顧客の前記精算情報を前記利用者に提示する提示手段と、
提示された前記顧客の精算情報に関し、当該利用者による承認操作を受け付ける受付手段と、をさらに備え、
前記精算制御手段は、
前記受付手段により前記承認操作を受け付けたとき、承認された前記顧客の精算情報に基づいて前記精算装置に精算処理させる、
６．に記載の精算装置。
８．  前記特定手段により特定された顧客に対応する、少なくとも１人の前記利用者の撮像画像を表示する表示手段と、
前記撮像画像が表示された前記利用者の中から精算処理する少なくとも１人の顧客の選択を受け付ける受付手段と、をさらに備え、
前記精算情報取得手段は、選択された前記顧客の精算情報を取得し、
前記精算制御手段は、取得された前記顧客の前記精算情報に基づいて、前記精算装置に精算処理させる、
６．または７．に記載の精算装置。
【０１４４】
９．  情報処理装置が、
注文受付端末を用いて注文の入力を受け付け、
前記注文の入力が行われたときに、前記注文受付端末の周囲を撮像範囲に含む撮像装置により撮像された画像を取得し、
前記注文を集計して精算情報を生成し、かつ、前記精算情報に前記画像を関連付ける、
情報処理装置の情報処理方法。
１０．  前記情報処理装置が、
第１の決定入力をさらに受け付け、
前記第１の決定入力を受け付けたとき、顧客の顔画像を取得し、
前記第１の決定入力を受け付ける毎に前記注文を集計し、前記顧客毎の前記精算情報を生成し、前記顧客の顔画像と関連付ける、
９．に記載の情報処理方法。
１１．  前記情報処理装置が、
第２の決定入力をさらに受け付け、
前記第２の決定入力が受け付けられたときに、前記注文に基づく発注処理を行う、
１０．に記載の情報処理方法。
１２．  前記情報処理装置が、
前記注文の決定入力を受け付けたとき、
顧客の顔画像を取得し、
前記顧客の前記注文を集計し、前記顧客の前記精算情報を生成し、前記顧客の顔画像と関連付け、
前記注文に基づく発注処理を行う、
９．に記載の情報処理方法。
１３．  前記情報処理装置が、
取得された顧客の顔画像の特徴情報を抽出し、
抽出された前記顧客の顔画像の特徴情報に関連付けて前記精算情報を生成する、
９．から１２．いずれか１つに記載の情報処理方法。
【０１４５】
１４．  情報処理装置が、
精算処理を行う精算装置の利用者を撮像装置により撮像した画像を取得し、
前記画像に基づいて、当該利用者の顔画像の特徴情報を抽出し、
抽出された前記利用者の特徴情報と注文受付時に撮像された少なくとも１人の顧客の顔画像の特徴情報を照合し、前記利用者の特徴情報に対応する前記顧客の特徴情報を特定し、
特定された前記顧客の特徴情報に関連付けられた前記顧客の精算情報を取得し、
取得された前記精算情報に基づいて、前記精算装置に前記顧客別に精算処理させる、
情報処理装置の情報処理方法。
１５．  前記精算処理を行う前に、取得された顧客の前記精算情報を前記利用者に提示し、
提示された前記顧客の精算情報に関し、当該利用者による承認操作を受け付けし、
前記承認操作を受け付けたとき、承認された前記顧客の精算情報に基づいて前記精算装置に精算処理させる、
１４．に記載の情報処理方法。
１６．  特定された顧客に対応する、少なくとも１人の前記利用者の撮像画像を表示し、
前記撮像画像が表示された前記利用者の中から精算処理する少なくとも１人の顧客の選択を受け付け、
選択された前記顧客の精算情報を取得し、
取得された前記顧客の前記精算情報に基づいて、前記精算装置に精算処理させる、
１４．または１５．に記載の情報処理方法。
【０１４６】
１７．  コンピュータに、
注文受付端末を用いて注文の入力を受け付ける手順、
前記注文の入力が行われたときに、前記注文受付端末の周囲を撮像範囲に含む撮像装置により撮像された画像を取得する手順、
前記注文を集計して精算情報を生成し、かつ、前記精算情報に前記画像を関連付ける手順、
を実行させるためのプログラム。
１８．  第１の決定入力をさらに受け付ける手順、
前記第１の決定入力を受け付けたとき、顧客の顔画像を取得する手順、
前記第１の決定入力を受け付ける毎に前記注文を集計し、前記顧客毎の前記精算情報を生成し、前記顧客の顔画像と関連付ける手順、
をコンピュータに実行させるための、１７．に記載のプログラム。
１９．  第２の決定入力をさらに受け付ける手順、
前記第２の決定入力が受け付けられたときに、前記注文に基づく発注処理を行う手順、
をコンピュータに実行させるための、１８．に記載のプログラム。
２０．  前記注文の決定入力をさらに受け付ける手順、
前記注文の決定入力を受け付けたとき、
顧客の顔画像を取得する手順、
前記顧客の前記注文を集計し、前記顧客の前記精算情報を生成し、前記顧客の顔画像と関連付ける手順、
前記注文に基づく発注処理を行う手順、
をコンピュータに実行させるための、１７．に記載のプログラム。
２１．  取得された顧客の顔画像の特徴情報を抽出する手順、
抽出された前記顧客の顔画像の特徴情報に関連付けて前記精算情報を生成する手順、
をコンピュータに実行させるための、１７．から２０．いずれか１つに記載のプログラム。
【０１４７】
２２．  コンピュータに、
精算処理を行う精算装置の利用者を撮像装置により撮像した画像を取得する手順、
前記画像に基づいて、当該利用者の顔画像の特徴情報を抽出する手順、
抽出された前記利用者の特徴情報と注文受付時に撮像された少なくとも１人の顧客の顔画像の特徴情報を照合し、前記利用者の特徴情報に対応する前記顧客の特徴情報を特定する手順、
特定された前記顧客の特徴情報に関連付けられた前記顧客の精算情報を取得する手順、
取得された前記精算情報に基づいて、前記精算装置に前記顧客別に精算処理させる手順、
を実行させるためのプログラム。
２３．  前記精算処理を行う前に、取得された顧客の前記精算情報を前記利用者に提示する手順、
提示された前記顧客の精算情報に関し、当該利用者による承認操作を受け付ける手順、
前記承認操作を受け付けたとき、承認された前記顧客の精算情報に基づいて前記精算装置に精算処理させる手順、
をコンピュータに実行させるための、２２．に記載のプログラム。
２４．  特定された顧客に対応する、少なくとも１人の前記利用者の撮像画像を表示する手順、
前記撮像画像が表示された前記利用者の中から精算処理する少なくとも１人の顧客の選択を受け付ける手順、
選択された前記顧客の精算情報を取得する手順、
取得された前記顧客の前記精算情報に基づいて、前記精算装置に精算処理させる手順、
をコンピュータに実行させるための、２２．または２３．に記載のプログラム。
２５．  注文受付端末を用いて注文の入力を受け付ける受付手段と、
前記注文の入力が行われたときに、前記注文受付端末の周囲を撮像範囲に含む撮像装置により撮像された画像を取得する画像取得手段と、
前記注文を集計して精算情報を生成し、かつ、前記精算情報に前記画像を関連付ける精算情報生成手段と、
を備える情報処理システム。
２６．  前記受付手段は、第１の決定入力をさらに受け付け、
前記画像取得手段は、前記第１の決定入力を受け付けたとき、顧客の顔画像を取得し、
前記精算情報生成手段は、前記第１の決定入力を受け付ける毎に前記注文を集計し、前記顧客毎の前記精算情報を生成し、前記顧客の顔画像と関連付ける、
２５．に記載の情報処理システム。
２７．  前記注文に基づく発注処理を行う発注処理手段をさらに備え、
前記受付手段は、第２の決定入力をさらに受け付け、
前記発注処理手段は、前記第２の決定入力が受け付けられたときに、前記注文に基づく発注処理を行う、
２６．に記載の情報処理システム。
２８．  前記注文に基づく発注処理を行う発注処理手段をさらに備え、
前記受付手段は、前記注文の決定入力をさらに受け付け、
前記注文の決定入力を受け付けたとき、
前記画像取得手段が、顧客の顔画像を取得し、
前記精算情報生成手段が、前記顧客の前記注文を集計し、前記顧客の前記精算情報を生成し、前記顧客の顔画像と関連付け、
前記発注処理手段が、前記注文に基づく発注処理を行う、
２５．に記載の情報処理システム。
２９．  前記画像取得手段により取得された顧客の顔画像の特徴情報を抽出する抽出手段をさらに備え、
前記精算情報生成手段は、抽出された前記顧客の顔画像の特徴情報に関連付けて前記精算情報を生成する、
請求項２５．から２８．いずれか１つに記載の情報処理システム。
３０．  精算処理を行う精算装置の利用者を撮像装置により撮像した画像を取得する第２の画像取得手段と、
前記画像に基づいて、当該利用者の顔画像の特徴情報を抽出する第２の抽出手段と、
前記利用者の特徴情報と前記顧客の特徴情報を照合し、前記利用者の特徴情報に対応する前記顧客の特徴情報を特定する特定手段と、
特定された前記顧客の特徴情報に関連付けられた前記顧客の精算情報を取得する精算情報取得手段と、
取得された前記精算情報に基づいて、前記精算装置に前記顧客別に精算処理させる精算制御手段と、
をさらに備える、
請求項２９．に記載の情報処理システム。
３１．  前記精算処理を行う前に、前記精算情報取得手段により取得された顧客の前記精算情報を前記利用者に提示する提示手段と、
提示された前記顧客の精算情報に関し、当該利用者による承認操作を受け付ける受付手段と、をさらに備え、
前記精算制御手段は、
前記受付手段により前記承認操作を受け付けたとき、承認された前記顧客の精算情報に基づいて前記精算装置に精算処理させる、
３０．に記載の情報処理システム。
３２．  前記特定手段により特定された顧客に対応する、少なくとも１人の前記利用者の撮像画像を表示する表示手段と、
前記撮像画像が表示された前記利用者の中から精算処理する少なくとも１人の顧客の選択を受け付ける受付手段と、をさらに備え、
前記精算情報取得手段は、選択された前記顧客の精算情報を取得し、
前記精算制御手段は、取得された前記顧客の前記精算情報に基づいて、前記精算装置に精算処理させる、
３０．または３１．に記載の情報処理システム。
【符号の説明】
【０１４８】
１  情報処理システム
１０  コンピュータ
２  ＣＰＵ
３  メモリ
４  通信ユニット
６  表示装置
７  入出力装置
９  プログラム
２０  オーダ受付端末
２２  撮像装置
３０  オーダ受付装置
４０  サーバ装置
４２  データベース
５０  精算装置
６０  ＰＯＳレジスタ
７０  ルータ
７２  ＬＡＮ
７４  ネットワーク
１０２  オーダ受付部
１０４  画像取得部
１０６  精算情報生成部
１３０  精算情報
２０４  第１画像取得部
２０６  第１抽出部
２２２  第２画像取得部
２２４  第２抽出部
２２６  特定部
２２８  精算情報取得部
２３０  精算制御部
【図１】
0006477107.tif 000002
【図２】
0006477107.tif 000003
【図３】
0006477107.tif 000004
【図４】
0006477107.tif 000005
【図５】
0006477107.tif 000006
【図６】
0006477107.tif 000007
【図７】
0006477107.tif 000008
【図８】
0006477107.tif 000009
【図９】
0006477107.tif 000010
【図１０】
0006477107.tif 000011
【図１１】
0006477107.tif 000012
【図１２】
0006477107.tif 000013
【図１３】
0006477107.tif 000014