(57)【要約】【課題】利用者の状況に応じたメニューを提示することを課題とする。【解決手段】サーバ装置２０は、複数の選択対象であるメニュー情報と利用者Ａの健康管理情報とを記憶しておき、端末装置１０が利用者Ａの顔画像を撮像する撮像工程（Ｓ１）と、サーバ装置２０が、撮像された顔画像をもとに利用者Ａの心身状態を推定した心身状態結果とメニュー情報と健康管理情報とをもとに、心身状態結果に適した１以上の候補メニューを抽出する候補メニュー抽出工程（Ｓ３）と、端末装置１０が、候補メニュー抽出工程で抽出した１以上の候補メニューを表示する表示工程（Ｓ５）とを含む。【選択図】図１
2019053457.tif 000002
【特許請求の範囲】
【請求項１】
選択対象となる複数のメニューから選択した候補メニューを利用者に提示する候補メニュー提示システムであって、
前記利用者に係る画像を撮像する撮像部と、
前記撮像部により撮像された画像に基づいて前記利用者の状態を推定する状態推定部と、
前記状態推定部により推定された状態に基づいて、前記選択対象となる複数のメニューから前記利用者に適した候補メニューを抽出する候補メニュー抽出部と、
前記候補メニュー抽出部により抽出された候補メニューを提示する提示部と
を備えたことを特徴とする候補メニュー提示システム。
【請求項２】
前記利用者の健康管理情報を記憶する記憶部をさらに備え、
前記候補メニュー抽出部は、
前記状態推定部により推定された状態及び前記健康管理情報に基づいて、前記選択対象となる複数のメニューから前記利用者に適した候補メニューを抽出する
ことを特徴とする請求項１に記載の候補メニュー提示システム。
【請求項３】
前記健康管理情報は、少なくとも疾病履歴情報及び食事制限情報を含むことを特徴とする請求項２に記載の候補メニュー提示システム。
【請求項４】
前記状態推定部により推定された状態及び前記健康管理情報に基づいて、前記利用者に適した健康アドバイス情報を生成する健康アドバイス情報生成部を備え、
前記提示部は、
前記候補メニューとともに前記健康アドバイス情報を提示することを特徴とする請求項２又は３に記載の候補メニュー提示システム。
【請求項５】
前記記憶部は、前記利用者の行動予定に係る行動予定情報を記憶し、
前記候補メニュー抽出部は、
前記状態推定部により推定された状態、前記健康管理情報及び行動予定情報に基づいて、前記選択対象となる複数のメニューから前記利用者に適した候補メニューを抽出する
ことを特徴とする請求項２に記載の候補メニュー提示システム。
【請求項６】
前記撮像部は、
所定の入退室管理システムに設けられた利用者の顔画像を撮像する顔画像撮像部であることを特徴とする請求項１乃至５のいずれか一つに記載の候補メニュー提示システム。
【請求項７】
前記提示部は、
前記候補メニュー抽出部により抽出された候補メニューを前記利用者により操作される利用者端末の表示部に表示する
ことを特徴とする請求項１乃至６のいずれか一つに記載の候補メニュー提示システム。
【請求項８】
前記複数のメニューは食事メニューであり、
前記候補メニュー抽出部により抽出された候補メニューには、少なくも健脳食が含まれることを特徴とする請求項１〜７のいずれか一つに記載の候補メニュー提示システム。
【請求項９】
選択対象となる複数のメニューから選択した候補メニューを利用者端末に出力する管理装置であって、
利用者に係る画像を取得する取得部と、
前記取得部により撮像された画像に基づいて前記利用者の状態を推定する状態推定部と、
前記状態推定部により推定された状態に基づいて、前記選択対象となる複数のメニューから前記利用者に適した候補メニューを抽出する候補メニュー抽出部と、
前記候補メニュー抽出部により抽出された候補メニューを前記利用者端末に出力する出力部と
を備えたことを特徴とする管理装置。
【請求項１０】
選択対象となる複数のメニューから選択した候補メニューを利用者に提示する候補メニュー提示システムにおける候補メニュー提示方法であって、
前記利用者に係る画像を撮像部により撮像する撮像工程と、
前記撮像部により撮像された画像に基づいて前記利用者の状態を推定する状態推定工程と、
前記状態推定工程により推定された状態に基づいて、前記選択対象となる複数のメニューから前記利用者に適した候補メニューを抽出する候補メニュー抽出工程と、
前記候補メニュー抽出工程により抽出された候補メニューを提示する提示工程と
を含んだことを特徴とする候補メニュー提示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、利用者の状況に応じたメニューを提示することができる候補メニュー提示システム、管理装置及び候補メニュー提示方法に関する。
【背景技術】
【０００２】
従来、糖尿病などの各種疾病を予防して健康を維持・増進するため、また理想的な体型又は体重を維持するために、食事を適正に管理することが望ましい。特に、企業等に所属する社員の場合には、社内に設けられた食堂で食事を取ることが多いため、社員が食堂でいかなる食事を取るかが重要な要素となる。
【０００３】
このため、社員等の利用者の健康管理を行う従来技術が知られており、例えば特許文献１には、食堂を利用する利用者（社員）が取った食事の栄養摂取情報を算出し、算出された栄養摂取情報を長期にわたって蓄積し、蓄積された栄養摂取情報と、利用者の健康診断情報とを分析した健康管理情報を出力する健康管理システムが開示されている。
【０００４】
また、特許文献２には、利用者がバランスよく食事を取るために、個人健康管理情報、健康管理データベース及び料理データベースから、利用者の健康管理に最適な料理を選択できるようにする自動料理選択管理装置が記載されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平７−９３２８７号公報
【特許文献２】特開２００１−３３８０７３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、上記特許文献１に記載された利用者の健康管理情報は、栄養学と医学などに基づいて画一的に分析した結果であり、特許文献２によれば、かかる画一的な健康管理情報をもとに食事メニューを選択している。このため、これらの特許文献を用いたとしても、その時々の利用者の体調を踏まえて食事メニューを提示することができないという問題がある。
【０００７】
例えば、社員食堂で食事を取る社員等の利用者は、その日の身体的状況又は心理的状況な影響により食欲が湧かない場合がある。また、一般的に健康に良いとされる食材であったとしても、この食材を食べたくない場合もある。利用者がこのような状況であるにも関わらず、このような事情を無視して画一的な食事メニューを提示するのは妥当ではない。
【０００８】
このため、利用者の事情に応じた食事メニューをいかに提示するかが重要な課題となっている。なお、かかる課題は、食事メニューだけではなく運動メニュー等の各種メニューを提示する場合にも同様に生ずる課題である。
【０００９】
本発明は、上記従来技術の問題点（課題）を解決するためになされたものであって、利用者の状況に応じたメニューを提示することができる候補メニュー提示システム、管理装置及び候補メニュー提示方法を提供することを目的とする。
【課題を解決するための手段】
【００１０】
上記の課題を解決するため、本発明は、選択対象となる複数のメニューから選択した候補メニューを利用者に提示する候補メニュー提示システムであって、前記利用者に係る画像を撮像する撮像部と、前記撮像部により撮像された画像に基づいて前記利用者の状態を推定する状態推定部と、前記状態推定部により推定された状態に基づいて、前記選択対象となる複数のメニューから前記利用者に適した候補メニューを抽出する候補メニュー抽出部と、前記候補メニュー抽出部により抽出された候補メニューを提示する提示部とを備えたことを特徴とする。
【００１１】
また、本発明は、上記の発明において、前記利用者の健康管理情報を記憶する記憶部をさらに備え、前記候補メニュー抽出部は、前記状態推定部により推定された状態及び前記健康管理情報に基づいて、前記選択対象となる複数のメニューから前記利用者に適した候補メニューを抽出することを特徴とする。
【００１２】
また、本発明は、上記の発明において、前記健康管理情報は、少なくとも疾病履歴情報及び食事制限情報を含むことを特徴とする。
【００１３】
また、本発明は、上記の発明において、前記状態推定部により推定された状態及び前記健康管理情報に基づいて、前記利用者に適した健康アドバイス情報を生成する健康アドバイス情報生成部を備え、前記提示部は、前記候補メニューとともに前記健康アドバイス情報を提示することを特徴とする。
【００１４】
また、本発明は、上記の発明において、前記記憶部は、前記利用者の行動予定に係る行動予定情報を記憶し、前記候補メニュー抽出部は、前記状態推定部により推定された状態、前記健康管理情報及び行動予定情報に基づいて、前記選択対象となる複数のメニューから前記利用者に適した候補メニューを抽出することを特徴とする。
【００１５】
また、本発明は、上記の発明において、前記撮像部は、所定の入退室管理システムに設けられた利用者の顔画像を撮像する顔画像撮像部であることを特徴とする。
【００１６】
また、本発明は、上記の発明において、前記提示部は、前記候補メニュー抽出部により抽出された候補メニューを前記利用者により操作される利用者端末の表示部に表示することを特徴とする。
【００１７】
また、本発明は、上記の発明において、前記複数のメニューは食事メニューであり、前記候補メニュー抽出部により抽出された候補メニューには、少なくも健脳食が含まれることを特徴とする。
【００１８】
また、本発明は、選択対象となる複数のメニューから選択した候補メニューを利用者端末に出力する管理装置であって、利用者に係る画像を取得する取得部と、前記取得部により撮像された画像に基づいて前記利用者の状態を推定する状態推定部と、前記状態推定部により推定された状態に基づいて、前記選択対象となる複数のメニューから前記利用者に適した候補メニューを抽出する候補メニュー抽出部と、前記候補メニュー抽出部により抽出された候補メニューを前記利用者端末に出力する出力部とを備えたことを特徴とする。
【００１９】
また、本発明は、選択対象となる複数のメニューから選択した候補メニューを利用者に提示する候補メニュー提示システムにおける候補メニュー提示方法であって、前記利用者に係る画像を撮像部により撮像する撮像工程と、前記撮像部により撮像された画像に基づいて前記利用者の状態を推定する状態推定工程と、前記状態推定工程により推定された状態に基づいて、前記選択対象となる複数のメニューから前記利用者に適した候補メニューを抽出する候補メニュー抽出工程と、前記候補メニュー抽出工程により抽出された候補メニューを提示する提示工程とを含んだことを特徴とする。
【発明の効果】
【００２０】
本発明によれば、利用者の状況に応じたメニューを提示することができる。
【図面の簡単な説明】
【００２１】
【図１】図１は、本実施例に係る候補メニュー表示システムの概念を説明するための説明図である。
【図２】図２は、図１に示した端末装置の構成を示す機能ブロック図である。
【図３】図３は、図１に示したサーバ装置の構成を示す機能ブロック図である。
【図４】図４は、図１に示した候補メニュー表示システムによる候補メニュー及び健康アドバイスの表示処理手順を示すシーケンス図である。
【図５】図５は、変形例１に係る候補メニュー表示システムを説明するための説明図である。
【図６】図６は、変形例２に係る候補メニュー表示システムを説明するための説明図である。
【図７】図７は、変形例３に係る候補メニュー表示システムを説明するための説明図である。
【発明を実施するための形態】
【００２２】
以下に、添付図面を参照して、本発明に係る候補メニュー表示システムの好適な実施例を詳細に説明する。以下に示す実施例では、候補メニューの「提示」の一例として、候補メニューを「表示」する場合を示すこととする。また、企業などの組織内で健康管理される社員である利用者が、社員食堂などで食事メニューを選択する場合を中心に説明する。
【実施例】
【００２３】
まず、本実施例に係る候補メニュー表示システムの概念について説明する。図１は、本実施例に係る候補メニュー表示システムの概念を説明するための説明図である。同図に示す利用者Ａは、企業内に設けられた社員食堂を利用する社員である。この利用者Ａは、企業内で健康状態を管理されている。
【００２４】
具体的には、図１に示すように、まず、利用者Ａは、該利用者Ａが操作する端末装置１０の入力部１１を操作し、撮像部１２により自身の顔画像を撮像する（ステップＳ１）。端末装置１０は、撮像部１２により撮像された顔画像を、ネットワークＮを介してサーバ装置２０に送信する（ステップＳ２）。
【００２５】
サーバ装置２０は、端末装置１０から受信した顔画像をもとに利用者Ａを顔認証し、該利用者Ａの社員識別情報を取得する。また、サーバ装置２０は、端末装置１０から受信した顔画像をもとに利用者Ａの状態を推定する。さらに、サーバ装置２０は、推定した利用者Ａの状態、利用者Ａの健康管理情報及び選択対象となる食事メニュー情報に基づいて、利用者Ａの現在の心身の健康状態を考慮した適切な食事の候補メニューを抽出する（ステップＳ３）。その後、サーバ装置２０は、抽出した候補メニューを利用者Ａの端末装置１０に送信する（ステップＳ４）。端末装置１０は、この候補メニューを受信すると、この候補ニューを表示部１３の候補メニュー表示領域Ｅ１に表示する（ステップＳ５）。
【００２６】
上記一連の処理を行うことにより、利用者Ａは、自身の現在の状態に適した候補メニューを知ることができる。特に、この候補メニューは、メニュー選択時における利用者Ａの身体的状態のみならず、精神的状態をも考慮したものとなる。
【００２７】
＜端末装置１０の構成＞
次に、図１に示した端末装置１０の構成について説明する。図２は、図１に示した端末装置１０の構成を示す機能ブロック図である。同図に示すように、端末装置１０は、入力部１１、表示部１３、撮像部１２、通信インターフェース部１４、記憶部１５及び制御部１６を有する。
【００２８】
入力部１１は、キーボードやマウスなどの入力デバイスであり、表示部１３は、液晶パネルやディスプレイなどの表示デバイスである。なお、入力部１１と表示部１３とは、タッチパネルなどの入出力デバイスであってもよい。表示部１３には、候補メニューを表示する候補メニュー表示領域Ｅ１と、推定された利用者Ａの状態をもとに生成された健康アドバイス情報を表示する健康アドバイス表示領域Ｅ２とが設けられる。
【００２９】
撮像部１２は、利用者Ａの顔画像を撮像する撮像デバイスである。通信インターフェース部１４は、ネットワークＮを介してサーバ装置２０等と通信を行うための通信インターフェース部である。記憶部１５は、ハードディスク装置又はフラッシュメモリ等の記憶デバイスである。
【００３０】
制御部１６は、端末装置１０を全体制御する制御部である。制御部１６は、候補メニュー表示処理部１６ａ及び健康アドバイス表示処理部１６ｂを有する。実際には、これらの機能部に対応するプログラムを図示しないＲＯＭや不揮発性メモリに記憶しておき、これらのプログラムをＣＰＵにロードして実行することにより、候補メニュー表示処理部１６ａ及び健康アドバイス表示処理部１６ｂにそれぞれ対応するプロセスを実行させることになる。
【００３１】
候補メニュー表示処理部１６ａは、サーバ装置２０から送信された候補メニューを候補メニュー表示領域Ｅ１に表示する処理部である。健康アドバイス表示処理部１６ｂは、サーバ装置２０から送信された健康アドバイスを健康アドバイス表示領域Ｅ２に表示する処理部である。
【００３２】
＜サーバ装置２０の構成＞
次に、図１に示したサーバ装置２０の構成について説明する。図３は、図１に示したサーバ装置２０の構成を示す機能ブロック図である。同図に示すように、サーバ装置２０は、入力部２１、表示部２２、通信インターフェース部２４、記憶部２５及び制御部２６を有する。
【００３３】
入力部２１は、キーボード又はマウス等の入力デバイスである。表示部２２は、液晶パネルやディスプレイ等の表示デバイスである。通信インターフェース部２４は、ネットワークＮを介して端末装置１０等と通信を行うためのインターフェース部である。
【００３４】
記憶部２５は、ハードディスク装置又はフラッシュメモリ等の記憶デバイスであり、顔認証データベース２５ａ、心身状態結果情報２５ｂ、メニュー情報２５ｃ、健康管理情報２５ｄ及び行動予定情報２５ｅ等を記憶する。顔認証データベース２５ａは、利用者Ａの顔認証を行うために予め登録されたデータベースである。心身状態結果情報２５ｂは、後述する心身状態推定部２６ｂによって推定された心身状態の結果情報である。
【００３５】
メニュー情報２５ｃは、あらかじめ設定された社員食堂で提供可能な食事のメニューである。このメニューの中には健脳食が含まれる。健脳食とは、セレトニンや、ストレスにかかわるカルシウム、マグネシウムなどの栄養素が含まれ、脳を活性化する食事である。
【００３６】
健康管理情報２５ｄは、健康診断結果、食堂などで選択した食事メニューから算出した栄養摂取情報、疾病履歴情報、食事制限情報などが含まれる利用者毎の健康管理に関する情報である。行動予定情報２５ｅは、利用者毎の会議、出張、休暇などの行動予定に関する情報である。
【００３７】
制御部２６は、サーバ装置２０を全体制御するための制御部であり、顔認証部２６ａ、心身状態推定部２６ｂ、候補メニュー抽出部２６ｃ及び健康アドバイス生成部２６ｄを有する。実際には、これらの機能部に対応するプログラムを図示しないＲＯＭや不揮発性メモリに記憶しておき、これらのプログラムをＣＰＵにロードして実行することにより、顔認証部２６ａ、心身状態推定部２６ｂ、候補メニュー抽出部２６ｃ及び健康アドバイス生成部２６ｄにそれぞれ対応するプロセスを実行させることになる。
【００３８】
顔認証部２６ａは、顔認証データベース２５ａを参照して、端末装置１０から受信した顔画像の特徴をもとに利用者Ａの社員識別情報を取得する顔認証処理を行う。
【００３９】
心身状態推定部２６ｂは、端末装置１０から受信した顔画像をもとに、利用者Ａの心身状態を推定する。推定された心身推定状態は、心身状態結果情報２５ｂとして記憶部２５に一時記憶される。
【００４０】
心身状態推定部２６ｂは、例えば、人工知能（ＡＩ：Artificial Intelligence）技術等を用いて実現することができる。具体的には、人の顔画像及び正解データとしての心身状態を学習データとして多層ニューラルネットワークに学習させる。これにより、多層ニューラルネットワークに利用者の顔画像を入力すると、該利用者の心身状態の推定結果が出力されることになる。なお、ここでは「怒り」、「笑い」などの利用者の感情を推定するのではなく、利用者Ａの食事メニューに直結する心理状態を推定する。
【００４１】
候補メニュー抽出部２６ｃは、心身状態推定部２６ｂにより推定された利用者Ａの心身状態結果情報２５ｂ、メニュー情報２５ｃ及び利用者Ａの健康管理情報２５ｄに基づいて、心身状態結果に適した候補メニューを抽出する。例えば、候補メニュー抽出部２６ｃは、心身状態が「だるい状態」を示す場合であっても、健康管理情報から利用者Ａが糖尿病である場合には、炭水化物の少ないメニューを抽出する。なお、候補メニュー抽出部２６ｃにより抽出されるメニューには、少なくとも上記の健脳食が含まれることが好ましい。また、この候補メニューは端末装置１０に送信され、候補メニュー表示領域Ｅ１内に表示される。
【００４２】
また、候補メニュー抽出部２６ｃは、利用者Ａの行動予定情報２５ｅをさらに加味して候補メニューを抽出することもできる。例えば、利用者Ａの行動予定として、食後に会議が控えている場合には、糖分が多い候補メニューを抽出し、食後に動き回る業務が控えている場合には、炭水化物の多い候補メニューを抽出する。なお、食後の行動予定だけではなく、食前の行動予定を参照して候補メニューを抽出する。
【００４３】
健康アドバイス生成部２６ｄは、心身状態推定部２６ｂが推定した心身状態結果情報２５ｂ及び健康管理情報２５ｄに基づいて、利用者Ａの現在の心身状態結果に適した健康アドバイスを生成する。例えば、健康アドバイスは、日光浴又は素足での散歩を提案するアドバイス等である。なお、この健康アドバイスは端末装置１０に送信され、健康アドバイス表示領域Ｅ２内に表示される。
【００４４】
＜候補メニュー及び健康アドバイスの表示処理手順＞
次に、候補メニュー及び健康アドバイスの表示処理手順について説明する。図４は、図１に示した候補メニュー表示システムにおける候補メニュー及び健康アドバイスの表示処理手順を示すシーケンス図である。
【００４５】
同図に示すように、まず、サーバ装置２０の記憶部２５には、少なくともメニュー情報２５ｃ及び健康管理情報２５ｄが予め記憶される（ステップＳ１００）。なお、顔認証データベース２５ａ及び行動予定情報２５ｅについても予め記憶部２５に記憶される。
【００４６】
その後、端末装置１０の制御部１６は、入力部１１から候補メニュー表示の指示を受け付けたか否かを判定する（ステップＳ１０１）。候補メニュー表示の指示を受け付けていない場合には（ステップＳ１０１；Ｎｏ）、かかる判定処理を繰り返す。
【００４７】
これに対して、候補メニュー表示の指示を受け付けた場合には（ステップＳ１０１；Ｙｅｓ）、撮像部１２によって利用者Ａの顔画像を撮像する（ステップＳ１０２）。その後、制御部１６は、撮像された顔画像をサーバ装置２０に送信する（ステップＳ１０３）。
【００４８】
そして、顔画像を受信したサーバ装置２０の顔認証部２６ａは、顔画像をもとに顔認証処理を行い、利用者識別情報を取得する（ステップＳ１０４）。その後、心身状態推定部２６ｂは、顔画像に基づいて利用者の心身状態を推定する心身状態推定処理を行う（ステップＳ１０５）。
【００４９】
また、候補メニュー抽出部２６ｃは、心身状態推定部２６ｂにより推定された心身状態結果情報２５ｂ、メニュー情報２５ｃ及び健康管理情報２５ｄに基づいて、利用者Ａの心身状態結果に適した候補メニューを抽出する候補メニュー抽出処理を行う（ステップＳ１０６）。なお、候補メニュー抽出処理では、行動予定情報２５ｅを加味して候補メニューを抽出することもできる。その後、制御部２６は、抽出された候補メニューを端末装置１０に送信する（ステップＳ１０７）。
【００５０】
かかる候補メニューを受信した端末装置１０の候補メニュー表示処理部１６ａは、該候補メニューを候補メニュー表示領域Ｅ１に表示する処理を行う（ステップＳ１０８）。
【００５１】
一方、サーバ装置２０の健康アドバイス生成部２６ｄは、心身状態推定部２６ｂにより推定された心身状態結果情報２５ｂ及び健康管理情報２５ｄに基づいて、現在の利用者Ａの心身状態結果に適した健康アドバイスを生成する健康アドバイス生成処理を行う（ステップＳ１０９）。その後、制御部２６は、健康アドバイス生成部２６ｄにより生成された健康アドバイスを端末装置１０に送信し（ステップＳ１１０）、サーバ装置１６側の処理を終了する。
【００５２】
健康アドバイスを受信した端末装置１０の健康アドバイス表示処理部１６ｂは、健康アドバイスを健康アドバイス表示領域Ｅ２に表示する処理を行い（ステップＳ１１１）、端末装置１０側の処理を終了する。
【００５３】
なお、図４では、候補メニュー表示の指示があった場合に（ステップＳ１０１；Ｙｅｓ）、候補メニュー及び健康アドバイスの表示処理を開始することとしたが、本発明はこれに限定されるものではなく、食事の時刻に近づいた場合に、候補メニュー及び健康アドバイスの表示処理を開始することもできる。
【００５４】
また、本実施例の端末装置１０は、利用者Ａの机上に配置される場合を示したが、本発明はこれに限定されるものではなく、端末装置１０は、食堂の券売機に配置することもできる。この場合、表示部１３は、券売機の表示部を兼用することが望ましい。
【００５５】
さらに、本実施例では、候補メニュー抽出部２６ｃが、心身状態結果情報２５ｂと健康管理情報２５ｄとを用いて候補メニューを抽出する場合を示したが、端末装置１０は、顔画像の送信とともに利用者Ａ自身が入力した健康状態を送信し、健康管理情報２５ｄに、この健康状態を含めるようにしてもよい。これにより、候補メニュー抽出部２６ｃは、さらに利用者Ａに適した候補メニューを抽出することが可能になる。また、健康アドバイス生成部２６ｄは、利用者Ａにより一層適した健康アドバイスを生成することが可能になる。
【００５６】
上述してきたように、本実施例では、利用者Ａによる食事のメニュー選択に際して、利用者Ａの心身状態を反映した、きめの細かい候補メニューを端末装置１０に表示するよう構成したので、利用者Ａに適した候補メニュー選を表示することが可能となる。特に、本実施例で表示される候補メニューには、食事のメニュー選択時という直近の心身状態であり、かつ、精神的状態を加味した心身状態を反映しているので、利用者Ａの動的な健康状態に適したものとなる。また、本実施例では、利用者Ａの行動予定も含めて候補メニューを抽出することとしたので、利用者により一層適したメニューを表示することができる。
【００５７】
＜変形例１＞
なお、上記端末装置１０は、図５に示すように、利用者Ａが携帯可能な携帯端末装置３０とすることもできる。この場合、タッチパネル３３は、入力部１１及び表示部１３に対応し、候補メニューはタッチパネル上の候補メニュー表示領域Ｅ１に表示される。撮像部３２は、撮像部１２に対応する。端末装置１０として携帯端末装置３０を用いた変形例１では、利用者Ａが机上と離れた場所に所在する場合であっても候補メニューを表示することができる。
【００５８】
＜変形例２＞
上記の実施例では、端末装置１０に撮像部１２を設け、この撮像部１２により撮像された顔画像を用いて心身状態推定部２６ｂが利用者Ａの心身状態を推定することとしたが、本変形例２に示すように、撮像部１２の機能を入退室管理サーバ４０の撮像部を利用することもできる。
【００５９】
図６は、変形例２に係る候補メニュー表示システムを説明するための説明図である。同図に示すように、本変形例２では、図１に示した候補メニュー表示システムのネットワークＮに入退室管理サーバ４０が接続された状況を示している。入退室管理サーバ４０は、撮像部４２によって撮像された顔画像に基づいて入退室者の顔認証を行う装置である。
【００６０】
入退室管理サーバ４０は、ゲートの開閉を行うゲート装置４１を接続し、顔認証結果がゲート通過許可である場合に、ゲートを開状態にする処理を行う。本変形例２では、撮像部４２が撮像した顔画像をサーバ装置２０に送信し、心身状態推定部２６ｂの心身推定処理に用いるようにしている。
【００６１】
本変形例２では、利用者Ａの顔画像が必ず取得される入退室管理サーバ４０を用いることとしているので、入退室管理サーバ４０が導入されている場合には有利である。なお、端末装置１０の撮像部１２を併用して心身状態推定を行うこともできる。
【００６２】
本変形例２では、複数の入退室システムが存在する場合や複数回の入退室があった場合に、利用者のメニュー選択の直前期間における顔画像の情報量を増やすことができ、利用者Ａの心身状態を一層詳細に推定することができる。特に、入退室システムの入退室管理サーバ４０で取得した顔画像の他に端末装置１０で取得した顔画像を用いることによって、さらに推定精度を上げることができる。
【００６３】
なお、上記の顔画像以外に、利用者Ａの体全体の情報を含めてもよい。例えば、利用者Ａの歩行状態が俯き加減、側方に傾斜、手で頭を抱えている、あくびが多いなどの情報を加えて心身状態推定を行ってもよい。また、利用者の連続的な動きを示すアピアランスの画像を用いることもできる。
【００６４】
＜変形例３＞
上記の実施例では候補メニューを表示した場合であっても、利用者Ａが、表示した候補メニューを選択したか否かはわからない。本変形例３では、食堂の精算装置５０の結果をサーバ装置２０に送信し、利用者Ａが選択したメニューをサーバ装置２０に送信し、表示した候補メニューを利用者Ａが選択したか否かを含むメニュー選択情報を健康管理情報２５ｄに追加するようにしている。
【００６５】
図７は、変形例３に係る候補メニュー表示システムを説明するための説明図である。同図に示すように、本変形例３では、図１に示した候補メニュー表示システムのネットワークＮに精算装置５０及び決済サーバ６０が接続される。
【００６６】
精算装置５０は、検出部５１、撮像部５２及び精算機５３を有する。検出部５１は、トレー上の皿に搭載されたＲＦＩＤタグを検出し、トレー上に乗せた食事内容及び金額を検出する。撮像部５２は、利用者Ａの顔画像を撮像し、顔認識処理を行い、利用者Ａの認証処理を行う。精算機５３は、顔認証された利用者Ａが購入した食事の内容及び金額をサーバ装置２０及び決済サーバ６０に送信する。
【００６７】
サーバ装置２０は、利用者Ａが購入した食事の内容を健康管理情報２５ｄとして更新する。また、決済サーバ６０は、利用者Ａが購入した食事の内容及び金額をもとに利用者Ａの給与計算の決済を行う。
【００６８】
本変形例３では、実際に摂取した食事の内容が健康管理情報２５ｄとして更新処理されるため、次回以降における候補メニュー抽出処理を精度高く行うことができる。
【００６９】
なお、上記の実施例及び変形例１〜３では、利用者Ａの認証として顔認証処理を行っていたが、本発明はこれに限定されるものではなく、利用者認証は、ＩＤカードなどの記憶媒体やパスワード入力であってもよい。
【００７０】
また、上記の実施例及び変形例１〜３では、食事メニューを選択対象とする候補メニュー表示システムについて説明したが、本発明はこれに限定されるものではなく、顔画像をもとに利用者の心身状態を推定し、この推定結果を用いて候補メニューを表示する様々なケースに適用することができる。例えば、スポーツジムなどで複数の運動メニューから利用者Ａに適した候補メニューを表示する場合にも適用することができる。また、上記の実施例及び変形例１〜３では、候補メニューを表示する場合を示したが、音声出力等により提示することもできる。
【００７１】
なお、上記の実施例及び変形例１〜３で図示した各構成は機能概略的なものであり、必ずしも物理的に図示の構成をされていることを要しない。すなわち、各装置の分散・統合の形態は図示のものに限られず、その全部又は一部を各種の負荷や使用状況などに応じて、任意の単位で機能的又は物理的に分散・統合して構成することができる。
【産業上の利用可能性】
【００７２】
本発明に係る候補メニュー提示システム、管理装置及び候補メニュー提示方法は、利用者の状況に応じたメニューを提示する場合に有用である。
【符号の説明】
【００７３】
１０  端末装置
１１，２１  入力部
１２，３２，４２，５２  撮像部
１３、２２  表示部
１４，２４  通信インターフェース部
１５，２５  記憶部
１６ａ  候補メニュー表示処理部
１６ｂ  健康アドバイス表示処理部
１６，２６  制御部
２０  サーバ装置
２５ａ  顔認証データベース
２５ｂ  心身状態結果情報
２５ｃ  メニュー情報
２５ｄ  健康管理情報
２５ｅ  行動予定情報
２６ａ  顔認証部
２６ｂ  心身状態推定部
２６ｃ  候補メニュー抽出部
２６ｄ  健康アドバイス生成部
３０  携帯端末装置
３３  タッチパネル
４０  入退室管理サーバ
４１  ゲート装置
５０  精算装置
５１  検出部
５３  精算機
６０  決済サーバ
Ａ  利用者
Ｅ１  候補メニュー表示領域
Ｅ２  健康アドバイス表示領域
Ｎ  ネットワーク
【図１】
2019053457.tif 000003
【図２】
2019053457.tif 000004
【図３】
2019053457.tif 000005
【図４】
2019053457.tif 000006
【図５】
2019053457.tif 000007
【図６】
2019053457.tif 000008
【図７】
2019053457.tif 000009