(57)【要約】【課題】リアルタイムに飲食の順番をナビゲートすることで、ユーザの健康を促進させることが可能な情報処理装置及び記憶媒体を提案する。【解決手段】ユーザの飲食を撮像した画像から飲食対象の複数の飲食物を検出する検出部と、所定の目的を満たす順序で前記ユーザが前記検出部により検出された複数の前記飲食物を摂取するよう、複数の前記飲食物から少なくとも次に摂取すべき前記飲食物を実時間で推薦する推薦部と、を備える情報処理装置。【選択図】図１
2014211749.tif 000002
【特許請求の範囲】
【請求項１】
ユーザの飲食を撮像した画像から飲食対象の複数の飲食物を検出する検出部と、
所定の目的を満たす順序で前記ユーザが前記検出部により検出された複数の前記飲食物を摂取するよう、複数の前記飲食物から少なくとも次に摂取すべき前記飲食物を実時間で推薦する推薦部と、
を備える情報処理装置。
【請求項２】
前記推薦部は、次に摂取すべき前記飲食物を強調表示する強調画像を生成し、表示部に表示させる、請求項１に記載の情報処理装置。
【請求項３】
前記推薦部は、次に摂取すべきでない飲食物を抑制表示する抑制画像を生成し、表示部に表示させる、請求項１に記載の情報処理装置。
【請求項４】
前記情報処理装置は、前記ユーザの過去の飲食の履歴を蓄積する蓄積部をさらに備え、
前記推薦部は、さらに前記蓄積部により蓄積された前記履歴に基づいて少なくとも次に摂取すべき前記飲食物を推薦する、請求項１に記載の情報処理装置。
【請求項５】
前記情報処理装置は、前記ユーザの飲食を撮像した画像から前記ユーザの飲食の状況を認識する認識部をさらに備え、
前記推薦部は、さらに前記認識部により認識された前記状況に基づいて少なくとも次に摂取すべき前記飲食物を推薦する、請求項１に記載の情報処理装置。
【請求項６】
前記情報処理装置は、受信した情報に基づいて前記ユーザを誘導する機能を有する食事用器具に対して、前記推薦部により推薦された前記飲食物に誘導する誘導情報を送信する送信部をさらに備える、請求項１に記載の情報処理装置。
【請求項７】
前記強調画像は、前記飲食物の外観を美化した画像である、請求項２に記載の情報処理装置。
【請求項８】
前記抑制画像は、前記飲食物の外観を劣化させた画像である、請求項３に記載の情報処理装置。
【請求項９】
前記抑制画像は、前記飲食物を前記ユーザから遮蔽する画像である、請求項３に記載の情報処理装置。
【請求項１０】
前記所定の目的を満たす順序は、前記ユーザの血糖値の上昇を抑制する順序である、請求項１に記載の情報処理装置。
【請求項１１】
コンピュータに、
ユーザの飲食を撮像した画像から飲食対象の複数の飲食物を検出するステップと、
所定の目的を満たす順序で前記ユーザが検出された複数の前記飲食物を摂取するよう、複数の前記飲食物から少なくとも次に摂取すべき前記飲食物を実時間で推薦するステップと、
を実行させるためのプログラムが記憶された記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、情報処理装置及び記憶媒体に関する。
【背景技術】
【０００２】
近年、食生活が豊かになるにつれて、肥満や高脂血症、高血糖症などの様々な症状により、人の健康が害されるおそれが増加している。このため、人の健康を食事の面から改善するための、食生活を支援する様々な技術が開発されている。
【０００３】
例えば、下記特許文献１では、食事中のユーザの心拍数をリアルタイムに監視して、心拍数の変動に基づいて適度な速度で食事摂取を行うようユーザをナビゲートする技術が開示されている。
【０００４】
また、下記特許文献２では、食事前、食事中、食事後の撮像画像を栄養士や医師などの指導者に送信して、遠隔地にいる指導者から栄養バランスや献立の指導を受ける技術が開示されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００７−４８１８０号公報
【特許文献２】特開２００２−４８１８０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
一般的に、同じ飲食物であっても、食べる順番によって栄養価の吸収率が変化することが知られている。しかしながら、上記特許文献では、このような食事の順番による栄養価の吸収率の変化を踏まえて、リアルタイムに食事の順番をナビゲートすることについては何ら言及されていなかった。
【０００７】
そこで、本開示では、リアルタイムに飲食の順番をナビゲートすることで、ユーザの健康を促進させることが可能な、新規かつ改良された情報処理装置及び記憶媒体を提案する。
【課題を解決するための手段】
【０００８】
本開示によれば、ユーザの飲食を撮像した画像から飲食対象の複数の飲食物を検出する検出部と、所定の目的を満たす順序で前記ユーザが前記検出部により検出された複数の前記飲食物を摂取するよう、複数の前記飲食物から少なくとも次に摂取すべき前記飲食物を実時間で推薦する推薦部と、を備える情報処理装置が提供される。
【０００９】
また、本開示によれば、コンピュータに、ユーザの飲食を撮像した画像から飲食対象の複数の飲食物を検出するステップと、所定の目的を満たす順序で前記ユーザが検出された複数の前記飲食物を摂取するよう、複数の前記飲食物から少なくとも次に摂取すべき前記飲食物を実時間で推薦するステップと、を実行させるためのプログラムが記憶された記憶媒体が提供される。
【発明の効果】
【００１０】
以上説明したように本開示によれば、リアルタイムに飲食の順番をナビゲートすることで、ユーザの健康を促進させることが可能である。
【図面の簡単な説明】
【００１１】
【図１】本開示の一実施形態に係る推薦処理の概要を示す説明図である。
【図２】第１の実施形態に係るＨＭＤの内部構成を示すブロック図である。
【図３】第１の実施形態に係るＨＭＤが表示する画像の一例を示す説明図である。
【図４】第１の実施形態に係るＨＭＤの推薦処理を示すフローチャートである。
【図５】第２の実施形態に係る推薦システムの概要を示す説明図である。
【図６】第２の実施形態に係る推薦システムの構成を示す説明図である。
【図７】第２の実施形態に係る推薦システムの推薦処理を示すフローチャートである。
【図８】変形例に係る推薦システムの概要を示す説明図である。
【発明を実施するための形態】
【００１２】
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００１３】
なお、説明は以下の順序で行うものとする。
１．本開示の一実施形態に係る推薦処理の概要
２．実施形態
２−１．第１の実施形態
２−１−１．ＨＭＤの構成
２−１−２．ＨＭＤの動作処理
２−２．第２の実施形態
２−２−１．推薦システムの概要
２−２−２．推薦システムの構成
２−２−３．推薦システムの動作処理
２−２−４．変形例
３．まとめ
【００１４】
＜＜１．本開示の一実施形態に係る推薦処理の概要＞＞
まず、本開示の一実施形態に係る推薦処理の概要について、図１を参照して説明する。
【００１５】
図１は、本開示の一実施形態に係る推薦処理の概要を示す説明図である。図１に示すように、ユーザ８は、眼鏡型のＨＭＤ（Ｈｅａｄ  Ｍｏｕｎｔｅｄ  Ｄｉｓｐｌａｙ）１を装着している。ＨＭＤ１は、例えば両側頭部から後頭部にかけて半周回するようなフレームの構造の装着ユニットを有し、図１に示すように両耳殻にかけられることでユーザ８に装着される。
【００１６】
また、ＨＭＤ１は、装着状態において、ユーザ８の両眼の直前、即ち通常の眼鏡におけるレンズが位置する場所に、左眼用と右眼用の一対の表示部２が配置される構成となっている。表示部２には、例えば撮像レンズ３ａで撮像された現実空間の撮像画像が表示される。また、表示部２は透過型であってもよく、ＨＭＤ１により表示部２がスルー状態、即ち透明または半透明の状態とされることで、ユーザ８は、ＨＭＤ１を眼鏡のように常時装着していても通常の生活には支障がない。
【００１７】
また、ＨＭＤ１には、図１に示すように、ユーザ８に装着された状態で、ユーザが視認する方向を被写体方向として撮像するように、前方に向けて撮像レンズ３ａが配置されている。さらに、撮像レンズ３ａによる撮像方向に対して照明を行う発光部４ａが設けられる。発光部４ａは例えばＬＥＤ（Ｌｉｇｈｔ  Ｅｍｉｔｔｉｎｇ  Ｄｉｏｄｅ）により形成される。
【００１８】
また、図１では左耳側しか示されていないが、装着状態でユーザの右耳孔および左耳孔に挿入できる一対のイヤホンスピーカ５ａが設けられる。
【００１９】
なお、図１に示すＨＭＤ１の外観は一例であり、ＨＭＤ１をユーザが装着するための構造は多様に考えられる。ＨＭＤ１は、一般に眼鏡型、あるいは頭部装着型とされる装着ユニットで形成されればよく、少なくとも本実施の形態としては、ユーザの眼の前方に近接して表示部２が設けられていればよい。また表示部２は、両眼に対応して一対設けられる他、片側の眼に対応して１つ設けられる構成でもよい。
【００２０】
また、撮像レンズ３ａ、照明を行う発光部４ａは、図１に示す例では右眼側に前方に向けて配置されているが、左眼側に配置されてもよいし、両側に配置されてもよい。
【００２１】
また、イヤホンスピーカ５ａは、左右のステレオスピーカとせずに、一方の耳にのみ装着するために１つ設けられるのみでもよい。
【００２２】
さらに、イヤホンスピーカ５ａを備えない構成も考えられる。また発光部４ａを設けない構成も考えられる。
【００２３】
以上、図１に示すＨＭＤ１の外観構成について説明した。
【００２４】
ここで、健康的な食事を行うための方法の一例として、例えば脂質や炭水化物の量を減らす献立により、総摂取カロリーが抑制されるような食事制限を行うことが考えられる。しかしながら、栄養価の吸収率は食事の順番によって変動するため、単に総摂取カロリーを抑制したとしても、人に吸収される総カロリーが抑制されるとは限らない。例えば、空腹時に炭水化物から食べ始めた場合、血糖値が急激に高くなる可能性がある。また、食事制限は食べたい物が食べられないという不満を人に与え食事の楽しみを害するため、継続的に実施することが困難な場合がある。このような事情を鑑みれば、ユーザが飲食する順番をリアルタイムにナビゲートすることができれば、食生活を支援する技術の利便性が飛躍的に向上する。
【００２５】
そこで、上記事情を一着眼点にして本開示の各実施形態に係る推薦処理を創作するに至った。本開示の各実施形態に係る推薦処理は、リアルタイムに（実時間で）次に摂取すべき飲食物を推薦することで、飲食の順番をナビゲートする。
【００２６】
具体的には、図１に示すＨＭＤ１（情報処理装置）が、食卓に置かれた複数の料理２０を撮像レンズ３ａにより撮像し、撮像した画像から複数の飲食対象の飲食物として料理２０を検出する。図１に示した例では、ＨＭＤ１は、飲食対象の料理２０として、サラダ２１、レバニラ２２、肉料理２３、ご飯２４を検出する。そして、ＨＭＤ１は、所定の目的を満たす順序でユーザ８が料理２０を摂取するよう、次に摂取すべき料理２０を表示部２に表示することで、ユーザ８に食事の順番をナビゲートすることができる。
【００２７】
所定の目的を満たす順序は多様に考えられるが、ここでは一例としてユーザ８の血糖値の上昇を抑制することを考える。上述したように、空腹時に炭水化物から食べ始めた場合、血糖値が急激に高くなる可能性があるため、ＨＭＤ１は、野菜を摂取した後に炭水化物を摂取することをユーザ８に推薦する。
【００２８】
ＨＭＤ１による推薦処理の一例として、例えば図１に示すように、表示部２は、次に摂取すべき料理２０を強調表示する画像Ｐ１を表示する。ＨＭＤ１は、血糖値の上昇を抑制するためにまず野菜を摂取すべきであるとして、野菜が多く含まれるサラダ２１を１番目に摂取するよう、サラダ２１を指し示すナビゲーション画像２５を表示している。この際、ＨＭＤ１は、撮像画像にナビゲーション画像２５を重畳表示してもよいし、表示部２を半透過に制御した上で実空間に存在するサラダ２１に対応するようナビゲーション画像２５を表示してもよい。
【００２９】
以上、本実施形態に係る推薦処理の概要について説明した。続いて、本開示の一実施形態に係る推薦処理を行うＨＭＤ１（情報処理装置）の構成および動作処理について、図２〜図４を参照して説明する。
【００３０】
＜＜２．実施形態＞＞
＜２−１．第１の実施形態＞
［２−１−１．ＨＭＤの構成］
図２は、第１の実施形態に係るＨＭＤ１の内部構成を示すブロック図である。図２に示すように、本実施形態に係るＨＭＤ１は、表示部２、撮像部３、音声出力部５、記憶部７、および制御部１０−１を有する。なお、図２においては、図１に示した構成を一部省略している。
【００３１】
（撮像部３）
撮像部３は、撮像レンズ３ａ、絞り、ズームレンズ、及びフォーカスレンズ等により構成されるレンズ系、レンズ系に対してフォーカス動作やズーム動作を行わせる駆動系、レンズ系で得られる撮像光を光電変換して撮像信号を生成する固体撮像素子アレイ等を有する。固体撮像素子アレイは、例えばＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）センサアレイや、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサアレイにより実現されてもよい。撮像部３は、デジタル信号とされた撮影画像のデータを出力する。
【００３２】
また、撮像部３は、図１に示した発光部４ａとその発光部４ａ（例えばＬＥＤ）を発光させる発光回路を含む照明部４をさらに有していてもよい。そして、撮像部３は、画像を撮像する際に、照明部４に前方に対して発光を行わせることで、ユーザ８の視界方向を照らした上で撮像を行ってもよい。
【００３３】
撮像部３は、ユーザ８が飲食する対象である料理２０やユーザ８が飲食する動作などの、ユーザ８の飲食を撮像し、撮像した画像を出力する。
【００３４】
（記憶部７）
記憶部７は、ユーザ８の過去の飲食の履歴を蓄積する蓄積部としての機能を有する。例えば、記憶部７がユーザ８の過去１年の飲食の履歴を蓄積することで、制御部１０−１は、ユーザ８が好む食べ物や食べる順番、咀嚼回数や食事にかかる時間などのユーザ８の飲食の傾向を認識することができる。他にも、記憶部７がユーザ８の過去１週間の飲食の履歴を蓄積することで、制御部１０−１は、ユーザ８に現在足りない栄養素を認識することができる。
【００３５】
（制御部１０−１）
制御部１０−１は、演算処理装置および制御装置として機能し、各種プログラムに従ってＨＭＤ１内の動作全般を制御する。制御部１０−１は、例えばＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）、マイクロプロセッサによって実現される。なお、制御部１０−１は、使用するプログラムや演算パラメータ等を記憶するＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、および適宜変化するパラメータ等を一時記憶するＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）を含んでいてもよい。
【００３６】
具体的には、制御部１０−１は、撮像部３により出力された撮像画像に基づいて、ユーザ８が次に摂取すべき飲食物を選択し、表示部２および音声出力部５の少なくともいずれかにより、選択した飲食物をユーザ８に推薦する。制御部１０−１は、検出部１１、認識部１２、および推薦部１３−１として機能する。
【００３７】
（検出部１１）
検出部１１は、ユーザ８のユーザの飲食を撮像した画像から、飲食対象の複数の飲食物を検出する機能を有する。例えば、図１に示した例では、検出部１１は、サラダ２１、レバニラ２２、肉料理２３、およびご飯２４を、ユーザ８の飲食対象の複数の飲食物であると検出する。検出部１１は、検出結果を推薦部１３−１に出力する。
【００３８】
（認識部１２）
認識部１２は、ユーザ８の飲食を撮像した画像からユーザ８の飲食の状況を認識する機能を有する。飲食の状況とは、ユーザ８の飲食動作、およびユーザ８の飲食の対象である複数の飲食物の様子である。例えば、図１に示した例では、認識部１２は、撮像部３により撮像された画像から、ユーザ８がこれから飲食を開始しようとしていることを認識する。この後、ユーザ８がサラダ２１を摂取した場合、認識部１２は、ユーザ８がサラダ２１を摂取したことや、サラダ２１の量がユーザ８に摂取されることにより減ったことを認識する。また、認識部１２は、ユーザ８が推薦部１３−１により推薦された飲食物を、推薦部により定められた分摂取した否かを認識する。他にも、認識部１２は、ユーザ８の飲食対象である複数の飲食物の位置、箸やフォーク等の食事用器具の位置、ユーザ８の手の位置などを示す位置を認識してもよい。認識部１２は、認識結果を推薦部１３−１に出力する。
【００３９】
（推薦部１３−１）
推薦部１３−１は、所定の目的を満たす順序でユーザ８が検出部１１により検出された複数の飲食物を摂取するよう、複数の飲食物から少なくとも次に摂取すべき飲食物を実時間で推薦する機能を有する。まず、推薦部１３−１は、検出部１１により検出された複数の飲食物の中から、所定の目的を満たす順序に従い、少なくとも次に摂取すべき飲食物を選択する。推薦部１３−１による推薦処理は、次に摂取すべき飲食物を選択する選択処理、および選択した飲食物を推薦表示する推薦表示処理を含む。以下、選択処理および推薦表示処理について順に説明する。
【００４０】
・選択処理
所定の目的を満たす順序は多様に考えられる。例えば糖尿病対策を目的とした場合の順序は、ユーザ８の血糖値の上昇を抑制する順序である、酢、乳製品、野菜、肉や豆腐などのタンパク質、米やパンなどの炭水化物の順となる。また、肥満対策を目的とした場合の順序は、ユーザ８の血糖値の上昇を抑制する酢、乳製品、野菜、タンパク質、炭水化物の順となる。また、幼児の教育を目的とした場合の順序は、バランスの良い食事の順序である、三角食べとなるような順となる。また、美食を目的とした場合の順序は、飲酒の前に牛乳、飲酒の後にラーメンを摂取するような順となることが考えられる。他にも、快適な食事を目的とした場合の順序は、凍った飲食物や熱過ぎる飲食物が、適度な温度になるまで他の飲食物を摂取するような順となることが考えられる。また、医師の指導を遵守することを目的とした場合の順序は、医師の指導に基づいた順序となる。
【００４１】
例えば、図１に示した例において、糖尿病対策を目的とすると、推薦部１３−１は、野菜を多く含むサラダ２１を、初めに摂取すべき飲食物として選択する。そして、推薦部１３−１は、選択した飲食物を表示部２または音声出力部５の少なくともいずれかにより出力させることで、飲食中のユーザ８に対して次に摂取すべき飲食物を実時間で推薦する。例えば、図１に示した例では、推薦部１３−１は、サラダ２１を指し示すナビゲーション画像２５を表示する画像Ｐ１を表示部２に表示することで、ユーザ８にサラダ２１を実時間で推薦する。
【００４２】
推薦部１３−１は、このような目的に応じた順序を決定するためのルールに基づいて、検出部１１により検出された複数の飲食物から次に摂取すべき飲食物を推薦する。例えば、糖尿病対策を目的とした場合のルールは、酢、乳製品、野菜、タンパク質、炭水化物の順序で推薦することを規定する。図１に示した例では、推薦部１３−１は、このルールに基づいて、野菜を多く含むサラダ２１を推薦する。このような推薦順序のルールは、記憶部７が記憶していてもよいし、図示しないサーバ等のＤＢ（データベース）に記憶され、推薦部１３−１が図示しない通信部により適宜参照して推薦を行ってもよい。なお、ルールはユーザ８により設定されてもよいし、ユーザ８の体調等に応じてＨＭＤ１が自動的に設定してもよい。
【００４３】
推薦部１３−１は、さらに記憶部７により蓄積された履歴に基づいて、少なくとも次に摂取すべき飲食物を推薦する。例えば、推薦部１３−１は、記憶部７により蓄積された過去１年の履歴に基づいて、ユーザ８が好む食べ物や食べる順番、咀嚼回数や食事にかかる時間などのユーザ８の飲食の傾向に沿うよう、推薦する順番を変える。ユーザ８は自身の好みに沿った順番で推薦を受けることができるため、ユーザ８は自然に（ストレス無く）推薦部１３−１が推薦する順番に従って飲食物を摂取することができる。他にも、推薦部１３−１は、記憶部７により蓄積された過去１週間の履歴に基づいて、ユーザ８が現在足りない栄養素をより多く吸収できるよう、推薦する順番を変えてもよい。
【００４４】
また、推薦部１３−１は、さらに認識部１２により認識された状況に基づいて、少なくとも次に摂取すべき飲食物を推薦する。例えば、推薦部１３−１は、推薦した飲食物をユーザ８が食べ終わったという状況に基づいて、その次に摂取すべき飲食物をユーザ８に推薦する。なお、推薦部１３−１は、推薦した飲食物について、摂取すべき量を定めてもよい。そして、推薦部１３−１が推薦した飲食物を、定めた量だけユーザ８が摂取したことを認識部１２が認識した際に、推薦部１３−１はその次に摂取すべき飲食物をユーザ８に改めて推薦してもよい。
【００４５】
他にも、推薦部１３−１は、ユーザ８が推薦した飲食物を食べずに他の飲食物を食べている場合、ユーザ８に警告したり推薦を停止したりする。このとき、推薦部１３−１は、ユーザ８に推薦する飲食物を選択し直してもよい。また、新しい飲食物がユーザ８の飲食対象として追加された場合には、推薦部１３−１は次に摂取すべき飲食物を選択し直して、ユーザ８に推薦する。また、ユーザ８が子供であることを認識した場合には、推薦部１３−１は、目的を教育に変更して、三角食べとなるよう飲食物を推薦することで、食べ残しを防止することができる。
【００４６】
推薦部１３−１は、認識部１２により認識された状況に基づいて少なくとも次に摂取すべき飲食物を都度選択してもよいし、予め摂取すべき順番を定めておき、状況に応じて定めた順番に基づいて推薦してもよい。例えば、図１に示した例では、推薦部１３−１は、ユーザ８がこれから飲食を開始しようとしているという状況に基づいて、まずサラダ２１を摂取すべきであると選択してもよい。また、推薦部１３−１は、野菜を多く含むサラダ２１を１番目に、次に野菜を多く含むレバニラ２２を２番目に、タンパク質である肉料理２３を３番目に、そして炭水化物であるご飯２４を４番目に選択するよう、予め順番を定めてもよい。
【００４７】
・推薦表示処理
推薦部１３−１は、次に摂取すべき飲食物を強調表示する強調画像を生成し、表示部２に表示させることで、ユーザ８に対して次に摂取すべき飲食物を推薦する。このような強調画像は多様に考えられる。例えば、図１に示したように、強調画像は、次に摂取すべきサラダ２１を指し示すナビゲーション画像２５であってもよい。他にも、強調画像は、摂取すべき順番を各飲食物に対して示す画像であってもよい。例えば図１に示す例においては、強調画像は、サラダ２１に「１番目」の表示、レバニラ２２に「２番目」の表示、肉料理２３に「３番目」の表示、ご飯２４に「４番目」の表示を、それぞれ付加する画像であってもよい。また、強調画像は、次に摂取すべき飲食物を丸で囲ったり、ハイライトしたりする画像であってもよい。ここで、推薦部１３−１が生成する強調画像の他の例について、図３を参照して説明する。
【００４８】
図３は、第１の実施形態に係るＨＭＤ１が表示する画像の一例を示す説明図である。図３の画像Ｐ２に示すように、強調画像は、次に摂取すべき飲食物の外観を美化した画像であってもよい。図３に示した画像Ｐ２では、次に摂取すべきサラダ２１の外観を輝かせることで、おいしそうな印象をユーザ８に与えている。このため、ユーザ８は、自然とおいしそうなサラダ２１から摂取するようになる。強調画像が飲食物の外観を美化した画像である場合、図１に示したナビゲーション画像２５や順番等を明確に表示する例と比較して、ユーザ８は自然に推薦部１３−１が推薦する順番に従って飲食物を摂取することができる。他にも、推薦部１３−１は、摂取すべき飲食物にユーザ８が好む食材を追加した画像や、ユーザ８が好む別の飲食物に差し替える画像を、強調画像として生成してもよい。
【００４９】
また、推薦部１３−１は、次に摂取すべきでない飲食物を抑制表示する抑制画像を生成し、表示部２に表示させることで、ユーザ８に対して次に摂取すべき飲食物を間接的に推薦する。このような抑制画像は多様に考えられる。例えば、図３の画像Ｐ２に示すように、抑制画像は、次に摂取すべきでない飲食物の外観を劣化させた画像であってもよい。図３に示した画像Ｐ２では、次に摂取すべきサラダ２１以外の飲食物、即ち次に摂取すべきでないレバニラ２２および肉料理２３を焦げ付かせた外観にし、ご飯２４を不衛生な外観にすることで、おいしくなさそうな印象をユーザ８に与えている。このため、ユーザ８は、自然とおいしくなさそうなレバニラ２２、肉料理２３、およびご飯２４を避けて、サラダ２１から摂取するようになる。抑制画像が飲食物の外観を劣化した画像である場合、ユーザ８が次に摂取すべきでない飲食物を自然と避けるようにすることで、ユーザ８に対して次に摂取すべき飲食物を間接的かつ自然に推薦することができる。他にも、推薦部１３−１は、摂取すべきでない飲食物にユーザ８が嫌う食材を追加した画像や、ユーザ８が嫌う別の飲食物に差し替える画像を、抑制画像として生成してもよい。
【００５０】
他にも、抑制画像は、図３の画像Ｐ３に示すように、次に摂取すべきでない飲食物をユーザ８から遮蔽する画像であってもよい。図３に示した画像Ｐ３では、次に摂取すべきサラダ２１以外の飲食物、即ち次に摂取すべきでないレバニラ２２、肉料理２３、およびご飯２４をグレーアウトすることで、ユーザ８がサラダ２１のみを認識可能としている。このため、ユーザ８は、認識可能なサラダ２１から摂取することができる。
【００５１】
なお、推薦部１３−１は、飲食物の中でも、食材単位で摂取すべき順番を推薦してもよい。例えば、図１に示した例では、推薦部１３−１は、レバニラ２２に含まれるもやし、にら、レバーの順に摂取するよう推薦してもよい。
【００５２】
（表示部２）
表示部２は、制御部１０−１による制御に基づいて、撮像画像や、推薦部１３−１により生成された強調画像または抑制画像を表示する。
【００５３】
なお、本実施形態に係る表示部２は、撮像画像をリアルタイムで表示し、さらに強調画像や抑制画像を、表示した撮像画像中の各飲食物の位置に対応するよう重畳表示する。若しくは、表示部２は、表示部２をスルー状態にした上で（撮像画像の表示は行わず）、実空間に存在する飲食物の位置に対応するよう、強調画像や抑制画像を表示してもよい。
【００５４】
（音声出力部５）
音声出力部５は、図１に示した一対のイヤホンスピーカ５ａと、そのイヤホンスピーカ５ａに対するアンプ回路を有する。また、音声出力部５は、いわゆる骨伝導スピーカとして形成されてもよい。音声出力部５は、制御部１０−１による制御に基づいて、音声信号データを出力（再生）する。
【００５５】
以上、本実施形態に係るＨＭＤ１の内部構成について説明した。続いて、本実施形態に係るＨＭＤ１の動作処理について説明する。
【００５６】
［２−１−２．ＨＭＤの動作処理］
本実施形態に係るＨＭＤ１は、ユーザ８に装着され、ユーザ８の食事中において、ユーザ８が少なくとも次に摂取すべき飲食物をリアルタイムで推薦表示する。このようなＨＭＤ１による推薦処理について、図４を参照して具体的に説明する。
【００５７】
図４は、第１の実施形態に係るＨＭＤ１の推薦処理を示すフローチャートである。図４に示すように、まず、ステップＳ１０４で、ＨＭＤ１は、撮像部３により飲食物の撮像を開始する。
【００５８】
次に、ステップＳ１０８で、推薦部１３−１は、推薦順序のルールを設定する。例えば、推薦部１３−１は、記憶部７に蓄積されたユーザ８の過去の食生活の履歴に基づいて、糖尿病対策を目的とする、血糖値の上昇を抑制するためのルールを設定する。
【００５９】
次いで、ステップＳ１１２で、検出部１１は、撮像部３により撮像された画像から、ユーザ８の飲食対象の複数の飲食物を検出する。例えば、図１に示した例においては、検出部１１は、サラダ２１、レバニラ２２、肉料理２３、およびご飯２４を検出する。
【００６０】
次に、ステップＳ１１６で、推薦部１３−１は、次に摂取すべき飲食物を選択する。具体的には、推薦部１３−１は、検出部１１により検出された複数の飲食物から、推薦順序のルール、認識部１２により認識された飲食状況、および記憶部７により蓄積された飲食の履歴に基づいて、次に摂取すべき飲食物を選択する。例えば、図１に示した例では、推薦部１３−１は、これから飲食を開始しようとしている状況、および血糖値の上昇を抑制するルールに基づき、野菜を多く含むサラダ２１を次に摂取すべき飲食物として選択する。
【００６１】
そして、ステップＳ１２０で、推薦部１３−１は、選択した飲食物をユーザ８に推薦する。具体的には、推薦部１３−１は、選択した飲食物を強調する強調画像および選択しなかった他の飲食物を抑制する抑制画像の少なくともいずれかを生成して、表示部２に表示する。例えば、図３の画像Ｐ２に示したように、推薦部１３−１は、選択したサラダ２１の外観を美化し、他のレバニラ２２、肉料理２３、およびご飯２４を劣化させた推薦表示を行う。
【００６２】
次いで、ステップＳ１２４で、認識部１２は、ユーザ８の飲食の状況を認識する。具体的には、認識部１２は、撮像部３により撮像された画像から、ユーザ８が推薦部１３−１により推薦された飲食物を摂取しているか否か、飲食するスピードや咀嚼回数などの飲食動作や、飲食物がユーザ８に摂取されることにより減っていることを認識する。このとき、認識部１２が、ユーザ８が推薦した飲食物を食べずに他の飲食物を食べていることを認識した場合、推薦部１３−１は、再度の推薦や警告を行い、これに所定回数従わない場合は推薦処理を停止する。また、認識部１２が、新しい飲食物がユーザ８の飲食対象として追加されたことを認識した場合、推薦部１３−１は次に摂取すべき飲食物を選択し直して、ユーザ８に再度の推薦を行う。
【００６３】
次に、ステップＳ１２８で、認識部１２は、ユーザ８が推薦部１３−１により推薦された飲食物を所定量摂取したか否かを判定する。具体的には、認識部１２は、ユーザ８が推薦部１３−１により推薦された飲食物を、推薦部１３−１により定められた量だけ摂取したか否かを判定する。
【００６４】
ユーザ８が推薦部１３−１により推薦された飲食物を所定量摂取していない場合（Ｓ１２８／ＮＯ）、ステップＳ１３２で、推薦部１３−１は同じ飲食物を選択し、処理は再度ステップＳ１２０に戻る。これにより、推薦部１３−１は、推薦した飲食物を定められた量ユーザ８が摂取するまで、同じ飲食物を継続して推薦する。
【００６５】
一方で、ユーザ８が推薦部１３−１により推薦された飲食物を所定量摂取した場合（Ｓ１２８／ＹＥＳ）、ステップＳ１３６で、認識部１２は、飲食物が残っているか否かを判定する。具体的には、認識部１２は、撮像部３により撮像された画像から、ユーザ８の飲食対象である飲食物が残っているかを認識する。
【００６６】
飲食物が残っている場合（Ｓ１３６／ＹＥＳ）、処理は再度ステップＳ１１２に戻り、ＨＭＤ１は引き続きユーザ８に対して推薦処理を行う。
【００６７】
一方で、飲食物が残っていない場合（Ｓ１３６／ＮＯ）、推薦処理は終了する。
【００６８】
以上、本実施形態に係るＨＭＤ１の動作処理について説明した。
【００６９】
（補足）
ＨＭＤ１は、ユーザ８に対して単に摂取すべき飲食物および摂取すべきでない飲食物を識別可能に表示するだけでなく、ゲームの要素を取り入れた表示を行ってもよい。例えば、ユーザ８が推薦した順に沿って飲食した場合には高得点を与えたり、２つのおすすめを提示していずれかが正解としたりすることが考えられる。これにより、ユーザ８は、楽しみながら推薦した順番に沿った飲食を行うことができる。
【００７０】
また、本実施形態では、ＨＭＤ１が画像表示により視覚的にユーザ８に推薦する例を説明したが、本技術はかかる例に限定されない。例えば、ＨＭＤ１は、ユーザ８が嫌う飲食物を推薦する場合、ユーザ８の鼻をつまんで匂いを遮断したり、ユーザ８が好む別の飲食物の匂いをユーザ８に出したりすることで、推薦を行ってもよい。これにより、ＨＭＤ１は、ユーザ８が健康に良い飲食物を嫌う場合であっても、ユーザ８がその飲食物を避けることなく、推薦した順番に沿った飲食をするよう支援することができる。
【００７１】
また、本実施形態では、情報処理装置の一例としてＨＭＤ１を用いたが、本技術はこれに限定されない。例えば、信号処理装置は、眼鏡型ディスプレイ、デジタルカメラ、デジタルビデオカメラ、ＰＤＡ（Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ａｓｓｉｓｔａｎｔｓ）、ＰＣ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ）、ノートＰＣ、タブレット端末、スマートフォン、携帯電話端末、携帯用音楽再生装置、携帯用映像処理装置または携帯用ゲーム機器等であってもよい。
【００７２】
また、本実施形態では、ＨＭＤ１の制御部１０−１により撮像画像に基づいて推薦処理を行う旨を記載したが、かかる推薦処理はクラウド上で行われてもよい。例えば、ＨＭＤ１は、図示しない通信部を介して撮像部３により撮像された画像をクラウド上に送り、クラウド上で画像に基づいて次に摂取すべき飲食物が選択され、生成された強調画像および抑制画像を受信して、これに基づいて表示部２が推薦表示してもよい。また、検出部１１、認識部１２、推薦部１３−１、および記憶部７としての機能の一部をＨＭＤ１が有し、他の一部をクラウド側が有していてもよい。
【００７３】
＜２−２．第２の実施形態＞
本実施形態は、ユーザ８が把持する食事用器具によって、次に摂取すべき飲食物を推薦および誘導する形態である。まず、図５を参照して、このような本実施形態に係る推薦システムの概要について説明する。
【００７４】
［２−２−１．推薦システムの概要］
図５は、第２の実施形態に係る推薦システムの概要を示す説明図である。図５に示すように、本実施形態に係る推薦システムは、カメラ３０、サーバ４０、および食事用器具としての箸５０を有する。本実施形態に係る推薦システムでは、カメラ３０がユーザ８の飲食を撮像した画像をサーバ４０に送信し、サーバ４０はユーザ８が次に摂取すべき飲食物を選択し、箸５０はサーバ４０が選択した飲食物にユーザ８を誘導する。
【００７５】
箸５０は、一例として、緑色に発光する発光部５４ａ、および赤色に発光する発光部５４ｂによりユーザ８を誘導する。例えば、ユーザ８が、サーバ４０により選択された飲食物に箸５０を近づけると発光部５４ａが緑色に発光し、他の飲食物に箸５０を近づける５４ｂが赤色に発光することで、サーバ４０により選択された飲食物をユーザ８に推薦および誘導する。他にも、箸５０は振動やジャイロモーメントによってユーザ８を誘導してもよい。なお、本明細書では食事用器具として箸５０を用いる例を記載するが、食事用器具はナイフやフォーク、スプーン等であってもよい。
【００７６】
図５に示した例においては、推薦システムは、糖尿病対策を目的として、まず野菜を摂取すべきであるとして、野菜が多く含まれるサラダ２１を１番目に摂取するよう、箸５０を制御している。より詳しくは、ユーザ８が推薦したサラダ２１とは異なるご飯２４を摂取しようとしているので、箸５０の５４ｂが赤色に発光し、振動することで、誤った順序で飲食しようとしていることをユーザ８に通知している。
【００７７】
以上、本実施形態に係る推薦システムの概要について説明した。続いて、図６を参照して、本実施形態に係る推薦システムの構成について説明する。
【００７８】
［２−２−２．推薦システムの構成］
図６は、第２の実施形態に係る推薦システムの構成を示す説明図である。図６に示すように、推薦システムは、カメラ３０、サーバ４０（情報処理装置）、および箸５０を有する。
【００７９】
（カメラ３０）
カメラ３０は、上記第１の実施形態に係るＨＭＤ１の撮像部３と同様の機能を有する。即ち、カメラ３０は、食卓全体およびユーザ８を撮像範囲として、ユーザ８が飲食する対象である料理２０やユーザ８が飲食する動作などの、ユーザ８の飲食を撮像する。そして、カメラ３０は、撮像した画像を有線または無線によりサーバ４０に送信する。
【００８０】
（サーバ４０）
サーバ４０は、上記第１の実施形態に係るＨＭＤ１と同様に、ユーザ８に対して次に摂取すべき飲食物を推薦する機能を有する。具体的には、サーバ４０は、カメラ３０から受信した撮像画像に基づいて、ユーザ８が次に摂取すべき飲食物を選択する。そして、サーバ４０は、選択した飲食物にユーザ８を誘導するための誘導情報を箸５０に送信する。サーバ４０は、制御部１０−２、記憶部７、受信部１４、および送信部１５として機能する。なお、記憶部７は上記第１の実施形態において説明した通りであるので、ここでの詳細な説明は省略する。
【００８１】
・受信部１４
受信部１４は、有線または無線によりカメラ３０との間でデータの送受信を行うための通信モジュールである。例えば、受信部１４は、無線ＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）や電話回線などによりカメラ３０との通信を行う。本実施形態においては、受信部１４は、カメラ３０からユーザ８の飲食を撮像した画像を受信して、制御部１０−２に出力する。
【００８２】
・制御部１０−２
制御部１０−２は、上記第１の実施形態に係るＨＭＤ１の制御部１０−１と同様の機能を有し、推薦部１３−１に代えて推薦部１３−２を有する。検出部１１、認識部１２は上記第１の実施形態において説明した通りであるので、ここでの詳細な説明は省略する。
【００８３】
・推薦部１３−２
推薦部１３−２は、上記第１の実施形態に係るＨＭＤ１の推薦部１３−１と同様の選択処理を行う。その後、本実施形態に係る推薦部１３−２は、選択した（推薦する）飲食物を摂取するようユーザ８を誘導するための誘導情報を出力する。誘導情報は、ユーザ８が箸５０を近づけた飲食物が、推薦部１３−２により推薦された飲食物であるか否かを示す情報を含む。例えば、認識部１２が、カメラ３０による撮像画像に基づいて、ユーザ８が次に摂取すべき飲食物に箸５０を近づけたことを認識した場合、推薦部１３−２は、正しい順序に沿って飲食していることを示す誘導情報を出力する。一方で、認識部１２が、カメラ３０による撮像画像に基づいて、ユーザ８が次に摂取すべきでない飲食物に箸５０を近づけたことを認識した場合、推薦部１３−２は、誤った順序に沿って飲食していることを示す誘導情報を出力する。他にも、誘導情報は、認識部１２により認識された各飲食物の位置情報、選択した飲食物の位置情報、および箸５０の位置情報を含んでいてもよい。
【００８４】
・送信部１５
送信部１５は、無線により箸５０との間でデータの送受信を行うための通信モジュールである。例えば、送信部１５は、無線ＬＡＮなどにより箸５０との通信を行う。本実施形態においては、送信部１５は、箸５０に対して、推薦部１３−２により推薦された飲食物に誘導する誘導情報を送信する。なお、ユーザ８が箸５０から他の食事用器具に持ち替えた場合、送信部１５は、持ち替えた食事用器具に対して誘導情報を送信することで、持ち替えた食事用器具により誘導を継続してもよい。
【００８５】
（箸５０）
箸５０は、サーバ４０から受信した誘導情報に基づいて、推薦部１３−２により推薦された飲食物にユーザ８を誘導する機能を有する。箸５０は、受信部５１、制御部５２、振動部５３、発光部５４、およびジャイロ５５として機能する。
【００８６】
・受信部５１
受信部５１は、無線によりサーバ４０との間でデータの送受信を行うための通信モジュールである。例えば、受信部５１は、無線ＬＡＮなどによりサーバ４０との通信を行う。本実施形態においては、受信部５１は、サーバ４０から送信された誘導情報を受信して、制御部５２に出力する。
【００８７】
・制御部５２
制御部５２は、演算処理装置および制御装置として機能し、各種プログラムに従って箸５０内の動作全般を制御する。制御部５２は、例えばＣＰＵ、マイクロプロセッサによって実現される。なお、制御部５２は、使用するプログラムや演算パラメータ等を記憶するＲＯＭ、および適宜変化するパラメータ等を一時記憶するＲＡＭを含んでいてもよい。
【００８８】
本実施形態においては、制御部５２は、受信部５１により受信された誘導情報に基づいて、推薦部１３−２により推薦された飲食物にユーザ８を誘導するよう、振動部５３、発光部５４、およびジャイロ５５を制御する。より具体的には、制御部５２は、誘導情報が含む、ユーザ８が箸５０を近づけた飲食物が推薦部１３−２により推薦された飲食物であるか否かを示す情報に基づいて、振動部５３、発光部５４、およびジャイロ５５を制御する。他にも、制御部５２は、誘導情報が含む各種位置情報に基づいて、ユーザ８が箸５０を近づけた飲食物が推薦部１３−２により推薦された飲食物であるか否かを判定して、振動部５３、発光部５４、およびジャイロ５５を制御してもよい。
【００８９】
・振動部５３
振動部５３は、制御部５２による制御に基づいて、箸５０を振動させる。即ち、振動部５３は、箸５０のバイブレーション機能を担う。振動部５３は、例えば、振動モータにより実現される。本実施形態においては、例えば、振動部５３は、ユーザ８が推薦部１３−２により選択された飲食物に箸５０を近づけた場合には振動せず、他の飲食物に箸５０を近づけた場合に振動することで、推薦部１３−２により選択された飲食物にユーザ８を誘導する。
【００９０】
・発光部５４
発光部５４は、制御部５２による制御に基づいて発光する。発光部５４は、例えば図５に示した発光部５４ａ、５４ｂから成り、ユーザ８が飲食物に箸５０を近づける動作に応じて発光することで、推薦部１３−２により選択された飲食物をユーザ８に誘導する。例えば、ユーザ８が、推薦部１３−２により選択された飲食物に箸５０を近づけると発光部５４ａが緑色に発光し、他の飲食物に箸５０を近づけると発光部５４ｂが赤色に発光する。発光部５４は、例えばＬＥＤにより形成される。なお、発光部５４は、発光部５４ａ、５４ｂのいずれかのみであってもよい。
【００９１】
・ジャイロ５５
ジャイロ５５は、モーメントを出力することで箸５０を把持するユーザ８を、任意の方向に誘導する機能を有する。ジャイロ５５は、例えば「吉江将之、矢野博明、岩田洋夫、“ジャイロモーメントを用いた力覚呈示装置”、日本ＶＲ学会論文誌Ｖｏｌ．７  Ｎｏ．３（２００２）」に開示された技術により実現される。この文献では、人工衛星の姿勢制御等に用いられるジャイロにより力覚を提示する技術が開示されている。より具体的には、この技術は、高速回転するフライホイールの回転軸を傾けたときに発生するモーメントを利用して、小型軽量な装置で大きなモーメントを出力する技術である。本実施形態においては、ジャイロ５５は、箸５０が鉛直方向を向いてユーザ８に把持されている場合に、誘導情報が含む各種位置情報に基づいて、箸５０が推薦された飲食物の方向に傾くようモーメントを出力する。これにより、ユーザ８は、箸５０が傾いた方向に位置する飲食物を次に摂取すべきであると認識することができる。また、ジャイロ５５は、次に摂取すべき飲食物に箸５０が到達した場合、モーメントの出力を停止する。
【００９２】
以上、本実施形態に係る推薦システムの構成について説明した。続いて、本実施形態に係る推薦システムの動作処理について説明する。
【００９３】
［２−２−３．推薦システムの動作処理］
本実施形態に係る推薦システムは、カメラ３０による撮像画像に基づいてサーバ４０が次に摂取すべき飲食物を選択して、箸５０によりユーザ８を誘導する。本実施形態に係る推薦システムの動作処理は、上記図４を参照して説明したＨＭＤ１の動作処理と同様であるが、ステップＳ１２０における推薦処理が異なる。より詳しくは、第１の実施形態では推薦処理としてＨＭＤ１の表示部２に強調画像または抑制画像を表示したが、本実施形態では箸５０による誘導を行う。そこで、以下では、図７を参照して、推薦システムの箸５０による推薦処理について説明する。
【００９４】
図７は、第２の実施形態に係る推薦システムの推薦処理を示すフローチャートである。図７に示すように、まず、ステップＳ２０４で、箸５０の制御部５２は、図示しない鉛直判定センサにより、箸５０が鉛直方向を向いているか否かを判定する。
【００９５】
鉛直でない場合（Ｓ２０４／ＮＯ）、ステップＳ２０８で、箸５０の制御部５２は、所定時間経過するまで待機し、処理は再度ステップＳ２０４に戻る。
【００９６】
鉛直である場合（Ｓ２０４／ＹＥＳ）、ステップＳ２１２で、箸５０は、ユーザ８を推薦部１３−２により推薦された飲食物の方向に誘導する。具体的には、箸５０の制御部５２は、サーバ４０から受信した誘導情報に基づいて、箸５０を誘導情報が示す推薦された飲食物の方向に傾くよう、ジャイロ５５を制御してモーメントを出力させる。
【００９７】
次いで、ステップＳ２１６で、箸５０の制御部５２は、箸５０が推薦部１３−２により推薦された飲食物から遠ざかったか否かを判定する。具体的には、箸５０の制御部５２は、サーバ４０から受信した誘導情報が含む各種位置情報に基づいて、箸５０の位置が推薦部１３−２により推薦された飲食物の位置から遠ざかったか否かを判定する。他にも、サーバ４０がカメラ３０による撮像画像に基づいて、箸５０が推薦部１３−２により推薦された飲食物から遠ざかったか否かを判定して、判定結果を誘導情報として箸５０に送信してもよい。
【００９８】
箸５０が推薦部１３−２により推薦された飲食物から遠ざかった場合（Ｓ２１６／ＹＥＳ）、ステップＳ２２０で、発光部５４ｂが赤色に発光し、振動部５３が振動する。これにより、箸５０は、誤った順番で飲食物を摂取していることをユーザ８に通知することができる。その後、処理は再度ステップＳ２１６に戻る。
【００９９】
一方で、箸５０が推薦部１３−２により推薦された飲食物から遠ざかっていない場合（Ｓ２１６／ＮＯ）、ステップＳ２２４で、箸５０の制御部５２は、箸５０が推薦部１３−２により推薦された飲食物に到達したか否かを判定する。具体的には、箸５０の制御部５２は、サーバ４０から受信した誘導情報が含む各種位置情報に基づいて、箸５０の位置が推薦部１３−２により推薦された飲食物の位置と一致するまたは近傍にあるか否かを判定する。他にも、サーバ４０がカメラ３０による撮像画像に基づいて、箸５０が推薦部１３−２により推薦された飲食物に到達したか否かを判定して、判定結果を誘導情報として箸５０に送信してもよい。
【０１００】
箸５０が推薦部１３−２により推薦された飲食物に到達していない場合（Ｓ２２４／ＮＯ）、処理は再度ステップＳ２１６に戻る。
【０１０１】
一方で、箸５０が推薦部１３−２により推薦された飲食物に到達した場合（Ｓ２２４／ＹＥＳ）、ステップＳ２２８で、発光部５４ａが緑色に発光する。これにより、箸５０は、正しい順番で飲食物を摂取していることをユーザ８に通知することができる。
【０１０２】
以上、推薦システムの動作処理について説明した。
【０１０３】
（補足）
上記では、ユーザ８により把持される食事用器具によってユーザ８を誘導する例を記載したが、本実施形態に係る推薦システムはかかる例に限定されない。例えば、推薦システムは、コップや皿等のユーザ８により把持されない食事用器具を用いてユーザ８を誘導してもよい。例えば、推薦システムは、次に摂取すべき飲食物が載せられた皿に形成された発光部を発光させてもよいし、次に摂取すべきでない飲食物をユーザ８が摂取しようとしたときに当該飲食物が載せられた皿を振動させてもよい。また、ユーザ８が身に着ける腕時計やリストバンド、指輪等が箸５０としての機能を有し、発光や振動によりユーザ８を誘導してもよい。他にも、推薦システムは、ユーザ８の周辺に存在するスマートフォンやタブレット端末等の情報処理装置に、次に摂取すべき飲食物を示す情報を送信して飲食の順番を表示させてもよい。
【０１０４】
また、本実施形態では、サーバ４０の制御部１０−２により選択処理を行う旨を記載したが、かかる選択処理はカメラ３０や箸５０で行われてもよい。例えば、カメラ３０が撮像画像に基づいて次に摂取すべき飲食物を選択して、誘導情報を箸５０に無線通信してもよい。他にも、箸５０がカメラ３０から受信した撮像画像に基づいて次に摂取すべき飲食物を選択して、ユーザ８の誘導を行ってもよい。また、サーバ４０、カメラ３０、および箸５０が、検出部１１、認識部１２、推薦部１３−２、および記憶部７としての機能を分離して有していてもよい。
【０１０５】
また、本実施形態では、箸５０がジャイロ５５によるモーメントの出力によってユーザ８を誘導する例を説明したが、本実施形態はかかる例に限定されない。例えば、箸５０は、圧電素子により誘導を行ってもよい。ここで、圧電素子とは、力が加えられ変形した場合に電圧が発生し、逆に電圧が加えられた場合に変形する性質を有する素子である。例えば、箸５０は、推薦された飲食物から遠ざかった場合に湾曲して使い辛い形状になり、推薦された飲食物に到達した場合に直線形状の使いやすい形状となることで、誘導を行ってもよい。
【０１０６】
［２−２−４．変形例］
本変形例は、ユーザ８の周囲に設置された機器によって、次に摂取すべき飲食物を推薦および誘導する形態である。以下、図８を参照して本変形例に係る推薦システムについて説明する。
【０１０７】
図８は、変形例に係る推薦システムの概要を示す説明図である。図８に示すように、本変形例に係る推薦システムは、カメラ３０、サーバ４０、スピーカ６０、および照明７０を有する。本実施形態に係る推薦システムでは、カメラ３０がユーザ８の飲食を撮像した画像をサーバ４０に送信し、サーバ４０はユーザ８が次に摂取すべき飲食物を選択し、スピーカ６０および照明７０はサーバ４０が選択した飲食物にユーザ８を誘導する。
【０１０８】
図８に示した例では、推薦システムは、糖尿病対策を目的として、まず野菜を摂取すべきであるとして、野菜が多く含まれるサラダ２１を１番目に摂取するよう、照明７０によりサラダ２１をライトアップしている。それと同時に、推薦システムは、スピーカ６０からサラダ２１を摂取するよう誘導する音声を出力することで、ユーザ８にサラダ２１を推薦している。このように、推薦システムは、ユーザ８が把持する食事用器具だけでなく、ユーザ８の周囲に設置された機器を用いて、次に摂取すべき飲食物をユーザ８に推薦することができる。
【０１０９】
以上、変形例について説明した。
【０１１０】
＜＜３．まとめ＞＞
以上説明したように、本開示に係る情報処理装置（ＨＭＤ１、サーバ４０）は、リアルタイムに飲食の順番をナビゲートすることで、ユーザ８の健康を促進させることが可能である。特に、本開示に係る情報処理装置は、糖尿病対策や高脂血症対策、肥満対策、教育、美食、快適な食事、医師の指導の遵守などの多様な目的を満たす順序で飲食物を摂取するようナビゲートすることができる。このため、本開示に係る情報処理装置は、ユーザ８の健康や食事の楽しみを、多様な面から促進するよう食生活を支援することができる。
【０１１１】
第１の実施形態に係るＨＭＤ１は、強調画像および抑制画像を表示することにより、ユーザ８にストレスを与えることなく、推薦する順番に従って飲食物を摂取させることができる。このため、ＨＭＤ１は、ユーザ８の食事の楽しみを害することなく、健康的な食生活を支援することができる。
【０１１２】
第２の実施形態に係るサーバ４０は、箸５０やその他の食事用器具、ユーザ８の周辺に設置された機器を用いることにより、ユーザ８が推薦する順番に従って飲食物を摂取するよう誘導することができる。
【０１１３】
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
【０１１４】
また、情報処理装置に内蔵されるＣＰＵ、ＲＯＭおよびＲＡＭなどのハードウェアを、上述したＨＭＤ１またはサーバ４０の各構成と同等の機能を発揮させるためのコンピュータプログラムも作成可能である。また、該コンピュータプログラムを記憶した記憶媒体も提供される。
【０１１５】
なお、以下のような構成も本開示の技術的範囲に属する。
（１）
ユーザの飲食を撮像した画像から飲食対象の複数の飲食物を検出する検出部と、
所定の目的を満たす順序で前記ユーザが前記検出部により検出された複数の前記飲食物を摂取するよう、複数の前記飲食物から少なくとも次に摂取すべき前記飲食物を実時間で推薦する推薦部と、
を備える情報処理装置。
（２）
前記推薦部は、次に摂取すべき前記飲食物を強調表示する強調画像を生成し、表示部に表示させる、前記（１）に記載の情報処理装置。
（３）
前記推薦部は、次に摂取すべきでない飲食物を抑制表示する抑制画像を生成し、表示部に表示させる、前記（１）または（２）に記載の情報処理装置。
（４）
前記情報処理装置は、前記ユーザの過去の飲食の履歴を蓄積する蓄積部をさらに備え、
前記推薦部は、さらに前記蓄積部により蓄積された前記履歴に基づいて少なくとも次に摂取すべき前記飲食物を推薦する、前記（１）〜（３）のいずれか一項に記載の情報処理装置。
（５）
前記情報処理装置は、前記ユーザの飲食を撮像した画像から前記ユーザの飲食の状況を認識する認識部をさらに備え、
前記推薦部は、さらに前記認識部により認識された前記状況に基づいて少なくとも次に摂取すべき前記飲食物を推薦する、前記（１）〜（４）のいずれか一項に記載の情報処理装置。
（６）
前記情報処理装置は、受信した情報に基づいて前記ユーザを誘導する機能を有する食事用器具に対して、前記推薦部により推薦された前記飲食物に誘導する誘導情報を送信する送信部をさらに備える、前記（１）〜（５）のいずれか一項に記載の情報処理装置。
（７）
前記強調画像は、前記飲食物の外観を美化した画像である、前記（２）に記載の情報処理装置。
（８）
前記抑制画像は、前記飲食物の外観を劣化させた画像である、前記（３）に記載の情報処理装置。
（９）
前記抑制画像は、前記飲食物を前記ユーザから遮蔽する画像である、前記（３）に記載の情報処理装置。
（１０）
前記所定の目的を満たす順序は、前記ユーザの血糖値の上昇を抑制する順序である、前記（１）〜（９）のいずれか一項に記載の情報処理装置。
（１１）
コンピュータに、
ユーザの飲食を撮像した画像から飲食対象の複数の飲食物を検出するステップと、
所定の目的を満たす順序で前記ユーザが検出された複数の前記飲食物を摂取するよう、複数の前記飲食物から少なくとも次に摂取すべき前記飲食物を実時間で推薦するステップと、
を実行させるためのプログラムが記憶された記憶媒体。
【符号の説明】
【０１１６】
１    ＨＭＤ
２    表示部
３    撮像部
３ａ  撮像レンズ
４    照明部
４ａ  発光部
５    音声出力部
５ａ  イヤホンスピーカ
７    記憶部
８    ユーザ
１０−１、１０−２  制御部
１１  検出部
１２  認識部
１３−１、１３−２  推薦部
１４  受信部
１５  送信部
２０  料理
２１  サラダ
２２  レバニラ
２３  肉料理
２４  ご飯
２５  ナビゲーション画像
３０  カメラ
４０  サーバ
５０  箸
５１  受信部
５２  制御部
５３  振動部
５４、５４ａ、５４ｂ  発光部
５５  ジャイロ
６０  スピーカ
７０  照明
Ｐ１、Ｐ２、Ｐ３  画像
【図１】
2014211749.tif 000003
【図２】
2014211749.tif 000004
【図３】
2014211749.tif 000005
【図４】
2014211749.tif 000006
【図５】
2014211749.tif 000007
【図６】
2014211749.tif 000008
【図７】
2014211749.tif 000009
【図８】
2014211749.tif 000010