【手続補正書】
【提出日】平成28年11月29日(2016.11.29)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
拡張ディスプレイ装置であって、
シースルー・ヘッドマウント・ディスプレイと、
前記装置の視野内のビジュアル情報を検出する複数のセンサーと、
前記シースルー・ヘッドマウント・ディスプレイおよび前記センサーと通信する１つまたは複数の処理デバイスと
を備え、前記１つまたは複数の処理デバイスが、自動的に、
前記装置に近接する食品品目を識別し、
前記装置を着用した着用者の、前記食品品目の１つまたは複数の消費を追跡し、
識別された前記食品品目の前記１つまたは複数についての、前記装置の前記着用者に関係するフィードバック情報であって、前記食品品目についての、ソーシャル・ネットワークからの、前記着用者の１人または複数人の友人により提供されたソーシャル・フィードバック情報に基づくフィードバック情報を、前記食品品目の１つまたは複数の消費の前に決定し、
ビジュアル物体として前記フィードバック情報を、前記ソーシャル・フィードバック情報に基づいて消費の前に、前記シースルー・ヘッドマウント・ディスプレイにレンダリングする、
強化ディスプレイ装置。
【請求項２】
請求項１に記載の装置であって、前記１つまたは複数の処理デバイスは、前記食品品目についての栄養素情報を決定し、前記フィードバック情報は、前記消費に基づく栄養素情報を含む、装置。
【請求項３】
請求項１に記載の装置であって、前記１つまたは複数の処理デバイスは、画像データにアクセスして、該画像データに基づいて食品のタイプとセンサーデータを照合し、前記１つまたは複数の処理デバイスは、識別された食品品目についてのレシピ・データに基づいて、栄養素データを提供する、装置。
【請求項４】
請求項３に記載の装置であって、前記１つまたは複数の処理デバイスは、着用者プロファイル情報にアクセスし、前記１つまたは複数の処理デバイスが、着用者消費履歴に基づいて前記食品品目を識別する、装置。
【請求項５】
請求項１に記載の装置であって、前記１つまたは複数の処理デバイスは、第三者によって提供されたレシピ情報にアクセスし、前記１つまたは複数の処理デバイスは、前記レシピ情報および前記消費に基づいて、前記シースルー・ヘッドマウント・ディスプレイに栄養素フィードバックを提供する、装置。
【請求項６】
請求項１に記載の装置であって、前記１つまたは複数の処理デバイスは、着用者プロファイル情報にアクセスし、前記消費データは、前記着用者プロファイル情報に記録され、後の消費イベントのためのフィードバック情報に組み込まれる、装置。
【請求項７】
請求項１に記載の装置であって、前記消費は、着用者の消費のジェスチャを検出することによって識別される、装置。
【請求項８】
請求項１に記載の装置であって、前記消費は、着用者の消費のサウンドを検出することによって識別される、装置。
【請求項９】
請求項１に記載の装置であって、フィードバックは、前記着用者の１人または複数人の友人による前記食品品目に関するフィードバックを含む、装置。
【請求項１０】
プロセッサおよびコンピューター可読ストレージを含むシースルー・ヘッドマウント・ディスプレイ・デバイスであって、前記ストレージは、前記プロセッサにある方法を実行させ、前記方法は、
前記シースルー・ヘッドマウント・ディスプレイ・デバイスに装着された複数のセンサーから入力を受けるステップであって、前記センサーは、前記シースルー・ヘッドマウント・ディスプレイ・デバイスの視野内の画像データおよび前記シースルー・ヘッドマウント・ディスプレイ・デバイスの着用者の注視を検出するために装着される、受けるステップと、
前記画像データおよび前記着用者の注視に基づいて、前記シースルー・ヘッドマウント・ディスプレイ・デバイスに近接する食品品目を識別するステップと、
ソーシャル・ネットワークからの１つまたは複数の食品品目のソーシャル・フィードバック情報にアクセスするステップであって、前記ソーシャル・フィードバック情報は、着用者の１人または複数人の友人からの、識別された前記食品品目のうちの１つまたは複数に関するソーシャル・メディア情報に基づく、ステップと、
識別された前記食品品目のうちの１つまたは複数の消費を検出し、識別された前記食品品目のうちの前記１つまたは複数についての消費フィードバック情報を生成するステップと、
前記シースルー・ヘッドマウント・ディスプレイ・デバイスにおける仮想物体としての表示のために、前記食品品目に関する前記ソーシャル・フィードバック情報および前記消費フィードバック情報を提供するステップであって、前記フィードバック情報の各々は、前記食品品目のうちの１つまたは複数と共に識別できる、ステップと
を含む、シースルー・ヘッドマウント・ディスプレイ・デバイス。
【請求項１１】
請求項１０に記載のシースルー・ヘッドマウント・ディスプレイ・デバイスであって、前記フィードバック情報は、
前記１つまたは複数の食品品目の栄養素情報、
前記１つまたは複数の食品品目の着用者健康情報、および
前記１つまたは複数の食品品目に関するソーシャルフレンドの推奨
のうちの１つを含む、シースルー・ヘッドマウント・ディスプレイ・デバイス。
【請求項１２】
請求項１０に記載のシースルー・ヘッドマウント・ディスプレイ・デバイスであって、識別するステップは、
前記ディスプレイ・デバイスのロケーションを決定するステップと、
前記ロケーションに関連する食品品目データにアクセスするステップと、
前記ロケーションおよび前記食品品目データに基づいて食品品目を決定するために、前記画像データを評価するステップと
を含む、シースルー・ヘッドマウント・ディスプレイ・デバイス。
【請求項１３】
請求項１２に記載のシースルー・ヘッドマウント・ディスプレイ・デバイスであって、識別するステップは、前記ロケーションに関連するメニューの品目を解析するために前記画像データおよび前記着用者の注視を評価するステップと、前記ロケーションに関連する前記食品品目データと前記メニューの品目を照合するステップとを含み、フィードバックを提供するステップは、前記食品品目のロケーション特定フィードバックを提供するステップを含む、シースルー・ヘッドマウント・ディスプレイ・デバイス。
【請求項１４】
請求項１０に記載のシースルー・ヘッドマウント・ディスプレイ・デバイスであって、識別するステップは、前記画像データおよび前記着用者の注視を評価するステップと、ロケーションに関連する食品品目データを有するメニューの既知の食品に関連するデータと前記画像データにおける品目を照合するステップとを含み、フィードバックを提供するステップは、前記食品品目のロケーション特定フィードバックを提供するステップを含む、シースルー・ヘッドマウント・ディスプレイ・デバイス。
【請求項１５】
シースルー・ヘッドマウント・ディスプレイ・システムの視野に食品品目の栄養素フィードバックを提供するための方法であって、
前記シースルー・ヘッドマウント・ディスプレイ・システムのロケーション、向きおよび視野を決定するステップと、
前記ロケーション用に第三者データが利用可能かどうかを判定し、利用可能ならば、前記ロケーションに前記第三者データを関連付けるステップであって、前記第三者データは、ソーシャル・ネットワークからの食品品目についての食品識別データおよび栄養素情報を含む、ステップと、
前記シースルー・ヘッドマウント・ディスプレイ・システムに近接する食品品目を識別するために、前記シースルー・ヘッドマウント・ディスプレイ・システムからのセンサーデータを評価するステップであって、評価する前記ステップは、前記ソーシャル・ネットワークから入手した前記第三者データを使用する、評価するステップと、
識別された前記食品品目のうちの１つまたは複数と一致し、前記システムの着用者に関係する栄養素フィードバック情報を決定するステップと、
前記着用者による前記１つまたは複数の食品品目の少なくとも一部の消費を検出するステップと、
前記食品品目の少なくとも１つについての前記第三者データおよび前記消費に基づく栄養素フィードバックを、前記着用者に、前記シースルー・ヘッドマウント・ディスプレイ・システムにおいて仮想物体として提供するステップと
を含む方法。
【請求項１６】
請求項１５に記載の方法であって、決定するステップは、前記着用者の１人または複数人の友人を決定するユーザープロファイル情報にアクセスするステップと、さらに、前記着用者の前記１人または複数人の友人に基づく前ソーシャル・フィードバック情報を前記着用者に提供するステップとを含む、方法。
【請求項１７】
請求項１６に記載の方法であって、評価する前記ステップは、前記視野内の食品品目を識別するために、食品品目データをセンサーデータと照合するステップを含む、方法。
【請求項１８】
請求項１７に記載の方法であって、決定する前記ステップは、前記食品品目の決定に基づいて、推定栄養素データを識別された食品品目と照合するステップを含む、方法。
【請求項１９】
請求項１８に記載の方法であって、着用者の消費のジェスチャを検出することによって消費を検出するステップをさらに含む方法。
【請求項２０】
請求項１８に記載の方法であって、着用者の消費のサウンドを検出することによって消費を検出するステップを含む方法。