(57)【要約】【課題】リアルタイム拡張現実（ＡＲ）活動フィードバックを提供する。【解決手段】リアルタイム拡張現実（ＡＲ）活動フィードバックの態様では、システムは、活動に参加する人の筋骨格状態を監視するためのウェアラブルセンサを含む。センサデバイスハブは、人が活動のセッションに参加するときにウェアラブルセンサからセンサ情報を受信するように実装された活動比較モジュールを含む。活動比較モジュールは、受信したセンサ情報から、人が活動を実施している状態の第１のフォームを含む活動データを決定する。センサデバイスハブの活動比較モジュールは、活動を実施している人の第１のフォームを活動の代表的なフォームと比較し、活動を実施している人の第１のフォームを活動の代表的なフォームと比較した状態の指示であるリアルタイム比較フィードバックを開始するようにも実装されている。【選択図】  図１
2020024680.tif 000002
【特許請求の範囲】
【請求項１】
リアルタイムの拡張現実（ＡＲ）活動フィードバックのための方法であって、
人が活動に参加するときにウェアラブルセンサからのセンサ情報を記録するステップと、
記録された前記センサ情報から、人が活動を実施している状態のフォームを含む活動データを決定するステップと、
活動を実施している人の前記フォームを活動を実施する正しいフォームと比較するステップと、
前記活動データと、活動を実施している人の前記フォームを改善するための方法の指示とを含むリアルタイムのフィードバックを提供するステップとを含む方法。
【請求項２】
前記リアルタイムのフィードバックが、視覚的フィードバック、聴覚的フィードバック、および触覚的フィードバックのうちの少なくとも１つとして提供される、請求項１に記載の方法。
【請求項３】
前記視覚的フィードバックが前記活動データのグラフィック表現を含む、請求項２に記載の方法。
【請求項４】
前記視覚的フィードバックが、活動を実施している人を表すアバター、または活動を実施している人の前記フォームを活動を実施する前記正しいフォームと比較するためのアバターの少なくとも１つを含む、請求項２に記載の方法。
【請求項５】
前記聴覚的フィードバックが、活動を実施している人の前記フォームを改善するための聴覚的指導を含む、請求項２に記載の方法。
【請求項６】
前記触覚的フィードバックは、活動を実施している人の前記フォームを改善するための触覚的指示を含む、請求項２に記載の方法。
【請求項７】
リアルタイムの拡張現実（ＡＲ）活動フィードバックのための方法であって、
人が活動のセッションに参加するときにウェアラブルセンサからのセンサ情報を記録するステップと、
記録された前記センサ情報から、活動の前記セッションを実施している人の状態のフォームを決定するステップと、
人が活動の次のセッションに参加するときに前記ウェアラブルセンサからのセンサ情報を記録するステップと、
記録された前記センサ情報から、人が活動の前記次のセッションを実施している状態の追加のフォームを決定するステップと、
前記活動の前記次のセッションを実施している人の前記追加のフォームを前記活動の前記セッションを実施している人の前記フォームと比較するステップと、
リアルタイムのフィードバックとして比較を提供するステップとを含む方法。
【請求項８】
前記比較を提供するステップは、人によって実施される活動の前記次のセッションが、人によって実施される活動の前記セッションに対する改善であるかどうかを示す聴覚的フィードバックを提供することを含む、請求項７に記載の方法。
【請求項９】
前記比較を提供するステップは、活動の前記セッションを実施している人を表す第１のアバターを、活動の前記次のセッションを実施している人を表す第２のアバターとほぼ同期して表示することを含む、請求項７に記載の方法。
【請求項１０】
リアルタイム拡張現実（ＡＲ）活動フィードバックのためのシステムであって、
活動に参加する人の筋骨格状態を監視するためのウェアラブルセンサと、
センサデバイスハブとを備え、前記センサデバイスハブは、
人が活動のセッションに参加するときに前記ウェアラブルセンサからセンサ情報を受信し、
受信した前記センサ情報から、人が活動を実施している状態のフォームを含む活動データを決定し、
活動を実施している人の前記フォームを活動の代表的なフォームと比較し、
活動を実施している人の前記フォームを活動の前記代表的なフォームと比較した状態の指示であるリアルタイム比較フィードバックを開始するように構成された活動比較モジュールを含む、システム。
【請求項１１】
前記ウェアラブルセンサは、活動に参加する人の心血管状態を監視するための心血管センサを含む、請求項１０に記載のシステム。
【請求項１２】
前記センサデバイスハブがＲＦＩＤリーダを含み、前記ウェアラブルセンサが、前記活動を実施している人の筋骨格状態および心血管状態を記録するように実装されたＲＦＩＤタグを含む、請求項１１に記載のシステム。
【請求項１３】
活動の前記代表的なフォームは、活動の正しいフォームである、請求項１０に記載のシステム。
【請求項１４】
前記活動の前記代表的なフォームは、活動の前のセッション中に活動を実施している人のフォームである、請求項１０に記載のシステム。
【請求項１５】
活動の前記代表的なフォームは、活動を実施している少なくとも１人の追加の人のフォームである、請求項１０に記載のシステム。
【請求項１６】
前記センサデバイスハブは、前記リアルタイム比較フィードバックを視覚的フィードバック、聴覚的フィードバック、および触覚的フィードバックのうちの少なくとも１つとして提供するように構成されたモバイルデバイスである、請求項１０に記載のシステム。
【請求項１７】
前記センサデバイスハブは、人が活動を実施している実際の環境において活動を実施している人を表すアバターのオーバーレイを表示するための拡張現実（ＡＲ）画面を備えた眼鏡である、請求項１０に記載のシステム。
【請求項１８】
前記センサデバイスハブは、前記センサデバイスハブが活動の別のセッションに対して人に同じルートを提供し、かつリアルタイムの比較フィードバックを提供するために、人によって実施される活動のセッションの活動ルートを追跡するように実装された場所特定可能な追跡を含む、請求項１０に記載のシステム。
【請求項１９】
活動の前記代表的なフォームは、活動の以前のセッションとの競争のために、活動の以前のセッションを人のアバターとして実施している人のフォームである、請求項１０に記載のシステム。
【請求項２０】
活動の前記代表的なフォームは、人が競争するか、またはペースを合わせるために活動を正しく実施しているアバターとして提供される活動の正しいフォームである、請求項１０に記載のシステム。
【発明の詳細な説明】
【背景技術】
【０００１】
従来は、活動追跡機またはフィットネスモニタを使用して、人が活動をしている間の歩数、移動距離、獲得標高、および消費カロリーを追跡していた。さらに、追跡機またはモニタによっては、人の心拍数を監視し、かつソフトウェアアプリケーションを使用してスマートフォンまたはタブレットに接続して、ターゲットの追跡を維持するとともに、追跡した情報を記録することができる。しかしながら、従来の活動追跡機およびフィットネスモニタは、人の筋骨格状態を判定するのに役立てるために、筋肉活動、骨格アライメント、血圧、ならびに体の傾きおよび回転などの複数のコンポーネントを監視していない。典型的には、従来の追跡機およびモニタは、履歴データ、例えば、ジョギング中に移動した距離、またはハイキング中に獲得した標高を単に提供するだけである。
【図面の簡単な説明】
【０００２】
【図１】リアルタイムの拡張現実活動フィードバックの態様を実施することができる例示的な環境を示す図。
【図２】本明細書に記載の１つまたは複数の実施形態によるリアルタイムの拡張現実活動フィードバックのための例示的なデバイスを示す図。
【図３】本明細書に記載の１つまたは複数の実施形態によるリアルタイムの拡張現実活動フィードバックの例示的な方法を示す図。
【図４】本明細書に記載の１つまたは複数の実施形態によるリアルタイムの拡張現実活動フィードバックの例示的な方法を示す図。
【図５】リアルタイムの拡張現実活動フィードバックの態様を実施することができる例示的なデバイスの様々なコンポーネントを示す図。
【発明を実施するための形態】
【０００３】
リアルタイムの拡張現実活動フィードバックの態様は、以下の図を参照して説明される。図面に示されている同様の特徴および構成要素を参照するために、全体を通して同じ番号を使用することがある。
【０００４】
リアルタイムの拡張現実（ＡＲ：ａｕｇｍｅｎｔｅｄ  ｒｅａｌｉｔｙ）活動フィードバックの態様、および活動を実施する人に、活動の実施に関するフィードバックとしての視覚的および／または聴覚的な指導、ならびに任意の形態の触覚的フィードバックをリアルタイムに提供することを可能にする機能が説明されている。一般に、複数のウェアラブルセンサのシステムは、活動を実施しながら人の筋骨格および心血管の状態を記録することができ、複数のウェアラブルセンサからのセンサデータは、センサデバイスハブに通信可能にリンクすることができる。ウェアラブルセンサのうちの任意の１つは、センサデバイスハブとして実施されてもよく、代替的に、センサデバイスハブは、ウェアラブルセンサとは別のデバイスとして実施されてもよい。センサデバイスハブは、ウェアラブルセンサ情報を使用して活動を実施している人のフォームを決定し、活動を実施している人のフォームを活動の代表的なフォームと比較し、比較結果をリアルタイムのフィードバックとして視覚的、聴覚的、および／または触覚的なフィードバックの形式で提供するように設計されている。
【０００５】
実施形態では、センサデバイスハブは、無線周波数識別（ＲＦＩＤ：ｒａｄｉｏ  ｆｒｅｑｕｅｎｃｙ  ｉｄｅｎｔｉｆｉｃａｔｉｏｎ）リーダを含むことができ、かつウェアラブルセンサはＲＦＩＤタグを装備することができ、またはワイヤレスセンサとして実施することができる。例えば、センサデバイスハブは、一体型コンポーネントとして、またはモバイルフォンと共に動作するアタッチメントとしてのいずれかで、ＲＦＩＤリーダを含むモバイルフォンとして実施されてもよい。一般に、ＲＦＩＤタグを装備したウェアラブルセンサを使用する人は、ある種の運動または理学療法などの活動を実施するであろう。次に、ＲＦＩＤリーダを装備したセンサデバイスハブは、各ウェアラブルセンサに関連するＲＦＩＤタグからセンサデータを読み取ることができ、センサデータは、人の筋骨格の状態および心血管の状態に対応する情報を含む。同様に、センサハブデバイスは、活動を実施する人が着用するワイヤレスセンサと通信して、ワイヤレスセンサからセンサデータを取得するワイヤレスセンサリーダまたは無線システムを装備することができる。
【０００６】
リアルタイムの拡張現実活動フィードバックの態様では、センサデバイスハブは、センサデータから決定された、活動を実施している人のフォームを実施される活動の代表的なフォームと比較するように設計された活動比較モジュールを実施することもできる。活動比較モジュールは、続いて活動を実施している人のフォームを改善するかための方法の指示としてのリアルタイム活動フィードバックを開始することができる。ウェアラブルセンサに関連付けられたＲＦＩＤタグからセンサデバイスハブのＲＦＩＤリーダによって読み取られたセンサデータは、筋活動、骨格ポジショニング、酸素摂取量などの人が運動を実行している状態を判断するために必要な情報を提供する。活動を実施している人のフォームが決定され、かつ活動の代表的なフォームと比較される。ここで、一般に、例示的な代表的なフォームは、活動の正しいフォームである。活動を実施している人に、そのフォームを改善または修正するための方法を示すリアルタイムの比較フィードバックが開始される。リアルタイム比較フィードバックは、視覚的、聴覚的、および／または触覚的フィードバックの任意の形態であり得る。例えば、活動を実施している人を表すアバターを、その人が活動を実施している間に自身のフォームを改善し得る方法についての視覚的フィードバックおよび聴覚的な指導として提供することができる。
【０００７】
例えば、人は、ＲＦＩＤタグを備えた筋骨格センサおよび心血管センサを装着しながら、ジムで運動し、腕立て伏せをするなどの特定の活動を実施していることがある。人が腕立て伏せをしているとき、ＲＦＩＤタグは人の筋骨格状態に対応するセンサデータを記憶する。人はまた、センサデータを読み取るＲＦＩＤリーダを備えたセンサデバイスハブとして実施されるモバイルフォンを所有し得る。活動を実施している人のフォームは、センサデータから決定され、かつ腕立て伏せの正しいフォームと比較される。人が腕立て伏せをしているとき、その人にリアルタイムのフィードバックがモバイルデバイスを介して提供される。代替的にまたは追加的に、リアルタイムのフィードバックは、人への直接フィードバックとして触覚的指示を生成するバイブレーション部品を有するワイヤレスセンサから直接的など、任意の形態の触覚的フィードバックとして提供されてもよい。一般に、リアルタイムのフィードバックは、ワイヤレスセンサおよびモバイルデバイスを含む、システムの様々なコンポーネントのうちの任意のものから生成および／または提供され得る。リアルタイムのフィードバックは、腕立て伏せを正しく実施しているかどうか、また正しくない場合は、フォームを修正するために何が必要であるのかを人に知らせる情報を提供することができる。フィードバックはリアルタイムであるため、人は腕立て伏せをしながら自分が行った変更をモニタリングして、１つの腕立て伏せから次の腕立て伏せまでに自身のフォームを継続的に改善することができる。
【０００８】
上記したように、提供されるリアルタイムの比較フィードバックは、視覚的、聴覚的、および／または触覚的フィードバックの任意の形態であり得る。例えば、人による腕立て伏せのフォームを改善するための方法に関する聴覚的な指導は、モバイルデバイス上のスピーカを通して再生され得る。代替的に又は追加的に、視覚的な指示がモバイルデバイスの表示画面上に提供され得る。視覚的な指示は、人によって実施されている腕立て伏せのフォームを改善するための方法についてのグラフィックデータおよび／またはテキストによる指導を含むことができる。追加的または代替的に、腕立て伏せをしている人を表すアバターを表示することができ、および／または比較のために腕立て伏せが正しく実施されているアバターを表示することができる。
【０００９】
リアルタイムの拡張現実活動フィードバックの態様では、センサデバイスハブは、場所特定可能な追跡を用いて実施することもできる。場所特定可能な追跡は、センサデバイスハブが活動の別のセッションに対して人に同じルートを提供するために、人によって実施される活動のセッションの活動ルートを追跡するために使用することができる。例えば、人が活動としてランニングまたはジョギングに行くとき、場所特定可能な追跡を実装したセンサデバイスハブは、人がランニングするルートおよび距離を追跡することができる。その後、センサデバイスハブは、他のランニングセッションと比較するために、視覚的、聴覚的、および／または触覚的フィードバックとして同じルートおよび距離を人に提供することができる。
【００１０】
リアルタイムの拡張現実活動フィードバックの特徴および概念は、任意の数の個別の装置、システム、環境、および／または構成で実施することができるが、リアルタイムの拡張現実活動フィードバックの態様は、以下の例示的なデバイス、システム、および方法に関連して説明する。
【００１１】
図１は、リアルタイムの拡張現実活動フィードバックの態様を実施することができる例示的な環境１００を示す。例示的な環境１００は、人が運動、理学療法、切断患者のリハビリテーション、仕事に関連した反復的な持ち上げなどの任意の種類の身体活動を実施することを所望する屋外または屋内（例えば、浜辺またはヘルスクラブ内）の任意の実際の環境で実施し得る。例示的な環境１００は、この例示的なジョギングにおいて、活動を実施している間、複数のウェアラブルセンサを装着している人１０２を含む。ウェアラブルセンサは、限定はしないが、人の活動に関連するデータを取得することを意図した任意の種類の筋骨格センサ（例えば、腕部センサ１０４、手首に設置されたセンサ１０６、および脚部センサ１０８）、ならびに心血管センサ（例えば、心臓センサ１１０）として実施され得る。例えば、ウェアラブルセンサは、筋活動、骨格位置および骨格アライメント、体の動きおよび血圧、心拍数、酸素摂取量、ならびに人の体位および状態に関する任意の他のセンサデータをリアルタイムで取得する。別々に示されているが、センサは、複数のセンサを装備した単一の全身スーツまたはいくつかの衣料品などの他の構成で代替的または追加的に実施されてもよい。さらに、切断患者のリハビリテーションを支援するために、センサを人工装具に組み込んで、リアルタイムの拡張現実活動フィードバックを実施するようにしてもよい。
【００１２】
ウェアラブルセンサは、無線周波数識別（ＲＦＩＤ）タグなどのワイヤレスの無線ベースのタグを装備することができる。一般に、ＲＦＩＤタグは、センサデータおよび他のセンサ情報をメモリに記録する小型の電子タグである。例えば、手首に設置されたセンサ１０６は、ＲＦＩＤタグ１１２とともに実装され、ＲＦＩＤタグ１１２は、ＲＦＩＤタグと関連するウェアラブルセンサ１０６で取得されたセンサデータ１１４を格納するメモリを含む。同様に、他のウェアラブルセンサは、各々関連するウェアラブルセンサによって取得されたデータを格納するための個々のＲＦＩＤタグを装備し得る。ＲＦＩＤタグとして説明されているが、ワイヤレスの無線ベースのタグ（例えば、ＲＦＩＤタグ１１２）は、ＬＴＥ、近距離無線通信（ＮＦＣ：Ｎｅａｒ  Ｆｉｅｌｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎ）、リアルタイム位置検出システム（ＲＴＬＳ：Ｒｅａｌ−ｔｉｍｅ  Ｌｏｃａｔｉｎｇ  Ｓｙｓｔｅｍ）、ブルートゥース（Ｂｌｕｅｔｏｏｔｈ）（登録商標）デバイス、任意の他の種類のワイヤレスセンサを用いる等の様々な異なる無線ベースのワイヤレスタグシグナル伝達用に実施することができる。例えば、ウェアラブル脚部センサ１０８は、ウェアラブル脚部センサ１０８から取得したセンサデータ１１８を格納するメモリを含むワイヤレスセンサ１１６として実施される。
【００１３】
さらに、例示的な環境１００は、ＲＦＩＤタグおよび／または他のワイヤレスセンサのメモリに格納されたセンサデータ１１４、１１８を返送するようにＲＦＩＤタグおよび／またはウェアラブルセンサに関連する他のワイヤレスセンサに要求するブロードキャストメッセージとしての質問信号を送信するように実装されたＲＦＩＤリーダ１２２（または他の種類のワイヤレスセンサリーダ）を備えたセンサデバイスハブ１２０を含む。ＲＦＩＤタグおよび／または他のワイヤレスセンサは、ＲＦＩＤリーダ１２２または他の種類のワイヤレスセンサリーダからの質問信号を受信し、次いでセンサデバイスハブのＲＦＩＤリーダおよび／または他のワイヤレスセンサリーダに戻るセンサデータを（１２４にて）無線通信することができる。一般に、センサデバイスハブ１２０は、この例示的な環境で説明されているウェアラブルセンサおよび／またはデバイスのうちの任意の１つまたは複数として実施することができる。例えば、センサデバイスハブ１２０は、ワイヤレスセンサ１１６として、人１０２によって携帯されるモバイルフォン１２６として、または人によって装着され得る拡張現実（ＡＲ）眼鏡１２８として実施または指定され得る。特に、拡張現実（ＡＲ）眼鏡１２８は、センサデバイスハブを実施するために、個別にまたはモバイルフォン１２６と組み合わせて使用することができる。用語「人」および「ユーザ」は、本明細書では一般的に交換可能に使用され、ここで、モバイルフォン１２６を有する人１０２は、例示的な環境１００におけるモバイルフォンのユーザでもある。
【００１４】
この事例では、センサデバイスハブ１２０は、記載されたリアルタイムの拡張現実活動フィードバックの機能を実施する活動比較モジュール１３０を含む。実施形態では、活動比較モジュール１３０は、センサデバイスハブ１２０と一体化されたコンピューティングデバイスおよび／または電子デバイスとして機能する、独立した処理、メモリ、および論理コンポーネントを含み得る。代替的にまたは追加的に、活動比較モジュール１３０は、センサデバイスハブのプロセッサまたは処理システム１３２を用いて実行可能なコンピュータ実行可能ソフトウェア命令などのソフトウェアアプリケーションとして実装されることができる。ソフトウェアアプリケーションとして、活動比較モジュール１３０は、コンピュータ可読ストレージメモリ１３４上に、またはセンサデバイスハブとともに実装された任意の適切なメモリデバイスもしくは電子データストレージを用いて格納されることができる。
【００１５】
センサデバイスハブ１２０によって実施される活動比較モジュール１３０は、ウェアラブルセンサ１０６で受信されたセンサデータ１１４およびウェアラブルセンサ１０８で受信されたセンサデータ１１８など、ワイヤレスセンサおよび／または各ウェアラブルセンサのＲＦＩＤタグのメモリに格納されたセンサデータを（１２４で）受信することができる。活動比較モジュール１３０は、センサデータ１１４、１１８をセンサ情報１３６として受け取り、センサ情報から、活動比較モジュールは、運動している人１０２、この事例では、ジョギングまたはランニングしている人によって実施された活動のフォームを判定することができる。活動比較モジュール１３０が活動を実施している人のフォーム（例えば、運動）を実施されている活動（例えば、運動）の代表的なフォーム１４０と比較し、運動している人のフォームを代表的なフォームと比較した状態の指示を提供することによって、リアルタイム比較フィードバック１３８が次に決定されることができる。例えば、リアルタイム比較フィードバック１３８は、センサ情報１３６から決定された人１０２のジョギングフォームを代表的なフォーム１４０と比較することによって決定することができ、代表的なフォームは、ジョギングまたはランニングの正しいフォームまたは理想的なフォームであり得る。
【００１６】
この事例では、人１０２のジョギングフォームを正しいジョギングフォームと比較した状態の指示が、センサデバイスハブとして実施されるモバイルフォン１２６の表示画面１４４上に示されるアバターおよび指導１４２の視覚的な指示として、ユーザに提供されることができる。別の例では、ＡＲ眼鏡１２８は、活動を実施するための代表的なフォームのアバター１４６を眼鏡のレンズ１４８上に表示して、実際の環境、この事例では、ユーザがジョギングしている浜辺上で強調されて再生されたアバター１４６をユーザが見ることができる。
【００１７】
センサデバイスハブ１２０は、この例のジョギングのように、人が特定のルートおよび距離をカバーすることになる活動に関わっている人の活動ルートを追跡するように実施される場所特定可能な追跡１５０をも備え得る。活動を実施している人のルートを追跡して、活動の後続のセッション中に同じルートが代表的なフォーム１４０として後に人に提供されるようにすることができる。ＡＲ眼鏡１２８は、人に観察されるように提供されているジョギングの以前のセッションからのルートを、人が前にジョギングしており、かつ現在ジョギングしている実際の環境上にオーバーレイされたＡＲルート１５４として示す。代替的に又は追加的に、アバター１４６は、以前のジョギングセッション中にＡＲルート１５４によって示されるルートをジョギングしている人を表すようにしてもよい。このようにして、人は、自分の以前のジョギングセッションと一緒にジョギングするか、またはそれと競争し得る。特に、アバター１４６は、ＡＲルート１５４によって示されるルート上に人の以前の最高の成績を表して、人が以前の最高の成績を試すことができるようにしてもよい。さらに、代表的なフォーム１４０は、ルート１０２に沿って他の人のジョギングパフォーマンスを表すアバター１４６、例えば、人１０２が競争することを所望する活動パフォーマンスの友人であり得る。
【００１８】
ＲＦＩＤ実装に加えて、センサデバイスハブ１２０は、Ｗｉ−Ｆｉ（登録商標）、ブルートゥース（Ｂｌｕｅｔｏｏｔｈ）（登録商標）、モバイルブロードバンド、ＬＴＥ、近距離無線通信（ＮＦＣ）、リアルタイム位置検出システム（ＲＴＬＳ）または個々の無線ネットワークを介した通信のための任意の他のワイヤレス無線システムまたはフォーマットなどの様々な別個のワイヤレス無線システム１５２を含むことができる。一般に、センサデバイスハブ１２０は、他のデバイス、ネットワーク、およびサービスとのセルラー、無線、および／または他のネットワーク通信用に実装された無線デバイス、アンテナ、およびチップセットとをそれぞれ含む複数の無線システム１５２を実装する。ワイヤレス無線システム１５２は、任意の適切な通信プロトコルまたは規格を実施するように構成することができる。リアルタイムの拡張現実活動フィードバックの特徴および態様は、ＲＦＩＤタグに関連して説明および図示されているが、記載された特徴および態様は、ＬＴＥ、ＮＦＣ、ＲＴＬＳ、Ｂｌｕｅｔｏｏｔｈ（登録商標）デバイス、およびその他を用いるなどの様々な無線ベースのワイヤレスタグシグナル伝達を用いて実装することができる。
【００１９】
図２は、リアルタイムの拡張現実活動フィードバックの態様を実施することができる例示的なデバイス２００を示す。例示的なデバイス２００は、モバイルデバイス２０２、拡張現実（ＡＲ）眼鏡１２８、タブレットデバイス、ウェアラブルデバイス、デスクトップコンピューティングデバイスであり得るか、またはセンサデバイスハブ２０４として実施される、図５を参照して説明される任意の他の種類の電子デバイスおよび／またはコンピューティングデバイスなどの任意の種類の電子デバイスであり得る。代替的または追加的に、センサデバイスハブ２０４は、モバイルデバイス２０２が通信ネットワークを介して通信することができるクラウドベースのサービスとして実装され得る。センサデバイスハブ２０４は、図１を参照して図示および説明した活動比較モジュール１３０と同様に、活動比較モジュール２０６を用いて実施され、活動パフォーマンスのリアルタイム比較フィードバック２０８を提供するように実施される。上記したように、人が活動を実施している状態のフォームを含む活動データは、センサ情報２１０から決定することができる。活動を実施している人のフォームと実施されている活動の代表的なフォーム２１２との比較が決定され、活動を実施している人のフォームを実施されている活動の代表的なフォーム２１２と比較した状態の指示としてリアルタイム比較フィードバック２０８が生成される。
【００２０】
センサデバイスハブ２０４として実施される例示的なモバイルデバイス２０２は、リアルタイム比較フィードバック２０８として視覚的フィードバック、聴覚的フィードバック、および／または触覚的フィードバックを提供するための統合ディスプレイ２１４および／またはオーディオシステム２１６を含み得る。この事例では、視覚的フィードバック２１８は、活動を実施している人のアバター２２０として表示され、視覚的フィードバック２１８は、人が活動を実施するフォームを改善するためのステップを詳述するテキストによる指導２２２を含み得る。加えて、活動比較モジュール２０６は、ユーザが活動を実施するフォームを改善することができる方法を示す、モバイルデバイスのオーディオシステム２１６による指導として聴覚的フィードバック２２４を開始することができる。代替的にまたは追加的に、モバイルデバイス２０２は、図１に示されるような拡張現実（ＡＲ）眼鏡１２８によって提供される視覚的フィードバックを有するセンサデバイスハブとして実装され得る。モバイルデバイス２０２がユーザのモバイルフォンであり、かつ他のデバイスと通信して、ヘルスクラブまたは理学療法施設における壁掛けディスプレイデバイスなどにより視覚的フィードバックおよび／または聴覚的フィードバックを提供するセンサデバイスハブとして実施されるような代替実施形態も考えられ得る。
【００２１】
リアルタイムの拡張現実活動フィードバックの他の実施形態では、モバイルデバイス２０２の統合ディスプレイ２１４上に視覚的フィードバック２１８として示されているアバター２２０は、活動の代表的なフォーム２１２であり得る。活動の代表的なフォーム２１２は、実施されている活動の正しいフォームであるか、代替的に、活動の以前のセッション中に活動を実施している人を表すか、またはパーソナルトレーナー、グループエクササイズインストラクター、または理学療法士などの活動を実施する補助人員の表示であり得る。さらに、２つのアバターが視覚的フィードバック２１８として示されてもよく、１つのアバターが活動を実施している人を表し、第２のアバターが実施されている活動の代表的なフォーム２１２の表示である。
【００２２】
例示的な方法３００および４００が、リアルタイムの拡張現実活動フィードバックの実施に従って、個々の図３および４を参照して説明される。一般に、本明細書に記載の任意のサービス、コンポーネント、モジュール、方法、および／または動作は、ソフトウェア、ファームウェア、ハードウェア（例えば、固定論理回路）、手動処理、またはそれらの任意の組み合わせを使用して実装することができる。例示的な方法のいくつかの動作は、コンピュータ処理システムに対してローカルおよび／またはリモートにあるコンピュータ可読ストレージメモリに格納された実行可能命令に一般的に関連して説明されてもよく、実施はソフトウェアアプリケーション、プログラム、機能などを含むことができる。代替的に又は追加的に、本明細書に記載される機能のうちの任意のものは、限定ではないが、フィールドプログラマブルゲートアレイ（ＦＰＧＡ：Ｆｉｅｌｄ−ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙｓ）、特定用途向け集積回路（ＡＳＩＣ：Ａｐｐｌｉｃａｔｉｏｎ−ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔｓ）、特定用途向け標準製品（ＡＳＳＰ：Ａｐｐｌｉｃａｔｉｏｎ−ｓｐｅｃｉｆｉｃ  Ｓｔａｎｄａｒｄ  Ｐｒｏｄｕｃｔｓ）、システムオンチップシステム（ＳｏＣ：Ｓｙｓｔｅｍ−ｏｎ−ａ−ｃｈｉｐ  ｓｙｓｔｅｍｓ）、複合プログラマブルロジックデバイス（ＣＰＬＤ：Ｃｏｍｐｌｅｘ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｌｏｇｉｃ  Ｄｅｖｉｃｅｓ）などの１つまたは複数のハードウェアロジックコンポーネントによって少なくとも部分的に実行されることができる。
【００２３】
図３は、本明細書に記載されているようなリアルタイムの拡張現実活動フィードバックの例示的な方法３００を示しており、その方法は、ウェアラブルセンサに対応するワイヤレスタグと通信するために実施されたセンサデバイスハブに関して一般的に説明されている。方法が記載されている順序は限定として解釈されることを意図するものではなく、記載された方法処理の任意の数または組み合わせは、方法または代替方法を実行するために任意の順序で実施することができる。
【００２４】
３０２において、人が活動をしているときに、複数のウェアラブルセンサからのセンサ情報が記録される。例えば、活動比較モジュール１３０は、ワイヤレス対応デバイス（例えば、ウェアラブルセンサ１０６のＲＦＩＤタグ１１２）のＲＦＩＤリーダ１２２を用いて、かつ／または活動を実施している人１０２によって装着されている複数のウェアラブルセンサに関連するワイヤレスセンサ（例えば、ワイヤレスセンサ１１６）の他の種類のワイヤレスセンサリーダを用いて、センサデバイスハブ１２０からスキャンを開始する。人が活動している間に取得されたセンサデータ１１４、１１８は、ＲＦＩＤリーダ１２２および／または他の種類のワイヤレスセンサリーダ（例えば、ワイヤレス無線システム１５２）によって読み取られ、かつ活動比較モジュール１３０のセンサ情報１３６として記録される。ウェアラブルセンサは、筋活動、骨格位置および骨格アライメント、体の動き、人の体または関節の表面上の血圧、心拍数、酸素摂取量、および活動を実施している人に関連する任意の他のセンサデータを決定するために使用される任意の種類の筋骨格センサまたは心血管センサとすることができる。
【００２５】
３０４において、人が活動を実施している状態のフォームを含む活動データが、記録されたセンサ情報から決定される。例えば、センサデバイスハブ１２０によって実施される活動比較モジュール１３０は、人の活動に関連するデータを取得することを意図した任意の種類の筋骨格センサ（例えば、腕センサ１０４、手首に設置されたセンサ１０６、および脚部センサ１０８）、ならびに心血管センサ（例えば、心臓センサ１１０）などの複数のウェアラブルセンサから取得されたセンサ情報１３６を使用して、人１０２が活動を実施している状態のフォームを決定する。
【００２６】
３０６において、活動を実施している人のフォームが活動の正しいフォームと比較される。例えば、活動比較モジュール１３０は、活動を実施している人１０２のフォームを活動の代表的なフォーム１４０と比較する。代表的なフォーム１４０は、活動の実施するための方法の正しいフォームとすることができる。実施形態では、活動比較モジュール１３０は、活動を実施している間、人が装着しているウェアラブルセンサからのセンサデータ１１４、１１８として記録されるセンサ情報１３６を使用する。
【００２７】
３０８において、活動データと、活動を実施している人のフォームを改善するための方法の指示とを含むリアルタイムのフィードバックが提供される。例えば、活動比較モジュール１３０は、活動を実施している間、自身のフォームを改善するための方法を人１０２に示すリアルタイムのフィードバックを提供することを開始する。リアルタイムのフィードバックは、触覚的フィードバックとして、視覚的フィードバック２１８として、および／または聴覚的フィードバック２２４として提供される。視覚的フィードバック２１８は、人のフォームを活動を実施するための正しいフォームである代表的なフォームと比較している活動データのグラフィック表現を含むことができ、視覚的フィードバックは、その人のフォームを改善するために行う必要がある変更を人に示すことができる。グラフィック表現は、図２に示されるテキストによる指導２２２のように、人のフォームを改善するために取るべきステップの文書化された指導をも含み得る。代替的または追加的に、視覚的フィードバック２１８は、活動を実施している人を表すアバター２２０などのアバターを含み得、人は自身のフォームを確認して、改善のために必要な調整を行うことができる。聴覚的フィードバック２２４は、活動を実施している人のフォームを改善するための聴覚的指導を含むことができる。
【００２８】
図４は、本明細書に記載されているようなリアルタイムの拡張現実活動フィードバックの例示的な方法４００を示しており、この方法は一般に、センサデバイスハブによって実施される活動比較モジュールを参照して説明される。方法が記載されている順序は限定として解釈されることを意図するものではなく、記載された方法処理の任意の数または組み合わせは、方法または代替方法を実行するために任意の順序で実施することができる。
【００２９】
４０２において、人が活動のセッションに参加すると、ウェアラブルセンサからのセンサ情報が記録される。例えば、活動比較モジュール１３０は、活動のセッションに参加している人１０２によって装着されている複数のウェアラブルセンサに関連するワイヤレス対応デバイス（例えば、ウェアラブルセンサ１０６のＲＦＩＤタグ１１２）のＲＦＩＤリーダ１２２を用いて、センサデバイスハブ１２０からスキャンを開始する。人が活動している間に取得されたセンサデータ１１４、１１８は、ＲＦＩＤリーダ１２２および／または他の種類のワイヤレスセンサリーダ（例えば、ワイヤレス無線システム１５２）によって読み取られ、かつ活動比較モジュール１３０のセンサ情報１３６として記録される。ウェアラブルセンサは、筋活動、骨格位置および骨格アライメント、体の動き、人の体または関節の表面上の血圧、心拍数、酸素摂取量、および活動を実施している人に関連する任意の他のセンサデータを決定するために使用される任意の種類の筋骨格センサまたは心血管センサとすることができる。
【００３０】
４０４において、人が活動のセッションを実施している状態のフォームを含む活動データが、記録されたセンサ情報から決定される。例えば、センサデバイスハブ１２０によって実施される活動比較モジュール１３０は、人の活動に関連するデータを取得することを意図した任意の種類の筋骨格センサ（例えば、腕センサ１０４、手首に設置されたセンサ１０６、および脚部センサ１０８）、ならびに心血管センサ（例えば、心臓センサ１１０）などの複数のウェアラブルセンサから取得されたセンサ情報１３６を使用して、人１０２が活動のセッションを実施している状態のフォームを決定する。
【００３１】
４０６において、人が活動の次のセッションに参加すると、ウェアラブルセンサからのセンサ情報が記録される。例えば、活動比較モジュール１３０は、活動の次のセッションに参加している人１０２によって装着されている複数のウェアラブルセンサに関連するワイヤレス対応デバイス（例えば、ウェアラブルセンサ１０６のＲＦＩＤタグ１１２）のＲＦＩＤリーダ１２２を用いて、センサデバイスハブ１２０からスキャンを開始する。人が活動している間に取得されたセンサデータ１１４、１１８は、ＲＦＩＤリーダ１２２および／または他の種類のワイヤレスセンサリーダ（例えば、ワイヤレス無線システム１５２）によって読み取られ、かつ活動比較モジュール１３０のセンサ情報１３６として記録される。
【００３２】
４０８において、人が活動を実施している状態の追加のフォームを含む活動データが、記録されたセンサ情報から決定される。例えば、センサデバイスハブ１２０によって実施される活動比較モジュール１３０は、ウェアラブルセンサから取得されたセンサ情報１３６を使用して、人１０２が活動を実施している状態の追加のフォームを決定する。
【００３３】
４１０において、次のセッション中に活動を実施している人の追加のフォームが、前のセッション中に活動を実施している人のフォームと比較される。例えば、活動比較モジュール１３０は、複数のウェアラブルセンサから取得されたセンサ情報１３６に基づいて、（４０８で決定された）活動を実施している人１０２の追加のフォームと（４０４で決定された）活動を実施している人１０２の前のフォームとを比較する。特に、活動を実施している人の前後のフォームの比較は、前の活動の一部および／または活動の指定された最良の部分を含むようにするために、任意の数の前の活動間の比較を含むことができる。
【００３４】
４１２において、リアルタイム比較フィードバックが提供される。例えば、活動比較モジュール１３０は、触覚的フィードバックとして、視覚的フィードバック２１８として、および／または聴覚的フィードバック２２４として、リアルタイム比較フィードバックを提供することを開始する。触覚的フィードバックは、活動を実施している人のフォームを改善するための触覚的指示としてワイヤレスセンサを介して実施され得る。視覚的フィードバック２１８は、活動の第１のセッションからの活動データを活動の第２のセッションからの活動データと比較し、活動を実施している人のフォームがセッションからセッションへと改善しているかどうかを示すグラフィック表現を含み得る。代替的に又は追加的に、視覚的フィードバック２１８は、活動の第１のセッションからの活動を実施する人を表すアバター２２０等のアバターを含んで、人が自身のフォームを確認して、活動の第２のセッションに参加するときに、改善のために必要な調整を行うことができるようにしてもよい。代替的に、視覚的フィードバックは、比較用に活動に参加している人の２つのアバターを含み、１つのアバターは、活動の第１のセッションに参加している人を表し、第２のアバターは、活動の第２のセッションに参加している人を表す。聴覚的フィードバック２２４は、活動の第１および第２のセッションに参加している人のフォームの改善を示す聴覚的比較、ならびに活動を実施している間にフォームを改善することができる方法についての指導を含むことができる。
【００３５】
図５は、リアルタイムの拡張現実活動フィードバックの態様を実施することができる例示的なデバイス５００の様々なコンポーネントを示す。例示的なデバイス５００は、任意の種類のモバイルデバイス、モバイルフォン、クライアントデバイス、ウェアラブルデバイス、タブレット、コンピューティング、通信、娯楽、ゲーム、メディア再生、および／または他の種類の電子デバイスなど、以前の図１〜４を参照して説明したデバイスのうちのいずれかとして実施することができる。例えば、図１〜４を参照して示され説明されたセンサデバイスハブ１２０および２０４、モバイルフォン１２６、拡張現実（ＡＲ）眼鏡１２８、ならびにモバイルデバイス２０２は、例示的なデバイス５００として実施され得る。さらに、ウェアラブルデバイスは、腕時計、アームバンド、リストバンド、ブレスレット、手袋または一対の手袋、眼鏡またはゴーグル、宝飾品、衣料品、任意の種類の履物またはヘッドウェア、ウェアラブルセンサ、および／またはセンサ内蔵のウェアラブルアイテムを含むその他の種類のウェアラブル製品のいずれか１つまたはそれらの組み合わせを含み得る。
【００３６】
デバイス５００は、他のデバイスとのデバイスデータ５０４の有線および／または無線通信を可能にする通信トランシーバ５０２を含む。デバイスデータ５０４は、センサデータおよび情報、活動パフォーマンスのリアルタイム比較フィードバック、活動を実施する代表的なフォーム、音声データ、および位置追跡データのいずれかを含むことができる。さらに、デバイスデータ５０４は、任意の種類のオーディオデータ、ビデオデータ、および／または画像データを含むことができる。通信トランシーバ５０２の例は、様々なＩＥＥＥ８０２．１５（Ｂｌｕｅｔｏｏｔｈ（登録商標））規格に準拠するワイヤレスパーソナルエリアネットワーク（ＷＰＡＮ：ｗｉｒｅｌｅｓｓ  ｐｅｒｓｏｎａｌ  ａｒｅａ  ｎｅｔｗｏｒｋ）無線機、様々なＩＥＥＥ８０２．１１（ＷｉＦｉ（登録商標））規格のいずれかに準拠するワイヤレスローカルエリアネットワーク（ＷＬＡＮ：ｗｉｒｅｌｅｓｓ  ｌｏｃａｌ  ａｒｅａ  ｎｅｔｗｏｒｋ）無線機、セルラーフォン通信用ワイヤレス広域ネットワーク（ＷＷＡＮ：ｗｉｒｅｌｅｓｓ  ｗｉｄｅ  ａｒｅａ  ｎｅｔｗｏｒｋ）無線機、様々なＩＥＥＥ８０２．１６（ＷｉＭＡＸ（登録商標））規格に準拠するワイヤレスメトロポリタンエリアネットワーク（ＷＭＡＮ：ｗｉｒｅｌｅｓｓ  ｍｅｔｒｏｐｏｌｉｔａｎ  ａｒｅａ  ｎｅｔｗｏｒｋ）無線機、およびネットワークデータ通信用の有線ローカルエリアネットワーク（ＬＡＮ：ｌｏｃａｌ  ａｒｅａ  ｎｅｔｗｏｒｋ）イーサネットトランシーバを含む。
【００３７】
また、デバイス５００は、１つまたは複数のデータ入力ポート５０６を含むことができる。このデータ入力ポート５０６を介して、任意のタイプのデータ、メディアコンテンツ、および／または入力を受信することができる。これらのデータ、メディアコンテンツ、および／または入力としては、例えば、デバイスに対するユーザ選択可能入力、メッセージ、音楽、テレビコンテンツ、記録コンテンツ、ならびに、任意のコンテンツおよび／またはデータソースから受信される任意の他のタイプのオーディオデータ、ビデオデータ、および／または画像データなどが挙げられる。データ入力ポートは、ＵＳＢポート、同軸ケーブルポート、およびフラッシュメモリやＤＶＤやＣＤなどに対する他のシリアルまたはパラレルコネクタ（内部コネクタを含む）を含み得る。これらのデータ入力ポートは、任意のタイプのコンポーネント、周辺機器、あるいは、マイクロホンおよび／またはカメラなどのアクセサリにデバイスを結合するために使用され得る。
【００３８】
デバイス５００は、１つまたは複数のプロセッサ（例えば、任意のマイクロプロセッサ、コントローラなど）および／またはコンピュータ実行可能命令を処理するシステムオンチップ（ＳｏＣ）として実装されるプロセッサおよびメモリシステムなどのプロセッサシステム５０８を含む。プロセッサシステムは、少なくとも一部をハードウェアで実現することができる。この処理システムとしては、集積回路またはオンチップシステムのコンポーネントを含むハードウェア、特定用途向け集積回路（ＡＳＩＣ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、コンプレックスプログラマブルロジックデバイス（ＣＰＬＤ）、シリコンおよび／または他のハードウェアでの他の実施形態を含む。代替的にまたは追加的に、デバイスは、概して５１０で識別される処理および制御回路に関連して実施されるソフトウェア、ハードウェア、ファームウェア、固定ロジック回路のうちの任意の１つまたはそれらの組み合わせで実施することができる。デバイス５００は、任意のタイプのシステムバス、またはデバイス内の種々のコンポーネントを接続する他のデータおよびコマンド転送システムを含み得る。システムバスは、個別のバス構造およびアーキテクチャのうちの任意の１つまたはそれらの組み合わせ、ならびに制御およびデータラインを含み得る。
【００３９】
デバイス５００は、コンピューティングデバイスによってアクセス可能なデータストレージデバイスなどのデータ記憶を可能にし、データおよび実行可能命令（例えば、ソフトウェアアプリケーション、プログラム、機能など）の永続的ストレージを提供するコンピュータ可読ストレージメモリ５１２をも含む。コンピュータ可読ストレージメモリ５１２の例としては、揮発性メモリや不揮発性メモリ、固定および取り外し可能媒体デバイス、ならびにデバイスアクセスを計算するためのデータを管理する任意の適切なメモリデバイスまたは電子データストレージが挙げられる。コンピュータ可読ストレージメモリは、種々のメモリデバイス構成におけるランダムアクセスメモリ（ＲＡＭ）、読み出し専用メモリ（ＲＯＭ）、フラッシュメモリ、および他のタイプのストレージ媒体の種々の実装を含み得る。デバイス５００は、大容量ストレージ媒体デバイスをも含み得る。
【００４０】
コンピュータ可読ストレージメモリ５１２は、デバイスデータ５０４、他のタイプの情報および／またはデータ、および種々のデバイスアプリケーション５１４（例えば、ソフトウェアアプリケーション）を記憶するためのデータストレージメカニズムを提供する。例えば、処理システム５１６は、メモリデバイスとのソフトウェア命令として維持され、処理システム５０８によって実行され得る。また、デバイスアプリケーションは、制御アプリケーション、ソフトウェアアプリケーション、信号処理制御モジュール、特定のデバイスに固有のコード、および特定デバイス用のハードウェア抽象化レイヤなどを含み得る。
【００４１】
この例では、デバイス５００は、活動比較モジュール５１８を含み、活動比較モジュール５１８は、リアルタイムの拡張現実活動フィードバックの態様を実施し、かつデバイス５００が図１〜４を参照して説明したモバイルフォン１２６またはモバイルデバイス２０２として実施されるときなどに、ハードウェアコンポーネントおよび／またはデバイスアプリケーション５１４の１つとしてのソフトウェアを用いて実施され得る。活動比較モジュール５１８の事例は、ソフトウェアアプリケーションとして、かつ／またはセンサデバイスハブ１２０内のハードウェアコンポーネントとして実施される活動比較モジュール１３０と、ソフトウェアアプリケーションとして、かつ／またはセンサデバイスハブ２０４内のハードウェアコンポーネントとして実施される活動比較モジュール２０６とを含む。実施形態では、活動比較モジュール５１８は、デバイス５００と一体化されたコンピューティングデバイスおよび／または電子デバイスとしての、独立した処理、メモリ、および論理コンポーネントを含み得る。
【００４２】
この事例では、デバイス５００は、場所特定可能な追跡５２０をも含み、場所特定可能な追跡５２０は、リアルタイムの拡張現実活動フィードバックの態様を実施し、かつデバイス５００が図１〜図４を参照して説明したセンサデバイスハブ１２０として実施されるときなどに、ハードウェアコンポーネントおよび／またはデバイスアプリケーション５１４のうちの１つとしてのソフトウェアを用いて実施され得る。例示的なデバイス５００は、カメラ５２２および動きセンサ５２４をも含む。動きセンサ５２４は、ジャイロスコープ、加速度計、および／またはデバイスの動きを感知するための他の種類の動きセンサなどの様々なセンサを用いて実施されることができる。様々な動きセンサ５２４はまた、デバイス内の慣性測定ユニット（ＩＭＵ：ｉｎｅｒｔｉａｌ  ｍｅａｓｕｒｅｍｅｎｔ  ｕｎｉｔ）のコンポーネントとして実施されてもよい。
【００４３】
デバイス５００は、データを識別するためにＲＦＩＤタグに問い合わせし、ＲＦＩＤタグから識別応答を受信するように実施される無線周波数識別（ＲＦＩＤ）リーダ５２６をも含む。ＲＦＩＤリーダ５２６の一例は、センサデバイスハブ１２０の内蔵コンポーネントとして、またはセンサデバイスハブと協働するアタッチメントとして実施されるＲＦＩＤリーダ１２２である。実施形態において、デバイス５００へのアタッチメントとしてのＲＦＩＤリーダは外部電源を有する。デバイス５００は、デバイスがモバイルデバイスとして実施されるときなどに、１つまたは複数の電源５２８をも含むことができる。これらの電源としては、充電および／または電力システムが挙げられ、フレキシブルストリップバッテリ、充電式バッテリ、チャージド・スーパーキャパシタ、および／または任意の他のタイプのアクティブまたはパッシブ電源として実現することができる。
【００４４】
また、デバイス５００は、オーディオシステム５３２用のオーディオデータを生成する、および／またはディスプレイシステム５３４用のディスプレイデータを生成するオーディオおよび／またはビデオ処理システム５３０を含む。オーディオシステムおよび／またはディスプレイシステムは、ディスプレイデータおよび／または画像データを処理、表示、および／またはその他の方法でレンダリングするデバイスを含む。ディスプレイデータおよびオーディオ信号は、ＲＦ（無線周波数）リンク、Ｓ−ビデオリンク、ＨＤＭＩ（登録商標）（高品位マルチメディアインタフェース）、コンポジットビデオリンク、コンポーネントビデオリンク、ＤＶＩ（デジタルビデオインタフェース）、アナログオーディオ接続、またはメディアデータポート５３６などの他の類似の通信リンクを介して接続されてもよい。実施形態では、オーディオシステムおよび／またはディスプレイシステムは、例示的なデバイスの集積化されたコンポーネントである。あるいは、オーディオシステムおよび／またはディスプレイシステムは、例示的なデバイスに対する外部の周辺コンポーネントである。
【００４５】
リアルタイムの拡張現実活動フィードバックの実施形態を、特徴および／または方法に特有の記載で説明したが、添付の特許請求の範囲の主題は、説明した特定の特徴または方法に必ずしも限定されない。むしろ、特徴および方法は、リアルタイムの拡張現実活動フィードバックの例示的な実施形態として開示され、他の同等の特徴および方法も、添付の特許請求の範囲内に含まれる。さらに、種々の事例を説明したが、説明した各事例は、独立して、あるいは１つまたは複数の他の説明した実施形態と関連して実現することもできる。本明細書で説明される技術、特徴、および／または方法のさらなる態様は、以下のうちの１つまたは複数に関する。
【００４６】
リアルタイムの拡張現実（ＡＲ）活動フィードバックのための方法であって、方法は、人が活動に参加するときにウェアラブルセンサからのセンサ情報を記録するステップと、記録されたセンサ情報から、人が活動を実施している状態のフォームを含む活動データを決定するステップと、活動を実施している人のフォームを活動を実施する正しいフォームと比較するステップと、活動データと、活動を実施している人のフォームを改善するための方法の指示とを含むリアルタイムのフィードバックを提供するステップとを含む。
【００４７】
上記の方法に対して代替的にまたは付加的に、以下のいずれか１つまたはそれらの組み合わせ。リアルタイムのフィードバックが、視覚的フィードバック、聴覚的フィードバック、および触覚的フィードバックのうちの少なくとも１つとして提供される。視覚的フィードバックが活動データのグラフィック表現を含む。視覚的フィードバックが、活動を実施している人を表すアバター、または活動を実施している人のフォームを活動を実施する正しいフォームと比較するためのアバターの少なくとも１つを含む。聴覚的フィードバックが、活動を実施している人のフォームを改善するための聴覚的指導を含む。触覚的フィードバックは、活動を実施している人のフォームを改善するための触覚的指示を含む。
【００４８】
リアルタイムの拡張現実（ＡＲ）活動フィードバックのための方法であって、方法は、人が活動のセッションに参加するときにウェアラブルセンサからのセンサ情報を記録するステップと、記録されたセンサ情報から、活動のセッションを実施している人の状態のフォームを決定するステップと、人が活動の次のセッションに参加するときにウェアラブルセンサからのセンサ情報を記録するステップと、記録されたセンサ情報から、人が活動の次のセッションを実施している状態の追加のフォームを決定するステップと、活動の次のセッションを実施している人の追加のフォームを活動のセッションを実施している人のフォームと比較するステップと、リアルタイムのフィードバックとして比較を提供するステップとを含む。
【００４９】
上記の方法に対して代替的にまたは付加的に、以下のいずれか１つまたはそれらの組み合わせ。比較を提供するステップは、人によって実施される活動の次のセッションが、人によって実施される活動のセッションに対する改善であるかどうかを示す聴覚的フィードバックを提供することを含む。比較を提供するステップは、活動のセッションを実施している人を表す第１のアバターを、活動の次のセッションを実施している人を表す第２のアバターとほぼ同期して表示することを含む。
【００５０】
リアルタイム拡張現実（ＡＲ）活動フィードバックのためのシステムであって、システムは、活動に参加する人の筋骨格状態を監視するためのウェアラブルセンサと、センサデバイスハブとを備え、センサデバイスハブは、人が活動のセッションに参加するときにウェアラブルセンサからセンサ情報を受信し、受信したセンサ情報から、人が活動を実施している状態のフォームを含む活動データを決定し、活動を実施している人のフォームを活動の代表的なフォームと比較し、活動を実施している人のフォームを活動の代表的なフォームと比較した状態の指示であるリアルタイム比較フィードバックを開始するように構成された活動比較モジュールを含む。
【００５１】
上記のシステムに対して代替的にまたは付加的に、以下のいずれか１つまたはそれらの組み合わせ。ウェアラブルセンサは、活動に参加する人の心血管状態を監視するための心血管センサを含む。センサデバイスハブがＲＦＩＤリーダを含み、ウェアラブルセンサが、活動を実施している人の筋骨格状態および心血管状態を記録するように実装されたＲＦＩＤタグを含む。活動の代表的なフォームは、活動の正しいフォームである。活動の代表的なフォームは、活動の前のセッション中に活動を実施している人のフォームである。活動の代表的なフォームは、活動を実施している少なくとも１人の追加の人のフォームである。センサデバイスハブは、リアルタイム比較フィードバックを視覚的フィードバック、聴覚的フィードバック、および触覚的フィードバックのうちの少なくとも１つとして提供するように構成されたモバイルデバイスである。センサデバイスハブは、人が活動を実施している実際の環境において活動を実施している人を表すアバターのオーバーレイを表示するための拡張現実（ＡＲ）画面を備えた眼鏡である。センサデバイスハブは、センサデバイスハブが活動の別のセッションに対して人に同じルートを提供し、かつリアルタイムの比較フィードバックを提供するために、人によって実施される活動のセッションの活動ルートを追跡するように実装された場所特定可能な追跡を含む。活動の代表的なフォームは、活動の以前のセッションとの競争のために、活動の以前のセッションを人のアバターとして実施している人のフォームである。活動の代表的なフォームは、人が競争するか、またはペースを合わせるために活動を正しく実施しているアバターとして提供される活動の正しいフォームである。
【図１】
2020024680.tif 000003
【図２】
2020024680.tif 000004
【図３】
2020024680.tif 000005
【図４】
2020024680.tif 000006
【図５】
2020024680.tif 000007
【外国語明細書】
2020024680000001.pdf