(57)【要約】      （修正有）【課題】コンテンツの提供において、よりインタラクティブな体験をユーザに提供する。【解決手段】ユーザ１２０の少なくとも一部を感知する一又は二以上のセンサ１１０と、コンテンツの少なくとも一部を表示するとともに、一又は二以上のセンサが感知したユーザの少なくとも一部を表示するディスプレイ装置１０５と、ユーザとディスプレイとの間に設置されて、ユーザの少なくとも一部を反射により映すとともに、ディスプレイ装置に表示されているコンテンツの少なくとも一部とユーザの少なくとも一部とをユーザ側に透かすミラー１１５とを備える。装置１００は、所定の時間間隔に渡って所定の部位のユーザ１２０及び動画データのオブジェクトの動きを比較し、ユーザ１２０が動画データの動きにしたがって動いているか否かを判定する。【選択図】図１
2019008393.tif 000002
【特許請求の範囲】
【請求項１】
ユーザの少なくとも一部を感知する一又は二以上のセンサと、
コンテンツの少なくとも一部を表示するとともに、前記一又は二以上のセンサが感知したユーザの少なくとも一部を表示するディスプレイ装置と、
前記ユーザと前記ディスプレイとの間に設置されているミラーであって、前記ユーザの少なくとも一部を反射により映すとともに、前記ディスプレイ装置に表示されている前記コンテンツの少なくとも一部と前記ユーザの少なくとも一部とを前記ユーザ側に透かすミラーとを備えた、装置。
【請求項２】
前記装置は、プロセッサをさらに備え、
前記プロセッサは、前記コンテンツの前記オブジェクトの少なくとも一部を前記センサが感知したユーザの少なくとも一部に関連付けするよう構成されている、請求項１に記載の装置。
【請求項３】
前記装置は、プロセッサをさらに備え、
前記コンテンツは、動きを有するオブジェクトを含み、
前記一又は二以上のセンサは、前記ユーザの動きの少なくとも一部を感知するよう構成され、
前記プロセッサは、前記コンテンツの前記オブジェクトの動きの少なくとも一部を前記センサが感知した前記ユーザの動きの少なくとも一部に関連付けし、関連付けされた前記ユーザの動きの少なくとも一部と前記コンテンツにおける前記オブジェクトの動きの少なくとも一部とを比較するよう構成されている、請求項１に記載の装置。
【請求項４】
前記比較に基づいて、前記ユーザ及び前記オブジェクトの動きの一致点及び／又は相違点に関する情報を取得する、請求項３に記載の装置。
【請求項５】
前記一致点及び／又は相違点に関する情報に基づいて、コンテンツをループ再生する、請求項４に記載の装置。
【請求項６】
前記センサが感知した前記ユーザの動きに関する情報を蓄積して記憶し、前記蓄積した情報を分析し、前記ユーザの動きにおける所定の部位に関して重み付けを行う、請求項３ないし５のいずれか１項に記載の装置。
【請求項７】
前記センサは、前記ユーザの動き又は前記ユーザが身に着けている道具を検知し、前記装置は、前記動き又は前記道具に基づいてコンテンツを検索する、請求項１ないし６のいずれか１項に記載の装置。
【請求項８】
前記ディスプレイ装置の表示領域の下部の高さは、前記ミラーが映すユーザの足元の高さ以上である、請求項１ないし７のいずれか１項に記載の装置。
【請求項９】
前記ディスプレイ装置の表示領域の上部の高さは、前記ミラーが映すユーザの頭の高さ以下である、請求項１ないし８のいずれか１項に記載の装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、センサ、ハーフミラー及びディスプレイ装置を備えた装置に関する。
【背景技術】
【０００２】
ダンスやゴルフなどのスポーツ、装置の操作方法などの所定の動作などを提供する動画コンテンツは、インターネットの普及により、トレーニングブックや、文字や絵に基づくテキスト、及び取扱説明書などに代わって、よく用いられるようになっている。現在多くの動画コンテンツは、ユーザへ一方向的に情報を提供している。情報の方向性という観点において、現在の動画コンテンツは、従来のテキストや取扱説明書と同様にユーザへ一方向であるという点で同じである。
【発明の概要】
【発明が解決しようとする課題】
【０００３】
コンテンツの提供において、よりインタラクティブな体験をユーザに提供することが望まれている。
【課題を解決するための手段】
【０００４】
本発明の実施例による装置は、ユーザの少なくとも一部を感知する一又は二以上のセンサと、コンテンツの少なくとも一部を表示するとともに、前記一又は二以上のセンサが感知したユーザの少なくとも一部を表示するディスプレイ装置と、前記ユーザと前記ディスプレイとの間に設置されているミラーであって、前記ユーザの少なくとも一部を反射により映すとともに、前記ディスプレイ装置に表示されている前記コンテンツの少なくとも一部と前記ユーザの少なくとも一部とを前記ユーザ側に透かすミラーとを備えている。
【図面の簡単な説明】
【０００５】
【図１】図１は、本発明の実施例による装置を示す。
【図２】図２は、装置の構成を示す図である。
【図３】図３は、人体の部位ごとに与えられるセンサの感知部分を示す。
【図４】図４は、本発明の実施例による処理フローを示す。
【図５】図５は、装置１００を正面から示した図である。
【発明を実施するための形態】
【０００６】
装置の基本構成
図１は、本発明の実施例による装置を示す。装置１００は、ディスプレイ装置１０５、センサ１１０及びミラー１１５を有する。ディスプレイ装置１０５は、ブラウン管ディスプレイ、液晶ディスプレイ、プラズマディスプレイ、有機ELディスプレイ、プロジェクタ、LEDディスプレイ、その他適切な表示装置を用いたディスプレイとすることができる。これは例示であり、ディスプレイ装置１０５は、少なくともコンテンツなどを表示できる装置であればよい。ミラー１１５は、ユーザ１２０を反射により表示する。また、ミラー１１５は、所定の透過率を有しており、ディスプレイ装置１０５に表示されている内容を透過させることによってユーザ１２０側に提供する。ミラー１１５の所定の透過率は、30%から50％であり、好ましくは33%である。これにより、ユーザ１２０は、ユーザ自身の姿をミラー１１５を用いて見ることができ、ディスプレイ装置１０５に表示されている内容をミラー１１５を介して見ることができる。図１において、センサ１１０の設置場所やサイズは例示である。当業者であれば、図１におけるセンサ１１０の設置場所やサイズなどを変更することができることが理解されるであろう。
【０００７】
一実施例において、ミラー１１５は、ユーザの全体、又は、上半身部分、腕部分などのユーザの一部を反射により表示することができる。ディスプレイ装置１０５は、コンテンツ全体又はコンテンツの一部、又は、それらの組み合わせを表示することができる。
【０００８】
センサ１１０は、カメラ、ステレオカメラ、深度センサ、赤外線センサ、骨格センサ、マイク、光センサ、モーションセンサ、及び、他の手段によって実現されるオブジェクトの動きを感知できるセンサの一つ又はそれら一又は二以上の組み合わせとすることができる。センサ１１０は、有線及び／又は無線を介してディスプレイ装置１０５に接続されている。一実施例において、センサ１１０及びディスプレイ装置１０５は、少なくともプロセッサを有する制御装置、例えば、マザーボードなどに接続され、制御される。一実施例において、センサ１１０は、ユーザ１２０の動きを感知することができる。センサ１１０は、感知した情報をディスプレイ装置１０５に向けて送信することができる。ディスプレイ装置１０５は、さらに、感知した情報を表示することができる。例えば、制御装置は、センサ１１０から感知した情報を取得し、取得した情報をディスプレイ装置１０５に表示することができる。一実施例において、ディスプレイ装置１０５は、感知した情報全て又は感知した情報の一部、又は、それらの組み合わせを表示することができる。例えば、センサは、マイクロソフト社製のKinect V2 Sensorなどが知られている。
【０００９】
装置の内部構成
図２は、装置の構成を示す図である。装置１００は、ディスプレイ装置１０５を制御するディスプレイ装置コントローラ２０５、センサ１１０を制御するセンサコントローラ２１０及び/又は入出力インタフェース２２５、ＲＡＭ及びＲＯＭの少なくとも一方を含む記憶装置２１５、プロセッサ２２０を有する。ディスプレイ装置コントローラ２０５、センサコントローラ２１０、記憶装置２１５、プロセッサ２２０及び入出力インタフェース２２５は、互いにバス２６０を介して接続されており、互いに通信することができる。
【００１０】
プロセッサ２２０は、記憶装置２１５に記憶されているコンピュータプログラムに基づいてディスプレイ装置１０５に表示するコンテンツの表示制御や、センサ１１０が感知した情報を受信し、その情報を加工してディスプレイ装置１０５に表示する制御処理などを実行することができる。ディスプレイ装置コントローラ２０５は、ディスプレイ装置１０５に有線及び／又は無線を介して接続されており、記憶装置２１５に記憶されているコンテンツ、及び／又は、外部装置から入出力インタフェース２２５を介して供給されるコンテンツをディスプレイ装置１０５に表示することができる。センサコントローラ２１０及び/又は入出力インタフェース２２５は、センサ１１０に有線及び／又は無線を介して接続されており、センサ１１０が感知した情報及び／又はその情報を加工した加工情報をバス２６０を介して、プロセッサ２２０や記憶装置２１５などの他のハードウエアに送信することができる。
【００１１】
一実施例において、装置１００は、センサ１１０が取得したユーザ１２０の動きの少なくとも一部を、ディスプレイ装置１０５に表示されているコンテンツ内のオブジェクトの少なくとも一部に関連付けすることができる。例えば、図３に示すように、人体の部位ごとにセンサ１１０の感知部分が与えられる。センサ１１０は、これら感知部分の動きを感知できる。コンテンツは、動画データと、当該動画データのオブジェクトに関する図３に示すような感知部分についての動きに関する情報とを予め有することができる。これにより、装置１００は、センサ１１０が感知した情報と動画データのオブジェクトにおける動きに関する情報であるコンテンツが予め有する情報とを関連付けすることができる。例えば、感知部分ごとに識別子が与えられており、装置１００は、識別子に基づいてセンサ１１０の情報と動画データのオブジェクトとを関連付けすることができる。これにより、装置１００は、所定の部位（例えば、右肩、左肩、頭）について、ユーザ１２０の動きと動画データのオブジェクトの動きを関連付けすることができる。一実施例において、関連付けは、所定の部位を特定することによって行えるため、動いていない画像、すなわち、静止画及びユーザについて行われてもよい。
【００１２】
装置１００は、前記関連付けによって、所定の時間間隔に渡って所定の部位のユーザ１２０及び動画データのオブジェクトの動きを比較することができる。これにより、装置１００は、ユーザ１２０が動画データの動きにしたがって動いているか否かを判定することができる。例えば、コンテンツが、ダンスや、ゴルフなどのインストラクションを目的とするものである場合、装置１００は、ユーザ１２０が動画データの動きにしたがって動いていることを示すスコアを作成し、ユーザに提供してもよい。上述のダンスや、ゴルフは、例示であり、コンテンツは、フォーム矯正を必要とする様々な動きのトレーニングを含むことができる。より具体的には、コンテンツは、ダンス、ヨガ、ウェイトトレーニング、ゴルフ、テニス、空手など格闘技の型、野球、サッカー、弓道、剣道、バスケなどのスポーツのフォームトレーニングで用いることができる。一実施例において、所定の時間間隔は、一つのインストラクションの間隔、複数のインストラクションの間隔、一つのインストラクションの一部分の間隔などとすることができる。一実施例において、スコアは、所定の部位のユーザ１２０及び動画データのオブジェクトの動きの一致点に基づいて計算されてもよい。一実施例において、スコアの計算に関し、インストラクションの内容に基づいて、重み付けを所定の部位に行ってもよい。例えば、ゴルフは、腰の動きが重要であることから、腰の部位に重み付けしてスコアの計算を行ってもよい。例えば、ダンスの場合は、腰及び手足がダンスの表現力を向上させることから、腰及び手足の部位に重み付けしてスコアの計算を行ってもよい。
【００１３】
他の実施例において、装置１００は、コンテンツとセンサ１１０が感知したユーザの情報とに基づいて、ディスプレイ装置１０５に表示されるコンテンツ内のオブジェクトの大きさを拡大又は縮小することができる。一実施例において、センサ１１０が感知したユーザの情報に基づいて生成されたユーザの画像がディスプレイ装置１１０に表示される場合、装置１００は、コンテンツとセンサ１１０が感知したユーザの情報とに基づいて、当該ユーザの画像の大きさを拡大又は縮小することができる。
【００１４】
装置の処理フロー
図４は、本発明の実施例による処理フローを示す。装置１００は、最初に初期化処理を実行する（ステップ４１０）。初期化処理は、例えば、センサ１１０や、ディスプレイ装置１０５などの起動、上述のコンテンツなどの拡大又は縮小の処理を含むことができる。装置１００は、ディスプレイ装置１０５においてコンテンツの表示を開始する（ステップ４１５）。コンテンツの表示は、コンテンツ全体の表示又はコンテンツの一部の表示とすることができる。コンテンツの表示開始は、ユーザ入力、タイマ起動などによって行われる。ユーザ入力は、ボタン入力や、ディスプレイ装置１０５へのタッチパネル入力（この場合、装置１００又はディスプレイ装置１０５は、ミラー１１５を介したタッチパネル機能を有する）、音声入力、センサ１１０が感知したユーザの特定の動き、当該ユーザの特定部位の特定（例えば、顔認識）などによる入力などがとすることができる。コンテンツは、記憶装置２１５から、及び／又は、入出力インタフェース２２５を介して外部装置からディスプレイ装置１０５に供給される。
【００１５】
装置１００は、センサ１１０を用いてユーザ１２０を感知する（ステップ４２０）。ユーザ１２０の感知は、動いていないユーザの感知及び動いているユーザの感知の一方又は両方とすることができる。一実施例において、ユーザ１２０の感知は、ユーザ全体又はユーザの一部（例えば、頭部分、胴体部分など）とすることができる。装置１００は、センサ１１０が感知した情報に基づいて、ユーザの全体又は一部であるセンサ画像をディスプレイ装置１０５に表示する（ステップ４２５）。一実施例において、センサ画像は、センサ１１０が感知した情報に基づいて生成や加工された画像とすることができる。一実施例において、センサ画像は、ディスプレイ装置１０５に表示されなくてもよい。
【００１６】
装置１００は、コンテンツ又はコンテンツ内のオブジェクト（以下、特に指定が無い場合は「コンテンツ」とする）とセンサ画像との関連付けを行う（ステップ４３０）。例えば、コンテンツ及びセンサ画像は、図３に示したような感知部分を有しており、装置１００は、コンテンツの感知部分をセンサ画像の感知部分に関連付けすることができる。図３の例では、２５か所の感知部分が示されているが、これは例示であり、感知部分は、これよりも多くても又は少なくてもよい。
【００１７】
装置１００は、コンテンツをセンサ画像と比較する（ステップ４３５）。関連付けされた感知部分の一部又は全てのそれぞれについて、コンテンツとセンサ画像とを比較する。これにより、ディスプレイ装置１０５は、コンテンツの全体又は一部とセンサ画像とを重畳的に表示することができる。このとき、ミラー１１５は、映し出されたユーザ１２０の姿をユーザに供給している。したがって、ユーザ１２０は、ミラー１１５を用いて自分の姿を見ることができ、さらに、ディスプレイ装置１０５を用いてコンテンツを見ることができる。装置１００は、ディスプレイ装置１０５に表示されているコンテンツとユーザ１２０の姿であるセンサ画像との比較画像を生成することができる。一実施例において、ユーザ１２０は、ミラー１１５を用いて自分の姿を見ることができ、さらに、ディスプレイ装置１０５を用いてコンテンツと自分の姿であるセンサ画像との比較画像を見ることができるようにしてもよい。一実施例において、装置１００は、コンテンツ及びセンサ画像の感知部分に関する情報に基づいて、コンテンツ及びセンサ画像の一方又は両方を拡大又は縮小することによって、コンテンツ及びセンサ画像のサイズを調整した比較画像を生成してもよい。ユーザ１２０は、比較画像を見ることによって、例えばコンテンツが静止画である場合、静止した姿勢が正しいか否か（すなわち、正しいポーズを維持できているか否か）を判断することができ、例えばコンテンツが動画である場合、コンテンツが示す動きをフォローできているか否かを判断することができる。
【００１８】
一実施例において、装置１００は、所定の時間の間、上記の通り、関連付けされた感知部分の一部又は全てのそれぞれについて、コンテンツとセンサ画像とを比較することによって、コンテンツ及びセンサ画像の一致点及び／又は相違点、又は、それらに関する情報をユーザに通知してもよい。通知は、音声出力装置を用いた音声による通知や、ディスプレイ装置１０５を用いが通知の表示などによって実現されてもよい。例えば、装置１００は、関連付けされた感知部分の一部又は全てのそれぞれの一致点及び／又は相違点の数、又は、当該数に基づくスコアなどを通知してもよい。このスコアは、ユーザ１２０がコンテンツのインストラクションにしたがって動作しているか否かを表すことができる。一実施例において、感知部分は、身体の部位などによって重み付けしてもよい。このような通知により、ユーザ１２０は、コンテンツが示すポーズや動作などをより効果的に学ぶことができる。
【００１９】
ミラー及びディスプレイ装置の配置
図５は、装置１００を正面から示した図である。装置１００の前面には、ミラー１１５が設置されており、ミラー１１５の後ろにディスプレイ装置１０５及びセンサ１１０が設置されている。本実施例において、センサ１１０は、ディスプレイ装置１０５の上に配置しているが、ディスプレイ装置１０５の、左、右又は下部分であってもよい。また、センサ１１０は、複数の場所に配置されていてもよい。
【００２０】
本実施例において、ユーザ１２０の全身をミラーに映す場合、ミラーのサイズは、高さ約180cm（図５におけるａ５１０の長さ）、幅約100cm（図５におけるｃ５２０の長さ）程度が好ましい。当業者であれば理解されるように、ミラーのサイズは、この値より大きくてもよい又小さくてもよい。好ましい実施例において、ミラーのサイズは、高さ約200cm、幅約110cmである。ユーザの目線の入射角及び反射角を計算すると、ミラーにおける頭及び足元が写る高さは以下の通りとなる。
2019008393.tif 000003
【００２１】
ミラーにユーザが映るサイズのディスプレイ装置を用いることによって、センサ画像及びコンテンツをミラーに映るユーザの全身画像としてディスプレイ装置１０５に再現することができる。したがって、ディスプレイ装置１０５の表示領域の下部は、所定の身長のユーザの足元が映るミラー上の高さとする必要があり、上部は頭が映るミラー上の高さとする必要がある。
【００２２】
例えば、身長が110cmのユーザを対象とする場合、ディスプレイ装置１０５の表示領域の下部の高さ（図５におけるｅ５３０の長さ）は地上から47.5cmとなり、身長が120cmの場合、下部の高さは地上から52.5cmとなる。したがって、対象ユーザの足元が映るミラー上の高さをディスプレイ装置１０５の表示領域の下部の高さとすることができる。
【００２３】
例えば、身長が190cmのユーザを対象とする場合、ディスプレイ装置１０５の表示領域の上部の高さは地上から182.5cmとなり、身長が180cmの場合、下部の高さは地上から172.5cmとなる。したがって、対象ユーザの頭が映るミラー上の高さをディスプレイ装置１０５の表示領域の上部の高さとすることができる。
【００２４】
表示領域の下部の高さは、想定する最も背の低いユーザの足元が映るミラー上の高さ以上にすることができ、表示領域の上部の高さは、想定する最も背の高いユーザの頭が映るミラー上の高さ以下にすることができる。ディスプレイ装置１０５の表示領域の上下方向における長さ（図５におけるｂ５１５の長さ）は、表示領域の上部の高さから表示領域の下部の高さを引いた値とすることができる。
【００２５】
表示領域の横方向の幅は、ユーザの肩幅や、コンテンツ、装置１００の設置場所などに応じて決定することができる。一般に、人間の横方向の長さは、肩幅が一番長い。ミラーが全身を映す場合、肩幅の半分の長さの横幅を有するミラーが少なくとも必要となる。例えば、表示領域の幅（図５におけるｄ５２５の長さ）を、対象ユーザの肩幅の半分（日本人の肩幅に平均は約45cm程度なので、約22.5cm）以上とすることができる。これにより、装置１００は、反射によりユーザの全体をミラーに写すとともに、この映された大きさとユーザのサイズとほぼ同じサイズの画像をディスプレイ装置１０５に表示することができる。
【００２６】
装置１００を使用するユーザの身長が120cmであると想定すると、表示領域の下部の高さは、地上から約50cmが望ましい。したがって、装置１００を使用するユーザの身長が120cm〜190cmであると想定した場合、好ましい実施例において、表示領域のサイズは、約1400mm×800mm（より詳細には、1435mm×808mm）とすることができる。これは、65インチテレビのサイズとほぼ同じである。通常のテレビのサイズのディスプレイ装置を用いることによって、汎用性を向上させることができる。当業者であれば理解されるように、ディスプレイ装置１１５のサイズは、65インチテレビのサイズより小さくても、大きくてもよい。
【００２７】
センサの配置
（センサ１００を装置１００の上部に設置する例）
センサ１１０は、ディスプレイ装置１０５の上（地上からの高さ約２ｍ）に位置し、センサ１１０の横方向の中心がミラー１１５の横方向の中心に位置するように配置される。センサ１１０は、その感知部が水平方向から下向きに約３０度傾いて配置される。このような配置により、センサ１１０の左右視野角が約７０度、上下視野角が約６０度である場合、センサ１１０はミラー１１５から約1m程度（より具体的には、117cm）離れた身長110ｃｍから190cm程度のユーザの全身を感知することができる。ユーザは、動作をするとき、ミラーが近すぎると動作をしにくいことから、ユーザはミラー１１５から約１．５〜３ｍ離れて装置１００を用いることが望ましい。
【００２８】
（センサ１００を装置１００の下部に設置する例）
上記の各実施例において、センサ１１０は装置１００の上部に設置した実施例を説明したが、センサ１１０を装置１００の下部に設置してもよい。例えば、センサ１１０は、ディスプレイ装置１０５の下（地上からの高さ約０．５ｍ）に位置し、センサ１１０の横方向の中心がミラー１１５の横方向の中心に位置するように配置される。センサ１１０は、その感知部が水平方向から上向きに約３０度傾いて配置される。このような配置により、センサ１１０の左右視野角が約７０度、上下視野角が約６０度である場合、センサ１１０はミラー１１５から約1m程度（より具体的には、117cm）離れた身長110ｃｍから190cm程度のユーザの全身を感知することができる。ユーザは、動作をするとき、ミラーが近すぎると動作をしにくいことから、ユーザはミラー１１５から約１．５〜３ｍ離れて装置１００を用いることが望ましい。
【００２９】
その他の実施例
（コンテンツのループ再生）
装置１００は、ユーザ１２０がコンテンツのインストラクションにしたがって動作しているか否かを表すスコア（すなわち、ユーザ及びコンテンツの一致点及び／又は相違点に関する情報）を、所定の時間間隔（例えば、１０秒、３０秒、１分又はユーザが設定した間隔）で分析することができる。装置１００は、スコアが低い時間間隔のコンテンツ部分を取得し、コンテンツ部分をループ再生することができる。
【００３０】
（コンテンツのカスタマイズ）
装置１００は、コンテンツを複数の人に提供し、複数の人のセンサ画像を取得し、記憶することができる。装置１００は、それらのセンサ画像を分析し、センサ画像の感知部分（図３に示すような感知部分）の動きの取得、比較、記憶などを行うことができる。あるユーザが装置１００を2回以上利用した場合、装置１００は、当該ユーザの動きの複数の比較結果を所定の部位ごとに蓄積できる。比較結果の蓄積は、同じコンテンツに渡って行うことができ、また、比較結果の蓄積は、２以上の異なるコンテンツに渡って行うこともできる。装置１００は、各比較結果を分析することによって、部位ごとに重み付けを行うことができる。例えば、比較結果の蓄積が２以上の異なるコンテンツに渡って行われる場合、装置１００は、第１のユーザが様々なコンテンツを通して「右膝を曲げる動作が甘い」と言う「クセ」を取得することができ、第２のユーザが様々なコンテンツを通して「腰の動きが硬い」と言うクセを取得することができる。したがって、第１及び第２のユーザが同じコンテンツを利用した場合であっても、装置１００は、異なる重み付の結果を各ユーザに提示することができる。各ユーザがあるコンテンツを初めて利用する場合であっても、装置１００は、比較結果の蓄積に基づいて、各ユーザへの重み付けを行うことができることから、コンテンツをユーザごとにカスタマイズすることができる。
【００３１】
他の実施例において、装置１００は、コンテンツが有する感知部分の動きを、取得したセンサ画像の感知部分に基づいて更新することができる。一実施例において、分析は、人によって重み付けを行ってもよい。例えば、レッスンを受けている人のセンサ画像よりインストラクターによるセンサ画像が、コンテンツが有する感知部分の動きの更新により多くの影響を与える。
【００３２】
（コンテンツ検索）
装置１００は、センサ１１０が検知したユーザ１２０の動きに基づいて、ユーザ１２０が興味を有するであろうコンテンツを記憶装置２１５又はインターネットから検索することができる。
【００３３】
他の実施例において、装置１００は、ユーザ１２０が身に着けている道具（例えば、手に持つ、着る、履く、付けるなど）をセンサ１１０を用いて検知することができる。装置１００は、検知した道具に基づいてユーザ１２０が興味を有するであろうコンテンツを記憶装置２１５又はインターネットから検索することができる。
【００３４】
以上に説明した処理又は処理順序において、ある処理において、その処理ではまだ利用することができないはずのデータを利用しているなどの処理又は処理順序上の矛盾が生じない限りにおいて、処理又は処理順序を自由に変更することができる。
【００３５】
以上に説明してきた各実施例に関し、各実施例の一部又は全部を組み合わせて一つの実施例として実現されてもよい。
【００３６】
参照により明細書に組み込むことが許されている国おいて、上記の説明で参照した特許文献及び非特許文献は本明細書に組み込まれる。
【００３７】
以上に説明してきた各実施例は、本発明を説明するための例示であり、本発明はこれらの実施例に限定されるものではない。本発明は、その要旨を逸脱しない限り、種々の形態で実施することができる。
【符号の説明】
【００３８】
１００  装置
１０５  ディスプレイ装置
１１０  センサ
１１５  ミラー
【図１】
2019008393.tif 000004
【図２】
2019008393.tif 000005
【図３】
2019008393.tif 000006
【図４】
2019008393.tif 000007
【図５】
2019008393.tif 000008