(57)【要約】【課題】  現実感提示デバイスに適用される推奨方法が開示される。【解決手段】  現実感提示デバイスは、第1の検知モジュール、第2の検知モジュール、及び処理ユニットを含む。推奨方法は、第1の検知モジュールが、現実感提示デバイスを装着しているユーザに対応するユーザ関連情報を検知するステップと、第2の検知モジュールが、ユーザが経験している環境に対応する環境関連情報を検知するステップと、処理ユニットが、ユーザ関連情報又は環境関連情報にしたがって、推奨される対象を生成して、ユーザにその推奨される対象を提示するステップと、を含む。【選択図】  図4
2020052994.tif 000002
【特許請求の範囲】
【請求項１】
現実感提示デバイスに適用される推奨方法であって、前記現実感提示デバイスは、第1の検知モジュール、第2の検知モジュール、及び処理ユニットを含み、当該推奨方法は、
前記第1の検知モジュールが、前記現実感提示デバイスを装着しているユーザに対応するユーザ関連情報を検知するステップと、
前記第2の検知モジュールが、前記ユーザが経験している環境に対応する環境関連情報を検知するステップと、
前記処理ユニットが、前記ユーザ関連情報又は前記環境関連情報にしたがって、推奨される対象を生成して、前記ユーザに前記推奨される対象を提示するステップと、を含む、
推奨方法。
【請求項２】
前記現実感提示デバイスは、仮想現実感(VR)デバイス、拡張現実感(AR)デバイス、複合現実感(MR)デバイス、又は拡大現実感(XR)デバイスである、請求項1に記載の推奨方法。
【請求項３】
前記第1の検知モジュールが、前記ユーザの目に対して眼球追跡動作を実行し、前記ユーザに対応する眼球追跡結果を取得するステップであって、前記ユーザ関連情報は、前記眼球追跡結果を含む、ステップと、
前記第1の検知モジュール又は前記処理ユニットが、前記眼球追跡結果にしたがって、注目を集める小領域情報を決定するステップと、
前記処理ユニットが、前記注目を集める小領域情報にしたがって、前記推奨される対象を生成するステップと、をさらに含む、請求項1に記載の推奨方法。
【請求項４】
第1の検知モジュールが、前記ユーザの顔面に対して顔面走査動作を実行し、前記ユーザに対応する顔面走査結果を取得するステップであって、前記ユーザ関連情報は、前記顔面走査結果を含む、ステップと、
前記第1の検知モジュール又は前記処理ユニットが、前記顔面走査結果にしたがって感情情報を決定するステップと、
前記処理ユニットが、前記感情情報にしたがって前記推奨される対象を生成するステップと、をさらに含む、請求項1に記載の推奨方法。
【請求項５】
前記第1の検知モジュールが、前記ユーザに対してトーン検知動作を実行し、トーン検知結果を取得するステップであって、前記ユーザ関連情報は、前記トーン検知結果を含む、ステップと、
前記第1の検知モジュール又は前記処理ユニットが、前記トーン検知結果にしたがってトーン情報を決定するステップと、
前記処理ユニットが、前記トーン情報にしたがって前記推奨される対象を生成するステップと、をさらに含む、請求項1に記載の方法。
【請求項６】
前記第2の検知モジュール又は前記処理ユニットが、前記環境関連情報にしたがって前記環境の環境タイプ情報を識別するステップと、
前記処理ユニットが、前記環境タイプ情報にしたがって、前記推奨される対象を生成するステップと、をさらに含む、請求項1に記載の推奨方法。
【請求項７】
前記推奨される対象は、市販用の製品の広告である、請求項1に記載の推奨方法。
【請求項８】
前記ユーザが経験している前記環境は、実環境又は仮想環境を含む、請求項1に記載の推奨方法。
【請求項９】
現実感提示デバイスであって、
当該現実感提示デバイスを装着しているユーザに対応するユーザ関連情報を検知するように構成される第1の検知モジュールと、
前記ユーザが経験している環境に対応する環境関連情報を検知するように構成される第2の検知モジュールと、
前記ユーザ関連情報又は前記環境関連情報にしたがって、推奨される対象を生成して、前記ユーザに前記推奨される対象を提示する、ように構成される処理ユニットと、を含む、
現実感提示デバイス。
【請求項１０】
当該現実感提示デバイスは、仮想現実感(VR)デバイス、拡張現実感(AR)デバイス、複合現実感(MR)デバイス、又は拡大現実感(XR)デバイスである、請求項9に記載の現実感提示デバイス。
【請求項１１】
前記第1の検知モジュールは、前記ユーザの目に対して眼球追跡動作を実行し、前記ユーザに対応する眼球追跡結果を取得し、前記ユーザ関連情報は、前記眼球追跡結果を含み、
前記第1の検知モジュール又は前記処理ユニットは、前記眼球追跡結果にしたがって、注目を集める小領域情報を決定し、
前記処理ユニットは、前記注目を集める小領域情報にしたがって、前記推奨される対象を生成する、請求項9に記載の現実感提示デバイス。
【請求項１２】
第1の検知モジュールは、前記ユーザの顔面に対して顔面走査動作を実行し、そして、前記ユーザに対応する顔面走査結果を取得し、前記ユーザ関連情報は、前記顔面走査結果を含み、
前記第1の検知モジュール又は前記処理ユニットは、前記顔面走査結果にしたがって感情情報を決定し、
前記処理ユニットは、前記感情情報にしたがって前記推奨される対象を生成する、請求項9に記載の現実感提示デバイス。
【請求項１３】
前記第1の検知モジュールは、前記ユーザに対してトーン検知動作を実行し、そして、トーン検知結果を取得し、前記ユーザ関連情報は、前記トーン検知結果を含み、
前記第1の検知モジュール又は前記処理ユニットは、前記トーン検知結果にしたがってトーン情報を決定し、
前記処理ユニットは、前記トーン情報にしたがって前記推奨される対象を生成する、請求項9に記載の現実感提示デバイス。
【請求項１４】
前記第2の検知モジュール又は前記処理ユニットは、前記環境関連情報にしたがって前記環境の環境タイプ情報を識別し、
前記処理ユニットは、前記環境タイプ情報にしたがって、前記推奨される対象を生成する、請求項9に記載の現実感提示デバイス。
【請求項１５】
前記推奨される対象は、市販用の製品の広告である、請求項9に記載の現実感提示デバイス。
【請求項１６】
前記ユーザが経験している前記環境は、実環境又は仮想環境を含む、請求項9に記載の現実感提示デバイス。
【請求項１７】
コンピュータ読み取り可能な命令を含むコンピュータプログラムであって、前記コンピュータ読み取り可能な命令は、第1の検知モジュール、第2の検知モジュール、及び処理ユニットを含む現実感提示デバイスの前記処理ユニットで実行されると、前記コンピュータ読み取り可能な命令は、前記現実感提示デバイスに推奨方法を実行させ、前記推奨方法は、
前記第1の検知モジュールが、前記現実感提示デバイスを装着しているユーザに対応するユーザ関連情報を検知するステップと、
前記第2の検知モジュールが、前記ユーザが経験している環境に対応する環境関連情報を検知するステップと、
前記処理ユニットが、前記ユーザ関連情報又は前記環境関連情報にしたがって、推奨される対象を生成して、前記ユーザに前記推奨される対象を提示するステップと、を含む、
コンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、推奨方法及び現実感提示デバイスに関し、より具体的には、環境及びユーザの反応に基づいて、広告を適切にプッシュ型配信する(properly  push  advertisement)ことが可能である推奨方法及び現実感提示デバイスに関する。
【背景技術】
【０００２】
技術の進歩及び発展に伴って、コンピュータとユーザとの間の対話(interactions)の必要性が増加している。例えば、体性感覚ゲーム(somatosensory  games)、仮想現実感(virtual  reality(VR))環境、拡張現実感(augmented  reality(AR))環境、及び拡大現実感(extended  reality(XR))環境等の人とコンピュータとの間の対話技術は、その生理学的機能及び娯楽的機能のために、普及が進んでいる。一方で、広告は、消費者に市販の製品を宣伝する1つの効果的な方法である。したがって、AR/VR/EX環境において広告をどのようにしてプッシュ型配信するかということは、この技術分野においては、1つの重要な目的である。
【発明の概要】
【０００３】
したがって、本発明の第1の目的は、環境及びユーザの反応に基づいて、広告を適切にプッシュ型配信することが可能である推奨方法及び現実感提示デバイスを提供することである。
【０００４】
本発明のある1つの実施形態は、現実感提示デバイスに適用される推奨方法であって、その現実感提示デバイスは、第1の検知モジュール、第2の検知モジュール、及び処理ユニットを含み、当該推奨方法は、第1の検知モジュールが、現実感提示デバイスを装着しているユーザに対応するユーザ関連情報を検知するステップと、第2の検知モジュールが、ユーザが経験している環境に対応する環境関連情報を検知するステップと、処理ユニットが、ユーザ関連情報又は環境関連情報にしたがって、推奨される対象を生成して、ユーザにその推奨される対象を提示するステップと、を含む、推奨方法を開示する。
【０００５】
本発明のある1つの実施形態は、現実感提示デバイスであって、当該現実感提示デバイスを装着しているユーザに対応するユーザ関連情報を検知するように構成される第1の検知モジュールと、ユーザが経験している環境に対応する環境関連情報を検知するように構成される第2の検知モジュールと、ユーザ関連情報又は環境関連情報にしたがって、推奨される対象を生成して、ユーザにその推奨される対象を提示する、ように構成される処理ユニットと、を含む、現実感提示デバイスを開示する。
【０００６】
様々な図表及び図面にしたがって解説される好適な実施形態の以下の詳細な説明を参照すると、本発明のこれらの及び他の目的は、当業者に明らかとなることは間違いないであろう。
【図面の簡単な説明】
【０００７】
【図１】本発明のある1つの実施形態にしたがった現実感提示デバイスのある1つの機能的なブロック図である。
【図２】図1の現実感提示デバイスのある1つの外観図である。
【図３】室内において現実感提示デバイスを装着しているユーザのある1つのシナリオの概略図である。
【図４】本発明のある1つの実施形態にしたがったプロセスの概略図である。
【発明を実施するための形態】
【０００８】
図1は、本発明のある1つの実施形態にしたがった現実感提示デバイス10の機能的なブロック図である。図2は、現実感提示デバイス10のある1つの外観図である。現実感提示デバイス10は、仮想現実感(virtual  reality  (VR))デバイス、拡張現実感(augmented  reality  (AR))デバイス、複合現実感(mixed  reality  (MR))デバイス、又は拡大現実感(extended  reality  (XR))デバイスであってもよい。現実感提示デバイス10は、第1の検知モジュール12、第2の検知モジュール14、及び処理ユニット16を含む。第1の検知モジュール12は、現実感提示デバイス10を装着しているユーザに対応するユーザ関連情報(user-related  information  (US))を検知するように構成される。第2の検知モジュール14は、そのユーザが経験している環境に対応する環境関連情報(environment-related  information  (EN))を検知するように構成され、(そのユーザが経験している)環境は、実環境(real  environment)、仮想環境(virtual  environment)、又はそれらの環境の組み合わせ/混合の環境であってもよい。処理ユニット16は、第1の検知ユニット12及び第2の検知ユニット14に接続されて、ユーザ関連情報(user-related  information  (US))及び/又は環境関連情報(environment-related  information  (EN))にしたがって、推奨される対象(recommended  object  (RO))を生成して、ユーザにその推奨される対象(RO)を提示する、ように構成される。その推奨される対象(RO)は、ユーザのために生成される視認可能な対象又は可聴音であってもよい。ある1つの実施形態において、推奨される対象(RO)は、これらには限定されないが、視覚的に或いは聴覚的に生成される市販の製品の広告であってもよい。
【０００９】
例えば、図3は、室内で現実感提示デバイス10を装着しているユーザのある1つのシナリオのある1つの概略的な図である。現実感提示デバイス10を装着しているそのユーザが、例えば、図3が示しているような居間等のある特定の部屋に滞在している場合に、第2の検知モジュール14は、最初に、そのユーザが経験している環境に対応する環境関連情報を収集し/集めて(collect/gather)もよい。例えば、第2の検知モジュール14は、その環境の1つ又は複数の写真を撮ってもよく、第2の検知モジュール14が撮ったその環境の写真は、その環境関連情報の形態/タイプである。第2に、第2の検知モジュール14又は処理ユニット16は、その環境の1つ又は複数の写真等の環境関連情報にしたがって、ある種の人工知能(artificial  intelligence  (AI))アルゴリズムを使用して、その特定の部屋のある1つの環境タイプを認識し或いは識別してもよい。例えば、第2の検知モジュール14又は処理ユニット16は、図3に示されているそのユーザが滞在しているその部屋が居間であるということを認識し/識別してもよく、そして、その環境が居間であるということを示す環境タイプ情報を生成してもよい。ある1つの実施形態において、そのユーザは、その特定の部屋を歩き回ってもよく、それによって、第2の検知モジュール14は、その第2の検知モジュール14又は処理ユニット16がより良好な判断を実行するために、十分なデータ、すなわち、それらの写真或いは環境関連情報を収集してもよい。一方で、第1の検知モジュール12は、特に、その環境又はその特定の部屋に滞在している際に、ある種のビックデータ技術を使用して、例えば、顔の表情及び音声の中のトーン等のユーザの応答/反応を観測してもよく、そのユーザの関心を憶測し/推測してもよい。最終的に、処理ユニット16は、ユーザ関連情報(US)及び/又は環境関連情報(EN)にしたがって、例えば、現実感提示デバイス10の(図1及び図2に示されていない)マルチメディアインターフェイス等によって、そのユーザに推奨される対象(RO)を宣伝してもよい。したがって、そのユーザは、より関心がある情報を取得することが可能であるとともに、より良好なユーザイクスペアリアンスを経験することが可能である。その推奨される対象(RO)が広告である場合には、その広告のプッシュ型配信を成功させることが可能である。
【００１０】
さらに、ある1つの実施形態において、第1の検知モジュール12及び処理ユニット16は、協働して、そのユーザがその推奨される対象(RO)を好んでいるか否かを推測してもよい。そのユーザがその推奨される対象(RO)を好んでいない場合には、処理ユニット16は、他の推奨される対象(RO)を宣伝してもよい。そのユーザと現実感提示デバイス10との間の対話を通じて、及び/又は、処理ユニット16が実行する学習プロセスを通じて、その処理ユニット16は、そのユーザが好む最良の推奨される対象(RO)を宣伝してもよいということを予測することが可能である。広告の観点から、その広告のプッシュ型配信を成功させることが可能である。
【００１１】
加えて、環境タイプは、また、これらには限定されないが、台所、食堂、寝室、書斎、展示ホール、レストラン、コンサートホール、会議室、体育館、競技場、病院、学校、ショッピングモール、鉄道の駅、空港、市場等であってもよい。
【００１２】
現実感提示デバイス10の動作を、図4に示されているプロセス40に要約することが可能である。そのプロセス40は、以下のステップを含む。
【００１３】
ステップ402:  第1の検知モジュール12は、現実感提示デバイス10を装着しているユーザに対応するユーザ関連情報(UR)を検知する。
【００１４】
ステップ404:  第2の検知モジュール14は、そのユーザが経験している環境に対応する環境関連情報(EN)を検知する。
【００１５】
ステップ406:  処理ユニット16は、ユーザ関連情報(US)又は環境関連情報(EN)にしたがって、推奨される対象(RO)を生成して、そのユーザにその推奨される対象(RO)を提示する。
【００１６】
ある1つの実施形態において、第1の検知モジュール12は、眼球追跡サブモジュールを含んでもよく、その眼球追跡サブモジュールは、そのユーザの目に対して眼球追跡動作を実行して、そのユーザに対応する眼球追跡結果を生成してもよい。この場合に、ユーザ関連情報(UR)は、その眼球追跡結果を含む。第1の検知モジュール12又は処理ユニット16は、その眼球追跡結果にしたがって、注目を集める小領域情報(attention-drawing  spot  information)を決定してもよい。処理ユニット16は、注目を集める小領域情報及び環境関連情報(EN)にしたがって、推奨される対象(RO)を生成してもよい。
【００１７】
具体的には、その眼球追跡結果にしたがって、現実感提示デバイス10は、ある時間的な期間の間にそのユーザが凝視するある小領域(点)の位置に関する情報を取得するであろう。そのユーザが凝視するその小領域は、そのユーザの注目をひいているということを暗に示しているということができ、その小領域は、注目を集める小領域と呼ばれる。注目を集める小領域情報と呼ばれるその注目を集める小領域の位置は、現実感提示デバイス10が表示する写真又はビデオフレームの中のその小領域の座標であってもよい。その環境又は環境関連情報(EN)にその注目を集める小領域情報を組み込むことによって、処理ユニット16は、その推奨される対象(RO)を宣伝してもよい。
【００１８】
例えば、現実感提示デバイス10を装着しているユーザは、居間に滞在していてもよい。プロセッサ40を使用して、第1の検知モジュール12によって、その現実感提示デバイス10が、そのユーザがその居間の空いている壁を凝視しているということを認識している場合に、処理ユニット16は、推奨される対象(RO)として、仮想的な絵画又はその壁につるされているポスターを宣伝してもよい。
【００１９】
ある1つの実施形態において、第1の検知モジュール12は、顔面走査サブモジュールを含んでもよく、その顔面走査サブモジュールは、そのユーザの顔面に対して顔面走査動作を実行して、そのユーザに対応する顔面走査結果を生成してもよい。この場合に、ユーザ関連情報(UR)は、その顔面走査結果を含む。第1の検知モジュール12又は処理ユニット16は、その顔面走査結果にしたがって感情情報を決定してもよい。処理ユニット16は、その感情情報にしたがって、推奨される対象(RO)を生成してもよい。
【００２０】
例えば、顔面走査結果は、その顔面の一部の写真又は顔面全体の写真であってもよい。第1の検知モジュール12又は処理ユニット16は、その顔面走査結果にしたがって、そのユーザの感情を決定して、感情情報を生成してもよい。第1の検知モジュール12又は処理モジュール16は、知られてはいるが本明細書においては解説されていないある種の人工知能(AI)アルゴリズム又はビックデータアルゴリズムを使用することによって、そのユーザの感情が、幸福である、驚いている、動転している、不安である等ということを決定してもよい。その感情情報に基づいて、処理ユニット16は、適切な推奨される対象(RO)を宣伝してもよい。
【００２１】
ある1つの実施形態において、第1の検知モジュール12は、トーン検知サブモジュールを含んでもよく、そのトーン検知サブモジュール122は、そのユーザの音声のトーンに対してトーン検知動作を実行して、そのユーザに対応するトーン検知結果を生成してもよい。この場合に、ユーザ関連情報(UR)は、トーン検知結果を含んでもよい。第1の検知モジュール12又は処理ユニット16は、そのトーン検知結果にしたがってトーン情報を決定してもよい。処理ユニット16は、そのトーン情報にしたがって、推奨される対象(RO)を生成してもよい。
【００２２】
例えば、トーン検知サブモジュールは、マイクロフォンを含んでもよく、そのトーン検知結果は、ユーザの音声の記録であってもよい。第1の検知モジュール12又は処理ユニット16は、そのユーザが興奮しているか又は失望しているかを示すトーン情報を決定してもよい。さらに、第1の検知モジュール12は、1つ又は複数の既存の音声認識アルゴリズムを使用することによって、"すごい!  これは素晴らしい"又は"ううん、これは好きではない"等の音声コンテンツを認識して、その音声認識結果を含むトーン情報を生成してもよい。そのトーン情報に基づいて、処理ユニット16は、推奨される対象(RO)を宣伝してもよい。
【００２３】
要約すると、本発明は、ユーザ関連情報及び環境関連情報を利用して、推奨される対象を宣伝し、それによって、ユーザイクスペアリアンスを強化する。加えて、その環境及びユーザの反応に基づいて、広告のプッシュ型配信を成功させることが可能である。
【００２４】
当業者は、本発明の教示を確保しつつ、デバイス及び方法の数多くの修正及び変更を行うことが可能であるということに容易に気付くであろう。したがって、上記の開示は、添付の特許請求の範囲の境界及び限度によってのみ限定されると解釈されるべきである。
【図１】
2020052994.tif 000003
【図２】
2020052994.tif 000004
【図３】
2020052994.tif 000005
【図４】
2020052994.tif 000006