【手続補正書】
【提出日】令和2年2月17日(2020.2.17)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
拡張現実のためのコンピュータ実施方法であって、
地理的空間に位置されたユーザにより視認される前記地理的空間の現実世界のビューを可能にするように配置された視覚装置の位置と向きとに関する第１データを収集するために複数のセンサを使用する工程と、
１つまたは複数の処理装置を使用して、前記第１データに基づいて現実世界の視錐台（ｆｒｕｓｔｕｍ）を決定する工程であって、現実世界の画像またはフレームを提供する、工程と、
前記現実世界のビューの拡張のための仮想オブジェクト候補を識別するために、前記１つまたは複数のプロセッサを用いて、前記現実世界の視錐台を仮想世界に適用する工程であって、前記仮想世界は、前記現実世界のビューにおいて知覚できない、１つまたは複数のネットワークパフォーマンスとアセット構成とのうちの１つまたは複数の品質を説明する１つまたは複数の仮想オブジェクトを備え、前記１つまたは複数の仮想オブジェクトは、ネットワーク関連データを含み、前記仮想世界は、前記現実世界の画像またはフレームに現れる現実の位置に対応するいくつかの位置により特徴付けられる、工程と、
前記１つまたは複数の処理装置を用いて、前記現実世界のビューにおいて知覚できない１つまたは複数のネットワークパフォーマンスとアセット構成とのうちの１つまたは複数の品質を説明する少なくとも１つの仮想オブジェクトを備える、１つまたは複数の前記仮想オブジェクト候補に対応する１つまたは複数の拡張を選択する工程であって、前記１つまたは複数の拡張は、前記ネットワーク関連データの表現である、工程と、
出力装置を用いて、前記現実世界のビューと同時に、少なくとも１つの選択された拡張を提供する工程であって、前記少なくとも１つの選択された拡張は、前記現実世界のビューにおいて知覚できない１つまたは複数のネットワークパフォーマンスとアセット構成とのうちの１つまたは複数の品質を知覚可能にする工程と、
を含む、
ことを特徴とするコンピュータ実施方法。
【請求項２】
前記複数のセンサを使用する工程は、回転データを収集するジャイロスコープと、加速度データを収集する線形加速度センサと、コンパスデータを収集する磁気センサと、ＧＰＳデータを収集するＧＰＳモジュールと、のうち少なくとも１つまたは複数を使用する工程を含む、
請求項１記載のコンピュータ実施方法。
【請求項３】
前記視覚装置は、１つまたは複数のカメラを備え、
前記コンピュータ実施方法は、前記１つまたは複数のカメラを用いて、前記現実世界のビューの画像を描写する第２データをキャプチャする工程、
を含む、
請求項１記載のコンピュータ実施方法。
【請求項４】
前記第２データを画像処理する工程と、
前記出力装置を用いて前記少なくとも１つの選択された拡張を提供する前に、前記画像処理の結果に基づいて、前記少なくとも１つの選択された拡張を変更する工程と、
を含む、
請求項３記載のコンピュータ実施方法。
【請求項５】
前記画像処理する工程は、畳み込みニューラルネットワークを用いた画像処理を含む、
請求項４記載のコンピュータ実施方法。
【請求項６】
前記出力装置は、ディスプレイを備え、
前記コンピュータ実施方法は、前記少なくとも１つの選択された拡張を提供する工程と同時に前記現実世界のビューの前記画像の再現を前記ディスプレイ用いて表示する工程、
を含む、
請求項３記載のコンピュータ実施方法。
【請求項７】
前記視覚装置と前記出力装置とは、同じ装置であるかまたは同じ装置の一部である、
請求項６記載のコンピュータ実施方法。
【請求項８】
ヘッドマウントディスプレイは、前記視覚装置と前記出力装置とを備える、
請求項７記載のコンピュータ実施方法。
【請求項９】
シースルー型ヘッドマウントディスプレイは、前記視覚装置と前記出力装置とを備える、
請求項１記載のコンピュータ実施方法。
【請求項１０】
前記視覚装置は、前記シースルー型ヘッドマウントディスプレイのレンズまたは１対のレンズである、
請求項９記載のコンピュータ実施方法。
【請求項１１】
仮想オブジェクト候補が、他の仮想オブジェクト候補を覆い隠すか否かと、どの仮想オブジェクト候補が覆い隠すかと、を前記適用された視錐台に基づいて、決定する工程、
を含み、
前記選択する工程は、前記１つまたは複数の拡張を選択するときに、覆い隠される仮想オブジェクト候補を識別する、
請求項１記載のコンピュータ実施方法。
【請求項１２】
前記提供する工程により提供される拡張は、視覚的、聴覚的、視聴覚的、触覚的、またはそれらのいくつかの組み合わせである、
請求項１記載のコンピュータ実施方法。
【請求項１３】
前記提供する工程により提供される拡張は、現実オブジェクトの３Ｄ表現と、現実オブジェクトを抽象化したものと、マーカと、インジケータと、キューと、のうちの１つまたは複数を含む、
請求項１２記載のコンピュータ実施方法。
【請求項１４】
前記出力装置は、ディスプレイを備え、
前記提供する工程により提供される拡張は、前記現実世界のビューの上に重ねられた視覚拡張を含む、
請求項１２記載のコンピュータ実施方法。
【請求項１５】
前記提供する工程は、前記現実世界のビューにおいて知覚できない１つまたは複数のネットワークパフォーマンスとアセット構成とのうちの前記１つまたは複数の品質に基づいて、前記現実世界のビューの少なくとも１つの部分を差別化する視覚拡張として、少なくとも１つのインジケータを提供する、
請求項１４記載のコンピュータ実施方法。
【請求項１６】
これらに限定されるわけではないが、電気通信ネットワークに１つまたは複数の機能を与える電気的ハードウェアまたは関連するインフラストラクチャを備える電気通信アセットに基づいて、前記仮想世界に仮想オブジェクトを提供する工程、
を含む、
請求項１記載のコンピュータ実施方法。
【請求項１７】
前記仮想世界において提供される前記仮想オブジェクトの少なくともいくつかは、基地局と、スイッチと、ルータと、ハブと、コンピュータと、試験設備と、アンテナと、コネクタと、スプリッタと、プローブと、中継器と、延長器と、送受信機と、アクセスポイントと、仮想コンピューティング環境を実行するハードウェアと、タワーと、これらの集合と、これらの組み合わせと、またはこれらの群と、のうちの１つまたは複数に基づいている、
請求項１６記載のコンピュータ実施方法。
【請求項１８】
前記複数のセンサを使用する工程において収集された前記第１データのうちの位置情報は、絶対位置情報と、相対位置情報と、関連位置情報と、のうちの１つまたは複数を含む、
請求項１記載のコンピュータ実施方法。
【請求項１９】
前記仮想世界において提供される前記仮想オブジェクトの少なくともいくつかは、地理情報システム（ＧＩＳ）データと、測定データと、プロジェクトデータと、アセットデータと、予想データと、予測データと、のうちの１つまたは複数を含むネットワーク関連データに基づいている、
請求項１記載のコンピュータ実施方法。
【請求項２０】
ネットワークパフォーマンスデータを含む前記仮想オブジェクトを前記仮想世界に提供する工程、
を含む、
請求項１記載のコンピュータ実施方法。
【請求項２１】
前記少なくとも１つの選択された拡張は、予測ネットワークパフォーマンスデータの表現である、
請求項２０記載のコンピュータ実施方法。
【請求項２２】
前記仮想世界において提供される前記仮想オブジェクトの少なくともいくつかは、受信される信号強度と、最適サーバと、スループットと、誤り率と、パケットレイテンシと、パケットジッタと、シンボルジッタと、サービスの質と、セキュリティと、有効範囲エリアと、帯域幅と、ビット誤り率と、パケット誤り率と、フレーム誤り率と、パケットドロップ率と、呼出ドロップ率と、キューイング遅延と、キャパシティと、信号レベルと、干渉レベルと、ラウンドトリップタイムと、帯域幅遅延積と、ハンドオフ遅延時間と、ハンドオフ頻度と、信号対干渉比と、信号対雑音比と、呼出品質と、リンクバジェットと、Ｅｂ／Ｎｏ（ビット平均エネルギー／雑音）と、Ｅｃ／Ｉｏ（チップ平均エネルギー／干渉プラス雑音）と、物理的設備の価格と、コスト情報と、のうちの１つまたは複数に基づいている、
請求項２０記載のコンピュータ実施方法。
【請求項２３】
前記地理的空間に位置された前記ユーザは、人間ユーザ、ロボットユーザ、またはカメラである、
請求項１記載のコンピュータ実施方法。
【請求項２４】
地理的空間に位置されたユーザにより視認される前記地理的空間の現実世界のビューを可能にするように配置された視覚装置の位置と向きとに関する第１データを収集するように構成される複数のセンサと、
コンピュータ可読プログラム命令を実行するように構成される１つまたは複数の処理装置であって、
前記コンピュータ可読プログラム命令が実行される場合、
前記第１データに基づいて現実世界の視錐台を決定して、現実世界の画像またはフレームを提供し、
前記現実世界のビューの拡張のための仮想オブジェクト候補を識別するために、前記現実世界の視錐台を仮想世界に適用し、
前記仮想世界は、前記現実世界のビューにおいて知覚できない１つまたは複数のネットワークパフォーマンスとアセット構成とのうちの１つまたは複数の品質を説明する１つまたは複数の仮想オブジェクトを含み、
前記１つまたは複数の仮想オブジェクトは、ネットワーク関連データを含み、
前記仮想世界は、前記現実世界の画像またはフレームに現れる現実の位置に対応するいくつかの位置により特徴付けられ、
前記現実世界のビューにおいて知覚できない１つまたは複数のネットワークパフォーマンスとアセット構成とのうちの１つまたは複数の品質を説明する少なくとも１つの仮想オブジェクトを備え、１つまたは複数の前記仮想オブジェクト候補に対応する１つまたは複数の拡張を選択し、
前記１つまたは複数の拡張は、前記ネットワーク関連データの表現である、
１つまたは複数の処理装置と、
前記現実世界のビューと同時に、少なくとも１つの選択された拡張を提供するように構成される出力装置と、
を有してなり、
前記少なくとも１つの選択された拡張は、前記現実世界のビューにおいて知覚できない１つまたは複数のネットワークパフォーマンスとアセット構成とのうちの１つまたは複数の品質を知覚可能にする、
ことを特徴とする拡張現実システム。
【請求項２５】
前記複数のセンサは、回転データを収集するジャイロスコープと、加速度データを収集する線形加速度センサと、コンパスデータを収集する磁気センサと、ＧＰＳデータを収集するＧＰＳモジュールと、のうちの少なくとも１つまたは複数を含む、
請求項２４記載の拡張現実システム。
【請求項２６】
前記現実世界のビューの画像を描写する第２データをキャプチャするように構成される１つまたは複数のカメラを備える、
請求項２４記載の拡張現実システム。
【請求項２７】
前記出力装置は、少なくとも１つの選択された拡張を提供すると同時に、前記現実世界のビューの前記画像の再現を表示するように構成されるディスプレイを備える、
請求項２６記載の拡張現実システム。
【請求項２８】
前記視覚装置と前記出力装置とは、同じ装置であるかまたは同じ装置の一部である、
請求項２７記載の拡張現実システム。
【請求項２９】
拡張現実を提供するためのコンピュータプログラム製品であって、
前記コンピュータプログラム製品を用いて具現化されるプログラム命令を有するコンピュータ可読記憶媒体を備え、
１つまたは複数の処理装置により実行可能な前記プログラム命令により、前記１つまたは複数の処理装置に、
地理的空間に位置されたユーザにより視認される前記地理的空間の現実世界のビューを可能にするように配置された視覚装置の位置と向きとに関する第１データを複数のセンサから収集する工程と、
前記第１データに基づいて、現実世界の視錐台を決定する工程であって、現実世界の画像またはフレームを提供する、工程と、
前記現実世界のビューの拡張のための仮想オブジェクト候補を識別するために、前記現実世界の視錐台を仮想世界に適用する工程であって、前記仮想世界は、前記現実世界のビューにおいて知覚できない１つまたは複数のネットワークパフォーマンスとアセット構成とのうちの１つまたは複数の品質を説明する１つまたは複数の仮想オブジェクトを含み、前記１つまたは複数の仮想オブジェクトは、ネットワーク関連データを含み、前記仮想世界は、前記現実世界の画像またはフレームに現れる現実の位置に対応するいくつかの位置により特徴付けられる、工程と、
前記現実世界のビューにおいて知覚できない１つまたは複数のネットワークパフォーマンスとアセット構成とのうちの１つまたは複数の品質を説明する少なくとも１つの仮想オブジェクトを含む、１つまたは複数の前記仮想オブジェクト候補に対応する１つまたは複数の拡張を選択する工程であって、前記１つまたは複数の拡張は、前記ネットワーク関連データの表現である、工程と、
前記現実世界のビューと同時に少なくとも１つの選択された拡張を出力するために拡張画像データを出力装置に提供する工程であって、前記少なくとも１つの選択された拡張は、前記現実世界のビューにおいて知覚できない１つまたは複数のネットワークパフォーマンスとアセット構成とのうちの１つまたは複数の品質を知覚可能にする、工程と、
を含む方法を実行させる、
ことを特徴とするコンピュータプログラム製品。
【請求項３０】
現実世界の画像またはフレームの拡張現実のためのコンピュータ実施方法であって、
前記現実世界において拡張のための仮想オブジェクト候補を識別するために、１つまたは複数のプロセッサを用いて、前記現実世界の画像またはフレームの視錐台を仮想世界に適用する工程であって、前記仮想世界では、前記現実世界のオブジェクトと、前記現実世界の画像またはフレームにおいて知覚できない、１つまたは複数のネットワークパフォーマンスとアセット構成とのうちの１つまたは複数の品質を説明する１つまたは複数の仮想オブジェクトと、に対応する仮想オブジェクトが存在し、前記１つまたは複数の仮想オブジェクトは、ネットワーク関連データを含み、前記仮想世界は、前記現実世界の画像またはフレームに現れる現実の位置に対応するいくつかの位置により特徴付けられる、工程と、
前記１つまたは複数の処理装置を用いて、前記現実世界の画像またはフレームにおいて知覚できない１つまたは複数のネットワークパフォーマンスとアセット構成とのうちの１つまたは複数の品質を説明する少なくとも１つの仮想オブジェクトを備える、１つまたは複数の前記仮想オブジェクト候補に対応する１つまたは複数の拡張を選択する工程であって、前記１つまたは複数の拡張は、前記ネットワーク関連データの表現である、工程と、
出力装置上の前記現実世界の画像またはフレーム内に出力するための、少なくとも１つの選択された拡張を提供する工程であって、前記少なくとも１つの選択された拡張は、前記現実世界の画像またはフレームにおいて知覚できない１つまたは複数のネットワークパフォーマンスとアセット構成とのうちの１つまたは複数の品質を知覚可能にする工程と、
を含む、
ことを特徴とするコンピュータ実施方法。
【請求項３１】
１つまたは複数のカメラから、実質的にリアルタイムの前記現実世界の画像またはフレームを受け取る工程、
を含む、
請求項３０記載のコンピュータ実施方法。
【請求項３２】
前記現実世界の画像またはフレームを記憶する記憶部から、前記現実世界の画像またはフレームを受け取る工程、
を含む、
請求項３０記載のコンピュータ実施方法。
【請求項３３】
前記提供する工程により提供される拡張は、視覚出力、聴覚出力、視聴覚出力、触覚出力、またはそれらのいくつかの組み合わせの出力用である、
請求項３０記載のコンピュータ実施方法。
【請求項３４】
前記提供する工程は、前記少なくとも１つの選択された拡張を表示するディスプレイを備える出力装置に前記少なくとも１つの選択された拡張を提供する、
請求項３３記載のコンピュータ実施方法。
【請求項３５】
前記選択する工程は、
基地局と、スイッチと、ルータと、ハブと、コンピュータと、試験設備と、アンテナと、コネクタと、スプリッタと、プローブと、中継器と、延長器と、送受信機と、アクセスポイントと、仮想コンピューティング環境を実行するハードウェアと、タワーと、これらの集合と、これらの組み合わせと、またはこれらの群と、のうちの１つまたは複数に基づいている、前記１つまたは複数の仮想オブジェクト候補に対応する前記１つまたは複数の拡張を選択する工程、
を含む、
請求項３０記載のコンピュータ実施方法。
【請求項３６】
前記選択する工程は、
地理情報システム（ＧＩＳ）データと、測定データと、プロジェクトデータと、アセットデータと、予想データと、予測データと、のうちの１つまたは複数を含むネットワーク関連データに基づいている、前記１つまたは複数の仮想オブジェクト候補に対応する前記１つまたは複数の拡張を選択する工程、
を含む、
請求項３０記載のコンピュータ実施方法。
【請求項３７】
コンピュータ可読プログラム命令を実行するように構成される１つまたは複数の処理装置であって、
前記コンピュータ可読プログラム命令が実行される場合、
現実世界の画像またはフレームの拡張のための現実世界における仮想オブジェクト候補を識別するために、前記現実世界の画像またはフレームの現実世界の視錐台を仮想世界に適用し、
前記仮想世界では、前記現実世界のオブジェクトと、前記現実世界の画像またはフレームにおいて知覚できない１つまたは複数のネットワークパフォーマンスとアセット構成とのうちの１つまたは複数の品質を説明する１つまたは複数の仮想オブジェクトと、に対応する仮想オブジェクトが存在し、
前記１つまたは複数の仮想オブジェクトは、ネットワーク関連データを含み、
前記仮想世界は、前記現実世界の画像またはフレームに現れる現実の位置に対応するいくつかの位置により特徴付けられ、
前記現実世界の画像またはフレームにおいて知覚できない１つまたは複数のネットワークパフォーマンスとアセット構成とのうちの１つまたは複数の品質を説明する少なくとも１つの仮想オブジェクトを備え、１つまたは複数の前記仮想オブジェクト候補に対応する１つまたは複数の拡張を選択し、
前記１つまたは複数の拡張は、前記ネットワーク関連データの表現であり、
出力装置上の前記現実世界の画像またはフレーム内に出力するための、少なくとも１つの選択された拡張を提供し、
前記少なくとも１つの選択された拡張は、前記現実世界の画像またはフレームにおいて知覚できない１つまたは複数のネットワークパフォーマンスとアセット構成とのうちの１つまたは複数の品質を知覚可能にする、
１つまたは複数の処理装置を備える、
ことを特徴とする拡張現実システム。
【請求項３８】
前記１つまたは複数の処理装置は、前記コンピュータ可読プログラム命令が実行される場合、１つまたは複数のカメラから、実質的にリアルタイムの前記現実世界の画像またはフレームを受け取る、
請求項３７記載の拡張現実システム。
【請求項３９】
前記１つまたは複数の処理装置は、前記コンピュータ可読プログラム命令が実行される場合、前記現実世界の画像またはフレームを記憶する記憶部から、前記現実世界の画像またはフレームを受け取る、
請求項３７記載の拡張現実システム。
【請求項４０】
前記提供される拡張は、視覚出力、聴覚出力、視聴覚出力、触覚出力、またはそれらのいくつかの組み合わせの出力用である、
請求項３７記載の拡張現実システム。
【請求項４１】
前記少なくとも１つの選択された拡張を表示するディスプレイを備える出力装置に前記少なくとも１つの選択された拡張を提供する、
請求項４０記載の拡張現実システム。
【請求項４２】
前記１つまたは複数の拡張の選択は、
基地局と、スイッチと、ルータと、ハブと、コンピュータと、試験設備と、アンテナと、コネクタと、スプリッタと、プローブと、中継器と、延長器と、送受信機と、アクセスポイントと、仮想コンピューティング環境を実行するハードウェアと、タワーと、これらの集合と、これらの組み合わせと、またはこれらの群と、のうちの１つまたは複数に基づいている、前記１つまたは複数の仮想オブジェクト候補に対応する前記１つまたは複数の拡張の選択、
を含む、
請求項３７記載の拡張現実システム。
【請求項４３】
前記１つまたは複数の拡張の選択は、
地理情報システム（ＧＩＳ）データと、測定データと、プロジェクトデータと、アセットデータと、予想データと、予測データと、のうちの１つまたは複数を含むネットワーク関連データに基づいている、前記１つまたは複数の仮想オブジェクト候補に対応する前記１つまたは複数の拡張の選択、
を含む、
請求項３７記載の拡張現実システム。
【請求項４４】
拡張現実を提供するためのコンピュータプログラム製品であって、
前記コンピュータプログラム製品を用いて具現化されるプログラム命令を有するコンピュータ可読記憶媒体を備え、
１つまたは複数の処理装置により実行可能な前記プログラム命令により、前記１つまたは複数の処理装置に、
現実世界の画像またはフレームの拡張のための現実世界における仮想オブジェクト候補を識別するために、現実世界の視錐台を仮想世界に適用する工程であって、前記仮想世界には、前記現実世界のオブジェクトと、前記現実世界の画像またはフレームにおいて知覚できない１つまたは複数のネットワークパフォーマンスとアセット構成とのうちの１つまたは複数の品質を説明する１つまたは複数の仮想オブジェクトと、に対応する仮想オブジェクトが存在する、工程と、
前記現実世界の画像またはフレームにおいて知覚できない１つまたは複数のネットワークパフォーマンスとアセット構成とのうちの１つまたは複数の品質を説明する少なくとも１つの仮想オブジェクトを含む、１つまたは複数の前記仮想オブジェクト候補に対応する１つまたは複数の拡張を選択する工程であって、前記１つまたは複数の拡張は、前記ネットワーク関連データの表現である、工程と、
出力装置上の前記現実世界の画像またはフレーム内に出力するための、少なくとも１つの選択された拡張を提供する工程であって、前記少なくとも１つの選択された拡張は、前記現実世界の画像またはフレームにおいて知覚できない１つまたは複数のネットワークパフォーマンスとアセット構成とのうちの１つまたは複数の品質を知覚可能にする、工程と、
を含む方法を実行させる、
ことを特徴とするコンピュータプログラム製品。
【請求項４５】
前記コンピュータ可読記憶媒体は、前記コンピュータプログラム製品を用いて実行可能なさらなるプログラム命令を有し、
前記１つまたは複数の処理装置により実行可能な前記さらなるプログラム命令により、前記１つまたは複数の処理装置に、１つまたは複数のカメラから、実質的にリアルタイムの前記現実世界の画像またはフレームを受け取る工程を実行させる、
請求項４４記載の拡張現実システム。
【請求項４６】
前記コンピュータ可読記憶媒体は、前記コンピュータプログラム製品を用いて実行可能なさらなるプログラム命令を有し、
前記１つまたは複数の処理装置により実行可能な前記さらなるプログラム命令により、前記１つまたは複数の処理装置に、前記現実世界の画像またはフレームを記憶する記憶部から、前記現実世界の画像またはフレームを受け取る工程を実行させる、
請求項４４記載の拡張現実システム。
【請求項４７】
前記提供する工程により提供される拡張は、視覚出力、聴覚出力、視聴覚出力、触覚出力、またはそれらのいくつかの組み合わせの出力用である、
請求項４４記載の拡張現実システム。
【請求項４８】
前記選択する工程は、
基地局と、スイッチと、ルータと、ハブと、コンピュータと、試験設備と、アンテナと、コネクタと、スプリッタと、プローブと、中継器と、延長器と、送受信機と、アクセスポイントと、仮想コンピューティング環境を実行するハードウェアと、タワーと、これらの集合と、これらの組み合わせと、またはこれらの群と、のうちの１つまたは複数に基づいている、前記１つまたは複数の仮想オブジェクト候補に対応する前記１つまたは複数の拡張を選択する工程、
を含む、
請求項４４記載の拡張現実システム。
【請求項４９】
前記選択する工程は、
地理情報システム（ＧＩＳ）データと、測定データと、プロジェクトデータと、アセットデータと、予想データと、予測データと、のうちの１つまたは複数を含むネットワーク関連データに基づいている、前記１つまたは複数の仮想オブジェクト候補に対応する前記１つまたは複数の拡張を選択する工程、
を含む、
請求項４４記載の拡張現実システム。