(57)【要約】【課題】コンピュータ及び情報技術を利用する実施形態、特にＰＯＳシステム、ＡＴＭ等のセルフサービスターミナル（ＳＳＴ）等において、バーチャルリアリティ（ＶＲ）による保守管理システムを提示する。【解決手段】バーチャルリアリティ（ＶＲ）セッションを確立する工程（２１０）と、前記ＶＲセッション中にレンダリングされたＶＲルームに、前記ＶＲルーム内の端末を記述するファイルおよびそれを対話的にマニピュレートするためのプログラム命令を読込工程（２２０）と、前記ＶＲセッション中に、前記ＶＲセッションの参加者によって操作されるＶＲ入力装置によって指示された通りに、前記端末の少なくとも１つのコンポーネントをマニピュレートする工程（２３０）と、を含む。【選択図】図１Ａ
2018165982.tif 000002
【特許請求の範囲】
【請求項１】
バーチャルリアリティ（ＶＲ）セッションを確立する工程（２１０）と、
前記ＶＲセッション中にレンダリングされたＶＲルームに、前記ＶＲルーム内の端末を記述するファイルおよびそれを対話的にマニピュレートするためのプログラム命令を読込工程（２２０）と、
前記ＶＲセッション中に、前記ＶＲセッションの参加者によって操作されるＶＲ入力装置によって指示された通りに、前記端末の少なくとも１つのコンポーネントをマニピュレートする工程（２３０）と、
を含むことを特徴とするバーチャルリアリティによる保守管理方法。
【請求項２】
読込工程が、前記端末用のコンピュータ支援設計（ＣＡＤ）ファイルを前記ファイルおよびプログラム命令として読込工程（２２１）をさらに含む、請求項１に記載の保守管理方法。
【請求項３】
読込工程が、前記ＶＲセッション中に検討されている特定の端末の製造元およびモデルに基づき、前記ＣＡＤファイルを識別工程（２２２）をさらに含む、請求項２に記載の保守管理方法。
【請求項４】
識別工程が、前記ＶＲセッション中に前記特定の端末用の識別子を前記参加者から受信する工程（２２３）をさらに含む、請求項３に記載の保守管理方法。
【請求項５】
読込工程が、前記ＶＲセッションの前記参加者と少なくとも１人の他の参加者との間の協働的なやりとりのための前記ＶＲセッション中に前記ＶＲルーム内にホワイトボードをレンダリングする工程（２２４）をさらに含む、請求項１〜４のいずれか１項に記載の保守管理方法。
【請求項６】
レンダリングする工程が、前記参加者によって操作される前記ＶＲ入力装置、または前記少なくとも１人の他の参加者によって操作される異なるＶＲ入力装置からの指示に基づき、前記ホワイトボード上にテキストを提示する工程（２２５）をさらに含む、請求項５に記載の保守管理方法。
【請求項７】
マニピュレートする工程が、前記ＶＲ入力装置の前記参加者の操作中に、前記参加者が端末からリアルタイムで前記少なくとも１つのコンポーネントを取り除いた際に、前記ＶＲルーム内の前記少なくとも１つのコンポーネントのマニピュレーションに関連した一連の動作をシミュレートする工程（２３１）をさらに含む、請求項１〜６のいずれか１項に記載の保守管理方法。
【請求項８】
シミュレートする工程が、前記取り除かれた少なくとも１つのコンポーネントを置き換える前記端末への前記ＶＲルーム内での新しいコンポーネントの挿入を描写する第二のＶＲ入力装置を操作する第二の参加者によって実行される第二の一連の動作をシミュレートする工程（２３２）をさらに含む、請求項７に記載の保守管理方法。
【請求項９】
サーバー（４０１）と、
バーチャルリアリティ（ＶＲ）セッションマネージャー（４０２）と、を含み、
前記ＶＲマネージャーが、
（ｉ）前記サーバーの少なくとも１つのハードウェアプロセッサ上で実行し、
（ｉｉ）２人以上の参加者間でＶＲセッションを確立し、
（ｉｉｉ）前記ＶＲセッションのＶＲ内で現実世界の端末の対話式モデルをレンダリングし、
（ｉｖ）前記ＶＲルーム内の２人以上の参加者による対話式モデルのコンポーネントの対話的なマニピュレーションを許可する、
ことを特徴とするバーチャルリアリティによる保守管理システム。
【請求項１０】
前記現実世界の端末が、現金自動預払機（ＡＴＭ）、キオスク、および販売時点管理（ＰＯＳ）端末のどれか一つである、請求項９に記載のバーチャルリアリティによる保守管理システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、現金自動預払機（ＡＴＭ）およびキオスクなどの顧客自身が操作するセルフサービス端末（ＳＳＴ）に係る装置の保守管理方法に関する。
【背景技術】
【０００２】
従来から、現金自動預払機（ＡＴＭ）およびキオスクなどの顧客自身が操作するセルフサービス端末（ＳＳＴ）の装置の大きな問題は、種々のトラブルや問題を解決するために、その都度技術者を派遣しなければならないことであった。種々のトラブルや故障を解決するために技術者を派遣するには、その都度高い派遣コストが発生し、ＳＳＴを利用する顧客や当該ＳＳＴを運営する事業者に多大な迷惑を与えることになる。
【発明の概要】
【発明が解決しようとする課題】
【０００３】
その上、技術者は、任意のＳＳＴ問題の解決のためにより経験豊かな別の技術者を必要とする場合が多くあるが、これにより、ＳＳＴの修理に長時間を要することもあり、その間は顧客がＳＳＴを利用できなくなり、社会的に大きな問題を生じさせてしまうこともあった。
【０００４】
本発明は、このような課題を解決するべく、各種のコンピュータ及び情報技術を利用する実施形態において、バーチャルリアリティ（ＶＲ）による保守管理システムを提示するものである。
【課題を解決するための手段】
【０００５】
本発明の保守管理システムによれば、ＶＲによる保守および修理のための方法が提供されている。具体的に、および一実施形態では、ＶＲセッションが確立され、ＶＲルームがＶＲセッション中にレンダリングされる。ＳＳＴを記述するファイル、およびそれを対話的にマニピュレートするためのプログラム命令が、ＶＲルームに読み込まれる。ＶＲセッション中にＳＳＴの少なくとも１つのコンポーネントが、ＶＲルーム内の参加者によって操作されるＶＲ入力装置によって指示された通りにマニピュレートされる。
【０００６】
ここで、本発明の第一の態様によれば、バーチャルリアリティ（ＶＲ）セッションを確立する工程と、ＶＲセッション中にレンダリングされたＶＲルームに、ＶＲルーム内の端末を記述するファイルおよびそれを対話的にマニピュレートするためのプログラム命令を読込工程と、ＶＲセッション中にＶＲセッションの参加者によって操作されるＶＲ入力装置によって指示された通りに端末の少なくとも１つのコンポーネントをマニピュレートする工程とを含む方法が提供されている。
【０００７】
本発明においては、随意に、前記読込工程には、端末用のコンピュータ支援設計（ＣＡＤ）ファイルをファイルおよびプログラム命令として読込工程がさらに含まれる。
【０００８】
随意に、読込工程には、ＶＲセッション中に検討されている可能性のある特定の端末の製造元およびモデルに基づきＣＡＤファイルを識別工程がさらに含まれうる。
【０００９】
本発明においては、随意に、識別工程には、ＶＲセッション中に特定の端末用の識別子を参加者から受信する工程がさらに含まれうる。
【００１０】
本発明においては、随意に、読込工程には、ＶＲセッションの参加者と少なくとも１人の他の参加者との間の協働的なやりとりのためのＶＲセッション中にＶＲルーム内にホワイトボードをレンダリングする工程がさらに含まれうる。
【００１１】
本発明においては、随意に、レンダリングする工程には、参加者によって操作されるＶＲ入力装置、または少なくとも１人の他の参加者によって操作される異なるＶＲ入力装置からの指示に基づきホワイトボード上にテキストを提示する工程がさらに含まれうる。
【００１２】
本発明においては、随意に、マニピュレートする工程には、ＶＲ入力装置の参加者の操作中に、参加者が端末からリアルタイムで少なくとも１つのコンポーネントを取り除いた際に、ＶＲルーム内で少なくとも１つのコンポーネントのマニピュレーションに関連した一連の動作をシミュレートする工程がさらに含まれうる。
【００１３】
本発明においては、随意に、シミュレートする工程には、取り除かれた少なくとも１つのコンポーネントを置き換える端末へのＶＲルーム内での新しいコンポーネントの挿入を描写する第二のＶＲ入力装置を操作する第二の参加者によって実行される第二の一連の動作をシミュレートする工程がさらに含まれうる。
【００１４】
本発明においては、随意に、マニピュレートする工程には、その端末とは無関係でありうるＶＲルーム内のオブジェクトのマニピュレーションを描写する、第二の参加者によって操作される第二のＶＲ入力装置によって指示される一つ以上の動作をシミュレートする工程がさらに含まれうる。
【００１５】
本発明においては、随意に、シミュレートする工程には、第一の参加者が端末の少なくとも１つのコンポーネントをマニピュレートしている可能性のある間に、ＶＲルーム内で第二のＶＲ入力装置により指示された一つ以上の動作を同時にシミュレートする工程がさらに含まれうる。
【００１６】
本発明においては、随意に、方法には、参加者と少なくとも１人の他の参加者との間の協働的な保守または修理セッションとしてＶＲセッションを処理する工程がさらに含まれうる。
【００１７】
本発明においては、随意に、処理する工程には、現実世界の特定のセルフサービス端末（ＳＳＴ）についての、かつ端末によってＶＲルーム内で表現される、協働的な保守および修理セッションを処理する工程がさらに含まれうる。
【００１８】
本発明の第二の態様によれば、現実世界のルームを表現するバーチャルリアリティ（ＶＲ）ルームを協働的なＶＲセッション内でレンダリングする工程と、ＶＲルーム内のセルフサービス端末（ＳＳＴ）を表現する対話型オブジェクトを読込工程と、対話型オブジェクトの個別のコンポーネントを少なくとも部分的にマニピュレートすることにより、ＶＲセッション中およびＶＲルーム内で、現実世界のＳＳＴの保守または修理について協働することを少なくとも２人の参加者に許可する工程とを含む方法が提供されている。
【００１９】
本発明においては、随意に、読込工程には、ＶＲルーム内でホワイトボードを表現する第二の対話型オブジェクトを読込工程がさらに含まれうる。
【００２０】
本発明においては、随意に、読込工程には、ＶＲセッションに動的に参加するための帯域外の招待メッセージを新しい参加者に送信するオプションを提示する工程がさらに含まれうる。
【００２１】
本発明においては、随意に、読込工程には、現実世界のＳＳＴと同じ製造元および同じモジュール用のコンピュータ支援設計ファイルとして対話型オブジェクトを読込工程がさらに含まれうる。
【００２２】
本発明においては、随意に、許可する工程には、ＶＲセッション中に少なくとも２人の参加者によりマニピュレートされているＶＲ入力装置から、個別のコンポーネントを少なくとも部分的にマニピュレートするための指示を受信する工程がさらに含まれうる。
【００２３】
本発明においては、随意に、方法には、２人以上の参加者のうち第一の参加者を現実世界のＳＳＴに物理的に居合わせている者として識別し、２人以上の参加者のうち第二の参加者を現実世界のＳＳＴから遠隔地に位置する者として識別工程がさらに含まれうる。
【００２４】
本発明の第三の態様によれば、サーバーと、バーチャルリアリティ（ＶＲ）セッションマネージャーとを含むシステム（ＳＳＴ）が提供されているが、ここでＶＲマネージャーは、（ｉ）サーバーの少なくとも１つのハードウェアプロセッサ上で実行し、（ｉｉ）２人以上の参加者間でのＶＲセッションを確立し、（ｉｉｉ）、ＶＲセッションのＶＲ内に現実世界の端末の対話式モデルをレンダリングし、（ｉｖ）ＶＲルーム内の２人以上の参加者による対話式モデルのコンポーネントの対話的なマニピュレーションを許可するように構成されうる。
【００２５】
本発明においては、随意に、現実世界の端末は、現金自動預払機（ＡＴＭ）、キオスク、および販売時点管理（ＰＯＳ）端末のどれか一つであってもよい。
【００２６】
本発明のこれらおよび他の態様は、所定の例として、添付の図面を参照する以下の詳細な説明から明らかになろう。
【図面の簡単な説明】
【００２７】
【図１Ａ】実施形態の例に従ったＶＲによる修理および保守のためのシステムの図である。
【図１Ｂ】実施形態の例に従った、現実世界のＳＳＴの製造元およびモデルを表す、ＶＲルーム内のＶＲオブジェクトのレンダリングのための図である。
【図２Ａ】実施形態の例に従ったＶＲによる修理および保守のための方法の図である。
【図２Ｂ】実施形態の例に従ったＶＲによる修理および保守のための方法の図である。
【図３】実施形態の例に従ったＶＲによる修理および保守のための別の方法の図である。
【図４】実施形態の例に従ったＶＲによる修理および保守のための別のシステムの図である。
【発明を実施するための形態】
【００２８】
図１は、本発明に係るバーチャルリアリティによる保守管理システムの構成例を示す。本システムは、概略的に非常に単純化された形態で示されており、本願の明細書で説明する各実施例の理解に関連するコンポーネントのみが図示されている。様々なコンポーネントが図示されており、コンポーネントの配置は例証のみを目的として提示されている。本明細書および下記に提示したＶＲによる修理および保守技術を逸脱することなく、コンポーネントが多いまたは少ないその他の配置も可能であることを理解するべきである。
【００２９】
その上、本保守管理システムのさまざまなコンポーネントが一つ以上のソフトウェアモジュールとして図示されており、これは、一つ以上のハードウェアプロセッサによって実行された時に本明細書および下記で考察する処理を実行する実行可能命令として、非一時的ストレージおよび／またはハードウェアメモリー内に常駐する。
【００３０】
本発明の保守管理システムにおけるＶＲによる修理および保守等の管理システムにおいては、本願明細書および下記で提示した技術、方法、およびシステムは、全体として、一つ以上のハードウェアプロセッサを持つ異なるハードウェアコンピューティング装置内に示したコンポーネントの一部の組み合わせとして、導入されうる。
【００３１】
本発明の保守管理システムには、ＶＲコンピュータ１０、ＶＲインターフェース、オブジェクトファイルおよびレンダリング命令１４、および一つ以上のサービスエンジニアＶＲ対応装置１６が含まれる。
【００３２】
ＶＲコンピュータ１０はＶＲソフトウェアを実行するが、これが三次元（３Ｄ）の仮想ルームまたは世界を確立し、その中で一つ以上のＶＲセッション（ストーリー）を処理することが可能である。
【００３３】
本発明の保守管理システムの例では、ＶＲコンピュータ１０は、ネットワークに接続されたクラウドベースシステムの一部であり、これにはグローバル通信ネットワーク（別名、インターネット）が含まれうる。ＶＲコンピュータ１０には、一つ以上のプロセッサ、メモリー、およびプログラムおよびデータストレージが含まれうる。
【００３４】
ＶＲインターフェースはＶＲコンピュータ１０に接続され、ネットワークを介したＶＲセッション／ストーリーのためにＶＲコンピュータ１０に接続された様々なＶＲ対応装置１６および入力装置が含まれうる。
【００３５】
任意のＶＲセッションはまた、使用可能な関連するオブジェクトファイルおよびレンダリング命令１４と共に構成され、またＶＲコンピュータ１０とインターフェースがとられる。一実施形態では、ＶＲコンピュータ１０は、ＶＲセッションへの入力として、現実世界オブジェクトの仮想的表現を創出するためのコンピュータ支援設計（ＣＡＤ）ファイルおよびプログラム命令１４を受信する。
【００３６】
本発明の保守管理システムの例としては、ＣＡＤファイルおよびプログラム命令１４には、ＡＴＭまたはキオスクなどのＳＳＴのレンダリングが含まれる。
【００３７】
図１Ｂは、ＶＲセッション中に提示されうるＡＴＭのレンダリングの例を示す。ここで、ＶＲコンピュータ１０は、ＣＡＤファイルおよびプログラム命令１４を読み込み、現実世界のＳＳＴの特定の製造元およびモードをＶＲセッション（仮想世界ストーリー）内の３Ｄ仮想オブジェクトとしてレンダリングする。
【００３８】
サービスエンジニアＶＲ対応装置を使用して、技術者は、ＳＳＴの３Ｄ仮想オブジェクトのレンダリングを閲覧、対話、マニピュレートするためにＶＲインターフェースにアクセスできる。例えば、技術者（本明細書では「エンジニア」という場合もある）は、３Ｄ仮想オブジェクトの分解、３Ｄ仮想オブジェクトの操作のシミュレーション、およびＶＲセッション内の３Ｄ仮想オブジェクトのコンポーネント部分品の位置決めまたは移動を行いうる。
【００３９】
本発明の保守管理システムの一実施形態では、ＶＲセッションは、複数の使用者（技術者またはエンジニア）が、拡張空間内で、また協働的なＶＲセッション中に同時に、レンダリングされたオブジェクトとやりとりできるような協働的なセッションである。
【００４０】
本発明の保守管理システムの一実施形態では、使用者は現実世界の空間内では地理的に互いに分散していながらも、ＶＲルーム（ＶＲセッション用に創出されたもの）内で３Ｄ仮想オブジェクトとしてレンダリングされた現実世界のオブジェクトのモデルについて検討および作業ができる。
【００４１】
本発明の保守管理システムの一実施形態では、ＶＲルームには、使用者がＶＲセッションで再生されるビデオの再生、投稿、および／またはやりとりができ、および／またはＶＲセッション内に提示された文書をやりとりすることができる、可視的なホワイトボードが含まれる。
【００４２】
ＶＲコンピュータ１０のＶＲソフトウェアによりレンダリングされた任意の所定のＶＲセッションのためのいくつかの使用可能なシナリオには、以下が挙げられる。
【００４３】
１．ハードウェア開発（エンジニア間の協働的な設計の開発、およびエンジニアと供給業者間の協働を助ける）。
【００４４】
２．新製品導入計画および展開（例えば、組立時にモデルがどう見えるか、工場から他への知識の移転法）。
【００４５】
３．顧客がモデルのユニットを受領する前に完成モデルのオプションを顧客に見せるための、販売ツールのデモ。
【００４６】
４．顧客フィールドエンジニア用のツール（フィールドエンジニアに異なるモデルを見せ、現実世界のモデルのユニットに実際に全く触れずにモデルを分解させることを許可するフィールドでのトレーニングのニーズとして、フィールドエンジニアは遠隔の専門家を参加させ、何が見えるべきか、また特定の不良をどのように修理できるかを説明することができる）。
【００４７】
５．すべての場所（地球全体に及ぶこともある）に携行させる必要なしに数多くの異なるモデルを見せるためのマーケティング用の販売ツール。
【００４８】
本発明の保守管理システムの一実施形態で、および協働的なＶＲセッション中、ＡＴＭの特定の製造元およびモデルが、複数のエンジニア間での協働のためにレンダリングされる。セッション中、エンジニアの１人は、エンジニアが点検面の困難を経験している特定のＡＴＭに物理的に居合わせていてもよい。
【００４９】
そのエンジニアのＶＲヘッドセット１１６には、特定のＡＴＭがディスプレイ上に表示している情報をリアルタイムで、またはエンジニアが特定のＡＴＭで一連の操作をする時にリアルタイムで発生する一連のディスプレイ情報をエンジニアが映し出すことができるように、正面を向いたカメラが装備されうる。この現実世界の情報は、セッション用にレンダリングされたＶＲルーム内に提示されるホワイトボードに映し出される。
【００５０】
遠隔エンジニアはまた、特定のＡＴＭおよび第一のエンジニアが所在する場所から地理的に分散した場所からセッションに参加する。遠隔エンジニアは、ＡＴＭがどのように応答しているかをＶＲルーム内で確認でき、特定のＡＴＭと同一の製造元およびモデルを表現する３ＤレンダリングしたＣＡＤオブジェクトにアクセスできる。
【００５１】
次に、遠隔エンジニアは、特定のＡＴＭの問題を修理する方法について特定のＡＴＭに居合わせているエンジニアに視覚的かつ音声によって指示するために、レンダリングされた様々なオブジェクト（特定のＡＴＭからリアルタイム情報が表示されたホワイトボード）および３ＤレンダリングされたＣＡＤオブジェクトをマニピュレートできる。
【００５２】
例えば、遠隔エンジニアは、ＶＲセッション内で、ＡＴＭに居合わせているエンジニアがどの主なシーケンスをＡＴＭで試行すべきかを説明してもよく、および／または遠隔エンジニアは、ＡＴＭのコンポーネント部品を取り外して装置の交換用コンポーネント部品と交換する方法を示してもよい。
【００５３】
本発明の保守管理システムの別の例で、およびＶＲセッション中、協働的な参加者は、その参加者の別個のコンピューティング装置に表示されているスクリーンショットをセッション中にホワイトボードに映し出させることができる。例えば、協力者の１人が共有したい特定の文書またはウェブページを、協力者全員がセッション中に閲覧できるようにホワイトボード上に投影させることができる。
【００５４】
本発明の保守管理システムの一実施形態では、ＶＲインターフェース１２には、コンピューティング装置の画面をＶＲセッション中にホワイトボード上に共有するオプションが含まれる。一実施形態では、ＶＲセッション中に、ホワイトボードで共有されているコンピューティング装置の画面に関連するインターフェースを協働者が遠隔制御できるように、画面の制御はＶＲセッションに任せられうる。
【００５５】
本発明の保守管理システムの一実施形態では、ＶＲインターフェース１２は、ＶＲセッションの参加者の１人によって物理的に点検されているＳＳＴのインターフェースとの直接的な接続および相互作用ができる複数のＡＰＩとインターフェースがとられる。これにより、遠隔参加者は、点検中のＳＳＴに物理的に居合わせている参加者を代理して、ＳＳＴのインターフェースに接続でき、ＶＲセッション中にそのＳＳＴに対して遠隔的に操作を実行できる。実行される操作は、ＶＲセッション中にホワイトボード上に表示させることができる。
【００５６】
本発明の保守管理システムの一実施形態では、協働的なＶＲセッション内の各参加者は、ＶＲセッションのＶＲルーム内でレンダリングされたオブジェクトをマニピュレートするため、こうした参加者はＶＲセッション内の参加者全員に対して一意的に識別される。こうした参加者の識別は、参加者がＶＲセッション中に発言する時にも行われる。
【００５７】
本発明の保守管理システムの一実施形態で、およびＶＲセッション中、任意の参加者は、帯域外（ＶＲセッションの外部）の招待をＶＲセッションの非参加者に送信して、協働的なＶＲセッションに動的に加わり参加してもらうことができる。これは、帯域外メッセージを介して非参加者に参加するよう電子メール、テキスト、またはその他のタイプのメッセージを送信するオプションを参加者に許可するＶＲインターフェース１２を通してなされうる。
【００５８】
ここで、上記ＶＲインターフェース１２には、メッセージから起動した時に、ＶＲセッション内の参加者として他の参加者と共に非参加者が加わり参加することが許可されるリンクが含まれうる。
【００５９】
本発明の保守管理システムの一実施形態では、ＶＲインターフェース１２は、任意のＶＲセッションが記録されること、およびその後に非参加者または参加者の１人によって再生のためにアクセスされることを許可する。一実施形態では、ＶＲセッションの音声は、ビデオなしでのみ記録される。
【００６０】
本発明の保守管理システムの一実施形態では、ＶＲインターフェース１２は、任意のＶＲセッションが、ＶＲセッション中に検討されている問題のタイプまたは機器のタイプに基づくなど、任意のユーザー定義または企業基準に従い分類されることを許可する。
【００６１】
本システムの一実施形態では、ＶＲインターフェース１２は、ＶＲセッションに割り当てられたカテゴリに基づき、ＶＲセッションの記録をデータベースまたはディレクトリ構造内に自動的に保存する。
【００６２】
また、本発明の一実施形態では、ＶＲインターフェース１２は、参加者の識別子および／またはＶＲセッション中にレンダリングされた現実世界の機器に関連した識別子に基づき、ＶＲセッションの記録をデータベースまたはディレクトリ構造内に自動的に保存する。こうした実施形態では、組織は協働的なＶＲセッションから得られた知識および情報を組織全体で活用できる。
【００６３】
本発明の保守管理システムの一実施形態では、ポストインデクシングプログラムは、記録からの任意のＶＲセッション中に認識された音声をテキストに変換し、その後の検索および取出し用にテキストをインデックス化することができる。
【００６４】
本システムの一実施形態では、ホワイトボード上に表示された任意の記載情報、または共有されたスクリーンショットによる情報には、光学式文字認識処理がなされ、ＶＲセッション中に提示された視覚情報の一部についてテキストが生成され、またその後の検索および取出し用に同様にこうしたテキストをインデックス化することができる。一実施形態では、インデックス化されたテキストには、検索および取出し操作中にＶＲセッションの特定部分に直接アクセスするための、ＶＲセッション内の場所へのリンクが含まれる。
【００６５】
これで、本発明の保守管理システムにおいては、協働、知識の収集、および知識の活用について、ＶＲセッション内で現実世界の機器の保守および修理にどのように対処できるかが理解される。これは、ＶＲセッション参加者の現実世界における物理的な場所、および点検対象の装置の物理的な場所に関係なく行われる。
【００６６】
ここで、本バーチャルリアリティの保守管理システムについは、後述するその他の実施形態を図２〜図４を参照しながら検討する。
【００６７】
図２は、本発明の保守管理システムの実施形態の例によるＶＲの修理および保守のための方法２００の図である。方法２００を実施するソフトウェアモジュールを、「ＶＲセッションマネージャー」という。ＶＲセッションマネージャーは、メモリーおよび／または非一時的コンピュータ可読（プロセッサ可読）ストレージ媒体内にプログラムされて常駐し、ハードウェアコンピューティング装置の一つ以上のハードウェアプロセッサにより実行される、実行可能命令として実施される。
【００６８】
ここで、ＶＲセッションマネージャーを実行する装置のプロセッサは、ＶＲセッションマネージャーを処理するように特定的に構成され、プログラムされる。ＶＲセッションマネージャーは、その処理中に一つ以上のネットワークにアクセスする。ネットワークは、有線、無線、または有線および無線の組み合わせとしうる。
【００６９】
本保守管理システムの一実施形態では、ＶＲセッションマネージャーを実行する装置は、単一の装置またはクラウドプロセッシング環境内で処理を行う一式の装置である。
【００７０】
本保守管理システムの一実施形態では、ＶＲセッションマネージャーを実行する装置はサーバーである。
【００７１】
本保守管理システムの一実施形態では、ＶＲセッションマネージャーは、ＶＲインターフェース１２、およびＶＲコンピュータ１０を実行するＶＲソフトウェアのすべてまたは一部の組み合わせである。
【００７２】
本保守管理システムの一実施形態では、ＶＲセッションマネージャーは、現実世界のＳＳＴについての協働的な保守または修理の実施用にＶＲセッションをレンダリングする。一実施形態では、ＳＳＴはＡＴＭである。一実施形態では、ＳＳＴはキオスクである。
【００７３】
本保守管理システムの一実施形態では、ＶＲセッションマネージャーは、現実世界の販売時点管理（ＰＯＳ）端末上での協働的な保守または修理の実施用にＶＲセッションをレンダリングする。一実施形態では、ＰＯＳ端末は、小売店におけるレジ操作の実施にあたり顧客を支援するために、通常の営業中に店員によって操作される。
【００７４】
２１０で、ＶＲセッションマネージャーがＶＲセッションを確立する。これは、ＶＲ対応装置（１６など）を通して、およびＶＲインターフェース１２を通して行われうる。
【００７５】
２２０で、ＶＲセッションマネージャーは、ＶＲセッション中に、ＶＲルーム内の端末を記述するファイルおよびそれを対話式にマニピュレートするプログラム命令をＶＲに読み込む。
【００７６】
本保守管理システムの一実施形態によれば、２２１で、ＶＲセッションマネージャーは、端末用のＣＡＤファイルをファイルおよびプログラム命令として読み込む。
【００７７】
本保守管理システムの２２１の実施形態で、および２２２で、ＶＲセッションマネージャーは、ＶＲセッション中に審査されている特定の端末の製造元およびモデルに基づき、ＣＡＤファイルを識別する。
【００７８】
２２２の実施形態で、２２３で、ＶＲセッションマネージャーは、特定の端末の識別子をＶＲセッションの参加者から、またＶＲセッション中に、受信する。
【００７９】
本保守管理システムの一実施形態では、２２４で、ＶＲセッションマネージャーは、ＶＲセッションの参加者と少なくとも１人の他の参加者との間の協働的なやりとりのために、ＶＲセッション中にＶＲルーム内でホワイトボードをレンダリングする。
【００８０】
２２４の実施形態で、および２２５で、ＶＲセッションマネージャーは、参加者によって操作されるＶＲ入力装置、または少なくとも１人の他の参加者によって操作される異なるＶＲ入力装置からの指示に基づき、ホワイトボード上にテキストを提示する。
【００８１】
２３０で、ＶＲセッションマネージャーは、ＶＲセッション中に、ＶＲセッションの参加者によって操作されるＶＲ入力装置によって指示される通りに、端末の少なくとも１つのコンポーネントをマニピュレートする。
【００８２】
本保守管理システムの一実施形態によれば、２３１で、ＶＲセッションマネージャーは、ＶＲ入力装置の参加者の操作中に参加者が端末からリアルタイムで少なくとも１つのコンポーネントを取り除いた際に、ＶＲルーム内の少なくとも１つのコンポーネントのマニピュレーションに関連した一連の動作をシミュレートする。
【００８３】
２３１の実施形態で、および２３２で、ＶＲセッションマネージャーは、取り除かれた少なくとも１つのコンポーネントを置き換える端末へのＶＲルーム内での新しいコンポーネントの挿入を描写する第二のＶＲ入力装置を操作する第二の参加者によって実行される第二の一連の動作をシミュレートする。
【００８４】
本保守管理システムの一実施形態では、２３３で、ＶＲセッションマネージャーは、その端末とは無関係なＶＲルーム内のオブジェクトのマニピュレーションを描写する、第二の参加者によって操作される第二のＶＲ入力装置によって指示される一つ以上の動作をシミュレートする。
【００８５】
２３３の実施形態で、および２３４で、ＶＲセッションマネージャーは、第一の参加者がＶＲ入力装置により端末の少なくとも１つのコンポーネントをマニピュレートしている間に、ＶＲルーム内で第二のＶＲ入力装置により指示された一つ以上の動作を同時にシミュレートする。
【００８６】
本保守管理システムの一実施形態によれば、２４０で、ＶＲセッションマネージャーは、参加者と現実世界の端末の少なくとも１人の他の参加者との間の協働的な保守または修理セッションとして、ＶＲセッションを処理する。
【００８７】
２４０の実施形態で、および２４１で、ＶＲセッションマネージャーは、端末によって表現される特定の現実世界のＳＳＴについての協働的な保守または修理セッションを処理する。
【００８８】
図３は、本保守管理システムの実施形態の例によるＶＲの修理および保守のための別の方法３００の図である。方法３００を実施するソフトウェアモジュールを「ＶＲルームマネージャー」という。ＶＲルームマネージャーは、メモリーおよび／または非一時的コンピュータ可読（プロセッサ可読）ストレージ媒体内にプログラムされて常駐し、ハードウェア装置の一つ以上のハードウェアプロセッサにより実行される、実行可能命令として実施される。
【００８９】
ＶＲセッションマネージャーを実行する装置のプロセッサは、ＶＲルームマネージャーを処理するように特定的に構成され、プログラムされる。ＶＲルームマネージャーは、その処理中に一つ以上のネットワークにアクセスする。ネットワークは、有線、無線、または有線および無線の組み合わせとしうる。
【００９０】
本発明のバーチャルリアリティによる保守管理システムの一実施形態では、ＶＲルームマネージャーを実行する装置は、単一の装置またはクラウドプロセッシング環境内で処理を行う一式の装置である。
【００９１】
本保守管理システムの一実施形態では、ＶＲルームマネージャーを実行する装置はサーバーである。
【００９２】
本保守管理システムの一実施形態では、ＶＲルームマネージャーは、ＶＲインターフェース１２、ＶＲコンピュータ１０、および／または方法２００を実行するＶＲソフトウェアのすべてまたは一部の組み合わせである。
【００９３】
本保守管理システムの一実施形態では、ＶＲルームマネージャーは、ＶＲセッション中にＶＲルームのインスタンスを生成し、現実世界のＳＳＴについて保守または修理に関して協働している参加者の協働中に、ルームおよびセッションを管理する。一実施形態では、ＳＳＴはＡＴＭである。一実施形態では、ＳＳＴはキオスクである。
【００９４】
本保守管理システムの一実施形態では、ＶＲルームマネージャーは、ＶＲセッション中にＶＲルームのインスタンスを生成し、現実世界のＰＯＳ端末に対して保守または修理で協働している参加者の協働中に、ルームおよびセッションを管理する。一実施形態では、ＰＯＳ端末は、小売店との取引時の支払にあたり顧客を支援する時に店員によって操作される。
【００９５】
３１０で、ＶＲルームマネージャーは、現実世界のルームを表現するＶＲルームを協働的なＶＲセッション中にレンダリングする。
【００９６】
３２０で、ＶＲルームマネージャーは、ＶＲルーム内のＳＳＴを表現する対話型オブジェクトを読み込む。
【００９７】
本保守管理システムの一実施形態では、３２１で、ＶＲルームマネージャーは、ＶＲルーム内のホワイトボードを表現する第二の対話型オブジェクトを読み込む。
【００９８】
本保守管理システムの一実施形態では、３２２で、ＶＲルームマネージャーは、ＶＲセッションに動的に参加するための帯域外の招待メッセージを新しい参加者に送信するオプションを提示する。
【００９９】
本保守管理システムの一実施形態では、３２３で、ＶＲルームマネージャーは、現実世界のＳＳＴと同一の製造元および同一のモジュールＳＳＴ用のＣＡＤファイルとして対話型オブジェクトを読み込む。
【０１００】
３３０で、ＶＲルームマネージャーは、対話型オブジェクトのコンポーネントを少なくともマニピュレートすることで、少なくとも２人の参加者が、ＶＲセッション中およびＶＲルーム内で現実世界のＳＳＴの保守または修理について協働することを許可する。
【０１０１】
本保守管理システムの一実施形態では、３３１で、ＶＲルームマネージャーは、ＶＲセッション中に少なくとも２人の参加者によって操作されるＶＲ入力装置から個別のコンポーネントを少なくとも部分的にマニピュレートするための指示を受信する。
【０１０２】
本保守管理システムの一実施形態によれば、３４０で、ＶＲルームマネージャーは、２人以上の参加者のうち第一の参加者を現実世界のＳＳＴに物理的に居合わせている者として識別し、２人以上の参加者のうち第二の参加者を現実世界のＳＳＴから遠隔地に位置する者として識別する。
【０１０３】
図４は、実施形態の例によるＶＲの修理および保守のための別のシステム４００の図である。システム４００には、様々なハードウェアコンポーネントおよびソフトウェアコンポーネントが含まれる。システム４００のソフトウェアコンポーネントは、メモリーおよび／または非一時的コンピュータ可読媒体内でプログラムされ常駐し、ハードウェア装置の一つ以上のハードウェアプロセッサ上で実行される。システム４００は一つ以上のネットワークで通信するが、これは有線、無線、または有線および無線の組み合わせとしうる。
【０１０４】
本保守管理システムの一実施形態では、システム４００は、図１Ａ〜図１Ｂおよび図２〜図３で上述した処理のすべてまたは一部の組み合わせを実施する。
【０１０５】
本保守管理システムの一実施形態では、システム４００は、特に、図１Ａ〜図１Ｂで上述した処理を実施する。
【０１０６】
本保守管理システムの一実施形態では、システム４００は、特に、図２の方法２００を実施する。
【０１０７】
本保守管理システムの一実施形態では、システム４００は、特に、図３の方法３００を実施する。
【０１０８】
本保守管理システム４００におけるサーバー４０１が含まれ、サーバーはＶＲセッションマネージャー４０２を含む。
【０１０９】
本保守管理システムにおけるＶＲセッションマネージャー４０２は、１）サーバー４０１の少なくとも１つのハードウェアプロセッサ上で実行し、２）２人以上の参加者間でのＶＲセッションを確立し、３）ＶＲセッションのＶＲルーム内に現実世界の端末の対話式モデルをレンダリングし、４）ＶＲルーム内の２人以上の参加者による対話式モデルのコンポーネントの対話的なマニピュレーションを許可するように構成される。
【０１１０】
本保守管理システムの一実施形態では、端末はＳＳＴである。
【０１１１】
本保守管理システムの一実施形態では、端末はＡＴＭである。
【０１１２】
本保守管理システムの一実施形態では、端末はキオスクである。
【０１１３】
本保守管理システムの一実施形態では、端末はＰＯＳ端末である。
【０１１４】
本保守管理システムの一実施形態では、ＶＲセッションマネージャー４０２は、ＶＲインターフェース１２、ＶＲコンピュータ１０上で実行されるＶＲソフトウェア、方法２００、方法３００、および／またはそれらの一部の組み合わせである。
【０１１５】
本バーチャルリアリティによる保守管理システムにおいて、ソフトウェアが特定の形態（コンポーネントまたはモジュールなど）で説明されている場合、それは単に理解を助けるためであり、それらの機能を実施するソフトウェアがどのように設計されるか、あるいはどのような構造であるかを限定するものではないことが理解される。例えば、モジュールは別個のモジュールとして説明されているが、同種のコードとして、個別のコンポーネントとして実施されてもよく、またこうしたモジュールの全体でなく一部を組み合わせてもよく、その他の任意の都合の良い方法で構造化されたソフトウェア内で機能が実施されてもよい。
【０１１６】
さらに、本保守管理システムにおいて、ソフトウェアモジュールは、一つのハードウェア上で実行されるものとして説明されているが、ソフトウェアは、複数のプロセッサにまたがる、またはその他の任意の都合の良い方法で分布されてもよい。
【０１１７】
上述の説明は、本保守管理システムの実施例あって、本システムは、これらの実施例に制限されるものではない。当業者には、上述の説明を検討することにより、その他の数多くの実施形態が明らかとなるであろう。したがって、実施形態の範囲は、これらの請求項が権利を持つ均等物の完全な範囲とともに、添付の請求項及び当業者の理解及び自明範囲に基づいて判断されるべきである。
【０１１８】
実施形態についての上述の説明では、開示を合理化する目的で様々な特徴が単一の実施形態でひとまとめにされている。この開示方法は、請求された実施形態が、各請求項で明示的に詳述されるものよりも多くの特徴を有することを反映するとは解釈されない。むしろ、下記の請求項で反映されるとおり、発明の主題は、単一の開示された実施形態のすべての特徴よりも少ない。
【図１Ａ】
2018165982.tif 000003
【図１Ｂ】
2018165982.tif 000004
【図２Ａ】
2018165982.tif 000005
【図２Ｂ】
2018165982.tif 000006
【図３】
2018165982.tif 000007
【図４】
2018165982.tif 000008