(57)【要約】【課題】利用者が情報表示媒体で見るベース情報であるバーチャルな情報に、現実世界の情報をリアルタイムで融合、連動させ、情報の交換及び情報交換に基づく行動の実施を実現する方法を提供する。【解決手段】バーチャルな情報を管理、表示するデバイス１に、現実世界上の生物、物の情報２を検知、取得する手段、また、現実世界上での情報提供、情報交換をする媒体により提供される情報３をリアルタイムでバーチャルな情報に取り入れる手段、それから、バーチャルな情報にて現実世界上への情報伝達及び命令伝達により、制御する装置を作動させる手段、バーチャルな情報を管理、表示するデバイス１に設けられる人工知能による収集した情報の分析及び分析結果に基づく対応行動４を行う手段を備えることを特徴とする。【選択図】図１
2018109931.tif 000002
【特許請求の範囲】
【請求項１】
バーチャルな情報提供手段である表示媒体に、現実世界上の情報をバーチャルな情報と同じ表示画面に一緒に表示させ、バーチャルな情報に、現実世界の情報をリアルタイムで融合、連動させる手段を備えることを特徴とするミックス現実システム。
【請求項２】
現実世界上の物、生物にセンサーを設置し、バーチャルな情報を管理、表示するデバイスに、センサー設置対象の外形と動きの情報を登録し、対象に設置されるセンサーを検知する手段を備え、現実世界上の対象に設置されたセンサーを検知して得た対象の位置や角度等の情報と登録した対象の外形と動きの情報を融合させることにより形成される対象のバーチャル映像をバーチャルな情報提供手段である表示媒体にバーチャルな情報と同じ表示画面に一緒に表示させ、バーチャルな情報に、現実世界上の物、生物の情報をリアルタイムで融合、連動させる手段を備えることを特徴とするミックス現実システム。
【請求項３】
バーチャルな情報を管理、表示するデバイスに、現実世界上のテレビ、ラジオ、インターネットなど情報の提供、交換をする媒体により提供される情報をリアルタイムで、現実世界上の情報の提供、交換をする媒体であるテレビ、ラジオ、インターネット検索、表示デバイスでの情報取得する視覚形式で表示させ、また、バーチャルな情報を管理、表示するデバイスで入力した情報を現実世界上のテレビ、ラジオ、インターネットなど情報の提供、交換をする媒体に伝達し、バーチャルな情報と現実世界の情報メディアで提供される情報をリアルタイムで融合、連動させる手段を備えることを特徴とするミックス現実システム。
【請求項４】
バーチャルな情報を管理、表示するデバイスに、現実世界上の音声情報を受信する機能及び音声情報内容を認識する手段を備え、現実世界上の音声情報内容を受信して内容を認識し、認識された情報に対する対応行動をバーチャルな世界、若しくは、現実世界上で実施する手段を備えることを特徴とするバーチャルな世界と現実世界間の情報交換及び情報交換による対応行動をする情報処理システム。
【請求項５】
バーチャルな情報を管理、表示するデバイスに、融合され、連動するバーチャルな情報と現実世界の情報を認識、対応する人工知能機能を設け、融合され、連動するバーチャル情報と現実世界上の情報の収集、判断に基づく行動をバーチャルな世界、若しくは現実世界上で実施する手段を備えることを特徴とするバーチャルな世界と現実世界間の情報交換及び情報交換による対応行動をする情報処理システム。
【請求項６】
人間、生物に健康状態、生存状況を検知、確認する機器を取り付け、機器が読み取った情報をバーチャルな情報を管理、表示するデバイスに情報を伝達する手段を備え、利用対象の人間、生物の健康状態及び生存状況確認情報をバーチャルな情報を管理、表示するデバイスに伝達し、バーチャルな情報を管理、表示するデバイスが利用対象の人間、生物の健康状態及び生存状況を確認し、取得した情報に基づく行動をバーチャルな世界、若しくは現実世界上で実施する手段を備えることを特徴とするバーチャルな世界と現実世界間の情報交換及び情報交換による対応行動をする情報処理システム。
【発明の詳細な説明】
【技術分野】
【０００１】本発明は、利用者にバーチャルな情報に現実世界上の情報を融合させた情報提供及び情報交換を提供するシステムに関する。
【背景技術】
【０００２】利用者が見る現実世界の上に、バーチャルな情報を載せ、現実世界にバーチャルな情報を融合させるのが一般的である。【０００３】代表的なものは、バーチャル情報の提供手段である表示媒体のヘッドマウントディスプレーを用い、現実世界を見ているとその場所の情報が映し出されるというシステムである。【０００４】バーチャル情報の提供手段である表示媒体を通して見る現実世界にバーチャルな情報を一緒に映し出すシステムは、利用者が見る現実世界上の情報がベースであり、そのベース情報に合わせたバーチャルな情報を表示させるのが一般的である。【０００５】利用者が情報表示媒体で見る情報はベースがバーチャルな情報の場合、現実世界の情報をリアルタイムでバーチャルな情報の中で表示させるシステムはなかった。【０００６】また、現実世界上の情報をバーチャルな情報と融合させたうえ、利用者がバーチャルな情報表示、管理する環境下で連動する情報交換、情報交換に基づく対応行動を実施するシステムがなかった。
【発明の展示】
【発明が解決しようとする課題】
【０００７】本発明の目的は、利用者が情報表示媒体で見るベース情報であるバーチャルな情報に、現実世界の情報をリアルタイムで融合、連動させ、情報の交換及び情報交換に基づく行動の実施を実現する方法を提供することである。
【課題を解決するための手段】
【０００８】本発明では上記課題を解決するため、下記のようなシステム構成を採用する。
【０００９】バーチャルな情報提供手段である表示媒体に、現実世界上の情報をバーチャルな情報と同じ表示画面に一緒に表示させ、バーチャルな情報に、現実世界の情報をリアルタイムで融合、連動させる手段を設ける。
【００１０】現実世界上の物、生物に位置や角度等の情報を取得し、外部へ提供可能なセンサーを設置する。
【００１１】バーチャルな情報を管理、表示するデバイスに、上記センサーを検知する手段を設け、設置対象が検知される範囲内にある時は、対象の位置や角度などの情報を取得する。
【００１２】バーチャルな情報を管理、表示するデバイスに、センサーの設置対象の外形と動きの情報などを登録し、対象に設置されるセンサーから取得した対象の位置や角度等の情報と登録した対象の外形と動きの情報を融合させることにより形成される対象のバーチャル映像をベースとなるバーチャルな情報表示に取り入れ、バーチャルな情報提供手段である表示媒体に表示させる手段を備える。
【００１３】バーチャルな情報を管理、表示するデバイスに、現実世界上のテレビ、ラジオ、インターネットなど情報提供、情報交換媒体により提供される情報をリアルタイムで取得する機能を設ける。
【００１４】バーチャルな情報を管理、表示するデバイスに、得た情報が現実世界上での情報提供、情報交換媒体であるテレビ、ラジオ、インターネット検索、表示デバイスでの情報取得する視覚形式で表示させる。
【００１５】バーチャルな情報に、現実世界の情報メディアで提供される情報をリアルタイムで融合、二つの世界の情報を連動させる手段を備える。
【００１６】バーチャルな情報を管理、表示するデバイスで入力した情報を現実世界上のテレビ、ラジオ、インターネットなど情報の提供、交換をする媒体に伝達し、バーチャルな情報と現実世界の情報メディアで提供される情報をリアルタイムで融合、連動させる手段を備える。
【００１７】バーチャルな情報を管理、表示するデバイスに、現実世界上の音声情報を受信する機能及び音声情報内容を認識する機能を設ける。
【００１８】バーチャルな情報を管理、表示するデバイスは、現実世界上の音声情報内容を受信して内容を認識する機能を設ける。
【００１９】人間、生物の健康状態、生存状況を検知、確認する機器に、バーチャルな情報を管理、表示するデバイスに情報を伝達する手段を備える。
【００２０】バーチャルな情報を管理、表示するデバイスに、利用対象の人間、生物に取り付けられる健康状態、生存状況を検知、確認する機器からの情報及び利用者が一定期間中の言動検出に基づく生存状況確認を分析、判断する機能を設ける。
【００２１】バーチャルな情報を管理、表示するデバイスに、融合され、連動するバーチャルな情報と現実世界の情報を認識、対応する人工知能機能を設ける。
【００２２】人工知能は、融合され、連動するバーチャル情報と現実世界上の情報を上記手段で収集し、収集した情報を分析して取るべき行動を判断し、バーチャルな世界、若しくは、現実世界上で判断に基づく行動を実施する手段を備える。
【００２３】バーチャルな情報を管理、表示するデバイスは、バーチャルな世界、若しくは、現実世界上で情報伝達先に必要な情報伝達をする。又は、情報伝達で指令を出すことにより、制御する装置を動作させる。
【発明の効果】
【００２４】本発明は上記のような手段を採用することで、利用者が情報表示媒体で見るバース情報であるバーチャルな情報に、現実世界の情報をリアルタイムで融合、連動させ、情報の交換及び情報交換に基づく行動の実施を実現する方法を提供できるようになった。
【発明を実施するための形態】
【００２５】以下に本発明の実施の形態について、図面を参照して説明する。
【００２６】図１に、本発明の構成図を示す。
【００２７】バーチャルな情報を管理、表示するデバイス１に、外部センサーを検知し、センサーから情報を取得する機能を設ける。
【００２８】現実世界上の物、生物２に、バーチャルな情報を管理、表示するデバイス１との距離、自身の角度を測定するセンサーを設置する。
【００２９】バーチャルな情報を管理、表示するデバイス１に、センサーの設置対象２の外形情報を登録し、対象との距離、対象の角度など情報により、バーチャルな映像を生成する機能を設ける。
【００３０】バーチャルな情報を管理、表示するデバイス１は、検知範囲内に対応する対象２の存在をサーチし、センサー設置対象２を検知して取得した対象との距離、対象角度等の情報と登録した対象の外形と動きの情報を融合させ、生成するバーチャル映像をベースとなるバーチャルな映像に合成させたバーチャル映像をバーチャルな情報提供手段である表示媒体に表示させる。
【００３１】利用者は、上記システムに対応する自分が使用する物や、飼っているペットなどにセンサーを取り付ける。利用者が見るバーチャルな映像に、これら現実世界上の情報のバーチャルな映像を取り入れた映像を見ること出来る。
【００３２】バーチャルな情報を管理、表示するデバイス１に、現実世界上のテレビ、ラジオ、インターネットなど情報提供、情報交換媒体により提供される情報３をリアルタイムで取得する機能を設ける。
【００３３】バーチャルな情報を管理、表示するデバイス１に、得た情報が現実世界上での情報提供、情報交換媒体であるテレビ、ラジオ、インターネット検索、表示デバイスでの情報取得する視覚形式で表示させる。
【００３４】例えば、テレビの場合は、リアルタイムのテレビ放送をバーチャルな世界の映像の中で、テレビ本体の外観と画面に流れる放送をベースとなるバーチャルな映像に合成させたバーチャル映像をバーチャルな情報提供手段である表示媒体に表示させる。
【００３５】テレビ放送の情報交換をバーチャルな情報を管理、表示するデバイス１にて、利用者がバーチャルな環境で実行可能な機能を設ける。
【００３６】利用者は、バーチャルな世界の映像を見る際に、現実世界上のテレビ放送を見ているバーチャルな世界の映像画面で、リアルタイムで鑑賞するだけでなく、バーチャルな世界の映像画面での情報入力などで、デジタル放送でのクイズ参加、買物などを実行できる。
【００３７】バーチャルな情報を管理、表示するデバイス１に、現実世界上の音声情報を受信する機能及び音声情報内容を認識する機能を設ける。
【００３８】バーチャルな情報を管理、表示するデバイス１は、現実世界上の音声情報内容を受信して内容を認識し、それに対する対応行動５をバーチャルな世界、若しくは、現実世界上で実施する機能を設ける。
【００３９】バーチャルな情報を管理、表示するデバイス１に、融合され、連動するバーチャルな情報と現実世界の情報を認識、対応する人工知能機能を設ける。
【００４０】人工知能は、融合され、連動するバーチャル情報と現実世界上の情報を収集し、収集した情報を分析したうえで取るべき行動を判断し、バーチャルな世界、若しくは、現実世界上で判断に基づく行動５を実施する。
【００４１】利用者は、システムに声を掛けることにより、システムは利用者の音声情報を認識し、人工知能を使って、利用者と会話したり、利用者のリクエストに応じて行動したりをする。
【００４２】現実世界上の人間、生物に、健康状態、生存状況を検知、確認する機器を取り付け、得た情報をバーチャルな情報を管理、表示するデバイス１に伝達する機能を設ける。
【００４３】バーチャルな情報を管理、表示するデバイス１に、利用対象の人間、生物に取り付けた機器から得た情報や一定期間中対象言動検出の有無に基づく健康状態、生存状況確認を分析、判断する機能を設ける。
【００４４】バーチャルな情報を管理、表示するデバイス１は、得た情報から利用者の健康状態に問題があると判断した場合、利用者に健康状態確認、医療機関への受診を促したり、関係者又は医療救急機関に通知したりする。
【００４５】バーチャルな情報を管理、表示するデバイス１は、一定期間内に利用者の生存状況確認をできない場合、利用者に生存状況確認する行動を取る。生存状況確認できない場合が、関係者又は医療救急機関に通知する。
【図面の簡単な説明】
【００４６】
【図１】本発明のシステムを示す構成図である。
【符号の説明】
【００４７】  １  バーチャルな情報を管理、表示するデバイス
２  現実世界上の物、生物
３  現実世界上の情報
４  融合情報に基づく対応行動
【図１】
2018109931.tif 000003