(57)【要約】【課題】認知症などにより，実際の外出に危険が伴う利用者を想定し，没入感型高精細映像による疑似外出体験を提供する装置．【解決手段】本発明は，利用者の視覚を取り巻くように複数の高精細ディスプレイを湾曲型に配置させることにより，高精細かつ臨場感のある映像提示空間を構成し，その空間にたとえばGoogle Earthなどのような360度映像を表示させることで，疑似的な外出体験を提供する，さらに電動車椅子を模したジョイスティックインタフェースの利用により，適切な方向の映像の提示と移動を表現するようにしたので，利用者は自由に全方向映像の中を散策することができるため，利用者のQoLを維持しつつ安全な施設内等で疑似外出体験を提供できる．【選択図】図１
2020126187.tif 000002
【特許請求の範囲】
【請求項１】
車椅子，ジョイスティック，ネットワーク，360度映像検索・取得装置，透視投影変換装置，表示制御装置，部分球面型映像提示装置，映像コンテンツ配信装置，を備え，電動車椅子の操作感覚を模擬するために，車椅子，に装着したジョイスティックを用いて，360度映像検索・取得装置では，ネットワーク，上に存在する映像コンテンツ配信装置，たとえばGoogle Earthなどの360度映像を対象とし，ジョイスティックの操作に応じた映像を検索・取得し，透視投影変換装置で，取得した街路映像を適切な曲面映像に変換し，表示制御装置に転送し，表示制御装置で，映像を複数の曲面方向の映像に分割し，部分球面型映像提示装置に転送し，部分球面型映像提示装置で，表示制御装置から転送された加工映像を曲面上の適切な位置に表示し，尚，部分球面型映像提示装置を構成する個別表示装置の配置については，利用者の視覚を取り巻くようにディスプレイ複数枚を湾曲型に配置させることにより，映像に対する没入感を提示するような装置構成により，高精細かつ臨場感のある映像提示空間を構成し，その空間に360度映像（例えばGoogle Earthなど）を表示させることで，疑似的な外出体験を提供することを特徴とする没入感型高精細映像提示空間による疑似外出体験提示装置．
【請求項２】
（請求項１）の装置構成に加え，音声入力装置，発話内容解析装置，仮想介助者行動決定装置，仮想介助者行動VRパターン・音声ガイドパターン記録装置，動画重畳・画像同期装置，シースルー型ヘッドマウントディスプレイ，を新たな装置構成として追加することにより，利用者はマイクなどを通じて(9)音声入力装置に例えば，「○△するにはどうすればよいですか？」のような機械操作に関する質問音声などを入力し，発話内容解析装置は，音声認識技術ならびに形態素解析技術からなり，「○△」というクルーワードの検出により対象機能を特定し，仮想介助者行動決定装置では，対象機能を操作する部分を抽出しVRによる仮想介助者が指差しを行う装置箇所を特定するとともに，仮想介助者行動VRパターン・音声ガイドパターン記録装置か対象装置個所の操作説明に該当するための，仮想介助者行動VRパターン，ならびに音声ガイドを検索して，映像重畳・同期装置に転送し，映像重畳・同期装置では，映像制御装置（ジョイスティック）によって制御される360度映像上の映像と矛盾のない配置で，利用者の説明機能を指さしならびに操作手順の説明を，VR動作と説明音声で操作説明を生成し，加えて，映像重畳・同期装置では，利用者の手元にある操作装置類を仮想介助者が指差し説明を行うために，360度映像と利用者の間に仮想介助者を配置表示させる必要がある場合には，利用者が装着したシースルー型ヘッドマウントディスプレイ上で説明行動映像を提示させる，ような装置構成によって，従来技術の文書検索型オンラインマニュアルの機能を，音声入力インタフェースと仮想介助者に代行することができるため，高齢者などの情報弱者でも簡単に操作説明を享受できることをを特徴とする没入感型高精細映像提示空間による疑似外出体験提示装置．
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は，利用者の視覚を取り巻くように4kディスプレイ16枚を湾曲型に配置させることにより，高精細かつ臨場感のある映像提示空間を構成し，その空間にたとえばGoogle Earthなどのような360度映像を表示させることで，疑似的な外出体験を提供する装置に関するものである．
【背景技術】
【０００２】
日本の高齢化は各種メディアで大きく取り上げられ，近年は「認知症患者の徘徊」という社会問題が発生している．
【０００３】
また，徘徊による行方不明者の届け出が増加しており，2017年において約18,000人に達している（非特許文献１）．この問題は年々深刻化しており，早急な対処が望まれる．
【０００４】
このような現状に対し，各種センサーを用いた監視型徘徊防止技術ムの普及が進められている（非特許文献２）．
【０００５】
このような技術は，基本的に高齢者を監視対象とし，外出を制限することで事故を未然に防ぐことを目的としたものである．
【０００６】
しかしながら，外出の機会を制限される高齢者にとっては自由行動を制限されることとなり，QoL(生活の質)の低下を招く恐れがある．
【先行技術文献】
【非特許文献】
【０００７】
【非特許文献１】警視庁調査報告2018,  [online] , ［平成30年1月18日検索］, インターネット＜URL：https://mainichi.jp/articles/20180614/k00/00e/040/253000c>
【０００８】
【非特許文献２】株式会社平和テクノシステム ，”徘徊対策ナースコール”, [online] , ［平成30年1月18日検索］, インターネット＜URL：http://heiwa-net.ne.jp/nursecall/face-authentication/?utm_source=haikai&utm_campaign=ad2018_haikai&gclid=EAIaIQobChMI4Y2Znvj13wIVhwsrCh2ssg3UEAAYASAAEgIjl_D_BwE>
【発明の概要】
【発明が解決しようとする課題】
【０００９】
日本の高齢化は各種メディアで大きく取り上げられ，近年は「認知症患者の徘徊」という社会問題が発生している．
【００１０】
また，徘徊による行方不明者の届け出が増加しており，2017年において約18,000人に達している（非特許文献１）．この問題は年々深刻化しており，早急な対処が望まれる．
【課題を解決するための手段】
【００１１】
本発明は，利用者の視覚を取り巻くように複数の高精細ディスプレイを湾曲型に配置させることにより，高精細かつ臨場感のある映像提示空間を構成し，その空間にたとえばGoogle Earthなどのような360度映像を表示させることで，疑似的な外出体験を提供する，
ことを最も主要な特徴とする．
【発明の効果】
【００１２】
本発明によれば，従来の監視型徘徊防技術が利用者である高齢者の自由度を制限することにより安全を確保する技術に対し，疑似外出体験空間により自由度を奪われることなく外出体験ができるため，利用者のQoLを確保しつつ，安全を確保できる，という利点がある．
【図面の簡単な説明】
【００１３】
【図１】図１は，本発明にかかる，没入感型高精細映像提示空間による疑似外出体験提示装置を図式化したものである．
【００１４】
【図２】図2は，本発明装置の１実施例の図であって，本発明にかかる，没入感型高精細映像提示空間による疑似外出体験提示装置を図式化したもので，部分球面型映像提示装置を複数の高精細ディスプレイによって構成した図である．
【００１５】
【図３】図３は，本発明にかかる，没入感型高精細映像提示空間による疑似外出体験提示装置において，VR技術を用いて，利用者に寄り添い高齢者の操作介助を行う仮想人物エージェントを，体験装置内に提示させる仕組みを図式化したものである．
【発明を実施するための形態】
【００１６】
本発明は，利用者の自由度を奪うことなく外出体験させるという目的を， 
利用者の視覚を取り巻くように4kディスプレイ16枚を湾曲型に配置させることにより，高精細かつ臨場感のある映像提示空間を構成し，その空間にたとえばGoogle Earthなどのような360度映像を表示させることで，疑似的な外出体験をさせる，
ことにより実現する．
【００１７】
また，電動車いすに似せた椅子とジョイスティックを用いることで，映像表示空間内の映像を操作し，より没入感を得られるようにすることにより，あたかも実空間を外出しているような体験を提供する．
【実施例１】
【００１８】
図２は，本発明装置の１実施例の図であって，本発明にかかる，没入感型高精細映像提示空間による疑似外出体験提示装置を図式化したもので，部分球面型映像提示装置を複数の高精細ディスプレイによって構成した例である．
【００１９】
本発明にかかる装置の構成例は，(1)車椅子，(2)ジョイスティック，(3)ネットワーク，(4)360度映像検索・取得装置，(5)透視投影変換装置，(6)表示制御装置，(7)部分球面型映像提示装置，(8)映像コンテンツ配信装置
によって構成する．
【００２０】
電動車椅子の操作感覚を模擬するために，(1)車椅子，に装着した(2)ジョイスティックを用いて，(4)360度映像検索・取得装置では，(3)ネットワーク，上に存在する(8)映像コンテンツ配信装置，たとえばGoogle Earthなどの360度映像を対象とし(2)ジョイスティックの操作に応じた映像を検索・取得する．
【００２１】
(5)透視投影変換装置では，取得した街路映像を適切な曲面映像に変換し，(6)表示制御装置に転送する．
【００２２】
(6)表示制御装置では，映像を複数の曲面方向の映像に加工し，(7)部分球面型映像提示装置に転送する．
【００２３】
(7)部分球面型映像提示装置は，(6)表示制御装置から転送された加工映像を曲面上の適切な位置に表示する．
【００２４】
尚，(7)部分球面型映像提示装置を構成する個別表示装置の配置については，利用者の視覚を取り巻くように例えば4kディスプレイ16枚を湾曲型に配置させることにより，映像に対する没入感を提示する．
【００２５】
以上の装置構成により，高精細かつ臨場感のある映像提示空間を構成し，その空間に360度映像（例えばGoogle Earthなど）を表示させることで，疑似的な外出体験をさせる装置を構成することができる．
【実施例２】
【００２６】
図３は，本発明装置の実施例の第二の図であって，本発明にかかる，没入感型高精細映像提示空間による疑似外出体験提示装置に加え，VR人物エージェントによる操作介助の機能を加えた装置の実施例である．
【００２７】
本実施例は（実施例１）の装置構成に加え，(9)音声入力装置，(10)発話内容解析装置，(11)仮想介助者行動決定装置，(12)仮想介助者行動VRパターン・音声ガイドパターン記録装置，(13)動画重畳・画像同期装置，(14)シースルー型ヘッドマウントディスプレイ，を新たな装置構成として追加する．
【００２８】
利用者はマイクなどを通じて(9)音声入力装置に例えば，「○△するにはどうすればよいですか？」のような機械操作に関する質問音声などを入力する．
【００２９】
(10)発話内容解析装置は，音声認識技術ならびに形態素解析技術からなり，「○△」というクルーワードの検出により対象機能を特定する
【００３０】
(11)仮想介助者行動決定装置では，対象機能を操作する部分を抽出しVRによる仮想介助者が指差しを行う装置箇所を特定するとともに，(12)仮想介助者行動VRパターン・音声ガイドパターン記録装置か対象装置個所の操作説明に該当するための，仮想介助者行動VRパターン，ならびに音声ガイドを検索して，(13)映像重畳・同期装置に転送する，
【００３１】
(13)映像重畳・同期装置では，(2)映像制御装置（ジョイスティック）によって制御される360度映像上の映像と矛盾のない配置で，利用者の説明機能を指さしならびに操作手順の説明を，VR動作と説明音声で操作説明を生成する，
【００３２】
加えて，(13)映像重畳・同期装置では，利用者の手元にある操作装置類を仮想介助者が指差し説明を行うために，360度映像と利用者の間に仮想介助者を配置表示させる必要がある場合には，利用者が装着した(14)シースルー型ヘッドマウントディスプレイ上で説明行動映像を提示させる．
【００３３】
以上のような装置構成によって，従来技術の文書検索型オンラインマニュアルの機能を，音声入力インタフェースと仮想介助者に代行することができるため，高齢者などの情報弱者でも簡単に操作説明を享受できる．
【産業上の利用可能性】
【００３４】
徘徊によって行方不明となる高齢者は多い．
【００３５】
本発明による（実施例1）の装置構成によって構成される，疑似外出体験装置によって，あたかも実空間を散策するような感覚を提示することができるため，介護施設などに本装置構成を実現することにより，高齢者のQoLを維持しつつ外出体験を提供することができる．
【００３６】
加えて（実施例２）の装置構成を加えることにより，従来技術の文書検索型オンラインマニュアルの機能を，音声入力インタフェースと仮想介助者に代行することができるため，高齢者などの情報弱者でも簡単に操作説明を享受できる．
【符号の説明】
【００３７】
(1)  車椅子
(2)  ジョイスティック，
(3)  ネットワーク，
(4)  360度映像検索・取得装置，
(5)  透視投影変換装置，
(6)  表示制御装置，
(7)  部分球面型映像提示装置，
(8)  映像コンテンツ配信装置
(9)  音声入力装置，
(10) 発話内容解析装置，
(11) 仮想介助者行動決定装置，
(12) 仮想介助者行動VRパターン・音声ガイドパターン記録装置，
(13) 動画重畳・画像同期装置，
(14) シースルー型ヘッドマウントディスプレイ
【図１】
2020126187.tif 000003
【図２】
2020126187.tif 000004
【図３】
2020126187.tif 000005