(57)【要約】【課題】ＶＲコンテンツ毎に内容に応じた異なる操作方法を設定することができ、且つナビゲータの負担を軽減することができるユーザインターフェースを提供する。【解決手段】携帯型端末は、ＶＲコンテンツ再生装置からＶＲコンテンツに関連付けらインターフェース構成部品情報を受信し、受信したインターフェース構成部品情報を用いて、ユーザインターフェースを構成し、構成したユーザインターフェースを携帯型端末のディスプレイに表示する。携帯型端末は、ディスプレイに表示されたユーザインターフェースに対する操作を検出し、検出した操作に関連付けられたコマンドをＶＲコンテンツ再生装置へ送信し、送信したコマンドに応答してＶＲコンテンツ再生装置により再生されるＶＲコンテンツの位置情報を受信し、受信した位置情報に関連付けられたインターフェース構成部品情報を用いて、ユーザインターフェースを更新する。【選択図】図２
2019114121.tif 000002
【特許請求の範囲】
【請求項１】
ＶＲコンテンツ再生装置によるＶＲコンテンツの再生を制御するためのユーザインターフェースを携帯型端末が提供する方法であって、前記携帯型端末が、
前記ＶＲコンテンツ再生装置から前記ＶＲコンテンツに関連付けらインターフェース構成部品情報を受信することと、
前記受信したインターフェース構成部品情報を用いて、ユーザインターフェースを構成することと、
前記構成したユーザインターフェースを前記携帯型端末のディスプレイに表示することと
を含む、方法。
【請求項２】
前記携帯型端末が、
前記ディスプレイに表示されたユーザインターフェースに対する操作を検出することと、
前記検出した操作に関連付けられたコマンドを前記ＶＲコンテンツ再生装置へ送信することと
をさらに含む、請求項１に記載の方法。
【請求項３】
前記携帯型端末が、
前記送信したコマンドに応答して前記ＶＲコンテンツ再生装置により再生される前記ＶＲコンテンツに対応するよう、前記受信したインターフェース構成部品情報を用いて、前記ユーザインターフェースを更新すること
をさらに含む、請求項２に記載の方法。
【請求項４】
前記ユーザインターフェースを更新することは、前記携帯型端末が、
前記送信したコマンドに応答して前記ＶＲコンテンツ再生装置により再生される前記ＶＲコンテンツの位置情報を、前記ＶＲコンテンツ再生装置から受信することと、
前記受信したインターフェース構成部品情報のうちの前記受信した位置情報に関連付けられたインターフェース構成部品情報を用いて、前記ユーザインターフェースを更新することと、
前記更新されたユーザインターフェースを前記携帯型端末のディスプレイに表示することと
をさらに含む、請求項３に記載の方法。
【請求項５】
前記ユーザインターフェースを更新することは、前記携帯型端末が、
前記受信したインターフェース構成部品情報のうちの前記検出した操作に関連付けられたインターフェース構成部品情報を用いて、前記ユーザインターフェースを更新することと、
前記更新されたユーザインターフェースを前記携帯型端末のディスプレイに表示することと
をさらに含む、請求項３に記載の方法。
【請求項６】
ＶＲコンテンツ再生装置によるＶＲコンテンツの再生を制御するためのユーザインターフェースを提供する携帯型端末であって、プロセッサと、メモリと、ディスプレイを備え、前記メモリは、前記プロセッサに、
前記ＶＲコンテンツ再生装置から前記ＶＲコンテンツに関連付けらインターフェース構成部品情報を受信することと、
前記受信したインターフェース構成部品情報を用いて、ユーザインターフェースを構成することと、
前記構成したユーザインターフェースを前記携帯型端末のディスプレイに表示することと
を実行させるプログラムを記憶した、携帯型端末。
【請求項７】
ＶＲコンテンツ再生装置によるＶＲコンテンツの再生を制御するためのユーザインターフェースを携帯型端末に提供させるプログラムであって、前記プログラムは、前記携帯型端末のプロセッサに、
前記ＶＲコンテンツ再生装置から前記ＶＲコンテンツに関連付けらインターフェース構成部品情報を受信することと、
前記受信したインターフェース構成部品情報を用いて、ユーザインターフェースを構成することと、
前記構成したユーザインターフェースを前記携帯型端末のディスプレイに表示することと
を実行させる、プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ＶＲコンテンツの再生を制御するためユーザインターフェースに関し、より詳細には、ＶＲコンテンツ再生装置によるＶＲコンテンツの再生を制御するためのユーザインターフェースを携帯型端末が提供するための方法、携帯型端末、及びプログラムに関する。
【背景技術】
【０００２】
従来、情報処理技術の発展は、種々の情報のデジタル化を可能とし、情報の可用性を拡大している。特に、印刷技術分野で発展した高精彩デジタル化技術やカラーマネージメント技術は、貴重な文化財のデジタルアーカイブに貢献している。例えば、高精細撮影データや、三次元形状計測データ・色彩計測データに基づいて、文化財を再現することで、鑑賞・体験することが可能になっている。また、バーチャルリアリティー（ＶＲ）技術は、文化財が高精細にデジタル表現された仮想空間内で、視点を移動しながら文化財を鑑賞・体験することを可能にしている。特に、大型のスクリーンに高精細映像を写すことができるシアターは、３Ｄ仮想空間の臨場感や没入感を得やすく、バーチャル体験を通じて文化財の魅力を伝えやすいことが知られている。
【０００３】
図１は、大型のスクリーンに高精細映像を写すことができるシアターの構成を例示する図である。図１に示すように、シアターは、入出力装置１２０を有するＶＲコンテンツ再生装置１００と、スクリーン１３０とを備えている。図１には、ナビゲータ１４０も示されている。
【０００４】
ナビゲータ１４０は、３Ｄ仮想空間における視点を移動して、鑑賞者１６０にスクリーンに映し出される映像について説明する解説員である。ナビゲータ１４０は、上演時間を考慮して、コンテンツの内の観所、鑑賞順序、解説内容などのシナリオを予め決定して、コンテンツの上演を行う。
【０００５】
入出力装置１２０は、ナビゲータ１４０がＶＲコンテンツ再生装置１００と対話する際に使用する、ディスプレイや、キーボード、ポインティングデバイスなどの装置である。
【０００６】
ＶＲコンテンツ再生装置１００は、文化財などのデジタル表現を描画するコンピュータである。なお、本明細書中、文化財などのデジタル表現を描画することを、コンテンツを再生すると言い、デジタル表現の描画に用いるデータを含むファイルをＶＲ用ファイルと言う。
【０００７】
図１（ａ）に示すように、ナビゲータ１４０は、鑑賞者がシアターに入場する前に、入出力装置１２０を使用して、コンテンツ再生アプリケーションを起動し、再生するコンテンツを選択する。これにより、ＶＲコンテンツ再生装置１００は、選択されたコンテンツのＶＲ再生ファイルを用いて、コンテンツ再生アプリケーションを初期化する（選択されたコンテンツのＶＲ再生ファイルをロードして、コンテンツ再生アプリケーションが、当該選択されたコンテンツを再生できるようにする。）
また、図１（ｂ）に示すように、ナビゲータ１４０は、鑑賞者がシアターに入場した後に、コントローラ１５０を使用して、予め決定したシナリオに沿ってコンテンツの上演を進行するように、ＶＲコンテンツ再生装置１００によるコンテンツ再生を制御する。例えば、ナビゲータ１４０は、コントローラ１５０を使用して、コンテンツの再生を開始し、停止し、スクリーンに映し出される映像について説明し、視点を移動することができる。また、ナビゲータ１４０は、コントローラ１５０を使用して、コンテンツの再生位置を変更すること（コンテンツ内の観所がチャプタ化されている場合にはチャプタを変更すること、又は視点の経路と経路上の通過ポイントが予め設定されている場合には通過ポイント間を移動すること）ができる。さらに、ナビゲータ１４０は、コントローラ１５０を使用して、拡張情報（スクリーンに映し出される映像に関連した別の映像など）を表示させることができる。
【発明の概要】
【発明が解決しようとする課題】
【０００８】
従来、コントローラ１５０として、図１（ｂ）に示すように、ビデオゲームをプレイするときに使用されるような、複数のボタン、及び方向キーや方向レバーなどの物理スイッチを備えた入力装置が用いられている。物理スイッチの各々に又は複数の物理スイッチの組み合わせの各々に、コンテンツ再生を制御するためのコマンドが設定されている（割り当てられている）。
【０００９】
したがって、ナビゲータ１４０は、予め決定したシナリオに沿ってＶＲコンテンツ再生装置１００によるコンテンツ再生を円滑に制御するために、シナリオと共に所望のコマンドが設定された物理スイッチ又は物理スイッチの組み合わせを覚えていなければならない。このことは、ナビゲータにとって大きな負担となる。
【００１０】
さらに、このナビゲータの負担は、ＶＲコンテンツの数に比例して増大する。例えば、ＶＲコンテンツ毎に内容に応じた異なる操作方法（再生位置の選択・変更方法、視点の移動方法、拡張情報の選択・表示方法）がある場合には、対応するコマンドが設定される物理スイッチ又は物理スイッチの組み合わせもまたＶＲコンテンツ毎に異なる。
【００１１】
本発明は、このような問題に鑑みてなされたもので、その目的とするところは、ＶＲコンテンツ毎に内容に応じた異なる操作方法を設定することができ、且つナビゲータの負担を軽減することができるユーザインターフェースを提供することにある。
【課題を解決するための手段】
【００１２】
このような目的を達成するための本願発明の一態様は、ＶＲコンテンツ再生装置によるＶＲコンテンツの再生を制御するためのユーザインターフェースを携帯型端末が提供する方法である。この方法は、携帯型端末が、ＶＲコンテンツ再生装置からＶＲコンテンツに関連付けらインターフェース構成部品情報を受信することと、受信したインターフェース構成部品情報を用いて、ユーザインターフェースを構成することと、構成したユーザインターフェースを携帯型端末のディスプレイに表示することと、を含む。
【００１３】
本願発明の一態様は、ＶＲコンテンツ再生装置によるＶＲコンテンツの再生を制御するためのユーザインターフェースを提供する携帯型端末である。
【００１４】
本願発明の一態様は、ＶＲコンテンツ再生装置によるＶＲコンテンツの再生を制御するためのユーザインターフェースを携帯型端末に提供させるためのプログラムである。
【発明の効果】
【００１５】
以上説明したように、本発明によれば、ＶＲコンテンツ毎に内容に応じた異なる操作方法を設定することができ、且つナビゲータの負担を軽減することができるユーザインターフェースを提供することが可能となる。
【図面の簡単な説明】
【００１６】
【図１】大型のスクリーンに高精細映像を写すことができるシアターの構成を例示する図であり、（ａ）は鑑賞者がシアターに入場する前の状態を説明するための図であり、（ｂ）は鑑賞者がシアターに入場した後の状態を説明するための図である。
【図２】本発明の概要を説明するための図である。
【図３】本発明の一実施形態にかかるＶＲコンテンツ再生装置のハードウェアの概略構成図である。
【図４】本発明の一実施形態にかかる携帯型端末のハードウェアの概略構成図である。
【図５】本発明の一実施形態にかかるユーザインターフェースの例を示す図である。
【図６】本発明の一実施形態にかかるＶＲコンテンツ再生装置及び携帯型端末における処理フローを示す図である。
【図７】本発明の一実施形態にかかるＶＲコンテンツ再生装置及び携帯型端末における処理フローを示す図であり、（ａ）及び（ｂ）はそれぞれスクリーン上の映像に対応するようにユーザインターフェースを更新する処理のフローを示す図である。
【発明を実施するための形態】
【００１７】
以下、図面を参照しながら本発明の実施形態について詳細に説明する。以下の説明は一例であり、本願発明はこれに限定されるものではなく、一般性を失うことなく他の例でも実施できる。
【００１８】
図２は、本発明の概要を説明するための図である。図２は、大型のスクリーンに高精細映像を写すことができるシアターの構成を例示する。図１と同様に、シアターは、ＶＲコンテンツ再生装置２００と、スクリーン１３０とを備えている。ＶＲコンテンツ再生装置２００は、図１を参照して説明した入出力装置１２０と同様の入出力装置を有している。図２には、ナビゲータ１４０、及びＶＲコンテンツ再生装置２００によるコンテンツ再生を制御するためにナビゲータ１４０が使用する携帯型端末２５０も示されている。
【００１９】
ＶＲコンテンツ再生装置２００は、複数のコンテンツデータを記憶しており、任意のコンテンツを再生することができる。各コンテンツデータは、コンテンツ再生アプリケーションにロードされるＶＲ再生ファイル（ＶＲ用ファイル）と、携帯型端末２５０へ送信される各種ファイル（タブレット表示用の画像ファイル、レイアウトファイル、及びテキストファイルなど）とを含む。本明細書において、携帯型端末２５０へ送信される各種ファイルをインターフェース構成部品ファイルという。
【００２０】
携帯型端末２５０は、ＶＲコンテンツ再生装置２００から送信されたインターフェース構成部品ファイルを用いて、コンテンツ再生を制御するためのユーザインターフェースを構成して表示することができる。インターフェース構成部品ファイルに含まれる画像ファイル、レイアウトファイル、及びテキストファイルなどの各種ファイルは、ＶＲコンテンツの内容に応じて異なる。したがって、携帯型端末２５０に表示されるユーザインターフェースのレイアウトはコンテンツ毎に異なり、インターフェースの構成要素もコンテンツ毎に異なる（例えば、表示されるボタン（ソフトウェアスイッチ）の数、大きさや色などの形状、レイアウトなどがコンテンツ毎に異なる）。さらに、携帯型端末２５０に表示されるユーザインターフェースは、コンテンツ毎に異なる画像やテキストなどの任意の視覚情報を表示する。視覚情報は、操作、シナリオの進行及び解説などにおいて、ナビゲータを支援する情報となり得る。本実施形態のユーザインターフェースによれば、ＶＲコンテンツ毎に内容に応じた異なる操作方法を設定することが可能で、且つナビゲータの負担を軽減することが可能となる。
【００２１】
図３は、本発明の一実施形態にかかるＶＲコンテンツ再生装置２００のハードウェアの概略構成図である。ＶＲコンテンツ再生装置２００は、文化財などのデジタル表現を描画するコンピュータである。ＶＲコンテンツ再生装置２００は、制御部３０１と、バス３１０を介して制御部３０１と結合された主記憶部３０２、補助記憶部３０３、通信部３０４、及び入出力部３０５とを備える。また、ＶＲコンテンツ再生装置２００は、コンテンツデータ３０６を記録したデータベースを備える、あるいはコンテンツデータ３０６を記録した外部のデータベースにアクセスすることができる。
【００２２】
制御部３０１は、例えば、ＣＰＵ、ＧＰＵなどのプロセッサである。プロセッサは、汎用プロセッサでも、専用プロセッサでもよい。プロセッサは、例えば、補助記憶部３０３に格納されたコンテンツ再生アプリケーションプログラム及びコンテンツデータ３０６を主記憶部３０２にロードしてコンテンツを再生し、映像信号を入出力部３０５（例えば、スクリーン１３０に映像を映し出すプロジェクタ）に提供することができる。プロセッサは、例えば、補助記憶部３０３に格納されたコンテンツ再生アプリケーションプログラムを実行し、図６、７を参照して後述する処理を行う。
【００２３】
主記憶部３０２は、例えば、ＲＯＭ、ＲＡＭなどの記憶装置である。主記憶部３０２は、オペレーティングシステムや各種アプリケーションプログラムがロードされる領域を提供する。
【００２４】
補助記憶部３０３は、ハードディスクＨＤＤ装置、磁気ディスク装置、光磁気ディスク装置、光ディクス装置、フラッシュメモリ（半導体メモリ）装置である。補助記憶部３０３は、オペレーティングシステムや各種アプリケーションプログラム（コンテンツ再生アプリケーションプログラムを含む）を格納する領域を提供する。図３では、コンテンツデータ３０６を記録したデータベースを補助記憶部３０３と別に示しているが、コンテンツデータ３０６は、補助記憶部３０３内に、各種アプリケーションプログラムなどと共に格納されてもよい。
【００２５】
通信部３０４は、例えば、有線通信や無線通信のための通信インターフェース装置である。通信部３０４は、ＶＲコンテンツ再生装置２００と携帯型端末２５０との間の通信に供することができるものであればどのようなものであってもよい。コンテンツ再生装置２００と携帯型端末２５０とは、有線通信により接続されてもよく、無線通信により接続されてもよく、有線通信と無線通信とを組み合わせて接続されてもよい。ナビゲータ１４０の可動性及び操作性の観点からは、携帯型端末２５０側の通信は無線通信インターフェース装置を介した無線通信であることが好ましい。
【００２６】
入出力部３０５は、例えば、ナビゲータ１４０が操作するために使用するディスプレイ、キーボード、ポインティングデバイスである。また、入出力部３０５は、スクリーン１３０に映像を映し出すプロジェクタや音響機器を含み、必要に応じてプリンタなどを含んでもよい。
【００２７】
コンテンツデータ３０６は、複数のコンテンツデータを含む。各コンテンツデータは、コンテンツ再生アプリケーションにロードされるＶＲ再生ファイル（ＶＲ用ファイル）と、携帯型端末２５０へ送信されるインターフェース構成部品ファイルとを含む。インターフェース構成部品ファイルは、携帯型端末２５０が表示するインターフェースを構成するときに使用するファイルであり、各種ファイル（タブレット表示用の画像ファイル、レイアウトファイル、及びテキストファイルなど）を含む。
【００２８】
レイアウトファイルは、仮想空間内の視点の位置（及び方向（向き））と関連付けられている。すなわち、各レイアウトファイルは、使用条件として、仮想空間内の視点の位置の範囲（及び方向（向き）の範囲）の情報を含んでいる。これにより、仮想空間内の視点の位置（及び向き）が変更されると、携帯型端末２５０は、変更された視点の位置（及び向き）が使用条件を満たすレイアウトファイルを決定し、決定したレイアウトファイルを用いてインターフェースを更新（再構成）することができる。また、レイアウトファイルは、ボタン（ソフトウェアスイッチ）の配置や形状、画像やテキストの配置や大きさを指定する。また、レイアウトファイルは、ボタン（ソフトウェアスイッチ）が押下（操作）されたときにＶＲコンテンツ再生装置２００に向けて送信するコマンドを関連付ける（指示する）、あるいはボタン（ソフトウェアスイッチ）が押下（操作）された後に使用するレイアウトファイルを関連付ける（指示する）。
【００２９】
図４は、本発明の一実施形態にかかる携帯型端末２５０のハードウェアの概略構成図である。携帯型端末２５０は、ＶＲコンテンツ再生装置２００によるコンテンツ再生を制御するためインターフェースをナビゲータに提供するコンピュータである。携帯型端末２５０は、例えば、タブレット端末である。携帯型端末２５０は、制御部４０１と、バス４１０を介して制御部４０１と結合された主記憶部４０２、補助記憶部４０３、通信部４０４、及び入出力部４０５とを備える。
【００３０】
制御部４０１は、ＣＰＵ、ＧＰＵなどのプロセッサである。プロセッサは、汎用プロセッサでも、専用プロセッサでもよい。プロセッサは、例えば、補助記憶部４０３に格納されたＧＵＩアプリケーション及びＶＲコンテンツ再生装置２００から受信したインターフェース構成部品ファイルを主記憶部４０２にロードしてインターフェースを構成し、入出力部４０５（ディスプレイ）に表示することができる。プロセッサは、例えば、補助記憶部４０３に格納されたＧＵＩアプリケーション及びＶＲコンテンツ再生装置２００から受信したインターフェース構成部品ファイルを使用して、図６、７を参照して後述する処理を行う。
【００３１】
主記憶部４０２は、例えば、ＲＯＭ、ＲＡＭなどの記憶装置である。主記憶部４０２は、オペレーティングシステムや各種アプリケーションプログラムがロードされる領域を提供する。
【００３２】
補助記憶部４０３は、フラッシュメモリ（半導体メモリ）装置である。主記憶部４０２は、オペレーティングシステムや各種アプリケーションプログラム（コンテンツ再生アプリケーションプログラムを含む）を格納する領域を提供する。
【００３３】
通信部４０４は、例えば、有線通信や無線通信のための通信インターフェース装置である。通信部４０４は、帯型端末２５０とＶＲコンテンツ再生装置２００との間の通信に供することができるものであればどのようなものであってもよい。ナビゲータ１４０の可動性及び操作性の観点からは、携帯型端末２５０側は無線通信インターフェース装置（例えば、ＷｉＦｉ、Ｂｌｕｅｔｏｏｔｈ）であることが望ましい。
【００３４】
入出力部４０５は、例えば、タッチパネル及びディスプレイである。入出力部４０５は、制御部４０１が構成したインターフェースをナビゲータ１４０に提示し、ナビゲータ１４０からの指示を受け取る。
【００３５】
図５は、本発明の一実施形態にかかるユーザインターフェースの例を示す図である。  
図５（ａ）のインターフェースは、ＶＲコンテンツ再生装置２００から受信したテキストファイル（インターフェース構成部品ファイル）内のテキストを含めて構成されたインターフェースである。本発明の一実施形態にかかるユーザインターフェースは、コンテンツの進行に合わせた視覚情報（例えば、解説文）をナビゲータに提示することができる。このようなテキストは、ナビゲータ参照用情報（支援情報）として提供される。
【００３６】
さらに、図５（ａ）のインターフェースは、ナビゲータが視点を移動したりコンテンツの進行をコントロールしたりするための操作用のボタン（ソフトウェアスイッチ）も含んでいる。図５（ａ）の例では、従来の方向キーのほか、操作内容がテキスト表示されたボタンが含まれている。ナビゲータは、操作内容を確認してボタン操作を行うことができる。
【００３７】
図５（ｂ）は、ＶＲコンテンツ再生装置２００から受信した画像ファイル（インターフェース構成部品ファイル）を含めて構成されたインターフェースである。複数の観所を含む仮想空間の地図を視覚情報として、ナビゲータに提供することができる。観所が示された各領域をボタン（視点を当該観所に移動させるソフトウェアスイッチ）とすることもできる。このように、この画像は、ナビゲータ参照用情報（支援情報）として提供してもよく、ナビゲータ操作用として提供してもよい。図５（ｂ）のインターフェースは、ナビゲータが視点を移動したりコンテンツの進行をコントロールしたりするための操作用のボタン（ソフトウェアスイッチ）も含んでいる。図５（ａ）のインターフェースと比べると、図５（ｂ）のインターフェースの操作用のボタンは、サイズが小さく、数が少ない。従来の方向キーによる操作を好むナビゲータは、図５（ｂ）のインターフェースの下部にある操作用のボタン（ソフトウェアスイッチ）を選択的に使用することができる。
【００３８】
図５（ｃ）は、拡張情報（スクリーンに映し出される映像に関連した別の映像など）を選択可能なボタン（ソフトウェアスイッチ）を配置したインターフェースである。ナビゲータは、各ボタンに表示された画像やテキストを確認してボタン操作を行うことができる。
【００３９】
図６は、本発明の一実施形態にかかるＶＲコンテンツ再生装置２００及び携帯型端末２５０における処理フローを示す図である。
【００４０】
＜ＶＲコンテンツ再生装置の処理＞
ステップＳ６５１において、ＶＲコンテンツ再生装置２００（制御部３０１）は、コンテンツ再生アプリケーションを起動する。より詳細には、ＶＲコンテンツ再生装置２００（制御部３０１）は、補助記憶部３０３に格納されたコンテンツ再生アプリケーションプログラムを主記憶部３０２にロードすることで、コンテンツ再生アプリケーションを起動する。
【００４１】
ステップＳ６５３において、ＶＲコンテンツ再生装置２００（制御部３０１）は、ナビゲータによるコンテンツ選択を受信する。より詳細には、ＶＲコンテンツ再生装置２００（制御部３０１）は、データベースに格納された複数のコンテンツデータの一覧をナビゲータに提示して、入出力部３０５を通じてナビゲータによるコンテンツの選択を受信する。
【００４２】
ステップＳ６５５において、ＶＲコンテンツ再生装置２００（制御部３０１）は、携帯型端末２５０へ向けて、選択されたコンテンツに関連付けられたインターフェース構成部品ファイルを送信する。
【００４３】
ステップＳ６５７において、ＶＲコンテンツ再生装置２００（制御部３０１）は、選択されたコンテンツに関連付けられたＶＲ再生ファイルを用いて、コンテンツ再生アプリケーションを初期化する。より詳細には、ＶＲコンテンツ再生装置２００（制御部３０１）は、選択されたコンテンツのＶＲ再生ファイルをロードして、コンテンツ再生アプリケーションが、当該選択されたコンテンツを再生できるようにする。
【００４４】
ＶＲコンテンツ再生装置２００（制御部３０１）は、ＶＲコンテンツ再生アプリケーションを実行中、入出力部３０５又は携帯型端末２５０からのコマンドを待ち受ける。コンテンツを上演中は、ナビゲータが使用する携帯型端末２５０からのコマンドを待ち受ける。通信部３０４を介して携帯型端末２５０からコマンドを受信すると（ステップＳ６５９のＹＥＳ）、ステップＳ６６１において、ＶＲコンテンツ再生装置２００（制御部３０１）は、スクリーン上の映像を制御する。より詳細には、コマンドに応答して、ＶＲコンテンツ再生装置２００（制御部３０１）は、コマンドを実行して、コンテンツを再生し、再生を停止し、視点を移動し、再生位置を変更し（チャプタを変更し）、又は、拡張情報を表示する。
【００４５】
＜携帯型端末の処理＞
ステップＳ６０１において、携帯型端末２５０（制御部４０１）は、グラフィカルユーザインターフェース（ＧＵＩ）アプリケーションを起動する。より詳細には、携帯型端末２５０（制御部４０１）は、補助記憶部４０３に格納されたＧＵＩアプリケーションプログラムを主記憶部４０２にロードすることで、ＧＵＩアプリケーションを起動する。
【００４６】
ステップＳ６０３において、携帯型端末２５０（制御部４０１）は、ＶＲコンテンツ再生装置２００（制御部３０１）により送信された、選択されたコンテンツに関連付けられたインターフェース構成部品ファイルを受信する。
【００４７】
ステップＳ６０５において、携帯型端末２５０（制御部４０１）は、受信したインターフェース構成部品ファイルを用いて、ＧＵＩアプリケーションを初期化する。より詳細には、携帯型端末２５０（制御部４０１）は、受信したインターフェース構成部品ファイルを主記憶部４０２にロードしてインターフェースを構成し、入出力部４０５（ディスプレイ）に表示する。
【００４８】
携帯型端末２５０（制御部４０１）は、ＧＵＩアプリケーション実行中、ナビゲータによるＧＵＩの操作を検出する。携帯型端末２５０（入出力部４０５）がＧＵＩの操作を検出すると（ステップＳ６０７のＹＥＳ）、ステップＳ６０９において、携帯型端末２５０（制御部４０１）は、検出した操作（押下されたボタン（ソフトウェアスイッチ））に関連付けられたコマンドを、ＶＲコンテンツ再生装置２００へ送信する。
【００４９】
ステップＳ６１１において、携帯型端末２５０（制御部４０１）は、スクリーン上の映像に対応するファイルを用いて、ＧＵＩを更新する。
【００５０】
図７（ａ）及び（ｂ）はそれぞれスクリーン上の映像に対応するようにユーザインターフェースを更新する処理のフローを示す図である。
【００５１】
図７（ａ）を参照すると、ステップＳ７５１において、ＶＲコンテンツ再生装置２００（制御部３０１）は、ＶＲコンテンツ再生中に、コンテンツの再生位置を決定する。コンテンツの再生位置は、例えば、再生中のフレームの位置（コンテンツが動画の場合）や、ＶＲ空間内の視点の座標、あるいはＶＲ空間内の視点の座標及び向き（方向）とすることができる。
【００５２】
次いで、ステップＳ７５３において、ＶＲコンテンツ再生装置２００（制御部３０１）は、携帯型端末２５０へ向けて、決定された再生位置を送信する。
【００５３】
ステップＳ７０１において、携帯型端末２５０（制御部４０１）は、ＶＲコンテンツ再生装置２００から送信された再生位置（現在再生中のコンテンツの再生位置）を受信する。
【００５４】
次いで、ステップＳ７０１において、携帯型端末２５０（制御部４０１）は、受信した再生位置に関連付けられたユーザインターフェース構成部品ファイルを用いて、ＧＵＩを更新する。より詳細には、携帯型端末２５０（制御部４０１）は、受信した再生位置が使用条件を満たすレイアウトファイルを決定し、当該レイアウトファイルに従って、ＧＵＩを更新する。
【００５５】
このように、携帯型端末２５０は、ＶＲコンテンツ再生装置２００から再生位置を受信するたびに、ＧＵＩを更新することで、スクリーン上の映像に対応するようにユーザインターフェースを更新するができる。
【００５６】
図７（ｂ）は、携帯型端末２５０がスクリーン上の映像に対応するようにユーザインターフェースを更新する別の処理フローを示す。
【００５７】
携帯型端末２５０（入出力部４０５）がＧＵＩの操作を検出すると（ステップＳ６０７のＹＥＳ）、ステップＳ７０５において、携帯型端末２５０（制御部４０１）は、検出した操作に関連付けられたユーザインターフェース構成部品ファイル（押下されたボタン（ソフトウェアスイッチ）に関連付けられたレイアウトファイル）を用いて、ＧＵＩを更新する。
【００５８】
携帯型端末２５０は、ＧＵＩ操作の検出に応答して、ＧＵＩを更新することで、スクリーン上の映像に対応するようにユーザインターフェースを更新するができる。携帯型端末２５０は、図７（ａ）及び（ｂ）の一方又は双方を実行して、ユーザインターフェースを更新するように構成され得る。
【００５９】
以上説明したように、本実施形態によれば、ＶＲコンテンツ毎に内容に応じた異なる操作方法を設定することができ、且つナビゲータの負担を軽減することができるユーザインターフェースを提供することが可能となる。
【符号の説明】
【００６０】
１００、２００  ＶＲコンテンツ再生装置
１２０  入出力装置
１３０  スクリーン
１４０  ナビゲータ
１５０  コントローラ
１６０  鑑賞者
２５０  携帯型端末
３０１  制御部
３０２  主記憶部
３０３  補助記憶部
３０４  通信部
３０５  入出力部
３０６  コンテンツデータ
３１０  バス
４０１  制御部
４０２  主記憶部
４０３  補助記憶部
４０４  通信部
４０５  入出力部
４１０  バス
【図１】
2019114121.tif 000003
【図２】
2019114121.tif 000004
【図３】
2019114121.tif 000005
【図４】
2019114121.tif 000006
【図５】
2019114121.tif 000007
【図６】
2019114121.tif 000008
【図７】
2019114121.tif 000009