(57)【要約】【課題】  指標による位置姿勢計測が安定しない領域を報知する。【解決手段】  現実空間に配置される指標の配置情報とサイズ情報とを取得する第１の取得手段と、前記現実空間を撮像する撮像装置に関する情報を取得する第２の取得手段と、前記指標の配置情報およびサイズ情報と、前記撮像装置に関する情報とに基づいて、前記撮像装置により前記現実空間に配置された指標を安定的に検出することができない不安定領域を導出する不安定領域導出手段と、前記導出手段で導出された領域を出力する出力手段とを備える。【選択図】  図１
2016058043.tif 000002
【特許請求の範囲】
【請求項１】
現実空間に配置される指標の配置情報とサイズ情報とを取得する第一の取得手段と、
前記現実空間を撮像する撮像装置に関する情報を取得する第二の取得手段と、
前記指標の配置情報およびサイズ情報と、前記撮像装置に関する情報とに基づいて、前記撮像装置により前記現実空間に配置された指標を安定的に検出することができない不安定領域を導出する不安定領域導出手段と、
前記不安定領域導出手段で導出された不安定領域を出力する出力手段とを備えることを特徴とする情報処理装置。
【請求項２】
前記不安定領域導出手段は、前記現実空間に配置された指標が不可視である領域を前記不安定領域として導出することを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記指標は、指標ごとに識別するための識別情報を含み、
前記不安定領域導出手段は、前記指標が持つ識別情報を安定的に検出できない領域を前記不安定領域として導出することを特徴とする請求項１または２に記載の情報処理装置。
【請求項４】
現実空間に配置される指標の配置情報とサイズ情報とを取得する第一の取得手段と、
前記現実空間を撮像する撮像装置に関する情報を取得する第二の取得手段と、
前記指標の配置情報およびサイズ情報と、前記撮像装置に関する情報とに基づいて、前記撮像装置により前記現実空間に配置された指標を安定的に検出することができる安定領域を導出する安定領域導出手段と、
前記安定領域導出手段で導出された安定領域を出力する出力手段とを備えることを特徴とする情報処理装置。
【請求項５】
前記安定領域導出手段は、前記現実空間に配置された指標が可視である領域を前記安定領域として導出することを特徴とする請求項４に記載の情報処理装置。
【請求項６】
前記指標は、指標ごとに識別するための識別情報を含み、
前記安定領域導出手段は、前記指標が持つ識別情報を安定的に検出できる領域を前記安定領域として導出することを特徴とする請求項４または５に記載の情報処理装置。
【請求項７】
前記指標の形状は、四角形である請求項１乃至６のいずれか１項に記載の情報処理装置。
【請求項８】
前記撮像手段の情報は、該撮像手段の解像度であることを特徴とする請求項１乃至７のいずれか１項に記載の情報処理装置。
【請求項９】
更に、前記出力手段によって出力された安定領域または不安定領域を表示する表示手段を備えることを特徴とする請求項１乃至８のいずれか１項に記載の情報処理装置。
【請求項１０】
前記撮像装置は、ユーザの頭部または顔面に装着されて用いられることを特徴とする請求項１乃至９のいずれか１項に記載の情報処理装置。
【請求項１１】
現実空間に配置される指標の配置情報とサイズ情報とを取得する第一の取得工程と、
前記現実空間を撮像する撮像装置に関する情報を取得する第二の取得工程と、
前記指標の配置情報およびサイズ情報と、前記撮像装置に関する情報とに基づいて、前記撮像装置により前記現実空間に配置された指標を安定的に検出することができない不安定領域を導出する不安定領域導出工程と、
前記不安定領域を出力する出力工程とを備えることを特徴とする情報処理方法。
【請求項１２】
現実空間に配置される指標の配置情報とサイズ情報とを取得する第一の取得工程と、
前記現実空間を撮像する撮像装置に関する情報を取得する第二の取得工程と、
前記指標の配置情報およびサイズ情報と、前記撮像装置に関する情報とに基づいて、前記撮像装置により前記現実空間に配置された指標を安定的に検出することができる安定領域を導出する安定領域導出工程と、
前記安定領域を出力する出力工程とを備えることを特徴とする情報処理方法。
【請求項１３】
コンピュータを、
現実空間に配置される指標の配置情報とサイズ情報とを取得する第一の取得手段と、
前記現実空間を撮像する撮像装置に関する情報を取得する第二の取得手段と、
前記指標の配置情報およびサイズ情報と、前記撮像装置に関する情報とに基づいて、前記撮像装置により前記現実空間に配置された指標を安定的に検出することができない不安定領域を導出する不安定領域導出手段と、
前記不安定領域導出手段で導出された不安定領域を出力する出力手段として機能させるためのプログラム。
【請求項１４】
コンピュータを、
現実空間に配置される指標の配置情報とサイズ情報とを取得する第一の取得手段と、
前記現実空間を撮像する撮像装置に関する情報を取得する第二の取得手段と、
前記指標の配置情報およびサイズ情報と、前記撮像装置に関する情報とに基づいて、前記撮像装置により前記現実空間に配置された指標を安定的に検出することができる安定領域を導出する安定領域導出手段と、
前記安定領域導出手段で導出された安定領域を出力する出力手段として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置および方法に関し、複合現実感を提示する情報処理装置に関する。
【背景技術】
【０００２】
近年、現実空間と仮想空間との繋ぎ目のない結合を目的とした、複合現実感（ＭＲ：ＭｉｘｅｄＲｅａｌｉｔｙ）に関する研究が盛んに行われている。複合現実感の提示を行う画像表示装置は、例えば次のような構成を有する装置である。即ち、ビデオカメラ等の撮像装置が撮像した現実空間の画像上に、撮像装置の位置及び姿勢に応じて生成した仮想現実空間の画像（例えばコンピュータグラフィックスにより描画された仮想物体や文字情報等）を重畳描画した画像を表示する装置である。このような装置には、例えば、ＨＭＤ（ヘッドマウントディスプレイ、頭部装着型ディスプレイ）を用いることができる（例えば特許文献１）。
【０００３】
画像表示装置は、ユーザの頭部に装着された光学シースルー型ディスプレイに、ユーザの視点の位置及び姿勢に応じて生成した仮想空間の画像を表示する光学シースルー方式でもよい。
【０００４】
一方、撮像装置から取得した現実の画像から撮像装置の位置及び姿勢の計算を行うために指標を利用する手法が開示されている（例えば特許文献１）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００８−１３４１６１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、指標を利用した位置姿勢計測においては、位置に応じて見える指標の大きさ、数が異なるため、ユーザの位置によっては、指標による位置合わせが安定しない領域があった。そして、ＭＲを体験しているユーザにとっては、どの領域が指標による位置姿勢計測が安定しない領域か分からないという課題があった。
【０００７】
そこで、本発明は、指標による位置姿勢計測が安定しない領域を報知することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成する為に、本発明の情報処理装置は、例えば、現実空間に配置される指標の配置情報とサイズ情報とを取得する第１の取得手段と、前記現実空間を撮像する撮像装置に関する情報を取得する第２の取得手段と、前記指標の配置情報およびサイズ情報と、前記撮像装置に関する情報とに基づいて、前記撮像装置により前記現実空間に配置された指標を安定的に検出することができない不安定領域を導出する不安定領域導出手段と、前記導出手段で導出された領域を出力する出力手段とを備えることを特徴とする。
【発明の効果】
【０００９】
本発明によれば、指標による位置姿勢計測が安定しない領域を報知することができる。
【図面の簡単な説明】
【００１０】
【図１】本発明の実施形態に情報処理装置の機能構成例を示すブロック図である。
【図２】ユーザがＭＲを体験している様子を俯瞰した図である。
【図３】頭部装着型表示装置を示す図である。
【図４】本発明の実施形態のＧＵＩを示す図である。
【図５】不安定領域を説明する図である。
【図６】不安定領域を矩形で表現した図である。
【図７】不安定領域を三次元で表現した図である。
【図８】ＭＲ体験中のユーザが観察する画像中に不安定領域を示す図である。
【図９】ＭＲ体験中のユーザが観察する画像中に不安定領域を示す図である。
【図１０】不安定領域を説明する図である。
【図１１】本発明の実施形態に係る情報処理装置の処理フローチャートである。
【図１２】本発明の実施形態に係る情報処理装置のハードウェア構成例を示す図である。
【図１３】指標の例を示す図である。
【発明を実施するための形態】
【００１１】
本発明にかかる実施形態を説明するのに先立ち、各実施形態に示す情報処理装置が実装されるハードウェア構成について、図１２を用いて説明する。
【００１２】
図１２は、本実施形態における情報装置のハードウェア構成図である。同図において、ＣＰＵ１５１０は、バス１５００を介して接続する各デバイスを統括的に制御する。ＣＰＵ１５１０は、読み出し専用メモリ（ＲＯＭ）１５２０に記憶された処理ステップやプログラムを読み出して実行する。オペレーティングシステム（ＯＳ）をはじめ、本実施形態に係る各処理プログラム、デバイスドライバ等はＲＯＭ１５２０に記憶されており、ランダムアクセスメモリ（ＲＡＭ）１５３０に一時記憶され、ＣＰＵ１５１０によって適宜実行される。また、入力Ｉ／Ｆ１５４０は、外部の装置（表示装置や操作装置など）から情報処理装置１で処理可能な形式で入力信号として入力する。また、出力Ｉ／Ｆ１５５０は、外部の装置（表示装置）へ表示装置が処理可能な形式で出力信号として出力する。
【００１３】
これらの各機能部は、ＣＰＵ１５１０が、ＲＯＭ１５２０に格納されたプログラムをＲＡＭ１５３０に展開し、後述する各フローチャートに従った処理を実行することで実現されている。また例えば、ＣＰＵ１５１０を用いたソフトウェア処理の代替としてハードウェアを構成する場合には、ここで説明する各機能部の処理に対応させた演算部や回路を構成すればよい。
【００１４】
（第１の実施形態）
先ず、本実施形態に係る情報処理装置の機能構成例について、図１のブロック図を用いて説明する。図１に示す如く、本実施形態に係る情報処理装置は、本体部１０００と、表示部１０５０と、操作部１０１０と、を有する。
【００１５】
先ず、表示部１０５０について説明する。表示部１０８０は、ＣＲＴや液晶画面などにより構成されており、本体部１０００から出力されたデータに基づいて画像や文字などを表示する。
【００１６】
次に、操作部１０１０について説明する。操作部１０１０は、キーボードやマウスなどにより構成されており、ユーザが操作することで各種の指示を本体部１０００に対して入力することができる。
【００１７】
次に、本体部１０００について説明する。図１に示す如く、本体部１０００は、データ記憶部１０２０、不安定領域生成部１０３０、画像出力部１０７０、を有する。
【００１８】
データ記憶部１０２０には、ユーザが操作部１０１０を操作することでＭＲ体験情報取得部１０６０を通じて取得したＭＲ体験情報が格納されている。ＭＲ体験情報とは、現実空間に配置される指標に基づき安定的に位置姿勢計測が行えない不安定領域を求めるために用いる情報であり、その詳細については後述する。また、本実施形態で用いられる指標の例を図１３に示す。図１３に示された指標は四角形の形状をしており、黒太枠の内部の領域に黒い四角形ｐが三個存在している。それぞれの指標は、この黒い四角形ｐ（識別情報）が配置される位置や数が異なっており、撮像装置により撮像された画像からこの黒い四角形ｐのパターンを検出（識別）することによって、指標それぞれを一意に決定することができる。
【００１９】
不安定領域生成部１０３０は、データ記憶部１０２０に保存されているＭＲ体験情報に基づき撮像機を用いて画像上の特徴から位置合わせを行った際に不安定になる領域を算出する。そして、データ記憶部１０２０に、算出された不安定領域情報の保存を行う。詳細に関しては、図１１のフローチャートにつき後述する。
【００２０】
ＭＲ体験情報取得部１０６０は、ユーザが操作部１０１０を操作することにより、ＭＲ体験情報を取得する。そして、取得したＭＲ体験情報をデータ記憶部１０２０に記憶する。
【００２１】
画像出力部１０７０は、データ記憶部１０２０に保存されている不安定領域情報を表示装部１０８０に出力する。この時、出力を行う画像は、不安定領域だけでなく図４に示すようにＭＲ体験情報を入力するためのインターフェイスを備えてもいても良いし、ＭＲを体験する環境の情報を三次元的に確認できる画像を備えていても良い。
【００２２】
次に、ユーザが複合現実感を体感している様子を図２に示す。図２において、複合現実感を体感するユーザが観察可能な範囲の現実空間を立方体２０００で示しており、該現実空間において壁２０１０には複数の指標が配されている。
【００２３】
ユーザは、複合現実感を体感する為に、自身の頭部に頭部装着型表示装置を装着している。この頭部装着型表示装置には周知の如く、表示部と、現実空間を撮像するカメラと、が備わっており、図２において２０５０はこのカメラを表している。図３に、頭部装着型表示装置の例を示す。
【００２４】
立方体２０００は、頭部装着型表示装置を装着しているユーザが複合現実感を体感する空間を表している。図２の場合、カメラは、壁２０１０においてカメラ２０５０の視界に含まれている領域内の指標群を撮像し、その撮像画像を複合現実感提示装置（本実施形態に係る情報処理装置であっても構わないし、別個の装置であっても構わない）に対して出力する。複合現実感提示装置は、この撮像画像に含まれた指標を用いてカメラ２０５０の位置姿勢を求める。指標群の撮像画像を用いてカメラ２０５０の位置姿勢を求める技術は、例えば上記の特許文献１にも開示されているように周知の技術であるため、この技術に関する説明は省略する。そして複合現実感提示装置は、該求めた位置姿勢に応じた仮想物体２０３０の画像を生成し、この生成した仮想物体２０３０の画像とカメラ２０５０による撮像画像との合成画像を頭部装着型表示装置の表示部に対して送出する。表示部にはこの合成画像が表示されるので、頭部装着型表示装置を自身の頭部に装着したユーザは眼前にこの合成画像を観察することができ、これによりユーザは複合現実感を体感することができる。
【００２５】
ここで、上記の通り、カメラ２０５０は立方体２０００で表す範囲内を移動可能であり、その位置に応じて、壁２０１０に配されている指標の見え方は変化する。視界内に十分な数の指標が写っていないと、撮像画像上に現れる指標の数は十分でなくなり、結果として、位置姿勢の算出精度に大きな影響がある。
【００２６】
そこで本実施形態では、立方体２０００が表す範囲内で位置姿勢の算出精度が不安定になる領域を求めるて出力するための処理を、図１の情報処理装置が行う。本実施形態に係る情報処理装置が、撮像画像内に十分な数の指標が写るような指標の配置パターンを決定するために行う処理について、同処理のフローチャートを示す図１１を用いて説明する。
【００２７】
図１１は、操作部１０１０で入力されたＭＲ体験環境情報を本体部１０００で前記不安定領域を生成し、前記不安定領域を保存するために行う処理のフローチャートである。
【００２８】
（ステップＳ１６００１）
ステップＳ１６００１では、ユーザが操作部１０１０を操作してＭＲ体験情報を入力するので、ＭＲ体験情報取得部１０６０は、このＭＲ体験情報を取得し、データ記憶部１０２０に格納する。上記の通り、ＭＲ体験情報とは、現実空間において複合現実感を体感可能な範囲内の位置から規定個数以上の指標が観察可能な配置パターン候補を複数種類決定するために用いる情報である。そのため、同様の目的を達成できる情報であれば、如何なる情報であっても構わない。ここでは一例として、ＭＲ体験情報は、以下のよう情報を含むものとする。
【００２９】
・複合現実感を体感するユーザが観察可能な範囲の現実空間（図２の場合は、立方体２０００が表す空間）を規定する情報（現実空間情報）
・現実空間に配置されている指標の配置位置およびサイズ（配置情報、サイズ情報）
・頭部装着型表示装置が有するカメラの視界を表す情報（画角を表す情報、カメラの解像度やレンズの歪み情報、焦点距離情報など）
現実空間情報は、例えば、現実空間中に設定されている世界座標系（現実空間中における１点を原点とし、該原点で互いに直交する３軸をそれぞれｘ軸、ｙ軸、ｚ軸とする座標系）における、複合現実感を体感するユーザが移動可能な範囲を定義する情報である。図２の場合、世界座標系における、立方体２０００が表す空間を定義する情報であっても構わないし、世界座標系における、指標を配する箇所を定義する情報であっても構わない。また、現実空間を模した仮想物体を表示部１０８０に表示させ、この仮想物体においてユーザが操作部１０１０を操作して指定した部分を、世界座標系において定義する情報であっても構わない。
【００３０】
また、ＭＲ体験情報には、上記の情報に加えて、仮想物体を配置したい領域を規定する情報、などの情報を含めても構わない。
【００３１】
これらのデータを図４に示すようなＧＵＩを用いて取得してもよい。すなわち、不図示の制御部によって、図４に示すＧＵＩを表示部に表示させ、ユーザが操作部１０１０を奏して各データを入力する。図４の各項目を説明する。
【００３２】
撮像部データ入力部４２１０には、撮像部３０１０の解像度及び画角が入力される。操作部１０１０を通じてユーザによって入力されても良いし、接続されている撮像部３０１０から自動的に情報を取得してきてもよい（第二の取得）。
【００３３】
指標最大サイズ入力部４２２０には、指標の最大サイズが入力される。本情報は、指標配置情報を自動的に生成する際に指標のサイズの上限として利用する。また、指標配置情報はユーザーが指標の大きさ及び指標の識別及び指標の位置を指定しても良い（第一の取得）。
【００３４】
指標配置面入力部４２００には、指標を配置する面が入力される（第一の取得）。
【００３５】
現実空間情報入力部４２４０には、ＭＲを体験する空間の情報が入力される。この時、部屋だけではなくＭＲを体験する領域を指定できるものであればよい。
【００３６】
また、仮想物体２０３０の大きさや位置を指定してもよく、ＭＲ体験環境２０００に関連する情報であればそれ以外の情報を入力してもよい。
そして、ステップＳ１６００２に処理を移す。
【００３７】
（ステップＳ１６００２）
ステップ１６００２では、不安定領域生成部１０３０は、指標２１００を配置する壁２０１０とＭＲユーザ２０２０がＭＲを体験する体験領域２０００内で位置合わせが不安定になる位置合わせ不安定領域７０００を求める（不安定領域導出）。
【００３８】
位置合わせ不安定領域７０００の算出方法の一例として図５を用いて詳細な説明を行う。
【００３９】
図５は、図２を俯瞰視点２２００から見た図であり、位置合わせが不安定な領域５１００を示した図である。図２と同じ部分については同じ番号をつけており、その説明を省略する。
【００４０】
指標２１００に対して位置合わせが安定しない距離４０００をｄとし指標４０３０のサイズをＳとし撮像装置３０１０の解像度をＫとし、その関係を式（１）で定義する。Ｍに関しては、ユーザが指定するか、システムが決定しても良い。例えば、事前にサイズの異なる複数の指標を距離を変えて撮像装置により撮像し、指標を認識できる距離をそれぞれ求める。この作業を解像度の異なる撮像装置でそれぞれ行うと、解像度と距離と指標サイズとの関係が求められる。Ｍは、得られた関係により統計的に求めることが可能である。
【００４１】
指標４０３０から距離ｄの範囲内の領域を位置合わせ安定領域５１１０とし、距離ｄの範囲よりも離れた領域を指標４０３０に対して位置合わせが不安定領域なとする。同様に他の指標２１１０、指標２１２０、指標２１２０、指標２１３０及びそれ以外の指標に対しても同様に位置合わせ不安定領域を算出し、その位置合わせ不安定領域が重なる領域５１００を算出する。言い換えれば、領域５１００は、いずれの指標についても位置合わせ安定領域とならなかった領域である。また、このとき図６の領域６０００のように不安定領域を立方体におさまるように抽象化しても良い。この時、不安定領域６０００を３次元的に表現すると図７の不安定領域６０００になる。
【数１】
2016058043.tif 000003
【００４２】
本実施形態では、以上のようにして位置合わせが不安定となる領域を求めたが、もちｒん他の方法を用いて位置合わせが不安定となる領域を求めてもよい。例えば、現実の物体によって指標が隠されてしまい、見えなくなる領域（不可視領域）を不安定領域としても良い。また、例えば、図１２のような指標を用いる場合、識別情報である黒い四角形ｐのサイズを基準に不安定領域を決定してもよい。なお、本実施形態では、カメラの解像度を用いて、距離ｄを求めたが、これに代えて、レンズの歪み情報、焦点距離情報、画角を表す情報を使って距離ｄを求めても良い。また、これらの情報を組み合わせて距離ｄを求めてもよい。
そして、ステップ１６００４に処理を移す。
【００４３】
（ステップＳ１６００３）
ステップ１６００３では、画像出力部１０４０は、ステップ１６００３で算出した不安定領域６０００の情報を表示部１０５０に出力する。また、ステップＳ１６００３で算出された不安定領域６０００以外の領域を安定領域（安定領域導出）として、該安定領域を表示部１０５０に対して出力してもよい。
【００４４】
表示部１０５０では、画像出力部１０４０から受信した不安定領域の情報を表示する。表示方法の一例として図４を用いて詳細の説明を行う。
【００４５】
図４のＭＲ体験環境情報表示部４１００は、ＭＲ体験環境情報入力部４２００から入力された情報からＭＲ体験環境４１１０を表示する領域である。ＭＲ体験環境４１１０は、指標４１３０情報及び位置合わせ不安定領域６０００及び、位置合わせ不安定領域４１２０及びＭＲ体験環境情報入力部４２００から入力された情報で構成されている。ステップ１６００３で算出された位置合わせ不安定領域６０００を図４のディスプレイ上のアプリケーション４０００のＭＲ体験環境情報可視化部４１００の位置合わせ不安定領域４１２０表示する。この時不安定領域の可視化の方法は、ワイヤーフレームや半透明のボックスや強調表示、色を変更するなど不安定領域が判別できる表現であればよい。そして、ステップ１６００４に処理を移す。
【００４６】
（ステップＳ１６００４）
ステップ１６００４では、ユーザが再びＭＲ体験環境情報を変更するときはステップ１６００２に処理を移し、変更しない時はステップ１６００６に処理を移す。
【００４７】
本実施形態によれば、ユーザが入力したＭＲ体験環境情報に基づき位置合わせが不安定になる位置合わせ不安定領域を可視化することが可能になる。
【００４８】
（変形例）
上記実施形態では、距離ｄより大きい領域を位置合わせ不安定領域としていた。この時図９に示すように指標９０１０の位置合わせ不安定領域を求める際に、ユーザーが指定する任意の角度である角度９０２０を考慮してもよい。その場合、指標９０１０に対する位置合わせ安定領域を領域９０３０とし、それ以外の領域を位置合わせ不安定領域とする。
【００４９】
また、指標９０４０に対する位置合わせ安定領域を指標９０４０からの距離９０５０より大きく距離９０６０より小さい距離の領域９０７０を位置合わせ安定領域とし、それ以外の領域を位置合わせ不安定領域としても良い。
【００５０】
（第２の実施形態）
上記実施形態１では、位置合わせ不安定領域を表示する表示部１０５０に表示する実施形態であった。これに対して、本実施形態ではデータ記憶部１０２０に保存した位置合わせ不安定領域情報を用いて、ＭＲ体験中にユーザが観察する表示画面に、位置合わせ不安定領域を表示する実施形態について説明する。
【００５１】
第１の実施形態と相違する点として、画像出力部１０４０が出力する先が、表示部１０５０ではなく、ユーザが装着する頭部装着型表示装置である点である。
【００５２】
図７は、図２と図６と同じ部分については同じ番号を付けており、その説明を省略する。図７は、本実施形態でＭＲ体験環境情報の入力を行うために想定するＭＲ体験環境の例を示した図であり、位置合わせ不安定領域６０００を三次元的に示した図である。
【００５３】
図８は、図７と同じ部分については同じ番号をつけており、その説明を省略する。図８は、ユーザ２０２０が頭部装着型表示装置２０５０の表示部３０２０から見える映像をし、この映像内に、不安定領域６０００を挿入している。すなわち、ユーザが複合現実感を体感する為に、自身の頭部に装着している頭部装着型表示装置が備える表示部に、不安定領域を出力する。これにより、ユーザはＭＲを体験中に、どの領域が指標による位置姿勢計測が不安定になるのかを把握することが可能になる。また、不安定領域から安定領域へとユーザを導くために、図９のように、ガイド矢印６１００を表示させてユーザの移動を促しても良い。また、ユーザの観察する領域内に不安定領域がない場合には、不安定領域の方向を示す情報（矢印など）を画像に重畳しても良い。また、画像出力部１０５０から直接、頭部装着型表示装置に不安定領域を出力せず、一度、表示部１０５０を介してから送出してもよい。
【００５４】
なお、表示装置は、頭部でなくユーザの顔面に装着する形式の表示装置でもよい。
【００５５】
（その他の実施形態）
また、本発明は、以下の処理を実行することによっても実現される。
【００５６】
即ち、上述した各実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
【００５７】
このプログラム及び当該プログラムを記憶したコンピュータ読み取り可能な記憶媒体は、本発明に含まれる。
【図１】
2016058043.tif 000004
【図２】
2016058043.tif 000005
【図３】
2016058043.tif 000006
【図４】
2016058043.tif 000007
【図５】
2016058043.tif 000008
【図６】
2016058043.tif 000009
【図７】
2016058043.tif 000010
【図８】
2016058043.tif 000011
【図９】
2016058043.tif 000012
【図１０】
2016058043.tif 000013
【図１１】
2016058043.tif 000014
【図１２】
2016058043.tif 000015
【図１３】
2016058043.tif 000016